Независимый рейтинг поставил MiMo-V2.6-Pro от Xiaomi первой среди открытых моделей
В индексе Artificial Analysis новая модель Xiaomi MiMo-V2.6-Pro набрала 46 баллов. Это лучший результат среди открытых моделей. Задача из индекса обходится ей в среднем в 0,13 доллара.
MiMo-V2.6-Pro — новая модель Xiaomi с открытыми весами. В индексе интеллекта Artificial Analysis она набрала 46 баллов и стала лучшей среди открытых моделей. Её предшественница MiMo-V2.5-Pro получила в том же индексе 26 баллов. Результат заметил глава Hugging Face Клеман Деланг: он переслал его в соцсети X с одним словом — «Бомба!».
Artificial Analysis — независимая компания, которая сама тестирует модели. Её сводный индекс включает десять проверок, от офисных задач агентов до Humanity's Last Exam и научного программирования. Одна задача из этого набора обходится MiMo-V2.6-Pro в среднем в 0,13 доллара. Поэтому модель оказалась на так называемом Парето-фронте: среди протестированных моделей нет ни одной, которая была бы одновременно умнее и дешевле в расчёте на задачу.
Модель заметно поумнела, а цены Xiaomi оставила прежними. Миллион входных токенов стоит 0,435 доллара, а если запрос уже есть в кэше, скидка составляет 99%. Миллион токенов ответа стоит 0,87 доллара. В Artificial Analysis называют модель одной из самых выгодных для развёртывания.
Модель устроена как смесь экспертов. Всего в ней 1,02 трлн параметров, но на каждый токен работают только 42 млрд. Модель вышла накануне, Xiaomi выложила её на Hugging Face под лицензией MIT под названием MiMo-V2.6-Pro-RL. Тогда же вышла облегчённая версия MiMo-V2.6-Flash-RL. Более подробный разбор в Artificial Analysis обещают выпустить позже.