Artificial Analysis Intelligence Index
Сводный индекс независимой компании Artificial Analysis, которая сравнивает ИИ-модели. Он объединяет результаты языковых моделей в нескольких тестах на работу агентов, программирование, общие знания и научные рассуждения и сводит их в один балл по шкале от 0 до 100. Набор тестов в индексе со временем обновляется.
проверено по: artificialanalysis.ai ↗
См. также
- Artificial AnalysisArtificial Analysis — независимая компания, которая сама тестирует ИИ-модели и API-провайдеров и публикует сравнения по качеству, цене, скорости и задержке. Она оценивает языковые модели, а также модели для речи, изображений, видео и музыки, и ведёт сводный рейтинг Intelligence Index.
- Epoch Capabilities IndexСводный индекс возможностей ИИ-моделей от исследовательской организации Epoch AI. Он сводит результаты десятков бенчмарков в одну шкалу с помощью статистической модели, которая одновременно оценивает силу моделей и сложность тестов. Поэтому модели можно сравнивать, даже если их проверяли на разных бенчмарках, и следить за прогрессом, когда отдельные тесты уже решены почти полностью.
В новостях
Натан Ламберт рассказал конгрессменам о лидерстве Китая в открытых моделях
Сводный рейтинг независимой компании Artificial Analysis: объединяет результаты нескольких тестов на рассуждение, знания и программирование в один балл, чтобы сравнивать модели разных разработчиков.