OpenAI заняла первые три места в рейтинге DesignArena по созданию игр
По голосам пользователей DesignArena GPT-6.2 Sol стала третьей с оценкой на уровне прежнего лидера GPT-6 Astra при примерно вчетверо меньшей цене за игру.
На момент объявления DesignArena модели OpenAI занимали первые три места в рейтинге по созданию игр. Из тройки DesignArena назвала две модели — GPT-6.2 Astra на первом месте и GPT-6.2 Sol на третьем. Обе тестировали с высоким уровнем рассуждений, который позволяет тратить больше вычислений на обдумывание запроса. В таблице на 21 ноября лидирует Claude Fable 5.2 от Anthropic.
В цифрах: У Astra генерация занимала в среднем 6,8 минуты и стоила 98 центов. У Sol — 4,6 минуты и 22 цента.
Детали: Пользователи DesignArena выбирают понравившуюся игру из двух, созданных по одному запросу. По их голосам Sol получила примерно такую же оценку, как прежний лидер GPT-6 Astra с максимальным уровнем рассуждений (max). По данным из объявления DesignArena, Sol создавала игры примерно вчетверо дешевле и на 40% быстрее прежней Astra. В обновлённой таблице у Sol около 4,7 минуты на игру, у прежней Astra — около 19,5 минуты. Как DesignArena получила разницу в 40%, из объявления неясно.
DesignArena сравнила оценки моделей с ценой и отдельно со временем. У каждой из двух моделей соперники с такой же или более высокой оценкой обходились как минимум в ту же сумму и тратили на игру как минимум столько же времени. Например, модели с оценкой выше, чем у Sol, обходились дороже и тратили на генерацию больше времени.
Сооснователь OpenAI Грег Брокман вспомнил в соцсети X, как в детстве хотел научиться делать собственные игры, и выразил надежду, что такие модели помогут новичкам начать.