ИИтак

← Назад

OpenAI представила тест по медицинской химии для моделей ИИ

В новом тесте OpenAI MedChemBench модель GPT-6 Astra набрала 95,4% баллов за реконструкцию молекул, около половины — за выбор соединений для опытов и прогноз измеряемых свойств.

Изображение: Грег Брокман

OpenAI представила MedChemBench — тест, который проверяет, могут ли модели ИИ по строению молекул и результатам опытов выбрать соединения для следующего эксперимента.

OpenAI собрала 99 задач по опубликованным исследованиям. В большинстве из них модель получает часть данных, которыми химики располагали на одном из этапов работы. По этим данным она восстанавливает строение молекул, объясняет результаты опытов, сравнивает соединения или предсказывает их свойства.

В одной задаче модели сравнивают соединения, которые изучали при поиске лекарства от рака. Одно из них при меньшей концентрации подавляло активность белка, который исследователи хотели заблокировать. Другое легче проходило через клеточный барьер и медленнее распадалось под действием ферментов печени в лабораторном опыте. OpenAI скрыла эти результаты от моделей и сверяла с ними прогнозы.

При очень высоком уровне рассуждений GPT-6.2 Astra, которую OpenAI выпустила 17 ноября, набрала 84,5% возможных баллов. При той же настройке GPT-6 Astra получила 83,3%, а GPT-5.6 Sol — 58,2%. Сооснователь OpenAI Грег Брокман в соцсети X назвал прогресс моделей в медицинской химии значительным.

GPT-6 Astra набрала 95,4% возможных баллов за восстановление строения молекул. Она получила около половины баллов в каждой из двух категорий — за выбор соединений и за численный прогноз их свойств.

В каждом запуске модель давала один ответ без инструментов, обратной связи и последующих исправлений. OpenAI допускает, что публикации, на которых основан тест, могли попасть в данные для обучения моделей. Вопрос о том, помогут ли их ответы химикам принимать решения в лаборатории, остаётся открытым.

← Все новости