Gemma 4 31B IT

Что это за модель

Gemma 4 31B IT — самая крупная модель в открытой линейке Gemma 4 от Google DeepMind. Приставка IT означает, что модель дообучена выполнять инструкции, то есть готова к диалогу. Google пишет, что линейка построена на тех же технологиях, что и Gemini 3. Это плотная модель на 31 млрд параметров: при каждом ответе работают все параметры сразу. У неё 60 слоёв. Внимание устроено гибридно: одни слои смотрят только на ближайшие 1024 токена, другие видят весь текст целиком. Картинки обрабатывает отдельный блок зрения примерно на 550 млн параметров.

В линейке четыре размера: E2B и E4B для телефонов и ноутбуков, 26B и 31B для видеокарт и серверов. Соседняя 26B устроена как смесь экспертов (mixture of experts): при каждом ответе у неё работают только около 4 млрд параметров, поэтому она быстрее. Версия 31B медленнее, но точнее. Например, в тесте знаний MMLU Pro она набирает 85,2% против 82,6% у 26B. По сравнению с Gemma 3 у новой линейки появился режим рассуждений: модель может сначала продумать задачу шаг за шагом и только потом ответить. Ещё она научилась вызывать внешние функции и выдавать ответ в формате JSON.

По данным Google, на старте 31B занимала третье место среди открытых моделей в текстовом рейтинге Arena.ai. В карточке модели лаборатория приводит такие результаты: 89,2% в математическом тесте AIME 2026, 80,0% в LiveCodeBench v6 (олимпиадное программирование) и 84,3% в научном тесте GPQA Diamond. Модель берут для чат-ботов, агентов, написания кода без подключения к интернету, извлечения данных из изображений и как основу для собственного дообучения. Google называет 31B удобной базой для дообучения именно потому, что в ней ставка сделана на качество, а не на скорость.

Веса выложены под лицензией Apache 2.0, поэтому модель можно применять и в коммерческих продуктах. Звук 31B не понимает: его в линейке поддерживают только малые версии. В карточке модели Google предупреждает, что модель может не уловить тонкие оттенки смысла, сарказм и переносные значения. Кроме того, она может выдавать неверные или устаревшие факты, потому что опирается на закономерности из обучающих данных и базой знаний не является. В рейтинге Epoch модель находится в середине списка, заметно ниже закрытых моделей Gemini.

Источники: Анонс Gemma 4 в блоге Google, Карточка модели на Hugging Face, Технический разбор Gemma 4 на Hugging Face