ИИтак

← Назад

модель · Google · вышла 27 октября

Genie 4

Модель мира Google в предварительной версии: на лету строит мир со звуком и речью героев, по нему можно ходить и менять его текстом

О модели

Genie 4 — модель мира от Google DeepMind. Так называют нейросеть, которая не выдаёт готовый ролик, а строит виртуальное пространство кадр за кадром в ответ на действия человека. По миру перемещаются клавиатурой и мышью. Сцену меняют на ходу обычными текстовыми командами: можно передвинуть камеру, сменить погоду, добавить персонажей или задать событие с правдоподобными причинами и следствиями. По словам компании, модель опирается на линейку Gemini: Gemini Omni отвечает за то, чтобы мир выглядел и вёл себя как настоящий, а другие модели Gemini рассуждают и помогают сохранять сцену связной.

Главное новшество по сравнению с Genie 3 — встроенный звук. Каждый мир озвучивается на лету: шуршат листья, шумит толпа, играет музыка. Персонажи могут разговаривать с пользователем и друг с другом. Google называет Genie 4 самой реалистичной и интерактивной из своих моделей мира.

Компания видит у модели два направления. Первое — безопасные тренировочные площадки для роботов и ИИ-агентов, например SIMA. На странице модели показан такой сценарий: Gemini 4 Argon составляет пошаговый план задачи, и эти шаги прямо во время симуляции передаются Genie 4 в виде текстовых подписей. Второе направление — творческие инструменты для кино, журналистики, игр и производства.

Ограничения Google называет сама. Непрерывная сессия длится несколько минут, долгой игры не будет. Детали и предметы со временем могут смещаться или пропадать, особенно после нескольких правок и долгих перемещений по сцене. Реальные места модель воспроизводит неточно, взаимодействие нескольких агентов ей даётся с трудом, а разборчивый текст обычно появляется, только если он есть в описании мира. Точность звука в реальном времени компания пока считает предметом исследований. Сейчас это исследовательская предварительная версия для узкого круга доверенных тестировщиков. Позже модель получат подписчики Google AI Ultra в Project Genie и ранние партнёры в Gemini API и AI Studio. Всё видео и весь звук от Genie 4 помечаются невидимым водяным знаком SynthID.

Новости о модели

все упоминания · 3
  1. Google DeepMind показала модель мира Genie 4 со звуком и речью героев

    Genie 4 на ходу строит фотореалистичный мир, по которому можно ходить, озвучивает его и даёт героям говорить; пока модель есть только у тестировщиков.

Данные: models.dev (MIT).