Видеомодель Gemini Omni 1.1 Flash научилась продлевать сцены до 40 секунд и выдавать 4K
Google выпустила Gemini Omni 1.1 Flash для разработчиков. Модель продлевает ролики до 40 секунд, строит переход между заданными первым и последним кадром и выводит видео в 4K. Черновики в 360p стоят втрое дешевле, чем обычное видео в 720p.
Google выпустила Gemini Omni 1.1 Flash — обновление своей модели для генерации видео. Разработчики получают больше контроля над роликом: сцену теперь можно продлить, задать ей первый и последний кадр, а готовый результат поднять до 4K. Модель доступна в Google AI Studio1 и на Gemini Enterprise Agent Platform, корпоративной платформе Google.
Главное изменение касается продления сцен. Раньше модель при продолжении ролика смотрела только на его последнюю секунду. Теперь она учитывает до 10 секунд предыдущего видео. По словам Google, от этого персонажи и обстановка меньше «плывут», а сюжет не теряет нить. Продлевать можно шагами по 10 секунд, общая длина ролика — до 40 секунд.
Второй режим — генерация между двумя ключевыми кадрами2. Пользователь задаёт начало и конец, модель сама строит непрерывный план между ними. Google предлагает так снимать облёт камеры вокруг объекта, наезды и зацикленные ролики. Ещё модели можно показать до трёх секунд видео, чтобы она повторила движение или сохранила облик персонажа. В демонстрации, например, мультяшные собака, осьминог и медведь исполняют танцы с загруженных роликов.
Для поиска идеи есть черновой режим в 360p. Он работает до 60% быстрее и стоит втрое дешевле стандартного 720p. Удачный вариант потом можно довести до 1080p или 4K. Цены Google привела отдельной таблицей.
Модель предыдущей версии уже встроили в свои продукты Adobe Firefly, Figma Weave3, Runway и облачный сервис GMI Cloud. Omni 1.1 также появилась в Google Flow4 — сервисе Google для создания видео — у подписчиков Google AI Plus, Pro и Ultra по всему миру. Продление сцен эти подписчики получили и в приложении Gemini.