Google DeepMind воссоздала на видео знакомство пары, женатой больше 70 лет

Google DeepMind и Primordial Soup, творческая студия режиссёра Даррена Аронофски, выпустили документальную короткометражку «Love, Rendered». В фильме ИИ воссоздаёт день, когда Берт и Этель Шац познакомились в студенческом кооперативе в Кливленде. Этот день никто не фотографировал и не снимал, пишет в блоге Google технический руководитель фильма.

Супруги женаты больше 70 лет. У Берта слабеет память, и день знакомства — одно из воспоминаний, которые он теряет. Режиссёр фильма — номинант на «Оскар» Лиз Гарбус. Продюсерами стали она сама, Дэн Коган и Аронофски.

Отправной точкой для авторов стала реминисцентная терапия. Так называют клинический метод, когда воспоминания пробуждают знакомые песни, семейные истории и старые фотографии. У дня знакомства Шацев таких подсказок не было, поэтому картинку пришлось создавать заново.

Работа шла в два этапа. Сначала генеративные модели восстановили чёрно-белые снимки молодых Берта и Этель: по ним сверяли дальнейшие сцены. Потом модели захвата движений перенесли на молодые образы нынешние привычки супругов: наклон головы Берта, короткие паузы в его речи, морщинки у глаз. Какие именно модели использовались, в блоге не уточняется.

Этель сидела рядом с командой и поправляла детали: изгиб лестницы, форму каблука на туфлях. По словам автора блога, супруги признали воссозданное «воспоминание» подлинным.

Похожую технологию Google предлагает попробовать в приложении Gemini. Туда можно загрузить старую семейную фотографию и попросить восстановить и раскрасить её, сохранив внешность, выражение лиц и позы людей.