Что такое оживление фото и как это работает

Оживление фото — это превращение одного статичного снимка в короткий видеоролик. Человек на фотографии начинает дышать, моргать, слегка поворачивать голову. Ничего не дорисовывается заново: алгоритм работает с тем, что уже есть в кадре.

Что происходит внутри

Модель обучена на огромном количестве видео с людьми и знает, как обычно движется лицо: как приподнимается грудная клетка при вдохе, как смещается тень на скуле при повороте головы, как закрываются веки. Получив единственный кадр, она достраивает правдоподобное продолжение — набор кадров, каждый из которых логично следует из предыдущего.

Ключевой момент здесь — согласованность. Отдельный сгенерированный кадр сделать несложно, а вот заставить сорок кадров подряд сохранять одну и ту же геометрию лица, один и тот же свет и одну и ту же текстуру кожи — это и есть основная работа алгоритма.

Почему движение кажется настоящим

Глаз человека прощает многое в статичной картинке, но мгновенно замечает неправильную динамику. Естественность возникает из мелочей: моргание происходит не строго по таймеру, взгляд слегка гуляет, движение головы затухает, а не обрывается. Хорошая модель воспроизводит эту нерегулярность, плохая выдаёт механический цикл, который считывается за секунду.

Где предел

Алгоритм не знает, что находится за пределами кадра и что скрыто за объектом. Если модель на фото повернёт голову слишком сильно, за ухом окажется область, которую никто не снимал, — и там начинается додумывание. Поэтому амплитуда движения намеренно сдержанная: это осознанное ограничение, а не слабость технологии.

Второй предел — длительность. Чем дольше ролик, тем сильнее накапливается расхождение с оригиналом. Ролики на пять–десять секунд остаются похожими на исходник, минутные почти всегда уплывают.

Материалы предназначены для лиц старше 18 лет и носят информационный характер.