Оживление старых фото нейросетью: что получится, а что нет

Оживление фото нейросетью работает заметно увереннее на снимке с телефона, чем на архивной карточке шестидесятых годов, и разница не в возрасте фотографии, а в её исходном качестве. Возраст тут ни при чём. В сервисе оживление фото даёт на выходе видео длиной 5 секунд с одним из трёх сценариев движения. Дальше разберём, где граница между «получится хорошо» и «результат разочарует», на конкретных типах старых фото.

Что чаще всего приносят на оживление старых фото

По практике сервиса, львиная доля запросов на оживление старых фото приходится на портреты бабушек и дедушек с фотоателье пятидесятых-восьмидесятых годов и на кадры из отпускных альбомов. Реже встречаются паспортные и документные фото: формально это тоже портрет крупным планом, но выражение лица там нарочито нейтральное, и «оживший» человек на видео выглядит скорее настороженным, чем живым. Мимика на таких карточках просто отсутствует.

Заметно реже, но тоже регулярно, приносят свадебные фото шестидесятых, где молодожёны стоят рядом крупным планом. Два лица в одном кадре инструмент обрабатывает по очереди, если снимок заранее разрезать на два портрета и оживить каждый отдельно.

Что получится почти всегда

На чётком портрете с хорошим освещением, где лицо занимает значительную часть кадра, инструмент стабильно выдаёт правдоподобное движение. Доступно три готовых сценария: спокойное дыхание с морганием, лёгкая улыбка и лёгкое движение головой, плюс свой запрос текстом, если нужен более точный сценарий. Результат: видео формата mp4 длиной 5 секунд.

Хорошо подходят фотоателье-портреты, где человек сидит или стоит анфас, свет ровный, а фон не отвлекает от лица. Именно такие карточки чаще всего сохранились в семейных архивах с середины прошлого века, и на них оживление даёт самый убедительный результат.

Скорее всего дело в самой студийной съёмке тех лет: фотограф ставил свет ради качества отпечатка, лицо по центру, минимум тени, нейтральный фон. Требования той эпохи случайно совпали с тем, что сейчас нужно нейросети.

Что получится с оговорками

Сюда попадает основная масса реальных архивных фото: чуть смазанные, немного тёмные, снятые на среднем плане, где лицо занимает не треть кадра, а десятую часть. Инструмент всё равно построит движение. Но результат стоит сравнивать с оригиналом внимательно, а не принимать с первого взгляда.

Особенно это касается сканов, а не фотографий фотографий. Скан с плоского планшетного сканера почти всегда чище кадра, снятого телефоном с альбомной страницы: на втором варианте появляется блик от глянцевой поверхности и лёгкое искажение перспективы, которое потом сказывается на итоговом движении лица.

Ещё одна пограничная категория, цветные фото семидесятых-восьмидесятых с выцветшей плёнкой. Лица на них обычно видны неплохо, розовато-жёлтый оттенок такой плёнки не мешает распознать черты. Здесь оживление обычно получается без сюрпризов, хотя итоговое видео сохраняет тот же выцветший тон, что и исходник, цвет модель на этом этапе не поправляет.

Если выцветание неравномерное, один угол снимка светлее, другой темнее, перед оживлением стоит прогнать фото через реставрацию. Она выравнивает контраст и возвращает лицу чёткость, и уже на этой обновлённой версии оживление строит движение увереннее.

На что обратить внимание перед загрузкой

Групповое фото стоит сначала подготовить: инструмент рассчитан на одного человека в кадре, и если на карточке трое, лучше выбрать одного, обрезать снимок под него и загрузить заново.

Сильно повреждённый снимок, где лицо засвечено, сильно выцвело или закрыто царапиной, стоит сначала прогнать через реставрацию. Так на входе у оживления оказывается уже читаемое, чистое лицо, а не испорченный участок, и модели есть с чем работать.

Видео получается длиной 5 секунд, вариантов на 10 или 15 пока нет. Для слайд-шоу или фильма памяти этого достаточно: оживлённый кадр становится одним ярким эпизодом среди статичных фотографий, а не отдельным длинным роликом.

Инструмент обучен именно на фотографиях людей, поэтому рисунок или картину вместо фотографии оживить не получится.

Что стоит сделать до оживления с сильно повреждённым фото

По практике сервиса, лучший результат на архивном фото выходит в два прогона, а не в один. Сначала снимок стоит отреставрировать: убрать царапины, выровнять выцветание, вернуть контраст. Реставрация без цвета и реставрация с раскраской занимают около минуты каждая, оживление после этого чуть дольше. Только после реставрации имеет смысл запускать оживление, уже на чистом кадре.

Порядок операций менять не стоит. Сначала фото, потом видео, не наоборот. Если сначала оживить повреждённое фото, а потом захотеть отреставрировать исходник, готовое видео уже не поправить: реставрация работает только со статичными изображениями, а не с кадрами внутри mp4-файла.

Пример результата на одном из архивных кадров: местами затёртая фотография превращается в короткий эпизод, где человек моргает и слегка поворачивает голову, а фон вокруг остаётся таким же неподвижным, каким был на исходном снимке.

Когда результат того стоит

Стоит ли оживлять конкретное фото, если оно сильно повреждено, каждый решает сам. Иногда даже неидеальное движение важнее технической точности, память дороже пикселей. Разумный ориентир простой: сначала прогнать снимок через реставрацию и оценить, насколько чётче стало изображение, а уже по этому результату решать, переходить ли к оживлению.

Проверить исходник легко и без обработки: посмотрите на фото при обычном дневном свете и оцените, видны ли основные черты лица глазом. Если да, есть смысл пробовать оживление сразу. Если лицо на скане уже трудно разобрать без напряжения, начните с реставрации, а уже потом решайте про видео.

Попробовать оживление старого фото можно уже сейчас. Если снимок сильно повреждён, начните с реставрации того же архива, а к оживлению переходите вторым шагом. Результат стоит смотреть на весь экран сразу после обработки, пока фото ещё под рукой для сравнения.