Компания Disney создала инструмент искусственного интеллекта FRAN, который меняет возраст актеров без использования дорогостоящих визуальных эффектов.

При просмотре блокбастера «Человек-муравей и Оса» 2018 года, например, большинство зрителей могут легко заметить работу студий визуальных эффектов в сценах, где Человек-муравей уменьшается или вырастает до гигантских размеров. Но труднее всего добиться фотореалистичных результатов в кадрах с участием более молодых версий актеров Мишель Пфайффер и Майкла Дугласа. Чтобы добиться таких же результатов, как в фильме, художникам нужно либо потратить недели на стирание морщин и других явных признаков старения с лица актера, либо полностью заменить его компьютерным двойником.

Визуальные эффекты — мощный инструмент кинопроизводства, и для студий автоматизация такого рода работы может быть выгодной. Два года назад Disney Research Studios разработала инструменты на основе искусственного интеллекта, которые могли генерировать видео со сменой лиц с достаточным качеством и разрешением, чтобы их можно было использовать в кинопроизводстве. В этом году исследователи Disney демонстрируют новый инструмент на базе ИИ, с помощью которого актеры могут выглядеть старше или моложе.

Прежде машинное обучение для состаривания или омоложения человека уже было опробовано, однако убедительные результаты такие системы давали применительно к неподвижным изображениям. Чтобы работать с движущимися объектами или сценами, где актер не всегда смотрит прямо в камеру, в Disney сначала создали базу данных из тысяч случайно сгенерированных синтетических лиц. ИИ-инструменты для изменения возраста сначала использовали на этих тысячах несуществующих людей, а затем на результатах обучили новую нейронную сеть под названием FRAN.

Когда FRAN получает на входе снимок головы, вместо того, чтобы генерировать измененное изображение, нейросеть предсказывает изменение частей лица с возрастом, например появление морщин. Эти эффекты накладываются на исходное изображение лица в качестве дополнительного, что позволяет сохранить внешность исполнителя, даже когда его голова двигается или когда условия освещения в кадре меняются. Это также дает возможность художнику корректировать и настраивать сгенерированные ИИ изменения – и они идеально сливаются с кадром.

Источник: Gizmodo