Процесс использования цифровых эффектов для изменения возраста актеров становится все более распространенной практикой в Голливуде (несмотря на многочисленные критические замечания). Но для каждого сверхъестественно молодого Роберта Де Ниро в «Ирландце» требуются сотни часов кропотливой работы от закулисных художников и инженеров VFX. Однако по мере того, как нейронные сети становятся все более распространенными и доступными, у крупных игроков индустрии развлечений появляется возможность использовать технологии для оптимизации процесса, одновременно создавая более фотореалистичные результаты. В настоящее время мало развлекательных компаний, столь же влиятельных, как Disney, поэтому, вероятно, не будет сюрпризом услышать, что The House of Mouse не так давно объявила, что использует некоторые передовые технологии искусственного интеллекта для “преображения” актеров.
Недавно Disney Research Studios представила сеть повторного старения лица (или FRAN), свое последнее достижение в области VFX, которое использует нейронные сети для создания “первого практического, готового к производству и полностью автоматического способа повторного старения лиц на видеоизображениях”. По собственным подсчетам Disney, по меньшей мере в 12 фильмах и телесериалах в течение 2022 года использовалась технология повторного старения, и это число неуклонно росло с момента ее первого появления всего несколько лет назад. “Фотореалистичное цифровое повторное старение лиц в видео становится все более распространенным явлением в сфере развлечений и рекламы. Но преобладающий рабочий процесс 2D-рисования часто требует покадровой ручной работы, которая может занять несколько дней даже у опытных художников”, – объясняет команда в аннотации своей исследовательской работы. Решение FRAN этой проблемы основано на многоступенчатом процессе нейронной сети, который сокращает рабочее время и затраты, одновременно повышая реалистичность эффекта.
Gizmodo и Ars Technica также объяснили, что FRAN использует ряд шагов для создания своих обновленных объектов. Сначала команда использовала программу под названием StyleGAN2, чтобы случайным образом сгенерировать тысячи синтетически состаренных лиц в возрасте 18 — 85 лет. Как только эта база данных была создана, инструменты машинного обучения состарили и эти искусственные портреты, которые затем были переданы в другую нейронную сеть. Оттуда FRAN может применить полученные знания к видео реальных людей, добавляя или вычитая годы независимо от угла, положения, движения или освещения. После этого художники могут войти и вручную подправить рамки и переходы по мере необходимости.
Результаты еще не идеальны, но они, возможно, столь же убедительны, как и все, что мы видели до сих пор в таких фильмах, как «Изгой один» или «Человек-муравей и оса». Во всяком случае, конечные продукты со временем будут только улучшаться по мере того, как нейронные сети, подобные FRAN, становятся умнее со своими технологиями.
Комментариев (0)