Новата невронна мрежа на Disney може лесно да промени възрастта на актьора

Увеличавам / Пример за AI на Disney FRAN, променящ възрастта, показващ оригиналното изображение вляво и редовете за повторно стареене на по-възрастния (по-висок, на 65-годишна възраст) и по-млад (по-нисък, на 18-годишна възраст) на същия човек.

Изследователите на Disney създадоха нова невронна мрежа, която може да промени визуалната възраст на актьорите в телевизия или филм. доклади gizmodo. Технологията ще позволи на телевизионните или филмовите продуценти да направят актьорите да изглеждат по-стари или по-млади, като използват автоматизиран процес, който ще бъде по-евтин и отнема много време от предишните методи.

Традиционно, когато екипът за специални ефекти върху видео или филмова продукция трябваше да направи актьор Изглеждайте по-стари или по-млади (техника, която Disney нарича „повторно стареене“), те обикновено използват 3D сканиране и процес на 3D моделиране или 2D цифрово ретуширане на лицето на актьора с помощта на инструменти, подобни на Photoshop. Този процес може да отнеме седмици или повече в зависимост от продължителността на работата.

За разлика от това, новата AI технология на Disney, наречена Face Re-Ageing Network (FRAN), автоматизира процеса. Disney го описва като “първия практичен, напълно автоматичен, готов за производство метод за повторно стареене на лица във видео изображения”.

Демонстрационно изследване на технологията за повторно стареене на Disney.

За да създадат FRAN, изследователите на Disney произволно генерират хиляди примери за лица на възраст между 18 и 85 години. шаблонът. С тези данни от обучението FRAN научи общи принципи за това как външният вид на човек се променя с възрастта. Сега, когато обучението е завършено, той може да приложи тези принципи на остаряването към истински актьор в движение, кадър по кадър.

„Нашата мрежа е обучена по контролиран начин върху голям брой двойки изображения на лица, показващи един и същ синтетичен и реален човек, със съответни маркирани изходна и целева възраст“, ​​пишат изследователите в подобно интервю. Академична работа. Чрез синтетичното създаване на данните за обучение те заобикалят „привидно невъзможната задача“ за събиране на изображения, които изобразяват „разнообразие от идентичности, възрасти и етноси в различни перспективи“.

Резултатът е това, което Disney нарича “готово за производство” решение – което означава, че създава продукция с достатъчно високо качество, за да бъде използвана в истински филм или телевизионно шоу. Потенциално това е първото по рода си AI решение, което може динамично да променя възрастта на актьор във видео, въпреки променящите се изражения, условия на осветление и гледни точки. Изследователите също така разработиха лесен за използване интерфейс за FRAN, който позволява на артистите лесно да използват инструмента в производствена среда.

Дисни осигури търсене хартия Озаглавен „Повторно стареене на лицето за визуални ефекти – готова продукция“ в сряда и беше изпратен за включване в 2022 Seagraph Asia конференция през декември. Авторите на статията включват Гаспард Зузе, Прашант Чандран, Ефтикос Севакис, Маркус Грос, Паоло Готардо и Дерек Брадли, всички от които са свързани с Disney Research Studios в Цюрих, Швейцария.

Помислете за историята на Disney с Въведете Компютърно генерирани актьори във филмите и телевизионните предавания на Междузвездни войни, включително някои, които са направени Намалете възрастта с помощта на CGIние ще Не се чудете Да видим технология, подобна на FRAN, широко използвана в бъдещи продукти на Disney, въпреки че не са обявени планове.