Компанія NVIDIA більше відома як виробник відеокарт, але вона також створює деякі цікаві
В Audio2Face реалізується процес автоматичногомонтажу. Інструмент працює на відкритій платформі фізично коректного моделювання у реальному часі NVIDIA Omniverse. Програма бере аудіофайл і створює на моделі анімацію, що дивно добре збігається. Вона добре працює з більшістю мов.
Для інструменту NVIDIA створила глибоку нейроннумережу, яка зіставляє лицьову анімацію зі звуком у часі. Компанія має веб-сайт з інструкціями до Audio2Face. Також можна завантажити відкриту бета-версію програми. А поки що можна подивитися на приклади роботи технології. Результат може навіть лякати.
Джерело: PC Gamer