Baisus ir technologiškai pažangus: NVIDIA išmokė 3D modelius tikroviškai atverti burną po kažkieno balsu

NVIDIA geriausiai žinoma kaip grafikos plokščių gamintojas, tačiau ji taip pat yra įdomi

programinės įrangos įrankiai. To pavyzdys yra Audio2Face sistema, kuri leidžia animuoti 3D modelius pagal įrašytą balsą.

„Audio2Face“ įgyvendina automatinį procesąįrengimas Įrankis veikia atviroje realaus laiko fiziškai pagrįstoje modeliavimo platformoje NVIDIA Omniverse. Programa paima garso failą ir sukuria stebėtinai gerai suderintą modelio animaciją. Tai gerai veikia su dauguma kalbų.

NVIDIA sukūrė instrumentui gilų neuroninį tinklątinklas, susiejantis veido animaciją su realaus laiko garsu. Bendrovė turi svetainę su „Audio2Face“ instrukcijomis. Taip pat galite atsisiųsti atvirą beta programos versiją. Tuo tarpu galite peržiūrėti technologijos veikimo pavyzdžius. Rezultatas gali būti net bauginantis.

Šaltinis: „PC Gamer“