Läskigt och tekniskt avancerat: NVIDIA lärde 3D-modeller att realistiskt öppna sina munnar under någons röst

NVIDIA är mest känt som en grafikkortstillverkare, men det gör också en del intressant

mjukvaruverktyg. Ett exempel på detta är Audio2Face-systemet, som låter dig animera 3D-modeller baserat på inspelad röst

Audio2Face implementerar en automatisk processinstallation Verktyget körs på den öppna realtids fysiskt baserade simuleringsplattformen NVIDIA Omniverse. Programmet tar en ljudfil och skapar en förvånansvärt välmatchad animation på modellen. Det fungerar bra med de flesta språk.

NVIDIA skapade ett djupt neuralt nätverk för instrumentetett nätverk som mappar ansiktsanimation till realtidsljud. Företaget har en hemsida med instruktioner för Audio2Face. Du kan också ladda ner den öppna betaversionen av programmet. Under tiden kan du titta på exempel på hur tekniken fungerar. Resultatet kan till och med vara skrämmande.

Källa: PC Gamer