Gruselig und technologisch fortschrittlich: NVIDIA hat 3D-Modellen beigebracht, ihren Mund unter der Stimme einer anderen Person realistisch zu öffnen

NVIDIA ist vor allem als Grafikkartenhersteller bekannt, macht aber auch einiges interessant

Software-Tools. Ein Beispiel hierfür ist das Audio2Face-System, mit dem Sie 3D-Modelle basierend auf aufgezeichneter Stimme animieren können. Diskutieren Sie

Audio2Face implementiert einen automatischen ProzessInstallation Das Tool läuft auf der offenen, physikalisch basierten Echtzeit-Simulationsplattform NVIDIA Omniverse. Das Programm nimmt eine Audiodatei und erstellt eine überraschend gut abgestimmte Animation auf dem Modell. Es funktioniert gut mit den meisten Sprachen.

Für das Tool hat NVIDIA eine tiefe neuronaleein Netzwerk, das Gesichtsanimationen in Echtzeit auf Audio abbildet. Das Unternehmen hat eine Website mit Anweisungen für Audio2Face. Sie können auch die offene Beta-Version des Programms herunterladen. In der Zwischenzeit können Sie sich Beispiele für die Funktionsweise der Technologie ansehen. Das Ergebnis kann sogar erschreckend sein.

Quelle: PC Gamer