Ανατριχιαστικό και τεχνολογικά προηγμένο: Η NVIDIA δίδαξε 3D μοντέλα να ανοίγουν ρεαλιστικά το στόμα τους κάτω από τη φωνή κάποιου

Η NVIDIA είναι περισσότερο γνωστή ως κατασκευαστής καρτών γραφικών, αλλά κάνει και μερικά ενδιαφέροντα

εργαλεία λογισμικού. Ένα παράδειγμα αυτού είναι το σύστημα Audio2Face, το οποίο σας επιτρέπει να κάνετε κίνηση 3D μοντέλων με βάση ηχογραφημένη φωνή

Το Audio2Face υλοποιεί μια αυτόματη διαδικασίαεγκατάσταση Το εργαλείο εκτελείται στην ανοιχτή, σε πραγματικό χρόνο, φυσική πλατφόρμα προσομοίωσης NVIDIA Omniverse. Το πρόγραμμα παίρνει ένα αρχείο ήχου και δημιουργεί ένα εκπληκτικά ταιριαστό animation στο μοντέλο. Λειτουργεί καλά με τις περισσότερες γλώσσες.

Για το εργαλείο, η NVIDIA έχει δημιουργήσει ένα βαθύ νευρικόένα δίκτυο που αντιστοιχίζει κινούμενα σχέδια προσώπου σε ήχο σε πραγματικό χρόνο. Η εταιρεία διαθέτει ιστότοπο με οδηγίες για το Audio2Face. Μπορείτε επίσης να κατεβάσετε την ανοιχτή έκδοση beta του προγράμματος. Στο μεταξύ, μπορείτε να δείτε παραδείγματα για το πώς λειτουργεί η τεχνολογία. Το αποτέλεσμα μπορεί να είναι ακόμη και τρομακτικό.

Πηγή: PC Gamer