Σχεδόν μεταγλώττιση: Η Yandex έμαθε την πολύφωνη μετάφραση των βίντεο του YouTube

Θυμάστε το νευρωνικό δίκτυο Yandex που μετέφραζε ξένα βίντεο εν κινήσει;

μεγάλα κόλπα.
Συζητώ

Έτσι, τώρα οι χρήστες του Yandex.Browser μπορούν να παρακολουθούν βίντεο στα Αγγλικά με πολυφωνική μετάφραση στα ρωσικά.

Αν αρχικά η τεχνολογία χρησιμοποιούσε δύο συνθετικές φωνές για τη μετάφραση του λόγου - μια ανδρική και μια γυναικεία - τώρα υπάρχουν δώδεκα φωνές. Έξι για κάθε φύλο.

Αναφέρεται ότι το νευρωνικό δίκτυο «διανέμει» φωνές σε διαφορετικούς ομιλητές και μετά τις «θυμάται» χρησιμοποιώντας μοντέλα τεχνητής νοημοσύνης που δημιουργήθηκαν μέσα στο Yandex.

Και όλα λειτουργούν αρκετά πολυεπίπεδα:Αρχικά, ένα νευρωνικό δίκτυο μεταφράζει την ομιλία σε κείμενο, αποκαθιστά τα σημεία στίξης και καθορίζει τα όρια των προτάσεων και, στη συνέχεια, ένα άλλο αναλύει το φασματόγραμμα της φωνής και σημειώνει θραύσματα που λέγονται από διαφορετικούς ανθρώπους.