Vi ricordate la rete neurale Yandex che traduceva al volo i video stranieri?
Discutere
Quindi, ora gli utenti di Yandex.Browser possono guardare video in inglese con la traduzione in russo della voce fuori campo a più voci.
Se inizialmente la tecnologia utilizzava due voci sintetizzate per la traduzione vocale, una maschile e una femminile, ora le voci sono dodici. Sei per ogni genere.
È stato riferito che la rete neurale "distribuisce" le voci a diversi altoparlanti, dopodiché le "ricorda" utilizzando modelli di intelligenza artificiale creati all'interno di Yandex.
E funziona tutto abbastanza a più livelli:prima, una rete neurale traduce il parlato in testo, ripristina la punteggiatura e determina i confini delle frasi, quindi un'altra analizza lo spettrogramma della voce e contrassegna i frammenti pronunciati da persone diverse.