Pamatujete na neuronovou síť Yandex, která překládala zahraniční videa za běhu? Společnost ji „upgradovala“ tím, že ji učila
Diskutujte
Uživatelé Yandex.Browser tedy nyní mohou sledovat videa v angličtině s vícehlasým hlasovým překladem do ruštiny.
Pokud zpočátku technologie používala k překladu řeči dva syntetizované hlasy – jeden mužský a jeden ženský – nyní existuje dvanáct hlasů. Šest pro každé pohlaví.
Uvádí se, že neuronová síť „distribuuje“ hlasy různým mluvčím, poté si je „pamatuje“ pomocí modelů AI vytvořených v Yandexu.
A to vše funguje docela vícevrstvě:nejprve jedna neuronová síť převede řeč do textu, obnoví interpunkci a určí hranice vět a poté další analyzuje spektrogram hlasu a označuje úryvky řečené různými lidmi.