Takmer dabing: Yandex sa naučil viachlasný preklad videí YouTube

Pamätáte si neurónovú sieť Yandex, ktorá za chodu prekladala zahraničné videá? Spoločnosť ju „upgradovala“ tým, že ju učila

veľké triky.
Diskutujte

Používatelia prehliadača Yandex.Browser môžu teraz sledovať videá v angličtine s viachlasým prekladom hlasu do ruštiny.

Ak na začiatku technológia používala na preklad reči dva syntetizované hlasy – jeden mužský a jeden ženský – teraz existuje dvanásť hlasov. Šesť na každé poschodie.

Uvádza sa, že neurónová sieť „distribuuje“ hlasy rôznym reproduktorom, a potom si ich „zapamätá“ pomocou modelov AI vytvorených v rámci Yandex.

Navyše to všetko funguje pomerne viacvrstvovo:najprv jedna neurónová sieť preloží reč do textu, obnoví interpunkciu a určí hranice viet a potom ďalšia analyzuje spektrogram hlasu a zaznamená fragmenty hovorené rôznymi ľuďmi.