Husker du Yandex nevrale nettverk, som oversatte utenlandske videoer i farten? Selskapet "oppgraderte" henne ved å lære henne
Diskutere
Så nå kan Yandex.Browser-brukere se videoer på engelsk med flerstemmig voice-over-oversettelse til russisk.
Hvis teknologien i utgangspunktet brukte to syntetiserte stemmer for taleoversettelse - en mannlig og en kvinnelig - nå er det tolv stemmer. Seks for hvert kjønn.
Det er rapportert at det nevrale nettverket "distribuerer" stemmer til forskjellige høyttalere, hvoretter det "husker" dem ved å bruke AI-modeller laget i Yandex.
Og det hele fungerer ganske flerlags:først oversetter ett nevralt nettverk tale til tekst, gjenoppretter tegnsetting og bestemmer grensene for setninger, og deretter analyserer et annet spektrogrammet til stemmen og markerer fragmenter som snakkes av forskjellige mennesker.