Kommer du ihåg Yandex neurala nätverk, som översatte utländska videor i farten? Företaget "uppgraderade" henne genom att lära henne
Diskutera
Så nu kan Yandex.Browser-användare titta på videor på engelska med flerstemmig röstöversättning till ryska.
Om tekniken från början använde två syntetiserade röster för talöversättning - en manlig och en kvinnlig - nu finns det tolv röster. Sex för varje kön.
Det rapporteras att det neurala nätverket "distribuerar" röster till olika högtalare, varefter det "kommer ihåg" dem med hjälp av AI-modeller skapade i Yandex.
Och det hela fungerar ganska i flera lager:först översätter ett neuralt nätverk tal till text, återställer interpunktion och bestämmer gränserna för meningar, och sedan analyserar ett annat röstens spektrogram och markerar fragment som talas av olika personer.