Atcerieties Yandex neironu tīklu, kas lidojuma laikā tulkoja ārzemju videoklipus? Uzņēmums viņu “uzlaboja”, mācot
Pārrunāt
Tātad tagad Yandex.Browser lietotāji var skatīties videoklipus angļu valodā ar vairāku balsu balss tulkojumu krievu valodā.
Ja sākotnēji tehnoloģija runas tulkošanai izmantoja divas sintezētas balsis - vienu vīriešu un vienu sieviešu -, tagad ir divpadsmit balsis. Seši katram dzimumam.
Tiek ziņots, ka neironu tīkls “izplata” balsis dažādiem skaļruņiem, pēc tam tās “atceras”, izmantojot Yandex iekšienē izveidotos AI modeļus.
Un tas viss darbojas diezgan daudzslāņu:Pirmkārt, viens neironu tīkls pārvērš runu tekstā, atjauno pieturzīmes un nosaka teikumu robežas, bet pēc tam cits analizē balss spektrogrammu un atzīmē dažādu cilvēku runātos fragmentus.