Rede neural ensinada a simular a fala do interlocutor durante interrupções nas chamadas de áudio

Devido a uma conexão instável durante uma chamada, a fala da pessoa do outro lado da linha pode ser ouvida

intermitentemente. Os desenvolvedores do Google resolveram esse problema. Eles ensinaram a rede neural a imitar a fala do interlocutor durante interrupções nas chamadas de áudio.

O fato é que ao fazer videochamadas pela InternetDevido ao sinal passar por múltiplas redes, alguns pacotes de áudio podem ser perdidos. Todos os serviços agora usam algoritmos de ocultação de perda de pacotes (PLC). Entretanto, se muitos pacotes forem perdidos e o atraso aumentar para várias dezenas de milissegundos, poderá ocorrer distorção.

Desenvolvedores do Google e DeepMind introduziramUm algoritmo especial que pode criar uma substituição para pacotes perdidos. Baseado no algoritmo de rede neural. Ela analisa os últimos fragmentos da fala e preenche a pausa com a voz sintetizada do interlocutor.

A tecnologia já foi testada em smartphones Pixel 4.