Sieć neuronowa uczy symulować mowę rozmówcy podczas przerw w połączeniach audio

Ze względu na niestabilne połączenie podczas rozmowy, może być słyszalna mowa osoby po drugiej stronie linii

sporadycznie. Programiści Google rozwiązali ten problem. Nauczyli sieć neuronową naśladowania mowy rozmówcy podczas przerw w połączeniach audio.

Faktem jest, że podczas rozmów wideo przez InternetZe względu na to, że sygnał przechodzi przez wiele sieci, niektóre pakiety audio mogą zostać utracone. Wszystkie usługi korzystają obecnie z algorytmów ukrywania utraty pakietów (PLC). Jeśli jednak utraconych zostanie zbyt wiele pakietów, a opóźnienie wzrośnie do kilkudziesięciu milisekund, mogą wystąpić zniekształcenia.

Wprowadzono programistów z Google i DeepMindSpecjalny algorytm, który może stworzyć zamiennik utraconych pakietów. Na podstawie algorytmu sieci neuronowej. Analizuje ostatnie fragmenty mowy, a następnie wypełnia pauzę zsyntetyzowanym głosem rozmówcy.

Technologia została już przetestowana na smartfonach Pixel 4.