Neuraal netwerk geleerd om de spraak van de gesprekspartner te simuleren tijdens onderbrekingen in audiogesprekken

Als gevolg van een instabiele verbinding tijdens een gesprek, kan de spraak van de persoon aan de andere kant van de lijn hoorbaar zijn

met tussenpozen. Google-ontwikkelaars hebben dit probleem opgelost. Ze leerden het neurale netwerk om de spraak van de gesprekspartner te imiteren tijdens onderbrekingen in audiogesprekken.

Het is een feit dat bij het voeren van videogesprekken via internetOmdat het signaal door meerdere netwerken gaat, kunnen sommige audiopakketten verloren gaan. Alle services maken nu gebruik van PLC-algoritmen (Packet Loss Concealment). Als er echter te veel pakketten verloren gaan en de vertraging toeneemt tot enkele tientallen milliseconden, kan er vervorming optreden.

Ontwikkelaars van Google en DeepMind geïntroduceerdEen speciaal algoritme dat een vervanging kan maken voor verloren pakketten. Gebaseerd op het neurale netwerkalgoritme. Ze analyseert de laatste spraakfragmenten en vult vervolgens de pauze met de gesynthetiseerde stem van de gesprekspartner.

De technologie is al getest op Pixel 4-smartphones.