L'intelligenza artificiale ha imparato a tradurre il discorso in video con il linguaggio dei segni

Un modello basato sull'intelligenza artificiale (AI) ha imparato a creare video fotorealistici

interpreti della lingua dei segni. Questi avatar traducono il parlato in linguaggio in tempo reale e possono migliorare l'accesso degli utenti a decine di fonti.

Ben Sanders dell'Università del Surrey(Regno Unito) e colleghi hanno utilizzato una rete neurale che converte la lingua parlata in lingua dei segni. Il sistema SignGAN abbina questi segni a un modello 3D dello scheletro umano. Il team ha addestrato l'intelligenza artificiale su video da veri traduttori della lingua dei segni, insegnandole a creare video fotorealistici da immagini.

Dispositivi intelligenti IKEA combinati con scenari

In precedenza, Google ha inventato un modello che puòleggere la lingua dei segni durante le videochiamate. L'intelligenza artificiale può identificare "parlare attivamente", ma ignora l'interlocutore se muove solo le mani o la testa.

I ricercatori hanno presentato un sistema di rilevamentolinguaggio dei segni in tempo reale. Riesce a distinguere quando l'interlocutore cerca di dire qualcosa o semplicemente muove il corpo, la testa, le braccia. Gli scienziati notano che questo compito può sembrare facile per una persona, ma in precedenza non esisteva un tale sistema in nessuno dei servizi di videochiamata: tutti rispondono a qualsiasi suono o gesto di una persona.

Leggi anche

Le immagini satellitari hanno confermato che il clima della Terra sta cambiando in modo non uniforme

Trovato il presunto regno degli Ittiti scomparsi. Cosa hanno scoperto gli archeologi?

I nanodiamanti quantistici possono migliorare l'accuratezza dei test medici