Analys av teckenspråk och icke-verbala tekniker kommer att introduceras i taligenkänningssystem

Själva studien ägnades åt människors uppfattning om information som uttalas högt, samt bedömning

påverkan av gester.Volontärer ombads att analysera videor av människor som talade. Talarnas ansikten var dolda, men studiedeltagarna kunde se talarnas gester. De flesta lyssnare uppmärksammade de "rytmiska" gester som människor ofta använder för att lyfta fram viktiga platser i tal och semantiska enheter. Dessutom sa respondenterna att det var gester som hjälpte dem att koncentrera sig på vissa delar av föreställningen. Och det var de som kom ihåg dem bäst.

Dessutom påverkade gesterna ordigenkänning.Till exempel upplevde deltagarna en stavelse som stressad om talaren vid det tillfället gjorde en accent med en gest. Om talaren bara uttalade en uppsättning bokstäver, men igen gjorde en accent, uppfattade deltagarna fortfarande det som ett ord med olika vokallängder eller stress, beroende på talarens gest.

"Människor lyssnar inte bara med sina öron, utan också med sina ögon.Dessa resultat visar för första gången att gester påverkar vilka ljud vi hör." Forskarna tror att effekten kan vara starkare i vardagen, där talet vanligtvis är mindre begripligt än under experimentet i laboratoriet. Så i bullriga miljöer kan gester vara användbara.”

Hart Rutger Bosker, studieförfattare från Society for Scientific Research. Max Planck

Sådana studier, enligt forskare,förbättra taligenkänningssystem. Eftersom icke-verbala kommunikationsmedel - ansiktsuttryck och gester - påverkar både uppfattningen av tal och dess semantiska belastning. Teknik bör inte bara lära sig att känna igen tonens intonation eller tempo, utan också hur talaren förbereder information genom gester.

Se även:

Forskare har utvecklat en ersättning för relativitetsteorin. Vad är kärnan i "alltingsteorin"?

Abort och vetenskap: vad kommer att hända med barnen som kommer att föda

Ett nytt koncept med en raketmotor med solfack har skapats