Analyse van gebarentaal en non-verbale technieken zullen worden geïntroduceerd in spraakherkenningssystemen

Het onderzoek zelf was gewijd aan de perceptie van mensen van hardop uitgesproken informatie, evenals aan de beoordeling ervan

invloed van gebaren.Vrijwilligers werd gevraagd video's van sprekende mensen te analyseren. De gezichten van de sprekers waren verborgen, maar deelnemers aan de studie konden de gebaren van de sprekers zien. De meeste luisteraars besteedden aandacht aan de ‘ritmische’ gebaren die mensen vaak gebruiken om belangrijke plaatsen in spraak en semantische eenheden te benadrukken. Bovendien zeiden de respondenten dat het gebaren waren die hen hielpen zich op bepaalde delen van de voorstelling te concentreren. En zij waren degenen die zich hen het beste herinnerden.

Bovendien hadden de gebaren invloed op de woordherkenning.Deelnemers ervoeren bijvoorbeeld een lettergreep als beklemtoond als de spreker op dat moment een accent maakte met een gebaar. Als de spreker slechts een reeks letters uitsprak, maar opnieuw een accent maakte, zagen de deelnemers aan het onderzoek het nog steeds als een woord met verschillende klinkerlengtes of klemtoon, afhankelijk van het gebaar van de spreker.

“Mensen luisteren niet alleen met hun oren, maar ook met hun ogen.Deze resultaten laten voor het eerst zien dat gebaren invloed hebben op de geluiden die we horen." De onderzoekers geloven dat het effect sterker kan zijn in het dagelijks leven, waar spraak doorgaans minder verstaanbaar is dan tijdens het experiment in het laboratorium. In rumoerige omgevingen kunnen gebaren dus nuttig zijn.”

Hart Rutger Bosker, studieauteur van de Society for Scientific Research. Max Planck

Dergelijke studies, volgens wetenschappers,verbetering van spraakherkenningssystemen. Omdat non-verbale communicatiemiddelen - gezichtsuitdrukkingen en gebaren - zowel de perceptie van spraak als de semantische belasting ervan beïnvloeden. Technologie moet niet alleen de intonatie of het tempo van de spraak leren herkennen, maar ook hoe de spreker informatie voorbereidt door middel van gebaren.

Zie ook:

Wetenschappers hebben een vervanging voor de relativiteitstheorie ontwikkeld. Wat is de essentie van de "theorie van alles"?

Abortus en wetenschap: wat gebeurt er met de kinderen die zullen bevallen

Er is een nieuw concept van een raketmotor met zonnevlammen ontwikkeld