L'analyse de la langue des signes et des techniques non verbales sera introduite dans les systèmes de reconnaissance vocale

L'étude elle-même était consacrée à la perception des informations prononcées à voix haute, ainsi qu'à l'évaluation

influence des gestes.Des volontaires ont été invités à analyser des vidéos de personnes parlant. Les visages des orateurs étaient cachés, mais les participants à l'étude pouvaient voir les gestes des orateurs. La plupart des auditeurs ont prêté attention aux gestes « rythmiques » que les gens utilisent souvent pour mettre en évidence des endroits importants dans le discours et les unités sémantiques. De plus, les personnes interrogées ont déclaré que ce sont les gestes qui les aidaient à se concentrer sur certaines parties du spectacle. Et ce sont eux qui s’en souvenaient le mieux.

De plus, les gestes ont affecté la reconnaissance des mots.Par exemple, les participants ont perçu une syllabe comme accentuée si à ce moment-là le locuteur faisait un accent avec un geste. Si le locuteur ne prononçait qu'un ensemble de lettres, mais faisait à nouveau un accent, les participants à l'étude le percevaient toujours comme un mot avec différentes longueurs de voyelle ou un stress, selon le geste du locuteur.

« Les gens n’écoutent pas seulement avec leurs oreilles, mais aussi avec leurs yeux.Ces résultats montrent pour la première fois que les gestes influencent les sons que nous entendons. » Les chercheurs pensent que l’effet pourrait être plus fort dans la vie quotidienne, où la parole est généralement moins intelligible que lors de l’expérience en laboratoire. Alors dans des environnements bruyants, les gestes peuvent être utiles.

Hart Rutger Bosker, auteur de l'étude de la Society for Scientific Research. Max Planck

De telles études, selon les scientifiques,améliorer les systèmes de reconnaissance vocale. Puisque les moyens de communication non verbaux - expressions faciales et gestes - affectent à la fois la perception de la parole et sa charge sémantique. La technologie ne doit pas seulement apprendre à reconnaître l'intonation ou le tempo de la parole, mais aussi comment le locuteur prépare l'information par des gestes.

Voir aussi:

Les scientifiques ont développé un substitut à la théorie de la relativité. Quelle est l'essence de la «théorie de tout»?

Avortement et science: qu'arrivera-t-il aux enfants qui accoucheront

Un nouveau concept de moteur de fusée à éruption solaire a été créé