手話と非言語技術の分析が音声認識システムに導入されます

この研究自体は、声に出して話す情報に対する人々の認識と評価に焦点を当てています

ボランティアは、人々のスピーチのビデオ録画を分析するように依頼されました.話者の顔は隠されていましたが、研究の参加者は話者のジェスチャーを見ることができました。ほとんどのリスナーは、人々がよく使う「リズム」ジェスチャーに注意を払っていましたさらに、回答者は、スピーチの特定の部分に集中するのに役立ったのはジェスチャーだったと述べています。そして、彼らは彼らを最もよく覚えていました。

さらに、ジェスチャーは単語認識に影響を与えました。たとえば、参加者は、その瞬間に話者がジェスチャーでアクセントを付けた場合、音節が強調されていると感じました。話者が一組の文字だけを発音したが、再びアクセントを付けた場合、研究参加者は、話者のジェスチャーに応じて、母音の長さまたはストレスが異なる単語としてそれを認識しました。

「人は耳だけでなく、目で聞いています。これらの結果は、ジェスチャーが影響を与えることを初めて示しています研究者は、実験室での実験中よりも、一般的に発話が聞き取りにくい日常生活の方が強い場合があります。ですから、騒がしい環境では、ジェスチャーが役に立ちます」

Харт Рутгер Боскер, автор исследования из Общества научных исследования им. Макса Планка

科学者によると、そのような研究は、音声認識システムを改善します。非言語的コミュニケーション手段（顔の表情とジェスチャー）は、音声の知覚とその意味的負荷の両方に影響を与えるためです。テクノロジーは、スピーチのイントネーションやテンポを認識することだけでなく、話し手がジェスチャーを通じて情報を準備する方法も学ぶ必要があります。

また見なさい：

科学者たちは、相対性の理論に代わるものを開発しました。 「すべての理論」の本質は何ですか？

中絶と科学：出産する子供たちに何が起こるか

太陽フレアロケットエンジンの新しいコンセプトが作成されました