Анализът на езика на жестовете и невербалните техники ще бъдат въведени в системите за разпознаване на реч

Самото изследване е посветено на възприемането от хората на информацията, която се изговаря на глас, както и на оценката

влияние на жестовете.Доброволците бяха помолени да анализират видеоклипове на хора, които говорят. Лицата на говорещите бяха скрити, но участниците в проучването можеха да видят жестовете на говорещите. Повечето слушатели обърнаха внимание на жестовете „ритъм“, които хората често използват, за да подчертаят важни места в речта и семантичните единици. Освен това респондентите казаха, че жестовете са им помогнали да се концентрират върху определени части от изпълнението. И те бяха тези, които ги помнеха най-добре.

Освен това жестовете засегнаха разпознаването на думи.Например, участниците възприемат сричка като подчертана, ако в този момент ораторът прави акцент с жест. Ако ораторът произнася само набор от букви, но отново прави акцент, тогава участниците в изследването все още го възприемат като дума с различна дължина на гласните или стрес, в зависимост от жеста на говорещия.

„Хората слушат не само с ушите си, но и с очите си.Тези резултати показват за първи път, че жестовете влияят върху звуците, които чуваме." Изследователите смятат, че ефектът може да е по-силен в ежедневието, където речта обикновено е по-малко разбираема, отколкото по време на експеримента в лабораторията. Така че в шумна среда жестовете могат да бъдат полезни.

Харт Рутгер Боскер, автор на изследването от Обществото за научни изследвания. Макс Планк

Подобни изследвания, според учените,подобряване на системите за разпознаване на реч. Тъй като невербалните средства за комуникация - мимики и жестове - засягат както възприемането на речта, така и нейното семантично натоварване. Технологията трябва не само да се научи да разпознава интонацията или темпото на речта, но и как ораторът подготвя информация чрез жестове.

Вижте също:

Учените са разработили заместител на теорията на относителността. Каква е същността на „теорията на всичко“?

Аборт и наука: какво ще се случи с децата, които ще раждат

Създадена е нова концепция за соларен ракетен двигател