Analiza limbajului semnelor și a tehnicilor non-verbale vor fi introduse în sistemele de recunoaștere a vorbirii

Studiul în sine a fost dedicat percepției oamenilor despre informațiile rostite cu voce tare, precum și evaluării

influența gesturilor.Voluntarii au fost rugați să analizeze videoclipuri cu oameni care vorbesc. Fețele vorbitorilor au fost ascunse, dar participanții la studiu au putut vedea gesturile vorbitorilor. Majoritatea ascultătorilor au acordat atenție gesturilor de „ritm” pe care oamenii le folosesc adesea pentru a evidenția locurile importante din unitățile de vorbire și semantice. În plus, respondenții au spus că gesturile i-au ajutat să se concentreze asupra anumitor părți ale performanței. Și ei au fost cei care și-au amintit cel mai bine de ei.

În plus, gesturile au afectat recunoașterea cuvintelor.De exemplu, participanții au perceput o silabă ca fiind stresată dacă în acel moment vorbitorul a făcut accent cu un gest. Dacă vorbitorul a pronunțat doar un set de litere, dar a făcut din nou un accent, atunci participanții la studiu l-au perceput încă ca pe un cuvânt cu diferite lungimi vocale sau stres, în funcție de gestul vorbitorului.

„Oamenii ascultă nu numai cu urechile, ci și cu ochii.Aceste rezultate arată pentru prima dată că gesturile influențează sunetele pe care le auzim.” Cercetătorii cred că efectul poate fi mai puternic în viața de zi cu zi, unde vorbirea este de obicei mai puțin inteligibilă decât în ​​timpul experimentului din laborator. Deci, în medii zgomotoase, gesturile pot fi utile.”

Hart Rutger Bosker, autor al studiului de la Societatea pentru Cercetare Științifică. Max Planck

Astfel de studii, potrivit oamenilor de știință,îmbunătățirea sistemelor de recunoaștere a vorbirii. Întrucât mijloacele de comunicare non-verbale - expresiile și gesturile faciale - afectează atât percepția vorbirii, cât și încărcătura sa semantică. Tehnologia nu trebuie doar să învețe să recunoască intonația sau tempo-ul vorbirii, ci și modul în care vorbitorul pregătește informațiile prin gesturi.

Vezi și:

Oamenii de știință au dezvoltat un înlocuitor pentru teoria relativității. Care este esența „teoriei tuturor”?

Avortul și știința: ce se va întâmpla cu copiii care vor naște

A fost creat un nou concept al unui motor rachetă cu rachete solare