АИ наочаре научене да "читају са усана" без употребе камере

Истраживачи са Универзитета Цорнелл развили су интерфејс ЕцхоСпеецх за препознавање тихог говора.

који користи акустичку перцепцију ивештачка интелигенција за континуирано препознавање до 31 неизговорене команде на основу покрета усана и уста. Обрада информација се врши локално на паметном телефону, што обезбеђује поверљивост података.

ЕцхоСпеецх наочаре су опремљене паром микрофона извучници који су мањи од гумице на крају оловке и не користе камеру. Уређај шаље и хвата акустичне таласе који указују на промене у динамици мишића лица и уста. Алгоритам дубоког учења анализира ове ехо профиле у реалном времену са тачношћу од око 95%.

Како функционише ЕцхоСпеецх. Слика: Руидонг Зханг ет ал.

Примљени подаци се преносе преко Блуетоотх-а нау реалном времену на паметном телефону, обрађено и ускладиштено локално на уређају. Програмери наводе да ЕцхоСпеецх-у треба само неколико минута да се обучи за одређеног корисника.

За људе који не могу да говоре, ова технологија тихог говора може бити одличан синтисајзер гласа. Она може пацијентима вратити њихов глас.

Руидонг Зханг, ко-програмер

Већина тихих технологија за препознавање говораограничени су на одабрани скуп унапред дефинисаних команди и захтевају од корисника и њиховог саговорника да гледају или носе камеру. Ово значајно компликује употребу таквих уређаја. Поред тога, велики проток података захтева обраду у облаку, што нарушава приватност корисника.

У свом тренутном облику, ЕцхоСпеецх може битиКористите за комуникацију са другима путем паметног телефона на местима где је говор незгодан или неприкладан, као што су бучни ресторан или тиха библиотека. Интерфејс за тихи говор се такође може упарити са оловком и софтвером за дизајн као што је ЦАД, што практично елиминише потребу за тастатуром и мишем, додају програмери.

Опширније:

Научници су открили природу чудних радио сигнала са планете сличне Земљи

Над Италијом се разбуктао црвени ореол. Сада је објашњена његова природа

Веб је пронашао најстарију црну рупу у свемиру