Научили смо да препознајемо језик знакова у видео позивима

Истраживачи су представили систем детекције знаковног језика у реалном времену. Она може рећи када

саговорник покушава нешто да каже или самопомера тело, главу, руке. Научници примећују да се овај задатак може чинити лаким за особу, али раније такав систем није био доступан ни у једној од услуга за видео позиве – сви они реагују на било који звук или људски гест.

Гоогле развој је у стању да развије нови развојурадите то са великом ефикасношћу и малом кашњењем. Иако истраживачи примећују да откривање знаковног језика доводи до кашњења или погоршања квалитета видео записа, овај проблем се може решити, а сам модел остаје лаган и поуздан.

Систем прво проводи видео кроз модел подпод називом ПосеНет, који процењује положај тела и удова у сваком оквиру. Поједностављене визуелне информације шаљу се моделу обученом за позиционирање података са видео записа људи који користе језик знакова и упоређују слику са начином на који људи обично приказују одређене речи.

Модел правилно идентификује речи и изразе саТачност 80%, а уз додатну оптимизацију може да достигне 91,5%. С обзиром на то да откривање „активног звучника“ у већини услуга функционише са закашњењем, истраживачи верују да је реч о веома великим бројевима.

Погледајте и:

На Земљи је могуће створити термонуклеарни реактор. Какве ће бити последице?

Испоставило се да је глечер Судњег дана опаснији него што су научници мислили. Кажемо главно

Трећег дана болести, већина пацијената са ЦОВИД-19 губи смрад и често пате од цурења из носа