Video görüşmelerinde işaret dilini belirlemeyi öğrendik

Araştırmacılar gerçek zamanlı bir işaret dili algılama sistemi sundular. Ne zaman olduğunu söyleyebilir

muhatap bir şey söylemeye çalışıyor ya da sadecevücudu, başı, kolları hareket ettirir. Bilim adamları, bu görevin bir kişi için kolay görünebileceğini ancak daha önce hiçbir görüntülü arama hizmetinde böyle bir sistemin mevcut olmadığını, bunların hepsinin herhangi bir sese veya insan hareketine yanıt verdiğini belirtiyor.

Google araştırmacıları tarafından yapılan yeni geliştirme şu özelliklere sahiptir:bunu büyük verimlilik ve düşük gecikme süresiyle yapın. Araştırmacılar, işaret dilinin tespit edilmesinin gecikmeye veya video kalitesinde bozulmaya yol açtığını belirtse de, bu sorun çözülebilir ve modelin kendisi hafif ve güvenilir kalır.

Sistem ilk olarak videoyu aşağıdaki model aracılığıylaHer çerçevede vücudun ve uzuvların konumunu değerlendiren PoseNet olarak adlandırılır. Basitleştirilmiş görsel bilgiler, işaret dili kullanan kişilerin videolarından alınan verileri konumlandırmak için eğitilmiş bir modele gönderilir ve görüntüyü, insanların genellikle belirli kelimeleri nasıl görüntülediğiyle karşılaştırır.

Model, kelimeleri ve ifadeleri doğru bir şekilde tanımlar.% 80 doğruluk ve ek optimizasyonla% 91,5'e ulaşabilir. Çoğu hizmette "aktif konuşmacı" tespitinin gecikmelerle çalıştığını düşünen araştırmacılar, bunların çok büyük sayılar olduğuna inanıyorlar.

Ayrıca bakınız:

Yeryüzünde termonükleer reaktör oluşturmak mümkündür. Sonuçlar ne olacak?

Kıyamet buzulu bilim adamlarının sandığından daha tehlikeli çıktı. Ana şeyi söyleriz

Hastalığın 3. gününde, COVID-19 hastalarının çoğu koku alma duyusunu kaybeder ve sıklıkla burun akıntısı çekerler