تعلمنا التعرف على لغة الإشارة في مكالمات الفيديو

قدم الباحثون نظامًا للكشف عن لغة الإشارة في الوقت الفعلي. يمكنها معرفة متى

يحاول المحاور أن يقول شيئًا ما أو فقطيحرك الجسم والرأس والذراعين. ويشير العلماء إلى أن هذه المهمة قد تبدو سهلة بالنسبة للإنسان، لكن في السابق لم يكن مثل هذا النظام متوفرا في أي من خدمات مكالمات الفيديو - فكلها تتفاعل مع أي صوت أو إيماءة بشرية.

تطوير جديد من قبل باحثي Google قادر على ذلكيمكنك فعل ذلك بكفاءة عالية وزمن انتقال منخفض. بينما لاحظ الباحثون أن اكتشاف لغة الإشارة يؤدي إلى تأخير أو تدهور جودة الفيديو ، يمكن حل هذه المشكلة ، ويظل النموذج نفسه خفيفًا وموثوقًا.

يقوم النظام أولاً بتشغيل الفيديو من خلال النموذج الموجود تحتهتسمى PoseNet ، والتي تقيم وضع الجسم والأطراف في كل إطار يتم إرسال المعلومات المرئية المبسطة إلى نموذج تم تدريبه على تحديد موقع البيانات من مقاطع فيديو لأشخاص يستخدمون لغة الإشارة ويقارن الصورة بكيفية عرض الأشخاص لكلمات معينة عادةً.

يحدد النموذج الكلمات والتعبيرات بشكل صحيح باستخدامدقة 80٪ ، ومع التحسين الإضافي يمكن أن تصل إلى 91.5٪. بالنظر إلى أن اكتشاف "المتحدث النشط" في معظم الخدمات يعمل مع التأخير ، يعتقد الباحثون أن هذه أعداد كبيرة جدًا.

انظر أيضا:

من الممكن إنشاء مفاعل نووي حراري على الأرض. ما هي العواقب؟

تبين أن نهر Doomsday الجليدي أكثر خطورة مما اعتقد العلماء. نقول الشيء الرئيسي

في اليوم الثالث من المرض ، يفقد معظم مرضى COVID-19 حاسة الشم لديهم وغالبًا ما يعانون من سيلان الأنف