تعلم الذكاء الاصطناعي ترجمة الكلام إلى فيديو بلغة الإشارة

لقد تعلم نموذج يعتمد على الذكاء الاصطناعي (AI) كيفية إنشاء مقاطع فيديو واقعية

مترجمو لغة الإشارة. تقوم هذه الصور الرمزية بترجمة الكلام إلى لغة في الوقت الفعلي ويمكنها تحسين وصول المستخدمين إلى العشرات من المصادر.

بن ساندرز من جامعة سارياستخدم (المملكة المتحدة) وزملاؤه شبكة عصبية تحول اللغة المنطوقة إلى لغة إشارة. يربط نظام SignGAN بين هذه العلامات ونموذج ثلاثي الأبعاد للهيكل العظمي البشري. قام الفريق بتدريب الذكاء الاصطناعي على الفيديو من مترجمين حقيقيين للغة الإشارة ، وقاموا بتدريسه لإنشاء فيديو واقعي من الصور.

أجهزة ايكيا الذكية مقترنة بالسيناريوهات

في وقت سابق ، توصلت Google إلى نموذج يمكنه ذلكقراءة لغة الإشارة أثناء مكالمات الفيديو. يمكن للذكاء الاصطناعي تحديد "الحديث النشط" ، لكنه يتجاهل المحاور إذا حرك يديه أو رأسه فقط.

قدم الباحثون نظام الكشفلغة الإشارة في الوقت الحقيقي. يمكنها التمييز عندما يحاول المحاور أن يقول شيئًا ما أو يحرك جسده ورأسه وذراعيه. يلاحظ العلماء أن هذه المهمة قد تبدو سهلة بالنسبة لأي شخص ، ولكن في السابق لم يكن هناك مثل هذا النظام في أي من خدمات مكالمات الفيديو - فهم جميعًا يستجيبون لأي صوت أو إيماءة لشخص ما.

اقرأ أيضا

أكدت صور الأقمار الصناعية أن مناخ الأرض يتغير بشكل غير متساو

العثور على المملكة المزعومة للحثيين المختفين. ماذا وجد علماء الآثار؟

يمكن للألماس النانوي الكمومي تحسين دقة الاختبارات الطبية