تم تعليم الهاتف الذكي تخمين رغبات المستخدم من خلال نظراتهم.
يمكن أن يكون هذا مفيدا حتى يتمكن المساعد الصوتي من الإجابة على السؤال: "ما الوقت الذي يعمل؟"هل هذا المتجر؟" الآن ، مع مثل هذا الطلب ، لن يفهم هاتفك الذكي أي متجر "هذا" يدور حولهومع ذلك ، مع التكنولوجيا الجديدة للمطورين ، سيكون الجهاز قادرا على تحديد المؤسسة بدقة ببساطة عن طريق استخدام كل من الكاميرات الأمامية والرئيسية.
لتحويل الأفكار إلى واقع أيها المهندسوناستخدمت جهاز iPhone يعمل بنظام iOS 13. وفي هذا الإصدار يسمح لك النظام باستخدام كاميرتين في وقت واحد. استخدم المطورون واجهة برمجة تطبيقات النظام لتتبع موضع الرأس لتحديد اتجاه النظرة.
يتم التعرف على الكائنات من خلال إطار خاص. ثم يستمع البرنامج لطلب المستخدم ، ويقارن الضمائر التوضيحية مع الكائنات ، وبعد ذلك فقط يشكل الأمر النهائي لمساعد الصوت.