הסמארטפון לימדו לנחש את רצונותיו של המשתמש על ידי התבוננות בהם. אלגוריתם מיוחד עוקב אחר היכן אתה מסתכל
זה עשוי להיות שימושי לקולהסייעת הצליחה לענות על השאלה: "עד מה השעה החנות הזו פתוחה?" עכשיו, עם בקשה כזו, הטלפון החכם שלך לא יבין על איזו חנות "הזו" אנחנו מדברים. עם זאת, עם הטכנולוגיה החדשה של המפתחים, המכשיר יוכל לזהות במדויק את הממסד פשוט על ידי שימוש בשתי המצלמות שלו: הקדמית והראשית.
להפוך רעיונות למציאות, מהנדסיםהשתמש באייפון עם iOS 13. בגרסה זו המערכת מאפשרת לך להשתמש בשתי מצלמות בו זמנית. המפתחים השתמשו ב-API של המערכת כדי לעקוב אחר מיקום הראש כדי לקבוע את כיוון המבט.
חפצים מוכרים במסגרת מיוחדת. ואז התוכנית מקשיבה לבקשת המשתמש, משווה את הכינויי ההפגנה עם האובייקטים ורק לאחר מכן מהווה את הפקודה הסופית לעוזר הקולי.