Smartphone se naučil odhadovat přání uživatele tím, že se na ně podívá. Speciální algoritmus sleduje, kam se podíváte
To může být užitečné pro hlasAsistentka dokázala odpovědět na otázku: „Do kolika hodin je tento obchod otevřen? Nyní, s takovou žádostí, váš smartphone nebude rozumět, o kterém „tomto“ obchodě mluvíme. S novou technologií vývojářů by však zařízení dokázalo přesně identifikovat provozovnu jednoduše pomocí obou svých kamer: přední i hlavní.
Proměnit myšlenky ve skutečnost, inženýřipoužíval iPhone s iOS 13. Právě v této verzi systém umožňuje používat dva fotoaparáty současně. Vývojáři použili systémové API ke sledování polohy hlavy k určení směru pohledu.
Objekty jsou rozpoznávány zvláštním rámcem. Poté program poslouchá žádost uživatele, porovná demonstrační zájmena s objekty a teprve poté vytvoří poslední příkaz hlasového asistenta.