Smarttelefonen har blitt lært å gjette brukerens ønsker ved blikket.
Dette kan være nyttig slik at stemmeassistenten kan svare på spørsmålet: "Når fungerer det?"Er dette butikken?» Nå, med en slik forespørsel, vil ikke smarttelefonen din forstå hvilken "denne" butikken handler omImidlertid, med den nye teknologien til utviklerne, vil enheten kunne identifisere etableringen nøyaktig ved å bruke både front- og hovedkameraene.
For å gjøre ideer til virkelighet, ingeniørerbrukt en iPhone med iOS 13. Det er i denne versjonen at systemet lar deg bruke to kameraer samtidig. Utviklerne brukte systemets API for å spore hodeposisjonen for å bestemme blikkets retning.
Objekter anerkjennes av en spesiell ramme. Så lytter programmet til brukerens forespørsel, sammenligner de demonstrative pronomenene med objektene, og først etter det danner den endelige kommandoen for taleassistenten.