Smartphonen blev lært at gætte brugerens ønsker ved at se på dem. En speciel algoritme sporer, hvor du kigger
Dette kan være nyttigt for stemmenAssistenten var i stand til at svare på spørgsmålet: "Indtil hvad tid er denne butik åben?" Nu, med en sådan anmodning, vil din smartphone ikke forstå, hvilken "denne" butik vi taler om. Men med den nye teknologi fra udviklerne ville enheden være i stand til nøjagtigt at identificere virksomheden ved blot at bruge begge dets kameraer: fronten og de vigtigste.
For at gøre ideer til virkelighed, ingeniørerbrugt en iPhone med iOS 13. Det er i denne version, at systemet giver dig mulighed for at bruge to kameraer samtidigt. Udviklerne brugte systemets API til at spore hovedpositionen for at bestemme blikkets retning.
Objekter genkendes af en særlig ramme. Derefter lytter programmet til brugerens anmodning, sammenligner de demonstrative pronomen med objekterne og danner først derefter den endelige kommando for stemmeassistenten.