Viedtālrunis tika iemācīts uzminēt lietotāja vēlmes, skatoties uz tām. Īpašs algoritms izseko, kur jūs skatāties
Tas var būt noderīgi balsijAsistents varēja atbildēt uz jautājumu: "Līdz cikiem šis veikals ir atvērts?" Tagad ar šādu pieprasījumu jūsu viedtālrunis nesapratīs, par kuru “šo” veikalu mēs runājam. Tomēr, izmantojot izstrādātāju jauno tehnoloģiju, ierīce spētu precīzi identificēt iestādi, vienkārši izmantojot abas kameras: priekšējo un galveno.
Lai idejas pārvērstu realitātē, inženieriizmantoja iPhone ar iOS 13. Tieši šajā versijā sistēma ļauj vienlaikus izmantot divas kameras. Izstrādātāji izmantoja sistēmas API, lai izsekotu galvas stāvokli, lai noteiktu skatiena virzienu.
Objekti tiek atzīti ar īpašu ietvaru. Tad programma uzklausa lietotāja pieprasījumu, salīdzina demonstratīvos vietniekvārdus ar objektiem un tikai pēc tam veido balss palīga galīgo komandu.