Smarttelefonen fick lära sig att gissa användarens önskemål vid sikte

Smarttelefonen lärdes att gissa användarens önskemål genom att titta på dem. En speciell algoritm spårar var du tittar

en person, och utifrån detta styr kommandon för röstassistenten.

Detta kan vara användbart för röstenAssistenten kunde svara på frågan: "Till vilken tid är den här butiken öppen?" Nu, med en sådan begäran, kommer din smartphone inte att förstå vilken "denna" butik vi pratar om. Men med utvecklarnas nya teknik skulle enheten kunna identifiera anläggningen exakt genom att använda båda kamerorna: den främre och den huvudsakliga.

För att omsätta idéer till verklighet, ingenjöreranvände en iPhone med iOS 13. Det är i denna version som systemet låter dig använda två kameror samtidigt. Utvecklarna använde systemets API för att spåra huvudets position för att bestämma blickens riktning.

Objekt känns igen av en speciell ram. Sedan lyssnar programmet på användarens begäran, jämför de demonstrativa pronomen med objekten, och först därefter bildar det slutliga kommandot för röstassistenten.