Smartfón bol naučený uhádnuť túžby používateľa podľa jeho pohľadu.
To sa môže hodiť, aby hlasový asistent mohol odpovedať na otázku: "Kedy to funguje?"Je to obchod?" Teraz, s takouto požiadavkou, váš smartphone nepochopí, o ktorom "tohto" obchode jeAvšak s novou technológiou vývojárov by zariadenie bolo schopné presne identifikovať zariadenie jednoducho pomocou prednej aj hlavnej kamery.
Для воплощения задумки в реальность инженеры применили iPhone с iOS 13. Именно в этой версии система позволяет одновременно использовать две камеры. Разработчики использовали системный API для отслеживания положения головы, чтобы определять направление взгляда.
Objekty sú rozpoznávané špeciálnym rámcom. Program potom počúva na žiadosť používateľa, porovnáva demonštračné zájazdy s objektmi a až potom vytvára posledný príkaz pre hlasového asistenta.