Смартфон навчили вгадувати бажання користувача на погляд. Спеціальний алгоритм відстежує, куди дивиться
Це може стати в нагоді для того, щоб голосовийасистент зміг відповісти на запитання: «До якої години працює цей магазин?». Зараз при такому запиті ваш смартфон не зрозуміє, про який цей магазин йдеться. Однак з новою технологією розробників, пристрій міг би визначити заклад точно, просто використовуючи обидві свої камери: і фронтальну, і основну.
Для здійснення задуму в реальність інженеризастосували iPhone з iOS 13. Саме в цій версії система дозволяє одночасно використовувати дві камери. Розробники використовували системний API для відстеження положення голови, щоб визначити напрям погляду.
Об'єкти розпізнає спеціальний фреймворк. Потім програма слухає запит користувача, зіставляє вказівні займенники з об'єктами і тільки після цього формує остаточну команду для голосового помічника.