Смартфоны научились угадывать желания пользователя по взгляду

Инженеры научили смартфоны угадывать запросы пользователей по одному взгляду. Специальный алгоритм отслеживает, куда смотрит человек, а после на основе этого управляет командами для голосового помощника. Такая опция может быть полезна, чтобы голосовой помощник мог ответить на такой вопрос, как, например, «во сколько закрывается этот магазин?». Сегодня такой запрос не позволит смартфону понять, о каком именно магазине идет речь. Тем не менее, благодаря новой технологии разработчиков, устройство сможет точно определять учреждение, просто используя обе камеры – как переднюю, так и основную, сообщается на портале chrisharrison.net.

Чтобы воплотить идеи в реальность, инженеры использовали iPhone с iOS 13. Именно в этой версии система позволяет использовать две камеры одновременно. Разработчики использовали системный API для отслеживания положения головы, чтобы определить направление взгляда. Объекты распознаются специальным фреймворком. Затем программа прослушивает запрос пользователя, сравнивает указательные местоимения с объектами и только после этого формирует окончательную команду для голосового помощника.

Ранее компания Samsung научила смартфоны распознавать имитацию набора текста. Предложенная технология носит название SelfieType. В его основу заложено использование фронтальной камеры устройства и искусственного интеллекта, который преобразует движения пальцев в текст.