Чтобы дать возможность отслеживать, где сосредоточены взгляд и внимание владельца, не требуя дорогостоящей обработки или разряда батареи, Apple должна разработать совершенно новую систему технологии отслеживания взгляда для Apple Glass.
В будущих устройствах Apple AR не возникнет проблем с определением, когда вы поворачиваете голову влево или вправо. Гораздо сложнее будет выяснить, когда ваша голова неподвижна, а глаза двигаются.
Итак, если устройство AR представляет вам книгу, было бы хорошо, если бы оно знало, когда вы достигли нижней части страницы. В игре, когда вы охотитесь за сокровищами, это должно быть довольно большое сокровище, если у устройства нет способа точно знать, куда смотрят ваши глаза.
«Метод и устройство для отслеживания взгляда с использованием данных камеры событий», недавно опубликованная патентная заявка, описывает тот факт, что эта функция необходима, но также и то, какие проблемы она приносит. Apple не изобретает колесо с отслеживанием взгляда, но пытается сделать это колесо намного меньше.
«[In typical systems,» a head-mounted device includes an eye tracking system that determines a gaze direction of a user of the head-mounted device,» says Apple. «The eye tracking system often includes a camera that transmits images of the eyes of the user to a processor that performs eye tracking.»
«[However, transmission] изображений с частотой кадров, достаточной для отслеживания взгляда, требуется канал связи со значительной пропускной способностью, — продолжает Apple, — а использование такого канала связи увеличивает тепловыделение и потребление энергии устройством, закрепленным на голове ».
Таким образом, современная технология отслеживания движения глаз обязательно сократит время автономной работы устройства AR. Учитывая, что уже существует компромисс между легкой конструкцией с одним устройством, которую хотел Джони Айв, и более мощной системой с двумя устройствами, которую Apple ранее предпочитала, мощность стоит дорого.
Предлагаемое Apple решение состоит в том, чтобы сократить обработку, необходимую для отслеживания взгляда пользователя, и сделать это путем изменения того, что именно отслеживается. «[One] Метод включает в себя излучение света с регулируемой интенсивностью от множества источников света в направлении глаза пользователя », — говорит Apple.
Деталь из патента, показывающая, как свет может проецироваться на глаз и обнаруживаться отражения
«Способ включает в себя получение данных об интенсивности света, указывающих на интенсивность излучаемого света, отраженного глазом пользователя в форме множества бликов», — продолжает он. «Способ включает в себя определение характеристики отслеживания взгляда пользователя на основе данных интенсивности света».
Таким образом, хотя гарнитура AR не может точно освещать прожектором глаза пользователя, она может излучать некоторое количество света. Система могла бы точно знать, сколько света было использовано и куда он был направлен.
«[Then] множество световых датчиков во множестве соответствующих местоположений [could detect] изменение интенсивности света и указание конкретного местоположения конкретного датчика освещенности, — говорит Apple. — Способ включает определение характеристики отслеживания взгляда пользователя на основе множества сообщений о событиях ».
Это предложение об использовании отраженного света для расчета взгляда является развитием предыдущего патента Apple, связанного с использованием инфракрасного излучателя. Отдельно Apple также ранее исследовала различные системы отслеживания, чтобы оценить доминирование глаз пользователя.
