Исследователи из Корнеллского университета в Нью-Йорке разработали прототип технологии, похожей на сонар, которая может заменить камеры для отслеживания движений глаз. Он использует крошечные динамики, которые излучают звук для каждого глаза на частотах выше 18 кГц. Это за пределами слышимости большинства людей.
Излучатели направляют звуковые волны на лицо и улавливают отражения четырьмя микрофонами по разным сторонам очков. Ключевым звеном работы стал нейросетевой алгоритм интерпретации отражённых колебаний GazeTrak, который определяет по ним направление взгляда.
По мнению исследовательской группы, технология имеет ряд преимуществ: она снижает энергопотребление по сравнению с системами на основе камер и обеспечивает большую конфиденциальность, поскольку камеры не ведут постоянную запись. Она потенциально может снизить производственные затраты и вес очков.
В тестах с участием 20 человек сонарное отслеживание глаз показало точность до 3,6 градусов. Этот показатель отстаёт от уровня современных высококлассных устройств, таких как Quest и Vision Pro. Например, у Quest Pro средняя точность равна 1,6 градуса. Однако отставание не драматичное, точности должно хватить для приложений виртуальной реальности.
Тем не менее, у системы есть существенный недостаток: поскольку формы глазных яблок у людей уникальны, модель искусственного интеллекта в GazeTrak приходится обучать под каждого пользователя. Чтобы коммерциализировать технологию, необходимо собрать достаточно данных для создания универсальной модели.
С полным отчётом об исследовании можно познакомиться в PDF.
Не пропускайте важнейшие новости о дополненной и виртуальной реальности — подписывайтесь на Голографику в Telegram, ВК и Twitter! Поддержите проект на Boosty.
Далее: VoxelSensors купила разработки EyeWay Vision в области визуализации дополненной реальности
