Исследование группы инженеров из Университетов Нью-Йорка, Миннесоты и Google пролило свет на новый способ взаимодействия с объектами реального мира в очках смешанной реальности. В его основу легли цифровые прокси — виртуальные копии предметов, до которых не дотянуться рукой.
Авторы работы поставили перед собой задачу преодолеть разрыв между пространством на расстоянии вытянутой руки и удалёнными объектами. Когда реальные вещи рядом, их можно коснуться, с ними можно взаимодействовать непосредственно. Однако на удалении они теряют свои свойства: для использования придётся подходить. В мире цифровых интерфейсов это неправильная логика, ведь ничто не должно мешать приближать объекты и приближаться к ним, оставаясь на месте в реальной реальности.
Reality Proxy представляет собой интерфейс, который нивелирует расстояние до реальных объектов. Используя камеры очков, нейросети, навигационные данные и ввод от пользователя, он мгновенно формирует изображение интересующих областей в масштабе кукольного домика. Так можно выбрать физический объект и использовать его либо информацию о нём.
В качестве примера исследователи приводят книги на полке. Выделив одну через Reality Proxy можно начать её чтение в цифровой копии. Идею можно распространить на управление роями дронов, выбирая их в пространстве растягиванием над ними виртуальной рамки, как над юнитами в стратегической игре. В навигации это помогло бы увидеть удалённую часть улицы или здания или управлять далёкими устройствами через интернет вещей, если это возможно без проприетарных приложений по универсальному протоколу. Если вы видите объект, вы можете разглядеть его лучше и затем использовать привязанные функции.
Результатом является расширение эффективной области и вариантов взаимодействия с объектами в смешанной реальности и повышение его точности. Авторы статьи говорят о сохранении естественной ментальной модели прямого манипулирования.
С полным отчётом об исследовании можно ознакомиться в PDF.
Не пропускайте важнейшие новости о дополненной и виртуальной реальности — подписывайтесь на Голографику в Telegram, ВК и Twitter! Поддержите проект на Boosty.
Далее: Учёные МГППУ сократили количество ложных срабатываний в трекинге глаз
