Когда человек постукивает пальцами по любой поверхности, каждый палец создаёт вибрацию уникального характера, которая распространяется на запястье через кости. Исследователи Федерального технологического института в Цюрихе (ETH Zurich) использовали это открытие в разработке браслета, обеспечивающего интуитивно понятное ручное взаимодействие с компьютером в виртуальном рабочем пространстве.
Проект «TapID» должен помочь с решением большой проблемы виртуальной реальности: человек в ней отрезан в том числе от реальной клавиатуры с её физической отдачей и высокой скоростью набора. Отсутствие возможности быстро и точно набирать текст блокирует использование очков во многих видах деятельности, включая простые рабочие сценарии, и ограничивает их проникновение на рынок. Тем не менее, ВР сохраняет большой потенциал развития, поскольку не ограничивает восприятие контента рамками мониторов, открывая естественное взаимодействие с цифровыми объектами при помощи всего тела и даже напрямую головного мозга.
Кристиан Хольц (Christian Holz), профессор Института интеллектуальных интерактивных систем ETH Zurich, отмечает, что если работать с ВР-контроллерами, быстро устают руки, не говоря о том, что печатать приходится, будто двумя пальцами и без натуральной отдачи, а если проецировать на поверхность любого объекта клавиатуру, камеры очков без дополнительных трекеров не могут считывать мелкие движения пальцев, обычные для клавиатурного набора.
TapID представляет собой резиновые браслеты с несколькими датчиками для обеих рук. Датчики определяют, когда и каким пальцем рука касается поверхности. Браслет обнаруживает различия в профиле вибрации, которая передаётся на кости запястья, позволяя идентифицировать каждый палец. Конвейер машинного обучения обрабатывает данные в реальном времени. В сочетании со встроенными в очки камерами, которые фиксируют положение рук, TapID генерирует «чрезвычайно точный» ввод.
Исследователи показали работу браслетов в нескольких приложениях. Особенно хорошо, по мнению Хольца, преимущества TapID демонстрирует виртуальное пианино. С ним важны как пространственная точность, так и синхронизация. Момент прикосновения к клавишам должен быть зафиксирован с максимальной точностью. Датчики на запястье делают это более надёжно, чем камера, и не будут большой нагрузкой на кошельки пользователей: изготовление браслета подобного типа должно стоить всего несколько швейцарских франков.
Исследовательская группа также сравнила свою систему с существующей технологией. В технической оценке с 18 участниками удалось показать, что технология TapID работает не только со специально разработанной электроникой, но и пригодна для переноса в обычные фитнес-браслеты и смарт-часы, оснащённые датчиками инерции.
Исследователи планируют продолжать развитие технологии с большим количеством испытуемых и разрабатывать новые сценарии использования TapID в повышении производительности и офисах будущего.
Не пропускайте важнейшие новости о дополненной и виртуальной реальности — подписывайтесь на Голографику в Telegram, ВК, Twitter и Facebook!
Далее: Facebook рассказала о перспективах ЭМГ-контроллеров для дополненной и виртуальной реальности
