Соцсеть виртуальной реальности VRChat пополнилась бета-версией отслеживания пальцев для очков Quest 2 и Quest Pro. С ней пользователи могут управлять интерфейсом и взаимодействовать друг с другом при помощи жестов, без контроллеров.
Чтобы ручное управление плавно вошло в жизнь обитателей метаверса, разработчики выпустили видеоруководство с подробным описанием всех доступных действий. Сведение вместе большого и среднего пальцев на левой руке, например, контролирует плавное движение, сведение безымянного и большого пальца левой руки отключает и включает микрофон, а те же пальцы на правой руке управляют прыжками.
Важность трекинга рук в социальных приложениях выходит за рамки простого отказа от контроллеров. Это расширение возможностей вербального общения и языки жестов, включая коммуникацию глухонемых людей. Сочетание с отслеживанием лицевой мимики в будущих реализациях софта для таких очков, как Quest Pro и Pico 4 Enterprise, переведут всё это на следующий уровень.
Сообщества людей с особенностями речи и слуха формируют заметный запрос на развитие метаверсов в сторону доступности. Технологии дорастают до уровня, когда его, наконец, можно реализовать очень близко к реальной жизни — и даже преумножить. Большие перспективы здесь открывают интерпретация жестов с переводом в текст или речь и обратный перевод речи в жесты.
Доступная среда в виаре, тем не менее, сталкивается с другими проблемами, решить который может только технологический прогресс. Например, нерешённой остаётся задача правильного отслеживания жестов с перекрытием, когда руки или пальцы закрывают друг друга. Учитывая ограниченность обзора камер автономных устройств, полагаться здесь приходится на предиктивные нейросетевые алгоритмы. Их точность пока оставляет желать лучшего.
Экспериментальную поддержку отслеживания рук можно проверить в открытой бета-версии VRChat 2022.4.1.
Не пропускайте важнейшие новости о дополненной и виртуальной реальности — подписывайтесь на Голографику в Telegram, ВК и Twitter! Поддержите проект на Boosty.
Далее: Все тренировки в Supernatural получили одноручный режим
