Проект Driver4VR открыл трекинг всего тела для VRChat. Нужен только смартфон

23189

Приложение Driver4VR, которое вышло на рынок в 2017 году с эмуляцией Vive Tracker через Kinect, открыло новое направление работы: трекинг тела камерой смартфона с передачей данных в приложение VRChat на Quest.

Современные системы виртуальной реальности, несмотря на доступность трекеров и нейросетей, в большинстве случаев фокусируются на отслеживании головы и рук, оставляя нижнюю половину тела без внимания. VRChat, благодаря популярности и программным возможностям, позволяет использовать дополнительное оборудование. Чаще всего это означает добавление трёх или более трекеров Vive или их аналогов. Общая стоимость трекеров и базовых станций легко превышает цену очков.

Driver4VR предлагает более доступную альтернативу без докупания гаджетов. Нужно устройство на iOS 12.0 или более поздней либо Android от версии 5.1. Компьютерное зрение в реальном времени потребует мощного процессора, поэтому лучше рассчитывать на среднюю и высокую ценовую категорию.

Приложение понимает поток с фронтальной и тыльной камеры. Фронтальная, несмотря на более низкое качество видео, обычно имеет более широкое поле зрения, а возможность видеть результат трекинга на экране упрощает поиск правильного положения для телефона. Похоже, что приложение не позволяет выбирать сверхширокоугольные камеры на тыльных модулях, по крайней мере, на Android.

Driver4VR подключается к VRChat на Quest через OSC через ввод IP-адреса очков. Его можно найти в настройках Wi-Fi, выбрав сеть, к которой подключено устройство.

Качество отслеживания Driver4VR не приближается к тому, которого вы ожидаете от специальных отдельных трекеров, есть заметная задержка. Отслеживание работает только при положении прямо перед телефоном, без поворотов и отклонений. Но для многих пользователей VRChat такой опыт всё равно лучше, чем урезанный опыт с одними очками и контроллерами.

Приложение можно бесплатно скачать в App Store и Google Play, но для начала оно выдаст доступ только к отслеживанию бёдер. Чтобы получить отслеживание ног, нужно заплатить $17 на iOS и $16 на Android. Разработчик планирует увеличить количество точек отслеживания.

Не пропускайте важнейшие новости о дополненной и виртуальной реальности — подписывайтесь на Голографику в Telegram, ВК и Twitter! Поддержите проект на Boosty.

Далее: Новый SDK дополненной реальности MAXST предлагает сканировать пространство лидарами