Stereolabs представила решение для позиционного трекинга в Gear VR, но всё сложнее, чем кажется

559

ZED Stereolabs

Компания Stereolabs представила адаптацию своей стереокамеры к очкам виртуальной реальности Gear VR, с помощью которой они получают функцию позиционного трекинга — отслеживания движений тела пользователя в пространстве, благодаря чему значительно обогащаются ощущения от погружения и варианты взаимодействия с виртуальным миром. Обычные потребительские Gear VR «понимают» только движения головы с помощью встроенных инерциальных датчиков.

Небольшой гаджет под названием ZED делает из Gear VR не сравнимого по мощности, но всё же конкурента решениям для автономной виртуальной реальности на базе компьютеров-рюкзаков и очков типа HTC Vive, OSVR HDK или Oculus Rift. Отсутствие проводов позволяет пользователям свободно передвигаться по облачённым в компьютерную графику реальным помещениям, хотя с гарнитурой Samsung качество графики ограничено возможностями мобильного устройства.

Сама камера была представлена в 2015 году и уже попадала в новостные ленты, а новую порцию внимания заслужила именно мобильным решением. Но, согласно официальной странице ZED, с OS X и Android разработчикам недоступно глубинное сканирование через ZED SDK, поскольку для него требуется видеокарта NVIDIA. Очевидно, Stereolabs просто не успела обновить сайт, ведь под видео, опубликованным 21 июня, информация о мобильном позиционном трекинге присутствует. Здесь начинается самое интересное: увиденное в ролике нельзя воспроизвести с помощью SDK, пока вы не пропишете отдельное UDP-соединение с нужным оборудованием. Обычно разработчики подключают камеру к ноутбуку по 15-метровому кабелю стандарта USB 3 и отправляют данные на смартфон по Wi-Fi, но в ролике они использовали поддерживаемую SDK платформу визуальных вычислений NVIDIA Jetson TX1, которую закрепили на ремне пользователя и соединили с ZED проводом.  

Информация с двух RGB-камер подаётся на внешний графический процессор, ресурсы которого тратятся на картографирование окружающего пространства. Обработку осуществляет фирменное программное обеспечение. Stereolabs уверяет, что технология работает даже при ярком естественном освещении, которое является врагом инфракрасных датчиков, таких как Microsoft Kinect. Эксперименты с камерами ZED уже включают их использование в робототехнике, беспилотных летательных аппаратах и автомобилях с автопилотом.

Программное обеспечение камеры использует технологию, называемую «стерео-SLAM» (Simultaneous Localization and Mapping), для отображения перед ней трёхмерного мира в реальном времени и понимания того, как пользователь перемещается в пространстве, — пишет Stereolabs.

Stereolabs

Характеристики устройства включают разрешение видео до 4416×1242 (side by side) при 15 кадрах в секунду и скорость до 100 кадров в секунду при разрешении 1344×376, 32-битное картографирование на расстоянии от 0,7 до 20 метров, шестиосевой позиционный трекинг, вес 159 граммов, совместимость с Windows 7, 8, 10 и Linux, поддержку Unity, Oculus SDK, софта ROS, OpenCV и Matlab.

Стоимость ZED на сайте Stereolabs составляет $449.

Не пропускайте важнейшие новости о мире дополненной и виртуальной реальности — подписывайтесь на Голографику в ВКTwitter и Facebook!

Далее: AR-очки K-Glass 3 позволяют набирать текст на виртуальной клавиатуре и работают больше 24 часов

По материалам Stereolabs и Upload VR