Тег: трекинг тела

Quest 3 получат отслеживание верхней части тела и нейросетевую реконструкцию ног в декабрьском обновлении программного обеспечения. Другие популярные очки нижней ценовой категории отслеживают только голову и руки, некоторые наблюдают за глазами и выражением лица. В Quest 3 нет трекинга глаз или лица, зато благодаря расположению камер могут появиться уникальные способности работы с телом.

Приложение Driver4VR, которое вышло на рынок в 2017 году с эмуляцией Vive Tracker через Kinect, открыло новое направление работы: трекинг тела камерой смартфона с передачей данных в приложение VRChat на Quest. Приложение понимает поток с фронтальной и тыльной камеры. Фронтальная обычно имеет более широкое поле зрения, а возможность видеть результат трекинга на экране упрощает поиск правильного положения для телефона.

Новый API Body Tracking для Quest вышел на прошлой неделе как часть SDK Movement, в который также входят решения для отслеживания глаз и лица под новые Quest Pro. И если с последними всё понятно, трекинг тела вызвал недопонимание, поскольку не является тем, чем хочет казаться. 

В новой статье учёные Meta рассказали о системе из Quest 2 и контроллеров, которая может вычислять правдоподобную позу всего тела без внешних датчиков. Система делает выводы с помощью нейросетей из небольшого набора данных.

Решение предназначено для примерки одежды в дополненной реальности и создания цифровых аватаров, которые работают в реальном времени и не требуют загрузки отдельных приложений. 

Любые грубые жесты обнаруживаются с помощью машинного обучения, в результате чего игра автоматически закрывается, а вашим родителям отправляется электронное письмо.