Quest 3 получат отслеживание верхней части тела и нейросетевую реконструкцию ног в декабрьском обновлении программного обеспечения. Другие популярные очки нижней ценовой категории отслеживают только голову и руки, некоторые наблюдают за глазами и выражением лица. В Quest 3 нет трекинга глаз или лица, зато благодаря расположению камер могут появиться уникальные способности работы с телом.
Боковые камеры инфракрасного трекинга Quest 3 направлены вниз. Очки используют их для отслеживания запястий, локтей, плеч и туловища с помощью передовых алгоритмов компьютерного зрения. Их широкое поле зрения помогает избежать проблем с оценками положения рук через инверсную кинематику. Она ошибается и может вызывать дискомфорт, делает предположения на основании видимых положений головы и рук. После декабрьского обновления Quest 3 и интеграции нового SDK авторами приложений руки и торс в виаре могут из приблизительных превратиться в реальные.
Отслеживание верхней части тела также позволит разработчикам добавить к голове и рукам привязку движений джойстиками к развороту тела. Это расширит спектр возможных поз аватара.
В декабре Meta также запускает функцию Generative Legs. Она будет использовать «современную» модель искусственного интеллекта для оценки положения ваших ног. В Quest 3 Generative Legs даст более реалистичную оценку благодаря использованию в качестве входных данных отслеживания верхней части туловища. Это также сработает на Quest Pro и Quest 2, но лишь по ограниченным данным.
Generative Legs — это оценка, а не отслеживание, поэтому некоторые движения, вроде подъёма коленей, для неё будут труднее прочих. Однако в комплексе новые возможности искусственного интеллекта и камер могут продвинуть игровые и социальные аватары в Quest далеко вперёд. Такой комплекс в Meta* назвали Full Body Synthesis или Синтез всего тела.
Одними из первых его применят игры Supernatural, Swordsman VR и Drunken Bar Fight. Всем желающим SDK откроют в декабре.
*В России признана экстремистской организацией
Не пропускайте важнейшие новости о дополненной и виртуальной реальность — подписывайтесь на Голографику в Telegram, ВК и Twitter! Поддержите проект на Boosty.
Далее: Видео: как мощные Quest 3 меняют игровую графику
