С выпуском visionOS 27 Apple открывает сторонним разработчикам возможность создавать собственные отслеживаемые контроллеры и аксессуары для Vision Pro. Предварительная версия системы уже доступна. От предыдущих она отличается тем, что они могли отслеживать пассивные объекты, а новинка поддерживает активные, способные взаимодейстствать с очками.
VisionOS 27 позволяет Vision Pro отслеживать аксессуары на основе известных шаблонов инфракрасных светодиодов и данных о положении, передаваемых с инерциального блока по Bluetooth. Ввод также может идти от кнопок и джойстиков.
Сочетание ИК-диодов и инерциального блока является стандартом де-факто в отслеживании контроллеров для очков виртуальной и смешанной реальности. Такой подход обеспечивает бо́льшую точность и меньшую задержку, чем пассивный вариант только на основе геометрии. Диоды более устойчивы к различным условиям освещения, а датчики могут обновлять данные сотни раз в секунду, повышая точность за счёт их актуализации. Apple обещает трекинг на скорости, равной кадровой частоте очков — номинально 90 Гц, но возможно до 120 Гц.
Это не означает, что вы сможете подключить любой старый контроллер к Vision Pro, но производители контроллеров и других аксессуаров смогут добавить официальную поддержку очков Apple в нынешние и будущие продукты.
Apple утверждает, что профиль отслеживания пространственного аксессуара можно включить в особое приложение для visionOS, которое «регистрирует ваш аксессуар в масштабах всей системы, так что любое приложение в Apple Vision Pro сможет его использовать». Однако сторонние аксессуары, добавленные таким образом, не будут поддерживать весь интерфейс системы, как контроллеры PS VR2 и стилус Logitech, которые Apple сделала официальными аксессуарами Vision Pro в прошлом году.
Компания также сообщила о сотрудничестве с DFRobot и MIKROE для создания готовых трекеров, которые можно будет использовать в качестве «эталонных устройств и комплектов для разработки» при создании пространственных аксессуаров. Трекеры выйдут «позже в этом году». Цены неизвестны.
Помимо добавления поддержки активно отслеживаемых пространственных аксессуаров, visionOS 27 также улучшает поддержку пассивных объектов. Apple говорит, что новый режим трекинга с высокой частотой кадров и расширенное обучение нейромоделей сокращают задержку и повышают надёжность слежения.
Не пропускайте важнейшие новости о дополненной и виртуальной реальности — подписывайтесь на Голографику в Telegram, ВК и Twitter! Поддержите проект на Boosty.
Далее: Третья версия перчаток TactGlove для разработчиков стала ощутимо интереснее
