Для управления операционной системой Vision Pro, включая навигацию по приложениям и прокрутку веб-страниц, ввод с помощью ручных жестов работает быстро и точно. Но при сложном взаимодействии с контентом начинаются проблемы: отслеживание рук оставляет желать лучшего, поскольку имеет намного большую задержку, чем на Quest 3, которые в семь раз дешевле.
Большая задержка Vision Pro означает, что при движении рук очкам нужно больше времени для регистрации движения. Особенно в условиях глубокой интерактивности, когда приходится брать объекты руками — они сильно отстают.
В visionOS 2, втором поколении операционной системы Vision Pro, Apple улучшает ситуацию. Напомним, что разработчики уже могут загружать предварительную версию системы, а пользователям её отправят осенью, после введения всех доработок и тестирования.
Первым улучшением трекинга стало повышение частоты оценки позиции руки с 30 до 90 герц. Система может отражать изменения положения за треть прежнего времени, что заодно сделает движения более плавными. Это применимо только к небольшой части общего конвейера задержки, который оценивают в 127,7 миллисекунд, но в лучшем случае сократит задержку на 22 миллисекунды, что можно считать весомым результатом.
Кроме этого VisionOS 2 позволит разработчикам включать прогнозирование отслеживания рук, которое даёт оценку будущего положения. Это не уменьшает задержку физически, но заметно сокращает визуально.
Подобные методы прогнозирования распространены в других операционных системах очков. Удивительно, что Apple не использовала и не открывала их разработчикам раньше, хотя пока Vision Pro и по цене, и по сути остаются ранним образцом устройства для энтузиастов, которые подчас терпят и не такое.
Улучшение ситуации с трекингом рук видно невооруженным глазом. Его показали на специальной презентации в рамках WWDC 2024.
Не пропускайте важнейшие новости о дополненной и виртуальной реальности — подписывайтесь на Голографику в Telegram, ВК и Twitter! Поддержите проект на Boosty.
Далее: Apple откроет корпоративным разработчикам данные камер и другие системные части Vision Pro
