Технический директор Meta* Эндрю Босворт рассказал, почему в Quest, в отличие от конкурентов, не работает непрерывное трёхмерное сканирование пространства, и поделился связанными с этим трудностями.
Сканирование помещения остаётся одной из самых больших ступеней в пользовательском опыте смешанной реальности на Quest 3 и 3S. Пользователи должны заранее сканировать своё окружение, что может занять несколько минут в зависимости от размера и геометрической сложности. А полученный скан статичен и требует ручного обновления, если просто передвинуть мебель. Этот процесс может отталкивать, особенно если возникает желание просто расслабиться после рабочего дня за игрой.
Босворт объяснил задачи, связанные с поддержкой непрерывного сканирования, заверив, что функция в итоге появится.
Да, здесь есть две разные части.
Первая — это просто вычисления. Постоянно пересчитывать то, что происходит в окружающем вас пространстве, дорого, и мы могли бы использовать эти тепловые и вычислительные ресурсы для других вещей, которые, как мы думаем, вы могли бы оценить выше.
Вторая — это модель, которая на самом деле сложнее. Если я предварительно рассчитал окружение и передаю его приложению, приложение может делать много предсказаний об этом окружении.
Если окружение постоянно меняется, это приложение должно быть гораздо более динамичным, потому что этот стол может двигаться, этот диван может двигаться, и что вы делаете в результате?
Правда в том, что большинство сегодняшних впечатлений используются в статичных средах. Это изменится со временем. Так что, я думаю, мы придём к этому. Для ясности, я думаю, со временем этот процесс станет непрерывным.
И мы играли с его вариантами в прошлом, когда разбирались, пересекает ли кто-то границу безопасности. Но это просто компромиссы как с сегодняшней вычислительной мощностью, так и с моделью, которую разработчики используют в долгосрочной перспективе.
Проблема, из которой родился вопрос Босворту, заключается в том, что Apple Vision Pro уже обладают возможностью непрерывного сканирования. Но между гаджетами двух компаний большая разница в аппаратной части. Vision Pro сильно полагаются на лидары, тогда как Quest 3 и 3S в значительной степени используют алгоритмы компьютерного зрения. По всей видимости, дело не только в разных подходах, но и в том, какие лидары доступны производителям. Их характеристик может быть просто недостаточно для подобной задачи.
*В России признана экстремистской
Не пропускайте важнейшие новости о дополненной и виртуальной реальности — подписывайтесь на Голографику в Telegram, ВК и Twitter! Поддержите проект на Boosty.
Далее: Сквозное видео и нейросети помогут слабовидящим владельцам Vision Pro
