Apple представила новую тестовую версию операционной системы visionOS 26.4 для Vision Pro. Среди прочего система может похвастаться интегрированным фовеальным стримингом — потоковой трансляцией с экономией пропускной способности сети благодаря информации от подсистемы отслеживания взгляда. Соответствующий раздел появился в документах к API.
Отчёт об обновлении сообщает, что visionOS 26.4 для этого интегрируется с SDK Nvidia CloudXR с фовеальной потоковой передачей данных, что позволяет приложениям отображать иммерсивный контент высокого разрешения с низкой задержкой на Vision Pro. Для пользователей нынешнего поколения очков это может быть краеугольным камнем, поскольку устройство даже в последней модификации с процессором M5 не умеет передавать данные в канале 6 ГГц.
Интеграция с CloudXR с такими целями была бы невозможна, если бы Nvidia к этому моменту не обновила SDK CloudXR до версии 6.0. В нём наряду с фовеальной трансляцией произошли другие радикальные изменения. Например, теперь это самостоятельная среда выполнения OpenXR с поддержкой Windows 10/11 и Ubuntu 22.
В Vision Pro технология фовеального стриминга позволяет отображать пространственный контент из visionOS одновременно с потоковым. Например, приложение авиационного симулятора может визуализировать кабину пилота через RealityKit и передавать ресурсоёмкий ландшафт с удалённого компьютера на устройство.
Основной рабочий процесс, — уточняет компания, — включает создание объекта, установление соединения с внешней точкой потоковой передачи и отображение потокового контента внутри иммерсивного интерфейса. Доступны все функции, включая прогрессивный и смешанный стили погружения. Двусторонняя система каналов сообщений позволяет приложениям visionOS обмениваться пользовательскими данными с точками потоковой передачи, что позволяет приложениям настраивать потоковый контент с помощью собственного интерфейса SwiftUI.
Не пропускайте важнейшие новости о дополненной и виртуальной реальности — подписывайтесь на Голографику в Telegram, ВК и Twitter! Поддержите проект на Boosty.
Далее: Collabora пообещала многозадачность для приложений на OpenXR
