Apple опубликовала операционную систему visionOS 26 для всех пользователей Vision Pro. Обновление добавляет поддержку игровых контроллеров Sense от PlayStation VR2 и стилуса Logitech Muse, значительно повышает реализм аватаров, вводит закрепление в пространстве для виджетов, повышает частоту отслеживания рук до 90 Гц, позволяет записывать пространственный контент, взаимодействовать с другими людьми в смешанной реальности. Обо всех нововведениях — в этом материале.
Контроллеры Sense
Система получила поддержку контроллеров PlayStation VR2, с которыми гораздо удобнее проходить игры. Ожидается, что Sony вскоре начнёт продавать их отдельно от собственных очков.
Работа с Sense подразумевает позиционное отслеживание с шестью степенями свободы, ёмкостное распознавание прикосновений и поддержку вибрации. Пока неясно, идёт ли речь о фирменной тактильной отдаче и уникальных курках с динамическим усилием.
Первой игрой известного издателя с поддержкой Sense станет Pickle Pro от Resolution Games.
Сквозной вид для контроллеров
Vision Pro всегда сегментировали и отображали ваши настоящие руки и кисти, а с версии visionOS 2 научились отображать и физическую клавиатуру — эта функция называется Keyboard Breakthrough. VisionOS 26 может аналогично показывать геймпады Xbox и PlayStation, включая Sense.
Улучшенные персоны
Персоны — реалистичные аватары Apple с отслеживанием лица — стали «более естественными и знакомыми» благодаря «ведущей в отрасли технологии объёмного рендеринга и машинного обучения».
Apple описывает эти новые аватары как обладающие «поразительной выразительностью и чёткостью, предлагающие полный профиль и удивительно точную передачу волос, ресниц и цвета лица». Компания также расширила выбор очков до более чем 1000 вариантов.
Персона по-прежнему генерируется за считанные секунды, достаточно поднять очки и отсканировать своё лицо.
Закрепление, сохранение и виджеты
Появилась возможность закреплять окна и объёмы на физических поверхностях, например, на стенах, и они сохранятся после перезагрузки.
VisionOS 26 также добавляет виджеты, которые будут появляться на выбранных местах при каждом надевании очков. Их можно настраивать, устанавливая ширину, цвет и глубину рамки. В системе на выбор уже есть часы, погода, музыкальный плеер и просмотр фото, а разработчики могут создавать собственные варианты с помощью WidgetKit.
Функции сохранения и выравнивания по поверхности также можно использовать в приложениях visionOS через новые API.
Настоящее 90-герцевое отслеживание рук
На момент выпуска Vision Pro отслеживание рук в этих очках шло на скорости до 30 Гц. Из-за этого устройство могло работать медленно и неотзывчиво, особенно в играх. В visionOS 2 разработчики могли выбрать трекинг рук с частотой до 90 Гц, что значительно ускоряло отклик.
С появлением visionOS 26, по словам Apple, базовый алгоритм отслеживания рук фактически опрашивает датчики 90 раз в секунду.
Объёмные «пространственные сцены»
Vision Pro всегда могли снимать и показывать 3D-фотографии, которые Apple называет пространственными фото, а visionOS 2 добавила возможность преобразования любого 2D-изображения в пространственное с помощью нейросетей.
VisionOS 26 пошла дальше. Её новый генеративный нейроалгоритм создаёт пространственные сцены со сменой перспективы и позволяет ощутить возможность «наклониться и осмотреться».
Пространственные сцены можно просматривать в приложении «Фото». Оно преобразует в новый формат любой снимок.
3D-фото также доступны через платформу Spatial Gallery и на веб-страницах Safari, а разработчики могут добавлять их в свои приложения с помощью нового API Spatial Scene.
Локальный SharePlay
Apple добавила разработчикам возможность создавать приложения, в которых несколько пользователей очков могут автоматически и одновременно видеть одни и те же объекты и интерфейсы в одних и тех же местах физического пространства. Эта функция в Quest и Pico известна как Colocation.
VisionOS 26 использует технологию SharePlay и API, которые позволяют владельцам Vision Pro обмениваться контентом и опытом.
Пространственный стилус Logitech Muse
Logitech Muse ещё не вышел, а Apple уже обеспечила его поддержку. Купертинцы говорят, что Muse «обеспечивает точный ввод и новые способы взаимодействия с приложениями для совместной работы, такими как Spatial Analogue».
Напомним, что новинка похожа на существующее перо Logitech MX Ink для Quest. Радикальных изменений не ожидается.
Пространственный просмотр из Safari
Среди новых функций Safari на Vision Pro появилась возможность встраивать 3D-модели в веб-страницы, а пользователи могут перетаскивать эти 3D-модели в своё окружение.
Новая функция «Пространственный просмотр» основана на режиме чтения Safari и обеспечивает эффект погружения при просмотре веб-страницы, где 2D-изображения становятся пространственными сценами.
Поддержка видеоформатов 180° и 360°
К проприетарному стереоформату Apple Immersive Video компания добавила в систему просмотр панорамных 2D-видео в форматах 180° и 360°. Это позволяет легко лицезреть контент, снятый на относительно доступные камеры таких компаний, как Insta360, GoPro и Canon.
ОС автоматически отображает отснятый материал с правильной перспективой, чтобы создать максимальное ощущение присутствия.
Папки на главном экране
В visionOS 26 вы можете создавать папки приложений на главном экране, как в iOS и iPadOS. Раньше была только одна папка, в которой хранились совместимые приложения для iPad и iPhone.
Разблокировка iPhone и звонки
Apple поработала над интеграцией visionOS 26 и iOS 26. Благодаря этому теперь можно разблокировать iPhone, не снимая Vision Pro. Так же можно отвечать на звонки.
Юпитерианское окружение
Новое домашнее окружение переносит нас на Амальтею, один из ближайших спутников Юпитера, и позволяет ускорить время, наблюдая за гигантскими штормами, «проносящимися по газовому гиганту, когда солнечный свет пробивается сквозь его поверхность».
Прокрутка взглядом
Новая опция под названием «Прокрутка взглядом» позволяет пользователям Vision Pro прокручивать страницу, глядя на нижнюю часть экрана.
Apple Intelligence шагает по миру
VisionOS 2.4 добавила Apple Intelligence в Vision Pro, но только для американского варианта английского языка.
26 версия расширяет поддержку на английский язык в Австралии, Канаде, Индии, Сингапуре и Великобритании, а также на французский, немецкий, итальянский, японский, корейский и испанский языки.
Фреймворк Foundation Models
С visionOS 26 разработчики могут использовать встроенную большую языковую модель Apple Intelligence в своих приложениях с помощью нового фреймворка Foundation Models. Это включает управляемую генерацию структурированного вывода и вызов инструментов для выполнения действий моделью.
Фреймворк Foundation Models позволяет использовать генеративные нейросети даже в бесплатных приложениях, в отличие от текущей ситуации, когда приложениям приходится использовать платные серверные модели.
Совместное использование устройств
С visionOS 26 корпоративные пользователи могут сохранять настройки калибровки и специальных возможностей отслеживания глаз и рук на iPhone каждого сотрудника, и эту конфигурацию можно применить на общих Vision Pro.
Пространственный рендеринг в macOS
MacOS 26 позволяет приложениям визуализировать и транслировать иммерсивные эффекты в visionOS 26, что, по сути, является интерпретацией трансляции виртуальной реальности с ПК в стиле Apple.
Не пропускайте важнейшие новости о дополненной и виртуальной реальности — подписывайтесь на Голографику в Telegram, ВК и Twitter! Поддержите проект на Boosty.
Далее: Snap OS 2.0: режим поездки, игры, рилсы, интеграция со смартфонами и WebXR
