Владельцы Vision Pro получили возможность скачать обновление visionOS под номером 2.4. Новая версия операционной системы приносит в очки нейросетевой комплекс Apple Intelligence, приложение Spatial Gallery, спутниковое приложение для iPhone для дистанционного управления и гостевой режим для iPhone и iPad.
Первая бета visionOS 2.4 для разработчиков вышла в феврале, а теперь готова стабильная версия.
Apple Intelligence
Apple Intelligence — это зонтичный бренд, покрывающий все функции, реализованные при помощи генеративных нейронных сетей. Некоторые работают на устройстве, другие выгружают данные на серверы компании, а часть запросов при наличии разрешения от пользователя уходит в OpenAI к ChatGPT.
Vision Pro получили следующие нейросетевые функции: приоритизацию уведомлений, сводки уведомлений, предложения ответов на сообщения, компиляцию памятных видео, поиск по фото с запросами естественной речью (без чётких команд), приоритизация и сводки в почте, инструменты редактирования текстов, создание изображений из набросков в заметках, отдельное генерирование изображений и эмоджи.
Сейчас Apple Intelligence на Vision Pro поддерживает только американский вариант английского языка. «Дополнительные языки» будут позже в этом году, но среди них, следуя современной политике компании, скорее всего не окажется русского.
Приоритетные уведомления и сводки уведомлений
Apple Intelligence автоматически решает, какие уведомления наиболее важны — например выбирает сообщения от близких о предстоящих событиях и отображает их в верхней части списка уведомлений.
Более длинные уведомления и группы уведомлений от тех же приложений показывают сгенерированную ИИ сводку вместо полного содержания. Следует отметить, что пользователи критикуют эту функцию за искажение смысла сообщений, однако здесь легко перейти к оригиналу нажатием на сводку.
Умные ответы в сообщениях и почте
Функция Smart Reply «определяет вопросы и предлагает соответствующие ответы» на сообщения и электронные письма, что, по словам Apple, упрощает коммуникацию на Vision Pro.
Функция может быть особенно полезна, когда под рукой нет подключённой Bluetooth-клавиатуры, поскольку набор на парящей в воздухе виртуальной клавиатуре медленнее, чем на сенсорном экране.
Памятные видео и поиск на естественном языке в фотографиях
Приложение Фото научили создавать из фотографий и видео сюжетные ролики с фоновой музыкой по распознанным в контенте событиям. Для этого нейросетям нужно просто дать описание желаемого результата.
Функция поиска на естественном языке позволяет вам находить фотографии и видео в медиатеке, описывая их своими словами.
Приоритетные сообщения и сводки писем в почте
Как и в случае с уведомлениями, в почтовом приложении система показывает самые важные, по её мнению, сообщения в верхней части списка.
Каждое письмо в списке показывает сгенерированное краткое резюме, а не только первую строку текста, как в других почтовых клиентах. Кроме того при открытии письма можно попросить сгенерировать более подробное описание его содержимого.
Редактирование текстов
Функция «Инструменты для письма» предлагает четыре вида инструментов для «переписывания, корректуры и резюмирования» длинного текста, который вы печатаете или диктуете в разных уголках visionOS, включая почтовый клиент, заметки и сторонние приложения.
- Корректура: «проверяет грамматику, выбор слов и структуру предложений с предлагаемыми правками».
- Переписывание: «регулирует тон текста, делая его более дружелюбным, профессиональным или лаконичным» с возможностью ввода точного описание желаемого результата
- Резюмирование: резюмирует текст, разбивает его на ключевые моменты или превращает в список или маркированную таблицу
- Создание: использует ChatGPT для создания любого вида текстового контента
Волшебная палочка в заметках
Image Wand в приложении Notes помогает создавать изображения на основе черновых набросков, фото и текстовых описаний.
Genmoji в iMessage
Genmoji — это функция создания собственных эмоджи в iMessage о текстовому или голосовому описанию. Получаемые картинки можно отправлять в iMessage внутри сообщений, стикерами или реакциями.
Image Playground
Это отдельный генератор изображений. Пользователи могут добавлять текстовые описания и фото, чтобы реализовывать любые фантазии (на которые у системы нет цензурных блоков). Генератор также интегрировали в такие приложения, как Messages и Freeform.
Spatial Gallery
Пространственная галерея — новое приложение, которое «предлагает тщательно подобранную коллекцию пространственных фотографий, пространственных видео и панорам от художников, режиссёров, фотографов и многих других». Это демо пространственного контента, которое продвигает формат среди пользователей через показ профессиональных фото и видео на потенциально интересные темы.
Вместо того, чтобы сделать из этой галереи открытую платформу, как YouTube или Vimeo, которые добавили поддержку пространственного видео в октябре, Spatial Gallery хочет заменить количество качеством.
Клиент Vision Pro для iPhone
Приложение позволяет дистанционно формировать очередь загрузки софта на очках, просматривать информацию об устройстве и рекомендации контента от редакторов Apple.
Меню My Vision Pro показывает советы по устройству, текущую версию visionOS и серийный номер, даёт настраивать персонализированный пространственный звук через сканирование лиц с помощью датчика TrueDepth на iPhone.
Меню Discovery показывает популярные приложения и игры в App Store, каталог из сотен 3D-фильмов, новые релизы в Apple TV, а также последние пространственные фотографии, видео и панорамы в Spatial Gallery.
Приложение Apple Vision Pro является частью iOS 18.4, но его можно загрузить отдельно из App Store.
Режим гостевого пользователя на iPhone и iPad
Раньше для включения режима гостя на Vision Pro нужно было сначала надевать очки и разблокировать их — и делать это снова, если у человека, которому вы их передали, возникала проблема. В visionOS 2.4 Apple добавила возможность активировать режим гостевого пользователя с iPhone или iPad под одной с очками учётной записью. Можно выбирать, к каким приложениям гость имеет доступ, а также запускать трансляцию на внешний экран с помощью AirPlay.
Не пропускайте важнейшие новости о дополненной и виртуальной реальности — подписывайтесь на Голографику в Telegram, ВК и Twitter! Поддержите проект на Boosty.
Далее: Pico 4 Ultra получили финальную версию важного обновления 5.13.0.U
