VisionOS 2.4 принесёт Apple Intelligence, пространственную галерею, приложение для iPhone и улучшенный гостевой режим


Последним весомым обновлением visionOS была версия 2.2 в конце 2024 года. 2.3 оказалось минорным и послужило проводником устранения ошибок и уязвимостей. И теперь на низком старте 2.4, которое добавит в операционную систему нейросетевые функции под общим названием Apple Intelligence наряду с другими полезными улучшениями. Бета уже доступна, стабильный релиз — в апреле.

Обратите внимание, что в бете есть не все заявленные к релизу возможности, работа над пополнением этой версии системы продолжается. 

Apple Intelligence

Это бренд Apple для комплекса функций на основе генеративных нейронных сетей. Часть работает на устройствах, другие обмениваются данными с собственными серверами компании, а третьи обращаются к ChatGPT от OpenAI, если вы даёте разрешение.

В конце прошлого года Apple Intelligence с задержкой и помпой, которая не соответствует качеству содержимого, появился на iPhone от 15 Pro и iPad с процессорами серии M и A17 Pro, а также Mac с процессорами M. Однако если на смартфонах по нейрофункциям Apple составили успешную конкуренцию такие компании, как Samsung, на очках такой системы пока ни у кого нет. 

В visionOS 2.4 будут следующие функции Apple Intelligence: приоритизация уведомлений и сообщений, сводки того и другого, ответы на запросы с помощью языковых моделей, которые понимают естественный язык, создание памятных роликов, поиск на естественном языке в фотографиях, инструменты редактирования текстов, нейрорисование в заметках, генерирование эмоджи и создание изображений на все случаи жизни.

К выпуску обновления всё это будет работать только на американском английском, а другие языки Apple добавит позже, без уточнений.

Приоритеты и сводки уведомлений

Apple Intelligence автоматически определит, какие уведомления наиболее важны (например, сообщения от близких о предстоящих событиях), и покажет их в верхней части списка уведомлений.

Более длинные уведомления и группы уведомлений из одних и тех же приложений система сможет объединять в краткую сводку. Нажатие сводку вызовет исходное уведомление.

Стоит отметить, что пользователи других купертинских устройств критикуют функцию за то, что иногда она неправильно истолковывает содержание уведомлений.

Приоритеты и сводки писем в почте

Как и с уведомлениями, в почтовом приложении visionOS должна показать самые важные сообщения в верхней части списка. Каждое письмо получит краткое резюме. А при открытии письма можно будет попросить нейросеть представить более полное резюме содержимого.

Автоответы в сообщениях и почте

Умный ответ определяет задаваемые пользователю вопросы и предлагает ответы на сообщения и электронные письма, что, по словам Apple, позволит «легко отвечать на текстовые сообщения и электронные письма всего несколькими нажатиями», если вас устраивают машинные варианты и под рукой нет аппаратной клавиатуры. 

Инструменты для письма

Функция Writing Tools предложит четыре вида инструментов для «переписывания, корректуры и резюмирования» текста по всей visionOS, включая почту, заметки и сторонние приложения.

Корректура проверяет грамматику, лексику и структуру предложений, предлагая правки. Переписывание отрегулирует тон текста, делая его более дружелюбным, профессиональным, лаконичным или любым другим по вашему запросу. Резюмирование будет сокращать тексты, разбивать на ключевые элементы, превращать в списки или таблицы.

Интеграция с ChatGPT послужит для создания любого вида текстового контента.

Наброски в Notes

Image Wand в стандартном приложении заметок будет «создавать изображения на основе набросков» или других данных, вроде текстового описания или фото. 

Фильмы-воспоминания и поиск по фото

В стандартном фотоприложении visionOS предоставит возможность автоматически создавать ролики о минувших событиях с повествованием и музыкой, а также выполнять более гибкий поиск материалов по заданной теме через свободное описание контента.

Genmoji

Genmoji — это функция iMessage для создания собственных эмоджи путём текстового ввода или произнесения их описания. Результат можно будет добавлять в сообщения, отправлять как отдельные стикеры и в наборах.

Image Playground

Эта функция генерирует изображения по описаниями или на основе других изображений, включая фотографии из галереи. Есть интеграция в такие приложения, как Messages и Freeform и отдельное приложение для visionOS.

Spatial Gallery

Новое приложение от Apple, которое представляет собой коллекцию пространственных фотографий и видео от профессиональных художников, режиссёров и фотографов. Это попытка привлечь внимание к новому типу контента, создание которого пользователями пока не получается по травить на поток. Вместе с тем, это не открытая платформа, а галерея с отбором авторов, которая жертвует количеством ради качества в попытке задать тон всей платформе Vision. 

Spatial Gallery будет работать во всех странах присутствия Vision Pro, за исключением материкового Китая, который привык сам цензурировать контент. 

Приложение Vision Pro для iPhone

Apple говорит, что новый мобильный клиент позволит удалённо ставить в очередь приложения для загрузки, просматривать информацию об устройстве и рекомендации лучшего контента. Здесь будут советы по устройству, текущая версия visionOS и серийный номер, а также настройки пространственного звука по скану с iPhone.

Приложение Vision Pro станет частью iOS 18.4 и появится в App Store.

Режим гостя на iPhone и iPad

В настоящее время для включения гостевого режима нужно сначала надеть и разблокировать очки. Это неудобно, поэтому visionOS 2.4 добавляет возможность запуска гостевого доступа с iPhone и iPad с той же учётной записью Apple. Интерфейс позволит выбирать доступные приложения и демонстрацию экрана по AirPlay.

Не пропускайте важнейшие новости о дополненной и виртуальной реальности — подписывайтесь на Голографику в Telegram, ВК и Twitter! Поддержите проект на Boosty.

Далее: Quest APK Installer: ставим любые APK на Quest без компьютера