Samsung в полном согласии со всеми слухами последних двух лет, стала первым партнёром Google по созданию очков смешанной реальности на свежепредставленной операционной системе Android XR. Устройство под кодовым названием Project Moohan выйдет в 2025 году. А пока журналистам удалось познакомиться с его ранней версией.
Samsung и Google не делятся наиболее важными характеристиками очков, такими как разрешение, вес, поле зрения или цена, и не разрешают вести фото- и видеосъёмку. Поэтому в наличии только одно официальное изображение, очень похожее на рендер.
Те, кто успел познакомиться с новинкой, говорят о ней как о чём-то среднем между между Quest и Vision Pro. Часть деталей внешности отсылает к продукции Apple, часть к Quest Pro, как будто перед дизайнерами стояла задача сделать гаджет, отличающийся от других настолько, чтобы в этом нельзя было уличить официально. То же самое можно услышать о программном обеспечении, смеси Horizon OS и visionOS.
По первым впечатлениям, Google и Samsung постарались взять лучшее из опыта конкурентов. Хорошо это или плохо — дело вкуса, но трудно ожидать чего-то абсолютно нового от системы, авторы которой идут в фарватере двух рыночных ледоколов. Разве что новинка предложит какую-то уникальную черту. Забегая вперёд, эта черта есть.
Project Moohan
Новинка Samsung получилась минималистичной, в ней можно найти свой стиль и особенности. Однако искать лучше, не зная о её соперниках. Например, на изображении вы видите автономное устройство с подозрительно небольшими фронтальной и тыльной частью. Опытные люди уже догадались, что аккумулятор придётся пристёгивать кабелем, как с Vision Pro.
При этом, если Apple применила мягкий (и неудобный при весе гаджета порядка 650 граммов) ремешок, Samsung сделала его твёрдым, из пластика. На затылке регулировка затягивания колесом и специальная фиксирующая подушка, напоминающая Quest Pro, в которых Meta* смогла найти место для батареи-противовеса.
Подобно Quest Pro, здесь есть магнитный крепёж для шор, поставив которые можно закрыться от внешнего мира, а убрав — сделать очки более подходящими для дополненной реальности.
За схожестью с Vision Pro по общим формам и расположению кнопок не последовало заимствование внешнего дисплея для отображения глаз и индикации EyeSight. Кто-то назовёт его бесполезным, но у корейской вариации могли бы быть свои задачи.
Samsung скрывает технические подробности, настаивая на статусе прототипа. Несмотря на это, журналистам удалось выяснить, что внутри процессор Snapdragon XR2+ Gen 2, более мощная версия главной микросхемы Quest 3 и Quest 3S.
Новинка использует плоские линзы с автоматической регулировкой по межзрачковому расстоянию благодаря встроенной системе отслеживания глаз. Поле зрения кажется меньшим, чем у Quest 3 или Vision Pro. Перед вердиктом стоит исследовать разные варианты налобных накладок, которые будут в комплекте и, в теории, смогут приблизить глаза к линзам, что заодно повысит сравнительно низкую по краям дисплеев яркость.
Корейцы подтвердили, что у Moohan будут контроллеры. Samsung решает, класть их в комплект или продавать отдельно, и пока не готова показывать. Поэтому в демонстрации очки заставили полагаться на отслеживание рук.
И здесь ощущения гостей тоже максимально приблизили Android XR к Horizon OS и visionOS. Вы можете использовать лучевые указки, как у Quest, и сочетание выбора глазами и щипка, как у Vision Pro. Инженеры решили поставить направленные вниз камеры, благодаря которым жесты рук видны с коленей. В дальнейшем эти камеры как будто просятся в систему трекинга нижней половины тела.
Первым ярким впечатлением после надевания очков становится высокая чёткость рук. Применяемые сквозные камеры, похоже, дают более чёткое изображение, чем у Quest 3, и меньше размытия в движении, чем у Vision Pro, хотя проверить это можно было только при хорошем освещении. У этого опыта есть нюанс: предметы дальше рук казались менее резкими, то есть гаджет могли специально сфокусировать на расстоянии вытянутой руки.
Android XR
При входе в операционную систему перед глазами встаёт известный по Vision Pro «домашний экран» с иконками приложений на прозрачном фоне. Для выбора нужно посмотреть на иконку и сделать щипок пальцами. Это откроет плавающую панель с приложением. Для возвращения в меню — тоже знакомый жест, взгляд на ладонь и сведение пальцев.
Окна системы выглядят более похожими на Horizon OS. В основном у них непрозрачные фоны, есть возможность перемещать окно в любое место, прикрепляясь к невидимой рамке.
Помимо плоских приложений, Android XR умеет полностью погружать в софт. Здесь уже есть карты Google Maps в виртуальной реальности, похожие на Google Earth VR, с выбором любого места на Земле, 3D-городами, Street View и новыми объёмными моделями интерьеров.
Обычно Street View — это моноскопические 360-градусные изображения, но в очках были представлены объёмные модели с визуализацией в реальном времени и возможностью перемещения. Google говорит, что это технология гауссова распределения. Главный вопрос в том, какой контент нужен для преобразования в модель — как нужно наполнять сканами сервис.
Google Photos научили автоматически конвертировать любые 2D-фотографии или видео в 3D. Преобразование впечатлило гостей презентации, по качеству итог похож на объёмный контент с Vision Pro.
YouTube, помимо просмотра обычного контента на большом изогнутом дисплее, даёт смотреть все имеющиеся на хостинге панорамы, включая 180 градусов, 360 и 3D. Не все имеют высокое качество, но платформа с появлением новых очков явно не даст этому направлению зачахнуть.
Более того, на демо Google показала видео, которое изначально снято в 2D, после чего сервис автоматически конвертировал его в 3D для просмотра на очках. Оно выглядело хорошо и по качеству похоже на результат конвертации в Photos. Должны ли авторы давать согласие на такое преобразование, непонятно.
Gemini
Android XR и Project Moohan похожи на вещи, которые уже есть в продаже. Но у них есть уникальное преимущество — нейросеть Gemini.
Её можно запустить прямо с главного экрана. Она слышит вас, видит вас и ваше окружение вне зависимости от того, реальное оно, виртуальное или смешанное. Постоянное питание вашими данными развивает сеть, погружает её в личный контекст и делает разговорчивее. Например, спросить её о том, что у вас перед глазами, можно в любой момент, и перед ответом не будет неловкой паузы на сканирование по команде, модель видит и слышит всё время. И только пожелания разработчиков и настройки системы ограничивают её любопытство.
Siri и Meta AI не воспринимают информацию постоянно и не могут видеть виртуальный мир. По сравнению с подходом Gemini это выглядят как прошлое поколение технологии. Siri, возможно, как позапрошлое.
Gemini на Android XR получила кратковременную память на 10 минут, что повышает её контекстуальную осведомлённость. В своих запросах вы можете ссылаться не только на разговоры, но и на увиденное.
Краткое тестирование в контролируемой Google и Samsung среде показало, что Gemini действительно работает в контексте, выдаёт минимум пауз и меньше обходит темы, в которых нужно делать комплексный вывод. Например, после просьбы о переводе французского текста на этот же язык она отметила, что всё и так на нём, и проговорила фразу с французским произношением. И затем, по истечении нескольких минут, правильно выполнила просьбу повторить ответы несколькими запросами раньше.
Gemini может больше, чем просто отвечать на общие вопросы. Google показала несколько способов управления очками. Если попросить сеть «отвезти на Эйфелеву башню», откроется иммерсивный интерфейс Google Maps. Благодаря тому, что модель видит виртуальный мир, легко продолжить разговор расспросами об этом месте, о Париже и вообще любых вещах, даже за пределами карт. Gemini также способна по запросу предлагать видео из YouTube.
По всей видимости, системная нейросеть в Android XR умеет и то, что могут обычные помощники на телефонах, включая составление тестовых сообщений, отправку почты, установку напоминаний, но всю глубину проникновения в функции системы и приложений за одну демонстрацию Google не раскрыла.
***
Android XR выйдет на всех типах очков, то есть придёт и на смарт-очки без дополненной реальности. В них подсистема искусственного интеллекта станет основным средством взаимодействия с устройством и раскроется не меньше, чем в визуально богатых интерфейсах смешанной реальности. Новая операционная система будет гораздо масштабнее устройства от одной Samsung, однако корейцам удалось снова взять статус производителя флагмана на Android. Как компания распорядится этим шансом, узнаем в 2025 году.
*В России признана экстремистской
Не пропускайте важнейшие новости о дополненной и виртуальной реальности — подписывайтесь на Голографику в Telegram, ВК и Twitter! Поддержите проект на Boosty.
Далее: Google представила Android XR для всех видов очков. Первые устройства — в 2025 году