Meta* выпустила Immersive Web SDK 1.0, стабильную версию своего инструментария для разработки иммерсивных веб-приложений. Обновление позволяет ИИ-агентам не только создавать трёхмерные сцены и программировать взаимодействия, но и самостоятельно тестировать приложения на очках Quest. Компания также добавила поддержку управления взглядом и жестами для будущих VR Glasses.
Meta развивает IWSDK с 2025 года как альтернативу традиционным средствам создания иммерсивных приложений. Инструментарий использует библиотеку Three.js и компонентно-системную архитектуру (Entity Component System, ECS). Разработчики получают готовые механизмы взаимодействия с объектами, перемещения по виртуальному пространству, пространственного звука и физического моделирования Havok.
Для смешанной реальности IWSDK поддерживает распознавание плоскостей и геометрии помещений, пространственные якоря, определение глубины, доступ к камерам и перекрытие виртуальных объектов реальными. Интерфейсы можно создавать с помощью UIKitML — языка разметки, похожего на HTML.
Основное нововведение версии 1.0 — расширение возможностей ИИ-агентов. Каждый новый проект включает сервер контекстного протокола (Model Context Protocol, MCP) и набор инструментов, которые позволяют ИИ взаимодействовать с работающим приложением. Агент может осматривать трёхмерную сцену, управлять виртуальными руками и контроллерами, проверять состояние движка, находить ошибки и самостоятельно исправлять программный код.
Ранее подобные проверки выполнял только настольный эмулятор. Теперь ИИ-агент может запускать приложение на подключённых к компьютеру очках Quest и получать реальные показатели производительности устройства.
В демонстрации агент самостоятельно прошёл уровни игры Hyperform, обнаружил падения производительности, изменил код и повторил испытания, добившись стабильных 90 кадров в секунду на Quest 3.
Ещё одно нововведение — визуальный редактор Agentic Scene Composer, в котором человек и ИИ-агент могут работать над одной трёхмерной сценой. Разработчик вручную размещает объекты и изменяет окружение, а агент создаёт модели, материалы и программную логику. Оба участника сохраняют возможность редактировать результат, переходя между режимами просмотра и редактирования.
Meta также адаптировала инструментарий для VR Glasses, выход которых запланирован на весну 2027 года. Очки используют окулографию и жесты вместо традиционных контроллеров: пользователь выбирает объект взглядом и подтверждает действие сведением пальцев.
IWSDK позволяет применять такую схему управления к существующим интерактивным элементам без отдельного программирования. До выхода устройства разработчики смогут проверять интерфейсы в эмуляторе или на Quest 3 и 3S. В последнем случае система заменяет отслеживание взгляда направлением головы и имитирует более узкое поле зрения VR Glasses.
Приложения IWSDK работают на основе веб-технологий. Разработчик может разместить их на сервере с HTTPS, чтобы пользователи открывали приложение по ссылке через совместимый браузер, либо упаковать его в прогрессивное веб-приложение (Progressive Web App, PWA) для распространения через магазин.
Компания опубликовала исходный код IWSDK на GitHub под лицензией MIT. Продукт сопровождается технической документацией и примерами проектов.
*В России признана экстремистской
Не пропускайте важнейшие новости о дополненной и виртуальной реальности — подписывайтесь на Голографику в Телеграме, Максе, ВК и X! Поддержите проект на Бусти.
Далее: Виртуальные экраны на Quest получили обновление ввода и улучшения под macOS
