Gracia добилась потоковой передачи видео на гауссианах без предзагрузки


Движущиеся и полноценно объёмные записи на гауссианах от компании Gracia теперь можно передавать в потоковом режиме, в том числе в смешанной реальности на Quest 3, без необходимости скачивать приложения или сам контент. Компания продолжает работу над клиентом для Vision Pro.

Gracia впервые вышла на рынок в 2024 году с приложениями для ПК с просмотром динамики и Quest с просмотром статики.

Речь идёт не просто о параллаксе, стереоскопическом 3D-видео или синтетической глубине с ограниченной перспективой, как в пространственных сценах в visionOS 26. Gracia предлагает полноценный объёмный контент, внутри которого можно физически перемещаться в виртуальной или смешанной реальности.

Технология Gracia основана на методе гауссова сплэттинга — трёхмерной реконструкции, при которой миллионы цветных точек (гауссиан) размещаются в 3D-пространстве для реалистичного рендеринга сцены с произвольных углов обзора в реальном времени. Подобные статичные сцены для краткости часто называют 3DGS (трёхмерный гауссов сплэттинг), а динамические сцены — 4DGS, где четвёртым измерением выступает время.

К концу 2024 года Gracia выпустила автономные версии приложений для Quest 3 и Pico 4, избавившись от необходимости использовать ПК ценой некоторого снижения качества. Однако главной проблемой оставалась необходимость скачивать каждую сцену целиком, ожидая загрузки многогигабайтного файла прямо в очках. На тот момент потоковая передача подобных сцен потребовала бы интернет-соединения на скорости около 2,4 Гбит/с, что было практически недостижимо для большинства пользователей беспроводных ВР-устройств.

Это блокировало реализацию изначальной задумки Gracia стать «YouTube для настоящего volumetric-контента». Поэтому ранние автономные версии приложения концентрировались на коротких десятисекундных роликах.

Gracia работала над улучшением компрессии и хотела усилить её как минимум на порядок. Теперь компания утверждает, что достигла цели.

В марте 2026 года Gracia запустила потоковую передачу отдельных 4DGS-сцен без установки приложения и полной загрузки контента. Новый стек технологий полностью работает через WebXR: достаточно открыть gracia.ai/store в браузере Quest 3, чтобы спустя несколько секунд объёмная сцена появилась рядом.

На Vision Pro ситуация ограничена политикой Apple: WebXR-приложения не могут использовать режим прозрачности с видеопотоком с камеры в роли фона. Поэтому сейчас объёмные записи воспроизводятся на чёрном фоне. Для обхода ограничения компания уже тестирует отдельное приложение для visionOS.

Ранее китайская компания 4DV уже демонстрировала движущиеся WebXR-сцены, однако они были ограничены десятисекундными заранее загруженными роликами. Gracia утверждает, что сейчас является лидером в области потокового рендеринга движущихся объёмных сцен в виртуальной реальности.

Компания объясняет, что добилась этого благодаря тому, что вместо отправки всей сцены для каждого кадра передаёт только изменяющиеся части — аналогично современным видеокодекам. Для рендеринга в браузере работает WebGPU.

Это позволяет не только запускать сцены практически мгновенно, но и снимает ограничения на размер контента. Теоретически технология уже подходит даже для полноценных концертов.

Для потоковой передачи в относительно высоком качестве — около 120 тысяч сплэтов на кадр — нужно стабильное соединение примерно 75 Мбит/с. Также существует режим на 17 Мбит/с с примерно 15 тысячами сплэтов на кадр, однако качество изображения в нём значительно ниже.

Сейчас доступны три сцены:

  • 36-секундное видео ремонта велосипедного колеса;
  • 39-секундная сцена медицинского осмотра;
  • четырёхминутное выступление музыканта с пространственным звуком.

Gracia также подчёркивает, что её сцены можно интегрировать в существующие виртуальные окружения Unity и Unreal Engine, включая ВР-игры и интерактивные проекты. При этом технология пока не поддерживает прямые трансляции. 

Создание такого контента остаётся дорогим и сложным процессом. Для записи нужно около 60 синхронизированных камер, расположенных по сфере вокруг объекта. Стоимость записи в подобных студиях обычно начинается от $15 000 (₽1,2 млн), а сама Gracia берёт около $800 (₽64 000) за минуту обработки материала плюс базовый фиксированный платёж.

Компания предполагает, что в будущем подобные сцены можно будет записывать даже с помощью нескольких iPhone, а стоимость и скорость обработки существенно снизятся.

Не пропускайте важнейшие новости о дополненной и виртуальной реальности — подписывайтесь на Голографику в Telegram, ВК и Twitter! Поддержите проект на Boosty.

Далее: Приложение WorldLens добавило к ВР-просмотру Google Street View объём