MATRIX разработала технологию создания 3D-сцен из видео с помощью гауссова разбрызгивания


Японская компания MATRIX презентовала решение на основе искусственного интеллекта, которое может создавать фотореалистичные трёхмерные цифровые двойники из видеороликов, снятых на смартфоны. В основе лежит технология трёхмерной пространственной картографии «гауссово разбрызгивание» (Gaussian Splatting), которая также известна по применению в реалистичных аватарах Codec Avatars.

MATRIX указывает, что существующие методы создания цифровых двойников используют комбинацию лазерного 3D-сканирования и плоских изображений. Лазерное сканирование, по словам представителя компании, имеет проблемы с точки зрения времени и стоимости, а второй подход ограничен в определении перспективы и поле зрения. Гауссово разбрызгивание якобы требует только видеозаписей со смартфонов без специального оборудования, однако в одном из описаний на сайте также упоминается загрузка САПР-чертежей.

Компания занимается контрактной разработкой цифровых двойников для таких отраслей, как строительство, торговля недвижимостью и промышленное производство. Судя по представленной информации, новое решение — не тиражируемый продукт и используется только в рамках индивидуальных проектов.

Японцы не приводят примеров воссозданных мест, ограничиваясь примерными областями применения. Доказательств успешной апробации технологии нет. Однако компания утверждает, что метод гауссова разбрызгивания позволяет более эффективно создавать трёхмерные сцены, чем фотограмметрия и NeRF.

Не пропускайте важнейшие новости о дополненной и виртуальной реальности — подписывайтесь на Голографику в Telegram, ВК и Twitter! Поддержите проект на Boosty.

Далее: Приложение Onshape Vision наладило работу с САПР-моделями в Vision Pro