Компания SpAItial представила нейросетевую модель Echo для генерации исследуемых 3D-миров по фото и текстовым описаниям. Аналогичные движения недавно предприняли Meta* и Apple, подчеркнув общеиндустриальный курс на упрощение пространственного моделирования с помощью нейронных сетей.
SpAItial утверждает, что модель может генерировать единое, целостное и редактируемое трёхмерное пространство со свободным перемещением. По мнению разработчиков, инструмент имеет потенциал в 3D-дизайне, моделировании, создании цифровых двойников и разработке игровых сред.
Echo формирует свои задания из текстовых промтов и изображений, создавая геометрически обоснованную 3D-сцену в метрическом масштабе. Отличие от некоторых других генераторов заключается в том, что каждый новый вид, карта глубины и взаимодействие исходят из одного и того же базового мира, а не из независимых «галлюцинаций», говорит разработчик. После создания мир становится интерактивным в реальном времени. Пользователи могут управлять камерой, исследовать его с любого ракурса и мгновенно визуализировать даже на слабом оборудовании прямо в браузере.
Модель позволяет редактировать и менять стиль сцены, не нарушая исходный фундамент. Пользователи могут изменять материалы, удалять или добавлять объекты, исследовать различные варианты дизайна, сохраняя при этом общую согласованность.
В будущих версиях Echo компания намерена расширить возможности. Например, позволит осуществлять полную манипуляцию сценами с содержимым на основе подсказок, давая добавлять, удалять, переставлять и менять стиль объектов. В дальнейшем мирам обеспечат динамику и физику. Это откроет путь к интерактивным симуляциям.
Для получения раннего доступа к модели разработчик предлагает заполнить заявку.
Не пропускайте важнейшие новости о дополненной и виртуальной реальности — подписывайтесь на Голографику в Telegram, ВК и Twitter! Поддержите проект на Boosty.
Далее: Tencent запустила нейросетевую платформу генерации 3D-моделей
