Тег: mixed reality

К концу 2025 года Apple реализует поддержку интерфейсов мозг-компьютер в операционной системе visionOS. Первым партнёром среди производителей нейроинтерфейсов должна стать Synchron. Для этого купертинцы создают протокол передачи данных BCI HID с активацией в Switch Control. А вместе с очками новая возможность появится на iOS и iPadOS.

SberDevices выпустила Kandinsky 3D, комплексную нейросетевую модель для генерирования трёхмерных изображений по текстовому описанию. Результаты можно забирать в пяти форматах: OBJ, STL, FBX, GLB, USDZ. Последний формат описания объектов и сцен специально разработан для использования в приложениях пространственных вычислений. 

Apple Vision Pro смогут увеличивать изображение в сквозном режиме, а вместе с этим описывать окружение, искать или читать с помощью встроенных нейросетей. Эти функции войдут в набор решений для доступности системы слабовидящим людям через обновление visionOS в конце 2025 года.

Niantic выпустила на Quest третьего поколения полную версию игры Hello, Dot — симулятора ухода за цифровыми питомцами в смешанной реальности на платформе Niantic Spatial. Релиз значительно развил демо-версию, которая вышла около года назад, но оставил бесплатное скачивание. 

Симулятор масляной живописи Vermillion со свежим обновлением превратит реальное окружение в шаблоны для раскрашивания по номерам благодаря использованию API Passthrough Camera на Quest 3 и 3S.

Редактор трёхмерных миров и объектов Horizon Desktop Editor для создания контента в соцсети Horizon Worlds, который в прошлом месяце получил генерацию активов по текстовым описаниям, в скором времени перейдёт с первой версии нейросетевого движка AssetGen на вторую. Первая уже давала возможность бесплатно создать виртуальный мир за пару часов без навыков моделирования, а вторая решает проблемы с качеством готового материала. 

Бои с фэнтезийными врагами в смешанной реальности Guardian of Realms от разработчиков Swordsman VR стали бесплатными на Quest 3 и 3S. Авторы надеются, что это расширит аудиторию игры, которая не сумела показать ожидаемых результатов под платным доступом.

Группа инженеров из Университета Нанкина, Гонконгского университета науки и технологии и Apple представила нейросетевую модель Matrix3D, которая способна самостоятельно выполнять несколько подзадач фотограмметрии по одному или нескольким фото, включая оценку позиции, прогнозирование глубины и синтез новых ракурсов без дополнительных данных.

Пространственные приложения требуют подвижности. И часто больше, чем может дать человек с ограничениями по здоровью. Авторы проекта MotionBlocks из Университета Ватерлоо и Microsoft Research изучили возможность замены полных движений на геометрические примитивы, создав более простую для человека систему естественного управления иммерсивным ПО. 

Meta* внесла важные для пользователей изменения в политику конфиденциальности умных очков Ray-Ban Meta. В электронном письме, которое компания разослала владельцам гаджетов, она подчеркнула два ключевых изменения: постоянно следящий за человеком и его окружением нейросетевой помощник Meta AI и неотключаемая передача всех записей голоса в облако.