Китайская компания GravityXR презентовала собственные процессоры для пространственных вычислений. Среди них есть микросхема общего назначения для очков смешанной реальности, а также сопроцессоры для рендеринга и обработки данных с датчиков, разгружающие основную вычислительную платформу.
В линейке три процессора: G-X100, G-VX100 и G-EB100 плюс референсные очки и робототехническая платформа.
Флагманом стал G-X100, который компания позиционирует как решение для высокопроизводительных очков смешанной реальности и робототехники. 5-нанометровый чиплет имеет следующие характеристики:
- Разрешение — «бинокулярные 8K», то есть два дисплея 4K, частота до 120 Гц
- Пропускная способность памяти — 70 ГБ/с
- Задержка «фотон-фотон» — 9 мс
- Вычислительная мощность — 40 ТО/с для нейропроцессора, 10-ядерный цифровой сигнальный процессор
- Общая эквивалентная мощность — GravityXR говорит о 200 ТО/с, что, вероятно, является суммарной мощностью центрального, графического, нейросетевого и сигнального процессоров
- Поддержка камер и датчиков — 2 канала ввода для 16-мегапиксельной цветной камеры, поддержка 13 каналов данных с разнотипных датчиков
- Поддержка отслеживания глаз — есть
- Поддержка фовеального рендеринга — есть
- Поддержка внешних дисплеев (в стиле EyeSight у Vision Pro) — есть
- Поддержка шестиосевой навигации на алгоритмах SLAM (Simultaneous Localization and Mapping, одновременная локализация и построение карты)
- Поддержка распознавания жестов — есть
- Поддержка восприятия глубины — есть
- Энергопотребление — от 3 Вт с активной пространственной навигацией
Самый передовой процессор G-X100 лёг в основу фирменных очков G-X100-M1, которые играют роль референсной платформы для демонстрации технологии партнёрам. При весе менее 100 граммов и с компактным корпусом устройство способно дополнять реальность компьютерной графикой через непрозрачные дисплеи.
Характеристики G-X100-M1:
- Тип дисплеев — microOLED
- Бинокулярное разрешение — 5K (36 пикселей на градус)
- Угол обзора — 90°
- Конструкция — открытая
- Сквозная передача изображения — две 16-мегапиксельные цветные камеры
- Задержка — 9 мс
- Пространственная навигация — шестиосевая
- Отслеживание глаз — есть
- Отслеживание рук — есть
Далее в иерархии GravityXR идёт процессор G-VX100 для компактных умных очков с нейросетевыми функциями и / или дополненной реальностью. Среди его преимуществ разработчик называет низкое энергопотребление при непрерывной активности датчиков и обработке сигналов. Эта микросхема работает в паре с другой — основной — вычислительной платформой, которую разгружает от фоновых задач.
Характеристики G-VX100:
- Размещение — на переносице или у виска
- Поддержка камеры — 16 Мп фото, видео 4K, 30 к/с
- Скорость снимка — 200 мс
- Поддержка записи пространственного видео — есть
- Потребляемая энергия — 260 мВт при записи 1080p со скоростью 30 к/с
- Нейросетевые функции — мультимодальная активация, поддержка многоэтапного пробуждения и интеллектуального распознавания сцен
- Поддержка отслеживания глаз — есть
- Поддержка отслеживания рук — есть
- Сквозная обработка изображений — есть
Наконец, последняя новинка G-EB100 лишь отчасти относится к пространственным вычислениям. Она служит основой для навигации роботов. Информация об этом процессоре скудна, его представили в рамках платформы разработки робототехники G-X100-H1.
Характеристики G-EB100:
- Машинное зрение — 32-мегапиксельное бинокулярное
- Задержка между принятием решения и отрисовкой на экране оператора — менее 25 мс (без учёта задержки сети)
- Ключевые функции — реконструкция и управление 3D-моделями в реальном времени, рендеринг «цифрового человека» с использованием искусственного интеллекта (по всей видимости, на дисплее оператора; заявлены высокая точность и поддержка 3D для невооружённых глаз)
- Удалённое управление и сбор данных
GravityXR не назвала сроки и условия поставки своих компонентов, а также место производства. Однако, в зависимости от политики компании, они могут стать кандидатами на интеграцию в российские устройства, пока специализированные процессоры от американской Qualcomm под санкциями.
Не пропускайте важнейшие новости о дополненной и виртуальной реальности — подписывайтесь на Голографику в Telegram, ВК и Twitter! Поддержите проект на Boosty.
Далее: Alibaba выпустила умные очки с Qwen, камерами и дисплеями
