Учёные Корейского института передовых технологий (KAIST — Korea Advanced Institute of Science and Technology) представили третье поколение очков дополненной реальности собственной разработки K-Glass 3. С их помощью изучаются особенности передовых AR-интерфейсов для HMD с естественным вводом. Устройство предлагает управлять курсором, вводить текст на виртуальной клавиатуре и давать различные команды с помощью пальцев и системы трёхмерного распознавания жестов.
Ключевым звеном очков является экономичный многоядерный процессор, оптимизированный для алгоритмов стереозрения и глубокого машинного обучения, который в среднем потребляет всего 126,1 мВт в час и переходит в режим энергосбережения с потреблением 20 мВт, когда не фиксирует действий пользователя. Всё это позволяет пользоваться очками более 24 часов без перерыва. Чип состоит из ядра предварительной обработки для стереокартинки, семи ядер глубокого обучения для распознавания сцены (видео и звука) в реальном времени и движка рендеринга для дисплея. Распознавание сцены стереокамерами происходит за 33 миллисекунды.
Наряду с учёными KAIST, в проекте приняли участие специалисты по интерактивным системам корейской компании UX Factory.
Последние результаты работы над проектом были представлены на конференции IEEE ISSCC 2016 в Сан-Франциско в начале февраля в рамках доклада «A 126.1mW Real-Time Natural UI/UX Processor with Embedded Deep-Learning Core for Low-Power Smart Glasses» (ведущий автор — Сеон-Вук Пак (Seong-Wook Park), докторант Кафедры электротехники, KAIST).
Далее: ODG представила AR-очки R-7 и расширила девелоперскую программу
По материалам KAIST
