Palo Alto Research Center Incorporated (PARC), исследовательско-технологическая компания под контролем Xerox, объявила о заключении контракта на $5,8 миллиона с Управлением перспективных исследовательских проектов Министерства обороны США (Defense Advanced Research Projects Agency, DARPA). Контракт подразумевает разработку системы инструктирования людей по работе с оборудованием в дополненной реальности с применением рекомендательных функций на основе искусственного интеллекта.
В рамках контракта PARC будет работать с Калифорнийским университетом в Санта-Барбаре, Университетом Ростока и Patched Reality, которая займётся ИИ-разработкой. В PARC рассказывают, что алгоритмы должны преобразовывать текстовые и видеоруководства в формат, которым компьютер будет оперировать для создания инструкций в дополненной реальности с отслеживанием выполнения задач.
PARC будет ведущим подрядчиком в проекте, известном как «Автономное мультимодальное усваивание для поддержки по выполнению задач» (Autonomous Multimodal Ingestion for Goal-Oriented Support, AMIGOS), для программы управления задачами с учётом особенностей человеческого восприятия. В рамках проекта будут представлены новые методы извлечения процедурных знаний из контента, восприятия окружающей среды, формирования выводов о физических задачах, а также обеспечение диалогового и ДР-руководства, персонализированного с учётом уровня знаний конкретного пользователя.
Проще говоря, цель в том, чтобы дать возможность механикам, медикам и другим специалистам выполнять задачи в рамках своих навыков и за их пределами, информируя и инструктируя их по выполнению задач, которые требуют физических манипуляций объектами.
В рамках проекта DARPA будет поставлять две основные системы.
- Первая будет автономным компонентом, который может учиться с помощью нескольких модальностей, таких как распознавание текста и зрение, для извлечения шагов из немаркированного контента, вроде текстовых инструкций, иллюстраций и обучающих видео.
- Вторая система будет онлайн-компонентом, который использует гибридный ИИ-подход с символическими и нейросетевыми элементами. Она будет создавать интерактивные руководства дополненной реальности на основе информации, извлечённой первым компонентом. Такое руководство будет персонализировано с учётом способностей отдельного пользователя, включая эмоциональное состояние.
Ранее в этом году Xerox объявила о приобретении CareAR и создании CareAR Holdings (объединение CareAR, DocuShare и XMPie). PARC подчеркнула, что опыт, полученный в проекте AMIGOS, поможет при разработке будущих продуктов для CareAR.
Не пропускайте важнейшие новости о дополненной и виртуальной реальности — подписывайтесь на Голографику в Telegram, ВК, Twitter и Facebook!
Далее: ПО для инструктирования рабочих и инженеров Taqtile Manifest вышло на iPad
