Meta* выпустила Quest-приложение для изучения языков с открытым исходным кодом. Оно сочетает сквозной режим для смешанной реальности с распознаванием объектов на основе искусственного интеллекта.
Приложение Spatial Lingo: Language Practice помогает пользователям практиковать английский или испанский языки, используя окружающие предметы, то есть в реальном контексте. А кроме этого оно выступает основой для экспериментов других разработчиков, которые могут делать свой софт на Unity без оплаты роялти и повышать ценность всей экосистемы Quest для обычных потребителей.
Meta называет Spatial Lingo «передовым демонстрационным приложением», призванным превратить окружение в интерактивный класс благодаря возможности наложения переведённых слов на реальные объекты с помощью ИИ и API сквозной камеры Quest.
Нейросетевая подсистема также включает 3D-помощника, который будет оказывать поддержку и собирать обратную связь во время разговорной практики. Он анализирует голос, оценивает ответы и помогает осваивать произношение в реального времени.
Разработчики найдут Spatial Lingo на GitHub и в Horizon Store. Новинка поддерживает только Quest 3 и 3S.
*В России признана экстремистской
Не пропускайте важнейшие новости о дополненной и виртуальной реальности — подписывайтесь на Голографику в Telegram, ВК и Twitter! Поддержите проект на Boosty.
Далее: Pico раскрыла нюансы пространственной разработки в новых примерах для Unity
