Технический директор Meta* заявил, что отслеживание языка в ближайшее время не станет стандартной функцией Quest по объективной технической причине. Но пока с ней не справились, развитие функции может взять на себя искусственный интеллект.
В регулярной открытой встрече с аудиторией Instagram* Эндрю Босворт, техдиректор и руководитель отдела Reality Labs раскрыл взгляд своей компании трекинг языка для аватаров в виаре.
По его словам, главным затруднением в этой задаче является необходимость камеры, которая смотрела бы пользователю в рот. Такой камеры в современных очках нет, и Босворт не уверен, что она появится, ведь её трудно вписать в дизайн устройства так, чтобы не отпугнуть массового покупателя.
Директор уточняет, что теоретически проблему может решить подключаемый к очкам аксессуар. Но «он все равно будет выглядеть довольно агрессивно», и Босворт «не уверен, что он будет хорошо продаваться»:
Я не уверен, что оно того стоит, вот ответ.
От идеальной ситуации разговор быстро перешел в плоскость достижимых результатов. Человек, ответственный за Quest, связывает надежды на трекинг языка с нейросетевым отслеживанием речи пользователя и работой с имеющимися камерами, которые в некоторых позициях языка способны его увидеть.
В Quest Pro работает рудиментарная реализация функции, которая определяет лишь то, насколько далеко пользователь высунул свою главную речевую конечность. Поддержка трекинга языка есть у очень небольшого числа приложений. Одним из них стал VRChat для SteamVR. Пока популярные устройства не наладят работу с функцией, разработчики не будут тратить на неё время.
Тем временем, HTC добилась отслеживания языка дополнительными модулями. В 2021 году компания выпустила такое устройство для Vive Pro, а в 2022-м — для Vive Focus 3.
*В России признана экстремистской организацией
Не пропускайте важнейшие новости о дополненной и виртуальной реальность — подписывайтесь на Голографику в Telegram, ВК и Twitter! Поддержите проект на Boosty.
Далее: Видео: как работают трекинг и окклюзия рук в Apple Vision Pro
