Тег: мимика

В версии 60 своих SDK для Unity и нативного кода Meta* выпустила новое расширение OpenXR для отслеживания лиц, которое теперь включает язык. SDK Avatars ещё не получил поддержку этой функции, но сторонние решения для создания аватаров могут использовать её после обновления SDK.

На прошлогодней корпоративной конференции Meta* представила Presence Platform, набор решений машинного восприятия и искусственного интеллекта, который позволяет создавать проекты смешанной реальности с естественным взаимодействием с людьми и цифровыми объектами. Теперь, вместе с анонсом Quest Pro с цветными камерами, компания добавляет в платформу новый блок — Social Presence, решения для социального взаимодействия.

Новые аксессуары для Vive Focus 3 выпустила HTC. В ассортименте появились модули для отслеживания глаз и лицевой мимики, которые органично подключаются к очкам и предлагают «более естественный и захватывающий опыт виртуальной реальности, новые возможности для предприятий по измерению реакции пользователей и ещё более доступные методы взаимодействия, такие как управление взглядом».

Tobii начала сотрудничество с LIV и Ready Player Me над реализацией более выразительных цифровых аватаров. Теперь владельцы аватаров на этих платформах, обладающие очкам с трекингом Tobii, смогут более естественно общаться с друзьями и зрителями на публичных выступлениях. 

Пользователь Reddit Reggy04 вслед за твиттерианином Basti564 погрузился в прошивку Oculus Quest v32, обнаружив строки с упоминаниями Quest Pro и функций отслеживания мимики лица и глаз. Наличие этих данных в прошивке подтверждено независимыми источниками.

Трудно точно воссоздать лицо в динамике. А дополнительным осложнением является регулярно возникающая в ряде «крайних» случаев неестественная передача движений, которая для зрителя погружает, казалось, удачный аватар обратно «зловещую долину». Получается настоящий фильм ужасов. 

Исследовательская группа Facebook Reality Labs опубликовала подробное исследование метода контроля высокореалистичных аватаров в реальном времени, развернув предыдущую работу, которую назвала «Codec Avatars».

Вышло долгожданное обновление Expressive Avatars для Oculus Avatars. Оно добавляет симуляцию движений глаз, обновлённую технологию синхронизации губ и менее заметную, но важную в общении мимику.

Facebook купила Oculus, чтобы постепенно сделать виртуальную реальность пригодной для постоянного общения и водрузить на неё флаг социальной сети. Однако у компании Марка Цукерберга, равно как и у других игроков рынка, есть проблемы, которые необходимо решить для достижения этой цели. Одна из них — адекватная передача лицевой мимики пользователя аватару, чтобы общение было более естественным. […]

Oculus VR выпустила специальный плагин для Unity, который направлен на автоматическое обнаружение и преобразование человеческой речи в движения губ виртуальных аватаров. Это работает как с записями, так и с потоковым контентом — например, в аудиочате. Функционирование такого плагина переводит на новый уровень ассоциирование человека с его виртуальным альтер-эго, и последний приобретёт большее значение для пользователей Сети. […]