Quest 3 получат функции компьютерного зрения, аналогичные возможностям смарт-очков Ray-Ban Meta*. С помощью программного обновления устройство научат разговаривать благодаря генеративному чат-боту с возможностями голосового управления операционной системой, а также узнавать окружающие объекты через камеры. Решение назвали Meta AI with Vision («Искусственный интеллект Meta со зрением») и начнут внедрять этим летом с США и Канады.
В анонсе Meta приводит описание функций с примерами:
Допустим, вы смотрите на YouTube в смешанной реальности видео о захватывающих дух походах, пока собираете вещи для предстоящей поездки в Джошуа-Три. Вы можете попросить у Meta AI совета, как лучше одеться в летнюю погоду. Или вы можете поднять пару рубашек и сказать: «Посмотри и скажи мне, какой верх дополнит эту одежду». Вы можете получить прогноз, чтобы подготовиться к погоде, и даже попросить рекомендации местных ресторанов, чтобы побаловать своего внутреннего гурмана.
Или, скажем, вы используете очки и слушаете музыку, работая над школьным заданием на огромном виртуальном мониторе. Вы можете попросить Meta AI определить некоторые из самых запоминающихся цитат из шекспировского «Гамлета» и объяснить значение монолога «Быть или не быть» или пьесы в пьесе.
Вы можете играть в Assassin’s Creed Nexus VR, прыгая по крышам, когда проснётся любопытство. Почему бы не спросить у Meta AI, были ли в колониальном Бостоне настоящие убийцы? Ответ может вас удивить…
Сейчас очки могут видеть только то, что происходит в реальном мире, не соединяя это с виртуальными элементами. Meta намекает, что её модель ИИ в итоге сможет получать информацию из обоих источников.
Нейросетевые функции используют решения Microsoft, а именно Bing AI. Это связано с поиском информации в интернете. Вместе с тем, Meta не рассказала, обрабатываются ли запросы на устройстве или в облаке, а также не затронула такие вопросы, как шифрование и конфиденциальность.
Meta AI with Vision будет работать только на Quest 3 и более новых очках. Quest 2 и другие ранние модели останутся не у дел.
В то время как Meta внедряет возможности искусственного интеллекта на свои устройства, другие компании с этим не торопятся. Единственный игрок иммерсивного рынка с подобным решением — Apple с Apple Intelligence — не высказывал намерений вводить свой комплекс генеративных нейросетей на Vision Pro. HTC, Pico, Varjo, DPVR и другие менее известные производители очков хранят молчание по поводу системных чат-ботов и визуального поиска.
*В России признана экстремистской
Не пропускайте важнейшие новости о дополненной и виртуальной реальности — подписывайтесь на Голографику в Telegram, ВК и Twitter! Поддержите проект на Boosty.
Далее: Meta* борется за EssilorLuxottica с Google, а очки Hypernova оказались слишком большими для Ray-Ban
