Российский разработчик показал клиент ChatGPT для Apple Vision Pro со сменными аватарами и голосовым вводом

114

Всего через несколько дней после открытия компанией Apple SDK для visionOS российский разработчик Дмитрий Кудрявцев представил демо-версию соответствующего клиента ChatGPT. Прототип понимает голосовой ввод, пишет тексты, зачитывает их и показывает анимацию при обработке запросов. Ранее Дмитрий появлялся в наших новостях с фотограмметрическим приложением для оцифровки предметов реального мира Metaport.

Очки Vision Pro, для которых создано новое приложение, ещё не поступили в продажу даже как образцы для разработчиков, поэтому, как и энтузиасты по всему миру, Дмитрий вынужден готовиться к их релизу с официальным эмулятором устройства.

Софт, пока не получивший никакого названия, представляет собой смесь плоских элементов интерфейса, экранов и 3D-объектов. Здесь можно выбрать трёхмерную визуализацию помощника, задавать вопросы голосом или вводить их с помощью виртуальный клавиатуры. Ассистент тоже отвечает текстом и голосом. Есть история чата. Таким образом, по сравнению с веб-клиентом ChatGPT пользователь ничего не теряет, вместе с тем приобретая пару свежих возможностей.

Главными особенностями приложений в visionOS по сравнению с аналогами для смартфонов Дмитрий в письме в Голографику называет возможность удобной одновременной работы в нескольких окнах и естественное встраивание объёмных моделей в помещения с учётом специфики их обустройства, такой как геометрия пространства и окружающие вещи. Места для размещения контента тут намного больше, чем с плоскими экранами.

Что касается будущего этого прототипа, разработчик отмечает, что оно является универсальной оболочкой и может работать не только с ChatGPT:

Возможна интеграция с аналогичными AI-решениями от Сбера, Яндекса и так далее. Вполне реальна кастомизация специфики ответов и брендирование внешнего вида персонажа, например, для использования в выставках.

Не пропускайте важнейшие новости о дополненной и виртуальной реальности — подписывайтесь на Голографику в Telegram, ВК и Twitter! Поддержите проект на Boosty.

Далее: В самарском медвузе откроют федеральный центр компетенций по виртуальной и дополненной реальности