Всего через несколько дней после открытия компанией Apple SDK для visionOS российский разработчик Дмитрий Кудрявцев представил демо-версию соответствующего клиента ChatGPT. Прототип понимает голосовой ввод, пишет тексты, зачитывает их и показывает анимацию при обработке запросов. Ранее Дмитрий появлялся в наших новостях с фотограмметрическим приложением для оцифровки предметов реального мира Metaport.
Очки Vision Pro, для которых создано новое приложение, ещё не поступили в продажу даже как образцы для разработчиков, поэтому, как и энтузиасты по всему миру, Дмитрий вынужден готовиться к их релизу с официальным эмулятором устройства.
Софт, пока не получивший никакого названия, представляет собой смесь плоских элементов интерфейса, экранов и 3D-объектов. Здесь можно выбрать трёхмерную визуализацию помощника, задавать вопросы голосом или вводить их с помощью виртуальный клавиатуры. Ассистент тоже отвечает текстом и голосом. Есть история чата. Таким образом, по сравнению с веб-клиентом ChatGPT пользователь ничего не теряет, вместе с тем приобретая пару свежих возможностей.
Главными особенностями приложений в visionOS по сравнению с аналогами для смартфонов Дмитрий в письме в Голографику называет возможность удобной одновременной работы в нескольких окнах и естественное встраивание объёмных моделей в помещения с учётом специфики их обустройства, такой как геометрия пространства и окружающие вещи. Места для размещения контента тут намного больше, чем с плоскими экранами.
Что касается будущего этого прототипа, разработчик отмечает, что оно является универсальной оболочкой и может работать не только с ChatGPT:
Возможна интеграция с аналогичными AI-решениями от Сбера, Яндекса и так далее. Вполне реальна кастомизация специфики ответов и брендирование внешнего вида персонажа, например, для использования в выставках.
Не пропускайте важнейшие новости о дополненной и виртуальной реальности — подписывайтесь на Голографику в Telegram, ВК и Twitter! Поддержите проект на Boosty.
Далее: В самарском медвузе откроют федеральный центр компетенций по виртуальной и дополненной реальности