Фиксация поля зрения в виртуальной реальности в зависимости от движений всей головы — это известная проблема ВР-приложений. В жизни вы можете двигать не только головой, но и глазами, фокусируясь на деталях за пределами поля зрения неподвижного зрительного аппарата. Это важно потому, что, хотя двумя глазами человек может распознавать объекты в охвате 180° перед собой, трёхмерное распознавание работает в пределах 110°, а полноцветное зрение — в ещё меньшей области. Таким образом, чтобы пользователь очков виртуальной реальности мог видеть во всём естественном диапазоне, ему нужно преодолеть ограничение их окуляра.
В этом помогают системы отслеживания движений глаз или окулографии. Они видят, куда смотрят глаза, и перемещает картинку и фокус в правильное место, несмотря на пластмассовый тоннель вокруг. Такая возможность крайне интересна для игр, но намного важнее адаптировать её под серьёзные приложения. Например, под платформы для обучения хирургов. Им бывает очень важно, не отвлекаясь, быстро бросить взгляд на монитор и в ту же секунду вернуться к пациенту.
Редкие очки с окулографическими датчиками давно интересуют врачей, а компания FundamentalVR одной из первых предоставила им подходящее программное обеспечение.
Её платформа Fundamental Surgery представляет собой образовательный симулятор хирургических операций с продвинутой тактильной отдачей на основе передовых контроллеров. Например, вы можете работать с устройством в виде шариковой ручки на роботизированном манипуляторе, который имитирует сопротивление оперируемых органов. Наконечник манипулятора можно напечатать на принтере, чтобы обеспечить максимальное повторение формы инструмента. Есть поддержка перчаток HaptX. Но и то, и другое — большая редкость, не говоря об очевидной необходимости доработки систем обратной связи. В своих экспериментах компания признаёт это и ориентируется на будущее.
Этот курс направил разработчиков Fundamental Surgery к HTC Vive Pro Eye, одному из немногих серийных устройств с системой трекинга глаз. Сценарий применения не пришлось выдумывать: на тренировке в симуляторе пользователя сопровождает информационное окно, виртуальный заменитель монитора, с которым следует сверяться для получения подробных данных о ходе операции. Теперь пользователь может бросить быстрый взгляд на окно, не поворачивая голову.
Устройство также передаёт платформе новые данные, которые улучшают её аналитические возможности. Преподаватели более полно понимают, на что ориентируются ученики, и на что следует обратить их внимание.
Графически симулятор FundamentalVR очень реалистичен, но ограничивается развитием оборудования и финансовыми возможностями клиентов. Если клиенты создадут спрос на Fundamental Surgery и подобные симуляторы, это поможет вырасти всей отрасли. А результатом могут стать более подготовленные врачи.
Не пропускайте важнейшие новости о дополненной, смешанной и виртуальной реальности — подписывайтесь на Голографику в Telegram, ВК, Twitter и Facebook!
Далее: Surgical Theater начинает продажи ВР-систем хирургического планирования в Европе
