В Microsoft уверены, что AR-очки могут создавать для пользователя настоящие голограммы. Демонстрации игровых и рабочих кейсов показывают, что дополненная реальность в HoloLens для зрителя не так уж далека от голографии и даже лучше неё, ведь возможности последней пока, прямо скажем, удручают людей, выросших на научно-фантастических фильмах Голливуда. Вспомните, как на ручных переговорных устройствах вырастали небольшие фигуры собеседников, а на сценах играли и танцевали виртуальные артисты. Именно так будет выглядеть в HoloLens по-настоящему трёхмерное поколение full-motion video или FMV.
Microsoft выпустила новое видео, в котором показывает возможности студии в редмондском офисе по переводу реальных людей и объектов в анимированные 3D-модели для HoloLens. Для этого в ней установлены более ста камер, видеоданные с которых обрабатываются при помощи алгоритмов построения трёхмерных моделей. В итоге прямо в окружающем вас пространстве появятся заранее снятые персонажи, отрисованные со всех сторон. Такой контент впечатляет, даже если забыть о скромном поле видимости тестовой версии очков MS.
FMV известно как интерактивное видео в компьютерных играх девяностых годов, в котором живые персонажи встраивались в компьютерный мир, что придавало происходящему с ними особую реалистичность. Хрестоматийным примером является оскароносный актёр Джей Кей Симмонс (J.K. Simmons), дававший советы по военной тактике в Command & Conquer: Red Alert 3. Использование живых актёров надолго впало в немилость на игровом рынке, но всё может вернуться, к тому же потенциал разработки Редмонда играми не исчерпывается.
Методика производства контента сложнее, чем простая съёмка по кругу. Программное обеспечение преобразует отснятый материал в точечную карту, грубо отражающую динамическую поверхность объекта. По словам Microsoft, в одном кадре содержатся данные о более чем 2,7 миллиона точек в трёхмерном пространстве. Далее софт делает модель монолитной, заполняя дыры, определяет наиболее важные детали, создаёт каркас и накладывает на него текстуры. Видео проигрывается со скоростью 12 Мбит/с — это значит, что с его просмотром не возникло бы проблем на сервисах вроде YouTube (например, именно такой битрейт сервис рекомендует для FullHD-роликов со скоростью 60 к/с).
По материалам VentureBeat