Facebook может копировать дополненную реальность Snapchat, Snapchat может делать то же самое с Facebook, но одна из них в конкурентном порыве постоянно выходит вперёд, а это и есть столь приятный нам прогресс. В этот раз опережает Facebook.
Отдел AI Camera Team в Facebook разработал метод распознавания позы человеческого тела и отделения людей на фото и видео от фона. Другими словами, это цифровой аналог хромакея или «зелёного экрана», который используют для смены фона на телевидении. И такая технология вскоре может оказаться доступной любому пользователю приложения самой большой в мире социальной сети. Исследователи также рассматривают разработку как способ жестового управления в видеоиграх — нечто вроде Kinect, только для мобильных устройств — и в качестве анонимайзера, который сможет в реальном времени скрывать людей на видео.
Как и с масками дополненной реальности для лиц, «костюмы дополненной реальности» (лучшего термина мы пока не придумали) в значительной степени зависят от технологий компьютерного зрения и искусственного интеллекта. Но разных направлений свои задачи: в первом случае нужно распознавать черты, детали лица и мимику, а во втором компьютер должен отслеживать и интерпретировать движения тела, позы, быть внимательнее к одежде, а также идентифицировать в сцене нескольких людей.
Для достижения этих целей инженеры использовали фреймворк обнаружения и сегментации объектов Mask R-CNN. Подробное техническое описание решения доступно в блоге Facebook.
Популярность лицевых масок показывает, что технологию «костюмов дополненной реальности» может ждать большой успех как на развлекательном, так и на деловом фронте. Нам лишь остаётся предположить, что она зайдёт на рынок именно со стороны простых развлечений для пользователей соцсети. Официальных заявлений о том, когда это случится, пока не последовало.
Не пропускайте важнейшие новости о дополненной, смешанной и виртуальной реальности — подписывайтесь на Голографику в ВК, Twitter и Facebook!
Далее: Facebook открыла код платформы компьютерного зрения Detectron