Сервис Shader Playground генерирует эффекты для видео в реальном времени


Сервис Shader, который применяет дополненную реальность и искусственный интеллект для обновления опыта видеозвонков и производства видеоконтента, запустил Shader Playground, редактор для автоматического создания эффектов для видео на основе нейронных сетей.

Shader упрощает производство контента для пользователей без специальной подготовки. Разработчики делают упор на сохранении узнаваемости первичных кадров для поддержания визуального контакта с людьми, воспроизведения микрожестов и мимики, которые делают общение естественным.

Команда сервиса сформировалась на создании эффектов для платформ Snap и Meta*, а также игровых и иммерсивных проектов для Blizzard и WANNABY. Это легло в основу своего софта. Shader позволяет создавать фильтры, визуальные эффекты и линзы с помощью текстовых и голосовых подсказок в приложении на iOS и в вебе.

Мы глубоко погружаемся в поведение пользователей и видим, что поколения Z и Альфа полностью отдаются новым форматам общения с цифровыми аватарами. Люди действительно взбудоражены возможностью творить в реальном времени, просто используя камеры своих телефонов. И это мотивирует нас сделать следующие шаги и изучить, как наши технологии могут стать более социальными, как мы могли бы создать собственную коммуникационную платформу с возможностью создания фильтров, эффектов, фонов и масок на основе ИИ в реальном времени, — говорит Дарья Сесицкая, соучредитель и генеральный директор Shader.

В Shader Playground можно перерисовывать кадры в мелочах и крупными мазками под определённые стили или создавать цифровые личности, которые подстраиваются под оригинал в реальном времени — в сеансах видеосвязи.

Shader отметила, что пристально изучает интеграцию своих эффектов в платформы потокового видео, такие как Discord и Twitch, по API и приглашает бета-тестеров использовать собственный SDK AR Creator.

*В России признана экстремистской

Не пропускайте важнейшие новости о дополненной и виртуальной реальности — подписывайтесь на Голографику в Telegram, ВК и Twitter! Поддержите проект на Boosty.

Далее: LIV стала официальной платформой для скринкастинга на Quest