Функция Scan сделала Snapchat поисковиком на компьютерном зрении

165

Snapchat, мессенджер компании «Snap», известен исчезающими сообщениями и эффектами дополненной реальности, которые у него позаимствовали все социальные сети в мире. Последняя часть разработки привела к новому достижению в сфере компьютерного зрения. Теперь Snapchat понимает, что вы ему показываете, и даже предлагает купить похожие вещи.

В дело пошло обновление, которое анонсировали в мае. Разработчики модернизировали функцию сканирования и поставили её кнопку на видное место экрана камеры. Компьютерное зрение научили распознавать объекты. В начале эта функция применялась для рекомендации эффектов дополненной реальности в зависимости от объекта, а теперь визуальный поиск стал самостоятельным решением.

Это не новая идея. В 2017 году Google представила поисковую функцию «Lens» для сканирования объектов, идентификации и поиска похожих в интернете. Lens работает в смартфонах на Android и в мобильном приложении Google. Одноимённую функцию имеет мобильный клиент Pinterest, который показывает изображения, похожие на то, что вы сканируете.

Snap не изобретала визуальный поиск, но может очень хорошо его использовать. Приложение Snapchat ежедневно включают около 300 миллионов человек; больше 170 миллионов уже запускали Scan хотя бы раз в месяц — до того, как кнопку сканирования вывели на одно из лучших мест главной функции приложения, камеры.

В последней версии Scan есть распознавание пород собак, растений, вина, автомобилей и блюд. Большинство функций работает с базами данных партнёров Snapchat. Например, за определением вин стоит Vivino, а рекомендация предметов одежды к покупке реализована через технологии Screenshop, стартапа, который Snap поглотила несколькими месяцами ранее. Покупки через Scan скоро обогатятся сканированием сохранённых в памяти устройства изображений.

Параллельно компания готовит автоматический подбор к окружению комбо из режима камеры, саундтрека и эффекта. Если вы наведёте камеру на небо, вам предложат фильтр, музыку и линзы, специально разработанные для работы с небом. Применить можно будет всё сразу.

Не пропускайте важнейшие новости о дополненной и виртуальной реальности — подписывайтесь на Голографику в Telegram, ВК, Twitter и Facebook!

Далее: MyWebAR получила собственный SLAM-трекинг и новый функции аннотирования