Фреймворк Apple Vision научили скелетному трекингу кошек и собак

149

Последнее обновление фреймворка Apple Vision (не путать с Vision Pro), которая даёт разработчикам инструменты компьютерного зрения для iOS и iPad, включает возможность скелетно идентифицировать и отслеживать собак и кошек.

На ежегодном мероприятии Apple WWDC компания провела сессию, на которой познакомила гостей с новыми возможностями трекинга животных в Vision. Система может работать с видео в реальном времени и с фотографиями и изначально способна отслеживать скелет человека.

Для животных Vision имеет шесть групп отслеживаемых точек, которые в совокупности описывают положение всего существа:

  • Голова: уши, глаза, нос
  • Передние ноги: правая нога, левая нога
  • Задние ноги: правая задняя нога, левая задняя нога
  • Хвост: начало хвоста, середина хвоста, конец хвоста
  • Туловище (шея)
  • Всё (содержит все отслеживаемые точки, дающие полную позу скелета)

Отслеживание хвоста и ушей потенциально открывает распознавание мимики. Система поддерживает до двух животных в сцене и, помимо отслеживания их положения, также может отличить кошку от собаки.

Фреймворк работает c iOS 17.0, iPadOS 17.0, tvOS 17.0 и macOS 14.0. С большой вероятностью его можно ждать на очках Vision Pro, но по этому поводу Apple пока не высказалась.

С видеозаписью презентации вы можете ознакомиться по ссылке.

Не пропускайте важнейшие новости о дополненной и виртуальной реальности — подписывайтесь на Голографику в Telegram, ВК и Twitter! Поддержите проект на Boosty.

Далее: Платформа разработки приложений под Apple Vision Pro откроется в июле