Включите выделенную одежду наблюдаемого человека

При индексировании видео с помощью расширенных параметров индексатора видео с помощью Azure AI Video Indexer можно просмотреть представленную одежду наблюдаемого человека. Данные предоставляют моменты в видеозаписи, где ключевые люди отчетливо видны. Они включают координаты людей, метки времени и кадр выстрела. Это понимание позволяет размещать высококачественную контекстную рекламу в видео. Например, где соответствующие объявления одежды соответствуют определенному времени в видео, в котором они просматриваются.

В этой статье описывается, как просмотреть аналитические сведения о одежде и о том, как оцениваются избранные изображения одежды.

Посмотреть вступительное видео

Вы можете просмотреть следующее короткое видео, в котором описывается, как просматривать и использовать полезные сведения о одежде.

Просмотр рекомендуемой одежды

Подробные сведения о одежде доступны при индексировании файла, выбрав вариант "Дополнительно" —> дополнительное видео или дополнительное видео + аудиозапись (в разделе "Видео + аудио индексирование"). Стандартная индексация не включает эту информацию.

Избранные изображения одежды ранжируются на основе некоторых из следующих факторов: ключевые моменты видео, длительность появления человека, текстовые эмоции и звуковые события. Аналитика выделяет наиболее значимый кадр для каждой сцены, что позволяет создавать контекстные объявления на протяжении всего видео. JSON-файл получает ранжирование по последовательности сцен в видео, при этом каждая сцена имеет верхний рейтинг кадра в качестве результата.

1. В правом верхнем углу выберите, чтобы скачать ZIP-файл артефакта: скачать ->Artifact (ZIP)
2. Открыть featuredclothing.zip.

Файл .zip содержит два объекта:

• featuredclothing.map.json — файл содержит экземпляры всех представленной одежды со следующими свойствами.

  • id — индекс ранжирования ("id": 1 является самой важной одеждой).
  • confidence — оценка представленной одежды.
  • frameIndex - лучший каркас одежды.
  • timestamp — соответствует значению frameIndex.
  • opBoundingBox — ограничивающий прямоугольник человека.
  • faceBoundingBox — ограничивающий прямоугольник лица человека, если обнаружен.
  • fileName - где сохраняется лучший кадр одежды.
  • sceneID — сцена, в которой отображается сцена.

  Пример рекомендуемой одежды с "sceneID": 1.

  "instances": [
    	{
      		"confidence": 0.07,
  			"faceBoundingBox": {},
  			"fileName": "frame_100.jpg",
      		"frameIndex": 100,
      		"opBoundingBox": {
          			"x": 0.09062,
          			"y": 0.4,
  				"width": 0.11302,
          			"height": 0.59722
  				},
     			 "timestamp": "0:00:04",
      		"personName": "Observed Person #1",
      		"sceneId": 1
    	}
  

• featuredclothing.frames.map — эта папка содержит изображения лучших кадров, в которых появилась представленная одежда, соответствующая свойству fileName в каждом экземпляре featuredclothing.map.json.

Допущения и ограничения

Важно отметить ограничения признаков одежды, чтобы избежать или смягчить последствия ложных обнаружения изображений с низким качеством или низкой релевантности. 

• Условие для демонстрируемой одежды состоит в том, что человек в одежде может быть найден в представлении наблюдаемых людей.
• Если лицо человека, надетого в рекомендуемую одежду, не обнаруживается, результаты не включают ограничивающий прямоугольник лиц.
• Если человек в видео носит более одного наряда, алгоритм выбирает свой лучший наряд в качестве единого изображения одежды.
• Когда они установлены, пути оптимизированы для обработки наблюдаемых людей, которые чаще всего появляются спереди.
• Ошибки в обнаружении могут возникать при перекрытии людей.
• Кадры, содержащие размытые изображения людей, более склонны к получению низкокачественных результатов.

Дополнительные сведения см. в ограничениях наблюдения людей.