Живая аналитика ИИ для Индексатор видео ИИ Azure с поддержкой Azure Arc — предварительная версия

Динамическая аналитика искусственного интеллекта обнаруживает людей, транспортные средства или пользовательские объекты и ситуации в потоках динамической камеры. Они выполняются в вашей периферийной среде Azure Arc, чтобы немедленно реагировать на обнаружения. В отличие от отправленного анализа файлов, аналитика ИИ в режиме реального времени обрабатывает динамический поток и возвращает обнаружения непрерывно, а не завершенный индекс после обработки файлов.

В этой статье основное внимание уделяется потоковой трансляции видео, осуществляемой при помощи Arc, которая предоставляет аналитические сведения в режиме реального времени для применения к камерам.

Типы реал-тайм инсайтов ИИ

Существует два типа аналитики искусственного интеллекта в режиме реального времени: встроенное обнаружение для людей и транспортных средств, а также пользовательские аналитические сведения для объектов и ситуаций.

Встроенная аналитика для обнаружения людей и транспортных средств

Встроенная динамическая аналитика обнаруживает людей и распространенные типы транспортных средств, такие как автомобили, фургоны и грузовики. Обнаружение выполняется автоматически в динамических потоках при его включении в предустановку. Он рисует ограничивающие прямоугольники, показывает счетчики в режиме реального времени и назначает идентификатор отслеживания для каждой камеры на основе визуальных функций и расположений, а не биометрических данных. Когда объект покидает кадр и возвращает его, он получает новый идентификатор.

Нет необходимости настраивать или тренировать этот инсайт. Включите его в предустановке. Используйте его для количества заполнений, потока трафика и общего надзора за сайтом.

Ниже приведен пример динамического потока с обнаружением людей и транспортных средств:

Снимок экрана: динамический поток с обнаружением людей и транспортных средств.

Чтобы использовать эти встроенные обнаружения, выполните следующие действия.

  1. Создайте предустановку и выберите "Люди " и " Автомобиль".
  2. Примените предустановку к камере.
  3. Следите за прямым эфиром для счетчиков, полей и трекинга.

Индивидуальные инсайты

Пользовательские аналитические сведения позволяют обнаруживать объекты или ситуации, которые выходят за рамки встроенного обнаружения людей и транспортных средств. Определите, что вам нужно с описаниями текста и необязательными примерами изображений, а затем уточняйте отрицательные примеры при необходимости. Выберите аналитику объектов для определенных элементов и сведения о ситуации для условий в контексте. Используйте их для проверок безопасности, операционных исключений или мониторинга для конкретных сайтов. Дополнительные сведения см. в разделе "Пользовательские аналитические сведения" в каталоге live Аналитика ИИ.

Чтобы использовать пользовательский анализ:

  1. Создайте пользовательский инсайт в каталоге инсайтов ИИ.
  2. Добавление текстовых описаний и необязательных примеров изображений.
  3. Включите пользовательское представление в предустановку.
  4. Примените предустановку к камере.

Высокоуровневый рабочий процесс: от обнаружения до развертывания

Выполните следующие действия, чтобы настроить динамическую аналитику ИИ для ваших камер:

  1. Определите ваши потребности - Решите, что именно необходимо отслеживать, будь то заполненность, риски безопасности, проверка оборудования, использование встроенного обнаружения людей или транспортных средств, или создание индивидуальных аналитических данных.
  2. Получите доступ к каталогу аналитики ИИ — перейдите на портал VI и отфильтруйте по среде, >, для просмотра доступных аналитических сведений.
  3. Настройте аналитические сведения . Для встроенной аналитики конфигурация не требуется. Для пользовательских аналитических сведений определите, что нужно обнаружить с помощью текстовых описаний и (или) примеров изображений.
  4. Создайте предустановку — объедините выбранные аналитические сведения в предустановку (например, обнаружение людей и обнаружение жесткой шляпы и оповещение о переполнении).
  5. Примените предустановку к камере— свяжите предустановку с одним или несколькими потоками камеры.
  6. Мониторинг в режиме реального времени — просмотр обнаружений с ограничивающими прямоугольниками, подсчет и отслеживание на видеопотоке с камеры.

Ограничения

Следующие ограничения применяются ко всем аналитическим сведениям искусственного интеллекта в режиме реального времени (люди, транспортные средства и настраиваемые):

  • Трекер объектов поддерживает до 150 одновременных треков на поток.
  • Оценка достоверности, показанная в пользовательском интерфейсе, отражает первое вхождение трека.
  • Небольшие объекты не могут быть обнаружены (меньше 35 x 35 пикселей).
  • Детектор может пропустить объекты в темных районах и тяжелых погодных условиях.
  • Для лучшего обнаружения и отслеживания объектов они должны быть полностью видимыми (без окклюзий), с хорошим освещением.
  • Большие толпы могут быть недооценены моделью и могут не обнаруживать всех людей.
  • Средство отслеживания назначает другой идентификатор одному и тому же объекту после того, как он выходит и снова входит в поле зрения камеры.
  • Окклюзии могут снизить качество результатов и вызвать фрагментацию процесса отслеживания объектов.
  • Детектор может неправильно классифицировать объекты, наблюдаемые с крутых углов.