Примечания о выпуске Индексатора видео Azure AI

Чтобы оставаться в курсе последних разработок индексатора видео Azure AI, в этой статье приведены сведения о следующих возможностях:

• Последние выпуски.
• Известные проблемы
• Исправления ошибок
• Нерекомендуемые функции.

Просмотрите эту страницу, чтобы просмотреть последние обновления.

Ноябрь 2025 г.

Анализ видео в режиме реального времени (предварительная версия) с помощью Индексатора видео Azure AI, поддерживаемого Azure Arc

Индексатор видео Azure AI с поддержкой Azure Arc вводит анализ видео в реальном времени, обеспечивая интеллектуальную обработку видео на периферии сети. Извлеките полезные аналитические сведения из потоков видеотрансляции с низкой задержкой и полной конфиденциальностью данных, сохраняя все данные видео в локальной среде. Azure Arc обеспечивает централизованное управление и масштабируемость.

Дополнительные сведения см. в обзоре анализа видеотрансляций.

Новые возможности в анализе в режиме реального времени:

• Агентическая аналитика: Модульная архитектура на основе агента с специализированными агентами ИИ, обученная обнаруживать определенные события. Предварительно созданные агенты поддерживают обнаружение таких угроз безопасности, как проблемы с взаимодействием с клиентами или операционные аномалии. Используйте API для активации агента и предоставления инструкций по обнаружению событий. Вам не нужно знать, какой агент лучше всего подходит для задачи. Индексатор видео Azure AI направляет запросы соответствующему агенту.

• Пользовательские аналитические сведения об искусственном интеллекте с естественным языком: Определите логику пользовательского обнаружения с помощью естественного языка для мониторинга определенных объектов или ситуаций. Никаких технических знаний не требуется. Опишите, что вы хотите обнаружить, и загрузите вспомогательные изображения или отрицательные примеры для более точной настройки обнаружения. Доступно как через API, так и на портале.

• Сводка событий: Создайте сводки конца смены с собственным фокусом, чтобы получить текстовую сводку из видеоматериалов. Помочь командам быстро просмотреть ключевые события и операционные результаты.

• Область интереса: Определите определенные области в видеокадре, где необходимо сосредоточиться на анализе.

Дополнительные сведения см. в следующих статьях:

• Обзор анализа видео в режиме реального времени
• Управление расширениями анализа в режиме реального времени
• Создание пользовательской аналитики
• Создание сводки событий для кадров камеры
• Пометить интересующую область

Май 2025 г.

Добавлена поддержка кастомизации текстовой суммаризации

Добавлена поддержка настройки текстового суммирования с необязательным параметром addToEndOfSummaryInstructions для API создания видеосводки. Этот параметр позволяет улучшить текстовую сводку видео, включив дополнительные сведения с помощью естественного языка. Например, вы можете использовать его для включения информации о людях, которые появляются, общие темы, обсуждаемые, и бренды, упомянутые в видео.

Дополнительные сведения см. в разделе "Настройка текстового видео сводки".

Апрель 2025 г.

Усовершенствованный обмен сообщениями об ошибках

При попытке индексировать неподдерживаемый тип файла ответ возвращает ошибку UnsupportedFileType . Дополнительные сведения о поддерживаемых типах файлов см. в разделе "Поддерживаемые форматы файлов".

Март 2025 г.

Общая доступность Индексатора видео Azure AI, поддерживаемого Arc

Индексатор видео Azure AI, поддерживаемый Arc, теперь доступен в широком доступе. Теперь вы можете запустить Индексатор видео в пограничной среде для создания аналитических сведений о аудио и видео и текстовых сводок по видео на более чем 30 исходных языках. Дополнительные сведения см. в статье Индексатор видео Azure AI, работающий с помощью Arc.

Поддержка индексатора видео Azure для конфиденциальных конечных точек

Теперь общедоступна поддержка индексатора видео Azure для частных конечных точек. Теперь организации могут повысить безопасность с помощью частных конечных точек, чтобы разрешить клиентам в виртуальной сети безопасно получать доступ к данным через приватный канал. Это обеспечивает частное перемещение трафика данных через магистральную сеть Майкрософт, а не использование общедоступных конечных точек. Для получения дополнительной информации см. раздел "Частные конечные точки с Azure AI Video Indexer".

Февраль 2025 г.

Добавлены индонезийские и литовские языки в качестве исходных языков

Мы добавили поддержку видео с использованием индонезийских и литовских исходных языков. Список поддерживаемых языков см. в поддержке языков в Индексаторе видео Azure.

Изменение URL-адреса для файла мини-приложения mediator.js

Индексатор видео Azure AI изменил URL-адрес для доступа к файлу mediator.js, что позволяет внедренным видеопроигрывателем и мини-приложениям аналитических сведений взаимодействовать. Если веб-сайт использует файл mediator.js, обновите URL-адрес до 1 мая. Старый URL-адрес перестает работать 1 мая, после чего проигрыватель и мини-приложения аналитики не смогут взаимодействовать.

Старый URL-адрес mediator.js: https://breakdown.blob.core.windows.net/public/vb.widgets.mediator.js

Новый URL-адрес mediator.js: https://aka.ms/vi-mediator-file

Дополнительные сведения см. в разделе Внедрение виджетов в вашем приложении или блоге.

Мультимодальное суммирование видео теперь в общем доступе.

Мультимодальное резюмирование видео теперь доступно в общедоступной версии для Azure Video Indexer. Эта функция использует новейшие технологии LLM и SLM, такие как Azure OpenAI и Phi, для предоставления комплексных сводок видеоконтента путем объединения аналитических сведений из нескольких модальностей, включая аудио, визуальный элемент и текст.

Январь 2025 г.

Сводка многомодальных видео с помощью GPT-4o

Наша многомодальная сводка видео теперь поддерживает GPT-4o, создавая более точные сводки. Чтобы использовать многомодальную сводку видео, см. раздел Текстовое суммирование.

Усовершенствованная многомодальная текстовая сводка видео с ключевыми кадрами

Мы добавили усовершенствования в функцию многомодальной текстовой аннотации видео. Обновленная логика теперь лучше захватывает видеоконтент, интегрируя более релевантные ключевые кадры, что приводит к более точным сводкам.

Добавлен филиппинский язык в качестве исходного языка

Мы добавили поддержку видео с помощью исходного языка Филиппин. Список поддерживаемых языков см. в поддержке языков в Индексаторе видео Azure.

Добавлен параметр распознавания знаков препинания в аудио

Мы добавили новый необязательный параметр, punctuationMode, в наши API Upload и Reindex. Этот параметр определяет, следует ли явно распознавать знаки препинания при транскрибации звука. Например, речевой "период" транскрибируется как период ., а dot dot dot как многоточие .... Дополнительные сведения см. на портале разработчика.

Декабрь 2024 г.

Обновления политики фильтрации для многомодального резюмирования видео с помощью Azure OpenAI

Мы обновили нашу политику, касающуюся фильтров вредоносного контента в многомодальной текстовой сводке видео. Эти фильтры больше не являются обязательными, но мы по-прежнему рекомендуем настроить их, чтобы обеспечить блокировку вредного содержимого. Если вы хотите полностью отключить вредоносные фильтры содержимого, зарегистрируйтесь в следующей форме: Azure OpenAI Limited Access Review: Modified Content Filtering.

Кроме того, текстовая аннотация видеороликов теперь поддерживает фильтр "Защитные щиты" для прямых атак (джейлбрейк). Мы рекомендуем добавить этот фильтр в развертывание системы.

Дополнительные сведения о фильтрах, необходимых для получения сведений о многомодальных видео с помощью Azure OpenAI, см. в разделе "Использование текстовой суммации".

Ноябрь 2024 г.

Краткий обзор многомодального видео — облако и периферия

Мы рады представить многомодальную видеоаналитику, которая улучшает нашу текстовую сводку видео за счет анализа ключевых кадров, а также аудио- и видеоданных. Эта функция доступна как в облаке, работающем на базе Azure OpenAI, так и на периферийных устройствах в составе VI, поддерживаемого ARC. В нем используется последняя визуальная модель Phi3.5, которую можно настроить для запуска с графическими процессорами для повышения производительности.

API расширенного содержимого запроса

Наш Video-to-Text API, также известный как API контента подсказок, теперь поддерживает больше моделей: Llama2, Phi3, Phi3.5, GPT-4O и GPT-4O Mini. Это улучшение обеспечивает большую гибкость при преобразовании видеоконтента в текст и открывает дополнительные возможности при использовании Индексатора видео Azure. Вы можете собирать сведения из Индексатора видео Azure в формате запроса, который можно настроить, выбрав имя модели и изменив стиль запроса. Стиль "Обобщённый" идеально подходит для задач, таких как сводки видео, именование видео и описание основных событий, в то время как стиль "Полный" более подходит для таких случаев использования, как вопросы и ответы (Q&A), RAG и поиск. Дополнительные сведения об этом API см. в разделе Операции и содержимое запроса Azure Video Indexer.

Октябрь 2024 г.

Новый пример кода

Мы добавили новый пример кода для экспорта данных из Azure AI Video Indexer в Azure Data Explorer с использованием Logic Apps.

Август 2024 г.

Усиленная защита для текстового резюмирования видео

Текстовая сводка видео теперь включает функции предотвращения рисков джейлбрейк-атаки. Этот новый фильтр безопасности необходимо добавить в AOAI, чтобы воспользоваться суммированием текстовых видео на основе языковой модели. Дополнительные сведения см. в разделе "Сводка по текстовому видео" с помощью Azure OpenAI.

Текстовая сводка видео на устройстве на периферии сети

Мы выпустили запись в блоге Индексатор видео Azure AI и Phi-3 представили текстовое резюме видео на периферии: История о совместной эффективности.

Июль 2024 г.

Текстовая сводка на VI, поддерживаемая Arc

Возможность текстового суммирования теперь доступна на VI, включенном с помощью расширения Arc, благодаря последней модели Phi 3. Вы можете воспользоваться теми же функциями, что и в облаке, включая настройку сводки с несколькими параметрами: формальные, случайные, короткие и длинные.

Улучшения идентификации языка

• Улучшены время обработки и качество определения одного языка.
• Если в файле есть несколько языков (и вы попросили идентификацию одного языка):
  • Возвращается наиболее доминирующий язык, который отображается в течение самого продолжительного периода.
  • Артефакт содержит все языки, определяемые речью в исходном видео.
• Расшифровка включает только строки наиболее доминирующего языка и исключает строки, содержащие разные языки.

Улучшения проигрывателя и доступности

Проигрыватель веб-сайта был обновлен до последней версии базы Shaka. Проигрыватель также включен в мини-приложения.

Улучшения доступности были реализованы для веб-сайта.

Июнь 2024 г.

Примеры кода

• Чтобы упростить поиск соответствующего видеоматериала для учащихся и преподавателей, используйте индексатор видео Azure AI с Помощью Microsoft Azure OpenAI. См. запись блога по улучшению интерфейса поиска обучения с помощью индексатора видео Azure AI и исходного кода.
• Используйте Azure LogicApps для классификации автомобилей, обнаруженных в видео. В этом примере используется возможность «Bring Your Own» индексации видео для обнаружения объектов и GPT-4 от Azure OpenAI для расширенной классификации. Просмотрите демонстрацию YouTube и пример кода.

Увеличение ограничения длительности файла

Все предустановки теперь поддерживают индексирование файлов до шести часов (предыдущее ограничение было четыре часа), а предустановка "Базовый звук" поддерживает индексирование файлов до 12 часов.

Май 2024 г.

Текстовое резюмирование

Индексатор видео в Azure теперь содержит краткие сводки о том, о чем видео идет без просмотра всего видео. Это может сэкономить вам время, обрабатывая длинные видео и предоставляя вам суть в более коротком формате. Он превращает длинные видео в краткие и легко воспринимаемые сводки.

В нем используются алгоритмы сводных данных для выявления наиболее релевантных аналитических сведений для видео. Она включает в себя оценку аналитических сведений на основе их важности и релевантности к общей теме. Удобный интерфейс позволяет вводить видео и настраивать нужный тип сводки.

Вы можете настроить сводку, выбрав "Короткий", "Длинный", "Формальный" или "Случайный" и указать развертывание конкретной модели.

Дополнительные сведения о текстовой суммации см. в разделе "Обзор текстовой сводки".

Интеграция Azure OpenAI

Индексатор видео Azure теперь предлагает интеграцию с Azure OpenAI. Вы можете подключить ресурс Azure OpenAI при создании новой учетной записи Индексатора видео Azure или добавить ее в существующую учетную запись Индексатора видео Azure. При подключении VI к Azure OpenAI можно использовать возможность сводки текста, доступную из API и на портале.

Для получения дополнительной информации о подключении Azure OpenAI к вашей учетной записи VI см. в статье "Создание или обновление учетной записи Azure AI Video Indexer с подключением Azure OpenAI".

Расширение API контента запроса

API запроса контента Azure AI Video Indexer теперь поддерживает дополнительные языковые модели: Phi 2, Llama и GPT 4V. При использовании API содержимого запроса с GPT 4V он выводит ключевые кадры, которые языковая модель может исследовать, а также другие данные.

Апрель 2024 г.

Исключите модели

Теперь можно исключить модели при индексировании с помощью веб-сайта VI и API. При отправке видео в индекс, выберитепредварительные настройки индексирования>, а затем выберите модели ИИ, чтобы исключить из результатов индексирования. Эта функция обеспечивает более эффективное индексирование и результаты VI, содержащие только интересующие вас аналитические сведения.

Новый регион доступности

Индексатор видео в Azure AI теперь доступен в западной части Германии.

Февраль 2024 г.

Учетные записи без AMS и рекомендации по миграции

• Все новые видеопакеты учетной записи VI, потоковая передача и кодировка выполняются VI. Теперь вы не можете создавать учетные записи VI на основе AMS. См. руководство по созданию новой учетной записи.
• Плата за кодировку и упаковку VI взимается по фиксированной ставке в один цент за минуту с бесплатной потоковой передачей.
• Вы можете обновить свои учетные записи VI на основе AMS до нового типа учетной записи без AMS.
• Вы можете принять участие в повторной обработке и переносе ресурсов AMS VI, чтобы вы могли продолжать получать доступ к видео и аналитическим сведениям. Миграция начинается в конце марта.
• Веб-приложения индексатора видео и мини-приложения используют новый проигрыватель мультимедиа, который является высокопроизводительным и больше не использует Azure Медиаплеер.

В следующей документации описан процесс миграции учетных записей и активов.

• См. новую версию API.

Поддержка TLS 1.3

Мы поддерживаем TLS 1.3, последнюю версию протокола TLS. TLS 1.3 шифрует данные для обеспечения безопасного канала связи между двумя конечными точками.

Индексатор видео Azure AI, развернутый в центрально-западной швеции и западной части США

Теперь вы можете создать платную учетную запись Индексатора видео Azure AI в регионах Центральная Швеция и Западная часть США.

Январь 2024 года

Новое содержимое запроса LLM

Теперь вы можете подключить аналитику видео к крупной языковой модели (LLM) для таких задач, как сводка и ответы на вопросы. API преобразует аналитические сведения о видео в текстовый формат, готовый к запросу, для использования с LLM. Дополнительные сведения см. в статье Индексатор видео Azure AI с подсказками LLM.

Декабрь 2023 г.

Новый параметр предустановки — Базовый видео

Индексатор видео добавил новый параметр предустановки индексирования , Basic Video. Он также доступен в VI, активированном расширением Arc. Это вариант индексирования с низкой стоимостью, который включает множество полезных аналитических сведений искусственного интеллекта, включая OCR, обнаружение объектов и визуальные метки. Базовое видео можно использовать для создания аналитических сведений совместно с Базовым звуком (Базовое аудио и видео) или самостоятельно (только Базовое видео). Дополнительные сведения о параметрах индексирования см. в руководстве по настройке индексирования.

Получение API кадров

Теперь можно извлечь кадры из индексированного видео для выбранного раздела видео, выполнив FramesSasUrls запрос. Дополнительные сведения см. в FrameSelection.

Обновления функции «Использование собственной модели» (предварительная версия)

• Добавлена поддержка интерфейса пользователя для индивидуальных инсайтов.
• Добавлена поддержка поиска для пользовательской аналитики.

Дополнительные сведения см. в разделе "Создание собственной модели ИИ".

Поиск по объекту на веб-сайте и API Индексатора видео Azure AI

Теперь вы можете использовать функцию поиска для поиска видео с определенными объектами, такими как автомобили или мотоциклы, на веб-сайте Индексатора видео Azure ИИ или с помощью запроса поиска .

Ноябрь 2023 г.

В ноябре Индексатор видео выпустил следующие функции:

Индексатор видео на платформе Azure AI при поддержке Arc (предварительная версия)

Индексатор видео можно использовать для гибридных сценариев, размещая его локально в кластере Kubernetes. Дополнительные сведения см. в обзоре Индексатора видео Azure AI на основе Arc. Вы также можете попробовать расширение, следуя руководству.

Используйте свою собственную модель (предварительный просмотр)

Вы можете использовать собственную настраиваемую модель ИИ и интегрировать данные с моделями индексатора видео. Дополнительные сведения см. в статье "Создание собственной модели ИИ".

Пользовательские теги и бесплатный текст на видео (предварительная версия)

Вы можете добавить настраиваемые теги и бесплатный текст в виде метаданных видео в любое видео в учетной записи Индексатора видео. Эта функция позволяет классифицировать и аннотировать ваши видео любой информацией, которая имеет отношение к вам и вашему бизнесу. Например, можно добавить теги, например product demo, customer testimonialили internal training бесплатный текст, например This video shows how to use our new feature X или This video was recorded at our annual conference in Y. Эти теги и текст можно добавить в область под видео после индексирования видео.

Поиск на основе пользовательских тегов и свободного текста (предварительная версия)

Вы можете искать видео на основе пользовательских тегов и свободного текста. Эта функция упрощает поиск видео, которые соответствуют вашим критериям. Вы можете выполнять поиск с помощью пользовательских тегов и свободного текста на всех поддерживаемых языках. Вы также можете объединить эти параметры поиска с другими фильтрами поиска, такими как ключевые слова, лица, метки и эмоции. Чтобы выполнить более сложные запросы, используйте расширенный синтаксис поиска. Например, можно искать видео с тегом product demo и бесплатным текстом feature X.

Мы добавили много улучшений в настраиваемую модель людей, что повышает общую производительность и точность. Модели людей представляют собой модели искусственного интеллекта, которые можно обучать для распознавания конкретных людей в видео. Новые дополнения:

Оценка качества модели людей (предварительная версия)

Вы можете получить оценку качества вашей настраиваемой модели «Люди» (плохое, среднее, хорошее). Качество зависит от количества изображений, используемых для маркировки. Чем больше изображений, которые вы используете для маркировки человека, тем выше вероятность правильной идентификации человека. Например, вероятность идентификации человека с 24 помеченными изображениями выше вероятности идентификации человека с двумя помеченными изображениями. Вы можете увидеть количество изображений, используемых для маркировки каждого пользователя на странице настраиваемой модели "Люди".

Выберите пользовательскую модель людей по умолчанию (предварительная версия)

Теперь вы можете выбрать настраиваемую модель "Люди" в качестве значения по умолчанию на уровне пользователя учетной записи VI. С помощью этого параметра вам не нужно выбирать имя модели для каждой отправки видео. Это экономит время и усилия при отправке видео, которые вы хотите проанализировать с помощью настраиваемой модели "Люди".

Группировка неизвестных людей в видео (предварительная версия)

Вы можете увидеть неизвестных людей в своих видео, сгруппированных по сходству их внешности. Эта функция помогает пометить неизвестных людей быстрее и быстрее, а также повышает точность настраиваемой модели "Люди". Вы можете просмотреть группирование неизвестных пользователей на странице настройки. Выберите людей, а затем перейдите на вкладку неизвестных людей . Эта функция может, например, помочь вам пометить местную знаменитость или местного политика.

Результаты поиска с максимальной оценкой достоверности для идентифицированного имени пользователя (предварительная версия)

Вы можете найти имя идентифицированного человека и получить время, когда пользователь появится в видео, с максимальной оценкой достоверности. Эта функция помогает решить, какие видео наиболее важны для изучения. Например, вы можете найти видео, в которых Джон Смит распознается вашей настраиваемой моделью распознавания людей, и увидеть уровень уверенности для каждого видео.

Избегайте дублирующихся отправок на индексацию

Иногда можно непреднамеренно отправлять одно и то же задание индексирования несколько раз. Чтобы избежать этой ситуации, добавлен новый необязательный параметр запроса: preventDuplicates Если задано значение true, служба отклоняет отправку файла и сообщает о конфликте, если он уже индексирован.

Проверки на дубликаты MD5 URL-адреса загрузки зависят от заголовка Content-md5 в ответе сервера, если он существует, согласно RFC 1864: поле заголовка Content-MD5. Поставщики хранилища обычно используют его.

Если вы хотите повторно отправить одно и то же видео, задайте для параметра значение false.

Октябрь 2023

Новая идея — обнаружение объектов

Индексатор видео добавил новую аналитику обнаружения объектов в стандартную и расширенную предустановки видео. Используйте это представление для выявления и отслеживания широкого спектра объектов, отображаемых в видео. Дополнительные сведения см. в обзоре обнаружения объектов Индексатора видео в Azure AI.

Сентябрь 2023

Изменения, связанные с выходом на пенсию AMS

В результате выхода на пенсию служб мультимедиа Azure (AMS) 30 июня 2024 года Индексатор видео объявил о многих связанных выходах на пенсию. Они включают прекращение поддержки классических учетных записей Video Indexer 30 июня 2024 года, изменения API и прекращение поддержки адаптивного битрейта. Полные сведения см. в статьеОб изменениях, связанных с выходом на пенсию службы мультимедиа Azure (AMS).

Июль 2023 г.

Редактируйте лица с помощью Azure AI Video Indexer API

Теперь вы можете отредактировать лица с помощью API индексатора видео Azure. Дополнительные сведения см. в статье Редактирование лиц с помощью Azure AI Video Indexer API.

Увеличение ограничения запросов API

Индексатор видео увеличил ограничение запросов API с 60 запросов в минуту до 120.

Июнь 2023 г.

Объявлено о прекращении работы служб мультимедиа Azure.

Май 2023 г.

Обновления API

Мы представляем изменение поведения, которое может потребовать изменения в существующей логике запроса. Это изменение находится в API списка и поиска . В следующей таблице показано подробное сравнение текущего и нового поведения. Возможно, вам потребуется обновить код, чтобы использовать новые API.

Поддержка HTTP/2

Мы добавили поддержку HTTP/2 для API плоскости данных. HTTP/2 предлагает несколько преимуществ по сравнению с HTTP/1.1, которые по-прежнему поддерживаются для обратной совместимости. Одним из основных преимуществ HTTP/2 является повышение производительности, повышение надежности и снижение требований к системным ресурсам по протоколу HTTP/1.1. При этом изменении http/2 поддерживается как для портала индексатора видео, так и для API плоскости данных. Обновите код, чтобы воспользоваться этим изменением.

Улучшения аналитических сведений по темам

Теперь мы поддерживаем все пять уровней онтологии IPTC.

Апрель 2023 г.

поддержка здоровья ресурса

Индексатор видео Azure теперь интегрирован с Azure Resource Health. Вы можете увидеть работоспособность и доступность каждого из ресурсов Индексатора видео Azure AI. Azure Resource Health также помогает диагностировать и решать проблемы. Вы можете настроить оповещения, чтобы получать уведомления всякий раз, когда будут затронуты ваши ресурсы. Дополнительные сведения см. в обзоре Работоспособность ресурсов Azure.

Модель распознавания символов анимации прекращена

Модель распознавания символов анимации прекращена 1 марта 2023 года. Для любых связанных проблем откройте запрос в службу поддержки через портал Azure.

Исключение конфиденциальных моделей ИИ

Следуя принципам Microsoft Responsible AI, индексатор видео Azure теперь позволяет исключать определенные модели ИИ при индексировании мультимедийных файлов. Список конфиденциальных моделей ИИ включает:

• Определение лиц
• Наблюдаемые люди
• Эмоции
• Идентификация этикеток

Эта функция в настоящее время доступна через API и во всех предустановках, кроме расширенной предустановки.

Улучшения обнаружения наблюдаемых пользователей

Дополнительные сведения см. в статье Получение аналитики по детекции наблюдаемых людей и сопоставлению лиц.

Март 2023 г.

Поддержка хранилища за брандмауэром

Рекомендуется заблокировать учетные записи хранения и отключить общедоступный доступ для улучшения или соответствия корпоративной политике безопасности. Индексатор видео теперь может получить доступ к неопубликованным учетным записям хранения с помощью исключения доверенной службы Azure с управляемыми удостоверениями. Дополнительные сведения о настройке см. в нашем руководстве.

Новое персонализированное обучение речи и произношению

Индексатор видео Azure AI добавил новую возможность работы с пользовательскими моделями распознавания речи. Этот интерфейс включает возможность использовать пользовательские наборы данных произношения для улучшения распознавания неправильных слов, фраз или имен. Используйте пользовательские модели для улучшения качества транскрибирования содержимого с помощью конкретной отрасли терминологии. Дополнительные сведения см. в разделе "Настройка модели речи".

Наблюдаемые улучшения качества работы людей

Функция «наблюдаемые люди» теперь поддерживает людей, которые сидят. Эта поддержка в дополнение к существующей поддержке людей, которые стоят или ходят. Это улучшение делает наблюдаемую модель людей более универсальной и подходит для более широкого спектра вариантов использования. Мы также улучшили алгоритмы репозиционирования и группировки моделей на 50%. Модель теперь может более точно отслеживать и группировать людей в нескольких полях зрения камер.

Оптимизация длительности индексирования наблюдаемых пользователей

Мы оптимизировали использование памяти для модели наблюдения за людьми, что позволило сократить длительность индексирования на 60% при использовании пресета расширенного видеоанализа. Теперь вы можете эффективнее обрабатывать видеоматериалы и получать результаты быстрее.

2023 февраля

Цены

1 января 2023 года мы представили расширенную версию аудио и видео для расширенных предустановок. С помощью этой версии можно сообщить об использовании каждой преднастройки (базовой, стандартной и расширенной) с их собственными отдельными счётчиками в выписке по счёту Azure. Его также можно увидеть в отчетах по анализу затрат.

С 1 февраля мы с удовольствием объявляем о снижении цен на 40% для версий "Базовый аудиоанализ", "Аудиоанализ" и "Видеоанализ". Мы приняли во внимание отзывы наших клиентов и тенденций рынка, чтобы внести изменения, которые повысят их преимущества. Сокращая цены и предоставляя новую расширенную версию, мы предоставляем конкурентные цены и другие варианты для клиентов, чтобы сбалансировать затраты и функции. Кроме того, мы продолжаем улучшать и добавлять дополнительные возможности искусственного интеллекта. Вы можете воспользоваться преимуществами этих экономий при выполнении новых или переиндексных операций.

Это изменение было реализовано автоматически. Клиенты, у которых уже есть скидки Azure, продолжают получать их в дополнение к новым ценам.

Тег сетевой службы

Индексатор видео поддерживает использование тега безопасности сети, чтобы разрешить сетевой трафик из IP-адресов индексатора видео в сеть. Начиная с 22 января мы переименовали тег службы безопасности сети в AzureVideoAnalyzerForMediaVideoIndexer. Это изменение требует обновления скриптов развертывания и (или) существующей конфигурации. Дополнительные сведения см. в нашей документации по безопасности сети.

Январь 2023

Опыт работы с уведомлениями

На веб-сайте Индексатора видео Azure теперь есть панель уведомлений, в которой можно оставаться в курсе важных обновлений продукта, таких как события, влияющие на обслуживание, новые выпуски и многое другое.

Обнаружение текстового логотипа

Обнаружение текстового логотипа позволяет настраивать текстовые логотипы для обнаружения в видео. Дополнительные сведения см. в разделе "Обнаружение текстового логотипа".

Переключение каталогов

Теперь вы можете переключать каталоги идентификаторов Microsoft Entra и управлять учетными записями Индексатора видео Azure в разных клиентах с помощью веб-сайта Индексатора видео Azure.

Поддержка языков

• Теперь поддерживаются новые языки: ирландский, болгарский, каталонский, греческий, эстонский, хорватский, латышский, румынский, словацкий, словенский, телугу, малаялам, каннада, исландский, армянский, гуджарати, малайский и тамильский.
• Используйте API для получения всех поддерживаемых языков: получение поддерживаемых языков.

Для получения дополнительной информации см. раздел Поддерживаемые языки.

Группирование лиц

Мы сократили количество случаев обнаружения лиц низкого качества в пользовательском интерфейсе и insights.json. Повышение качества и удобства использования с помощью улучшенного алгоритма группировки.

Ноябрь 2022 г.

Изменение имен докладчиков на веб-сайте Индексатора видео ИИ Azure

Теперь вы можете добавлять новых участников, переименовывать идентифицированных участников и изменять участников, назначенных определенной строке расшифровки, используя веб-сайт Индексатора видео Azure AI. Дополнительные сведения о том, как изменить спикеров на панели временной шкалы, см. в разделе на веб-сайте Azure AI Video Indexer "Изменение спикеров".

API Azure AI Video Indexer для загрузки видеоиндекса предоставляет те же возможности.

Октябрь 2022

Новая встроенная роль: средство просмотра с ограниченным доступом индексатора видео

Роль Ограниченного просмотра Видео Индексатора с ограниченным доступом предназначена для пользователей веб-сайта Azure AI Video Indexer. Разрешенные действия роли связаны с работой на веб-сайте Индексатора видео Azure AI.

Дополнительные сведения см. в разделе Управление доступом с ролью ограниченного доступа для индексатора видео.

Аналитика обнаружения Slate (режим предварительного просмотра)

При индексировании видео с помощью расширенного параметра индексирования автоматически определяются следующие аналитические сведения об обнаружении сланца (постпроизводство фильма):

• Обнаружение clapperboard с извлечением метаданных.
• Обнаружение цифровых шаблонов, включая цветовые полосы.
• Обнаружение безтекстового листа, включая сопоставление сцен.

Для получения подробной информации см. Обнаружение Slate.

Поддержка новых исходных языков для STT, перевода и поиска

Теперь поддерживаются исходные языки для STT (речь в текст), перевод и поиск в украине и вьетнамском языке. Это означает, что функции транскрибирования, перевода и поиска также поддерживаются для этих языков на веб-сайте Индексатора видео Azure AI, мини-приложениях и API.

Для получения дополнительной информации см. раздел Поддерживаемые языки.

Изменение имени говорящего в транскрибировании через API

Теперь вы можете изменить имя докладчиков в транскрибировании с помощью API индексатора видео Azure.

Аннотация времени на уровне слова с оценкой достоверности.

Теперь поддерживается временная аннотация на уровне слова с указанием уровня достоверности.

Заметка — это любой тип дополнительных сведений, добавляемых в существующий текст, например транскрибирование звукового файла или исходного текстового файла.

Дополнительные сведения см. в разделе "Изучение сведений о транскрибировании на уровне слова".

Интеграция Azure Monitor с возможностью индексировать журналы

Новый набор журналов, описанный в следующем разделе, позволяет лучше отслеживать конвейер индексирования.

Видеоиндексатор Azure теперь поддерживает настройки диагностики для событий индексирования. Теперь вы можете экспортировать логи мониторинга загрузки и переиндексации файлов мультимедиа через параметры диагностики в Azure Log Analytics, Storage, Event Hubs или стороннее решение.

Расширенные поддерживаемые языки в LID и MLID с помощью API индексатора видео в Azure AI

Были расширены возможности поддержки языков в системе определения языка (LID) и многоязычной идентификации (MLID) с помощью API Azure AI Video Indexer.

ТЕПЕРЬ API поддерживает следующие языки:

• Арабский (Объединенные Арабские Эмираты)
• Арабский современный стандарт
• Арабский (Египет)
• Арабский (Ирак)
• Арабский (Иордания)
• Арабский (Кувейт)
• Арабский (Оман)
• Арабский (Катар)
• Арабский (Саудовская Аравия)
• Арабский (Сирийская Арабская Республика)
• Чешский
• Датский
• Немецкий
• Английский (Австралия)
• Английский (Великобритания)
• Английский язык, США
• испанский
• Испанский (Мексика)
• Финский
• Французский (Канада)
• Французский
• Иврит
• Хинди
• Итальянский
• Японский
• Корейский
• Норвежский
• Нидерландский
• Польский
• Португальский
• Португальский (Португалия)
• Русский
• Шведский
• Тайский
• Турецкий
• Украинский
• Вьетнамский
• Китайский (упрощённый)
• Китайский (кантонский и традиционный)

Чтобы задать список языков для идентификации с помощью идентификаторов LID или MLID при автоопределении, вызовите API загрузки видео и установите параметр customLanguages так, чтобы он включал до 10 языков из списка поддерживаемых языков, перечисленных ранее. API сравнивает языки, указанные в customLanguages параметре на языковом уровне, поэтому включите только одну локаль на язык.

Для получения дополнительной информации см. раздел Поддерживаемые языки.

Настройка уровня доверия в модели пользователя с помощью API

Используйте API Patch person model для задания уровня уверенности распознавания лиц в модели человека.

Просмотр спикеров в скрытых субтитрах

Теперь вы можете просматривать говорящих в скрытых субтитрах проигрывателя мультимедиа Индексатора видео Azure. Дополнительные сведения см. в разделе "Просмотр закрытых субтитров" на веб-сайте Индексатора видео Azure AI.

Управляйте ограничивающими прямоугольниками для лиц и людей с помощью параметров.

Новый boundingBoxes параметр URL-адреса управляет включением или отключением ограничивающих прямоугольников при внедрении проигрывателя. Дополнительные сведения см. в разделе "Внедрение мини-приложений".

Управление автоматическим воспроизведением из параметров учетной записи

Управление автоматическим воспроизведением файла мультимедиа при открытии с помощью веб-приложения с помощью параметров пользователя. Перейдите на веб-сайт Индексатора видео Azure AI —> значок Шестеренка (верхний правый угол) —>настройки пользователя —>автозапуск мультимедийных файлов.

Копирование идентификатора видео из представления проигрывателя

Скопировать идентификатор видео доступно при выборе видео на веб-сайте Azure AI Video Indexer.

Новая темная тема в родных цветах (Azure)

Выберите нужную тему на веб-сайте Индексатора видео в Azure AI. Выберите значок шестеренки (в верхнем правом углу) —>Настройки пользователя.

Поиск или фильтрация списка учетных записей

Вы можете выполнять поиск или фильтрацию списка учетных записей с помощью имени учетной записи или региона. Выберите учетные записи пользователей в правом верхнем углу веб-сайта Индексатора видео Azure AI.

сентябрь 2022 года

Общая доступность учетных записей на основе ARM

С помощью платной (неограниченной) учетной записи управления ресурсами Azure (ARM) можно использовать:

• Управление доступом на основе ролей Azure (RBAC).
• Управляемое удостоверение для повышения безопасности взаимодействия между вашими Службами мультимедиа Azure и Azure AI Video Indexer, тегами сетевой службы и собственной интеграцией с Azure Monitor для мониторинга вашей учетной записи (журналы аудита и индексирования).
• Масштабируйте и автоматизируйте ваше развертывание с помощью шаблона ARM, bicep или terraform.
• Создайте соединитель логических приложений для учетных записей на основе ARM.

Сведения о создании учетной записи на основе ARM см. в статье "Создание учетной записи".

Август 2022 г.

Обновление модели тематического анализа

Модель вывода тем в Azure AI Video Indexer была обновлена и теперь извлекает более 6,5 миллиона тем, таких как вирус Covid. Чтобы воспользоваться последними обновлениями модели, необходимо переиндексировать видеофайлы.

Модель вывода тем теперь доступна в Azure Government.

Теперь вы можете использовать модель вывода тем в платной учетной записи Индексатора видео Azure в ключевых регионах Azure для государственных организаций в Вирджинии и Аризоне. В этом выпуске мы завершили достижение паритета ИИ между Azure Global и Azure Government. Чтобы воспользоваться обновлениями модели, необходимо переиндексировать видеофайлы.

Длина сеанса составляет 30 дней на веб-сайте Индексатора видео Azure AI

Продолжительность сеанса на веб-сайте Индексатора видео Azure AI была продлена до 30 дней. Сеанс можно сохранить без необходимости входить в систему каждый час.

Июль 2022

Аналитика по представленной одежде (предварительный обзор)

Аналитические сведения о выбранной одежде обеспечивают более целевое размещение рекламы.

Информация содержит данные о ключевых предметах одежды, надеваемых людьми в видео, и временной метке появления этих предметов. Она позволяет размещать высококачественную контекстную рекламу в видео, при этом соответствующие рекламные объявления одежды появляются в конкретные моменты при просмотре видео.

Для того чтобы просмотреть показанную одежду наблюдаемого человека, необходимо проиндексировать видео с помощью расширенных параметров Индексатора видео Azure. Подробные сведения о том, как ранжируются изображения рекомендуемой одежды и как просмотреть этот анализ, см. в статье о рекомендуемой одежде.

Июнь 2022 г.

Создание улучшений индексатора видео на портале Azure

Индексатор видео Azure AI теперь поддерживает создание новых ресурсов с помощью управляемого удостоверения, назначаемого системой, или управляемого удостоверения, назначаемого пользователем, для одного ресурса.

Вы также можете изменить основное управляемое удостоверение с помощью вкладки "Удостоверение" на портале Azure.

Ограниченный доступ к распознаванию знаменитостей и функциям идентификации лиц

В рамках приверженности Корпорации Майкрософт ответственному искусственному интеллекту мы разрабатываем и выпускаем функции идентификации индексатора видео Azure ИИ и распознавания знаменитостей. Эти функции предназначены для защиты прав отдельных лиц и общества и содействия прозрачному взаимодействию человека с компьютером. Таким образом, существует ограниченный доступ и использование индексатора видео Azure AI и функций распознавания знаменитостей.

Функции идентификации и распознавания знаменитостей требуют регистрации и доступны только управляемым клиентам и партнерам Майкрософт. Клиенты, которые хотят использовать эту функцию, должны заполнить и отправить форму приема. Дополнительные сведения читайте в статье "Индексатор видео Azure AI с ограниченным доступом".

Дополнительные сведения см. в сообщении в блоге и инвестировании и защитных мерах для распознавания лиц.

Май 2022 г.

Разрыв строк в расшифровках

Улучшена логика разрыва строки, чтобы лучше разделить расшифровку на предложения. Новые возможности редактирования теперь доступны на веб-сайте Индексатора видео Azure AI, например добавление новой строки и изменение метки времени строки. Дополнительные сведения см. в разделе "Вставка или удаление строк расшифровки".

Интеграция Azure Monitor

Индексатор видео Azure теперь поддерживает параметры диагностики для событий аудита. Теперь вы можете экспортировать журналы событий аудита с помощью параметров диагностики в Azure Log Analytics, Хранилище Azure, Azure Event Hubs или стороннее решение.

Эти дополнения обеспечивают более простой доступ для анализа данных, мониторинга функционирования ресурсов и создания автоматических процессов для реагирования на событие. Дополнительные сведения см. в статье Monitor Azure AI Video Indexer.

Улучшения Аналитики видео

Система распознавания символов (OCR) улучшилась на 60%. Обнаружение лиц улучшилось 20%. Точность меток повысилась на 30% в целом ряде видео. Эти улучшения доступны сразу во всех регионах и не требуют каких-либо изменений клиентом.

Сервисный тег

Индексатор видео Azure AI теперь является частью тегов сетевой службы. Индексатор видео часто требует доступа к другим ресурсам Azure (например, службе хранилища). Если вы защищаете входящий трафик к ресурсам с помощью группы безопасности сети, теперь можно выбрать Индексатор видео в составе встроенных тегов службы. Это упрощает управление безопасностью при заполнении тега службы общедоступными IP-адресами.

Переключатель распознавания знаменитостей

Теперь вы можете включить или отключить модель распознавания знаменитостей на уровне учетной записи (только в классической учетной записи). Чтобы включить или отключить модель, перейдите к переключателю настройки> модели или отключите ее. После отключения модели аналитика Индексатора видео не включает выходные данные модели знаменитости и не запускает поток обработки модели знаменитости.

Имя репозитория индексатора видео в Azure AI

По состоянию на 1 мая наш обновленный репозиторий виджета Azure AI Video Indexer был переименован. Вместо этого используйте https://www.npmjs.com/package/@azure/video-indexer-widgets.

Апрель 2022 г.

Переименован видеоанализатор Azure для мультимедиа обратно в индексатор видео Azure AI

По состоянию на сегодняшний день название продукта Azure Video Analyzer for Media переименовано в Azure AI Video Indexer. Все ресурсы, связанные с продуктом, такие как веб-портал и маркетинговые материалы, отражают это изменение. Это изменение с обратной совместимостью не влияет на API и ссылки. Новый логотип Индексатора видео Azure AI:

Март 2022 г.

Файлы закрытых субтитров теперь поддерживают включение атрибутов говорящего.

Индексатор видео Azure AI позволяет вам включать характеристики спикеров на основе файла субтитров, который вы хотите скачать. Чтобы включить атрибуты говорящих, выберите "Загрузки -> Закрытые субтитры - > выберите формат файла для загрузки (SRT, VTT, TTML, TXT или CSV) и установите флажок "Включить говорящих" .

Улучшения в ассортименте виджетов

Были реализованы следующие улучшения:

• Виджеты Индексатора видео Azure поддерживают более одной региональной настройки в параметрах виджета.
• Мини-приложения Аналитики теперь поддерживают начальные параметры поиска и множественные параметры сортировки.
• Мини-приложения Аналитики также включают шаг подтверждения перед удалением лица, чтобы избежать ошибок.
• Теперь при настройке мини-приложения можно указать ширину в виде строки (например, "100%", "100vw").

2022 февраля

Общедоступная предварительная версия управления учетными записями видеоиндексатора Azure с использованием ARM в облаке для государственных организаций

Веб-сайт Индексатора видео Azure теперь поддерживает управление учетными записями на основе ARM в общедоступной предварительной версии (см. примечание о выпуске за ноябрь 2021 г.).

Создание учетной записи на основе ARM с открытым исходным кодом

Добавлены новые примеры кода, включая вызовы HTTP для использования индексатора видео Azure AI, а также операции создания, чтения, обновления и удаления (CRUD) с использованием API ARM, предназначенные для разработчиков решений.

Январь 2022 года

Улучшенное обнаружение звуковых эффектов

Возможность обнаружения звуковых эффектов улучшена с целью повысить коэффициент обнаружения в следующих классах:

• Реакции толпы (восторженные возгласы, аплодисменты и освистывание)
• Выстрел или взрыв
• Смех

Дополнительные сведения см. в статье Обнаружение звуковых эффектов.

Поддержка новых исходных языков для STT, перевода и поиска на веб-сайте

Индексатор видео в Azure AI предоставляет поддержку для STT (речь в текст), перевода и поиска на следующих языках на веб-сайте Индексатора видео Azure AI.

• Иврит he-IL
• Португальский pt-PT
• Персидский fa-IR

Это означает, что функции транскрибирования, перевода и поиска также поддерживаются для этих языков на веб-сайте и мини-приложениях Индексатора видео Azure.

Декабрь 2021 г.

Функция проектов теперь общедоступна

Возможность создания проектов теперь является общедоступной и готова к использованию в производственных целях. Нет изменений цен, связанных с переходом "Предварительная версия в общедоступную версию". См. статью Добавление видеоклипов в проекты.

Поддержка новых исходных языков для STT, перевода и поиска на уровне API

Индексатор видео Azure AI предоставляет поддержку исходных языков stT (речь в текст), перевод и поиск на иврите he-IL, португальском pt-PTи персидском fa-IR языках на уровне API.

Возможность обнаружения соответствующих лиц

При индексировании видео с помощью расширенных параметров индексатора видео в Azure AI можно просмотреть новую возможность обнаружения соответствующего пользователя. Если файл мультимедиа содержит людей, вы можете просмотреть конкретного человека, который соответствовал каждому из них через проигрыватель мультимедиа.

Ноябрь 2021 г.

Публичная предварительная версия управления учетными записями Индексатора видео Azure на базе ARM

Индексатор видео Azure AI представляет общедоступную предварительную версию управления учетными записями на основе Azure Resource Manager (ARM). Вы можете использовать API индексатора видео в Azure на основе ARM для создания, редактирования и удаления учетной записи на портале Azure.

Для получения дополнительной информации перейдите к созданию учетной записи в Azure AI Video Indexer.

Обнаружение одежды людей

При индексировании видео с помощью расширенных параметров индексатора видео Azure AI вы можете просмотреть новые возможности обнаружения одежды людей. Если файл мультимедиа содержит людей, вы можете просмотреть тип одежды, который они носят через проигрыватель мультимедиа.

Прямоугольник вокруг лица (предварительный просмотр)

Вы можете включить ограничивающий прямоугольник для обнаруженных лиц во время индексирования файла мультимедиа. Возможность использования прямоугольной рамки для лица доступна при индексировании вашего файла с помощью выбора стандартных, базовых или расширенных предустановок индексирования.

В проигрывателе можно включить ограничивающие прямоугольники.

октябрь 2021 года

Внедрение мини-приложений в приложение с помощью пакета индексатора видео в Azure AI

Используйте новый пакет npm индексатора видео Azure AI (AVAM) @azure/video-analyzer-for-media-widgets, чтобы добавить insights виджеты в ваше приложение и настроить их в соответствии с вашими потребностями.

Новый пакет AVAM позволяет легко встроить и обмениваться данными между нашими виджетами и вашим приложением, вместо добавления элемента iframe для внедрения виджета аналитики. Дополнительные сведения см. в разделе "Внедрение и настройка мини-приложений Индексатора видео Azure ИИ" в приложении. 

Август 2021 г.

Переиндексировать видео- или аудиофайлы

Теперь вы можете переиндексировать видео или звуковые файлы, которые завершилися ошибкой во время процесса индексирования.

Улучшение поддержки доступности

Исправлены ошибки, связанные с CSS, темами и специальными возможностями:

• высокая контрастность
• параметры учетной записи и представления аналитических сведений на портале.

Июль 2021

Автоматическое масштабирование зарезервированных единиц мультимедиа

1 августа 2021 г. Azure AI Video Indexer включил возможность автоматического масштабирования зарезервированных мультимедиаединиц (MRUs) с помощью служб мультимедиа Azure. В результате вам не нужно управлять ими с помощью Индексатора видео Azure AI. Эта функция оптимизирует ценообразование, например, снижая цены в многих случаях, исходя из нужд вашего бизнеса, по мере автоматического масштабирования.

Июнь 2021 года

Индексатор видео Azure AI, развернутый в шести новых регионах

Теперь вы можете создать платную учетную запись Индексатора видео Azure AI в Центрально-Франции, Центральной части США, Южной Бразилии, Западной части США, Центральной Кореи и Западной Японии.

Май 2021

Поддержка новых исходных языков для преобразования речи в текст (STT), перевода и поиска

Индексатор видео azure AI теперь поддерживает STT, перевод и поиск в:

• Китайский (Кантонский) zh-HK
• Голландский (Нидерланды) Nl-NL
• Чешский Cs-CZ
• Польский Pl-PL
• Шведский (Швеция) Sv-SE
• Норвежский nb-NO
• Финский fi-FI
• Канадский французский fr-CA
• Тайский th-TH
• Арабский:
  • Объединенные Арабские Эмираты ar-AE и ar-EG
  • Ирак ar-IQ
  • Иордания ar-JO
  • Кувейт ar-KW
  • Ливан ar-LB
  • Оман ar-OM
  • Катар ar-QA
  • Палестинский орган ar-PS
  • Сирия ar-SY
  • Турецкий tr-TR

Эти языки можно использовать как в API, так и на веб-сайте Индексатора видео Azure AI. Выберите нужный язык в поле со списком Исходный язык видео.

Новая тема индексатора видео Azure AI

Новая тема "Azure" доступна вместе с темами "светлый" и "темный". Чтобы выбрать тему, выберите значок шестеренки в правом верхнем углу веб-сайта, а затем найдите темы в разделе "Параметры пользователя".

Новый код с открытым исходным кодом, который можно использовать

Три новых проекта GitHub доступны в нашем репозитории GitHub:

• Код, помогаемый использовать только что добавленную настройку мини-приложения.

• Решение, которое поможет вам добавить дедупликацию в ваши видеотеки.

Новый параметр для включения и выключения ограничивающих прямоугольников (для наблюдаемых людей) на проигрывателе

При индексировании видео с использованием расширенных параметров видео вы можете увидеть наши новые возможности по распознаванию людей. Если служба обнаруживает людей в файле мультимедиа, можно включить ограничивающий прямоугольник для обнаруженного пользователя через проигрыватель мультимедиа.

Апрель 2021 г.

Служба индексатора видео переименована в Индексатор видео Azure AI.

Улучшенный интерфейс отправки на портале

Индексатор видео Azure AI имеет новый интерфейс отправки на веб-сайте. Чтобы загрузить медиафайл, нажмите кнопку Загрузить на вкладке Медиафайлы.

В gov-cloud доступен новый портал разработчика

Портал разработчика API Индексатора видео Azure теперь также доступен в Azure для правительства США.

Обнаружение наблюдаемых пользователей (предварительная версия)

Индексатор видео Azure AI теперь обнаруживает наблюдаемых людей в видео. Он предоставляет такие сведения, как нахождение человека в видеокадре и точные метки времени (начало, конец) момента появления человека. API возвращает координаты ограничивающего прямоугольника (в пикселях) для каждого обнаруженного человека, включая уровень достоверности обнаружения.

Например, если видео содержит человека, операция обнаружения выводит список появлений человека вместе с их координатами в видеокадрах. Эту функцию можно использовать для определения пути перемещения человека в видео. Также она позволяет определить, присутствует ли в видеоролике один и тот же человек несколько раз.

Добавленная функция обнаружения наблюдаемых людей доступна при индексировании вашего файла, выбрав параметр Advanced ->Advanced video или Advanced video + audio пресет (в разделе индексирования Видео + аудио). Стандартные и базовые предустановки индексирования не включают эту новую расширенную модель.

При просмотре аналитики вашего видео на веб-сайте Azure AI Video Indexer на странице отображается распознавание людей с миниатюрами всех обнаруженных лиц. Можно выбрать эскиз человека и увидеть, где он отображается в видеопроигрывателе.

Эта функция также доступна в JSON-файле, созданном индексатором видео Azure AI. Дополнительные сведения см. в разделе "Наблюдаемые люди" в видео.

Обнаруженные звуковые события с использованием функции Обнаружение аудиоэффектов (предварительная версия)

Теперь обнаруженные звуковые события можно просматривать в файле со скрытыми субтитрами. Файл можно скачать на веб-сайте Индексатора видео Azure ИИ, и он доступен в качестве артефакта в API GetArtifact.

Компонент обнаружения звуковых эффектов (предварительная версия) обнаруживает различные события акустических эффектов и классифицирует их в различные акустические категории (например, Gunshot, Кричать, толпа реакции и многое другое). Дополнительные сведения см. в статье Обнаружение звуковых эффектов.

Март 2021 г.

Анализ звука

Теперь анализ звука доступен в новом пакете функций аудио в другой ценовой точке. В новом предустановке анализа «Базовый анализ звука» предлагается недорогой вариант для извлечения транскрипции речи, перевода и форматирования выходных заголовков и субтитров. Предустановка "Базовый звук" создает две отдельные строки в счете, включая строку за транскрипцию и отдельную строку за форматирование титров и субтитров. Дополнительные сведения о ценах см. на странице цен на службы мультимедиа .

Добавленный пакет доступен при индексировании или повторном индексировании файла, выбрав расширенный параметр ->Basic Audio preset (в раскрывающемся списке "Видео + аудио индексирование ").

Новый портал разработчика

Индексатор видео Azure AI имеет новый портал разработчика. Ознакомьтесь с новыми API Индексатора видео Azure ИИ и найдите все соответствующие ресурсы в одном месте:

• репозиторий GitHub
• Stack Overflow
• Техническое сообщество индексатора видео Azure AI с соответствующими записями блога
• Часто задаваемые вопросы об индексаторе видео Azure AI
• Голосовая связь пользователя для предоставления отзывов и предложения функций
• Ссылка "CodePen" с примерами кода мини-приложений

Дополнительные возможности настройки аналитического мини-приложения

Теперь пакет SDK доступен для внедрения мини-приложения аналитики Индексатора видео Azure в собственную службу и настройки его стиля и данных. Пакет SDK поддерживает стандартный виджет анализа Azure AI Video Indexer и полностью настраиваемый виджет анализа. Пример кода доступен в репозитории Индексатора видео Azure AI GitHub. С помощью этих расширенных возможностей настройки разработчики решений могут применять пользовательские стили и добавлять собственные данные ИИ для представления в мини-приложении аналитических сведений (с аналитикой индексатора видео Azure или без них).

Индексатор видео Azure AI, развернутый в центрально-северной части США, западной части США и Центральной Канаде

Теперь вы можете создать платную учетную запись Индексатора видео Azure AI в центрально-западной части США, западной части США и Центральной Канаде.

Поддержка новых исходных языков для преобразования речи в текст (STT), перевода и поиска

Индексатор видео azure AI теперь поддерживает STT, перевод и поиск в:

• Датский da-DK
• Норвежский nb-NO
• Шведский sv-SE
• Финский fi-FI
• Канадский французский fr-CA
• Тайский th-TH
• Арабский ar-BH, ar-EG, ar-IQ, ar-JO, ar-KW, ar-LB, ar-OM, ar-QA, ar-S и ar-SY, а также турецкий tr-TR.

Эти языки можно использовать в API и веб-сайте Индексатора видео Azure AI.

Поиск по теме на веб-сайте Индексатора видео Azure AI

Теперь вы можете использовать функцию поиска в верхней части страницы веб-сайта Индексатора видео в Azure AI для поиска видео с определенными разделами.

2021 февраля

Несколько владельцев учетных записей

Индексатор видео Azure AI добавляет роль владельца учетной записи. Вы можете добавлять, изменять и удалять пользователей. Вы также можете изменить их роль. Дополнительные сведения о том, как предоставлять общий доступ к учетной записи, см. в разделе о приглашении пользователей.

Обнаружение звуковых событий (общедоступная предварительная версия)

Индексатор видео Azure AI теперь обнаруживает следующие звуковые эффекты в несодержательных сегментах: звук выстрела, звук разбитого стекла, сигнализация, сирена, взрыв, собачий лай, крик, смех, реакции толпы (восторженные возгласы, аплодисменты и освистывание) и тишина.

Добавленная функция звуковых эффектов доступна при индексировании файла, выбрав расширенный параметр ->Advanced audio preset (в разделе "Видео + аудио индексирование"). Стандартное индексирование включает только молчание и реакцию толпы.

Тип события clapping , который был включен в предыдущую модель звуковых эффектов, теперь извлекается как часть типа события реакции толпы .

При выборе просмотра аналитических сведений о вашем видео на веб-сайте Индексатора видео Azure AI на странице отображаются звуковые эффекты.

Расширение возможностей именованных сущностей

Извлеченный список людей и мест был расширен и обновлен.

Кроме того, модель теперь включает людей и места в контексте, которые не являются известными, такие как "Сэм" или "Дом" в видео.

январь 2021

Индексатор видео Azure ai развернут в облаке для государственных организаций США

Теперь вы можете создать платную учетную запись Индексатора видео Azure на облачной платформе правительства США в регионах Вирджинии и Аризоны. Пробная версия Индексатора видео Azure AI недоступна в указанном регионе. Дополнительные сведения см. в документации по индексатору видео в Azure AI.

Индексатор видео Azure AI, развернутый в центральном регионе Индии

Теперь вы можете создать платную учетную запись Индексатора видео Azure AI в центральном регионе Индии.

Новый темный режим для веб-сайта Индексатора видео Azure

Веб-сайт Azure AI Video Indexer теперь доступен в темном режиме. Чтобы включить темный режим, откройте панель параметров и переключите переключатель в параметре "Темный режим ".

Декабрь 2020 г.

Индексатор видео Azure AI, развернутый в Западной Швейцарии и Северной Швейцарии

Теперь вы можете создать платную учетную запись Индексатора видео Azure AI в регионах "Западная Швейцария" и "Северная Швейцария".

Октябрь 2020 года

Запланированные изменения проверки подлинности веб-сайта Индексатора видео Azure AI

Начиная с 1 марта 2021 г., вы не можете зарегистрировать или войти на портал разработчика веб-сайта Индексатора видео Azure с помощью Facebook или LinkedIn.

Вы можете зарегистрировать и войти с помощью одного из следующих поставщиков: Идентификатор Microsoft Entra, Microsoft и Google.

Август 2020 г.

Мобильный дизайн веб-сайта Индексатора видео Azure AI

Теперь веб-сайт Индексатора видео Azure поддерживает мобильные устройства. Пользовательский опыт адаптируется под размер экрана вашего мобильного устройства (за исключением интерфейсов настройки).

Внедрение специальных возможностей и исправление ошибок

В рамках руководящих принципов WCAG (Руководства по доступности веб-контента) опыт использования веб-сайта Видео-индексатора Azure соответствует уровню C в соответствии со стандартами доступности Microsoft. Команда исправила несколько ошибок и внесла улучшения, связанные с навигацией по клавиатуре, программным доступом и поддержкой экранного диктора.

Июль 2020

Общая доступность для многоязычной идентификации

Многоязычная идентификация перемещается из предварительной версии в общедоступную версию и готова к продуктивному использованию.

Нет изменений цен, связанных с переходом "Предварительная версия в общедоступную версию".

Улучшения веб-сайта Индексатора видео в Azure AI

Корректировки в коллекции видео

Команда добавила новую панель поиска для поиска глубокой аналитики с дополнительными возможностями фильтрации. Они также улучшили результаты поиска.

Команда добавила новое представление списка с возможностью сортировки и управления архивом видео с несколькими файлами.

Новая панель для удобного выбора и настройки

Команда добавила боковую панель для простого выбора и настройки пользователя, позволяя просто и быстро создавать учетные записи и предоставлять общий доступ, а также настраивать параметры.

Боковая панель также используется для доступа к пользовательским предпочтениям и справке.

Июнь 2020 г.

Поиск по темам

Теперь вы можете использовать поиск API, чтобы находить видео на специальные темы (только для API).

Параметр topics является частью textScope параметра (необязательно). Дополнительные сведения см. в разделе API.

Обновление меток

Метка была обновлена и теперь содержит больше визуальных меток, которые система теперь может идентифицировать.

Май 2020 г.

Индексатор видео Azure AI, развернутый в восточной части США

Теперь вы можете создать платную учетную запись Индексатора видео Azure AI в регионе "Восточная часть США".

URL-адрес индексатора видео Azure AI

Все региональные конечные точки Индексатора видео Azure AI начинаются с www. Никаких действий не требуется.

Теперь вы можете получить доступ к www.videoindexer.ai, для встраивания виджетов или входа на веб-сайт Индексатора видео Azure.

Кроме того, wus.videoindexer.ai перенаправляется на www. Дополнительные сведения см. в разделе "Внедрение мини-приложений Индексатора видео в Azure AI" в приложениях.

Апрель 2020 г.

Новые возможности параметров мини-приложения

Мини-приложение Аналитические сведения содержит новые параметры: language и control.

У мини-приложения Проигрыватель есть новый параметр locale. Оба locale параметра language управляют языком проигрывателя.

См. дополнительные сведения в разделе типы мини-приложений.

Новая обложка проигрывателя

Новый скин игрока выпущен с обновленным дизайном.

Подготовка к предстоящим изменениям

• Сейчас следующие API возвращают объект учетной записи:

  • Создать платный аккаунт
  • Get-Account
  • Получение авторизации учетных записей
  • Получить-Аккаунты-С-Токеном

  Объект Account имеет Url поле, указывающее на расположение веб-сайта Индексатора видео Azure AI. Для платных учетных записей Url поле в настоящее время указывает на внутренний URL-адрес вместо общедоступного веб-сайта. В ближайшие недели мы обновим его и возвратим URL-адрес веб-сайта Индексатора видео Azure для всех учетных записей (пробная версия и оплата).

  Не используйте внутренние URL-адреса. Используйте общедоступные API индексатора видео Azure AI.

• Если вы внедряете URL-адреса индексатора видео Azure ИИ в приложения, а URL-адреса не указывают на веб-сайт Индексатора видео Azure или конечную точку API индексатора видео Azure (https://api.videoindexer.aiнапример, https://wus2.videoindexer.aiна региональную конечную точку), повторно создайте URL-адреса.

  Это можно сделать одним из следующих способов:

  • Замена URL-адреса на URL-адрес, указывающий на API виджета Индексатора видео Azure (например, виджет аналитики)

  • Использование веб-сайта Azure AI Video Indexer для создания нового встроенного URL-адреса:

    Нажмите клавишу Play, чтобы перейти на страницу видео—> нажмите< кнопку />Внедрить,> скопируйте URL-адрес в приложение:

  Региональные URL-адреса не поддерживаются. Они будут заблокированы в ближайшие недели.

Январь 2020 г.

Поддержка пользовательского языка для дополнительных языков

Индексатор видео Azure теперь поддерживает пользовательские языковые модели для ar-SY, en-UK и en-AU (только для API).

Обновление времени выполнения действия удаления учетной записи

Действие по удалению учетной записи теперь выполняется в течение 90 дней, а не 48 часов.

Новый репозиторий на GitHub для Индексатора видео Azure AI

Теперь доступен новый индексатор видео Azure AI с GitHub с различными проектами, руководствами по началу работы и примерами кода: https://github.com/Azure-Samples/media-services-video-indexer

Обновление Swagger

Azure AI Video Indexer объединил аутентификации и операции в единую спецификацию OpenAPI для Azure AI Video Indexer (swagger). Разработчики могут найти API на портале разработчика Azure AI Video Indexer.

Декабрь 2019 г.

Обновление расшифровки с новым API

Обновите определенный раздел в расшифровке с помощью API Update-Video-Index .

Исправление конфигурации учетной записи с веб-сайта Индексатора видео Azure AI

Теперь можно обновить конфигурацию подключения служб мультимедиа, чтобы устранить такие проблемы:

• Неправильный ресурс Служб мультимедиа Azure
• изменения паролей
• Ресурсы служб мультимедиа, перемещаемые между подписками

Чтобы исправить конфигурацию учетной записи, на веб-сайте Индексатора видео Azure перейдите на вкладку "Параметры > учетной записи " (как владелец).

Настройка учетной записи Custom Vision

Настройте учетную запись пользовательского видения для платных аккаунтов, используя веб-сайт Azure Video Indexer (ранее поддерживаемое только API). Для этого войдите на веб-сайт Индексатора видео Azure ИИ, выберите Настройка модели>< модель>> Настроить.

Сцены, снимки и ключевые кадры — теперь в одной информационной панели

Сцены, снимки и ключевые кадры теперь объединены в единую аналитику для более простого восприятия и навигации. Выбрав нужную сцену, вы увидите, из каких снимков и ключевых кадров она состоит.

Уведомление о длинном названии видео

Если имя видео больше 80 символов, индексатор видео Azure AI отображает описательную ошибку при отправке.

Уведомление об отключении конечного узла потоковой передачи

Если конечная точка потоковой передачи отключена, индексатор видео Azure AI отображает описательную ошибку на странице проигрывателя.

Улучшенная обработка ошибок

Код состояния 409 теперь возвращается из API Re-Index Video и Update Video Index, когда видео активно индексируется. Он предотвращает случайное переопределение текущих изменений при повторной индексации.

Ноябрь 2019 г.

• Поддержка пользовательских языковых моделей корейского языка

  Индексатор видео Azure теперь поддерживает пользовательские языковые модели в корейском () (ko-KRкак в API, так и на портале).

• Поддержка новых языков для преобразования речи в текст (STT)

  API индексатора видео Azure теперь поддерживает STT (распознавание речи) на арабском диалекте Леванта (ar-SY), английском языке Великобритании (en-GB) и английском языке Австралии (en-AU).

  Для отправки видео мы заменили zh-HANS на zh-CN. Оба поддерживаются, но zh-CN рекомендуется и он более точный.

2019 октября

• Поиск анимированных персонажей в коллекции

  При индексировании анимированных персонажей теперь можно искать их в видео галерее учетной записи.

Сентябрь 2019

В IBC 2019 мы объявили о нескольких достижениях:

• Распознавание анимированных персонажей (общедоступная предварительная версия)

  Обнаружение и распознавание групп символов в анимированном содержимом путем интеграции с пользовательским зрением.

• Идентификация с несколькими языками (общедоступная предварительная версия)

  Выявление сегментов на нескольких языках в звуковой дорожке и создание многоязычной транскрипции. Начальная поддержка: английский, испанский, немецкий и французский. Дополнительные сведения см. в разделе Транскрибирование многоязычного контента.

• Извлечение именованных сущностей для людей и местоположения

  Извлечение брендов, расположений и людей из речи и визуального текста с помощью обработки естественного языка (NLP).

• Классификация типов редакционных снимков.

  Отметьте кадры с редакционными типами, такими как крупный план, средний план, дублированный кадр, внутренний и внешний. Для получения дополнительной информации см. Определение типа редакционного снимка.

• Улучшение инференсирования тем - теперь на уровне 2

  Модель описания темы теперь поддерживает более глубокую степень детализации классификации IPTC. Дополнительные сведения см. в новых инновациях Azure Media Services на базе искусственного интеллекта.

Август 2019 г.

Индексатор видео Azure AI, развернутый в Южной Великобритании

Теперь вы можете создать платную учетную запись Индексатора видео Azure AI в южной части Великобритании.

Доступны новые аналитические сведения о типах редакционных снимков

Новые теги, добавленные в видеоролики, предоставляют редакционные "типы кадров", чтобы определить их с общими редакционными фразами, используемыми в рабочем процессе создания контента, например: крупный план, крупный план, широкий план, средний план, двушот, на открытом воздухе, в помещении, лицом влево и лицом вправо (доступно в формате JSON).

Доступно извлечение новых сущностей «Люди» и «Местоположения»

Индексатор видео Azure AI идентифицирует именованные места и людей с помощью обработки естественного языка (NLP), используя OCR и транскрипцию видео. Индексатор видео Azure AI использует алгоритмы машинного обучения, чтобы распознавать, когда в видео упоминаются определенные места, такие как Эйфелева башня, или люди, такие как Джон Доу.

Извлечение опорных кадров в исходном разрешении

Ключевые кадры, извлеченные индексатором видео Azure AI, доступны в исходном разрешении видео.

Общедоступная версия для обучения пользовательских моделей лиц по изображениям

Обучающие лица из изображений, перенесенных из предварительной версии в общедоступную версию (доступно через API и на портале).

Опция переключения, скрывающая галерею

Вы можете скрыть вкладку коллекции на портале (аналогично скрытию вкладки примеров).

Увеличен максимальный размер URL-адреса

Поддержка строки запроса URL-адреса 4096 (вместо 2048) для индексирования видео.

Поддержка многоязычных проектов

Теперь можно создавать проекты на основе видео, индексированных на разных языках (только API).

Июль 2019 г.

Редактор как мини-приложение

Редактор ИИ-индексатора видео Azure теперь доступен в качестве мини-приложения для внедрения в приложения.

Обновление пользовательской языковой модели из файла скрытых субтитров на портале

Форматы файлов VTT, SRT и TTML можно предоставить в качестве входных данных для языковых моделей на странице настройки портала.

2019 июня

Индексатор видео Azure AI, развернутый в Восточной Японии

Теперь вы можете создать платную учетную запись Индексатора видео Azure AI в восточном регионе Японии.

Создание и восстановление API учетных записей (предварительная версия)

Новое API позволяет обновлять конечную точку или ключ подключения к Службам мультимедиа Azure.

Улучшение обработки ошибок при отправке

Описательное сообщение возвращается при неправильной настройке базовой учетной записи служб мультимедиа Azure.

Предварительный просмотр ключевых кадров на временной шкале проигрывателя

Теперь вы можете видеть предварительный просмотр изображения для каждого момента на шкале времени проигрывателя.

Частичное выделение в редакторе

Теперь вы можете просматривать предварительный просмотр всех аналитических сведений, выбранных в результате выбора определенного временного интервала в редакторе.

2019 мая

Обновить кастомную языковую модель из файла закрытых субтитров

Теперь api создания пользовательской языковой модели и обновления пользовательских языковых моделей поддерживают форматы файлов VTT, SRT и TTML в качестве входных данных для языковых моделей.

При вызове API обновления расшифровки видео расшифровка добавляется автоматически. Модель обучения, связанная с видео, также обновляется автоматически. Сведения о настройке и обучении языковых моделей см. в статье "Настройка языковой модели с помощью индексатора видео Azure AI".

Новые форматы расшифровки для скачивания: TXT и CSV

Помимо форматов закрытых субтитров (SRT, VTT и TTML), которые уже поддерживаются, индексатор видео Azure от AI теперь поддерживает скачивание расшифровки в форматах TXT и CSV.

Связанный контент

• Документация по индексатору видео в Azure AI