Примечания о выпуске Индексатора видео Azure AI

Просмотрите эту страницу, чтобы просмотреть последние обновления.

Чтобы оставаться в курсе последних разработок индексатора видео Azure AI, в этой статье приведены сведения о следующих возможностях:

• Последние выпуски.
• Известные проблемы
• Исправления ошибок
• Нерекомендуемые функции.

Апрель 2025 г.

Усовершенствованный обмен сообщениями об ошибках

При попытке индексировать неподдерживаемый тип файла ответ возвращает ошибку UnsupportedFileType . Дополнительные сведения о поддерживаемых типах файлов см. в разделе "Поддерживаемые форматы файлов".

Март 2025 г.

Общая доступность Индексатора видео Azure AI, обеспечиваемая Arc.

Индексатор видео Azure AI, поддерживаемый Arc, теперь доступен в широком доступе. Теперь вы можете запустить Индексатор видео в пограничной среде для создания аналитических сведений о аудио и видео и текстовых сводок по видео на более чем 30 исходных языках. Дополнительные сведения см. в статье Индексатор видео Azure AI, работающий с помощью Arc.

Поддержка индексатора видео Azure для конфиденциальных конечных точек

Теперь общедоступна поддержка индексатора видео Azure для частных конечных точек. Теперь организации могут повысить безопасность с помощью частных конечных точек, чтобы разрешить клиентам в виртуальной сети безопасно получать доступ к данным через приватный канал. Это обеспечивает частный трафик данных через магистральную сеть Майкрософт, а не при использовании общедоступных конечных точек. Для получения дополнительной информации см. раздел "Частные конечные точки с Azure AI Video Indexer".

Февраль 2025 г.

Добавлены индонезийские и литовские языки в качестве исходных языков

Мы добавили поддержку видео с использованием индонезийских и литовских исходных языков. Список поддерживаемых языков см. в поддержке языков в Индексаторе видео Azure.

Изменение URL-адреса для файла мини-приложения mediator.js

Индексатор видео Azure AI изменил URL-адрес для доступа к файлу mediator.js, что позволяет внедренным видеопроигрывателем и мини-приложениям аналитических сведений взаимодействовать. Если веб-сайт использует файл mediator.js, рекомендуется обновить URL-адрес до 1 мая. Старый URL-адрес перестает работать 1 мая, после чего проигрыватель и мини-приложения аналитики не смогут взаимодействовать.

Старый URL-адрес mediator.js: https://breakdown.blob.core.windows.net/public/vb.widgets.mediator.js

Новый URL-адрес mediator.js: https://aka.ms/vi-mediator-file

Дополнительные сведения см. в разделе Внедрение виджетов в вашем приложении или блоге.

Мультимодальное суммирование видео теперь в общем доступе.

Мультимодальное резюмирование видео теперь доступно в общедоступной версии для Azure Video Indexer. Эта функция использует новейшие технологии LLM и SLM, такие как Azure OpenAI и Phi, для предоставления комплексных сводок видеоконтента путем объединения аналитических сведений из нескольких модальностей, включая аудио, визуальный элемент и текст.

Январь 2025 г.

Сводка многомодальных видео с помощью GPT-4o

Наша многомодальная сводка видео теперь поддерживает GPT-4o, создавая более точные сводки. Чтобы использовать многомодальную сводку видео, см. раздел Текстовое суммирование.

Усовершенствованная многомодальная текстовая сводка видео с ключевыми кадрами

Мы добавили усовершенствования в функцию многомодальной текстовой аннотации видео. Обновленная логика теперь лучше захватывает видеоконтент, интегрируя более релевантные ключевые кадры, что приводит к более точным сводкам.

Добавлен филиппинский язык в качестве исходного языка

Мы добавили поддержку видео с помощью исходного языка Филиппин. Список поддерживаемых языков см. в поддержке языков в Индексаторе видео Azure.

Добавлен параметр распознавания знаков препинания в аудио

Мы добавили новый необязательный параметр, punctuationMode, в наши API Upload и Reindex. Этот параметр определяет, следует ли явно распознавать знаки препинания при транскрибации звука. Например, речевой "период" будет транскрибирован в виде периода ., а dot dot dot также в виде многоточия .... Дополнительные сведения см. на портале разработчика.

Декабрь 2024 г.

Обновления политики фильтрации для многомодального резюмирования видео с помощью Azure OpenAI

Мы обновили нашу политику, касающуюся фильтров вредоносного контента в многомодальной текстовой сводке видео. Эти фильтры больше не являются обязательными, хотя мы по-прежнему рекомендуем настроить их, чтобы обеспечить блокировку вредного содержимого. Если вы хотите полностью отключить вредоносные фильтры содержимого, зарегистрируйтесь в следующей форме: Azure OpenAI Limited Access Review: Modified Content Filtering.

Кроме того, текстовая аннотация видеороликов теперь поддерживает фильтр "Защитные щиты" для прямых атак (джейлбрейк). Мы рекомендуем добавить этот фильтр в развертывание системы.

Дополнительные сведения о фильтрах, необходимых для получения сведений о многомодальных видео с помощью Azure OpenAI, см. в разделе "Использование текстовой суммации".

Ноябрь 2024 г.

Краткий обзор многомодального видео — облако и периферия

Мы рады представить многомодальную видеоаналитику, которая улучшает нашу текстовую сводку видео за счет анализа ключевых кадров, а также аудио- и видеоданных. Эта функция доступна как в облаке, работающем на базе Azure OpenAI, так и на периферийных устройствах в составе VI, поддерживаемого ARC. Он использует последнюю визуальную модель Phi3.5, которая может быть настроена для запуска с графическими процессорами для повышения производительности.

API расширенного содержимого запроса

Наш Video-to-Text API, также известный как API контента подсказок, теперь поддерживает больше моделей: Llama2, Phi3, Phi3.5, GPT-4O и GPT-4O Mini. Это улучшение обеспечивает большую гибкость при преобразовании видеоконтента в текст и открывает дополнительные возможности при использовании Индексатора видео Azure. Вы можете собирать сведения из Индексатора видео Azure в формате запроса, который можно настроить, выбрав имя модели и изменив стиль запроса. Стиль "Обобщённый" идеально подходит для задач, таких как сводки видео, именование видео и описание основных событий, в то время как стиль "Полный" более подходит для таких случаев использования, как вопросы и ответы (Q&A), RAG и поиск. Дополнительные сведения об этом API см. в разделе Операции и содержимое запроса Azure Video Indexer.

Октябрь 2024 г.

Новый пример кода

Мы добавили новый пример кода для экспорта данных из Azure AI Video Indexer в Azure Data Explorer с использованием Logic Apps.

Август 2024 г.

Усиленная защита для текстового резюмирования видео

Текстовая сводка видео теперь включает функции предотвращения рисков джейлбрейк-атаки. Этот новый фильтр безопасности должен быть добавлен в ваш AOAI, чтобы воспользоваться текстовым видеорезюмированием на основе языковой модели. Дополнительные сведения см. в разделе "Сводка по текстовому видео" с помощью Azure OpenAI.

Сводка текста видео на устройстве на периферии

Мы выпустили запись блога Индексатор видео Azure AI & Phi-3 представляет текстовую сводку видео на платформе edge: История о совместной работе

Июль 2024 г.

Текстовая сводка на VI, поддерживаемая Arc

Возможность текстового суммирования теперь доступна на VI, включённом при помощи расширения Arc, используя последнюю модель Phi 3. Вы можете воспользоваться теми же функциями, что и в облаке, включая настройку сводки с несколькими параметрами: формальные, случайные, короткие и длинные.

Улучшения идентификации языка

• Улучшены скорость и качество идентификации на одном языке.
• Если в файле есть несколько языков (и вы попросили идентификацию одного языка):
  • Самый доминирующий язык, язык, который существовал на протяжении самого длительного времени, возвращается.
  • Артефакт содержит все языки, определяемые речью в исходном видео.
• Расшифровка включает только строки наиболее доминирующего языка и исключает строки, содержащие разные языки.

Улучшения проигрывателя и доступности

Проигрыватель веб-сайта был обновлен до последней версии базы Shaka. Проигрыватель также включен в мини-приложения.

Улучшения доступности были реализованы для веб-сайта.

Июнь 2024 г.

Примеры кода

• Чтобы упростить поиск соответствующего видеоматериала для учащихся и преподавателей, используйте индексатор видео Azure AI с Помощью Microsoft Azure OpenAI. См. запись блога по улучшению интерфейса поиска обучения с помощью индексатора видео Azure AI и исходного кода.
• Используйте Azure LogicApps для классификации автомобилей, обнаруженных в видео. В этом примере используется возможность «Bring Your Own» индексации видео для обнаружения объектов и GPT-4 от Azure OpenAI для расширенной классификации. Просмотрите демонстрацию YouTube и пример кода.

Увеличение ограничения длительности файла

Все предустановки теперь поддерживают индексирование файлов до 6 часов (предыдущее ограничение было 4 часа), а предварительная версия "Базовый звук" поддерживает индексирование файлов до 12 часов в длину.

Май 2024 г.

Текстовое резюмирование

Индексатор видео в Azure теперь содержит краткие сводки о том, о чем видео идет без просмотра всего видео. Это может сэкономить вам время, обрабатывая длинные видео и предоставляя вам суть в более коротком формате. Он превращает длинные видео в краткие и легко воспринимаемые сводки.

В нем используются алгоритмы сводных данных для выявления наиболее релевантных аналитических сведений для видео. Она включает в себя оценку аналитических сведений на основе их важности и релевантности к общей теме. Удобный интерфейс позволяет вводить видео и настраивать нужный тип сводки.

Вы можете настроить сводку, выбрав "Короткий", "Длинный", "Формальный" или "Случайный" и указать развертывание конкретной модели.

Дополнительные сведения о текстовой суммации см. в разделе "Обзор текстовой сводки".

Интеграция Azure OpenAI

Индексатор видео Azure теперь предлагает интеграцию с Azure OpenAI. Вы можете подключить ресурс Azure OpenAI при создании новой учетной записи Индексатора видео Azure или добавить ее в существующую учетную запись Индексатора видео Azure. При подключении VI к Azure OpenAI можно использовать возможность сводки текста, доступную из API и на портале.

Для получения дополнительной информации о подключении Azure OpenAI к вашей учетной записи VI см. в статье "Создание или обновление учетной записи Azure AI Video Indexer с подключением Azure OpenAI".

Расширение API контента запроса

API запроса контента Azure AI Video Indexer теперь поддерживает дополнительные языковые модели: Phi 2, Llama и GPT 4V. При использовании API содержимого запроса с GPT 4V он выводит ключевые кадры для анализа языковой моделью, а также предоставляет другие аналитические данные.

Апрель 2024 г.

Исключите модели

Теперь вы можете исключить модели при индексировании с помощью веб-сайта VI и API. При отправке видео в индекс, выберите предустановки "Дополнительные параметры>индексирования", а затем выберите модели ИИ, которые будут исключены из результатов индексирования. Он может включить более эффективное индексирование и результаты VI, содержащие только интересующие вас аналитические сведения.

Новый регион доступности

Индексатор видео в Azure AI теперь доступен в западной части Германии.

Февраль 2024 г.

Учетные записи без AMS и рекомендации по миграции

• Все новые видеопакеты учетной записи VI, потоковая передача и кодировка выполняются VI. Теперь вы не можете создавать учетные записи VI на основе AMS. См. руководство по созданию новой учетной записи.
• Кодировка и упаковка VI тарифицируется по фиксированной ставке в один цент за минуту с бесплатной потоковой передачей.
• Вы можете обновить свои учетные записи VI на основе AMS до нового типа учетной записи без AMS.
• Вы можете принять участие в повторной обработке и переносе ресурсов AMS VI, чтобы вы могли продолжать получать доступ к видео и аналитическим сведениям. Миграция начинается в конце марта.
• Веб-приложения индексатора видео и мини-приложения используют новый проигрыватель мультимедиа, который является высокопроизводительным и больше не использует Azure Медиаплеер.

В следующей документации описан процесс миграции учетных записей и активов.

• См. новую версию API.

Поддержка TLS1.3

Мы поддерживаем TLS 1.3, последнюю версию протокола TLS, которая шифрует данные для обеспечения безопасного канала связи между двумя конечными точками.

Индексатор видео Azure AI, развернутый в центрально-западной швеции и западной части США

Теперь вы можете создать платную учетную запись Индексатора видео Azure AI в регионах Центральная Швеция и Западная часть США.

Январь 2024 года

Новое содержимое запроса LLM

Теперь вы можете подключить аналитику видео к крупной языковой модели (LLM) для таких задач, как сводка и ответы на вопросы. API преобразует аналитические сведения о видео в текстовый формат, готовый к запросу, для использования с LLM. Дополнительные сведения см. в статье Индексатор видео Azure AI с подсказками LLM.

Декабрь 2023 г.

Новый параметр предустановки — Базовый видео

Индексатор видео добавил новый параметр предустановки индексирования , Basic Video. Он также доступен в VI, активированном расширением Arc. Это вариант индексирования с низкой стоимостью, который включает множество полезных аналитических сведений искусственного интеллекта, включая OCR, обнаружение объектов и визуальные метки. Базовое видео можно использовать для создания аналитических сведений совместно с Базовым звуком (Базовое аудио и видео) или самостоятельно (только Базовое видео). Дополнительные сведения о параметрах индексирования см. в руководстве по настройке индексирования.

Получение API кадров

Теперь можно извлечь кадры из индексированного видео для выбранного раздела видео, выполнив FramesSasUrls запрос. Дополнительные сведения см. в FrameSelection.

Обновления функции «Использование собственной модели» (предварительная версия)

• Добавлена поддержка интерфейса пользователя для индивидуальных инсайтов.
• Добавлена поддержка поиска для пользовательской аналитики.

Дополнительные сведения см. в разделе "Создание собственной модели ИИ".

Поиск по объекту на веб-сайте и API Индексатора видео Azure AI

Теперь вы можете использовать функцию поиска для поиска видео с определенными объектами (например, автомобилями, мотоциклами и многое другое) на веб-сайте Индексатора видео Azure ИИ или с помощью запроса поиска .

Ноябрь 2023 г.

Индексатор видео выпустил следующие вещи в ноябре:

Индексатор видео на платформе Azure AI при поддержке Arc (предварительная версия)

Индексатор видео можно использовать для гибридных сценариев, размещая его локально в кластере Kubernetes. Дополнительные сведения см. в обзоре Индексатора видео Azure AI на основе Arc. Вы также можете попробовать расширение, следуя руководству.

Используйте свою собственную модель (предварительный просмотр)

Вы можете использовать собственную настраиваемую модель ИИ и интегрировать данные с моделями индексатора видео. Дополнительные сведения см. в статье "Создание собственной модели ИИ".

Пользовательские теги и бесплатный текст на видео (предварительная версия)

Вы можете добавить настраиваемые теги и бесплатный текст в виде метаданных видео в любое видео в учетной записи Индексатора видео. Это позволяет классифицировать и аномировать видео с любой информацией, которая относится к вам и вашему бизнесу. Например, можно добавить теги, например product demo, customer testimonialили internal training бесплатный текст, например This video shows how to use our new feature X или This video was recorded at our annual conference in Y. Их можно добавить в область под видео после индексирования видео.

Поиск на основе пользовательских тегов и свободного текста (предварительная версия)

Вы можете искать видео на основе пользовательских тегов и свободного текста. Это позволяет найти видео, соответствующие вашим критериям, проще и быстрее. Вы можете выполнять поиск на основе пользовательских тегов и свободного текста на всех поддерживаемых языках, а также объединять их с другими фильтрами поиска, такими как ключевые слова, лица, метки, эмоции и т. д. Для выполнения более сложных запросов можно также использовать расширенный синтаксис поиска. Например, можно искать видео с тегом product demo и бесплатным текстом feature X.

Мы добавили много улучшений в настраиваемую модель людей, которая улучшает общий опыт и точность. Модели людей — это модели искусственного интеллекта, позволяющие обучить собственную модель для распознавания конкретных людей в видео. Новые дополнения:

Оценка качества модели людей (предварительная версия)

Вы можете получить представление о качестве вашей настраиваемой модели "Люди" (плохой, удовлетворительной, хорошей). Качество определяется количеством изображений, используемых для маркировки; чем больше изображений, используемых для маркировки человека, тем выше вероятность правильной идентификации человека. Например, вероятность идентификации человека с 24 помеченными изображениями выше вероятности идентификации человека с двумя помеченными изображениями. Вы можете увидеть количество изображений, используемых для маркировки каждого пользователя на странице настраиваемой модели "Люди".

Выберите пользовательскую модель людей по умолчанию (предварительная версия)

Теперь вы можете выбрать индивидуальную модель для работы с людьми в качестве значения по умолчанию для уровня пользователя учетной записи VI, чтобы вам не приходилось каждый раз выбирать имя модели при загрузке видео. Это позволяет сэкономить время и усилия при отправке видео, которые вы хотите проанализировать с помощью настраиваемой модели "Люди".

Группировка неизвестных людей в видео (предварительная версия)

Вы можете увидеть неизвестных людей в своих видео, сгруппированных по сходству их внешности. Она помогает пометить неизвестных людей быстрее и быстрее, а также повысить точность настраиваемой модели "Люди". Вы можете просмотреть группы неизвестных людей на странице >настройки, а затем перейти на вкладку "Неизвестные люди". Например, это может помочь вам означить местную знаменитость или местного политика.

Результаты поиска с максимальной оценкой достоверности для идентифицированного имени пользователя (предварительная версия)

Вы можете найти имя идентифицированного человека и определить, когда он появляется в видео, с максимальным коэффициентом уверенности. Это поможет вам решить, какие наиболее важные видео для изучения. Например, вы можете найти видео, в которых Джон Смит распознается вашей настраиваемой моделью распознавания людей, и увидеть уровень уверенности для каждого видео.

Избегайте дублирующихся отправок на индексацию

Иногда можно непреднамеренно отправлять одно и то же задание индексирования несколько раз. Чтобы избежать этой ситуации, был добавлен preventDuplicatesновый необязательный параметр запроса. Если задано значение true, служба отклоняет отправку файла и сообщает о конфликте, если он уже индексирован.

Проверки на дубликаты MD5 URL-адреса загрузки зависят от заголовка Content-md5 в ответе сервера, если он существует, согласно RFC 1864: поле заголовка Content-MD5. Поставщики хранилища обычно используют его.

Если вы хотите повторно отправить одно и то же видео, можно задать для параметра falseзначение .

Октябрь 2023

Новая идея — обнаружение объектов

Индексатор видео добавил новую аналитику обнаружения объектов в стандартную и расширенную предустановки видео. Его можно использовать для идентификации и отслеживания широкого спектра объектов, отображаемых в видео. Дополнительные сведения см. в обзоре обнаружения объектов Индексатора видео в Azure AI.

Сентябрь 2023

Изменения, связанные с выходом на пенсию AMS

В результате выхода на пенсию служб мультимедиа Azure (AMS) 30 июня 2024 года Индексатор видео объявил о многих связанных выходах на пенсию. Они включают прекращение поддержки классических учетных записей Video Indexer 30 июня 2024 года, изменения API и прекращение поддержки адаптивного битрейта. Полные сведения см. в статьеОб изменениях, связанных с выходом на пенсию службы мультимедиа Azure (AMS).

Июль 2023 г.

Редактируйте лица с помощью Azure AI Video Indexer API

Теперь вы можете отредактировать лица с помощью API индексатора видео Azure. Дополнительные сведения см. в статье Редактирование лиц с помощью Azure AI Video Indexer API.

Увеличение ограничения запросов API

Индексатор видео увеличил ограничение запросов API с 60 запросов в минуту до 120.

Июнь 2023 г.

Объявлено о прекращении работы служб мультимедиа Azure.

Май 2023 г.

Обновления API

Мы представляем изменение поведения, которое может потребовать изменения в существующей логике запроса. Изменение находится в API списка и поиска , найдите подробное изменение между текущим и новым поведением в следующей таблице. Может потребоваться обновить код, чтобы использовать новые API .

Поддержка HTTP/2

Добавлена поддержка HTTP/2 для API управления данными . HTTP/2 предлагает несколько преимуществ по сравнению с HTTP/1.1, которые по-прежнему поддерживаются для обратной совместимости. Одним из основных преимуществ HTTP/2 является повышение производительности, повышение надежности и снижение требований к системным ресурсам по протоколу HTTP/1.1. При этом изменении http/2 поддерживается как для портала индексатора видео, так и для API плоскости данных. Мы советуем обновить код, чтобы воспользоваться преимуществами этого изменения.

Улучшения аналитических сведений по темам

Теперь мы поддерживаем все пять уровней онтологии IPTC.

Апрель 2023 г.

поддержка здоровья ресурса

Индексатор видео Azure теперь интегрирован с Azure Resource Health, что позволяет увидеть работоспособность и доступность каждого из ресурсов Индексатора видео Azure. Azure Работоспособность ресурсов также помогает диагностировать и решать проблемы, и вы можете настроить оповещения, чтобы получать уведомления при возникновении проблем с ресурсами. Дополнительные сведения см. в обзоре Работоспособность ресурсов Azure.

Модель распознавания символов анимации прекращена

Модель распознавания символов анимации прекращена 1 марта 2023 года. Для любых связанных проблем откройте запрос в службу поддержки через портал Azure.

Исключение конфиденциальных моделей ИИ

Следуя принципам Microsoft Responsible AI, индексатор видео Azure теперь позволяет исключать определенные модели ИИ при индексировании мультимедийных файлов. Список конфиденциальных моделей ИИ включает:

• Определение лиц
• Наблюдаемые люди
• Эмоции
• Идентификация этикеток

Эта функция в настоящее время доступна через API и во всех предустановках, кроме расширенной предустановки.

Улучшения обнаружения наблюдаемых пользователей

Дополнительные сведения см. в разделе "Рекомендации и ограничения" при выборе варианта использования.

Март 2023 г.

Поддержка хранилища за брандмауэром

Рекомендуется заблокировать учетные записи хранения и отключить общедоступный доступ для улучшения или соответствия корпоративной политике безопасности. Индексатор видео теперь может получить доступ к не общедоступным учетным записям хранения, используя исключение доверенной службы Azure и управляемые удостоверения. Дополнительные сведения о настройке см. в нашем руководстве.

Новое персонализированное обучение речи и произношению

Индексатор видео Azure AI добавил новую возможность работы с пользовательскими моделями распознавания речи. Этот интерфейс включает возможность использовать пользовательские наборы данных произношения для улучшения распознавания неправильных слов, фраз или имен. Пользовательские модели можно использовать для улучшения качества транскрибирования содержимого с отраслевой терминологией. Дополнительные сведения см. в разделе "Настройка модели речи".

Наблюдаемые улучшения качества работы людей

Теперь функция "Наблюдаемые люди" поддерживает людей, которые сидят. Это в дополнение к существующей поддержке людей, находящихся стоя или идущих пешком. Улучшение делает модель наблюдаемых людей более универсальной и подходящей для более широкого спектра случаев использования. Мы также улучшили алгоритмы репозиционирования и группировки моделей на 50%. Модель теперь может более точно отслеживать и группировать людей в нескольких полях зрения камер.

Оптимизация длительности индексирования наблюдаемых пользователей

Мы оптимизировали использование памяти модели наблюдаемых людей, что привело к сокращению продолжительности индексирования на 60 % при использовании пресета расширенного анализа видео. Теперь вы можете эффективнее обрабатывать видеоматериалы и получать результаты быстрее.

2023 февраля

Цены

1 января 2023 г. мы представили расширенный аудио- и видео продукт для продвинутых предустановок. Мы сделали это, чтобы сообщить об использовании каждого предустановленного параметра: "Базовый", "Стандартный" и "Расширенный", со своими отдельными счетчиками в отчете о выставлении счетов Azure. Его также можно увидеть в отчетах по анализу затрат.

Начиная с 1 февраля, мы рады объявить о 40% снижении цен на базовый аудиоанализ, аудиоанализ и номера SKU видеоанализа. Мы приняли во внимание отзывы наших клиентов и тенденций рынка, чтобы внести изменения, которые повысят их преимущества. Сокращая цены и внедряя новый расширенный номер SKU, мы предоставляем конкурентные цены и дополнительные возможности для клиентов, чтобы сбалансировать затраты и функции. Кроме того, мы продолжаем улучшать и добавлять дополнительные возможности искусственного интеллекта. Вы можете воспользоваться преимуществами этих экономий при выполнении новых или переиндексных операций.

Это изменение было реализовано автоматически. Клиенты, у которых уже есть скидки Azure, продолжают получать их в дополнение к новым ценам.

Тег сетевой службы

Индексатор видео поддерживает использование тега безопасности сети, чтобы разрешить сетевой трафик из IP-адресов индексатора видео в сеть. Начиная с 22 января мы переименовали тег службы безопасности сети в AzureVideoAnalyzerForMediaVideoIndexer. Это изменение требует обновления скриптов развертывания и (или) существующей конфигурации. Дополнительные сведения см. в нашей документации по безопасности сети.

Январь 2023

Опыт работы с уведомлениями

На веб-сайте Индексатора видео Azure теперь есть панель уведомлений, в которой можно оставаться в курсе важных обновлений продукта, таких как события, влияющие на обслуживание, новые выпуски и многое другое.

Обнаружение текстового логотипа

Обнаружение текстового логотипа позволяет настраивать текстовые логотипы для обнаружения в видео. Дополнительные сведения см. в разделе "Обнаружение текстового логотипа".

Переключение каталогов

Теперь вы можете переключаться между каталогами Microsoft Entra ID и управлять учетными записями Azure AI Video Indexer в разных тенантах с помощью веб-сайта Azure AI Video Indexer.

Поддержка языков

• Теперь поддерживаются новые языки: ирландский, болгарский, каталонский, греческий, эстонский, хорватский, латышский, румынский, словацкий, словенский, телугу, малаялам, каннада, исландский, армянский, гуджарати, малайский и тамильский.
• Используйте API для получения всех поддерживаемых языков: получение поддерживаемых языков.

Для получения дополнительной информации см. раздел Поддерживаемые языки.

Группирование лиц

Мы сократили количество случаев обнаружения лиц низкого качества в пользовательском интерфейсе и insights.json. Повышение качества и удобства использования с помощью улучшенного алгоритма группировки.

Ноябрь 2022 г.

Теперь имена докладчиков можно изменить с веб-сайта Индексатора видео Azure AI

Теперь вы можете добавлять новых спикеров, переименовывать идентифицированных спикеров и изменять спикеров, назначенных определенной строке расшифровки, с помощью веб-сайта Индексатора видео Azure AI. Дополнительные сведения о том, как изменить спикеров на панели временной шкалы, см. в разделе на веб-сайте Azure AI Video Indexer "Изменение спикеров".

Те же возможности доступны в API Azure AI Video Indexer для загрузки видео индекса.

Октябрь 2022

Новая встроенная роль: средство просмотра с ограниченным доступом индексатора видео

Роль Ограниченного просмотра Видео Индексатора с ограниченным доступом предназначена для пользователей веб-сайта Azure AI Video Indexer. Разрешенные действия роли связаны с работой на веб-сайте Индексатора видео Azure AI.

Дополнительные сведения см. в разделе Управление доступом с ролью ограниченного доступа для индексатора видео.

Аналитика обнаружения Slate (режим предварительного просмотра)

При индексировании видео с помощью расширенной опции индексирования автоматически определяются следующие данные об обнаружении титра (процесса постпродакшн фильма):

• Обнаружение clapperboard с извлечением метаданных.
• Обнаружение цифровых шаблонов, включая цветовые полосы.
• Обнаружение безтекстового листа, включая сопоставление сцен.

Для получения подробной информации см. Обнаружение Slate.

Поддержка новых исходных языков для STT, перевода и поиска

Теперь поддерживаются исходные языки для STT (речь в тексте), перевода и поиска в Украине и Вьетнаме. Это означает, что функции транскрибирования, перевода и поиска также поддерживаются для этих языков на веб-сайте Индексатора видео Azure AI, мини-приложениях и API.

Для получения дополнительной информации см. раздел Поддерживаемые языки.

Изменение имени говорящего в транскрибировании через API

Теперь вы можете изменить имя докладчиков в транскрибировании с помощью API индексатора видео Azure.

Аннотация времени на уровне слова с оценкой достоверности.

Теперь поддерживается временная аннотация на уровне слова с указанием уровня достоверности.

Заметка — это любой тип дополнительных сведений, добавляемых в уже существующий текст, будь то транскрибирование звукового файла или исходного текстового файла.

Дополнительные сведения см. в разделе "Изучение сведений о транскрибировании на уровне слова".

Интеграция Azure Monitor с возможностью индексировать журналы

Новый набор журналов, описанный в следующем разделе, позволяет лучше отслеживать конвейер индексирования.

Видеоиндексатор Azure теперь поддерживает настройки диагностики для событий индексирования. Теперь вы можете экспортировать логи мониторинга загрузки и переиндексации файлов мультимедиа через параметры диагностики в Azure Log Analytics, Storage, Event Hubs или стороннее решение.

Расширенные поддерживаемые языки в LID и MLID с помощью API индексатора видео в Azure AI

Расширена поддержка языков в функциях LID (идентификации языка) и MLID (многоязычной идентификации) с использованием API индексатора видео Azure AI.

Следующие языки теперь поддерживаются через API:

• Арабский (Объединенные Арабские Эмираты)
• Арабский современный стандарт
• Арабский (Египет)
• Арабский (Ирак)
• Арабский (Иордания)
• Арабский (Кувейт)
• Арабский (Оман)
• Арабский (Катар)
• Арабский (Саудовская Аравия)
• Арабский (Сирийская Арабская Республика)
• Чешский
• Датский
• Немецкий
• Английский (Австралия)
• Английский (Великобритания)
• Английский язык, США
• испанский
• Испанский (Мексика)
• Финский
• Французский (Канада)
• Французский
• Иврит
• Хинди
• Итальянский
• Японский
• Корейский
• Норвежский
• Нидерландский
• Польский
• Португальский
• Португальский (Португалия)
• Русский
• Шведский
• Тайский
• Турецкий
• Украинский
• Вьетнамский
• Китайский (упрощённый)
• Китайский (кантонский и традиционный)

Чтобы указать список языков для идентификации с помощью LID или MLID при автоматическом определении, воспользуйтесь API загрузки видео и настроить параметр customLanguages для включения до 10 языков из списка поддерживаемых языков, перечисленных ранее. Языки, указанные в customLanguages, сравниваются на уровне языков, поэтому должен быть включен только один стандарт на каждый язык.

Для получения дополнительной информации см. раздел Поддерживаемые языки.

Настройка уровня доверия в модели пользователя с помощью API

Используйте API модели Patch person для настройки уровня достоверности распознавания лиц в модели человека.

Просмотр спикеров в скрытых субтитрах

Теперь вы можете просматривать говорящих в скрытых субтитрах проигрывателя мультимедиа Индексатора видео Azure. Дополнительные сведения см. в разделе "Просмотр закрытых субтитров" на веб-сайте Индексатора видео Azure AI.

Управляйте ограничивающими прямоугольниками для лиц и людей с помощью параметров.

Новый boundingBoxes параметр URL-адреса контролирует возможность включения/выключения ограничивающих прямоугольников при встраивании проигрывателя. Дополнительные сведения см. в разделе "Внедрение мини-приложений".

Управление автоматическим воспроизведением из параметров учетной записи

Укажите, выполняется ли автоматическое воспроизведение файла мультимедиа при открытии с помощью веб-приложения с помощью параметров пользователя. Перейдите на веб-сайт Azure AI Video Indexer - значок (верхний правый угол) -> ->.

Копирование идентификатора видео из представления проигрывателя

Скопировать идентификатор видео доступно при выборе видео на веб-сайте Индексатора видео Azure AI

Новая темная тема в родных цветах (Azure)

Выберите нужную тему на веб-сайте Индексатора видео в Azure AI. Выберите значок шестеренки (в верхнем правом углу) —>Настройки пользователя.

Поиск или фильтрация списка учетных записей

Вы можете искать или фильтровать список учетных записей с помощью имени или региона учетной записи. Выберите учетные записи пользователей в правом верхнем углу веб-сайта Индексатора видео Azure AI.

сентябрь 2022 года

Общая доступность учетных записей на основе ARM

С помощью учетных записей на основе Azure Resource Management (ARM) платной (неограниченной) подписки вы можете использовать:

• Управление доступом на основе ролей Azure (RBAC).
• Управляемое удостоверение для повышения безопасности взаимодействия между вашими Службами мультимедиа Azure и Azure AI Video Indexer, тегами сетевой службы и собственной интеграцией с Azure Monitor для мониторинга вашей учетной записи (журналы аудита и индексирования).
• Масштабируйте и автоматизируйте ваше развертывание с помощью шаблона ARM, bicep или terraform.
• Создайте соединитель логических приложений для учетных записей на основе ARM.

Сведения о создании учетной записи на основе ARM см. в статье "Создание учетной записи".

Август 2022 г.

Обновление модели тематического анализа

Модель распознавания тем в Azure AI Video Indexer была обновлена, и теперь мы извлекаем более 6,5 миллионов тем (например, охватывающих такие темы, как вирус COVID-19). Чтобы воспользоваться последними обновлениями модели, необходимо переиндексировать видеофайлы.

Модель вывода тем теперь доступна в Azure Government.

Теперь в платной учетной записи Индексатора видео Azure вы можете использовать модель вывода тем в регионе Azure для государственных организаций в Вирджинии и Аризоне. В этом выпуске мы завершили достижение паритета ИИ между Azure Global и Azure Government. Чтобы воспользоваться обновлениями модели, необходимо переиндексировать видеофайлы.

Длина сеанса составляет 30 дней на веб-сайте Индексатора видео Azure AI

Продолжительность сеанса на веб-сайте Индексатора видео Azure AI была продлена до 30 дней. Сеанс можно сохранить без необходимости входить в систему каждый час.

Июль 2022

Аналитика по представленной одежде (предварительный обзор)

Аналитические сведения о выбранной одежде обеспечивают более целевое размещение рекламы.

В этой информации содержатся сведения о ключевых предметах, которые носят люди на видео, и временная метка, когда появляется одежда. Он позволяет размещать высококачественную контекстную рекламу в видео, где соответствующие объявления одежды совпадают с определённым временем, когда они просматриваются.

Чтобы просмотреть выбранную одежду наблюдаемого человека, сначала необходимо индексировать видео с помощью расширенных параметров Azure Video Indexer. Подробные сведения о том, как ранжируются изображения рекомендуемой одежды и как просмотреть этот анализ, см. в статье о рекомендуемой одежде.

Июнь 2022 г.

Создание улучшений индексатора видео на портале Azure

Индексатор видео Azure AI теперь поддерживает создание нового ресурса с помощью управляемого удостоверения, назначаемого системой, или управляемого удостоверения, назначаемого как системой, так и пользователем, для одного и того же ресурса.

Вы также можете изменить основное управляемое удостоверение с помощью вкладки "Удостоверение" в портале Azure.

Ограниченный доступ к распознаванию знаменитостей и функциям идентификации лиц

В рамках приверженности Корпорации Майкрософт ответственному искусственному интеллекту мы разрабатываем и выпускаем Индексатор видео Azure ИИ — функции идентификации и распознавания знаменитостей. Эти функции предназначены для защиты прав отдельных лиц и общества и обеспечения прозрачного взаимодействия с компьютером человека. Таким образом, существует ограниченный доступ и использование функций Индексатора видео Azure AI: идентификации и распознавания знаменитостей.

Функции идентификации и распознавания знаменитостей требуют регистрации и доступны только управляемым клиентам и партнерам Майкрософт. Клиентам, которые хотят использовать эту функцию, необходимо подать заявку и отправить форму регистрации. Дополнительные сведения читайте в статье "Индексатор видео Azure AI с ограниченным доступом".

Дополнительные сведения см. в сообщении в блоге и инвестировании и защитных мерах для распознавания лиц.

Май 2022 г.

Разрыв строк в расшифровках

Улучшена логика разрыва строки, чтобы лучше разделить расшифровку на предложения. Новые возможности редактирования теперь доступны на веб-сайте Индексатора видео Azure AI, например добавление новой строки и изменение метки времени строки. Дополнительные сведения см. в разделе "Вставка или удаление строк расшифровки".

Интеграция Azure Monitor

Индексатор видео Azure теперь поддерживает параметры диагностики для событий аудита. Журналы событий аудита теперь можно экспортировать с помощью параметров диагностики в Azure Log Analytics, Хранилище, Event Hubs или стороннее решение.

Дополнения обеспечивают более простой доступ к анализу данных, мониторингу работы ресурсов и автоматическому созданию потоков для реагирования на события. Дополнительные сведения см. в статье Monitor Azure AI Video Indexer.

Улучшения Аналитики видео

Система распознавания символов (OCR) улучшилась на 60%. Обнаружение лиц улучшилось 20%. Точность меток повысилась на 30% в целом ряде видео. Эти улучшения доступны сразу во всех регионах и не требуют каких-либо изменений клиентом.

Сервисный тег

Индексатор видео Azure AI теперь является частью тегов сетевой службы. Индексатор видео часто требует доступа к другим ресурсам Azure (например, службе хранилища). Если вы защищаете входящий трафик к ресурсам с помощью группы безопасности сети, теперь можно выбрать Индексатор видео в составе встроенных тегов службы. Это упрощает управление безопасностью при заполнении тега службы общедоступными IP-адресами.

Переключатель распознавания знаменитостей

Теперь вы можете включить или отключить модель распознавания знаменитостей на уровне учетной записи (только в классической учетной записи). Чтобы включить или отключить модель, перейдите к переключателю настройки> модели или отключите ее. После отключения модели аналитика Индексатора видео не включает выходные данные модели знаменитости и не запускает поток обработки модели знаменитости.

Имя репозитория индексатора видео в Azure AI

По состоянию на 1 мая наш обновленный репозиторий виджета Azure AI Video Indexer был переименован. Вместо этого используйте https://www.npmjs.com/package/@azure/video-indexer-widgets.

Апрель 2022 г.

Переименован видеоанализатор Azure для мультимедиа обратно в индексатор видео Azure AI

По состоянию на сегодняшний день, имя продукта Видеоанализатор Azure для медиа — Azure AI Video Indexer и все ресурсы, связанные с продуктом (веб-портал, маркетинговые материалы). Это обратно совместимое изменение, которое не влияет на API и ссылки. Новый логотип Индексатора видео Azure AI:

Март 2022 г.

Файлы скрытых субтитров теперь поддерживают включение атрибутов говорящего

Индексатор видео Azure AI позволяет включать характеристики говорящих на основе файла субтитров для слабослышащих, который вы выбираете скачать. Чтобы включить атрибуты говорящих, выберите "Загрузки -> Закрытые субтитры," выберите формат загружаемого файла (SRT, VTT, TTML, TXT или CSV), затем установите флажок >".

Улучшения в ассортименте виджетов

Были реализованы следующие улучшения:

• Виджеты Индексатора видео Azure поддерживают более одной региональной настройки в параметрах виджета.
• Мини-приложения Аналитики теперь поддерживают начальные параметры поиска и множественные параметры сортировки.
• Мини-приложения Аналитики также включают шаг подтверждения перед удалением лица, чтобы избежать ошибок.
• Теперь при настройке мини-приложения можно указать ширину в виде строки (например, "100%", "100vw").

2022 февраля

Общедоступная предварительная версия управления учетными записями видеоиндексатора Azure с использованием ARM в облаке для государственных организаций

Веб-сайт Индексатора видео Azure теперь поддерживает управление учетными записями на основе ARM в общедоступной предварительной версии (см. примечание о выпуске за ноябрь 2021 г.).

Создание учетной записи на основе ARM с открытым исходным кодом

Добавлены новые примеры кода, включая вызовы HTTP для использования индексатора видео Azure AI, а также операции создания, чтения, обновления и удаления (CRUD) с использованием API ARM, предназначенные для разработчиков решений.

Январь 2022 года

Улучшенное обнаружение звуковых эффектов

Возможность обнаружения звуковых эффектов улучшена с целью повысить коэффициент обнаружения в следующих классах:

• Реакции толпы (восторженные возгласы, аплодисменты и освистывание)
• Выстрел или взрыв
• Смех

Дополнительные сведения см. в статье Обнаружение звуковых эффектов.

Поддержка новых исходных языков для STT, перевода и поиска на веб-сайте

Индексатор видео в Azure AI предоставляет поддержку для STT (речь в текст), перевода и поиска на следующих языках на веб-сайте Индексатора видео Azure AI.

• Иврит he-IL
• Португальский pt-PT
• Персидский fa-IR

Это означает, что функции транскрибирования, перевода и поиска также поддерживаются для этих языков на веб-сайте и мини-приложениях Индексатора видео Azure.

Декабрь 2021 г.

Функция проектов теперь общедоступна

Возможность создания проектов теперь является общедоступной и готова к использованию в производственных целях. Нет изменений цен, связанных с переходом "Предварительная версия в общедоступную версию". См. статью Добавление видеоклипов в проекты.

Поддержка новых исходных языков для STT, перевода и поиска на уровне API

Индексатор видео Azure AI предоставляет поддержку исходных языков stT (речь в текст), перевод и поиск на иврите he-IL, португальском pt-PTи персидском fa-IR языках на уровне API.

Возможность обнаружения соответствующих лиц

При индексировании видео с помощью расширенных параметров индексатора видео в Azure AI можно просмотреть новую возможность обнаружения соответствующего пользователя. Если в вашем медиафайле обнаружены люди, теперь вы можете через медиаплеер просмотреть конкретных людей, соответствующих каждому из них.

Ноябрь 2021 г.

Публичная предварительная версия управления учетными записями Индексатора видео Azure на базе ARM

Индексатор видео Azure AI представляет общедоступную предварительную версию управления учетными записями на основе Azure Resource Manager (ARM). Вы можете использовать API индексатора видео в Azure на основе ARM для создания, редактирования и удаления учетной записи на портале Azure.

Для получения дополнительной информации перейдите к созданию учетной записи в Azure AI Video Indexer.

Обнаружение одежды людей

При индексировании видео с помощью расширенных параметров индексатора видео Azure AI вы можете просмотреть новые возможности обнаружения одежды людей. Если в файле мультимедиа обнаружены люди, теперь можно просмотреть тип одежды, который они носят через проигрыватель мультимедиа.

Прямоугольник вокруг лица (предварительный просмотр)

Теперь при индексировании файла мультимедиа можно включить ограничивающий прямоугольник для обнаруженных лиц. Возможность использования прямоугольной рамки для лица доступна при индексировании вашего файла с помощью выбора стандартных, базовых или расширенных предустановок индексирования.

В проигрывателе можно включить ограничивающие прямоугольники.

октябрь 2021 года

Внедрение мини-приложений в приложение с помощью пакета индексатора видео в Azure AI

Используйте новый пакет npm индексатора видео Azure AI (AVAM) @azure/video-analyzer-for-media-widgets, чтобы добавить insights виджеты в ваше приложение и настроить их в соответствии с вашими потребностями.

Новый пакет AVAM позволяет легко встроить и обмениваться данными между нашими виджетами и вашим приложением, вместо добавления элемента iframe для внедрения виджета аналитики. Дополнительные сведения см. в разделе "Внедрение и настройка мини-приложений Индексатора видео Azure ИИ" в приложении. 

Август 2021 г.

Переиндексировать видео- или аудиофайлы

Теперь есть возможность переиндексировать видео- или аудиофайлы, которые не были успешно индексированы во время процесса.

Улучшение поддержки доступности

Исправлены ошибки, связанные с CSS, темами и специальными возможностями:

• высокая контрастность
• параметры учетной записи и представления аналитических сведений на портале.

Июль 2021

Автомасштабирование зарезервированных единиц мультимедиа

1 августа 2021 года Azure AI Video Indexer включил возможность автоматического масштабирования зарезервированных единиц мультимедиа (MRUs) с помощью служб мультимедиа Azure, поэтому вам не нужно управлять ими через Azure AI Video Indexer. Это позволяет оптимизировать цены, например снижение цен во многих случаях, в зависимости от потребностей вашего бизнеса, так как оно масштабируется автоматически.

Июнь 2021 года

Индексатор видео Azure AI, развернутый в шести новых регионах

Теперь вы можете создать платную учетную запись Индексатора видео Azure AI в Центрально-Франции, Центральной части США, Южной Бразилии, Западной части США, Центральной Кореи и Западной Японии.

Май 2021

Поддержка новых исходных языков для преобразования речи в текст (STT), перевода и поиска

Индексатор видео azure AI теперь поддерживает STT, перевод и поиск в:

• Китайский (Кантонский) zh-HK
• Голландский (Нидерланды) Nl-NL
• Чешский Cs-CZ
• Польский Pl-PL
• Шведский (Швеция) Sv-SE
• Норвежский nb-NO
• Финский fi-FI
• Канадский французский fr-CA
• Тайский th-TH
• Арабский:
  • Объединенные Арабские Эмираты ar-AE и ar-EG
  • Ирак ar-IQ
  • Иордания ar-JO
  • Кувейт ar-KW
  • Ливан ar-LB
  • Оман ar-OM
  • Катар ar-QA
  • Палестинский орган ar-PS
  • Сирия ar-SY
  • Турецкий tr-TR

Эти языки доступны как на веб-сайте API, так и на веб-сайте индексатора видео Azure AI. Выберите нужный язык в поле со списком Исходный язык видео.

Новая тема индексатора видео Azure AI

Доступна новая тема "Azure" в дополнение к темам "light" (светлая) и "dark" (темная). Чтобы выбрать тему, щелкните значок шестеренки в правом верхнем углу веб-сайта, найдите темы в разделе "Параметры пользователя".

Новый код с открытым исходным кодом, который можно использовать

Три новых проекта GitHub доступны в нашем репозитории GitHub:

• Код, помогаемый использовать только что добавленную настройку мини-приложения.

• Решение, которое поможет вам добавить дедупликацию в ваши видеотеки.

Новый параметр для включения и выключения ограничивающих прямоугольников (для наблюдаемых людей) на проигрывателе

При индексировании видео с использованием расширенных параметров видео вы можете увидеть наши новые возможности по распознаванию людей. Если в вашем мультимедийном файле обнаружены люди, вы можете включить ограничивающие рамки для найденного человека через проигрыватель.

Апрель 2021 г.

Служба индексатора видео переименована в Индексатор видео Azure AI.

Улучшенный интерфейс отправки на портале

Индексатор видео Azure AI имеет новый интерфейс отправки на веб-сайте. Чтобы загрузить медиафайл, нажмите кнопку Загрузить на вкладке Медиафайлы.

В gov-cloud доступен новый портал разработчика

Портал разработчика API Индексатора видео Azure теперь также доступен в Azure для правительства США.

Обнаружение наблюдаемых пользователей (предварительная версия)

Индексатор видео Azure AI теперь обнаруживает наблюдаемых людей в видео. Он предоставляет такие сведения, как нахождение человека в видеокадре и точные метки времени (начало, конец) момента появления человека. API возвращает координаты ограничивающего прямоугольника (в пикселях) для каждого обнаруженного человека, включая уровень достоверности обнаружения.

Например, если видео содержит человека, операция обнаружения выводит список появлений человека вместе с их координатами в видеокадрах. Эту функцию можно использовать для определения пути перемещения человека в видео. Также она позволяет определить, присутствует ли в видеоролике один и тот же человек несколько раз.

Добавленная функция обнаружения наблюдаемых людей доступна при индексировании вашего файла, выбрав параметр Advanced ->Advanced video или Advanced video + audio пресет (в разделе индексирования Видео + аудио). Стандартные и базовые предустановки индексирования не включают эту новую расширенную модель.

При просмотре аналитики вашего видео на веб-сайте Azure AI Video Indexer на странице отображается распознавание людей с миниатюрами всех обнаруженных лиц. Можно выбрать эскиз человека и увидеть, где он отображается в видеопроигрывателе.

Эта функция также доступна в JSON-файле, созданном индексатором видео Azure AI. Дополнительные сведения см. в разделе "Наблюдаемые люди" в видео.

Обнаруженные звуковые события с использованием функции Обнаружение аудиоэффектов (предварительная версия)

Теперь обнаруженные звуковые события можно просматривать в файле со скрытыми субтитрами. Файл можно скачать с веб-сайта Индексатора видео Azure ИИ и доступен в качестве артефакта в API GetArtifact.

Компонент Обнаружение звуковых эффектов (предварительная версия) обнаруживает различные звуковые события и классифицирует их по разным акустическим категориям (например: выстрел, крик, реакция толпы и др.). Дополнительные сведения см. в статье Обнаружение звуковых эффектов.

Март 2021 г.

Анализ звука

Анализ звука теперь доступен в новом пакете функций аудио по разным ценам. В новом предустановке анализа «Базовый анализ звука» предлагается недорогой вариант для извлечения транскрипции речи, перевода и форматирования выходных заголовков и субтитров. Предустановка "Базовый звук" создает две отдельные строки в счете, включая строку за транскрипцию и отдельную строку за форматирование титров и субтитров. Подробнее можно узнать на странице Цены на Службы мультимедиа.

Добавленный пакет доступен при индексировании или повторном индексировании файла, выбрав расширенный параметр ->Basic Audio preset (в раскрывающемся списке "Видео + аудио индексирование ").

Новый портал разработчика

Индексатор видео Azure AI имеет новый портал разработчика. Ознакомьтесь с новыми API Индексатора видео Azure ИИ и найдите все соответствующие ресурсы в одном месте:

• репозиторий GitHub
• Stack Overflow
• Техническое сообщество индексатора видео Azure AI с соответствующими записями блога
• Часто задаваемые вопросы об индексаторе видео Azure AI
• Голосовая связь пользователя для предоставления отзывов и предложения функций
• Ссылка "CodePen" с примерами кода мини-приложений

Дополнительные возможности настройки аналитического мини-приложения

Теперь пакет SDK доступен для внедрения мини-приложения аналитики Индексатора видео Azure в собственную службу и настройки его стиля и данных. Пакет SDK поддерживает стандартный виджет анализа Azure AI Video Indexer и полностью настраиваемый виджет анализа. Пример кода доступен в репозитории GitHub индексатора видео Azure AI. Благодаря этим расширенным возможностям настройки разработчик решения может применять пользовательские стили, интегрировать собственные данные ИИ клиента и представить их в виджете аналитики (с аналитикой от Azure AI Video Indexer или без нее).

Индексатор видео Azure AI, развернутый в центрально-северной части США, западной части США и Центральной Канаде

Теперь вы можете создать платную учетную запись Индексатора видео Azure AI в центрально-западной части США, западной части США и Центральной Канаде.

Поддержка новых исходных языков для преобразования речи в текст (STT), перевода и поиска

Индексатор видео azure AI теперь поддерживает STT, перевод и поиск в:

• Датский da-DK
• Норвежский nb-NO
• Шведский sv-SE
• Финский fi-FI
• Канадский французский язык fr-CA
• Тайский th-TH
• Арабский ar-BH, ar-EG, ar-IQ, ar-JO, ar-KW, ar-LB, ar-OM, ar-QA, ar-S и ar-SY, а также турецкий tr-TR.

Языки доступны в API и веб-сайте Индексатора видео Azure AI.

Поиск по теме на веб-сайте Индексатора видео Azure AI

Теперь вы можете использовать функцию поиска в верхней части страницы веб-сайта Индексатора видео в Azure AI для поиска видео с определенными разделами.

2021 февраля

Несколько владельцев учетных записей

Роль владельца учетной записи была добавлена в Индексатор видео Azure AI. Вы можете добавлять, изменять и удалять пользователей, а также менять их роль. Дополнительные сведения о том, как предоставлять общий доступ к учетной записи, см. в разделе о приглашении пользователей.

Обнаружение звуковых событий (общедоступная предварительная версия)

Индексатор видео Azure AI теперь обнаруживает следующие звуковые эффекты в несумовских сегментах содержимого: выстрелы, звук разбитого стекла, сигнал тревоги, сирена, взрыв, собачий лай, крики, смех, реакции толпы (бурные овации, аплодисменты и освистывание) и тишину.

При индексации файла выберите Дополнительные параметры ->Расширенный аудио пресет (в разделе Индексация видео и аудио), чтобы воспользоваться новой функцией эффектов звука. Стандартное индексирование включает только молчание и реакцию толпы.

Теперь тип события аплодисменты, включенный в предыдущую модель звуковых эффектов, стал частью типа события реакция толпы.

При выборе просмотра аналитических сведений о вашем видео на веб-сайте Индексатора видео Azure AI на странице отображаются звуковые эффекты.

Расширение возможностей именованных сущностей

Список людей и мест в целом был расширен и обновлен.

Кроме того, модель теперь включает людей и места в контексте, которые не являются знаменитыми, как "Сэм" или "Дом" в видео.

январь 2021

Индексатор видео Azure ai развернут в облаке для государственных организаций США

Теперь вы можете создать платную учетную запись Индексатора видео Azure на облачной платформе правительства США в регионах Вирджинии и Аризоны. Пробная версия Индексатора видео Azure AI недоступна в указанном регионе. Дополнительные сведения см. в документации по индексатору видео в Azure AI.

Индексатор видео Azure AI, развернутый в центральном регионе Индии

Теперь вы можете создать платную учетную запись Индексатора видео Azure AI в центральном регионе Индии.

Новый темный режим для веб-сайта Индексатора видео Azure AI

Веб-сайт Azure AI Video Indexer теперь доступен в темном режиме. Чтобы включить темный режим, откройте панель параметров и переключите переключатель в параметре "Темный режим ".

Декабрь 2020 г.

Индексатор видео Azure AI, развернутый в Западной Швейцарии и Северной Швейцарии

Теперь вы можете создать платную учетную запись Индексатора видео Azure AI в регионах "Западная Швейцария" и "Северная Швейцария".

Октябрь 2020 года

Запланированные изменения проверки подлинности веб-сайта Индексатора видео Azure AI

Начиная с 1 марта 2021 г., вы больше не сможете зарегистрироваться и войти на портал разработчика веб-сайта Индексатора видео Azure с помощью Facebook или LinkedIn.

Вы можете зарегистрироваться и войти с помощью одного из следующих поставщиков: Идентификатор Microsoft Entra, Microsoft и Google.

Август 2020 г.

Мобильный дизайн веб-сайта Индексатора видео Azure AI

Веб-сайт Индексатора видео Azure теперь поддерживает мобильные устройства. Пользовательский опыт адаптируется под размер экрана вашего мобильного устройства (за исключением интерфейсов настройки).

Внедрение специальных возможностей и исправление ошибок

В рамках Руководств по доступности веб-контента (WCAG) опыт использования веб-сайта Индексатора видео Azure соответствует уровню С в рамках стандартов доступности Майкрософт. Устранены некоторые ошибки и внесены улучшения, связанные с навигацией с помощью клавиатуры, программным доступом и средствами чтения с экрана.

Июль 2020

Общая доступность для многоязычной идентификации

Функция идентификации на нескольких языках была переведена от предварительного просмотра к общедоступной версии и готова для продуктивного использования.

Нет изменений цен, связанных с переходом "Предварительная версия в общедоступную версию".

Улучшения веб-сайта Индексатора видео в Azure AI

Корректировки в коллекции видео

Добавлена новая панель поиска для поиска глубокой аналитики с дополнительными возможностями фильтрации. Также улучшены результаты поиска.

Список получил новое представление. Теперь вы можете сортировать архивы видео с несколькими файлами и управлять ими.

Новая панель для удобного выбора и настройки

Мы добавили боковую панель для простого выбора и настройки пользователя, позволяя просто и быстро создавать учетные записи и предоставлять общий доступ, а также настраивать параметры.

Боковая панель также используется для доступа к пользовательским предпочтениям и справке.

Июнь 2020 г.

Поиск по темам

Теперь вы можете использовать поиск API, чтобы находить видео на специальные темы (только для API).

Темы добавляются как часть необязательного параметра textScope. Дополнительные сведения см. в разделе API.

Обновление меток

Инструмент маркировки обновлён и теперь включает больше визуальных меток, которые можно идентифицировать.

Май 2020 г.

Индексатор видео Azure AI, развернутый в восточной части США

Теперь вы можете создать платную учетную запись Индексатора видео Azure AI в регионе "Восточная часть США".

URL-адрес индексатора видео Azure AI

Региональные конечные точки Azure AI Video Indexer были унифицированы и теперь все начинаются на www. Никаких действий не требуется.

Теперь вы можете получить доступ к www.videoindexer.ai, будь то для внедрения виджетов или входа на веб-сайт Azure AI Video Indexer.

Также wus.videoindexer.ai будет перенаправляться на www. Дополнительные сведения см. в статье Встраивание виджетов Индексатора видео Azure AI в ваши приложения.

Апрель 2020 г.

Новые возможности параметров мини-приложения

Мини-приложение Аналитические сведения содержит новые параметры: language и control.

У мини-приложения Проигрыватель есть новый параметр locale. Оба locale параметра language управляют языком проигрывателя.

См. дополнительные сведения в разделе типы мини-приложений.

Новая обложка проигрывателя

Новый скин игрока выпущен с обновленным дизайном.

Подготовка к предстоящим изменениям

• Сейчас следующие API возвращают объект учетной записи:

  • Создать платный аккаунт
  • Get-Account
  • Получение авторизации учетных записей
  • Получить-Аккаунты-С-Токеном

  Объект Account имеет Url поле, указывающее на расположение веб-сайта Индексатора видео Azure AI. Для платных учетных записей Url поле в настоящее время указывает на внутренний URL-адрес вместо общедоступного веб-сайта. В ближайшие недели мы обновим его и возвратим URL-адрес веб-сайта Индексатора видео Azure для всех учетных записей (пробная версия и оплата).

  Не используйте внутренние URL-адреса. Используйте общедоступные API Azure AI Video Indexer.

• Если вы встраиваете URL-адреса индексатора видео Azure ИИ в ваши приложения, и эти URL-адреса не указывают на веб-сайт индексатора видео Azure или на конечную точку API индексатора видео Azure (https://api.videoindexer.ai), а вместо этого ведут на региональную конечную точку, например, https://wus2.videoindexer.ai, повторно создайте URL-адреса.

  Это можно сделать одним из следующих способов:

  • Замена URL-адреса на URL-адрес, указывающий на API виджета индексатора видео Azure (например, виджет аналитики)

  • Использование веб-сайта Azure AI Video Indexer для создания нового встроенного URL-адреса:

    Нажмите клавишу Play, чтобы перейти на страницу видео—> нажмите< кнопку />Внедрить,> скопируйте URL-адрес в приложение:

  Региональные URL-адреса не поддерживаются. Они будут заблокированы в ближайшие недели.

Январь 2020 г.

Поддержка пользовательского языка для дополнительных языков

Индексатор видео Azure теперь поддерживает пользовательские языковые модели для ar-SY, en-UK и en-AU (только для API).

Обновление времени выполнения действия удаления учетной записи

Действие по удалению учетной записи теперь выполняется в течение 90 дней, а не 48 часов.

Новый репозиторий на GitHub для Индексатора видео Azure AI

Теперь доступен новый индексатор видео Azure AI с GitHub с различными проектами, руководства по началу работы и примеры кода: https://github.com/Azure-Samples/media-services-video-indexer

Обновление Swagger

Azure AI Video Indexer объединил аутентификации и операции в единую спецификацию OpenAPI для Azure AI Video Indexer (swagger). Разработчики могут найти API на портале разработчика Azure AI Video Indexer.

Декабрь 2019 г.

Обновление расшифровки с новым API

Обновляйте определенные разделы расшифровки с помощью API Update-Video-Index.

Исправление конфигурации учетной записи с веб-сайта Индексатора видео Azure AI

Теперь вы можете обновлять конфигурацию подключения Медиасервисов, чтобы самостоятельно решать такие проблемы, как:

• некорректный ресурс Службы мультимедиа Azure;
• изменения паролей;
• Ресурсы служб мультимедиа были перемещены между подписками.

Чтобы исправить конфигурацию учетной записи, на веб-сайте Индексатора видео Azure перейдите на вкладку "Параметры > учетной записи" (как владелец).

Настройка учетной записи Custom Vision

Настройте учетную запись Custom Vision для платных учетных записей с помощью веб-сайта Индексатора видео Azure (ранее это поддерживал только API). Для этого войдите на веб-сайт Индексатора видео Azure ИИ, выберите ><"Настройка модели" для настройки модели.>>

Сцены, снимки и ключевые кадры — теперь в одной информационной панели

Сцены, снимки и ключевые кадры теперь объединены в единую аналитику для более простого восприятия и навигации. Выбрав нужную сцену, вы увидите, из каких снимков и ключевых кадров она состоит.

Уведомление о длинном названии видео

Если имя видео больше 80 символов, индексатор видео Azure AI отображает описательную ошибку при отправке.

Уведомление об отключении конечного узла потоковой передачи

Если конечная точка потоковой передачи отключена, индексатор видео Azure AI отображает описательную ошибку на странице проигрывателя.

Улучшенная обработка ошибок

Код состояния 409 теперь возвращается из API Re-Index Video и Update Video Index, когда видео активно индексируется. Он предотвращает случайное переопределение текущих изменений при повторной индексации.

Ноябрь 2019 г.

• Поддержка пользовательских языковых моделей корейского языка

  Индексатор видео Azure теперь поддерживает пользовательские языковые модели в корейском () (ko-KRкак в API, так и на портале).

• Поддержка новых языков для преобразования речи в текст (STT)

  API индексатора видео Azure теперь поддерживает STT (распознавание речи) на арабском диалекте Леванта (ar-SY), английском языке Великобритании (en-GB) и английском языке Австралии (en-AU).

  Для отправки видео мы заменили zh-HANS на zh-CN. Оба поддерживаются, но zh-CN рекомендуется и он более точный.

2019 октября

• Поиск анимированных персонажей в коллекции

  При индексировании анимированных персонажей теперь можно искать их в видео галерее учетной записи.

Сентябрь 2019

Несколько улучшений, объявленных на IBC 2019:

• Распознавание анимированных персонажей (общедоступная предварительная версия)

  Возможность обнаруживать группы и распознавать персонажей в анимированном содержимом с помощью интеграции с пользовательской системой визуального распознавания.

• Идентификация на нескольких языках (общедоступная предварительная версия).

  Выявление сегментов на нескольких языках в звуковой дорожке и создание многоязычной транскрипции. Изначально поддерживается английский, испанский, немецкий и французский языки. Дополнительные сведения см. в разделе Транскрибирование многоязычного контента.

• Извлечение именованных сущностей для лиц и мест.

  Извлекает торговые марки, расположения и людей из речи и визуального текста с помощью обработки естественного языка (NLP).

• Классификация типов редакционных снимков.

  Тегирование кадров редакционных видов, включая крупный план, средний план, дубль, в помещении, на улице и т. д. Дополнительные сведения см. в разделе Определение типа редакционных кадров.

• Улучшение инференсирования тем - теперь на уровне 2

  Модель описания темы теперь поддерживает более глубокую степень детализации классификации IPTC. Ознакомьтесь с подробной информацией в статье Новая технология на основе ИИ в Службах мультимедиа Azure.

Август 2019 г.

Индексатор видео Azure AI, развернутый в Южной Великобритании

Теперь вы можете создать платную учетную запись Индексатора видео Azure AI в южной части Великобритании.

Новая информация о типах редакционных кадров

Новые теги, добавленные в видеозаписи, предоставляют редакционные "типы кадров" для их идентификации с общими редакционными терминами, используемыми в рабочем процессе создания контента, такими как: экстремальный крупный план, крупный план, общий план, средний план, дубль два, на улице, в помещении, левый ракурс и правый ракурс (доступно в формате JSON).

Доступно извлечение новых сущностей «Люди» и «Местоположения»

Индексатор видео Azure AI определяет именованные локации и имена людей с помощью обработки естественного языка (NLP) на основе OCR и транскрипций видео. Индексатор видео Azure AI использует алгоритм машинного обучения для распознавания определенных мест (например, Эйфелевой башни) или людей (например, Джона Доу) в видео.

Извлечение опорных кадров в исходном разрешении

Ключевые кадры, извлеченные индексатором видео Azure AI, доступны в исходном разрешении видео.

Общедоступная версия для обучения пользовательских моделей лиц по изображениям

Функция обучения распознаванию лиц с изображений была переведена из режима предварительного просмотра в общедоступную версию (доступна через API и на портале).

Опция переключения, скрывающая галерею

Пользователь может добавить вкладку "галерея" в список скрытых в портале (аналогично скрытию вкладки "образцы").

Увеличен максимальный размер URL-адреса

Введена поддержка строки запроса URL-адреса 4096 (вместо 2048) при индексировании видео.

Поддержка многоязычных проектов

Теперь можно создавать проекты на основе видео, которые были проиндексированы на разных языках (только API).

Июль 2019 г.

Редактор как мини-приложение

Редактор ИИ-индексатора видео Azure теперь доступен как мини-приложение для внедрения в клиентские приложения.

Обновление пользовательской языковой модели из файла скрытых субтитров на портале

Клиенты могут предоставлять файлы форматов ВТТ, SRT и TTML в качестве входных данных для языковых моделей на странице настроек портала.

2019 июня

Индексатор видео Azure AI, развернутый в Восточной Японии

Теперь вы можете создать платную учетную запись Индексатора видео Azure AI в восточном регионе Японии.

Создание и восстановление API учетных записей (предварительная версия)

Новое API позволяет обновлять конечную точку или ключ подключения к Службам мультимедиа Azure.

Улучшение обработки ошибок при отправке

Описательное сообщение возвращается при неправильной настройке базовой учетной записи служб мультимедиа Azure.

Предварительный просмотр ключевых кадров на временной шкале проигрывателя

Теперь вы можете видеть предварительный просмотр изображения для каждого момента на шкале времени проигрывателя.

Частичное выделение в редакторе

Теперь вы можете просматривать предварительный просмотр всех аналитических сведений, выбранных в результате выбора определенного временного интервала в редакторе.

2019 мая

Обновить кастомную языковую модель из файла закрытых субтитров

Теперь API для создания и обновления пользовательской языковой модели поддерживают файлы форматов VTT, SRT и TTML в качестве входных данных для языковых моделей.

При вызове API обновления расшифровки видео расшифровка добавляется автоматически. Модель обучения, связанная с видео, также обновляется автоматически. Сведения о настройке и обучении языковых моделей см. в статье "Настройка языковой модели с помощью индексатора видео Azure AI".

Новые форматы расшифровки для скачивания: TXT и CSV

Помимо форматов закрытых субтитров (SRT, VTT и TTML), которые уже поддерживаются, индексатор видео Azure от AI теперь поддерживает скачивание расшифровки в форматах TXT и CSV.