Часто задаваемые вопросы об индексаторе видео в Azure AI

Индексатор видео azure AI — это облачное приложение, часть служб ИИ Azure, позволяет извлекать аналитические сведения из видео с помощью видео-моделей индексатора видео и аудио. For more information, see Overview.

Некоторые операции, которые индексатор видео Azure AI может выполнять в файлах мультимедиа, включают:

• Определение и извлечение речи и определение говорящих.
• Определение и извлечение экранного текста в видео.
• Распознавание объектов на видеофайле.
• Определите бренды (например, Майкрософт) из звуковых треков и текста на экране в видео.
• Определение и распознавание лиц из базы данных знаменитостей и определяемой пользователем базы данных лиц.
• Извлечения обговариваемых тем и необязательно упомянутых в содержимом аудио и видео.
• Создание субтитров или скрытых субтитров из звуковой дорожки.

For more information and more Azure AI Video Indexer features, see Overview.

Индексатор видео Azure AI включает пробную версию, которая предоставляет вам 2400 минут бесплатного индексирования. Их можно использовать с веб-сайтом Индексатора видео Azure или API индексатора видео Azure (см. портал разработчика).

Чтобы индексировать видео и звуки в большом масштабе, вы можете подключить Индексатор видео Azure к платной подписке Microsoft Azure. You can find more information on pricing on the pricing page.

You can find more information on getting started in Get started.

Вы можете использовать веб-интерфейс Индексатора видео Azure ai для оценки, настройки и управления учетной записью без написания кода. Когда вы готовы к разработке более сложных приложений, вы можете использовать API индексатора видео Azure для интеграции Индексатора видео Azure ВИ в собственные приложения, веб-сайты или пользовательские рабочие процессы с помощью бессерверных технологий, таких как Azure Logic Apps или Функции Azure.

Функции распознавания лиц и распознавания знаменитостей индексатора видео Azure — это функции ограниченного доступа, требующие регистрации.

Find the registration form and more information about Limited Access in this article.

Кроме того, ознакомьтесь со следующими ссылками: запись блога объявления и инвестиции и защита для записи блога распознавания лиц.

Нет, Индексатор видео Azure AI обеспечивает интеграцию нескольких моделей машинного обучения с одним конвейером. Индексирование видео или аудиофайла с помощью Индексатора видео Azure AI извлекает полный набор аналитических сведений. Они извлекаются на одной общей временной шкале без каких-либо навыков машинного обучения или знаний по алгоритмам, необходимым для части клиента.

Индексатор видео Azure AI поддерживает наиболее распространенные форматы мультимедиа. См . матрицу поддержки индексатора видео Azure ИИ и ограничения служб.

На веб-портале Индексатора видео Azure ai можно отправить файл мультимедиа с помощью диалогового окна отправки файлов или наказать URL-адрес, который непосредственно размещает исходный файл. Any URL that hosts the media content using an iFrame or embed code doesn't work (see example).

Yes. Вы можете получить доступ к необработанным видеофайлам из индексатора видео. Используйте метод URL-адреса скачивания исходного файла видео, чтобы получить URL-адрес ФАЙЛА MP4 и поместить его в тег видео.

В Индексаторе видео в Azure AI можно создать проект и добавить несколько файлов для стежки и отрисовки в виде нового файла. The number of source files is set to 10 in the website and 100 in the API.

Время, необходимое для индексирования видео или звукового файла, зависит. При использовании API индексатора видео Azure или веб-интерфейса Индексатора видео Azure AI время зависит от нескольких параметров. Они включают длину и качество файла, количество аналитических сведений, найденных в файле. Однако чтобы получить более точное представление, мы рекомендуем вам запустить несколько тестовых файлов со своим собственным содержимым и вычислить среднее значение.

Yes, you can integrate Azure AI Video Indexer into serverless technologies like Logic Apps, Flow, and Azure Functions. You can find more details on the Logic App and Flow connectors for Azure AI Video Indexer here. Вы можете увидеть некоторые проекты автоматизации, выполненные партнерами в репозитории примеров индексатора видео Azure AI.

You can see which Azure regions Azure AI Video Indexer is available on the regions page.

Yes. В Индексаторе видео в Azure AI можно настроить некоторые из доступных моделей в соответствии с вашими потребностями.

Например, наша модель Person поддерживает вне коробку 1000 000 лиц знаменитости распознавания, но вы также можете обучить его, чтобы распознать другие лица, которые не в этой базе данных.

For details, see articles about customizing Person, Brands, and Language models.

Yes. Press the edit video button from the library display or the open in editor button from the player display to get to the Projects tab. You can create a new project and add more videos from your library to edit them together, once you're done you can render your video and download.

Если вы хотите получить аналитические сведения о новом видео, индексируйте его с помощью Индексатора видео Azure AI и отображается в библиотеке с его аналитическими сведениями.

При наличии нескольких звуковых потоков индексатор видео Azure принимает первый из них и обрабатывает только этот поток. В любом аудиопотоке Индексатор видео Azure AI принимает различные каналы (если они присутствуют) и обрабатывает их вместе как моно. Для обработки потоков и каналов можно использовать команды ffmpeg на файле перед его индексацией.

Подробное описание перехода на правильный домен см. в разделе "Переключение между клиентами".

Приложение, работающее в контейнерах Kubernetes с поддержкой Arc, которое можно развернуть за пределами Azure, чтобы извлечь и использовать аналитические сведения о аудио и видео из файлов мультимедиа.

Azure Arc — это мост, который расширяет платформу Azure для создания приложений и служб с гибкостью для выполнения в центрах обработки данных, в пограничных средах и в многооблачных средах. Разработка облачных приложений с согласованными моделями разработки, операций и безопасности.

You can either follow the quickstart and experience Azure Arc-enabled Kubernetes automated scenarios with Azure Arc Jumpstart.

Во время установки расширения контейнеры машинного обучения загружаются в пограничные вычислительные ресурсы. Некоторые из этих контейнеров могут иметь размер нескольких гигабайтов, а время загрузки зависит от сетевых условий. В некоторых случаях загрузка может занять более 15 минут.

Video Indexer enabled by Arc requires a storage class configured with readwritemany. Если класс хранилища уже задан как по умолчанию кластера во время установки, он будет использоваться. В противном случае, если необходимо настроить другое хранилище, его можно передать в качестве свойства во время установки расширения.

Yes. API расширения Индексатора видео доступен через интерфейсный модуль. Вы можете ограничить доступ к IP-адресу или полному домену. Все обмен данными происходит через безопасные протоколы трафика с использованием допустимого сертификата ЦС. Мы рекомендуем задать уровень безопасности, например NSG или брандмауэр, чтобы ограничить доступ к конечной точке.

Consult the troubleshooting guide.

Обмен данными между клиентским приложением и учетной записью Индексатора видео Azure AI шифруется с помощью протокола TLS. TLS — это стандартный протокол шифрования, обеспечивающий конфиденциальность и целостность данных, пересылаемых между клиентами и службами через Интернет. Дополнительные сведения см. в статье Протокол TLS. Индексатор видео обеспечивает минимальное значение TLS версии 1.2. Клиенты не могут контролировать костюмы шифра. Индексатор видео Azure AI выбирает первое совпадение между клиентом и сервером, переходя от сильного к более слабому.

Да, хранятся видео и звуковые файлы. Их можно удалить из Индексатора видео Azure AI с помощью веб-сайта Индексатора видео Azure или API. Исходный файл мультимедиа и закодированный файл хранятся в учетной записи хранения Azure, связанной с учетной записью индексатора видео Azure AI. Для пробных учетных записей файлы мультимедиа хранятся в регионе Azure East US.

Да, вы всегда можете удалить видео и аудиофайлы, а также любые метаданные и аналитические сведения, извлеченные из них индексатором видео Azure AI. После удаления файла из Индексатора видео Azure AI файл и его метаданные и аналитические сведения окончательно удаляются из Индексатора видео Azure AI. Однако если вы реализовали собственное решение резервного копирования в хранилище Azure, файл остается в хранилище Azure.

Да, только администраторы учетной записи могут предоставлять и отзывать приглашения для пользователей использовать учетную запись, а также назначать права редактирования и доступа только для чтения.

Ваше видео или звуковое содержимое, которое имеет общедоступный параметр конфиденциальности, доступно любому, кто имеет ссылку на ваше видео или звуковое содержимое и его аналитические сведения. Ваше видео или звуковое содержимое с заданным параметром конфиденциальности доступно только пользователям, приглашенным в учетную запись видео или аудиоконтента. Параметры конфиденциальности содержимого также применяются к метаданным и аналитическим сведениям, извлеченным индексатором видео Azure AI. Параметры конфиденциальности указываются при отправке файла видео или аудио. Также вы можете изменить уровень конфиденциальности после индексирования.

В соответствии с условиями веб-служб Azure (OST) вы полностью владеете своим контентом. Корпорация Майкрософт обращается только к содержимому и метаданным и аналитическим сведениям, которые индексатор видео Azure AI извлекает из содержимого в соответствии с ost и заявлением о конфиденциальности Майкрософт.

Нет, пользовательские модели, создаваемые в вашей учетной записи, недоступны для любой другой учетной записи. Azure AI Video Indexer currently allows you to build custom brands, language, and person models in your account. Эти модели доступны только в учетной записи, в которой они были созданы.

Исходный файл мультимедиа и закодированный файл хранятся в учетной записи хранения, связанной с учетной записью индексатора видео. Вы настраиваете учетную запись хранения и управляете ею. Аналитические сведения, созданные индексатором видео Azure AI, хранятся в управляемой учетной записи хранения Azure индексатора видео в том же регионе, что и учетная запись Индексатора видео и шифруется неактивных с помощью ключей, управляемых Корпорацией Майкрософт. The data is replicated using geo-redundant storage (GRS) to a paired Azure region.

Индексатор видео Azure AI охватывается заявлением о конфиденциальности Майкрософт. Заявление о конфиденциальности описывает все процессы, используемые корпорацией Майкрософт для обработки персональных данных, а также правила и цели такой обработки. См. дополнительные сведения о конфиденциальности в центре управления безопасностью Майкрософт.

Индексатор видео Azure в настоящее время имеет сертификацию SOC. Чтобы просмотреть сертификацию Индексатора видео Azure AI, ознакомьтесь с Центром управления безопасностью Майкрософт.

При отправке видео в Индексатор видео Azure AI можно выбрать один из двух параметров конфиденциальности: частный и общедоступный. Общедоступные видеоролики доступны всем пользователям, включая анонимных и неопознанных пользователей. Доступ к частным ограничен членами учетной записи.

При отправке видео в Индексатор видео Azure AI автоматически выполняется алгоритмами и моделями, чтобы убедиться, что содержимое не является общедоступным. Если видео является подозрительным как содержащее явное содержимое, его нельзя задать как общедоступный. Тем не менее члены учетной записи смогут все же получать к нему доступ как к частному видео (просматривать, скачивать аналитические сведения и извлеченные артефакты и выполнять другие операции, доступные для членов учетной записи).

Чтобы задать для видео общий доступ, можно выполнить одно из следующих действий.

• Создайте собственный уровень интерфейса (например, приложение или веб-сайт) и используйте его для взаимодействия со службой Индексатора видео в Azure AI. This way the video remains private in our website and your users can interact with it through your interface. Например, вы по-прежнему сможете получать аналитические сведения или разрешить просмотр видео в вашем собственном интерфейсе.

• Запросите человеческую проверку содержимого, что приведет к удалению ограничения, если содержимое не является явным.

  Этот параметр можно изучить, если веб-сайт Индексатора видео Azure используется непосредственно пользователями в качестве слоя интерфейса, а также для общедоступного просмотра (не прошедших проверку подлинности).

API Индексатора видео Azure позволяют индексировать, извлекать метаданные, управление ресурсами, перевод, внедрение, настройку моделей и многое другое. Дополнительные сведения об использовании API индексатора видео в Azure см. на портале разработчика Индексатора видео Azure.

В настоящее время клиентские пакеты SDK недоступны. Команда индексатора видео Azure работает над пакетами SDK и планирует доставить их в ближайшее время.

Следуйте инструкциям в руководстве по началу работы с API индексатора видео Azure.

API индексатора видео Azure содержит API авторизации и API операций. API авторизации содержит вызовы, которые предоставляет вам маркер доступа. Каждый вызов к API Operations должен быть связан с маркером доступа, соответствующим области авторизации вызова.

Маркеры доступа необходимы для использования API индексатора видео Azure для обеспечения безопасности. Они гарантируют, что все звонки от вас или людей с разрешениями на доступ к вашей учетной записи.

• Уровень учетной записи — маркеры доступа этого уровня позволяют выполнять операции на уровне учетной записи или видео. Например, отправить видео, вывести список всех видео, получить аналитические сведения.
• Уровень пользователя — маркеры доступа этого уровня позволяют выполнять операции на уровне пользователя. Например, получить сведения о соответствующих учетных записях.
• Уровень видео — маркеры доступа этого уровня позволяют выполнять операции с определенным видео. Например, получить аналитические сведения о видео, скачать субтитры, получить мини-приложения и т. д.

Срок действия маркеров доступа истекает каждый час, поэтому создавать маркер необходимо ежечасно.

См. заметку о выпуске для сведений о входе.

После регистрации учетной записи электронной почты с помощью поставщика удостоверений вы не сможете использовать эту учетную запись электронной почты с другим поставщиком удостоверений.

Служба индексатора видео Azure ИИ сохраняет их. Их можно получить с помощью API-интерфейсов получения индекса видео и получения URL-адресов скачивания видео артефактов .

Для вызова API не взимается дополнительная плата от Индексатора видео Azure AI.

Существует ограничение на отправку API в 10 запросов в секунду и до 120 запросов в минуту.

Индексатор видео Azure AI использует простую модель ценообразования по мере использования на основе длительности входных данных содержимого, которые вы индексируют. Другие расходы могут применяться к кодировке, потоковой передаче, хранилищу, использованию сети и зарезервированным единицам мультимедиа. Дополнительные сведения см. в разделе "Цены— Индексатор видео Azure".

Расширение поддерживает только базовый анализ аудио и видео. За индексирование взимается плата за минуту, используя ту же ставку, что и индексирование в облачных регионах Azure. Дополнительные сведения о ценах см. в разделе "Цены— Индексатор видео Azure".

При отправке индексированного видео пользователь определяет индексирование для анализа видео, анализа звука или обоих. Выбор определяет, какие номера SKU будут взиматься. Если во время обработки возникает ошибка критического уровня, код ошибки возвращается в виде ответа. В таких случаях счет не выставляется. Критическая ошибка может быть вызвана ошибкой в нашем коде или критическим сбоем во внутренней зависимости службы. Ошибки, такие как неправильное определение или извлечение аналитических сведений, не считаются критически важными, и возвращается ответ. В любом случае, если возвращается допустимый ответ (код nonerror), выставление счетов происходит.

Да, Индексатор видео Azure AI предлагает пробную учетную запись, которая предоставляет вам 2400 минут бесплатного индексирования. Вы используете время с веб-сайтом Индексатора видео Azure ИИ или API индексатора видео Azure. For more information, see the developer portal.

Отправьте подробное описание запроса в службу поддержки [email protected]клиентов Индексатора видео. Включите следующие сведения: модель ИИ, к которой вы ссылаетесь, результат, на который вы хотите отказаться, причина, по которой мы должны отказаться от результатов, и объяснение вашего запроса.

Обработка запроса может занять несколько недель.