Настройка языковой модели с помощью индексатора видео Azure AI

Применяется к: Cloud-based Azure AI Video Indexer

Индексатор видео Azure AI поддерживает автоматическое распознавание речи благодаря интеграции с пользовательской службой речи Майкрософт. Вы можете настроить языковую модель, загрузив текст адаптации. Этот текст взят из области, словарь которой вы хотели бы, чтобы движок адаптировал к нему. После обучения модели подсистема распознает новые слова, отображаемые в тексте адаптации, предполагая произношение по умолчанию, а языковая модель узнает новые вероятные последовательности слов. См. список языков, поддерживаемых Индексатором видео в Azure AI, на поддерживаемых языках.

Например, Kubernetes (в контексте службы Azure Kubernetes) — это слово, которое очень конкретно. Так как это слово является новым для индексатора видео Azure AI, его признают сообществами. Обучите модель распознавать ее как Kubernetes. В других случаях слова существуют, но языковая модель не ожидает, что они появятся в определенном контексте. Например, служба контейнера — это не последовательность из двух слов, которую неспециализированная языковая модель распознала бы как определенный набор слов.

Существует два способа настройки языковой модели:

Вариант 1: Отредактируйте расшифровку, созданную индексатором видео Azure AI. Изменяя и исправляя расшифровку, вы обучаете языковую модель, чтобы обеспечить улучшенные результаты в будущем.
Вариант 2: Загрузите текстовые файлы для обучения языковой модели. Файл может содержать список слов в том виде, в каком вы хотите, чтобы они отображались в расшифровке видео Индексатором Azure AI. Или он может содержать соответствующие слова, которые естественным образом включены в предложения и абзацы. По мере достижения лучших результатов с использованием вышеупомянутого подхода, включите в файл загрузки полные предложения или абзацы, относящиеся к вашему содержимому.

Это важно

Не включайте слова или предложения, которые в настоящее время неправильно транскрибированы (например, сообщества) в файл загрузки, так как это включение сводит на нет предполагаемое влияние. Включайте только те слова, как вы хотите, чтобы они отображались (например, Kubernetes).

Оптимизируйте свою пользовательскую языковую модель

Индексатор видео Azure AI обучается на основе вероятностей словосочетаний, поэтому для наилучшего обучения:

Приведите достаточно реальных примеров предложений в том виде, в каком они были бы произнесены.
Ставьте только одно предложение в строке, не больше. В противном случае система изучает вероятности в предложениях.
Это нормально — поставить одно слово в качестве предложения, чтобы усилить слово по сравнению с другими, но система лучше всего учится на полных предложениях.
При введении новых слов или аббревиатур, если это возможно, приведите как можно больше примеров использования в полном предложении, чтобы дать как можно больше контекста системе.
Попробуйте поставить несколько вариантов адаптации, и посмотрите, как они работают для вас.
Избегайте многократного повторения одного и того же предложения. Это может создать предвзятость по отношению к остальной части входных данных.
Избегайте включения необычных символов (~, # @ % &), потому что они будут отброшены. Предложения, в которых они отображаются, также удаляются.
Избегайте использования входных данных большого объема, таких как сотни тысяч предложений, потому что это разбавляет эффект ускорения.

Предпосылки

Учетная запись Azure.
Учетная запись индексатора видео Azure AI

Веб-портал
API

Создание языковой модели

Перейдите на веб-сайт Azure AI Video Indexer и войдите.
Чтобы настроить модель в учетной записи, в левой части страницы нажмите кнопку Настройка модели содержимого.
Выберите вкладку Язык . Вы увидите список поддерживаемых языков.
Под нужным языком выберите Добавить модель.
Введите имя для языковой модели и нажмите клавишу Enter. На этом шаге создается модель и предоставляется возможность загрузки текстовых файлов в модель.
Чтобы добавить текстовый файл, выберите Добавить файл. Откроется проводник.
Перейдите к текстовому файлу и выберите его. В языковую модель можно добавить несколько текстовых файлов. Вы также можете добавить текстовый файл, нажав кнопку ... в правой части языковой модели и выбрав Добавить файл.
После завершения загрузки текстовых файлов выберите зеленую опцию «Обучение».

Процесс обучения может занять несколько минут. По завершении обучения обученный отображается рядом с моделью. Вы можете просмотреть, скачать и удалить файл из модели.

Использование языковой модели в новом видео

Чтобы использовать языковую модель в новом видео, выполните одно из следующих действий:

Выберите "Отправить" в верхней части страницы.
Перетащите аудио- или видеофайл или найдите нужный файл.
Выберите созданную языковую модель из списка исходных языков видео .
Выберите параметр "Отправить " в нижней части страницы. Новое видео индексируется с помощью языковой модели.

Использование языковой модели для повторной индексации

Войдите на домашнюю страницу Индексатора видео Azure AI .
Нажмите многоточие (...) на видео, а затем выберите «Переиндексировать».
Выберите список исходных языков видео и выберите созданную языковую модель из списка.
Выберите «Переиндексировать», и ваше видео будет повторно индексировано с использованием вашей языковой модели.

Редактирование языковой модели

Вы можете редактировать языковую модель, изменяя ее имя, добавляя в нее файлы и удаляя из нее файлы. При добавлении или удалении файлов из языковой модели необходимо снова обучить модель, выбрав зеленый параметр "Обучение ".

Переименование языковой модели

Вы можете изменить имя языковой модели, щелкнув многоточие (...) в правой части языковой модели и выбрав Переименовать. Введите новое имя.

Добавление файлов

Выберите Добавить файл. Откроется ваш Проводник файлов.
Перейдите к текстовому файлу и выберите его. В языковую модель можно добавить несколько текстовых файлов.

Вы также можете добавить текстовый файл, нажав кнопку с многоточием (...) в правой части языковой модели и выбрав Добавить файл.

Удаление файлов

Это действие полностью удаляет файл из языковой модели.

Нажмите кнопку с многоточием (...) в правой части текстового файла.
Нажмите кнопку "Удалить". Появится новое окно с сообщением о том, что удаление не может быть отменено.
Выберите опцию «Удалить » в новом окне.

Удаление языковой модели

Это действие удаляет языковую модель из учетной записи. Любое видео, использующее удаленную языковую модель, сохраняет тот же индекс, пока не будет переиндексировано видео. Если вы повторно индексируете видео, вы можете назначить ему новую языковую модель. В противном случае индексатор видео Azure AI использует модель по умолчанию для повторной индексации видео.

Нажмите кнопку с многоточием (...) в правой части диалогового окна Языковая модель.
Нажмите кнопку "Удалить". Появится новое окно с сообщением о том, что удаление не может быть отменено.
Выберите опцию «Удалить » в новом окне.

Настройка языковых моделей путем исправления расшифровок

Индексатор видео Azure AI настраивает языковые модели на основе фактических исправлений, которые пользователи вносят в транскрибирование своих видео. Он захватывает все строки, которые вы исправили в транскрипции вашего видео, и добавляет их в текстовый файл с именем From transcript edits. Эти изменения используются для повторного обучения языковой модели, которая использовалась для индексации видео.

Изменения, внесенные в временную шкалу виджета, также включены.

Если при индексировании этого видео не указана языковая модель, индексатор видео Azure AI сохраняет все изменения для этого видео в языковой модели по умолчанию, вызываемой Account adaptations в пределах обнаруженного языка видео.

При внесении нескольких изменений в одну строку индексатор видео Azure использует только последнюю версию исправленной строки для обновления языковой модели.

Замечание

Для настройки используются только текстовые исправления. Исправления, которые не связаны с реальными словами (например, знаки препинания или пробелы), не включаются.

Выберите видео, которое вы хотите редактировать, из своей медиатеки.
Перейдите на вкладку Временная шкала.
Выберите значок карандаша, чтобы отредактировать расшифровку расшифровки.
Исправления в расшифровке отображаются на вкладке Язык на странице Настройка модели содержимого. Чтобы просмотреть файл "Из изменений расшифровки" для каждой из ваших языковых моделей, выберите его, чтобы открыть.

Создание языковой модели

Сделайте запрос API Create Language Model для создания кастомной языковой модели для указанной учетной записи. Файлы для языковой модели можно отправить с помощью этого запроса. Кроме того, вы можете создать языковую модель здесь и загрузить файлы для модели позже, обновив языковую модель.

Файлы необходимо загрузить в тело запроса, используя FormData, а также предоставить значения для обязательных параметров. Для этой задачи можно определить пару ключей двумя способами:

Ключ — это имя файла, а значение — это файл txt.
Ключ — это имя файла, а значение — URL к файлу txt.

Замечание

По-прежнему необходимо обучить модель с включенными файлами, чтобы модель могла узнать содержимое своих файлов.

Пример отклика

{
    "id": "dfae5745-6f1d-4edd-b224-42e1ab57a891",
    "name": "TestModel",
    "language": "En-US",
    "state": "None",
    "languageModelId": "00000000-0000-0000-0000-000000000000",
    "files": [
    {
        "id": "25be7c0e-b6a6-4f48-b981-497e920a0bc9",
        "name": "hellofile",
        "enable": true,
        "creator": "John Doe",
        "creationTime": "2018-04-28T11:55:34.6733333"
    },
    {
        "id": "33025f5b-2354-485e-a50c-4e6b76345ca7",
        "name": "worldfile",
        "enable": true,
        "creator": "John Doe",
        "creationTime": "2018-04-28T11:55:34.86"
    }
    ]
}

Обучение языковой модели

Запрос обучает кастомную языковую модель для указанной учетной записи на основе содержимого загруженных и активированных файлов в языковой модели.

Замечание

Сначала необходимо создать языковую модель и загрузить ее файлы. Вы можете загрузить файлы при создании языковой модели или при обновлении языковой модели.

Пример отклика

{
    "id": "41464adf-e432-42b1-8e09-f52905d7e29d",
    "name": "TestModel",
    "language": "En-US",
    "state": "Waiting",
    "languageModelId": "531e5745-681d-4e1d-b124-12e5ab57a891",
    "files": [
    {
        "id": "84fcf1ac-1952-48f3-b372-18f768eedf83",
        "name": "RenamedFile",
        "enable": false,
        "creator": "John Doe",
        "creationTime": "2018-04-27T20:10:10.5233333"
    },
    {
        "id": "9ac35b4b-1381-49c4-9fe4-8234bfdd0f50",
        "name": "hellofile",
        "enable": true,
        "creator": "John Doe",
        "creationTime": "2018-04-27T20:10:10.68"
    }
    ]
}

Это id уникальный идентификатор, используемый для различения языковых моделей. languageModelId Однако используется для загрузки видео для индексации и переиндексации видеозапросов. Индексатор видео Azure AI ссылается на запросы загрузки и переиндексации как на linguisticModelId.

Удаление языковой модели

Используйте запрос API " Удалить языковую модель " для удаления пользовательской языковой модели из указанной учетной записи. Любое видео, использующее удаленную языковую модель, сохраняет тот же индекс, пока не будет переиндексировано видео. Если вы повторно индексируете видео, вы можете назначить ему новую языковую модель. В противном случае индексатор видео Azure AI использует модель по умолчанию для повторной индексации видео.

Пример отклика

При успешном удалении языковой модели содержимое не возвращается.

Обновление языковой модели

Запрос обновления языковой модели обновляет индивидуальную языковую модель в указанной учетной записи.

Замечание

Убедитесь, что вы создали языковую модель. Используйте этот вызов: включите или отключите все файлы в модели, обновите имя языковой модели и отправьте файлы для добавления в языковую модель.

Чтобы передать файлы для добавления в языковую модель, необходимо загрузить их в теле запроса с помощью FormData. Вы также должны предоставить значения для обязательных параметров, упомянутых ранее. Для выполнения поставленной задачи существует два способа:

Ключ — это имя файла, а значение — это файл txt.
Ключ — это имя файла, а значение — URL к файлу txt.

Пример отклика

{
    "id": "41464adf-e432-42b1-8e09-f52905d7e29d",
    "name": "TestModel",
    "language": "En-US",
    "state": "Waiting",
    "languageModelId": "531e5745-681d-4e1d-b124-12e5ab57a891",
    "files": [
    {
        "id": "84fcf1ac-1952-48f3-b372-18f768eedf83",
        "name": "RenamedFile",
        "enable": true,
        "creator": "John Doe",
        "creationTime": "2018-04-27T20:10:10.5233333"
    },
    {
        "id": "9ac35b4b-1381-49c4-9fe4-8234bfdd0f50",
        "name": "hellofile",
        "enable": true,
        "creator": "John Doe",
        "creationTime": "2018-04-27T20:10:10.68"
    }
    ]
}

Чтобы загрузить содержимое файла, используйте id файл, возвращенный в ответе.

Обновление файла из языковой модели

Запрос на обновление файла языковой модели обновляет имя и enable статус файла в пользовательской языковой модели в указанной учетной записи.

Пример отклика

{
  "id": "84fcf1ac-1952-48f3-b372-18f768eedf83",
  "name": "RenamedFile",
  "enable": false,
  "creator": "John Doe",
  "creationTime": "2018-04-27T20:10:10.5233333"
}

Чтобы загрузить содержимое файла, используйте id файл, возвращенный в ответе.

Получение определенной языковой модели

Отправьте API-запрос Get Language Model для получения информации о указанной языковой модели в указанной учетной записи, например, языке и файлах, которые входят в языковую модель.

Пример отклика

{
    "id": "dfae5745-6f1d-4edd-b224-42e1ab57a891",
    "name": "TestModel",
    "language": "En-US",
    "state": "None",
    "languageModelId": "00000000-0000-0000-0000-000000000000",
    "files": [
    {
        "id": "25be7c0e-b6a6-4f48-b981-497e920a0bc9",
        "name": "hellofile",
        "enable": true,
        "creator": "John Doe",
        "creationTime": "2018-04-28T11:55:34.6733333"
    },
    {
        "id": "33025f5b-2354-485e-a50c-4e6b76345ca7",
        "name": "worldfile",
        "enable": true,
        "creator": "John Doe",
        "creationTime": "2018-04-28T11:55:34.86"
    }
    ]
}

Чтобы загрузить содержимое файла, используйте id файл, возвращенный в ответе.

Получите все языковые модели

Используйте запрос API получения языковых моделей для возврата всех пользовательских моделей языка ИИ Azure в указанной учетной записи в списке.

Пример отклика

[
    {
        "id": "dfae5745-6f1d-4edd-b224-42e1ab57a891",
        "name": "TestModel",
        "language": "En-US",
        "state": "None",
        "languageModelId": "00000000-0000-0000-0000-000000000000",
        "files": [
        {
            "id": "25be7c0e-b6a6-4f48-b981-497e920a0bc9",
            "name": "hellofile",
            "enable": true,
            "creator": "John Doe",
            "creationTime": "2018-04-28T11:55:34.6733333"
        },
        {
            "id": "33025f5b-2354-485e-a50c-4e6b76345ca7",
            "name": "worldfile",
            "enable": true,
            "creator": "John Doe",
            "creationTime": "2018-04-28T11:55:34.86"
        }
        ]
    },
    {
        "id": "dfae5745-6f1d-4edd-b224-42e1ab57a892",
        "name": "AnotherTestModel",
        "language": "En-US",
        "state": "None",
        "languageModelId": "00000000-0000-0000-0000-000000000001",
        "files": []
    }
]

Удаление файла из языковой модели

Запрос на удаление файла языковой модели удаляет указанный файл из указанной модели языка ИИ Azure в указанной учетной записи.

Пример отклика

При успешном удалении файла из языковой модели содержимое не возвращается.

Получение метаданных в файле из модели языка ИИ Azure

Запрос на получение данных файлов языковой модели искусственного интеллекта Azure возвращает содержимое и метаданные указанного файла из выбранной модели языка искусственного интеллекта Azure в вашей учетной записи.

Пример отклика

{
    "content": "hello\r\nworld",
    "id": "84fcf1ac-1952-48f3-b372-18f768eedf83",
    "name": "Hello",
    "enable": true,
    "creator": "John Doe",
    "creationTime": "2018-04-27T20:10:10.5233333"
}

Замечание

Содержимое этого примера файла представляет собой слова "hello" и "world" в двух отдельных строках.

Скачивание файла из модели языка ИИ Azure

Запрос на скачивание файлов языковой модели искусственного интеллекта Azure скачивает текстовый файл, содержащий содержимое указанного файла из указанной модели языка ИИ Azure в указанной учетной записи. Этот текстовый файл соответствует содержимому отправленного текстового файла.

Пример отклика

Ответом является загрузка текстового файла с содержимым файла в формате JSON.

Обратная связь

Были ли сведения на этой странице полезными?

Last updated on 2025-10-06

Поделиться через

Настройка языковой модели с помощью индексатора видео Azure AI

Оптимизируйте свою пользовательскую языковую модель

Предпосылки

Создание языковой модели

Использование языковой модели в новом видео

Использование языковой модели для повторной индексации

Редактирование языковой модели

Переименование языковой модели

Добавление файлов

Удаление файлов

Удаление языковой модели

Настройка языковых моделей путем исправления расшифровок

Обратная связь

Дополнительные ресурсы