Использование системы показателей ответственного ИИ (предварительная версия) в Машинное обучение Azure

ОБЛАСТЬ ПРИМЕНЕНИЯ:Расширение машинного обучения Azure CLI версии 2 (current)Python SDK azure-ai-ml версии 2 (current)

Системы показателей ответственного применения ИИ в Машинном обучении Azure — это отчет в формате PDF, созданный на основе аналитических сведений и настроек панели мониторинга ответственного применения ИИ для сопровождения ваших моделей машинного обучения. Вы можете легко настроить, скачать и опубликовать систему показателей PDF для заинтересованных лиц, как занимающихся технической реализацией задач, так и не имеющих к ней отношения, чтобы рассказать им о данных, работоспособности вашей модели и соответствии требованиям, а также сформировать доверительные отношения. Эту систему показателей также можно использовать в проверках аудита для информирования заинтересованных лиц о характеристиках модели.

Где найти систему показателей ответственного ИИ

Системы показателей ответственного применения ИИ связаны с панелями мониторинга ответственного применения ИИ. Чтобы просмотреть систему показателей ответственного ИИ, перейдите в реестр моделей, выбрав модель в Студия машинного обучения Azure. Затем выберите зарегистрированную модель, для которую вы создали панель мониторинга ответственного искусственного интеллекта и систему показателей. Выбрав модель, перейдите на вкладку "Ответственный ИИ" , чтобы просмотреть список созданных панелей мониторинга. Выберите панель мониторинга, для которой нужно экспортировать PDF-файл системы показателей ответственного ИИ, выбрав "Ответственный Аналитика ИИ", а затем **Просмотреть все системы показателей PDF.

1. Выберите Ответственный системы показателей ИИ (предварительная версия), чтобы отобразить список всех систем показателей ответственного ИИ, созданных для этой панели мониторинга.

   

2. В списке выберите систему показателей, которую вы хотите скачать, и нажмите кнопку Скачать, чтобы скачать PDF-файл на компьютер.

   

Как интерпретировать систему показателей ответственного применения ИИ

Система показателей ответственного применения ИИ — это сводка в формате PDF по ключевым аналитическим сведениям с панели мониторинга ответственного применения ИИ. Первый сегмент сводки системы показателей содержит общие сведения о модели машинного обучения и ключевых целевых значениях, которые вы установили, чтобы всем заинтересованным лицам было проще определить, готова ли ваша модель к развертыванию.

Сегмент анализа данных показывает характеристики данных, так как любая история модели является неполной без правильного понимания данных:

В сегменте производительности модели отображаются наиболее важные метрики и характеристики прогнозов, а также сведения об их соответствии требуемым целевым значениям.

Затем также можно просмотреть наиболее и наименее производительные когорты и подгруппы данных, которые автоматически извлекаются, чтобы вы могли определить недочеты своей модели.

Вы увидите наиболее важные факторы, которые влияют на прогнозы модели. Информирование о них — обязательное требование для создания отношений доверия касательно того, как модель выполняет свою задачу.

Вы можете дополнительно просмотреть сводку аналитических сведений о справедливости модели и проверить, насколько ваша модель соответствует целевым значениям справедливости, установленным для нужных конфиденциальных групп.

Наконец, вы можете просмотреть сводные аналитические сведения о причинно-следственных связях для набора данных. Это позволит определить, оказывают ли выявленные факторы и методы какое-либо причинно-следственное воздействие на реальный результат.

Следующие шаги

• Инструкции по созданию панели мониторинга ответственного применения ИИ с помощью интерфейса командной строки версии 2 и пакета SDK версии 2 или пользовательского интерфейса Студии машинного обучения Azure.
• Ознакомьтесь с дополнительными сведениями о концепциях и методах, на основе которых работает панель мониторинга ответственного применения ИИ.
• Просмотрите примеры блокнотов YAML и Python для создания панели мониторинга "Ответственное применение ИИ" с помощью YAML или Python.
• Дополнительные сведения об использовании панели мониторинга и системы показателей ответственного применения ИИ для отладки данных и моделей и принятия более обоснованных решений см. в этой записи блога Tech Community.
• Чтобы узнать об использовании панели мониторинга и системы показателей ответственного применения ИИ Национальной службой здравоохранения (NHS) Великобритании, ознакомьтесь с реальной историей клиента.
• Ознакомьтесь с возможностями панели мониторинга ответственного применения ИИ, просмотрев эту интерактивную веб-демонстрацию лаборатории ИИ.