Использование системы показателей ответственного ИИ (предварительная версия) в Машинном обучении Azure
ПРИМЕНИМО К:
Расширение машинного обучения Azure CLI версии 2 (в настоящее время)Пакет SDK для Python azure-ai-ml версии 2 (текущая версия)
Системы показателей ответственного применения ИИ в Машинном обучении Azure — это отчет в формате PDF, созданный на основе аналитических сведений и настроек панели мониторинга ответственного применения ИИ для сопровождения ваших моделей машинного обучения. Вы можете легко настроить, скачать и опубликовать систему показателей PDF для заинтересованных лиц, как занимающихся технической реализацией задач, так и не имеющих к ней отношения, чтобы рассказать им о данных, работоспособности вашей модели и соответствии требованиям, а также сформировать доверительные отношения. Эту систему показателей также можно использовать в проверках аудита для информирования заинтересованных лиц о характеристиках модели.
Важно!
Эта функция сейчас доступна в виде общедоступной предварительной версии. Эта предварительная версия предоставляется без соглашения об уровне обслуживания. Ее не следует использовать для производственных рабочих нагрузок. Некоторые функции могут не поддерживаться или их возможности могут быть ограничены.
Дополнительные сведения см. в статье Дополнительные условия использования предварительных выпусков Microsoft Azure.
Где найти систему показателей ответственного применения ИИ
Системы показателей ответственного применения ИИ связаны с панелями мониторинга ответственного применения ИИ. Чтобы просмотреть систему показателей ответственного применения ИИ, перейдите в реестр моделей, выбрав модель в Студия машинного обучения Azure. Затем выберите зарегистрированную модель, для которую вы создали панель мониторинга ответственного использования ИИ и систему показателей. Выбрав модель, перейдите на вкладку Ответственный ИИ , чтобы просмотреть список созданных панелей мониторинга. Выберите панель мониторинга, для которой нужно экспортировать PDF-файл системы показателей ответственного применения ИИ, выбрав Ответственное Аналитика ИИ а затем **Просмотреть все системы показателей PDF.
Выберите Ответственный системы показателей ИИ (предварительная версия), чтобы отобразить список всех систем показателей ответственного ИИ, созданных для этой панели мониторинга.
В списке выберите систему показателей, которую вы хотите скачать, и нажмите кнопку Скачать, чтобы скачать PDF-файл на компьютер.
Как интерпретировать систему показателей ответственного применения ИИ
Система показателей ответственного применения ИИ — это сводка в формате PDF по ключевым аналитическим сведениям с панели мониторинга ответственного применения ИИ. Первый сегмент сводки системы показателей содержит общие сведения о модели машинного обучения и ключевых целевых значениях, которые вы установили, чтобы всем заинтересованным лицам было проще определить, готова ли ваша модель к развертыванию.
Сегмент анализа данных показывает характеристики данных, так как любая история модели является неполной без правильного понимания данных:
В сегменте производительности модели отображаются наиболее важные метрики и характеристики прогнозов, а также сведения об их соответствии требуемым целевым значениям.
Затем также можно просмотреть наиболее и наименее производительные когорты и подгруппы данных, которые автоматически извлекаются, чтобы вы могли определить недочеты своей модели.
Вы увидите наиболее важные факторы, которые влияют на прогнозы модели. Информирование о них — обязательное требование для создания отношений доверия касательно того, как модель выполняет свою задачу.
Вы можете дополнительно просмотреть сводку аналитических сведений о справедливости модели и проверить, насколько ваша модель соответствует целевым значениям справедливости, установленным для нужных конфиденциальных групп.
Наконец, вы можете просмотреть сводные аналитические сведения о причинно-следственных связях для набора данных. Это позволит определить, оказывают ли выявленные факторы и методы какое-либо причинно-следственное воздействие на реальный результат.
Дальнейшие действия
- Инструкции по созданию панели мониторинга ответственного применения ИИ с помощью интерфейса командной строки версии 2 и пакета SDK версии 2 или пользовательского интерфейса Студии машинного обучения Azure.
- Ознакомьтесь с дополнительными сведениями о концепциях и методах, на основе которых работает панель мониторинга ответственного применения ИИ.
- Просмотрите примеры блокнотов YAML и Python для создания панели мониторинга "Ответственное применение ИИ" с помощью YAML или Python.
- Дополнительные сведения об использовании панели мониторинга и системы показателей ответственного применения ИИ для отладки данных и моделей и принятия более обоснованных решений см. в этой записи блога Tech Community.
- Чтобы узнать об использовании панели мониторинга и системы показателей ответственного применения ИИ Национальной службой здравоохранения (NHS) Великобритании, ознакомьтесь с реальной историей клиента.
- Ознакомьтесь с возможностями панели мониторинга ответственного применения ИИ, просмотрев эту интерактивную веб-демонстрацию лаборатории ИИ.