Share via

Сведения о моделях рабочих процессов оркестрации

  • Статья

После завершения обучения модели можно просмотреть сведения о модели и узнать, насколько хорошо она обрабатывает тестовый набор данных. Наблюдение за эффективностью работы модели называется оценкой. Тестовый набор данных состоит из данных, которые не были представлены модели во время процесса обучения.

Примечание

Автоматическое отделение набора для тестирования от данных для обучения может привести к разным результатам оценки модели при каждом обучении новой модели, так как набор для тестирования выбирается из речевых фрагментов случайным образом. Чтобы убедиться, что оценка вычисляется для одного и того же набора для тестирования при каждом обучении модели, обязательно используйте параметр Разделение обучающих и тестовых данных вручную при запуске задания обучения и определите набор для тестирования при добавлении речевых фрагментов.

Предварительные требования

Перед просмотром оценки модели вам потребуется:

Дополнительные сведения см. в статье о жизненном цикле разработки проекта.

Сведения о модели

На странице Просмотр сведений о модели вы сможете просматривать все модели, их текущее состояние обучения и дату последнего обучения.

  1. Перейдите к странице проекта в Language Studio.

  2. В меню слева выберите Производительность модели.

  3. На этой странице можно просмотреть только успешно обученные модели, оценку F1 для каждой модели и дату окончания срока действия модели. Вы можете выбрать имя модели, чтобы получить дополнительные сведения о ее производительности.

  4. Метрики оценки уровня модели можно найти в разделе Обзор, а также метрики оценки уровня намерения. Дополнительные сведения см. в разделе Метрики оценки.

    Снимок экрана: метрики производительности модели в Language Studio

  5. Матрица неточностей модели размещена в разделе Матрица неточностей набора данных для тестирования. Можно увидеть матрицу неточностей для намерений.

    Примечание

    Если вы не видите ни одно из намерений, которые есть в модели, это связано с тем, что их не было ни в одном из речевых фрагментов, которые использовались для тестового набора данных.

Загрузка или экспорт данных модели

Чтобы загрузить данные модели, выполните приведенные далее действия.

  1. Выберите любую модель на странице оценки модели .

  2. Нажмите кнопку Загрузить данные модели .

  3. Убедитесь, что у вас нет несохраненных изменений, которые необходимо записать в появившемся окне, и выберите Загрузить данные.

  4. Дождитесь завершения загрузки данных модели в проект. По завершении вы будете перенаправлены обратно на страницу конструктора схемы .

Экспорт данных модели:

  1. Выберите любую модель на странице оценки модели .

  2. Нажмите кнопку Экспорт данных модели . Дождитесь локального скачивания snapshot JSON модели.

Удаление модели

Чтобы удалить модель в Language Studio, выполните следующие действия:

  1. В меню слева выберите Производительность модели.

  2. Выберите имя модели , которую нужно удалить, и выберите Удалить в верхнем меню.

  3. В появившемся окне нажмите кнопку ОК , чтобы удалить модель.

Дальнейшие действия