Создание разговорного тестового набора

Note

Функции, описанные в этой статье, питаются стандартным жгутом, который использует опции выставления счетов, описанные в разделе «Лицензирование для агентов, работающих на стандартном жгуте». Узнайте, как получить доступ к стандартным функциям в стандартных агентах и потоках агентов доступа.

Оценка диалоговых взаимодействий позволяет оценить общее поведение вашего агента в ходе продолжительного общения. Она отражает, как реальные пользователи взаимодействуют с агентами, где каждый ответ зависит от предыдущего контекста в ходе текущего разговора. Вы можете использовать эти оценки, чтобы определить, способен ли агент удерживать контекст, запрашивать разъяснения и успешно выполнять задачи, состоящие из нескольких этапов.

Вы также можете проводить оценки с одним ответом, которые полезны, когда вы хотите протестировать ваш агент на то, как он отвечает на конкретные вопросы, какие функции он использует и на точные формулировки, которые он применяет в своих ответах.

Для оценки используются тестовые наборы. Тестовый набор для разговорных оценок включает группу размером до 20 тестовых случаев. Когда вы запускаете оценку агента, вы выбираете тестовый набор, и Copilot Studio запускает все тестовые случаи из этого набора для вашего агента.

Вы можете создавать тестовые случаи внутри тестового набора, импортируя их из электронной таблицы или используя ИИ для генерации сообщений на основе структуры и ресурсов вашего агента. Затем вы можете выбрать способ оценки качества ответов вашего агента для каждого тестового случая внутри тестового набора.

Подробнее об оценке агента см. в разделе Оценка агента.

Чтобы узнать, как изменить параметры тестового набора, см. Изменение параметров тестового набора.

Important

Результаты теста доступны в Copilot Studio в течение 89 дней. Чтобы сохранить результаты тестирования для длительного хранения, экспортируйте результаты в файл CSV.