Предварительный просмотр и тестирование агента

Вкладка Preview в агентах, основанная на GitHub Copilot в Microsoft Copilot Studio, предоставляет интерактивную среду тестирования, где вы можете общаться с агентом, отладивать его поведение и просматривать историю переписок — всё это до публикации.

Note

Функции этой статьи работают на GitHub Copilot, который использует Copilot Credits для выставления счетов на основе использования. Узнайте больше о кредитах Copilot в разделе Обзор выставления счетов для агентов, основанных на упряжке GitHub Copilot.

Биллинг на основе использования применяется к использованию, созданию, тестированию и оценке агентов. Эти действия могут потреблять кредиты Copilot.

Что можно делать на вкладке "Предпросмотр"

Вкладка Предпросмотр предоставляет полный набор инструментов для тестирования и отладки:

  • Интерактивный чат: отправляйте сообщения своему агенту и просматривайте его ответы в реальном времени. Чат имитирует взаимодействие пользователей с вашим агентом после публикации.
  • Предложения запросов: в предпросмотре отображаются стартовые фразы из конфигурации вашего агента, чтобы вы могли быстро протестировать типовые сценарии.
  • Трассировка активности: просмотрите подробную цепочку рассуждений (CoT), показывающую, как ваш агент обработал каждое сообщение, включая использованные источники знаний, вызванные инструменты и выполненные шаги рассуждения.
  • История разговоров: просмотрите прошлые тестовые диалоги с вашим агентом.
  • Оценка ответа: оценивайте ответы агента с помощью значков "палец вверх" или "палец вниз" и оставляйте письменные отзывы для отслеживания проблем с качеством.

Варианты компоновки вкладки "Предпросмотр"

Вкладка "Предпросмотр" поддерживает различные варианты представления, чтобы соответствовать вашему рабочему процессу:

  • Представление создателя: основная компоновка, которая по умолчанию включает карточку рассуждений в чате, позволяя видеть ход рассуждений агента во время тестирования.
  • Предварительная версия для конечного пользователя: включите режим Предварительная версия для конечного пользователя, чтобы увидеть агента так, как его видят конечные пользователи, без информации для отладки.

Вы можете переключаться между представлениями с помощью переключателя Предварительная версия для конечного пользователя в заголовке предпросмотра.

Когда использовать предпросмотр, а когда оценку

Сценарий Использовать предпросмотр Использовать оценку
Быстрое, интерактивное тестирование во время разработки ✓
Отладка конкретного ответа или вызова инструмента ✓
Итерация над инструкциями или знаниями ✓
Измерение качества по многим тестовым сценариям ✓
Повторяемое, автоматизированное тестирование перед публикацией ✓
Сравнение результатов по версиям агента ✓

Оба подхода дополняют друг друга. Используйте предпросмотр для исследования и уточнения, затем используйте оценку для масштабной валидации.

Ключевые особенности

Возможности чата

При тестировании на вкладке Предпросмотр просмотр вы можете:

  • Отправлять текстовые сообщения и вести многоэтапные беседы
  • Просматривать ответы агента, отрисованные с форматированием
  • Копировать ответы агента для проверки или документирования
  • Оценивать ответы с помощью значков "палец вверх" или "палец вниз"
  • Предоставлять подробные отзывы через всплывающее окно, включая письменные комментарии
  • Начинать новый разговор с чистым контекстом

Трассировка активности

Трассировка активности показывает, как ваш агент обработал каждое сообщение:

  • Шаги цепочки рассуждений: просмотрите узлы рассуждения, которым следовал ваш агент
  • Атрибуция источников знаний: просмотрите, к каким источникам знаний обращался агент и какие цитаты он использовал
  • Выполнение инструментов: просмотрите, когда были вызваны инструменты, соединители, потоки или навыки и какие результаты они вернули
  • Сведения об ошибках: выявите и устраните ошибки, возникшие при обработке

Выберите любой источник или инструмент в трассировке, чтобы напрямую перейти к соответствующему компоненту на вкладке Разработка и отредактировать его.

Подробнее см. в разделе Использование трассировки активности для отладки агента.

История беседы

Вкладка Предпросмотр сохраняет историю ваших тестовых разговоров. Можно сделать следующее:

  • Просмотреть прошлые разговоры и их результаты
  • Фильтровать разговоры по статусу ("Все"," Ошибка", "В процессе", "Завершено", "Требуется авторизация" или "Требуется ввод")
  • Просмотреть расшифровку предыдущего разговора и шаги рассуждения для проверки поведения агента
  • Просмотреть подробные метрики для каждого сеанса, включая шаги/ходы, длительность, последний шаг и модель, обработавшую запрос

Подробнее см. в разделе Управление разговорами в предпросмотре.

  • Last updated on