Тестирование агента

Используйте вкладку предпросмотра в агентах, основанных на GitHub Copilot в Microsoft Copilot Studio, чтобы интерактивно протестировать агента перед публикацией. Интерактивное тестирование позволяет проверить ответы вашего агента, оценить точность источников знаний и убедиться, что инструменты и навыки работают правильно.

Note

Функции этой статьи работают на GitHub Copilot, который использует Copilot Credits для выставления счетов на основе использования. Узнайте больше о кредитах Copilot в разделе Обзор выставления счетов для агентов, основанных на упряжке GitHub Copilot.

Биллинг на основе использования применяется к использованию, созданию, тестированию и оценке агентов. Эти действия могут потреблять кредиты Copilot.

Необходимые условия

  • Агент, созданный с помощью жгута GitHub Copilot
  • Базовые (как минимум) инструкции, настроенные для агента

Начало тестового разговора

  1. Откройте агент в Copilot Studio.

  2. Выберите вкладку Предпросмотр.

  3. Введите сообщение в поле ввода чата в нижней части панели предпросмотра и нажмите ВВОД или выберите кнопку "Отправить".

  4. Просмотрите ответ агента. Агент обрабатывает ваше сообщение, используя свои инструкции, источники знаний и доступные инструменты.

  5. Продолжайте разговор, чтобы протестировать многоходовые взаимодействия.

Tip

Используйте предлагаемые запросы, которые появляются в панели предварительного просмотра, чтобы быстро протестировать распространенные сценарии. Эти запросы сформированы на основе фраз для начала разговора, заданных в параметрах вашего агента.

Тестирование конкретных возможностей

Тестирование ответов на основе знаний

  1. Задайте агенту вопрос, на который он должен ответить, используя один из своих источников знаний.

  2. Проверьте ответ на точность и полноту.

  3. С помощью переключателяПредварительная версия для конечного пользователя переключайтесь между представлением предпросмотра с точки зрения создателя и с точки зрения конечного пользователя.

  4. Проверьте корректность ссылок и указания источников.

Вызовы средства тестирования

  1. Попросите агента выполнить задачу, требующую использования инструмента (например, поиск данных или выполнение действия).

  2. Проверьте ответ, чтобы убедиться, что инструмент был вызван правильно.

  3. В трассировке активности проверьте узел выполнения инструмента, чтобы увидеть, какой инструмент был вызван и какой результат он вернул.

Редактируйте своего агента во время тестирования

Вам не нужно останавливать разговор во вкладке Preview , чтобы сменить агента. Когда вы редактируете своего агента во вкладке «Строительство » во время активного разговора:

  • Ход продолжается с использованием предыдущей конфигурации агента до завершения.
  • Следующий ход автоматически забирает ваши изменения. Тебе не нужно начинать новый разговор.
  • На следующем ходу структурные изменения, такие как добавление нового инструмента, изменение модели или включение памяти, применяются аналогично.

Используйте этот шаблон для быстрой итерации: отправьте сообщение, просмотрите ответ, внесите небольшое изменение во вкладку «Сборка », отправьте последующее сообщение и сравните. Если изменение перестаёт действовать через пару ходов, начните новый разговор, чтобы убедиться, что тестируете против нового состояния.

Включение режима отладки

Чтобы увидеть подробную информацию о том, как агент обрабатывает каждое сообщение:

  1. На вкладке Предпросмотр выключите Предварительная версия для конечного пользователя, чтобы перейти в представление для создателя.

  2. В сообщениях чата появляется карточка рассуждений, на которой показаны шаги хода мыслей агента при каждом взаимодействии. В представлении для создателя карточка рассуждений по умолчанию разворачивается.

  3. Выберите карточку рассуждений в сообщении чата, чтобы развернуть или свернуть подробности хода мыслей для этого ответа.

Отправка отзывов об ответах

  1. Под любым ответом агента выберите значок "палец вверх" или "палец вниз", чтобы открыть всплывающее окно отзыва.

  2. Введите письменный комментарий о проблеме или положительном поведении.

  3. Отправьте отзыв. Используйте эту обратную связь для отслеживания закономерностей качества по мере доработки вашего агента.

Начало нового разговора

Чтобы сбросить контекст разговора и начать заново:

  1. Выберите Новый чат в заголовке предпросмотра.

  2. Текущий разговор сохраняется в истории ваших чатов.

  3. Новый разговор начинается без предварительного контекста.

  • Last updated on