Обзор мониторинга агента

Вкладка «Монитор» в опыте нового агента даёт вам видимость эффективности и активности вашего агента после развертывания. Используйте его для отслеживания сессий разговоров, анализа аналитики, выявления ошибок и понимания того, как пользователи взаимодействуют с вашим агентом.

Note

Функции этой статьи работают на GitHub Copilot, который использует Copilot Credits для выставления счетов на основе использования. Узнайте больше о кредитах Copilot в разделе Обзор выставления счетов для агентов, основанных на упряжке GitHub Copilot.

Биллинг на основе использования применяется к использованию, созданию, тестированию и оценке агентов. Эти действия могут потреблять кредиты Copilot.

Note

Вкладка «Монитор» недоступна, пока вы не опубликуете своего агента. Чтобы сделать его доступным, выберите «Опубликовать».

Что можно отслеживать?

Вкладка «Монитор» показывает общий обзор работы вашего агента. К ключевым метрикам относятся:

  • Сессии беседы: общее количество разговоров, которые ведёт ваш агент.
  • Вовлечение пользователей: Насколько активно пользователи взаимодействуют с агентом, включая количество сообщений и продолжительность сессии.
  • Отслеживание затрат и выставления счетов: потребление кредитов Copilot за выбранный период и оценки сбережений.
  • Общее количество реакций: Ответы пользователей, включая обратную связь с одобрением и минусом, а также комментарии к конкретным реакциям агентов.
  • Качество отклика: показатели эффективности агента на запросы пользователей со временем.

Фильтруйте дашборд по временным диапазонам, чтобы сосредоточиться на недавней активности или долгосрочных тенденциях.

Сводка

В разделе Сводка приведена сгенерированная Copilot сводка ИИ по ключевой аналитике о вашем агенте. Выберите «Посмотреть больше », чтобы увидеть полный список сводных инсайтов.

Это помогает быстро выявить общие темы, ключевые метрики и области для улучшения в выбранном отчетном периоде. Инсайты могут включать метрики вовлечённости, настроения и отзывы клиентов, а также тенденции с предыдущего отчетного периода.

Затраты и выставление счетов

Показатели стоимости и выставления счетов показывают количество кредитов Copilot, выставленных за выбранный период, и дают оценки экономии по времени и затратам.

Узнайте больше в разделе Тарифы и управление биллингом.

Реакции

Раздел «Реакции» показывает отзывы пользователей о ответах агентов. Диаграмма учитывает, как часто пользователи выбирают «положительный» или «вниз» (отрицательный) при каждом ответе, который они получают от вашего агента.

Возможности агента

Раздел «Возможности» помогает понять, как пользователи взаимодействуют с вашим агентом и где можно повысить надёжность ответов. Сюда входят:

  • Использование инструментов: Какие инструменты агент вызывал во время сессии.

Отслеживание сеансов

Список сессий показывает индивидуальные сессии разговоров с вашим агентом. Каждая сессия включает в себя:

  • Статус: Завершена ли сессия, не прошла или находится в процессе.
  • Продолжительность: Сколько длилась сессия.
  • Пользовательские сообщения: количество обменянных сообщений.
  • Используемые инструменты: Какие инструменты агент вызывал во время сессии.

Фильтруйте сессии по статусу, например, неудачи, завершены или находятся в процессе, чтобы быстро найти сессии, требующие внимания.

Выберите сессию, чтобы просмотреть полную расшифровку, включая сообщения пользователя, ответы агента и детали о вызовах инструментов и использовании источников знаний.

Мониторинг ошибок

Вкладка «Монитор» помогает выявлять и диагностировать проблемы:

  • Фильтруйте сессии по статусу «Неудачно » или «Отклонено », чтобы найти проблемные взаимодействия.
  • Прочитайте стенограммы сессий, чтобы понять, что пошло не так.
  • Проверьте статус подключения инструмента и ошибки аутентификации.
  • Ищите закономерности в неудачных сессиях, которые могут указывать на проблему настройки.

Для пошаговых рекомендаций по использованию вкладки «Монитор» см. раздел «Монитор агента».

Загрузка расшифровок разговоров

Вы можете скачать расшифровки разговоров через несколько минут после завершения разговора. Можно скачать расшифровки за любой период в пределах последних 29 дней. Вы можете скачать их в Dataverse с помощью портала Power Apps и как расшифровки сеансов чата с помощью приложения Copilot Studio. Может пройти до часа после окончания аналитической сессии, прежде чем соответствующие данные появятся на вкладке Монитор.

Note

Скачать расшифровки разговоров в Dataverse через приложение Copilot Studio в Teams нельзя. Для просмотра и экспорта расшифровок в Dataverse необходимо зарегистрироваться в веб-приложении Copilot Studio. Вы можете загрузить расшифровки сеансов чата с помощью приложения Copilot Studio. Дополнительную информацию см. в разделе Загрузка расшифровок сеансов агента.

  • Last updated on