Обзор мониторинга агента

Вкладка Мониторинг в новом интерфейсе агента позволяет отслеживать производительность и активность вашего агента после его развертывания. С ее помощью вы можете отслеживать разговоры, анализировать статистику, находить ошибки и видеть, как пользователи работают с агентом.

Note

Функции этой статьи работают на GitHub Copilot, который использует Copilot Credits для выставления счетов на основе использования. Узнайте больше в разделе «Обзор выставления счетов для агентов, работающих на GitHub Copilot».

Биллинг на основе использования применяется к использованию, созданию, тестированию и оценке агентов. Эти действия могут потреблять кредиты Copilot. Узнайте больше в разделе Управление затратами для агентов на базе GitHub Copilot.

Note

Вкладка «Монитор» недоступна, пока вы не опубликуете своего агента. Чтобы сделать ее доступной, выберите Опубликовать.

Что можно отслеживать?

Вкладка «Монитор» показывает общий обзор работы вашего агента. К ключевым метрикам относятся:

  • Сессии беседы: общее количество разговоров, которые ведёт ваш агент.
  • Вовлеченность пользователей: насколько активно пользователи взаимодействуют с агентом, включая количество сообщений и продолжительность сеанса.
  • Отслеживание затрат и выставления счетов: потребление кредитов Copilot за выбранный период и оценки сбережений.
  • Общее количество реакций: Ответы пользователей, включая обратную связь с одобрением и минусом, а также комментарии к конкретным реакциям агентов.
  • Качество отклика: показатели эффективности агента на запросы пользователей со временем.

Фильтруйте дашборд по временным диапазонам, чтобы сосредоточиться на недавней активности или долгосрочных тенденциях.

Сводка

В разделе Сводка приведена сгенерированная Copilot сводка ИИ по ключевой аналитике о вашем агенте. Выберите «Посмотреть больше », чтобы увидеть полный список сводных инсайтов.

Это помогает быстро выявить общие темы, ключевые метрики и области для улучшения в выбранном отчетном периоде. Инсайты могут включать метрики вовлечённости, настроения и отзывы клиентов, а также тенденции с предыдущего отчетного периода.

Затраты и выставление счетов

Показатели стоимости и выставления счетов показывают количество кредитов Copilot, выставленных за выбранный период, и дают оценки экономии по времени и затратам.

Узнайте больше в разделе Тарифы и управление биллингом.

Реакции

Раздел «Реакции» показывает отзывы пользователей о ответах агентов. Диаграмма учитывает, как часто пользователи выбирают «положительный» или «вниз» (отрицательный) при каждом ответе, который они получают от вашего агента.

Возможности агента

Раздел «Возможности» помогает понять, как пользователи взаимодействуют с вашим агентом и где можно повысить надёжность ответов. Сюда входят:

  • Использование инструментов: Какие инструменты агент вызывал во время сессии.

Отслеживание сеансов

В списке сеансов представлены отдельные сеансы разговоров с вашим агентом. Каждый сеанс включает в себя:

  • Статус: Завершена ли сессия, не прошла или находится в процессе.
  • Длительность: сколько длился сеанс.
  • Сообщения пользователя: количество сообщений, которыми обменялись.
  • Использованные инструменты: какие инструменты вызывал агент во время сеанса.

Фильтруйте сессии по статусу, например, неудачи, завершены или находятся в процессе, чтобы быстро найти сессии, требующие внимания.

Выберите сеанс, чтобы просмотреть его полную расшифровку, включая сообщения пользователя, ответы агента, а также подробные сведения о вызовах инструментов и использовании источников знаний.

Мониторинг ошибок

Вкладка «Монитор» помогает выявлять и диагностировать проблемы:

  • Фильтруйте сеансы по статусу С ошибкой или Отклонен, чтобы найти проблемные взаимодействия.
  • Просматривайте расшифровки сеансов, чтобы понять, что пошло не так.
  • Проверяйте статус подключения к инструментам и ошибки аутентификации.
  • Ищите закономерности в неудачных сессиях, которые могут указывать на проблему настройки.

Пошаговое руководство по использованию вкладки «Отслеживание» см. в статье Мониторинг агента.

Загрузка расшифровок разговоров

Вы можете скачать расшифровки разговоров через несколько минут после завершения разговора. Можно скачать расшифровки за любой период в пределах последних 29 дней. Вы можете скачать их в Dataverse с помощью портала Power Apps и как расшифровки сеансов чата с помощью приложения Copilot Studio. Может пройти до часа после окончания аналитической сессии, прежде чем соответствующие данные появятся на вкладке Монитор.

Note

Скачать расшифровки разговоров в Dataverse через приложение Copilot Studio в Teams нельзя. Для просмотра и экспорта расшифровок в Dataverse необходимо зарегистрироваться в веб-приложении Copilot Studio. Вы можете загрузить расшифровки сеансов чата с помощью приложения Copilot Studio. Дополнительную информацию см. в разделе Загрузка расшифровок сеансов агента.

  • Last updated on