Überwachen Sie einen Agentenüberblick

Der Reiter "Überwachen " in der neuen Agentenerfahrung gibt Ihnen Einblick in die Leistung und Aktivitäten Ihres Agenten nach der Bereitstellung. Nutzen Sie es, um Gesprächssitzungen zu verfolgen, Analysen zu überprüfen, Fehler zu erkennen und zu verstehen, wie Nutzer mit Ihrem Agenten interagieren.

Note

Die Funktionen in diesem Artikel werden vom GitHub Copilot-Harness unterstützt, das Copilot Credits für nutzungsbasierte Abrechnung verwendet. Erfahren Sie mehr über Copilot-Credits in Überblick über die Abrechnung von Agenten, die vom GitHub Copilot-Harness betrieben werden.

Nutzungsbasierte Abrechnung gilt für die Nutzung, den Bau, das Testen und die Bewertung von Agenten. Diese Aktionen könnten Copilot-Credits verbrauchen.

Note

Der Reiter Monitor ist erst verfügbar, wenn du deinen Agenten veröffentlicht hast. Um es verfügbar zu machen, wählen Sie Veröffentlichen.

Was können Sie überwachen?

Der Monitor bietet einen Überblick über die Leistung Ihres Agenten. Zielmetriken umfassen:

  • Gesprächssitzungen: Die Gesamtzahl der Gespräche, die Ihr Makler führt.
  • Nutzerbeteiligung: Wie aktiv Nutzer mit dem Agenten interagieren, einschließlich Nachrichtenanzahl und Sitzungsdauer.
  • Kosten- und Abrechnungsverfolgung: Copilot-Kreditverbrauch im ausgewählten Zeitraum und Sparkostenschätzungen.
  • Gesamtreaktionen: Nutzerantworten, einschließlich Daumen hoch und Daumen runter sowie Kommentare zu bestimmten Agentenantworten.
  • Antwortqualität: Indikatoren dafür, wie effektiv der Agent im Laufe der Zeit auf Nutzeranfragen reagiert.

Filtern Sie das Dashboard nach Zeitspanne, um sich auf aktuelle Aktivitäten oder langfristige Trends zu konzentrieren.

Zusammenfassung

Der Zusammenfassungsbereich verwendet Copilot, um eine KI-Zusammenfassung der wichtigsten Analyseeinblicke über Ihren Agenten zu generieren. Wählen Sie Mehr anzeigen , um die vollständige Liste der zusammengefassten Einblicke zu sehen.

Es hilft Ihnen, schnell gemeinsame Themen, Schlüsselkennzahlen und Verbesserungsbereiche für den ausgewählten Berichtszeitraum zu identifizieren. Insights können Engagement-Kennzahlen, Kundenzufriedenheit und Feedback sowie Trends seit dem vorherigen Berichtszeitraum umfassen.

Kosten und Abrechnung

Die Kosten- und Abrechnungskennzahlen zeigen die Anzahl der für den ausgewählten Zeitraum berechneten Copilot-Credits und liefern Einsparungen für Zeit und Kosten.

Erfahren Sie mehr unter Abrechnungsgebühren und -verwaltung.

Reaktionen

Der Abschnitt Reaktionen zeigt Nutzerfeedback zu den Antworten der Agenten. Das Diagramm zählt, wie oft Nutzer bei jeder Antwort von Ihrem Agenten Daumen hoch (positiv) oder Daumen unten (negativ) auswählen.

Agentenfähigkeiten

Der Abschnitt Capabilities hilft Ihnen zu verstehen, wie Nutzer mit Ihrem Agenten interagieren und wo sich die Zuverlässigkeit der Antworten verbessern kann. Sie hat folgenden Inhalt:

  • Tool-Nutzung: Welche Tools der Agent während der Sitzung aufgerufen hat.

Sitzungsnachverfolgung

Die Sitzungsliste zeigt einzelne Gesprächssitzungen mit Ihrem Agenten. Jede Sitzung umfasst:

  • Status: Ob die Sitzung abgeschlossen, fehlgeschlagen oder im Gange ist.
  • Dauer: Wie lange die Sitzung dauerte.
  • Benutzernachrichten: Die Anzahl der ausgetauschten Nachrichten.
  • Verwendete Tools: Welche Tools der Agent während der Sitzung aufgerufen hat.

Filtern Sie Sitzungen nach Status, wie gescheitert, abgeschlossen oder laufend, um schnell Sitzungen zu finden, die Aufmerksamkeit benötigen.

Wählen Sie eine Sitzung aus, um ihr vollständiges Transkript einzusehen, einschließlich der Nachrichten des Nutzers, der Antworten des Agenten und Details zu Tool-Aufrufen und Nutzung von Wissensquellen.

Fehlerüberwachung

Der Monitor hilft Ihnen, Probleme zu identifizieren und zu diagnostizieren:

  • Filtern Sie Sitzungen nach Status "Fehlgeschlagen " oder "Abgelehnt ", um problematische Interaktionen zu finden.
  • Überprüfen Sie die Sitzungsprotokolle, um zu verstehen, was schiefgelaufen ist.
  • Überprüfen Sie den Verbindungsstatus des Werkzeugs und Authentifizierungsfehler.
  • Achte auf Muster in fehlgeschlagenen Sitzungen, die auf ein Konfigurationsproblem hinweisen könnten.

Für eine Schritt-für-Schritt-Anleitung zur Nutzung des Reiters Monitor siehe Monitor an Agent.

Unterhaltungs-Transkription herunterladen

Sie können Gesprächstranskripte ein paar Minuten nach Ablauf des Gesprächs herunterladen. Sie können jeden Zeitraum innerhalb der letzten 29 Tage herunterladen. Sie können sie in Dataverse mithilfe des Power Apps Portals und als Session-Chattranskripte mithilfe der Copilot Studio-App herunterladen. Es kann bis zu eine Stunde nach Ende der Analysesitzung dauern, bis die zugehörigen Daten im Monitor-Tab erscheinen.

Note

In der Copilot Studio-App in Teams können Unterhaltungstranskripte in Dataverse nicht heruntergeladen werden. Um Transkriptionen in Dataverse zu überprüfen und zu exportieren, müssen Sie sich für die Copilot Studio Web App registrieren. Sie können Sitzungschattranskripte mithilfe der Copilot Studio-App herunterladen. Weitere Informationen finden Sie unter Agent-Sitzungs-Transkription herunterladen.

  • Last updated on