Oversigt over agentens præstation (GitHub Copilot)

Fanen Monitor giver udviklere et kontekstnært overblik over en agents tilstand i produktion. Brug det til at forstå brug, resultater, brugerfeedback, pålidelighed og Copilot-kreditforbrug, så du kan identificere tendenser og beslutte, hvor du skal forbedre agenten.

Notat

Rammeværket, der bruges til at bygge denne agent, bruger brugsbaseret fakturering. Brug, opbygning, testning og evaluering af agenter kan forbruge Copilot Credits. Læs mere i Oversigt over forbrugsbaseret fakturering.

Notat

Du kan åbne fanen Monitor, før du udgiver din agent. Produktionsbrug, feedback og kreditdata vises, efter du har offentliggjort agenten, og folk begynder at bruge den.

Hvad kan du overvåge?

Monitor giver et oversigtsniveau af en individuel agent. Det omfatter:

  • Oversigt: Samlede sessioner, brugere, autonome gennemløb, gennemsnitlig varighed, succesrate og fejlprocent.
  • Reaktioner: Tommelfingre op og tommelfingre ned feedback på agentens svar.
  • Samlede estimerede anvendte kreditter: De kreditter, agenten har brugt i den valgte periode.
  • Sessioner: Individuelle interaktioner, hvor de fandt sted, og de credits de brugte.

Brug datofilteret til at fokusere på en specifik rapporteringsperiode. Procentvise indikatorer sammenligner hver måling med den foregående periode.

Overvågning og agentdrift

Monitor er designet til skabere, der har brug for et hurtigt overblik over en individuel agent, mens de bygger og forbedrer den. Til overvågning, styring, detaljeret undersøgelse og operationel optimering på tværs af agenter og miljøer bør du bruge agentens driftserfaring.

Oversigtsmålinger

Oversigtsafsnittet viser:

  • Samlede sessioner: Antallet af samtalesessioner i den valgte periode.
  • Samlede brugere: Antallet af brugere, der interagerede med agenten i den valgte periode.
  • Gennemsnitlig varighed: Den gennemsnitlige varighed af sessioner og løb.
  • Succesrate: Hvor succesfuldt agenten gennemførte sessioner og runs.

Samlede anslåede anvendte kreditter

Kreditkortet viser det samlede antal Copilot-kreditter, agenten har brugt i den valgte periode, samt ændringen fra den foregående periode. I modsætning til de næsten realtidsestimater, du ser i Forhåndsvisning og Evaluer, afspejler værdien i Monitor alle hændelser, der er behandlet indtil da, og er det endelige, sandhedskilde-tal, der bruges til fakturering.

Når en opdeling er tilgængelig, viser den en estimeret fordeling af forbrug efter erfaring, inklusive produktionsforbrug, forhåndsvisningstest, evalueringer og andre understøttede overflader. Brug den til at forstå, hvilke aktiviteter eller resultater der har brugt kreditterne.

Lær mere i Forstå estimeret kreditforbrug og Oversigt over forbrugsbaseret fakturering.

Reaktioner

Afsnittet Reaktioner viser brugerfeedback på agentens svar. Diagrammet tæller, hvor ofte brugere vælger tommelfinger op (positiv) eller tommelfinger ned (negativ) på hvert svar, de modtager fra din agent.

Agentfunktioner

Afsnittet om evner hjælper dig med at forstå, hvordan brugerne interagerer med din agent, og hvor svarets pålidelighed kan forbedres. Det omfatter:

  • Værktøjsbrug: Hvilke værktøjer agenten aktiverede under sessionen.

Sporing af sessioner

Sessionlisten viser individuelle samtalesessioner med din agent. Hver session inkluderer:

  • Status: Om sessionen er afsluttet, mislykket eller i gang.
  • Varighed: Hvor længe sessionen varede.
  • Brugerbeskeder: Antallet af udvekslede beskeder.
  • Anvendte værktøjer: Hvilke værktøjer agenten aktiverede under sessionen.

Filtrer sessioner efter status, såsom mislykket, fuldført eller igangværende, for hurtigt at finde sessioner, der kræver opmærksomhed.

Vælg en session for at se dens fulde transskription, inklusive brugerens beskeder, agentens svar og detaljer om værktøjskald og brug af videnskilder.

Fejlovervågning

Fanen Monitor hjælper dig med at identificere og diagnosticere problemer:

  • Filtrer sessioner efter Status som Mislykket eller Afvist for at finde problematiske interaktioner.
  • Gennemgå sessionsudskrifter for at forstå, hvad der gik galt.
  • Tjek forbindelsesstatus og autentificeringsfejl.
  • Se efter mønstre i mislykkede sessioner, der kan indikere et konfigurationsproblem.

For trin-for-trin vejledning til brug af fanen Monitor , se Monitor en agent.

Download sessionsudskrifter

Du kan downloade sessionstransskriptioner få minutter efter sessionens timeout. Du kan downloade enhver tidsperiode inden for de sidste 29 dage. Du kan downloade dem i Dataverse ved hjælp af Power Apps-portalen og som session chatudskrifter ved hjælp af Copilot Studio-appen. Det kan tage op til en time efter den analytiske session slutter, før de relaterede data vises på fanen Monitor.

Gennemgangssessioner

Sessionslisten viser nylige interaktioner med din agent.

Notat

Sessionslisten viser kun sessioner fra de seneste 28 dage.

Afhængigt af interaktionen kan listen vise:

  • Navn: Brugeren tilknyttet interaktionen.
  • Dato: Hvornår interaktionen fandt sted.
  • Kanal: Kanalen eller Copilot Studio-overfladen, hvor interaktionen fandt sted.
  • Antal beskeder: Antallet af beskeder i interaktionen.
  • Varighed: Varigheden af interaktionen.
  • Brugte credits: De Copilot-credits, der forbruges af interaktionen.

Åbn sessionsdetaljesiden for at gennemgå aggregerede sessionsmålinger, filtrere listen, søge efter sessioner og downloade sessionsdata.

For andre eksportmuligheder for transkripter, lær mere i Download agent-sessionstranskripter.

For trin-for-trin vejledning, lær mere i Monitor and analyze agentens præstation.