Overvåg agentens præstation i Copilot Studio

Note

Denne artikel beskriver funktioner, der anvendes i agenter eller agentstrømme, drevet af standardledningsnettet.

Brug analyser til at forstå, hvor godt din agent klarer sig, og til at identificere områder, der kan forbedres.

Monitor-siden i Copilot Studio opsummerer nøglemålinger og giver brugsanalyser for din agents komponenter. Åbn individuelle metrikker for at udforske de underliggende data.

Monitor-oplevelsen er skræddersyet til samtaleagenter og autonome agenter.

Overvågning er tilgængelig i alle geografiske områder. Monitordata er tilgængelige i op til 360 dage. Sessionsdetaljer og transskriptionsoplysninger er tilgængelige for de sidste 28 dage. Tids- og datostempler i analyse er i Koordineret Universal Tid (UTC). Tids- og datostemplerne inkluderer start- og sluttidspunkter for dagen, sessionstider og eventuelle andre tidsmarkører i din agents data.

Note

Monitor-siden viser ikke analyser for aktivitet, du gennemfører, når du tester din agent i Copilot Studio ved at bruge testpanelet.

Tildel begrænset visningsadgang til analyse

Hvis du er agentens ejer, del agenten med Analytics Viewer delingsrollen for kun at give adgang til dens Monitor-side . For at få adgang til oplysninger om samtaletransskriptioner skal personen også have rollen som Bot Transcript Viewer .

Få mere at vide i Del en agents analysedata.

Vigtigt!

Som agentejer kan du kun dele rollen Analytics-fremviser med enkeltpersoner og ikke med grupper af brugere.

For at få adgang til din agents Monitor-side :

  1. Åbn din agent i Copilot Studio.
  2. Vælg Monitor i øverste menulinje.

Resumé

Området Oversigt bruger Copilot til at generere en AI-oversigt over nøgleanalyseindsigt om din agent. Vælg Vis mere for at se den fulde opsummerede liste over indsigter.

Skærmbillede af Monitor-siden i Copilot Studio, der viser det udvidede Resumékort.

Det hjælper dig med hurtigt at forstå almindelige temaer og målepunkter og identificere områder, der kan forbedres for din agent, ved at opsummere dem på en punktopstilling for den valgte rapporteringsperiode. Denne liste kan inkludere engagementmålinger, kundesentiment og feedback samt tendenser siden sidste rapporteringsperiode.

Kundekommentarresumé (forhåndsvisning)

[Denne sektion er dokumentation til en foreløbig version og er med forbehold for ændringer.]

Oversigt over kundekommentarer hjælper dig med at forstå den overordnede kundestemning om agenten ud fra feedback og kommentarer. Indsigt prioriteres på baggrund af både mængden af relaterede kommentarer og deres overordnede betydning. Resuméet filtrerer kommentarer af lav værdi eller irrelevante kommentarer fra og samler relateret feedback sammen.

Vigtigt!

Denne artikel indeholder dokumentation til prøveversionen af Microsoft Copilot Studio. Der kan forekomme ændringer.

Prøveversionsfunktioner er ikke beregnet til produktionsbrug og kan have begrænset funktionalitet. Disse funktioner er tilgængelige før en officiel udgivelse, så du kan få tidlig adgang og give feedback.

Hvis du skal bygge en produktionsklar agent, kan du se Oversigt over Microsoft Copilot Studio.

For at give feedback til Microsoft om denne sektion, vælg Tommel op eller Tommel ned. Brug panelet Indsend feedback til Microsoft for at tilføje en kommentar og vælge, om du vil dele relaterede filer.

  1. I panelet Send feedback til Microsoft skal du beskrive med et naturligt sprog, hvad du kan lide eller ikke kan lide, afhængigt af hvilket ikon du valgte til at åbne panelet.
  2. Vælg om du vil dele prompt, genereret svar, relevante indholdsprøver og ekstra logfiler.
  3. Vælg Send.

Oversigt

Tjek et overordnet præstationsresumé i området Oversigt, og undersøg derefter de enkelte målinger mere i detaljer.

Aktive brugere

Aktive brugermetrikker viser ibrugtagning af en samtaleagent og hvordan den ændrer sig over tid. En aktiv bruger er en entydig bruger, der har interageret med samtaleagenten mindst én gang i rapportens periode. Monitor-siden viser daglige aktive brugere (DAU) og månedlige aktive brugere (MAU). Den daglige optælling dækker en fuld 24-timers dag i UTC. Den månedlige optælling følger kalendermåneden i UTC.

Vigtigt!

Funktionen Active user metrics understøttes kun, hvis du angiver din agent til at kræve godkendelse under Indstillinger>Sikkerhedsgodkendelse>.

Skærmbillede af Oversigtssektionen på fanen Monitor, med Gennemsnitlig DAU i boksen og viser udvælgelsen af detaljeret panel med aktive brugere.

Den gennemsnitlige DAU for den valgte periode plus dens procentvise ændring fra den forrige periode vises som en KPI (Key Performance Indicator) i afsnittet Oversigt .

Note

Formlen for den gennemsnitlige BEREGNEDE DAU-metrikværdi er: (sum of all full-day active user counts in the period) / (count of full days in the period).

Hvis du vil se flere oplysninger om antallet af aktive brugere dagligt og månedligt, efterhånden som de tendenser over tid, skal du vælge knappen Se aktive brugere i øverste højre hjørne af oversigtspanelet.

Kun samtalesessioner

Analytics for samtaleagenter i Copilot Studio spor brugerengagement med din agent, og prøv at registrere, hvor godt din agent håndterer brugeropgaver.

Samtaleanalyse bruger følgende begreber og udtryk:

  • Samtaler er en løbende interaktion mellem en specifik bruger eller gruppe brugere på en kanal og din agent.

  • Samtaler kan sættes på pause og genoptages senere eller overføres til en kundeservicemedarbejder. Samtalen kan være envejs, enten fra kunden til agenten eller fra agenten til kunden, men det er oftere en frem og tilbage interaktion mellem kunden og agenten.

  • En samtale får timeout efter 30 minutters inaktivitet.

  • For agenter, der er publiceret på Telephony-kanalen, går samtalerne ud 3 minutter efter en Slut Samtale-begivenhed .

  • En enkelt samtale kan indeholde en eller flere analysesessioner.

  • En analysesession drevet af Standard-harnesset er knyttet til det sidste tilpassede topic, som en bruger har udløst. Hvis sessionen ikke indeholder brugerdefinerede emner, er det det sidste systememne, der udløses direkte af brugeren.

Kun sessioner med hændelsesudløser

En autonom agent er en agent med en hændelsesudløser. Disse agenter understøtter kun analyser for agenter med udløsere.

En analysesession for agenter med udløsere spores fra, hvornår en agent modtager nyttedata fra en udløser, til alle handlinger, som agenten kører som svar. Disse analysesessioner registrerer, hvad din helpdesk-medarbejder reagerer på, og hvor godt din helpdesk-medarbejder klarer sig.

Note

Hvis en udløser mislykkes, og helpdesk-medarbejderen ikke modtager udløsernyttedata, kan en analysesession ikke starte. Analytics sporer kun succesfuldt udløste kørsler.

Hybridvisning – både samtale- og hændelsesudløste sessioner

Når din agents data inkluderer sessioner for mindst én samtale og mindst én triggerbaseret kørsel i rapportens periode, viser Monitor-siden en hybridvisning af relevante målinger for både samtale- og autonome sessioner. I dette billede viser sektionerne Oversigt og Effektivitet målinger side om side for både samtale- og hændelsesudløste sessioner. I afsnittet Brug kan du vælge mellem Samtaler eller Kørsler, som kun viser relevante data. Hvis du vælger Alle , vises alle brugsrelaterede data. I afsnittet Tilfredshed vises tilfredshedsmålepunkter for samtalesessioner.

Lær mere i:

Hent afskrifter af samtaler

Du kan downloade sessionstransskriptioner i Copilot Studio for perioder inden for de sidste 28 dage. Det kan tage op til en time efter en analysesession slutter, før de relaterede data vises på analysedashboardet. Lær mere om tilgængelighed, tilladelser og downloadtrin i Download samtaletransskriptioner i Copilot Studio.

Dataverse-transskriptopbevaring er adskilt fra 28-dages session-data-vinduet i Copilot Studio. Lær mere i Download samtaletransskriptioner i Power Apps.

Emneanvendelsesanalyse

I Copilot Studio definerer et emne, hvordan en agentsamtale skrider frem og repræsenterer en del af en samtale mellem en bruger og en agent. Emneovervågningspanelet viser, hvordan et individuelt emne præsterer, herunder hvor ofte det udløses, hvordan sessioner, der inkluderer det, løses, og hvor tilfredse brugerne er med disse sessioner. Brug disse indsigter til at identificere emner, der ofte eskalerer eller forlades, og prioriter dem derefter til forbedring. Få mere at vide under Opret og rediger emner.

Note

Topic Monitor er kun tilgængelig for agenter drevet af Standard-harnesset og for emner relateret til en session. Hvis din agent bruger generativ orkestrering, så brug samtaleresultater og temaer på Monitor-siden i stedet.

Sådan viser du panelet Monitor:

  1. Gå til din agents Emner-side i Copilot Studio.

  2. Vælg det emne, du vil analysere. Hvis der ikke er nogen tilgængelige emner, skal du se Opret og rediger emner.

  3. I øverste højre hjørne af Emner-siden skal du vælge Mere (...) >Monitor.

Skærmbillede af et emnes Mere-menu med indstillingen Overvåg markeret.

Emnepanelet Monitor viser:

  • Emneresultater: Et diagram over sessionsresultater, Escalated, Resolvedog Abandonedfor sessioner, hvor dette emne blev udløst. Brug dette diagram til hurtigt at vurdere emnets tilstand. En stor del af Escalated eller Abandoned resultater kan betyde, at emnet skal forbedres.
  • Samlet emneanvendelse: Et diagram over tendensen for emneresultater over tid. Brug dette til at registrere regressioner, f.eks. en stigning i afbrudte sessioner, efter at et emne blev redigeret, eller til at bekræfte, at de seneste ændringer forbedrede opløsningshastigheder.
  • Kundetilfredshedsscore: En score, der er baseret på svar fra brugerundersøgelser fra sessioner, der er knyttet til dette emne.
  • Tendens for tilfredshedsscore: Et diagram, der viser, hvordan tilfredshedsscoren ændres over tid. Brug denne trend til at identificere perioder, hvor brugernes holdning blev mere negativ eller mere positiv.

For at ændre tidsintervallet, vælg tidsinterval-dropdownmenuen øverst i emnepanelet Monitor.

Mål investeringsafkastet (ROI) og forretningsværdien af AI-agenter