Oversikt over analyse

Bruk analyse til å forstå ytelsen til agenten, og til å identifisere områder for forbedring.

Siden Analytics i Copilot Studio viser deg omfattende data for agenten din, fra en oversikt over viktige måledata til grundig bruksanalyse for agentens komponenter. Du kan drille ned i hver datadel for å få flere detaljer.

Analyseopplevelsen er skreddersydd for samtaleagenter og autonome agenter.

Analyse er tilgjengelig i alle geografiske områder. Analysedata er tilgjengelige i opptil 180 dager. Øktdetaljer og transkripsjonsinformasjon er tilgjengelig for de siste 28 dagene. Tids- og datostempler i analyse er i koordinert universell tid (UTC). Tids- og datostemplene inkluderer start- og slutttider for dag, sessionstider og eventuelle andre tidsmarkører i agentens data.

Merknad

Analysesiden viser ikke analyser for aktivitet du fullfører når du tester agenten din i Copilot Studio ved hjelp av testpanelet.

Gi begrenset visningstilgang til analyse

Hvis du er agenteieren og bare ønsker å gi tilgang til Analyse-siden til agenten din, kan du gjøre dette ved å dele agenten med delingsrollen for Analysevisning aktivert. Hvis du vil at personen du deler agenten med, skal ha tilgang til informasjon fra samtaleavskriften, må de også ha sikkerhetsrollen Bot Transcript Viewer .

Finn ut mer om deling av analyser fra en agent.

Viktig

Som agenteier kan du bare dele analysevisningsrollen med enkeltpersoner og ikke med grupper av brukere.

Slik får du tilgang til Analyse-siden til agenten din:

  1. Åpne agenten i Copilot Studio.
  2. Velg Analyse på den øverste menylinjen.

Sammendrag

Sammendrag-området bruker Copilot til å generere et AI-sammendrag av viktige analyseinnsikter om agenten din. Velg Vis mer for å se den fullstendige sammendragslisten over innsikter.

Skjermbilde av Analyse-siden i Copilot Studio, som viser Sammendragskortets Vis mer-knapp.

Skjermbilde av Analyse-siden i Copilot Studio, som viser det utvidede sammendragskortet.

Det hjelper deg raskt å forstå vanlige temaer og måledata og identifisere forbedringsområder for agenten ved å oppsummere dem i en punktliste for den valgte rapporteringsperioden. Dette kan omfatte måledata for engasjement, kundesentiment og tilbakemeldinger og trender siden forrige rapporteringsperiode.

Sammendraget for kundekommentarer (forhåndsvisning) hjelper deg med å forstå kundesentiment på høyt nivå om agenten, for eksempel tilbakemeldinger og kommentarer. Innsikt prioriteres basert på både volumet av relaterte kommentarer og deres generelle betydning. Lavverdi eller irrelevante kommentarer filtreres ut, og relaterte tilbakemeldinger grupperes sammen.

Du kan gi tilbakemelding til Microsoft om denne delen med Tommel opp- og Tommel ned-ikonene . Bruk Send tilbakemelding til Microsoft-panelet til å legge til en kommentar og dele relaterte filer. Ved å gi beskrivende tilbakemeldinger som dette, kan vi samarbeide for å kontinuerlig forbedre produktet vårt.

  1. Send tilbakemelding til Microsoft-panelet beskriver du på naturlig språk hva du liker eller ikke liker, avhengig av hvilket ikon du valgte for å åpne panelet.
  2. Velg om du vil dele instruksjon, generert svar, relevante innholdseksempler og flere loggfiler.
  3. Velg Send.

Du kan også kontrollere et høyt nivå av ytelsessammendrag i oversiktsområdet , og deretter gå dypere ned i ytelsen.

Skjermbilde av Analyse-siden i Copilot Studio, som viser diagrammer og detaljer.

Aktive brukere

Aktive brukermetrikk gir innsikt i i hvilken grad en samtaleagent blir tatt i bruk og hvordan denne trenden over tid. En aktiv bruker er en unik bruker som samhandlet med samtaleagenten minst én gang i løpet av rapportens periode. Copilot Studio Analytics viser aktive brukerantall for to forhåndsdefinerte tidsperioder: daglige aktive brukere (DAU) og månedlige aktive brukere (MAU). Det daglige antallet starter og slutter i henhold til en hel 24-timers dag i UTC-tidssonen. Det månedlige antallet følger kalendermåneden, som også starter og slutter på de første og siste dagene i henhold til UTC-tidssonen.

Viktig

Funksjonen for aktive brukermetrikk støttes bare hvis du angir at agenten skal kreve godkjenning under Sikkerhetsgodkjenning for innstillinger>>.

Skjermbilde av Oversikt-delen på Analyse-fanen, der gjennomsnittlig DAU er bokset og viser utvalget av detaljerte Aktive brukere-panelet.

Gjennomsnittlig DAU for den valgte perioden, pluss prosentvis endring fra forrige periode, vises som en KPI (key performance indicator) i delen Oversikt .

Merknad

Formelen for den gjennomsnittlige BEREGNEDE DAU-måleverdien er: (sum of all full-day active user counts in the period) / (count of full days in the period).

Hvis du vil se flere detaljer om daglige og månedlige aktive brukerantall etter hvert som de trendover tid, velger du Se aktive brukere-knappen øverst til høyre i oversiktspanelet.

Bare samtaleøkter

Analytics for conversational agents i Copilot Studio sporer brukerengasjement med agenten din og prøver å fange opp hvor godt agenten din håndterer brukeroppgaver.

Samtaleanalyse bruker følgende konsepter og begreper:

  • Samtaler er en pågående interaksjon mellom en spesifikk bruker, eller gruppe brukere, på en kanal og agenten din.

  • Samtaler kan stanse midlertidig og fortsette senere, eller overføres til en kundeservicerepresentant. Samtalen kan være enveiskjørt, enten fra kunden til agenten, eller fra agenten til kunden, men det er oftere en frem-og-tilbake-interaksjon mellom kunden og agenten.

  • En samtale blir tidsavbrutt etter 30 minutter med inaktivitet.

  • Samtaler for agenter publisert på Telephony-kanalen går ut 3 minutter etter en "Avslutt samtale-hendelse".

  • Én enkelt samtale kan inneholde en eller flere analyseøkter.

  • En analyseøkt i klassisk modus er knyttet til det siste egendefinerte emnet som ble utløst av en bruker. Hvis sesjonen ikke inkluderer egendefinerte emner, er det det siste systemtemaet som utløses direkte av brukeren.

Kun hendelsesutløsersesjoner

En selvstendig agent er en agent med en hendelsesutløser. Disse agentene støtter bare analyse for agenter med utløsere.

En analyseøkt for agenter med utløsere sporer fra når en agent mottar en nyttelast fra en utløser, til alle handlinger agenten kjører som svar. Disse analyseøktene registrerer hva agenten svarer på, og hvor godt agenten presterer.

Merknad

Hvis en utløser mislykkes og agenten ikke mottar en utløsernyttelast, kan ikke en analyseøkt starte. Analyse sporer bare vellykkede utløste kjøringer.

Hybridvisning – både samtale- og hendelsesutløste økter

Når agentens data inkluderer økter for minst én samtale og minst én triggerbasert gjennomgang i rapportperioden, viser Analytics-siden en hybridvisning av relevante måleparametere for både samtalebaserte og autonome økter. I dette bildet viser seksjonene Oversikt og Effektivitet måleparametere side om side for både samtale- og hendelsesutløste økter. Bruk-delen lar deg velge mellom samtaler eller kjøringer, som bare viser relevante data. Hvis du velger Alle , vises alle bruksrelaterte data. Tilfredshet-delen viser metrikk for tilfredshet for samtaleøkter.

Hvis du vil ha mer informasjon om:

Last ned samtaleutskrifter

Du kan laste ned samtaletranskripsjoner noen minutter etter at samtalen har gått ut. Du kan laste ned hvilken som helst tidsperiode innen de siste 29 dagene. Du kan laste dem ned i Dataverse ved hjelp av Power Apps-portalen og som session chat-utskrifter ved hjelp av Copilot Studio-appen. Det kan ta opptil en time etter at den analytiske økten er avsluttet før de relaterte dataene vises på instrumentbordet for analyse.

Merknad

Du kan ikke laste ned samtaleavskrifter i Dataverse i Copilot Studio-appen i Teams. Hvis du vil se gjennom og eksportere utskrifter i Dataverse, må du registrere deg for Copilot Studio-nettappen. Du kan laste ned utskrifter av øktchat ved hjelp av Copilot Studio-appen. Hvis du vil ha mer informasjon, kan du se Last ned agentøktutskrifter.

Analyse av emnebruk

I Copilot Studio definerer et emne hvordan en agentsamtale utvikler seg og representerer en del av en samtale mellom en bruker og en agent. Emneanalyseruten viser hvordan et individuelt emne utføres, inkludert hvor ofte det utløses, hvordan økter som inkluderer det, løses, og hvor fornøyde brukere er med disse øktene. Du kan bruke denne innsikten til å identifisere emner som ofte eskalerer eller blir forlatt, og deretter prioriterer du dem for forbedring. Hvis du vil lære mer om emner og hvordan du oppretter dem, kan du se Opprette og redigere emner.

Merknad

Emneanalyse er bare tilgjengelig for agenter i klassisk modus og for emner som er knyttet til en analyseøkt. Hvis agenten din bruker generativ orkestrering , kan du bruke samtaleresultater og temaerAnalyse-siden i stedet.

Slik viser du panelet for emneanalyse:

  1. Gå til agentens emneside i Copilot Studio.

  2. Velg emnet du vil analysere. Hvis ingen emner er tilgjengelige, kan du se Opprette og redigere emner.

  3. Velg Mer (...) > øverst til høyre på Emner-sidenAnalyse.

Skjermbilde som viser Mer-menyen for et emne, med Analyse-alternativet uthevet.

Emneanalysepanelet viser:

  • Emneresultater: Et diagram med øktresultater, Escalated, Resolvedog Abandoned, for økter der dette emnet ble utløst. Bruk dette diagrammet til raskt å vurdere emnetilstand. En høy andel av Escalated eller Abandoned resultater kan bety at emnet må forbedres.
  • Total emnebruk: Et diagram over emneresultattrenden over tid. Bruk denne til å oppdage regresjoner, for eksempel en topp i forlatte økter etter at et emne ble redigert, eller for å bekrefte at nylige endringer forbedret oppløsningshastigheten.
  • Kundetilfredshetspoengsum: En poengsum basert på svar på brukerundersøkelser fra økter som er knyttet til dette emnet.
  • Trend for tilfredshetspoengsum: Et diagram som viser hvordan tilfredshetspoengsummen endres over tid. Bruk denne trenden til å identifisere perioder der brukernes sentiment gikk ned eller ble bedre.

Hvis du vil endre tidsintervallet, velger du rullegardinlisten for tidsintervall øverst i emneanalysepanelet.