Overzicht van bewaking

Opmerking

De functies in dit artikel worden aangedreven door de standaard kabelboom, die gebruikmaakt van de factureringsopties zoals beschreven in Licensing voor agenten die door de standaardkabelboom worden aangestuurd. Lees hoe je toegang krijgt tot standaardfuncties in Standaardagenten en agentstromen openen.

Gebruik analyses om inzicht te krijgen in de prestaties van uw agent en om verbeterpunten te identificeren.

De Monitor-pagina in Copilot Studio toont je uitgebreide gegevens voor je makelaar, van een overzicht van belangrijke statistieken tot diepgaande gebruiksanalyses voor de componenten van je agent. U kunt dieper ingaan op de gegevens om meer details te krijgen.

De Monitor-ervaring is afgestemd op conversatieagenten en autonome agenten.

Monitoring is beschikbaar in alle geografische gebieden. Monitorgegevens zijn beschikbaar tot 360 dagen. Sessiegegevens en transcriptiegegevens zijn beschikbaar voor de afgelopen 28 dagen. Datum- en tijdstempels bij analyses zijn in de Gecoördineerde Universal Tijd (UTC). De tijd- en datumstempels bevatten de begin- en eindtijden van de dag, sessietijden en andere tijdsaanduidingen in de gegevens van uw agent.

Opmerking

De Monitor-pagina toont geen analyses voor activiteit die je voltooit wanneer je je agent test in Copilot Studio via het testpaneel.

Beperkte toegang voor alleen-weergave tot analyses verlenen

Als je de eigenaar van de agent bent en alleen toegang wilt verlenen tot de pagina Monitor van je agent, kun je dat doen door je agent te delen met de deelrol Analytics Viewer ingeschakeld. Als u wilt dat de persoon met wie u de agent deelt toegang heeft tot informatie uit het transcript van het gesprek, moet die persoon ook de beveiligingsrol Bot Transcript Viewer hebben.

Meer informatie over het delen van de analyse van een agent.

Belangrijk

Als agenteigenaar kunt u alleen de rol analyseviewer delen met personen en niet met groepen gebruikers.

Om toegang te krijgen tot de Monitor-pagina van uw makelaar:

1. Open uw agent in Copilot Studio.
2. Selecteer Monitor in de bovenste menubalk.

Overzicht

Het gebied Samenvatting gebruikt Copilot om een AI-samenvatting te genereren van belangrijke analyse-inzichten over uw agent. Selecteer Meer weergeven om de volledige samengevatte lijst met inzichten weer te geven.

Het helpt u snel algemene thema's en metrische gegevens te begrijpen en gebieden voor verbetering voor uw agent te identificeren door deze samen te vatten in een lijst met opsommingstekens voor de geselecteerde rapportageperiode. Dit kan bestaan uit metrische gegevens over betrokkenheid, sentiment en feedback van klanten en trends sinds de laatste rapportageperiode.

De samenvatting van opmerkingen van klanten (preview) helpt u inzicht te hebben in het gevoel van klanten over de agent, zoals feedback en opmerkingen. Inzichten krijgen prioriteit op basis van zowel het volume van gerelateerde opmerkingen als hun algehele betekenis. Lage waarde of irrelevante opmerkingen worden gefilterd en gerelateerde feedback worden gegroepeerd.

U kunt Microsoft feedback geven over deze sectie met de pictogrammen Duim omhoog en Duim omlaag. Gebruik het deelvenster Feedback verzenden naar Microsoft om een opmerking toe te voegen en gerelateerde bestanden te delen. Door beschrijvende feedback te geven, kunnen we samenwerken om ons product continu te verbeteren.

1. Beschrijf in het deelvenster Feedback verzenden naar Microsoft uw voorkeuren of afkeuren in natuurlijke taal, afhankelijk van het pictogram dat u hebt geselecteerd om het deelvenster te openen.
2. Kies of u prompts, gegenereerde reacties, voorbeelden van relevante inhoud en aanvullende logboekbestanden wilt delen.
3. Klik op Verzenden.

U kunt ook een overzicht van de prestaties op hoog niveau controleren in het gebied Overzicht en vervolgens dieper ingaan op de prestaties.

Actieve gebruikers

Metrische gegevens van actieve gebruikers bieden inzicht in de mate waarin een gespreksagent wordt gebruikt en hoe deze trends in de loop van de tijd worden toegepast. Een actieve gebruiker is een unieke gebruiker die ten minste één keer interactie heeft gehad met de gespreksagent tijdens de periode van het rapport. Het tabblad Monitor toont het aantal actieve gebruikers voor twee vooraf gedefinieerde tijdsperioden: dagelijks actieve gebruikers (DAU) en maandelijks actieve gebruikers (MAU). Het dagelijkse aantal begint en eindigt volgens een volledige dag van 24 uur in de UTC-tijdzone. Het maandelijkse aantal volgt de kalendermaand, ook beginnend en eindigend op de eerste en laatste dagen volgens de UTC-tijdzone.

Belangrijk

De functie voor metrische gegevens van actieve gebruikers wordt alleen ondersteund als u uw agent instelt op verificatie onder>>.

Het gemiddelde DAU voor de geselecteerde periode, plus de procentwijziging van de vorige periode, wordt weergegeven als een KPI (Key Performance Indicator) in de sectie Overzicht .

Opmerking

De formule voor de berekende gemiddelde metrische gegevens van DAU is: (sum of all full-day active user counts in the period) / (count of full days in the period).

Als u meer details wilt zien over de aantallen dagelijks en maandelijks actieve gebruikers en hoe deze zich in de loop van de tijd ontwikkelen, selecteert u de knop Actieve gebruikers bekijken rechtsboven in het overzichtspaneel.

Alleen gesprekssessies

Analytics voor gespreksagenten in Copilot Studio volgt de betrokkenheid van gebruikers met uw agent en legt vast hoe effectief uw agent gebruikerstaken uitvoert.

Conversatieanalyse gebruikt de volgende concepten en termen:

• Gesprekken zijn een voortdurende interactie tussen een specifieke gebruiker of groep gebruikers op een kanaal en je agent.

• Gesprekken kunnen worden onderbroken en later worden hervat, of worden doorverbonden met een klantenservicemedewerker. Het gesprek kan eenrichtingsverkeer zijn, van de klant naar de agent, of van de agent naar de klant, maar het is vaker een heen-en-weer interactie tussen de klant en de agent.

• Er treedt een time-out op voor een gesprek na 30 minuten inactiviteit.

• Voor agenten die op het Telephony-kanaal zijn gepubliceerd, worden sessies 3 minuten na een End Conversation-evenement beëindigd.

• Een enkel gesprek kan een of meer analysesessies bevatten.

• Een analysesessie in de klassieke modus is gekoppeld aan het laatste aangepaste onderwerp dat door een gebruiker is geactiveerd. Als de sessie geen aangepaste onderwerpen bevat, is het het laatste systeemonderwerp dat direct door de gebruiker wordt geactiveerd.

Alleen gebeurtenistriggersessies

Een autonome agent is een agent met een gebeurtenistrigger. Deze agents ondersteunen alleen analyses voor agents met triggers.

Een analysesessie voor agenten met triggers houdt bij vanaf het moment dat een agent een payload van een trigger ontvangt tot en met alle acties die de agent als reactie daarop uitvoert. Met deze analysesessies leggen we vast waar uw agent op reageert en hoe goed uw agent presteert.

Opmerking

Als een trigger mislukt en de agent geen triggerpayload ontvangt, kan er geen analysesessie starten. In Analytics worden alleen succesvol geactiveerde uitvoeringen bijgehouden.

Hybride weergave- zowel gespreks- als gebeurtenis-geactiveerde sessies

Wanneer de gegevens van uw agent sessies omvatten voor ten minste één gesprek en minstens één trigger-gebaseerde run in de rapportperiode, toont de Monitor-pagina een hybride weergave van relevante statistieken voor zowel conversatie- als autonome sessies. In deze weergave tonen de secties Overzicht en Effectiviteit de meetwaarden naast elkaar voor zowel de gespreks- als gebeurtenis-getriggerde sessies. In de sectie Gebruik kunt u kiezen tussen gesprekken of sessies, waarin alleen relevante gegevens worden weergegeven. Als u Alles selecteert, worden alle gebruiksgerelateerde gegevens weergegeven. In de sectie Tevredenheid worden metrische gegevens over tevredenheid weergegeven voor gesprekssessies.

Voor meer informatie over:

• Getoonde meetgegevens die relevant zijn voor gesprekssessies; zie De effectiviteit van conversatieagents monitoren.

• Weergegeven metriekgegevens die relevant zijn voor door gebeurtenissen geactiveerde sessies; zie De status van autonome agents bewaken.

Gesprekstranscripties downloaden

Je kunt gesprekstranscripties een paar minuten na het einde van het gesprek downloaden. Je kunt elke periode binnen de afgelopen 29 dagen downloaden. U kunt ze downloaden in Dataverse met behulp van de Power Apps-portal en als sessiechattranscripties met behulp van de Copilot Studio-app. Het kan tot een uur duren na de analytische sessie voordat de gerelateerde gegevens op het analysedashboard verschijnen.

Opmerking

U kunt gesprektranscripties niet downloaden in Dataverse in de Copilot Studio-app in Teams. Als u transcripties in Dataverse wilt bekijken en exporteren, moet u zich registreren voor de Copilot Studio-web-app. U kunt sessiechattranscripties downloaden met behulp van de Copilot Studio-app. Zie Sessietranscripties van agents downloaden voor meer informatie.

Analyse van onderwerpgebruik

In Copilot Studio definieert een onderwerp hoe een agentgesprek vordert en een deel van een gesprek tussen een gebruiker en een agent vertegenwoordigt. Het topic Monitor-paneel toont hoe een individueel onderwerp presteert, inclusief hoe vaak het wordt getriggerd, hoe sessies die het bevatten worden opgelost, en hoe tevreden gebruikers zijn met die sessies. U kunt deze inzichten gebruiken om onderwerpen te identificeren die regelmatig worden geëscaleerd of verlaten en vervolgens prioriteit geven aan deze onderwerpen voor verbetering. Zie Onderwerpen maken en bewerken voor meer informatie over onderwerpen en hoe u deze maakt.

Opmerking

Topic Monitor is alleen beschikbaar voor agenten in de klassieke modus en voor onderwerpen die met een sessie te maken hebben. Als je agent generatieve orkestratie gebruikt, gebruik dan gespreksuitkomsten en thema's op de pagina Monitor in plaats daarvan.

Als u het onderwerp 'Monitor panel' wilt bekijken:

1. Navigeer in Copilot Studio naar de pagina Onderwerp van uw agent.

2. Selecteer het onderwerp dat u wilt analyseren. Als er geen onderwerpen beschikbaar zijn, raadpleegt u Onderwerpen maken en bewerken.

3. Selecteer rechtsboven op de pagina OnderwerpenMeer (...) >Monitor.

Het thema Monitor-panel laat zien:

• Onderwerpresultaten: een grafiek met sessieresultaten, Escalated, Resolveden Abandoned, voor sessies waarin dit onderwerp is geactiveerd. Gebruik deze grafiek om snel de onderwerpstatus te beoordelen. Een groot deel van Escalated of Abandoned resultaten kan betekenen dat het onderwerp moet worden verbeterd.
• Totaal gebruik van onderwerp: Een grafiek van de trend van de onderwerpresultaten in de loop van de tijd. Gebruik dit om regressies te detecteren, bijvoorbeeld een piek in verlaten sessies nadat een onderwerp is bewerkt of om te bevestigen dat recente wijzigingen de resolutiepercentages hebben verbeterd.
• Klanttevredenheidsscore: een score op basis van antwoorden van gebruikersonderzoeken van sessies die aan dit onderwerp zijn gekoppeld.
• Trend van tevredenheidsscore: een grafiek die laat zien hoe de tevredenheidsscore in de loop van de tijd verandert. Gebruik deze trend om perioden te identificeren waarin het gebruikerssentiment afnam of verbeterde.

Om het tijdsbereik te wijzigen, selecteer je bovenaan in het Monitor-deelvenster van het onderwerp de keuzelijst voor het tijdsbereik.

Verwante informatie

• Meet het rendement op investeringen (ROI) en de bedrijfswaarde van AI-agents