Prestaties van agents controleren in Copilot Studio

Note

Dit artikel beschrijft functies die worden gebruikt in agenten of agentstromen die gebruikmaken van het standard harness.

Gebruik analyses om inzicht te krijgen in de prestaties van uw agent en om verbeterpunten te identificeren.

De Monitor-pagina in Copilot Studio vat belangrijke statistieken samen en biedt gebruiksanalyses voor de componenten van je agent. Open individuele metrics om de onderliggende data te verkennen.

De Monitor-ervaring is afgestemd op conversatieagenten en autonome agenten.

Monitoring is beschikbaar in alle geografische gebieden. Monitorgegevens zijn beschikbaar tot 360 dagen. Sessiegegevens en transcriptiegegevens zijn beschikbaar voor de afgelopen 28 dagen. Datum- en tijdstempels bij analyses zijn in de Gecoördineerde Universal Tijd (UTC). De tijd- en datumstempels bevatten de begin- en eindtijden van de dag, sessietijden en andere tijdsaanduidingen in de gegevens van uw agent.

Note

De Monitor-pagina toont geen analyses voor activiteit die je voltooit wanneer je je agent test in Copilot Studio via het testpaneel.

Beperkte toegang voor alleen-weergave tot analyses verlenen

Als je de eigenaar van de agent bent, deel dan de agent met de deelrol Analytics Viewer om alleen toegang te verlenen tot de Monitor-pagina. Om toegang te krijgen tot transcriptinformatie van gesprekken, moet de persoon ook de beveiligingsrol van Bot Transcript Viewer hebben.

Lees meer in Deel de analyses van een agent.

Important

Als agenteigenaar kunt u alleen de rol analyseviewer delen met personen en niet met groepen gebruikers.

Om toegang te krijgen tot de Monitor-pagina van uw makelaar:

1. Open uw agent in Copilot Studio.
2. Selecteer Monitor in de bovenste menubalk.

Summary

Het gebied Samenvatting gebruikt Copilot om een AI-samenvatting te genereren van belangrijke analyse-inzichten over uw agent. Selecteer Meer weergeven om de volledige samengevatte lijst met inzichten weer te geven.

Het helpt u snel algemene thema's en metrische gegevens te begrijpen en gebieden voor verbetering voor uw agent te identificeren door deze samen te vatten in een lijst met opsommingstekens voor de geselecteerde rapportageperiode. Deze lijst kan engagementstatistieken, klantsentiment en feedback, en trends sinds de laatste rapportageperiode bevatten.

Samenvatting van klantopmerkingen (preview)

[Deze sectie maakt deel uit van de voorlopige documentatie en kan nog veranderen.]

De samenvatting van klantreacties helpt u het algemene klantsentiment over de medewerker te begrijpen op basis van feedback en opmerkingen. Inzichten krijgen prioriteit op basis van zowel het volume van gerelateerde opmerkingen als hun algehele betekenis. De samenvatting filtert opmerkingen met lage waarde of irrelevante opmerkingen eruit en groepeert gerelateerde feedback.

Important

Dit artikel bevat Microsoft Copilot Studio preview-documentatie en kan worden gewijzigd.

Preview-functies zijn niet bedoeld voor productiegebruik en bieden mogelijk beperkte functionaliteit. Deze functies zijn beschikbaar voor een officiële release zodat u vroeg toegang kunt krijgen en feedback kunt geven.

Als u een productieklare agent bouwt, raadpleegt u Microsoft Copilot Studio Overview.

Om feedback te geven aan Microsoft over deze sectie, kies je Thumbs up of Thumbs down. Gebruik het panel 'Feedback indienen bij Microsoft om een reactie toe te voegen en te kiezen of je gerelateerde bestanden wilt delen.

1. Beschrijf in het deelvenster Feedback verzenden naar Microsoft uw voorkeuren of afkeuren in natuurlijke taal, afhankelijk van het pictogram dat u hebt geselecteerd om het deelvenster te openen.
2. Kies of je prompt, gegenereerde reactie, relevante inhoudsvoorbeelden en extra logbestanden wilt delen.
3. Selecteer Indienen.

Overview

Bekijk een overzicht van prestaties op hoog niveau in het Overzicht-gedeelte en bekijk vervolgens individuele statistieken in meer detail.

Actieve gebruikers

Actieve gebruikersstatistieken tonen de adoptie van een conversational agent en hoe deze in de loop van de tijd verandert. Een actieve gebruiker is een unieke gebruiker die ten minste één keer interactie heeft gehad met de gespreksagent tijdens de periode van het rapport. De Monitor-pagina toont dagelijks actieve gebruikers (DAU) en maandelijks actieve gebruikers (MAU). De dagelijkse telling omvat een volledige 24-uurs dag in UTC. De maandelijkse telling volgt de kalendermaand in UTC.

Important

De functie voor metrische gegevens van actieve gebruikers wordt alleen ondersteund als u uw agent instelt op verificatie onder>>.

Het gemiddelde DAU voor de geselecteerde periode, plus de procentwijziging van de vorige periode, wordt weergegeven als een KPI (Key Performance Indicator) in de sectie Overzicht .

Note

De formule voor de berekende gemiddelde metrische gegevens van DAU is: (sum of all full-day active user counts in the period) / (count of full days in the period).

Als u meer details wilt zien over de aantallen dagelijks en maandelijks actieve gebruikers en hoe deze zich in de loop van de tijd ontwikkelen, selecteert u de knop Actieve gebruikers bekijken rechtsboven in het overzichtspaneel.

Alleen gesprekssessies

Analytics voor gespreksagenten in Copilot Studio volgt de betrokkenheid van gebruikers met uw agent en legt vast hoe effectief uw agent gebruikerstaken uitvoert.

Conversatieanalyse gebruikt de volgende concepten en termen:

• Gesprekken zijn een voortdurende interactie tussen een specifieke gebruiker of groep gebruikers op een kanaal en je agent.

• Gesprekken kunnen worden onderbroken en later worden hervat, of worden doorverbonden met een klantenservicemedewerker. Het gesprek kan eenrichtingsverkeer zijn, van de klant naar de agent, of van de agent naar de klant, maar het is vaker een heen-en-weer interactie tussen de klant en de agent.

• Er treedt een time-out op voor een gesprek na 30 minuten inactiviteit.

• Voor agenten die op het Telephony-kanaal zijn gepubliceerd, worden sessies 3 minuten na een End Conversation-evenement beëindigd.

• Een enkel gesprek kan een of meer analysesessies bevatten.

• Een analysesessie die wordt aangedreven door het Standard-harnas is gekoppeld aan het laatst aangepaste topic dat door een gebruiker is geactiveerd. Als de sessie geen aangepaste onderwerpen bevat, is het het laatste systeemonderwerp dat direct door de gebruiker wordt geactiveerd.

Alleen gebeurtenistriggersessies

Een autonome agent is een agent met een gebeurtenistrigger. Deze agents ondersteunen alleen analyses voor agents met triggers.

Een analysesessie voor agenten met triggers houdt bij vanaf het moment dat een agent een payload van een trigger ontvangt tot en met alle acties die de agent als reactie daarop uitvoert. Met deze analysesessies leggen we vast waar uw agent op reageert en hoe goed uw agent presteert.

Note

Als een trigger mislukt en de agent geen triggerpayload ontvangt, kan er geen analysesessie starten. In Analytics worden alleen succesvol geactiveerde uitvoeringen bijgehouden.

Hybride weergave- zowel gespreks- als gebeurtenis-geactiveerde sessies

Wanneer de gegevens van uw agent sessies omvatten voor ten minste één gesprek en minstens één trigger-gebaseerde run in de rapportperiode, toont de Monitor-pagina een hybride weergave van relevante statistieken voor zowel conversatie- als autonome sessies. In deze weergave tonen de secties Overzicht en Effectiviteit de meetwaarden naast elkaar voor zowel de gespreks- als gebeurtenis-getriggerde sessies. In de sectie Gebruik kunt u kiezen tussen gesprekken of sessies, waarin alleen relevante gegevens worden weergegeven. Als u Alles selecteert, worden alle gebruiksgerelateerde gegevens weergegeven. In de sectie Tevredenheid worden metrische gegevens over tevredenheid weergegeven voor gesprekssessies.

Meer informatie vindt u in:

• Controleer de effectiviteit van conversatieagenten voor meetwaarden van conversationele sessies

• Monitor de gezondheid van autonome agenten voor door gebeurtenissen geactiveerde sessiemetrieken

Gesprekstranscripties downloaden

Je kunt sessietranscripties downloaden in Copilot Studio voor periodes binnen de afgelopen 28 dagen. Het kan tot een uur duren nadat een analysesessie is afgelopen voordat de gerelateerde data op het analysedashboard verschijnt. Lees meer over beschikbaarheid, toestemmingen en downloadstappen in Download gesprekstranscripties in Copilot Studio.

Het behoud van transcripten van Dataverse staat los van het 28-dagen sessie-datavenster in Copilot Studio. Lees meer in Download transcripties van gesprekken in Power Apps.

Analyse van onderwerpgebruik

In Copilot Studio definieert een onderwerp hoe een agentgesprek vordert en een deel van een gesprek tussen een gebruiker en een agent vertegenwoordigt. Het topic Monitor-paneel toont hoe een individueel onderwerp presteert, inclusief hoe vaak het wordt getriggerd, hoe sessies die het bevatten worden opgelost, en hoe tevreden gebruikers zijn met die sessies. Gebruik deze inzichten om onderwerpen te identificeren die vaak escaleren of worden verlaten, en prioriteer ze vervolgens voor verbetering. Meer informatie vindt u in Onderwerpen maken en bewerken.

Note

Topic Monitor is alleen beschikbaar voor agenten die worden aangedreven door de Standard harness en voor onderwerpen die met een sessie te maken hebben. Als je agent generatieve orkestratie gebruikt, gebruik dan gespreksuitkomsten en thema's op de pagina Monitor in plaats daarvan.

Als u het onderwerp 'Monitor panel' wilt bekijken:

1. Ga naar de Topics-pagina van je agent in Copilot Studio.

2. Selecteer het onderwerp dat u wilt analyseren. Als er geen onderwerpen beschikbaar zijn, raadpleegt u Onderwerpen maken en bewerken.

3. Selecteer rechtsboven op de pagina OnderwerpenMeer (...) >Monitor.

Het thema Monitor-panel laat zien:

• Onderwerpresultaten: een grafiek met sessieresultaten, Escalated, Resolveden Abandoned, voor sessies waarin dit onderwerp is geactiveerd. Gebruik deze grafiek om snel de onderwerpstatus te beoordelen. Een groot deel van Escalated of Abandoned resultaten kan betekenen dat het onderwerp moet worden verbeterd.
• Totaal gebruik van onderwerp: Een grafiek van de trend van de onderwerpresultaten in de loop van de tijd. Gebruik dit om regressies te detecteren, bijvoorbeeld een piek in verlaten sessies nadat een onderwerp is bewerkt of om te bevestigen dat recente wijzigingen de resolutiepercentages hebben verbeterd.
• Klanttevredenheidsscore: een score op basis van antwoorden van gebruikersonderzoeken van sessies die aan dit onderwerp zijn gekoppeld.
• Trend van tevredenheidsscore: een grafiek die laat zien hoe de tevredenheidsscore in de loop van de tijd verandert. Gebruik deze trend om perioden te identificeren waarin het gebruikerssentiment afnam of verbeterde.

Om het tijdsbereik te wijzigen, selecteer je bovenaan in het Monitor-deelvenster van het onderwerp de keuzelijst voor het tijdsbereik.

Verwante gegevens

Meet het rendement op investeringen (ROI) en de bedrijfswaarde van AI-agents