Ändra detaljerna i en testuppsättning

Använd testuppsättningar för att utvärdera och förfina hur din agent hanterar verkliga svarscenarier. Denna artikel förklarar hur man ändrar en testuppsättnings namn och inställningar, hanterar användarprofilen och anslutningarna som används för autentisering, redigerar eller tar bort enskilda testfall samt tar bort hela testuppsättningar eller resultat. Dessa steg hjälper dig att säkerställa att utvärderingarna speglar rätt användarkontexter och upprätthåller säker tillgång till kunskapskällor och verktyg.

Du kan välja mellan tre testmetoder, även kallade bedömningsmetoder, för att bedöma agentsvar: kvalitet, likhet och textöverensstämmelse. Mer information om de olika testmetoderna finns i Testmetoder.

Ändra detaljerna i en testuppsättning

Du kan ändra detaljerna för en testuppsättning, såsom vilket konto den använder för autentisering och vilka testmetoder som används.

  1. Gå till din agents utvärderingssida.

    Skärmdump som visar hur du väljer fliken Utvärdering när flikvalet komprimeras på grund av skärmstorleken.

  2. Välj testuppsättningen.

  3. I testuppsättningen väljer du den testkörning som du vill redigera.

  4. Du kan välja att byta namn på testuppsättningen.

  5. Lägg till eller ändra testmetoderna. Varje testmetod mäter olika värden och kräver olika konfigurationer. För att lära dig hur du sätter upp varje testmetod, se Välj testmetoder.

    Testmetod Mått Testuppsättningstyp Bedömning Konfigurationer
    Allmän kvalitet Hur bra är ett testfalls svar baserat på specifika egenskaper Enskilt svar eller samtal Fick poäng av 100 % Ingen
    Jämför innebörden Hur väl innebörden i testfallets svar överensstämmer med det förväntade svaret Enkelt svar Fick poäng av 100 % Godkänd poäng, förväntat svar
    Användning av verktyg Om testfallet använde alla eller några av de förväntade resurserna Enkelt svar Godkänt/underkänt Förväntade förmågor
    Nyckelordsmatchning Huruvida testfallet använde alla eller några av de förväntade nyckelorden eller fraserna Enskilt svar eller samtal Godkänt/underkänt Förväntade nyckelord eller fraser
    Textlikhet Hur väl texten i testfallets svar stämmer överens med det förväntade svaret Enkelt svar Fick poäng av 100 % Godkänd poäng, förväntat svar
    Exakt matchning Om testfallets svar exakt motsvarar det förväntade svaret Enkelt svar Godkänt/underkänt Förväntat svar
    Anpassat Huruvida testfallets svar uppfyller de definierade kriterierna eller förväntningarna. Enskilt svar eller samtal Godkänd/underkänd (uppfyller de definierade etikettkriterierna) Namn, utvärderingsinstruktioner, etiketter
  6. Välj Hantera profil för att lägga till ett konto, eller välj den aktuella profilen för att hantera anslutningar eller välja en annan profil. Automatiserad testning använder autentiseringen för det valda testkontot. Multiprofilutvärdering stöds endast för agenter utan anslutningsprogramberoenden. Om din agent har kunskapskällor eller verktyg som kräver specifik autentisering kan du välja rätt konto för att testa. För mer information, se Hantera användarprofiler och anslutningar.

Kommentar

När Copilot Studio genererar testfall eller kör en utvärdering använder den autentiseringsuppgifterna från ett anslutet konto för att komma åt din agents kunskapskällor och verktyg. Genererade testfall kan innehålla känsliga data som det anslutna kontot kan komma åt. Alla skapare med tillgång till agenten kan också se testuppsättningar som är länkade till agenten.

Skärmdump som visar knappen Hantera profil.

Hantera användarprofiler och anslutningar

Du kan köra testuppsättningar genom att använda autentiseringsuppgifterna för en användares konto. Denna autentiseringsmetod gör det möjligt för din agent att få tillgång till de kunskapskällor och verktyg som den behöver för att uppnå sina mål.

Du kan använda profiler för att simulera specifika användarupplevelser. Till exempel kan en chefs användarprofil få tillgång till andra kunskapskällor än en praktikants användarprofil, och agenten returnerar olika resultat. Multiprofilutvärdering stöds endast för agenter utan anslutningsprogramberoenden.

Viktigt

Användarprofiler i testuppsättningar kan inte tillhandahålla autentisering för verktyg. När du genomför en utvärdering måste din agent använda ditt inloggade konto för att autentisera verktygsanslutningar. Om du väljer en annan användarprofil eller om agentens verktygsanslutningar inte autentiseras med ditt konto, misslyckas utvärderingen med meddelandet "Detta konto kan inte ansluta till verktyg". För att åtgärda detta, logga in med det konto som är konfigurerat med verktygsanslutningsprogram och kör sedan en utvärdering.

Testresultaten visar vilken användarprofil som användes.

Kommentar

När Copilot Studio genererar testfall eller kör en utvärdering använder den autentiseringsuppgifterna från ett anslutet konto för att komma åt din agents kunskapskällor och verktyg. Genererade testfall kan innehålla känsliga data som det anslutna kontot kan komma åt. Alla skapare med tillgång till agenten kan också se testuppsättningar som är länkade till agenten.

Agentutvärderingar som använder användarautentisering kräver åtkomst via Microsoft Copilot Studio-anslutningsprogrammet. Om administratören stänger av denna anslutning kan du inte köra tester med hjälp av utvärderingsverktyget. För mer information, se Copilot Studio-anslutningsprogram och -datagrupper.

Så här lägger du till eller ändrar en användarprofil i en testuppsättning:

  1. Öppna en testuppsättning, och välj Hantera profil.

    Skärmdump som visar knappen Hantera profil.

  2. Välj rullgardinsmenyn för användare, därefter:

    • Välj det användarkonto som du vill använda, eller
    • Välj Lägg till ett konto och logga in på kontot.

    Skärmbild som visar hur du väljer ett användarkonto.

  3. För anslutningar med varning, välj anslutningen. Byt den befintliga anslutningen till en fungerande anslutning, välj Återanslut för att försöka återupprätta den befintliga anslutningen, eller välj Skapa ny anslutning för att försöka skapa en ny anslutning.

  4. För nya anslutningar, ange de begärda anslutningsdetaljerna och välj sedan Anslut.

  5. När alla anslutningar fungerar, välj Spara.

Radera en testuppsättning eller testresultat

Du kan radera ett testfall eller en testuppsättning som du inte längre behöver.

  1. Gå till din agents utvärderingssida.
  2. I avsnittet Testuppsättningar kan du radera en testuppsättning genom att göra något av följande steg:
    • Välj de tre prickarna (...) på testuppsättningskortet och välj sedan Ta bort.
    • Välj testuppsättningen för att öppna den, klicka sedan på de tre prickarna () i Konfigurera testuppsättning-panelen och välj Ta bort.
  3. I avsnittet Senaste resultat tar du bort du ett testresultat genom att utföra något av följande steg:
    • Håll muspekaren över det testresultat du vill ta bort, klicka på de tre prickarna () och välj sedan Ta bort test.
    • Välj testresultatet för att öppna det, klicka sedan på de tre prickarna () i Utvärderingssammanfattning-panelen och välj Ta bort.