Rediger et testsæt

[Denne artikel er til dokumentationen til den foreløbige udgivelse. Der kan forekomme ændringer.]

Under eller efter oprettelse af et testsæt kan du redigere testcases ved at ændre formuleringen af spørgsmål, vælge forskellige testmetoder eller justere de forventede svar efter behov. Du kan vælge flere testcases for at redigere dem samlet ved at markere afkrydsningsfelterne ud for hver testcase.

Du kan vælge mellem tre testmetoder, også kaldet gradere, til at evaluere agentsvar: kvalitet, lighed, tekstmatch. Du kan få flere oplysninger om de forskellige testmetoder under Testmetoder.

Important

Denne artikel indeholder dokumentation til prøveversionen af Microsoft Copilot Studio og kan ændres.

Forhåndsversionsfunktionerne er ikke beregnet til produktionsformål og kan have begrænset funktionalitet. Disse funktioner er tilgængelige før en officiel version, så du kan få tidlig adgang og give feedback.

Hvis du bygger en produktionsklar agent, skal du se Oversigt over Microsoft Copilot Studio.

Rediger detaljerne i et testsæt

Du kan ændre de grundlæggende detaljer i et testsæt og hvilken konto det bruger til autentificering.

1. På din agents evalueringsside skal du vælge testsættet.

2. Vælg den testcase, du vil redigere, i testsættet.

3. Eventuelt kan du ændre navnet på testsættet.

4. Vælg Administrer profil for at tilføje en konto, eller vælg den aktuelle profil til at administrere forbindelser eller vælg en anden profil. Automatiseret test bruger autentificeringen af den valgte testkonto. Hvis din agent har videnskilder eller værktøjer, der kræver specifik autentificering, kan du vælge den rette konto til din testning.

Notat

Når Copilot Studio genererer testcases eller kører en evaluering, bruger den autentificeringsoplysningerne fra en tilknyttet konto til at få adgang til din agents videnskilder og værktøjer. De genererede testcases eller resultater kan indeholde følsomme oplysninger, som den tilknyttede konto har adgang til, og disse oplysninger er synlige for alle skabere, der kan få adgang til testsættet.

Administrer brugerprofiler og forbindelser

Du kan køre testsæt ved at bruge autentificeringen af en brugers konto. Denne autentificeringsmetode giver din agent adgang til de videnskilder og værktøjer, den har brug for for at nå sine mål.

Du kan også bruge profiler til at simulere specifikke brugeroplevelser. For eksempel kan en direktørs brugerprofil få adgang til andre videnskilder end praktikantens brugerprofil, og agenten bør returnere forskellige resultater.

Testresultaterne viser, hvilken brugerprofil der blev brugt.

Notat

Når Copilot Studio genererer testcases eller kører en evaluering, bruger den autentificeringsoplysningerne fra en tilknyttet konto til at få adgang til din agents videnskilder og værktøjer. De genererede testcases eller resultater kan indeholde følsomme oplysninger, som den tilknyttede konto har adgang til, og disse oplysninger er synlige for alle skabere, der kan få adgang til testsættet.

Agentevalueringer, der bruger brugerautentificering, kræver adgang via Microsoft Copilot Studio-connectoren. Hvis din administrator slukker for denne forbindelse, kan du ikke køre tests ved at bruge evalueringsværktøjet. For mere information, se Copilot Studio connectors and data groups.

For at tilføje eller ændre en brugerprofil i et testsæt:

1. Åbn et testsæt, og vælg derefter Administrer profil.

1. Vælg brugermenuen , og så:

• Vælg den brugerkonto, du vil bruge, eller
• Vælg Tilføj en konto, og log så ind på kontoen.

1. For forbindelser med advarsel, vælg forbindelsen. Skift den eksisterende forbindelse til en fungerende forbindelse, vælg Genforbind for at forsøge at genoprette den eksisterende forbindelse, eller vælg Opret ny forbindelse for at prøve en ny forbindelse.

For nye forbindelser indtaster du de ønskede forbindelsesoplysninger, og vælg derefter Forbind.

1. Når alle forbindelser virker, vælg Gem.

Rediger testcases inden for et testsæt

1. På din agents evalueringsside skal du vælge testsættet.

2. Vælg den testcase, du vil redigere, i testsættet.

1. I ruden til højre skal du ændre teksten i et spørgsmål ved at redigere teksten i feltet Spørgsmål.

1. Vælg den testmetode, du vil bruge.

• Kvalitet:

  • Vælg Generel kvalitet for at evaluere svaret baseret på relevans, jordforbindelse og fuldstændighed.

  • Vælg Sammenlign betydning for at evaluere svaret baseret på, hvor godt det registrerer betydningen af det forventede svar. Under Afleveringsscore, kan du angive en grænse for afleveringsscore for at bestemme, hvad der udgør en afleveringsscore for et svar.

    I feltet Forventet svar skal du angive det svar, som testmetoden evaluerer agentens svar i forhold til.

• Lighed: Bruger en metrikværdi for cosinus lighed til at vurdere, hvordan agentens svar svarer til formuleringen og betydningen af det forventede svar. Den bestemmer en score mellem 0 og 1, hvor 1 betyder, at den matcher tæt, og 0 betyder, at den slet ikke stemmer overens. Under Afleveringsscore, kan du angive en grænse for afleveringsscore for at bestemme, hvad der udgør en afleveringsscore for et svar.

  I feltet Forventet svar skal du angive det svar, som testmetoden evaluerer agentens svar i forhold til.

• Tekstmatch:

  • Vælg Nøjagtigt match for at evaluere agentens svar i forhold til det forventede svar, hvor en afleveringsscore betyder, at agentens svar stemmer nøjagtigt overens med det definerede forventede svar.

    I feltet Forventet svar skal du angive det svar, som testmetoden evaluerer agentens svar i forhold til.

  • Vælg Delvis match for at evaluere agentens svar i forhold til det forventede svar, hvor en afleveringsscore betyder, at agentens svar indeholdt nogle af ordene eller sætningerne fra det definerede forventede svar.

    I feltet Forventet svar skal du angive et udtryk eller et nøgleord, som testmetoden evaluerer agentens svar i forhold til. Hvis du vil tilføje flere nøgleord eller udtryk, skal du vælge Tilføj, vælg operatoren og eller eller mellem felterne og angiv nøgleordet eller udtrykket.

    

1. Vælg Anvend.

2. Når du er færdig med dine ændringer , vælg Save for at gemme dit testsæt eller Evaluate for at køre testen.

Tilføj flere testcases til et testsæt

Når du opretter eller redigerer et testsæt, kan du tilføje flere testcases.

1. På din agents evalueringsside skal du vælge testsættet.

2. Generer eller tilføj manuelt flere testcases.

1. Vælg og rediger nye testcases for at tilføje detaljer.

Slet et testtilfælde eller testsæt

Du kan slette et testtilfælde eller testsæt, som du ikke længere har brug for.

1. Gå til din agents vurderingsside .
2. I afsnittet Testsæt kan du slette et testsæt ved at gøre en af følgende:
   • Vælg de tre prikker (...) på testsætkortet, og vælg derefter Slet.
   • Vælg testsættet for at åbne det, vælg derefter de tre prikker (...) i panelet Konfigurer testsæt , og vælg derefter Slet.
3. I afsnittet Seneste resultater kan du slette en testcase ved at gøre en af følgende:
   • Hold musen over testtilfældet, du vil slette, vælg de tre prikker (...) og vælg derefter Slet test.
   • Vælg testcaset for at åbne det, vælg derefter de tre prikker (...) i evalueringsoversigtspanelet , og vælg derefter Slet.