Opret et testsæt for en agent (forhåndsversion)

[Denne artikel er foreløbig dokumentation og kan ændres.]

Et testsæt er en samling af samtaler, du bruger til at evaluere din agents præstation. Hver samtale repræsenterer et scenarie, som din agent skal håndtere.

Vigtig

Forudsætninger

En agent oprettet og gemt med GitHub Copilot-harnesset. Se Opret en agent (forhåndsversion).

Start en ny evaluering

For at starte en ny evaluering:

  1. Åbn din agent i Copilot Studio.
  2. Vælg fanen Evaluer.
  3. Vælg Ny evaluering.

Vælg fra af disse muligheder:

Mulighed 1: Upload samtaler fra en CSV-fil

  1. Evaluer-fanen, i Datakilde-sektionen, skal du trække en CSV-fil ind i uploadområdet eller vælge den for at vælge en fil.

    Tip!

    Vælg CSV-linket for at downloade en skabelon, der viser det korrekte filformat. Den maksimale filstørrelse er 5 MB.

  2. Gennemgå de importerede samtaler og juster dem efter behov.

  3. I panelet Konfigurer testsæt til højre skal du indtaste et Navn for evalueringen.

  4. Vælg Evaluate for at køre evalueringen, eller vælg Save for at gemme uden at køre.

Mulighed 2: Generer samtaler med AI

  1. Evaluer-fanen, i Flere måder at starte-sektionen, vælg Hurtigt samtalesæt.
  2. Vent mens systemet genererer 10 samtaler baseret på agentens beskrivelse, instruktioner og emner.
  3. Gennemgå de genererede samtaler i Gennemgå dine testcases-listen.
  4. I panelet Configure test set , indtast et Navn, og vælg derefter Evaluate eller Save.

Du kan også generere flere samtaler fra evalueringsvisningen. Vælg Tilføj samtaler>Generer 10 samtaler. Efter du har kørt en indledende evaluering, vælg Tilføj samtaler>Generer 25 samtaler eller Generer 50 samtaler for at generere flere.

Mulighed 3: Skriv samtaler manuelt

  1. På fanen Evaluer, i sektionen Flere måder at starte, vælg Eller, skriv nogle spørgsmål selv.
  2. I listen Oversyn dine testcases vælger du Tilføj samtaler>Skriv for manuelt at oprette et testtilfælde.
  3. Tilføj et brugerspørgsmål til hver samtale. Eventuelt kan du tilføje et forventet agent-svar.
  4. I panelet Konfigurer testsæt indtaster du et Navn og vælger Evaluer eller Gem .

Konfigurer testsættet

Når du opretter eller redigerer en evaluering, indeholder panelet Konfigurer testsæt disse muligheder:

  • Navn: Et påkrævet navn til evalueringen.
  • Testmetode: Metoden, der scorer svar. Generel kvalitetskontrol overlever, om svarene opfylder kvalitetsstandarder som relevans og fuldstændighed.
  • Brugerprofil: Den autentificerede profil, der udfører evalueringen. Vælg Manage for at opsætte hvilken profil der kører testene.

Rediger samtaler i et testsæt

For at redigere samtaler i et testsæt:

  1. Evaluate-fanen skal du åbne et eksisterende testset fra Evaluation-rullemenuen.
  2. Vælg en samtale for at redigere dens beskeder.
  3. Brug Tilføj samtaler-rullemenuen til at tilføje flere samtaler.
  4. Når du er færdig, skal du vælge Gem.