Vytvoření testovací sady pro agenta (Preview)

[Tento článek představuje předběžnou dokumentaci a může se změnit.]

Testovací sada je soubor konverzací, které používáte k hodnocení výkonu svého agenta. Každá konverzace představuje scénář, který má váš agent zvládnout.

Important

Předpoklady

Agent vytvořený a uložený pomocí GitHub Copilot harnessu. Viz Vytvoření agenta (Preview).

Zahájení nového vyhodnocení

Pro začátek nového hodnocení:

  1. Otevřete si agenta v Copilot Studiu.
  2. Vyberte kartu Vyhodnotit.
  3. Vyberte Nové hodnocení.

Vyberte jednu z těchto možností:

Možnost 1: Nahrání konverzací ze souboru CSV

  1. Na kartě Vyhodnocení v sekci Zdroj dat přetáhněte soubor CSV do oblasti pro nahrávání souborů nebo ji vyberte a soubor vyhledejte.

    Tip

    Klikněte na odkaz CSV a stáhněte si šablonu ve správném souborovém formátu. Maximální velikost souboru je 5 MB.

  2. Zkontrolujte importované konverzace a upravte je podle potřeby.

  3. V panelu Konfigurace testovací sady vpravo zadejte Název pro vyhodnocení.

  4. Vyberte Vyhodnotit pro spuštění vyhodnocení, nebo zvolit Uložit pro uložení bez spuštění.

Varianta 2: Generování konverzací s AI

  1. Na kartě Vyhodnocení v sekci Další způsoby spuštění vyberte Rychlá sada konverzací.
  2. Počkejte, až systém vygeneruje 10 konverzací na základě popisu, instrukcí a témat agenta.
  3. Zkontrolujte vygenerované konverzace v seznamu Kontrola testovacích případů.
  4. V panelu Nastavit testovací sadu zadejte název a poté vyberte Vyhodnotit nebo Uložit.

Více konverzací můžete také generovat z pohledu hodnocení. Vybrat Přidat konverzace>Vygenerujte 10 konverzací. Po provedení úvodního hodnocení vyberte Přidat konverzace>Generovat 25 konverzací nebo Generovat 50 konverzací pro vytvoření dalších.

Možnost 3: Ruční zápis konverzací

  1. Na kartě Vyhodnocení v sekci Další způsoby zahájení vyberte Nebo sami napište vlastní otázky.
  2. V seznamu Zkontrolovat své testovací případy vyberte Přidat konverzace>Napsat pro ruční vytvoření testovacího případu.
  3. Přidejte uživatelskou otázku ke každé konverzaci. Volitelně přidejte očekávanou odpověď agenta.
  4. V panelu Konfigurace testovací sady zadejte Název a vyberte Vyhodnotit nebo Uložit.

Konfigurace testovací sady

Když vytváříte nebo upravujete hodnocení, panel Konfigurovat testovací sadu obsahuje tyto možnosti:

  • Název: Povinný název pro hodnocení.
  • Testovací metoda: Metoda, která hodnotí odpovědi. Obecné kontroly kvality , zda odpovědi splňují kvalitativní standardy jako relevance a úplnost.
  • Uživatelský profil: Ověřený profil, který provádí hodnocení. Vyberte Spravovat pro nastavení, který profil testy spouští.

Úprava konverzací v testovací sadě

Pro úpravu konverzací v testovací sadě:

  1. Na kartě Vyhodnocení otevřete existující testovací sadu z rozbalovací nabídky Vyhodnocení.
  2. Vyberte konverzaci pro úpravu jejích zpráv.
  3. Použijte rozbalovací nabídku Přidat konverzace pro přidání dalších konverzací.
  4. Až budete hotovi, zvolte tlačítko Uložit.
  • Last updated on