Změna detailů testovací sady

Note

Tento článek popisuje funkce používané v agentech nebo tocích agentů využívajících standardní harness.

Použijte testovací sady k vyhodnocení a zdokonalení toho, jak váš agent zvládá reálné reakční scénáře. Tento článek vysvětluje, jak upravit název a nastavení testovací sady, spravovat uživatelský profil a připojení používaná pro autentizaci, upravovat nebo mazat jednotlivé testovací případy a odstranit celé testovací sady či výsledky. Tyto kroky vám pomohou zajistit, že hodnocení odrážejí správné uživatelské kontexty a udrží bezpečný přístup ke zdrojům znalostí a nástrojům.

Máte na výběr ze tří testovacích metod, také nazývaných hodnotitelů, pro hodnocení odpovědí agentů: kvalita, podobnost a shoda s textem. Další informace o různých metodách testování naleznete v tématu Metody testování.

Upravte detaily testovací sady

Můžete měnit detaily testovací sady, například který účet používá pro autentizaci a použité testovací metody.

1. Přejděte na stránku Hodnocení vašeho agenta.

   

2. Vyberte testovací sadu.

3. V testovací sadě vyberte testovací případ, který chcete upravit.

4. Volitelně změnit název testovací množiny.

5. Přidávat nebo upravovat testovací metody. Každá testovací metoda měří různé hodnoty a vyžaduje různé konfigurace. Pro naučení se, jak nastavit každou testovací metodu, viz Vybrat testovací metody.

   Testovací metoda	Vyhodnocení	Typ testovací sady	Vyhodnocování	Konfigurace
   Obecná kvalita	Jak dobré jsou reakce testovacích případů na základě specifických vlastností	Jedna odpověď nebo konverzace	Ohodnoceno ze 100 %	None
   Bezpečnost obsahu	Zda odpověď testovaného případu obsahuje škodlivý obsah, jako je nenávist, násilí, sebepoškozování nebo sexuální obsah	Jedna odpověď nebo konverzace	Úspěšné/neúspěšné	Typ obsahu, povolená úroveň bezpečnosti obsahu
   Porovnejte význam	Jak dobře význam odpovědi testovacího případu odpovídá očekávané odpovědi	Jedna odpověď	Ohodnoceno ze 100 %	Úspěšné hodnocení, očekávaná odpověď
   Použití nástroje	Bez ohledu na to, jestli testovací případ použil všechny nebo jakékoli očekávané prostředky	Jedna odpověď	Úspěšné/neúspěšné	Očekávané schopnosti
   Shoda klíčových slov	Zda testovací případ použil všechna nebo některá očekávaná klíčová slova či fráze	Jedna odpověď nebo konverzace	Úspěšné/neúspěšné	Očekávaná klíčová slova nebo fráze
   Podobnost textu	Jak dobře text odpovědi testovacího případu odpovídá očekávané odpovědi	Jedna odpověď	Ohodnoceno ze 100 %	Úspěšné hodnocení, očekávaná odpověď
   Přesná shoda	Zda odpověď testovacího případu přesně odpovídá očekávané odpovědi	Jedna odpověď	Úspěšné/neúspěšné	Očekávaná odpověď
   Custom	Jestli odpověď testovacího případu splňuje vaše definovaná kritéria nebo očekávání.	Jedna odpověď nebo konverzace	Prospěch/neprospěch (splňuje definovaná kritéria štítku)	Název, pokyny k vyhodnocení, popisky

6. Vyberte aktuální profil pro správu jeho spojení. Automatizované testování využívá autentizaci aktuálně přihlášeného uživatele. Více informací v Spravování uživatelských profilů a kontaktů.

Note

Když Copilot Studio vygeneruje testovací případy nebo spustí vyhodnocení, použije ověřovací přihlašovací údaje připojeného účtu pro přístup ke zdrojům a nástrojům vašeho agenta. Vygenerované testovací případy můžou obsahovat citlivá data, ke kterým má připojený účet přístup. Každý tvůrce s přístupem k agentu může také zobrazit testovací sady propojené s tímto agentem.

Správa uživatelských profilů a spojení

Nástroje provádějí hodnocení a připojení pomocí aktuálně přihlášeného uživatelského profilu. Nemůžete vybrat jiného uživatele ani se jeho pomocí přihlásit, když jste přihlášeni. Pro spuštění hodnocení jako jiný uživatel se odhláste ze Copilot Studio, přihlaste se pomocí účtu tohoto uživatele a poté spusťte hodnocení.

Important

Můžete zkontrolovat a ověřit konektory, které váš agent používá pro aktuálně přihlášeného uživatele. Nakonfigurujte, zkontrolujte a uložte tato připojení před spuštěním vyhodnocení.

Výsledky testu ukazují, který uživatelský profil byl použit.

Note

Když Copilot Studio vygeneruje testovací případy nebo spustí vyhodnocení, použije ověřovací přihlašovací údaje připojeného účtu pro přístup ke zdrojům a nástrojům vašeho agenta. Vygenerované testovací případy můžou obsahovat citlivá data, ke kterým má připojený účet přístup. Každý tvůrce s přístupem k agentu může také zobrazit testovací sady propojené s tímto agentem.

Vyhodnocení agentů, která používají ověřování uživatelů, vyžadují přístup přes konektor Microsoft Copilot Studio. Pokud administrátor toto připojení vypne, nemůžete testy spouštět pomocí hodnotícího nástroje. Další informace najdete v tématu Copilot Studio konektory a skupiny dat.

Pro správu připojení pro aktuálně přihlášeného uživatele:

1. Otevřete testovací sadu, a poté vyberte aktuální profil.

   

2. Pro spojení s upozorněním vyberte připojení. Změňte stávající spojení na funkční, vyberte Znovu připojit pro pokus o obnovení stávajícího připojení, nebo zvolte Vytvořit nové spojení pro pokus o nové připojení. Funkční připojení jsou označena zeleným zaškrtnutím.

3. Pro nová připojení zadejte požadované údaje o připojení a poté vyberte Připojit.

4. Když všechna spojení fungují, vyberte Uložit.

5. Když zmizí okno Spravovat profil a připojení , vyberte Uložit pro aktualizaci testovací sady s aktuálním uživatelským profilem a připojením.

Smazat testovací sadu nebo výsledek testu

Můžete smazat testovací případ nebo testovací sadu, kterou už nepotřebujete.

1. Přejděte na stránku Hodnocení vašeho agenta.
2. V sekci testovacích sad smažte testovací sadu jedním z následujících kroků:
   • Vyberte tři tečky (...) na kartě testovací sady a poté vyberte Smazat.
   • Vyberte testovací sadu pro její otevření, poté vyberte tři tečky (...) v panelu Nastavit testovací sadu a nakonec vyberte Smazat.
3. V sekci Nedávné výsledky smažte výsledek testu jedním z následujících kroků:
   • Najeďte myší na výsledek testu, který chcete smazat, vyberte tři tečky (...) a pak vyberte Smazat test.
   • Vyberte výsledek testu pro otevření, poté vyberte tři tečky (...) v panelu souhrnu hodnocení a poté vyberte Smazat.