Jaa


Agenttitestauksen parantaminen Copilot Studio Kitin avulla

Power CAT Copilot Studio Kit on käyttäjäystävällinen sovellus, jonka avulla voit tarkistaa agenttivastaukset. Se sisältää myös alkuperäiset ominaisuudet, kuten Excelin viennin ja tuonnin joukkoluontia ja päivityksiä varten.

Määritä, suorita ja analysoi

Määritä ja suorita testejä Copilot Studion ohjelmointirajapintoja (Direct Line API) vastaan, jotta agenttivastaukset voidaan arvioida odotettuihin tuloksiin nähden.

Jos haluat rikastaa tuloksia, nouda lisää arvopisteitä Azure Application Insightsista ja Dataversesta analysoimalla keskusteluiden tallennetietueita (kuten tarkka käynnistetty aiheen nimi ja aikeen tunnistuspisteet).

Tekoälyn luomissa vastauksissa, jotka eivät ole luonteeltaan deterministisiä, voit verrata luotua vastausta mallivastaukseen tai vahvistusohjeisiin kehotteiden avulla.

Kaavio, joka näyttää Azuren ja Power Platformin komponentit, jotka liittyvät Copilot Studio Direct Line -ohjelmointirajapintojen testaukseen ja analysointiin, mukaan lukien Azure Application Insights, AI Builder ja Dataverse.

Testityypit

Työkalu tukee seuraavantyyppisiä testejä:

  • Vastauksen yhteneväisyys
  • Liitteet, kuten mukautuvat kortit
  • Aiheen vastaavuus (edellyttää Dataverseä)
  • Luotuja vastauksia (edellyttää AI Builderia vastausanalyysia ja Application Insightsia varten, jotta saat lisätietoja siitä, miksi vastausta ei luotu)
  • Monivaiheinen testityyppi on tietty testityyppi. Se koostuu vakiotyyppien testitapauksista, jotka suoritetaan määritetyssä järjestyksessä samassa keskustelukontekstissa. Käytä usean käännöksen testejä skenaarioiden testaamiseen päästä päähän ja mukautettujen agenttien testaukseen luontiorkestroinnilla.
  • Palvelupaketin vahvistuksen avulla tekijät voivat vahvistaa, että heidän luotua orkestrointia käyttävät mukautetut agenttinsa sisältävät odotetut työkalut. Sen sijaan, että arvioidaan, mitä agentti sanoo, tämä testityyppi tarkistaa, että agentin dynaaminen suunnitelma sisältää odotetut työkalut (työkalut, toiminnot ja yhdistetyt agentit) ennalta määritettyyn raja-arvoon.

Lisätietoja testityypeistä on artikkelissa Määritä testejä Copilot Studio Kitissä.

Näyttökuva testituloksen tiedoista, mukaan lukien kaavio, joka näyttää kaikkien testisuoritusten onnistumisprosentin ja viiveen.

Seuraava vaihe