Muistiinpano
Tämän sivun käyttö edellyttää valtuutusta. Voit yrittää kirjautua sisään tai vaihtaa hakemistoa.
Tämän sivun käyttö edellyttää valtuutusta. Voit yrittää vaihtaa hakemistoa.
[Tämä artikkeli sisältää julkaisua edeltävää materiaalia ja voi muuttua.]
Testisarjan luomisen aikana tai sen jälkeen voit muokata testitapauksia muuttamalla kysymysten sanamuotoa, valitsemalla erilaisia testimenetelmiä tai muokkaamalla odotettuja vastauksia tarpeen mukaan. Voit valita useita testitapauksia, jos haluat muokata niitä kerralla, valitsemalla kunkin testitapauksen vieressä olevan valintaruudun.
Voit valita kolme testimenetelmää, joita kutsutaan myös luokkaluokittajiksi, agentin vastausten arvioimiseksi: laatu, samankaltaisuus ja tekstin vastaavuus. Lisätietoja erilaisista testimenetelmistä on kohdassa Testimenetelmät.
Muokkaa testitapauksia testijoukon sisällä
Valitse agenttisi arviointisivulta testisarja.
Valitse testijoukosta testitapaus, jota haluat muokata.
- Voit muuttaa kysymyksen sanamuotoa oikeanpuoleisessa ruudussa muokkaamalla Kysymys-kentän tekstiä.
- Valitse testimenetelmä , jota haluat käyttää.
-
Valitse Yleinen laatu , jos haluat arvioida vastausta asiayhteyden, perustelun ja täydellisuuden perusteella.
Valitse Vertaa merkitys , jos haluat arvioida vastauksen sen perusteella, miten hyvin se tallentaa odotetun vastauksen merkityksen. Voit määrittää Välityspisteet-kohdassa raja-arvon sille, mikä on vastauksen välityspistemäärä.
Kirjoita Odotettu vastaus -ruutuun vastaus, johon testimenetelmä arvioi agentin vastauksen.
Samankaltaisuus: käyttää Cosine-samankaltaisuusmittaria arvioidakseen, kuinka samanlainen agentin vastaus on odotetun vastauksen sanamuotoon ja merkitykseen. Se määrittää pistemäärän 0–1, jossa 1 tarkoittaa, että se vastaa tiiviisti ja 0 tarkoittaa, että se ei vastaa lainkaan. Voit määrittää Välityspisteet-kohdassa raja-arvon sille, mikä on vastauksen välityspistemäärä.
Kirjoita Odotettu vastaus -ruutuun vastaus, johon testimenetelmä arvioi agentin vastauksen.
-
Valitse Tarkka vastaavuus , jos haluat arvioida agentin vastauksen odotettuun vastaukseen nähden, jolloin välityspisteet tarkoittavat, että agentin vastaus vastasi tarkasti määritettyä odotettua vastausta.
Kirjoita Odotettu vastaus -ruutuun vastaus, johon testimenetelmä arvioi agentin vastauksen.
Valitse Avainsanojen vastaavuus arvioidaksesi agentin vastauksen odotettuun vastaukseen, jossa läpäisevä pistemäärä tarkoittaa, että agentin vastaus sisälsi joitakin sanoja tai ilmauksia määritellystä odotetusta vastauksesta.
Kirjoita Odotettu vastaus -ruutuun lause tai avainsana, jota vasten testimenetelmä arvioi agentin vastauksen. Jos haluat lisätä useita avainsanoja tai lauseita, valitse Lisää, valitse operaattori jatai ruutujen välissä ja anna avainsana tai lause.
Valitse Käytä.
Kun olet saanut muutokset valmiiksi, valitse Tallenna tallentaaksesi testisarjan tai Arvioitestin suorittamiseksi.
Lisää testitapauksia testijoukkoon
Testisarjaa luodessasi tai muokatessa voit lisätä lisää testitapauksia.
Valitse agenttisi arviointisivulta testisarja.
Luo tai lisää manuaalisesti lisää testitapauksia.
- Valitse ja muokkaa uusia testitapauksia lisätäksesi yksityiskohtia.