Bagikan melalui


Memodifikasi kasus pengujian dalam set pengujian

[Artikel ini adalah dokumentasi prarilis dan dapat berubah.]

Selama atau setelah membuat set pengujian, Anda dapat mengedit kasus pengujian dengan mengubah kata-kata pertanyaan, memilih metode pengujian yang berbeda, atau memodifikasi respons yang diharapkan sesuai kebutuhan. Anda dapat memilih beberapa kasus pengujian untuk mengeditnya secara massal dengan memilih kotak centang di samping setiap kasus pengujian.

Anda memiliki pilihan tiga metode pengujian, juga disebut sebagai penilai, untuk mengevaluasi respons agen: kualitas, kesamaan, dan pencocokan teks. Untuk informasi selengkapnya tentang berbagai metode pengujian, lihat Metode pengujian.

Mengedit kasus pengujian dalam kumpulan pengujian

  1. Di halaman Evaluasi agen, pilih set pengujian.

  2. Di set pengujian, pilih kasus pengujian yang ingin Anda edit.

Cuplikan layar yang memperlihatkan daftar kasus pengujian.

  1. Di panel kanan, ubah kata-kata pertanyaan dengan mengedit teks di bidang Pertanyaan.

Cuplikan layar memperlihatkan bidang teks pertanyaan.

  1. Pilih metode pengujian yang ingin Anda gunakan.

Cuplikan layar yang memperlihatkan pilihan metode pengujian.

  • Kualitas:

    • Pilih Kualitas umum untuk mengevaluasi jawaban berdasarkan relevansi, keberdasaran, dan kelengkapan.

    • Pilih Bandingkan makna untuk mengevaluasi jawaban berdasarkan seberapa baik ia menangkap arti respons yang diharapkan. Di nilai lulus, Anda dapat mengatur ambang batas untuk menentukan apa yang merupakan skor lulus untuk jawaban.

      Dalam kotak Respons yang diharapkan, berikan respons yang metode pengujiannya mengevaluasi jawaban agen.

  • Kesamaan: menggunakan metrik kesamaan Kosinus untuk menilai seberapa mirip jawaban agen dengan kata-kata dan makna respons yang diharapkan. Ini menentukan skor antara 0 dan 1, di mana 1 berarti cocok dengan erat dan 0 berarti tidak cocok sama sekali. Di nilai lulus, Anda dapat mengatur ambang batas untuk menentukan apa yang merupakan skor lulus untuk jawaban.

    Dalam kotak Respons yang diharapkan, berikan respons yang metode pengujiannya mengevaluasi jawaban agen.

  • Pencocokan teks:

    • Pilih Kecocokan persis untuk mengevaluasi jawaban agen terhadap respons yang diharapkan, di mana skor yang lolos berarti jawaban agen sama persis dengan respons yang diharapkan yang ditentukan.

      Dalam kotak Respons yang diharapkan, berikan respons yang metode pengujiannya mengevaluasi jawaban agen.

    • Pilih Pencocokan kata kunci untuk mengevaluasi jawaban agen terhadap respons yang diharapkan, di mana skor kelulusan berarti jawaban agen berisi beberapa kata atau frasa dari respons yang diharapkan yang ditentukan.

      Dalam kotak Respons yang diharapkan, berikan frasa atau kata kunci yang metode pengujiannya mengevaluasi jawaban agen. Untuk menambahkan beberapa kata kunci atau frasa, pilih Tambahkan, pilih operator and atau or di antara kotak, dan berikan kata kunci atau frasa.

      Tangkapan layar yang menunjukkan cara menambahkan kata kunci ke respons yang diharapkan yang cocok dengan kata kunci.

  1. Pilih Terapkan.

  2. Setelah selesai dengan perubahan, pilih Simpan untuk menyimpan set pengujian atau Evaluasi untuk menjalankan pengujian.

Menambahkan lebih banyak kasus pengujian ke set pengujian

Saat membuat atau mengedit set pengujian, Anda dapat menambahkan lebih banyak kasus pengujian.

  1. Di halaman Evaluasi agen, pilih set pengujian.

  2. Buat atau tambahkan lebih banyak kasus pengujian secara manual.

Tangkapan layar yang menunjukkan tombol Hasilkan 10 pertanyaan lagi dan Tambahkan kasus secara manual di halaman Tinjau kasus pengujian Anda.

  1. Pilih dan edit kasus pengujian baru untuk menambahkan detail.