修改測試集內的測試案例

Note

本文說明由標準執行架構驅動的 Agent 或 Agent 流程中所使用的功能。

在 建立測試集期間或之後,你可以透過修改問題措辭或調整預期答案、關鍵字或工具來編輯測試案例。 您可以透過選取每個測試案例旁邊的核取方塊,選擇多個測試案例進行批次編輯。

編輯測試集內的測試案例

  1. 前往你經紀人的 評估 頁面。

    截圖顯示當分頁選擇因螢幕尺寸壓縮時,如何選擇評估分頁。

  2. 選擇測試集。

  3. 在測試集中,選取要編輯的測試案例。

    螢幕擷取畫面顯示測試案例清單。

  4. 透過編輯問題欄位中的文字來更改問題的措辭。

    螢幕擷取畫面顯示問題文字欄位。

  5. 有些測試方法要求每個測試案例都包含預期答案、關鍵字或能力。 把這些資訊加到每個欄位。 欲了解更多關於配置每個測試方法的資訊,請參閱 選擇評估方法。

    測試方法 量值 測試集類型 計分 組態
    一般品質 根據特定特質,測試案例的回應有多好 單一回應或對話 滿分100% None
    內容安全 測試案例的回應是否包含有害內容,如仇恨、暴力、自殘或性內容 單一回應或對話 通過/不通過 內容類型、允許內容安全等級
    比較意義 測試案例答案的意義與預期答案的匹配程度 單一回應 滿分100% 及格分數,預期答案
    工具使用 測試案例是否使用了全部或任何預期的資源 單一回應 通過/不通過 預期能力
    關鍵字匹配 測試案例是否使用全部或任何預期的關鍵字或片語 單一回應或對話 通過/不通過 預期關鍵字或片語
    文字相似性 測試案例答案的文本與預期答案的吻合程度 單一回應 滿分100% 及格分數,預期答案
    完全相符 測試案例的答案是否完全符合預期答案 單一回應 通過/不通過 預期答案
    自定義 測試案例的回應是否符合你定義的標準或期望。 單一回應或對話 通過/不通過(通過定義的標籤標準) 名稱、評估指示、標籤
  6. 選擇 「套用 」以儲存變更到測試案例。

  7. 完成測試集的變更後,選擇 儲存 以儲存測試集,或選擇 評估 以 執行測試。

在測試集中新增更多測試案例

在建立或編輯測試集時,你可以新增更多測試案例。

  1. 在您的代理評估頁面中,選擇測試集。

  2. 選擇 新增問題 或 新增對話。 然後選擇產生或手動新增更多測試案例的選項。

    截圖顯示「產生10個問題」和「手動新增案例」按鈕,位於檢視你的測試案例頁面。

  3. 要新增細節,請選取並 編輯任何新的測試案例。