為Agent建立測試集(預覽版)

[本文章是發行前版本文件,隨時可能變更。]

測試集是你用來評估客服人員表現的對話集合。 每段對話都代表你希望Agent處理的案例。

Important

  • 此為生產就緒型預覽功能。
  • 生產就緒型預覽版應受補充使用條款所拘束。

先決條件

一個用 GitHub Copilot 綁帶建立並儲存的代理程式。 請參閱建立Agent(預覽版)

開始新的評估

開始新的評估:

  1. 在 Copilot Studio 中開啟您的代理程式。
  2. 選取評估索引標籤。
  3. 選擇 新評估

選取下列其中一個選項:

選項一:從 CSV 檔案上傳對話

  1. 評估索引標籤的 資料來源區段中,將 CSV檔案拖曳到上傳區,或選取它以瀏覽檔案。

    提示

    選取 CSV連結以下載正確檔案格式的範本。 最大檔案大小為 5 MB。

  2. 檢視匯入的對話並視需要調整。

  3. 在右側的「設定測試集」面板中,輸入評估名稱

  4. 選擇 「評估 」來執行評估,或選擇 儲存 以儲存不執行的評估。

選項二:透過 AI 產生對話

  1. 索引標籤中,於更多開始方式區段,選取快速對話組合
  2. 等待系統根據客服描述、指示和主題產生10次對話。
  3. 「審查你的測試案例」清單中審查產生的對話。
  4. 「配置測試集 」面板中,輸入 名稱,然後選擇 評估儲存

你也可以從評估視窗產生更多對話。 選擇 新增對話>產生 10 次對話。 執行初步評估後,選擇 「新增對話>」、「產生 25 個對話 」或 「產生 50 個對話 」以產生更多對話。

選項 3:手動撰寫對話

  1. 評估 索引標籤的 更多開始方式 區段中,選取 或者,自己撰寫一些問題
  2. 「檢視你的測試案例 」清單中,選擇 「新增對話> 以手動建立測試案例。
  3. 請為每段對話新增一個使用者問題。 可選擇性地加入預期的代理回應。
  4. 配置測試集 面板中,輸入 名稱,並選取 評估儲存

設定測試組

當您建立或編輯評估時, 配置測試集 面板包含以下選項:

  • 名稱:評估所需的必填名稱。
  • 測驗方法:評分回答的方法。 一般 品質檢查:回答是否符合相關性與完整性等品質標準。
  • 使用者設定檔:執行評估的認證設定檔。 選擇 「管理 」以設定執行測試的設定檔。

編輯測試組中的對話

要編輯測試集中的對話:

  1. 評估 索引標籤中,從 評估 下拉式清單開啟現有的測試組。
  2. 選取一個對話以編輯其訊息。
  3. 使用 新增對話 下拉式清單新增更多對話。
  4. 完成時,請選取 [ 儲存 ]。