[本文章是發行前版本文件,隨時可能變更。]
測試集是你用來評估客服人員表現的對話集合。 每段對話都代表你希望Agent處理的案例。
Important
- 此為生產就緒型預覽功能。
- 生產就緒型預覽版應受補充使用條款所拘束。
先決條件
一個用 GitHub Copilot 綁帶建立並儲存的代理程式。 請參閱建立Agent(預覽版)。
開始新的評估
開始新的評估:
- 在 Copilot Studio 中開啟您的代理程式。
- 選取評估索引標籤。
- 選擇 新評估。
選取下列其中一個選項:
選項一:從 CSV 檔案上傳對話
在 評估索引標籤的 資料來源區段中,將 CSV檔案拖曳到上傳區,或選取它以瀏覽檔案。
提示
選取 CSV連結以下載正確檔案格式的範本。 最大檔案大小為 5 MB。
檢視匯入的對話並視需要調整。
在右側的「設定測試集」面板中,輸入評估名稱。
選擇 「評估 」來執行評估,或選擇 儲存 以儲存不執行的評估。
選項二:透過 AI 產生對話
- 在索引標籤中,於更多開始方式區段,選取快速對話組合。
- 等待系統根據客服描述、指示和主題產生10次對話。
- 在「審查你的測試案例」清單中審查產生的對話。
- 在 「配置測試集 」面板中,輸入 名稱,然後選擇 評估 或 儲存。
你也可以從評估視窗產生更多對話。 選擇 新增對話>產生 10 次對話。 執行初步評估後,選擇 「新增對話>」、「產生 25 個對話 」或 「產生 50 個對話 」以產生更多對話。
選項 3:手動撰寫對話
- 在 評估 索引標籤的 更多開始方式 區段中,選取 或者,自己撰寫一些問題。
- 在 「檢視你的測試案例 」清單中,選擇 「新增對話>」 以手動建立測試案例。
- 請為每段對話新增一個使用者問題。 可選擇性地加入預期的代理回應。
- 在 配置測試集 面板中,輸入 名稱,並選取 評估 或 儲存。
設定測試組
當您建立或編輯評估時, 配置測試集 面板包含以下選項:
- 名稱:評估所需的必填名稱。
- 測驗方法:評分回答的方法。 一般 品質檢查:回答是否符合相關性與完整性等品質標準。
- 使用者設定檔:執行評估的認證設定檔。 選擇 「管理 」以設定執行測試的設定檔。
編輯測試組中的對話
要編輯測試集中的對話:
- 在 評估 索引標籤中,從 評估 下拉式清單開啟現有的測試組。
- 選取一個對話以編輯其訊息。
- 使用 新增對話 下拉式清單新增更多對話。
- 完成時,請選取 [ 儲存 ]。