為Agent建立測試集(預覽版)

[本文章是發行前版本文件,且隨時可能變更。]

測試集是你用來評估客服人員表現的對話集合。 每段對話都代表你希望Agent處理的案例。

Important

  • 此為生產就緒型預覽功能。
  • 生產就緒型預覽受補充使用規定規範限制。

先決條件

使用 GitHub Copilot 環境建立並儲存的代理程式。 請參閱建立Agent(預覽版)。

開始新的評估

開始新的評估:

  1. 在 Copilot Studio 中開啟您的代理程式。
  2. 選取評估索引標籤。
  3. 選擇 新評估。

Note

消耗 Copilot Credits 的體驗會顯示「使用 Copilot Credits」徽章,讓你在執行前知道哪些行動會消耗 Credits。 在 了解預估信用使用量的部分了解更多。

選取下列其中一個選項:

選項一:從 CSV 檔案上傳對話

  1. 在 評估索引標籤的 資料來源區段中,將 CSV檔案拖曳到上傳區,或選取它以瀏覽檔案。

    Tip

    選取 CSV連結以下載正確檔案格式的範本。 最大檔案大小為 5 MB。

  2. 檢視匯入的對話並視需要調整。

  3. 在右側的「設定測試集」面板中,輸入評估名稱。

  4. 選擇 「評估 」來執行評估,或選擇 儲存 以儲存不執行的評估。

選項二:透過 AI 產生對話

  1. 在評估索引標籤中,於更多開始方式區段中,選取快速對話集。
  2. 等待系統根據客服描述、指示和主題產生10次對話。
  3. 在「檢視您的測試案例」清單中查看生成的對話。
  4. 在 「配置測試集 」面板中,輸入 名稱,然後選擇 評估 或 儲存。

你也可以從評估視窗產生更多對話。 選擇 新增對話>產生 10 次對話。 執行初步評估後,選擇 「新增對話>」、「產生 25 個對話 」或 「產生 50 個對話 」以產生更多對話。

選項 3:手動撰寫對話

  1. 在 評估 索引標籤的 更多開始方式 區段中,選取 或者,自己撰寫一些問題。
  2. 在 檢閱測試案例 清單中,選取 新增對話>撰寫,以手動建立測試案例。
  3. 請為每段對話新增一個使用者問題。 可選擇性地加入預期的代理回應。
  4. 在 配置測試集 面板中,輸入 名稱,並選取 評估 或 儲存。

設定測試組

當您建立或編輯評估時, 配置測試集 面板包含以下選項:

  • 名稱:評估所需的必填名稱。
  • 測驗方法:評分回答的方法。 一般 品質檢查:回答是否符合相關性與完整性等品質標準。
  • 使用者設定檔:執行評估的認證設定檔。 評估會使用目前已登入使用者的個人資料。 若要用不同使用者設定檔進行評估,請先登出,然後在開始評估前先用該帳號登入。

編輯測試組中的對話

若要編輯測試集中的對話:

  1. 在 評估 索引標籤中,從 評估 下拉式清單開啟現有的測試組。
  2. 選取一個對話以編輯其訊息。
  3. 使用 新增對話 下拉式清單新增更多對話。
  4. 完成時,請選取 [ 儲存 ]。