提高分類器正確性

分類器,如 敏感資訊類型 (SIT) 和 可訓練分類器,常用於各種政策中用以識別敏感資訊。 像大多數這類模型一樣,有時他們會把某個物品標示為敏感,但其實並不敏感。 或者,他們可能沒有將某件物品標示為敏感,但實際上是如此。 這些稱為假陽性和假陰性。

本文將教你如何確認分類器匹配的項目是否為 匹配) (真陽性,或是偽陽性 (不匹配) 並提供 匹配/非匹配 回饋。 你可以利用這些回饋來調整分類器,提高準確度。 如果你想提升 Microsoft 提供的分類器準確度,也可以將文件的塗黑版本以及 MatchNot a Match 的回饋寄給 Microsoft。

配對非配對 」及「 情境摘要 」體驗提供:

  • Data Explorer - 用於 SharePoint 網站、OneDrive 網站
  • 內容檔案總管 - 適用於 SharePoint 網站、OneDrive 網站
  • 敏感資訊類型匹配項目頁面 - 適用於 SharePoint 網站、OneDrive 網站
  • 可訓練分類器匹配項目頁面 - 適用於 SharePoint 網站、OneDrive 網站
  • Microsoft Purview 資料外洩防護 (DLP) 警示頁面 - 適用於 SharePoint 網站、OneDrive 及 Exchange 中的電子郵件
  • Microsoft 威脅防護 (MTP) 警示頁面——適用於 SharePoint 網站、OneDrive 網站及 Exchange 中的電子郵件

獨立的 情境摘要 功能也可在以下地點提供:

  • Microsoft Purview 資訊保護 (MIP) 自動標籤模擬匹配項目——針對 SharePoint 網站、OneDrive 網站

支援的分類器與回饋功能

分類器 背景摘要 已編輯預覽面板 配對與非配對
坐下
自訂 SIT
指紋SIT技術
資料精確匹配 SIT 不*
命名實體 不*
憑證掃描
內建可訓練分類器 是的 **
自訂可訓練分類器

* 這些分類器支援於 MIP:自動標籤模擬匹配項目——適用於 SharePoint 網站與 OneDrive。

** 內建 可訓練分類器 列表,並支援情境摘要。

重要事項

匹配/不匹配回饋與情境摘要體驗支援項目,適用於 SharePoint 網站 & OneDrive 網站——內容探索器、敏感資訊類型及可訓練分類器匹配項目、DLP 警示與 MTP 警示。 Exchange 中的電子郵件 - 用於 DLP 警示與 MTP 警示。 情境摘要體驗支援以下項目:SharePoint 網站與 OneDrive 網站——用於 MIP 模擬匹配項目

分類器精度調校的授權要求

有關授權資訊,請參見

已知限制

以下限制適用於情境摘要與回饋體驗:

  • 上下文摘要只顯示每個項目的匹配數量有限,而非所有匹配。
  • 情境摘要與回饋體驗僅適用於在租戶啟用回饋體驗後所建立或更新的項目。 在此功能啟用前被分類的項目,可能無法提供上下文摘要與回饋體驗。

如何評估比賽準確度並提供回饋

情境摘要體驗,即你指示匹配項目是真陽性 (匹配) 還是假陽性 (非匹配) ,類似於內容探索器、敏感資訊類型匹配項目、可訓練分類器匹配項目、DLP警示及MTP警示。

重要事項

你必須已經部署使用 SIT 或可訓練分類器的 DLP 政策到 OneDrive、SharePoint 站點或 Exchange 信箱。 你也必須先讓項目匹配,才能在任何項目出現在 情境摘要 頁面。

使用 Content Explorer

這個範例展示了如何使用 情境摘要 標籤來給予回饋。

  1. 登入 Microsoft Purview 入口網站>解決方案>資料生命週期管理>探險家>內容探索器
  2. 標籤、資訊類型或類別的篩選器中,輸入你想檢查匹配的 SIT 或可訓練分類器的名稱。
  3. 選擇SIT選。
  4. 選擇位置,並確保 Files 欄位有非零值。 (唯一支援的地點是 SharePoint 和 OneDrive )
  5. 打開資料夾,然後選擇一個文件。
  6. 請在文件的 敏感資訊類型 欄位中選擇連結,查看該項目匹配的 SIT 及 信心等級
  7. 選擇 Close
  8. 打開文件並選擇 「情境摘要 」標籤。
  9. 檢查商品並確認是否符合。
  10. 如果是配對,選擇 接近。 你完了。
  11. 如果不是配對,就選擇 「不配對」。
  12. 如果你選錯了選項,請在關閉旁邊選擇撤回回饋。 這會讓該物品回到 「非配對/ 狀態。
  13. 檢視該項目並刪除或取消任何文字。
  14. 選擇「近」。

使用敏感資訊類型匹配項目頁面

你可以在敏感資訊類型頁面存取相同的「配對」、「非配對」和「情境摘要」回饋選項。

1. 登入 Microsoft Purview 入口網站>解決方案>資料生命週期管理>分類器>敏感資訊類型

  1. 搜尋 欄位輸入你想檢查準確度的 SIT 名稱。
  2. 打開SIT門。 這會跳出 「概覽 」標籤。這裡你可以看到匹配項目數量、不匹配項目數量,以及有回饋項目數量的統計。
  3. 選擇 「配對物品 」標籤。
  4. 打開資料夾並選擇文件。 這裡只支援 SharePoint、OneDrive 這兩個地點。 確保 Files 欄位有非零值。
  5. 在「 敏感資訊類型 」欄位中選擇該項目的連結,查看該項目匹配的 SIT 及 信心等級
  6. 選擇「近」。
  7. 打開一份文件,然後選擇 「情境摘要 」標籤。
  8. 檢查商品並確認是否符合。
  9. 如果是配對,選擇配 ,然後選擇 關閉
  10. 如果不合適,請選擇 「不配對」。
  11. 如果你選錯選項,請在關閉旁邊選擇撤回回饋。 這會讓該物品回到 「非配對/ 狀態。
  12. 選擇「近」。

使用 Trainable 分類器匹配項目頁面

請使用可訓練分類器配對項目頁面來檢視配對並提供回饋:

1. 登入 Microsoft Purview 入口網站>解決方案>資料生命週期管理>分類器>可訓練分類器

  1. 選擇你想檢查準確度的可訓練分類器。
  2. 打開可訓練的分類器。 這會跳出 「概覽 」標籤。這裡你可以看到匹配項目數量、不匹配項目數量,以及有回饋項目數量的統計。
  3. 選擇 「配對物品 」標籤。
  4. 打開資料夾並開啟一份文件。 這裡只支援 SharePoint、OneDrive 這兩個地點。 確保 Files 欄位有非零值。
  5. 打開一份文件,然後選擇 「情境摘要 」標籤。
  6. 檢查商品並確認是否符合。
  7. 如果是配對,先選 配對 ,再選 關閉
  8. 如果不合適,請選擇 「不配對」。
  9. 如果你犯錯,選錯選項,請在關閉旁邊選擇撤回回饋。 這會讓該物品回到 「非配對/ 狀態。
  10. 選擇「近」。

使用資料遺失防護警示頁面

使用DLP警示來檢視匹配的項目並提交回饋:

  1. 登入 Microsoft Purview 入口網站>解決方案>資料遺失防範>警報
  2. 選擇警報。
  3. 選擇 查看詳情
  4. 選擇 活動 標籤。
  5. 最大化 細節 標籤。
  6. 檢查商品並確認是否符合。
  7. 選擇 行動
  8. 如果是匹配,請關閉視窗。 你完了。
  9. 如果不是配對,就選 行動 ,然後選 非配對
  10. 檢視該項目並刪除或取消任何文字。
  11. 關閉視窗。

利用回饋調整分類器

如果你的 SIT 或可訓練分類器根據回饋回傳太多誤判,可以嘗試這些選項來精細並提升準確度。

調整可訓練分類器並帶有回饋

不再支援重新訓練自訂分類器。 如果你需要提升你所建立的可訓練分類器的準確度,請移除分類器,從頭開始使用更大的樣本集。 欲了解更多資訊,請參閱 「開始使用可訓練分類器」。

調整敏感資訊類型與回饋

為提升敏感資訊類型的準確性,請考慮以下調整選項:

  • 提高敏感資訊類型的門檻,以判定嚴重性。 對個別分類器使用不同的閾值是可以的。

  • 了解信心等級及其定義方式。 試著用低信心但高實例數,或高置信度但低實例數。

  • 複製並修改內建的 SIT 以加入其他條件,例如關鍵字的存在、更嚴格的值匹配或更嚴格的格式要求。

  • 修改自訂 SIT 以排除已知的前綴、後綴或模式。 例如,如果你的電子郵件簽名或文件標頭包含電話號碼,自訂的 SIT 偵測電話號碼可能會觸發每封電子郵件。 將貴組織的電話號碼序列排除在自訂 SIT 中,可以防止該規則對每封電子郵件或文件都觸發。

  • 加入更多基於字典的 SIT 作為條件,以縮小匹配範圍,聚焦於那些涉及相關條目的項目。 例如,匹配病患診斷的規則可透過要求包含診斷(diagnostic)、診斷(diagnosis)、狀況(condition)、症狀(sytotom)和病人(patient)等詞彙來強化。

  • 對於命名實體的 SITs,例如 全名,最好設定較高的實例數門檻,例如 10 或 50。 如果個人姓名和社會安全號碼 (社會安全號碼) 同時被偵測到,那麼這些社會安全號碼更有可能是真正的社會安全號碼,我們也能降低因偵測到的社會安全號碼過少而導致政策未觸發的風險。