如何使用儀表板來改善您的應用程式
重要
LUIS 將於 2025 年 10 月 1 日淘汰,而自 2023 年 4 月 1 日開始,您將無法建立新的 LUIS 資源。 建議移轉 LUIS 應用程式至交談語言理解,以享有產品持續支援和多語言功能的優點。
當您使用範例語句時,尋找並修正您定型的應用程式意圖問題。 儀表板會顯示整體的應用程式資訊,並強調應修正的意圖。
檢閱儀表板分析是一種反覆式程序,會在您變更和改善模型時重複執行。
針對在意圖中沒有任何範例語句的應用程式 (稱為僅限模式的應用程式),此頁面不會有相關的分析。
可從儀表板修正哪些問題?
儀表板中所解決的三個問題如下:
問題 | 圖表色彩 | 說明 |
---|---|---|
資料失衡 | - | 當範例語句數量的差異很大時,就會發生這種情況。 所有意圖必須有數量大致相同的語句範例,「無」意圖除外。 應用程式中的語句總數量應只有 10%-15%。 如果資料已失衡,但意圖精確度高於特定閾值,則不會將此失衡回報為問題。 從這個問題開始,這可能是其他問題的根本原因。 |
不清楚的預測 | Orange | 這會發生在最上層意圖和下一個意圖的分數已夠接近而可在下一次定型翻轉時,因為有負面取樣或更多範例語句新增至意圖。 |
不正確的預測 | 紅 | 當未針對標籤意圖 (其所在的意圖) 預測範例語句時,就會發生這種情況。 |
正確的預測會以藍色表示。
儀表板會顯示這些問題,告訴您哪些意圖受到影響,並建議您應如何做來改善應用程式。
在定型應用程式之前
在您將應用程式定型之前,儀表板不會包含任何修正的建議。 定型您的應用程式以查看這些建議。
檢查您的發佈狀態
[發佈狀態] 卡包含使用中版本上次發佈的相關資訊。
檢查使用中的版本是否為您想要修正的版本。
這也會顯示任何外部服務、已發佈的區域,以及匯總的端點叫用。
檢閱定型評估
[定型評估] 卡包含應用程式整體精確度的摘要彙總 (依區域)。 分數表示意圖品質。
此圖表會以不同的色彩表示正確預測的意圖以及問題區域。 當您利用建議來改善應用程式時,此分數會增加。
建議的修正會依問題類型分隔,且對您的應用程式而言最重要。 如果您想要檢閱並修正每個意圖的問題,請使用頁面底部的 [具有錯誤的意圖] 卡片。
每個問題區域都有需要修正的意圖。 當您選取意圖名稱時,會開啟 [意圖] 頁面,並將篩選條件套用至語句。 此篩選條件可讓您專注於造成問題的語句。
比較版本之間的變更
對應用程式進行變更之前,請先建立新的版本。 在新版本中,對意圖的範例表達進行建議的變更,然後再次定型。 在 [儀表板] 頁面的 [定型評估] 卡片上,使用 [顯示定型版本的變更] 來比較變更。
藉由新增或編輯範例語句及重新定型來修正版本
修正應用程式的主要方法是新增或編輯範例語句和重新定型。 新的或已變更的語句需要遵循各種語句的指導方針。
新增範例語句應該由下列人員完成:
- 高度了解不同意圖中有哪些語句。
- 了解一個意圖中的語句可能如何與另一個意圖混淆。
- 可以決定是否要將兩個意圖 (經常互相混淆) 摺疊為單一意圖。 如果是這種情況,則必須使用實體來提取不同的資料。
模式和片語清單
分析頁面不會指示何時要使用模式或片語清單。 如果您將其新增,則有助於進行不正確或不明確的預測,但無法協助資料失衡。
檢閱資料失衡
從這個問題開始,這可能是其他問題的根本原因。
[資料失衡] 意圖清單會顯示需要更多語句以修正資料失衡的意圖。
若要修正此問題:
- 將更多語句新增至意圖,然後再次定型。
除非在儀表板上建議,否則請勿將語句新增至「無」意圖。
提示
使用頁面上的第三個區段,[每個意圖的語句] 並使用 [語句 (數目)] 設定,做為需要更多語句的意圖快速視覺化指南。
檢閱不正確的預測
[不正確的預測] 意圖清單會顯示具有語句的意圖,這些意圖可做為特定意圖的範例,但會針對不同意圖進行預測。
若要修正此問題:
- 編輯語句以更明確地了解意圖,並再次定型。
- 如果語句對齊太接近,請合併意圖,並再次定型。
檢閱不清楚的預測
[不清楚的預測] 意圖清單會顯示具有語句的意圖,這些意圖的預測分數與最接近的競爭對手差距並不遠,而因為有負面的取樣,語句的最高意圖可能會在下一次定型時變更。
若要修正此問題;
- 編輯語句以更明確地了解意圖,並再次定型。
- 如果語句對齊太接近,請合併意圖,並再次定型。
每個意圖的語句
這張卡片會顯示各個跨意圖的整體應用程式健康情況。 當您修正意圖及重新定型時,請繼續概覽這張卡片以了解問題。
下圖顯示妥善平衡的應用程式,幾乎沒有任何問題需要修正。
下圖顯示效能不佳的應用程式,有許多問題需要修正。
將滑鼠停留在每個意圖的列上,以取得意圖的相關資訊。
使用 [排序依據] 功能,依問題類型排列意圖,讓您可以著重於該問題最有問題的意圖。
有錯誤的意圖
這張卡片可讓您檢閱特定意圖的問題。 這張卡片的預設檢視是最有問題的意圖,因此您知道所要著重之處。
頂端環圈圖會顯示在三個問題類型上的意圖問題。 如果三個問題類型中有問題,則每個類型都有自己的圖表,以及任何競爭對手意圖。
依問題和百分比篩選意圖
卡片的這個區段可讓您尋找在錯誤臨界值之外的範例語句。 在理想情況下,您希望正確的預測很顯著。 這項百分比是商務和客戶導向。
判斷您對企業感到滿意的閾值百分比。
篩選條件可讓您尋找具有特定問題的意圖:
篩選器 | 建議的百分比 | 目的 |
---|---|---|
最有問題的意圖 | - | 從這裡開始 - 修正此意圖中的語句可改善應用程式,而不是其他修正程式。 |
正確預測低於 | 60% | 這是所選意圖中正確但信賴分數低於閾值的語句百分比。 |
不清楚預測高於 | 15% | 這是所選意圖中與最接近的競爭對手意圖混淆的語句百分比。 |
不正確預測高於 | 15% | 這是所選意圖中不正確預測的語句百分比。 |
預測臨界值正確
信賴的預測信賴分數有哪些? 在應用程式開發開始時,60% 可能是您的目標。 使用 [正確預測低於],並以 60% 的百分比尋找所選意圖中需要修正的任何語句。
預測臨界值不清楚或不正確
這兩個篩選條件可讓您在所選意圖中尋找超過閾值的語句。 您可以將這兩個百分比視為錯誤百分比。 如果您可以接受 10-15% 的預測錯誤率,請將篩選臨界值設為 15%,以找出此值以上的所有語句。