分享方式:


在 Dynamics 365 Customer Insights - Journeys 中的 A/B 測試

Customer Insights - Journeys 使用強大的 A/B 測試來檢查觸發程序型的客戶旅程,讓您深入了解接觸客戶的最好方法。

使用 A/B 測試可測量哪個管道或內容訊息傳遞策略能帶來更高的成功。 每個測試將使用者對照組(A 版本)與變體(B 版本)進行比較。 對照組接收預設體驗。 變體組接收不同的體驗或訊息。 透過比較兩組的結果,您可以確定哪個是最有效的。

範例 1:建立觸發型旅程圖的 A/B 測試

假設您要在有人完成購買時啟用旅程的觸發型旅程圖中測試兩封不同的電子郵件。

  1. 像往常一樣,在電子郵件編輯器中建立您的初始內容。 盡可能設計完內容,並請務必檢查錯誤,以確保其可上線。

  2. 準備好內容後,請移至 Customer Insights - Journeys>參與>旅程,選取現有旅程或建立新旅程。

  3. 選擇旅程後,選擇加號 (+) 新增元素,然後做以下工作:

    • 選取測試哪個變化效能更佳
    • 選取您要測試的管道。 在此範例中,您要測試兩封電子郵件:選取一封做為版本 A,並選取另一封做為版本 B,然後選取建立測試
  4. 選取 A/B 測試圖標時,側邊窗格會開啟。

    A/B 測試側面板。

    此窗格包含下列參數:

    • 顯示名稱:用於識別您的測試,請輸入其名稱。 當您查看哪些測試正在執行時,此名稱會顯示在 A/B 測試面板和客戶旅程分析中。
    • 版本:選擇您在步驟一準備的管道內容 (在此案例中為您要測試的兩封電子郵件)。 您可以透過在旅程建立器中選擇子圖標,或在側面板上進行選擇,來透過下拉式清單做到這一點。
    • 初始對象:這是您希望在獲得結果之前保留不進行 A/B 測試的對象群組。 此選項僅適用於客戶細分型旅程圖,因為您已經有客戶總數可協助您決定要保留多少客戶不予測試。 觸發型旅程沒有此選項,因為客戶是在完成動作時進入旅程。 因此,進入旅程的客戶總數未知。
    • 實驗分佈:選擇您想要的對象分佈。 滑桿自動位於 50-50 上,但您可以將滑桿設定為所需的發佈。 一個版本可以接收的最低值為 10%,最大值為 90%。 請記住,傳統上,A 版本是您的控制組,B 版本是您的變體。
    • 致勝計量:您可以透過選擇致勝計量為您的測試設定獲勝條件:命中次數最多、點擊次數最多或開啟次數最多的版本。 對於這種情況,您希望提高開啟率,因此您選擇開啟率選項。
    • 此測試結束:您還可以在自動結束測試或在特定日期和時間之間做出選擇。 讓測試在結果達到統計顯著性時自動決定入選方。 這意味著一旦確定了明顯的贏家,系統就會將獲勝版本發送給您 觀眾的其餘部分。 落選版本會遭捨棄。 如果您選擇統計顯著性做為結束 A/B 測試的選項,但 30 天後仍無明確入選方時,系統會自動傳送預設版本。
    • 預設版本:最後,選擇預設版本,以防測試不能成功結束。 如果在日期和時間指定的截止日期之前尚未決定入選方,則會自動傳送預設版本。
  5. 到了完成所有設定並準備好發佈旅程的時候,A/B 測試應如下所示:

    A/B 測試側邊面板已設定並準備好用於建立旅程

範例 2:建立客戶細分型旅程圖的 A/B 測試

假設您要建立旅程,迎接本月份加入忠誠計畫的新會員。 您想要測試兩個不同的主旨列來提高開啟率。

您將完成第一個範例中列出的步驟 1 到 3,但您會注意到側邊窗格看起來不一樣。 這是因為對於客戶細分型旅程,您一開始就已得知客戶總數;這可讓您建立兩種類型的 A/B 測試。

  1. 不使用對照組的 A/B 測試:這種 A/B 測試的行為類似於觸發型旅程,客戶會陸續通過測試,直到確定入選方為止。

    不使用對照組的 A/B 測試

  2. 使用對照組的 A/B 測試:這可讓您確切指示系統要測試的客戶數量。 例如,您的客戶細分有 100 名忠誠會員,而您想要先對 20% 或 20 名會員進行測試,讓每個版本分別接收 10 名會員。 進行 A/B 測試後,剩餘的 80 名會員都會收到入選版本。 您隨時都可以根據喜好調整初始對象和分佈。

    使用對照組的 A/B 測試

對於此範例,我們會使用對照組來進行 A/B 測試。 所有其他設定與範例 1 中的設定都一樣。

監視 A/B 測試的生命週期

發佈旅程後,您可將其開啟以追蹤測試的生命週期。

  • 草稿:這些測試尚未執行,因此您仍然可以編輯設定。
  • 進行中:這些是目前正在執行的測試。 設定已鎖定,無法進行重大變更。
  • 已停止:這些測試已停止,行銷人員可以選擇要發送的版本。
  • 已結束:這些測試透過找到具有統計學意義的入選方,或按預定日期和時間結束的時間完成。 無法重複使用已結束的測試。

了解您的結果

目標分析螢幕擷取畫面。

有三種可能的 A/B 測試結果:

  • 測試以一個明確的贏家結束:測試的結論是,一個版本的表現比另一個版本更好。 致勝版本會有一個「致勝」徽章,並發佈給經過旅程漏斗的任何新客戶。
  • 測試沒有定論:測試的結論是,接受者參與 A 版和參與 B 版的機率一樣高。在這種情況下,預設版本將傳送給任何在旅程中漏斗的新客戶。
  • 測試已停止:這表示您或您的一位同事在測試結束前停止了測試。 在這種情況下,您或您的同事指定的版本將傳送給任何在旅程中漏斗的新客戶。

常見問題

  1. 可以使用兩個以上的版本來進行 A/B 測試嗎?
    • 目前不可以。
  2. 為什麼看不到客戶細分型旅程的對照組選項?
    • 如果您放置屬性分支或任何會變更客戶細分總數的圖標,則對照組選項會消失,因為測試完成之前,系統不知道要保留多少客戶不予測試。
  3. 為什麼我的測試會意外結束?
    • 如果選擇以統計顯著性結束測試,系統會嘗試在您發佈旅程後的前 30 天內取得入選方。 如果沒有宣告為入選方的版本,則測試會結束,並將預設版本傳送給其餘對象。