การทดสอบ A/B ใน Dynamics 365 Customer Insights - Journeys

Customer Insights - Journeys ใช้การทดสอบ A/B ที่มีประสิทธิภาพเพื่อตรวจสอบการเดินทางของลูกค้าตามทริกเกอร์ของคุณ เพื่อช่วยให้คุณได้รับข้อมูลเชิงลึกเกี่ยวกับวิธีการเข้าถึงลูกค้าของคุณได้ดีที่สุด

เมื่อใช้การทดสอบ A/B คุณสามารถวัดว่ากลยุทธ์การส่งข้อความของช่องทางหรือเนื้อหาใดที่นําไปสู่ความสําเร็จที่สูงขึ้น การทดสอบแต่ละครั้งจะเปรียบเทียบกลุ่มผู้ใช้ควบคุม (เวอร์ชัน A) กับตัวแปร (เวอร์ชัน B) กลุ่มควบคุมจะได้รับประสบการณ์เริ่มต้น กลุ่มตัวแปรจะได้รับประสบการณ์หรือข้อความที่แตกต่างกัน โดยการเปรียบเทียบผลลัพธ์ของกลุ่ม คุณสามารถกําหนดได้ว่าแบบใดมีประสิทธิภาพมากที่สุด

ตัวอย่างที่ 1: การสร้างการทดสอบ A/B สำหรับการเดินทางตามทริกเกอร์

สมมติว่าคุณต้องการทดสอบอีเมลสองฉบับที่แตกต่างกันในการเดินทางตามทริกเกอร์ ซึ่งจะเปิดใช้งานเมื่อมีคนซื้อเสร็จสมบูรณ์

1. สร้างเนื้อหาเริ่มต้นของคุณ ในตัวแก้ไขอีเมล ตามปกติ ทำให้เนื้อหาสมบูรณ์แบบมากที่สุดและตรวจสอบว่าไม่มีข้อผิดพลาดเพื่อให้แน่ใจว่าสามารถใช้งานได้จริง

2. เมื่อเนื้อหาของคุณพร้อม ไปที่ Customer Insights - Journeys>การมีส่วนร่วม>การเดินทาง และเลือกการเดินทางที่มีอยู่ หรือสร้างใหม่

3. หลังจากที่คุณเลือกการเดินทางแล้ว ให้เลือกเครื่องหมายบวก (+) เพื่อเพิ่มองค์ประกอบ แล้วจากนั้น ทําดังต่อไปนี้:

   • เลือก ทดสอบว่ารูปแบบใดทำงานได้ดีกว่า
   • เลือกช่องทางของคุณที่คุณต้องการทดสอบ ในตัวอย่างนี้ คุณต้องการทดสอบอีเมลสองฉบับ: เลือกฉบับหนึ่งสำหรับเวอร์ชัน A และอีกฉบับสำหรับเวอร์ชัน B จากนั้นเลือก สร้างการทดสอบ

4. เมื่อคุณเลือกไทล์การทดสอบ A/B บานหน้าต่างด้านข้างจะเปิดขึ้น

   

   บานหน้าต่างประกอบด้วยพารามิเตอร์ต่อไปนี้:

   • ชื่อที่แสดง: ป้อนชื่อเพื่อระบุการทดสอบของคุณ ชื่อนี้จะแสดงในแผงการทดสอบ A/B และในการวิเคราะห์การเดินทางของลูกค้า เมื่อคุณดูว่าการทดสอบใดกำลังทำงานอยู่
   • เวอร์ชัน: เลือกเนื้อหาสำหรับช่องทางที่คุณเตรียมไว้ในขั้นตอนที่หนึ่ง (ในกรณีนี้ อีเมลสองฉบับที่คุณต้องการทดสอบ) คุณสามารถทําได้ผ่านรายการดรอปดาวน์โดยเลือกไทล์รองในเครื่องมือสร้างการเดินทาง หรือโดยการเลือกบนแผงด้านข้าง
   • ผู้ชมเริ่มต้น: นี่คือกลุ่มผู้ชมที่คุณต้องการระงับการทดสอบ A/B ก่อนที่คุณจะได้ผลลัพธ์ ตัวเลือกนี้ใช้ได้สำหรับการเดินทางตามเซ็กเมนต์เท่านั้น เนื่องจากคุณมีจำนวนลูกค้าทั้งหมดแล้ว เพื่อช่วยคุณตัดสินใจว่าคุณต้องการระงับจำนวนเท่าใด การเดินทางตามทริกเกอร์ไม่มีตัวเลือกนี้เมื่อลูกค้าเข้ามา เมื่อพวกเขาดำเนินการเสร็จสิ้น ดังนั้นจึงไม่ทราบจำนวนลูกค้าที่เข้าสู่การเดินทางทั้งหมด
   • การกระจายการทดลอง: เลือกการกระจายของผู้ชมที่คุณต้องการ แถบเลื่อนจะอยู่ที่ 50-50 โดยอัตโนมัติ แต่คุณสามารถตั้งค่าแถบเลื่อนเป็นการกระจายที่คุณต้องการได้ ขั้นต่ำที่เวอร์ชันสามารถรับได้คือ 10 เปอร์เซ็นต์ และสูงสุดคือ 90 เปอร์เซ็นต์ โปรดจําไว้ว่าเวอร์ชัน A คือกลุ่มควบคุม และเวอร์ชัน B เป็นตัวแปรของคุณ
   • เมตริกการชนะ: คุณสามารถกำหนดเงื่อนไขการชนะสำหรับการทดสอบของคุณได้โดยเลือกเมตริกการชนะ: เวอร์ชันที่มีเหตุการณ์เป้าหมายการเดินทางมากที่สุด ได้รับคลิกมากที่สุด หรือเปิดมากที่สุด สำหรับกรณีนี้ คุณต้องการเพิ่มอัตราการเปิด ดังนั้นคุณจะเลือกตัวเลือกอัตราการเปิด
   • การทดสอบนี้สิ้นสุดลง: คุณยังสามารถเลือกระหว่างการสิ้นสุดการทดสอบโดยอัตโนมัติหรือในวันที่และเวลาที่ระบุได้ด้วย ให้การทดสอบตัดสินผู้ชนะโดยอัตโนมัติ เมื่อผลลัพธ์มีนัยสำคัญทางสถิติ ซึ่งหมายความว่า เมื่อมีการระบุผู้ชนะที่ชัดเจนแล้ว ระบบจะส่งเวอร์ชันที่ชนะให้กับคนอื่นๆ ใน ผู้ชม รุ่นที่แพ้จะถูกยกเลิก หากคุณเลือกนัยสำคัญทางสถิติเป็นตัวเลือกเพื่อสิ้นสุดการทดสอบ A/B แต่ไม่มีผู้ชนะที่ชัดเจนหลังจาก 30 วัน ระบบจะส่งเวอร์ชันเริ่มต้นโดยอัตโนมัติ
   • เวอร์ชันเริ่มต้น: สุดท้าย ให้เลือกเวอร์ชันเริ่มต้น ในกรณีที่การทดสอบไม่จบลงแบบประสบความสำเร็จ ในกรณีที่ไม่ได้กำหนดผู้ชนะตามกำหนดเวลาที่ระบุผ่านวันที่และเวลา ระบบจะส่งรุ่นเริ่มต้นโดยอัตโนมัติ

5. การทดสอบ A/B ควรมีลักษณะดังนี้ เมื่อคุณกำหนดค่าทุกอย่างแล้ว และคุณพร้อมที่จะเผยแพร่การเดินทาง:

   

ตัวอย่างที่ 2: การสร้างการทดสอบ A/B สำหรับการเดินทางตามเซ็กเมนต์

ลองจินตนาการว่าคุณต้องการสร้างการเดินทางเพื่อต้อนรับสมาชิกใหม่ที่เข้าร่วมโปรแกรมสมาชิกของคุณในเดือนนี้ คุณต้องการเพิ่มอัตราการเปิดของคุณโดยการทดสอบหัวเรื่องที่แตกต่างกันสองบรรทัด

คุณจะต้องทำตามขั้นตอนที่หนึ่งถึงสามที่ระบุไว้ในตัวอย่างแรก แต่คุณจะสังเกตเห็นว่าบานหน้าต่างด้านข้างดูแตกต่างออกไป นี่เป็นเพราะการเดินทางตามเซกเมนต์ คุณมีจำนวนลูกค้าทั้งหมดที่จะเริ่มต้น สิ่งนี้ทำให้คุณสามารถสร้างการทดสอบ A/B ได้สองประเภท

1. การทดสอบ A/B โดยไม่มีกลุ่มควบคุม: การทดสอบ A/B นี้ทำงานคล้ายกับการเดินทางที่อิงตามทริกเกอร์ ซึ่งลูกค้าดำเนินการผ่านการทดสอบเมื่อพวกเขามาถึงจนกว่าจะมีการกำหนดผู้ชนะ

   

2. การทดสอบ A/B ที่มีกลุ่มควบคุม: สิ่งนี้ทำให้คุณสามารถบอกระบบได้อย่างชัดเจนว่าคุณต้องการทดสอบลูกค้ากี่ราย ตัวอย่างเช่น กลุ่มของคุณมีสมาชิกประจำ 100 คน จากนั้นคุณต้องการทดสอบกับสมาชิก 20 เปอร์เซ็นต์หรือ 20 คนก่อน โดยแต่ละเวอร์ชันจะได้รับสมาชิก 10 คนตามลำดับ หลังจากการทดสอบ A/B สมาชิกที่เหลืออีก 80 คนจะได้รับเวอร์ชันที่ชนะ คุณสามารถปรับผู้ชมเริ่มต้นและการกระจายตามที่คุณต้องการได้ตลอดเวลา

   

สำหรับตัวอย่างนี้ เราจะทำการทดสอบ A/B ที่มีกลุ่มควบคุม การตั้งค่าอื่นๆ ทั้งหมดจะเหมือนกับในตัวอย่างที่หนึ่ง

ตรวจสอบวงจรชีวิตของการทดสอบ A/B ของคุณ

หลังจากที่คุณเผยแพร่การเดินทางของคุณแล้ว คุณสามารถเปิดเพื่อติดตามวงจรชีวิตของการทดสอบของคุณได้

• ฉบับร่าง: การทดสอบเหล่านี้ยังไม่ได้ดําเนินการ ดังนั้นคุณยังคงสามารถแก้ไขการตั้งค่าได้
• กำลังดำเนินการ: การทดสอบเหล่านี้กำลังดำเนินการอยู่ในขณะนี้ การตั้งค่าถูกล็อกและคุณไม่สามารถทําการเปลี่ยนแปลงที่สําคัญได้
• ถูกหยุด : การทดสอบเหล่านี้ถูกหยุดและนักการตลาดสามารถเลือกเวอร์ชันที่จะส่งได้
• สิ้นสุดแล้ว: การทดสอบเหล่านี้เสร็จสมบูรณ์โดยการค้นหาผู้ชนะที่มีนัยสําคัญทางสถิติ หรือตามกําหนดเวลา เมื่อกําหนดเวลาสิ้นสุดตามวันที่และเวลาที่กําหนด ไม่สามารถใช้การทดสอบที่สิ้นสุดแล้วซ้ำได้

ทําความเข้าใจผลลัพธ์ของคุณ

ผลลัพธ์ของผลการทดสอบ A/B ที่เป็นไปได้มี 3 แบบ ดังนี้

• การทดสอบสรุปด้วยผู้ชนะที่ชัดเจน: การทดสอบสรุปว่าเวอร์ชันหนึ่งทํางานได้ดีกว่าอีกเวอร์ชัน เวอร์ชันที่ชนะจะมีตรา "ผู้ชนะ" และแจกจ่ายให้กับลูกค้าใหม่ๆ ที่เข้ามาในการเดินทางนี้
• การทดสอบไม่ได้ข้อสรุป: การทดสอบสรุปว่าผู้รับมีแนวโน้มที่จะมีส่วนร่วมกับเวอร์ชัน A เช่นเดียวกับเวอร์ชัน B ในกรณีนี้ ระบบจะส่งเวอร์ชันเริ่มต้นไปยังลูกค้าใหม่ที่เข้ามาในการเดินทาง
• การทดสอบหยุดลง: หมายความว่าคุณหรือเพื่อนร่วมงานคนหนึ่งของคุณหยุดการทดสอบก่อนที่จะได้ข้อสรุป ในกรณีนี้ เวอร์ชันที่คุณหรือเพื่อนร่วมงานของคุณระบุจะมีการส่งไปยังลูกค้าใหม่ที่เข้ามาในการเดินทาง

คำถามที่ถามบ่อย

1. ฉันสามารถทำการทดสอบ A/B ที่มีมากกว่าสองเวอร์ชันได้หรือไม่
   • ไม่ใช่ตอนนี้
2. เหตุใดฉันจึงไม่เห็นตัวเลือกกลุ่มควบคุมสำหรับการเดินทางตามเซกเมนต์
   • หากคุณใส่สาขาแอตทริบิวต์หรือไทล์ใดๆ ที่จะเปลี่ยนแปลงจำนวนรวมของเซ็กเมนต์ ตัวเลือกกลุ่มควบคุมจะหายไปเนื่องจากระบบจะไม่ทราบว่ามีลูกค้ากี่รายที่ต้องระงับจนกว่าการทดสอบจะเสร็จสิ้น
3. เหตุใดการทดสอบของฉันจึงสิ้นสุดลงโดยไม่คาดคิด
   • หากคุณเลือกที่จะยุติการทดสอบด้วยนัยสำคัญทางสถิติ ระบบจะพยายามหาผู้ชนะภายใน 30 วันแรกนับจากเวลาที่คุณเผยแพร่การเดินทาง หากไม่มีเวอร์ชันใดได้รับการประกาศให้เป็นผู้ชนะ การทดสอบจะสิ้นสุดลงและเวอร์ชันเริ่มต้นจะถูกส่งไปยังผู้ชมที่เหลือ