A/B сынақтары Dynamics 365 Customer Insights - Journeys

Customer Insights - Journeys триггерге негізделген тұтынушы саяхаттарын тексеру үшін қуатты A/B сынақтарын пайдаланады, бұл сізге тұтынушыларға қалай жетуге болатыны туралы түсінік алуға мүмкіндік береді.

A/B сынақтарын пайдаланып, қай арна немесе мазмұнды хабар алмасу стратегиясы жоғары табысқа әкелетінін өлшеуге болады. Әрбір сынақ пайдаланушылардың бақылау тобын (А нұсқасы) нұсқамен (В нұсқасы) салыстырады. Басқару тобы әдепкі тәжірибені алады. Нұсқалар тобы басқа тәжірибені немесе хабарды алады. Топтардың нәтижелерін салыстыра отырып, қайсысы тиімді екенін анықтауға болады.

1-мысал: Триггерге негізделген саяхаттар үшін A/B сынағын жасау

Біреу сатып алуды аяқтаған кезде іске қосылатын триггерге негізделген саяхатта екі түрлі электрондық поштаны сынағыңыз келетінін елестетіп көрейік.

1. Әдеттегідей электрондық пошта өңдегішінде бастапқы мазмұнды жасаңыз. Мазмұнды жетілдіріңіз және оның тікелей эфирге шығуына көз жеткізу үшін қателерді тексеріңіз.

2. Мазмұн дайын болғанда, Customer Insights - Journeys>Enngement>Сапарлар тармағына өтіп, бар саяхатты таңдаңыз немесе жаңасын жасаңыз.

3. Сапарды таңдағаннан кейін элемент қосу үшін қосу белгісін (+) таңдап, келесі әрекеттерді орындаңыз:

   • Таңдаңыз Қай вариация жақсырақ жұмыс істейтінін тексеріңіз.
   • Тексергіңіз келетін арналарды таңдаңыз. Бұл мысалда екі электрондық поштаны сынағыңыз келеді: біреуін A нұсқасы үшін, екіншісін B нұсқасы үшін таңдаңыз, содан кейін Сынақ жасау таңдаңыз.

4. A/B сынақ тақтасын таңдаған кезде, бүйірлік тақта ашылады.

   

   Таспада келесі параметрлер бар:

   • Көрсетілетін атау: Сынақты анықтау үшін оның атын енгізіңіз. Бұл атау A/B сынақ тақтасында және тұтынушымен өзара қатынас топтамасы талдауларында қай сынақтар орындалып жатқанын қарап жатқанда көрсетіледі.
   • Нұсқалар: бірінші қадамда дайындаған арнаның мазмұнын таңдаңыз (бұл жағдайда тексергіңіз келетін екі электрондық хат). Мұны ашылмалы тізім арқылы саяхат құрастырушысында еншілес тақталарды таңдау арқылы немесе бүйірлік тақтада таңдау жасау арқылы жасауға болады.
   • Бастапқы аудитория: Бұл нәтижелерді алғанға дейін A/B сынағынан бас тартқыңыз келетін аудитория тобы. Бұл опция сегментке негізделген сапарлар үшін ғана қолжетімді, себебі сізде қанша тұтынушыларды ұстағыңыз келетінін шешуге көмектесетін тұтынушылардың жалпы саны бар. Триггерге негізделген сапарларда бұл опция жоқ, себебі тұтынушылар әрекетті аяқтаған кезде кіреді. Осылайша, саяхатқа кіретін тұтынушылардың жалпы саны белгісіз.
   • Экспериментті бөлу: Өзіңізге ұнайтын аудиторияны таратуды таңдаңыз. Жүгірткі автоматты түрде 50-50 шамасында болады, бірақ жүгірткіні қалаған таратуға орнатуға болады. Нұсқа алатын ең азы 10 пайыз, ал ең көбі 90 пайыз. Есіңізде болсын, дәстүрлі түрде А нұсқасы сіздің басқару тобыңыз және В нұсқасы сіздің нұсқаңыз.
   • Жеңіс көрсеткіші: Жеңімпаз көрсеткішті таңдау арқылы сынақ үшін ұтыс шартын орнатуға болады: Ең көп сапар мақсаты оқиғалары тиген, ең көп басу немесе ең көп ашылатын нұсқа. Бұл жағдайда сіз ашық тарифтер опциясын таңдау үшін ашық тарифтеріңізді арттырғыңыз келеді.
   • Бұл сынақ аяқталады: Сондай-ақ, сынақты автоматты түрде немесе белгілі бір күн мен уақытта аяқтауды таңдауға болады. Нәтижелер статистикалық мәнге жеткенде, сынақ жеңімпазды автоматты түрде анықтауға мүмкіндік береді. Бұл 80-95 пайыздық сенімділікпен нақты жеңімпаз анықталғаннан кейін жүйе жеңімпаз нұсқасын қалған аудиторияға жіберетінін білдіреді. Жоғалған нұсқа жойылады. A/B сынағын аяқтау опциясы ретінде статистикалық маңыздылықты таңдасаңыз, бірақ 30 күннен кейін нақты жеңімпаз анықталмаса, жүйе әдепкі нұсқаны автоматты түрде жібереді.
   • Әдепкі нұсқа: Соңында, сынақ сәтті аяқталмаған жағдайда әдепкі нұсқаны таңдаңыз. Жеңімпаз күн мен уақыт бойынша белгіленген мерзімде анықталмаған жағдайда, әдепкі нұсқа автоматты түрде жіберіледі.

5. Барлығын конфигурациялағанда және сіз саяхатты жариялауға дайын болған кезде A/B сынағы келесідей болуы керек:

   

2-мысал: сегментке негізделген саяхаттар үшін A/B сынағын жасау

Осы айда адалдық бағдарламаңызға қосылған жаңа мүшелерді қарсы алу үшін саяхат жасағыңыз келеді делік. Екі түрлі тақырып жолын сынау арқылы ашу жылдамдығын арттырғыңыз келеді.

Бірінші мысалда сипатталған біріншіден үшке дейінгі қадамдарды орындайсыз, бірақ бүйірлік тақтаның басқаша көрінетінін байқайсыз. Себебі сегментке негізделген саяхаттар арқылы сізде тұтынушылардың жалпы саны бар; бұл A/B сынақтарының екі түрін жасауға мүмкіндік береді.

1. Бақылау тобы жоқ A/B сынағы: Бұл A/B сынағы триггерге негізделген саяхаттарға ұқсайды, мұнда тұтынушылар жеңімпаз анықталғанша сынақтан өтеді.

   

2. Бақылау тобымен A/B сынағы: Бұл жүйеге қанша тұтынушыны сынағыңыз келетінін нақты айтуға мүмкіндік береді. Мысалы, сіздің сегментіңізде 100 адалдық мүшесі бар, содан кейін сіз алдымен 20 пайыз немесе 20 мүше бойынша сынақтан өткізгіңіз келеді, мұнда әрбір нұсқа сәйкесінше 10 мүше алады. A/B тестінен кейін қалған 80 мүше жеңімпаз нұсқасын алады. Сіз әрқашан бастапқы аудиторияны және таратуды өз қалауыңыз бойынша реттей аласыз.

   

Бұл мысал үшін біз бақылау тобымен A/B сынағымен айналысамыз. Барлық басқа параметрлер бірінші мысалдағымен бірдей.

A/B сынақтарының өмірлік циклін бақылаңыз

Саяхатыңызды жариялағаннан кейін сынақтарыңыздың өмірлік циклін бақылау үшін оны аша аласыз.

• Жоба : Бұл сынақтар әлі іске қосылмаған, сондықтан сіз әлі де параметрлерді өңдей аласыз.
• Орындалуда : Бұл сынақтар қазір орындалуда. Параметрлер құлыпталған және маңызды өзгерістер енгізу мүмкін емес.
• Тоқтады : Тестілік сынақтар тоқтатылады және маркетолог қай нұсқаны жіберу керектігін таңдай алады.
• Аяқталды: Бұл сынақтар статистикалық маңызды жеңімпазды табу арқылы немесе белгіленген күн мен уақытта аяқталады деп жоспарланған уақытта аяқталды. Аяқталған сынақтарды қайта пайдалану мүмкін емес.

Нәтижелеріңізді түсініңіз

A/B сынақ нәтижесінің үш ықтимал нәтижесі бар:

• Тест айқын жеңімпазмен аяқталды: Сынақ бір нұсқаның екіншісінен жақсырақ жұмыс істейтіндігі туралы қорытындыға келді. Жеңімпаз нұсқада «жеңімпаз» төсбелгісі бар және ол саяхат арқылы өтетін кез келген жаңа тұтынушыларға таратылады.
• Сынақ қорытынды емес: Сынақ алушылардың B нұсқасы сияқты А нұсқасымен жұмыс істеу ықтималдығы бар деген қорытындыға келді. Бұл жағдайда әдепкі нұсқа саяхат арқылы өтетін кез келген жаңа тұтынушыларға жіберіледі.
• Сынақ тоқтатылды: Бұл сіз немесе әріптестеріңіздің біреуі сынақ аяқталмай тұрып тоқтатқанын білдіреді. Бұл жағдайда сіз немесе әріптесіңіз көрсеткен нұсқа сапар арқылы өтетін кез келген жаңа тұтынушыларға жіберіледі.

Жиі қойылатын сұрақтар

1. Неліктен бір нұсқа екіншісіне қарағанда жақсырақ болып көрінсе, менің A/B сынағы көрсеткішім нәтиже бермейді?
   • Кемінде 1000 тұтынушы бар үлкен аудитория үшін жеңімпаз нұсқаның сенімділік деңгейі кемінде 95 пайыз болуы керек. Кішірек аудиторияда сенімділік деңгейі 80 пайызға дейін төмен болуы мүмкін. Сенімділік деңгейі төменірек болса немесе 1000-нан аз аудиторияда сынақтан өтіп жатсаңыз, сізде әрқашан сынақты ертерек аяқтап, өзіңізге ұнайтын нұсқаны жіберу мүмкіндігі бар.
2. Екі нұсқадан көп A/B сынағы бар ма?
   • Қазіргі уақытта емес.
3. Неліктен мен сегменттерге негізделген саяхаттар үшін бақылау тобы опциясын көрмеймін?
   • Сегменттің жалпы санын өзгертетін атрибут тармағын немесе кез келген тақтаны қойсаңыз, басқару тобы опциясы жойылады, себебі жүйе сынақ аяқталғанша қанша тұтынушыны ұстап тұру керектігін білмейді.
4. Неліктен менің тестім күтпеген жерден аяқталды?
   • Егер сіз сынақты статистикалық маңыздылықпен аяқтауды таңдасаңыз, жүйе саяхатты жариялаған сәттен бастап алғашқы 30 күн ішінде жеңімпазды алуға тырысады. Ешбір нұсқа жеңімпаз деп танылмаса, сынақ аяқталады және әдепкі нұсқа қалған аудиторияға жіберіледі.