А / Б тестови у Dynamics 365 Customer Insights - Journeys
Customer Insights - Journeys користи моћне А / Б тестове како би испитао ваша путовања купаца заснована на окидачу, што вам омогућава да стекнете увид у то како најбоље доћи до својих купаца.
Коришћењем А /Б тестова, можете да измерите који канал или стратегија размене порука са садржајем доводе до већег успеха. Сваки тест пореди контролну групу корисника (верзија А) са варијантом (верзија Б). Контролна група добија подразумевано искуство. Група са варијантом добија другачије искуство или поруку. Поређењем резултата између група можете да утврдите која је најефикаснија.
Пример КСНУМКС: Креирање А / Б теста за путовања заснована на окидачу
Замислимо да желите да тестирате две различите е-поруке на путовању заснованом на окидачу које се активира када неко заврши куповину.
Креирајте почетни садржај у уређивачу е-поште, као и обично. Усавршите садржај и обавезно проверите да ли има грешака како бисте били сигурни да може бити објављен.
Када је ваш садржај спреман, идите на Customer Insights - Journeys> Енгагемент > Јоурнеис и изаберите постојеће путовање или креирајте ново.
Након што изаберете путовање, изаберите знак плус ( +) да додате елемент, а затим урадите следеће:
- Изаберите Тест која варијација ради боље.
- Изаберите своје канале које желите да тестирате. У овом примеру, желите да тестирате два е-маила: изаберите један за верзију А и један за верзију Б, а затим изаберите Креирај тест.
Када изаберете плочицу А / Б теста, отвара се бочно окно.
Панел садржи следеће параметре:
- < ДИЦТ__име за приказ >Дисплаy наме : Да бисте идентификовали свој тест, унесите име за њега. Ово име се приказује на А / Б тест панелу и у аналитици < ДИЦТ__пут који пређе корисник > цустомер јоурнеy када гледате који тестови се покрећу.
- Верзије : Изаберите садржај за канал који сте припремили у корак једном (у овом случају, два е-маила које желите да тестирате). То можете да урадите путем падајуће листе тако што ћете изабрати подређене плочице у алатки за прављење пута или тако што ћете направити избор на бочној табли.
- Почетни корисници : Ово је корисници група коју бисте желели да задржи од А / Б теста пре него што добијете резултате. Ова опција је доступна само за путовања заснована на сегментима, јер већ имате укупан број купаца који ће вам помоћи да одлучите колико желите да задржите. Путовања заснована на окидачу немају ову опцију јер купци улазе када заврше акцију. Као такав, укупан број купаца који улазе на путовање је непознат.
- Дистрибуција експеримента: Изаберите дистрибуцију корисници коју желите. Клизач је аутоматски на броју 50-50, али клизач можете подесити на жељену расподелу. Минимум који верзија може да прими је 10 процената, а максимум 90 процената. Не заборавите да је, традиционално, верзија А ваша контролна група, а верзија Б је ваша варијанта.
- Победничка метрика : Можете подесити победнички услов за свој тест тако што ћете изабрати победничку метрику: Верзија са највише погођених догађаја путовања, највише кликова или највише отварања. У овом случају, желите да повећате своје отворене стопе, тако да ћете изабрати опцију отворене стопе.
- Овај тест се завршава: Такође можете бирати између завршетка теста аутоматски или на одређени датум и време. Дозволите тесту да аутоматски одреди победника када резултати достигну статистичку значајност. То значи да када се утврди јасан победник, систем шаље победничку верзију остатку вашег корисници. Губитничка верзија је одбачена. Ако изаберете статистичку значајност као опцију за завршетак А / Б теста, али нема јасног победника након 30 дана, систем аутоматски шаље подразумевану верзију.
- Подразумевана верзија : На крају, изаберите подразумевану верзију у случају да се тест не заврши успешно. У случајевима када победник није одређен до рока наведеног кроз датум и време, подразумевана верзија се аутоматски шаље.
А / Б тест би требало да изгледа овако до тренутка када све конфигуришете и спремни сте да објавите путовање:
Пример КСНУМКС: Креирање А / Б теста за путовања заснована на сегментима
Замислимо да желите да креирате путовање за добродошлицу новим члановима који су се придружили вашем програму лојалности овог месеца. Желите да повећате своју отворену стопу тестирањем две различите линије предмета.
Завршићете кораке један до три описане у првом примеру, али ћете приметити да бочно окно изгледа другачије. То је зато што са путовањима заснованим на сегментима имате укупан број купаца за почетак; ово вам омогућава да креирате две врсте А / Б тестова.
А / Б тест без контролне групе : Овај А / Б тест се понаша слично путовањима заснованим на окидачу где купци пролазе кроз тест док не дођу док се не одреди победник.
А / Б тест са контролном групом : Ово вам омогућава да кажете систему тачно колико купаца желите да тестирате. На пример, ваш сегмент има 100 чланова лојалности онда желите да прво тестирате на 20 посто или 20 чланова где ће свака верзија добити 10 чланова, респективно. Након А / Б теста, преосталих 80 чланова ће добити победничку верзију. Увек можете подесити почетну корисници и дистрибуцију по свом укусу.
За овај пример, идемо са А / Б тестом са контролном групом. Сва остала подешавања су иста као у првом примеру.
Надгледање животног циклуса А/Б тестова
Након што објавите своје путовање, можете га отворити да бисте пратили животни циклус ваших тестова.
- Нацрт : Ови тестови још нису покренути, тако да и даље можете да измените подешавања.
- У току : Ови тестови се тренутно изводе. Подешавања су закључана и не можете да правите значајне промене.
- Стоппед : Тестови су заустављени и продавац може да изабере коју верзију ће послати.
- Завршен : Ови тестови су завршени проналажењем статистички значајног победника или временским ограничењем када је планирано да се заврши на одређени датум и време. Завршени тестови се не могу поново користити.
Разумевање резултата
Постоје три могућа исхода резултата А/Б теста:
- Тест је закључен са јасним победником : Тест је закључио да једна верзија ради боље од друге. Победничка верзија има значку „победника“ и дистрибуира се новим клијентима који се крећу кроз ток продаје кроз пут.
- Тест није био коначан: Тест је закључио да су примаоци вероватно да се ангажују са верзијом А као и са верзијом Б. У овом случају, подразумевана верзија се шаље свим новим купцима који пролазе кроз путовање.
- Тест је заустављен : То значи да сте ви или неко од ваших сарадника зауставили тест пре него што је могао да се закључи. У овом случају, верзија коју сте навели ви или ваш сарадник се шаље новим клијентима који пролазе кроз ток продаје на путу.
Најчешћа питања
- Могу ли имати А / Б тест са више од две верзије?
- Не у овом тренутку.
- Зашто не видим опцију контролне групе за путовања заснована на сегментима?
- Ако ставите грану атрибута или било коју плочицу која ће променити укупан број сегмент, опција контролне групе нестаје јер систем неће знати колико купаца да задржи док се тест не заврши.
- Зашто се мој тест завршава неочекивано?
- Ако сте одлучили да завршите тест са статистичким значајем, систем покушава да добије победника у првих 30 дана од тренутка када објавите путовање. Ако ниједна верзија није проглашена победником, тест се завршава и подразумевана верзија се шаље преосталим корисници.