A/B-tester i Dynamics 365 Customer Insights - Journeys

Customer Insights - Journeys använder kraftfulla A/B-tester för att undersöka dina kundfärder baserade på utlösande händelser, detta så att du kan få insikter om hur du bäst når dina kunder.

Med hjälp av A /B-tester kan du mäta vilken kanal- eller innehållsmeddelandestrategi som leder till högre framgång. Varje test jämför en kontrollgrupp av användare (version A) med en variant (version B). Kontrollgruppen får en standardupplevelse. Variantgruppen får en annan upplevelse eller ett annat meddelande. Genom att jämföra gruppernas resultat kan du avgöra vilken som är mest effektiv.

Exempel 1: Skapa ett A/B-test för utlösande baserade alternativ

Låt oss föreställa oss att du vill testa två olika e-postmeddelanden på en utlösningsbaserad resa som aktiveras när någon slutför ett köp.

1. Skapa ditt ursprungliga innehåll i e-postredigeraren som vanligt. Fullända innehållet och se till att söka efter fel för att se till att det kan publiceras.

2. När innehållet är färdigt går du till Customer Insights - Journeys>Engagemang>Resor och väljer en befintlig resa eller skapar en ny.

3. När du har valt en färd väljer du plustecknet (+) för att lägga till element och gör sedan följande:

   • Välj Testa vilken variant som presterar bättre.
   • Välj vilka kanaler du vill testa. I det här exemplet vill du testa två e-postmeddelanden: välj en för version A och en för version B och välj Skapa test.

4. När du väljer testpanel för A/B öppnas sidrutan.

   

   Rutan innehåller följande parametrar:

   • Visningsnamn: Om du vill identifiera testet anger du ett namn på det. Namnet visas i A/B-testpanelen och i analysen av kundresa när du tittar på vilka tester som körs.
   • Versioner: Välj innehållet för den kanal du förberedde i steg ett (i det här fallet de två e-postmeddelanden du vill testa). Du kan göra detta genom en listrutan genom att antingen välja underordnade paneler i färdbyggaren eller genom att göra ett val på sidopanelen.
   • Inledande målgrupp: Den målgrupp som du vill hålla tillbaka från A/B-testet innan du får resultaten. Det här alternativet är bara tillgängligt för segmentbaserade kunder eftersom du redan har ett totalt antal kunder som kan hjälpa dig att avgöra hur många du vill hålla tillbaka. Utlösarbaserade resor har inte det här alternativet eftersom kunder går in när de slutför en åtgärd. Som sådan är det totala antalet kunder som går in på resan okänt.
   • Experimentfördelning: Välj den målgruppsfördelning du vill ha. Skjutreglaget är automatiskt på 50-50, men du kan ställa in skjutreglaget på önskad fördelning. Det minsta en version kan ta emot är 10 %, och det maximala värdet är 90 %. Kom ihåg att version A traditionellt är din kontrollgrupp och version B är din variant.
   • Vinnande mått: Du kan ställa in det vinnande villkoret för ditt test genom att välja ett vinnande mått: Den version med flest händelser för resans mål, flest klick eller flest öppningar. I det här fallet vill du öka dina öppna priser så att du väljer alternativet med öppen ränta.
   • Det här testet avslutas: Du kan också välja mellan att avsluta testet automatiskt eller vid ett visst datum och tid. Att låta testet avgöra en vinnare automatiskt när resultaten når statistisk signifikans. Det betyder att när en tydlig vinnare har utsetts, skickar systemet den vinnande versionen till resten av din publik. Den förlorande versionen ignoreras. Om du väljer statistiskt viktiga alternativ som ett alternativ till att avsluta A/B-testet men efter 30 dagar inte är klar skickar systemet automatiskt standardversionen.
   • Standardversion: Välj slutligen en standardversion om testet inte skulle avslutas. I ärenden där en tidsgräns har angetts för ett datum och en annan tidpunkt, skickas standardversionen automatiskt.

5. A/B-testet bör se ut så här när du konfigurerar allt och är redo att publicera resan:

   

Exempel 2: Skapa ett A/B-test för segmentbaserade alternativ

Låt oss anta att du vill skapa en resa för att välkomna nya medlemmar som har fört över ditt lojalitetsprogram den här månaden. Du vill öka antal öppningar genom att testa två olika ämnesrader.

Du kommer att slutföra steg ett till tre i det första exemplet, men du kommer att märka att sidorutan ser annorlunda ut. Detta beror på att man med segmentbaserade resor har ett totalt antal kunder till att börja med, detta låter dig skapa två typer av A/B-tester.

1. A/B-test utan kontrollgrupp: Det här A/B-testet fungerar ungefär som utlösarbaserade tester där kunderna går igenom testet allt eftersom tills en vinnare har fastställts.

   

2. A/B-test med en kontrollgrupp: Detta gör att du kan säga åt systemet exakt hur många kunder du vill testa. Ditt segment har till exempel 100 lojalitetsmedlemmar och du vill testa det på 20 procent eller 20 medlemmar där varje version får 10 medlemmar. Efter A/B-testet får de återstående 80 medlemmarna den vinnande versionen. Du kan alltid justera den initiala målgruppen och distributionen som du vill.

   

I det här exemplet ska vi göra A/B-testa med en kontrollgrupp. Alla de andra inställningarna är samma som i exemplet.

Övervaka livscykeln för A/B-testerna

När du har publicerat din resa kan du öppna den och spåra livscykeln för dina tester.

• Utkast: Dessa tester har inte körts ännu, så du kan fortfarande redigera inställningarna.
• Pågår: Dessa tester körs för närvarande. Inställningarna är låsta och du kan inte göra några större ändringar.
• Stoppad: Dessa tester stoppas och marknadsföraren kan välja vilken version som ska skickas.
• Avslutade: Dessa tester slutfördes genom att hitta en statistiskt signifikant vinnare eller genom timeout när det var planerat att sluta vid ett fastställt datum och tid. Det går inte att återanvända befintliga tester.

Förstå dina resultat

Det finns tre möjliga A/B-testresultat:

• Testet avslutades med en tydlig vinnare: Testet drog slutsatsen att den ena versionen fungerar bättre än den andra. Den vinnande versionen har ett "vinnarmärke" och distribueras till alla nya kunder som förs genom resan.
• Testet var inte slutgiltigt: Testet drog slutsatsen att mottagarna är lika benägna att engagera sig i version A som med version B. I det här fallet skickas standardversionen till alla nya kunder som förs genom färden.
• Testet stoppades: Detta innebär att du eller en av dina medarbetare stoppade testet innan det kunde slutföras. I det här fallet skickas den version som du eller din medarbetare har angett till alla nya kunder som förs genom resan.

Vanliga frågor och svar

1. Kan jag göra ett A/B-test med fler än två versioner?
   • Inte för tillfället.
2. Varför ser jag inte alternativet för kontrollgrupp för segmentbaserad resa?
   • Om du lägger en attributgren eller en panel som ändrar det totala antalet i segmenten försvinner kontrollgruppsalternativet eftersom systemet inte vet hur många kunder som ska vänta tills testet har slutförts.
3. Varför avslutas mitt test oväntat?
   • Om du väljer att avsluta testet med statistiskt syfte försöker systemet få en upptäckt inom de första 30 dagarna efter publiceringen av resan. Om ingen version används avslutas testet och standardversionen skickas till återstående målgrupp.