Sdílet prostřednictvím


Spouštění experimentů s aplikacemi s testováním A/B

Pomocí Partnerského centra můžete definovat vzdálené proměnné, které můžete načíst za běhu z aplikací pro Univerzální platformu Windows (UPW) a otestovat varianty těchto hodnot s uživateli, abyste identifikovali nejúčinnější hodnoty pro řízení požadovaného chování uživatelů. Aplikace může používat vzdálené proměnné ke konfiguraci prostředí aplikací, jako jsou nákupy v aplikaci, tok registrace, titulky a umístění reklam.

Cílem vašeho testu A/B by mělo být identifikace varianty vzdálených proměnných hodnot, které vám pravděpodobně umožní získat vyšší míru převodu (například další nákupy v aplikaci) tím, že poskytuje poutavější prostředí aplikace. Jakmile zjistíte úspěšnou variantu, můžete okamžitě ukončit experiment a povolit tuto variantu pro celou cílovou skupinu uživatelů z Partnerského centra, aniž byste museli aplikaci znovu publikovat.

Vytvoření a spuštění testu A/B

Pokud chcete vytvořit a spustit test A/B, postupujte takto:

  1. Vytvoření projektu a definování vzdálených proměnných v Partnerském centru. Tento projekt obsahuje proměnné a výchozí hodnoty proměnných pro experimenty.
  2. Code aplikace pro experimentování. Pomocí rozhraní API v sadě SDK služeb Microsoft Store získáte hodnoty vzdálených proměnných z projektu, který jste vytvořili v Partnerském centru, pomocí těchto dat upravíte chování funkce, kterou testujete, a odešlete události zobrazení a převodu událostí do Partnerského centra.
  3. Definujte experiment v Partnerském centru . Vytvořte v projektu experiment, který definuje jedinečné cíle a varianty testu A/B.
  4. Spusťte a spravujte experiment na řídicím panelu Partnerského centra. Aktivujte experiment a pomocí Partnerského centra zkontrolujte výsledky experimentu a dokončete experiment.

Návod, který ukazuje kompletní proces, najdete v tématu Vytvoření a spuštění prvního experimentu s testováním A/B.

Požadavky

Testování A/B v Partnerském centru se podporuje jenom pro aplikace pro UPW.

Než budete moct spouštět experimenty s testováním A/B, musíte nastavit vývojový počítač:

  • Postupujte podle pokynů zde k nastavení vývojového počítače pro vývoj UWP.
  • Nainstalujte sadu SDK Microsoft Store Services. Kromě rozhraní API pro experimenty poskytuje tato sada SDK také rozhraní API pro další funkce, jako je zobrazení reklam a nasměrování zákazníků do Centra Feedback, aby shromáždila zpětnou vazbu k vaší aplikaci.

Osvědčené postupy

Pro nejužitečnější výsledky doporučujeme při spouštění experimentů s testováním A/B postupovat podle těchto doporučení:

  • Zvažte spuštění experimentů s pouze dvěma variantami s randomizovaným rozdělením 50/50 pro přiřazení variant.
  • Spusťte experimenty nejméně 2 – 4 týdny, abyste shromáždili dostatečná data, která jsou statisticky významná a použitelná.

termín Definice
Projekt Kolekce vzdálených proměnných s výchozími hodnotami, ke kterým má vaše aplikace přístup pomocí sady SDK služeb Microsoft Store. Projekt může také volitelně obsahovat jeden nebo více experimentů, které sdílejí stejné vzdálené proměnné.
Pokus Sada parametrů, které definují test A/B, který vaši uživatelé obdrží. Experimenty jsou definovány v oboru projektu a každý experiment se skládá z:

  • Událost zobrazení, která indikuje, kdy uživatel začne zobrazovat variantu, která je součástí experimentu.
  • Jeden nebo více cílů s konverzními událostmi , které označují, kdy bylo dosaženo cíle.
  • Jedna nebo více variant, které definují proměnná data používaná vaším experimentem. Varianta kontroly využívá výchozí hodnoty proměnných, které jsou definovány v projektu pro experiment. Kromě varianty ovládacích prvků mají experimenty obvykle alespoň jednu další variaci s hodnotami proměnných, které jsou pro experiment jedinečné.
ID projektu Jedinečné ID, které přidruží vaši aplikaci k projektu v účtu Partnerského centra. Toto ID musíte použít k připojení ke službě A/B testování ve vašem aplikačním kódu, abyste dostávali data variant a zasílali události zobrazení a konverze do Partnerského centra. Další informace naleznete v tématu Kódování vaší aplikace pro experimentování.

Každý projekt a všechny experimenty v projektu jsou přidružené přesně k jednomu ID projektu. ID projektů můžete použít k rozlišení různých sad experimentů. Můžete mít například jednu sadu experimentů, které vydáváte testerům ve vaší organizaci, a další sadu experimentů, které uvolníte jenom externím uživatelům aplikace. Aplikace může odkazovat na více ID projektů, pokud implementuje více experimentů.

Variace Kolekce jedné nebo více proměnných, které testujete v experimentu. Každý experiment musí mít aspoň jednu proměnnou a dvě varianty (včetně ovládacího prvku). Experiment může mít až pět variant.
Proměnná Hodnota, kterou vaše aplikace používá k inicializaci vlastnosti nebo jiné hodnoty v aplikaci. Během experimentu se hodnota proměnné změní z varianty na variantu. Po ukončení experimentu se proměnné přiřadí hodnota z varianty, kterou vyberete, všem uživatelům aplikace. Proměnné můžou mít následující typy: řetězec, logickou hodnotu, double a celé číslo.
Zobrazit událost Libovolný řetězec, který představuje aktivitu, když uživatel začne zobrazovat variantu, která je součástí experimentu. Obvykle se jedná o název události v kódu. Kód aplikace odešle tento řetězec události zobrazení do Partner Center, když uživatel začne zobrazovat variantu. Další informace naleznete v tématu Kódování vaší aplikace pro experimentování.
Událost převodu Libovolný řetězec, který představuje cíl pro cíl experimentu. Obvykle se jedná o název události v kódu. Kód aplikace odešle tento řetězec události konverze do Partner Centeru, když uživatel dosáhne cíle. Další informace naleznete v tématu Kódování vaší aplikace pro experimentování.