Freigeben über


Analysieren von Experimenten

Die Ergebnisse der Experimente werden auf der Seite Experimentdetails und Scorecard angezeigt. Die Scorecard wird in einem regelmäßigen Rhythmus generiert. Die erste Scorecard wird in 12 Stunden generiert, gefolgt von Scorecards alle 24 Stunden für die gesamte Dauer eines Experiments.

Auf der Seite Experimentdetails und Scorecard werden Name, Beschreibung, Start- und Enddatum, beabsichtigte Dauer, Zielgruppe und Variantenanzahl des Experiments aufgelistet. Die Aktionen wie Beenden, Ausführen, Klonen als Entwurf sind auf der Seite basierend auf dem Status des Experiments verfügbar.

Wählen Sie nach Abschluss des Experiments die Registerkartenansicht Abgeschlossen aus, und wählen Sie den Namen des Experiments aus, um die Scorecard zusammen mit den Experimentdetails anzuzeigen. Darüber hinaus können die Scorecard und die Details der ausgeführten Experimente angezeigt werden, indem Sie den Namen des Experiments auswählen.

Notiz

Weitere Informationen zu SRM und dessen Behebung finden Sie im Abschnitt Sample Ratio Mismatch in Experimentation Best Practices and Recommendations (Bewährte Methoden und Empfehlungen für Experimente).

Screenshot: Analysieren eines Experiments

Bei der Experimentausführung:

  • Spieleranzahl, Durchschnitt, Delta, Statistische Signifikanz, P-Wert, P-Bewegung und Stanard-Abweichung werden erzeugt.
  • Wenn ein Problem mit einem SrM (Sample Ratio Mismatch) identifiziert wird, wird es für den Benutzer zur Untersuchung gekennzeichnet.
    • SRM gibt eine Stichprobenverzerrung in der Randomisierung an, was zu den Optionen führt, fehlerlösen (falls vorhanden), das Experiment basierend auf der geschätzten Auswirkung sofort zu beenden oder das Risiko zu übernehmen und das Experiment fortzusetzen.

Nach Abschluss des Experiments:

  • Die statistische Gesamtberechnung jeder Metrik steht zur Analyse zur Verfügung.

Screenshot: Scorecard und Details der

Ausführliche Informationen zur Variante, den zugehörigen Variablen und Außerkraftsetzungen finden Sie unter Konfigurations- und Experimentkonfigurationsseite werden mit Details angezeigt.

Nächste Schritte