除外グループによる相互作用の影響を防ぐ
関連する同時実験の場合、プレイヤーは、偏った結果を防ぐために、実験の 1 つだけを表示することが重要です。 これは除外グループの役割が発揮される場所です。 PlayFab 除外グループを使用すると、相互に除外される実験を作成できます。
除外グループを使用すると、参加対象ユーザー (プレイヤー) が一度に 1 つの実験に参加するように制限します。 これにより、同じユーザーには除外グループ内で重複する実験が表示されなくなります。 つまり、1 つの実験に対して収集されたデータは、両方の実験が同じゲーム フローに設定され、同じプレイヤー セットを対象にしている場合でも、他の実験の影響を受けないことを意味します。
除外グループでは、トラフィックの割り当ては、実験間でプレイヤーのデータが重複することなく行われ、実験ごとにプレイヤーの異なるバケットにランダムに分散されます。 これにより、変換率の変化は、ターゲット対象ユーザーのバイアスや重複を伴わずに正しい実験に起因するクリーンな結果が得られ、相互作用効果が排除されます。
関連性のない実験の場合、プレイヤーが複数の実験の一部になるかどうかは関係ありません。 ただし、同時実行スケジュールまたは重複する実行スケジュールを含む実験が以下のように関連付けられている場合は、各実験専用のプレイヤーを保持することをお勧めします。
- 同じゲーム フローでの構成のバリエーション
- プレイヤーが重複する可能性がある同じじょうごを含む構成のバリエーション
注意
除外グループを使用すると、それぞれがトラフィックについて他のグループと競合するため、実験の統計的能力が低下します。 そのため、実験に関連性があり、相互作用効果が予想される場合に除外グループを使用します。
ゲーム マネージャーと API を使用して、除外グループを使用して実験を作成できます。
除外グループの作成
[ゲーム マネージャー] で以下を実行します。
- [タイトル] に移動します
- 左のメニューから、[実験] を選択します
- ページの右側で [Experiment Settings](実験設定) を選択すると、設定ページが開きます
- [Exclusion Group](除外グループ) で[Add exclusion group](除外グループの追加) を選択します
- グループの名前と説明を入力し、[保存] を選択します。
除外グループの概要ページに移動します。ここには、除外グループの詳細およびそれぞれの利用可能なトラフィックの割合および実験が表示されます。 除外グループを編集および削除できます。
注意
特定の実験が除外グループ内で実行されている場合、その除外グループの下で実験の実行が完了するまで、その除外グループは削除できません。
除外グループを含む実験を作成する
ゲーム マネージャーの [実験] ページから、次の手順を実行します。
- [New Experiment](新しい実験) を選択すると、実験の構成ページが開きます
- [実験の名前]、[説明]、[開始日と開始時刻]、[期間] (最大 90 日) など、実験構成の詳細を入力します
- 実験のターゲットとなる対象プレーヤーを選択します。 既定では、実験の対象プレーヤーは「すべてのタイトル プレーヤーで実行」です。 ラジオ ボタン [プレーヤーのセグメントを選択] を選択し、ドロップダウンで選択することで、セグメントで実験を構成して実行します。
- 相互排他的な実験を実行するには、[除外グループ] を構成します。そのためには [Add exclusion group](除外グループの追加) を選択します。
- 既存の除外グループ名のドロップダウン リストから除外グループを選択
- トラフィック割り当ての割合を入力します。これは、実験の対象となる合計トラフィックの割合です
- トラフィック割り当ての割合が [利用可能な割合] より大きい場合、実験のスケジュール実行または即時実行は持続しません。
- [バリアント] で、[制御バリアント] と [処置バリアント] を定義します
- [スケジュール]、[下書きとして保存]、または [今すぐ実行] を選択します
除外グループを使用して実験を管理する
実験の概要 (ランディング) ページには、使用可能な実験が表示されます。 [実行中] および [スケジュール済み] の実験をタイムライン ビューで表示しています。 [下書き済み] の実験は、同じ ‘進行中’ タブに表示されます。これは、タイムライン カード ビューのすぐ下にあります。
除外グループと関連するトラフィックは、スケジュールおよび下書きの実験に関して編集できます。 使用可能なトラフィックの割合が存在する場合にのみ、実験の除外グループ構成の変更が保持されることに注意してください。