公開と開発プロセスでは、島のサムネイルで A/B テストを実行して 2 つの異なる画像を比較し、どちらがよりクリック数とクリックスルー率 (CTR) が高いかを確認する機会がデベロッパーに提供されます。これは、実際のプレイヤーデータに基づいており、エンゲージメントを最適化し、推測に頼る必要性を減らすことで、より素早くイテレーションを行えるようになります。
公開権限を持つチームメンバーのみが、A/Bテストを作成し、テスト完了後に使用するサムネイルを選択できます。
A/Bテストンを開始
A/Bテストは公開プロセスの一部ですが、必須ではありません。 単一のサムネイルの送信方法の詳細については、以下の「テストをキャンセルする」セクションを参照してください。
「プロモーション用マテリアル」タブで、2つのサムネイルを送信します。 A/Bテストを開始するには、以下の操作を行ってください:
2つのサムネイルが異なることを確認します。
他のメディアアセットを追加します。
「次へ」をクリックして続行します。
プロモーションメディア - A/Bサムネイルテスト。
追加のサムネイルは、重複としてフラグ付けされません。
サムネイルを審査
1つのサムネイル画像が審査に失敗すると、島全体も失敗することになり、失敗した画像を修正した後に、公開およびレビュープロセスを再度実行する必要があります。
新規リリース
島の中間A/Bテスト中は新しいリリースを作成できませんが、A/Bテストが完了し、画像が選択されるまで待機する必要があります。 これを実行すると、「新規リリース」ボタンが使用可能になります。
テストをキャンセル
テスト中のどちらかの画像を選択すると、いつでもテストをキャンセルできます。
新しいリリースの作成中で、A/Bテストを行いたくない場合は、単一のサムネイルを使用して先に進むためのオプションがあります。
「A/Bテストをキャンセル」を選択します。
「次へ」をクリックします。 プロンプトが表示されます。
A/Bテストをキャンセル 「単一のサムネイルを使用する」を選択します。
継続して単一のサムネイルを使用していることを確認します。
1つのサムネイルを使用して公開プロセスを続行します。
サムネイルテストメトリック
島が公開されると、各サムネイルでデータが収集されます。 各サムネイルの均等な分布が潜在的なプレイヤーに送信されます。 A/Bテスト済みのサムネイルは、ゲーム内のディスカバリーページ、閲覧および検索に適用されます。 プレイヤーが特定の島のサムネイルを確認すると、前に移動するそのサムネイルが表示されるだけです。
テストは最大90日間実行されます。 結果は、リリースモジュールの下の島の公開ページに表示されます。 次のA/Bテストのデータが使用可能になります。
インプレッション数
クリック数
クリックスルー率(CTR)
テスト結果
テスト開始後は、いつでもサムネイルを選択することでテストを終了できます。 90日が経過した後、自分でテストを終了しない場合、システムが最良の結果に基づいてデフォルトのサムネイルをユーザーに代わって選択します。
サムネイルを選択するには、次の手順を実行します:
サムネイルの行の画像選択プロンプトをクリックします。 ポップアップウィンドウが開きます。
画像を選択します。 「選択」をクリックします。
[Select(選択)]をクリックします
選択されたサムネイルは「選択済み」としてマークされ、「リリース」タブで強調表示されたままの状態になります。一方、選択されなかったサムネイルは選択不可になります。 A/Bテストビューを折りたたむと、リリースの下で日付が入った完了済みテストステータスが表示されます。 選択したサムネイルが全プレイヤーの島の画像として表示される日付をマークします。
90日間のテスト期間が終了した後にサムネイルを選択しなかった場合、システムによって自動的にサムネイルが選択されます。 重要な結果が得られた場合、選択されたサムネイルとして、より高いCTRの画像を割り当てます。 重要な結果が得られない場合、アップロードされた最初のサムネイルAが割り当てられます。
不十分な結果
テスト期間が終了した後に、明確な勝者が出なくなる可能性があります。 この場合、A/Bテストの結果には「不十分な結果」というフラグが付けられます。
この時点では引き続きサムネイルを選択できます。 これを行うと、明確な勝者がいないことを通知するポップアップメッセージが開きます。
A/Bテストのまとめ:
選択したサムネイルの使用を継続するには、「画像を選択」をクリックします。 ポップアップが開きます。
「選択」をクリックして、テストフェーズを完了します。
新しいA/Bテストを作成する場合は、公開と審査プロセスをもう一度実行する必要があります。
A/BテストのFAQ
以下は、A/Bテストプロセスに関する質問の概要です。
A/Bサムネイルテストとは何ですか？
A/Bサムネイルテストでは、異なるサムネイルを比較して、クリックスルー率(CTR)の観点で最適なサムネイルを判断することができます。 この機能により、最も効果的なサムネイルを使用することで、データに基づいたインサイトが提供され、島のエンゲージメントを最適化することができます。
この機能は誰を対象としていますか？
このボタンは、クリックスルー率を向上させるためにサムネイルを調整するために設計されています。
A/Bテストはどのように実施されますか？
2つのサムネイルバリアントをアップロードすると、システムではビューア間で各バリアントを均等に分配します(半分ずつ)。 クリックスルー率(CTR)のメトリックに基づいて、最適なパフォーマンスのサムネイルが推奨されます。
公開中にA/Bサムネイルテストを設定するにはどうすればよいですか？
公開フローの「プロモーション用メディアをアップロード」のステップで、テスト用に追加のサムネイルを追加することができます。
重要:
A/Bテストは、島が審査に合格した後にのみ正常に作成されます。
いずれかのサムネイルのバリアントが審査に合格しない場合、その島を含む全体の投稿が拒否されます。
却下メールでは、どのサムネイルバリアントが却下されたか、両方が却下された場合に明確に説明します。
一方の画像バリアントが通報された場合は、両方の画像が削除されます。
一度にテストできるサムネイルの数はいくつですか？
テストごとに2つのサムネイルバリアントをアップロードできます。 リリースごとに1回のテストが可能です。
複数のA/Bテストを同時に実行できますか？
起動時には、リリースごとに一度に1つのアクティブなテストを実行できます。 新しいリリースを作成する場合、テストを終了するように求められます。
A/Bテストの実行時間はどれくらいですか？
テストの期間はデータ収集速度に応じて異なります。通常は、オーディエンス数とエンゲージメントレベルに応じて数日から数週間の範囲です。 A/Bテストの最大期間は90日間です。 意図的にサムネイルを選択しない場合、90日を経過するとデフォルトのサムネイルが選択されます。 これが実行される前に、テストを手動で終了する必要があります。
勝利のサムネイルを決定するメトリックは何ですか？
システムでは、クリックスルー率(CTR)が考慮され、パフォーマンスの最も高いサムネイルが決定されます。
システムではどのように勝利のサムネイルが推奨されますか？
システムは、クリックスルー率(CTR)とインプレッションのメトリックを分析し、パフォーマンスの最も高いバリアントを決定します。 勝者を視覚的に宣言することはありませんが、非常に高い信頼性が得られたことを視覚的に示します。 自身の判断に基づいてサムネイルを選択できます。
勝利のサムネイルを手動で選択できますか？
はい、システムの推奨事項を上書きして、手動でサムネイルを選択できます。
A/Bテストにおける有意水準とは？
A/Bテストでの「有意な信頼性」は、2つのサムネイルのパフォーマンスの違い(CTR)が乱数によるものではない統計的確実性(90%の信頼度に設定)があることを意味します。
「p値」で測定します(たとえば、90%の信頼度ではp < 0.1)。
フラグメントを除外するために十分なデータ(インプレッション数/クリック数)が必要です。
到達した場合、勝利したサムネイルの方が高い信頼性を持って宣言されます
到達していない場合、テストは勝敗を決定します(明確な勝者なし)。
例:
サムネイルBのCTRがAより5%高く、90%の信頼できる場合、Bの方がパフォーマンスが良いと信頼して得ることができます。 これにより、誤解を招くノイズの多いデータに基づいて判断することがなくなります。
90日経過後にデフォルトのサムネイルはどのように選択されますか？
90 日経過した後、自分でサムネイルを選択しなかった場合、以下のルールに基づいてデフォルトにするサムネイルがシステムによって決定されます。
大きな結果になった場合、優れた画像を島のサムネイルに割り当てます。
重要な結果が得られない場合、サムネイルA(最初にアップロードされたサムネイル)を島のサムネイルに割り当てます。
テスト結果はどこで確認できますか？
結果は、クリエイターポータルのプロジェクトリリースページにあるモジュール内に表示され、各バリアントのパフォーマンスのインプレッション数、クリック数、CTRが表示されます。 また、テストで十分な結果が得られているかどうか、つまり、表示された結果が統計的に信頼できるかどうかも示されます。
プレイヤーはサムネイルが変わったことに気付きますか？
いいえ。フォートナイトで島のサムネイルを初めて表示する際、プレイヤーにはバリアントが割り当てられます。 この割り当ては、プレイヤーアカウントレベルで行われます。 プレイヤーには1つのサムネイルバージョンだけが表示されるため、混乱を防ぎます。