A/B テスト

A/B テストでは、単一の通知内での視覚的および行動的な変更を、オーディエンスの一部に対してテストし、最適なものを特定できます。

A/Bテストの作成

A/Bテストは、2つ以上の通知バリアントを追加すると自動的に有効になります。A/Bテストを作成するには:

通知作成ページから、 コンテンツ セクションを見つけます。最初の通知は通知タブの下に表示されます。
緑色の + ボタンをバリアントタブの横でクリックします。2つのオプションを含むドロップダウンが表示されます:
- 空のテストバリアントを追加 — まったく新しい空のバリアントを作成し、最初から設定できます。
- 通知を複製 — 現在の通知の内容があらかじめ入力された新しいバリアントを作成します。
2つ目のバリアントが追加されると、タブは自動的に次のように名前が変更されます バリアントA, バリアントB、以降同様です。
各バリアントタブをクリックして、それぞれの内容を独立して設定できます — タイトル、本文、画像、ランディングURL、その他のコンテンツ項目を変更できます。

⚠️ テスト名とトラフィック配分のオプションは、複数のバリアントが追加された場合、フォームの最後に表示されます。

各バリアントタブには 3点メニュー ( ⋮ ）があり、そのバリアントを管理するためのオプションを提供します。

複数のバリアントが存在する場合、各バリアントタブのメニューには以下が含まれます:

テストに名前を付けることは、そのテストを構成する通知を将来識別するため、またプラットフォーム内でのレポートや分析の目的でパフォーマンスを識別するために重要です。

テスト名は重複して使用できません。同じテストを複数回実施したい場合は、テスト名に日付を追加することをお勧めします。

例: 画像テスト / 2020-02-10

テストしたい各バリアントを作成したら、ページ右上の テスト配信 セクションで、テストを対象ユーザーにどのように配信するかを決定できます。

分割配信では、各バリアントを受け取る対象ユーザーの割合を選択できます。この配信タイプにより、既に効果が確認されている内容で高いクリック率を維持しながら、対象ユーザーの少ない割合で新しいバリアントをテストできます。

サンプル配信では、最も高いパフォーマンスを示した通知を残りの対象ユーザーに配信する前に、対象ユーザーの一定割合を各バリアントに配信します。

スライダーを使用して、各バリアントと勝者が受け取る対象ユーザーの割合を決定します。各バリアントは対象ユーザーの配信の少なくとも5%を受け取る必要があります。

サンプル配信が選択されると 勝者の戦略 セクションが表示され、最も高いパフォーマンスを示したバリアントを残りの対象ユーザーにいつ配信するかを決定できます。このタイミングを設定する方法は2つあります:

このオプションは、購読者が5,000人未満のオーディエンスでは利用できません。

サンプル配信テストを実行する場合、パフォーマンス制約を有効にするオプションがあります。A/Bテストで配信されたバリアントのいずれも、パフォーマンス制約で設定したCTR値に達しない場合、残りの対象ユーザーには通知は配信されません。

最終更新 2 日前