ニュースレターのA/Bテストの設定方法
この記事では、systeme.ioでニュースレターのA/Bテストを設定する方法について説明します。
開始するには、以下が必要です:
- systeme.ioアカウント
- ニュースレター(ニュースレターを送信または予約配信する方法)
A/Bテストの設定は、ニュースレターのパフォーマンスを最適化するための最も効果的な方法の1つです。この方法では、推測に頼るのではなく、異なるバージョンのメールを比較し、実際にどのような内容が読者の反応を得られるのかを特定できます。
開封率の向上、クリック数の増加、コンバージョンの最大化など、どのような目的であっても、A/Bテストを活用することで、具体的なデータに基づいて判断できます。
この実践的なガイドでは、キャンペーンを最適化してより良い成果を得るために、systeme.ioでA/Bテストを簡単に作成する方法をステップごとに説明します。
1. 仕組みを理解する
Systeme.ioのA/Bテストでは、シンプルで効率的な手順が採用されています。メールの2つのバージョンであるバリエーションAとバリエーションBを作成し、それぞれに1つの明確な違い(件名、内容、CTAなど)を設定します。
A/Bテストを設定する際には、次の2種類のテスト方法から選択できます:
- 最適化:この方法では、成果の高かった勝者が自動的に決定されます。2つのバリエーションは、指定した割合に従って一部の読者に送信されます(たとえば、リストの10%を2つのバージョンに均等に分けます)。設定した待機期間の経過後、プラットフォームが主要な指標(最も高い開封率または最も高いクリック率)に基づいてパフォーマンスを分析し、残りのコンタクトに勝者バリエーションを自動的に送信します。
- 比較:この方法は、純粋な分析を目的としています。両方のバリエーションが、選択した読者の100%に均等な割合(50/50)で送信されます。待機期間や勝者の自動選択はなく、各バージョンのパフォーマンスを並べて直接比較できます。
2. A/Bテストを準備する
A/Bテストを開始する前に、信頼性が高く実用的な結果を得るため、適切に準備することが重要です。
最初のステップは、明確な目標を設定することです:開封率を向上させたいのか、クリック数を増やしたいのか、それともコンバージョンを最適化したいのか?この目標によって、テストすべき要素が決まります。
次に、一度に1つの要素のみをテストすることを強くおすすめします。たとえば、以下の要素をテストできます:
- メールの件名
- 送信者名
- メールの内容
- CTAボタン
複数の要素を同時にテストすると、結果の解釈が難しくなり、得られる結論の有用性が低下します。
また、対象者を適切に選択することも重要です。テストに使用するサンプルは、コンタクトリスト全体の行動を反映できるよう、十分な規模と一貫性を備えている必要があります。
最後に、テスト期間と成功基準(開封率またはクリック率)を設定してください。これにより、勝者バリエーションを明確に特定し、残りの読者への送信を自動化できます。
3. A/Bテストを作成して設定する
Systeme.ioでのニュースレターの作成とA/Bテストの設定は、直感的に行うことができ、わずか数ステップで完了します。
ステップ1:最初のニュースレターを作成する
メールタブでニュースレター(1)を選択し、作成(2)をクリックします。

ニュースレターを作成したら、件名、本文、リンクを設定し、最初のバージョンとなるバリエーションAを作成します。
ステップ2:バリエーションを作成する
最初のバージョンが完成したら、A/Bテストを作成(3)をクリックし、次に確認(4)をクリックしてバリエーションBを作成します。

ニュースレターが同じ内容で複製されます。ページ上部で、以下の設定を行う必要があります:
1. A/Bテストの設定
最初に、テストタイプを選択します。次の2つのオプションがあります:
a. 最適化:勝者を自動的に決定して送信する場合は、こちらを選択します。
「最適化」を選択した場合は、以下の項目を設定する必要があります:
- A/Bテスト期間(5):最初のコンタクトのサンプルに両方のメールバリエーションが送信される期間です。どちらのバリエーションのパフォーマンスが高いかを確実に判断できるだけの十分な反応数を得るため、この期間は適切な長さに設定する必要があります。
ヒント:一般的なキャンペーンでは、通常48~72時間で十分です。数時間だけの設定は避け、コンタクトがメールを開封する時間を確保できるよう、少なくとも24時間は設定してください。
- メール比率(6):バリエーションAとバリエーションBを受信するコンタクトの割合を設定します。たとえば、選択したタグが付いているコンタクトの5%を選択した場合、そのコンタクトにバリエーションAとバリエーションBが送信され、リストの残りの95%には勝者バリエーションが送信されます。
この割合は、統計的に有意な結果を得るために十分な大きさでありながら、一方のバリエーションのパフォーマンスが低かった場合の影響を抑えられる程度に設定する必要があります。
- 勝者バリエーションの判定方法の決定(7):次の2つの基準から選択できます:
- ベストクリック率:リンクに対する実際の反応を測定します。
- ベスト開封率:件名と送信者名に対する関心を測定します。

b. 比較:勝者を自動的に決定せず、50/50の割合でテストする場合は、こちらを選択します。
「比較」を選択した場合、期間、割合、勝者の判定基準を設定する必要はありません。選択した読者の100%に対して、両方のバリエーションが均等な割合(50/50)で送信され、結果を並べて比較できます。

重要:テストタイプが最適化の場合、テストを開始する前に、成功基準を選択してください。その基準で最も高い結果を記録したバリエーションが勝者となり、リストの残りのコンタクトに送信されます。
2. コンタクトの設定
a. X日以上前に登録したコンタクトにのみメールを送信(8):このオプションでは、指定した日数より前に登録したコンタクトのみにニュースレターの送信対象を限定できます。メールを受信できるコンタクトの登録時期を指定するには、日数を入力します。
b. これらのタグを含める(9):ニュースレターを受信するために、コンタクトに付与されている必要があるタグを選択します。選択したタグのうち、少なくとも1つが付与されているコンタクトのみが対象に含まれます。
c. これらのタグを除外する(10):コンタクトがニュースレターを受信しないようにするタグを選択します。選択した除外タグのいずれかが付与されているコンタクトは、含めるタグの条件に一致していても、メールを受信しません。

さらに下にスクロールすると、ニュースレターのコピーがバリエーションBセクション(11)に表示されます。また、バリエーションA(12)をクリックすると最初のバージョンに戻ることができます
このバージョンを編集して、テストする特定の要素(件名、CTA、内容など)に変更を加えます。テストの信頼性を保つため、変更する要素は1つだけにしてください。また、変更内容を保存することも忘れないでください。

4. キャンペーンを開始する
A/Bテストを開始する前に、キャンペーンが円滑に実行されるよう、全体を確認することが重要です。以下の重要な設定を確認してください:
- 対象:選択したコンタクトリストが正しく、目的に合っていることを確認します。
- 送信者:送信者名とメールアドレスが分かりやすく、認識しやすいことを確認します。
- メールの件名:バリエーションAとバリエーションBの件名が内容に関連しており、明確に異なっていることを確認します。
- リンク:すべてのリンクをテストし、エラー、誤ったリダイレクト、リンク切れのページがないことを確認します。
- 表示:デスクトップとモバイルの両方でメールをプレビューし、最適なユーザー体験が得られることを確認します。
確認が完了したら、以下のいずれかを実行できます:
- 保存してA/Bテストを実行する(13):キャンペーンの準備が完了している場合は、A/Bテストをすぐに開始できます。
- 保存してスケジュールを設定する(14):反応を最大化するため、戦略的な日時に送信を予約します。

開始前であれば、A/Bテストをキャンセルする(15)をクリックして、いつでもテストをキャンセルできます。

開始後は、信頼できる結果を得るため、テストが完了するまで変更を加えずに実行してください。プラットフォームがパフォーマンスを自動的に分析し、勝者を決定します。
5. A/Bテストを変更および停止する
A/Bテストを開始すると、メールの内容やテスト全体の設定を変更することはできません。ただし、3点リーダーメニューをクリックし、A/Bテストを停止する(16)をクリックすることで、いつでもA/Bテストを停止できます。

バリエーションがまだ送信されていない場合(最初のテスト用バリエーションと勝者バリエーションのいずれも未送信の場合)、送信は自動的にキャンセルされます。
6. 結果を分析して今後のキャンペーンを最適化する
A/Bテストが完了したら、その結果を長期的なパフォーマンスの改善に活用することが重要です。
3点リーダーメニューをクリックし、統計(17)をクリックすると、統計を確認できます。

まず、開封率やクリック率など、設定した主要な指標を分析します。勝者バリエーションを特定し、2つのバージョンのパフォーマンスの差を確認してください。
単純な結果だけでなく、一方のバージョンのパフォーマンスが高かった理由を理解するために、時間をかけて分析してください:
- 件名がより興味を引く内容でしたか?
- メッセージがより分かりやすい内容でしたか?
- CTAがより目立ち、説得力のある内容でしたか?
この継続的な改善の考え方を取り入れることで、キャンペーンを実施するたびに効果を高めることができます。
7. ニュースレターを再送信する
全体の開封率を向上させるため、最初の送信時にニュースレターを開封しなかった読者に、A/Bテストのニュースレターを簡単に再送信できます。
完了したA/Bテスト横の3点リーダーメニュー(...)をクリックし、開封しなかったコンタクトに再送信(18)を選択します。

送信日時を設定し、複製して予約(19)をクリックします。

重要:
- この操作では、勝者バリエーションのみが、開封しなかったコンタクトに再送信されます。
- 最初のテストで敗者バリエーションを受信したコンタクトは、再送信の対象から自動的に除外されます。
まとめ:テストし、分析し、理解し、最適化することがニュースレターの効果を継続的に最大化するための鍵となります。