5 つの簡単なステップで A/B テストのサンプル サイズを計算する方法
公開: 2022-12-22A/B テストは、Web サイトのさまざまな要素の領域をテストして、どの手法やデザインが会社にとって最良の結果をもたらすかを確認できる基本的なプロセスです。
しかし、収益につながる最適化を行うために必要なデータを収集できるテストを実施するには、最適な A/B テスト サンプル サイズを選択する必要があります。
幸いなことに、このブログ投稿では、A/B テストのサンプル サイズを計算する方法について説明しているので、読み続けてください。
無料のニュースレターにサインアップすることを忘れないでください。200,000 人を超える他のマーケターに参加して、マーケティングの専門家のアドバイスや最新情報を受信トレイに直接送信してください!
マーケティング マネージャー インサイダー メールをお見逃しなく!
200,000 人の賢いマーケティング担当者に参加して、今月の最もホットなマーケティング ニュースとインサイトを受信トレイに直接お届けしましょう!
以下にメールアドレスを入力してください:
(ご安心ください、あなたの情報を共有することは決してありません!)
A/B テストのサンプル サイズと時間枠を理解する
A/B テスト計画を完成させるのは簡単なことではありません。 そのため、A/B テストのサンプル サイズを計算する方法について詳しく説明する前に、テスト プロセスのしくみについて説明します。
A/B テストを実施する場合、基本的には、Web サイトまたはマーケティング戦略の領域をテストしています。
たとえば、メールの件名の 2 つのバージョンをテストして、開封率が最も高いものを確認するとします。
その場合、メール リストの「A」というラベルの付いた部分の最初の件名を表示します。 次に、「B」というラベルの付いたメーリング リストの別の部分に 2 番目の件名を送信します。
テスト後、開封率が最も高い件名を残りの購読者リストに送信します。
何をテストするかを決定したら、次のステップはサンプル サイズと期間を決定することです。
A/B テストのサンプルサイズとは?
A/B テストのサンプル サイズは、テストしたい要素が表示される人数です。 上記の件名の例から、サンプル サイズは、件名の 2 つのバリエーションを送信する電子メール サブスクライバーの数です。
サンプル サイズは、テストする要素によって異なります。 たとえば、行動を促すフレーズ (CTA) のグラフィックや見出しのコピーなど、Web サイトの要素をテストする場合は、サンプル サイズを大きくすることができます。
一方、メールの件名をテストしている場合は、サンプル サイズを小さくして、開封率が最も高い件名が大多数の購読者に送信されるようにすることをお勧めします。
A/B テストの時間枠とは何ですか?
A/B テストの時間枠は、テストの実行時間です。 サンプルサイズと同様に、時間枠もテストする要素によって異なります。
たとえば、CTA ボタンの新しい色を 1 か月以上テストする場合があります。 一方で、件名のテストを 1 時間か 2 時間実行してから、勝者を残りのサブスクライバーに送信する可能性があります。
A/B テストのサンプル サイズの計算方法
前述したように、1 つのサンプル サイズまたは時間枠が、実行するすべてのテストに適しているわけではありません。 それでは、実際に最適なサンプル サイズと時間枠を決定する方法について詳しく見ていきましょう。
A/B テストのサンプル サイズを計算する方法は次のとおりです。
- サンプルに対して十分な連絡先リストがあるかどうかを検討してください
- A/B テストのサンプル サイズ計算ツールを使用する
- 変換率と検出可能な最小限の効果を計算機に入力します
- 結果を表示する
- 必要に応じて、サンプル サイズのパーセンテージを計算します
1.サンプルに対して十分な連絡先リストがあるかどうかを検討します
A/B テストを成功させるための鍵は、統計的に有意な結果を得て、詳細な洞察を収集できるようにすることです。
つまり、非常に少数の Web サイト訪問者または電子メール購読者に対してテストを実施すると、どのバージョンのテストが最も成功したかを判断するのに十分な意味のあるデータを収集することができなくなります。
重要な結果を得るには、メーリング リスト全体または Web 訪問者のごく一部をテストして、大多数の聴衆に勝者のテストを実施できるようにすることも不可欠です。
したがって、有意義な結果をもたらすリストまたは Web サイト訪問者のサンプルの A/B テストを行うには、適切なサイズのメーリング リストまたは Web トラフィックの量が必要です。
A/B テストを実施するには、少なくとも 1,000 人のオーディエンス メンバーを用意することをお勧めします。 それよりも小さい場合、十分な意味のある結果を得るには、サンプル サイズが全オーディエンスの過半数を占める必要があります。
その場合、テストで成功した要素を目にするオーディエンス メンバーの残りの数は非常に少ないため、Web サイト全体に新しい変更を実装して、オーディエンス全体に何が起こるかを確認することもできます。
2. A/B テストのサンプルサイズ計算機を使用する
A/B テストのサンプル サイズを計算するための次のステップは、A/B テストのサンプル サイズ計算ツールを見つけることです。 A/B テストのサンプル サイズの式を学習する代わりに、無料の計算機を使用して作業を行う方がはるかに簡単です。
Optimizely のこのような、サンプル サイズを簡単に決定できる便利な計算ツールが数多くあります。
一部の計算機は、テストの最適な時間枠を決定するのにも役立ちます。 気に入った電卓が見つかったら、詳細を入力してサンプル サイズを取得します。
3. コンバージョン率と検出可能な最小効果を計算機に入力します
Optimizely の A/B テスト サンプル サイズ計算機を使用する場合、テストに最適なサンプル サイズを知る前に、次の 2 つの詳細を入力する必要があります。
- ベースライン コンバージョン率:ベースライン コンバージョン率は、コントロール グループの期待されるコンバージョン率です。 コントロール グループは、サイトまたはマーケティング メッセージにある現在の要素を閲覧する人数です。
- 最小の検出可能な効果:最小の検出可能な効果は、テストしている新しい要素から検出できるコンバージョン率の最小の相対的な変化です。
4. 結果を表示する
A/B テストのサンプル サイズを計算する次のステップは、結果を表示することです。
選択した電卓に必要なすべての要素を入力すると、テストに最適なサンプル サイズが表示されます。
これは、将来の戦略を最適化できる有意義な結果を得るために、新しい要素をテストしたいオーディエンス メンバーの合計数です。
5. 必要に応じて、サンプル サイズのパーセンテージを計算します
A/B テストと使用する計算機によっては、A/B テストのサンプル サイズのパーセンテージを計算する必要がある場合があります。
たとえば、メールの件名のテストを実行する場合、テストを実行するメール サブスクライバー全体の割合を選択する必要がある場合があります。
この数値を計算するには、このパーセンテージ A/B テスト サンプル サイズの式を使用します。
サンプル サイズ / 1000 = サンプル サイズの割合
タダ！ これでサンプル サイズが決まりました。A/B テストを開始して、より多くのリードとコンバージョンを得るために、Web サイトとマーケティング戦略の最適化を開始できます。
A/B テストに最適な時間枠を選択する方法
テストに最適なサンプル サイズを決定する方法がわかったので、テストを実行するのに最適な時間枠を見つけるにはどうすればよいでしょうか。
A/B テストの時間枠は、テストする要素やビジネス目標によって異なります。
たとえば、新年の初めまでに Web サイトに新しい CTA ボタンを実装したいとします。 その場合、A/B テストを 10 月または 11 月までに完了して、時間どおりに Web サイトに勝利バージョンを実装できるようにすることをお勧めします。
メールの A/B テストを送信する場合は、通常、過去のメール データを調べて、テストに最適な時間枠を見つけることをお勧めします。 データを見て、クリック数と開封数が減少し始める時間を判断します。
次に、テストを実行し、その時間の数時間前に勝者の電子メール バージョンを購読者リスト全体に送信して、クリック数と開封数を最大化できるようにします。
販売をレベルアップする時が来ました
当社のサービスの長いリストは、収益やコンバージョンなどの収益指標を向上させることが証明されているマーケティング戦略を使用して、ビジネスのあらゆる側面を成長させるのに役立ちます。
過去 5 年間で、当社は顧客基盤全体で1290万件以上の取引を管理してきました。
A/B テストのサンプル サイズの決定にサポートが必要ですか?
キャンペーンを改善してより良い結果を得るために必要なデータを明らかにする完璧な A/B テストを実行することは、簡単なことではありません。
最適な A/B テスト サンプル サイズの選択に頭を悩ませている場合や、単にテストを実行して分析する時間がない場合は、WebFX のデジタル マーケティング スペシャリストがお手伝いします。
貴重な時間を節約し、合計 160 万時間以上の経験を持つチームと共に、データに裏付けられたマーケティング戦略を実施します。
オンラインでお問い合わせいただくか、 888-601-5359までお電話でお問い合わせください。当社のチームが貴社の収益を促進するマーケティング戦略の作成をどのように支援できるかをご確認ください。