Как рассчитать размер выборки A/B-теста за 5 простых шагов
Опубликовано: 2022-12-22A/B-тестирование — это фундаментальный процесс, который позволяет вам тестировать области различных элементов вашего веб-сайта, чтобы увидеть, какие методы или дизайн приносят наилучшие результаты для вашей компании.
Но чтобы провести тест, который позволит вам собрать данные, необходимые для оптимизации доходов, вам нужно выбрать лучший размер выборки для A/B-тестирования.
К счастью для вас, мы расскажем, как рассчитать размер выборки для вашего A/B-тестирования, в этом посте блога, так что просто продолжайте читать!
И не забудьте подписаться на нашу бесплатную рассылку новостей, пока вы здесь, чтобы присоединиться к более чем 200 000 других маркетологов, которые получают советы по маркетингу от экспертов и обновления, отправленные прямо на их почтовые ящики!
Не пропустите наши электронные письма для менеджера по маркетингу!
Присоединяйтесь к 200 000 умных маркетологов и получайте самые горячие маркетинговые новости и идеи месяца прямо на свой почтовый ящик!
Введите адрес электронной почты ниже:
(Не волнуйтесь, мы никогда не передадим вашу информацию!)
Понимание размеров и временных рамок выборки A/B-тестирования
Совершенствовать свой план A/B-тестирования — непростая задача. Итак, прежде чем мы углубимся в то, как рассчитать размер выборки для A/B-тестирования, мы разберем, как работает процесс тестирования.
Когда вы проводите A/B-тестирование, вы, по сути, тестируете область своего веб-сайта или маркетинговую стратегию.
Например, предположим, что вы хотите протестировать две версии строки темы вашего электронного письма, чтобы увидеть, какая из них дает самый высокий коэффициент открываемости.
В этом случае вы будете показывать первую строку темы в части списка рассылки с пометкой «A». Затем вы отправите вторую строку темы в другую часть списка рассылки с пометкой «B».
После теста вы отправите строку темы с самым высоким показателем открываемости остальным подписчикам.
После того, как вы решили, что хотите протестировать, следующим шагом будет определение размера выборки и временных рамок.
Каков размер выборки A/B-тестирования?
Размер выборки для A/B-тестирования — это количество людей, которые увидят элемент, который вы хотите протестировать. Из приведенного выше примера строки темы размер вашей выборки — это количество подписчиков электронной почты, которым вы отправите два варианта своей строки темы.
Размер выборки может варьироваться в зависимости от элемента, который вы хотите протестировать. Например, у вас может быть больший размер выборки при тестировании элементов вашего веб-сайта, таких как графика призыва к действию (CTA) или текст заголовка.
С другой стороны, если вы тестируете строку темы электронной почты, вы можете захотеть уменьшить размер выборки, чтобы строка темы с самым высоким показателем открываемости доставалась большинству ваших подписчиков.
Каковы сроки A/B-тестирования?
Временные рамки A/B-тестирования — это количество времени, в течение которого будет выполняться ваш тест. Как и размер вашей выборки, временные рамки также могут варьироваться в зависимости от элемента, который вы хотите протестировать.
Например, вы можете протестировать новый цвет кнопки CTA в течение месяца или дольше. С другой стороны, вы, скорее всего, проведете тестовую строку темы только в течение часа или двух, прежде чем отправить победившую ее остальным своим подписчикам.
Как рассчитать размер выборки A/B-тестирования
Как мы упоминали выше, один размер выборки или временные рамки не подходят для каждого теста, который вы проводите. Итак, давайте углубимся в то, как вы можете определить наилучший размер выборки и временные рамки.
Вот как рассчитать размер выборки для A/B-тестирования:
- Подумайте, есть ли у вас достаточно большой список контактов для примера
- Используйте калькулятор размера выборки для A/B-тестирования
- Введите коэффициент конверсии и минимальный обнаруживаемый эффект в калькулятор.
- Просмотрите свои результаты
- Рассчитайте процент от размера выборки, если это необходимо
1. Подумайте, достаточно ли у вас большой список контактов для примера
Ключом к успешному выполнению A/B-тестирования является получение статистически значимых результатов, позволяющих получить более глубокое понимание.
Другими словами, если вы проводите тест на очень небольшом количестве посетителей веб-сайта или подписчиков электронной почты, вы не сможете собрать достаточно значимых данных, чтобы определить, какая версия теста была наиболее успешной.
Также важно протестировать наименьшую часть вашего общего списка адресов электронной почты или веб-посетителей, чтобы получить значительные результаты, чтобы вы могли провести победный тест для большей части своей аудитории.
Таким образом, для A/B-тестирования выборки вашего списка или посетителей веб-сайта, которые дадут вам значимые результаты, вам понадобится список адресов электронной почты приличного размера или объем веб-трафика.
Мы рекомендуем иметь не менее 1000 человек для проведения A/B-тестирования. Для чего-то меньшего размер вашей выборки должен составлять большую часть вашей общей аудитории, чтобы дать вам достаточно значимые результаты.
И если это так, оставшееся количество зрителей, которые увидят выигрышный элемент из вашего теста, будет настолько малым, что вы могли бы также внедрить новое изменение на своем веб-сайте, чтобы вся ваша аудитория могла видеть, что происходит.
2. Используйте калькулятор размера выборки для A/B-тестирования
Ваш следующий шаг в расчете размера выборки вашего A/B-теста — найти калькулятор размера выборки A/B-теста. Вместо того, чтобы изучать формулу размера выборки для A/B-тестирования, гораздо проще использовать бесплатный калькулятор, который сделает всю работу за вас.
Существует множество удобных калькуляторов, которые позволяют легко определить размер выборки, например, этот от Optimizely.
Некоторые калькуляторы также помогут вам определить идеальные временные рамки для вашего теста. После того, как вы нашли калькулятор, который вам нравится, пришло время ввести некоторые данные, чтобы получить размер выборки.
3. Введите коэффициент конверсии и минимальный обнаруживаемый эффект в калькулятор.
Если вы используете калькулятор размера выборки A/B-теста от Optimizely, вам нужно будет ввести две детали, прежде чем вы сможете определить оптимальный размер выборки для своего теста:
- Базовый коэффициент конверсии. Базовый коэффициент конверсии — это ожидаемый коэффициент конверсии для вашей контрольной группы. Ваша контрольная группа — это количество людей, которые будут просматривать текущий элемент на вашем сайте или в маркетинговом сообщении.
- Минимальный обнаруживаемый эффект . Минимальный обнаруживаемый эффект — это минимальное относительное изменение коэффициента конверсии, которое вы хотели бы обнаружить от нового тестируемого элемента.
4. Просмотрите свои результаты
Следующим шагом в расчете размера выборки A/B-тестирования является просмотр результатов.
После того, как вы введете все необходимые элементы в выбранный вами калькулятор, он покажет оптимальный размер выборки для вашего теста.
Это общее количество членов аудитории, на которых вы хотите протестировать свой новый элемент, чтобы получить значимые результаты, которые позволят вам оптимизировать свои стратегии в будущем.
5. При необходимости рассчитайте процент размера выборки.
В зависимости от вашего A/B-теста и используемого калькулятора вам может потребоваться рассчитать процент от размера выборки A/B-тестирования.
Например, если вы хотите запустить тест строки темы электронной почты, вам может потребоваться выбрать процент от общего числа подписчиков электронной почты, на котором вы хотите запустить тест.
Чтобы рассчитать это число, используйте следующую формулу процентного размера выборки A/B-тестирования:
Размер выборки / 1000 = Процент размера выборки
Та-да! Теперь у вас есть размер выборки, и вы можете начать A/B-тестирование, чтобы приступить к оптимизации вашего веб-сайта и маркетинговых стратегий для увеличения количества потенциальных клиентов и конверсий!
Как выбрать лучший таймфрейм для A/B-тестирования
Теперь, когда вы знаете, как определить наилучший размер выборки для вашего теста, как вы можете найти идеальные временные рамки для того, как долго должен выполняться ваш тест?
Сроки A/B-тестирования могут варьироваться в зависимости от элемента, который вы хотите протестировать, а также от ваших собственных бизнес-целей.
Например, предположим, что вы хотите добавить новую кнопку CTA на свой сайт к началу нового года. В этом случае вы, вероятно, захотите завершить A/B-тестирование к октябрю или ноябрю, чтобы вовремя внедрить лучшую версию на своем веб-сайте.
Если вы отправляете электронное письмо с A/B-тестированием, обычно рекомендуется просмотреть ваши прошлые данные электронной почты, чтобы найти наилучшие временные рамки для вашего теста. Посмотрите на свои данные, чтобы определить, когда ваши клики и открытия начинают снижаться.
Затем убедитесь, что вы запустили свой тест и отправили лучшую версию электронной почты всему вашему списку подписчиков за несколько часов до этого времени, чтобы вы могли максимизировать количество кликов и открытий.
Время повысить уровень продаж
Наш длинный список услуг поможет вам развивать каждый аспект вашего бизнеса с помощью маркетинговых стратегий, которые, как доказано, увеличивают итоговые показатели, такие как доход и конверсии.
За последние 5 лет мы провели более 12,9 МИЛЛИОНОВ транзакций по нашей клиентской базе.
Нужна помощь в определении размера выборки для A/B-тестирования?
Провести идеальное A/B-тестирование, которое выявит данные, необходимые для улучшения ваших кампаний и достижения лучших результатов, — непростая задача.
Если вам сложно разобраться в выборе наилучшего размера выборки для A/B-тестирования или у вас просто нет времени на запуск и анализ тестов, специалисты по цифровому маркетингу в WebFX могут помочь.
Сэкономьте драгоценное время и реализуйте маркетинговые стратегии, основанные на данных, с командой, которая имеет более 1,6 миллиона часов опыта.
Свяжитесь с нами через Интернет или позвоните по телефону 888-601-5359 , чтобы узнать больше о том, как наша команда может помочь вашей компании разработать маркетинговые стратегии, которые принесут доход!