Калькулятор A/B тестов — статистическая значимость
Введите количество посетителей и конверсий для каждого варианта — калькулятор вычислит конверсию, разницу и статистическую значимость результата (95% confidence level).
Часто задаваемые вопросы
Что такое статистическая значимость в A/B тестах?
Статистическая значимость (p-value < 0.05) означает, что различие между вариантами с вероятностью 95% не случайно. Если p-value > 0.05 — собирайте больше данных, результат ненадёжен.
Сколько данных нужно для A/B теста?
Минимум: 100+ конверсий на каждый вариант. Для низкоконверсионных страниц (< 1%) нужны тысячи посетителей. Запускайте тест минимум на 2 полных недели чтобы учесть сезонные колебания трафика.
Чем отличается 95% и 99% confidence level?
95% (p < 0.05) — стандарт для большинства маркетинговых тестов. 99% (p < 0.01) применяют когда цена ошибки высока: изменения цен, важные UX-решения. Чем выше confidence level, тем больше данных нужно.
Что значит «лифт» в A/B тесте?
Лифт (lift) — относительное улучшение конверсии варианта B по сравнению с контролем A. Например, если CR_A = 2%, CR_B = 2.4%, лифт = +20%. Это не прирост в процентных пунктах (0.4%), а именно относительное изменение.
Нужен полноценный SEO-аудит?
Инструменты помогают с точечными задачами. Для системного роста — запросите бесплатный разбор вашего сайта.