АНАЛИТИКА · ЛОКАЛЬНЫЙ РАСЧЁТ

Калькулятор A/B-теста

Спланируйте выборку и срок, затем сравните конверсию двух вариантов: эффект, доверительный интервал и проверка распределения трафика.

Какой эффект нужно заметить

Базовая конверсия, %Доля участников с одним целевым событием.Минимальный относительный рост, %При базе 5% рост на 20% означает конверсию 6%, то есть +1 п. п.Участников в сутки, всегоМощность тестаВероятность заметить заданный эффект при выполнении условий модели.

Считайте независимых участников, каждый учитывается один раз. Сессии одного человека и число заказов одного клиента для этого теста не подходят. Вводные остаются в браузере.

Фиксированный план · 50/50

На каждый вариант8 158участников

Ориентир по сроку14 днейполные недели, минимум две

Для перехода 5% до 6% требуется около 16 316 участников. Только по трафику — 9 дней; календарь дополнительно учитывает недельный цикл.

Меньший MDE требует большей выборки. Зафиксируйте одну основную метрику, окно атрибуции и правило остановки до запуска.

Метод расчёта и ограничения

Размер выборки рассчитан нормальным приближением для двух независимых пропорций, равные группы, двусторонний α=0,05. Проверка результата — pooled z-test; 95% интервал разности B−A — Newcombe на основе Wilson. SRM — χ² с одной степенью свободы. Инструмент не корректирует множественные сравнения, повторную остановку и кластеризацию. Для выручки, среднего чека и повторных действий нужен другой анализ.

Условия сравнения

Одна основная бинарная метрика, независимые участники, фиксированное правило остановки. Выручку, повторные события и последовательные эксперименты анализируют отдельно.