Длительность A/B-теста с заданной мощностью

Практическое назначение расчёта

Исходная задача: Планирует число дней до достаточной мощности с учётом исходной конверсии, ожидаемого эффекта, неравного распределения трафика и рабочих дней. В частности, данные из поля «Базовая конверсия» определяют наблюдаемую совокупность или параметры вероятностного механизма; перед вычислением нужно решить, соответствуют ли они реальной задаче.

Вторая величина формы — «Ожидаемый прирост конверсии», в примере равна 0.025. При самостоятельной проверке полезно изменять её отдельно: так легче оценить, насколько устойчив итог «Необходимые участники суммарно» и не теряются ли существенные детали.

Числовые результаты дополняют друг друга. На представленном наборе «Дней реального набора» составляет 4, а «Календарных недель с учётом рабочих дней» — 1. Такая пара показателей часто помогает обнаружить несоответствие исходных предпосылок ещё до принятия решения.

Что означают и как связаны поля формы

Всего в форме предусмотрено 7 независимых входных параметров. Например, «Базовая конверсия» = 0.08, а «Ожидаемый прирост конверсии» = 0.025. Эти поля имеют разный смысл и используются на соответствующих этапах вычислительного алгоритма.

Поле «Посетителей в сутки» со значением 1300 задаёт ещё одно условие. Его нельзя опускать только потому, что для какого-то конкретного набора данных округлённый первый показатель меняется слабо или остаётся тем же.

Для данного расчёта перечень вводимых величин выглядит так: Базовая конверсия = 0.08; Ожидаемый прирост конверсии = 0.025; Посетителей в сутки = 1300; Доля контроля = 0.5; Уровень значимости = 0.05; Плановая мощность = 0.85; Рабочих дней в неделю = 5. Списки вводятся в согласованном порядке, и каждое значение должно принадлежать своей строке или категории.

Как устроена статистическая модель

Основное соотношение записывается как D=ceil((nA+nB)/трафик). Оно объединяет введённые величины в одну статистическую конструкцию, а не просто возвращает произведение или сумму первого и второго поля.

Для исходных значений «Необходимые участники суммарно» = 4815. Связанный показатель «Дней реального набора» = 4. Если эти результаты противоречат ожиданиям, прежде всего проверьте единицы, знаки исходных значений и выбранную схему расчёта.

Для расчёта второго контрольного примера изменяется именно «Базовая конверсия». Получаем «Необходимые участники суммарно» = 7812. Это демонстрирует зависимость ответа от данных, а не от подписи формы.

Ограничения и интерпретация ответа

Ключевое ограничение метода: Фактическая мощность зависит от независимости участников и стабильности аудитории. Даже если численные проверки пройдены, оно остаётся существенным при переносе результатов на другую совокупность или период наблюдения.

Чтобы не принять случайную особенность выборки за устойчивую закономерность, сопоставьте «Календарных недель с учётом рабочих дней» = 1 с исходной шкалой измерения. Различие параметров может привести к существенному изменению решения, но причина всегда требует содержательной проверки.

В третьем контрольном наборе меняется «Ожидаемый прирост конверсии»; при этом «Необходимые участники суммарно» = 434. При большом расхождении с основным примером стоит проверить выбросы, пропуски, зависимости и предельные условия.

Формула расчёта

Проверенные примеры

Как пользоваться онлайн-калькулятором

1. Укажите наблюдения и параметры исходной задачи.
2. Проверьте единицы и область допустимых значений.
3. Сопоставьте основные статистические характеристики с ограничениями метода.