Оптимальное распределение потока между A и B

В какой задаче нужен этот расчёт

Распределение участников для снижения дисперсии оценки разницы конверсий с ограничением нижней доли контроля. На практике такой показатель используют, когда нужно описать конкретный набор данных, сравнить варианты или обосновать решение. Оптимальная доля контроля зависит от дисперсий бинарных исходов в обеих группах, но минимальная доля контроля может задаваться деловыми ограничениями.

Поле «Ожидаемая конверсия A» отвечает за первую часть постановки. В исходном примере оно имеет значение 0.1. Это не обязательный норматив, а набор для проверки работы формулы и понимания формата.

Метрика, разделение потока и правило окончания эксперимента должны быть определены до запуска. По этой причине одно итоговое число нельзя переносить на другие исследования, в которых отличается способ измерений, состав участников или условия появления события. В данной задаче «Ожидаемая конверсия A» и «Доверительная вероятность» связаны через nA/nB=√(pA(1−pA))/√(pB(1−pB)); это важно именно для этого расчёта.

Что означают вводимые значения и настройки

Параметр «Ожидаемая конверсия B» задаётся значением 0.14. Вместе с «Ожидаемая конверсия A» он участвует в основной математической модели, а не служит декоративной настройкой формы.

Следующее поле — «Всего пользователей», исходное значение 12000. Его нужно изменять осмысленно: при новой постановке исследовательской задачи полезно оставить прочие условия сопоставимыми.

Вычислитель использует 5 параметров. В частности, «Доверительная вероятность» влияет на расчёт, проверку ограничения или построение дополнительного показателя. Числа и списки требуют согласованных единиц и корректных границ.

Математическое соотношение и проверочный пример

Базовая формула записывается так: nA/nB=√(pA(1−pA))/√(pB(1−pB)). Она описывает именно задачу «Оптимальное распределение потока между A и B», поэтому другой статистический метод может дать другое число при тех же наблюдениях.

Для исходного примера вычисляется показатель «Посетителей контроля» = 5564. Также получается «Посетителей варианта» = 6436. Это разные характеристики, их не стоит смешивать.

Чтобы убедиться в чувствительности, во втором примере изменяется часть исходных параметров. Он даёт «Посетителей контроля» = 5906. Сравнение удобно проводить с одинаковой точностью округления.

Как проверять выводы и не попасть в ловушку

Оптимальность относится к заданным ожидаемым долям и одинаковой цене наблюдений. Если это условие нарушено, полученное число может выглядеть правдоподобно, но не иметь нужного статистического смысла. Особенно важно понимать источник данных.

Оптимальная доля контроля зависит от дисперсий бинарных исходов в обеих группах, но минимальная доля контроля может задаваться деловыми ограничениями. При изменении «Доверительная вероятность» посмотрите не только на главный итог, но и на диагностические величины и границы. Это помогает заметить изменение режима расчёта.

Метрика, разделение потока и правило окончания эксперимента должны быть определены до запуска. Не стоит использовать один автоматический показатель как доказательство качества исходных данных. Для ответственных решений полезны контрольные примеры и независимое повторение анализа. В данной задаче «Ожидаемая конверсия A» и «Доверительная вероятность» связаны через nA/nB=√(pA(1−pA))/√(pB(1−pB)); это важно именно для этого расчёта.

Формула расчёта

Проверенные примеры

Как пользоваться онлайн-калькулятором

1. Введите «Ожидаемая конверсия A» в нужном формате и проверьте единицы измерения.
2. Задайте «Ожидаемая конверсия B» и «Всего пользователей» в соответствии с вашей задачей.
3. Сравните несколько связанных показателей и используйте пример как контроль расчёта.