Какой вопрос решает этот расчёт
Распределение участников между вариантами с разной конверсией и стоимостью наблюдения. Оптимальная пропорция зависит не только от конверсии, но и от стоимости получения каждого наблюдения. Важное отличие этого калькулятора — возможность менять исходные величины, не пересчитывая формулы вручную. При таком сравнении видно, какие допущения действительно определяют численный результат и где возникает чувствительность оценки.
Эксперименты с вариантами требуют одновременно учитывать стоимость участников, вероятности событий и точность сравнения. Например, исходные сведения «Ожидаемая конверсия A» вводятся как отдельный числовой показатель, а поле «Расход на A» задаёт ещё одну часть модели. Смешивать данные разных объектов и несогласованных периодов нельзя: это меняет смысл искомой величины.
Полезно сравнить основной расчёт с альтернативным значением «Общий бюджет». Если вывод меняется, выясните, отражает ли разница свойства исходных данных или особенности выбранного метода. При работе с настоящей выборкой стоит сохранять условия сбора наблюдений.
Как связаны параметры и полученные показатели
Основная формула: n_A/n_B=√[p_A(1−p_A)c_B/(p_B(1−p_B)c_A)]. В неё входят величины из пользовательской формы, поэтому поле «Ожидаемая конверсия A» нельзя считать декоративным. Взаимосвязи могут быть нелинейными: одинаковый абсолютный прирост разных параметров не всегда даёт одинаковое изменение результата.
В стандартном примере первый итог «Участников A» равен 4053, а показатель «Участников B» — 3964. Эти величины нужно читать вместе, поскольку одна отражает центральный результат, а другая характеризует сопутствующее свойство модели или проверку её применимости.
Последний параметр формы, «Общий бюджет», первоначально задан значением 120000. Чтобы проверить расчёт, замените его на другой допустимый вариант, не изменяя остальные поля. Это покажет вклад выбранного условия и поможет отличить устойчивую оценку от чувствительной.
Пример использования и сравнение исходных данных
Для начала используйте готовые значения в форме: «Ожидаемая конверсия A» — 0.08. Если в поле указан список, порядок и число элементов должны соответствовать смыслу измерений. При выборе новых данных проверяйте, что все числа относятся к одной задаче, а единицы измерения сопоставимы.
После вычисления обратите внимание на «Участников A» и «Участников B». Эти показатели дают отправную точку для сравнения, но не являются универсальной нормой. Решение о приемлемости результата зависит от задачи, цены ошибки и того, как собирались наблюдения.
Один практический приём — изменить только «Общий бюджет» и записать обе версии ответа. Затем отдельно пересмотрите «Ожидаемая конверсия B», оставив прочие числа прежними. Такое последовательное сравнение выявляет влияние параметров лучше, чем одновременная произвольная замена всех значений.
Ограничения статистического вывода
У метода есть принципиальное условие: оптимум минимизирует дисперсию оценки при бюджетном ограничении и прогнозных конверсиях. Оптимальный математический план не заменяет проверку качества распределения пользователей между экспериментальными группами. Если это условие нарушено, точное вычисление формулы не сделает итог достоверным, поэтому сначала разберитесь в природе исходных данных.
Оптимальный математический план не заменяет проверку качества распределения пользователей между экспериментальными группами. Также внимательно отнеситесь к редким наблюдениям, нестандартным значениям и границам диапазонов ввода. Ошибка округления, неверно прочитанная единица или число, записанное не в то поле, способны изменить вывод сильнее, чем выбранный метод.
Результаты «оптимальное распределение бюджета между a и b» следует использовать как количественную опору, а не как безусловное заключение о причинах. По возможности подтвердите вывод независимой выборкой, альтернативным методом или предметной проверкой исходных измерений. При важных решениях учитывайте и неопределённость результата.
Формула расчёта
n_A/n_B=√[p_A(1−p_A)c_B/(p_B(1−p_B)c_A)]
Проверенные примеры
Исходные данные: Ожидаемая конверсия A = 0.08, Ожидаемая конверсия B = 0.12, Расход на A = 12, Расход на B = 18
Участников A: 4053; Участников B: 3964; Оптимальное отношение A к B: 1.02247
Исходные данные: Ожидаемая конверсия A = 0.15, Ожидаемая конверсия B = 0.12, Расход на A = 12, Расход на B = 18
Участников A: 4729; Участников B: 3513; Оптимальное отношение A к B: 1.34576
Исходные данные: Ожидаемая конверсия A = 0.08, Ожидаемая конверсия B = 0.12, Расход на A = 12, Расход на B = 18
Участников A: 3040; Участников B: 2973; Оптимальное отношение A к B: 1.02247
Как пользоваться онлайн-калькулятором
- Вводите списки значений в том же порядке, в котором происходили измерения; сопоставляемые списки должны иметь равную длину.
- Заполните числовые поля и выберите математическую модель, если форма допускает несколько вариантов.
- Проверьте полученные показатели вместе с допущениями и граничными условиями метода.