Какие исходные величины подготовить
Начните с таких параметров, как «Конверсия контроля, %», «Минимальный прирост, п.п.» и «Соотношение размеров тест/контроль». Они описывают основные количества, размеры или вероятности рассматриваемой задачи. Значения по умолчанию даны для ознакомления с моделью; перед практическим расчётом замените их своими данными.
Далее уточните «Доверительный уровень» и «Статистическая мощность, %». Считает число участников для выявления прироста конверсии с заданной мощностью, распределением групп и потерями наблюдений. Если используются несколько периодов или групп, их порядок должен оставаться неизменным между всеми связанными полями ввода. Это позволит избежать неверных сопоставлений.
Остальные параметры данного расчёта: Потери наблюдений, %, Цена включения участника, ₽. Они влияют на расходы, ограничения либо дополнительный прогноз. Задавайте соответствующие значения в той шкале и единицах, которые указаны около поля, особенно когда речь идёт о процентах или времени.
Математическая модель и взаимосвязь величин
Для этого инструмента применяется следующий принцип: Объём двух выборок зависит от разницы долей, ошибки первого рода, мощности, соотношения групп и исключений. Он учитывает сразу несколько взаимосвязанных источников данных и даёт возможность оценивать не только основной результат, но и его экономические или организационные последствия.
Параметры «Конверсия контроля, %» и «Минимальный прирост, п.п.» не являются декоративными настройками: они входят в вычислительную модель либо в проверяемые ограничения. Если изменение величины не сказывается на ведущем результате из-за округления или достигнутого порога, проверьте связанные контрольные показатели.
Расчёт «Планирование размера A/B-теста с потерями» полезно выполнять минимум в двух сценариях: реалистичном и стрессовом. Например, измените «Соотношение размеров тест/контроль», оставив остальные данные без изменений, и проверьте направление результата. Если расхождения не соответствуют ожиданиям, уточните входные данные и допущения.
Как читать и сравнивать рассчитанные показатели
Основные показатели интерпретируются совместно, поскольку считает число участников для выявления прироста конверсии с заданной мощностью, распределением групп и потерями наблюдений. Разделяйте ожидаемые величины, ограничения и суммы расходов; средние значения не гарантируют точного результата отдельного случая.
Проверяйте особое влияние параметра «Статистическая мощность, %»: при его изменении модель может показывать иной порог, уровень обеспеченности или масштаб затрат. Сравнение этого показателя с исходной целью помогает выбрать обоснованный план, а не только получить одно удобное число.
Чтобы сопоставить альтернативы, зафиксируйте одинаковые исходные условия там, где это возможно. Для модели «Планирование размера A/B-теста с потерями» особенно важно одинаково трактовать «Конверсия контроля, %» и «Доверительный уровень» во всех вариантах; иначе сравнение теряет предметный смысл.
Допущения, ограничения и проверка результата
Объём двух выборок зависит от разницы долей, ошибки первого рода, мощности, соотношения групп и исключений. Применение этого принципа предполагает, что введённые данные соответствуют выбранной постановке задачи. Если реальные процессы зависят от факторов, которых нет среди полей, итог будет полезной оценкой, но не гарантией.
Проверьте диапазоны для «Минимальный прирост, п.п.», «Соотношение размеров тест/контроль» и «Статистическая мощность, %». При несовместимых значениях калькулятор должен выдать сообщение об ошибке, а не подменить некорректный ввод нулём или произвольной оценкой. Это важно для обоснованного решения.
Результаты калькулятора «Планирование размера A/B-теста с потерями» носят справочный характер и предназначены для расчётного планирования. Когда проект связан с крупными затратами, безопасностью людей или юридическими последствиями, полезно дополнительно проверить методику с независимым профильным специалистом.
Формула расчёта
Объём двух выборок зависит от разницы долей, ошибки первого рода, мощности, соотношения групп и исключений.
Проверенные примеры
Считает число участников для выявления прироста конверсии с заданной мощностью, распределением групп и потерями наблюдений.
Проверьте исходные значения формы, нажмите «Вычислить» и сравните итог с изменённым сценарием. Объём двух выборок зависит от разницы долей, ошибки первого рода, мощности, соотношения групп и исключений.
Как пользоваться онлайн-калькулятором
- Введите «Конверсия контроля, %».
- Введите «Минимальный прирост, п.п.».
- Введите «Соотношение размеров тест/контроль».
- Уточните остальные условия сценария, выполните вычисление и изучите связанные итоговые показатели.