Практическая цель модели и её исходные данные
Задача расчёта возникает, когда приходится сопоставлять разные условия работы и ограниченный бюджет. При вводе «посетители варианта а» и «посетители варианта б» вы задаёте наблюдаемую часть ситуации. Эти значения не подставляются в декоративные подписи: они участвуют в формулах и влияют на проверяемый численный результат.
Чтобы модель соответствовала реальности, не объединяйте несовместимые периоды и единицы измерения. Поле «критическое значение z» описывает отдельную составляющую результата, а остальные характеристики позволяют получить дополнительные показатели. Показанные значения используются совместно, поэтому полезно подготовить исходную таблицу из одного объекта или периода наблюдения.
Логика вычисления и физический смысл показателей
В основе лежит соотношение: pA = xA/nA; pB = xB/nB; SE = √[pA(1−pA)/nA + pB(1−pB)/nB]. Оно применимо при соблюдении предпосылок выбранной модели. Расчёт последовательно формирует промежуточные величины, а затем переводит их в конечные показатели. Приближённые значения могут быть дробными: это ожидаемые величины или аналитические оценки, а не всегда целое число объектов.
В блоке результатов первым представлен показатель «Конверсия А, %», за ним следует «Конверсия Б, %». Их удобно проверять совместно: одинаковое первое число при разных исходных условиях ещё не означает одинаковый второй показатель. Отдельные выходные значения показывают стоимость, уровень использования ресурсов или допустимый запас в зависимости от назначения расчёта.
Как правильно задавать исходные величины
Перед расчётом проверьте величины «покупатели варианта а», «покупатели варианта б» и «средняя выручка за заказ». Эти поля относятся к различным частям расчётной схемы, поэтому замена одного другим меняет смысл результата. Числа вводятся в единицах, указаных около поля; процент означает долю от ста, а не десятичную дробь.
Если исходное значение для «A/B-тест: эффект, разброс и окупаемость» неизвестно, лучше взять обоснованный диапазон, чем произвольное среднее. Для сценарного анализа увеличивайте или уменьшайте ведущую величину и сравнивайте таблицу; пять её строк помогают понять, насколько решение чувствительно к этому параметру. При получении невозможного соотношения программа сообщает об ошибке ввода, не придумывая результат.
Разбор таблицы сценариев и принятие решения
Для «A/B-тест: эффект, разброс и окупаемость» таблица по умолчанию показывает изменение ведущего фактора на −20, −10, 0, +10 и +20 процентов. Процентный шаг относится только к выбранной входной переменной; прочие значения сохраняются. Это принципиально важно: иначе сравнение нескольких вариантов было бы неинтерпретируемым из-за одновременного изменения всех предпосылок.
Сравнивая сценарии для задачи «Проверка конверсии и денежной отдачи изменения», обращайте внимание как на основной показатель, так и на дополнительные. Иногда улучшение первого показателя сопровождается ростом затрат или нагрузки в другом. Граница разумного решения зависит от ваших тарифов, ограничений, риск-профиля и фактических измерений, а не от заранее выбранного числа.
Ограничения, точность и ручная проверка
Для проверки значимости нужен план эксперимента; границы нормального приближения не учитывают последовательный просмотр результатов. Это ограничение следует учитывать до использования результата в закупке, проекте или управленческой отчётности. Калькулятор вычисляет детерминированную модель при известных значениях, но не доказывает, что все показатели будут точно такими в реальном событии.
Для контрольной проверки начните с отдельных входов «стоимость эксперимента» и «критическое значение z», просмотрите пояснение формулы и повторите один вариант на бумаге или в таблице. Затем измените один из них на небольшую величину. Если результат не соответствует известному опыту, уточните допущения, исходные единицы и период, прежде чем принимать финансовое или техническое решение.
Формула расчёта
pA = xA/nA; pB = xB/nB; SE = √[pA(1−pA)/nA + pB(1−pB)/nB].
Проверенные примеры
Использованы значения формы по умолчанию для расчёта «A/B-тест: эффект, разброс и окупаемость».
Конверсия А, %: 4.0; Конверсия Б, %: 5.0.
При тех же исходных данных ведущая величина увеличивается на 12%.
Конверсия А, %: 4.0; Конверсия Б, %: 5.0.
Как пользоваться онлайн-калькулятором
- Укажите значения для задачи «проверка конверсии и денежной отдачи изменения», используя единицы в подписях.
- Выберите исходные условия или прогноз; во втором случае укажите процент изменения ведущей величины.
- Сравните промежуточные значения и итоговые результаты расчёта.
- Изучите таблицу пяти сценариев и сохраните её при необходимости.