Холм и Бенджамини—Хохберг для набора проверок

Что рассчитывается и где это пригодится

При одновременной проверке множества гипотез метод Холма защищает от семейной ошибки, а процедура Бенджамини—Хохберга контролирует ожидаемую долю ложных открытий. Непараметрические методы часто удобны при необычном распределении измерений, но тоже требуют собственных предпосылок. Поэтому вместе с основным итогом полезно изучать сопутствующие показатели, а не выбирать ответ по единственному числу. Это особенно важно, когда входные данные собраны в разные периоды или группы.

При использовании калькулятора сначала определите, какую реальную величину обозначает «Набор исходных p-значений». Затем установите «Порог значимости» и «Номер выделенной проверки» так, чтобы они соответствовали способу сбора данных. Смешение разных единиц и периодов искажает результат.

Два способа поправки для семейной ошибки и ожидаемой доли ложных открытий на одном наборе p-значений. Для осмысленного сравнения двух вариантов лучше менять одно условие за раз, записывая результаты до и после. Если вывод скачкообразно изменяется при небольшом сдвиге порога, проверьте устойчивость результата отдельно.

Исходные величины и математический метод

Вычисления опираются на соотношение «pХолм(i)=max_{j≤i}(m−j+1)p(j); qBH(i)=min_{j≥i}mp(j)/j». Оно связывает пользовательские параметры и показатели результата. Для корректной интерпретации важно помнить, какие допущения стоят за используемой статистической моделью.

Параметр «Набор исходных p-значений» исходно задан как 0.002 0.014 0.033 0.044 0.08 0.13. Значение «Порог значимости» в примере — 0.05. Эти числа приведены для проверки формы; собственные измерения следует вводить по тем же правилам, но не считать демонстрационные значения нормативом.

Поле «Номер выделенной проверки» в примере имеет значение 3. Изменяя его в допустимом диапазоне, можно оценить чувствительность итоговых показателей. Если итог дискретный, маленькое изменение условия может не изменить итоговую категорию или число событий.

Пример расчёта и чтение результата

Для исходных значений калькулятор выдаёт «Число проверок» = 6, а связанный показатель «Значимых при поправке Холма» = 1. Важно читать названия показателей целиком: у них могут различаться единицы измерения, направления сравнения и способы округления.

В контрольной форме для «Номер выделенной проверки» используется значение 3. Можно изменить его и сравнить результаты с исходными. Параллельно проверьте, остаются ли ограничения метода выполненными; формально вычислимый результат не всегда статистически обоснован.

При одновременной проверке множества гипотез метод Холма защищает от семейной ошибки, а процедура Бенджамини—Хохберга контролирует ожидаемую долю ложных открытий. Когда возникает противоречие между итоговой оценкой и наблюдаемыми данными, полезно посмотреть промежуточные величины и провести расчёт с альтернативными параметрами. По одному примеру нельзя судить о качестве модели на других выборках.

Ограничения, проверки и типичные ошибки

Главное ограничение: процедура bh требует независимости либо подходящей положительной зависимости гипотез; метод холма контролирует fwer. Это не формальность: при нарушении условия даже правильно выполненное арифметическое действие способно дать ошибочный статистический вывод. Уточните предпосылки до применения результата.

При множестве сравнений риск случайного обнаружения эффекта нужно ограничивать явной поправкой. Также проверьте пропуски, недопустимые значения и неодинаковые масштабы измерений. Если меняется правило формирования выборки, сравнивать два результата без поправок нельзя, даже когда численность наблюдений совпадает. Применительно к расчёту «холм и бенджамини—хохберг для набора проверок» проверьте условия: процедура bh требует независимости либо подходящей положительной зависимости гипотез; метод холма контролирует fwer.

При важных решениях сравните результат с независимыми измерениями или альтернативным методом. Сохраните исходные параметры и поясните, почему выбран именно такой способ оценки. Калькулятор даёт воспроизводимые числа, но не заменяет проверку качества данных. Применительно к расчёту «холм и бенджамини—хохберг для набора проверок» проверьте условия: процедура bh требует независимости либо подходящей положительной зависимости гипотез; метод холма контролирует fwer.

Формула расчёта

Проверенные примеры

Как пользоваться онлайн-калькулятором

1. Заполните поле «Набор исходных p-значений» на основе проверенных исходных данных.
2. Уточните «Порог значимости» и остальные параметры; все они влияют на расчёт.
3. Прочтите рассчитанные величины вместе и проверьте ограничения метода.