Чтобы найти разницу, нужно достаточное число наблюдений. Если их мало, разницу можно не увидеть. Если слишком много, мы зря потратим время и силы. Ниже простыми словами: какие величины нужны, как считается размер и где обычно ошибаются.
Считает число наблюдений для четырёх типовых задач. Значения по умолчанию можно изменить.
Выберите задачу, заполните поля и нажмите «Рассчитать».
Для подготовки данных и расчётов в проектах используется АвИ Орбита: среда для работы с таблицами, проверки качества данных и построения моделей.
Значение выводится по нажатию кнопки.
Размер выборки считают до начала сбора данных. Он показывает, сколько наблюдений нужно, чтобы заметить разницу заданной величины.
Есть три величины, которые связаны между собой: ожидаемая разница, допустимая доля случайных результатов и число наблюдений. При изменении одной величины меняются остальные.
Если посчитать после сбора данных, получится подгонка под уже известный ответ. Так делать нельзя.
| Величина | Простыми словами | Обычное значение |
|---|---|---|
| Уровень значимости, α | Какую долю ложных результатов мы готовы допустить | 0,05, то есть 5 из 100 |
| Мощность | Как часто мы найдём разницу, если она есть на самом деле | 0,80 или 0,90 |
| Минимальная разница | Наименьшая разница, которую важно не пропустить | задаёт исследователь |
| Разброс | Насколько сильно значения отличаются друг от друга | из пилота или прошлых работ |
| Доля | Как часто событие встречается в группе | из литературы |
| Выбывание | Какая часть участников не дойдёт до анализа | от 10 до 30 процентов |
Уровень значимости и мощность выбирают до расчёта. Если поднять мощность с 0,80 до 0,90, наблюдений понадобится примерно на четверть больше.
Формул несколько, выбор зависит от того, что сравнивают: средние значения, доли или связь между признаками.
Две группы, сравниваем средние
n = 2 · (1,96 + 0,84)² · σ² / Δ²
n это число наблюдений в каждой группе. Числа 1,96 и 0,84 взяты из таблицы нормального распределения: первое для уровня значимости 0,05, второе для мощности 0,80. σ это разброс, Δ это минимальная разница, которую хотим заметить.
Одна группа, оцениваем среднее
n = (1,96 + 0,84)² · σ² / Δ²
Две группы, сравниваем доли
n = (1,96 · √(2p̄(1-p̄)) + 0,84 · √(p₁(1-p₁) + p₂(1-p₂)))² / (p₁-p₂)²
p₁ и p₂ это ожидаемые доли в группах, p̄ это средняя доля по двум группам.
Оценка связи двух признаков
n = ((1,96 + 0,84) / (0,5 · ln((1+r)/(1-r))))² + 3
r это ожидаемый коэффициент корреляции. Логарифм здесь нужен, чтобы привести коэффициент к удобной шкале.
Поправка на выбывание
N = n / (1 - d)
N это сколько человек нужно включить. n это сколько нужно до анализа. d это доля выбывших, например 0,15.
Вы можете проводить расчёты без сложных формул в АвИ Орбита.
Сравниваем две группы по числовому признаку. Разброс σ равен 10. Разницу меньше 5 единиц замечать не собираемся. Уровень значимости 0,05, мощность 0,80.
Проверка: при 63 наблюдениях в группе и разбросе 10 мы заметим разницу около 5 единиц с вероятностью 0,80. Это то, что и планировали.
| Изменение условия | Число наблюдений |
|---|---|
| Уменьшение минимальной разницы вдвое | Растёт вчетверо |
| Увеличение разброса вдвое | Растёт вчетверо |
| Повышение мощности с 0,80 до 0,90 | Растёт примерно на четверть |
| Снижение уровня значимости с 0,05 до 0,01 | Растёт примерно на треть |
| Неравные группы, один к двум | Растёт примерно на 12 процентов |
| Парные измерения, до и после | Снижается, если пары похожи между собой |
Когда проверяют сразу несколько гипотез, шанс получить хотя бы один ложный результат растёт. При пяти независимых сравнениях и уровне 0,05 он доходит примерно до 0,23.
Поэтому либо ужесточают уровень значимости для каждого сравнения, либо считают размер под главную гипотезу, а остальные называют второстепенными и описывают без проверки.