Как сравнить две группы, когда данные не идеальны, и что показывать кроме p-значения. Ниже разбор критериев, калькулятор для двух независимых выборок и таблица выбора метода.
Считает разницу средних, стандартную ошибку, статистику t по Уэлчу и p-значение. Уровень значимости 0,05.
Заполните поля и нажмите «Рассчитать».
Сравнивать группы и держать рядом таблицы, расчёты и графики удобнее в АвИ Орбита.
Значение выводится по нажатию кнопки.
Почти всегда сравнивают не группы целиком, а одну характеристику: среднее, медиану, долю. От этого зависит метод, поэтому вопрос формулируют узко.
Пример. Две схемы подготовки: одна даёт среднюю длительность 5,7 дня, другая 5,2. Разница 0,5 дня. Вопрос не в том, отличаются ли средние, а в том, насколько эта разница больше случайного разброса.
| Данные | Группы | Критерий |
|---|---|---|
| Количественные, распределение близко к нормальному | Две независимые | t-критерий, лучше по Уэлчу |
| Количественные, распределение далеко от нормального или малая выборка | Две независимые | Манна и Уитни |
| Количественные, повторные измерения у тех же объектов | Две связанные | Парный t-критерий или Уилкоксон |
| Количественные | Три и более | Дисперсионный анализ или Краскел и Уоллис |
| Доли | Две независимые | Критерий для долей, точный критерий Фишера при малых числах |
Критерий выбирают до просмотра данных. Если перебрать несколько методов и оставить тот, где p меньше, результат перестаёт быть проверкой.
Классический t-критерий предполагает, что разброс в группах одинаков. На практике он почти всегда разный, особенно при неравных размерах групп.
Критерий Уэлча не требует равенства разбросов и при этом почти не проигрывает, когда равенство всё-таки есть. Поэтому его берут по умолчанию.
t = (m₁ − m₂) / √(s₁²/n₁ + s₂²/n₂)
m это средние, s это стандартные отклонения, n это число наблюдений в каждой группе. Знаменатель называется стандартной ошибкой разницы.
p-значение отвечает, есть ли отличие. Насколько оно велико, показывает сама разница и её доверительный интервал.
Правило простое: в отчёте нужны три числа. Разница, интервал и число наблюдений в каждой группе. Без них p не читается, а разница не сравнивается с практическим порогом.