p-value — вероятность получить статистику теста не менее экстремальную, чем наблюдаемая, если H₀ верна. Это не P(H₀|data) и не «вероятность ошибки».
Разбор
- Малый p — данные плохо совместимы с H₀ при выбранном тесте.
- p=0.049 и 0.051 почти одинаковы — не магический обрыв.
- Зависит от размера выборки: крошечный эффект станет «значимым».
- Сообщайте эффект и CI вместе с p.
Итог
p-value измеряет удивление при H₀, а не важность эффекта.