Дисциплина primary metrics, коррекции/иерархии, байесовские decision frameworks, ретроспективы win-rate и запрет на incentive «число побед».
Разбор
- Ожидаемый win-rate <100%.
- Публикация null results.
- Аудит peeking.
- Качество гипотез важнее числа тестов.
Итог
Массовый экспериментирование требует контроля ложных открытий системно.