Делают post-ship мониторинг, выборочные re-tests, holdouts, анализ novelty decay и публикуют долю побед, не подтвердившихся долгосрочно.
Разбор
- Стимулы не должны наказывать за честный re-test.
- Шаблоны post-mortem экспериментов.
- Обновляют priors команды.
- Связь с real business outcomes.
Итог
Устойчивость побед проверяют после ship — иначе копится иллюзия impact.