Uplift — величина различия метрики treatment vs control (абсолютная или относительная %) вместе с доверительным интервалом.
Разбор
- Интервал важнее одной точки.
- Относительный % от маленькой базы обманчив.
- Переводят в бизнес-единицы ($).
- Сегментные uplifts осторожно.
Итог
Решение опирают на величину эффекта и интервал, не только на «значимо».