Сопоставление Middle CUPED и снижение дисперсии обновлено
Приёмы снижения дисперсии
Вопрос
Сопоставьте приём и что он делает.
Попробуйте сами
Нажмите слева, потом подходящее справа.
Показать ответ и разбор
Коротко
Все пять приёмов уменьшают шум без смещения оценки, если правила заданы до теста и одинаковы для обеих групп.
Правильные пары
CUPEDВычитает часть метрики, предсказуемую по данным до теста
СтратификацияУравнивает доли сегментов в группах
ВинзоризацияОбрезает экстремальные значения по заранее заданному перцентилю
ЛинеаризацияПревращает ratio-метрику в пользовательскую
Triggered-анализОставляет только тех, кто дошёл до места изменения
Разбор
Все пять приёмов уменьшают шум без смещения оценки, если правила заданы до теста и одинаковы для обеих групп.
Ответьте сами, а не прочитайте
В тренажёре вопрос попадёт в повторения и вернётся, когда начнёт забываться. Плюс билеты с зачётом: 20 вопросов, не больше 2 ошибок.
Термины по теме
Ещё по теме «CUPED и снижение дисперсии»
- Кейс: CTR значим по показам
- Кейс: CUPED и много новых пользователей
- Кейс: один оптовик в группе B
- Кейс: перекос платформ в группах
- CUPED на Python: θ и снижение дисперсии
- Дельта-метод для CTR на Python
- Постстратифицированное среднее
- Ковариата за период теста