Выбор ответа Senior Мощность и размер выборки обновлено
Снижение дисперсии и длительность
Вопрос
CUPED снизил дисперсию метрики на 40%. Как изменится нужный размер выборки при тех же MDE, α и мощности?
Попробуйте сами
Выберите вариант, и откроется разбор.
Показать ответ и разбор
Коротко
Правильный ответ: Уменьшится на 40%. n пропорционален дисперсии σ², поэтому минус 40% дисперсии дают минус 40% выборки и длительности.
Варианты ответа
- Уменьшится на 40%правильный ответ
- Уменьшится примерно на 23% (корень)
- Не изменится: CUPED влияет только на p-value
- Уменьшится на 64%
Разбор
n пропорционален дисперсии σ², поэтому минус 40% дисперсии дают минус 40% выборки и длительности. Корень из 0.6 описывает изменение стандартного отклонения и ширины интервала, а не размера выборки. 64% это 1 - 0.6², лишний квадрат.
Ответьте сами, а не прочитайте
В тренажёре вопрос попадёт в повторения и вернётся, когда начнёт забываться. Плюс билеты с зачётом: 20 вопросов, не больше 2 ошибок.