Выбор ответа Senior Мощность и размер выборки обновлено
Кейс: какой MDE взять
Вопрос
Продакт просит рассчитать тест «на любой эффект, хоть 0.1%». При таком MDE тест займёт год. Как правильно выбрать MDE?
Попробуйте сами
Выберите вариант, и откроется разбор.
Показать ответ и разбор
Коротко
Правильный ответ: По экономике: эффект, который окупает изменение. MDE это бизнес-вопрос: какой эффект нам важен и реалистичен.
Варианты ответа
- Взять 0.1%, раз продакт так хочет, и ждать год
- Взять MDE, при котором тест длится ровно неделю
- По экономике: эффект, который окупает изменениеправильный ответ
- Взять стандартные 5%, как принято в индустрии
Разбор
MDE это бизнес-вопрос: какой эффект нам важен и реалистичен. Если окупаемость начинается с +2%, ловить +0.1% бессмысленно и дорого. Подгонка MDE под удобную длительность выдаёт тест, который не ловит важные эффекты. Универсального MDE в 5% нет.
Ответьте сами, а не прочитайте
В тренажёре вопрос попадёт в повторения и вернётся, когда начнёт забываться. Плюс билеты с зачётом: 20 вопросов, не больше 2 ошибок.