Карточка Junior Мощность и размер выборки обновлено
Длительность теста
Вопрос
Как оценить длительность A/B-теста?
Попробуйте сами
Ответьте про себя или вслух, потом откройте ответ и сверьтесь.
Показать ответ и разбор
Коротко
Дни = размер выборки на группу × число групп / трафик в тест за день, с округлением вверх. Плюс минимум полная неделя (лучше две) из-за недельной сезонности.
Ответ
Дни = размер выборки на группу × число групп / трафик в тест за день, с округлением вверх. Плюс минимум полная неделя (лучше две) из-за недельной сезонности. Если выходит слишком долго: больший MDE, чувствительнее метрика, снижение дисперсии.
Разбор
Дни = размер выборки на группу × число групп / трафик в тест за день, с округлением вверх. Плюс минимум полная неделя (лучше две) из-за недельной сезонности. Если выходит слишком долго: больший MDE, чувствительнее метрика, снижение дисперсии.
Ответьте сами, а не прочитайте
В тренажёре вопрос попадёт в повторения и вернётся, когда начнёт забываться. Плюс билеты с зачётом: 20 вопросов, не больше 2 ошибок.