A/B-тест для дизайнера
Вопрос
Что нужно знать дизайнеру про A/B-тест?
Попробуйте сами
Ответьте про себя или вслух, потом откройте ответ и сверьтесь.
Показать ответ и разбор
Коротко
Ответ
Гипотеза и одна целевая метрика заранее, рандомизация по пользователям, достаточная выборка (считают до старта) и длительность целыми неделями, защитные метрики, без подглядывания и остановки при первой значимости. Дизайнер готовит варианты так, чтобы различие было в проверяемом изменении.
Разбор
Гипотеза и одна целевая метрика заранее, рандомизация по пользователям, достаточная выборка (считают до старта) и длительность целыми неделями, защитные метрики, без подглядывания и остановки при первой значимости. Дизайнер готовит варианты так, чтобы различие было в проверяемом изменении.
Ответьте сами, а не прочитайте
В тренажёре вопрос попадёт в повторения и вернётся, когда начнёт забываться. Плюс билеты с зачётом: 20 вопросов, не больше 2 ошибок.