Сопоставление Junior Дизайн A/B-теста обновлено
Типы метрик A/B-теста
Вопрос
Сопоставьте метрику и её роль в тесте новой выдачи товаров.
Попробуйте сами
Нажмите слева, потом подходящее справа.
Показать ответ и разбор
Коротко
Решение принимают по выручке, корзина быстрее реагирует и служит ранним сигналом, ошибки не должны вырасти, соотношение групп проверяет сам эксперимент, а не продукт.
Правильные пары
Выручка на пользователяЦелевая (primary)
Добавления в корзинуПрокси
Доля ошибок 5xxGuardrail
Соотношение пользователей в группахПроверка корректности (SRM)
Разбор
Решение принимают по выручке, корзина быстрее реагирует и служит ранним сигналом, ошибки не должны вырасти, соотношение групп проверяет сам эксперимент, а не продукт.
Ответьте сами, а не прочитайте
В тренажёре вопрос попадёт в повторения и вернётся, когда начнёт забываться. Плюс билеты с зачётом: 20 вопросов, не больше 2 ошибок.