Выбор ответа Junior Дизайн A/B-теста спрашивают часто обновлено
Что такое guardrail-метрика
Вопрос
Что такое guardrail-метрика в A/B-тесте?
Попробуйте сами
Выберите вариант, и откроется разбор.
Показать ответ и разбор
Коротко
Правильный ответ: Метрика, которая не должна ухудшиться при росте целевой. Guardrail (барьерная) метрика защищает от выигрыша ценой вреда: рост конверсии при росте возвратов или времени загрузки не успех.
Варианты ответа
- Метрика, по которой принимают решение о выкатке изменения
- Метрика, которая не должна ухудшиться при росте целевойправильный ответ
- Метрика, на которой проверяют SRM и равенство размера групп
- Ранний индикатор целевой метрики, который считают быстрее
Разбор
Guardrail (барьерная) метрика защищает от выигрыша ценой вреда: рост конверсии при росте возвратов или времени загрузки не успех. По целевой метрике принимают решение, SRM проверяют по числу пользователей в группах, а ранний индикатор называют прокси-метрикой.
Ответьте сами, а не прочитайте
В тренажёре вопрос попадёт в повторения и вернётся, когда начнёт забываться. Плюс билеты с зачётом: 20 вопросов, не больше 2 ошибок.