Выбор ответа Senior Внедрение и оценка решения обновлено
Отделить эффект решения
Вопрос
После запуска новой системы рекомендаций продажи выросли на 12%. В тот же месяц стартовала сезонная распродажа. Как корректнее оценить вклад системы?
Попробуйте сами
Выберите вариант, и откроется разбор.
Показать ответ и разбор
Коротко
Правильный ответ: Сравнить с контрольной группой или прошлым годом с поправкой. Чтобы отделить эффект решения от внешних факторов, нужен контрфактический сценарий: контрольная группа (лучше всего) или сравнение с похожим периодом с поправкой на тренд.
Варианты ответа
- Засчитать системе все 12%: она запущена именно в этот месяц
- Сравнить с контрольной группой или прошлым годом с поправкойправильный ответ
- Спросить менеджеров, помогли ли им рекомендации в продажах
- Подождать год и посмотреть на итоговые годовые продажи
Разбор
Чтобы отделить эффект решения от внешних факторов, нужен контрфактический сценарий: контрольная группа (лучше всего) или сравнение с похожим периодом с поправкой на тренд. Засчитывать весь рост значит приписать системе эффект распродажи. Мнение менеджеров не измерение. Годовые продажи ещё сильнее смешают факторы.
Ответьте сами, а не прочитайте
В тренажёре вопрос попадёт в повторения и вернётся, когда начнёт забываться. Плюс билеты с зачётом: 20 вопросов, не больше 2 ошибок.