Ответ вслух Senior Какие бывают метрики обновлено

Опережающая метрика для цели

Вопрос

Цель компании на год снизить отток подписчиков. Какие опережающие метрики вы предложите команде и как проверите их связь с оттоком?

Попробуйте сами

Ответьте вслух за 2 минуты, как на собесе. Потом сверьтесь с тезисами: что прозвучало, а что нет.

Показать ответ и разбор

Коротко

Отток квартала команда видит поздно, поэтому нужны метрики первых дней и недель. Беру кандидатов: доля новичков с ключевым действием в первый день, число ключевых действий в неделю, использование двух-трёх важных функций.

Что должно прозвучать в ответе

  • Отток запаздывающий, команде нужен быстрый сигнал

  • Кандидаты: активация, частота ключевого действия, использование ключевых функций

  • Проверка связи на исторических когортах

  • Порог: например, 3 ключевых действия в первую неделю

  • Осторожно с причинностью: подтвердить экспериментом

  • Регулярный пересмотр

Что могут спросить следом

  • Что если связь есть, а эксперимент её не подтвердил?
  • Как выбрать порог «магического числа»?

Разбор

Отток квартала команда видит поздно, поэтому нужны метрики первых дней и недель. Беру кандидатов: доля новичков с ключевым действием в первый день, число ключевых действий в неделю, использование двух-трёх важных функций. На исторических когортах смотрю, как каждая связана с оттоком через 90 дней, и ищу порог, после которого отток резко ниже. Но связь не значит причину: активные люди и так лояльны. Поэтому подтверждаю экспериментом: если поднимаем метрику, падает ли отток. Только после этого делаю её целью команды.

Ответьте сами, а не прочитайте

В тренажёре вопрос попадёт в повторения и вернётся, когда начнёт забываться. Плюс билеты с зачётом: 20 вопросов, не больше 2 ошибок.