Выбор ответа Middle Диагностика изменения метрики обновлено

Шум или сигнал

Вопрос

Конверсия сегодня 3,8% вместо обычных 4,0%. За последние 60 дней она колебалась от 3,6% до 4,4%. Что разумно?

Попробуйте сами

Выберите вариант, и откроется разбор.

Показать ответ и разбор

Коротко

Правильный ответ: Считать обычным колебанием и наблюдать. Отклонение лежит внутри обычного диапазона, это шум.

Варианты ответа

  1. Считать обычным колебанием и наблюдатьправильный ответ
  2. Срочно искать причину падения на 0,2 п.п.
  3. Откатить последний релиз на всякий случай
  4. Пересчитать конверсию за весь год

Разбор

Отклонение лежит внутри обычного диапазона, это шум. Реагируют, когда изменение выходит за привычный разброс или держится несколько дней. Срочный поиск и откат тратят силы зря. Пересчёт за год ничего не даст.

Ответьте сами, а не прочитайте

В тренажёре вопрос попадёт в повторения и вернётся, когда начнёт забываться. Плюс билеты с зачётом: 20 вопросов, не больше 2 ошибок.