Выбор ответа Junior Проверка гипотез спрашивают часто обновлено

Ошибка I рода

Вопрос

Что такое ошибка I рода в A/B-тесте?

Попробуйте сами

Выберите вариант, и откроется разбор.

Показать ответ и разбор

Коротко

Правильный ответ: Отвергли H0, хотя она верна: ложный эффект. Ошибка I рода это ложное срабатывание, её вероятность ограничена α.

Варианты ответа

  1. Отвергли H0, хотя она верна: ложный эффектправильный ответ
  2. Не отвергли H0, хотя эффект на самом деле есть
  3. Ошибка в коде сплитования пользователей по группам
  4. Неверно выбранная целевая метрика эксперимента

Разбор

Ошибка I рода это ложное срабатывание, её вероятность ограничена α. Пропуск реального эффекта это ошибка II рода, её вероятность β. Баги сплита и выбор метрики это проблемы дизайна, а не термины проверки гипотез.

Ответьте сами, а не прочитайте

В тренажёре вопрос попадёт в повторения и вернётся, когда начнёт забываться. Плюс билеты с зачётом: 20 вопросов, не больше 2 ошибок.