Выбор ответа Middle Бутстреп и перестановки обновлено
A/B: интервал разницы медиан накрывает ноль
Вопрос
Тест на время загрузки: медиана в B ниже на 40 мс, бутстреп-интервал разницы медиан [-95; +12] мс. Продукт хочет объявить ускорение. Что ответить?
Попробуйте сами
Выберите вариант, и откроется разбор.
Показать ответ и разбор
Коротко
Правильный ответ: Интервал накрывает ноль, ускорение не доказано. Если интервал разницы содержит ноль, эффект не отличим от нуля на заданном уровне: данные совместимы и с ускорением на 95 мс, и с замедлением на 12 мс.
Варианты ответа
- Ускорение доказано: точечная оценка отрицательная
- Интервал накрывает ноль, ускорение не доказаноправильный ответ
- Нужно взять 90% интервал, он не накроет ноль
- Бутстреп для медиан не подходит, сравните средние
Разбор
Если интервал разницы содержит ноль, эффект не отличим от нуля на заданном уровне: данные совместимы и с ускорением на 95 мс, и с замедлением на 12 мс. Точечная оценка без интервала ничего не доказывает. Подбирать уровень интервала под желаемый вывод нельзя. Бутстреп для медиан уместен: для них нет простой формулы стандартной ошибки.
Ответьте сами, а не прочитайте
В тренажёре вопрос попадёт в повторения и вернётся, когда начнёт забываться. Плюс билеты с зачётом: 20 вопросов, не больше 2 ошибок.