Выбор ответа Senior Множественные проверки обновлено

A/B: четыре варианта против контроля

Вопрос

Тест A/B/C/D: три новых варианта против контроля A. Вариант C значим с p = 0.03, остальные нет. Что учесть перед решением?

Попробуйте сами

Выберите вариант, и откроется разбор.

Показать ответ и разбор

Коротко

Правильный ответ: Три сравнения требуют поправки, 0.03 может не пройти. Три сравнения с одним контролем это множественная проверка: шанс случайной находки около 14%, и нужна поправка (Холм, Даннет).

Варианты ответа

  1. Ничего: каждое сравнение с контролем это отдельный тест
  2. Три сравнения требуют поправки, 0.03 может не пройтиправильный ответ
  3. Нужно сравнить все варианты попарно без поправок
  4. Нужно объединить B, C и D в одну группу и сравнить с A

Разбор

Три сравнения с одним контролем это множественная проверка: шанс случайной находки около 14%, и нужна поправка (Холм, Даннет). С поправкой Холма наименьшее p сравнивается с 0.05/3 ≈ 0.0167, и 0.03 не проходит. Попарные сравнения без поправки только увеличат число проверок. Объединение вариантов отвечает на другой вопрос и размывает эффект C.

Ответьте сами, а не прочитайте

В тренажёре вопрос попадёт в повторения и вернётся, когда начнёт забываться. Плюс билеты с зачётом: 20 вопросов, не больше 2 ошибок.