Карточка Junior Дизайн A/B-теста спрашивают часто обновлено

SRM (Sample Ratio Mismatch)

Вопрос

Что такое SRM?

Попробуйте сами

Ответьте про себя или вслух, потом откройте ответ и сверьтесь.

Показать ответ и разбор

Коротко

Расхождение фактического соотношения групп с запланированным (делили 50/50, получили 51/49 на больших числах). Проверяют хи-квадратом согласия, порог обычно p < 0.001.

Ответ

Расхождение фактического соотношения групп с запланированным (делили 50/50, получили 51/49 на больших числах). Проверяют хи-квадратом согласия, порог обычно p < 0.001. При SRM результаты не интерпретируют: ищут причину (редиректы, ошибки, логирование, боты).

Разбор

Расхождение фактического соотношения групп с запланированным (делили 50/50, получили 51/49 на больших числах). Проверяют хи-квадратом согласия, порог обычно p < 0.001. При SRM результаты не интерпретируют: ищут причину (редиректы, ошибки, логирование, боты).

Ответьте сами, а не прочитайте

В тренажёре вопрос попадёт в повторения и вернётся, когда начнёт забываться. Плюс билеты с зачётом: 20 вопросов, не больше 2 ошибок.