Выбор ответа Senior Исследования обновлено

Смещение выборки

Вопрос

Команда опросила пользователей через баннер в приложении и узнала, что 90% довольны новой функцией. Какой главный риск в выводе?

Попробуйте сами

Выберите вариант, и откроется разбор.

Показать ответ и разбор

Коротко

Правильный ответ: Выборка смещена: отвечают лояльные, а ушедшие баннер не видят. Опрос внутри продукта видят только оставшиеся пользователи, а отвечают на него самые вовлечённые: это ошибка выжившего и самоотбора.

Варианты ответа

  1. Опрос слишком короткий, чтобы делать выводы о функции
  2. Выборка смещена: отвечают лояльные, а ушедшие баннер не видятправильный ответ
  3. Нельзя спрашивать пользователей внутри приложения, это мешает им
  4. 90% слишком много: это значит, что в подсчёте ответов ошибка

Разбор

Опрос внутри продукта видят только оставшиеся пользователи, а отвечают на него самые вовлечённые: это ошибка выжившего и самоотбора. Чтобы узнать причины ухода, нужно отдельно связываться с ушедшими. Длина опроса и место показа не главная проблема, а высокий процент сам по себе не признак ошибки.

Ответьте сами, а не прочитайте

В тренажёре вопрос попадёт в повторения и вернётся, когда начнёт забываться. Плюс билеты с зачётом: 20 вопросов, не больше 2 ошибок.