Сопоставление Junior Постановка задачи обновлено
Симптом и диагноз
Вопрос
Сопоставьте наблюдение и наиболее вероятный диагноз.
Попробуйте сами
Нажмите слева, потом подходящее справа.
Показать ответ и разбор
Коротко
Эти пять ситуаций покрывают типичные вопросы «что пошло не так». Каждая требует своего лечения: сложность модели, регуляризация, проверка пайплайна, пересмотр метрики, мониторинг и переобучение.
Правильные пары
Ошибка высокая и на трейне, и на валидацииНедообучение (высокий bias)
Трейн почти идеален, валидация сильно хужеПереобучение (высокий variance)
Валидация подозрительно лучше всех бейзлайнов в разыВероятная утечка данных
Офлайн-метрика выросла, а бизнес-метрика в A/B нетМетрика плохо отражает цель
Качество модели в проде падает месяц за месяцемДрейф данных или концепта
Разбор
Эти пять ситуаций покрывают типичные вопросы «что пошло не так». Каждая требует своего лечения: сложность модели, регуляризация, проверка пайплайна, пересмотр метрики, мониторинг и переобучение.
Ответьте сами, а не прочитайте
В тренажёре вопрос попадёт в повторения и вернётся, когда начнёт забываться. Плюс билеты с зачётом: 20 вопросов, не больше 2 ошибок.