Карточка Middle Метрики качества обновлено

Log loss как метрика

Вопрос

Когда смотрят на log loss, а не на AUC?

Попробуйте сами

Ответьте про себя или вслух, потом откройте ответ и сверьтесь.

Показать ответ и разбор

Коротко

Когда важны сами вероятности, а не только ранжирование: ставки, ценообразование, ожидаемая выгода, смешивание моделей. AUC не меняется при монотонном искажении скоров, а log loss наказывает плохую калибровку и уверенные ошибки.

Ответ

Когда важны сами вероятности, а не только ранжирование: ставки, ценообразование, ожидаемая выгода, смешивание моделей. AUC не меняется при монотонном искажении скоров, а log loss наказывает плохую калибровку и уверенные ошибки.

Разбор

Когда важны сами вероятности, а не только ранжирование: ставки, ценообразование, ожидаемая выгода, смешивание моделей. AUC не меняется при монотонном искажении скоров, а log loss наказывает плохую калибровку и уверенные ошибки.

Ответьте сами, а не прочитайте

В тренажёре вопрос попадёт в повторения и вернётся, когда начнёт забываться. Плюс билеты с зачётом: 20 вопросов, не больше 2 ошибок.

Термины по теме