Brier score: что это
Коротко
Brier score: среднее (p - y)² для бинарной задачи. Учитывает и калибровку, и разделимость.
Определение
Среднее (p - y)² для бинарной задачи. Учитывает и калибровку, и разделимость. Меньше лучше. Константа с долей класса даёт базовый уровень p(1-p), с ним сравнивают модель.
Из урока «Несбалансированные классы и калибровка за 6 минут»
Проверка: калибровочная кривая (средняя предсказанная вероятность против доли положительных в бинах), ECE, Brier score, log loss.
Читать урок целикомВопросы по теме с собеседований
Запомните, а не прочитайте
В тренажёре карточка вернётся, когда начнёт забываться. А билеты по Классический ML проверят, что термин понятен в деле.