Карточка Middle Активации и функции потерь обновлено

BCEWithLogitsLoss

Вопрос

Почему BCEWithLogitsLoss лучше, чем Sigmoid + BCELoss?

Попробуйте сами

Ответьте про себя или вслух, потом откройте ответ и сверьтесь.

Показать ответ и разбор

Коротко

Он вычисляет log σ(z) и log(1 - σ(z)) напрямую из логита через устойчивые формулы (log-sum-exp), без промежуточной вероятности, которая может стать ровно 0 или 1 и дать log 0. Плюс есть параметр posweight для дисбаланса.

Ответ

Он вычисляет log σ(z) и log(1 - σ(z)) напрямую из логита через устойчивые формулы (log-sum-exp), без промежуточной вероятности, которая может стать ровно 0 или 1 и дать log 0. Плюс есть параметр pos_weight для дисбаланса.

Разбор

Он вычисляет log σ(z) и log(1 - σ(z)) напрямую из логита через устойчивые формулы (log-sum-exp), без промежуточной вероятности, которая может стать ровно 0 или 1 и дать log 0. Плюс есть параметр pos_weight для дисбаланса.

Ответьте сами, а не прочитайте

В тренажёре вопрос попадёт в повторения и вернётся, когда начнёт забываться. Плюс билеты с зачётом: 20 вопросов, не больше 2 ошибок.