Карточка Senior Генеративные модели обновлено

ELBO

Вопрос

Что такое ELBO в VAE?

Попробуйте сами

Ответьте про себя или вслух, потом откройте ответ и сверьтесь.

Показать ответ и разбор

Коротко

Нижняя оценка логарифма правдоподобия: log p(x) ≥ Eq[log p(xz)] - KL(q(zx)‖p(z)). Первое слагаемое отвечает за реконструкцию, второе держит апостериор кодировщика близко к приору.

Ответ

Нижняя оценка логарифма правдоподобия: log p(x) ≥ E_q[log p(x|z)] - KL(q(z|x)‖p(z)). Первое слагаемое отвечает за реконструкцию, второе держит апостериор кодировщика близко к приору. Максимизация ELBO это обучение VAE.

Разбор

Нижняя оценка логарифма правдоподобия: log p(x) ≥ E_q[log p(x|z)] - KL(q(z|x)‖p(z)). Первое слагаемое отвечает за реконструкцию, второе держит апостериор кодировщика близко к приору. Максимизация ELBO это обучение VAE.

Ответьте сами, а не прочитайте

В тренажёре вопрос попадёт в повторения и вернётся, когда начнёт забываться. Плюс билеты с зачётом: 20 вопросов, не больше 2 ошибок.