Выбор ответа Senior Алертинг и усталость от алертов обновлено
Watchdog-алерт
Вопрос
Зачем в некоторых инсталляциях держат алерт Watchdog с выражением vector(1), который горит всегда?
Попробуйте сами
Выберите вариант, и откроется разбор.
Показать ответ и разбор
Коротко
Правильный ответ: Проверка цепочки алертинга: внешняя система тревожится, если он пропал. Если Prometheus, Alertmanager или канал доставки сломались, остальные алерты просто перестанут приходить, и тишина будет выглядеть как «всё хорошо».
Варианты ответа
- Чтобы Alertmanager не засыпал и не сбрасывал соединения без нагрузки
- Это ошибка конфигурации, которую нужно удалить, иначе он шумит
- Проверка цепочки алертинга: внешняя система тревожится, если он пропалправильный ответ
- Чтобы дашборд алертов не был пустым и было видно, что Grafana жива
Разбор
Если Prometheus, Alertmanager или канал доставки сломались, остальные алерты просто перестанут приходить, и тишина будет выглядеть как «всё хорошо». Всегда горящий алерт, отправляемый в внешний «dead man's switch», превращает эту тишину в сигнал. Такой алерт есть в kube-prometheus-stack.
Ответьте сами, а не прочитайте
В тренажёре вопрос попадёт в повторения и вернётся, когда начнёт забываться. Плюс билеты с зачётом: 20 вопросов, не больше 2 ошибок.