Карточка Middle Логи: Loki и ELK обновлено

Как снизить стоимость логов

Вопрос

Назовите способы уменьшить объём и стоимость логов.

Попробуйте сами

Ответьте про себя или вслух, потом откройте ответ и сверьтесь.

Показать ответ и разбор

Коротко

Отбрасывать мусор на агенте (health-check, шумные библиотеки); уровни и DEBUG только по требованию; сэмплировать однотипные успешные события, сохраняя все ошибки; разный ретеншн по типам логов; холодное хранилище для архива; метрики вместо подсчётов по логам; не логировать тела запросов.

Ответ

Отбрасывать мусор на агенте (health-check, шумные библиотеки); уровни и DEBUG только по требованию; сэмплировать однотипные успешные события, сохраняя все ошибки; разный ретеншн по типам логов; холодное хранилище для архива; метрики вместо подсчётов по логам; не логировать тела запросов.

Разбор

Сначала измерить: какие сервисы и сообщения дают основной объём. Часто это пара болтливых компонентов.

Ответьте сами, а не прочитайте

В тренажёре вопрос попадёт в повторения и вернётся, когда начнёт забываться. Плюс билеты с зачётом: 20 вопросов, не больше 2 ошибок.