Почему мы пропускаем инциденты, и как это исправить, Кирилл Грищук, Avito

Доклад с онлайн-митапа от Spectr. Пожары в разработке под контролем: внедряем observability и умные алерты (18 сентября 2025) С ростом системы вопрос алертов становится неизбежным. И, вроде бы, все идет по плану: включают мониторинг, подключают уведомления. но через пару недель у разработчиков уже мини-инсульт от сотен сообщений в канале. В чем причина? Приходит много разных алертов даже тогда, когда система работает нормально. Когда ничего не работает — они тоже приходят, и их уже игнорируют по привычке. Алерты воспринимаются как доказательство, что «код работает» — раз хоть что-то пишет. В итоге мы сталкиваемся с ситуацией, что алерты не выполняют свою функцию. Команда перестает на них реагировать, реальные проблемы пропускаются. Это и есть «алертная слепота». В докладе Кирилл разобрал правила хорошего алертинга. Когда алерты сигнализируют о реальных проблемах; любой разработчик может решить проблему — есть инструкция, что делать; в логах релевантная информация. И рассмотрел четыре базовых шага: настройка границ, обобщение метрики, работа с короткими пиками, какую информацию включать в алерт. Бонусы к докладу: инструкция, как настроить работу с алертами и полезные ссылки. Ссылка на презентацию из доклада: https://drive.google.com/file/d/1AH93tSXwIx0hGbJf5mkLDLLMustwEj97/view?usp=sharing Статья клиентом Spectr: https://digital-spectr.ru/new-client/ #spectr #digitalspectr #алерт #observability #мониторинг #инциденты #надежностьсистем #алертнаяслепота #стабильностьсервисов #логирование #метрики #умныеалерты #инструкция #отладкапродакшена #контрольинцидентов #практикиразработки #мероприятие #meetup 00:00 Интро 01:43 Что такое алерт? 02:47 Как устроена архитектура алертинга? 03:42 С чего начать проработку алертов? 06:47 Разбор алертов 13:49 Надо ли это решать прямо сейчас? 16:02 Процесс работы с алертами 18:54 Вопросы