Разкажете за последния провал (инцидент в продукцията) — как го намериха, как го решиха, кой го реши

В одном из последних продакшн-инцидентов у нас произошла деградация производительности из-за утечки горутин в сервисе на Go. Проблема была обнаружена через мониторинг метрик: увеличилось время отклика и выросло потребление памяти.

Для расследования использовали профилирование с помощью pprof, что показало накопление горутин, которые не завершались из-за ошибки в логике отмены контекста.

Решение принимала команда разработки: исправили обработку контекстов, добавили таймауты и улучшили тесты на утечки. После деплоя и мониторинга проблема исчезла.