Povesti despre ultimul eșec (incident în producție) — cum au găsit, cum au rezolvat, cine a rezolvat

В одном из последних продакшн-инцидентов у нас произошла деградация производительности из-за утечки горутин в сервисе на Go. Проблема была обнаружена через мониторинг метрик: увеличилось время отклика и выросло потребление памяти.

Для расследования использовали профилирование с помощью pprof, что показало накопление горутин, которые не завершались из-за ошибки в логике отмены контекста.

Решение принимала команда разработки: исправили обработку контекстов, добавили таймауты и улучшили тесты на утечки. После деплоя и мониторинга проблема исчезла.