Расскажите про observability и трассировку в проекте.

Observability — это способность системы предоставлять достаточную информацию для понимания её внутреннего состояния и поведения без прямого вмешательства. В проекте это достигается с помощью метрик, логов и трассировок.

Трассировка (tracing) — это метод, позволяющий отслеживать путь запроса или операции через различные компоненты системы. В ML/AI проектах трассировка помогает понять, как данные проходят через пайплайны, где возникают задержки или ошибки.

Например, при обучении модели можно собирать метрики времени выполнения этапов, логировать параметры и результаты, а с помощью распределённой трассировки видеть, как данные проходят через разные сервисы (например, предобработка, обучение, валидация). Это облегчает диагностику проблем и оптимизацию производительности.