Թափուր պաշտոնի մասին
Ищут Middle/Senior Data Engineer для поддержки и развития дата-пайплайнов, обработки больших потоков данных и дата-инфраструктуры. Роль включает работу с историческими и потоковыми данными, обеспечением их качества и стабильностью критичных сервисов.
Чем предстоит заниматься
- Поддерживать и развивать дата-пайплайны в историческом и реальном времени, включая агрегацию, обработку и верификацию данных.
- Разрабатывать и оптимизировать Python-скрипты для интеграции данных из внешних источников и работы с потоками данных.
- Обеспечивать качество данных: настраивать и развивать процессы верификации, выявлять и исправлять ошибки.
- Развивать инфраструктуру: организовывать хранение и доступ к сырым данным в Data Lake, рефакторить пайплайны и оптимизировать хранение неагрегированных данных.
- Обслуживать системы: мониторить их работу, реагировать на алерты, устранять неполадки и обеспечивать стабильную работу критичных сервисов.
Условия
Удаленный формат работы.