ვაკანსიის შესახებ
Компания Top Selection ищет Data Platform Engineer / Big Data SRE для эксплуатации и развития крупной корпоративной платформы данных в промышленной компании. Проектная занятость, полная загрузка, долгосрочный проект, оформление только через ИП.
Компания и проект
Top Selection ищет специалиста для проекта по эксплуатации и развитию крупной корпоративной платформы данных в промышленной компании.
Задачи
- Эксплуатация и развитие Data Platform на базе Arenadata DB, Greenplum, Kafka и ClickHouse
- Управление кластерами хранения и обработки данных
- Настройка и поддержка отказоустойчивости, репликации и балансировки
- Управление обновлениями, патчами и релизами
- Администрирование Kafka-кластеров, настройка топологии, партиционирования, репликации и retention
- Тюнинг producer и consumer, работа с lag и производительностью
- Поддержка потоковых ETL и ingestion pipelines
- Интеграция платформы с DWH, BI и ML-системами
- Поддержка и развитие контуров передачи и обработки данных между системами
- Мониторинг платформы и анализ производительности SQL, storage и network
- Реагирование на инциденты L2/L3 и проведение root cause analysis
- Автоматизация эксплуатации с помощью Bash, Python, Ansible и Terraform
- Развитие CI/CD для инфраструктуры данных
- Управление конфигурациями и настройка RBAC
Условия
Грейд: Middle+ или Senior
Ставка: от 256 000 до 280 000
Полная загрузка
Проектная занятость
Долгосрочный проект
Оформление только через ИП
- Гражданство и локация: РФ
Будет плюсом
- Docker и Kubernetes
- Hadoop ecosystem
- Spark и Flink
- Airflow
- Опыт работы с высоконагруженными enterprise DWH
- Опыт в промышленности, телекоме или финтехе