Vakansiya haqqında
Специалист будет заниматься построением и развитием платформ данных, DWH и Lakehouse-решений для обработки больших объёмов данных.
Требования
- Продвинутый опыт работы с Apache Spark: архитектура, оптимизация и tuning для обработки больших данных
- Практический опыт построения платформ данных с использованием Apache Iceberg на S3-совместимых хранилищах
- Опыт настройки и оптимизации ClickHouse под высокие нагрузки
- Глубокое понимание принципов построения DWH и современных подходов, включая Lakehouse
- Опыт разработки и поддержки сложных пайплайнов в Apache Airflow
- Умение работать в команде и нести ответственность за архитектурные решения
- Практически экспертный опыт реализации ETL и ELT
- Экспертный уровень SQL и глубокое понимание внутренних механизмов работы СУБД
- Знание подходов к разработке, документированию и тестированию ХД
- Знание методологий разработки Agile, Scrum и Waterfall
- Оконченное высшее образование технической специальности
Условия
- Удалённая работа
- Зарплата от 300 000 до 350 000 ₽
О компании
Дата Дженерейшн — ИТ-консалтинг, специализирующийся на внедрении Data driven решений.