Vakansiya haqqında
Команда 2ГИС ищет Data Engineer уровня от junior+ до уверенного middle для развития дата-инфраструктуры, ETL/ELT-процессов и работы с большими объёмами данных.
Компания и продукт
Вакансия открыта в Holocron, компании 2ГИС.
Что предстоит делать
- Расширять существующие форматы данных
- Разрабатывать и поддерживать ETL/ELT-процессы
- Автоматизировать batch-расчёты
- Подключать новые источники данных
- Участвовать в миграции пайплайнов с Hadoop/HDFS на новую архитектуру: S3, Kafka, Spark, ClickHouse
- Работать с большими объёмами данных и высоконагруженными Kafka-топиками
Кого мы ищем
- Опыт работы с данными от junior+ до уверенного middle
- Понимание устройства ETL/ELT-процессов
- Умение писать SQL и читать логику отчётов
- Знакомство с Apache Spark, Kafka и ClickHouse будет плюсом
- Знание одного из языков программирования, например Scala или Python
- Желание развиваться в направлении построения дата-инфраструктуры
Условия
- Удалённая работа
Как откликнуться
Откликнуться можно по ссылке: https://job.2gis.ru/software/87384/