Vakansiya haqida
Ищут Data Engineer уровня Middle+ / Senior для разработки data lakehouse-решения и подготовки решения к переносу в закрытый контур заказчика. Работа предполагает создание ETL/ELT-пайплайнов, обработку больших объёмов данных и взаимодействие с командой проекта.
О компании и проекте
Компания EvApps разрабатывает data lakehouse-решение для заказчика. Работа ведётся под NDA.
Обязанности
- Разрабатывать и оптимизировать ETL-пайплайны
- Обрабатывать и трансформировать XML-данные
- Строить raw-слой на Parquet в S3 и витрины данных
- Реализовывать нормализацию, дедупликацию и формирование «золотых» записей
- Обеспечивать производительность обработки данных
- Готовить решения к переносу в закрытый контур заказчика
- Взаимодействовать с аналитиками, архитектором, DevOps и командой проекта
Требования
- Опыт работы Data Engineer от 3 лет
- Опыт построения ETL/ELT-пайплайнов в продакшене
- Опыт работы с большими объёмами данных
- Уверенное владение Python
- Опыт обработки и трансформации данных с использованием pandas, PySpark или аналогов
- Опыт работы с XML, включая lxml, ElementTree или аналоги
Условия
- Удалённая работа по РФ
- Полная занятость
- Зарплата до 200 на руки
Как откликнуться
Откликнуться с пометкой [Data Engineer] пользователю @yanaapon.