Sobre a vaga
Ищут Python-разработчика для проектирования, развития и поддержки ETL-процессов и инфраструктуры обработки данных. Роль включает работу с потоковыми данными, базами PostgreSQL и ClickHouse, а также автоматизацию и мониторинг data pipeline.
Какие задачи необходимо решать
- Разработка на Python
- Проектирование, разработка, оптимизация и поддержка ETL-процессов для загрузки данных из различных источников
- Управление потоковой обработкой данных с использованием Apache Kafka: разработка продюсеров и консьюмеров, управление топиками, обеспечение надежности и отказоустойчивости
- Разработка и оптимизация структур данных, схем и запросов в PostgreSQL для операционных и транзакционных задач