Относно свободното място
2GIS ищет Data Engineer для повышения эффективности batch-пайплайнов, создания realtime-пайплайна на основе Kafka-топиков и разработки сервисов обработки миллиардов пользовательских событий.
Предстоит
- Повысить эффективность пайплайнов для расчёта daily-признаков на основе batch-процессинга
- Создать эффективный пайплайн для расчёта realtime-признаков на основе Kafka-топиков
- Проектировать и разрабатывать сервисы, обрабатывающие миллиарды событий пользователей
- Решать сложные инженерные задачи: расчёт метрик и построение витрин