O ofercie
Команда ищет Data Engineer для разработки и поддержки инфраструктуры данных большого проекта озера данных. Предстоит работать со сложными сценариями приёма и обработки данных из разных источников.
Что предстоит делать
- Разрабатывать и поддерживать парсеры
- Автоматизировать обработку и преобразование данных
- Отлаживать и мониторить конвейеры данных
Что мы ждём от кандидата
- Знание основных библиотек Python для работы с данными
- Опыт обработки и скрейпинга или парсинга сложных и слабоструктурированных документов в форматах PDF, DOC, DOCX, XLS, XLSX
- Опыт автоматизации конвейеров данных и знание соответствующих программных инструментов
- Представление об управлении качеством данных
- Представление о возможностях отладки и мониторинга
- Понимание специфики форматов данных: JSON Lines, Parquet, XML, CSV и других
- Понимание методов получения и поставки данных, включая S3, REST API, SOAP и RPC
- Знание английского языка на уровне, достаточном для чтения технической документации
- Знание Git
- Готовность осваивать новые технологии и разрабатывать индивидуальные технические решения под поставленные задачи
- Плюсом будет опыт работы с данными из открытых источников и понимание их специфики
- Плюсом будет опыт долгосрочной поддержки работы парсеров
- Плюсом будет опыт работы с библиотеками Python для computer vision
Условия
- Удалённый или гибридный формат работы
- Локация: Москва
- Заработная плата: от 120 до 210 тысяч рублей
- Оформление по ТК РФ
- Технологический стек: PostgreSQL, Python 3, Selenium
О проекте
Проект только стартовал: мало легаси и много свободы для экспериментов.
Можно влиять на выбор технологий и архитектурных решений.
- Компания: ООО «ОДСС»
- Компания аккредитована как IT-компания
- Сайт: https://odsscompany.ru
Как откликнуться
Для быстрой связи: @LvovaOV