O wakacie
ЛИАН ищет Data Engineer на аутстафф-проект для проектирования и сопровождения пайплайнов обработки данных на Databricks. Работа удалённая, оформление через ИП или по самозанятости при совместительстве, зарплата от 240 до 350 тыс. рублей.
Чем предстоит заниматься
- Проектировать, внедрять и сопровождать пайплайны обработки информации и системы управления данными на Databricks с использованием Unity Catalog, Delta Lake и Workflows.
- Исследовать, профилировать и очищать наборы данных, распределять их по бизнес-доменам и выявлять персональные данные.
- Создавать архитектуру разграничения доступа к данным, включая data contracts, управление правами в каталоге и автоматизированное предоставление и отзыв привилегий через Terraform.
- Рецензировать и подтверждать производительность, адаптируемость и повторную применимость схем доступа и контрактов данных.
- Обеспечивать запуск продуктов обработки данных и механизмов контроля доступа в соответствии с утверждёнными контрактами.
- Готовить и актуализировать документацию по контрактам данных, моделям доступа и управлению информационными активами.
- Отслеживать работу пайплайнов и выполнять проверки качества данных.
- Изучать внутренние наработки и искать решения для повторного использования компонентов и унификации подходов.
Условия
Занятость: фулл тайм.
Локация: весь мир.
Зарплата: от 240 до 350 тыс.
Оформление: ИП; по самозанятости при совместительстве.
Компания
ЛИАН. Аутстафф-проект.
Отклик
Для отклика писать в личные сообщения @yanggilla. К отклику нужно сразу прикрепить CV.