Sobre a vaga
Специалист будет проектировать и эксплуатировать data-пайплайны для обработки событий кибербезопасности, аналитическое хранилище и витрины данных. В зоне ответственности также находятся Kubernetes-сервисы, наблюдаемость, качество данных и производительность data-платформы.
Обязанности
- Проектировать и развивать data-пайплайны для обработки событий кибербезопасности
- Нормализовать и обогащать события безопасности
- Проектировать и оптимизировать аналитическое хранилище данных на ClickHouse, StarRocks или аналогах
- Подготавливать витрины данных для быстрых запросов и аналитики
- Эксплуатировать data-сервисы в Kubernetes: выполнять деплой, управлять ресурсами, обеспечивать отказоустойчивость и масштабирование
- Обеспечивать наблюдаемость и качество данных с помощью метрик, алертов, replay и backfill
- Участвовать в разборе инцидентов и оптимизации производительности data-платформы
Требования
- Опыт построения и эксплуатации data pipelines в production-среде: ETL, ELT и/или streaming
- Уверенное знание SQL, включая оптимизацию запросов и анализ производительности
- Опыт работы с OLAP-СУБД: ClickHouse, StarRocks, Druid, Pinot или аналогами
- Понимание принципов потоковой обработки данных: идемпотентность, дедупликация, обработка ошибок
- Опыт проектирования и оптимизации витрин и схем хранения данных
Условия
- Удалённая работа
- Компания: Облако.ру
Отклик
Откликнуться можно через страницу вакансии: https://cloud.ru/career/vacancies/4052666