Data Engineer

В плане запроса можем посмотреть, что происходит с данными, в том числе какие типы джойнов — какие типы джойнов мы можем там увидеть?

Middle

МВидео

Напрямую со Spark приходилось работать? В чем его минус?

Middle

МВидео

С Git приходилось работать? Что в Git хранили?

Middle

МВидео

Как данные из внешней таблицы заливались в целевые таблицы?

Middle

МВидео

Как Git Flow рекомендует оформлять новый релиз приложения? - Созданием новой issue-ветки - Созданием hotfix-ветки от master - Созданием отдельной release-ветки от develop - Прямым коммитом в ветку master - Слиянием ветки master напрямую в develop

Это real-time, нужно как-то между Kafka и ClickHouse Spark включить — как это реализовать?

Middle

МВидео

Данные из Greenplum и Trino перегружались в ClickHouse — каким образом можно передать данные туда?

Middle

МВидео

Как вы оформляете свои проекты? Пишете README или что-то ещё?

Как выбрать правильный ключ шардирования для равномерного распределения данных?

В чём особенности и отличия Set от List в Python? Помимо производительности, какие ещё есть особенности?

Middle

СБЕР

-- Дана таблица numbers с одной колонкой num (целые числа, могут повторяться). -- Напишите SQL запрос, который разделит числа на две колонки: -- even – чётные числа (отсортированные по возрастанию) -- odd – нечётные числа (отсортированные по возрастанию) -- Числа должны располагаться строка за строкой: в первой строке – первое чётное и первое нечётное, -- во второй строке – второе чётное и второе нечётное и т.д. -- Если в одной из групп чисел больше, чем в другой, на недостающих местах должно быть NULL. -- исходная таблица -- num -- --------- -- [phone] -- результат запроса -- even | odd -- -----|----- -- 2 | 1 -- 4 | 3 -- 6 | 5 -- 8 | 7 -- 10 | 9 -- NULL | 11 -- NULL | 11

Middle

СБЕР

Как вы обычно организуете свою работу над задачами и как отслеживаете прогресс?

Как обеспечить глобальную уникальность primary key в PostgreSQL при шардировании?

Как вы обычно подходите к построению ETL и ELT процессов? В чём разница этих процессов?

Какое ограничение существует при использовании DISTINCT ON в PostgreSQL с ORDER BY?

-- t1 -- num --------- -- 1 -- 2 2 null null 4 -- t2 -- num --------- -- [phone] null null 5 SELECT a.num AS a_num, b.num AS b_num FROM t1 a LEFT JOIN t2 b ON a.num = b.num;

Middle

СБЕР

В какой команде и под каким руководством вам комфортнее всего работать?

Что для вас важно при проектировании пайплайна?

Как вы обычно работаете с Git в команде? И что такое Merge Request?

У нас ORDER BY по количеству заказов, и у нас идёт два заказа по 5, ещё два заказа по 3. Как себя поведёт RANK() и как DENSE_RANK()?

Middle

Альфа-Банк