Data Engineer

Дар бораи лоиҳаи муҳимтарин ё вазифаи Python дар соли гузашта нақл кунед.

Кадом алгоритми барои ташхис ва чӣ бояд кард, агар дархост пас ҳам суст бошад пас аз илова кардани чанд индекс?

Маъзулоти изолатсияи транзаксияҳо вуҷуд дорад? Шумо дар бораи он чӣ медонед?

Агар дар executor 10 ядра бошад, чанд Tasks дар як вақт ба таври ҳамзамон иҷро мешаванд?

Оё то ҳол ба шумо лозим омад, ки ҳисоботҳо, панели, визуализатсияҳо (BI) созед?

Масъала #2 Язмингиз керак, ҳар бир бўлимда TOP-3 ишчи бўйича маълумотлар чиқарувчи сўров. Бўлим номи, ишчи номи ва унинг маошини кўрсатинг. employee жадвали: | id | name | salary | dept_id | |----|-------|--------|---------| | 10 | John | 1000 | 2 | | 20 | Tom | 5000 | 3 | | 30 | Bill | 3000 | 2 | department жадвали: | id | name | |----|-----------| | 1 | Marketing | | 2 | IT | | 3 | Молия | Натижа: department_name, num, employee_name, salary cte сифатида: select d.name as department_name, e.name as employee_name, e.salary, dense_rank from employee e join department d on e.id = d.id

Middle

Островок

импортировать clickhouse_driver from airflow.hooks.base import * def get_clickhouse_client(): conn = BaseHook.get_connection("clickhouse_default") return clickhouse_driver.Client( host=conn.host, port=conn.port, user=conn.login, password=conn.password, database=conn.schema )

Барои сифатнокии маълумот, чаро скриптҳои фармоишӣ дар Python/Airflow интихоб шуданд, на як муҳаррики тайёр, масалан Great Expectations?

Кадом чаҳорчӯба барои навиштани пайплайнҳо истифода бурдед? Чӣ гуна Airflow-ро истифода бурдед?

Middle

Aston

Техникӣ, базаи додаҳо дар системи идоракунии додаҳо (DBMS) танҳо як файл аст, аз куҷо маҳдудиятҳои мисли NULL/NOT NULL пайдо мешаванд? Ин abstractionҳои мантиқӣ барои чӣ лозиманд?

Spark дар кадом муҳит оғоз ёфт?

Чӣ мешавад, агар шумо `s ** 2` ба рӯйхати `s = [1, 2, 3]` татбиқ кунед?

УДФ дар Spark чӣ бадӣ дорад ва нуқсони онҳо чист?

Middle

Островок

Дар бораи консепсияҳои асосии Kafka (гурӯҳи истеъмолкунандагон, тақсимот, мавзӯъҳо) нақл кунед.

Дар бораи намудҳои маълумоти тағйирёбанда ва тағйирнопазир дар Python ва намунаҳо диҳед.

Middle

Островок

Оё имкон дорад, ки тақсимоти тасодуфиро дар Greenplum истифода бурдан ва кай ин мувофиқ аст?

Middle+

Лига Цифровой Экономики

Оё шумо бо боргирии гурӯҳӣ ё ҷараён кор кардаед?

Middle

Aston

Чаро рӯйхат наметавонад ҳамчун калиди луғат истифода шавад?

Middle

МТС

Барои ҳар сатр дар ҷадвали salaries, номи кормандро, сана, музди меҳнатро нишон диҳед ва бо истифода аз функсияи тиреза, сутуни "музди миёна дар шӯъба дар ин сана" илова кунед.

Чӣ гуна ба ҳам пайвастагии тартиб додани дар дохили функсияи тиреза ва тартиби охирии ORDER BY дар дархост?