Data Engineer

Шумо одатан чӣ гуна нақшаи базаи додаҳоро тарҳрезӣ мекардед — мустақиман дар база ё скриптҳоро дар ҷое нигоҳ медоштед, ё ба куллӣ Liquibase-ро истифода мебурдед, раванҷ чӣ гуна буд?

Middle

МВидео

Кадом стратегияҳои физикии иҷрои join-ро медонед?

Middle

Островок

Кадом механизмии физикии JOIN дар пайваст кардани ҷадвали транзаксияҳо бо ҷадвали тақвим бо шарти нобаробарӣ (сана <= сана) истифода мешавад?

Чӣ тавр кор мекунад пайванди Nested Loop ва чӣ гуна аст мушкилоти алгоритмӣ? Мушкилоти ҳамаи се алгоритм чӣ гуна аст?

Middle+

СБЕР

Чӣ дигар дар Python навиштаӣ ба ғайр аз Airflow DAG?

Middle

МВидео

Маъзулоти изолатсияи транзаксияҳо вуҷуд дорад? Шумо дар бораи он чӣ медонед?

Фарқи байни repartition ва coalesce дар Spark чист?

Middle

Островок

Функсияи find_mode барои рӯйхати [1, 2, 3, 3, 4, 5] чӣ бармегардонад? Қадам ба қадам шарҳ диҳед.

Middle

СБЕР

Оё тестҳои воҳидӣ навиштаед? Оё ин таҷриба доред?

Мо ORDER BY дар шумораи фармоишҳо, ва ду фармоиш бо 5 ҳастанд, боз ду бо 3. RANK() ва DENSE_RANK() чӣ гуна рафтор мекунанд?

Middle

Альфа-Банк

Оё таҷрибаи навиштани ҳуҷҷатҳоро доред?

Оё дар Greenplum функсияҳо ва имкониятҳое ҳастанд, ки дар MySQL оддӣ ва дигар диалектҳо нестанд?

Middle

Альфа-Банк

Турбаши ва фаҳмиши шумо дар сохтани пайплайнҳо барои ҳисоб кардани витринаҳо (коркарди додаҳо) чист?

Як намуна диҳед, кай шумо тавонистед равандҳо ё асбобҳоро барои гурӯҳ беҳтар кунед.

Шумо ҷадвали audit_logs месозед, ки бояд сана ва вақти дақиқ бо минтақаи вақтро нигоҳ дорад. Кадом намуди маълумот мувофиқ аст? вақт бо минтақаи вақт интервал timestamp бо минтақаи вақт сана timestamp бе минтақаи вақт

Дар бораи беҳтарин амалҳо барои истифодаи индексҳо нақл кунед - кай ва чанд вақт онҳоро истифода бурдан лозим аст.

Дар бораи сатҳи Python-и худ нақл кунед: чӣ истифода бурдед, ки қадар амиқ OOP-ро медонед

چگونه مصرف حافظه DataFrame در Pandas را کاهش دهیم؟

Създайте таблица raw.local_transactions в клъстера cluster_4x2 ( transaction_id String, user_id String, amount Float64, created_at DateTime ) МЕХАНИЗЪМ = ReplicatedMergeTree() РАЗПРЕДЕЛЕНИЕ ПО amount ОРДЕР ПО (transaction_id); Създайте таблица raw.transactions в клъстера cluster_4x2 ( transaction_id String, user_id String, amount Float64, created_at DateTime ) МЕХАНИЗЪМ = Distributed('cluster_4x2', 'raw', 'local_transactions', cityHash64(user_id));

Чӣ гуна метавон shuffle-ро дар Spark идора кард (таҳзиб, пайвастшавии паҳнӣ ва ғайра)?