Data Engineer

Millist ressurssi kulutatakse kõige rohkem Nested Loop Join'i ajal?

Kas oled töötanud akna funktsioonidega? Milliseid akna funktsioone tead?

Middle

Aston

On tabel T1 (10 rida) ja T2 (5 rida), mõlemal on ID väli. Kui palju ridu võib maksimaalselt ja minimaalselt olla nende tabelite INNER JOIN ja LEFT JOIN tulemusena?

Middle

СБЕР

Millisel etapil, milliseid kontrollimisi tehakse ja mis juhtub kehtetute andmetega andmete kvaliteedi (Data Quality) kontrolli ajal?

Middle

СБЕР

Data Vault on mugav tööriist, kuid objekte on liiga palju. Kas sa saad seletada erinevust hubide, linkide ja satelliitide vahel?

Middle

МВидео

Millega tavaliselt koosnevad Airflow ülesannete logid?

[nimi] parandas vead ja stiili tekstis: «Tere! Mina olen [nimi], sa varem palunud üle minna Telegrami» — lugupidavalt, kuid sõbralikult

Kuidas vältida umbes 700 DAG-i samaaegset käivitamist catchup/backfill ajal Airflow's?

Middle

Островок

Peate kiiresti taastama mitu faili viimase commit versioonile, mitte mõjutades teisi muudatusi. Kuidas seda teha? git reset --hard HEAD Kustutage ja looge failid käsitsi uuesti git fetch ja git merge git revert HEAD git checkout HEAD^ <fail1> <fail2>

Kas teil on olnud vaja töötada Oracle Data Integrator (ODI) abil?

Middle

Aston

Milline oli viimane Python'i ülesanne, mida te tootmises lahendasite?

Kuidas lahendada probleemi, kui lugemisprotsess võib näha vahe- (ebakõla) olekut tabelis mitmeastmelise ETL (delete+insert) ajal Icebergis?

Millised teised failiformaadid, välja arvatud Parquet, töötavad Hadoop ja Hive'iga hästi?

Middle

Aston

Ladustamine oli ehitatud Data Vault skeemi järgi — kas sa seda ka arendasid, hooldasid? Kas sa käsitsi lisasid hub'e, lingid?

Middle

МВидео

Kas te kasutas Bridge ja PIT-tabeleid Data Vault? Anna näide ja selgita nende eesmärki.

Middle+

Лига Цифровой Экономики

Suur ladustamine oli — kui keeruline oli seda käsitsi hoida mahutavustes ja objektides?

Middle

МВидео

Millistel juhtudel võib ClickHouse'i Materialized View andmeid vahele jätta või vastupidi, duplitseerida?

Mis on Materialized View ja kuidas see erineb tavalisest View'st?

Rääkige oma kogemusest Airflow (orkestrator) kasutamisel. Mida kasutasite?

Kas olete töötanud JWT-tokensidega? Millistest plokkidest see koosneb?