Data Engineer

Compară abordările Data Vault în MCHS și X5. Ce beneficii au adus noile obiecte (bridge, tabele pit)?

Cât de des erau calculate vitrinele? Era o calcul incremental sau complet?

Vorbește-mi despre arhitectura stocării: cum a fost împărțită în straturi, care sunt caracteristicile fiecărui strat?

Vorbește-mi despre experiența ta de muncă

Ce strategii de încărcare incrementală în dbt ai folosit?

Ce operatori Airflow ai folosit? Cum ai interacționat cu dbt prin Airflow?

Cum ajung datele în depozitarea de la locul de muncă actual?

Analiza modelului dbt cu strategie incrementală: ce face modelul, există probleme?

Ce tipuri de distribuție ați folosit? Cum ați ales cheia de distribuție?

Ce tipuri de tabele ai folosit în Greenplum? În ce cazuri s-a folosit heap și în care Append-Optimized?

Care sunt caracteristicile utilizării XCom în Airflow?

Au fost cazuri de interacțiune cu baze de date relaționale?

Vorbește despre indexuri în Greenplum și ClickHouse

Cu ce surse de date ați reușit să lucrați? Cum a decurs interacțiunea cu sursele?

Vorbește-mi despre partiționare. Ce operații interesante a trebuit să faci?

Cine erau consumatorii de date și cum erau construite vitrinele?