Data Engineer
Kaip duomenys iš išorinės lentelės buvo įkeliami į tikslines lenteles?
Papaskink apie save: kuo užsiiminėjai, kokį technologijų rinkinį naudojai ir koks buvo šis projektas?
Kas yra duomenų vitrina?
Įsivaizduokite, kad Data Vault nėra prieinama ir yra dvi plačios lentelės, kurias reikia sujungti. Kaip tai optimizuotumėte Greenplum? O jei tai būtų ClickHouse?
Kaip sujungti dvi lenteles SQL?
Ar esi iš Maskvos? Ar jau seniai čia gyveni? Kodėl persikraustei į Maskvą?
Papaskinkite apie save, kur dirbote, kuo užsiėmėte, kokios buvo įdomios užduotys ir nesėkmės.
Mūsų tema yra labai struktūruota, medžio formos, duomenys yra žali — kaip juos apdoroti?
print(len(' '.join(map(str, [0, 1]))))
Išvardykite žinomas SQL lango funkcijas.
Ar žinote Rust kalba parašytą daugiasraigtinę, labai greitą biblioteką, kuri galėtų pakeisti Pandas?
Kas yra Spark JDBC ir kaip efektyviai įkelti didelį lentelę per jį?
Kaip pristatote DAG kodą į gamybą?
Kam skirtas išorinio rakto apribojimas ir koks yra jo prasmės apribojimas trinant/atnaujinant, kai yra priklausomi įrašai (logiškai)?
Kaip išvengti/pašalinti duomenų iškraipymą Spark?
Kokia yra ideali santykis tarp verslo užduočių ir infrastruktūros užduočių jums?
Ar dirbote su tipų žymomis? Ar žinote, kas tai yra?
Kaip organizuotas jūsų QA (duomenų kokybės patikra)?
Su kuria Airflow versija dirbote?
Kokios duomenų paskirstymo strategijos egzistuoja?