Millise palgaga sa loodad?
Data Engineer
Kas te töötasite andme vitriinidega (DWH kiht)?
Mis on CROSS JOIN? Kas olete sellega töötanud?
Miks sa nüüd otsid uut tööd, tahad töökohta vahetada?
Mida saadakse tulemuseks, kui ühendada tehingud klientidega vastavalt client_id ja date_start (ilma BETWEEN-ita)?
Milliseid JOIN-tüüpe tead? (loogilised)
Kas Sparkis saab paralleelselt lugeda andmeid ühest Parquet-failist või ainult ühe tuumaga ühes ülesandes?
Rääkige paar sõnast, mis on seotud andmete kvaliteediga, ja mõned teie kõige olulisemad ülesanded.
Millised on rida- ja veerupõhiste andmebaaside eelised ja puudused? Mis on tõhusam rühmitamiseks ja agregatsiooniks?
Räägi endast — töökogemus, tehnoloogiatek
Räägi mulle oma arusaamest andmete kvaliteedist — kas sul on kogemusi selles valdkonnas?
On tabel T1 (10 rida) ja T2 (5 rida), mõlemal on ID väli. Kui palju ridu võib maksimaalselt ja minimaalselt olla nende tabelite INNER JOIN ja LEFT JOIN tulemusena?
Kui executoril on 10 tuuma, kui palju ülesandeid täidetakse paralleelselt ühel hetkel?
Kirjeldage akna funktsioone võimalikult laialdaselt: milliseid märksõnu kasutatakse ja milleks igaüks neist on mõeldud.
-- Antud tabel numbers ühe veeruga, nimega num (täisarvud, mis võivad korduda). -- Kirjutage SQL-päring, mis jagab numbrid kaheks veeruks: -- even – paarisarvud (sorteeritud kasvavalt) -- odd – paaritud arvud (sorteeritud kasvavalt) -- Numbrid tuleb paigutada rida haaval: esimesel real – esimene paaris ja esimene paaritu, -- teisel real – teine paaris ja teine paaritu ning nii edasi. -- Kui ühes grupis on rohkem numbreid kui teises, tuleb puuduvad kohad täita NULL-iga. -- algne tabel -- num -- --------- -- [phone] -- päringu tulemus -- even | odd -- -----|----- -- 2 | 1 -- 4 | 3 -- 6 | 5 -- 8 | 7 -- 10 | 9 -- NULL | 11 -- NULL | 11
Milliseid füüsilisi JOIN-e teate?
Mis on partitsioonimine? Mis on sharding? Mis on replikatsioon?
Kuidas töötab Nested Loop Join ja milline on selle algoritmiline keerukus? Milline on kõigi kolme algoritmi keerukus?
Mis on LEFT SEMI JOIN ja LEFT ANTI JOIN Spark SQL-is, kas te olete kunagi kasutanud?
Mida tagastab find_mode funktsioon loendist [1, 2, 3, 3, 4, 5]? Selgita samm-sammult.