Apskritai paaiškinkite, kaip sukonstruota Spark architektūra: kokie komponentai yra ir kaip jie sąveikauja vykdant SQL užklausą.
Middle+
163
Data Engineer
671
0
Kas yra partizavimas? Kas yra sharding? Kas yra replikacija?
Middle+
162
Kas sukelia naujo darbo Spark'e sukūrimą ir kaip darbas yra padalintas į Stages ir Tasks?
Middle+
162
Jei nustatome filtravimo sąlygą pagal sandorio datą WHERE (po LEFT JOIN), ar tai apribos rezultatą pirmojoje lentelėje (klientai)?
Middle
161
Kuo atsakinga Eilutės grupė Parquet failo struktūroje?
Middle+
159
-- t1 -- num --------- -- 1 -- 2 2 null null 4 -- t2 -- num --------- -- [telefono] null null 5 PASIRINKTI a.num KAIP a_num, b.num KAIP b_num Iš t1 a Kairysis JOIN t2 b ON a.num = b.num;
Middle
159
SELECT client_id, ФИО, SUM(suma) AS total_amount FROM clients JOIN transactions ON clients.client_id = transactions.client_id WHERE дата = '2025-05-01' GROUP BY client_id, ФИО;
Middle
159
Ką grąžins funkcija find_mode sąrašui [1, 2, 3, 3, 4, 5]? Paaiškink žingsnis po žingsnio.
Middle
158
Kuo skiriasi partizavimas nuo sharding'o?
Middle
157
Kuo skiriasi Parquet saugojimo formatas nuo CSV?
Middle+
157
## mados užduotis # Yra skaičių sąrašas. Parašykite funkciją, kuri suranda šio sąrašo modą. # find_mode([1, 2, 3, 3, 4, 5]) #> 3
Middle
157
Papaskinkite, kur dirbote kaip sistemų analitikas ir kokius uždavinius atlikote?
Middle
155
Kokius metodus (tipus) žinote duomenų istorijos saugojimui? Kaip kaupiasi istorija lentelėse?
Middle
150
Kokie fiziniai JOIN tipai egzistuoja Spark?
Middle+
149
Kaip išgauti kiekvieno kliento paskutinį pilną vardą, jei žinoma tik pradžios data (pabaigos data nežinoma)?
Middle
149
Ar pats atlikote duomenų kokybės patikrinimus, ar reikalavimai kilo iš verslo/paslaugų teikėjų?
Middle
148
Koks fizinis JOIN mechanizmas bus naudojamas jungiant sandorių lentelę su kalendoriaus lentele pagal nelygybės sąlygą (data <= data)?
Middle+
148
Ką reiškia UNBOUNDED PRECEDING lango funkcijos ribose?
Middle+
148
Koks darbo formatas jums patogiausias — biuras, hibridas ar nuotolinis darbas? Turime du biurus, Kutuzovsky ir Tula.
Middle
147
Ar kada nors dirbote su AQE (Adaptive Query Execution) optimizatoriumi Spark? Ar žinote, kaip jis veikia?
Middle+
147