Data Engineer

Kādus tabulu dzinējus jūs zināt un esat izmantojis ClickHouse?

Kāda ir atšķirība starp WHERE un HAVING?

Ko jāņem vērā, analizējot lielus XML failus, attiecībā uz atmiņu, ātrumu un precizitāti?

Kā darbojas saspiešana ClickHouse?

Izveido dārgu rezervējumu sarakstu Jautājums Kā jūs varat izveidot [telefona] dienas rezervējumu sarakstu, kas izmaksās dalībniekam (vai viesim) vairāk nekā 30 $? Atcerieties, ka viesiem ir dažādas izmaksas nekā dalībniekiem (uzskaitītās izmaksas ir par pusstundas 'slot'), un viesu lietotājs vienmēr ir ID 0. Iekļaujiet savā izvadē ēkas nosaukumu, dalībnieka vārdu kā vienu kolonnu un izmaksas. Kārtot pēc dilstošas izmaksas un neizmantojiet apakšvaicājumus.

Kas ir Materialized View un kā tas atšķiras no parasta View?

Kas ir DAG Airflow, no kā tas sastāv un kā Airflow izpilda DAG?

Cik dziļas ir jūsu zināšanas par Python, kuras bibliotēkas esat izmantojis?

Kā pārsūtīt datus starp uzdevumiem Airflow?

Kā novērtēt konfigurāciju, lai pārsūtītu vienu terabaitu datu no PostgreSQL uz ClickHouse?

Datu bāzu sadalīšana: kam tas ir nepieciešams, kā tas darbojas?

Kā lasīt 100 gigabaitu lielu failu Python?

Kā skatīt parametrus vai ierobežojumus ClickHouse?

Kādi ir JOIN veidi SQL (loģiskie un fiziskie)?

Ko dara OPTIMIZE ClickHouse un kāpēc to nevajadzētu bezdomīgi palaist?

Kas ir normalizācija un denormalizācija, kad tās ir nepieciešamas?

Pastāsti par savu pieredzi X5: ar ko tu nodarbojies DWH jomā?

Kad ir kad ThreadPoolExecutor ir piemērots?

Kā samazināt DataFrame atmiņas patēriņu Pandas?

Ko jāizskata, ja žurnāli neatveras (kļūda 403)?