Data Engineer
Heeft u aanvullende logging gedaan naast de logs van Airflow?
Hoe begrijp je het concept van sleutels in tabellen — waar is dat voor nodig?
Waarom zoek je een nieuwe baan en wat zou je in de toekomst willen doen?
Waarom ben je nu op zoek naar een nieuwe baan, wil je van baan veranderen?
Stel een oplossing voor voor het regelmatige incrementele laden van een grote tabel met een flexibele (wijzigbare) frequentie van updates van Postgres naar Data Lake.
En als we alle klanten nodig hebben, zelfs als ze op die datum geen transacties hadden, hoe kunnen we ze weergeven?
Heb je gewerkt met feature store's?
LeetCode #? — In PostgreSQL is er een tabel [tabel] met één kolom id en waarden 1, 1, 2. Schrijf een DELETE-query die één duplicaat fysiek verwijdert.
Gebruikt u AI in uw huidige werk? Welke tools en hoe precies?
Had je een probleem met tijdzones bij het lezen van timestamps via PXF uit Parquet?
Vertel ons over het meest belangrijke project of taak in Python in het afgelopen jaar.
Welk diagnoseer algoritme en wat te doen als de query nog steeds traag is na het toevoegen van meerdere indexen?
Is er een concept genaamd transactiesisolatieniveaus? Wat weet je erover?
Met welke visualisatietools hebt u gewerkt en hoe nauw hebt u samengewerkt met Power BI?
Als er 10 cores op de executor zijn, hoeveel taken worden er gelijktijdig uitgevoerd op een moment?
Heb je ooit rapporten, dashboards, visualisaties (BI) moeten maken?
importeer clickhouse_driver from airflow.hooks.base import * def get_clickhouse_client(): conn = BaseHook.get_connection("clickhouse_default") return clickhouse_driver.Client( host=conn.host, port=conn.port, user=conn.login, password=conn.password, database=conn.schema )
Welke framework heb je gebruikt voor het schrijven van pipelines? Hoe heb je Airflow gebruikt?
Technisch gezien is een database in een DBMS gewoon een bestand, waar komen beperkingen zoals NULL/Niet NULL vandaan? Waarvoor dienen deze logische abstracties?
Vertel me meer over het netwerk: wat is het en waarom is het belangrijk?