Data Engineer
Wie haben Sie den Datenbias bei client_id korrigiert, wenn ein Kunde deutlich größer war als die anderen? Welche Optionen gibt es?
Kann man einen Dekorator ohne die @-Syntax erstellen und anwenden?
Warum haben Sie entschieden, das Ranking in eine separate CTE auszulagern? Warum konnte es nicht direkt in der ersten CTE verwendet werden?
Welche technischen Felder wurden in Satelliten, Links und Hubs Data Vault verwendet?
Frage Nr. 1 Wie viele Datensätze gibt die Abfrage mit inner, left, right, full join von zwei Tabellen zurück, wenn sie nach dem Attribut id verbunden werden t1 t2 | id | | id | |-----| |-----| | 1 | | 1 | | 2 | | 1 | | 3 | | 3 | | 0 | | 5 | | NULL| | NULL| | NULL| inner: left: right: full outer:
Haben Sie die Ergebnisse tabellarischer Ansichten in Parquet oder anders in S3 gespeichert?
Was sind Dekoratoren in Python?
Welche Arten von physischen JOINs gibt es in Spark?
Kennen Sie ReplicatedQueue? Haben Sie Erfahrung im Umgang damit?
Wie viel Zeit haben Sie insgesamt mit Spark gearbeitet und wie tief sind Sie darin eingetaucht?
Was sind Lazy-Operationen in Spark und wofür sind sie nützlich?
Arten von JOINs und ihre Unterschiede
Wie arbeitet man mit Partitionen über coalesce und repartition?
Wie haben Sie festgestellt, dass der Eintrag bereits existiert und nicht erneut gespeichert werden muss?
NULL plus 5 — wie viel wird das sein?
Kann man in Spark Daten parallel aus einer einzigen Parquet-Datei lesen, oder nur mit einem Kern in einer Aufgabe?
Mit welchen Dateiformaten haben Sie gearbeitet?
Erzählen Sie mir von sich: Erfahrungen, Aufgaben, Funktionen oder Errungenschaften, auf die Sie stolz sind.
Haben Sie Erfahrung mit FastAPI?
Hast du statistische Überprüfungen durchgeführt?