Data Engineer

Worauf ist bei der Speicher-, Geschwindigkeits- und Genauigkeitsprüfung beim Parsen großer XMLs zu achten?

Wie funktioniert die Komprimierung in ClickHouse?

Erstellen Sie eine Liste teurer Buchungen Frage Wie können Sie eine Liste von Buchungen am Tag von [Telefon] erstellen, die den Mitgliedern (oder Gästen) mehr als 30 $ kosten? Denken Sie daran, dass Gäste unterschiedliche Kosten haben als Mitglieder (die aufgeführten Kosten sind pro halbe Stunde 'Slot'), und der Gastbenutzer ist immer ID 0. Fügen Sie in Ihrer Ausgabe den Namen der Einrichtung, den Namen des Mitglieds als eine einzelne Spalte und die Kosten ein. Sortieren Sie nach absteigendem Kosten, und verwenden Sie keine Unterabfragen.

Was ist eine materialisierte Ansicht und wie unterscheidet sie sich von einer normalen Ansicht?

Welche Tabellentreiber in ClickHouse kennen und verwendet haben?

Wie tief sind Ihre Kenntnisse in Python, welche Bibliotheken haben Sie verwendet?

Was ist DAG in Airflow, woraus besteht es und wie führt Airflow einen DAG aus?

Wie überträgt man Daten zwischen Aufgaben in Airflow?

Partitionierung in Datenbanken: Wozu ist sie gut, wie funktioniert sie?

Wie bewertet man die Konfiguration für die Übertragung von einem Terabyte Daten von PostgreSQL zu ClickHouse?

Was ist eine CTE (Gemeinsamer Tabellenausdruck)?

Wie kann man die Parameter oder Einschränkungen in ClickHouse anzeigen?

Was ist Normalisierung und Denormalisierung, wann sind sie notwendig?

Wie liest man eine 100-Gigabyte-Datei in Python?

Erzähle mir von deiner Erfahrung bei X5: Was hast du im Bereich DWH gemacht?

Was macht OPTIMIZE in ClickHouse und warum sollte man es nicht bedenkenlos ausführen?

Welche JOIN-Typen gibt es in SQL (logisch und physisch)?

Wann ist der Einsatz von ThreadPoolExecutor sinnvoll?

Wie man den Speicherverbrauch des DataFrame in Pandas reduziert?

Was ist zu überprüfen, wenn die Protokolle nicht geöffnet werden (Fehler 403)?