Data Engineer

Έγινε επιπλέον καταγραφή εκτός από τα αρχεία καταγραφής του Airflow;

Middle+

Лига Цифровой Экономики

Πώς καταλαβαίνεις την έννοια των κλειδιών στους πίνακες — για ποιο λόγο χρειάζονται;

Γιατί ψάχνεις μια νέα δουλειά και τι θα ήθελες να κάνεις στο μέλλον;

Γιατί ψάχνεις τώρα μια νέα δουλειά, θέλεις να αλλάξεις δουλειά;

Middle

СБЕР

Προτείνετε μια λύση για τη τακτική σταδιακή φόρτωση ενός μεγάλου πίνακα με ευέλικτη (αλλαγή) συχνότητα ενημέρωσης από το Postgres στο Data Lake.

Και αν χρειαζόμαστε όλους τους πελάτες, ακόμα και αν δεν είχαν συναλλαγές σε αυτήν την ημερομηνία, πώς μπορούμε να τους εμφανίσουμε;

Middle

СБЕР

Έχετε εργαστεί με feature store;

LeetCode #? — Στο PostgreSQL υπάρχει ένας πίνακας [πίνακας] με μία μόνο στήλη id και τιμές 1, 1, 2. Γράψτε ένα ερώτημα DELETE που θα διαγράψει φυσικά ένα διπλότυπο.

Χρησιμοποιείτε τεχνητή νοημοσύνη στη τρέχουσα εργασία σας; Ποια εργαλεία και πώς ακριβώς;

Είχατε πρόβλημα με τις ζώνες ώρας κατά την ανάγνωση timestamps μέσω PXF από Parquet;

Middle

Aston

Πείτε μας για το πιο σημαντικό έργο ή εργασία σε Python τον τελευταίο χρόνο.

Ποιο είναι το αλγόριθμο διάγνωσης και τι πρέπει να κάνετε αν το ερώτημα εξακολουθεί να είναι αργό μετά την προσθήκη πολλαπλών ευρετηρίων;

Υπάρχει μια έννοια που ονομάζεται επίπεδα απομόνωσης συναλλαγών. Τι γνωρίζετε γι' αυτό;

Με ποια εργαλεία οπτικοποίησης εργαστήκατε και πόσο στενά συνεργαστήκατε με το Power BI;

Αν στον executor υπάρχουν 10 πυρήνες, πόσες εργασίες θα εκτελούνται παράλληλα σε ένα στιγμιότυπο;

Έχεις ποτέ χρειαστεί να κάνεις αναφορές, πίνακες ελέγχου, οπτικοποιήσεις (BI);

εισαγάγετε clickhouse_driver from airflow.hooks.base import * def get_clickhouse_client(): conn = BaseHook.get_connection("clickhouse_default") return clickhouse_driver.Client( host=conn.host, port=conn.port, user=conn.login, password=conn.password, database=conn.schema )

Ποιο πλαίσιο χρησιμοποιήσατε για τη συγγραφή των pipelines; Πώς χρησιμοποιήσατε το Airflow;

Middle

Aston

Τεχνικά, μια βάση δεδομένων σε ένα σύστημα διαχείρισης βάσεων δεδομένων (DBMS) είναι απλώς ένα αρχείο, από όπου προέρχονται περιορισμοί όπως NULL/NOT NULL; Για ποιο λόγο χρειάζονται αυτές οι λογικές αφαιρέσεις;

Πες μου περισσότερα για το δίκτυο: τι είναι και γιατί είναι σημαντικό;

Middle

Островок