Πώς διαβάζεται ένα αρχείο από το HDFS, π.χ. Parquet — ολόκληρο ή κατά μπλοκ;
Data Engineer
Έχεις χρησιμοποιήσει XCom στο Airflow;
Πότε μπορείτε να χρησιμοποιήσετε την οικογένεια μορφών CSV;
Ταιριάζει πάντα το σχέδιο εκτέλεσης του EXPLAIN με αυτό που εκτελείται πραγματικά;
Ποια άλλα φορμά αρχείων, εκτός από το Parquet, λειτουργούν καλά με το Hadoop και το Hive;
Μπορεί κανείς να δει το σχήμα του πίνακα πριν εκτελέσει το ερώτημα στο Hive;
Γιατί διαχωρίζονται οι προβολές (VIEW) και οι πίνακες; Ποιος είναι ο σκοπός των προβολών;
Πώς να μάθετε το πραγματικό σχέδιο εκτέλεσης ενός ερωτήματος στην Oracle;
Τι είναι οι προβολές (VIEW) και οι υλοποιημένες προβολές (MATERIALIZED VIEW) στην Oracle; Πώς ενημερώνονται τα δεδομένα σε μια υλοποιημένη προβολή;
Τι είναι οι αργές λειτουργίες στο Spark και ποιος είναι ο σκοπός τους;
Πες μου για το προηγούμενο έργο σου, ποιες ήταν οι ευθύνες σου;
Πώς ταιριάζει η εμπειρία σας με τις ευθύνες της θέσης: συνοδεία και ανάλυση των διαδικασιών φόρτωσης, παρακολούθηση και ανίχνευση ανωμαλιών, δοκιμές και εγκατάσταση βελτιώσεων σε παραγωγή, υποστήριξη δεύτερης γραμμής, έλεγχος τεχνικής τεκμηρίωσης;
Έχετε εργαστεί με το Oracle Data Integrator (ODI);
Μπορείς να θυμηθείς την εμπειρία σου στην βελτιστοποίηση ερωτημάτων; Πώς ενεργούσες, αναλύεις;
Ποια είναι τα πλεονεκτήματα και τα μειονεκτήματα των κατανεμημένων συστημάτων βάσεων δεδομένων;
Υπήρξε ένα αργό αναλυτικό ερώτημα στο Hive. Πώς να καταλάβετε τι συνέβη και πώς να το διορθώσετε;
Έχεις δουλέψει με συναρτήσεις παραθύρου; Ποια είδη συναρτήσεων παραθύρου γνωρίζεις;
Ποια ήταν η αρχιτεκτονική σας στο έργο; DWH ή κάτι άλλο;
Ποια είναι η διαφορά μεταξύ πολυνηματισμού και πολλαπλής επεξεργασίας; Για ποιες εργασίες χρησιμοποιούμε νήματα και για ποιες διαδικασίες;
Έχεις δουλέψει με φόρτωση σε παρτίδες ή streaming;