Data Engineer
Avez-vous de l'expérience dans la rédaction de documentation?
Quelle est votre expérience et votre compréhension dans la construction de pipelines pour le calcul des vitrines (traitement des données) ?
Si nous mettons une condition de filtrage par date de transaction dans WHERE (après LEFT JOIN), cela va-t-il limiter le résultat de la première table (clients) ?
Avez-vous de l'expérience dans la configuration de pipelines en CI/CD, par exemple, GitLab?
Avec le streaming, Iceberg fonctionnait, tu as entendu ? C'est un stockage de fichiers poubelle.
Comment réduire la consommation de mémoire du DataFrame dans Pandas?
Comment fonctionne Hash Join?
Comment gérer le shuffle dans Spark (partitionnement, broadcast join, etc.)?
Quels outils de traçage ont été utilisés ? Dans Spring Boot 2 et Spring Boot 3 ?
Connaissez-vous les cubes OLAP ? Lorsque nous travaillons avec des données multidimensionnelles, semblables à un tableau croisé dynamique dans Excel, mais pour une interaction plus rapide avec de grands volumes de données.
Avez-vous travaillé avec des chargements incrémentiels et complets ? Comment avez-vous géré les doublons ?
Comment Git Flow recommande-t-il de formaliser une nouvelle version de l'application? - En créant une nouvelle branche issue - En créant une branche hotfix à partir de master - En créant une branche release séparée à partir de develop - En faisant un commit direct dans la branche master - En fusionnant directement la branche master dans develop
Comment Spark détermine-t-il qu'une table est suffisamment 'petite' pour une jointure broadcast (limite supérieure) ?
Quelle est la différence entre virtualisation et conteneurisation (Docker) ?
Nous avons un ORDER BY par nombre de commandes, et il y a deux commandes avec 5, deux autres avec 3. Comment se comporteront RANK() et DENSE_RANK() ?
Comment distingues-tu les vérifications techniques et commerciales des données, et qui doit définir les exigences pour celles-ci?
Quelle est la différence entre WHERE et HAVING en SQL?
Vous créez une table audit_logs où vous devez stocker la date et l'heure exactes avec fuseau horaire. Quel type de données est le plus approprié ? heure avec fuseau horaire intervalle horodatage avec fuseau horaire date horodatage sans fuseau horaire
Parlez-moi de vous, où avez-vous travaillé, quelles ont été vos activités, quelles ont été les tâches intéressantes et les échecs.
Parlez des meilleures pratiques pour l'utilisation des index : quand et à quelle fréquence les utiliser.