Data Engineer

Дар бораи вазифаи танзими репликация, ки шумо ҳал кардаед, нақл кунед.

Чӣ гуна бояд аз хато ё нодурустии маълумот дар Spark пешгирӣ ё бартараф кард?

Нормализатсия ва модели ER чист, барои чӣ лозиманд?

Дар кадом ҳолатҳо нормализатсия истифода мешавад ва дар кадом ҳолатҳо денормализатсия?

Кадом алгоритми барои ташхис ва чӣ бояд кард, агар дархост пас ҳам суст бошад пас аз илова кардани чанд индекс?

Дар бораи консепсияҳои асосии Kafka (гурӯҳи истеъмолкунандагон, тақсимот, мавзӯъҳо) нақл кунед.

Афзоиши од сабаби од сабаби, ки дар базаи маълумоти муносибатӣ суол ба сустӣ кор мекунад?

Кадом проблемҳои ношаффоф дар вақти боркунии ҷадвалҳои калон (ғайр аз иҷроиш) метавонанд рӯй диҳанд?

Ҳалқаи ҳалли боргирии такрорӣ дар вақти воқеӣ барои ҷадвали калон бо басомади навсозии чандир (муҳаррик) аз Postgres ба Data Lake пешниҳод кунед.

Чӣ гуна ба ҳам пайвастагии тартиб додани дар дохили функсияи тиреза ва тартиби охирии ORDER BY дар дархост?

Чӣ гуна бояд захираҳои барномаи Spark-ро идора кард, то дар тағйири ҳаҷми маълумоти воридотӣ хотираро зиёдатӣ истифода набарем?

Чӣ гуна бо партисияҳо тавассути coalesce ва repartition кор кардан мумкин аст?

Кадом тасвири Docker бояд сохтан ва барои чӣ?

Оё механизмҳои дигар барои идоракунии shuffle ба ғайр аз coalesce/repartition вуҷуд доранд?

Кадом параметрҳои Spark JDBC барои параллелгардонии хондан истифода шудаанд?