Sobes.tech

Data Engineer

Արդյո՞ք Greenplum-ում պահպանվում է ACID-ը։

187

Ի՞նչ գործընթացներ են սկսվում, երբ մենք հեռացնում կամ փոխում ենք գրառումները ClickHouse-ում:

187

Data Vault հարմար գործիք է, բայց օբյեկտները շատ են։ Կարող եք բացատրել հաբերի, լինքերի և սատելիտների տարբերությունը։

187

Նո՞ւյն եք գիտե՞լ Rust-ով գրված բազմատողային, շատ արագ գրադարան, որը կարող է փոխարինել Pandas-ին Data Science և Big Data-ի համար։

184

Ի՞նչ տարբերություն կա CTE-ի և ենթադրության միջև։

183

Ինչպե՞ս բաժանել հարցումը փուլերի: Ինչ ենք անում դրա համար:

180

Ի՞նչ տեխնոլոգիաներ եք օգտագործել տվյալները Parquet-ում լցնելու համար, և ինչ մեխանիզմներ են օգտագործվել տվյալները ստանալու և լցնելու համար։

178

Դուք տվյալներ եք բեռնել Spark-ից S3-ին Parquet ձևաչափով, ապա Parquet-ից Greenplum — բեռնման գործընթացը ինչպես է տեղի ունենում?

175

Ինչպե՞ս էին տվյալները արտաքին աղյուսակից բեռնվում նպատակային աղյուսակների մեջ։

175

Ինչպե՞ս գրել ես Airflow DAG-ը և աշխատանքները՝ ձեռքով կամ ձևանմուշներով:

175

Սթրիմինգով, Iceberg աշխատում էր, լսեցիր? Դա ֆայլերի աղբանոց է։

173

Դու աշխատե՞լ եք Git-ի հետ: Ի՞նչ եք պահում Git-ում։

172

Աշխատանքների միջև, DAG-ների միջև կախվածություններով — օգտագործե՞լ եք սենսորներ, որպեսզի նրանք մեկը մյուսի հետևից սկսվեն:

171

Ինչպե՞ս էր սովորական կերպով նախագծում ձեր տվյալների բազայի սխեման — ձեռքով բազայում, թե՞ սցենարները պահում էիք ինչ-որ տեղ, կամ ընդհանրապես Liquibase-ով աշխատում էիք, ինչ էր գործընթացը։

171

Սա իրական ժամանակ է, ինչպես իրականացնել դա Kafka և ClickHouse Spark միջև?

170

Արդյոք իմաստ ունի օգտագործել CTE, եթե այն օգտագործվում է միայն մեկ անգամ հարցումում?

169

Մենք JSON-ը կպարսենք — ով է պարսկելու JSON-ը: Ինչպես գիտեմ, ClickHouse-ում ֆունկցիաներ չկան։

166

Դուք պետք է ուղղակի աշխատեիք Spark-ով: Ի՞նչ է նրա թերությունը։

165

Iceberg-ը շարժական է, որը թույլ է տալիս S3-ը դարձնել տվյալների բազա, նույնիսկ պահպանում է ACID-ը: Ի՞նչ է դրա թերությունը։

161

Մենք պետք է ունենանք pipeline շարժիչ՝ մեխանիզմ, որը թույլ կտա շատ արագ ստեղծել հոսքեր՝ մատակարարելով պայմանագրեր և պարամետրեր։ Ինչպե՞ս կիրականացնեիր դա վերին մակարդակում։

161
/3