Data Engineer
როგორ დავალაგოთ დიდი XML ფაილები ZIP-ში და ავთვირთოთ ისინი ClickHouse-ში Python-ის გამოყენებით?
როგორ აღვადგინოთ შორეული ფილიალიდან სამუშაო, თუ ცდილობთ `git checkout hotfix/missing-footer` და მიიღებთ შეცდომის შეტყობინებას, რომ ფილიალი არ მოიძებნა?
რა არის YARN და რა მიზნით გამოიყენება?
HDFS როგორ განსხვავდება ჩვეულებრივი განაწილებული ფაილური სისტემებიდან?
როგორ კითხულდება HDFS-ის ფაილი, მაგალითად Parquet — მთლიანად თუ ბლოკებად?
ეს რეალურ დროშია, როგორ განვახორციელოთ ეს Kafka და ClickHouse Spark შორის?
ანალიტიკური ფუნქციები (ფანჯრის ფუნქციები) როგორ მუშაობდა?
მითხარი შენზე — სამუშაო გამოცდილება, ტექნოლოგიების სტეკი
რა შეზღუდვები არსებობს ჰეშის სქემის გამოყენებაში?
ტრასსირების მხოლოდ REST-სადღეგრძელებს თუ სხვა რამესაც აჩვენებს?
რომელ Airflow ოპერატორებს იყენებდით? როგორ ურთიერთქმედებდით dbt-თან Airflow-ის საშუალებით?
შეკვეთის საკითხში ჩვენ შეგვიძლია ვნახოთ, რა ხდება მონაცემებთან, მათ შორის რა ტიპის ჯოინები — რა ტიპის ჯოინებს ჩვენ შეგვიძლია იქ დავინახოთ?
რა განსხვავებაა UNION და UNION ALL-ს შორის? რა პირობები უნდა შესრულდეს?
Greenplum-ში რა ტიპის მაგიდებს იყენებდით? რა შემთხვევებში გამოიყენებოდა heap და რა შემთხვევაში - Append-Optimized?
როგორ მუშაობს Merge Join (შერწყმა სორტირებით)?
ACID-ის უპირატესობებსა და ნაკლოვანებებს გარდა წაკითხვის სიჩქარის რა შეიძლება ითქვას?
რატომ არ გამოიყენებს შემდეგი შეკითხვა ინდექსს, თუ records ცხრილში (id) შექმნილია ჩვეულებრივი B-Tree ინდექსი? select * from records where id % 2 = 0 - Id-ისთვის საჭიროა GIN ტიპის ინდექსი - ინდექსები არ მუშაობენ WHERE-ში გამოთვლებთან - % არის შედარების ოპერაცია, არა ფილტრაცია - limit და offset აუცილებელია ინდექსით ოპტიმიზაციისთვის - შეკითხვა მიმართავს რიცხვობრივ ველს, არა ტექსტს
საფასური ბუქინგების სია შექმენით შეკითხვა როგორ შეგიძლიათ შექმნათ სია [ტელეფონი] დღის ბუქინგების, რომლებიც წევრის (ან სტუმრის)თვის 30 დოლარზე მეტია? გახსოვდეთ, რომ სტუმრებს აქვთ განსხვავებული ხარჯები წევრებთან შედარებით (ჩაწერილი ხარჯები არის ნახევარ საათზე 'სლოტი'), და სტუმრის მომხმარებელი ყოველთვის არის ID 0. ჩართეთ თქვენს გამოყვანაში დაწესებულების სახელი, წევრის სახელი ერთ სვეტად ფორმატირებული და ხარჯი. დაალაგეთ კლებადობით ხარჯის მიხედვით და არ გამოიყენოთ ქვესაკვანძო სია.
რატომ არის საჭირო ინდექსები, რა სარგებელი და ნაკლია მათ?
როგორ მუშაობს ჰაივში განაწილება და როგორ არის ის ფიზიკურად წარმოდგენილი ფაილურ სისტემაში?