Sobes.tech

Data Engineer

Spark-də repartition və coalesce arasındakı fərq nədir?

168

2024-cü ilin yanvarın 1-i tarixində start_date ilə DAG yaradılarsa nə baş verər?

168

Vəzifə #3 Müştəriləri tapmaq lazımdır ki, onların sifarişləri arasındakı fərq 60 gündən çoxdur. Bu müştərilər üçün ən böyük fərqi (gap_days) göstərin. Sifarişlər cədvəli: | order_id | customer_id | order_dt | |----------|-------------|------------| | 1 | 1 | [phone] | | 2 | 1 | [phone] | | 3 | 1 | [phone] | | 4 | 1 | [phone] | | 5 | 2 | [phone] | | 6 | 2 | [phone] | | 7 | 3 | [phone] | Nəticə: | customer_id | gap_days | |-------------|----------| | 1 | 123 | | 2 | 120 |

168

Məlumatların uyğunsuzluğu ilə necə mübarizə aparmaq olar?

166

Kodda normal (gözlənilən) paylanmadan əhəmiyyətli dərəcədə fərqlənən dəyəri necə təsvir edərdin?

155

Məlumatlar niyə itə bilər? Bir neçə səbəb ver.

153

Python-da kontekst menecerleri ilə işlədinizmi? Bunlar nədir və nə üçün lazımdır?

153

Əgər düzgün olmayan məlumatlar vitrinə və ya müvəqqəti cədvələ yüklənibsə, onları yuxarı pipeline-lərə necə daxil olmamaq olar?

151

Airflow-də depends_on_past parametrinin funksiyası nədir?

150

Airflow tapşırıqları arasında məlumatların ötürülməsi üçün hansı üsulları bilirsiniz?

149

Əgər DAG-in cədvəli @daily-disə, o həqiqətən nə vaxt başlayır?

147

Python'da sözlük dəyişdirilə bilən və ya dəyişdirilə bilməyən bir növdürmü? Onun açarları və dəyərləri üçün hansı tələblər var?

143

Sözlükdə axtarışın ən pis halda algoritmik mürəkkəbliyi nədir?

136

Birinci DAG uğurla tamamlandıqdan dərhal sonra Airflow-un ikinci DAG-ını necə başlatmaq olar?

133
/2