Neden bool([""]) True döndürür?
Data Engineer
Soru #3 Müşterilerin siparişleri arasındaki fark 60 günden fazla olan müşterileri bulmamız gerekiyor. Belirtilen müşteriler için maksimum farkı (gap_days) gösterin. Siparişler tablosu: | order_id | customer_id | order_dt | |----------|-------------|------------| | 1 | 1 | [phone] | | 2 | 1 | [phone] | | 3 | 1 | [phone] | | 4 | 1 | [phone] | | 5 | 2 | [phone] | | 6 | 2 | [phone] | | 7 | 3 | [phone] | Sonuç: | customer_id | gap_days | |-------------|----------| | 1 | 123 | | 2 | 120 |
Spark'ta UDF'lerin ne gibi dezavantajları var ve en büyük dezavantajları nedir?
Spark'ta repartition ve coalesce arasındaki fark nedir?
Veri tutarsızlığıyla nasıl başa çıkılır?
Python'da bağlam yöneticileriyle çalıştınız mı? Bunlar nedir ve ne işe yararlar?
Spark'ta spill hakkında ne biliyorsun?
Bir değerin normal (beklenen) dağılımdan önemli ölçüde farklı olduğunu kodda nasıl tanımlardın?
Veriler neden kaybolabilir? Birkaç neden belirt.
Vitrin veya ara tabloya yanlış veriler yüklendiyse, bunların üst pipeline'lara geçmesini nasıl engellersiniz?
Airflow görevleri arasında veri iletimi için hangi yöntemleri biliyorsunuz?
DAG zaman çizelgesi @daily ise, o gerçekten ne zaman başlar?
Veri kalitesini nasıl takip ediyordunuz?
Python'daki sözlük değiştirilebilir mi yoksa değiştirilemez mi? Anahtarları ve değerleri için hangi gereksinimler vardır?
Airflow'da depends_on_past parametresi ne yapar?
İstatistiksel kontroller yaptın mı?
Bir sözlükte aramanın en kötü durumda algoritmik karmaşıklığı nedir?
İlk DAG başarıyla tamamlandıktan hemen sonra Airflow'un ikinci DAG'ını nasıl başlatırsınız?