Data Engineer

API dışında, veri kaynaklarıyla çalışmak için başka hangi yöntemler ve protokoller kullandınız?

Middle+

Лига Цифровой Экономики

Veri kalitesi konusundaki anlayışını anlat — bu alanda çalışma deneyimin oldu mu?

Middle

СБЕР

Kurumsal yapay zeka çözümünüzde hangi ajanlar ve modeller kullanılıyor? Sizin için kod yazıyor mu?

Spark'ta cache ve persist neden kullanılır?

DAG'leri nasıl başlattınız: cron, veri setleri, tetikleyiciler veya bağımlılıklar mı?

Middle+

Лига Цифровой Экономики

clickhouse_driver içe aktar from airflow.hooks.base import * def get_clickhouse_client(): conn = BaseHook.get_connection("clickhouse_default") return clickhouse_driver.Client( host=conn.host, port=conn.port, user=conn.login, password=conn.password, database=conn.schema )

Okuma paralelliği için Spark JDBC'de hangi parametreler kullanıldı?

CROSS JOIN nedir ve uygulamasının sonucu nedir?

Hangi yönde gelişmek ilginç olurdu — vitrinler, geliştirme, analiz, belki AI?

Middle

СБЕР

-- t1 -- num --------- -- 1 -- 2 2 null null 4 -- t2 -- num --------- -- [telefon] null null 5 SEÇ a.num AS a_num, b.num AS b_num FROM t1 a SOL JOIN t2 b ON a.num = b.num;

Middle

СБЕР

Büyük tablolar yüklenirken (performans dışında) hangi belirgin olmayan sorunlar ortaya çıkabilir?

Pencere fonksiyonu SUM() OVER (PARTITION BY user_id) — bir durumda satın alma tarihine göre sıralama ekliyoruz, diğerinde eklemiyoruz. Fark nedir?

Genel olarak Data Vault'a neden ihtiyacınız vardı?

Parquet'in depolama tipi nedir: satır mı yoksa sütun mu?

Middle+

Лига Цифровой Экономики

Çözümlediğiniz çoğaltma yapılandırma görevi hakkında bilgi verin.

CREATE TABLE datamarts.daily_revenue_per_country ON CLUSTER cluster_4x2 ( event_date Date, country String, total_revenue Float64 ) ENGINE = MergeTree() PARTITION BY toYYYYMM(event_date) ORDER BY (event_date);

CI/CD süreçleri, veritabanındaki değişiklikler, sürüm kontrolü ve şema göçleri (şema evrimi) hakkında bana anlat.

Seni seyahat alanında ne çekiyor? Belki de kendin seyahat etmeyi seviyorsun ya da travel-tech sana bir şekilde ilgi çekti.

Dağıtık veritabanları (Greenplum, ClickHouse) ile çalışma deneyiminizden bahsedebilir misiniz?

Postgres'ten Data Lake'e büyük bir tablonun düzenli olarak esnek (değiştirilebilir) güncelleme sıklığıyla artımlı yüklenmesi için bir çözüm önerin.