Sobes.tech

Data Engineer

Spark-та жаңы иш түзүүнүн триггери эмне жана иш Stage жана Tasksка кантип бөлүнөт?

Middle+
164

Nested Loop Join кантип иштейт жана анын алгоритмдик татаалдыгы кандай? Үч алгоритмдин татаалдыгы кандай?

Middle+
164

Spark архитектурасынын түзүлүшү жөнүндө жалпы түшүндүрүңүз: кайсы компоненттер бар жана алар SQL суроо-талапты аткарууда кандайча өз ара аракеттенет.

Middle+
163

Партициялоо деген эмне? Шардинг деген эмне? Репликация деген эмне?

Middle+
162

SELECT client_id, ФИО, SUM(suma) AS total_amount FROM clients JOIN transactions ON clients.client_id = transactions.client_id WHERE дата = '2025-05-01' GROUP BY client_id, ФИО;

Middle
162

## мода маселеси # Саналардын тизмеси бар. Бул тизмедеги моданы табуучу функция жаз. # find_mode([1, 2, 3, 3, 4, 5]) #> 3

Middle
161

Эгер биз WHERE (сол жактан LEFT JOINден кийин) транзакциянын датасы боюнча фильтр шартын коюп жатсак, ал биринчи таблицага (кардарларга) натыйжаны чектейби?

Middle
161

-- t1 -- num --------- -- 1 -- 2 2 null null 4 -- t2 -- num --------- -- [телефон] null null 5 Таңдау a.num Кимa a_num, b.num Кимa b_num t1 дан a сол JOIN t2 b ON a.num = b.num;

Middle
160

find_mode функциясы [1, 2, 3, 3, 4, 5] тизмеси үчүн эмне кайтарат? Адым-адам түшүндүр.

Middle
160

Партициялоо менен шарддоо кандай айырмаланат?

Middle
157

Parquet сактоо форматы менен CSV арасындагы айырма эмне?

Middle+
157

Маалымат бериңиз, сиз кай жана кайда системалык аналитик болуп иштегенсиз жана кандай тапшырмаларды аткардыңыз?

Middle
157

Маалыматтар тарыхын сактоо үчүн кандай ыкмалар (түптөр) билесиз? Тизмелерде тарых кантип топтолуп жатат?

Middle
153

Маалыматтын сапатын текшерүүлөрдү өзүңүз жүргүздүңүзбү, же талаптар бизнес/кардарлардан келдиби?

Middle
152

Greenplum-та бөлүштүрүү талаасын туура аныктоо үчүн эмне кылуу керек? Motion учурунда эмне болот?

Middle
151

Эмне иш форматы сиз үчүн ыңгайлуу — кеңсе, гибрид же алыстан иштөө? Бизде эки кеңсе бар, Кутузовский жана Тулада.

Middle
149

Spark'ta AQE (Adaptive Query Execution) оптимизатору менен иштедиңби? Ал кандай иштээрин билесиңби?

Middle+
149

Sparkта кандай физикалык JOIN түрлөрү бар?

Middle+
149

Тек баштоо датасы белгилүү болсо, ар бир кардар үчүн акыркы толук атыңызды кантип чыгарасыз (аяктоо датасы белгисиз)?

Middle
149

Терезе функциясынын чегинде UNBOUNDED PRECEDING эмне деп аталат?

Middle+
148
/4