Data Engineer

Hogyan kapcsolódik a rendezés az ablakfüggvényen belül és a végső ORDER BY rendezéshez a lekérdezésben?

print(len(' '.join(map(str, [0, 1]))))

Hogyan kezeljük a Spark alkalmazás erőforrásait, hogy ne fogyasszunk túl memóriát az bemeneti adatok mennyiségének változásakor?

Mi az a partícionálás és a dstribúció (sharding)?

Mi az a "halott tuple" (dead tuple)?

dict1 = { (1, 2), [3, 4, 5] : 0 } var = 1, 2

Middle

МТС

Feladat #2 Írjon olyan lekérdezést, amely minden osztályban a TOP-3 alkalmazottat mutatja a fizetés szerint. Mutassa az osztály nevét, az alkalmazott nevét és fizetését. employee tábla: | id | name | salary | dept_id | |----|-------|--------|---------| | 10 | John | 1000 | 2 | | 20 | Tom | 5000 | 3 | | 30 | Bill | 3000 | 2 | department tábla: | id | name | |----|-----------| | 1 | Marketing | | 2 | IT | | 3 | Pénzügy | Kimenet: department_name, num, employee_name, salary cte-ként: select d.name as department_name, e.name as employee_name, e.salary, dense_rank from employee e join department d on e.id = d.id

Middle

Островок

Mesélj egy érdekes feladatról a cégnél az elmúlt 2,5 évben, például a ClickHouse-szal kapcsolatban.

Mondj egy példát arra, mikor használtál mesterséges intelligenciát rutinszerű folyamatok automatizálására.

Miért választottak egyedi Python/Airflow szkripteket a Data Quality-hoz, és nem egy kész motort, például a Great Expectations-t?

Milyen keretrendszert használtál a pipeline-ok írásához? Hogyan használtad az Airflow-t?

Middle

Aston

Saját szavaiddal, mi az a FULL JOIN?

Middle

СБЕР

Technikailag egy adatbázis egy DBMS-ben egyszerűen csak egy fájl, ahonnan származnak a NULL/NEM NULL korlátozások? Mire szolgálnak ezek a logikai absztrakciók?

Hogyan adjunk hozzá mozgó átlagot a felhasználónkénti aktuális és két előző napi rendelés összegéhez?

Hogyan működik a hash join 1 000 és 1 000 000 sorotos táblák esetén?

Meséljen a replikáció beállítási feladatról, amit megoldott.

Mik a Spark UDF-ok hátrányai, és mi a legnagyobb hátrányuk?

Middle

Островок

Beszéljen a Kafka alapfogalmairól (fogyasztói csoport, partíciók, témák).

Milyen további Data Vault entitások kerültek használatra, például same-as links vagy transactional links, a hub, link és satellite mellett?

Middle+

Лига Цифровой Экономики

Milyen technikai mezőket használtak a satellites, links és hubs Data Vault-ban?

Middle+

Лига Цифровой Экономики