Data Engineer

Գրեք DAG տվյալների բեռնում REST API-ի միջոցով

Կային խնդիրներ OpenAPI-ի հետ Spring Boot 2-ից 3 անցնելիս?

Ինչպես է աշխատում MapReduce-ը, մասնավորապես Reduce փուլը?

Middle

Aston

Ի՞նչ ժամանակում է աշխատելու լուծումը ներքին sorted-ով: Կարող եք մտածել ավելի արագ լուծում?

Դուք երբևէ աշխատե՞լ եք հարցումների օպտիմալացման հետ: Օպտիմալացումը որտեղից է սկսվում?

Middle

МВидео

Git bisect-ի աշխատանքային գործընթացում, դուք հանդիպեցիք մի կոմիտեի, որը հնարավոր չէ ստուգել անհրաժեշտ միջավայրի բացակայության պատճառով: Ինչ պետք է անել այս իրավիճակում? - Կրկնեք git bisect start հրամանը այլ hash-ներով - Դուրս թողեք այս կոմիտեն git bisect skip հրամանի միջոցով - Վերականգնեք bisect-ը git bisect reset հրամանի միջոցով - Նշեք կոմիտեն որպես լավ՝ git bisect good հրամանի միջոցով - Նշեք կոմիտեն որպես վատ՝ git bisect bad հրամանի միջոցով

Ի՞նչ է զոհաբերում տվյալների բազան արագ տվյալների բեռնման ժամանակ (COPY in Postgres, BULK INSERT)։

Greenplum որ տեսակի ավելի է պատկանում՝ OLTP թե OLAP?

Middle

МВидео

Ինչքան խորն են ձեր գիտելիքները Python-ի մասին, որ գրադարաններ եք օգտագործել?

Ինչպես է աշխատում սեղմումը ClickHouse-ում?

Ի՞նչ է անում OPTIMIZE-ը ClickHouse-ում և ինչու է դա չպետք է անպատասխանատու կերպով գործարկվի։

Ինչ է ClickHouse-ում բաժանումը և ըստ որ սկզբունքի է ընտրվում?

Ինչ է VACUUM-ը PostgreSQL-ում: Ինչու է դա անհրաժեշտ?

Ինչպե՞ս կարդալ HDFS- ի ֆայլը, օրինակ Parquet — ամբողջությամբ կամ բլոկներով:

Middle

Aston

Ինչպես է աշխատում Merge Join (կապակցում սորտավորմամբ)?

Middle+

СБЕР

Բոտերի տրաֆիկի մասնաբաժինը Անվտանգության թիմը մշակել է մեխանիզմ՝ բոտերի տրաֆիկը հայտնաբերելու համար՝ խանութի կայքում։ Երբ բոտը մուտք է գործում կայք, նրա URL պարամետրերին ավելացվում է «bot» ենթատեքստը (մեծատառ-փոքրատառ տարբերություն չհաշվառելով): Եթե user_id-ը առնվազն մեկ անգամ դեկտեմբերի ընթացքում ճանաչվել է որպես բոտ, ապա միշտ պետք է դիտարկել որպես բոտ: Ստուգեք օգտվողների այցերի տվյալների հավաքածուն և հաշվեք բոտերի մասնաբաժինը ընդհանուր օգտվողների թվից դեկտեմբերի 2024-ին (վերահասեք մեկ տասնորդական տեղով): Մուտքային ձևաչափ Տվյալների աղյուսակ visits: - event_date (date) — այցի ամսաթիվ - user_id (int) — եզակի օգտվողի նույնականացուցիչ - url (string) — հղում, որով կատարվել է այցը Տվյալները չեն պարունակում բացթողումներ կամ սխալ արժեքներ: Ելքային ձևաչափ Հարցումը պետք է վերադարձնի աղյուսակ՝ հետևյալ դաշտերով՝ - share (float) — դեկտեմբերի ընդհանուր օգտվողների թվին համեմատ բոտերի մասնաբաժինը, մեկ տասնորդական տեղով վերահասված։

Ինչպե՞ս կարելի է ջնջել տվյալները ClickHouse-ից։

Երկու աղյուսակներ t1 և t2 են տրված: Առաքելությունն է նշել բոլոր այն join տեսակները, որոնք դուք գիտեք, և յուրաքանչյուրի համար հարցման արդյունքը select * from t1 <join> t2 on t1.t = t2.t։ |t1.t| ------ 1 2 4 null ------ |t2.t| ------ 1 3 null null cross 1 1 - null null - INNER JOIN [phone] LEFT JOIN 1 - 1 2 - NULL 4 - NULL NULL - NULL RIGHT JOIN [phone] NULL - 3 NULL - NULL NULL - NULL FULL JOIN [phone] - NULL 4 - NULL NULL - 3 null - NULL null - NULL null - NULL

Middle

Купер

Անալիտիկ ֆունկցիաները (վինդոու ֆունկցիաներ) ինչպես էին աշխատում?

Middle

МВидео

Ի՞նչ եք սպասում ձեր աշխատավարձից: