Data Engineer

Jaké jsou druhy oddílů?

Co víš o spill v Spark?

Middle

Островок

Používáte ve své současné práci umělou inteligenci? Jaké nástroje a jak přesně?

Pracoval jste s dávkovým nahráváním nebo streamováním?

Middle

Aston

Zobrazte počet objednávek a "produkty požadované kategorie v objednávce" za rok 2021 v kategoriích "Oblečení" a za rok 2022 v kategorii "Obuv" (konečný pohled: 2 řádky. Pole: rok, počet produktů, počet objednávek) with cte as( select year(o.order_date) as year_orders, g.cat_1, count(distinct o.order_id) as count_orders, sum(g.quantity) as count_quan from Orders o join Goods g on o.order_id = g.order_id where (g.cat_1 = 'Oblečení' and Year(o.order_date) = 2021) or (g.cat_1 = 'Obuv' and Year(o.order_date) = 2022) group by year_orders, g.cat_1 ) select year_orders, count_quan, count_orders from cte pro rok 2025, top 3 v každé kategorii podle objemu prodeje model with cte as( select cat_1, price, quantity, model, rank() over(partition by cat_1) as rk from Orders o join Goods g on o.order_id = g.order_id where Year(o.order_date) = 2025 ) pro rok 2025, top 3 v každé kategorii podle součtu prodeje model with cte as( select g.cat_1, g.model, (price * quantity), rank() over(partition by g.cat_1) as rk from Orders o join Goods g on o.order_id = g.order_id where Year(o.order_date) = 2025 ) with cte as( select g.cat_1, g.model, sum(price * quantity) as sum_, rank() over(partition by g.cat_1 order by sum() desc) as rk from Orders o join Goods g on o.order_id = g.order_id where Year(o.order_date) = 2025 ) with cte1 as( select g.cat_1, g.model, sum(price * quantity) as sum_total, from Orders o join Goods g on o.order_id = g.order_id where Year(o.order_date) = 2025 ), cte2 as(select g.cat_1, g.model, sum_total, rank() over(partition by g.cat_1 order sum_total desc) as rk from cte1 ) select g.cat_1, g.model, sum_total from cte2 where rk <=3 tudja meg a kategória nevét, a modellt és az összes eladást (top 3) with cte1 as( select g.cat_1 as cat_name, g.model as model, sum(price * quantity) as sum_total, from Orders o join Goods g on o.order_id = g.order_id where Year(o.order_date) = 2025 group by Year(o.order_date), g.model ), cte2 as(select cat_name, model, sum_total, rank() over(partition by cat_name order sum_total desc) as rk from cte1 ) select cat_name, model, sum_total from cte2 where rk <=3

Povězte nám o nejvýznamnějším projektu nebo úkolu v Pythonu za poslední rok.

Co je CDC a máte s tím zkušenosti?

Existuje pojem nazývaný úrovně izolace transakcí. Co o tom víš?

S jakými nástroji vizualizace jste pracoval a jak úzce jste spolupracoval s Power BI?

Pracoval jste s kontextovými manažery v Pythonu? Co jsou a k čemu slouží?

Middle

Островок

Co víte o serializaci a deserializaci v kontextu Spark/UDF?

Middle

Островок

Pokud má na executoru 10 jader, kolik úloh bude současně prováděno v jednom okamžiku?

Pověz mi o svém současném místě práce: hlavní produkt, tvá funkce.

Jaké máš ke mně otázky?

Proč byly pro Data Quality zvoleny vlastní skripty v Python/Airflow místo hotového motoru, například Great Expectations?

Jak funguje hash join pro tabulky s 1 000 a 1 000 000 řádky?

Byla použita metoda porovnání hashů záznamů k výpočtu rozdílu mezi zdrojem a cílovou tabulkou?

Povězte o základních konceptech Kafka (skupina spotřebitelů, oddíly, témata).

1. Objednávky: - order_date datetime NE NULL - user_id int NE NULL - order_id int NE NULL 2. Zboží: - order_id int NE NULL - model int NE NULL - cat_1 varchar(50) NE NULL - price int NE NULL - quantity int NE NULL Hodnoty v cat_1: - Oblečení - Obuv - Kosmetika - Domácí potřeby - Hračky Zobrazit počet objednávek a "počet potřebných produktů v kategorii v objednávce" za rok 2021 v kategoriích "Oblečení" a za rok 2022 v kategorii "Obuv" (finální podoba: 2 řádky. Pole: rok, počet produktů, počet objednávek) with cte as( select year(o.order_date) as year_orders, g.cat_1, count(distinct o.order_id) as count_orders, sum(g.quantity) as count_quan from Orders o join Goods g on o.order_id = g.order_id where g.cat_1 = 'Oblečení' and Year(o.order_date) = 2021 or g.cat_1 = 'Obuv' and Year(o.order_date) = 2022 group by year_orders, g.cat_1 ) select year_orders, count_quan, count_orders from cte

Proč te teď hledáš nové zaměstnání, chceš změnit práci?

Middle

СБЕР