Data Engineer

Үлкен XML файлдарын талдағанда жады, жылдамдық және дұрыстық тұрғысынан неге назар аудару керек?

ClickHouse-те сығу қалай жұмыс істейді?

ClickHouse-те қандай кесте қозғалтқыштарын білесіз және қолдандыңыз ба?

CTE (Жалпы кесте анықтамасы) дегеніміз не?

Қымбат брондаулар тізімін жасаңыз Сұрақ Қалайша [телефон] күні мүшеге (немесе қонаққа) 30 доллардан асатын брондаулар тізімін жасауға болады? Қонақтардың мүшелерге қарағанда әртүрлі шығындары бар екенін ескеріңіз (тізімделген шығындар әр жарты сағаттық «уақыт» үшін), ал қонақ пайдаланушы әрқашан ID 0. Нәтижеде мекеме атауын, бір бағанға форматталған мүшенің атын және шығынды қосыңыз. Шығын бойынша кему тәртібімен сұрыптаңыз және кез келген ішкі сұрауларды қолданбаңыз.

Materialized View дегеніміз не және ол кәдімгі View-дан қалай ерекшеленеді?

Airflow-да DAG дегеніміз не, ол қандай құрамдас бөліктерден тұрады және Airflow DAG-ты қалай орындайды?

Python туралы: сіздің біліміңіз қандай деңгейде, және қандай кітапханаларды қолдандыңыз?

Airflow-те тапсырмалар арасында деректерді қалай өткізуге болады?

PostgreSQL-ден ClickHouse-қа бір терабайт деректерді көшіру үшін конфигурацияны қалай бағалауға болады?

Деректер қорларында бөліну: ол не үшін керек, қалай жұмыс істейді?

ClickHouse-те параметрлер мен шектеулерді қалай көруге болады?

SQL-да JOIN түрлері қандай (логикалық және физикалық)?

Python-да 100 гигабайттық файлды қалай оқуға болады?

Нормализация мен денормализация дегеніміз не, олар қашан қажет?

ClickHouse-те OPTIMIZE не істейтінін және оны ойланбастан іске қосудың қажеті жоқ екенін не үшін?

X5-те тәжірибеңіз туралы айтыңыз: DWH саласында не істедіңіз?

ThreadPoolExecutor қашан қолданған дұрыс?

Pandas-та DataFrame-дің жады тұтынуын қалай азайтуға болады?

Егер журналдар ашылмаса (қате 403), не нәрсені тексеру керек?