Data Engineer

На какво трябва да се обърне внимание при парсване на големи XML по отношение на паметта, скоростта и коректността?

Как работи компресирането в ClickHouse?

Кои таблицени двигатели в ClickHouse знаете и сте използвали?

Какво е Materialized View и как се различава от обикновен изглед?

Създайте списък с скъпи резервации Въпрос Как можете да създадете списък с резервации за деня [телефон], които ще струват на член (или гост) повече от 30 $? Запомнете, че гостите имат различни разходи от членовете (посочените разходи са за половинчасов 'слот'), и потребителят-гост винаги е ID 0. Включете във вашия изход името на съоръжението, името на члена форматирано като една колона и разходите. Подредете по низходяща стойност и не използвайте подзаявки.

Какво е CTE (Общ Табличен Израз)?

Колко задълбочени са знанията ви по Python, кои библиотеки сте използвали?

Какво е DAG в Airflow, от какво се състои и как Airflow изпълнява DAG?

Как да прехвърляме данни между задачи в Airflow?

Как да оценим конфигурацията за прехвърляне на един терабайт данни от PostgreSQL към ClickHouse?

Партициониране в бази данни: защо е необходимо, как работи?

Как да видите параметрите или ограниченията в ClickHouse?

Как да прочетете файл с размер 100 гигабайта в Python?

Какво е нормализиране и денормализиране, кога са необходими?

Разкажи за опита си в X5: с какво се занимаваше по отношение на DWH?

Какво прави OPTIMIZE в ClickHouse и защо не трябва да го стартирате безразсъдно?

Какви видове JOIN има в SQL (логически и физически)?

Кога е подходящ ThreadPoolExecutor?

Как да намалим използването на паметта на DataFrame в Pandas?

Какво трябва да проверите, ако логовете не се отварят (грешка 403)?