Data Engineer

Na co zwrócić uwagę pod względem pamięci, szybkości i poprawności podczas parsowania dużych XML?

Jak działa kompresja w ClickHouse?

Wygeneruj listę kosztownych rezerwacji Pytanie Jak możesz wygenerować listę rezerwacji na dzień [telefon], które będą kosztować członka (lub gościa) więcej niż 30 $? Pamiętaj, że goście mają różne koszty od członków (wymienione koszty są za półgodzinny 'slot'), a użytkownik gościa zawsze ma ID 0. Dołącz do swojego wyniku nazwę obiektu, imię członka sformatowane jako pojedynczą kolumnę oraz koszt. Posortuj według malejącego kosztu i nie używaj podzapytań.

Czym jest widok materializowany i czym różni się od zwykłego widoku?

Jakie silniki tabel w ClickHouse znasz i używałeś?

Jak głęboka jest Twoja wiedza z Pythona, z jakich bibliotek korzystałeś?

Czym jest DAG w Airflow, z czego się składa i jak Airflow wykonuje DAG?

Jak przekazywać dane między zadaniami w Airflow?

Partycjonowanie w bazach danych: do czego służy, jak działa?

Jak ocenić konfigurację do przeniesienia jednego terabajta danych z PostgreSQL do ClickHouse?

Czym jest CTE (Wspólne Wyrażenie Tabeli)?

Jak wyświetlić parametry lub ograniczenia w ClickHouse?

Czym jest normalizacja i denormalizacja, kiedy są potrzebne?

Jak odczytać plik o rozmiarze 100 gigabajtów w Pythonie?

Opowiedz o swoim doświadczeniu w X5: czym zajmowałeś się w zakresie DWH?

Co robi OPTIMIZE w ClickHouse i dlaczego nie należy go uruchamiać bez zastanowienia?

Jakie są typy JOIN w SQL (logiczne i fizyczne)?

Kiedy jest odpowiedni ThreadPoolExecutor?

Jak zmniejszyć zużycie pamięci DataFrame w Pandas?

Co sprawdzić, jeśli logi się nie otwierają (błąd 403)?