Kako biste dizajnirali skalabilno učitavanje podataka iz više REST API-ja: od prikupljanja podataka do S3, sa interfejsom za analitičara?
Senior
3
Data Engineer
743
0
Šta je procedural SQL?
Middle
3
Ispričajte nam o sebi i svom iskustvu u data engineering-u.
Senior
3
Постоји 101 објекат: 100 нула и 1 један. Након сортирања по резултатима, прво долазе 50 нула, затим један, и још 50 нула. Који су његови ROC AUC и облик ROC криве?
Middle+
3
Koje su mane indeksa osim zauzetog prostora?
Middle
3
У градијентном бустингу већ је изграђена композиција од N основних алгоритама. Шта ће бити циљ за нови, N+1-ји алгоритам?
Middle+
3
Zašto su lenjive procene korisne?
Middle
3
Šta je data spill u Spark-u i kako ga izbeći ako resursi ne mogu biti jednostavno dodati?
Middle
3
Kako biste upravljali transformacijama podataka pod visokim opterećenjem?
Middle
3
Kako se razlikuju načini pokretanja Spark: cluster, client i local?
Middle
3
Koje su prednosti i mane implementacije API loadera kao prilagođenog operatera/hook-a u Airflow-u u poređenju sa zasebnom bibliotekom ili kontejnerskom uslugom?
Senior
3
2. Postoji tabela t, koja prikazuje zbir transakcija klijenata po danu: - Napišite upit koji za svaki red prikazuje transakcije klijenta za tekući i prethodni kalendarski dan Konačna tabela je ispod:
Middle
3
Šta su lenjive procene i kako ih razumeti?
Middle
3
Koje tipične zadatke ste rešili u Airflow?
Middle
3
датум, број поруџбине, износ select date, sum(amount) as sum_amount from t group by date having sum(amount) > 1000000 order by sum_amount desc limit 3
Middle
3
Šta su modeli zvezda i Data Vault?
Middle
3
Реците о себи: где сте последњи пут радили, чиме сте се бавили, шта тражите и зашто?
Middle+
2
Gde se nalaze Driver i Executors u režimu klaster i zašto se koristi u proizvodnji?
Middle
2
Где тачно у градијентном бустингу долази до градијента ако је основни алгоритам једноставно дрво одлуке?
Middle+
2
Od kojih komponenti se sastoji Greenplum i Hadoop HDFS?
Middle
2