Қалайша бірнеше REST API-дан масштабталатын деректер жүктеуді жобалайсыз: деректерді алуынан S3-ке дейін, аналитик үшін интерфейспен?
Senior
3
Data Engineer
743
0
Процедуралық SQL дегеніміз не?
Middle
3
Өздеріңіз және деректер инженерлігіндегі тәжірибеңіз туралы айтыңыз.
Senior
3
101 объект бар: 100 нөл жана 1 бир. Бағалар бойынша сұрыпталғаннан кейін, алдымен 50 нөл, содан кейін бир, содан кейін тағы 50 нөл келеді. ROC AUC және ROC қисығының формасы қандай?
Middle+
3
Индекстердің орын алудан басқа қандай кемшіліктері бар?
Middle
3
Градиент бустингте, алда N негизги алгоритмдин композициясы курулган. Жаңы, N+1-чи алгоритм үчүн максат эмне болот?
Middle+
3
Салғырт бағалау неге пайдалы?
Middle
3
Spark-те маалыматтар spill эмне жана ресурстарды оңой кошо албаса, аны кантип алдын алса болот?
Middle
3
Жоғары жүктемелі деректер түрлендірулерін қалай өңдер едіңіз?
Middle
3
Spark-тің іске қосу режимдері қалай ерекшеленеді: cluster, client және local?
Middle
3
API жүктегішін арнайы Airflow операторы/hook ретінде жүзеге асырудың артықшылықтары мен кемшіліктері қандай, бөлек кітапхана немесе контейнер қызметімен салыстырғанда?
Senior
3
2. Клиенттердин күндөлүк транзакцияларынын суммасын көрсөтүүчү t деген таблица бар: - Ар бир сап үчүн кардардын учурдагы жана алдыңкы күндөгү транзакцияларын көрсөтүүчү суроо жазгыла Акыркы таблица төмөндө:
Middle
3
Салғырт бағалау дегеніміз не және оны қалай түсінуге болады?
Middle
3
Airflow-де қандай типтік тапсырмаларды шештіңіз?
Middle
3
Дата, тапсырыс нөмірі, сомма select date, sum(amount) as sum_amount from t group by date having sum(amount) > 1000000 order by sum_amount desc limit 3
Middle
3
Жұлдыз үлгілері және Data Vault дегеніміз не?
Middle
3
Өзіңіз туралы айтыңыз: соңғы жұмыс орныңыз қайда болды, не істедіңіз, не іздейсіз және не үшін?
Middle+
2
Cluster режимінде Driver және Executors қайда орналасқан және неге оны өндірісте пайдаланады?
Middle
2
Градиент бустинг алгоритмінде, негізгі алгоритм қарапайым шешім ағашы болса, градиент дәл қайда пайда болады?
Middle+
2
Greenplum және Hadoop HDFS қандай компоненттерден тұрады?
Middle
2