Kuidas te kasutate Python'i oma töös ja kus tunnete end kindlam: Python'is või SQL'is?
Data Engineer
On 101 objekti: 100 objekti klassist 0 ja 1 objekt klassist 1. Esimene mudel annab kõigile objektidele sama skoori. Milline on selle ROC AUC ja ROC kõvera kuju?
Kuidas testida ajaseeria statsionaarseks?
Кад бир аналитик SQL суроосун жазган болсо. Суроонун натыйжалуулугун аныктап, аны кантип алдын алууну сунуштаңыз. Суроо эки таблицаны бириктирет: - 'events' факт таблицасы, ачкыч 'event_id' - трафик булагы боюнча шилтеме таблицасы, ачкыч 'referer_str' Эки таблицада миллиардерлердин жазуулары бар. select * from (select distinct e.event_id, e.user_id, e.category_id, e.location_id, s.source_name, s.medium_name, s.campaign_name, row_number() over(partition by e.event_id, e.user_id, e.category_id, e.location_id, s.source_name, s.medium_name, s.campaign_name) as rnk from events e left join traffic_source s on e.referer_str = s.referer_str where e.event_date = current_date() - 1 group by 1,2,3,4,5,6,7) t where rnk = 1
On mitte-negatiivne pidev eesmärk ja neli algoritmi: lineaarne regressioon, otsustuspuu, juhuslik mets ja gradientboosting puudele. Millised neist võivad anda negatiivseid prognoose?
Andmed on laaditud ReplacingMergeTree tabelisse; mis juhtub lugedes, kui ühendus veel pole toimunud, ja kuidas saada viimast versiooni kirjetest?
Mis on denormaliseerimine?
Kas on võimalik kombineerida duplikatsiooni ja järgneva andmete spill'i ilma eraldi tabelite kasutamata; ja kui jah, kuidas?
Mis on hüpoteeside testimine? Millised on Tüüp I ja Tüüp II vead ning p-väärtus?
Millised on indeksistruktuurid ja kuidas need töötavad?
Milliseid viise teate, kuidas kiirendada ülesannete täitmist PostgreSQL-is?
Mis on statsionaarne ajaseeria ja miks on statsionaarne klassikaliste mudelite jaoks oluline?
Mis on bagging ja boosting ning kuidas nad erinevad?
Millised on JOIN-i kasutamise omadused vitriinide ehitamisel PostgreSQL/Greenplum-is võrreldes ClickHouse'iga?
Kas teate uplift-modelleerimisest? Mida te sellest tead?
Kuidas vältida tabeli kasvamist, kui andmete salvestamine on ajaliselt piiratud, näiteks kahe aastaga?
Mis on ROC AUC?
Peate kontrollima, kas tabelis sisaldab kliente, kellel on mitu e-posti. Kui jah, kustutage need (jätke ainult viimane kirje create_date järgi).
Mis on watermark Spark Structured Streaming-is?
Mis on normaliseerimine ja millal seda rakendatakse?