İşinizdə Python-dan necə istifadə edirsiniz və hansı sahədə daha çox özünüzə güvənirsiniz: Python yoxsa SQL?
Data Engineer
101 obyekt var: 100 obyekt sinif 0 və 1 obyekt sinif 1. Birinci model bütün obyektlərə eyni bal verir. Onun ROC AUC və ROC əyrisinin forması nədir?
Vaxt seriyasını stasionarlığa necə yoxlamaq olar?
Bir analitikçi tərəfindən yazılmış SQL sorğusu verilib. Sorğudakı qeyri-effektivlikləri müəyyən edin və necə qarşısını almaq barədə təkliflər verin. Sorğu iki cədvəli birləşdirir: - 'events' fakt cədvəli, açar 'event_id' - trafik mənbəyinin referans cədvəli, açar 'referer_str' Hər iki cədvəl milyardlarla qeyd ehtiva edir. select * from (select distinct e.event_id, e.user_id, e.category_id, e.location_id, s.source_name, s.medium_name, s.campaign_name, row_number() over(partition by e.event_id, e.user_id, e.category_id, e.location_id, s.source_name, s.medium_name, s.campaign_name) as rnk from events e left join traffic_source s on e.referer_str = s.referer_str where e.event_date = current_date() - 1 group by 1,2,3,4,5,6,7) t where rnk = 1
Mənfi olmayan davamlı hədəf və dörd algoritm mövcuddur: xətti reqressiya, qərar ağacı, təsadüfi meşə və ağaclar üzərində gradient boosting. Hansıları mənfi proqnozlar verə bilər?
ReplacingMergeTree cədvəlinə məlumatlar yüklənmişdir; əgər merge hələ baş verməyibsə, oxuma zamanı nə baş verəcək və qeydiyyatların ən son versiyasını necə əldə etmək olar?
Denormalizasiya nədir?
Tək-tək cədvəllərdən istifadə etmədən deduplikasiya və sonrakı məlumat spillini birləşdirmək mümkündürmü; və əgər mümkündürsə, necə?
Hipotez testi nədir? Tip I və Tip II səhvləri və p-dəyəri nədir?
İndeks quruluşları və necə işləyirlər?
PostgreSQL-də tapşırıqların icrasını sürətləndirmək üçün hansı yolları bilirsiniz?
Stasionar vaxt seriyası nədir və niyə stasionarlıq klassik modellər üçün vacibdir?
Bagging və boosting nədir və onlar necə fərqlənir?
PostgreSQL/Greenplum-da vitrinlər qurarkən JOIN istifadə xüsusiyyətləri ClickHouse ilə müqayisədə nədir?
Uplift modelləşdirmə ilə tanışsınızmı? Bu barədə nə bilirsiniz?
Məlumatların saxlanma müddəti məhduddursa, məsələn, iki il, cədvəlin böyüməsini necə qarşısını almaq olar?
ROC AUC nədir?
Cədvəldə bir neçə emailə sahib müştərilərin olub-olmadığını yoxlamaq lazımdır. Əgər varsa, onları silin (yalnız create_date-ə görə sonuncu qeydiyyatı saxlayın).
Spark Structured Streaming-də watermark nədir?
Normallaşdırma nədir və nə vaxt tətbiq olunur?