Өз ишиңизде Python-ды кандайча колдонуп жатасыз жана кайсы жактан көбүрөөк ишенесиз: Python же SQL?
Data Engineer
101 объект бар: 100 объект класы 0 жана 1 объект класы 1. Биринчи модел барча объектларга бирдей баа берет. Анын ROC AUC жана ROC графигинин формасы кандай?
Уақыт сериясын стационарлыкка текшерүү үчүн кандай?
Аналитик жазган SQL суроо берилди. Суроонун натыйжалуулугун аныктап, кантип алдын алууну сунуштаңыз. Суроо эки таблицаны бириктирет: - 'events' факт таблицасы, ачкыч 'event_id' - трафик булагы боюнча шилтеме таблицасы, ачкыч 'referer_str' Эки таблицада миллиардерлердин жазуулары бар. select * from (select distinct e.event_id, e.user_id, e.category_id, e.location_id, s.source_name, s.medium_name, s.campaign_name, row_number() over(partition by e.event_id, e.user_id, e.category_id, e.location_id, s.source_name, s.medium_name, s.campaign_name) as rnk from events e left join traffic_source s on e.referer_str = s.referer_str where e.event_date = current_date() - 1 group by 1,2,3,4,5,6,7) t where rnk = 1
Мінсіз эмес үздіксіз мақсат және төрт алгоритм бар: сызықтық регрессия, шешім дарагы, кездейсоқ орман және дарақтарда градиентті бустинг. Олардың қайсысы теріс болжамдар жасай алады?
Маалыматтар ReplacingMergeTree кестесине жүктөлдү; эгер бириктирүү дагы болбосо, окуу учурунда эмне болот жана жазуулардын акыркы версиясын кантип алса болот?
Денормализация деген эмне?
Дубликаттарды жоюды және кейінгі деректер spill-ін бөлек кестелер қолданбай біріктіруге болады ма; және егер иә болса, қалай?
Гипотеза тестирүү деген эмне? Тип I жана Тип II каталары жана p-маани эмне?
Индекстердин түзүмдөрү жана алар кандай иштейт?
PostgreSQL-де тапшырмаларды тездетүү үчүн кандай жолдорду билесиз?
Тұрақты убакыт сериясы эмне жана неге классикалык моделдер үчүн маанилүү?
Бэггинг жана boosting эмне жана алар кандай айырмаланат?
PostgreSQL/Greenplum-та витриналар түзүүдө JOIN колдонуу өзгөчөлүктөрү ClickHouse менен салыштырганда кандай?
Сиз uplift моделдөө менен таанышсызбы? Анын жөнүндө эмне билесиз?
Эс тутумду сактоо мөөнөтү чектелсе, мисалы эки жыл, таблицанын өсүшүн кантип алдын алса болот?
ROC AUC эмне?
Таблицада бир нече электрондук почта менен кардарлар бар-жогун текшерүү керек. Эгер бар болсо, аларды жоюңуз (тек create_date боюнча акыркы жазууну калтырыңыз).
Spark Structured Streaming-деги watermark эмне?
Нормалдаштыруу эмне жана качан колдонулат?