Как използвате Python в работата си и къде се чувствате по-уверени: в Python или в SQL?
Senior
2
Data Engineer
743
0
Има 101 обект: 100 обекта от клас 0 и 1 обект от клас 1. Първият модел дава еднакъв резултат на всички обекти. Какви са ROC AUC и формата на ROC кривата?
Middle+
2
Как да проверим една времева серия за стационарност?
Middle+
2
Аналитик е написал SQL заявка. Идентифицирайте неефективностите в заявката и предложете как да ги избегнете. Заявката съчетава две таблици: - таблица факти 'events' с ключ 'event_id' - таблица с референции към източници на трафик с ключ 'referer_str' И двете таблици съдържат милиарди записи. select * from (select distinct e.event_id, e.user_id, e.category_id, e.location_id, s.source_name, s.medium_name, s.campaign_name, row_number() over(partition by e.event_id, e.user_id, e.category_id, e.location_id, s.source_name, s.medium_name, s.campaign_name) as rnk from events e left join traffic_source s on e.referer_str = s.referer_str where e.event_date = current_date() - 1 group by 1,2,3,4,5,6,7) t where rnk = 1
Senior
2
Има неотрицателна непрекъсната цел и четири алгоритъма: линейна регресия, дърво за вземане на решения, случаен горски масив и градиентен бустинг върху дървета. Кои от тях могат да дават отрицателни прогнози?
Middle+
2
Данните са заредени в таблица ReplacingMergeTree; какво ще се случи при четене, ако сливането все още не е настъпило, и как да получите най-новата версия на записите?
Middle
2
Какво е денормализация?
Middle
2
Възможно ли е да се комбинира дублиране и последващ spill на данни без използване на отделни таблици; и ако е възможно, как?
Middle
2
Какво е тест за хипотези? Какви са грешките от тип I и тип II и p-стойността?
Middle+
2
Какви са структурите на индексите и как работят?
Middle
2
Какви начини знаете да ускорите изпълнението на задачи в PostgreSQL?
Middle
2
Какво е стационарен времеви ред и защо е важна стационарността за класическите модели?
Middle+
2
Какво е бэгинг и бустинг, и как се различават?
Middle+
2
Какви са особеностите на използването на JOIN при изграждането на витрини в PostgreSQL/Greenplum в сравнение с ClickHouse?
Middle
2
Запознат ли сте с uplift моделироването? Какво знаете за него?
Middle+
2
Как да предотвратим растежа на таблицата, ако съхранението на данни е ограничено във времето, например две години?
Middle
2
Какво е ROC AUC?
Middle+
1
Трябва да проверите дали в таблицата има клиенти с няколко имейла. Ако има, ги изтрийте (оставете само последния запис по create_date).
Middle
1
Какво е watermark в Spark Structured Streaming?
Middle
1
Какво е нормализирането и кога се прилага?
Middle
1