Machine Learning / AI
Что такое переобучение? Какие есть способы борьбы с ним?
Как обучался BERT? Что такое MLM и NSP?
Работали ли вы с Airflow и писали DAGи?
Как должна выглядеть разметка для обучения трансформера распознавать спецтерминологию?
Можно ли применять центральную предельную теорему при ненормальном распределении генеральной совокупности?
Какие методы отбора признаков существуют?
Какие существуют методы регуляризации? Плюсы и минусы каждого, области применения.
Как объединяются выходы голов в FPN (Feature Pyramid Network)?
Что такое context length и почему её сложно расширять?
Что такое table extraction и какие модели (TableNet, TATR)?
Что такое рецептивное поле?
Что такое Sentence Embeddings и чем они отличаются от word embeddings?
Что такое p-value и для чего оно нужно?
Какая математическая идея у диффузионных моделей? Что такое forward и reverse process?
Что такое layout analysis в документах?
Какие виды нормализации существуют (Batch, Layer, Instance, Group, RMSNorm)?
Что такое словарь (dict) в Python?
Что такое Named Entity Recognition (NER)? Какая разметка чаще всего используется (BIO, BIOES)?
Что такое temporal knowledge graphs?
Какие подходы к responsible scaling LLM?