Machine Learning / AI
Как работает dropout на обучении и на инференсе?
Что такое GELU и чем он лучше ReLU в трансформерах?
Какие ошибки в тренировочном цикле могут ухудшить обучение и качество модели?
Откуда брались варианты запросов для поиска?
Что такое test-time augmentation (TTA)?
Что такое HNSWlib и где её используют?
Что такое Wide&Deep и зачем смешивать memorization и generalization?
В чем разница между логлоссом и кросс-энтропией?
Что такое языковая модель?
Расскажите про градиентный спуск: как он работает и какие есть его модификации (SGD, Momentum, Adam)?
Какая суммарная сложность решения задачи с кучей?
Почему именно эти признаки были отобраны?
Что такое контейнеризация и зачем она нужна?
Как оценивать модель без учителя для задачи ответов на вопросы?
Что такое neighborhood aggregation и какие функции используют (mean, sum, max, LSTM)?
Что такое DINO и DINO-v2?
За счет чего трансформеры получили преимущество?
Какие фреймворки использовал, сколько лет опыта работы с Python?
Задача по регрессии: предсказание цены акций на 5-й год по данным за 4 года с помощью бустинга. Какую ошибку мы допустили?
Что такое Retrieval-Augmented Generation? Из каких компонент состоит?