Machine Learning / AI
Если бы у нас были бесконечные ресурсы и нам не важна скорость сходимости — какой метод GD, SGD или Mini-Batch SGD лучше использовать?
Pre-layer norm vs post-layer norm: в чём разница, какие где используются и почему?
Зачем в трансформере несколько голов внимания? Что они выучивают на практике?
Какие ансамбли деревьев существуют?
Что такое probabilistic retrieval model?
Что такое итераторы и генераторы в Python и в чем их разница?
Что такое receptive field в свёрточной сети? Как он растёт с глубиной?
Как устроен список в Python и какова временная сложность основных операций?
Что такое geohash и как его использовать как фичу?
Какие библиотеки используете для решения типичных задач машинного обучения?
Есть ли аналитики, которые занимаются выгрузкой данных и подготовкой витрин?
Как работает дерево решений?
Что такое DenseNet и в чём отличие от ResNet?
Как работают различные токенизаторы текста (BPE, WordPiece, SentencePiece, Unigram)?
Что такое CUTLASS?
Какой запрос быстрее работает в колоночной базе данных, а какой в строковой?
Расскажите про идею ResNet и напишите код ResidualBlock.
Что такое COG (Cloud-Optimized GeoTIFF)?
Что такое certified robustness и randomized smoothing?
Как считать perplexity языковой модели? Какие у неё свойства?