Какви са моделите на отклонение от случайността?

Моделите на отклонение от случайността са клас модели в информационното търсене, които оценяват релевантността на документите въз основа на отклонението на разпределението на термините в документа от случайното разпределение. Идеята е, че значимите термини се срещат в документа по-често, отколкото се очаква при случайно разпределение, и това отклонение (различие) се използва за класиране.

Например, моделите Divergence From Randomness (DFR) използват статистически мерки, като вероятността терминът да се появи в документ при случайно разпределение, и ги сравняват с реалната честота. Колкото по-голямо е отклонението, толкова по-значим е терминът за документа.

Това позволява по-точно оценяване на релевантността, като взема предвид статистиката на разпределението на думите, а не само простата честота или TF-IDF.