Co je pivotovaná normalizace?

Pivotovaná normalizace je metoda normalizace v oblasti vyhledávání informací, která upravuje hodnocení relevance dokumentů s ohledem na jejich délku. Myšlenkou je zabránit zkreslení ve prospěch příliš dlouhých nebo příliš krátkých dokumentů.

U klasických modelů, jako je BM25, délka dokumentu ovlivňuje hodnocení, a pivotovaná normalizace zavádí parametr nazývaný pivot (obvykle průměrná délka dokumentu v kolekci), kolem kterého se normalizace provádí. Vzorec je obvykle takový:

NormalizedLength = (1 - slope) * pivot + slope * actualLength

kde slope je parametr, který řídí míru normalizace.

Toto pomáhá vyvážit vliv délky dokumentu na relevanci a zlepšit kvalitu řazení ve vyhledávacích systémech.