Čo je pivotovaná normalizácia?

Pivoted normalization je metoda normalizácie v oblasti vyhľadávania informácií, ktorá upravuje hodnotenie relevantnosti dokumentov s ohľadom na ich dĺžku. Myšlienkou je vyhnúť sa skresleniu v prospech príliš dlhých alebo príliš krátkych dokumentov.

V klasických modeloch ako BM25, dĺžka dokumentu ovplyvňuje hodnotenie, a pivoted normalization zavádza parameter nazývaný pivot (zvyčajne priemerná dĺžka dokumentu v kolekcii), okolo ktorého sa vykonáva normalizácia. Vzorec je zvyčajne taký:

NormalizedLength = (1 - slope) * pivot + slope * actualLength

kde slope je parameter, ktorý riadi mieru normalizácie.

Toto pomáha vyvážiť vplyv dĺžky dokumentu na relevantnosť a zlepšiť kvalitu radenia vo vyhľadávacích systémoch.