Sobes.tech
Middle — Senior

Ի՞նչ է միջին փոխադարձ կարգը (MRR) և որտեղ է այն օգտագործվում որոնման գնահատման ժամանակ։

sobes.tech AI

Պատասխան AI-ից

Միջին հակադարձ դասավորություն (MRR) — դա մի չափանիշ է որոնման և առաջարկությունների համակարգերի որակն գնահատելու համար: Այն չափում է առաջին համապատասխան արդյունքի դիրքի հակառակ արժեքի միջին արժեքը արդյունքների ցուցակում՝ հարցումների հավաքածուի համար:

Ֆորմուլա:

[ MRR = \frac{1}{Q} \sum_{i=1}^Q \frac{1}{rank_i} ]

որտեղ (Q) հարցումների թիվն է, իսկ (rank_i) — առաջին համապատասխան արդյունքի դիրքը i-երորդ հարցման համար:

MRR-ը օգտագործվում է տեղեկատվական որոնման խնդիրներում, այդ թվում՝ NLP և embeddings հիման վրա մոդելների գնահատման համար, որպեսզի հասկանալ, թե որքան արագ է օգտվողը ստանում համապատասխան պատասխան: Որքան բարձր է MRR-ը (մոտ 1-ի), այնքան ավելի լավ է որոնման որակը: