Sobes.tech
Middle

Ինչպես են հաշվարկվում MAP և MRR մետրիկաները դասավորության խնդիրներում։

sobes.tech AI

Պատասխան AI-ից

MAP (Միջին Միջին Ակնհայտություն) և MRR (Միջին հակադարձ դասարան) մետրիկներ են դասակարգման խնդիրներում, որոնք գնահատում են, թե որքան լավ է մոդելը դասավորում համապատասխան տարրերը:

  • MAP բոլոր հարցումների համար միջին միջին ճշգրտությունն է: Միջին ճշգրտությունը մեկ հարցման համար այն ճշգրտության միջին արժեքն է, որտեղ հանդիպում են համապատասխան փաստաթղթերը:

Հաշվարկի ձևաչափը մեկ հարցման համար՝

[ AP = \frac{1}{R} \sum_{k=1}^N P(k) \times rel(k) ]

որտեղ՝

  • (N) վերադարձված փաստաթղթերի քանակն է,
  • (R) համապատասխան փաստաթղթերի քանակն է,
  • (P(k)) ճշգրտությունն է դիրքում (k),
  • (rel(k)) ցուցանիշն է փաստաթղթի համապատասխանության մասին դիրքում (k) (1 եթե համապատասխան է, 0 եթե ոչ):

MAP-ը միջին արժեքն է բոլոր հարցումների համար:

  • MRR-ն առաջին համապատասխան փաստաթղթի հակադարձ դասարանի միջին արժեքն է բոլոր հարցումների համար:

Հաշվարկի ձևաչափը՝

[ RR = \frac{1}{rank} ]

որտեղ՝

  • (rank) առաջին համապատասխան փաստաթղթի դիրքն է ցանկում:

MRR-ը միջին արժեքն է բոլոր հարցումների RR-ի:

Օրինակ՝ եռան հարցման դեպքում, երբ առաջին համապատասխան փաստաթղթերը գտնվում են դիրքերում 1, 3 և 2, ապա՝

[ MRR = \frac{1}{3} \left(1 + \frac{1}{3} + \frac{1}{2}\right) = 0.611 ]