Sobes.tech
Middle

Kāda būs ROC-AUC metriku vērtība klasifikatoram, kas vienmēr dod 0,9 vērtību datu kopā, kas sastāv no 90 pozitīviem un 10 negatīviem piemēriem?

sobes.tech AI

Atbilde no AI

ROC-AUC mēra klasifikatora spēju atšķirt klases, novērtējot objektu rangēšanas kvalitāti pēc to varbūtības piederēt pozitīvai klasei. Ja klasifikators vienmēr sniedz to pašu vērtību (0,9), tas nespēj sakārtot objektus pēc kārtas, un tāpēc ROC-AUC būs vienāds ar 0,5 — tas ir nejaušas uzminēšanas vērtība.

Piemērs:

  • Visiem objektiem ir vienāda atzīme 0,9
  • Pozitīvie un negatīvie objekti prognozējumā nav atšķirami
  • ROC līkne būs diagonāla, un zem tās esošā platība būs 0,5