Kakšna bo vrednost metrike ROC-AUC za klasifikator, ki vedno daje vrednost 0,9 na podatkovnem naboru, sestavljenem iz 90 pozitivnih in 10 negativnih primerov?

ROC-AUC meria schopnosť klasifikátora rozlišovať medzi triedami tým, že hodnotí kvalitu zoradenia objektov podľa pravdepodobnosti ich príslušnosti k pozitívnej triede. Ak klasifikátor vždy vydáva rovnakú hodnotu (0,9), nedokáže objekty zoradiť, a preto bude ROC-AUC rovné 0,5 — čo je hodnota náhodného odhadu.

Príklad:

• Všetky objekty dostanú rovnaké skóre 0,9
• Pozitívne a negatívne objekty sa v predpovedi neodlišujú
• ROC krivka bude diagonálna, plocha pod ňou bude 0,5