Jaká bude hodnota metriky ROC-AUC u klasifikátoru, který vždy uděluje hodnotu 0,9 na datovém souboru složeném z 90 pozitivních a 10 negativních příkladů?

ROC-AUC měří schopnost klasifikátoru rozlišovat třídy tím, že hodnotí kvalitu řazení objektů podle pravděpodobnosti jejich příslušnosti k pozitivní třídě. Pokud klasifikátor vždy vydává stejnou hodnotu (0,9), neumí objekty řadit, a proto bude ROC-AUC rovno 0,5 — což je hodnota náhodného odhadu.

Příklad:

• Všechny objekty dostanou stejný skóre 0,9
• Pozitivní a negativní objekty se v předpovědi neliší
• ROC křivka bude diagonální, plocha pod ní bude 0,5