Jaka będzie wartość metryki ROC-AUC dla klasyfikatora, który zawsze podaje wartość 0,9 na zbiorze danych składającym się z 90 pozytywnych i 10 negatywnych przykładów?

ROC-AUC mierzy zdolność klasyfikatora do rozróżniania klas, oceniając jakość rankingu obiektów według prawdopodobieństwa przynależności do klasy pozytywnej. Jeśli klasyfikator zawsze podaje tę samą wartość (0,9), nie potrafi uporządkować obiektów, a więc ROC-AUC będzie równe 0,5 — to wartość losowego zgadywania.

Przykład:

• Wszystkie obiekty otrzymują tę samą ocenę 0,9
• Obiekty pozytywne i negatywne nie różnią się w przewidywaniu
• Krzywa ROC będzie diagonalna, a pole pod nią wyniesie 0,5