Quelle sera la valeur de la métrique ROC-AUC pour un classificateur qui donne toujours une valeur de 0,9 sur un ensemble de données composé de 90 exemples positifs et 10 négatifs?

ROC-AUC mesure la capacité d'un classificateur à distinguer les classes, en évaluant la qualité du classement des objets selon leur probabilité d'appartenance à la classe positive. Si un classificateur donne toujours la même valeur (0,9), il ne peut pas classer les objets par ordre, et donc le ROC-AUC sera égal à 0,5 — la valeur d'une prédiction aléatoire.

Exemple :

• Tous les objets reçoivent le même score 0,9
• Les objets positifs et négatifs ne se distinguent pas par la prédiction
• La courbe ROC sera une diagonale, et l'aire sous la courbe sera 0,5