Kuidas mõista, millal lõpetada tunnuste valik?

Omaduste valiku tuleks lõpetada, kui täiendav omaduste eemaldamine või lisamine enam ei paranda mudeli kvaliteeti või hakkab seda halvendama. Tavaliselt põhineb see kvaliteedimõõdikutel (näiteks täpsus, F1, ROC-AUC) valideerimisandmekogul. Kui omaduste valiku sammu järgselt:

• metrika ei parane,
• või paranemine on ebaoluline,
• või mudel muutub liiga keeruliseks,

siis on see signaal peatamiseks.

Samuti on oluline arvestada jõudluse ja keerukuse tasakaalu: liiga palju omadusi võib viia üleõppimiseni ja suurendada treeningu/ennustamise aega.

Näide: rekursiivse omaduste eemaldamise (RFE) kasutamisel võib peatuda, kui valideerimise metrika saavutab maksimumi või hakkab langema.