Kā saprast, kad ir laiks pārtraukt raksturlielumu atlasi?

Īpašību atlasi ieteicams pārtraukt, kad turpmāka īpašību izslēgšana vai pievienošana vairs neuzlabo modeļa kvalitāti vai sāk to pasliktināt. Parasti balstās uz kvalitātes metriku (piemēram, precizitāte, F1, ROC-AUC) uz validācijas parauga. Ja pēc īpašību atlases soļa:

• metrika neuzlabojas,
• vai uzlabojums ir nenozīmīgs,
• vai modelis kļūst pārāk sarežģīts,

tad tas ir signāls apstāties.

Ir arī svarīgi ņemt vērā līdzsvaru starp veiktspēju un modeļa sarežģītību: pārāk daudz īpašību var novest pie pārmācīšanās un palielināt apmācības/predikcijas laiku.

Piemērs: izmantojot rekursīvo īpašību izņemšanu (RFE), var apstāties, kad validācijas metrika sasniedz maksimumu vai sāk krist.