Ako pochopiť, kedy prestať s výberom vlastností?

Prekinitve výberu vlastností sa odporúča, keď ďalšie vylúčenie alebo pridanie vlastností už nezlepšuje kvalitu modelu alebo ju začína zhoršovať. Zvyčajne sa spolieha na metriky kvality (napríklad presnosť, F1, ROC-AUC) na validačnom súbore. Ak po kroku výberu vlastností:

• metrika sa nezlepší,
• alebo zlepšenie je nepatrné,
• alebo sa model stáva príliš zložitým,

je to signál na zastavenie.

Je tiež dôležité zvážiť rovnováhu medzi výkonom a zložitostí modelu: príliš veľa vlastností môže viesť k preučeniu a zvýšiť čas tréningu/predikcie.

Príklad: pri použití rekurzívneho odstraňovania vlastností (RFE) môžete zastaviť, keď metrika na validácii dosiahne maximum alebo začne klesať.