Aké metódy výberu vlastností existujú?

Existuje niekoľko hlavných metód výberu vlastností (feature selection), ktoré pomáhajú vybrať najviac informatívne vlastnosti pre model:

1. Filtračné metódy (Filter methods)

   • Na základe štatistických kritérií nezávislých od modelu.
   • Príklady: korelácia, chi-kvadrát test, vzájomná informácia.
   • Rýchle a jednoduché, ale nezohľadňujú interakcie s modelom.

2. Wrapper metódy (Wrapper methods)

   • Používajú model na hodnotenie kvality podmnožín vlastností.
   • Príklady: rekurzívne vylučovanie vlastností (RFE), kroková selekcia.
   • Presnejšie, ale výpočtovo náročnejšie.

3. Vložené metódy (Embedded methods)

   • Výber vlastností prebieha počas tréningu modelu.
   • Príklady: Lasso (L1 regularizácia), rozhodovacie stromy, gradientové boostovanie.
   • Vyvažujú medzi presnosťou a rýchlosťou.

4. Metódy založené na dôležitosti vlastností

   • Používajú odhady dôležitosti z modelov (napríklad feature importance v náhodných lesoch).

Výber metódy závisí od úlohy, objemu dát a požiadaviek na výpočtové zdroje.