Da, parametrii regresiei liniare pot fi găsiți analitic folosind metoda celor mai mici pătrate. Pentru modelul ( y = X\beta + \varepsilon ), unde (X) este matricea caracteristicilor, (y) este vectorul valorilor țintă, parametrii (\beta) se determină rezolvând ecuația:

[ \beta = (X^T X)^{-1} X^T y ]

Această metodă oferă o soluție exactă dacă matricea (X^T X) este inversibilă. Gradient descent este folosit atunci când dimensiunea datelor este foarte mare sau matricea nu este inversibilă, sau pentru modele mai complexe.

Anterior În continuare