Что такое функция потерь?

Функция потерь (loss function) — это метрика, которая измеряет, насколько предсказания модели отличаются от реальных значений. Она служит критерием качества модели и используется для оптимизации во время обучения: задача алгоритма — минимизировать значение функции потерь.

Например, для задачи регрессии часто используют среднеквадратичную ошибку (MSE), а для классификации — кросс-энтропию. Чем меньше значение функции потерь, тем точнее модель предсказывает данные.