一、常見的損失函數:
損失函數一般用來衡量預測值和真實值之間的不一致程度。是一個非負值,通常用L(y,f(x))來表示。
1.0-1損失函數:
預測結果和真實結果一致,則為0,不一致則為1.

2.絕對值損失函數:
真實值和預測值差的絕對值。

3.平方損失函數:

4.指數損失函數:

5.對數損失函數:

6.合頁損失函數

t是預測值,y是真實值。和svm的損失函數非常相似。
二。各個損失函數的代表算法
- 0-1損失函數:感知機
- 絕對值損失函數:
- 平方損失函數:線性回歸
- 指數損失函數:Adaboost
- 對數損失函數:邏輯回歸
- 合頁損失函數:SVM
