Hinge loss function

来源:互联网 发布:组播编程 编辑:程序博客网 时间:2024/05/13 09:53

1公式


Hinge loss损失函数l(y)主要用于SVM的参数w和b的训练中,其形式为:

(y)=max(0,1ty)

其中t表示1或-1的类别,y表示样本的实际位置,且有|y|>=1。
如果y分到正确的类,即与t同方向,那么l(y)=0,否则l(y)>0。

对于样本x,其y值为wb(w已经将原本的w和b合并成一个),那么l(y)对参数w的梯度为:

wi={txi0if ty<1otherwise

0 0