【1】Logistic回归

Logistic回归 

在Logistic回归中，损失函数L定义为

  成本函数 J 

 损失函数是单个训练样本的误差，而成本函数是所有训练样本误差的平均值。

之所以选择这个损失函数，是因为该损失函数L与w、b的图像为下图，是非凸的，即只有一个极小值点