logistic回归算法

分类

要预测的变量y是一个离散值情况下的分类问题
logistic回归算法:分类算法

假设陈述

Sigmoid function
Logistic function
(同义词)
方程:
h(x)=1/(1+e^-(a^Tx))
Sigmoid图像:

决策界限

代价函数

另外找一个不同的代价函数,为凸函数,使得我们可以使用很好的算法,如梯度下降法,并且保证找到全局最小值。

简化代价函数与梯度下降

高级优化(略)

梯度下降法的过程:
有一个初始值,后一直更新。

多元分类:一对多

每次按一对多划分。