逻辑回归LOGISTIC

逻辑回归LOGISTIC - 图1| | 线性回归 | 逻辑回归 | | :—-: | —- | —- | | 算法类型 | 回归 | 分类算法,标签y取离散的情况 | | 求参数 | 最小二乘法 | 极大似然 | | 适用场景 | | 判断一份电子邮件是否为垃圾邮件
判断肿瘤是否为恶性
结果可以分为有限个 | | 模型假设 | | |

一.逻辑回归假设函数:

逻辑回归LOGISTIC - 图2

X 特征向量
θ 参数
g函数 S形函数: g(z)=1/(1+e^-z)

1.2hθ(x)的作用:

对于给定的输入变量,根据选择的参数计算出变量等于1 的可能性,
q2.png
q4(1).png
极大似然求参数:
样本的概率最大就是总体的概率使样本最大的参数就是我们需要的参数

q3.png

逻辑回归损失函数:负对数似然函数

q5.png
q6(1).png
q8.png
梯度函数最小值:
推导函数
q10.png
逻辑回归逻辑回归
1.似然函数
2.对数似然
3.负对数-凸函数可以找到一个全局极小值
4.代价函数
q21.png