先复习回顾下┅些数学求导基础帮助推导过程可以更好的理解。下面列举的公式都是接下来的推导中会用到的,没有涉及到的公式此处不再列举。
-
以 e 为底的指数求导公式
-
函数的和、差、积、商的求导法则
-
-
之前采用的是梯度下降算法用来求函数的最小值
好吧,来吧正式开始了有了以上的数学求导求导基础,接下来就容易多了公式嘛,当初上学时老师常说的一句话:“背过,记住!”
Logistic回归的代价函数可以统一写成如下一个等式:
下面开始我们的推导过程:如果要求 对某一个参数的偏導数则: