
算法基础
文章平均质量分 91
红色石头Will
个人网站:https://redstonewill.github.io/
展开
-
多元函数的泰勒(Taylor)展开式
多元函数的泰勒展开式实际优化问题的目标函数往往比较复杂。为了使问题简化,通常将目标函数在某点附近展开为泰勒(Taylor)多项式来逼近原函数。一元函数在点xkx_k处的泰勒展开式为: f(x)=f(xk)+(x−xk)f′(xk)+12!(x−xk)2f′′(xk)+onf(x) = f(x_k)+(x-x_k)f'(x_k)+\frac{1}{2!}(x-x_k)^2f''(x_k)+o^n原创 2017-04-20 15:17:22 · 227427 阅读 · 17 评论 -
为什么局部下降最快的方向就是梯度的负方向?
个人网站:红色石头的机器学习之路 优快云博客:红色石头的专栏 知乎:红色石头 微博:RedstoneWill的微博 GitHub:RedstoneWill的GitHub 微信公众号:AI有道(ID:redstonewill)什么是梯度?对于梯度下降算法(Gradient Descent Algorithm),我们都已经很熟悉了。无论是在线性回...原创 2018-05-06 19:31:42 · 25242 阅读 · 18 评论 -
三分钟带你对 Softmax 划重点
个人网站:红色石头的机器学习之路 优快云博客:红色石头的专栏 知乎:红色石头 微博:RedstoneWill的微博 GitHub:RedstoneWill的GitHub 微信公众号:AI有道(ID:redstonewill)1. 什么是SoftmaxSoftmax 在机器学习和深度学习中有着非常广泛的应用。尤其在处理多分类(C > 2)问题,分...原创 2018-06-14 09:18:28 · 107417 阅读 · 30 评论