一、LMS 算法介绍
最小均方算法(Least Mean Square,LMS)由 Bernard Widrow 和 Marcian E. Hoff 提出,用于修正滤波器参数使均方差(Mean Square Error,MSE)达到最小。
用房价来举例的话,可能影响房价的因素有住房大小、房子朝向。假设这些因素分别为 x1, x2, …, xn,我们通过这些因素预测房价 h(x)=w0+w1x1+w2x2+…,我们的最终目标是使 h(x) 与真实结果 y 越接近越好。
为了表示 h(x) 与 y 的接近程度,我们引入损失函数: J(w)=12∑mi=1{ h(x(i))−y