最小均方算法 LMS

本文以机器学习为背景，来阐述LMS算法在机器学习中应用

1.有监督学习

先理清几个概念：

1. xi :  xi 表示”输入”变量(“input” variables)，也称为特征(features)。
2. yi :  yi 表示”输出”变量(“output” variables)，也称为目标值(target)。
3. 一对 (xi,yi) 称为一个训练样本(training example)，用作训练的数据集就是就是一组 m 个训练样本 (xi,y