LDA(Linear Discriminant Analysis)

LDA的思想可以用一句话概括，就是“投影后类内方差最小，类间方差最大”

 

分子 即为 类间距离，采用协方差

分母即为类内距离

根据广义瑞丽商，

扩展到多类LDA

仔细观察上式最右边，这不就是广义瑞利商嘛！最大值是矩阵的最大特征值,最大的d个值的乘积就是矩阵的最大的d个特征值的乘积,此时对应的矩阵W为这最大的d个特征值对应的特征向量张成的矩阵。

https://www.cnblogs.com/pinard/p/6244265.html      理论

https://blog.youkuaiyun.com/jnulzl/article/details/49894041   实例+理论

http://people.revoledu.com/kardi/tutorial/LDA/Numerical%20Example.html   实例

https://blog.youkuaiyun.com/warmyellow/article/details/5454943   实例

以下为实例

1.计算均值

2.计算Sw

3.计算Sb

4.通过Sb跟Sw计算特征值以及特征向量

或者:

5.转换坐标