回归简析

关于回归问题的简单介绍，共计两篇：
http://blog.youkuaiyun.com/qrlhl/article/details/51191962
http://blog.youkuaiyun.com/qrlhl/article/details/51200205
总结：
1、回归问题关键在于求解回归系数，代表不同特征的权重；
2、局部加权线性回归，对于被测点周围的样本点进行加权，权值矩阵由高斯核函数实现，易出现过拟合和欠拟合问题；
3、若因各特征相关性高，即满秩不可求逆，可使用岭回归的方法解决，通过单位矩阵来降低各个特征之间的相关性，使新的矩阵可以求逆；