李宏毅_深度学习之线性回归误差来源

1.误差来源

1.1偏置与方差

以射击为例。f^为估计值即靶的中心，误差来源一是由于瞄准时候带来的(bias)，二是由于子弹下坠所带来的的(variance)。

1.1方差

1.2 偏置

1.3 模型分析

1.3.1模型复杂度

简单模型与复杂模型的分析如图所示，从左到右，由简单到复杂。

1.3.2 过拟合、欠拟合

过拟合与欠拟合，通俗的讲。以树叶为例，过拟合会认为特定纹理的树叶才是树叶，欠拟合就是认为所有绿色的都是树叶。
欠拟合：

过拟合：

2.模型选择

2.1 模型选择

2.2 模型检测