GinXia的博客

凸函数定义：设是定义在区间= [a, b]上的实值函数。如果对于任意的和，下列式子成立，则称是上的凸函数。 如果上述不等式为小于，则为严格凸。图示：【定理】Jensen不等式设是定义在区间= [a, b]上的实值函数。对于任意的，下列不等式恒成立， 证明：当...

逻辑斯蒂回归模型比线性回归更加robust，因为受到L2损失函数的影响，线性回归会容易受到outliers的干扰，但这些干扰本不应该被当作问题。

我们分别从定义、图形和数学上来理解偏差（Bias）和方差（Variance）这两个概念。定义和公式符号 测试样本 训练集 在数据集中的标记 的真实标记 训练集上学得模型在上的预测输出 学习算法的期望预测 偏差（Bias）度量了学习算法的期望预测与真实结果的偏离程度，刻画的是学习算法本身的拟合能力。 ...

本文包括以下内容：1. 模型评估与模型选择 2. 正则化与交叉验证 3. 泛化能力 4. 生成模型与判别模型 5. 监督学习应用

本系列文章主要为作者阅读《统计学习方法》（李航）、《机器学习》（周志华）以及其他一些学习资源的笔记及思考。本文包括以下内容：1. 统计学习 2. 统计学习的分类 3. 统计学习方法三要素 4. 其他概念 参考文献1. 统计学习定义：统计学习（statistical learning）是关于计算机基于数据构建概率统计模型并运用模型对数据进行预测与分析的一门学科。统计学习也称为统计机器学习（statistical machine learning）。 对象：数据。从数据出发，提取数据的特