
机器学习基础
文章平均质量分 86
LJ工程师
这个作者很懒,什么都没留下…
展开
-
《机器学习基础》学习笔记-第二章 PAC学习框架-2.3对有限假设集的学习保证(不一致的情况)
答案是否定的,因为推论2.3.2是针对某个单一的假设而言的,且其经验误差的期望等于泛化误差(y大数定律,第2.1节)但对于一个训练样本来说,当假设hs不固定时,泛化误差R(hs)就是一个随机变量,而一般与经验误差的期望E( R )(常数)不同。但,不一致,并不意味着不能学习,在训练样本上允许少量误差的不一致假设可能是满足使用要求的,并且这种假设在一定条件下是满足PAC理论的。那么,在这样的设定下,真实错误率为R(h) = p,对应地,通过i.i.d. 训练样本可以得到一个正面向上的经验概率。原创 2023-05-09 21:06:36 · 122 阅读 · 0 评论 -
《机器学习基础》学习笔记-第二章 PAC学习框架-2.2对有限假设集的学习保证(一致的情况)
回顾:2.1节中讲到的矩形例子中,学习算法返回的假设总是一致的,即这样的假设在训练样本上准确无误。本节内容另外又参考了(周志华老师)《机器学习》一书的一些解释。分为两种情况分开讨论其泛化能力。原创 2023-05-09 19:52:26 · 192 阅读 · 1 评论 -
《机器学习基础》学习笔记-第二章 PAC学习框架-2.1PAC学习模型-例题:学习平行于坐标轴的矩形
该问题特点:假设集H与概念类C是一致的,并且假设集是无限的。(关于模型一致性与泛化性的相关概念此处不再赘述)原创 2023-05-09 17:03:29 · 551 阅读 · 1 评论 -
《机器学习基础》学习笔记-Foundation of Machine Learning
机器学习基础-Foundations of Machine Learning学习笔记原创 2023-04-08 22:36:31 · 324 阅读 · 1 评论 -
《机器学习基础》学习笔记-第二章 PAC学习框架-2.1PAC学习模型
1.样本(example)/实例(instance)集合 or 输入空间:记为XX;2.标签(label)/目标值(taget value)集合:记为YY;**注意:本书中考虑二分类问题作为入门,因此Y01Y01;3.一个概念ccccX→YcX→Y表示XX到YY的一个映射;注意:同样,对于二分类问题中,可以认为概念指的是从XX到01\{0,1\}01的映射,进一步的可以认为概念是XX的一个子集。4.概念类CCC。原创 2023-04-09 19:47:24 · 724 阅读 · 1 评论