机械学习—零基础学习日志003(归纳偏好)

归纳偏好:

我用简单的语言来说明就是,你希望找到一个美丽聪明的女生当做妻子。那如果有一位很富有任性,又美丽聪明的女孩,以及一个贫穷体贴,又美丽聪明的女孩,她们都符合你的择偶观,只是你只能选择一个。

其实你会选择其中一个,就像算法,虽然都满足条件能解决问题,你最终还是会选择一个。

奥卡姆剃刀:

若有多个假设与观察一致,则选最简单的那个。

周志华老师课堂上说的话,很有哲理:简单的道理并不简单。以奥卡姆剃刀为例。

ax^{3} + b  与  ax^2 + bx + c,这两种方式,哪一个公式更加简单?

你如何定义简单,这本身就不简单。

NFL(天下没有免费的午餐):

我对(NFL)No Free Lunch Theorem.的理解是:任何事物都必定有代价。周老师书中提到,我们应该清楚的认识到脱离具体问题,空泛的谈论什么“学习算法更好”毫无意义。因为若考虑所有潜在问题,所有学习算法都一样好。

讨论算法的优劣,必然针对具体的学习问题。

在某个问题表现好的算法在另外一些问题上可能不尽如人意。所以学习算法自身的归纳偏好与问题是否匹配起到决定性作用。

深入了解学科,总发现学科背后的朴素价值观,总是包容了深刻的生活指导思想。

书籍参考:《机械学习》 周志华 清华大学出版社 2016年版

视频参考:周志华老师亲讲-西瓜书全网最详尽讲解-1080p高清原版《机器学习初步》 B站 

评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值