吴恩达机器学习笔记23-神经网络:表述--非线性假设(Non-linear Hypotheses)

在高维特征空间中,线性与逻辑回归面临计算负担,尤其在构建非线性模型时。举例说明,使用50x50像素图片识别汽车,会产生约3百万个特征组合,普通逻辑回归难以处理。此时,神经网络成为解决问题的有效途径。

  我们之前学的,无论是线性回归还是逻辑回归都有这样一个缺点,即:当特征太多时,
计算的负荷会非常大。
下面是一个例子:

  当我们使用?1, ?2 的多次项式进行预测时,我们可以应用的很好。
  之前我们已经看到过,使用非线性的多项式项,能够帮助我们建立更好的分类模型。假
设我们有非常多的特征,例如大于100 个变量,我们希望用这100 个特征来构建一个非线性
的多项式模型,结果将是数量非常惊人的特征组合,即便我们只采用两两特征的组合(?1?2 +
?1?3 + ?1?4+. . . +?2?3 + ?2?4+. . . +?99?100),我们也会有接近5000 个组合而成的特征。这
对于一般的逻辑回归来说需要计算的特征太多了。
  假设我们希望训练一个模型来识别视觉对象(例如识别一张图片上是否是一辆汽车),
我们怎样才能这么做呢?一种方法是我们利用很多汽车的图片和很多非汽车的图片,然后利
用这些图片上一个个像素的值(饱和度或亮度)来作为特征。
  假如我们只选用灰度图片,每个像素则只有一个值(而非 RGB 值),我们可以选取图
片上的两个不同位置上的两个像素,然后训练一个逻辑回归算法利用这两个像素的值来判断
图片上是否是汽车:

  假使我们采用的都是50x50 像素的小图片,并且我们将所有的像素视为特征,则会有
2500 个特征,如果我们要进一步将两两特征组合构成一个多项式模型,则会有约25002/2个
(接近3 百万个)特征。普通的逻辑回归模型,不能有效地处理这么多的特征,这时候我们
需要神经网络。

转载于:https://www.cnblogs.com/sl0309/p/10404350.html

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值