浅谈对dropout的理解

当数据量不足时,通过引入随机函数扰乱数据映射,模拟大量数据,增强模型泛化能力,提高预测精度。

当数据太少时,模型泛化性太弱,线性太强,这是我们就需要使用一些随机函数来帮助我们随机打乱数据之间映射和计算,如此往复,给模型人为制作出多种情况,以原有数据人为制作出大量'数据',从而克服数据量少的缺点,上图:

让数组中每一个数据参与运算之前都去随机函数那里‘算一卦’,以随机数大小来决定此次运算(神经元与神经元之间映射)是不是要进行,从概率来讲,若取判断值为0.4,则一定有大约40%数据被淘汰出局,剩下‘运气好’数据开始计算,全部数据算完一次之后,所有数据初始化恢复如初开始下一次游戏抽签,如此循环往复,循环次数越多,所伪造出来的数据量越大,模型越好越精准。

评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值