Neural Networks for Machine Learning编程练习4 Restricted Boltzmann Machines

本文介绍如何通过实现受限玻尔兹曼机(RBM)的对比散度(CD1)训练方法,并将其应用于前馈网络中作为最底层来识别USPS数据集中的手写数字。文中提供了一个固定的随机数生成器,所有单元不使用偏置,重点介绍了二值单元的取值概率。
03221217_gkrB.jpg本文由码农场同步,最新版本请查看原文:http://www.hankcs.com/ml/nnml-rbm.html
Neural Networks for Machine Learning编程练习4 Restricted Boltzmann Machines
最后一次练习先实现RBM的CD1训练,然后将其作为前馈网络预训练的最底层用于识别USPS手写数字。编程之前有些约定需要遵守,这次练习的随机数发生器是固定地从给定的a4_randomness_source.mat中读取下一个浮点数:为了简单,所有单元都不使用偏置,RBM就是简单的:二值单元的取值为0或1,但在大部分时候储存的都是$P(v_i=1|h)$。var mathConfig = {jax: ["input/TeX", "output/HTML-CSS"], tex2jax: {inlineMath: ...

继续阅读码农场 » Neural Networks for Machine Learning编程练习4 Restricted Boltzmann Machines

原文链接http://www.hankcs.com/ml/nnml-rbm.html


感谢阅读本文,欢迎 查看原文或访问 码农场 获取更多内容

转载于:https://my.oschina.net/hankcs/blog/913888

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值