【零散知识】受限波兹曼机（restricted Boltzmann machine，RBM）和深度置信网络（deep belief network，DBN）

前言：

{

    最近一直在想要不要去线下的英语学习机构学英语 （本人的英语口语能力实在是低）。如果我想完成今年的年度计划，那么今年就没时间学英语了。

    这次的内容是之前落下的深度置信网络（deep belief network）[1]和其涉及的受限波兹曼机（restricted Boltzmann machine）[2]。不过这次就不看原论文了，而是简单地做一次零散知识的记录。

}

 

正文：

{

    根据[2]中的介绍，一个标准的受限波兹曼机由一层可见层和一层隐藏层组成，其中可见层和隐藏层的值都是布朗（二值）型的。图1是一个受限波兹曼机的结构，其可见层有3个单元，隐藏层有4个单元，没有画出偏置单元。

图1

    式（1）是受限波兹曼机的重要内容——能量函数。

式（1）

    以图1的结构为基准，式（1）中i∈[1,3]，j∈