之前学习了单层神经网络,这次我们就来学习学习深度神经网络中最简单的深度网络吧!
tips:本应该书接上回-多层神经网络,但是多层神经网络中最简单的的就是多层感知机,因此本篇内容,就是对多层感知机的知识的分享。
深度神经网络中最简单的被称为多层感知机,多层感知机相较于单层神经网络的主要区别是,多层感知机多了一个隐藏层。单层神经网络只有输入层,输出层,而多层神经网络有一个或多个隐藏层,位于输入层和输出层之间,因此多层感知机也更加的复杂。
图一,单层神经网络 图二, 多层感知机
多层感知机(Multi-Layer Perceptron)简称MLP,是一种前馈型神经网络,是最早也是最简单的深度神经网络形式。它是一种全连接的、前向传播的神经网络,由输入层、一个或多个隐藏层和输出层组成。
细说隐藏层
多层感知机核心重点就在于隐藏层的加入,其它的和之前提到过的单层神经网络相似,这里我们就隐藏层进行详细讲解。
问:为什么要加入隐藏层?
答:简单的神经网络只能处理简单的线性问题,对于复杂的非线性问题而不能很好的解决,隐藏层的加入,不仅可以增强模型的表达能力,还可以让深度神经网络可以学习复杂的非线性模式和关系,因此能够适应更广泛、更复杂的任务和数据。
问:隐藏层的思想是什么?
答:隐藏层基本思想就是,对输入的数据的特征进行一个映射转换,使其抽象化并更容易被计算机进行线性划分的特征。
问:隐藏层具体操作是什么?
答:输出 = 激活函数(权重的加权和 + 偏置)——> y=a(+
+
+b) ,
隐藏层通过对输入层的数据进行如上处理(x代表输入的数据集),得到的输出即为y,然后输出层将隐藏层学习到的特征映射到最终的输出空间,并得到最终的预测结果。
参考内容:图一,二来源:阿斯顿·张,李沐《动手学深度学习》