FH的博客

kearskerase 主要模块

基本结构 输入层 --> 隐藏层 --> 输出层 ![在这里插入图片描述](https://img-blog.csdnimg.cn/20190519182927931.png?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3UwMT...

mini-batch 梯度下降1、为什么要使用mini-batch和batch相比，mini-batch计算开销较小、计算速度快，适应与大批量的数据集，支持在线学下。和 随机梯度下降相比，mini-batch更容易收敛，梯度下降的有效性较大。batch梯度下降如下图：momentum1、为什么使用Momentummini-batch gradient 中，每一个小批量的数据集都...

之前展示过只使用python、numpy构建简单的神经网络：前向传播、反向传播、链式法则求导等，有助于理解相关知识，但工程中是不可能这样做的。一些基本的概念1、常量 tf.constant```pythonimport tensorflow as tfa1 = tf.constant([1,2,3],tf.int32,name="a1")print(a1) # 打印：Tensor("...