zy_小轩的博客

交叉熵代价函数 激活函数sigmoid函数： 激活函数求导： 交叉熵代价函数： 其中C 表示代价函数，x表示样本，y表示实际值，a 表示输出值，n 表示样本的总数。 上述的两个公式中可以发现权值和偏置值的调制与无关，另外，梯度公式中的表示输出值与实际值的误差。所以当误差越...

Optimizer(优化器) tf.train.GradientDescentOptimizer 梯度下降法 tf.train.AdadeltaOptimizer 自适应学习率调整 tf.train.AdagradOptimizer tf.train.AdagradDAOptimizer tf.train.MomentumOptimizer 动量优化器 tf.train.Ada...