yyangzhenjie的博客

转载自：http://m.blog.youkuaiyun.com/ZhikangFu/article/details/46458375损失函数，一般由两项组成，一项是loss term,另外一项是regularization term。J=L+R先说损失项loss，再说regularization项。1. 分对得分1，分错得分0.gold standard2. hi

转载自：http://blog.youkuaiyun.com/u012177034/article/details/52165913?locationNum=9激活函数的起源是希望该函数能够对神经元进行建模，进而起到对输入的数据进行非线性响应的过程。常用的激活函数激活函数应该具有的性质： （1）非线性。线性激活层对于深层神经网络没有作用，因为其作用以后仍然是输入的各种线性变换。