qq_41009913的博客

背景RNN(循环神经网络) 相比其他类型的神经网络，rnn是由记忆的神经网络，会把之前的信息保存在网络中然后在之后的计算中反复使用。为什么会有这样的网络出现呢？在语言识别与自然语言处理中，输入的序列之间是有时间的联系的，或是说序列与序列之间是有联系的，比如文字处理中同一个词在不同的句子可能是不同的意思，这个时候就必须以这个词结合上下文关系来判别这个词的真正意思。比如一个语言识别的订票系统，输...

神经网络的引出逻辑回归得限制这里的逻辑回归所能做的分界线就是一条直线，没有办法将红蓝色用一条直线分开。没办法将红蓝色用一条直线分开特征转换可以将很多的逻辑回归接到一起，就可以进行特征转换。比如上图就用两个逻辑回归 对z1,z2z_1,z_2z1​,z2​ 来进行特征转换，然后对于 x1′,x2′x_1^{'},x_2^{'}x1′​,x2′​ ​ ，再用一个逻辑回归zz来进行分...