李宏毅机器学习笔记-12.3 循环神经网络（Recurrent Neural Network-RNN）- part 3

Recurrent Neural Network(RNN) - 循环神经网络（part 3) Gated RNN

---

0 前言

• 其实这节课的内容跟我其他这个系列的博客是不属于同一个课程的，但是因为是在 B 站看的视频，up 主可能不小心弄混了，于是我就也一起看了，多学点总没什么错。
• 虽然不是同一门课，但是确实是同一个老师，也是极其学习的内容，所以就当做一门课也没什么差别。这里给出这节课内容所属的课程网站 Applied Deep Learning / Machine Learning and Having It Deep and Structured

1 几种 RNN 结构

• RNN 中有一个 Basic Function ，无论输入的序列多长，都会经过这个 Fuction。现在我们假设这个Function叫做 $f : h^{'}, y = f(h, x)$，即输入$h, x$，输出 $h^{'}, y$ . 注意 $h^{'}$ 和