Long Short-Term Memory (LSTM)

本文深入探讨了长短期记忆网络(LSTM),一种特殊类型的循环神经网络(RNN),旨在解决长期依赖问题。从背景到定义,再到LSTM网络的具体结构,文章详细介绍了LSTM的工作原理及其与传统RNN的区别。此外,还提到了LSTM的扩展形式——门控循环单元(GRU),并通过实例展示了LSTM的应用。参考了多篇权威文献,为读者提供了全面的LSTM理解视角。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

                     Long Short-Term Memory (LSTM)

Outline                 

                 Background

                 LSTM Network

                 Extended LSTM

                 LSTM vs. RNN

                 Examples

                 References

Background

Definition

 LSTM Network

For detailed derivation: http://cs224d.stanford.edu/

Extended LSTM---GRU

LSTM vs. RNN

References

1.A. Graves. Supervised Sequence Labelling with Recurrent Neural Networks. Textbook, Studies in Computational Intelligence, Springer, 2012

2.Hochreiter, S., & Schmidhuber, J. (1997). Long short-term memory. Neural computation, 9(8), 1735-1780

3.Gers, F. A., Schmidhuber, J., & Cummins, F. (2000). Learning to forget: Continual prediction with LSTM. Neural computation, 12(10), 2451-2471

4.Graves, Alex. Supervised sequence labelling with recurrent neural networks. Vol. 385. Springer, 2012

5.Bastien, Frédéric, Lamblin, Pascal, Pascanu, Razvan, Bergstra, James, Goodfellow, Ian, Bergeron, Arnaud, Bouchard, Nicolas, and Bengio, Yoshua. Theano: new features and speed improvements. NIPS Workshop on Deep Learning and Unsupervised Feature Learning, 2012

转载于:https://www.cnblogs.com/AcceptedLin/p/9778953.html

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值