热门标签
热门文章
- 1【Java--数据结构】栈：不仅仅是数据存储，它是编程的艺术
- 2【数据结构与算法】直接插入排序和希尔排序
- 3POS--权益证明机制_ppcoin: peer-to-peer crypto-currency with proof-of
- 4DNF手游攻略：0氪攻略，转职技巧与避坑指南！
- 5H2WebReader：一款轻量级的在线HTML到Markdown转换器
- 6H5点餐系统|外卖点餐系统源码(源码+搭建+论文)
- 7深入解析Python中的range()函数_numpy range
- 8docker的安装，以及通过docker拉取nacos镜像和启动_nacos docker镜像
- 9读书笔记之人工智能_full ai的定义
- 10年龄不过30岁而已，宝妈程序员开发转测试，20Koffer也照收不误_大龄开发转测试可行吗
当前位置: article > 正文
LSTM替换RNN的原因_lstm替代了rnn
作者：寸_铁 | 2024-07-17 08:30:55
赞
踩
lstm替代了rnn
RNN用gradient decent train的效果很差，是因为RNN有time sequence，w会在不同时间点被反复使用，会产生gradient vanish问题。
LSTM可以handle gradient decent的问题，需要在learning rate很小的情况下train。
为什么要用LSTM代替RNN？
RNN在每个时间点，memory中的data都会被覆盖掉，而LSTM有一个forget gate，会把memory中的值乘上一个值再加上input。
声明：本文内容由网友自发贡献，转载请注明出处：【wpsshop】
推荐阅读
相关标签
