原书出处
深度学习
10 第10章 序列建模:循环和递归网络
状态的机制。我们希望神经网络学会决定何时清除状态,而不是手动决定。这就是门控RNN要做的事。 10.10.1 LSTM
引入自循环的巧妙构思,以产生梯度长时间持续流动的路径是初始长短期记忆 (long short-term memory,LSTM)模型的核心贡献(Hochreiter and Schmidhuber,1997)。
其中一个关键扩展是使自循环的权重视上下文而定,而不是固定的(Gers et al. ,2000)。门控此自循环(由另一个
原书定位详情
来源:a19c7933-4eda-4176-aebd-30fe7e1ad292
正文位置:extracted/深度学习/_epub-src/text/part0004.html
EPUB SHA-256:30b05f447b47f121324499dd200696e34be257d5cd4c4b753541b42f40a94639