前言

长短期记忆(LSTM)是一种非常重要的神经网络技术,其在语音识别和自然语言处理等许多领域都得到了广泛的应用。


一、LSTM概述

长短期记忆网络(LSTM,Long Short-Term Memory)是一种时间循环神经网络,是为了解决一般的RNN(循环神经网络)存在的长期依赖问题而专门设计出来的,所有的RNN都具有一种重复神经网络模块的链式形式。

LSTM和RNN的区别
RNN是想把有用、没用的都记住;
LSTM则是设计一个记忆细胞,具有选择性记忆功能,可以选择记忆重要的信息,过滤掉噪声信息,减轻噪声负担。
比如:期末复习

二、LSTM的结构

1.结构

在这里插入图片描述

对每个部分的计算
在这里插入图片描述
W为权重,b为偏置

2.LSTM反向传播

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

总结

这里对LSTM原理进行的学习。

Logo

CSDN联合极客时间,共同打造面向开发者的精品内容学习社区,助力成长!

更多推荐