小白的LSTM学习笔记（1）---基本理解

为了解决非线性问题，人们模拟了生物大脑的结构与神经元的传递，用来进行非线性系统的实验操做，也就是人工神经网络（ANN），但传统神经网络因为层与层之间全为全链接层，隐藏层上无节点链接，因此没法经过先前推断后续，因而循环神经网络（RNN）出现了，这种节点成环定向链接的人工神经网络，在所需推断和信息间隔较近的时候，能够完成由先前到后续的过程，可是间隔一大，这种应用记忆信息的能力就削弱了，也就是梯度弥散。

>>阅读原文<<