在RNN中每个时间步骤用到的参数都是一样的，但是每一时间的输入和输出是不一样的

在BPTT中，第一个求和是接收来自输入层的数据，第二个是接收来自上一隐藏层的数据

在RNN的后向传播中，累积残差包括当前时间输出层传回的残差和下一时间隐藏层传回的残差

RNN在处理中存在梯度消失问题，早期信号被忽略