论文10:26截断BPTT的梯度边界效应被证明呈指数衰减搞RNN或循环模型训练的可以看看,这篇把截断BPTT到底丢多少梯度信息给出了数学刻画,结论挺实用。#TBPTT#梯度下降#循环神经网络#优化理论aarXiv cs.LG@Julian D. Schiller, Matthias A. Müller原文稍后读已读值得跟进有用关注 TBPTT