BriefGPT.xyz
Oct, 2021
序列建模的长记忆
Long Expressive Memory for Sequence Modeling
HTML
PDF
T. Konstantin Rusch, Siddhartha Mishra, N. Benjamin Erichson, Michael W. Mahoney
TL;DR
提出了一种名为长表达记忆(LEM)的新方法,用于学习长期顺序依赖关系,它可以通过梯度进行高效处理并且具有足够的表达能力,能够学习复杂的输入输出映射,通过实验验证了 LEM 在图像分类、时间序列分类、语音识别、语言建模等任务中的优越性。
Abstract
We propose a novel method called
long expressive memory
(LEM) for learning long-term
sequential dependencies
. LEM is
gradient-based
, it ca
→