dynamical weights | BriefGPT

关键词dynamical weights

搜索结果 - 1

ICLR元学习动力语言模型
本研究探讨了单词级别的语言建模任务，并研究了将基于隐藏状态的短期表示与编码在语言模型的动态权重中的中期表示相结合的可能性。我们将语言建模问题转化为在线学习框架，并通过梯度下降训练元学习器以连续更新语言模型权重，扩展了最近在动态演化权重的语言
PDF6 years ago