EMNLPOct, 2023
RegaVAE:一种用于语言建模的检索增强高斯混合变分自编码器
RegaVAE: A Retrieval-Augmented Gaussian Mixture Variational Auto-Encoder for Language Modeling
Jingcheng Deng, Liang Pang, Huawei Shen, Xueqi Cheng
TL;DR检索增强语言模型通过引入隐变量聚合检索信息解决了过时信息和虚构问题,并以 RegaVAE 作为一个例子,展示了在文本生成质量和幻觉去除方面的显著改进。