Feb, 2024
LLM 何时需要检索增强?缓解 LLM 的过度自信有助于检索增强
When Do LLMs Need Retrieval Augmentation? Mitigating LLMs' Overconfidence Helps Retrieval Augmentation
Shiyu Ni, Keping Bi, Jiafeng Guo, Xueqi Cheng
TL;DR通过量化测量大型语言模型(LLMs)对知识边界的感知能力,以及研究问题确定度与 LLMs 对外部检索信息依赖性之间的相关性,我们提出了几种增强 LLMs 知识边界感知能力的方法,并证明它们在减少自信心方面是有效的。在配备了这些方法的情况下,LLMs 可以以更少的检索调用实现与检索增强相当甚至更好的性能。