Apr, 2024
您的精调大型语言模型已是强大的超分布检测器
Your Finetuned Large Language Model is Already a Powerful Out-of-distribution Detector
Andi Zhang, Tim Z. Xiao, Weiyang Liu, Robert Bamler, Damon Wischik
TL;DR通过重新审视预训练大型语言模型和其微调变体之间的似然比作为一种区分所需分布检测的标准,我们展示了似然比可以作为一种有效的 OOD 检测器,并将其应用于问题回答系统中以改善 LLMs 在一般问题上的性能。