Jan, 2023

ExaRanker: 解释增强型神经排名器

TL;DR本文研究表明:在输出答案之前,引导大型语言模型生成解释是提高推理任务性能的有效策略;本研究还发现神经排名器也受益于解释。我们使用像 GPT-3.5 这样的大型语言模型对检索数据集进行增强,并训练一个序列到序列的排名模型,输出给定查询 - 文档对的相关性标签和解释。我们的模型,ExaRanker,在少量带有合成解释的示例上微调,性能与在 3 倍更多没有解释的示例上微调的模型相当。此外,ExaRanker 模型在排名过程中不产生额外的计算成本,可以按需请求解释。