neural retrievers | BriefGPT

关键词neural retrievers

搜索结果 - 7

ColBERT-XM: 零射多语信息检索的模块化多向量表示模型
这项研究提出了一种新颖的模块化密集检索模型 ColBERT-XM，它通过学习单个高资源语言的丰富数据，并能够有效地零 - shot 转换到各种语言，从而消除了对特定语言的标记数据的需求。通过展示在零 - shot 场景中的娴熟表现，ColB
PDF4 months ago
SilverRetriever: 推进波兰问答领域的神经式段落检索
SilverRetriever 是一个针对波兰语的神经检索器，通过在多样化的手动标记或弱标记数据集上的训练，实现了比其他波兰语模型更好的结果，并且与更大型的多语言模型相竞争。同时，我们还开源了五个新的段落检索数据集。
PDF10 months ago
ACL神经检索器与超越：论文提案
本篇论文提出三个方面的方法，包括新的模型架构、IR 导向的预训练任务、生成大规模训练数据，以解决神经检索器面临的问题，并探讨了多模式查询的未来研究方向和相应的解决方法。
PDF2 years ago
ERNIE-Search: 通过自我即时蒸馏将交叉编码器与双编码器相结合，实现密集型段落检索
本文提出了一种新颖的蒸馏方法，将自然语言处理模型中的交互信息更好地应用于开放领域的问答问题，并通过级联蒸馏方法优化成绩，从而在 Open-Domain QA 基准上取得了优于强基线模型的最优结果。
PDF2 years ago
SIGIR从蒸馏到硬负采样：使稀疏神经 IR 模型更加有效
本文研究基于稀疏表达的 SPLADE 检索器的训练提升方法，结合蒸馏、硬负例挖掘以及预训练语言模型初始化，证明其在效率和效果方面同样具有优势，能够在领域内和零样本情况下实现最先进的结果。
PDF2 years ago
AAAI使用神经检索器提高生物医学信息检索
本研究旨在提高神经检索器在生物医学领域中的表现，提出了模板问题生成方法、两个新的预训练任务以及多维语境表示（Poly-DPR）技术，并通过 BioASQ 挑战实验证明该方法在小语料库方面超越目前的神经方法和 BM25。
PDF2 years ago
ACL端到端的神经检索器训练，用于开放领域的问答
本篇论文通过系统地研究检索器的预训练，提出了一种利用反向填空任务和掩盖显著跨度的无监督预训练方法，并在问题 - 上下文对上进行有监督微调的方法。此外还探讨了两种 OpenQA 模型的端对端有监督培训方法，并展示了这些方法在性能方面相对于较小
PDF4 years ago