BriefGPT.xyz
Ask
alpha
关键词
cross-encoders
搜索结果 - 4
KDD
LEA:提升句子相似度对错别字的鲁棒性的词汇注意力偏置
通过引入词汇感知注意力模块(LEA)来解决文本噪音问题,增强交叉编码器在具有短文本描述和有限上下文的复杂场景中应对文本噪音;在商品匹配和文本蕴含等领域中,LEA 通过考虑词汇相似性对打字错误鲁棒性进行改进,在干净数据集和包含噪音数据集上均展
→
PDF
a year ago
提升 Transformer 架构在语义文本相似性方面的性能
本文针对语义文本相似度的任务,采用 BERT、RoBERTa 和 DeBERTaV3 三种交叉编码器以二分类或回归的方式建模,调整了模型结构和手工特征的输入,旨在提高其准确性,其中就测试数据结果的讨论进行了误差分析。
PDF
a year ago
跨编码器在零样本检索中的防御
本文探讨了双编码器(Bi-encoders)和交叉编码器(Cross-encoders)在领域内外的广义能力,并发现了交叉编码器的参数数量和早期查询文档的交互对检索模型的泛化能力起到了重要作用。此外,在几项任务中,交叉编码器比相似规模的双编
→
PDF
2 years ago
ICLR
Trans-Encoder: 通过自我和相互蒸馏进行无监督句对建模
该研究提出了一种完全无监督学习的句子表示模型 Trans-Encoder,融合了 Bi-Encoder 和 Cross-Encoder 两种学习范式,在多个 benchmark 上表现优于现有的无监督句子编码器。
PDF
3 years ago
Prev
Next