BriefGPT.xyz
大模型
Ask
alpha
关键词
extrinsic evaluation
搜索结果 - 4
对于下游任务,摘要是否有用?人类外在评估对文本摘要的研究
该论文研究了自动文本摘要技术,提出了外部方法来评估文本摘要的实用性,并设计了三种不同的任务,发现细化模型生成的文摘在整体评价型任务中尤为有用。在人工评估和自动评估指标之间也存在一定的限制性。
PDF
a year ago
COLING
除偏不足!—— 浅谈消除 MLM 和社会偏见在下游任务中的有效性
本研究探讨了遮盖语言模型的任务非特定内在社会偏见和任务特定外在社会偏见评估指标之间的关系,并发现两种评估指标之间存在着很弱的相关性。 此外,我们发现使用不同方法去除偏见的 MLM 在下游任务的精调期间仍会重新学习社会偏见。 我们发现训练实例
→
PDF
2 years ago
揭示词嵌入中的差异性语言信息及其对内在和外在评估的意义
本文研究词嵌入技术中的理想表示问题,发现各种模型包含的信息互相矛盾,通过线性变换来调整相似度排序以提高其结果,同时探讨了内在和外在评估之间的关系。
PDF
6 years ago
神经跨语言共指消解及其在实体链接中的应用
本文提出了一种基于实体为中心的跨语言指代消解模型,利用多语言嵌入和语言无关特征进行构建,并进行了内在和外在评估。结果表明,本模型在英语训练,中文和西班牙语测试上的性能表现优异,能够在不利用任何中文或西班牙语标注数据的情况下,实现优越的实体链
→
PDF
6 years ago
Prev
Next