将词汇注释融入神经词义消歧
本研究致力于提高利用词汇资源和神经网络的方法进行词义消歧(WSD)的性能。我们提出了基于 BERT 的 WSD 系统,并在 SemCor3.0 上对其进行了微调,实验结果表明,我们的方法优于现有的最先进系统。
Aug, 2019
本研究提出了一种采用词义从不同词义库中匹配相同词义的定义句子(术语)的光泽对齐算法,并使用这些对齐的库训练模型以确定目标单词在上下文中的语义等效性,解决了有限的训练数据和集中于 WordNet 等预定义的词义库的问题;实验结果表明,所提出的方法改善了所有词义和低频词义的预测,并优于现有工作。
Oct, 2021
本文提出了一种基于词汇知识的语境化嵌入模型用于词义消岐,将相关语义的词义和上下文靠近,将不相关的远离,用 Attract-Repel 目标函数和自训练目标函数对嵌入进行调整,实现了在知识为基础的词义消岐方面的最新前沿成果。
Apr, 2023
本文介绍了一种使用基于词义的外部词汇知识库的无监督视觉词义消歧方法,该方法提出了一种利用贝叶斯推断来合并词义信息的方法,以及一种与 GPT-3 一起使用的上下文感知定义生成方法,实验结果显示,我们的方法显著提高了 VWSD 性能,并且对于具有更好性能的现有定义生成方法的 OOD 样例实现的明显性能提升。
May, 2023
本研究提出了一种基于双编码器模型的词义消歧方法,通过将目标词与其上下文以及每个意义所对应的词典定义进行独立编码后,将两部分编码器在相同的表示空间中联合优化,从而实现通过寻找最相似的意义编码来进行词义消歧。结果表明,该模型在英语全词 WSD 任务上表现出色,尤其在对稀有义项的处理上取得了明显提高,使得其在少见义项上的失误率降低了 31.1%。这证明了通过建模稀有义项的定义可以更有效地进行词义消歧。
May, 2020
通过在现代监督式词义消歧模型中将语义特征引入分类器并考虑使用语义词典结构来增加训练数据,本文提出了一种有效的增强模型。通过研究不同类型的语义特征与本地上下文的交互作用,本文将所提出的模型扩展为一种新颖的多层架构,实验证明这种方法可以与现有的最新方法相比较。
Feb, 2024
本文提出了一种新方法解决词义消歧中受语料库覆盖率和效率限制的问题,利用 WordNet 中的知识以及 Synsets 之间的上下位关系来减少所需的不同词义标记的数量,从而在大多数 WSD 评估任务上实现最先进的结果,在不使用附加训练数据的情况下提高督导系统的覆盖范围、减少训练时间和模型的大小,此方法结合集成技术和 WordNet Gloss Tagged 作为训练语料时可以得到显着的超越当前最先进状态的结果。
Nov, 2018
本文提出了一种基于多语言词典建立知识和监督为基础的多语言词义消歧(MWSD)系统的方法,利用统一的语义表示,将多种语言的注释进行共同训练以解决 MWSD 的注释稀缺问题,并在 SemEval-13 和 SemEval-15 数据集上展示了该方法的有效性。
Oct, 2022
本研究探讨了利用词义消歧算法扩大上下文范围提高神经机器翻译的效果,通过引入三种自适应聚类算法进行了验证并在 SemEval 数据上进行了评估,随后在一个最先进的 NMT 系统中联合学习单词向量和最佳 WSD 算法定义的词义向量,最终证明这种方法可以优于几个基准模型。
Oct, 2018
本研究使用主题模型的形式设计了一种词义消歧系统,使其在上下文单词数线性增长的情况下扩展,该方法在 5 个英语全单词 WSD 数据集上进行的评估表明,其性能优于这一领域的当前最先进无监督知识为基础的 WSD 系统。
Jan, 2018