本文介绍一种基于中餐馆过程的多义词嵌入模型,测试表明它在人类词语相似度判断方面取得了最先进的性能,并提出了一种管道式架构,用于将多义词嵌入结合到语言理解中,结果表明在某些任务(如词性标注、语义关系识别、语义相关性)中,多义词嵌入确实能够提高性能,但在其他任务(如命名实体识别、各种形式的情感分析)中却没有提高。
Jun, 2015
本篇论文提出了一种新的方法,基于监督式消歧,为每个单词建立多个嵌入向量,从而针对字面意思和文本语境对不同主题进行消歧,以及在神经依赖分析上具有更好的错误率表现。
Nov, 2015
此研究综述了分布式语义表示的理论背景,介绍了从单词级别向更精细的词义级别转化的方法,并提供了对两种主要分支进行的广泛技术概述;最终,对其重要方面进行了分析与评估。
May, 2018
利用语境嵌入表示的词义表征,基于WordNet全覆盖创造了意义级别嵌入,并不依赖于显式知识或任务特定建模,从而实现了前所未有的词语消歧性能提升。
Jun, 2019
本研究提出了一种基于预训练的词嵌入,利用完全无监督和无基于知识的方法诱导一个完整的词义库,并实现对158种语言中的单词进行上下文消歧,对于资源匮乏的语言特别有用。
Mar, 2020
本文介绍了一种名为Context Derived Embeddings of Senses (CDES)的方法,它从上下文嵌入中提取感官相关信息,并将其注入到静态嵌入中,以创建特定于感官的静态嵌入。实验结果表明,CDES能够准确地学习感官特定的静态嵌入,具有与当前最先进的感官嵌入相当的性能。
Oct, 2021
该研究提出了一种两阶段的方法,使用上下文中单词意义的注意力来提取一个单词的多重意义,并将其传递到skip-gram模型中,以生成多重意义的嵌入,这比现有技术表现更好,可应用于主题建模。
Apr, 2023
通过神经符号方法在嵌入式感知球的配置和逻辑推理中使得词义消岐的F1分数达到90%以上,从而突破了利用深度学习方法对词义消岐的准确度的层限。
Jul, 2023
使用语义组合性建模的透明、可解释和语言学动机策略,模拟词的上下文意义编码,并且与复杂神经结构下的黑盒模型相比,显示其与语言学动机模型在给定语义任务中的竞争力。
Dec, 2023
通过在现代监督式词义消歧模型中将语义特征引入分类器并考虑使用语义词典结构来增加训练数据,本文提出了一种有效的增强模型。通过研究不同类型的语义特征与本地上下文的交互作用,本文将所提出的模型扩展为一种新颖的多层架构,实验证明这种方法可以与现有的最新方法相比较。
Feb, 2024