本研究综述了基于图形神经网络在自然语言处理中的应用,并提出了一个新的分类(基于图构建、图表示学习和基于图的编码器 - 解码器模型),同时介绍了许多利用 GNN 的 NLP 应用程序,并总结了相应的基准数据集、评估指标和开源代码;最后,讨论了利用 GNN 进行 NLP 的各种未解决问题以及未来的研究方向。
Jun, 2021
提出了一种新的基于图神经网络的模型,通过全局参数共享建立每个输入文本的图形而不是整个语料库的单个图形,这种方法支持在线测试,同时提取更多的本地特征和显著降低边缘数量以及内存消耗,在多个文本分类数据集上性能优于现有模型。
Oct, 2019
本论文综述了自 1961 年至 2021 年期间文本分类领域的研究成果,包括传统方法和深度学习方法,提出了特征提取和分类技术的分类法,并对各个分类进行了详细的介绍,同时比较了不同方法之间的优缺点和各种评价指标,对未来的研究方向和面临的挑战进行了概述。
Aug, 2020
本文介绍了一种基于图神经网络的新方法 TextING,可用于词嵌入和归纳文本分类,并在四个基准数据集上进行了实验,取得了超过现有文本分类方法的优异成果。
Apr, 2020
本文介绍了一种基于图卷积神经网络的文本分类算法 (Text GCN),该算法利用单一的文本图构建并联合学习词和文本的表征,经实验表明,将该算法应用于多个基准数据集后,在无需外部词嵌入和预先知识的情况下,文本 GCN 仍可优于现有的文本分类方法。
Sep, 2018
本研究讨论了文本分类算法的概述,包括不同的文本特征提取、降维方法、现有算法和技术、评估方法,并探讨了每种技术的限制和在实际问题中的应用。
Apr, 2019
本文提出 TensorGCN 框架,基于图卷积神经网络进行文本分类,结合单个图的邻域信息和不同图的异构信息进行内部图和跨图传递信息的聚合和协调,实现了在不同种类图中集成异构信息的有效方式。
Jan, 2020
本研究对基于图的文本表示方法在文本分类中的应用进行了广泛的实证研究,探索了其实际影响和开放挑战。在短文档和长文档数据集上比较了几个 GNN 架构和 BERT 的性能,并发现文本输入特征和领域高度相关,尽管 BERT 表现出色,但在处理短文本时存在收敛困难,而图方法特别有利于处理较长文本。
May, 2023
本文研究了基于图神经网络的文本分类任务,提出了一种新的分层图神经网络模型(HieGNN),其在词级别、句子级别和文档级别分别提取相应的信息。实验结果表明与几个基准方法相比,我们的模型能够从样本中获得更多有用的分类信息。
Sep, 2022
本文分析了深度学习在自然语言处理三个核心任务(文本表示、词序建模和知识表示)中的应用现状,探讨了在文本分类背景下自然语言处理所取得的改进和协同效应,同时考虑了文本生成、文本分类和语义解析中对抗技术所带来的挑战,通过对文本分类任务的经验研究,证明了交互式集成训练的有效性,特别是与 TextCNN 结合,凸显了这些进展对文本分类增强的重要性。
Mar, 2024