EMNLPJun, 2019

基于 Transformer 编码器的多准则中文分词简明模型

PDF
TL;DR提出了一种基于 Transformer 编码器的多准则中文词分割 (MCCWS) 统一模型，该模型可对简体和繁体中文进行分割，并具有出色的迁移能力。在八个具有不同准则的数据集上进行实验，结果表明我们的模型优于单准则基线模型和其他多准则模型。
multi-criteria chinese word segmentationmccwstransformer encodersimplified and traditional chinesetransfer capability
发现论文，激发创造
  • 使用 BERT 统一多准则中文分词

    本文利用预训练 Bert 模型和 bigram 特征，提出了一个新的基于 Bert 的统一的 MCCWS 模型并加入了一个辅助分类任务，在 8 个具有不同标准的数据集上进行实验，并取得了新的最优结果。

    Apr, 2020

  • 多标准学习方法实现快速准确的神经网络中文分词

    为适应不同注释标准而设计的基于 BERT 的多标准中文分词模型，在 10 个中文分词数据集上实现了比之前最先进的模型更高的效率和性能。

    Mar, 2019

  • 多标准单词分割的有效神经解决方案

    本文研究了训练在多样化语料库上的单一联合模型，并提出了一种新颖的设计，使得该模型在中文分词任务上达到了最新的高性能表现。

    Dec, 2017

  • 用于多标准中文分词的 Switch-LSTMs

    本文提出了一种灵活的多标准中文分词学习方法：Switch-LSTMs，它由几个长短时记忆神经网络 (LSTM) 和一个自动选择器组成，可以在多个子标准之间灵活切换，相比之前的方法和单一标准学习，该模型在八个具有不同标准的语料库上取得了显著的改进。

    Dec, 2018

  • 针对中文分词的对抗多标准学习

    本文提出了对抗多准则学习方法来集成多个异构分词准则的共享知识，通过在八个具有异构分词准则的语料库上的实验表明，相对于单一准则学习，每个语料库的性能都有显着提高。

    Apr, 2017

  • BERT 遇见中文分词

    应用 BERT 模型对中文分词任务进行了探究，在标注不一致的情况下 BERT 模型可以稍稍提高性能，具有良好的特征提取能力，大模型通常具有更好的性能，可作为其他神经网络模型的优秀特征候选项，Softmax 表现可以不输 CRF。

    Sep, 2019

  • 注意力机制对中文分词的影响

    本研究采用贪婪解码算法，侧重于进一步加强中文分词模型本身，在保持更高速、更准确性的情况下，提出了一个基于变型 Transformer 和双仿生注意力评分器构建的编码器模型，以及高速分词的轻量化解码器模型。实验结果表明，该模型在语义切分速度最快的情况下，可以在与强基线模型比较的同时达到新的最佳性能水平。

    Oct, 2019

  • 神经网络中的中文分词：序列到序列翻译模型

    提出了一种基于注意力机制编码解码框架的序列到序列的中文分词模型，拥有全局信息和多任务融合的能力，并在微博、北大和微软亚洲等数据集上取得了与最先进方法相当的竞争性能。

    Nov, 2019

  • 中文分词的多字符嵌入

    本篇论文提出一种采用多种字符嵌入的共享 Bi-LSTM-CRF 模型来进行中文分词，并在实验中证明此方法能够显著提高分词准确率，同时在 AS 和 CityU 语料库中取得了 96.9 和 97.3 的最优 F1 得分。

    Aug, 2018

  • 重新思考中文分词：一个已解决的任务吗？

    本文评估了现有中文分词系统，提出了一种细粒度评估方法，并针对多准则学习提出了解决方案，为未来研究方向提供了参考。

    Nov, 2020