用于日本语分词的长短期记忆

Sep, 2017

Long Short-Term Memory for Japanese Word Segmentation

Yoshiaki Kitagawa, Mamoru Komachi

TL;DR本文介绍了一种基于Long Short-Term Memory（LSTM）神经网络的日文分词方法，该方法考虑了日文中的汉字、平假名和片假名等正字体的变异及其难度，同时考虑了全局语境因素，实验结果表明该方法在实现不同日语语料库上达到了最先进的准确性。

Abstract

This study presents a long short-term memory (LSTM) neural network approach to japanese word segmentation (JWS). Previous studies on Chine