BriefGPT.xyz
Ask
alpha
关键词
sentencepiece
搜索结果 - 1
EMNLP
SentencePiece: 一种简单且独立于语言的子词标记器和去标记器,用于神经文本处理
本文介绍了 SentencePiece,一种语言无关的子单词标记器和去标记器,旨在用于神经文本处理,包括神经机器翻译。它提供了 C++ 和 Python 的开源实现来得到子单词,并能够直接从原始语句中生成子单词模型,从而实现纯粹的端到端系统
→
PDF
6 years ago
Prev
Next