BriefGPT.xyz
大模型
Ask
alpha
关键词
vocabulary parameters
搜索结果 - 1
令牌化对语言模型的影响:针对土耳其语的分析
本文研究了在土耳其语 (OSCAR corpus) 的分裂数据上,比较了不同粒度级别的分词器的性能和预训练语言模型的效果,并发现单独定制的分子级别分词器具有挑战性的表现,同时也发现增加词汇量可以提高单独定制的分子级别分词器以及使用 RoBE
→
PDF
2 years ago
Prev
Next