BriefGPT.xyz
大模型
Ask
alpha
关键词
token2vec
搜索结果 - 1
token2vec: 一个基于自监督联合预训练的框架,使用非配对语音和文本进行训练
本文提出了一种新型的基于离散语音表示的非配对语音和文本联合预训练框架,即 Token2Vec,通过模态不可知的 Transformer 编码器和令牌级掩码语言建模(tMLM)进行预训练,在非 ASR 任务上也表现出很好的可转移性,相对于各种
→
PDF
2 years ago
Prev
Next