Sep, 2023
BLSP:基于继续写作行为对齐的语音 - 文本预训练引导
BLSP: Bootstrapping Language-Speech Pre-training via Behavior Alignment of Continuation Writing
Chen Wang, Minpeng Liao, Zhongqiang Huang, Jinliang Lu, Junhong Wu...
TL;DR通过行为对齐的方式,我们提出了一种轻量级的语言 - 语音预训练方法,将大型语言模型(LLMs)的能力扩展到语音识别、语音翻译、口语理解和对话等领域,实现了语音和文本之间的模态对齐。