Jun, 2024

利用参数高效的迁移学习进行多语言文本到语音调整

TL;DR在多种语言环境中,为了有效地合成语音,开发一个能够应对不同语言的语音合成模型是具有挑战性的。本文提出了一种在多语言语音合成中,将参数高效的迁移学习方法(如适配器和超网络)与 TTS 架构集成的方法,并在实验中证明这种方法在性能上能够与全面微调方法相媲美甚至更好,参数数量仅为总参数的约 2.5%。