Sep, 2024

旋律是音乐生成的关键

TL;DR本研究针对现有音乐生成方法缺乏旋律引导的问题,提出了一种新的旋律引导音乐生成模型(MMGen)。该模型通过多模态对齐模块有效对齐旋律与音频波形及描述,研究结果表明,该方法在生成与提供音频风格相匹配且符合文本描述的音乐方面具有显著优势,且构建的MusicSet数据集将促进该领域的进一步研究。