跨越边界的歌曲:可唱和可控的神经歌词翻译
本文介绍了一个计算框架,旨在定量评估可唱译歌词,该框架无缝地融合了歌曲、语言和文化维度;通过收集一个可唱歌词数据集,并进行可唱和不可唱歌词的比较分析,我们验证了我们框架的有效性;我们的多学科方法揭示了歌曲翻译艺术的关键因素,并为未来的计算歌词翻译评估奠定了坚实基础。
Aug, 2023
本文提出了一种新颖的编码器 - 解码器框架 ——Lyrics-Melody Translation with Adaptive Grouping (LTAG),通过自适应音符分组模块,可以同时翻译源歌词并确定每个解码步骤中对齐音符的数量,通过注释数据和后翻译使用大量的增广数据,实现了自动歌曲翻译的完整解决方案,并在英汉歌曲翻译数据集上进行实验,结果表明模型在自动和人类评估中均有效。
Mar, 2023
本文提出了一种基于序列到序列框架,利用神经编码器和分层解码器,结合自然语言和旋律创作音乐曲调及准确标定的模型,并在 18,451 首流行歌曲中的歌词 - 旋律匹配对上进行了实验,论文通过人工评估证明了模型生成的旋律比基线模型更优秀。
Sep, 2018
基于可用数据集,本文旨在创建一个能够进行多语言自动歌词转录的系统,并通过扩展目标词汇集合将已被证明在英语自动歌词转录中有效的技术应用于多语言场景。通过语言分析结合语言分类性能,我们的研究发现多语言模型的性能连续优于仅针对语言子集进行训练的单语言模型,并且将语言信息纳入模型中显著提高性能。
Jun, 2024
我们提出了一种可控的歌词到旋律生成网络,能够以用户期望的音乐风格从歌词中生成逼真的旋律,通过验证各项指标,初始控制生成的旋律的研究表明具有更好的生成质量和与用户的互动性。
Jun, 2023
本文探讨神经机器翻译在低延迟语音翻译中遇到的问题,提出一种无需任务特定训练数据的适应方法,并通过构造人工数据和使用多任务学习技术成功降低了每次输出构建时所需的更正数量,同时保持了翻译质量。
Aug, 2018
本文提出了一种用于声调语言的自动歌曲翻译系统,解决了将单词的音高与歌曲旋律对齐并传达原意的独特挑战。该系统结合预训练和三种解码约束,成功实现了语义和歌唱性的平衡。
Mar, 2022
我们致力于构建一款通用的神经机器翻译系统,通过构建一个单一的大规模多语言 NMT 模型,实现了 103 种语言之间的翻译,带有有效的迁移学习能力,显着提高了低资源语言的翻译质量,同时保持高资源语言翻译质量与竞争双语基线相当,为实现通用 NMT 模型的质量和实用性提供了多个方面的模型构建分析,并指出未来研究的方向和需进一步解决的问题。
Jul, 2019
本文追溯了现代神经机器翻译体系结构的起源,重点探讨了单个神经网络在翻译中的应用,其中涉及到 word 和 sentence embedding 以及编码器 - 解码器网络家族的早期示例,并总结了该领域的最新趋势。
Dec, 2019
本研究旨在分享我们在神经机器翻译领域的专业知识,创造出竞争力强且适用于不同用例的翻译引擎,在实际生产流程中实现特定领域的高效翻译。我们提供了一种同时发布多种语言在线演示程序的方法,并探索了不同的实用选项、网络架构和评估方法等。
Oct, 2016