Jul, 2023

从西方到东方:谁更能理解他人的音乐?

TL;DR最新 MIR 发展下,利用深度学习模型进行广泛任务的领域中,关于不同音乐文化间能否使用这些模型来学习音乐表现以及是否能建立类似的音乐音频嵌入模型的研究问题引起关注。为此,我们利用迁移学习方法来探索不同音乐文化之间的相似性,并通过在西方音乐数据集、东地中海传统 / 民族数据集和印度艺术音乐数据集间训练和迁移三种不同的深度音频嵌入模型(包括两个基于卷积神经网络和一个 Transformer 架构的模型)进行自动标签化的实验,结果表明在所有领域均通过迁移学习获得了有竞争力的表现,但对于每种音乐文化来说,最佳源数据集有所不同。实现代码和训练好的模型都提供在公共存储库中。