Sep, 2023
Dynamic-SUPERB:面向语音的动态、协作和全面的教学调优基准
Dynamic-SUPERB: Towards A Dynamic, Collaborative, and Comprehensive Instruction-Tuning Benchmark for Speech
Chien-yu Huang, Ke-Han Lu, Shih-Heng Wang, Chi-Yuan Hsiao, Chun-Yi Kuan...
TL;DR为了提供评价语音处理任务通用模型的基准,我们介绍了 Dynamic-SUPERB,该基准通过结合 33 个任务和 22 个数据集,提供了多维度的综合评估平台,并提出了一些建立基准的方法。评估结果表明,虽然这些基准在已知任务上表现得合理,但在未知任务上表现不佳,需要进一步的改进。