CVPRNov, 2021

Task2Sim:针对有效的预训练和从合成数据的转移

TL;DR本研究旨在研究利用基于图形模拟器生成的合成数据进行预训练,并使用 Task2Sim 将下游任务表示映射到最佳模拟参数,以生成最佳合成预训练数据。研究发现优化模拟参数得到的下游性能取决于任务类型,任务自适应的预训练数据比一般预训练方法表现更好,并且在训练数据受限的情况下可行。