Mar, 2024

基于监督引导的零样本学习:一种无实际数据曝露的协同范式

TL;DR在这份研究中,我们提出了一种创新的 SG-ZSL 范式,旨在解决数据隐私和模型版权等问题,该范式通过引入教师模型、学生模型和连接两者的生成器来促进高效协作,无需交换模型或敏感数据。在教师模型的指导下,学生模型通过匹配教师模型的性能并探索教师未涵盖的领域来实现训练,通过白盒和黑盒两个不同的安全级别训练协议,实现了隐私与性能之间的平衡,并在 ZSL 和 GZSL 任务中持续取得优越的表现,尤其在白盒协议中。我们在不同设置下进行了全面评估,证明了其在各种情况下的鲁棒性和效率。