data-free learning | BriefGPT

关键词data-free learning

搜索结果 - 5

合成与真实之间的鸿沟：利用迁移学习探索稳定扩散生成数据边界
通过对于学生模型的不同层进行实验研究，本文发现学生模型的精度下降主要源于模型的最后几层，进而调查了其他因素的影响，同时结合研究成果提出了通过在最后几层上使用真实数据对合成训练的模型进行微调来改善训练数据使用效率和模型准确度之间的权衡问题。
PDF2 months ago
CVPR无数据草图图像检索
该论文提出了一种基于数据自由方法进行绘画图像检索的新模型，通过利用预先训练的分类模型来描述模态之间的关系而不需要任何训练数据，实现了深度学习模型的隐私保护和匿名性，该方法在多个基准测试集上的效果显著优于先前最先进的方法。
PDFa year ago
QEKD: 基于黑盒模型的无数据查询知识蒸馏
提出了一种新的查询高效知识蒸馏方法（QEKD），可以从黑盒模型 API 中进行查询有效学习，不需要实际数据，并在不同实际数据集上展现出良好性能。
PDF2 years ago
ICLR生成对抗模拟器
在强化学习中，我们提出了一种无模拟器知识蒸馏的方法，通过重新初始化数据生成器，利用对抗损失来显式地处理每个输出类的多个观察值，以找到尽可能多的实例，从而改进了现有技术在 MNIST、Fashion-MNIST、CIFAR-10 等基准数据集
PDF4 years ago
无数据学习的学生网络
提出基于生成对抗网络（GANs）的深度神经网络的无数据训练方法，将预训练的教师网络视为固定的鉴别器，利用生成器派生的训练样本和教师网络一起训练出模型较小和复杂度较低的有效网络。通过 Data-Free Learning（DAFL）方法学习，
PDF5 years ago