BriefGPT.xyz
Ask
alpha
关键词
deepinversion
搜索结果 - 2
CVPR
DearKD:用于 Vision Transformers 的数据高效早期知识蒸馏
本文提出了一种早期知识蒸馏框架 (DearKD),通过从卷积神经网络的早期中间层中提取归纳偏差然后通过无蒸馏进行训练,以提高变压器所需的数据效率。我们还针对极端的零数据情况提出了一种基于 DeepInversion 的边界保留内部分歧损失,
→
PDF
2 years ago
从梦到精华:通过 DeepInversion 进行零数据知识转移
本文介绍了 DeepInversion 方法用于从神经网络中的图像分布合成图像,使用 Adaptive DeepInversion 提高了生成图像的多样性,并应用于三个数据无关任务中,实现了数据无关的网络剪枝、知识迁移和不断学习。
PDF
5 years ago
Prev
Next