Mar, 2022

利用梯度匹配和隐式微分来学习生成合成训练数据

TL;DR本文探讨了各种数据蒸馏技术,包括基于生成式教学网络、梯度匹配和隐函数定理的新方法,实验表明这些新方法比以前的方法更具计算效率并提高了在MNIST图像分类问题上训练模型性能。