BriefGPT.xyz
大模型
Ask
alpha
关键词
auxiliary classifiers
搜索结果 - 4
轻量级自我知识蒸馏与多源信息融合
提出了一种利用多源信息进行自知识蒸馏的轻量级框架,其中包括反向引导方法和形状正则化方法,其在各种数据集和模型上的综合实验中表现优于基线和最先进的自知识蒸馏方法,同时具有计算效率和鲁棒性。
PDF
a year ago
IJCAI
层次自监督增强知识蒸馏
本文提出了一种自监督增强的任务,通过辅助分类器在分层中间特征图中生成多样化的自监督知识,并执行一对一的转移来全面教授学生网络,从而改善表示能力而不失去正常分类能力。在多个网络对中,本方法都显著超过了之前的最佳结果,平均改进了 2.56%(C
→
PDF
3 years ago
ECCV
基于稠密交叉层互相蒸馏的知识转移
在这篇论文中,我们提出了一种改进的双向知识迁移方法 Dense Cross-layer Mutual-distillation (DCM),它采用了协作训练师生网络的方法,引入了辅助分类器和密集的双向知识蒸馏操作,在各种知识迁移任务中都表现
→
PDF
4 years ago
ICLR
离线动态强化学习:通过领域分类器进行转移训练
我们提出了一种简单、实用和直观的强化学习领域自适应方法,通过修改奖励函数,使用辅助分类器来区分源域和目标域,对源域中不可能出现的状态进行惩罚,适用于连续状态和动作的域,可扩展至高维任务。
PDF
4 years ago
Prev
Next