MMMar, 2020

基于结构化知识迁移的高效众包计数

TL;DR提出一种利用结构化知识传输框架的轻量级学生网络来有效解决高计算量和显存消耗,提升推断效率的方法。通过两个互补的传输模块,学生网络可以从教师网络中获取分层和跨层知识来学习紧凑而有效的特征。实验表明,该方法在减少计算成本的情况下仍能显著提高计算速度和准确性。