Sep, 2023
数据循环利用知识蒸馏用于图像超分辨率
Data Upcycling Knowledge Distillation for Image Super-Resolution
Yun Zhang, Wei Li, Simiao Li, Jie Hu, Hanting Chen...
TL;DR通过数据再利用的知识蒸馏技术(DUKD)实现对单幅图像超分辨率的模型压缩,通过引入标签一致性规范化,大幅提升学生模型的泛化性能,相比基线方法在 PSNR 上提升了 0.5dB,并且在参数减少 67% 的 RCAN 模型中保持与 RCAN 教师模型相当的性能。