BriefGPT.xyz
大模型
Ask
alpha
关键词
label revision
搜索结果 - 1
通过标签修订和数据选择改进知识蒸馏
该论文提出了一种解决知识蒸馏中错误监督的问题的方法,即通过标签修正纠正教师模型的错误预测,并引入数据选择技术以减少错误监督的影响,实验证明该方法的有效性,并表明该方法可以与其他蒸馏方法相结合,提高其性能。
PDF
3 months ago
Prev
Next