Oct, 2023

面向广义多阶段聚类:多视角自蒸馏

TL;DR本文提出了一种新型的多阶段深度多视图聚类框架,引入多视图自我蒸馏(DistilMVC)来提取标签分布的暗知识,从而消除过度自信的伪标签的影响,提高模型的泛化能力,并通过对比学习来探索多个视图的常见语义,通过最大化视图之间的互信息来获得伪标签,同时通过教师网络将伪标签蒸馏为暗知识,提升学生网络的预测能力,实验结果表明,与现有方法相比,我们的方法在真实多视图数据集上具有更好的聚类性能。