Sep, 2023

COSE: 图像分类中一种用于显著性的一致性敏感度度量

TL;DR我们提出了一套利用视觉先验来有效评估显著性方法在图像分类任务中性能的度量标准。通过我们的度量标准,我们发现,虽然人们认为显著性方法与架构无关,但大多数方法更能解释基于变形器的模型而不是基于卷积的模型。此外,我们发现 GradCAM 在 COSE 方面优于其他方法,但在细粒度数据集方面存在不足。一致性和敏感性之间的二元性允许从不同的角度分析显著性方法。最终,我们发现平衡这两个度量标准对于显示模型行为是重要的。