利用形状线索进行弱监督语义分割
本文提出了一种基于像素级原型对比度的弱监督语义分割方法,通过两种直观的先验知识,对图像的不同视角和单个视角内进行执行,旨在实施跨视图特征语义一致性规则,并促进特征空间的内部(间)类一致性(离散度),从而提高了两个强基线模型的精度,并在 PASCAL VOC 2012 上实现了新的最先进水平。
Oct, 2021
对比传统的像素级监督语义分割,使用图像级标签的弱监督语义分割(WSSS)面临的挑战是始终专注于最具差异性的区域,导致完全监督条件下的不一致。典型的表现是在目标边界上减少了精度,从而导致 WSSS 的准确性下降。为了缓解这个问题,我们提出了一种自适应将图像内容划分为确定性区域(如自信的前景和背景)和不确定性区域(如目标边界和错误分类类别)进行分别处理的方法。对于不确定性提示,我们采用基于激活的掩膜策略,并试图通过自身提炼的知识来恢复局部信息。我们进一步假设未掩膜的自信区域应具有足够的鲁棒性以保持全局语义。基于此,我们引入了一种互补的自我增强方法,它限制了这些自信区域与具有相同类别标签的增强图片之间的语义一致性。通过在 PASCAL VOC 2012 和 MS COCO 2014 上进行的大量实验证明,我们提出的 WSSS 的单阶段方法不仅明显优于最先进的基准方法,而且在复杂性换精度的多阶段方法之上。可以在此 https URL 找到代码。
Dec, 2023
该论文提出了一种基于图片分类网络和概率解释 CAM 的图像级弱监督语义分割方法来改善先前弱监督下模型的性能,通过提高区域相似性和轮廓质量来增强几乎任何以前的 WSSS 方法,并在 PASCAL VOC 数据集上进行了演示。
Apr, 2023
为了解决弱监督语义分割中伪掩模生成和嘈杂伪掩模监督训练的问题,我们提出了一种新的方法,利用系数变化平滑、比例伪掩模生成、假冒欠拟合和循环伪掩模等技术,取得了 PAS-CAL VOC 2012 和 MS COCO 2014 两个语义分割数据集的最新成果,在性能方面全面超越之前的结果。
Aug, 2021
基于图像级标签的弱监督语义分割是有效的避免昂贵标注的解决方案。本文首先对传统方法进行全面调研,然后研究了在弱监督语义分割中视觉基础模型(如 SAM)的适用性和挑战,为该研究领域的未来发展提供了深入的见解。
Oct, 2023
我们提出了一种名为 “SemPLeS” 的框架,通过学习有效地提示 CLIP 空间,以增强分割区域与目标对象类别之间的语义对齐,从而产生训练分割模型所需的伪掩码。在 PASCAL VOC 和 MS COCO 等标准 WSSS 基准测试中,我们所提出的 SemPLeS 框架实现了最先进的性能,并通过我们学到的提示的语义可视化展示了其解释性,代码将会发布。
Jan, 2024
本文提出了一种因果推断框架,结合结构因果模型和上下文调整方法以纠正语义分割中的误导性上下文因素,使用图像级标签生成更好的像素级伪掩模,并将其用作后续分割模型的更好伪造地面实况。
Sep, 2020
通过使用双增强变换网络和自正则化约束,为弱监督语义分割(WSSS)问题提供一种有效的解决方法,该方法通过将 CNN 和 Transformer 网络相结合进行相互补充学习,并在最终输出上进行增强来改善分割效果。在具有挑战性的 PASCAL VOC 2012 基准测试上进行的大量系统评估结果表明,该方法的有效性优于先前的最先进方法。
Sep, 2023
提出了一种新的方法,Puzzle-CAM,用于在使用图像级监督的情况下,通过最小化从分离补丁和整个图像的特征之间的差异来发现对象中最集成的区域,以激活对象的整体区域。在 PASCAL VOC 2012 测试数据集上,Puzzle-CAM 的表现优于以前的最先进的方法。
Jan, 2021