基于显著性引导的自注意力网络用于弱监督和半监督语义分割
文章提出通过统一的多任务学习框架,使用单个网络解决 WSSS 和 SD 任务,该框架由一个分割网络和一个显著性聚合模块组成,在图像级别和类别无关像素级显著性标签下,端到端训练并在 PASCAL VOC 2012 数据集和四个显著性基准数据集上得到了较好的性能表现。
Sep, 2019
提出一种利用多尺度类别感知度量融合的自训练方法,采集不同尺度的注意力图信息并应用去噪和激活策略来增强潜在区域和减少嘈杂区域,最后利用优化后的注意力图重新训练模型,实验证明该方法可以从多尺度图像提取丰富的语义信息,并在 PASCAL VOC 2012 验证集和测试集上实现了 72.4% 的平均交并比得分。
May, 2023
提出 AuxSegNet + 框架,使用正好标定过的图片级别标签,通过关联任务 -- 显著性检测和多标签图像分类以及交叉任务亲和学习机制,改进了弱监督语义分割的性能,并在 PASCAL VOC 和 MS COCO 数据集上取得了新的最先进结果。
Mar, 2024
对比传统的像素级监督语义分割,使用图像级标签的弱监督语义分割(WSSS)面临的挑战是始终专注于最具差异性的区域,导致完全监督条件下的不一致。典型的表现是在目标边界上减少了精度,从而导致 WSSS 的准确性下降。为了缓解这个问题,我们提出了一种自适应将图像内容划分为确定性区域(如自信的前景和背景)和不确定性区域(如目标边界和错误分类类别)进行分别处理的方法。对于不确定性提示,我们采用基于激活的掩膜策略,并试图通过自身提炼的知识来恢复局部信息。我们进一步假设未掩膜的自信区域应具有足够的鲁棒性以保持全局语义。基于此,我们引入了一种互补的自我增强方法,它限制了这些自信区域与具有相同类别标签的增强图片之间的语义一致性。通过在 PASCAL VOC 2012 和 MS COCO 2014 上进行的大量实验证明,我们提出的 WSSS 的单阶段方法不仅明显优于最先进的基准方法,而且在复杂性换精度的多阶段方法之上。可以在此 https URL 找到代码。
Dec, 2023
这篇论文介绍了一种基于图推理的方法来提高弱监督语义分割技术,该方法同时增强了多标签分类和分割网络阶段,并融合了外部知识和图卷积网络来全局推理跨类别依赖关系,以改善生成伪标签的完整性,并应用图推理映射模块加强高级语义的特征表示,动态学习个别样本的语义一致性,取得了在 PASCAL VOC 2012 和 MS-COCO 数据集上的最新性能。
Sep, 2023
该研究提出了一种基于显著性引导的图像分割网络,利用自我注意力显著性方法生成微妙的显著性地图,并通过点种植区域生长方法将地点线索扩展为像素级标签,从而生成具有区分性的对象区域。实验结果表明,该方法有效降低了显著性噪声的影响,提高了弱监督图像分割的准确性。
Oct, 2018
本研究提出一种基于图神经网络的弱监督语义分割方法,将图像表示为图的节点,使用组内注意力机制建立图中的关系,通过迭代信息传递的方式学习更准确、更完整的物体响应,并在多个基准数据集上取得了最先进的性能。
Dec, 2020
基于对显著性图在弱监督语义分割中的作用的新见解和实证发现,该论文提出了对显著性图的新视角,并展示了其在研究方向上的启示。通过全面的实验,发现显著性图的质量是显著性引导的弱监督语义分割中的关键因素;同时指出之前研究中使用的显著性图往往是任意选择的,尽管它们对于弱监督语义分割具有重要影响;此外,注意到之前对于阈值选择的关注较少,但在弱监督语义分割中具有重要性。为了促进显著性引导的弱监督语义分割的更有意义和严密的研究,介绍了 exttt {WSSS-BED},这是一个用于在统一条件下进行研究的标准化框架,提供了七种 WSSS 方法的各种显著性图和激活图,以及来自无监督显著目标检测模型的显著性图。
Apr, 2024
本文提出了一种自监督低秩网络 (SLRNet) 来解决有限注释下的语义分割问题,其使用了交叉视图自监督学习和集体矩阵分解来学习稳健的精确伪标签,实现了统一的单阶段框架以进行各种标签效率语义分割设置。
Mar, 2022
利用弱监督学习和注意力图,我们提出了一种新的建模方法,使得注意力图成为端到端训练的自然组成部分,并通过直接从网络本身探索监督来直接在这些图上提供自我指导,从而成功地解决了以前方法中的缺点,并在语义分割任务上优于现有技术。
Feb, 2018