MMMar, 2024

基于查询引导的原型演化网络用于少样本分割

PDF
TL;DR通过将查询特征整合到前景和背景原型的生成过程中，Query-guided Prototype Evolution Network (QPENet) 提供了与特定查询相适应的定制原型，通过一系列的模块和过程实现了 Few-Shot Segmentation 的显著性能增强。
few-shot segmentationquery-guided prototype evolution networksupport featuresforeground and background prototypespascal-5i and coco-20i datasets
发现论文，激发创造
  • 支持 - 查询原型融合网络用于少样本医学图像分割

    近年来，基于卷积神经网络的深度学习在许多应用中取得了显著的成功。然而，它们对大量标注数据的依赖以及对未知类别的有限泛化能力对于医学图像处理任务来说是一个挑战。少样本学习利用少量标注数据进行泛化到未知类别的能力已经成为一个关键性的研究领域，吸引了大量关注。目前，大多数研究采用基于原型的方法，即利用原型网络从支持集构建原型，引导查询集的处理以获得最终结果。虽然这种方法是有效的，但它过于依赖支持集，忽视了查询集，导致模型类别内部存在明显的差异。为了缓解这个缺点，我们提出了一种新的支持 - 查询原型融合网络（SQPFNet）。SQPFNet 首先为支持图像的前景区域生成多个支持原型，从而产生一个粗糙的分割掩模。随后，基于粗糙分割掩模构建查询原型，额外利用查询集中的模式信息。因此，SQPFNet 构建了高质量的支持 - 查询融合原型，通过它对查询图像进行分割以获得最终的细化查询掩模。对两个公共数据集 SABS 和 CMR 的评估结果显示，SQPFNet 实现了最先进的性能。

    May, 2024

  • 先前引导的特征增强网络用于小样本分割

    本篇研究提出了一种名为 PFENet 的模型，包含了训练无关先验蒙版生成方法和特征增强模块，用以解决高级语义信息和空间目标不一致导致的无法泛化的问题。在 PASCAL-5i 和 COCO 测试集上，我们的模型表现优于现有最先进方法，甚至在没有有标记支持样本的情况下也具有较强的泛化性能。

    Aug, 2020

  • 动态原型卷积网络用于小样本语义分割

    针对 few-shot 语义分割的挑战，该论文提出了一种基于动态原型卷积网络 (DPCN) 的解决方案，其中动态卷积模块 (DCM) 从支持前景生成动态内核，而支持激活模块 (SAM) 和特征过滤模块 (FFM) 则一起为查询图像提供丰富的背景信息，实现了更准确的 few-shot 语义分割。DPCN 在 1-shot 和 5-shot 设置下均表现出优越性能。

    Apr, 2022

  • 用于少样本分割的样板细化网络

    本文提出了一种原型精炼网络（PRNet），通过自适应和融合获取新类别的代表性原型，从而增强了低数据量情况下的原型区分度，实现了少样本分割的挑战，实验结果表明该方法显著优于现有方法。

    Feb, 2020

  • 通过查询引导增强提升少样本 3D 点云分割

    通过适应支持原型和查询特征之间的语义差距，我们的方法在点云的少样本分割模型中取得显著改进，并维持高效性能。

    Aug, 2023

  • 利用潜在原型的对比增强学习进行少样本分割

    本文提出了一种利用潜在原型的对比增强方法来提高 few-shot 分割模型性能的方法，通过采样模块生成伪掩模和新的原型，从而提高原型和查询特征之间的相似性信息的利用率，并通过对比增强模块来提高预测性能。实验证明，该方法在 Pascal-5^i 和 COCO-20^i 的 1-shot 和 5-shot 分割任务中的性能明显优于现有方法，尤其在 5-shot 任务中，性能分别比基准提高了 5.9% 和 7.3%。

    Mar, 2022

  • 自支撑少样本语义分割

    利用自支持匹配策略提高 few-shot 语义分割精度，通过适应性自支持背景原型生成模块和自支持损失进一步促进自支持匹配过程，该策略有效地捕获查询对象的一致潜在特征，从而更适当地匹配查询特征，其实现了多个数据集上的 SOTA，源码可在 https://github.com/fanq15/SSP 找到。

    Jul, 2022

  • 自适应 FSS: 一种通过原型增强的新型少样本分割框架

    基于适配器机制提出了一种新的 Few-Shot Segmentation (FSS) 框架，设计了 Prototype Adaptive Module (PAM) 来提高 FSS 模型的性能和实现新的最先进结果。

    Dec, 2023

  • 基于查询的端到端人员搜索

    本文介绍了一种基于查询引导的端到端人物搜索网络，并使用最新的联合检测器和重新识别工作 OIM [37] 进行扩展。实验结果表明，我们的方法在 CUHK-SYSU [37] 和 PRW [46] 数据集上都优于现有的最先进方法。

    May, 2019

  • PANet: 利用原型对齐进行少样本图像语义分割

    本研究提出了一种基于度量学习的原型对齐网络（PANet）来解决仅使用少量样本进行图像分割的问题，它通过学习每个语义类别的原型表示，并通过匹配每个像素到所学习的原型来执行查询图像的分割，最终在 PASCAL-5i 上超越了现有技术达到了 48.1% 和 55.7% 的 mIoU 得分（1-shot 和 5-shot 设置），是一种有效的 few-shot segmentation 方法。

    Aug, 2019