通过查询引导增强提升少样本 3D 点云分割
该研究论文通过引入标准化的少样本点云语义分割设置和基于相关性优化的新模型 (COSeg),解决了目前该领域面临的前景泄漏、稀疏点分布等问题,在流行数据集上的实验证明了 COSeg 相对于现有方法的优越性。
Mar, 2024
本文提出了 Query-Guided Prototype Adaption (QGPA) 模块并通过引入 Self-Reconstruction (SR)来增强原型的表示以适应点云的大内部类特征差异和极少量数据,最终在 S3DIS 和 ScanNet 基准测试中超越最先进的算法,其中还考虑到零样本的情况
May, 2023
基于适配器机制提出了一种新的 Few-Shot Segmentation (FSS) 框架,设计了 Prototype Adaptive Module (PAM) 来提高 FSS 模型的性能和实现新的最先进结果。
Dec, 2023
为了解决 3D 点云语义分割中数据有限和模型泛化性能差的问题,本文提出了一种基于注意力机制多突出物体的跨导语义分割方法,并在各种 Few-shot 点云语义分割场景下取得了显著的效果提升。
Jun, 2020
针对 few-shot 语义分割的挑战,该论文提出了一种基于动态原型卷积网络 (DPCN) 的解决方案,其中动态卷积模块 (DCM) 从支持前景生成动态内核,而支持激活模块 (SAM) 和特征过滤模块 (FFM) 则一起为查询图像提供丰富的背景信息,实现了更准确的 few-shot 语义分割。DPCN 在 1-shot 和 5-shot 设置下均表现出优越性能。
Apr, 2022
在动态测试环境中,现有的全监督点云分割方法无法应对新出现的类别。为解决这一问题,少样本点云分割算法通过学习适应新类别,但会牺牲对基类别的分割准确性,从而严重影响其实用性。因此,我们首次尝试了更实用的广义少样本点云分割范式,要求模型能够同时推广到用仅有少量支持点云表示的新类别,并保持对基类别的分割能力。我们提出了几何单词来表示基类别和新类别之间共享的几何组件,并将其融入新型几何感知语义表示中,以更好地推广到新类别而不会遗忘旧类别。此外,我们引入几何原型来利用几何先验知识来引导分割。在 S3DIS 和 ScanNet 上进行的大量实验证明了我们方法在基准方法上的卓越性能。
Sep, 2023
跨领域少样本分割 (CD-FSS) 需要仅使用有限样本从不同领域中对新颖类别进行分割,论文发现通过 fine-tuning 阶段有效地在领域之间转移学习得到的元知识的必要性以及由于新颖类别样本稀缺导致朴素的 fine-tuning 存在过拟合风险,并提出了一种解决这一挑战的新型跨领域 fine-tuning 策略,通过设计双向少样本预测 (BFP) 和迭代少样本适配器 (IFA) 来降低过拟合风险并最大化利用稀疏的新颖类别样本的监督信号,实验证明该方法显著优于当前技术水平 (+7.8%),验证了 IFA 能同时应对跨领域挑战和减轻过拟合问题。代码将提供。
Jan, 2024
利用自支持匹配策略提高 few-shot 语义分割精度,通过适应性自支持背景原型生成模块和自支持损失进一步促进自支持匹配过程,该策略有效地捕获查询对象的一致潜在特征,从而更适当地匹配查询特征,其实现了多个数据集上的 SOTA,源码可在 https://github.com/fanq15/SSP 找到。
Jul, 2022
通过在训练过程中学习用于将目标类的干净样本与噪声样本分离的判别性特征表示的组件级清理噪声分离(CCNS)表示学习,以及借助 CCNS 中清晰而分离的干净和噪声支持样本,提出了一种多尺度基于度数的噪声抑制(MDNS)方案,用于从支持集中去除噪声,从而显著提高了少样本点云语义分割的鲁棒性。
Sep, 2023
本研究提出一种新的联合训练框架来缓解现有方法在处理潜在新类别时出现的特征削弱问题,并使用可转移子簇来增强特征嵌入,实验结果表明,该方法在 PASCAL-5i 和 COCO-20i 数据集上超过之前的最先进方法,并具有更少的参数和更快的推理速度。
Mar, 2021