U3DS$^3$: 无监督的三维语义场景分割
本文提出了一个名为 PointDC 的新型分割框架,通过两个阶段的处理(CMD 和 SVC),实现在不使用任何形式的注释的情况下的点云全自动无监督语义分割。该框架在 ScanNet-v2 和 S3DIS 两种数据集上均优于以往的无监督学习方法,分割性能显著提高。
Apr, 2023
提出了一种由 2D 开放词汇的分割模型辅助的新型三维无监督框架(UOV),通过学习未标注数据的点云表征,采用了两个阶段:首先,创新地结合了 2D 开放词汇模型的高质量文本和图像特征,提出了三模态对比预训练(TMP);其次,利用点云和图像之间的空间映射生成伪标签,实现异态知识蒸馏。并引入了近似平面交互(AFI)来解决对齐噪声和标签混淆问题。在多个相关数据集上进行了大量实验证明了 UOV 的优越性,在 nuScenes 的无需标注的点云分割任务上,实现了创纪录的 47.73% 的 mIoU,超过了之前最好模型 10.70% 的 mIoU。同时,在 nuScenes 和 SemanticKITTI 上使用 1% 的数据进行微调,取得了显著的 51.75% 和 48.14% 的 mIoU,超过了所有之前的预训练模型。
May, 2024
针对 3D 点云的分割问题,我们提出了一种新的点云分割框架,该框架能有效地优化整个场景的像素级特征,几何结构和全局上下文先验。实验结果表明,该方法优于现有的一些最先进的方法,并探讨了在三维重建场景中合成相机姿态以获得更高的性能。
Aug, 2019
本文介绍了一个丰富注释的 3D 点云数据集,以及用于分层分割任务的有效学习框架。提出了一种基于多任务学习和分层集成的两阶段方法,包括一种考虑不同层次之间一致性的度量。实验结果表明了所提出方法的优越性和分层注释的潜在优势。
Aug, 2020
本文提出了一种叫做 GrowSP 的无监督 3D 语义分割方法,其关键在于通过逐渐增长的超点来发现 3D 语义元素,并将其分组成语义元素进行最终的语义分割。我们在多个数据集上对我们的方法进行了广泛评估,证明了其在无监督基线系统中具有优异性能,并接近于经典的全监督 PointNet。
May, 2023
本文提出了一种基于 2D-CNN 和多模态网络架构的点云语义分割方法,将点云数据投影到 2D 平面,避免了 3D-CNN 方法中立方体体素化降低空间分辨率和增加内存消耗的限制,并在 Semantic3D 数据集上达到了相对增益 7.9%的最新最佳结果。
May, 2017
本文提出了一种端到端可训练的多视角聚合模型,利用 3D 点的视角优势,从任意位置拍摄的图像中合并特征,将标准 2D 和 3D 网络相结合,不需要着色、上网格或真实深度图,我们在 S3DIS 和 KITTI-360 数据集上取得了新的最佳效果。
Apr, 2022
本研究介绍了 SEGCloud,一种利用三线性插值和完全连接条件随机场等方式得到端到端三维点级分割的框架,可实现对室内和室外三维数据集进行准确的场景标注。
Oct, 2017
本研究钻研的半监督三维物体检测问题,在考虑到在杂乱的三维室内场景中进行标注所需要的成本极高的情况下,我们采用了自学习的强健和原则性框架,提供了第一种半监督三维检测算法,该算法单阶段运作并允许稠密的训练信号,解决了多阶段流水线以及离散化 quantization 误差等问题。
Apr, 2023
本论文提出了一种弱监督点云分割方法,可以在训练阶段仅标记极少量点,通过学习梯度近似和利用额外的空间和颜色平滑约束来实现,性能接近或甚至优于全监督的方法,具有很高的实用性。
Apr, 2020