通过超参数调整改进 ONCE 基准
通过使用与图像相关的 shelf-supervision 模型对配对的 RGB 和 LiDAR 数据进行无监督预训练,我们提出了一种能够生成零样本 3D 边界框的点云表示方法,这种方法在半监督检测中能够显著提高检测准确性,尤其适用于 LiDAR-only 和多模态 (RGB + LiDAR) 检测。我们在 nuScenes 和 WOD 上展示了我们方法的有效性,并在有限数据环境中明显改进了之前的工作。
Jun, 2024
本文介绍了一种半监督点云语义分割方法,使用伪标签指导其损失函数,并提出了一种基于对比损失的方法来增强特征表示和模型的泛化能力。实验证明,该方法在三个数据集上都可以有效地提高预测质量。
Oct, 2021
本文提出的伪标签辅助点云分割方法,可使用非常少的弱标签 (稀疏采样的) 以较低的标注成本获得与全监督方案相同的结果,并且提出了自适应阈值策略来生成基于预测概率的伪标签进行学习。实验证明,本方法在 ISPRS 3D 语义标注基准数据集上取得了 83.7% 的整体准确率和 70.2% 的平均 F1 分数。
May, 2021
该论文提出了两种新型的自监督预训练方法,利用覆盖树对点云进行分层划分,从而避免手动注释点云所导致的困难;并针对少样本学习设置,让学习网络对支持集的点云嵌入进行预训练。实验表明,利用该自监督学习方法预训练的有监督方法显著提高了目前最先进方法的准确性,并且该方法在下游的分类任务中也优于先前的无监督方法。
Sep, 2020
提出了一种自我监督学习方法,利用点云数据来预训练深度神经网络用于对象分类和语义分割,从而在减少监督样本数量方面提高样本效率。该方法不需要特定的网络体系结构,并且在下游的对象分类任务中优于当前无监督学习方法。
Jan, 2019
本文研究在自动驾驶应用中对动态场景中的 3D LiDAR 数据进行语义分割。通过使用 3D LiDAR 数据,构建了一个包括范围图像分割、样本生成、数据关联、跟踪级别注释和半监督学习等方面的语义分割系统,使用半监督学习并结合约束数据和少量标注数据对 CNN 分类器进行训练,设计了一种特殊的损失函数,其中鼓励将约束数据分配到同一语义类别。实验表明,少量标注和大量约束数据的组合显著提高了该方法的有效性和场景适应性,效果比以往的方法提高了 10% 以上。
Sep, 2018
我们研究在自动驾驶场景中从 3D 点云中进行无监督对象检测的问题,提出了一种简单而有效的方法,利用点聚类、时间一致性、CNN 的平移等性质以及自我监督来改进无监督检测算法,通过在非相近区域进行自动标记扩展到远距离,从而实现了零 - shot 方式的对象检测,能够在稀疏、远距离区域进行检测,同时在更多迭代自我训练的过程中不断改进。我们提出了基于碰撞距离的新的规划感知度量来更好地衡量模型在自动驾驶场景中的性能。我们在 PandaSet 和 Argoverse 2 Sensor 数据集上展示了我们的无监督对象检测器显著优于无监督基线的性能,证明了自我监督与对象先验相结合可以实现野外对象发现的潜力。
Nov, 2023
本文提出了一种基于自我监督学习的弱监督方法解决大规模点云语义分割的问题,采用点云着色作为预处理任务,通过生成类原型的方式生成伪标签,并提出了一种稀疏标签传播机制,该方法在室内外不同情景的大规模点云数据集上得到了更好的弱监督结果和与完全监督方法可比的结果。
Dec, 2022
提出了一种由 2D 开放词汇的分割模型辅助的新型三维无监督框架(UOV),通过学习未标注数据的点云表征,采用了两个阶段:首先,创新地结合了 2D 开放词汇模型的高质量文本和图像特征,提出了三模态对比预训练(TMP);其次,利用点云和图像之间的空间映射生成伪标签,实现异态知识蒸馏。并引入了近似平面交互(AFI)来解决对齐噪声和标签混淆问题。在多个相关数据集上进行了大量实验证明了 UOV 的优越性,在 nuScenes 的无需标注的点云分割任务上,实现了创纪录的 47.73% 的 mIoU,超过了之前最好模型 10.70% 的 mIoU。同时,在 nuScenes 和 SemanticKITTI 上使用 1% 的数据进行微调,取得了显著的 51.75% 和 48.14% 的 mIoU,超过了所有之前的预训练模型。
May, 2024
本文提出了一种基于深度学习的弱监督 ALS 点云语义分割框架,在不完整和稀疏标记的未标记数据中利用潜在信息。通过熵正则化、一致性约束和在线软伪标记策略等,显著提高了分类性能,且效率高于当前弱监督方法。ISPRS 3D Labeling Vaihingen 数据集上,该方法只使用 0.1% 的标记,达到了 83.0% 的总体精度和 70.0% 的平均 F1 分数,相较于只使用稀疏标记信息的模型,其提高了 6.9% 和 12.8%。
Oct, 2021