利用自监督实例对比学习进行雷达物体检测
自主车辆的感知问题中,使用雷达来感知的能力使其引起了研究人员的兴趣,然而,由于昂贵和难以标注大规模雷达数据,训练雷达模型一直存在困难。为了解决这个瓶颈问题,我们提出了一种自我监督学习框架,利用大量无标签的雷达数据来预训练仅用于自动驾驶感知任务的雷达嵌入。该方法结合了雷达对雷达和雷达对视觉的对比损失,从配对的无标签雷达热图和相应的相机图像中学习出一种通用表示。在下游目标检测任务中应用时,我们证明了该自我监督框架能够提高现有监督基线方法的 mAP 准确度 5.8%。
Dec, 2023
我们提出了一种通过无监督 / 自监督学习训练单阶段目标检测器的创新方法,该方法有潜力彻底改变标注过程,大大减少人工标注所需的时间和成本,并为之前难以实现的研究机会铺平了道路。与现有的主要针对分类任务的无监督学习方法不同,我们的方法承担了目标检测的独特挑战,开创了 intra-image 对比学习与 inter-image 对应的概念,能够获取目标检测所需的重要位置信息。该方法熟练地学习和表示这些位置信息,并生成信息丰富的热图。我们的结果展示了 89.2% 的卓越准确率,在计算机视觉领域的无监督目标检测领域突破性地提高了 15 倍,相比随机初始化。
Feb, 2024
研究了无人驾驶系统中多模态 BEV 感知的统一预训练框架,引入了 CALICO 框架,应用反差目标在 LiDAR 和相机骨干网络上实现教师模型的对比蒸馏,成功提高了 3D 目标检测和 BEV 地图分割等任务的表现。
Jun, 2023
该论文提出一种基于鸟瞰视角融合学习的无锚定框物体检测系统,融合雷达和光学雷达的特征来估计可能的目标,并采用新颖交互式变形模块来进一步提高性能。在最近发布的牛津雷达机器人车数据集上进行测试,该系统在 0.8 IoU 下的性能显着优于最佳现有技术方法,可在清晰和雾天下分别提高 14.4%和 20.5%的平均精度。
Nov, 2022
本文提出了一种基于深度学习算法的雷达目标检测方法,该方法可直接对原始雷达张量数据进行处理,在鸟瞰图空间中为检测到的目标放置概率定向边界框。借助新建的多模态数据集,仅使用原始雷达数据作为输入,发展了一种车辆检测管道,并取得了 77.28% AP(相对 3D 外接框交并比为 0.3)的最佳性能,实现了对传统角落式汽车雷达中原始雷达数据的目标检测。
Apr, 2020
本文介绍了一种新的使用深度学习技术处理雷达数据的方法,该方法利用雷达校准数据进行训练,引入了新的雷达数据增强技术,通过在雷达 4D 检测任务上的实验验证,表现更优秀的性能,极大地减少了对昂贵的雷达校准工艺的需求,从而实现快速准确的示踪和分类检测。
Jun, 2019
引入对比检测算法的自监督目标,通过在图像增强中识别物体水平特征提取富有学习信息的信号,实现高效的自监督预训练,拥有多种下游任务的领先转移精度。在 ImageNet 预训练模型表现与大型自监督系统 SEER 相当的同时,需要少至 10 倍的预训练数据量,最终该目标还能轻松应对更复杂的图像。
Mar, 2021
本文研究了利用汽车雷达传感器进行自动驾驶中的目标识别问题,在考虑到雷达传感器在所有天气条件下的高成本效益和鲁棒性的基础上,探索利用自我中心鸟瞰雷达图像帧的时间信息进行雷达目标识别。通过提出一个时空关系层,显式地对随后雷达图像内的物体之间的关系进行建模,展示了在目标检测和多目标跟踪方面,与几种基线方法相比,我们方法的优越性。
Apr, 2022
用反映关键性的自监督学习方法 CLLD 增强车道检测模型对导致车道低可见度的真实环境条件的抵御能力,并在光照阻碍等可见度受损的条件下优于最先进的对比学习方法,尤其在阴影等情况下表现出色。
Aug, 2023
提出了一种名为 ProposalContrast 的无监督点云预训练框架,该框架通过对比区域建议来学习强大的 3D 表示,从而更好地适应 3D 检测属性。
Jul, 2022