Jun, 2024

SDNIA-YOLO：极端天气条件下的鲁棒物体检测模型

PDF
TL;DR通过提出的基于神经风格转换的风格化数据驱动的 YOLO 模型（SDNIA-YOLO），本研究改善了模型的鲁棒性，通过自适应地增强图像质量并从神经风格转换合成的图像中学习与极端天气条件相关的有价值信息，在真实世界的极端雾天和低光条件测试集上，相比基线模型，已开发的 SDNIA-YOLOv3 在至少 15% 的 [email protected] 改进方面取得显著的成果。此外，实验还突出了风格化数据在模拟极端天气条件方面的优异潜力。而开发的 SDNIA-YOLO 在很大程度上保持了原生 YOLO 的优秀特性，如端到端一阶段、数据驱动和快速。
发现论文，激发创造
  • 适用于恶劣天气条件中的对象检测的图像自适应 YOLO

    提出了一种新的图片自适应 YOLO (IA-YOLO) 框架，采用可微分的图像处理 (DIP) 模块设计实现，从而提高在逆境气象条件下的对象检测性能，并且在弱监督学习的情况下，联合学习 CNN-PP 和 YOLOv3。实验结果表明，在雾天和低光场景中，IA-YOLO 方法显示出很好的效果。

    Dec, 2021

  • D-YOLO: 逆境天气条件下的稳健物体检测框架

    通过设计双路网络和注意力特征融合模块，并提出一个子网络来为检测网络提供无霾特征，我们的 D-YOLO 通过减小清晰特征提取子网络与检测网络之间的距离来改善检测网络的性能，实验证明 D-YOLO 相比现有方法具有更优异的性能表现，是一个强大的检测框架用于弥合低级去雾和高级检测之间的差距。

    Mar, 2024

  • FogGuard：利用感知损失保护 YOLO 免受雾霾影响

    本文介绍了一种名为 FogGuard 的新型雾天感知目标检测网络，旨在解决雾天气候条件下的挑战。通过在 YOLOv3 基础目标检测算法上引入新的教师 - 学生感知损失，我们的网络在雾天图像中实现了高准确率的目标检测，并通过对 PASCAL VOC 和 RTTS 等常见数据集的广泛评估证明了性能的提升。

    Mar, 2024

  • 极端暴雨中 YOLO 系列目标检测的挑战：基于 CALRA 模拟器的综合评估数据集

    近年来，自动驾驶汽车的研究主要集中在级别 4 和 5，对感知、决策和控制技术的发展产生了越来越大的兴趣。在感知技术方面，使用多种传感器（例如 LiDAR、雷达和相机）进行准确和快速的物体检测是首要任务。然而，这些传感器在恶劣天气条件下（如雨、雪或雾）往往难以持续准确地检测物体。因此，本研究基于实验获取的降水数据，通过 CARLA 模拟器构建了一个新的数据集，能够在各种降水条件下测试不同的网络模型。最终，利用我们的新数据集，使用一阶段检测器 YOLO 系列对不同降水条件下，从正常到极度大雨情况下的物体检测性能进行了定量验证。

    Dec, 2023

  • 雪景清晰检测：一种在恶劣天气条件下的交通信号灯检测鲁棒模型

    通过引入一种新的框架和流程，我们提出了一种改善恶劣天气下目标检测的方法，重点解决了传统方法在交通信号灯检测方面由于恶劣天气所引起的领域转移问题。我们详细分析了现有技术的局限性，我们的流程在雪天、雨天和雾天中显著提高了检测精度。结果显示与简单调整相比，平均 IoU 和 F1 分数提高了 40.8％，在域转移情况下（如在人工雪天训练，在雨天图片测试）性能提高了 22.4％。

    Jun, 2024

  • 极端施工条件下的个人防护装备检测

    通过结合神经风格迁移（NST）和 YOLOv5 技术，开发了一种稳健的检测模型 NST-YOLOv5，用于在极端建筑条件下进行个人防护装备（PPE）检测，并通过模拟灯光不足、强光、沙尘、雾和雨等五种极端条件赋予该模型极佳的鲁棒性。实验结果表明 NST 在合成极端数据方面具有较高潜力，优于其他传统图像处理算法，并帮助 NST-YOLOv5 在合成和真实极端数据上分别提升了 0.141 和 0.083 mAP_(05:95)，为在极端建筑条件下获取更加稳健的检测模型提供了新的可行方式。

    Jul, 2023

  • 强大的 ADAS：增强基于机器学习的先进驾驶辅助系统在恶劣天气下的稳健性

    本文介绍了一种创新方法，即采用去噪深度神经网络作为预处理步骤，将恶劣天气图像转换为晴朗天气图像，从而提高 ML-ADAS 系统的鲁棒性。通过使用基于 UNet 架构训练的 Weather UNet（WUNet）深度神经网络，我们的研究在恶劣天气条件下实现了物体检测性能的显著提升。特别是在极度雾霾的情况下，我们的解决方案将 YOLOv8n 的平均准确率（mAP）从 4% 提高到 70%。

    Jul, 2024

  • DA-RAW：适应真实世界恶劣天气条件下的域自适应目标检测

    通过解决样式差异和天气差异两个方面的问题，本文提出了一种针对目标检测的无监督领域适应框架，能够更有效地适应恶劣天气条件下的真实环境，并在恶劣天气条件下的目标检测方面优于其他方法。

    Sep, 2023

  • 自动驾驶中雾天和雨天强化目标检测的域适应

    这篇论文提出了一个新颖的领域自适应目标检测框架，用于自动驾驶在雾天和雨天。我们的方法利用图像级和目标级自适应来减少图像风格和目标外观的领域差异。此外，为了增强模型在具有挑战性样本下的性能，我们引入了一种新的对抗梯度翻转层，该层在领域自适应同时在困难样本上进行对抗挖掘。此外，我们提出通过数据增强生成辅助领域以强制实施新的领域级度量规则。公开基准测试的实验结果表明，在自动驾驶应用的领域转移场景中使用我们提出的方法显著提高了目标检测性能。

    Jul, 2023

  • 随机化以推广：用于跑道上异物检测的领域随机化

    通过使用合成随机化图像增强的二阶段方法（SRIA），该研究提出了一种改进二维数据集模型泛化能力的新方法，特别是对于低分辨率的实际应用场景下的小物体检测，有效地提高了检测准确性。

    Sep, 2023