ECCVMar, 2022

V2X-ViT: 具有视觉转换器的车辆到一切合作感知

PDF
TL;DR本文研究了车路一体化（V2X）通信在提高自动驾驶车辆感知性能方面的应用，并提出了一种基于 V2X 通信的健壮的协作感知框架，使用一种新颖的视觉 Transformer。使用大规模的 V2X 感知数据集，在海量实验中表明 V2X-ViT 能够在 3D 物体检测中取得 state-of-the-art 的表现，并且即使在恶劣嘈杂的环境下具有稳健的性能。
发现论文，激发创造
  • HM-ViT: 异模态车辆间合作感知的视觉变换器

    该研究提出了一种新型的多智能体异态合作感知框架，名为 HM-ViT，可以在异构传感器模态下协同预测高度动态的自动驾驶交通中的三维物体。实验证明 HM-ViT 相比先前的合作感知方法具有更好的效果。

    Apr, 2023

  • 面向车辆一切自主驾驶：协作感知综述

    车联网自动驾驶开辟了发展新一代智能交通系统的有前途的方向。合作感知作为实现车联网的必要组成部分，能够克服个体感知的固有局限，包括遮挡和远程感知。我们对车联网场景下的合作感知方法进行了全面的综述，为该领域提供了深入的理解和了解。

    Aug, 2023

  • 自动驾驶中的 V2X 合作感知：最新进展与挑战

    自动驾驶中准确的感知是推动该领域发展并解决安全挑战的关键。新兴的基于车联网技术的合作感知被提出作为一种解决方案，以克服当前感知方法在复杂真实交通环境中遇到的困难，并提升驾驶自动化系统的性能。本文通过全面综述合作感知技术的演进，并重点关注与车联网通信技术相关的最新研究，提出了一个当代通用框架来说明基于车联网的合作感知工作流程，分析了当前所解决的关键问题并进行了文献综述，最后探讨了自动驾驶中感知和车联网通信发展所面临的挑战和未来方向。

    Oct, 2023

  • 端到端自动驾驶通过 V2X 合作

    利用 V2X 通信通过合作利用自车和基础设施传感器数据已成为对于先进自主驾驶的一种有希望的方法。本文介绍 UniV2X，一个开创性的合作自主驾驶框架，将所有关键驾驶模块无缝集成到一个统一的网络中，并提出了一种稀疏稠密混合数据传输和融合机制，以有效地实现车辆和基础设施的合作。实验结果表明 UniV2X 在显著提高规划性能和所有中间输出性能方面的有效性。

    Mar, 2024

  • V2VNet: 车辆间通信用于联合感知和预测

    本文旨在探讨利用车辆间通信（V2V）来提高自动驾驶汽车的感知和运动预测性能，通过聚合来自多个附近车辆的信息，我们可以从不同视角观察相同的场景，可以穿透遮挡物并检测长距离的行为者，通过使用压缩的深度特征图激活的方法，达到高精度的目的，同时满足通信带宽要求。

    Aug, 2020

  • V2X-Real：一个大规模的车辆对一切协作感知数据集

    我们提出了一个具有多模态传感数据的数据集，以促进车辆与智能基础设施之间的协作感知发展，并通过合作感知方法的综合多类多智能体评估来支持研究。

    Mar, 2024

  • 面向 V2X 通信的中断感知协作感知技术在自动驾驶中的应用

    本研究提出了一种基于历史信息的 V2X-INCOP 方案，利用通信自适应多尺度时空预测模型来提取多尺度时空特征、捕捉最显著的信息以预测遗漏的信息，同时采用知识蒸馏框架和课程学习策略来稳定模型训练，实验表明该方法能够有效缓解通信中断对合作感知的影响。

    Apr, 2023

  • 从道路到汽车的动态 V2X 自主感知

    车辆到一切 (V2X) 感知是一种创新技术，提高了车辆感知的准确性，从而提升了自动系统的安全性和可靠性。然而，现有的 V2X 感知方法主要集中在基于车辆视觉的静态场景，受传感器能力和通信负载的限制。为了适应动态场景，我们提出了一种从道路到车辆视觉的自适应 V2X 感知方法 (AR2VP)。在 AR2VP 中，我们利用路边单元提供稳定的广域感知能力，并作为通信中心。AR2VP 旨在应对场景内变化和场景间变化的挑战。我们构建了一个动态感知表示模块，高效集成了车辆感知，使车辆能够对场景中更全面的动态因素进行捕捉。此外，我们引入了一个从道路到车辆感知的补偿模块，旨在在场景内变化的情况下保留最大化的路边单元感知信息。对于场景间变化，我们实现了一种利用路边单元的存储能力进行经验回放的机制，以保持模型对场景变化的鲁棒性。我们在 3D 物体检测和分割上进行了感知实验，结果显示 AR2VP 在性能带宽平衡和适应性方面表现出色。

    Oct, 2023

  • V2X-AHD: 基于非对称异质蒸馏网络的车辆与一切协作感知

    通过提出一种多视角车路协同感知系统（V2X-AHD），利用不同的训练数据提高轮廓识别的准确性，并借助多头自注意力（MSA）融合单视角特征，从而有效提高 3D 物体检测的准确性和降低网络参数数量。

    Oct, 2023

  • V2X-Sim：自动驾驶多智能体协作感知数据集和基准

    通过提出 V2X-Sim，一个完整的模拟多智能体感知数据集，本文试图为自动驾驶的协作式感知研究提供一个 benchmark，其中包含了多节点感知、多模态感知以及各种各样的真实解等任务，并为最前沿的协作式感知算法提供一个基准。

    Feb, 2022