GenAD: 生成式端到端自动驾驶
本文介绍了自动驾驶学科中第一个大规模视频预测模型。通过从网络获取大量数据并与多样且高质量的文本描述配对,我们消除了高成本数据收集的限制并增强了模型的泛化能力。该数据集积累了超过 2000 小时的行驶视频,涵盖了全球各地不同的气候条件和交通场景。我们的模型名为 GenAD,并继承了最近潜变扩散模型的优点,利用新颖的时间推理块处理行驶场景中具有挑战性的动态。我们展示了它可以以零 - shot 方式泛化到各种未见过的行驶数据集,超过了一般或专门针对行车的视频预测模型。此外,GenAD 可以适应动作条件化预测模型或运动规划器,具有在实际行驶应用中巨大潜力。
Mar, 2024
提出一种基于深度学习的方法,将预测、决策和规划模块融合起来,以克服自动驾驶系统中基于规则的方法在真实世界应用中的不足,特别是在城市场景中。所提出的 DNN 模型仅经过 10 小时的人工驾驶数据训练,并且支持市场上所有的批量生产 ADAS 功能。在此论文中,展示了该方法在不对车辆的传感器设置和计算平台进行任何修改的情况下,通过部署到集约的测试车辆上,展示了其可行性、可用性和商业潜力。
May, 2024
利用生成神经网络学习合成驾驶行为并使用控制器教练网络来模仿人类学习,通过在 Road Rash 游戏地图上测试模型的学习程度来验证模型的准确性。
Nov, 2016
自动驾驶的最新方法将整个驾驶任务的多个子任务整合成一个单一的流水线,可以通过在不同模块之间传递潜在表示进行端到端的训练。与之前依赖统一网格表示场景置信状态的方法相比,我们提出了专用的表示方法来解耦动态代理和静态场景元素,从而明确补偿相邻时间步之间的自我和对象运动的影响,并在时间上灵活地传播置信状态。此外,动态对象不仅可以关注输入的摄像头图像,还可以通过新颖的动态 - 静态交叉注意力直接从推断的静态场景结构中受益。对具有挑战性的 nuScenes 基准的大量实验证明了我们所提出的双流设计的优势,尤其是用于对场景中高动态代理建模,并凸显了我们方法的改进时间一致性。我们的方法 DualAD 不仅胜过独立训练的单任务网络,还在驾驶的功能链上的所有任务上大幅改进了之前最先进的端到端模型。
Jun, 2024
通过规划导向的主动学习方法,本研究探索了如何在自动驾驶中实现样本和标注的高效利用,实验证明该方法在性能上远超过一般的主动学习方法,并且仅使用了 30% 的 nuScenes 数据就取得了与最先进的端到端自动驾驶方法相媲美的性能,希望本研究能激发未来从数据为中心的角度探索端到端自动驾驶的相关研究。
Mar, 2024
我们提出了 UAD,一种基于视觉的端到端自动驾驶 (E2EAD) 方法,在 nuScenes 中实现了最佳的开环评估性能,同时在 CARLA 中显示出强大的闭环驾驶质量。
Jun, 2024
本文提出了一种基于模块化架构的学车任务分解方法,在障碍感知、目标预测和规划方面均取得了优秀的方法,并在 CARLA 模拟器上实现了最新的优秀结果。
Dec, 2022
智能驾驶系统应能根据当前环境和车辆状况动态制定适当的驾驶策略,确保系统的安全可靠性。本文介绍了一种适用于复杂和各种场景的安全通用端到端自动驾驶系统(SGADS),该系统结合了变分推断与归一化流,使智能车辆能够准确预测未来的驾驶轨迹,并提出了鲁棒安全约束的制定方法。此外,我们将强化学习与示范结合,以增强智能体的搜索过程。实验结果表明,与现有方法相比,我们的 SGADS 能够显著提高安全性能,在复杂城市场景中展现出强大的泛化能力,并提高智能车辆的训练效率。
Jan, 2024
通过大规模驾驶示范学习人类驾驶行为模型,提出基于概率规划的 VADv2 端到端驾驶模型,解决不确定性问题,在 CARLA Town05 基准测试中表现优异,在没有基于规则的封装的情况下稳定运行。
Feb, 2024