MultiNet:面向自动驾驶的多模态多任务学习
通过使用激光雷达传感器数据,我们提出了一种名为 MultiXNet 的自动驾驶汽车感知和预测方法,可处理多种交通行为,包括多模态概率分布和轨迹精细矫正等,结果表明它优于现有的最先进方法。
Jun, 2020
通过研究探索多种神经网络模型在自动驾驶中的应用,本研究提出了三种独特的模型并评估了它们在不同驾驶场景中的重要性和局限性。结果表明集成模型的性能优于单个模型,并强调了利用多个模型实现强大性能的重要性,为未来的自动驾驶研究提供了发展方向。
Dec, 2023
通过使用多模态基础模型,我们提出了一种方法来增强自主驾驶系统的鲁棒性和适应性,实现了开放环境中的端到端多模态自主驾驶,并能从图像和文本的表示中提供驾驶决策。
Oct, 2023
本文提出了一个基于分析易任务知识对困难任务进行指导以增强驾驶模型泛化力和事故解释能力的新型驾驶模型,通过多任务感知相关基础知识和驾驶知识的逐步训练,成功地提高了驾驶模型的平均完成率,使其在未训练的城市和天气中大幅优于当前基准方法。
Sep, 2018
自动驾驶是一项新兴技术,本论文提出了一种基于深度强化学习的参数化决策框架,AUTO,在感知多模态状态特征基础上设计了图形模型来学习多模态语义特征的状态表示,并通过混合奖励函数考虑安全、交通效率、乘客舒适度等因素,以生成最佳行动。通过广泛实验,证明了 AUTO 在宏观和微观效果上领先于现有技术。
Dec, 2023
本文研究自动驾驶汽车预测未来路障轨迹的问题,提出了一种基于动态图注意力网络的方法,针对交通规则、社交互动、多类交通运动等方面的挑战,能够使用单一模型对多模态轨迹进行概率预测,并经过多个数据集的验证,证明该方法具有实际应用潜力且优于现有技术。
Mar, 2021
本研究旨在利用深度学习和多模态传感器融合技术提高端到端自动驾驶的性能和泛化能力,通过同时实现场景理解和车辆控制命令的像素级语义分割来测试该深度学习驱动的自动驾驶模型在高度逼真的仿真城市驾驶条件下的性能和通用能力,结果显示,该模型定位和避障等任务的成功率强于先前的模型,并验证了多模态传感器融合和场景理解子任务的协同作用提高了模型的性能和可行性。
May, 2020
本文提出了一种基于多任务学习和注意力模型的新型自动驾驶条件模仿学习网络,通过解决交通灯反应问题,不仅提高了标准基准测试的成功率,而且具备了响应交通信号的能力。
Apr, 2021
在自动驾驶领域,使用卷积神经网络(CNN)进行端到端的方向控制任务已经取得了成功。但是单一任务学习方向控制并不足以进行车辆控制,因此本文提出了一种多任务学习的框架,通过预测视觉输入和上一时刻的速度反馈来同时预测方向控制和速度控制。通过实验,证明了该模型能够准确地预测方向角和速度值。此外,本文还改进了故障数据合成方法,以解决在真实道路测试中出现的错误积累问题。
Jan, 2018
本文提出并分析了终端到终端驾驶中,结合 RGB 和深度信息数据的多模态方案,以期提高自动驾驶 AI 模型的性能。通过模拟和条件模仿学习,证明了采用早期融合多模态方案,可以超越采用单模态的性能表现。
Jun, 2019