Transfusor: 用于可控人类化生成车辆变道轨迹的变压器扩散器
TransFusion 是一种基于扩散的 3D 人体动作预测模型,它能够生成更有可能发生的样本并保持一定程度的多样性,通过使用 Transformer 作为骨干,以及在浅层和深层之间使用长跳连接和离散余弦变换来建模运动序列,改善性能,并与使用额外模块的先前基于扩散的模型相比,我们将所有输入(包括条件)都视为令牌,创造出比现有方法更精简的模型。我们对基准数据集进行了广泛的实验研究,以验证我们的人体动作预测模型的有效性。
Jul, 2023
车辆轨迹预测在推动自动驾驶和高级驾驶辅助系统(ADAS)方面至关重要,本研究介绍了一种专为汽车跟驰轨迹预测设计的交叉注意力变换增强条件扩散模型(Crossfusor),它将详细的车辆间相互作用和跟驰动力学结合到强大的扩散框架中,提高了预测轨迹的准确性和真实性,实验结果证明 Crossfusor 在长期预测方面优于最先进的模型,展示了它增强自动驾驶系统预测能力的潜力。
Jun, 2024
自动驾驶车辆的安全验证方面,合成交通场景的自动创建是关键部分。本文提出了一种新颖的基于扩散的场景生成架构 ——Scenario Diffusion,可实现可控的场景生成。我们结合了潜在扩散、目标检测和轨迹回归,同时生成合成代理人的姿势、方向和轨迹的分布。为了对生成的场景进行额外控制,此分布以描述所需场景的地图和令牌组为条件。我们证明我们的方法具有足够的表达能力,能够建模多样的交通模式,并且适用于不同的地理区域。
Nov, 2023
提出了一种 CTG++ 基于学习的交通流模型,它可以通过语言指令进行指导,从而解决了交通模型控制需要领域专业知识,对实践者使用困难等问题,通过经过广泛的评估,我们展示了该方法在生成实际且符合查询要求的交通仿真方面的有效性。
Jun, 2023
在现代网络物理系统和智能交通系统中,提高道路安全和交通管理已成为一个重要的关注领域。通过引入一种新的基于 transformer 的方法 —VT-Former,并结合 Graph Attentive Tokenization (GAT) 模块,我们提出了一种精确的车辆轨迹预测方法。在三个基准数据集上的研究表明,VT-Former 在车辆轨迹预测方面具有最先进的性能,并且具有普适性和鲁棒性。我们还评估了 VT-Former 在嵌入式板上的效率,并探讨了其作为样本应用的车辆异常检测潜力,展示了其广泛的适用性。
Nov, 2023
该研究介绍了 TransFuser - 一种使用自我注意力机制将图像和雷达的信息进行融合,以提高自动驾驶中辨识物体和行驶路径的性能,实验证明该方法的表现在 CARLA 排行榜上优于以往所有的算法。
May, 2022
本研究介绍了 Video Diffusion Transformer(VDT),它首次在基于扩散的视频生成中提出了 Transformer 的使用,通过模块化的时间和空间注意机制实现了 Transformer 块,并能够通过简单的令牌空间串联实现灵活的条件信息,VDT 的模块化设计促进了一种时空解耦的训练策略,其在视频生成、预测和动力学建模(即基于物理的 QA)任务上,包括自动驾驶,人类行动和基于物理模拟等领域的应用,表现出了出色的性能。
May, 2023