自动驾驶中的感知与预测的隐性空间流场
提出了 Occupancy Flow Fields,这是一种新的用于自动驾驶的运动预测表示方法。该方法使用深度学习架构生成 Occupancy Flow Fields,并引入了一个新的流跟踪损失来建立占用和流动预测之间的一致性,其可在占用预测、运动估计和代理重构等三个指标上证明其有效性。新方法成功地缓解了现有的两种常用运动预测表示方法轨迹集和占用格之间的局限性。此外,该文章提出了一个新问题,即如何预测具有推测性的代理并在大规模自动驾驶数据集和公共 INTERACTION 数据集上展示了优于现有技术的结果。
Mar, 2022
我们提出了一种使用自监督从 LiDAR 数据学习连续的 4D(时空)占据场的无监督世界模型,该模型可以轻松有效地迁移到下游任务,并在点云预测和 BEV 语义占据预测方面取得了最先进的性能,特别是在标注数据稀缺时。此外,在与先前的时空几何占据预测的最新技术进行比较时,我们的 4D 世界模型对于与自动驾驶相关的类别的对象的召回率要高得多。
Jun, 2024
本文提出了一种新的占据流场预测算法,该算法将图像编码器和向量编码器的特征进行融合以生成更准确的占据和流量预测,该算法在 Waymo Open Dataset Occupancy and Flow Prediction Challenge 中排名第三,在遮挡情况下具有最佳的占据和流量预测表现。
Aug, 2022
本文提出了一种利用贝叶斯滤波技术的环境表示和深度卷积神经网络作为长期预测器相结合的方法,针对复杂的市区情景进行预测,通过像素平衡处理以及自动生成标签等方法实现了无监督学习用于多种道路用户的长期预测。
May, 2017
我们提出了一种时空预测网络管道,它可以从环境和语义标签中获取过去的信息来生成未来的占用预测,并将其应用于复杂的 nuScenes 数据集中,相较于当前 SOTA,我们的方法可以预测长达 3 秒的占用情况,并不需要 HD-Maps 和明确模拟动态物体。
May, 2022
自动驾驶领域的一项新兴感知任务是基于视觉的 3D 占用状态预测,该论文对其背景、挑战、研究进展和未来展望进行了综述,并提供了与该主题相关的论文、数据集和代码的收集。
May, 2024
通过利用 2D 标签,我们提出了一种基于神经辐射场(NeRF)的新方法来估计体素占据,结合时间渲染和占据流,进一步推进了体素占据预测,并且在该领域中取得了最先进的性能。
Feb, 2024
自动驾驶汽车通过统一的、可解释的、高效的自主性框架,在关键因素(如碰撞避免、舒适性和进展)方面评估候选路径,从而实现了优于高保真闭环模拟中最先进水平的高速公路驾驶质量。
Apr, 2024
本文提出了一种新颖的多模态分层 transformer 网络,通过融合被向量化的(流动代理)和视觉场景(流场、地图和占用)模式,以及交通代理之间的社会交互和占用和流之间的关系,来共同预测场景的流和占用,证明了该方法在 Waymo 开放运动数据集上的有效性。
Jul, 2022
通过引入一种名为 OFMPNet 的深度编码器 - 解码器模型,利用占据图和场景的运动流来预测环境中所有动态对象的未来行为,并提出了一种新颖的时间加权运动流损失,进一步降低终点误差。该方法在 Waymo Occupancy and Flow Prediction 基准测试中取得了最先进的结果,Flow-Grounded Occupancy 的软 IoU 为 52.1%,AUC 为 76.75%。
Apr, 2024