自适应特征网格的 NICE-SLAM
本文介绍了一个名为 NICE-SLAM 的密集 SLAM 系统,它通过引入分层场景表示来结合多层次的局部信息,并通过预训练的几何先验来优化该表示,从而在大型室内场景中实现了细节重建。与最近的神经隐式 SLAM 系统相比,我们的方法更具可扩展性、高效性和鲁棒性。
Dec, 2021
NEDS-SLAM 是一种基于 3D 高斯表示的显式稠密语义 SLAM 系统,可以实时进行鲁棒的 3D 语义映射、准确的相机跟踪和高质量的渲染。
Mar, 2024
提出了一种利用神经隐式场表示解决室内场景语义 V-SLAM 问题的在线框架,并通过多项实验表明其在测试时间具有精确的跟踪、地图绘制和语义标注能力,能够扩展到 RGB 图像输入,为机器人视觉感知及相关问题提供了可行的解决方案。
Apr, 2023
引入了一种高保真的神经隐式密集视觉同时定位与建图(SLAM)系统,名为 DF-SLAM。我们利用字典因子对场景进行表示,将场景的几何和外观信息编码为基础和系数因子的组合。与直接将场景信息编码为特征的神经隐式 SLAM 方法相比,我们的方法具有更优秀的场景细节重建能力和更高效的内存使用,同时我们的模型大小对场景地图的大小不敏感,使得我们的方法更适用于大规模场景。此外,我们采用特征集成渲染来加速颜色渲染速度并确保颜色渲染质量,进一步增强了我们的神经 SLAM 方法的实时性能。对合成和真实数据集进行的大量实验证明,我们的方法在实时性能、定位精度和场景重建质量方面与现有最先进的神经隐式 SLAM 方法具有竞争力。我们的源代码可以在此 https URL 获取。
Apr, 2024
利用神经多分辨率体素构建的新型稠密同时定位与建图流水线 —NeuV-SLAM,具备超快的收敛速度和增量式扩展能力。通过 RGBD 图像作为输入,构建多分辨率的神经体素来实现快速收敛,同时保持稳健的场景重建和相机跟踪。其中,神经签名距离场(SDF)体素的隐式表示 VDF 是核心,结合了神经 SDF 体素的实现和 SDF 激活策略。该方法通过直接优化体素中的色彩特征和 SDF 值,显著提高了场景收敛速度。为了确保获得清晰的边缘描述,设计了 SDF 激活,即使在体素分辨率受限的情况下,仍能保持出色的场景表示保真度。此外,为了实现快速的增量式扩展和低计算开销,还开发了一种基于哈希的多分辨率体素管理结构 hashMV。该架构与精心设计的体素生成技术和二维场景先验相结合。在 Replica 和 ScanNet 数据集上的实证评估结果验证了 NeuV-SLAM 在收敛速度、跟踪精度、场景重建和渲染质量方面的卓越效能。
Feb, 2024
通过融合 2D 语义先验和多视角几何约束,DNS SLAM 方法提出了一种新型的神经 RGB-D 语义 SLAM 方法,可以在保持稳定相机跟踪的同时,训练类别级别的场景表示,实现颜色、密度和语义类别信息的输出,并在合成数据和实际数据跟踪中取得了最先进的性能,同时在现有硬件上保持了良好的实时跟踪速度,并输出了带有更好的纹理和几何细节的分解重建结果。
Nov, 2023
我们提出了 SLAIM - 同时定位和隐式建图。我们在神经光度场 SLAM(NeRF-SLAM)中提出了一种新颖的粗到细的跟踪模型,以实现最先进的跟踪性能。通过在 NeRF 之上实施高斯金字塔滤波器来解决 NeRF 系统在有限的输入视图情况下收敛到正确几何形状的挑战。我们的方法实现了局部和全局束调整,以产生强大(粗到细)和准确(KL 正则化器)的 SLAM 解决方案。在多个数据集(ScanNet,TUM,Replica)上进行实验证明在跟踪和重建准确性方面达到了最先进的结果。
Apr, 2024
本文介绍了一种名为 GS-SLAM 的算法,它在同时定位与地图构建(SLAM)系统中首次使用了 3D 高斯表示方法,实现了效率和准确性之间的更好平衡。与使用神经隐式表示的最新 SLAM 方法相比,我们的方法采用了实时可微分雀斑光照渲染流水线,大大加速了地图优化和 RGB-D 重渲染。具体而言,我们提出了一种自适应扩张策略,通过添加新的或删除噪音 3D 高斯来有效重构新观测到的场景几何并改善先前观测区域的建图。这种策略对于将 3D 高斯表示扩展到重建整个场景而不是在现有方法中合成静态物体至关重要。此外,在位姿跟踪过程中,设计了一种有效的从粗到细的技术,以选择可靠的 3D 高斯表示来优化相机姿态,从而减少运行时间并实现强健的估计。我们的方法在 Replica 和 TUM-RGBD 数据集上与现有的最新实时方法具有竞争力的性能。源代码将在获批后发布。
Nov, 2023
通过使用神经辐射场 (NeRF) 和密集 RGB-D SLAM 系统,我们提出了 NeSLAM 框架,能够进行准确的深度估计、鲁棒的相机跟踪和逼真的新视图合成,从而解决了由消费级 RGB-D 传感器获取的稀疏且嘈杂的深度图带来的重建和几何场景表达不准确的挑战,并在各种室内数据集上验证了系统在重建、跟踪和新视图合成方面的有效性和准确性。
Mar, 2024
研究了一种使用神经隐函数的 RGB-D SLAM 的新方法,在没有深度输入的情况下,引入了分层特征体积以促进隐式地图译码器来实现地图重建,并通过匹配渲染和输入视频帧解决摄像机运动和神经隐式地图问题,进一步提出了一种光度变形损失以更好地约束摄像机姿态和场景几何。实验结果表明,该方法比以前的方法取得了更好的结果,甚至超过了一些最新的 RGB-D SLAM 方法。
Jan, 2023