Mar, 2024

SemGauss-SLAM:密集语义高斯分层 SLAM

TL;DR提出 SemGauss-SLAM,第一个利用 3D 高斯表示的语义 SLAM 系统,实现实时精确的 3D 语义地图构建、鲁棒的相机跟踪和高质量渲染。该系统将语义特征嵌入 3D 高斯表示,有效地在环境的空间布局中编码语义信息以获得精确的语义场景表示;同时,提出特征级损失来更新 3D 高斯表示,为 3D 高斯优化提供更高层次的指导;此外,通过引入语义感知束调整,利用语义关联进行 3D 高斯表示和相机位姿的联合优化,从而减小累积漂移并提高重建精度。在 Replica 和 ScanNet 数据集上,与现有的密集语义 SLAM 方法相比,我们的 SemGauss-SLAM 方法在地图构建和相机跟踪的准确性方面表现出更好的性能,并展示出新视角语义合成和 3D 语义映射的优秀能力。