Jan, 2024

Endo-4DGS:基于 4D 高斯喷洒的内窥镜单目场景重建中的深度排序提取

TL;DR在机器人辅助微创手术领域,动态场景重建可以显著提高下游任务和改善手术结果。我们提出了一种创新的实时内窥镜动态重建方法 Endo-4DGS,使用了 4D 高斯飞溅和无需地面真实深度数据。该方法通过引入时间组件,借助轻量级 MLP 捕捉时间高斯变形,有效实现了具有可变条件的动态手术场景的重建。我们还整合了 Depth-Anything,从单目视图中生成伪深度图,增强了深度引导重建过程。我们的方法在两个手术数据集上通过验证,证明了实时渲染、高效计算和重建准确性,彰显了 Endo-4DGS 改善手术辅助的巨大潜力。