Mar, 2024

高斯喷洒移动:针对自然相机运动的模糊和快门滚动补偿

TL;DR基于高斯子图的高质量场景重建和新视图合成通常需要稳定、高质量的照片,这往往难以通过手持相机捕捉。本文提出了一种适应相机运动、能够利用受运动模糊和滚动快门衍生的手持视频数据实现高质量场景重建的方法。我们的方法基于对物理图像形成过程的详细建模,利用视觉惯性航位推测 (VIO) 所估计的速度。在单张图像帧的曝光时间内考虑相机姿态的非静态性,并在重建过程中进一步优化相机姿态。我们建立了一个可微的渲染流水线,利用屏幕空间近似有效地将滚动快门和运动模糊效应纳入 3DGS 框架。我们通过合成和真实数据的结果表明,在减轻相机运动方面,我们的方法相较于现有方法具有出色的性能,从而推动了 3DGS 在逼真场景中的应用。