May, 2023
FlowCam:通过像素对齐场景流训练通用的无相机位姿 3D 辐射场
FlowCam: Training Generalizable 3D Radiance Fields without Camera Poses via Pixel-Aligned Scene Flow
Cameron Smith, Yilun Du, Ayush Tewari, Vincent Sitzmann
TL;DR提出了一种联合重构相机位姿和三维神经场表示的在线方法,通过可微分渲染将帧间光流提升到三维场流,通过加权最小二乘拟合场流场估计 SE(3) 相机姿态,同时可以通过重新渲染输入视频对相机姿态估计和通用神经场表示进行监督,从而在真实世界视频数据集上进行端对端和完全自我监督的训练。