TL;DR本研究探讨了从未知的相机的两个视图中进行 3D 体积重建的问题,提出了一种新的方法,即联合推理方法,可以从稀疏视图中恢复合理的场景。
Abstract
This paper studies the problem of 3d volumetric reconstruction from two views
of a scene with an unknown camera. While seemingly easy for humans, this
problem poses many challenges for computers since it requires
该研究论文讨论了通过多个校准相机捕捉的近距离互动中多个个体的姿势重建的挑战性任务,并提出了一种整合了学习为基础的姿势估计组件和相应的训练和推断策略的系统。该系统利用多视图 2D 关键点热图作为输入,使用 3D 条件体积网络重建每个个体的姿势,通过合成大规模的模拟测试场景中真实数据分布的训练数据集,实现了对姿势准确性的显著提升,并且在不同相机配置和人群规模下具有很好的泛化性能。