Spectral MVIR: 3D 形状和光谱反射联合重建
本文介绍了一种名为极化多视角反渲染的三维重建方法,该方法通过利用输入的多视颜色极化图像所提取的几何、光度和极化线索,可有效地优化光度反演,并充分考虑备选的方位角度信息来估计每个表面顶点的法向量,从而实现了对物体精细的三维重建。
Jul, 2020
从自然二维图像中恢复现实世界物体的形状和外观是一个长期存在且具有挑战性的逆渲染问题。本文介绍了一种新颖的混合可微渲染方法,能够从传统手持相机捕捉的多视图图像中高效重构场景的三维几何和反射率。我们的方法采用分析与合成的方法,分为两个阶段。在初始化阶段,我们使用传统的 SfM(结构光型三维重建)和 MVS(多视角立体匹配)方法来大致重建与实际场景相匹配的虚拟场景。然后,在优化阶段,我们采用混合方法来优化几何和反射率,其中几何首先使用近似可微渲染方法进行优化,然后再使用基于物理的可微渲染方法优化反射率。我们的混合方法将近似方法的效率与基于物理的方法的高质量结果结合起来。对合成和真实数据进行的大量实验证明,我们的方法在更高效的同时能够产生与最先进方法相似或更高质量的重建结果。
Aug, 2023
本文介绍了一种新型的投影仪 - 相机系统,可实现对物体的密集三维建模和光谱反射性质的低成本获取,该系统利用标准 RGB 相机和现成投影仪进行光照和结构估计,通过多视点结构光和 SfM 技术完成构建,并通过多光谱成像估计每个 3D 点的光谱反射,实验证明该系统可用于获得设备简单而精度高的三维模型和全光谱反射性质。
Aug, 2019
本文介绍了一种适用于透视相机和附近点光源的多视图光度立体技术 (MVPS) 来捕捉 3D 形状和空间变化的反射,并在实验中展示了应用该算法重建形状和捕捉反射的准确性。
Jan, 2020
本研究提出了一种基于多视角立体网络、光谱反射率、深度学习的方法,旨在从六幅图像中重建物体的高质量几何结构和空间变化的 BRDF,通过最小化光度误差优化多视角反射率网络的潜在空间,成功地实现了从稀疏数据中重建出高质量的物体,进而渲染出真实的图像。
Mar, 2020
本文提出了一种新方法,通过使用点光源的移动手持捕捉系统,联合恢复无法被固定采集设备捕获的超物体尺度的三维场景的相机姿势,对象几何和空间变化双向反射分布函数,并引入分布式优化算法进行重构
Jun, 2023
介绍了一种用于集成多视角反射和法线映射的通用范例。它使用像素级联合参数化反射和法线,将它们视为在模拟的不同光照下渲染的辐射矢量。该方法在神经体渲染的基于 3D 重建中,实现了反射和法线映射的无缝集成,同时保留单一的优化目标,从而优于最先进的 MVPS 方法,特别是在高曲率或低可见性区域的详细 3D 重建方面。
Dec, 2023
提出了一种使用多视角图像将场景分解为几何形状、SVBRDF 和三维空间变化的灯光的场景级反渲染框架,该框架通过扩展 OpenRooms 数据集和设计有效的流程来处理多视角图像并分割灯光实现了比基于单视图的方法更好的性能,并可在任意 3D 位置进行逼真的物体插入。
Mar, 2023
通过利用内在分解指导、瞬态 - 单模先验指导和视图增强来解决光照不一致、几何不对齐和视图稀疏等问题,我们提出了一种新的 3D 重构框架,该框架能够将多视图图像生成与神经网络基于体积有符号距离函数的单一图像到 3D 对象重建相结合。在各种数据集上评估我们的方法,并在定量和定性评估中展示了其卓越性能,从而在 3D 物体重建方面取得了显著的进展。与最新的最先进方法 Syncdreamer 相比,我们将 Chamfer 距离误差降低了约 36%,将 PSNR 提高了约 30%。
Jan, 2024
本研究提出了一种基于神经反演渲染的多视角光度立体(MVPS)方法,能够同时估算几何形状、材料和光源,并且在人工渲染、再照明和材质编辑方面具有较高的精度。
Jul, 2022