利用可微球追踪渲染深度隐式有符号距离函数
提出了使用可微分渲染 3D 形状来进行基于图像的形状优化的 SDFDiff 方法,并将其应用于多视图 3D 重建问题,并采用多分辨率策略获得了稳健的优化算法。同时,还可将其与深度学习模型集成,实现无需 3D 监督学习 3D 对象的学习方法,并在单视图 3D 重建方面取得了最先进的结果。
Dec, 2019
我们提出了一种简单的算法,用于可微性渲染被有符号距离场(SDF)表示的表面,从而使渲染能够容易地融入基于梯度的优化流程中,并通过容忍非零偏差以换取低方差和架构简化的方式来解决与可见性相关的导数问题。我们的方法将边界积分扩展为一个窄带,这在基于 SDF 表示下的表面上采样起来很容易。我们在端到端逆向渲染任务中展示了我们方法的性能和稳健性,并获得与现有工作相竞争或优越的结果。
May, 2024
本文提出了一种新的可微分渲染框架,可以使用可微分函数直接渲染彩色网格,并能够从各种图像表示形式中向网格顶点及其属性反馈高效监督信号,并通过实验,证明提出的渲染器可以在三维无监督单视图重建方面实现显著改善,并能够处理基于图像的形状拟合等具有挑战性的任务。
Apr, 2019
我们展示了如何在可微分渲染的三角网格中高效生成阴影,结合预筛选阴影映射和可微分光栅化得出可微分的可见性信息,在多个反向图形问题中展示了不同 iable Shadow Maps 相较于类似精度的可微分光传递仿真快出数个数量级,同时不带阴影的可微分光栅化常常无法收敛。
Aug, 2023
本文提出一种称为 “Fuzzy Metaballs” 的紧凑且可解释的表示形式的近似可微渲染器,该渲染器主要通过深度图和轮廓渲染形状,相对于网格的可微渲染器,我们的方法具有更高的效率和质量,可用于解决视觉任务,评估中我们发现,我们的方法是唯一可以与传统技术媲美的,适用于姿态估计和轮廓重建。
Jul, 2022
提出一种能够支持显式和隐式表示,可在遮挡边界提供导数的 3D 表面的可微渲染方法,使用非可微光栅化对表面进行采样,然后应用可微的深度感知的点喷洒技术生成最终图像,适用于大型 3D 模型和隐式表面定义提取的等值面的应用。
Aug, 2021
本文提出通过联合训练隐式函数和新的粗球面基础表面重构方法解决多视角三维重建中高频细节重建效率低下的问题,并将其应用到多种隐式表面建模方法的训练过程中,从而获得在合成数据和实际数据集上的统一改进。
Sep, 2022
应用可微分曲面演化的理论框架,通过利用拓扑导数来实现离散拓扑变化,以对图像函数进行变分优化。通过导出拓扑导数与消失孔和相位引入与图像强度变化的关系,我们实现了形状扰动的可微变化方法,如孔或相位起源,从而解决了现有方法的局限性并改进了图像矢量化、基于文本提示的矢量图生成、单图形重建和多视角三维重建等应用。
Aug, 2023
该研究提出一种终端到端的学习逆渲染框架,利用可微分 Monte Carlo 光线追踪结合重要性采样,从单张图像中恢复基础几何、空间变化的光照、真实感材料。通过物理上基于不同 iable 渲染层与荧幕空间光线追踪的引入,创建大规模室内场景数据集,设计一种新颖的场外灯光网络进行评估,呈现出与业界最先进基线方法相比提高了的反向渲染质量,可以实现诸如高度保真的复杂物体插入和材料编辑等各种应用。
Nov, 2022
本篇研究提出了一种基于八叉树的特征体积的神经无人机距离函数模型,实现了高保真的 3D 形状实时渲染,且在多个方面表现出全球领先的复杂形状重建质量与渲染效率。
Jan, 2021