神经三维网格渲染器
本文提出了一种基于图卷积神经网络的端到端深度学习架构,从单个彩色图像中生成三角网格的 3D 形状,并采用粗到细的策略、不同级别的网格相关损失来保证生成的几何形状具有良好的视觉效果和物理精度。
Apr, 2018
本文提出了一种使用基于网格的表示来捕捉三维重构任务中的细粒度几何信息的学习框架,它使用自由形变和稀疏线性组合的紧凑网格表示来重建三维物体,相比之前的工作,我们不依赖于轮廓和标记来进行三维重建,并在合成和真实数据集上进行了很有前途的实验结果验证。
Nov, 2017
本文提出了一种基于 contour 的非参数、真正可微分的 soft rasterizer,使得可以从单张图片进行高质量 3D 网格重建的无监督学习成为可能,且相比其他无监督方法表现出了极大的优势。同时,我们还展示了在各种实际情况下,我们的 soft rasterizer 能够获得与最前沿的有监督学习方法可比甚至更好的结果。
Jan, 2019
本文提出了一种新的可微分渲染框架,可以使用可微分函数直接渲染彩色网格,并能够从各种图像表示形式中向网格顶点及其属性反馈高效监督信号,并通过实验,证明提出的渲染器可以在三维无监督单视图重建方面实现显著改善,并能够处理基于图像的形状拟合等具有挑战性的任务。
Apr, 2019
本文提出了一种使用通用的不可微分渲染器训练来自 2D 数据的 3D 生成模型的可扩展方法,该方法引入了一个代理神经渲染器来匹配不可微分渲染器的输出。我们进一步提出鉴别器输出匹配以确保神经渲染器学习适当地平滑栅格化。当用纯 2D 图像进行训练时,我们的模型可以比现有模型更好地学习生成更好的 3D 形状。
Feb, 2020
本研究提出了一种名为 MeshNet 的 Mesh 神经网络,用于从 Mesh 数据中学习 3D 形状表达,并应用于 3D 形状分类和检索任务,并通过与其他方法的比较,证明了该方法的有效性。
Nov, 2018
我们提出了一种新方法,利用网格作为指导机制来编辑神经辐射场,通过可微的多面体网格提取和可微的颜色提取,从显式网格到隐式场实现了梯度反向传播,使用户能够轻松操作神经辐射场的几何和颜色。通过引入基于八叉树的结构来优化用户控制性,实现了对神经隐式场的细粒度编辑,并适应了各种用户修改,包括对象添加、部件删除、特定区域变形以及局部和全局颜色调整。通过各种场景和编辑操作的广泛实验,我们展示了我们方法的能力和有效性。
Dec, 2023
本文提出了一种名为神经体维网格生成器的神经网络模型,可以从随机噪声或参考图像中生成高质量的三维网格结构,并且通过比较实验,证明了这种方法在使用体素作为输入时相对于其他最先进的方法更具有稳健性,并且拥有更好的性能。
Oct, 2022
提出了一种分析合成方法,用于快速多视角不透明物体的三维重建,通过将表面表示为三角形网格并围绕三角形光栅化和神经阴影构建可微分的渲染管道,优化三角形网格和神经着色器来重现多视图图像,并研究了着色器,发现它学习了可解释的外观表示。
Dec, 2022
该研究论文介绍了一种基于 Transformer 的方法来直接建模多边形网格,并通过输入不同的对象类别、体素和图像等信息,生成可用的高质量网格,同时在表面重建指标上表现出很好的性能。
Feb, 2020