NeuFace: 多视角图像实现真实 3D 神经面部渲染
提出了一种生成框架 FaceLit,可从 2D 图像中学习纯 3D 面部形状和材质,并在各种用户定义的照明和视图条件下呈现,产生具有多视角和照明一致性的逼真人脸图像。
Mar, 2023
利用深度卷积神经网络提取中层特征,从高分辨率人脸数据库中拟合特征的凸组合,从而生成 photorealistic texture map,以实现从低分辨率输入图像中合成高逼真度的 3D 人脸渲染模型,并进行了广泛的验证。
Dec, 2016
提出了一种只需要一张源图像就能重建高保真度的三维面部角色建模方法,通过使用 3D GAN 的生成先验和有效的编码器 - 解码器网络来重建源图像的规范神经体积,同时使用补偿网络来补充面部细节,并引入变形场来对面部表情进行精细控制。与多种先进方法相比,实验结果显示合成效果更加优越。
Jul, 2023
本文是对神经渲染发展趋势和应用的一篇最新综述,该技术结合了计算机图形学和深度生成模型,以生成可控、逼真的输出,包括新视图综合、语义照片操纵、人脸和身体再现、重新照明、自由视角视频以及用于虚拟和增强现实遥感的逼真头像的创建等方面。我们还讨论了这种技术的社会影响和未来研究方向。
Apr, 2020
该研究提出了一种称为 NeRO 的基于神经渲染的方法,用于从采集于未知环境中的多视角图像中,重建反射物体的几何和 BRDF。该方法通过两个步骤解决了在多视角情况下反射物体重建的困难,并成功地重建出了几何和 BRDF。
May, 2023
本文提出了一种名为 NeuralHumanFVV 的实时神经人体表演捕捉和渲染系统,采用分层采样策略以及新颖的神经混合方案,能够在新视角下生成高质量的几何和逼真的贴图结果,实现了高质量的四维重建和逼真的自由视点重建。
Mar, 2021
本文介绍了一种基于多视角捕捉技术,利用深度变分自编码器来学习人脸的几何结构和外观特征联合表示,可实现对大规模、高度复杂的人脸几何结构的完美表现,从而能够适用于实时互动场景,例如虚拟现实 (VR) 应用。
Aug, 2018
本文提出了一个新的框架,用于从野外视频中重建人体和场景,并在单个视频上提供新的人体姿势和视角渲染的方法。通过训练两个 NeRF 模型(human 和 scene),并依赖现有方法估计人体和场景的大致几何形状,可以从观察空间创建到无关姿态的规范空间的偏移场,进而在规范空间中训练人体模型。我们的方法能够从仅 10 秒的视频剪辑中学习特定主题的细节,包括服装褶皱和配件,并提供在新视角和新姿势下人体的高质量渲染和背景。
Mar, 2022
该论文提出一种新的神经重渲染方法,利用单张图像生成一个人体在新的用户定义的姿势和视角下的三维重建,并通过高维度 UV 特征图编码外观,该方法在单张图像重渲染方面比现有方法产生更高质量的成果。
Jan, 2021