利用深度卷积神经网络提取中层特征,从高分辨率人脸数据库中拟合特征的凸组合,从而生成 photorealistic texture map,以实现从低分辨率输入图像中合成高逼真度的 3D 人脸渲染模型,并进行了广泛的验证。
Dec, 2016
我们提出了一个学习全身神经头像的系统,该系统采用中间路径,同时估计模型表面的显式二维纹理映射,并通过卷积网络将身体特征点的配置与相机相对应,直接映射为图像中单个像素的 2D 纹理坐标。我们展示了这样的系统能够学习生成逼真的渲染,并通过与使用直接图像到图像翻译的系统相比较的值得推崇的泛化性能来展示,保持显式纹理表示对于系统的改善有所帮助。
May, 2019
本论文提出了一种基于网格表面的谱卷积模型,该模型能够更好地捕捉面部的非线性变形和表情,使用少量数据训练即能有效地重建三维面部模型。
Jul, 2018
本文提出了一种基于混合形状几何、动态纹理和神经渲染的照片级头部模型的文本 / 语音驱动动画的新方法,该动画方法基于有条件的 CNN 将文本或语音转换为一系列动画参数。
Jun, 2023
该研究提出了 VariTex 方法,利用神经人脸纹理学习了变分潜在特征空间,使得其能够控制面部外部区域,并以此实现对外貌、头部姿态和面部表情的精细控制,从而能够合成具有几何一致性的人脸图片。
Apr, 2021
本论文中提出了一种名为 AF-VAE 的方法,通过引入新的加性高斯混合假设和无监督聚类机制,实现了对高分辨率人脸图像的任意操作,并通过人类参与度量和最新的 IS/FID 测试表明了该方法在人脸操作任务中的卓越性能。
Aug, 2019
论文提出了一种名为 NeuFace 的新型 3D 面部渲染模型,可以通过神经渲染技术学习准确和具有物理意义的底层 3D 表示。
Mar, 2023
提出一种将神经点表示和神经体渲染结合的方法,使用高分辨率 UV 位移贴图约束神经点来实现更准确的表情控制,通过使用 GEP 射线采样策略和轻量级辐射解码过程,提高了渲染和训练效率。在 Multiface 数据集上通过实验验证了该方法的有效性。
Jul, 2023
使用动态神经辐射场模型重新构建并生成能够通过单目输入数据学习的场景表示,结合场景表示网络和低维可变形模型进行虚拟场景生成。
Dec, 2020
我们提出了神经头像,该方法能够显式建模动画人物头像的表面几何形状和外观,是虚拟现实和其他电影或游戏应用中数字人物的一种有效表示方法,它能够从单目 RGB 人像视频中学习,能够精确地外推到未知姿态和观察角度,并产生自然的表情和清晰的纹理细节。
Dec, 2021