从单视角肖像数据集学习全头部三维生成对抗网络

Jul, 2023

从单视角肖像数据集学习全头部三维生成对抗网络

Learning Full-Head 3D GANs from a Single-View Portrait Dataset

Yiqian Wu, Hao Xu, Xiangjun Tang, Hongbo Fu, Xiaogang Jin

TL;DR我们提供了第一个 3D 感知的全头像肖像生成器，它从包含多种摄像参数和身体姿势的高质量单视角真实肖像数据集学习一个规范化的 3D 化身分布，并利用我们的规范化生成器产生符合数据集身体姿态分布的变形结果来生成自各个摄像角度（360°）具有完整 3D 几何的视一致逼真肖像图像。

Abstract

33D-aware face generators are commonly trained on 2D real-life face image datasets. Nevertheless, existing facial recognition methods often struggle to extract face data captured from various camera angles. Furthermore, in-the-wild images with diverse body poses introduce a high-dimens

3d-aware face generators facial recognition methods 3d portraits 360°-portrait-hq dataset 3dportraitgan

发现论文，激发创造

Portrait3D：基于单张野外人像图像的 3D 头部生成

提出了 Portrait3D 框架，通过将肖像图像的身份信息整合到几何初始化、几何塑造和纹理生成阶段中，实现了从单幅肖像图像生成高质量 3D 头像的方法。

Jun, 2024

PanoHead: 360 度几何感知的 3D 全头合成

提出了 PanoHead，这是第一种具有 3D 感知能力的生成模型，可以通过采用野外非结构图像进行训练来生成全头的高质量视角一致的图像，其核心是通过 3D GANs 来提高表示的能力并解决数据对齐差距。该方法可以在任意姿势下呈现准确几何形态和多样外观的高质量 3D 头部。

Mar, 2023

AniPortraitGAN：从 2D 图像集合生成可动态调整的 3D 肖像

基于非结构化的 2D 图像集合，我们提出了一种可调节面部表情、头部姿势和肩膀运动的三维感知生成对抗网络，该网络能够生成多样且高质量的三维头像。

Sep, 2023

PV3D：肖像视频生成的三维生成模型

PV3D 提出了第一种生成性框架，它可以合成多视角一致的肖像视频，通过添加多个运动层构建运动生成器来引入运动动态，并提出了简单而有效的摄像机条件策略，能够支持许多下游应用，如动画静态肖像和视角一致的视频运动编辑。

Dec, 2022

可控肖像图像动画的 3D GAN 反向推导

本文提出了一种基于新开发的三维生成对抗网络（GANs）的画像图像动画的技术，该技术允许对图像主体的姿态进行明确控制，并展示了该方法在图像质量，身份保护和姿态转移等方面胜过先前的方法，同时支持属性修改。

Mar, 2022

Portrait3D: 基于金字塔表示和 GANs 先验的高质量 3D 肖像生成

使用神经渲染基于文本到 3D 肖像生成的新方法，通过集合几何外观先验，实现了对之前的问题 - 几何困境、过度饱和和过度平滑 - 的克服，展示了生成与文本一致的逼真高质量 3D 肖像的新框架 Portrait3D。

Apr, 2024

单张图片生成 3D 面部肖像

本文提供一种基于学习的方法来从单个肖像图像中恢复人头的 3D 几何形状，并且使用参数化 3D 人脸模型来表示头部几何形状以及其他头部区域的深度图，同时使用双目立体匹配方法从具有野外人脸的图像中学习头发和耳朵的几何信息，最后，评估和对比结果表明该方法可以产生高保真的 3D 头部几何形态和头部姿态操作结果。

Apr, 2020

通用单次神经头像模拟

该研究提出了一种通过对单视角幅面图像进行重建和动画化的三维头像，通过三个三角面分别捕捉源图像的粗略三维几何，详细外观以及目标图像的表情实现，再通过超分辨率模块的渲染进行填充并通过单向传递网络的高效性进行动画。实验表明，该方法在重建和动画方面优于当前最先进的基线方法，并且对新的验证数据集有很好的泛化能力。

Jun, 2023

One2Avatar: 少样本用户自适应的生成式隐式头像

使用少量图像创建高质量的个性化头像，通过学习生成模型和 3DMM 锚定的神经辐射场骨干构建先验，实现基于少量输入图像的自动解码，优化 3DMM 拟合和相机校准以改进少样本自适应，开创了创建更高效个性化头像的道路，超越现有最先进的方法。

Feb, 2024

野外条件下的大姿态人脸正向化

本文提出了一种利用深度学习中的 3D 可塑模型进行面部正面化的生成式对抗网络，可以有效提高识别率和处理不同姿势的面部图像。

Apr, 2017