Apr, 2023

UVA: 面向视角合成、姿势渲染、几何和纹理编辑的统一体积化身

PDF
TL;DR本文提出了一种新方法，名为 UVA, 用于人体化身重建；该方法实现了对几何形状和纹理的本地和独立编辑，并保持了对新视角和姿态的生成和渲染能力。
neural radiance fieldvolumetric avatarlocal editingtexturenovel view
发现论文，激发创造
  • ARAH：人体关节 SDF 的可动态渲染

    本文提出了一种方法，将人体模型与可微分渲染相结合，从多视点 RGB 视频中创建可动态的穿着衣服的人形化身，其具有细节化的几何结构，并且能够适应超出分布范围的姿势。

    Oct, 2022

  • 人形化建模的结构局部辐射场

    使用基于神经场景渲染技术的新型表示方法，将结构化本地辐射场锚定到人体模板节点上，将服装变形分解为骨架运动、节点残差翻译和每个辐射场内的动态细节变化，支持各种服装类型的自动构建可动画人形化身，并在新姿势下生成真实的动态细节图像。

    Mar, 2022

  • 神经图像化人头像：适用于人类化身建模的通用辐射场

    本文提出一种基于稀疏多视图图像的神经图像化头像生成方法，利用了近年来提出的体视图下的神经反射场（NeRF）模型及图像合成技术，提高了新姿势下头像的变形能力和形体形变下姿势生成的只优。

    Apr, 2023

  • Nuvo: 神经网络 UV 映射用于难处理的 3D 表示

    通过神经场来表示连续的 UV 映射，并优化为仅适用于可见点的有效映射，从而解决了现有 UV 映射算法在不规则几何表示上的问题。该方法可用于表示详细的外观编辑。

    Dec, 2023

  • PVA：像素对齐的容积化身

    本文提出一种利用神经放射场和局部像素对齐特征预测人头部的体积化代理，可以在多身份环境中进行泛化，并且无需明确的 3D 监督。该方法在以光度渲染损失为基础的端到端训练中表现出更好的质量，并且能够生成真实的面部表情。

    Jan, 2021

  • UV 高斯函数：人类角色建模的网格变形和高斯纹理的联合学习

    通过联合学习网格畸变和二维 UV 空间高斯纹理，我们提出了 UV 高斯模型，用于重建逼真的可行驶人体化身，并通过独立的网格网络来优化姿势相关的几何畸变，从而指导高斯渲染并显著提高渲染质量。

    Mar, 2024

  • 用于实时渲染可编辑自由视角下的人体表现的 UV 体素

    该研究提出了一种名为 UV Volumes 的新方法，利用 2D 的神经纹理堆栈来分离高频（即非平滑）人类外貌和 3D 体积，并用较小和更浅的神经网络在三维中获得密度和纹理坐标，从而实时渲染可编辑的自由视角视频，可以用于 VR / AR 应用，并且具有重新贴图等有趣应用。

    Mar, 2022

  • VeRi3D：基于顶点的辐射场生成模型用于 3D 可控人体图像合成

    提出了 VeRi3D，一种基于顶点的生成型人体辐射场，通过使用 SMPL 的参数人体模板来实现顶点参数化，从而解决了学习人体生成模型的泛化能力和可控性问题，能够自由地控制相机姿态、人体姿态、形状，以及进行部分级别的编辑，实现了生成逼真的人体图像。

    Sep, 2023

  • 基于神经网络点的体积化头像：表面引导神经点用于高效和逼真的体积化头像

    提出一种将神经点表示和神经体渲染结合的方法，使用高分辨率 UV 位移贴图约束神经点来实现更准确的表情控制，通过使用 GEP 射线采样策略和轻量级辐射解码过程，提高了渲染和训练效率。在 Multiface 数据集上通过实验验证了该方法的有效性。

    Jul, 2023

  • 从纹理空间中为 NeRFs 进行动画：一种基于姿态的人类表演渲染框架

    基于 NeRF 的人体表演姿态依赖渲染的新方法，通过将辐射场围绕 SMPL 人体模型进行扭曲，实现了新的表面对齐表示，可以通过骨骼关节参数和视点来实现动画化，并通过引入新的重新映射过程来实现高质量渲染。

    Nov, 2023