一种穿着衣物的人的生成模型
本研究提出了一种基于轮廓的人体服装建模和纹理预测系统,使用深度生成模型重建穿着服装人体的完整3D模型,其中使用2D轮廓和3D关节来描述人体的形状复杂性和变化,再通过条件生成对抗网络预测背景面纹理,实验证明该模型是一种有效的表示方法。
Dec, 2018
本研究旨在通过限定人体的粗略轮廓并控制特定服装类型实现真实人体图像的完整生成建模。我们提出了一种端到端可训练的生成式对抗网络架构,它提供了细节控制来生成具有高逼真度的图片,同时无需成对的训练数据,不必拟合 3D 姿势到 2D 图像的困难问题。该模型允许对基于目标领域的图像或标记特定的类别样式(例如 T 恤)进行条件生成。我们对该架构和每个独立要素的贡献进行了充分的实验评估,并通过大规模知觉研究表明,我们的方法可以生成逼真的图像,并且如果面部被模糊化,参与者很难识别真实的图片和虚假的图片之间的区别。
Jan, 2019
该论文介绍了一种新型的生成模型SMPLicit,可以联合表示人体姿势、形状和衣物几何形状,并将不同类型的衣物拓扑结构(如无袖上衣、连帽衫和开衫)以一种统一的方式表示,同时控制其他属性如大小或紧身/松身。SMPLicit建立在对SMPL人体参数的条件隐式模型和可学习潜在空间上,具有很高的表达灵活性,可以被用于3D扫描、3D重建和服装编辑。
Mar, 2021
本研究设计了一种人类图像生成的生成模型,能够控制姿势,不同身体局部的外貌以及服装风格,能够生成高逼真度的图像,并在不同方面表现出色,如姿态控制、部位和服装转移以及关节采样。
Mar, 2021
利用Differentiable Semantic Rendering(DSR)loss来训练一个人体回归器,从而从单目图像中回归出3D人体形状和姿势。在DSR loss中,利用了服装的语义信息来惩罚有衣和没衣的区域,从而更好的匹配服装区和未穿衣区,同时为了确保可微的训练,从成千上万个衣服扫描中学习SMPL顶点的语义衣服先验。在3DPW和Human3.6M上优于先前的最先进的方法,并在MPI-INF-3DHP上获得了与之相当的结果。
Oct, 2021
这篇论文提出了一种新方法,使用前向蒙皮模块和对抗网络模型,仅从少量生动的数据中学习生成多样化的3D人形模型,以便能够更自然地生成身着不同服装的人形模型,并且还可用于将人形模型拟合到原始扫描数据上。
Jan, 2022