通过单眼 RGB 视频直接训练具有物理可行性的人体运动的生成模型,该方法通过可微分的方式实现了物理约束和接触关系优化,并实现了与之前基于姿态识别的方法相比更高质量、更真实、更多样化的运动合成与估计。
Sep, 2021
本文提出了一种基于姿态引导的方法来以可分离的方式合成人类视频:可信的运动预测和协调的外观生成,旨在探索并掌握视频合成中人体姿态的本质动态和诠释能力,并在保持外观连贯性的同时处理异常和嘈杂数据,实验证明其优于现有技术。
Jul, 2018
本文提出一种层次生成框架,通过优化多个几何约束和建模场景互动和应用来合成涉及长期 3D 人体动作的逼真生成,并在实验中得出了比之前更好的实验结果。
Dec, 2020
该研究提出了一种新的数据驱动的、随机的运动综合方法 SAMP,该方法可以模拟在杂乱场景中表现不同风格的行为,通过训练 MoCap 数据可以实现优秀的表现。
Aug, 2021
利用扩散模型为给定目标 3D 动作序列中的人物从单个图像创建动画的框架,包括学习关于人体和服装不可见部分的先验知识以及呈现适当的身体姿势和纹理的新姿态。
Jan, 2024
本文提出了一种新框架,将场景和人体运动相互作用考虑在内,使用生成任务将人体运动的分布因子分解,并使用基于 GAN 的学习方法来提高其有效性。文中讨论了两个数据集结果,涵盖了真实和合成环境。
May, 2021
本文介绍了一种基于模块化生成神经网络的方法,用来合成出一张人的图像并保证姿势、外貌和背景的一致性,其中包括了基于图像和动作的训练资料,以及对抗性判别器等技术来实现姿势合成,最终能够生成与动作类别准确匹配的图像,同时还可以将多个动作合成为视频。
Apr, 2018
本文提出了一种新的姿态转换方法,通过使用组合神经网络,预测人的轮廓,服装标签和纹理,并在推理时利用训练有素的网络生成一个外观及其标签的统一表示,以对姿势变化做出响应,并使用背景完成外观的呈现,从而实现保留人物身份和外观,具有时间上的一致性和泛化能力。
该研究提出了一种基于视频的真实人物动画生成方法,利用中等质量的可控 3D 模板模型和神经网络技术,成功实现了人物形象的逼真渲染和编辑。
Sep, 2018
本文提出了一种基于生成对抗学习的人体上半身视频合成方法,利用上半身关键点、面部动作单元和姿势作为中间表示来实现源视频和目标视频之间的映射,实验结果表明我们的方法非常有效。
Aug, 2019