May, 2024

稀疏观测下的分层化角色生成

TL;DR从 AR / VR 设备中估计 3D 全身化身对于创建 AR / VR 应用程序中的沉浸式体验至关重要。本文提出了一种分层方法,将传统的全身化身重建流程解耦为两个阶段,首先重建上半身,然后在先前阶段的基础上重建下半身。通过潜在扩散模型作为强大的概率生成器,并训练其遵循由 VQ-VAE 编码器 - 解码器模型探索的解耦动作的潜在分布,我们在 AMASS mocap 数据集上进行的广泛实验证明了我们在全身动作重建方面的最先进性能。