gesture synthesis | BriefGPT

关键词gesture synthesis

搜索结果 - 5

CoCoGesture: 在自然环境中实现一致的共同话语 3D 手势生成
我们提出了 CoCoGesture，这是一个能够从未见过的人类语音提示中实现生动多样的手势合成的新框架，通过大规模数据集和预训练模型的优化，在零样本语音转手势生成上表现优于现有方法。
PDFa month ago
MambaTalk：带选择性状态空间模型的高效整体手势合成
表演合成是人机交互的重要领域，最近的研究基于扩散模型和注意力机制来改进表演合成，但由于计算复杂性较高，生成长且多样的序列仍然是一个挑战。我们探索使用状态空间模型来解决这个挑战，并实现了一种两阶段建模策略，并引入离散运动先验来提高表演质量。通
PDF4 months ago
情感驱动的 3D 人体动画通过解缠的潜在扩散
AMUSE 是一种基于潜在扩散的情感驱动人体动画模型，通过将语音驱动的内容与另一个语音序列的情绪和风格相结合，从而直接从语音合成具有表达情绪和风格控制的 3D 人体动作序列。
PDF7 months ago
GesGPT: 基于 GPT 的文本解析语音姿态综合技术
提出了一种通过 GPT 提取语义信息并利用手势库和集成模块生成与语音文本相关的语境适当和表现丰富的共同言语手势的姿态生成新方法 GesGPT。
PDFa year ago
使用离散手势令牌学习来进行共同语音手势合成
针对语音对应手势模型中存在的多种可能性及冲突问题，本研究提出一种使用离散潜在编码的两阶段模型引入不确定性来解决这一问题，并使用自回归变换器模型学习手势生成的先验分布，经用户考核后证明本方法生成的手势具有更加逼真和多样性。
PDFa year ago