Jun, 2024

虚拟化身生成模型作为世界导航器

HTML
PDF
TL;DR通过引入 SABR-CLIMB，我们提出了一种新的视频模型，使用虚拟化身在攀岩环境中模拟人类运动。通过扩散转换器，在每个扩散步骤中预测样本而不是噪声，并输入整个视频以输出完整的运动序列。通过利用大规模的专有数据集NAV-22M和大量的计算资源，我们展示了一个概念验证的系统，用于训练用于复杂任务的通用虚拟化身，包括机器人技术、运动和医疗领域。