Apr, 2024

PhysPT:从单眼视频估计人体动力学的物理感知预训练变压器

TL;DR当前方法在从单目视频中估计 3D 人体动作方面取得了有希望的进展,本文提出了一种考虑物理学规律的预训练变压器(PhysPT),改进了基于运动学的动作估计并推断了运动力。实验证明,经过训练后的 PhysPT 能够直接应用于运动学估计,显著增强其物理上的可信度并产生有利的运动力,这些有意义的物理量进一步提高了重要下游任务 —— 人体动作识别的准确性。