unsupervised self-rehabilitation exercises and physical training can cause
serious injuries if performed incorrectly. We introduce a learning-based
framework that identifies the mistakes made by a user and propos
本文提出 a new captioning dataset named FixMyPose,为了避免 ML 偏见,维护了不同背景的不同人群的平衡,对于该数据集我们提出姿势校正字幕任务及其反向目标姿势检索任务,并引入针对该任务的新指标。我们的基线模型能够在现实图像上有良好表现,但在人类评估中仍有提高空间。
本研究提出自监督学习的方法,使用姿势引导网络 (PGN) 进行单眼 3D 人脸重建,并通过结合参数模型的学习和数据驱动的学习技术,从完全标记的 3D 地标和无限制的野外面部图像中学习。通过使用包含同一人物多帧嵌入的面部几何信息的自监督学习方案,缓解了从单个图像回归 3D 面部几何的不适定性。在 AFLW2000-3D、Florence 和 FaceWarehouse 数据集上进行了严格评估,并表明我们的方法在所有指标上均优于最先进技术。