一个统一的多视角多人追踪框架
本论文提出了一种基于多个校准相机视角的、面向实时应用的多人三维姿态估计解决方案,利用视频中的时间一致性直接在三维空间中匹配二维输入与三维姿态,通过跨视图多人跟踪迭代地更新姿态,从而提高了准确性和效率,并介绍了新的大规模多人数据集。
Mar, 2020
本文介绍了一种基于多视图校准的多人 3D 姿势估计和跟踪方法,利用时序一致性来匹配先前构建的每个视图中的用 2D 姿势估计生成的 3D 骨架,同时提出两种策略,以实现更好的对应关系和 3D 重构。该方法在两个基准上实现了竞争性成果,并在 Campus 测试中取得了良好的结果。
Jun, 2021
本论文提出了一种新的统一模型,通过结构化 2.5D 姿势估计和端到端几何感知深度推理方法相结合,解决了估计单目多人 3D 姿势以摄像机为中心坐标的问题,相比于现有的自顶向下和自底向上方法,我们的模型在准确性和速度方面都表现出色。
Jul, 2022
本文介绍了一种多人 3D 姿态估计的快速、鲁棒方法,使用多方式匹配算法来解决在噪声和不完整的 2D 姿态预测中查找跨视角对应关系的主要挑战,并结合几何和外观提示进行跨视角匹配。
Jan, 2019
本文研究多人姿态估计问题,提出了一种基于多视图系统和深度学习的方法,通过使用图神经网络模型预测场景中不同人之间的视角对应关系,并使用多层感知器模型将 2D 点转换为每个人的 3D 姿态。该模型采用自监督学习方式进行训练,从而避免了对大规模 3D 数据集的依赖。
Dec, 2022
本文介绍了一种首个能够在实时环境中处理基本遮挡、能够适应 360 度全景相机和毫米波雷达传感器的多人姿态估计系统,通过使用实时的轻量级 2D-3D 姿态提升算法,在室内外环境中实现了准确的性能表现,提供了一种经济实惠且可扩展的解决方案,并且不论检测到的个体数量如何,系统的时间复杂度保持几乎恒定,能够在商用 GPU 的笔记本上达到大约 7-8 帧每秒的帧率。
Mar, 2024
本文介绍了一个具有挑战性的问题,即在不受限制的视频中联合估计和跟踪未知数量的人的多人姿态。为此,我们提出一种新方法,将多人姿势估计和跟踪联合建模在一个公式中,使用时空图表示身体关节检测,在图上使用整数线性规划将其划分为子图,对应于每个人的可能身体姿势轨迹,该方法隐含处理遮挡和截断的问题。我们还提出了一个完全不受限制的评估协议和具有挑战性的 “Multi-Person PoseTrack” 数据集,评估了所提出的方法和几个基线方法在我们的新数据集上的表现。
Nov, 2016
通过使用新颖的神经表示,我们提出了一种部署友好的、快速的自下而上的多人三维人体姿态估计框架;进一步,我们基于跨模态的对齐问题,提出了一种实用的部署范式,使得我们的模型不仅能够处理现实世界的图像,而且在速度与性能之间实现了更好的平衡。
Aug, 2020
本文提出了一种针对无限约束视频中多人的关节追踪方法,利用简化稀疏的身体关系图和最近的快速推断方法,以及将计算量转移到卷积结构上;并将关节定位方案用于构建关节追踪形式,解决了所有场景中的关联问题,并已在公共 MPII Human Pose 基准测试中取得最新结果。
Dec, 2016
本文提出了一种多视角、多帧手部跟踪的统一端到端可微框架,直接预测世界空间中的三维手部姿态,并演示了将框架扩展到降噪和捏预测等下游任务的好处。实验证明,该系统在处理各种具有挑战性的交互动作方面表现出色,并已成功应用于实时虚拟现实应用。
Oct, 2022