介绍了一种新的捕捉方法和跟踪系统,自动获取 21 个关节点的手部姿势数据,并通过新数据集和卷积神经网络对自我视角手势估计和交叉基准性能进行显著改进。
Apr, 2017
该论文提出了一种新方法,利用多视角投影和学习的姿态先验,通过多视角热图来回归手部姿态,最终得出三维手势估计,实验表明该方法在难以应对的数据集上取得了优异表现。
Jun, 2016
本文研究使用卷积神经网络结构,预测手的三维关节位置,并通过引入关节先验和有效利用上下文来提高方案的预测精确性和可靠性,在多个基准测试中都表现出了远胜于现有技术的高精度和较快的计算时间。
Feb, 2015
使用新的 3D 神经网络架构,通过深度图到三维体积表示的转化,直接对手的三维姿态进行估计,无需进一步处理。同时通过合成深度图来增加训练数据覆盖率,在公开数据上达到了最优性能。
本文提出了一种半自动标记方法,该方法可以高效地标记手深度视频的每一帧,从而获得 3D 关节位置数据用于训练手势估计模型,并在手势识别领域取得了最先进的精度。
May, 2016
通过使用卷积神经网络结构,从单个深度图像中学习手部姿势,骨骼比例和复杂形状参数,以及使用一个新的手部姿势和形状层来产生 3D 关节位置和手部网格,利用 SynHand5M 数据集,在综合数据集上展示了良好的效果。
Aug, 2018
本文提出了一种通过 RGB 图像估计 3D 手部姿势的方法,使用深度学习和关键点检测方法,配合学习的 3D 关节先验,以及基于合成手模型的大规模数据集进行了实验验证。
May, 2017
提出了一种用于注释手操作对象图像的 3D 姿态方法,以及使用该方法创建的数据集并开发了一种基于 RGB 图像的手姿态预测方法。
Jul, 2019
本研究介绍了一个大型多视角手部数据库,并提出了一种迭代的半自动方法,用于将三维手部姿势和形状标注应用于该数据库,以解决基于单个 RGB 图像的三维手部姿势估计的高度不确定性问题,并评估了模型的性能。
Sep, 2019
提出一种新的大规模合成手部姿态估计数据集 Hi5 以及一种新的廉价方法来收集高质量合成数据,无需人工注释或验证。在计算机图形学的最新进展下,利用具有多样性性别、肤色和动态环境和摄像机移动的高保真度 3D 手部模型,我们的数据合成流程可以精确控制数据多样性和表示,确保健壮和公平的模型训练。通过使用一台普通消费级个人电脑,我们生成了一个包含 583,000 张图像和准确的姿态注释的数据集,这个数据集紧密地代表了现实世界的变异性。使用 Hi5 训练的姿态估计模型在真实手部基准测试中表现出竞争力,而在遮挡和扰动测试中超过了使用真实数据训练的模型。我们的实验显示出合成数据作为解决现实数据集中数据表示问题的可行方案的有希望的结果。总体而言,本文提供了一种有希望的新方法来创建和注释合成数据,可以降低成本并增加手部姿态估计的数据多样性和质量。
Jun, 2024