ECCVApr, 2020

使用相机姿态监督学习特征描述符

PDF
TL;DR本文介绍了一种基于相对相机位姿的学习框架，采用新的损失函数和模型架构，可以弱监督学习特征描述符，从而避免了精确的像素级匹配，为更大更多样化的数据集训练描述符提供了可能。通过该框架训练的 CAmera Pose Supervised 描述符甚至优于过去的有监督描述符，实现了多种几何任务的最先进性能。
learned visual descriptorscorrespondence estimationweakly-supervised frameworkrelative camera posescamera pose supervised descriptors
发现论文，激发创造
  • SCENES: 用极线监督进行子像素对应估计

    从两个或多个视图中提取场景的点对应是一个基本的计算机视觉问题，对于相对相机位姿估计和运动结构具有特殊重要性。我们通过使用对应于传递线上的假设匹配来放宽已有模型需要的先验知识约束，并提出了一种新颖的引导方法，从而无需真实的三维结构信息即可对模型进行微调，并在新数据上获得最先进的结果。

    Jan, 2024

  • 解耦使得弱监督本地特征更好

    本文提出了针对弱监督本地特征学习量身定制的解耦式描述 - 检测管道，通过引入按线查找策略以明确利用相机姿态信息来学习更好的描述符，并解耦检测步骤直到学习到具有辨别能力和鲁棒性的描述符后推迟其进行，其方法名为 PoSFeat（相机姿态监督特征），广泛实验证明其优于以往的完全和弱监督方法，并在广泛的下游任务中实现了最先进的性能）。

    Jan, 2022

  • 基于部件导向的新颖图像合成的自监督三维人体姿态估计

    本文提出了一种基于自监督学习的框架，利用单个基于零件的 2D 木偶模型、人体姿势约束和一组未配对的 3D 姿势来区分摄像机捕捉的人体姿态中的变化，从而在不同视频中提高多个任务的性能，包括 3D 姿势估计和部分分割。

    Apr, 2020

  • DeepCap: 单目弱监督下的人体表现捕捉

    本文介绍了一种基于深度学习的单目稠密人体动作捕捉方法，利用多视角监督训练来消除了需要 3D 地面实况注释训练数据的需求，且通过将任务分离为姿势估计和非刚性面变形两个步骤使得其在质量和鲁棒性方面优于现有技术。

    Mar, 2020

  • 野外多视角图像下的弱监督 3D 人体姿态学习

    本文提出一种基于弱监督方式，利用多视角数据进行 3D 人体姿势估计的学习框架，包括利用 2.5D 表示法的目标函数，经过测试在两个大规模数据集上达到了半监督 / 弱监督方法的最佳表现。

    Mar, 2020

  • 深度学习相机姿态估计介绍

    本文概述了深度学习在计算机视觉领域中对相机姿态估计的应用，描述了关键方法和趋势，对现有的学习为基础的姿态估计器进行了广泛的交叉比较，并讨论了新出现的解决方案和未来的研究方向。

    Jul, 2019

  • 相对论：弱监督数据下的单目三维人体姿态估计

    通过弱监督学习和人群注释者提供的深度相对估计信号，我们提出一种 3D 人体姿势估计算法，用于只在 2D 输入图像中学习。结果竞争力优于目前现有算法，可为在未经过精心控制的现实世界中进行 3D 姿势估计开辟道路。

    May, 2018

  • 使用多视角几何的自监督学习 3D 人体姿势

    本研究提出了一种基于自主学习的 3D 人体姿态估计方法 EpipolarPose，可以不需要 3D 地面真实数据或相机外参信息，通过对多视图图像中的 2D 姿态进行估计，然后利用极线几何获得 3D 姿态和相机几何信息进行训练 3D 姿态估计，实验结果表明，在标准数据集 Human3.6M 和 MPI-INF-3DHP 上，本方法 在弱 / 自监督方法中取得了最新的最新最优成果，并提出了一种新的性能度量 Pose Structure Score （PSS） 来度量姿势相对于其地面真实性的结构合理性。

    Mar, 2019

  • 姿态估计的结构特征学习

    该论文提出了一种结构化特征学习框架，旨在通过人体姿态估计中的特征级别推理身体关节之间的相关性，通过引入几何变换内核捕捉关节特征地图之间的关系，提高特征学习。

    Mar, 2016

  • 无监督三维人体姿态估计的运动学结构保留表示

    本文提出了一种采用运动学结构保持无监督学习的 3D 人体姿势估计框架，可以避免使用任何弱监督模型，并通过能量损失和运动学先验知识来训练模型，提高对新环境下的准确性和泛化能力。

    Jun, 2020