S2P3:自监督极化姿态预测
利用极化信息的监督学习方法以及借助物理特性的自监督学习方法取得重要进展,通过利用极化光的几何信息和引入形状先验知识和可逆物理约束来提高姿态估计的准确性。
Aug, 2023
使用无监督学习的方法进行单眼 RGB 数据下的 6D 物体位姿估计,作者训练了一个神经网络模型,通过真实 RGB-D 数据的自监督模式来提高模型的性能表现,并证明了该方法能够显著地优化模型的性能,超过了其他使用合成数据或领域适应技术的方法。
Apr, 2020
无需辅助信息,我们提出了一种使用纯 RGB 图像进行训练的 6D 物体姿态估计方法,通过利用来自多个不同视角的合成至实图像对中的几何约束(以像素级流一致性的形式表示)进行精化策略,从合成图像中获得初始姿态估计,并使用动态生成的伪标签。在三个具有挑战性的数据集上进行评估,结果表明我们的方法明显优于最先进的自监督方法,无需 2D 注释或额外的深度图像。
Aug, 2023
本文探讨了光的偏振信息对单目 6D 物体姿态预测准确性的影响,并设计了一种混合模型,该模型将物理先验与数据驱动的学习策略结合起来,在不同光度复杂度的物体上进行了仔细的测试。实验结果表明,与现有的光度测量方法相比,我们的设计显著提高了姿态准确性,并能够实现高反射和透明物体的姿态估计。同时,我们还引入了一个新的多模式 6D 物体姿态数据集作为基准。
Dec, 2021
我们引入了一种扩散驱动的自监督网络,用于多目标形状重建和分类姿态估计,并且仅利用形状先验信息,通过点卷积层和图卷积层来捕捉姿态特征和形状信息,通过预训练和精炼的自监督训练范式训练我们的网络。实验证明,我们的方法明显优于最先进的自监督分类级别基准,并且甚至超过一些全监督实例级别和分类级别方法。
Mar, 2024
本研究提出了一种基于自主学习的 3D 人体姿态估计方法 EpipolarPose,可以不需要 3D 地面真实数据或相机外参信息,通过对多视图图像中的 2D 姿态进行估计,然后利用极线几何获得 3D 姿态和相机几何信息进行训练 3D 姿态估计,实验结果表明,在标准数据集 Human3.6M 和 MPI-INF-3DHP 上,本方法 在弱 / 自监督方法中取得了最新的最新最优成果,并提出了一种新的性能度量 Pose Structure Score (PSS) 来度量姿势相对于其地面真实性的结构合理性。
Mar, 2019
本论文提出了一种新的自我监督方法,通过训练不带标签的典型姿势图像数据集和未成对的 2D 姿势数据,从而实现了从单幅图像预测 3D 人体姿势的网络映射,可用于快速应用于其他人工结构(例如动物)的姿态估计。
Apr, 2023
本文提出了一种使用偏振线索高效获取物体形状和空间变化反射的新方法,其中偏振成像与深度学习相结合,可以在正面闪光照射下使用单视角偏振成像实现高质量估计物体形状和反射。
May, 2021
提出了一种深度学习技术,用于从单个图像进行三维物体重建。与以往的方法不同的是,该方法使用只有单一视角的图像进行训练,并具有自我监督学习能力,可实现与使用更多监督信息的方法相媲美的性能。该方法还可以进行测试时间优化。
May, 2020