CVPRDec, 2021

野外场景的极化形状感知

PDF
TL;DR该研究提出了一种新的基于数据驱动和物理学先验信息的场景级别单极化图像法线估计方法，并且建立了第一个真实场景级别形态恢复数据集。该方法采用了多头自注意力与视图编码来处理在野外环境中形成的极化杂波和联机投影问题，实验结果表明，相对于现有的形态恢复方法，该方法具有更好的性能。
data-driven approachpolarization imageshape from polarizationreal-world scene-level sfp datasetmulti-head self-attention module
发现论文，激发创造
  • 极化光深度信息提取

    本研究运用深度学习探讨了极化成形（SfP）问题。通过将物理模型融入神经网络架构中，创新性地兼顾了数据驱动和物理驱动，取得了在不同光照、材质和涂装条件下的最佳测试结果。

    Mar, 2019

  • 混合极化形态

    本文提出了一种新的使用视点和极化数据来完整分离漫反射和镜面反射组件、恢复折射率和最终恢复三维形状的方法，在分离过程中涉及了极化的物理特性，证明了与基准方法有竞争力的结果，并恢复了其他信息（例如折射率）

    May, 2016

  • 利用偏振 - Unet 进行表面法线重构

    本文介绍了一种利用极化成像的端到端深度学习方法来实现物体表面法线的高精度三维重建的方法，并通过定量和定性的评估结果表明，该方法相较于基于物理的方法在整个数据集上能够以最低的平均角误差（MAE）值为 18.06 度来准确重建物体表面法线。

    Jun, 2024

  • 基于事件的偏振形状恢复

    通过使用高速旋转的线性偏振器和事件相机，我们提出了一种用于实现事件极化成像的解决方案，该解决方案使用了基于学习的方法来估计表面法线，在现实世界的实验中，性能比基于物理的方案高出了 52％。

    Jan, 2023

  • 从偏振图像中重建三维人体形状

    该研究论文提出了一种针对服装人体的三维形状估计方法，通过使用极化图像捕获几何线索来重构人体表面法线图，并采用深度学习模型将其转化为 3D 人体形态估计，其结果表明极化相机对于人体形态估计是一种有前途的替代方法。

    Jul, 2020

  • 深度极化成像应用于三维形状和 SVBRDF 获取

    本文提出了一种使用偏振线索高效获取物体形状和空间变化反射的新方法，其中偏振成像与深度学习相结合，可以在正面闪光照射下使用单视角偏振成像实现高质量估计物体形状和反射。

    May, 2021

  • GNeRP：基于高斯引导的有噪极化先验的反射物体神经重建

    通过基于高斯的法线表示，本文提出了一种监督的方式来学习反射场景中几何形状的细节，通过极化先验引导几何学习，并通过优化过程中的重新权重策略来减轻极化先验的噪声问题，实验证明本文的方法在反射场景的神经三维重建中表现出色。

    Mar, 2024

  • 融合偏振和偏折信息的复杂镜面表面的三维成像

    通过将 SfP 的偏振线索与 PMD 的几何信息相结合，我们引入了一种测量原理，可以准确解码具有高光面反射的光场中包含的信息，并解决 3D 测量中的各种歧义问题，并且我们的方法去除了 SfP 的不切实际正交成像假设，显著提高了测量结果，演示了在复杂形状的高光表面上通过单次和多次拍摄的测量手段，验证了表面法线的精度在 0.6° 以下。

    Jun, 2024

  • 极化波前激光雷达：从极化波前学习大场景重建

    该研究介绍了一种新颖的长距离极化波前激光雷达传感器（PolLidar），利用极化波前估计室外场景中的法线、距离和材料特性，并提高了场景重建的准确性。

    Jun, 2024

  • S2P3：自监督极化姿态预测

    本研究提出了第一个自监督的多模态 RGB + 偏振图像的 6D 目标姿态预测方法，通过物理模型、师生知识蒸馏和逆可逆的物理约束等方式实现了稳健的几何表征和对偏振光的特征编码。通过自监督训练和物理约束，得到了准确的物体外观和几何信息，特别适用于具有挑战性纹理、反光表面和透明材料的物体。

    Dec, 2023