ViewNet: 无监督条件生成的视角估计
本文研究了基于图像对的半监督视角估计方法,该方法可以从未标注的图像对中推断视角信息,并将其应用于视角预测任务。实验表明,该方法在低标注数据情况下表现出色,在半监督视角估计方法中也取得了最佳效果。
Apr, 2021
本研究旨在回答一个问题,即能否利用来自互联网的未标记对象类别的大量图像,通过自监督实现纯粹通过训练视角估计网络。 在这里,我们提出了一种新颖的学习框架,其中包括一种通过合成分析范例结合生成网络进行视点感知重构图像的方法,以及对称性和对抗约束,以成功监督视点估计网络。通过实现我们的方法,我们表明在如人脸、汽车、公共汽车和火车等几个对象类别上,我们的方法表现出具有竞争力的完全监督方法,为进一步的自监督视角学习和研究提供了一个强健的基线。
Apr, 2020
本论文主要探讨基于学习的单个或有限 2D 图像的新视角合成,提出了一个端到端可训练的条件变分框架,通过空间相关模块从外观描述图像中提取全局的 3D 表示形状、纹理和以观察者为中心的坐标系原点等,实现无需显式 3D 重建即可隐含 3D 理解。
Jul, 2020
从学习代理的角度探究了单视角 3D 物体重建任务,提出了一种包含透视变换定义的新型投影损失的编码器 - 解码器网络,实现了从单个 2D 图像生成 3D 体积的无监督学习,并通过实验证明了投影损失提高了 3D 对象重建的性能和泛化能力。
Dec, 2016
本文提出了一个自监督学习的方法,通过深度引导的调整过程,利用变换自编码器的网络结构,在只有 2D 图像和相关视角变换的情况下精确合成高质量的 3D 对象或场景的新视角,并实现了细粒度和精密的六自由度视角控制。通过在合成和真实场景以及精细和固定视角设置下的彻底评估,证明了该方法的广泛适用性。
Jan, 2019
本研究提出了一种基于渲染图像合成和 CNN 的三维模型视点估计框架,通过构建可扩展且抗过拟合的图像合成流水线和针对视点估计任务的新型 CNN,实现了对 PASCAL 3D + 基准测试的最先进方法的显着优化
May, 2015
提出了一种深度学习技术,用于从单个图像进行三维物体重建。与以往的方法不同的是,该方法使用只有单一视角的图像进行训练,并具有自我监督学习能力,可实现与使用更多监督信息的方法相媲美的性能。该方法还可以进行测试时间优化。
May, 2020
提出了一种新的基于图像的神经隐式场方法,该方法利用基于 GAN 生成的多视图图像的 2D 监督,并通过不确定性模块来提高重构性能,从而实现了泛化物体的单视角 3D 重构。
Jul, 2022