CVPRNov, 2019

通用场景下基于图像的 3D 非刚性对称物体无监督学习

TL;DR本文提出了一种无需外部监督学习从单视角图像中学习三维可变形物体类别的方法,该方法基于自编码器,将每个输入图像分解为深度、漫反射、观察角度和光照,通过利用物体对称结构来分解这些组件,推理光照使我们能够利用底层的物体对称性,即使外观不对称,而是由于阴影造成的。此外,我们通过预测对称概率地图来建模可能但不一定对称的对象,该地图与模型的其他组件一起端到端地学习。我们的实验表明,这种方法可以从单视角图像中非常准确地恢复人类脸部、猫脸和汽车的三维形状,而不需要任何监督或先前的形状模型。与使用 2D 图像对应的监督方法相比,在基准测试中,我们表现出优越的准确性。