UPFlow:无监督光流学习的上采样金字塔
本文提出了一种无监督的光流估计方法,通过引入自适应金字塔采样,提出了一个内容感知池化模块和一个自适应光流上采样模块,能够有效地避免交叉边界插值和交叉区域池化,从而实现了最佳的光流估计性能。
Apr, 2021
本研究提出了一种自监督学习的方法,通过利用非遮挡像素估计可靠的光流,用于学习虚假的遮挡。同时,通过设计一个简单的 CNN 来利用多帧的时间信息来获得更好的光流估计。该方法在 MPI Sintel、KITTI 2012 和 2015 等多个挑战基准测试中取得了最佳性能,并且该自监督预训练模型为监督微调提供了极好的初始化,其微调后的模型在三个数据集上均取得了最先进的结果。
Apr, 2019
本研究提出一种利用基于能量的方法进行光流估计的无监督学习方法以替代对真实场景难以获得的像素精确度地面实况数据的依赖,此方法在 KITTI 基准测试中的表现优于以往的无监督深度网络,甚至比仅在合成数据集上进行训练的类似监督方法更准确,在 KITTI 2012 和 2015 基准测试中具有竞争优势。
Nov, 2017
本文提出了 SPyNet (空间金字塔网络) 算法,结合经典的空间金字塔和深度学习来计算光学流的大运动。相较于先前的 FlowNet 方法,SPyNet 更小、更高效,并且能够在标准基准测试中获得更高精度的结果。
Nov, 2016
提出了一种在没有 ground truth flows 的情况下实现 fine tuning 的实用方法,该方法基于 self-supervision 和使用 flow supervisor 实现了更稳定收敛和更好的准确性,在 Sintel 和 KITTI 基准上实现了有意义的改进。
Jul, 2022
DDFlow 是一种基于数据净化的方法,可从未标注的数据中学习光流估计。该方法使用可靠的预测来指导学生网络学习光流,并能够为被遮挡像素进行光流估计,从而实现了更高的准确性。在 Flying Chairs、MPI Sintel、KITTI 2012 和 2015 基准测试中,DDFlow 的性能显著优于所有现有的无监督学习方法,同时实现了实时运行。
Feb, 2019
本研究通过分析光流的关键组件如光度损失、遮挡处理和光流平滑正则化,提出了多种类似代价体积规范化、在遮挡掩模处停止梯度、在上采样光流场之前鼓励平滑等方法的优化,结合改进后的组件提出了一种新型的无监督光流技术,该技术不仅在 KITTI 2015 数据集上表现出色,而且比现有方法更为简单。
Jun, 2020
本文提出了一种使用变换提供的可靠监督信息的框架,通过使用数据增强技术来运行另一个向前传递的过程,并使用原始数据的转换后的预测结果作为自我监督信号,从而得到了多帧轻量级网络的最佳精度。
Mar, 2020
本文研究了卷积神经网络在无监督学习下学习光流预测的能力;提出了一种新的模型来显式模拟遮挡问题,并使用新颖的变换方式来更好地学习大运动;在 Flying Chairs,MPI-Sintel 和 KITTI 标准数据集上进行了测试,结果表明在 KITTI 数据集上无监督方法的效果优于有监督方法,尤其在该数据集上,我们的方法表现出色。
Nov, 2017