本文提出卷积神经网络模型,将光流估计问题作为监督式学习任务,通过生成合成数据集进行训练,成功实现在计算机视觉领域特别是识别任务中广泛应用的卷积神经网络模型在光流估计任务上的成功率。
Apr, 2015
本研究提出了一种自监督学习的方法,通过利用非遮挡像素估计可靠的光流,用于学习虚假的遮挡。同时,通过设计一个简单的 CNN 来利用多帧的时间信息来获得更好的光流估计。该方法在 MPI Sintel、KITTI 2012 和 2015 等多个挑战基准测试中取得了最佳性能,并且该自监督预训练模型为监督微调提供了极好的初始化,其微调后的模型在三个数据集上均取得了最先进的结果。
Apr, 2019
本文提出了一个名为 LiteFlowNet2 的网络,主要用于光流估计问题,它使用卷积神经网络来计算光流,同时使用流正则化来解决异常和模糊问题,并实现了特征扭曲,而不是像 FlowNet2 和 SPyNet 那样变换图像,这通过轻量级级联流推理提高了速度,同时对 Sintel 和 KITTI 数据集的表现比 FlowNet2 更好,并且模型大小要小 25.3 倍,比运行速度要快 3.1 倍。
Mar, 2019
本文提出了 SPyNet (空间金字塔网络) 算法,结合经典的空间金字塔和深度学习来计算光学流的大运动。相较于先前的 FlowNet 方法,SPyNet 更小、更高效,并且能够在标准基准测试中获得更高精度的结果。
Nov, 2016
本文提出了一种基于卷积神经网络(CNN)的无监督在线学习方法,用于为每帧单独估计运动模型,通过前后向的运动关系实现运动信息的推导,并能够解决非刚性运动估计的主要限制,与没有运动预测的基线相比,在 KITTI 2012、KITTI 2015 和 MPI Sintel 三项基准测试中表现出了长达 27%的一致性改进。
Jun, 2018
TransFlow 是一个基于 Transformer 结构的纯光流估计方法,通过利用空间自注意力机制和跨帧交叉注意力机制,实现更准确的相关性和可信匹配、通过长时序关联恢复更多的损失信息,并通过简单的自学习范式,消除复杂的多阶段预训练程序,在多个任务上实现了最先进的结果。
Apr, 2023
本文介绍了一种新的神经网络,通过轻量级级联网络、流规则化层和特征提取的结构来提高光流估计的准确度,并且比现有的 FlowNet2 在模型大小和运行速度等方面都有所优化。
May, 2018
本文中,我们提出了一种称为 SplatFlow 的 multi-frame optical flow 估计(mOFE)框架,可以通过引入可微变换方法来处理遮挡问题,并在 KITTI2015 和 Sintel 基准评估中得到显著的改进。
Jun, 2023
本论文提出了使用卷积网络对视差和场景流进行光流估计的方法,并成功构建了三个合成的立体视频数据集,通过对现有网络进行联合培训,实现了首个卷积网络进行场景流估计。
Dec, 2015
采用动态光流来监督静态图像的表示,通过学习嵌入像素以达到其光流向量之间的相似性,我们设计了一种无需手工标注的学习卷积神经图像表示的新方法,这个新方法优于以往的运用动态光流学习卷积神经网络的方法,并在语义分割等领域首屈一指。
Jul, 2018