本文介绍了一种新的神经网络,通过轻量级级联网络、流规则化层和特征提取的结构来提高光流估计的准确度,并且比现有的 FlowNet2 在模型大小和运行速度等方面都有所优化。
May, 2018
本研究利用深度学习中的 DenseNet 架构,纵向连接对求解密集光流估计问题具有隐式深度监督的特点,扩展当前 DenseNet 到全卷积网络,通过无监督学习的方式实现了运动估计。实验结果在三个标准基准测试中证明,相较于其他广泛采用的 CNN 架构,DenseNet 更适合进行光流估计。
Jul, 2017
本文提出了一个名为 LiteFlowNet2 的网络,主要用于光流估计问题,它使用卷积神经网络来计算光流,同时使用流正则化来解决异常和模糊问题,并实现了特征扭曲,而不是像 FlowNet2 和 SPyNet 那样变换图像,这通过轻量级级联流推理提高了速度,同时对 Sintel 和 KITTI 数据集的表现比 FlowNet2 更好,并且模型大小要小 25.3 倍,比运行速度要快 3.1 倍。
Mar, 2019
本文提出了一种基于端到端学习的光流估计方法,该方法通过数据给特定学习任务提供重要信息,并且采用了堆叠式架构及对小运动专门优化的子网络,使得计算速度得到了提升,同时精度与业界领先的方法相当;相比于原始的 FlowNet,FlowNet 2.0 计算速度基本不降反升,估计误差降低了超过 50%。
Dec, 2016
在本文中,我们使用轻量级网络提取具有强不变性的亮度鲁棒的卷积特征和角点,将光流方法的亮度一致性修改为卷积特征一致性,提出了光流的光鲁棒混合方法。使用四个卷积层同时提取特征图和得分图,该网络在商用 CPU 上以 190 FPS 运行。我们设计了一个深度网络来计算有助于训练的可靠性映射,并采用了端到端无监督训练模式。通过与原始光流在动态光照下进行角点重复性和匹配性能的比较,验证了所提出方法。此外,我们通过在 VINS-Mono 中替换光流方法,构建出更准确的视觉惯性系统,在公共 HDR 数据集上将平移误差降低了 93%。
Oct, 2023
本文提出了一种基于卷积神经网络和边缘计算硬件技术的光流估计方法,适用于纳米四旋翼在狭窄复杂环境中的安全和自主导航。通过对边缘设备进行优化和利用运动边界真实数据提高光流估计性能的训练方法,NanoFlowNet 在 MPI-Sintel 数据集上得到了很好的验证效果,同时还在 34 克纳米四轴飞行器上实现了基于视觉的障碍物避让任务。
Sep, 2022
本文提出了 SPyNet (空间金字塔网络) 算法,结合经典的空间金字塔和深度学习来计算光学流的大运动。相较于先前的 FlowNet 方法,SPyNet 更小、更高效,并且能够在标准基准测试中获得更高精度的结果。
Nov, 2016
我们提出了一种高效的光流架构 NeuFlow,通过全局到局部的匹配方案,在不同计算平台上显著提高了效率,并成功在小型机器人如无人机上实现了复杂的计算机视觉任务,如实时定位与地图构建(SLAM)。
Mar, 2024
本文提出卷积神经网络模型,将光流估计问题作为监督式学习任务,通过生成合成数据集进行训练,成功实现在计算机视觉领域特别是识别任务中广泛应用的卷积神经网络模型在光流估计任务上的成功率。
Apr, 2015
本文提出了使用胶囊网络处理光流问题的框架,并展示了在小型数据集上胶囊网络的表现优于 FlowNetC 和 PWC-Net 等模型的结果。
Apr, 2023