基于事件光流的微型飞行器垂直降落
使用事件相机和 GPU 加速,本研究提出一种用于预测生物发酵飞行朝向表面时刻距的新方法,包括一种新的对比度最大化公式和一种分支界定算法,并构建了一个新的真实事件数据集来测试和评估该方法的性能
Sep, 2022
通过仿生学方法,利用视觉流量分歧的微距离航空器降落的演进尖峰神经网络进行控制,展示了控制环路中脉冲神经网络在真实世界中的实际应用,并提供了有关成功解决分歧式着陆问题所需资源的见解。
Mar, 2020
本文提出了一种基于卷积神经网络和边缘计算硬件技术的光流估计方法,适用于纳米四旋翼在狭窄复杂环境中的安全和自主导航。通过对边缘设备进行优化和利用运动边界真实数据提高光流估计性能的训练方法,NanoFlowNet 在 MPI-Sintel 数据集上得到了很好的验证效果,同时还在 34 克纳米四轴飞行器上实现了基于视觉的障碍物避让任务。
Sep, 2022
本文探讨了使用基于图像的视觉伺服控制解决空中载具(如四旋翼无人机)在移动平台上的着陆问题。首先介绍了四旋翼飞行器的数学模型,然后设计内环控制。在第二阶段中,利用纹理目标平面上的图像特征来推导基于视觉的控制定律。使用降落目标中一组地标的球形质心的图像作为位置测量,而平移光流作为速度测量。使用可观察特征来表达基于视觉的系统的运动学,并且所提出的控制定律确保收敛,无需估计视觉系统与目标之间的未知距离,同时保证该距离始终保持严格为正,避免意外碰撞。通过 MATLAB 和 3D 仿真软件 Gazebo 对所提出的控制定律进行了评估。对于移动目标的不同速度配置文件,提供了四旋翼无人机的仿真结果,展示了所提出控制器的鲁棒性。
Apr, 2024
本研究提出了一种高帧率、低延迟的事件表示 Unified Voxel Grid 和基于事件的任意时刻光流估计网络 EVA-Flow,其中关键组件为堆叠的时空运动细化模块,可通过时空运动细化预测时间密集的光流并增强其准确性,同时还引入了用于无监督评估中间光流的修正流变形误差损失 (RFWL)。
Jul, 2023
本文介绍了一种新的基于自监督深度学习的光流估计方法 EV-FlowNet,用于事件驱动相机。该方法不仅可以准确地估计密集光流,还为其他自监督方法到事件驱动领域提供了转移框架。
Feb, 2018
本文提出了一种针对事件相机的全新稠密光流计算方法,通过引入特征相关性与顺序处理的设计思路,相比于现有方案在数据集 MVSEC 上将终点误差降低了 23%,并提出一种新的数据集,更能反映现实场景中物体的运动情况,最终结果的终点误差比之前的方案减少了 66%。
Aug, 2021
本文提出了一种改进的 2D 编码事件数据的 3D 表达方法,并介绍了 3D-FlowNet 网络体系结构以进行光流估计,并采用自监督训练策略来弥补事件相机标记数据的缺乏。结果表明,我们的 3D-FlowNet 具有更好的性能。
Jan, 2022
该研究提出了一种基于多核低功耗 RISC-V 微控制器单元的计算机视觉算法并行化策略,实验结果表明,该算法显著提高了在微型无人机上的帧率,使得最大飞行速度可以翻倍,并且仅使用前一单核实现的近三分之一时钟频率。
May, 2023