降低事件相机的模拟到现实差距
本研究提出了EventNet,一种基于新型视觉传感器的神经网络,旨在实时处理异步事件流,并采用了新的时间编码方案来建模输出对数万个因果事件的依赖关系,同时在标准CPU上每秒处理百万个事件,通过实验验证了该框架的实时性和稳健性。
Dec, 2018
本文介绍了将事件流转化成基于网格的表示的通用框架,其具有两个主要优势:(i)允许端到端学习输入事件表示,(ii)提供了一个统一记录大多数事件表示的分类法,并识别出新的事件表示方法。通过实验证明,我们的端到端学习事件表示的方法相对于现有技术方法,在光流估计和目标识别上都有约12%的改进。
Apr, 2019
该论文介绍了一种基于神经网络的异步处理Event-based Camera事件流的方法,利用前一时刻的动态信息和灰度帧的关键特征,提取事件中的动态信息,相较现有同类研究结果表现优异。
Apr, 2019
本文提出了一种使用循环网络从事件流中直接学习重建图像的方法,并在此基础上扩展到从事件流合成彩色图像的方法,实验证明该网络在处理高速现象和挑战性照明条件下具有较好的图像质量和高动态范围重建,并作为事件数据的中间表示进行了分类和视觉惯性积分导航等应用。
Jun, 2019
利用卷积神经网络从一对时间图像帧中模拟事件的方法,可克服事件相对于计算机视觉问题的限制。在大规模图像数据集上,通过这种模拟数据,训练用于对象检测和2D人体姿势估计的下游网络,能够成功推广到真实事件数据集上。
Dec, 2019
本文提出了一种利用现有的传统相机记录的视频数据生成虚拟事件数据的方法,从而使得神经网络能够使用大量的现有数据集进行训练,从而在物体识别和语义分割领域取得了良好的效果。
Dec, 2019
该论文通过自监督学习,将基于事件相机的图像强度重构问题与光流估计相结合,避免了需要真实数据的问题,并提出了一种轻量化的神经网络,以实现快速推理和高精度的光流估计。
Sep, 2020
本文介绍了一种基于事件相机的物体检测任务的解决方案,包括了首个高分辨率大规模数据集的发布、一种新的递归架构和一种时间一致性损失函数,这些对于更好的训练结果至关重要,而且在需要高动态范围,低延迟且具有挑战性的光照条件的情况下比传统的基于帧的解决方案更加高效而准确。
Sep, 2020
该研究提出了一种新的SNN-ANN混合体系结构,该体系结构结合了事件图像和异步计算的优势,用于光流估计,实验结果表明,与以往的混合体系结构,ANN-only和SNN-only体系结构相比,该混合体系结构在准确性和效率方面均有显著提升。
Jun, 2023