EventNet:异步递归事件处理
本文介绍了将事件流转化成基于网格的表示的通用框架,其具有两个主要优势:(i)允许端到端学习输入事件表示,(ii)提供了一个统一记录大多数事件表示的分类法,并识别出新的事件表示方法。通过实验证明,我们的端到端学习事件表示的方法相对于现有技术方法,在光流估计和目标识别上都有约12%的改进。
Apr, 2019
介绍了事件相机技术的工作原理,可用传感器和任务,包括低级视觉和高级视觉,并讨论了处理事件的技术,特别是基于学习的技术和专门为这些传感器设计的处理器,如脉冲神经网络,同时提出了待解决的挑战和未来机器感知及与世界互动的新机遇。
Apr, 2019
该论文介绍了一种基于神经网络的异步处理Event-based Camera事件流的方法,利用前一时刻的动态信息和灰度帧的关键特征,提取事件中的动态信息,相较现有同类研究结果表现优异。
Apr, 2019
本文研究基于事件驱动的异步脉冲神经网络,并通过将经典的基于帧数据训练的卷积神经网络转换为异步网络,以在计算预算紧张的条件下实现低功耗、快速和嵌入式的神经网络视觉解决方案,其中应用范例是机器人跟踪移动目标。研究发现,异步网络的分类准确率仅比同步CNN低3%,但计算量却减少了12倍。
May, 2019
利用卷积神经网络从一对时间图像帧中模拟事件的方法,可克服事件相对于计算机视觉问题的限制。在大规模图像数据集上,通过这种模拟数据,训练用于对象检测和2D人体姿势估计的下游网络,能够成功推广到真实事件数据集上。
Dec, 2019
本研究提出了一种通用的框架,将基于同步图像事件表示训练的模型转换为具有相同输出的异步模型,以便直接利用事件数据的本质异步性和稀疏性,并在目标检测和识别任务中实现了高达20倍计算复杂度的降低和24%的精度提高。
Mar, 2020
介绍了一种称为Recurrent Asynchronous Multimodal(RAM)网络的新型神经网络结构,适用于多个传感器的异步和不规则数据进行深度估计,具有比现有方法高30%的平均绝对深度误差改善,同时推出了EventScape数据集以鼓励使用事件的多模式学习。
Feb, 2021
本文提出采用异步事件驱动图神经网络(AEGNN),将事件处理范式从已知稀疏的静态图扩展到事件数据域中的一个演化的稀疏图,在物体分类和检测任务上,实现了计算复杂度提高11倍的同时,保持了最新的异步方法相同甚至更好的性能表现,将计算的降低转化为计算延迟降低了8倍,为低延时事件处理打开了新的机遇。
Mar, 2022
本文提出了一种基于简单卷积层的神经网络架构,结合低成本的动态时间编码水库节点,实现了异步时间特征的高效处理,并通过使用内部动态的自旋电阻器,在非常低的硬件成本下实现了异步时间特征编码。RN-Net 在 DVS128 手势数据集上取得了最高的 99.2% 的准确率,并且在较小的网络规模下,在 DVS Lip 数据集上实现了达到 67.5% 的准确率,且代码将公开发布。
Mar, 2023