Jan, 2024

利用低分辨率热成像相机及脉冲神经网络与稀疏分割实现资源高效的姿势识别

TL;DR使用低分辨率 (24 x 32) 热传感器,结合脉冲神经网络、稀疏分割和基于特征的手势分类,提出了一种新颖的手势识别方法。与标准 RGB 摄像头相比,该系统对光照变化不敏感,且价格显著低于以往文献中使用的高频雷达、飞行时间摄像头和高分辨率热传感器。关键是,本文通过创新地使用最近提出的单稳态多谐振荡器 (MMV) 神经网络作为新型脉冲神经网络,在记忆和计算复杂度方面较深度学习方法小一个数量级,同时在汽车环境下使用 5 类热相机数据集达到 93.9% 的手势识别准确率。我们提供了该数据集以供未来研究使用。