Jun, 2024

启发式学徒技术:协同知识蒸馏为高效单眼情绪识别增添能力

TL;DR我们介绍了一种新颖的多模态协同知识蒸馏方案,专为高效的单眼动作识别任务而设计。这种方法允许轻量级的单模态脉冲神经网络(SNN)从事件帧多模教师网络中提取丰富的知识。这种方法的核心优势在于能够利用传统帧中丰富而更粗糙的时间线索来进行有效的情感识别。因此,我们的方法熟练地解释了传统帧领域中的时间和空间信息,避免了对专用传感设备(例如事件相机)的需求。通过对现有和我们编制的单眼情感识别数据集进行全面展示,我们的方法在准确性和效率方面实现了卓越的性能,超越了现有的最先进方法。