Aug, 2022

从 EEG 到红外视频的跨模态蒸馏:看见你的睡眠阶段

TL;DR本文提出了使用红外视频来识别睡眠阶段,通过将 EEG 知识提炼至视觉信息的方法来实现。为了建立一个坚实的跨模态基准,作者还开发了一个新数据集(S3VE),包括 105 个受试者和 154,573 个视频剪辑,达 1100 个小时长。使用基于结构感知对比提炼的新模型(SACD)在 S3VE 和现有跨模态数据集上均取得最先进的性能。