提出了一种新的非对抗无监督学习框架,用于从未标记的视频数据中直接提取血容量脉搏,以实现低成本的非接触健康监测,并展示了该框架在调整模型和个性化适应信号回归方面的效果。
Apr, 2024
本文介绍了一种远程面部信号分析的新方法,应用了神经网络和自监督训练进行无监督学习,利用对感兴趣信号的弱先验建模,并成功在四个数据集上进行测试,证明了该方法的可行性和效果。
Nov, 2021
本文提出了一种无监督的远程光学脉搏测量方法,利用 3D 卷积神经网络模型以及对比损失训练模型,可以在不需要参照信号的情况下提高精度,并可以更快地运行且更耐噪音。
Aug, 2022
视频远程生理测量是利用面部视频测量血容量变化信号,也称为远程光电容抗 (PRP)。本文提出了一种名为 Contrast-Phys + 的方法,可以在无监督和弱监督设置下进行训练。我们使用 3D 卷积神经网络模型来生成多个时空 PRP 信号,并将 PRP 的先验知识纳入对比损失函数中。我们进一步将 GT 信号纳入对比学习,以适应偏向性或错位标签。对比损失鼓励来自同一视频的 PRP/GT 信号进行分组,并将来自不同视频的信号分开。我们在包括 RGB 和近红外视频的五个公开数据集上评估我们的方法。即使在部分可用或错位的 GT 信号或没有标签的情况下,Contrast-Phys + 也优于最先进的有监督方法。此外,我们还强调了我们的方法在计算效率、噪声鲁棒性和泛化性方面的优势。
Sep, 2023
利用光电脉搏(PPG)信号来非侵入性地测量血压很有趣,尤其是通过基于机器学习技术的神经网络和个性化技术提高预测性能。
Apr, 2021
近年来,深度学习模型在处理光电容积脉搏图数据方面取得了显著进展,其中医疗相关和非医疗相关任务是主要研究领域。
Jan, 2024
利用自监督对比学习方法来估计远程光电容积描记法和心率监测,减少对标记数据的依赖并提高性能。
Oct, 2023
我们提出了一种基于自相似性先验蒸馏 (SSPD) 框架的无监督远程光电容积描记术 (rPPG) 估计方法,通过利用心脏活动的内在自相似性,采用物理先验嵌入增强技术抑制噪音,利用自相似性感知网络提取更可靠的自相似生理特征,以及开发分层自蒸馏范式来帮助网络从面部视频中解开自相似的生理模式。全面的实验证明,无监督的 SSPD 框架在性能上相当或甚至优于最先进的有监督方法,同时 SSPD 在端到端模型中保持最低的推断时间和计算成本。
Nov, 2023
本研究介绍了一种基于图论和计算机视觉算法的 PPG 信号处理框架,它对仿射变换具有不变性,计算速度快,并在任务和数据集之间表现出强大的泛化能力,能够提取人体循环系统的各种生物特征。
May, 2023
远程摄像测量血容量脉搏通过光容积脉搏图(rPPG)是一种可伸缩、低成本、易于获取心血管信息的引人注目的技术。我们使用最新发布的同步接触式 PPG 和面部视频测量的独特数据集,对训练面部视频 rPPG 模型时是否使用来自身体其他部位的接触式测量数据进行优化进行了精确和定量的研究,结果显示,使用额头 PPG 信号相较于手指 PPG 信号,可以获得高达 40% 的均方误差降低,模型更好地学习了地面真实 PPG 信号的形态。然而,从手指 PPG 训练的模型仍然能很好地学习到主导频率(即心率)的特征。
Mar, 2024