在跨数据集远程光电容积脉搏图方面提升泛化能力
本文研究了远程光电容积脉搏图 (rPPG) 的可重复性问题。建立了一个含有大量被试的、公开的数据库,并选择了三种发表在文献中最前沿的 rPPG 算法作为开放源代码软件进行实现和发布。通过在各种设置下的深入、公正的实验评估,发现没有一种选定的算法具有足够的精度用于现实世界中。
Sep, 2017
本文介绍了一种远程面部信号分析的新方法,应用了神经网络和自监督训练进行无监督学习,利用对感兴趣信号的弱先验建模,并成功在四个数据集上进行测试,证明了该方法的可行性和效果。
Nov, 2021
本文提出了一种利用远程光电容积图术(rPPG)任务中的显性和隐性先验知识的新框架,通过系统分析不同领域的噪声源,并将这些先验知识纳入网络进行训练,同时利用两个分支网络通过隐式标签相关性去除噪声并提取生理特征分布,我们的实验证明,该方法不仅在 RGB 跨数据集评估上胜过现有方法,而且能够很好地从 RGB 数据集泛化到 NIR 数据集。
Mar, 2024
该研究利用图像处理技术恶化视频质量,模拟挑战性条件,评估了非学习和基于学习的 rPPG 方法在恶劣数据上的表现。结果显示这些限制条件下的准确率显著下降,因此建议应用去噪和修填等恢复技术来改善心率估计结果并提高方法的鲁棒性和适应性。
Apr, 2023
本文提出了一种新的基于生成对抗神经网络的框架,名为 PulseGAN,用于通过去噪染色信号产生逼真的远程光电容积脉搏测量 (rPPG) 脉搏信号,以提高健康监控和情感识别的准确性。该框架在公共 UBFC-RPPG 数据库中得到了验证,表明 PulseGAN 可以有效地提高波形质量,进而增强心率 (HR)、心率变异性 (HRV) 和心动间隔 (IBI) 的准确性,且显著优于其他方法。
Jun, 2020
本文提出了一种数据扰动的方法,通过提取少量含有身份相关信息的面部区域进行像素洗牌和模糊处理来解决 Remote Photoplethysmography 数据的隐私问题,实验表明该方法可将面部识别算法的准确性降低 60%,而对 rPPG 提取几乎不产生影响,可作为一种有效的隐私保护方案。
Jun, 2023
本文提出了一种基于低光照条件下的远程心率测量的技术性解决方案,并通过一个大规模的数据集,评估了在不同光照变化下 rPPG 算法(Green、ICA 和 POS)的性能,并发现在低光照条件下,人脸检测算法无法检测人脸,脉冲信号的振幅降低将导致噪声信号占主导地位,并且基于色度的方法在皮肤色调假设方面存在局限性,提出的解决方案可以有效地提高脉冲信号的信噪比和精度。
Mar, 2023
本文介绍了一种新的、精确的、实时的远程光学心率监测方法,可以测量心率、提取脉搏波形并计算心率变异性,无需特定的训练,可在实际应用中得到良好的结果。
Sep, 2019
本研究分析了目前为止最大的真实世界远程光电容抗数据集,涵盖了 893 名受试者和 6 种菲茨帕特里克皮肤色调,实验结果表明,包含数百名受试者的数据集足以进行有效的远程光电容抗模型训练,并强调了皮肤色调的多样性和一致性对于不同数据集的精确性能评估的重要性。
Apr, 2024
远程摄像测量血容量脉搏通过光容积脉搏图(rPPG)是一种可伸缩、低成本、易于获取心血管信息的引人注目的技术。我们使用最新发布的同步接触式 PPG 和面部视频测量的独特数据集,对训练面部视频 rPPG 模型时是否使用来自身体其他部位的接触式测量数据进行优化进行了精确和定量的研究,结果显示,使用额头 PPG 信号相较于手指 PPG 信号,可以获得高达 40% 的均方误差降低,模型更好地学习了地面真实 PPG 信号的形态。然而,从手指 PPG 训练的模型仍然能很好地学习到主导频率(即心率)的特征。
Mar, 2024