Jun, 2023

NPVForensics: 捆绑非关键音位和视位以便深度伪造检测

TL;DR本文提出了一种新的 Deepfake 检测方法(称为 NPVForensics),在现有的多模态检测方法基础上,通过挖掘非关键音位和唇位相关性,构建相应面部特征流,设计精细的动作损失函数,以及跨模态特征融合和表示对齐模块,最终使用自监督预训练策略,在现有基准测试中取得了更优的检测效果。