Oct, 2023

通过联合学习面部关键点检测和领域分离与重构来提升面部动作单位检测

TL;DR提出了一种新的 AU 检测框架,其中引入了多任务学习,通过共享同构面部提取模块的参数来共同学习 AU 领域分离和重建以及面部标志检测。此外,提出了一种基于对比学习和改进的对比损失的新特征对齐方案,通过添加四个中间监督器来促进特征重建过程。在两个基准测试上的实验结果表明,对于野外 AU 检测,我们优于现有的方法。