CVPRApr, 2024
通过迭代稠密 UV 至图像流实现的二维视频三维人脸追踪
3D Face Tracking from 2D Video through Iterative Dense UV to Image Flow
Felix Taubner, Prashant Raina, Mathieu Tuli, Eu Wern Teh, Chul Lee...
TL;DR通过引入创新的 2D 对齐网络以进行稠密的顶点对齐,我们提出了一种新颖的人脸追踪器 FlowFace,用于改善三维面部数据的精确性和避免反感谷效应。与先前的工作不同,FlowFace 是基于高质量的三维扫描注释进行训练,而不是基于弱监督或合成数据。我们的方法在自定义和公开可用的基准测试中表现出优秀的性能,并通过从二维视频生成高质量的三维数据来验证追踪器的有效性,这导致在下游任务中获得性能提升。