FlowFace:基于语义流指导和形状感知的人脸交换
本文提出了一种基于 FlowFace++ 的面部交换框架,利用明确的语义流监督和端到端架构来促进具有形状感知的人脸交换,并在野外人脸数据集上表现出色。
Jun, 2023
本文描述了一种新颖的人脸交换网络,使用 transformer 网络来学习源脸部与目标脸部之间高质量的语义感知对应,实现在交换后的脸部图像中同时保留源身份和目标属性。
Apr, 2023
本文提出了一种高保真人脸交换方法,称为 HifiFace,它可以很好地保留源脸部的脸型并生成逼真的结果。该方法采用 3D 形状感知身份来控制面部形状,并使用网络优化融合技术,使生成结果更逼真。大量的面部实验表明,我们的方法能够保持更好的身份特征,尤其是面部形状,并且比之前的最先进方法生成更逼真的结果。
Jun, 2021
本研究提出了一种名为 FaceShifter 的新型两阶段框架,用于高保真度和遮挡感知的人脸换脸。该框架通过完全自适应地利用和整合目标属性,在第一阶段生成高清晰度的换脸图像,其创新点在于引入目标属性编码器和自适应关注规范化层生成器。为了解决复杂的面部遮挡问题,我们还增加了由 Heuristic Error Acknowledging Refinement Network (HEAR-Net) 组成的第二阶段。大量实验表明,我们的技术不仅在感知上更好,而且还有更好的身份保护能力。
Dec, 2019
本研究提出了 BlendFace,一种用于换脸的新型身份编码器,通过在混合图像上训练面部识别模型并引导生成器,解决了现有方法中存在的身份 - 属性纠缠问题。大量实验证明 BlendFace 在换脸模型中提高了身份与属性的分离效果,并且在定量性能上与之前的方法相当。
Jul, 2023
通过引入自重建训练方案,使用 Shape Agnostic Masked AutoEncoder(SAMAE)来解决传统方法的局限性,包括模型训练不稳定性、目标身份泄露问题和形状错位问题,以实现在保留身份和非身份属性的同时,超越其他基准方法的全新最新技术。
Feb, 2024
本篇论文提出了一种基于几何感知流表征的面部特征无对应数据实例级转移方法,配合外推网络和循环一致性框架可以实现跨大姿态和外貌差异的高保真面部特征转移。
Nov, 2018
通过一个创新的端到端框架,我们提出了一种高保真度的面部交换方法,其中使用了深度学习方法中的生成对抗网络(GANs)作为基础,通过面部属性编码器、基于注意力的样式混合模块和样式解码器等多个模块,解决了以往面部交换方法中的混合不一致、失真、伪影和训练稳定性等问题。我们在 CelebA-HQ 数据集上进行了大量实验,与其他先进方法相比,我们的面部交换方法生成的图像具有更高的视觉质量,并且每个提出的模块都显著有效。源代码和权重将公开提供。
Dec, 2023
基于扩散模型的人脸交换技术,利用 IP-Adapter、ControlNet、以及 Stable Diffusion 的修复工艺实现人脸特征编码、多条件生成和修复操作,更进一步通过面部指导优化和 CodeFormer 进行混合提高生成质量。
Mar, 2024