Mar, 2020

像素内像素网络：实现野外高效的面部特征点检测

PDF
TL;DR本文提出了 Pixel-in-Pixel Net（PIPNet） 对面部关键点检测的改进方法，旨在解决热图回归模型在计算效率、全局模型约束和域差异等方面的问题。实验表明，该模型在三个受监督学习的基准测试中均具有最先进的表现，而在两个跨领域测试集上的结果也得到了明显改善。同时，PIPNet 的轻量级版本在 CPU 和 GPU 上分别以 35.7 和 200 FPS 的速度运行，仍然保持了与最先进方法的竞争精度。
facial landmark detectionheatmap regressionpixel-in-pixel net (pipnet)self-training with curriculumcross-domain generalization
发现论文，激发创造
  • Lite-HRNet Plus：快速准确的面部关键点检测

    通过实验证明，Lite-HRNet Plus 在人脸标志物检测领域取得了比传统方法更高的准确性，并在 10M FLOPs 的计算复杂性范围内实现了最新的准确性。

    Aug, 2023

  • 面部特征点定位的亚像素热图回归

    本文提出了一种新的基于连续分布的热图编码与解码方法以及引入 Siamese-based 训练策略，显著提高了面部特征定位的准确度，并在多个数据集上取得了新的最先进结果。

    Nov, 2021

  • KPNet：面部检测的极简解决方案

    KPNet 提出了一种基于小型神经网络检测面部关键点的方法，可以快速准确地推断面部边界框的位置，其具有实时性和较高的准确率。

    Mar, 2020

  • 重新审视面部关键点检测：使用深度神经网络的高效方法

    本研究旨在评估迁移学习模型，包括 MobileNetV2 和 NasNetMobile，以及自定义 CNN 体系结构，在模型大小、参数和推理时间方面开发高效的深度学习模型，并研究数据增强和微调对这些模型的影响。MobileNetV2 体系结构产生了最低的 RMSE 和推理时间，而以人工优化的 CNN 体系结构与 Auto Keras 调整的体系结构表现类似。

    May, 2022

  • LaFIn: 基于地标引导的人脸修复生成模型

    本文提出了一种基于深度学习的人脸修复算法，结合人脸关键点预测和图像修复，实现了对人脸姿态、表情和遮挡等多方面的修复。在 CelebA-HQ 和 CelebA 数据集上的实验表明，该算法在视觉效果和定量评估上均超过了现有算法。同时，本文还发现高质量的修复图像和其关键点可以有效提高关键点预测模型的性能，在 300W 和 WFLW 数据集上也得到了验证。

    Nov, 2019

  • FacePoseNet：提出无需关键点的人脸姿态校正方法

    通过卷积神经网络在图像强度的作用下，直接准确和稳定地回归头部在三维中的六自由度姿态，进而使用该 FacePoseNet (FPN) 通过替代显式面部标志检测的方法在二维和三维中对齐面部，我们发现在许多情况下，基准检测准确性可能会误导面部对齐方法的比较。我们的 FPN 方法提供了比现有方法更好的 2D 和 3D 面部对齐，并且耗费的计算资源相对较小，是目前用于面部对齐的更快速和准确的方法。同时，我们使用相同的识别管道但不同的面部对齐方法来评估它们对 IJB-A 和 IJB-B 基准测试的面部识别准确性的影响。

    Aug, 2017

  • Pix2face: 3D 人脸模型直接估算

    这篇论文介绍了一种高效、全自动的方法，可以在自由 2D 图像中进行 3D 人脸形状和姿态估计，并使用基于改进的 U-Net 神经网络架构的单一传递联合估计稠密的 3D 关键点和面部几何，此外，还提出一种直接估计 3D 可塑模型（3DMM）参数的方法，通过估计的 3D 关键点和几何形状作为线性系统的约束，为非约束性视频序列中的预测 3D 面部关键点进行了定性建模结果和定量评估。

    Aug, 2017

  • 学习面向位置的隐含神经网络用于真实世界人脸修复

    提出了一种名为 IN²（Implicit Neural Inpainting Network）的方法，通过显式建模位置信息来处理现实世界场景中的任意形状人脸图像，包括降采样编码器、邻居混合注意力块和隐式神经金字塔解码器，实验证明该方法在现实世界的人脸修复任务中具有较高的效果。

    Jan, 2024

  • PFLD：实用的人脸关键点检测器

    本文利用加速技术，设计了一个紧凑的人脸特征点检测模型，在不同的自然环境下，如不受限制的姿态、表情、光照和遮挡，取得了很高的检测精度和超快的速度，通过旋转信息的估计进行几何规范化特征定位，同时还采用不同样本权重的一种新误差函数，用于平衡数据不均衡的问题，并在多个面部特征检测数据集上表现出卓越的性能。

    Feb, 2019

  • MaskFace: 多任务人脸及关键点检测器

    本文介绍了一种名为 MaskFace 的高精度人脸和关键点检测模型，该模型通过多任务模型同时解决人脸检测和关键点定位问题，并在多个任务数据集上实现了良好的性能。

    May, 2020