Mar, 2020

GeoConv: 面部表情动作单元识别的测地线引导卷积

PDF
TL;DR本研究提出了一种将三维流形信息嵌入二维卷积的新颖方法 —— 地形引导卷积（GeoConv），并基于 GeoConv，开发了一种名为 GeoCNN 的端到端可训练框架，用于面部动作单元（AU）的识别。BP4D 和 DISFA 基准测试的广泛实验表明，我们的方法显著优于现有的 AU 识别方法。
发现论文，激发创造
  • 基于图卷积网络的面部动作单元检测关系建模

    本文提出了一种基于端到端深度学习框架进行面部 AU 检测的方法，使用图卷积网络（GCN）进行 AU 关系建模，通过解码器学习 AU 信息，再将每个隐层表示向量作为 GCN 的节点，最后将 GCN 更新的特征组合起来进行 AU 检测，实验证明该方法优于现有面部 AU 检测方法。

    Oct, 2019

  • 黎曼流形上的测地线卷积神经网络

    本文提出了一种称为 “测地线卷积神经网络”（GCNN）的新型神经网络，可用于处理形状相关的任务，例如形状描述，检索以及匹配。GCNN 使用局部极坐标系中的局部测地线系统提取 “补丁”，通过一系列过滤器和线性非线性算子，来学习不变的形状特征，从而获得最先进的性能。

    Jan, 2015

  • 基于动态图卷积和语义对应学习的面部表情动作单元强度估计

    本论文提出了一种新的学习框架，通过建立特征映射之间的语义对应关系自动学习 AU 之间的潜在联系，从而实现面部动作单元的强度估计，其中语义对应卷积模块（SCC 模块）可以提高特征的可辨识性，并且在两个基准数据集上展现了显著的性能优越性。

    Apr, 2020

  • 多标签面部动作单元检测的时空线索建模

    提出了一种基于混合网络体系结构的面部动作单元检测方法，可同时处理面部表情解码中的三个问题：空间表示，时间建模和 AU 相关性。

    Aug, 2016

  • 使用 Geo-CNN 建模三维点云的局部几何结构

    本文提出了一种名为 Geo-CNN 的算法，通过将点和其局部邻域应用一种称为 GeoConv 的通用卷积操作来捕捉点云中局部几何关系，并在特征提取过程中保留点云的几何结构，实现了在 ModelNet40 和 KITTI 数据集上的最先进性能。

    Nov, 2018

  • 学习三维形状的连续测地卷积

    通过引入局部参考框架和连续卷积核，本文提出了一种神经网络框架，可以从原始网格中学习特征，并在非刚性形状匹配和人体部位分割两项任务中取得了优异的结果。

    Feb, 2020

  • GeoDesc: 融合几何约束学习局部描述符

    本文提出一种新颖的基于几何约束的局部描述符学习方法 ——GeoDesc，旨在改善学习局部描述符在图片三维重建中的泛化性能不足的问题。结果表明，GeoDesc 在各种大型基准测试中表现出优异的性能，并在具有挑战性的重建任务中显著成功。此外，本文提供了在 SfM 流水线中实际集成学习描述符的指南，展示了 GeoDesc 在精度和效率之间能够提供的良好平衡。

    Jul, 2018

  • 面部动作单元检测的时空关系和注意力学习

    本研究提出了一种基于空间 - 时间关系和注意力机制的面部动作单元检测框架，其中使用了空间 - 时间图卷积网络来捕捉动态面部动作单元的空间和时间关系，并使用自适应学习的边界权重来形成关系图。此外，为了学习 AU 之间的时空关系，我们提出了一种注意力机制，以自适应地学习区域注意力，并通过抑制不相关区域来提取每个 AU 的完整特征。实验结果显示，我们的方法在 BP4D 和 DISFA 基准测试中实现了显著的改进。

    Jan, 2020

  • 面向活动视觉识别的几何感知循环神经网络

    该研究介绍了使用递归的几何感知神经网络，将一个场景的多个视图中的视觉信息整合到 3D 潜在特征张量中，并直接使用构建的 3D 特征存储器进行物体检测、物体分割和 3D 重建。

    Nov, 2018

  • 全局上下文感知卷积用于三维点云理解

    本文提出了一种新型的卷积操作符，通过将全局上下文信息与卷积融合，增强了点云数据中特征的区分度，从而解决了旋转不变性卷积的性能问题，并在多项点云任务中实现了最先进的结果。

    Aug, 2020