CVPRMar, 2023
基于 Transformer 的视频情感反应强度估计和表达分类的多模态特征提取与融合
Multimodal Feature Extraction and Fusion for Emotional Reaction Intensity Estimation and Expression Classification in Videos with Transformers
Jia Li, Yin Chen, Xuesong Zhang, Jiantao Nie, Ziqiang Li...
TL;DR本文论述了针对 ABAW2023 中的情感行为分析领域的两个子挑战 - 表情分类和情感反应强度评估的高级解决方案。该方案使用了多种模型和工具来提取多模态特征,并有效地处理分类中的挑战,从而显著提高了模型在多模态情况下的情感预测精度。在情感反应强度评估方面,我们的方法超过了基线方法 84%,并在验证数据集上取得了出色的结果。