Dec, 2023
基于多模态协作变压器和混合特征重建的强鲁棒情感识别
Modality-Collaborative Transformer with Hybrid Feature Reconstruction for Robust Emotion Recognition
Chengxin Chen, Pengyuan Zhang
TL;DR多模情感识别是情感计算的重要方面,本文提出了一种统一框架 Modality-Collaborative Transformer with Hybrid Feature Reconstruction (MCT-HFR) 来解决构建不对齐多模特征的联合表示的效率和随机模态特征缺失引起的性能下降的挑战,并在两个广泛应用的基准数据集上获得了优于先进基准模型的结果。