Jun, 2022

MACSA: 一个多模态的方面 - 类别情感分析数据集,包含多模态细粒度对齐注释

TL;DR本研究提出了 Multimodal Aspect-Category Sentiment Analysis (MACSA) 数据集,其中包含了超过 21K 个文本 - 图像对,提供了针对文本和视觉内容的细粒度注释,并首次使用 aspect category 作为枢轴,对齐两种模态之间的细粒度元素。本研究建立了 Multimodal ACSA 任务和一个基于多模态图形对齐的融合模型 (MGAM),采用精细的跨模态融合方法。实验结果表明,本方法可以便于这个语料库未来研究的基线比较。本文中的数据集和代码将公开提供。