Mar, 2023
SemEval-2023 任务 3 的 mCPT:面向多语言标签感知的对比学习 Transformer 进行少量和零样本框架检测
mCPT at SemEval-2023 Task 3: Multilingual Label-Aware Contrastive Pre-Training of Transformers for Few- and Zero-shot Framing Detection
Markus Reiter-Haas, Alexander Ertl, Kevin Innerhofer, Elisabeth Lex
TL;DR该论文介绍了零样本学习下多语种多标签框架检测任务的获胜系统,其采用多语种 Transformers 进行预训练,并使用有标签的对比损失函数。此外,作者进行了嵌入空间分析和消融研究,证明了他们的预训练程序如何支持框架检测,推动了计算框架分析的发展。