ACLJul, 2022

MIA 2022 共享任务:评估 16 种不同语言的跨语言开放检索问答

TL;DR本文介绍了 MIA 2022 workshop 关于跨语言信息检索中的开放式提取问题回答(QA)系统评估的结果,并评估了 16 种语言中的系统性能表现。通过对 14 种语言的大规模跨语言开放式提取 QA 数据集进行改编以及对 Tagalog 和 Tamil 两种语言进行新的标记,共有 4 支队伍提交了他们的系统,最佳系统借助多样化的负样本和更大的预训练模型实现了 32.2 的 F1 值,而第二名则在 Tamil 语言的检索中取得了显著的进展。