Jun, 2023
GENTLE: 英文自然语言处理和语言学评估的具有多元体裁的多层次挑战集合
GENTLE: A Genre-Diverse Multilayer Challenge Set for English NLP and
Linguistic Evaluation
TL;DR本文介绍了全新的GENTLE混合体英语挑战语料库，由8种不同的文本类型组成，手动注释了多种流行的NLP任务，如语法依赖分析，实体识别，共指消解和语篇分析。我们发现，最先进的NLP系统在GENTLE上的表现有所下降，至少在某些流派的所有任务中，这表明GENTLE是一个评估NLP系统的实用数据集。