ACLApr, 2020

STARC: 面向阅读理解的结构化注释

TL;DRSTARC 是用于评估阅读理解的结构化注释框架,该框架引入了一种答案选择的有理结构并将其与文本跨度注释绑定。使用 OneStopQA 数据集作为基础,可以使用 STARC 进行自动注释质量探测和机器阅读理解行为与人类进行深入分析和比较。RACE 标准数据集在阅读理解方面有局限性,而 OneStopQA 则为阅读理解提供了一种替代测试集。