BriefGPT.xyz
Dec, 2019
ORB: 一个开放的阅读基准评估工具,用于机器阅读理解的全面评估
ORB: An Open Reading Benchmark for Comprehensive Evaluation of Machine Reading Comprehension
HTML
PDF
Dheeru Dua, Ananth Gottumukkala, Alon Talmor, Sameer Singh, Matt Gardner
TL;DR
介绍了一种评估服务器ORB,可以测试模型在7个不同的阅读理解数据集上的表现,并且没有制约模型训练的限制,这是一个探索通用阅读能力的训练范式和表征学习的测试平台。
Abstract
reading comprehension
is one of the crucial tasks for furthering research in
natural language understanding
. A lot of diverse
reading comprehensi
→