BriefGPT.xyz
Nov, 2020
FFCI: 用于可解释的自动摘要评估的框架
FFCI: A Framework for Interpretable Automatic Evaluation of Summarization
HTML
PDF
Fajri Koto, Jey Han Lau, Timothy Baldwin
TL;DR
本文提出了FFCI细粒度摘要评估框架，包括忠诚度、重点、覆盖率和句间连贯性等四个方面。通过比较评估指标和基于模型的评估方法，开发出自动评估方法，在两个数据集上评估了广泛的摘要模型，并得出了一些令人惊讶的发现。
Abstract
In this paper, we propose FFCI, a framework for automatic summarization evaluation that comprises four elements:
faithfulness
,
focus
,
coverage
→