coherence evaluation | BriefGPT

关键词coherence evaluation

搜索结果 - 6

ACLCoUDA: 通过统一数据增强评估连贯性
基于语言模型的大数据时代，一种名为 CoUDA 的数据增强框架针对语篇连贯性评估，通过全局和局部方面的增强策略，包括生成式模型生成增强样本以及综合评估等手段，取得了在连贯性评估任务中的最先进性能。
PDF3 months ago
结构度量解锁：引入 PDD，一种用于位置语篇连贯性的自动度量
提出一种新的，用于量化两篇长篇文章之间的话语分歧的自动度量标准，该指标在代表性领域的三个数据集上进行了广泛的实验，证明与人类的偏好和 GPT-4 的连贯性评估更加一致，并且胜过了现有的评估方法。
PDF5 months ago
推荐的自然语言解释中的连贯性问题
提供自然语言解释对于非专业用户尤为有用，然而目前常用的评估方法未能充分捕捉解释和预测之间的连贯性，因此本文通过人工验证、自动连贯性评估方法和基于 Transformer 的新方法阐明了这个问题，并进行了实验评估，结果表明该方法明显提高了解释
PDF6 months ago
上下文化主题一致性度量
本研究提出了一种基于 LLM 的方法，受到人类主题评估的启发，实现了语境化主题连贯性（CTC）度量，其在自动化主题连贯性方法方面表现出色，可应用于短文本，并不容易受到高分却无意义的主题干扰。
PDFa year ago
ACL重新思考自监督目标，用于可泛化的连贯建模
本文研究利用基本的神经模型架构，结合对比学习中的负采样和硬负采样策略以及大规模全局负采样队列的增强效应，在任务独立测试集上进行一致性模型的评估和下游任务的改进。结果表明，增加负样本密度和使用全局负采样队列结合硬负采样可以显著地提高模型的性能
PDF3 years ago
ACL基于神经网络的 RST 方法用于衡量篇章连贯性
利用 Rhetorical Structure Theory (RST) 树和关系对话语连贯性进行评估，表明在分类连贯性方面增加银标准 RST 特征可以提高准确性，我们开发了一个 tree-recursive neural model，即
PDF4 years ago