mt evaluation | BriefGPT - AI 论文速递

关键词mt evaluation

搜索结果 - 8

COLING多维机器翻译评估：韩语模型评估和资源
通过提供一个英韩语言对的 1200 句 MQM 评估基准，将机器翻译评估重新定义为使用 SOTA 语言模型同时预测多个 MQM 分数的多任务问题，在参考 MT 评估和无参考质量估计（QE）设置中，我们发现无参考设置在风格维度上优于参考设置，
PDF3 months ago
经过训练的机器翻译度量指标学会适应机器翻译的参考译文
通过对机器翻译（MT）的人类评估训练的神经度量标准进行控制实验，将未经人类评估培训的基准度量标准（Prism）与经过培训的同一度量标准（Prism+FT）进行比较。令人惊讶的是，Prism+FT 对于机器翻译参考文献的鲁棒性更强，而这在 M
PDF7 months ago
MuLER: 详细和可扩展的基于参考文献的评估
MuLER 是一种将文本生成的评估指标转化为细粒度分析工具的新方法，可量化所选度量标准对特定错误类型（例如，位置名称错误）的惩罚程度，并通过分析展示了其在机器翻译等任务中的有效性和可用性。
PDFa year ago
人类评估机器翻译中的超越力量
本文介绍了一种称为中期测试的评估方法，该方法在具有较小预算的情况下提供了更有效的评估方式，并可获得更高的评估功率和效率，这在机器翻译评估领域非常有用。
PDF2 years ago
ACL困难感知机器翻译评估
提出一种考虑翻译难度的机器翻译评估方法，结果显示在 WMT19 上表现出色。
PDF3 years ago
ACL机器翻译研究的科学可信度：769 篇论文的元评估
本文是机器翻译评估的第一篇大规模元评估，发现了在过去十年中自动 MT 评估的做法已经发生了巨大的变化和令人担忧的趋势。我们提出了指南来鼓励更好的自动 MT 评估，并提出了一个简单的元评估评分方法来评估其可靠性。
PDF3 years ago
基于词向量的词对齐段级机器翻译评估
利用词嵌入进行机器翻译的段落级别评估，三种对齐方法的实验结果显示我们的方法优于以往使用词嵌入的方法。
PDF7 years ago
COLINGWord2Vec vs DBnary：使用矢量表示或词汇资源增强 METEOR？
本文提出了一种将词汇语义资源和分布式表示结合在一起的方法，用于机器翻译 (MT) 的评估。通过对一种广泛使用的 MT 评估指标 METEOR 的丰富，展示了分布式表示是 MT 评估的一种良好选择，甚至可以带来有趣的额外信息。此外，本文还提供
PDF8 years ago