Feb, 2024

GATE X-E：弱性别语言的性别平等翻译挑战集

PDF
TL;DR神经机器翻译在质量和应用方面不断改进，但性别偏见的无意中延续仍是一个重要问题，尤其缺乏评估和减轻策略的基准，本研究通过引入 GATE X-E 扩展了 GATE 语料库，提供了从土耳其语、匈牙利语、芬兰语和波斯语到英语的人工翻译及其女性化、男性化和中性化变体，开发了基于 GPT-4 的翻译性别重写解决方案，并使用 GATE X-E 进行评估，倡导进一步研究性别去偏见问题。
发现论文，激发创造
  • 评估性别中性语言翻译为英语的性别偏见

    机器翻译在质量和应用方面不断取得进步，然而无意中传递性别偏见仍然是一个重大问题。为了弥补这一缺口，我们介绍了 GATE X-E，它是 GATE 语料库的扩展，包含了从土耳其语、匈牙利语、芬兰语和波斯语翻译成英语的人工翻译，并针对每种可能的性别解释提供了女性、男性和中性变体。我们还呈现了一个基于 GPT-3.5 Turbo 的英语性别重写解决方案，并利用 GATE X-E 对其进行了评估。我们开放源代码以鼓励进一步研究性别去偏见。

    Nov, 2023

  • GATE: 一个针对性别模糊翻译示例的挑战数据集

    本文提出 GATE 语料库，包含多样化的性别模糊源句子，以及多个可能的目标语转化，主要用于机器翻译中性别歧视和语言多样性的评估和研究。

    Mar, 2023

  • 用新形态和大型语言模型增强性别包容性机器翻译

    机器翻译模型在使用具有性别化语法的语言进行翻译时存在性别偏见，本文提出了一种公平的机器翻译方法，使用新形态素实现性别包容语言，并探索了使用大型语言模型将英文翻译成意大利文的方法。通过发布 Neo-GATE 资源，我们评估了四种不同类型和不同规模的大型语言模型在这一新颖任务上的优势和劣势。

    May, 2024

  • 对自动性别中性翻译需求的迅速响应

    通过与 GPT-4 模型比较，我们通过广泛的手动分析实证揭示了当前机器翻译系统在生成性别中立翻译时的固有限制，并为提示中立性所涉及的潜力和挑战提供了有价值的见解。

    Feb, 2024

  • 机器翻译中性别偏见的评估

    本研究利用两个共指解析数据集，通过 8 种有语法性别的目标语言中的形态分析，第一次提出了机器翻译中性别偏见的挑战集和评估协议，并发现四个流行的工业机器翻译系统和两个最新的学术机器翻译模型在所有测试的目标语言上都容易出现性别偏见翻译错误。

    Jun, 2019

  • 架起桥梁：用于评估德语性别公平机器翻译的数据集

    这篇研究主要关注英德机器翻译中性别公平语言的问题，通过丰富一个社区创建的性别公平语言词典和多句子测试实例的研究资源，对两个商业系统和六个神经机器翻译模型进行了评估，发现大多数系统主要产生男性形式，甚少提供性别中立的变体，强调了未来研究的必要性。

    Jun, 2024

  • 机器翻译中的性别偏见与大型语言模型时代

    本章检查了机器翻译在持续性别偏见方面的作用，强调了跨语言环境和统计依赖性所带来的挑战。提供了与传统神经机器翻译方法和作为机器翻译系统的生成式预训练变压器模型相关的现有研究的全面概述。通过在英意翻译环境中使用 ChatGPT（基于 GPT-3.5）的实验，进一步评估了 ChatGPT 目前解决性别偏见的能力。研究结果强调了在机器翻译系统中减少偏见的发展的持续需求，并强调了在语言技术中培养公平和包容的重要性。

    Jan, 2024

  • 基于 GeNTE 语料库的性别中性机器翻译基准测试

    我们的研究主要关注从英语到意大利语的性别中性翻译，通过提出专门的基准和探索自动评估方法来满足包容性语言的不断增长的需求。我们介绍了 GeNTE，这是一个自然、双语的性别中性翻译测试集，其创建受到有关中性语言感知和使用的调查的启发。基于 GeNTE，我们概述了现有的基于参考的评估方法，突出了它们的局限性，并提出了一种更适合评估性别中性翻译的无参考方法。

    Oct, 2023

  • 评测性别中性代词的翻译性别偏见

    本研究提出了一种用于评估机器翻译系统性别偏见的测试集方案，并构建了一组既不带有偏见性别也不过度偏向一侧的词组，然后通过该方案评估了传统机器翻译系统的性别偏见。

    May, 2019

  • 别忽视语法性别：针对印度 - 英语机器翻译的偏见评估

    神经机器翻译中存在性别偏见，而评估基准主要关注英语作为源语言的翻译，我们提出了为源语言中的语法性别标记量身定制偏见评估测试集的方法，以确定 NMT 模型是否能通过语法性别线索来区分性别。

    Nov, 2023