Jul, 2023

使用 ChatGPT 的多语言旅游协助：比较印地语、泰卢固语和卡纳达语的能力

PDF
TL;DR该研究调查了 OpenAI 的 AI 语言模型 ChatGPT 在将英语翻译成印地语、泰卢固语和卡纳达语方面的效果，旨在帮助在印度多元文化环境下的游客。研究中使用了一个包含 50 个问题的测试集，涵盖了常识、食物和旅行等不同领域，这些问题由五名志愿者进行准确性和流畅性评估，并将得分换算成 BLEU 分数。BLEU 分数评估机器生成的翻译结果与人工翻译的接近程度，得分越高表示翻译质量越好。研究结果显示，印地语的翻译表现最佳，准确性和流畅性都优于其他语言，而泰卢固语的翻译则稍逊一筹。人工评估者对翻译结果的准确性和流畅性进行了评价，为语言模型的表现提供了全面的观点。
chatgpttranslationindiahinditelugu
发现论文，激发创造
  • 跨语言评估 ChatGPT 的数学能力

    本文评估了 ChatGPT 在印地语、古吉拉特语和马拉地语等不同语言中的数学能力。我们探索了 ChatGPT 在多种自然语言中解决数学问题的能力，并使用思维链提示来确定它是否像在英语中那样增加了回答的准确性，并提供了当前的限制。

    May, 2024

  • 大型语言模型对泰卢固语熟练度的评估：ChatGPT 与 Gemini 的比较分析

    通过比较大型语言模型在特鲁古语中的能力，研究旨在找出能够更深入理解特鲁古语法结构、具备更广泛词汇量、在写作和推理等任务中表现出色的语言模型，以及其适用于真实语言交互的能力，并评估其适应性和推理能力，为多语言 AI 能力的讨论提供见解，为开发能够无缝融入特鲁古语社区的大型语言模型铺平道路。

    Apr, 2024

  • PICT@DravidianLangTech-ACL2022：德拉维达语言的神经机器翻译

    本文介绍了关于南印度德拉维达语系机器翻译的研究成果，通过针对五种不同德拉维达语系的机器翻译和使用 Seq2Seq 模型进行训练，我们在其中三项子任务中名列第一，并以 BLEU 分数作为评估指标测试了模型的准确性。

    Apr, 2022

  • 评估涉及英语和印度语的大型语言模型的翻译能力

    通过使用机器翻译作为涉及英语和 22 种印度语言的任务，我们探索了大型语言模型的多语言能力，研究了原始模型的翻译能力和上下文学习能力，通过参数高效的微调方法和完全微调，我们确定了最佳性能的大型语言模型。结果表明，大型语言模型在包括目前在 LLMs 中代表较少的语言的机器翻译能力方面取得了显著的进展。

    Nov, 2023

  • ChatGPT 在机器翻译中存在性别偏见，忽略了非性别代词：以孟加拉语和其他五种低资源语言为例发现

    本研究基于六种语言的研究，检验 ChatGPT 在翻译中性代词方面的准确性，发现 ChatGPT 在将中性代词转换为 'he' 或'she' 时会透过职业或行为刻板印象体现性别偏见，在其他语言无法正确地把英文中性代词 'they' 翻译为相应中性代词，在性别无关信息缺失的情况下存在性别偏见，建议未来的 AI 翻译工具设计者以人为本。

    May, 2023

  • 使用 ChatGPT 作为 Easy Language 翻译的 CAT 工具

    研究使用 ChatGPT 将市民导向的行政文本翻译成了德语简化易语言，使用语言和整体两种策略进行翻译，并对生成的文本进行质量分析，发现生成的文本比标准文本更易于理解，但仍未完全符合规定的简化易语言标准，而且内容有时不正确。

    Aug, 2023

  • ChatGPT 在超越英语方面的综合评估：多语言学习中的大型语言模型

    本研究评估了多语言文本处理技术的热门系统 ChatGPT 在 37 种不同的语言中进行的 7 项不同任务的表现，揭示了其在不同 NLP 任务和语言方面的表现与其他模型相比较差，需要进一步的研究来发展更好的模型和了解多语言学习。

    Apr, 2023

  • ChatGPT 是否能与神经机器翻译匹敌？一项比较研究

    通过比较 ChatGPT 和主流神经机器翻译（NMT）引擎将中文外交文本翻译成英文，本文评估了大型语言模型在翻译方面的能力。研究采用四个自动化度量和基于错误类型和六个分析指标的人工评估来检验 ChatGPT 和 NMT 引擎的翻译质量。研究结果表明，在不同的提示下，自动化度量对 ChatGPT 产生了类似的结果，而当提供翻译任务的示例或上下文信息时，人工评估者更倾向于给 ChatGPT 较高的评分。自动化度量与人工评估维度之间的两两相关性结果弱且不显著，这表明了两种翻译质量评估方法之间的差异。这些发现为 ChatGPT 作为一种可靠的机器翻译工具以及提示工程对其性能的影响提供了有价值的见解。

    Jan, 2024

  • 发挥 ChatGPT 在翻译中的威力：一项实证研究

    本文探究了如何用 ChatGPT 辅助机器翻译，提出了多种翻译提示。实验结果表明，ChatGPT 在高资源语言翻译方面的表现与专业翻译系统相当或更好，在低资源翻译方面略逊于专业翻译系统，并在多参考文献翻译和特定领域翻译方面表现出优异的性能。 此外，我们进行了几个快速提示，表现出不同基础提示的一致改进。这项工作提供了 ChatGPT 在翻译方面仍然具有巨大潜力的实证证据。

    Apr, 2023

  • 聊天机器人对话回应的评分

    在本文中，我们通过提交 60 个提问并基于三项机器翻译评分标准（BLEU，METEOR 和 ROUGE）对 ChatGPT 的回答进行了分析，结果显示出与人类典型反应相比，ChatGPT 在回复和翻译方面的能力虽然显著，但仍有所欠缺。

    Feb, 2023