non-english languages | BriefGPT

关键词non-english languages

搜索结果 - 15

Chumor 1.0: 来自若知吧的真正有趣且具有挑战性的中文幽默理解数据集
通过对 Ruo Zhi Ba 平台上的智力挑战和文化特定笑话进行注释，我们构建了一个名为 Chumor 的数据集，并通过 A/B 测试与两种先进的语言模型 GPT-4o 和 ERNIE Bot 进行人类解释评估，结果表明 Chumor 是对
PDF16 days ago
MindMerger: 非英语语种中高效提升 LLM 推理能力
LLMs 与多语言模型中的外部语言理解能力的融合方法 MindMerger 可提高多语言推理性能。在多个语言推理数据集上的实验证明，MindMerger 相较于其他方法具有更好的性能，尤其对于资源稀缺的语言。在 MGSM 数据集上，不更新
PDFa month ago
加速单语文本生成的多语言语言模型的简单框架
最近大型语言模型的进展不仅在英语中，还在非英语语言中完成了复杂语言任务的执行。然而，大多数语言模型的分词器（如 Llama）在训练时采用的是以英语为中心的语料库，往往会在非英语语言中过度分词。针对这个问题，我们的研究引入了一种新颖的框架，旨
PDF5 months ago
LLaMA 跨越英语：语言能力转移的实证研究
我们通过对 LLaMA 的实证研究发现，在使用不到 1% 的预训练数据时，可以实现与最先进的转移模型相媲美的性能，无论是在知识对齐还是响应质量方面，这一实验结果在十三种资源匮乏的语言中也呈现出相似的趋势。预计实验的结论将有助于开发非英语 L
PDF6 months ago
MEGAVERSE：跨语言、跨模态、跨模型和跨任务进行大型语言模型基准测试
通过评估 GPT-4 和 PaLM2 在 MEGAVERSE 数据集上的表现，研究发现这两个模型在多个任务上超过了 Llama 模型，尤其是在资源稀缺的语言中，其中 GPT-4 在更多的数据集上优于 PaLM2。然而，为了准确评估非英语语言
PDF8 months ago
Chat Vector：为语言模型赋予新的语言聊天能力的简易方法
使用聊天向量 (chat vector) 和计算上高效的方法，将对话模型 (ChatGPT) 与人类偏好对齐，展示了对非英语语言特别是中文的适应性及高效性。
PDF9 months ago
大型多语种模型在跨语言零样本多模态学习中的应用
提出 MPM，一种在低资源语言中训练大型多模态模型的有效训练范例，通过多语言语言模型对仅在英语图像文本数据上预训练的多模态模型实现跨语言的零样本学习，取得了比母语语言的图像文本数据训练的模型还要好的图像文本生成性能。
PDF10 months ago
借助语言对齐将大型语言模型推广到非英语语境
通过建立语言间的语义对齐，提出通过使用非英语训练数据来增强预训练大型语言模型在非英语语言上的能力，并通过实验结果证明此方法在六种非英语语言上超过英语模型 42.50%，在汉语人文任务上超过英语模型 8.2%。同时发现，使用非英语文本作为翻译
PDFa year ago
BayLing：面向大型语言模型的交互翻译，通过跨语言对齐和指令跟踪进行桥接
这篇文章提出了一种新的方法，通过互动翻译任务将英语的语言生成和指令遵循能力转移到其他语言，从而构建面向非英语语言的语言模型 BayLing。实验结果表明 BayLing 在词语翻译和多轮指令跟进等任务上都表现出了优异的性能。
PDFa year ago
Polyglot-Ko 技术报告：开源大规模韩语语言模型
Polyglot 韩文模型是为了解决多语言语言模型中的非英语语言表现差距而开发的，一个特定重点是韩文的模型
PDFa year ago
SIGIR跨语言转移开放域对话生成中减轻灾难性遗忘的提示学习
本文探讨了如何在有限数据的情况下，使用少量样本跨语言迁移学习和多任务学习来进行开放域对话生成，同时发现了这两种方法在实验中的灾难性遗忘问题，并提出了一种简单有效的提示学习方法，以应对这一问题。实验结果表明，该方法在六种语言中均表现出了较好的
PDFa year ago
CLICKER: 基于关注的跨语言常识知识转移
提出了 CLICKER 框架，通过将非常识知识与常识知识区分开来，最小化了英语和非英语语言在常识问答任务中的性能差距，实验结果表明 CLICKER 对于非英语语言的跨语言常识推理任务取得了显着的改进。
PDFa year ago
MM利用机器翻译在审议过程中评估抽象摘要模型
我们研究了非英语的决策过程汇总，使用了抽象总结和机器翻译技术，证明了这种方法能够产生流畅、连贯和相关的总结，适合生产环境中运用。
PDF3 years ago
COLING利用多语言 Transformer 和自动翻译增强数据的非英文推文情感分析改进
本文提出利用多语言 Transformer 模型，通过使用自动翻译进行数据增强，来适应非英语语言中的小型推特语料库，以提高转换器的效果。
PDF4 years ago
ACL使用中间稳定化技术进行跨模态语言生成，以实现网络规模的语言覆盖
研究问题是如何解决数据饥渴模型与缺乏非英语注释的问题，提出了一种名为 PLuGS 的方法，该方法直接利用英语注释（gold data）及其机器翻译版本（silver data）进行训练，从而在运行时生成目标语言字幕。该方法在使用 Open
PDF4 years ago