language-specific models | BriefGPT

关键词language-specific models

搜索结果 - 5

低资源语言程序语言理解的基准测试：土耳其语案例研究
通过使用自动翻译工具从 2,000 篇文章扩充到 52,000 篇，我们针对土耳其编程指南进行了个案研究，生成了包含链接动作、目标推断和总结等多个任务的关于土耳其编程指南的语料库，并实施了强大的基准模型，发现针对步骤指令文本的语言专用模型在
PDF9 months ago
HAE-RAE Bench：韩国知识在语言模型中的评估
通过在 HAE-RAE 评估中发现，相较于全面的通用模型 GPT-3.5，大规模的语言特定模型 (LLSMs) 在语言特定知识检索方面展现出类似的性能水平，强调了使用同质化语料库来训练专业级语言特定模型的重要性，但较小的 LLMs 在生成结
PDF10 months ago
EMNLPMFAQ：多语言 FAQ 数据集
本文提出了第一个公开的多语言 FAQ 数据集，并采用 Dense Passage Retrieval 的类似设置和测试各种双编码器。实验结果表明，基于 XLM-RoBERTa 的多语言模型是最好的选择，尤其是对于低资源语言。此外，我们的定性
PDF3 years ago
WikiBERT 模型：多语言深度迁移学习
本文介绍了一种从维基百科数据中创建特定语言 BERT 模型的简单完全自动化流程，并引入 42 个新的这种模型，以往缺乏专门深度神经语言模型的语言。我们使用现有的 UDify 解析器对这些模型的优点进行评估，并发现 UDify 使用的 Wik
PDF4 years ago
什么 [MASK]？理解特定语言的 BERT 模型
本文研究了自然语言处理中的 BERT 模型及其多语言版本 (mBERT)，比较并探究了语言特定的 BERT 模型与 mBERT 在架构、数据领域和任务上的差异和共性，为读者提供了一个直观的综述和交互式展示网站。
PDF4 years ago