linguistic capabilities | BriefGPT

关键词linguistic capabilities

搜索结果 - 11

关于对文本驱动强化学习应用微调语言模型效果的研究
本文研究了基于文本的强化学习，讨论了语义理解和语言能力对强化学习代理的训练效率以及在类似语义训练游戏中的表现的影响，旨在为文本强化学习情景下的代理微调开发更好的策略。
PDF3 months ago
人类与 ChatGPT 生成的对话的语言比较
研究探讨人类和 LLM 生成的对话之间的语言差异，并使用 ChatGPT-3.5 生成的 19.5K 对话作为 EmpathicDialogues 数据集的补充。研究使用了语言查询和词频统计（LIWC）分析，在 118 个语言类别上比较 C
PDF5 months ago
GPT4Vis：GPT-4 能为零样本视觉识别做什么？
本研究对 GPT-4 在零样本视觉识别任务中的语言和视觉能力进行了评估，发现利用 GPT-4 生成丰富的文本描述明显提高了零样本识别性能，并且在视觉熟练度方面，GPT-4V 在 16 个基准数据集中表现介于 OpenAI-CLIP 的 Vi
PDF7 months ago
扰动样本揭示语言模型共享的不变性
通过揭示语言处理模型对特定语言能力的可解释的输入扰动具有的共同不变性来比较两个自然语言处理模型，并研究模型的改变如何影响多个明确定义的语言能力，并且大型语言模型具有多种不变性可能是最近大型语言模型取得成功的关键原因之一。
PDF8 months ago
EMNLP一个对于大型语言模型形态学能力的多语言调查：计算 ChatGPT 中 Wugs 的错误
大型语言模型 (LLMs) 的语言能力令人印象深刻，但在对其能力进行系统研究方面尚有较少的探讨。本研究通过对四种不同类型的语言 (英语、德语、泰米尔语和土耳其语) 进行首次严格分析 ChatGPT 的形态能力，发现 ChatGPT 在各语言
PDF8 months ago
语法习得中的突然降低：MLM 中的相位转变和简化偏差
通过对屏蔽语言模型（MLMs）中的句法结构的演化进行分析，研究论文发现一种自然生成的属性 —— 句法关注结构（SAS），并证明这种属性对语法能力的发展具有因果关系。另外，研究还发现，SAS 在训练过程中会与其他有益特征和能力竞争，短暂抑制
PDF10 months ago
BHASA: 东南亚语言文化综合评估系统
在东南亚语言方面，BHASA 提供了一个综合的语言和文化评估套件，其中包括自然语言理解、生成和推理等任务的 NLP 基准、语言诊断工具包 LINDSEA 以及文化诊断数据集，初步实验发现 GPT-4 在东南亚语言方面的语言能力、文化表达和敏
PDF10 months ago
LLM 认知判断与人类不同
GPT-3 和 ChatGPT 在认知科学文献中对有限数据归纳推理任务的能力被调查，结果表明这些模型的认知判断并非类似于人类。
PDFa year ago
BERT 之后：其他木偶对语言的理解
利用 oLMpics 基准和心理语言学探测数据集，我们对包括 T5、BART 和 ALBERT 在内的 29 个模型进行了多样化的分析。结果表明，这些模型都无法以零样本的方式解决组成性问题，并且全局模型决策也不能预测模型的语言能力。
PDF2 years ago
ACL多语言清单：生成与评估
本文介绍了一种使用机器翻译自动提取目标语言的 CheckList 模板的算法，以及将其与不同水平的人工干预下创建的 CheckList 进行比较的度量方法，并探讨对印地语和其他九种语言进行 CheckList 创作的不同方法，最终得出 TE
PDF2 years ago
超越准确度：使用 CheckList 进行 NLP 模型的行为测试
本文介绍了一种基于行为测试原则的 NLP 模型测试方法 - CheckList，它包括常规语言能力和测试类型矩阵以及可用于快速生成大量不同测试用例的软件工具。用户研究表明，与没有使用 CheckList 的用户相比，使用 CheckLis
PDF4 years ago