cognitive capacities | BriefGPT

关键词cognitive capacities

搜索结果 - 5

ACL语言模型模拟特定的认知模式：可预测性度量如何与个体差异相互作用的研究
通过整合语言用户的认知能力信息，重新评估了从多种语言模型中估计出的意外性和熵的预测能力，以读时数据作为对处理工作的度量，研究发现大多数情况下，整合认知能力提高了意外性和熵对读时的预测能力，并且研究结果表明分析的语言模型模拟了具有较低语言智力
PDFa month ago
辅助任务需求掩盖了较小语言模型的能力
发展心理学家们就认知能力（如语言理解或心灵理论）何时出现进行了辩论。这些辩论往往取决于 “任务需求” 的概念 —— 与执行特定评估相关的辅助挑战 —— 这可能掩盖了儿童潜在的能力。在衡量语言模型（LM）的能力时也会遇到类似问题：对任务的表现
PDF3 months ago
认知视角下的持续学习基准评估
连续学习模型的认知能力和评价度量方法不匹配，为了解决这些问题，提出了将模型认知能力和评价度量整合成统一评价范式的方法，通过实验证明目前没有方法能够满足所有要求，对模型性能的影响因素进行了讨论并提供了改进连续学习模型的指导。
PDF7 months ago
运行大型语言模型上的认知评估：要注意的事项和不要做的事项
本文描述了评估使用基于语言的行为评估方法来评估大型语言模型（LLMs）认知能力的研究方法考虑因素。作者通过三个案例研究（常识知识基准、心理理论评估和语法一致性测试）描述了在将认知测试应用于 LLM 时可能出现的常见问题。作者还列出了 10
PDF7 months ago
大型语言模型中的心智理论：考察 11 种当前最先进模型与 7-10 岁儿童在高难度测试上的表现
我们通过测试 11 种基于基础模型和指令调整模型的能力来探讨大型语言模型（LLMs）在理解意图和信念（即心智理论）等认知能力方面的程度。我们发现，GPT 系列的调整模型表现优于其他模型和儿童。基础模型大多无法解决心智理论任务，即使有专门的提
PDF8 months ago