视听语言模型中的声音象征:Kiki 还是 Bouba?
先通过有监督的表示对齐方法确定两组个体是否共享某一类别的基础,然后解释了它们在哪些方面存在差异;探究了先天性失明对非感知和感官相关的语言领域的词汇意义改变以及相关的语义转变;利用 GloVe 语言模型和线性探测分析揭示了盲人与视觉人群对动作、视觉、触觉相关动词以及跨感官知识获取动词的概念语义的差异。
Mar, 2024
本文提出了一种计算模型,该模型通过 Metropolis-Hastings 命名游戏和跨情景学习,使代理之间的组合性出现,并使语词知识生成,从而实现了类别形成和交际式通信。
Jun, 2023
本文提出了学习与婴儿词汇学习机制相似的视觉 - 语言概念系统的方法,包括了在线学习视觉对象和词汇之间的关联以及自监督学习的语义表示等。作者在目标词与词语匹配以及零样本学习任务中进行了定量和定性检验,结果表明该模型在性能方面优于其他基础模型并实现了概念系统的拓扑对齐。
Jul, 2022
通过引入基于认知科学文献的方法工具,本研究介绍了一项基准测试来评估人工模型的偏差,并使用这个基准测试评估了 CLIP 模型。我们发现,虽然单词嵌入的图像会扭曲 CLIP 模型在不同类别级别上的图像分类,但这种影响不依赖于图像和嵌入单词之间的语义关系,这表明 CLIP 视觉处理中的语义词表示与图像表示不共享。
Jan, 2022
该研究介绍了计算机模拟在语言演化、认知科学、机器学习、机器人等领域的应用,提出了几种代表性模型的论点和已知结论。研究发现一些假设和方法限制了模型的成功,认为应重视身体和环境对智能体的影响,并以此为基础,提出了将符号系统建立在行动、知觉以及抽象系统的想法。
Mar, 2023
通过对十个不同语系的多样数据集和最先进的自动同源词和音序对照检测方法的建立,我们首次测试了基于音序对比与基于同源词对比的方法在语系重建中的性能,并发现从同源词重建的语系与黄金标准语系之间的拓扑距离平均上缩短了约三分之一。
Feb, 2024
本文提出了一种方法来处理跨模态输入的原始流,以产生物体的细分并与高级概念相关联,以学习用户的颜色和形状的概念,并表明该模型可以从少量的物理演示中推广到识别新单词的物理指示。
Jun, 2017
通过信息理论和深度学习,本研究考察了生物符号学中的选择过程,特别是儿童词汇学习偏见的弱化和 Zipf 词汇分布定律的影响因素。研究结果也为未来在生物符号学其它方面的实验研究提供了参考。
May, 2021