Jul, 2024
“Kiki”的形象是什么样的？语言与视觉形状之间的跨模态关联研究
What does Kiki look like? Cross-modal associations between speech sounds
and visual shapes in vision-and-language models
TL;DR本研究解决了跨模态关联在语言处理和学习中的重要性，特别是“bouba-kiki”效应的展示。通过对四种视觉语言模型的实验，探讨了这些模型是否编码人类的视觉与语言偏好，结果表明模型特征可能影响效果。此研究为理解人类认知中的bouba-kiki效应及未来视觉语言模型的发展提供了新见解。