Apr, 2025

从证据到信念:一种贝叶斯认识论方法研究语言模型

TL;DR本文从贝叶斯认识论的角度探讨语言模型的知识,研究了语言模型如何在不同信息量和可靠性的证据面前调整其信心和回应。研究表明,语言模型在面对真实证据时能够较好地遵循贝叶斯确认假设,但在不同类型证据下未能完全遵循其它贝叶斯假设,这种表现差异可能源于模型对黄金证据的偏见及其依赖于相关性程度。