Feb, 2024

通过下一个词预测学习语义能力的可行性研究 —— 以蕴涵为例

TL;DR理论上,LMs 通过其训练数据中的共现模式推导文本的语义信息;本研究调查其理论是否可用于从神经 LMs 中解码蕴含关系,结果显示与他们类似的测试可以在多个数据集和 LMs 上解码语义蕴含关系,这表明 LMs 隐含地建模了语义方面以预测句子共现模式的语义影响。