Nov, 2022

去人格化自然语言处理:语言模型能否有意识?

TL;DR对于最近有人声称基于 Transformer 模型体系结构的预训练语言模型 LaMDA 具有感性的争论中,我们认为这种语言模型不能具有感性或意识,LaMDA 没有表现出其他类似模型的进展,我们通过集成信息理论分析变压器结构来证明这一点,我们认为意识的主张是 NLP 报道中使用人类描述语言的趋势的一部分,无论这些主张的真实性如何,都需要考虑语言建模的进展和相关的伦理问题。