EMNLPNov, 2023
触发语言:什么语言属性使得提示成功?
The language of prompting: What linguistic properties make a prompt successful?
Alina Leidinger, Robert van Rooij, Ekaterina Shutova
TL;DR在这项研究中,我们调查了不同规模、预训练和指导调优的 LLMs 在在语义上等效但语言结构不同的提示上的性能,发现 LLMs 的性能不能通过困惑度、词频、歧义或提示长度来解释,并提出了对提示研究更健壮和综合的评估标准的建议。