Feb, 2023
ChatGPT:全才,非专才
ChatGPT: Jack of all trades, master of none
TL;DR本文研究了ChatGPT在25个多样化的自然语言处理任务(如情感分析、情感识别、态度检测、自然语言推断、词义消歧、语言可接受性和问答)中的表现及其个性化响应能力,并与现有的国际先进水平(SOTA)解决方案进行了比较。结果表明,任务难度越高(低SOTA表现),ChatGPT的损失越大。同时也揭示了ChatGPT偏见,在一定程度上限制了ChatGPT的有效性。