Apr, 2023

使用GPT-4进行指令调优

TL;DR本文利用GPT-4生成的instruction-following数据进行大型语言模型finetuning,发现相较于之前最先进模型生成的数据,52K的英文和中文instruction-following数据可以显着提高新任务的零-shot性能。同时我们公开了GPT-4生成的数据以及我们的代码库。