Feb, 2024

InstructGraph: 通过图形中心的指令调优和偏好对齐,提升大型语言模型

TL;DR通过指令调整和偏好对齐,InstructGraph 框架赋予大型语言模型(LLMs)图推理和生成能力。该框架中,我们首先提出了结构化格式化语言器来统一所有图数据,并且引入了图指令调整阶段来指导 LLMs 解决图推理和生成任务。最后,我们针对图任务中的潜在幻觉问题抽取了负例样本以进行偏好对齐,以提高模型输出的可靠性。通过多个图相关任务的广泛实验,InstructGraph 实现了最佳性能,并且超过 GPT-4 和 LLaMA2 分别 13% 和 38% 以上。