Jun, 2024

CollabStory: 多 LLM 协作故事生成与作者分析

PDF
TL;DRLLM 模型间的合作创作及其影响是一个重要的研究方向，本研究生成了 CollabStory 数据集，用于探索单一作者与多作者间合作创作的情景，并提出了解决多 LLM 模型合作创作的基线方法。
llm-llm collaborationcollabstory datasetmulti-author writingauthorship-related tasksplagiarism detection
发现论文，激发创造
  • 大语言模型时代的创造力支持：涉及新兴作家的实证研究

    通过实证用户研究 (n=30)，我们调查了现代大型语言模型 (LLMs) 在协助专业作家方面的效用，发现作家在规划、翻译和审阅等认知活动中都寻求 LLMs 的帮助，尤其在翻译和审阅方面 LLMs 更为有帮助，同时我们的研究结果也强调了利用 LLMs 进行创意写作辅助的未来研究方向。

    Sep, 2023

  • 我们来谈谈：探索竞争 LLM 代理商的自发合作

    最近的研究发现，由大型语言模型（LLMs）驱动的代理人具有模拟人类行为和社会动态的能力。我们通过三个案例研究揭示，即使在竞争环境中，LLM 代理人也能够自发地建立合作关系。这一发现不仅展示了 LLM 代理人模仿人类社会中竞争与合作的能力，而且验证了计算社会科学的一个有前途的愿景。具体来说，它表明 LLM 代理人可以用来模拟人类社会交互，包括自发的合作，从而为社会现象提供洞察力。

    Feb, 2024

  • 通过讲故事运用大型语言模型学习复杂法律概念

    将大型语言模型应用于法律教育，通过讲故事的方式帮助非专家了解复杂的法律概念，发现这种方法能够提高对法律概念的理解和对法律的兴趣，并具有较高的保留率，对法律领域以及其他领域的教学和学习具有重要意义。

    Feb, 2024

  • 设计人工智能协作写作数据集以探索语言模型能力

    通过大数据集的筛选和分析，本论文提出了一种检验大语言模型创造能力的方法，并演示了如何使用 CoAuthor 数据集来验证 GPT-3 的能力以及在创作中的表现。

    Jan, 2022

  • 多语言模型的协同解码学习

    我们提出了一种方法，通过在标记级别交替生成来教授多个大型语言模型（LLM）进行协作。我们将下一个标记由哪个 LLM 生成的决策建模为潜在变量。通过在潜在变量模型下优化训练集的边际似然，基础 LLM 自动学习何时生成自己，并在需要时调用其中一个 `` 助理 '' 语言模型进行生成，无需直接监督。解码过程中的标记级别协作允许以适应特定任务的方式融合每个模型的专长。我们的协作解码在跨领域设置中特别有用，其中广义的基础 LLM 学习调用领域专家模型。在指令遵循、领域特定问答和推理任务中，我们展示了联合系统的性能超过各个模型。通过对学习到的潜在决策进行定性分析，我们展示了使用我们方法训练的模型呈现了几种有趣的协作模式，例如模板填充。我们的代码可在此 URL 找到。

    Mar, 2024

  • DataTales：探究大型语言模型在编写数据驱动文章中的应用

    本研究探讨使用大型语言模型（LLMs）支持数据驱动文章创作的可行性和感知价值，设计了一个原型系统 DataTales，通过使用 LLMs 生成与给定图表相关的文本叙述，并通过与 11 名专业人士进行定性研究评估了该概念，从中提炼了 LLMs 作为有价值的数据驱动文章创作助手的优点和机会。

    Aug, 2023

  • 合作评估：探索大型语言模型与人类在开放式生成评估中的协同作用

    为了解决开放式自然语言生成任务中评估标准不一致的挑战，我们提出了一种协同评估流程 CoEval，涉及特定任务标准的清单设计和文本的详细评估，其中大型语言模型生成初步的构思，而人类进行审查，结果显示，通过利用大型语言模型，CoEval 能够高效地评估长文本，节省时间并减少人类评估的异常值，人类审查仍然起着重要作用，以最终确保可靠性。

    Oct, 2023

  • 多智能体协作：发挥智能 LLM 代理的力量

    本文提出了一种通过多智能体系统来增强大型语言模型（LLMs）能力的新框架，并通过人工智能领域的案例研究展示了这一框架的实用性和多样性。

    Jun, 2023

  • LlM 中创意写作评估的不寻常对决

    本文通过在英语创意写作任务上评估一系列最新的、针对指令进行调整的大型语言模型（LLMs），并将它们与人类作家进行比较，得出结果显示，某些商业 LLMs 在大多数评估维度上能够与甚至略胜于人类作家，但开源 LLMs 落后；人类在创意性上保持领先地位，只有前三个 LLMs 能够以人类水平理解幽默。

    Jun, 2024

  • 人工智能与人类协作的分类系统构建：以专业写作助手为例研究

    通过人工智能协作共同开发的领域特定写作助手分类系统来解决大型语言模型在商业背景下理解能力的限制，为不同利益相关者提供定制化的大型语言模型驱动的写作辅助功能。

    Jun, 2024