Sep, 2023

ChatGPT 对抗 Bard、Bing、Claude 2、Aria 和人类专家。科学写作上人工智能聊天机器人的表现如何？(版本 23Q3)

PDF
TL;DRAI chatbots in scholarly writing were analyzed, revealing their proficiency in recombining existing knowledge but their limitations in generating original scientific content; the size of LLMs has plateaued, highlighting the challenges in emulating human originality, though the evolution of LLM-powered software is expected to improve this.
发现论文，激发创造
  • 使用现成的机器学习工具，以超过 99% 的准确率区分作者身份：ChatGPT 还是学术科学家？

    通过监督分类的方法，我们开发了一种方法来辨别人工智能生成的文本和学术科学家的文本，其中包含 20 个特征，最终建立了一个模型准确地判断了文本的作者，使得误分类文档的数量减少至原来的 1/20。

    Mar, 2023

  • 聊天 GPT 和新学术现实：AI 撰写的研究论文及大型语言模型在学术出版中的伦理道德

    本文讨论 OpenAIs ChatGPT，一种用于文本型用户请求（即聊天机器人）的生成式预训练转换器。讨论了 ChatGPT 及类似模型背后的历史和原则，以及其对学术界和学术研究出版的潜在影响。ChatGPT 被认为是自动准备论文和其他类型学术手稿的潜在模型。此外，还讨论了可能出现的潜在伦理问题，并将其置于人工智能、机器学习和自然语言处理的更广泛进展的背景之下。

    Mar, 2023

  • 人工智能和 ChatGPT 生成文章与人类写作的大规模比较

    通过对比 ChatGPT 与人类写作的 argumentative 学生论文，我们系统地评估了 AI 生成内容的质量，结果表明 ChatGPT 生成的论文在质量上要高于人类写作。

    Apr, 2023

  • 人工智能与人类的区别 —— 科学内容生成的差异分析

    本文针对科学文献中 AI 生成的文本与人类编写的文本之间的差距进行了探讨，提出了一个通过语法、语义和语用来区分 AI 文本的框架，进而将提取到的特征用于分析两种不同类型的内容，发现 AI-generate 的科学文本在深度和总体质量方面还有待提高，并存在事实性问题等方面的差距，同时我们发现 AI-generate 的科学文本和人类编写的科学文本之间存在 “写作风格” 方面的差距，从而提出一些模型和分布无关的特征来用于其他领域的检测任务，这些研究结果有助于指导 AI 模型的优化，以产生高质量的文本，同时也有助于解决相关的伦理和安全问题。

    Jan, 2023

  • 紧急 AI 辅助话语：一个以 ChatGPT 为例的第二语言写作者案例研究

    ChatGPT 对于学术写作过程的帮助以及如何保持学生独立的作者声音进行了探讨，并且强调了 AI 工具（如 ChatGPT）对于语言学习者的学术写作的潜力。

    Oct, 2023

  • 人工智能对学术研究和出版的影响

    通过对最近的跨学科文献进行综述，本文考察了人工智能技术（例如 ChatGPT）对学术写作和出版产生的重大影响，着重讨论了人工智能被用于学术不端行为时的伦理考虑以及在学术论文的写作、编辑和审查中使用人工智能时所需的监督。研究结果强调了出版商、编辑、审稿人和作者之间合作使用人工智能的需要，以确保该技术在道德和生产力方面的合理使用。

    Jun, 2024

  • ChatGPT 与人类撰写文本：可控文本摘要与句子风格转移的洞见

    本文研究 ChatGPT 在不同目标受众和写作风格下的表现，发现相比人类撰写的文章，ChatGPT 生成的样本在词汇类型分布等方面存在差异，并可能出现事实错误或幻觉。

    Jun, 2023

  • ChatGPT 和 Bard 能否生成对齐的评估题目？针对人类表现的可靠性分析

    本文测试了 ChatGPT 和 Bard AI 技术在评估和教学领域的应用。使用 ICC 构建了性能指标来衡量它们的可靠性，结果显示，这两款 LLM 工具在感知和评估写作提示复杂性方面相对人类评分标准具有较低的一致性。

    Apr, 2023

  • ChatGPT 是否可用于生成科学假设？

    本研究探讨了大型语言模型是否能够进行创造性假设生成，并提出未来科学研究将可能与自动化实验和对抗式同行评审相结合的一种新型 “假设机器” 协同工作模式。

    Mar, 2023

  • 透过大学的政策、资源和准则看 ChatGPT

    调查美国大学关于在教育中使用 ChatGPT 的学术政策和指南，发现大多数大学对生成式人工智能的整合持开放但谨慎的态度，并表达了他们对道德使用、准确性和数据隐私的担忧，提供了各种资源和指南，包括教学大纲模板 / 样本，研讨会和讨论，共享文章和一对一咨询，重点关注一般技术介绍、道德关注、教学应用、预防策略、数据隐私、限制和探测工具。

    Dec, 2023