Jul, 2023

我应与谁合作？自然语言处理中学术界和工业界研究合作的比较研究

PDF
TL;DR调查学术界与工业界协作对自然语言处理（NLP）的影响，通过从 NLP 论文中提取机构和引用构建了一个流程，并将其分为学术界、工业界和混合界（学术界与工业界的协作）。我们的实证分析发现，工业界和学术界 - 工业界合作发表的论文数量呈增长趋势，并且这些类型的论文比仅由学术界产生的论文具有更高的影响力。
collaborationacademiaindustrynatural language processing (nlp)empirical analysis
发现论文，激发创造
  • 合作还是企业控制？量化 NLP 对工业产物和贡献的依赖程度

    自然语言处理中智能模型的进步与行业模型的重要性及其对学术论文的影响进行调查，发现与行业的合作在 NLP 出版物中有显著依赖性，并探讨了两种可能的解释。

    Dec, 2023

  • 学术界和工业界在人工智能研究中的互补贡献

    人工智能（AI）在工业和学术界取得了巨大的发展。然而，工业界最近取得的令人瞩目的进展震撼了世界，这使得我们对学术研究在这一领域中的作用有了新的认识。我们通过对过去 25 年间工业界和学术界在 AI 领域产生的影响和类型进行了界定，并建立了一些模式。我们发现，由纯粹由工业研究人员组成的团队发表的论文往往会受到更多的关注，更有可能被高度引用和具有颠覆性引用，而且是几倍于产生最先进模型的可能性。相比之下，我们发现纯粹由学术研究团队发表的论文占了 AI 研究的大部分，并且往往产生更高的创新性工作，其单篇论文成为非传统和非典型论文的可能性是几倍于其他。工业界和学术界在影响力和创新性方面的优势对于子领域、团队规模、资深度和声誉的控制都是稳健的。我们发现学术界和工业界的合作很难复制学术团队的创新性，并且往往与工业团队相似。综上所述，我们的研究结果确定了学术界和工业界在人工智能健康进展中所作出的独特和几乎是无可替代的贡献。

    Jan, 2024

  • 我们所引证的人：“自然语言处理” 与其他学术领域之间的影响桥梁

    量化分析了 NLP 和其他 23 个学科领域（相互）之间的影响程度，结果显示 NLP 的学科交叉合作程度下降，自 1980 年的 0.58 降至 2022 年的 0.31（历史最低），同时 NLP 的学术引用越来越内向，主要引用计算机科学领域的论文，而对语言学、数学和心理学等领域的引用较少，这些研究结果凸显了 NLP 需要紧急反思与其他学科领域的合作交流。

    Oct, 2023

  • 房间中的大象：分析大型科技公司在自然语言处理研究中的存在

    本研究通过对包含 78187 篇自然语言处理出版物和 701 份作者简历的语料库进行分析，研究显示自 90 年代以来业内的存在一直保持稳定，在过去五年中却急剧上升，其中少数公司贡献了大部分的出版物和通过赠款和实习提供了学术研究的资金，研究表明业内对自然语言处理研究的存在和影响非常重要，且发展迅速，这项工作呼吁增加业内在该领域的透明度。

    May, 2023

  • 自然语言处理研究的探索之旅

    通过对 ACL Anthology 中的研究论文进行系统分类和分析，我们提供了自然语言处理领域的研究概况、学科分类，分析了最近的发展，并总结了我们的发现并强调了未来工作的方向。

    Jul, 2023

  • 引证遗忘症：自然语言处理与其他学术领域正经历引证时代的衰退

    研究调查了在 20 个学科领域长达 43 年（1980-2023 年）内引用老旧文献的倾向。我们将 NLP 引用老旧文献的趋势与其他 20 个领域的情况进行比较，分析 NLP 是否与这些领域在引用时间上存在相似的模式或是否可以观察到差异。我们的分析基于大约 2.4 亿篇论文的数据集，揭示了一个更广泛的科学趋势：许多领域在引用老旧文献方面明显减少（例如心理学、计算机科学）。我们将这种减少称为 “引文衰退时期”，类似于经济学家对减少经济活动的定义。这一趋势在 NLP 和机器学习研究中最为明显（引文年龄下降 12.8% 和 5.5%）。我们的结果表明，引用更近期的文献并不是直接由出版率的增长所驱动（跨领域下降 3.4%，人文学科下降 5.2%，形式科学下降 5.5%）- 即使考虑到论文数量的增加。我们的研究结果引发了关于科学界对过去文献的参考情况的质疑，特别是对于 NLP，并且关于忽视老旧但相关研究的潜在后果。我们的数据和演示结果已经公开提供。

    Feb, 2024

  • 检测学术文献中非正式数据引用的自然语言处理流程

    使用自然语言处理技术和 Named Entity Recognition 模型，我们建立了一个系统，对社会科学研究文献中的数据引用进行了探测，构建了一个社会科学文献和相关数据集的数据集，这将有助于未来的数据引用、数据引证网络和数据再利用领域的研究。

    May, 2022

  • NLP 研究者的信仰是什么？NLP 社区元调查结果

    本文介绍了 NLP 社区元调查的结果，涉及人工智能、道德伦理等多方面的问题，结果表明，对于人工智能的重要性、语言模型对语言的理解、语言结构以及归纳偏差对于解决 NLP 问题的必要性等问题，调查结果分歧较大，同时发现社区对于基准的有用性和扩展能力以及解决实际问题的潜力的看法高估，而低估了语言结构、归纳偏差和跨学科科学的重要性。

    Aug, 2022

  • ACL 文献数据库的历时研究：自然语言处理文献的现状

    分析了 ACL Anthology 中自然语言处理研究的文献，关注研究的生产力、关注点和影响，特别强调了 NLP 研究出版物的多元化和包容性，并发现只有约 30％的第一作者是女性，并且即使考虑了经验，女性第一作者的引用量也比男性第一作者低。

    Nov, 2019

  • 基于出版物对企业对 AI 研究的影响分析

    人工智能是我们时代最重要的技术之一，本文通过比较学术界和企业界合作的科研出版物，利用科学计量学数据来衡量企业对人工智能研究的影响，并发现由企业合著的出版物获得更高的引用次数和在线关注度，最终提出了保持学术界与工业界在人工智能研究领域和谐平衡的建议。

    Oct, 2023