Feb, 2023

HugNLP: 一个统一全面的自然语言处理库

PDF
TL;DR通过 HuggingFace Transformers 设计的 HugNLP 统一和全面地涵盖了自然语言处理的库，包含模型、处理器和应用层次结构，支持在不同的 NLP 任务上预训练语言模型的学习过程， 并且还提供了一些特色的 NLP 应用程序，如知识增强的 PLMs、通用信息提取、低资源挖掘和代码理解和生成，等等。
hugnlpnatural language processinghuggingface transformerspre-trained language modelscode understanding
发现论文，激发创造
  • EduNLP: 教育资源的统一模块化库

    教育资源理解对于在线学习平台至关重要，该研究旨在开发出一种统一、模块化、广泛应用的库（EduNLP），以实现有效且易于使用的自然语言处理工具，以促进人工智能教育相关研究和应用。

    Jun, 2024

  • TweetNLP：社交媒体的前沿自然语言处理

    TweetNLP 是一个支持社交媒体中自然语言处理任务（包括情感分析、实体识别、表情预测和辱骂识别）的综合平台，其采用基于 Transformer 的语言模型，专门用于处理社交媒体文本，提供 Python 库、在线演示和教程等多种支持。

    Jun, 2022

  • EasyNLP：一款全面且易于使用的自然语言处理工具包

    EasyNLP 是一个支持大规模预训练模型的统一框架，支持多种 NLP 算法，并在阿里巴巴集团的多个业务单元中得到了成功应用和集成。

    Apr, 2022

  • mahaNLP：一个马拉地文自然语言处理库

    mahaNLP 是一个针对马拉地语开发的开源自然语言处理（NLP）库，旨在增强 NLP 领域中对资源匮乏的印度语言马拉地的支持，它是一个易于使用、可扩展和模块化的工具包，基于最先进的 MahaBERT-based transformer 模型进行马拉地文本分析。

    Nov, 2023

  • 可组合 NLP 工作流的数据中心框架

    本文介绍了一个能够支持自然语言处理工作流的开源框架，该框架包含了一个统一的数据表示方法和一个包含处理器、可视化和注释的大型处理库，提供了简单组装和互操作性，并能够轻松扩展以接入其他自然语言和深度学习库。

    Mar, 2021

  • Spark NLP：大规模自然语言理解

    Spark NLP 是一种基于 Apache Spark ML 的自然语言处理库，提供了简单的，高效的和准确的 NLP 注释，支持在分布式环境中轻松扩展，目前被 54％的医疗保健组织作为世界上使用最广泛的 NLP 库。

    Jan, 2021

  • HuggingFace 的 Transformers：最先进的自然语言处理

    自然语言处理的进展主要归功于模型架构和预训练的进步，Transformer 架构为构建更高性能的模型提供了便利，预训练使得这些模型能够在各种任务中被有效利用。Transformers 是一个旨在向更广泛的机器学习社区推广这些进展的开源库，库中包含一系列经过精心设计的 Transformer 架构和社区制作和提供的预训练模型，并且旨在为研究人员提供可扩展性、为从业者提供简便性、为产业部署提供快速和稳健性。

    Oct, 2019

  • CMULAB：一个用于训练和部署自然语言处理模型的开源框架

    使用自然语言处理工具需了解语言本身、熟悉最新模型和训练方法，并具备部署这些模型的技术能力。本文介绍了 CMU 语言注释后端，一个开源框架，简化了模型部署和连续的人机交互微调过程，使语言社区成员和语言学家能够使用自然语言处理工具。CMULAB 可以让用户快速适应和扩展现有的语音识别、OCR、翻译和句法分析工具，即使训练数据有限。我们描述了目前可用的各种工具和 API，以及开发人员如何轻松地将新模型 / 功能添加到该框架中。

    Apr, 2024

  • AllenNLP：一个深度语义自然语言处理平台

    AllenNLP 是一个基于 PyTorch 平台的自然语言理解深度学习相关的可扩展实验框架，具有智能批量处理和填充的灵活数据 API，高层次的文本操作抽象和模块化可扩展的实验框架。

    Mar, 2018

  • XNLP: 通用结构化自然语言处理的交互式演示系统

    提出了一种先进的 XNLP 演示平台，通过利用 LLM 实现通用 XNLP，具有高普适性的单模型，推动了通用 XNLP 建模、高性能、可解释性、可扩展性和互动性的多个方面，为社区中探索不同 XNLP 任务提供了统一的平台。

    Aug, 2023