PromptNER: 命名实体识别提示
本文提出了一种基于提示方法的 Few-shot Named Entity Recognition(NER)模型,使用实体类别信息构建标签原型,使模型只需使用支持集进行微调即可实现很好的迁移学习表现,实验证明其在 Few-NERD 和 CrossNER 数据集上的性能均优于其他先进方法。
May, 2023
本文提出了一种命名实体识别的新的基于 prompt 的学习方法 - QaNER,它使用了基于问答的方法来解决之前 prompt-based 方法所存在的限制,包括更高的计算复杂性、较差的 0-shot 能力、需要手动 prompt 工程,或缺乏 prompt 鲁棒性等问题。相比之前的方法,QaNER 具有更快的推理速度,对 prompt 质量不敏感,鲁棒性也更强,并且在低资源性能和 0-shot 能力方面表现显著优于之前的方法。
Mar, 2022
该论文提出了 ContrastNER,一个基于提示的命名实体识别框架,使用离散和连续的标记来学习对话。通过对比学习的方法,ContrastNER 在高资源设置中获得了与现有技术同样的性能,并在低资源环境中胜过现有模型。
May, 2023
llmNER 是一个用于实现 LLMs 的零射击和少射击 NER 的 Python 库,通过提供易于使用的接口,llmNER 可以组合提示、查询模型,并解析 LLM 返回的完成结果。该库还通过提供简单的接口来测试多个变量,让用户可以高效地执行提示工程。我们在两个 NER 任务上验证了我们的软件,以展示该库的灵活性。llmNER 旨在推动上下文学习研究的界限,消除提示和解析步骤的障碍。
Jun, 2024
本文提出了一种基于多任务指令的生成式框架 InstructionNER,用于低资源的命名实体识别。实验结果表明,我们的方法在少样本任务中始终优于其他基线模型。
Mar, 2022
本文提出了一种基于提示学习技术的统一命名实体识别系统 (PUnifiedNER),该系统能够在不同领域同时识别高达 37 种实体类型,相比基于特定数据集的模型,能够显著提高预测性能并大大降低模型部署成本。同时,在某些数据集上,PUnifiedNER 的性能甚至可以达到甚至超越领域特定方法的最高水平。
Nov, 2022
本研究提出了将实体定位和实体类型识别整合到 prompt learning 中的双插槽多提示模板,可在平行预测插槽上提取所有实体,并设计了一种动态模板填充机制来分配插槽的标签。在各种设置下进行实验,我们的模型在交叉域 few-shot 设置中实现了显着的性能提高。
May, 2023
本文提出了一种有效地建立识别命名实体(NER)系统的方法,基于最近的基于转换器的自我监督预训练语言模型(PLMs),并探讨了三种正交的方案来改进针对少样例情况的模型泛化能力,通过大量实验结果表明,我们的方法在少数样例学习环境中显著改善或优于基于域标记微调的 PLM 线性分类器等基线方法,同时在无训练和少样例学习环境下建立了最新的业界记录。
Dec, 2020
我们提出了统一的标签感知令牌级对比学习框架,通过利用标签语义作为后缀提示来丰富上下文,同时优化上下文 - 上下文和上下文 - 标签对比学习目标,从而提高推广辨别性的上下文表示。广泛的实验表明我们的方法在各种传统测试领域和大规模少样本 NER 数据集上优于先前的最先进模型,微粒 F1 分数平均绝对增益达到 7%。进一步的分析揭示了我们模型受益于其强大的迁移能力和改进的上下文表示。
Apr, 2024
本研究提出了一种使用多重提示架构和度量学习方法来解决 few-shot named entity recognition 中标注语义缺陷的问题,并在 18 个场景中实现了新的最先进结果,平均相对增益为 8.84%,最大相对增益为 34.51%。
Nov, 2022