应用 GPT-3.5-turbo 进行法律案件中的修辞角色预测
本文评估了生成式预训练转换 (GPT-4) 对高度专业领域的文本数据分析任务的能力,特别关注分析法院裁决以解释法律概念的任务。我们发现,在注释指南的提示下,GPT-4 的表现与经过良好培训的法律学生注释器相当。我们发现,虽然性能略有下降,但 GPT-4 可以进行批量预测,从而降低成本。然而,采用连贯思维提示并没有在此任务上明显提高性能。此外,我们演示了如何分析 GPT-4 的预测,以识别和减轻注释指南的缺陷,进而提高模型的性能。最后,我们观察到该模型非常脆弱,因为提示中的小型格式相关更改对预测结果影响很大。这些发现可被从事高度专业领域任务的文本语义 / 语用注释的研究人员和实践者利用。
Jun, 2023
本文研究使用最新的生成式预训练转换器(GPT)模型分析各种类型法律文件中一到几句话长度的文本片段的语义注释能力,结果表明该模型能够在零样本学习中表现出色,可广泛应用于语义注释的法律文本处理流程中。
May, 2023
利用 COLIEE 任务 4 数据集,探索生成式预训练转换器(GPTs)在跨语言法律问答系统中的应用,通过对四种不同的英语和日语提示和数据进行基准测试,为多语言法律问答方案的开发提供有价值的洞察,以提高效率和准确性。
Mar, 2024
对 COLIEE 任务 4 数据集中 Heisei 18(2006 年)到 Reiwa 3(2021 年)的日本法律文本具体判断能力的 GPT-3.5(ChatGPT)和 GPT-4 模型的分析揭示了模型在处理法律文本具体性任务方面的优点、缺点和性能模式,为未来优化 GPT-based 模型并在法律信息提取和具体性应用中成功采用奠定了基础。
Sep, 2023
对 GPT-4 在生成有关立法术语方面的准确性、清晰性和相关性上的表现进行评估。与基准设置相比,采用法律信息检索模块提供以前案例中的语句作为模型的上下文可以获得更好的结果,从而可以自主检索相关案例,并将这些案例中有用的语句压缩成有用的法律解释。
Jun, 2023
本文探讨了使用图卷积网络和标签传播算法等基于图的方法以及变种的 BERT 等变压器为基础的方法,在执行 SemEval 任务 6 的过程中进行了修辞角色标注任务,以理解印度法律文件并提高复杂法律文档的文本分类准确性得分。
May, 2023
本文提出一种基于召回模块的提示选择策略,以更好地利用 GPT-3 的少样本能力,并在自然语言处理和生成任务中实现了显著的性能提升,特别是在表格转文本和开放领域问答等任务中。
Jan, 2021
本篇文章研究了在真实情境中使用不同方法进行工作分类任务,其中使用了包括传统模型(如支持向量机)和最先进的深度学习方法(如 DeBERTa)在内的多个文本分类方法。研究表明,使用良好设计的提示,零 - shot GPT-3.5-turbo 分类器的性能优于所有其他模型,并且提示的措辞是激发模型适当 “推理” 的关键因素。
Mar, 2023
针对印度等人口密集的国家法律案件增长的问题,本论文提出了解决该问题的有效技术 ——SemEval-2023 任务 6:理解法律文本的系统,该系统利用 Legal-BERT-HSLN 模型和 Legal-LUKE 模型预测法律文件的修辞角色和识别法律实体,并表明模型优于基线模型,在领先的任务排行榜中取得显著成绩。
Mar, 2023
本研究以简单明了的方式,对各种生成预训练变压器(GPT)方法在情感分析中的应用进行了全面的探讨,特别是在 SemEval 2017 数据集的第四项任务中。通过三种主要策略:1)使用先进的 GPT-3.5 Turbo 进行提示工程,2)对 GPT 模型进行微调,3)一种创新的嵌入式分类方法。研究结果详细比较了这些策略和单独的 GPT 模型,揭示了它们的独特优势和潜在限制。此外,该研究将这些基于 GPT 的方法与其他同时使用该数据集的高性能模型进行了比较,结果显示 GPT 方法在预测性能方面具有显著优越性,F1 分数超过现有技术水平 22% 以上。该研究还探讨了情感分析任务中的常见挑战,如理解上下文和检测讽刺,强调了 GPT 模型在有效应对这些复杂性方面的增强能力。这些发现共同突显了 GPT 模型在情感分析中的巨大潜力,并为该领域的未来研究铺平了道路。
Jul, 2023