nli models | BriefGPT - AI 论文速递

关键词nli models

搜索结果 - 11

使用 Big Bird 嵌入进行母语识别
本研究探讨了输入大小作为限制因素，并展示了使用 Big Bird 嵌入方法训练的分类器在 Reddit-L2 数据集上明显优于语言特征工程模型的性能，此方法的有效性和计算效率使其成为未来 NLI 研究的有希望的途径。
PDF10 months ago
ACLNLI 模型推理受哪些错误相关性影响？通过数据受限反事实推理的可视交互式诊断
我们提出了一个面向诊断 NLI 模型依赖于预测的潜在虚假特征的人工辅助仪表板，该仪表板支持用户通过 GPT-3 建议来生成不同种类的具有挑战性的示例，并从经过训练的 NLI 模型中获取反馈。通过调查，我们发现了会影响 NLI 模型推理的几类
PDFa year ago
ACL略施推力，NLI 模型可鲁棒高效地预测忠实度
本文提出了一种利用数据增强和鲁棒推理过程将单纯的 NLI 模型用于预测语言模型忠实度的方法，应用于 TRUE 基准来说效果显著且计算代价较小。
PDFa year ago
高维度干预检测：自然语言推理案例研究
本文研究探索了在自然语言推理任务中探测语言模型中自然逻辑之外的中间语义特征的方法，通过不同的干预探测方法以及限制模型表示能力的探测方法，得出了有关 NLI 模型表示和干预探测的因果推断和分析。同时，带出了干预探测研究的一些局限性和难题。
PDFa year ago
EMNLP审视被忽略的内容：自然语言推断中重复单词偏见分析
本研究发现目前 NLI 模型在处理具有低重叠度的 “假设” 和 “前提” 时，很容易出现双向重叠偏差，当前的去除偏差方法对这种类型的偏差并无效果，探究了重叠偏差产生的原因和在减轻此类偏差方面少数类样例的作用，并发现其并非是源于预训练。
PDF2 years ago
EMNLP将句子对 NLI 模型拓展至长文本和聚类的推理能力
本研究探讨了 NLI 模型的直接零 - shot 应用，包括分析其对更长和越界输入的鲁棒性，开发新的聚合方法以操作完整文档，并在 ContractNLI 数据集上达到最先进的表现，并发现 NLI 分数提供强大的检索信号，并且比常见的相似性基
PDF2 years ago
自然语言推断中的性别偏见评估
本文提出了一种评估方法来测量天生的性别偏见，其通过构建一项挑战任务，通过将性别中性前提与性别具体假设进行配对的方式来进行。研究发现，许多先进的 NLI 模型在使用职业数据集进行训练时会因性别偏见而出现错误，但通过通过扩充训练数据集来确保性别
PDF3 years ago
通过对抗数据集中控制方差分析泛化能力的多样化数据集
本文提出将现象特定的 “对抗” 数据集用于训练 NLI 和其他类型的模型，表明了原始训练数据中的 “盲区”，并演示了用两个推理现象对该方法进行扩展来推动模型学习和推广目标现象的能力，从而建立更好的挑战数据集以创建更强大且更具鲁棒性的模型。
PDF5 years ago
EMNLP通过适应残差来消除自然语言推理数据集中的偏差
提出了 DRiFt 算法，该算法可以训练出较不受数据集偏差影响的 NLI 模型，该模型在挑战测试集上表现显著优于基准模型，并在原始测试集上保持良好的表现。
PDF5 years ago
EQUATE：自然语言推理定量推理基准评估框架
EQUATE 是一种新的文本蕴含情景下的定量推理框架。我们使用 9 个现有的 NLI 模型对其进行基准测试，发现它们并未明确学习推理数量。我们提出一个基于符号计算的定量推理新基线 Q-REAS，相对于最佳执行的 NLI 模型，其在数值推理测
PDF5 years ago
AAAI分析 NLI 模型的组合敏感性
本研究通过实验验证，发现多个最先进的 NLI 模型都过度依赖词汇而无法使用组合语义，因此提出了一种可分析自然语言例句中 NLI 模型组成特性的测试设置，并在已有数据集上测试，这种测试设置可以帮助模型更好地了解复杂的含义，并为模型的改进提供机
PDF6 years ago