设计了一种基于度量学习和自适应决策边界的 OOD 检测算法,相较于其他算法,在类别数量较少的情况下显著提高 OOD 性能,保持了 IND 类别的准确性。
Apr, 2022
本研究旨在解决无法获取 in-domain 数据标签的情况下,从语言模型和表示学习的角度,通过无监督的聚类和对比学习的结合,对 OOD 检测进行更好的数据表示学习,实验证明该方法的性能显著优于基于概率的方法,并且可以与基于标签信息的监督方法竞争。
Mar, 2022
本文提出了一个更广泛的框架来研究模型针对特定因素(如未知类别、协变量变化等) 检测 out-of-distribution(OOD)问题,该框架能够检测出一个训练好的机器学习模型无法正确预测的测试样例,而是否拒绝该测试样例取决于模型本身,该文提供了大量分析和见解,用以改进和理解在不受控制的环境中的 OOD 检测。
Apr, 2023
本文提出了一种监督对比学习方法和对抗性增强机制,在语义空间中学习以区分任务型对话系统中的域外意图,并实证了该方法对于 OOD 检测的效果。
May, 2021
本文旨在识别常见的目标,以及识别不同 OOD 检测方法的隐含评分函数。我们展示了许多方法在共享学习方式下表现相似,二进制区分器达到与异常暴露相似的 OOD 检测性能,还展示了置信度损失具有在理论上最优得分函数不同但与训练和测试 out-distribution 相同时的函数相似的隐含评分函数,从实践中发现,这些方法训练方式一致时都表现相似。
Jun, 2022
本文提出了一种基于野外混合数据的新颖框架,旨在改进在野外部署的机器学习模型的 OOD 检测能力,通过最大化 OOD 检测率并设定 ID 数据的分类误差和 ID 示例的 OOD 错误率的约束条件的学习目标,有效地解决了这个问题,并在常见的 OOD 检测任务中获得了优异的性能。
Feb, 2022
本文提出了一种面对非常低的领域内训练数据进行零样本 out-of-domain 检测和少样本 in-domain 分类的解决方案:一个抗 OOD 的原型网络,通过与当前最新方法的比较,结果显示该方法在 zero-shot OOD 检测任务上效果优于 state-of-the-art 方法,在 ID 分类任务上性能竞争力强。
Aug, 2019
本研究旨在探索预训练语言模型对领域转移能力的预测,并证明基于特征归因的因子对于预测模型领域转移能力具有一定的作用。
Oct, 2022
本文研究了 out-of-distribution detection 的各种方法,发现这些方法在一个规范化的 16 个(ID, OOD)数据集组成的标准数据集上并没有本质上的优劣。而在低数据量环境下,Pairwise OOD detection 方法是一种基于 Siamese networks 的距离方法,可以绕过昂贵的协方差估计步骤,在某些(ID, OOD)数据集上表现比 Mahalanobis 方法更好。该研究认为 OOD 检测问题可能过于广泛,需要考虑更具体的结构来利用。
Sep, 2021
本论文提出了一种新的概率框架模型和一种无需 OOD 数据的自监督抽样模型 (SSOD),以解决现有研究中的问题,并展示了这些模型在大规模基准测试上具有领先的性能.
Jul, 2023