通过学习本地对抗攻击进行语义分割中的异常检测
本文提出了一种针对视觉分类中的开放世界场景中的数据分割问题的新方法,该方法能够训练出一个专门针对原始训练集以及更大的 “背景” 数据集的 ODD(出现在分布之外的异常值)检测模型,并在测试复杂自然图像的数据集中得到了优异的表现。
Aug, 2018
本文通过在不同的数据集上使用深度学习的方法,实现了以城市街道场景为基础的图像识别模型对于不同场景下的物体进行准确分类和目标检测,并且通过对于特征向量的提取和降维,成功实现了基于图像碎片的图像检索和分割。
May, 2020
深度学习在全景分割方面取得了显著进展,但是全景分割在存在分布外(OOD)对象的情况下受到严重影响。为了解决这个问题,我们提出了一种用于联合像素级语义内部分布和分布外分类的分割方法。我们基于 Panoptic 分割基准数据集 Cityscapes 和 BDD100K,扩展了具有分布外实例分割注释的数据集,并提出了合适的评估指标和多个强基线模型。重要的是,我们提出了新颖的 PoDS 架构,包括共享的主干网络、用于学习全局和局部 OOD 对象线索的 OOD 上下文模块,以及使用我们的对齐 - 不匹配策略的双对称解码器和任务特定头。结合我们的数据增强策略,这种方法有助于逐步学习分布外对象并保持内部分布性能。我们进行了大量评估实验证明我们提出的 PoDS 网络可以有效地解决主要挑战并显著优于基线模型。我们在此 http 链接上公开提供数据集、代码和训练好的模型。
Oct, 2023
通过广泛的实验,我们展示了当前的 ODD 检测器对于协变量转移比语义转移更为敏感,并且最新的 ODD 检测算法对于语义转移的检测效果微乎其微。我们的数据集和分析为指导未来的 ODD 检测器设计提供了重要见解。
Oct, 2023
通过引入一种轻量级模块,利用熵量测、分割预测和空间上下文来表征分割模型的不确定性,从而实时检测像素级的极端数据,同时结合生成的合成极端数据进行最大熵训练,我们的方法可以可靠地检测场景中的极端实例,并在语义分割基准测试中表现卓越。
Oct, 2023
本文主要研究深度学习模型在检测 in-distribution 和 OOD inputs 时受到极小对抗扰动的影响,并提出了一种名为 ALOE 的有效算法,该算法通过将模型暴露于经过对抗训练的 inlier 和 outlier examples 中的方式,可以灵活地与现有方法相结合,提高现有的 Out-of-distribution detection 方法的鲁棒性,CIFAR-10 和 CIFAR-100 数据集的 AUROC 分别提高了 58.4% 和 46.59%。
Mar, 2020
本研究提出了一种双层离群分布检测框架,可同时处理领域漂移和语义漂移,通过全局低层特征和密集高层特征图来区分领域漂移和语义漂移,并能够选择性地调整模型以适应未知领域,并提高在检测新类别方面的效果。在多个离群分割基准测试中验证了所提出方法的有效性,包括存在显著领域漂移和不存在领域漂移的情况下,观察到各种基准模型的持续性性能改进。
Sep, 2023
深度神经网络在各种技术和服务中得到越来越广泛的应用,但其容易受到来自训练集不同分布的样本的干扰,而常见的解决方法是使深度神经网络具备检测这种样本的能力。本文提出了一种基于 ImageNet 和 Places365 的全面评估标准,根据与训练集的语义相似性,将个别类别分为内部分布和外部分布,通过不同的技术确定哪些类别应被视为内部分布,得到具备不同性质的评估标准。不同的 ODD 检测技术在不同的评估标准下的实验结果表明,它们的有效性取决于所选择的评估标准,而基于置信度的技术在接近 ODD 样本上可能优于基于分类器的技术。
Apr, 2024