CVPRMar, 2021

面向开放世界的目标检测

PDF
TL;DR本文介绍了一个新的计算机视觉问题：“开放领域物体检测”，其中模型的任务是在未经明确监督的情况下识别未引入的对象，并在逐步接收相应标签时增量学习这些已识别的未知类别。阐述了该问题，并提供了一种名为 ORE 的解决方案，基于对比聚类和基于能源的未知物体识别。我们的实验评估和消融研究分析了 ORE 在实现开放世界目标方面的功效。同时，我们发现确定和表征未知实例有助于减少增量对象检测设置中的混淆，我们在没有额外的方法论努力下实现了最先进的性能。希望我们的工作能吸引更多关于此全新但至关重要的研究方向的研究。
open world object detectioncomputer visionunknown object identificationincremental learningore
发现论文，激发创造
  • 无监督识别未知物体的开放世界物体检测

    该研究论文提出了一种新颖的方法，通过学习无监督的辨别模型来识别真实的未知对象，并通过无分类训练方法对模型进行进一步改进，实现在检测未知对象方面显著优于先前的方法，在 MS COCO 数据集上保持检测已知对象类别的竞争性表现，并在 LVIS 和 Objects365 数据集上实现更好的泛化能力。

    Aug, 2023

  • 开放式识别中未知类别领域识别模型评估：一个提案

    开放环境识别（OWR）是一个新兴领域，使得机器学习模型能够拒绝未知样本，并进行管理，逐步将新样本添加到基础知识。本研究提出了一个评估协议，用于估计模型在内域未知类和外域未知类之间分离能力，通过传统迁移学习、自动化机器学习（AutoML）和最近类均值（NCM）分类器与 First Integer Neighbor Clustering Hierarchy（FINCH）相结合的方法，通过对垃圾、食品、狗、植物和鸟类等五个不同领域进行实验，结果表明所有方法都可以作为一个良好的准确性基线，并且预训练模型的平衡准确率（BACCU）得分有可能在一个或多个感兴趣领域中表现出色，同时强调了预训练模型中的有效表示对于识别相同领域的未知类很重要，进一步拓展了开放环境识别在领域特定任务中的应用前景。

    Dec, 2023

  • 通过判别类原型学习的开放世界物体检测

    基于原型学习的开放世界目标检测方法 OCPL，包括 PEA、ESC、CSC 三个模块，用于学习已知类别的鉴别性嵌入以区分已知和未知类别，相关实验结果验证了该方法的有效性。

    Feb, 2023

  • UC-OWOD: 未知类别的开放世界目标检测

    本文提出了一种新的 Open World Object Detection 问题，称为 Unknown-Classified Open World Object Detection (UC-OWOD)，并构建了两个阶段的目标检测器，以解决它所涉及的未知分类问题，并设计了两个新的评估协议用于评估未知类别检测的有效性。

    Jul, 2022

  • 开放世界识别

    通过对线性变换特征空间距离单调递减函数的和进行分组来解决 “开放空间风险” 和经验风险之间的平衡，提出了开放世界识别问题，提出了一种用于评估开放世界识别系统的协议，并演示 Nearest Non-Outlier 算法如何可靠有效地处理大规模的图像数据集。

    Dec, 2014

  • 重新审视开放世界物体检测

    本文提出了基于开放世界目标检测（Open World Object Detection）的实验设置和基准原则，设计了两个公平的 OWOD 问题特定的评估协议，推出了一个包含辅助 Proposal ADvisor（PAD）和类别特定排除分类器（CEC）两部分的新型有效的 OWOD 框架，在公平的 OWOD 基准测试中，取得了优于其他现有物体检测方法的表现和新的度量方法。

    Jan, 2022

  • 一种简单的知识蒸馏框架用于开放世界物体检测

    通过蒸馏视觉 - 语言模型中的开放世界知识，并提出一种权重降低的损失函数以及通过分离定位和识别来减少已知和未知对象的相互影响，我们成功地改进了未知对象的检测性能。

    Dec, 2023

  • OW-DETR：开放世界检测变换器

    通过引入一种新型的端到端基于 transformer 的框架 OW-DETR，其中包括 attention 驱动的伪标签、新颖性分类和对象得分三个组件，用于解决开放世界目标检测 (OWOD) 的挑战，在 MS-COCO 和 PASCAL VOC 数据集上的广泛实验表明，该模型表现出优秀的性能，能够从已知类中传递知识到未知类中，能够更好地鉴别未知对象和背景。

    Dec, 2021

  • 开放世界中的半监督目标检测

    在这篇论文中，我们提出了一个名为 Open World Semi-supervised Detection（OWSSD）的框架，该框架通过一种轻量级的自编码器网络对进行过 ID 数据训练从而有效地检测 OOD 数据，并从中学习，我们通过大量评估表明我们的方法在与最先进的 OOD 检测算法的竞争中表现出色，并显著改善了开放世界场景下的半监督学习性能。

    Jul, 2023

  • 共享外观线索的未见物体推理

    该论文介绍了一种创新的开放世界识别方法，利用从已知对象获得的知识来处理之前未见过的对象的识别。该方法通过使用中间特征的集合来表示对象的外观线索，提供了一种建模新对象的简单而优雅的方法，同时考虑了内在的不确定性。这种方法不仅可以检测在未见过的对象中的超出分布范围的对象或新类别，还可以推断未知实例所属的超类，对于推进多样化应用的开放世界识别具有潜力。

    Jun, 2024