通过引入低成本提示调整范式来学习特定领域视觉提示,我们提出了一种新颖且模型无关的领域感知提示学习(DAP)框架,以在 VLN 任务中为预训练模型提供特定对象级和场景级跨模态对齐,并将领域内视觉知识以高效的方式注入预训练模型的视觉编码器。在 R2R 和 REVERIE 上的实验结果显示,DAP 相比现有的最先进方法具有明显的优势。
Nov, 2023
本文综述了关于深度域自适应物体检测方法的最新研究进展及分类,并给出了每个分类的代表性方法详细描述,同时探讨了未来的研究趋势。
Feb, 2020
本文提出了一种新颖的无监督领域自适应学习范式 —— 通过提示学习的领域自适应 (DAPL),通过嵌入域信息和利用预训练的视觉 - 语言模型进行分类,此方法在多个领域的基准测试数据上表现优异,并且训练效率高、易于实现。
Feb, 2022
本文提出了一种名为 TRKP 的方法,采用教师 - 学生框架,构建多头教师网络来从标记的源域中提取知识并指导学生网络在未标记的目标域中学习探测器,解决了多源领域适应这一泛化性任务的问题。实验结果表明,该方法有效降低了目标域的领域偏移,提高了检测准确率。
Apr, 2022
提出了基于蒸馏的无偏对齐 (Distillation-based Unbiased Alignment, DUA) 框架及目标相关对象定位网络 (Target-Relevant Object Localization Network, TROLN),解决了领域自适应目标检测中源偏差和领域转移问题,通过蒸馏方式调整源特征位置,利用目标相关知识生成无需分类的两个度量指标 (IoU 和 centerness),并采用领域感知的一致性增强策略 (DCE) 进一步改善分类一致性和定位准确性,在跨领域情景中显著提升性能,超过已有基于对齐的方法。
本研究提出一种面向带有噪声注释的领域自适应目标检测(DAOD)的框架,包括潜在实例挖掘、可变形图关系模块和熵感知梯度协调等关键技术,将语义信息纳入学习过程,取得了不错的实验成果。
本文提出一种用于数据有效且准确实现目标领域适应的测试时适应问题解决方案 (Data-efficient Prompt Tuning,DePT),其使用镜像学习方式将交互式提示信息细化到视觉 Transformer 模型中,在测试时自适应调整模型引用的提示以提升模型对目标域的表示,且具有适用于许多测试适应问题的能力。
Oct, 2022
我们提出了 US-DAF 方法来解决通用域自适应目标检测中的负迁移问题,提高在各种尺度下的迁移性和区分性。该方法通过两个模块实现:1)设计一个过滤机制模块来促进公共类的特征对齐并抑制私有类的干扰来克服由于类别偏移引起的负迁移。2)引入新的多标签尺度适应器来进行两个域之间相应尺度的个体对齐。实验表明,US-DAF 方法在三种场景下均达到了最先进的结果,并在 Clipart1k 和 Watercolor 基准数据集上获得了 7.1%和 5.9%的相对改进。
Jul, 2022
本研究介绍了一种名为 Federated Dual Prompt Tuning (Fed-DPT) 的新方法,利用预训练的视觉 - 语言模型并应用视觉和文本提示调整来解决领域移位问题,并通过实验证明了其在领域感知的联邦学习中的重要有效性。
Oct, 2023
通过引入条件对抗学习,基于不确定性度量的领域自适应网络 (UaDAN) 能够适应性地分别对齐良好对齐和不良对齐的样本,在图像级别和实例级别逐步实现吸收知识,显著优于现有方法。
Feb, 2021