深度神经网络中的标签对齐策略
本文提出了一种使用注意力对齐和后验标签分布估计的卷积神经网络自适应无监督域适应的方法,在Office-31数据集上超过其他最先进的方法2.6%。
Jan, 2018
通过适应特征规范实现域适应来解决目标任务的模型性能下降问题,该方法将标准域适应和部分域适应统一计算,并且在 Office-Home 数据集上取得了 11.5% 的性能提升,在 VisDA2017 数据集上取得了 17.1% 的性能提升。
Nov, 2018
本研究提出了一种无监督领域自适应方法,通过训练共享嵌入来对齐输入(域)和输出(类)的联合分布,从而使任何分类器对域都不具有特异性。联合对齐不仅确保域的边际分布对齐,还确保标签对齐,并提出了一种新颖的目标函数,鼓励类条件分布在特征空间具有不相交的支持。此外还可以利用对抗正则化来改进没有注释的域上分类器的性能。
May, 2019
我们提出了一种无监督领域适应方法,采用类条件域对齐的方法来解决领域内类别不平衡和领域间类别分布偏移的实际问题。我们提出了一种采样-based的隐式对齐方法,旨在减轻类别伪标签偏差问题。该方法通过移除对模型参数的伪标签显式优化,并使用伪标签隐式指导样本选择过程,以缓解领域对抗性学习中偏差的问题。理论分析表明在错误类别中存在一个域鉴别器快捷方式,该方法能够修复,并通过实验结果验证了其有效性,特别是在领域内类别不平衡和领域间类别分布偏移的情况下。
Jun, 2020
本文提出了一种新的领域自适应设置,旨在使用互补标签数据训练目标领域的分类器,并且首次证明了其理论界限;同时,利用提出的互补标签对抗网络 CLARINET 解决了完全和部分互补无监督域自适应问题,在手写数字识别和物体识别任务中表现出明显的优势。
Aug, 2020
本文提出了一种通过对齐条件和标签分布来实现对抗式无监督域自适应的方法,并提出了一种新的优化策略。实验结果表明,它在分类和分割的无监督域自适应上具有很好的效果。
Jul, 2021
提出了一种基于Domain-Oriented Transformer的无监督域自适应方法,通过在不同的领域中聚焦于不同的特征空间进行特征对齐,并为每个领域创建一个特定的面向域的分类器,该方法在多个基准测试中取得了最先进的效果。
Aug, 2022
本文介绍了一种名为CASA的方法,使用条件对抗支持对齐来最小化源域和目标域的特征表示分布之间的条件对称支持差异,以提供更好的分类模型,同时提出了一种新的理论目标风险界来证明对比于现有的边缘支持对齐方法,对齐有条件的特征分布的支持更加优秀。实验结果表明CASA在不同的无监督域适配基准任务中的性能优于其他先进方法。
May, 2023
无监督领域适应的研究中,通过使用预训练网络进行多阶段伪标签优化程序,解决了无标签目标数据中的类别错位问题,证明了该简单方法在多个数据集上比复杂的最先进技术更有效。
Feb, 2024