利用输出对比损失进行语义分割的测试时间训练
通过鉴别噪声特征图,学习对投射特征图的噪声视图进行分类,从而在新的领域上正确调整模型,本研究提出了基于噪声对比测试时间训练(NC-TTT)的一种新的无监督测试时间训练技术,实验证明了我们方法在这一任务上相对于最近的方法的优势。
Apr, 2024
深度学习模型在各种视觉任务中展现出卓越的性能,但它们常常容易受到测试时的领域转移所影响。为了缓解这些脆弱性,已经开发了测试时训练(TTT)方法,在训练时同时解决了主任务和次要任务,以在测试时作为自监督代理任务。在本文中,我们提出了一种基于多尺度特征图和离散潜在表示之间相互信息最大化的新型无监督 TTT 技术,它可以作为一项辅助聚类任务整合到标准训练中。实验结果表明,在不同的常见测试时适应基准上具有竞争力的分类性能。
Oct, 2023
提出一种测试时反馈方法来解决视觉 - 语言模型的输出与任务目标之间的不匹配问题,以避免模型过拟合于其不正确的输出分布。具体而言,采用 CLIP 作为奖励模型,在不同的任务中,包括图像分类、图像文本检索和图像标题生成等。通过强化学习,以最大化 CLIP 奖励为目标来进行单一测试样本的训练。经过广泛实验,证明了这种测试时反馈方法可以显著提高不同的视觉 - 语言模型的结果。
May, 2023
本研究提出了一种时域监督对比学习的方法,可以使神经网络在处理时间序列信息时具备低延迟和高性能,取得了 CIFAR-10、CIFAR-100 和 DVS-CIFAR10 等数据集的最新性能水平。
May, 2023
本文提出一种测试时训练(test-time training)的方法用于部署深度神经网络模型在不同域中数据的适配过程,其中采用实际顺序的 test-time anchored clustering(TTAC)协议来进行强化测试时间的特征学习,最终在六个测试数据集中超越其他已有的测试时训练方法。
Jun, 2022
本文提出了一种基于对比度学习的语义分割训练策略,使用像素级和标签基础对比损失的方法,能够在减少标记数据的情况下提高性能,并通过 Cityscapes 和 PASCAL VOC 2012 数据集的实验证明了该方法的有效性。
Dec, 2020
本文提出了一种基于对抗学习的语义分割领域适应方法,该方法采用输出空间的对抗学习,并构建了多层对抗网络来有效地执行不同特征层面的输出空间域适应。在各种域适应设置下进行了大量实验和消融研究,并展示出该方法在准确性和视觉质量方面表现优越。
Feb, 2018
本文提出了一种基于对比学习和自我训练的方法,该方法可以很好地应用于不同领域的实例进行语义分割,可以将语义类别在跨域上进行对齐,从而达到更好的结果。
May, 2021