元软标签生成器用于噪声标签
提出了一种标签噪声鲁棒的学习算法,该算法使用具有元目标的软标签来训练基础分类器,软标签由数据实例的提取特征生成,并使用单层感知器网络进行学习,算法使用少量的无噪声数据作为元数据,实验结果表明,该算法优于现有基线。
Mar, 2021
本文提出了一种基于元学习方法的元 - 梯度下降模型,可自适应地根据当前的训练问题迭代地获取校正后的软标签,无需手动预设超参数,从而解决了深度神经网络容易过度拟合含有噪声标签的训练数据的问题。
Aug, 2020
本文提出一种噪声容忍的训练算法,其中在传统梯度更新之前进行元学习更新来模拟实际训练。通过生成合成噪声标签进行训练,该元学习方法训练模型,以便在使用每个设置的合成噪声标签进行一次梯度更新后,模型不会过度拟合特定的噪声,从而提高深度神经网络的性能。
Dec, 2018
该研究论文提出了 Meta Self-Refinement (MSR) 框架,用于有效地应对来自弱监督源的噪声标签,从而训练出噪声鲁棒性较强的深度神经网络模型。在八个自然语言处理基准测试中广泛实验,证明 MSR 在所有设置下都能够抵抗噪声,并且在准确率和 F1 分数上优于现有技术最多 11.4% 和 9.26%。
May, 2022
本文提出了一种基于元学习的标签纠正框架(MLC),旨在解决数据训练集中标签嘈杂或不确定性等问题,通过调整权重甚至直接纠正嘈杂标签来优化训练。在文本分类等任务中验证了该方法的有效性。
Nov, 2019
该研究提出了一种新的基于元学习的增强型元标签纠正方法 (EMLC),旨在解决有噪标签的学习问题,在 Clothing1M 数据集上取得了比以前更好的效果。
May, 2023
通过使用元学习技术,本论文提出了一种基于 CAM-Net 的新型语义分割方法 MetaSeg,该方法通过生成像素权重来抑制带有错误伪标签的噪声区域,并利用图像内容的增强特征提供简单可靠的优化指导,从而实现了与完全监督模型接近的出色性能,为全方位语义分割开辟了新的有前途的途径。
Jan, 2024
本文提出了一种利用联合优化框架来学习深度神经网络参数和估算真实标签的方法,以克服在噪声标签数据集上进行训练导致性能下降的问题,实验结果表明该方法在解决 CIFAR-10 噪声数据集和 Clothing1M 数据集分类问题上优于其他最先进的方法。
Mar, 2018
通过使用混合模型从局部损失分布学习样本权重,我们提出了一种利用合成样本训练模型的框架来减轻噪音标签影响,并通过逐渐修正噪音标签估计软目标,得到了更为准确的近似真实标签和更加独立和清晰界定的聚类,实验证明我们的方法在两个基准数据集 (CIFAR-10 和 CIFAR-100) 及两个大规模真实世界数据集 (Clothing1M 和 Webvision) 上优于现有技术方法且具备可靠的学习表达能力。
Jun, 2024