本文提出了一种 Transductive Episodic-wise Adaptive Metric (TEAM) 框架来解决 few-shot 学习中,如何通过集成元学习范式以及深度指标学习和传导推理来学习具有自适应度量能力的分类器。通过在每个任务内部探索配对约束和正则化先验,我们将适应过程显式地形式化为标准的半正定规划问题,并使用转导设置中的闭式解来解决该问题,并通过将注意力机制应用于双向相似性策略,提取查询和原型之间更可靠的关系,实验表明我们提出的方法在三个基准数据集上表现优于其他现有方法,并在少样本学习文献中实现了最先进的性能。
Oct, 2019
该研究探讨了在 few-shot 任务的查询集中引入任意类别分布(即类别不平衡)的影响,进一步提出一种基于 α-divergence 的损失函数,有效地处理了类分布变化,大幅提高了性能。
Apr, 2022
本文研究了在执行几次分割任务中进行推理的方式对性能产生了重要影响,并介绍了一种对查询图像进行转导推理的方法,通过优化包含交叉熵、Shannon 熵和 KL 散度规则的新损失函数,实现了具有竞争力的性能,尤其适用于 1-shot 场景以及基于不同数据集的领域偏移。
Dec, 2020
提出了一种基于优化的元学习方法,其利用新的不确定性感知任务选择模型和多查询任务公式,在进行少样本学习时,能够有效地降低标记成本和计算开销,并且在多个实际应用中进行的实验表明,该模型效果显著。
Mar, 2022
该论文提出了一种概率元学习算法,能够从模型分布中采样模型,并且在模型适应新任务时注入噪声来减少任务模糊性,实验结果表明,该方法可以在模糊的少样本学习问题中采样出可信的分类器和回归器,并且阐述了如何利用对模糊性的推理来解决活跃学习问题。
Jun, 2018
通过元学习方法在转导式环境中学习多个任务,通过使用未标记的查询集合生成更强大的模型来解决多任务学习中的问题,并提出了一种合成梯度网络和初始化网络组成的新型变分推理方法,优于以前的方法,并进一步探索了合成梯度的潜力。
Apr, 2020
本文提出一种基于元度量学习的学习方法,在 $k$-shot $N$-way 和多样化领域任务及灵活标签数量等新设置中均具有优异性能。
Jan, 2019
本文提出了一种联合训练方法,将迁移学习和元学习相结合,从而在少分类、少样本以及多分类、多样本任务中均可获得更好的泛化性能。
Sep, 2018
本文提出了一种新的、严谨的贝叶斯元学习算法,用于学习少样本学习的模型参数先验的概率分布。该算法采用基于梯度的变分推断来推断模型参数的后验分布。我们展示了使用我们提出的元学习算法训练的模型具有良好的校准和准确性,在两个少样本分类基准测试(Omniglot 和 Mini-ImageNet)上取得了最新的校准和分类结果,并在多模式任务分布回归中获得了有竞争力的结果。
Jul, 2019
本研究提出了一种基于元学习的框架来同时提高置信度估计模型在不均衡数据和各种数据输入情况下的表现,并在单目深度估计和图像分类任务中进行了验证。
Oct, 2022