利用域凸博弈改善泛化
本文主要介绍了如何利用深度学习和CNN模型处理领域泛化问题,建立起一个更加完整的基准测试数据集,并在其中进行了对比实验,证明了该方法的优越性以及提出的数据集的更高难度值。
Oct, 2017
本文提出了一种元学习方法,通过在每个小批处理中合成虚拟测试领域,模拟训练/测试领域变化的过程,使用模型无关的培训程序,这种方法在最新的跨领域图像分类基准测试中取得了最先进的结果,并在两项经典强化学习任务中展示了其潜力。
Oct, 2017
本文介绍一种在不同训练集下预测性能好的算法——domain generalization algorithms,并提出它们在实际应用中的可用性。作者实现了一个名为 DomainBed 的测试平台,测试了不同数据集、不同基准算法和不同模型选择的效果,并发现在经验风险最小化的情况下,预测性能最优。研究人员们的贡献,加上这个领域的开源,将推动可重复性和严格性研究的发展。
Jul, 2020
本文主要探讨如何通过数据生成器来增加多个源域的多样性提高领域泛化能力,在使用了最优传输的分布偏差模型和循环一致性和分类损失的数据生成器模型中,我们的L2A-OT(学习通过最优传输增广)方法在四个基准数据集中表现优于当前最先进的DG方法。
Jul, 2020
这篇论文是对近年来领域泛化(即在一个或多个不同但相关的领域中学习出可以推广到看不见的测试领域的模型)领域的最新进展的首次回顾,涵盖了相关的理论、算法、数据集、应用,并提出了未来的研究方向。
Mar, 2021
本研究提出了使用样式互补模块来增强模型的泛化能力,从而解决单域泛化中由于样本多样性有限而导致的泛化性能下降。通过在三个基准数据集上进行大量实验,结果表明本方法优于现有的单域泛化方法,最高提升了25.14%。
Aug, 2021
本文提出了一种基于分布鲁棒优化的普适认证框架,旨在弥补现有基准数据集在测试时无法全面评估领域通用算法的局限性,并提出了一种训练算法,可以用于改进其认证性能。实证评估表明,该方法显著提高了风险压力下模型的最坏损失,而在基准数据集上并未出现显著的性能下降。
Jun, 2022
基于损失平面平坦度的角度,我们提出了一种新颖的方法Flatness-Aware Minimization for Domain Generalization(FAD),可以同时有效地优化零阶和一阶平坦度,从而改善领域泛化问题。我们通过理论分析和实验证明了FAD在各种领域泛化数据集上的优越性,并确认FAD能够发现比其他零阶和一阶平坦度感知优化方法更平坦的极小值点。
Jul, 2023
利用大型语言模型和文本到图像生成技术,我们介绍了一种领域外推方法,通过合成全新领域的高保真、逼真的图像来显著提高域泛化数据集的训练效果,实现了单一和多领域泛化任务上的显著改进,甚至在没有任何收集数据的条件下,超过了监督设置的表现。
Mar, 2024