可证明的物体为中心学习的组合概括
通过引入组合性和不可约性假设,分析了何时可以在无监督情况下学习对象为中心的表示,并通过在合成数据上的实验验证了结果。还提供了证据表明该理论具有现有对象为中心模型的预测能力。
May, 2023
学习组合表示是目标为中心的学习的关键方面,它实现了灵活的系统化推广并支持复杂的视觉推理。然而,大多数现有方法依赖于自编码目标,而复杂性通常是由编码器中的架构或算法偏差隐含地施加的。本研究中,我们提出了一种新的目标,明确促进这些表示的复杂性。我们的方法基于现有的目标为中心的学习框架(例如,槽关注)构建,并加入了额外的约束,使得来自两幅图像的任意对象表示混合有效,通过最大化复合数据的似然性。我们证明将我们的目标融入现有框架可以持续改善客观为中心的学习,并增强对架构选择的鲁棒性。
May, 2024
本文介绍了物体中心表示学习的概念,并在五个常见的多目标数据集上对最先进的无监督模型进行了训练和评估,研究了分割度量和下游对象属性预测等问题,并探讨了单个对象超出分布,全局属性的改变以及更少结构化的分布转变对其性能的影响。实验结果表明,物体中心表示对下游任务很有用,而且对于大多数影响对象的分布转变通常很坚韧。但是,当输入的分布变化不规则时,在分割和下游任务性能方面的韧性可能会因模型和分布转变而异。
Jul, 2021
本篇论文从识别可表达性学习出发,将组合性视为数据生成过程的属性而非数据本身,并提出了仅取决于训练分布和模型架构的轻微条件,为组合泛化建立了理论框架,并验证了其应用于现实世界场景的结论,从而为组合泛化的原则性理论研究铺平了道路。
Jul, 2023
该研究提出了使用基于物体的表征作为组成性生成世界模型所学习的模块化和结构化观察空间,以帮助自主代理发现和学习有用的技能,并进一步将这些技能组合起来解决复杂的组合任务。
Nov, 2020
本文研究基于强化学习的面向对象环境下的组合泛化,提出算法 Homomorphic Object-oriented World Model(简称 HOWM),并将其与其他算法相比较,结果表明我们的算法具有实现高效软组合泛化能力。
Apr, 2022
本文提出了一种概率生成模型,用于学习从多个物体场景的部分观察中构建模块化和组合化的三维物体模型,该模型可以推断 3D 物体表示并从任意视角呈现场景。
Jun, 2020
本文探讨了使用不同的自监督学习算法所学到的表示在复合泛化上的能力,研究发现,与其它算法相比,使用 EL 模型学习到的表示具有更强的复合泛化能力,但在训练简单模型并使用少量标签进行泛化时直接使用瓶颈表示会导致泛化性能较差,同时现有的度量复合性的指标与本文的评价方法不相关
Oct, 2022
该研究介绍了一个名为 ConceptWorld 的环境,用于生成通过逻辑领域特定语言定义的构成和关系概念的图像。研究测试了标准神经网络和关系网络的泛化能力,并提出了一个潜在的基准模型,以鼓励在构成和关系领域有效泛化的模型的发展。
Jun, 2020
本文旨在研究用结构性表示学习的方法,具体分为解缠结表示与面向对象表示两个方向,以实现从非结构化数据中提取潜在结构信息的目的,同时还探讨了该方法对预训练表示和下游任务泛化能力的提升以及其对于大规模数据的高效表征学习的应用。
Apr, 2023