使用内在动机进行层次感知发现
本文提出了一种从人体活动视频中学习社交效应的机器人学习方法,该方法基于生成模型和马尔科夫链蒙特卡罗算法自动发现从 RGB-D 视频中的交互作用,让机器人能够自然地复制这些交互作用的完整体运动。
Apr, 2016
本研究使用视觉契合技术,通过预测关键点的接触信息,提出了一种端到端的控制策略学习框架,可以实现在不同类型的操纵任务中的泛化。结果显示,我们的算法在成功率上大大优于基线算法,包括基于视觉契合和强化学习方法。
Sep, 2022
本文综述了近期深度机器人可支配学习 (DRAL) 的研究进展,该方法致力于开发数据驱动的方法,使用可支配性概念辅助机器人任务,对机器人任务的技术细节和局限性进行了分类和讨论,并从观察、行为、可支配性表达、数据收集和实际部署等方面总结了它们的挑战和未来方向。同时提出了一个有前途的未来方向,即将强化学习与可支配性定义相结合,以预测任意行为后果。
Mar, 2023
通过与环境的有针对性互动,我们提出了一种基于信息的方法来加速机器人的能力发现过程,从而减少对大量标注数据集的依赖,实验证明这种方法在仿真和真实世界任务中都能有效地发现视觉能力,提高数据效率。
May, 2024
本文回顾了在机器人任务中使用借助能力概念的不同策略,并构建这些方法以提供指导,包括能力作为提高自主性的机制。最后,我们确定并讨论了一系列有趣的借助能力研究方向,这些方向有潜力提高 AI 代理的能力。
May, 2021
机器人学中的可行性是指机器人必须感知到的关键属性,以有效地与新型物体交互的核心概念,该综述文章特别关注机器人学,并尝试找到不同方法之间的共同点,我们提出基于先前知识水平的分类,用于建立有助于实现机器人任务的不同可行性组件之间的关系。
Apr, 2020
本文旨在研究如何通过生成模型来让一个通用机器人学习视觉契合性的表征,以便于机器人可以在新环境中使用它的模型进行采样,进而进一步训练其策略从而达成其目标。这种做法可以被用于训练以原始图像输入为操作对象的目标编码策略,并可以通过我们提出的契合性导向探索机制快速地学习如何操作新对象。我们展示,通过五分钟的在线学习就可以在新场景下使用之前的数据训练机器人完成抽屉打开,抓取和放置的任务。
Jun, 2021
本研究利用增强学习方法,通过自主探索实现对未经探测的三维环境的机器人智能互动,其中包括对可利用对象的发现、高效自主行动的学习以及使用基于图像的可利用区域分割模型。实验表明,基于该方法的机器人可以智能地操作新的家居环境,并为进行下游任务,如 “找刀并将其放入抽屉中”,进行了充分的准备。
Aug, 2020
通过学习视觉契合来指导机器人探索,并使用基于 Transformer 的模型来学习 VQ-VAE 潜在嵌入空间中条件分布,从而展现模型的组合泛化能力。训练完成的契合模型可用于机器人操作策略学习中的目标抽样分布。
May, 2023