机器人场景中的上下文能力与安全探索
机器人学中的可行性是指机器人必须感知到的关键属性,以有效地与新型物体交互的核心概念,该综述文章特别关注机器人学,并尝试找到不同方法之间的共同点,我们提出基于先前知识水平的分类,用于建立有助于实现机器人任务的不同可行性组件之间的关系。
Apr, 2020
本文综述了近期深度机器人可支配学习 (DRAL) 的研究进展,该方法致力于开发数据驱动的方法,使用可支配性概念辅助机器人任务,对机器人任务的技术细节和局限性进行了分类和讨论,并从观察、行为、可支配性表达、数据收集和实际部署等方面总结了它们的挑战和未来方向。同时提出了一个有前途的未来方向,即将强化学习与可支配性定义相结合,以预测任意行为后果。
Mar, 2023
通过学习视觉契合来指导机器人探索,并使用基于 Transformer 的模型来学习 VQ-VAE 潜在嵌入空间中条件分布,从而展现模型的组合泛化能力。训练完成的契合模型可用于机器人操作策略学习中的目标抽样分布。
May, 2023
本文回顾了在机器人任务中使用借助能力概念的不同策略,并构建这些方法以提供指导,包括能力作为提高自主性的机制。最后,我们确定并讨论了一系列有趣的借助能力研究方向,这些方向有潜力提高 AI 代理的能力。
May, 2021
本文提出了一种新的 affordance 表示,使机器人可以通过建模未来的 affordance 来推断长期效应,从而确定实现任务目标的最佳动作。通过该新表示,我们开发了一种 learning-to-plan 方法,Deep Affordance Foresight(DAF),通过试错学习参数化 motor skills 的 affordance 的环境模型,我们在两个挑战性的操作领域上评估了 DAF,并展示了它可以有效地学习执行多步任务,在不同的任务之间共享学习到的 affordance 表示,并学习用高维图像输入进行规划。
Nov, 2020
本研究使用视觉契合技术,通过预测关键点的接触信息,提出了一种端到端的控制策略学习框架,可以实现在不同类型的操纵任务中的泛化。结果显示,我们的算法在成功率上大大优于基线算法,包括基于视觉契合和强化学习方法。
Sep, 2022
本论文探讨了如何通过利用互联网视频中的人类行为,训练一个可视化驱动的视觉能力模型,以此实现机器人在现实环境中的复杂任务执行。我们将该模型与四个机器人学习范式无缝连接,并在 4 个现实世界环境、超过 10 种不同任务和 2 个机器人平台中展示了其效力。
Apr, 2023
通过结合物体层面的可行先验和环境约束,我们提出了一个环境感知的可行性框架,该框架能够在考虑环境约束的情况下学习可行性,对于包含单个遮挡物和复杂遮挡物组合的场景具有良好的泛化效果。
Sep, 2023
通过与环境的有针对性互动,我们提出了一种基于信息的方法来加速机器人的能力发现过程,从而减少对大量标注数据集的依赖,实验证明这种方法在仿真和真实世界任务中都能有效地发现视觉能力,提高数据效率。
May, 2024