面向物理无关对象的元学习再抓取策略
使用 Dex-Net 2.0 生成的合成数据集训练了一个 Grasp Quality Convolutional Neural Network (GQ-CNN) 模型,实现了在深度图像中规划机械手抓取的快速、准确计算,并在实验中显示,其在处理单个对象上的成功率高达 93%,速度是使用点云计算对象的预计算数据集并索引抓取的模型快 3 倍。
Mar, 2017
将物理常识推理融入机器人操作,通过 PhyGrasp 模型结合自然语言和 3D 点云输入,实现对对象的物理属性准确评估和最优抓取位姿决策。模型的语言理解能力使其能够解释人类指令,并生成符合人类偏好的抓取位姿。在长尾场景中,PhyGrasp 取得了最先进的性能,成功率比 GraspNet 提高了约 10%。
Feb, 2024
本论文提出了使用多指机器人手和被操作物体之间的接触来表示抓取的新方法,并通过一个端到端的网络实现在杂乱环境中抓取未知物体的目标。同时,我们创建了一个包括五千个场景的综合数据集,并进行了全面的实验研究,实验结果表明,我们的方法表现优于目前最先进的三指机械手抓取方法。
Mar, 2023
本研究提出了一种新颖的基于元学习的方法,用于对未知对象进行六自由度姿态估计,并通过条件神经过程元学习训练将纹理和几何特征编码到隐向量空间,用于在新图像中预测对象的六自由度姿态,实验证明该算法在不同形状和外观的未见对象上具有强大的泛化能力。
Jun, 2022
本文提出 DensePhysNet 对于机器人物体操纵的物理表示的学习方法,通过动态交互序列和深度预测模型学习密集的像素表示,可以直接解码物理物体属性,并在下游任务中实现更精确和更有效的操纵。
Jun, 2019
通过学习经验,实现对新物体的抓取。引入密集几何对应匹配网络进行学习,以将相似几何结构的物体编码到近邻特征空间中,从而实现对未见物体的推广。最终实现成功率的提升和任务功能的优化。
Jan, 2020
该论文提出了一种名为 CGNet 的模型,通过使用基于自然语言命令查询目标对象,直接从 RGB 图像和文本命令输入中输出命令满足的抓取。在基于 VMRD 数据集生成的基础上进行训练,该模型的实验结果比级联物体检索和抓取检测基线要优越很多,并通过三个物理实验证明了该模型的功能和性能。
Apr, 2021
本文介绍了一种名为 NeuGraspNet 的新型方法,它使用神经立体表示和表面渲染的最新进展,学习了全局和本地的神经表面表示,并使用局部神经表面渲染问题对抓取进行重新解释,能够在遮挡的场景中操作,并展示了在移动机械手中应用的效果。
Jun, 2023
本文提出了一种深度学习架构,用于预测机器人操作的适合抓取的位置,通过使用 RGB-D 图像输入的深度神经网络实现对单个或多个对象的多个抓取候选项的预测,实验表明该方法在 Cornell 数据集上表现优于其他方法,在掌握实验中也获得了不错的成功率。
Feb, 2018
本篇论文提出了一种利用深度神经网络进行无监督或有限监督机械抓取学习的算法,该算法包括机械臂前向运动、与目标物体的碰撞检测、抓取姿态评价指标的构建,并且通过优化问题的敏感度分析提出了通用的 Q1 抓取评价指标,其中用到 watertight 三角形网格,实现了在各种 3D 形状数据集上比传统方法更高效率和鲁棒度的抓取姿态的学习和训练。
Feb, 2020