使用 Gemini 引导任务树:方法与见解
提出了一种基于 behavior tree 和大型语言模型的任务生成方法,该方法支持跨领域和自动生成任务,仅需要描述抽象期望任务即可快速生成行为树。
Feb, 2023
介绍了通过内置的自主机器人来扩大 LLM 响应的空间,根据语言能力、身体实体、环境和用户喜好挑选、修补、选择 LLM 提供的响应,从而使机器人能够完成 75% 以上的任务一次学习并显著减少需要人工监督的程度。
Jun, 2023
研究了如何将在一个环境中学到的知识传递到另一个环境中的关键问题,并通过学习人类期望机器人执行哪些任务的中间表示方法,来提高机器人学习效率,从而为人类与机器人的互动打下基础。
May, 2022
该研究提出了一种将人类专业知识和 LLM 结合的任务规划方法,通过逐步分解任务并生成任务树来减少每个任务的计划量,并设计了一种策略来分离机器任务计划,从而使任务计划过程更加灵活。
Jun, 2023
通过使用语言模型提示,我们提出了新一代机器人可以通过使用机器人模态语言模型(MLM)单独独立地与特定的机器人模态进行通信。一个中央任务模态通过大型语言模型(LLM)中介整个通信过程以执行机器人任务。我们将这种新的机器人设计模式命名为 Prompting Robotic Modalities(PRM),并在一个新的机器人框架 ROSGPT_Vision 中应用了这种 PRM 设计模式。ROSGPT_Vision 通过仅使用两个提示(一个视觉提示和一个 LLM 提示)来执行机器人任务,实现了处理视觉数据、做出明智决策和自动执行操作的能力。
Aug, 2023
通过建立提示的结构化理解,本文通过整理提示技术的分类法和分析其使用,提供了 33 个词汇术语、58 种文本提示技术以及 40 种其他模态的技术,还对自然语言前缀提示的整个文献进行了元分析。
Jun, 2024
本文介绍了一个名为 RoboBrain 的知识引擎,它可以学习和分享各种机器人任务的知识表示,并被应用于自然语言处理、知觉和规划等重要研究领域。
Dec, 2014
本文介绍了一种通过虚拟现实人类任务演示自动生成可执行机器人控制程序的系统,利用常识知识和基于游戏引擎的物理,以及自动路径规划和代码生成,实现了具有表现力和通用性的任务表示,在强力抓取和放置机器人购物助手的场景中进行了演示。
Jun, 2023
通过引入一个有效的框架,从多任务的专家轨迹中学习使用多模式提示进行机器人操作,我们在 VIMA-BENCH 上评估了方法的功效,并建立了一个新的最先进水平(成功率提高了 10%)。此外,我们还展示了我们的模型具有显著的情境学习能力。
Oct, 2023