Jun, 2024

人性化的楼内实体送货基准

TL;DR我们提出了一种以人为中心的楼宇内具身交付商业场景的具体商业模拟,并开发了一个全新的虚拟环境系统,构建了一个模拟极地研究站的多层连接建筑空间,并包括具有抓取和移动能力的自主人物和机器人以及大量的交互物品。基于该环境,我们建立了一个包含 13,000 个语言指令的交付数据集,用于指导机器人提供服务。我们通过人物模拟人类行为,并对他们日常生活中的各种需求进行采样。最后,我们提出了一种以大型多模型为中心的方法,作为该数据集的基线系统。与过去的具身数据工作相比,我们的工作侧重于以人机交互为中心的商业情景下的虚拟环境。我们相信这将为具身社区带来新的视角和探索角度。