Habitat 3.0:人类、化身和机器人的共居空间
介绍 Habitat 2.0 (H2.0) 为一种用于在交互式 3D 环境和复杂的物理启用技术中训练虚拟机器人的仿真平台。在数据、仿真和基准任务的所有层面上都做出了全面的贡献。使用 HAB 测试移动操作能力。比较 deep RL 和 SPA 管道。发现 flat RL 与独立技能的层次结构存在 “hand-off” 问题,同时 SPA 传统管道比 RL 策略更脆弱。
Jun, 2021
介绍 Habitat 平台,该平台在实现高效的真实感三维模拟环境中培训虚拟机器人及相关任务如导航和嵌入式人工智能方法等方面做出了重大工程贡献。通过使用 Habitat 平台,作者在点 - 目标导航方面,通过比较学习与 SLAM 方法,发现当学习处理的数据量超出先前调查的数量级时,学习方法比 SLAM 方法更优。此外,在进行多个数据集和传感器的横向通用性实验时,作者发现仅使用深度 (D) 传感器的模型才具有数据集通用性。作者希望 Habitat 平台及其研究成果能够推动嵌入式人工智能领域的发展。
Apr, 2019
本研究探讨了如何将基于逻辑型 BEHAVIOR 活动定义转化为不同模拟器中的相对应活动作为第一步,拓展机器人在家庭任务中的应用,为此我们提出了一种适用于不同领域和场地的标准测试方法。
Jun, 2022
基于机器人的状态 - 动作历史,提出了第一个社交动力学适应模型(SDA),用于推断社交动态。在共享环境中,机器人通过学习人类轨迹并基于该信息、当前状态和前一动作学习运动策略,成功实现了人机协作和社交导航。通过在 Habitat 3.0 平台上的实验,SDA 展现出了前所未有的优秀表现,达到了新的技术水平。
Apr, 2024
本文介绍了 HabiCrowd,这是第一个将人群动态模型与不同人物设定集成到逼真环境中的视觉导航基准,实证评估表明,我们提出的人体动力学模型在避碰方面具有卓越的计算效率和最新技术性能,利用 HabiCrowd 进行了人群感知视觉导航任务和人机交互方面的几项研究。
Jun, 2023
大规模仿真学习研究证明在新环境中使用人类示范对比传统的强化学习对于机器人物品寻找的效率更高,在目标导航和 Pick&Place 方面都表现出良好的表现,并呈现出不错的收缩算法的可能性。
Apr, 2022
在自主导航的地面机器人领域,现有的研究大多使用真实感的动力学和感知模型,而本篇论文致力于通过在仿真环境中进行端到端的训练,减小模型在现实机器人平台上的差距,并取得了显著的性能和稳健性的提升。
Jan, 2024
本研究通过一个协同迷宫游戏设计,用深度强化学习技术实现了人机共同协作。研究结果证明人机共同协作相互影响,在时间的推进下不断适应并建立起相应策略,这为人机智能的协作提供了可行的方案。
Mar, 2020
我们提出了一种以人为中心的楼宇内具身交付商业场景的具体商业模拟,并开发了一个全新的虚拟环境系统,构建了一个模拟极地研究站的多层连接建筑空间,并包括具有抓取和移动能力的自主人物和机器人以及大量的交互物品。基于该环境,我们建立了一个包含 13,000 个语言指令的交付数据集,用于指导机器人提供服务。我们通过人物模拟人类行为,并对他们日常生活中的各种需求进行采样。最后,我们提出了一种以大型多模型为中心的方法,作为该数据集的基线系统。与过去的具身数据工作相比,我们的工作侧重于以人机交互为中心的商业情景下的虚拟环境。我们相信这将为具身社区带来新的视角和探索角度。
Jun, 2024