Apr, 2023

自然语言机器人编程:将自然语言处理与自主机器人抓取集成

TL;DR本文提出了一种基于语法的自然语言机器人编程框架,特别用于拾取和放置任务,其方法使用自定义的动作词词典来存储共享意义的单词,通过增加更多的动作词从词汇数据库,轻松扩展词汇量。本文通过模拟和现实世界的实验验证了我们的自然语言机器人编程(NLRP)框架,使用配备了校准相机和麦克风的Franka Panda机器人手臂,并将参与者要求使用口头命令完成拾取和放置任务,该任务经由Google的语音转文本API转换为文本并通过NLRP框架处理,以获取机器人的联合空间轨迹,该方法具有高的系统可用性得分,可以轻松扩展字典而不依赖于转移学习或大型数据集,未来我们计划通过综合用户研究比较所述框架与不同人类辅助拾取和放置任务的方法