有效的 Sim2Real 迁移干预设计
探究了一种称为 “Domain Randomization” 的技术,该技术使用非真实随机纹理来训练深度神经网络对象定位器,使得该定位器在真实环境中表现出色,并且可以应用于机器人控制中。
Mar, 2017
本研究定义了一种易于重现的实验设置,用于比较四种随机化策略及三种随机参数在仿真和实验机器人上完成的任务。研究发现,完全随机生成仿真和精细调整策略可以更好地转移到现实机器人,并且比其他测试方法更有差异化的结果。
Jun, 2022
使用可解释的度量方法,结合遗传编程技术,预测适用于特定 sim-to-real 场景的数据增强策略,并在无需训练模型的情况下为特定数据集设计数据增强策略。
Mar, 2024
本文介绍了一种简单的方法来解决在模拟训练中的现实差距问题。通过在训练过程中随机化模拟器的动力学,我们能够开发出适应非常不同的动力学的策略,并且使其在真实世界中推广而不需要在物理系统上进行训练。在机器人控制方面,我们的方法在物体推动任务上表现出了很好的性能。
Oct, 2017
本文从因果研究的角度出发,探讨了领域内数据缺失的问题,并提出用数据扩增方法进行干预,以此来解决数据的缺失问题。同时,本文通过理论和实证分析发现,相比其他数据扩增方法,干预模型的数据扩增方法能够更有效地提高模型的泛化性能。
May, 2020
通过在模拟环境中学习视觉运动策略,我们提出了一种通过视觉域随机化方法来解决模拟与真实世界之间差异的问题,并在丰富的机器人操作任务中进行了基准测试。我们的方法在各种挑战性的操纵任务中取得了 93% 的成功率,并证明了模拟器训练的策略在真实场景中的视觉变化下具有更好的鲁棒性。
Jul, 2023
通过使用自然语言描述图像作为统一的信号来捕捉底层的任务相关语义,我们提出了一种方法来解决在学习图像条件机器人策略时所面临的模拟与真实世界之间的视觉差距问题,该方法通过对大量模拟数据和少量真实演示进行同时训练,将图像编码器作为无域变迁的图像表示的基础,并取得了较之前的 Sim2Real 方法和 CLIP、R3M 等强大的视觉 - 语言预训练方法 25 至 40% 的性能提升。
May, 2024
本研究提出了一种基于域随机化的控制策略迁移方法,通过同时学习多种不同行为的控制策略来应对目标环境与训练环境之间的差异,而无需对动态参数进行识别,实验表明该方法可以成功地解决模型误差较大的情况。
Oct, 2018
本研究探讨了如何利用自动生成的抓取方法来解决机器人在实际环境中获取对象的问题,并就域随机化、从仿真到实际的转移性等问题进行了分析和研究。
Oct, 2023