CVPRJun, 2024
DriVLMe: 用具身化和社交经验增强基于 LLM 的自动驾驶代理
DriVLMe: Enhancing LLM-based Autonomous Driving Agents with Embodied and Social Experiences
Yidong Huang, Jacob Sansom, Ziqiao Ma, Felix Gervits, Joyce Chai
TL;DR基于视频和语言模型的 DriVLMe 智能代理在自动驾驶中表现出相对竞争力,但仍存在推理时间过长、训练数据不平衡、视觉理解能力有限、多轮交互挑战以及处理环境动态和任务变化等实时场景中的困难。