Skip to content
最新解读专题公司术语表关于
术语表 · 概念解读

什么是 VLA(视觉-语言-行动)模型?

VLA 模型是一种机器人基础模型:输入摄像头图像和语言指令,直接输出机器人动作。

更新:

定义

视觉-语言-行动(VLA)模型把“机器人看到什么”和“被告知做什么”映射为“应该怎么做”。多数 VLA 从预训练的视觉-语言模型出发,再加上用机器人数据训练的动作输出头。

工作流程

  1. 编码图像(通常还有机器人状态)和文字指令。
  2. 预测未来动作,例如末端位姿和夹爪指令。
  3. 执行部分动作,再观察、再规划。

为什么重要

VLA 是能跨任务、跨机器人工作的“通用”机器人策略的主流路线。参见具身智能。

常见问题

VLA 和视觉-语言模型(VLM)有什么区别?

VLM 用文字回答;VLA 增加了动作输出,通常是一小段未来电机指令,因此能控制机器人。

什么是动作块(action chunk)?

一次预测出的一段固定长度的未来动作序列。Vela 等研究在探索用连续轨迹替代它。

VLA 有哪些局限?

很多 VLA 主要依赖当前一帧画面,缺少触觉和记忆,难以完成长时间、接触密集的任务。NEURA 的 Neuron AI 等模型增加了更多感官和记忆。

相关报道

Newsletter

Robrief 周报

每周一封,只讲重要的机器人新闻。免费,可随时退订。