机智前沿 Logo 机智前沿 RoboAI Frontiers ← 返回首页
专题 — 生成式AI

基础模型能否获得"身体"?——机器人专用VLA模型前沿

曾经只处理文字和图像的基础模型,如今开始被嵌入机器人,成为驱动其"眼睛"与"双手"的大脑。我们追踪了被称为Vision-Language-Action(VLA)模型的这类新技术,究竟离实用化还有多远。

示意图:整合视觉、语言与动作的VLA模型概念图

几年前,基础模型的用武之地还仅限于生成文字和图像。但最近,将这类模型引入机器人控制系统的趋势正在迅速扩大。看懂摄像头画面、理解当前状况、直接输出下一步该做什么动作——这正是Vision-Language-Action(简称VLA)模型的核心逻辑。

"把看到的东西直接转化为动作"这一想法本身并不新鲜。但多位研究者都认为,大规模基础模型的出现,让系统应对未知物体和陌生场景的能力大幅提升,才是真正的转折点。

通用性与可靠性的权衡

VLA模型最大的优势,在于不同于针对特定任务定制的传统控制程序,它对未经训练的物体和环境也具备一定的应对能力。但与此同时,来自一线的反馈也不少:"偶尔会做出无法预测的动作。"

生成式模型那种"创造力",在工厂现场有时候只会让人心惊胆战。 ——自动化咨询顾问(匿名)

正因如此,在实际的量产线上,越来越多企业不会直接执行VLA模型的输出结果,而是采用一种混合架构:在其外层再加一道基于规则的安全控制层。

下一个竞争焦点

各家企业接下来争夺的焦点,是"轻量化竞赛"——在缩小模型体积的同时保持精度。许多现场场景无法容忍云端推理带来的延迟,因此能否将模型压缩到可直接搭载在机器人本体上的规模,将成为决定实用化速度的关键。