世界模型管预测,VLA管动作:两条路线为什么是互补而不是二选一

一个正在被反复讨论的选择题

具身智能圈有一个高频争论:机器人到底该靠世界模型,还是靠VLA(Vision-Language-Action)模型?一种声音认为,想让机器人在物理世界里“懂事”,必须先学会预测环境怎么变;另一种声音则认为,语言是最高效的抽象工具,VLA直接把看图和听指令变成动作,泛化能力更好。

这两种说法其实都没错,因为它们描述的是两种能力边界不同的技术路径。把它们的强项和短板逐项对照,再看数据、硬件成本、算力三个现实约束,你会发现这不是一道单选题,而是一道工程配置题。

世界模型:擅长“想象后果”

根据《订单狂飙,概念股飞涨!人形机器人真要爆发?闫维新:规模落地任重道远》(时代周报)中的描述,世界模型以视觉与运动数据为基础,通过生成式建模技术预测环境变化和行为后果,具备强大的时空预测能力,能对环境变化和车辆运动进行高精度预测。

它还有一个非常实用的强项:难例场景构建。现实世界中那些罕见但致命的极端情况——紧急避障、极端天气下的驾驶——真实采集成本极高甚至不可能,而世界模型可以在生成式框架里“造”出这些场景用于训练。对于需要长尾覆盖的自动驾驶和机器人安全训练来说,这一点很关键。

世界模型的响应速度快,但代价同样明显:同一份资料显示,世界模型对算力需求极高,硬件成本比VLA模型高出40%以上。这不是可以忽略的差距,而是直接影响方案选型的硬约束。

VLA模型:擅长“听懂再干”

VLA的思路是把视觉输入和自然语言指令融合,直接生成可执行的物理动作。上面同一篇报道里有一个很精炼的解释:VLA通过语言和文字这个中间环节,把具象化的路况、图像进行归类和“抽象化”,而不是对看过的数据“死记硬背”,因此能取得更好的泛化能力。

换句话说,VLA的长处在多模态融合和语义推理:它能理解“把桌上的杯子挪到架子第二层”这种模糊但人类自然下达的指令,并将其映射为动作序列。这正是服务场景最需要的能力。而它的短板也恰恰是世界模型补的位置——纯VLA结构难以有效掌握物理世界规律。正行创新的公开资料(《Innotech Ventures Portfolio Investments》,Crunchbase/CB Insights收录)就明确指出,“真实数据稀缺、遥操作数据采集效率低、纯VLA模型结构难以有效掌握物理世界规律,导致真实环境中操作成功率低下”是当前行业的普遍痛点。

三个现实约束,决定了不能只押一边

约束一:数据。 闫维新在同一场访谈中指出,目前行业严重缺乏具身智能交互数据,现有的只有几百万条,实际所需规模可能在上千万甚至上亿万条。更麻烦的是,机器人需要的是“动态交互数据”——抓取时的力反馈、行走时的身体微调——这类数据不仅稀缺,采什么(运动轨迹?人的操作?视觉、力的变化?)行业里还没有统一标准,各家数据无法互通。世界模型的难例生成能力,正好可以在这个缺口上发力:用生成的方式补真实采集覆盖不到的长尾。

约束二:硬件成本。 世界模型硬件成本高出40%以上,意味着全栈上世界模型的方案在商业上并不总是划算。对于成本敏感的量产机器人,合理的做法是把昂贵的预测能力用在刀刃上,而不是让每个动作都跑一遍重型时空预测。

约束三:算力与部署。 IDC在《交互需求驱动物理AI发展 助力人工智能向具身智能加速演进》(智通财经)中列出了物理AI的三大挑战:具身模型泛化能力不足、数据稀缺与高成本、嵌入式端侧部署受限——端侧算力、功耗和体积的限制使得实现实时“感知—决策—执行”闭环存在困难。这解释了为什么混合架构往往要做成端云协同:IDC描述的三平台分工——认知训练平台、虚拟仿真平台、实时部署平台——本质上就是把重算力放在训练和仿真侧,把轻量推理放到端侧。

工业与服务场景:按条件配置两条路线

结合上述能力边界和约束,可以给出一个粗略的配置原则:

  • 工业场景:任务结构化、指令明确、对精度和节拍要求高,VLA的语义理解优势不明显,反而需要世界模型做工艺后果预测和异常检测(碰撞预判、良率相关状态推演)。适合“世界模型为主、规则化执行为辅”。同时参考闫维新的观点,机器人进入工业场景首先缺失的是统一的世界模型与物理推理,以及自适应运动规划控制。
  • 服务场景:人机交互频繁、指令模糊,VLA的多模态语义推理是刚需;但涉及安全(端热汤、靠近老人)的环节需要世界模型做后果预测。适合“VLA为主、世界模型做安全兜底”。
  • 数据侧混合:无论哪种场景,都可以用世界模型生成难例和仿真数据,用VLA承接真实指令驱动的交互数据,形成互补的训练管线。IDC提到的虚拟仿真平台——融合物理引擎与数字孪生生成逼真、可复现的训练数据——正是这一思路的平台化落地。正行创新的“人在环路”强化学习后训练与数据闭环,据其公开资料称已将真实机器人任务成功率最高提升3倍,也说明数据闭环和模型架构需要协同设计。

局限与提醒

需要坦率说明几点:其一,“互补”目前更多是技术逻辑上的推演,两条路线的工程化融合(比如在世界模型里蒸馏出可端侧部署的预测头)仍处于探索阶段,没有成熟范式。其二,文中提到的成本差异、数据规模等具体数字均来自公开报道和访谈,不同团队的实际方案差异很大,不能直接套用到具体项目预算上。其三,IDC预测2029年全球机器人市场突破4000亿美元、具身智能机器人占比超30%,这类预测反映的是趋势方向,落地节奏受成本、安全和标准制约——正如闫维新所言,规模落地任重道远,“要边做、边落地、边推出”。

一句话总结:世界模型负责让机器人“想象做这件事会发生什么”,VLA负责让机器人“听懂你想要什么并去执行”。前者贵但看得远,后者通用但物理直觉弱。真正的落地方案,取决于你的场景更缺语义理解,还是更缺物理预测——以及,你的账上还有多少算力预算。

参考资料

以下链接为本文使用的公开资料。事实依据与检索摘录保存在本地记录中;资料内容与适用范围以原始页面为准。

Logo

DAMO开发者矩阵,由阿里巴巴达摩院和中国互联网协会联合发起,致力于探讨最前沿的技术趋势与应用成果,搭建高质量的交流与分享平台,推动技术创新与产业应用链接,围绕“人工智能与新型计算”构建开放共享的开发者生态。

更多推荐