GPT-6 Astra 作为原生机器人策略的实证研究

NVIDIA Astranomy 揭示具身智能的新路径

技术解读|Physical AI · 机器人基础模型 · 遥操作与数据采集

大模型转向具身引起热潮

导读

当通用大模型开始直接控制机器人,机器人是否还必须依赖专门训练的机器人策略模型?能否让大模型理解任务、观察环境、规划动作,并根据执行结果持续调整控制策略?

NVIDIA Research 于 2026 年 10 月 14 日发布技术报告《Astranomy: An Empirical Study of GPT-6 Astra as a Native Robot Policy》,围绕这些问题展开实验。研究团队评估通用模型直接生成机器人动作、借助智能体框架执行任务,以及监督专用机器人策略等不同方式,探索通用推理能力转化为机器人操作能力的可能性。

大模型推理转化机器人实际操作能力未知

研究的价值不只是看大模型能否抓取和放置物体,更在于分析动作如何表达、环境信息如何提供、执行反馈如何利用,以及推理延迟和成本如何影响实际部署。

一、核心实验:让通用大模型直接成为机器人策略

传统机器人基础模型通常依赖机器人数据进行预训练或微调,将视觉、语言和状态信息转化为动作。Astranomy 探索另一条路径:不额外训练专用机器人策略,而是在推理阶段通过提示词、动作接口和上下文信息,让通用模型直接生成操作指令。

1. Direct Policy:直接生成动作

模型根据相机图像、机器人状态和任务指令,直接输出末端执行器目标或关节动作。结构较简单,但每次调用不保留完整的历史交互上下文。

2. Agentic Policy:智能体增强策略

模型运行在具有持续上下文的 Codex 会话中,可以利用历史观察、动作记录和可用工具辅助决策,形成更完整的任务规划与执行闭环。

3. Orchestrated Policy:协调式策略

由专用机器人策略模型提出动作方案,再由通用大模型观察任务进展、评估动作是否符合目标,并在必要时进行干预。

三种架构的关键区别在于:大模型究竟直接负责动作生成,还是借助智能体增强推理,或充当专用机器人策略的监督与纠错层。

二、实验结果:成功率提升,但推理速度仍是瓶颈

在 RoboLab-120 基准上,报告给出的三种策略成功率分别为 Direct Policy 66.3%、Agentic Policy 74.8%、Orchestrated Policy 66.5%。Agentic Policy 比 Direct Policy 高 8.5 个百分点,说明保留历史上下文、分解任务并利用工具辅助推理,在部分操作任务中能够改善执行效果。

图1|RoboLab-120 上三种 Astranomy 策略的任务成功率。数据据 NVIDIA Research 项目页面整理。

策略

单次调用平均延迟

每回合 API 成本(报告值)

Direct Policy

18.56 秒

约 1.96 美元;约 16 万 tokens

Agentic Policy

13.37 秒

约 36.40 美元;约 3090 万 tokens

Orchestrated Policy

11.50 秒 / 2.74 秒

约 17.72 美元;约 1100 万 tokens

注:协调式策略的延迟分别对应大模型监督调用与专用策略调用。不同架构的调用方式并不完全相同,成本与延迟不宜脱离任务设置直接比较。

高成功率也伴随明显的资源成本。研究说明通用大模型可以承担机器人策略角色,但不能仅凭成功率判断其是否适合大规模、低延迟的真实部署。

三、Astra推理影响机器人表现的,不只是模型大小

动作接口决定模型如何理解机器人

模型可以输出末端执行器目标、关节位置目标,或关节空间的 B-spline 轨迹。不同动作表示会改变模型规划和控制的难度。机器人控制接口设计是模型性能的重要组成部分。

几何与状态信息至关重要

相机图像能够提供物体外观和位置线索,但未必能唯一确定三维位置、姿态及与夹爪的相对关系。适当地提供机器人几何、相机参数和末端状态,有助于建立视觉观察与动作之间的联系。

任务分解和历史记录有助于多步骤执行

对于分类、按序放置、堆叠和整理等任务,模型需要知道当前子目标、此前执行了什么,以及动作是否产生预期结果。持续上下文有助于根据反馈修正计划,但不意味着所有任务都能稳定完成。

智能体工具并非越多越好

工具、显式规划和动作误差反馈可以帮助决策,但更多推理步骤也会带来延迟和成本。实际系统需要根据任务复杂度,在推理能力、执行效率和稳定性之间取得平衡。

四、对具身智能产业的启示:从“会思考”走向“能可靠执行”

Astranomy 展示了通用大模型直接承担机器人策略的潜力,但并未证明通用模型已经能够替代所有专用机器人基础模型。研究集中在特定基准下的通用抓取与放置任务,且推理延迟对于需要高频反馈的控制仍然偏高。

  • 高质量机器人数据仍然重要。模仿学习、视觉语言动作模型(VLA)及其他机器人策略的训练和验证,都需要具有明确动作、状态与任务结果对应关系的数据。
  • 高层推理与底层控制可以分工。大模型可负责任务理解、目标分解和异常处理,专用策略、运动规划器及实时控制器负责高频动作执行;具体分工应根据任务和系统架构验证。
  • 遥操作与数据采集是连接算法和真实机器人的关键环节。人类示范、机器人状态、视觉信息、动作轨迹和执行反馈可以构成训练与评估数据闭环,帮助研究团队比较不同模型和控制方案。

对于医疗机器人、精细操作、双臂协同和灵巧手操作等应用,系统不仅需要理解任务,还必须满足接触力控制、定位精度、响应速度与安全约束。因此,通用模型能力需要与机器人本体、传感器、控制接口和实验验证体系协同发展。

五、PNP Robotics:构建面向 Physical AI 的机器人操作与数据平台

围绕具身智能从算法研究走向机器人实操,PNP Robotics(集智联机器人)提供面向 Physical AI、模仿学习与强化学习的机器人操作及数据采集解决方案。

基于 FRANKA 机械臂、双臂操作平台、遥操作设备与高自由度灵巧手,PNP Robotics 可面向研究项目搭建机器人控制、示范采集、动作复现和算法验证环境,支持研究人员探索从人类操作示范到机器人自主执行的技术路径。

对于正在研究 VLA、机器人基础模型和智能体控制的高校实验室及企业研发团队,完整的实验链路尤为重要:既要能够采集和复现动作,也要能够获取机器人状态、记录执行结果,并对不同控制策略进行评估。将硬件、软件和数据流程整合起来,有助于缩短从算法原型到实体机器人实验的开发周期。

未来,随着通用大模型、专用机器人策略与实时控制技术持续融合,机器人系统的竞争力将不仅取决于模型本身,还取决于高质量数据、可靠控制和完整验证体系的协同能力。

参考文献

  1. Yang, J. X., Khetan, A., & Zhang, S. “Astranomy: An Empirical Study of GPT-6 Astra as a Native Robot Policy.” NVIDIA Research, October 14, 2026. Astranomy: An Empirical Study of GPT-6 Astra as a native robot policy
  2. Yang et al. RoboLab: A High-Fidelity Simulation Benchmark for Analysis of Task Generalist Policies. RSS, 2026.
  3. Octo Model Team et al. Octo: An Open-Source Generalist Robot Policy. RSS, 2024.
  4. NVIDIA. Cosmos 3: Omnimodal World Models for Physical AI. 2026.
  5. Li et al. Causal World Modeling for Robot Control. RSS, 2026.
  6. Physical Intelligence. π0.5: a Vision-Language-Action Model with Open-World Generalization. CoRL, 2025.
  7. Zhang et al. An Unexpected Robot Policy: Early Evaluations of GPT-6 Astra on RoboDojo and Beyond. 2026.
  8. Su et al. GPT 6 Astra as an Embodied Policy. 2026. Technical report.
  9. Galbot Team. Systematically Exploring the Capabilities of GPT-6 Astra as Embodied Policies. 2026.
  10. DROID Dataset Team. DROID: A Large-Scale In-the-Wild Robot Manipulation Dataset. RSS, 2024. Accessed October 11, 2026.
  11. Zhou et al. BEAST: Efficient Tokenization of B-Splines Encoded Action Sequences for Imitation Learning. NeurIPS, 2025.
  12. Gasparetto and Zanotto. A new method for smooth trajectory planning of robot manipulators. Mechanism and Machine Theory 2007, 42(4), 455–471.
  13. Han et al. B-spline Policy: Accelerating Manipulation Policies via B-spline Action Representations. 2026.
  14. Fu et al. ICRT: In-Context Imitation Learning via Next-Token Prediction. ICRA, 2025.
  15. Black Forest Labs. FLUX 3 Action. 2026. Model report.
  16. OpenAI. OpenAI API pricing. Accessed October 11, 2026.
Logo

DAMO开发者矩阵,由阿里巴巴达摩院和中国互联网协会联合发起,致力于探讨最前沿的技术趋势与应用成果,搭建高质量的交流与分享平台,推动技术创新与产业应用链接,围绕“人工智能与新型计算”构建开放共享的开发者生态。

更多推荐