苹果 HALO 人形机器人：360 次实测 91% 成功率 用 Qwen3.6

4 hours ago AI闪点

11 月 4 日，苹果研究团队在预印本平台 arXiv 提交论文《Perceptive Humanoid Motion from Simulation》，披露人形机器人自主控制系统 HALO。论文同时公开了数据生成、模型训练与部署代码，覆盖动作生成、动作跟踪、任务编排以及仿真和真实机器人运行等环节。

三层控制栈，跑在宇树 G1 上

落地阶段团队采用宇树科技 G1 人形机器人，背部加装专用 3D 打印保护外壳，机载端内置一台 M4 Pro 芯片、64GB 统一内存的 Mac mini，承担计算开销较大的 Orchestrator 与 Motion Generator 两部分推理，板载芯片则专注高频运行 Tracker 策略网络。

执行任务时 HALO 由三个层级协同控制。最上层是基于视觉语言模型的任务编排模块，默认采用千问 Qwen3.6-35B-A3B，系统也可选择通过 API 调用云端模型；中间的动作生成层用另一款千问模型 Qwen3.5-2B；底层则是经过强化学习与策略蒸馏训练的动作跟踪器，以每秒 50 次的频率运行。

6 个未建图环境 360 次测试

论文披露，团队在 6 个未预先扫描或建图的真实环境中开展 360 次单项任务测试，平均成功率为 91%。在长序列复合任务上，单一真实场景各做 10 次测试，3 种组合的平均成功率为 70%，其中最复杂的俯身通过障碍、走向目标、推箱子组合 10 次测试成功 5 次，成功率 50%。

训练成本同样公开：主要训练数据由 250 张英伟达 H100 合成，耗时约 48 小时，动作生成器用 64 张 B200，动作跟踪器用了 4 张 H100。团队也承认仿真数据并未完全摆脱人工，新增物理任务仍需人工编写提示词、设计动作关键帧，部分动作还使用了人类视频或动捕素材。

触觉是明确的下一步

研究人员指出，目前机器人主要依赖视觉感知，难以直接感知接触情况。当物体离开相机视野或被遮挡时，涉及较多接触的任务表现会明显下降，加入触觉感知被列为后续改进方向之一。

把整套栈子拆开看，视觉语言模型负责编排、千问小模型负责生成动作、策略网络负责落地执行，这种分工与Meta Max 人形机器人 48 公斤原型代表的是同一阶段的路线选择。

延伸阅读

AI 自学笔记 每天更新 AI 前沿动态，订阅 RSS，或按 Ctrl/⌘+D 收藏本站，明天见。

继续读

同一批更新里这几篇值得一看：

想快速查定义？对应的词条在这里：

Related News