网易首页 > 网易号 > 正文 申请入驻

通用大模型正在重做机器人的研发与交付

0
分享至



智讯智库分析师 陈宥文



这次,把机器人行业推到分叉路口的,是通用大模型这个“最熟悉的陌生人”——

有人拿它“替掉”VLA,有人拿它“加速”VLA。

短短两天,两桩标志性事件先后落地,把这条分叉路的两端踩得异常清晰。

10月16日,工业自动化初创公司MicroFactory创始人披露,据其自述,在单次客户部署项目中,团队采用通用大模型生成控制方案、专用程序执行作业的路线,整套系统基于Claude Opus、GPT-6 Astra等通用大模型搭建[1]——机器人连续1.5小时自主装配电子产品且全程零操作失误,覆盖的自动化范围超出团队最初预期[2]。


图注:连续1.5小时零操作失误为公司披露结果。

图片来源:MicroFactory创始人Igor Kulakov(X),2026-10-16

仅仅两天前的10月14日,机器人研发与真机评测平台Poke & Wiggle走出了另一条路径:他们让Claude Opus 5.5接管了从读论文、写算法到训模型、测真机的全流程,尝试复现10篇近期机器人研究论文的核心结论[3]。大模型并非用来替代专用视觉-语言-动作模型(Vision-Language-Action Model,VLA),而是为VLA的研发与迭代提速。

两项案例共同呈现的变化,是通用大模型开始承担更多机器人方案设计、代码实现、调试与实验编排工作。目前更有依据的判断是,机器人集成与研发流程正在发生变化;这些进展尚不足以证明通用大模型能够普遍替代VLA。

要点速览:
  • 本轮进展首先改变的是机器人集成、研发与真机实验流程,两项案例尚不足以证明通用大模型能够普遍替代VLA。MicroFactory在特定装配任务中,采用“通用模型生成方案、视觉与控制程序执行”的架构;Poke & Wiggle则让Claude参与算法实现、模型训练和真机评估。共同增量是:更多原本依赖工程师反复完成的开发与实验工作,开始由通用AI承担。
  • 通用大模型的短期价值,主要在于加快方案设计、代码实现、调试和实验编排;执行层仍需根据任务选择技术。固定工位中的重复操作,可以交给经过验证的程序;需要快速响应、连续动作生成和复杂接触操作的任务,VLA与专用控制仍可能是关键层。通用模型既能替代部分任务方案,也能帮助开发和改进专用策略。
  • 通用能力更容易获得后,企业壁垒将更多落在可验证、可复用的工程资产与交付能力上。经过验证的任务程序、覆盖失败与恢复的真实场景数据、适配工艺的工装,以及跨工位复制和维护能力,决定了企业能否把外部模型的进步转化为自身优势。最终需要验证的是:新任务开发更快了多少、运行中减少了多少人工干预,以及复制部署的成本能否持续下降。



通用大模型

切入机器人系统的三种模式

这里所说的通用大模型,是指面向通用场景训练、具备多模态推理与代码生成能力的大型语言模型(LLM)。从近期实践看,通用大模型切入机器人系统,主要沿三条路径展开:

  • 代码生成/集成自动化模式:针对固定重复性任务,由通用大模型生成专用控制程序,替代部分人工集成与编程工作,核心验证场景适配范围、生产节拍与运行可靠性。
  • 分层协作模式:通用大模型负责高层任务规划、环境理解与异常处理,VLA负责底层连续动作生成,二者通过标准化控制接口协同。
  • 研发辅助模式:通用大模型深度参与论文复现、算法实现、模型训练与真机评估,加速包括VLA在内的机器人技术迭代。

三种模式并非互斥,完全可以在同一套系统中组合使用:固定工位的重复动作交给专用控制程序,复杂柔性操作调用VLA策略,高层的任务组织与研发流程则由通用Agent统筹。

今年7月Anthropic的一项研究也印证了这一点:他们对比了直接控制、生成控制代码、监督已有策略、训练新策略等多种交互方式,发现模型的实际表现高度依赖于连接方式。复杂机器人对底层控制的刚性要求,始终是技术选型绕不开的约束[4]。

这也意味着,接下来的行业比拼,从来不是“谁家模型更强”这么简单。同样的通用大模型,搭配不同的接口架构、数据链路、控制逻辑与评测体系,最终的落地效果可能天差地别。



MicroFactory的路径:

通用大模型生成方案,专用控制程序执行

MicroFactory这次实践的核心,是把高层推理与快速执行拆成了两层。

基于Opus、Astra的AI智能体(Agent,指基于大模型构建、具备自主规划与工具调用能力的智能体)负责理解任务目标、选择控制算法、编写自动化代码;大量重复性的执行动作,则交给生成好的视觉与控制程序完成。只有当现场出现程序无法覆盖的新状况时,通用大模型才会介入调整流程[1]。

这和过去“大模型逐帧感知、一步一指令”的控制逻辑截然不同:程序一旦通过验证,就能以固定节拍高速重复运行,既省去了生产过程中持续调用大模型的Token成本,也消除了每轮推理带来的响应延迟。

本质上,这仍是工业自动化一贯的工程哲学:凡能固化的动作,绝不浪费通用能力。面对姿态各异的来料零件,系统通过辅助工装完成分离、翻转和重新抓取;面对高精度插装工序,则由通用大模型生成视觉与控制程序,结合视觉反馈调整装配精度[1][5]。即便是抓取螺丝这类基础动作,团队最终也选择了成本约300美元的自动供料器来保证稳定性[6]。

最终呈现的是一套极度务实的技术组合:通用大模型负责快速生成方案、应对非标变化;视觉算法、小型专用模型、工装夹具与机械臂共同负责稳定执行。

MicroFactory官网也明确划分了两类适用场景:抓取、连接器插装等重复性高的任务,优先采用AI生成的自动化程序;需要持续推理、灵活应变的复杂任务,再直接调用通用大模型——后者会消耗更多Token,执行速度也相对较慢[5]。



换句话说,更强的通用AI,价值在于生成更适配的程序和工具,以此提升机器人的整体效率,而非亲自介入每一次动作循环。

这种“重开发、轻执行”的分工,也直接重构了大模型的成本曲线。模型调用费用不再持续发生在生产全流程,而是集中在方案开发和任务换型阶段。按照MicroFactory的模式,用户仅在产线训练、工艺重构时支付模型调用费用;任务定型后由本地模型(部署在产线本地、无需云端调用的轻量控制模型)执行,无需持续支付云端调用费,设备报价中已包含五年的本地模型许可[5]。

对于多品种、小批量的制造场景,换型的编程与调试成本向来是自动化落地的核心门槛。如果这部分投入能显著下降,很多原本不具备经济性的自动化项目或将变得可行。

当然,方案的最终验证仍需落在生产节拍、产品良率、人工干预频率等长期指标上——据创始人自述,单次客户部署场景下连续1.5小时零失误——这只是其中一项阶段性证据。



Poke & Wiggle的路径:

通用大模型接管研发实验台

如果说MicroFactory把大模型用在了执行的“最后一公里”,Poke & Wiggle则把通用AI推到了研发的“最上游”。

其推出的Poker平台,把数据预处理、模型训练、真机评测全链路打包成标准化接口。Agent可以自主完成从读论文、选任务、复现算法,到训练基线模型、申请真机验证的全流程;现场团队负责工位准备、环境复位与质量检查,研究人员参与方法审核,并在需要时纠正实验方向[3]。


图注:Poke & Wiggle此前公开的机器人实验设施。

现场人员承担工位准备、环境复位与质量检查。

图片来源:Poke & Wiggle官网。

这套自动化科研流程很快跑出了可量化的结果,同时,也毫不掩饰地暴露了真实问题。

在Patch Policy实验中,团队使用同一预训练视觉编码器,对比密集视觉特征与单个CLS特征的效果。在其所选任务与评测条件下,前者将任务成功率从约3.3%提升至25.6%,提升幅度约22.2个百分点。相对改善得到了明确验证,但绝对成功率依然偏低,也侧面反映出这类任务在当前实验设置下的固有难度[7]。

更耐人寻味的是DSD实验,它无意中揭开了AI做科研的一体两面:既能高效跑通复杂流程,也可能悄悄改变实验的核心前提。Agent首次执行时,自行扩大了动作归一化的取值范围,结果在其平台设定的任务与评测条件下,并未发现DSD相对基线的明显优势[8]。当研究人员要求恢复论文规定的基线参数后,DSD成功率达到45.3%,基线为32.0%,领先13.3个百分点[9];而在Agent扩大后的取值范围下,基线成功率反而达到46.0%,与DSD几乎持平。最终的原始记录同时保留了复现结果,以及参数偏移带来的影响[8–9]。







图注:DSD实验对照:论文原始主张与两轮复现结果。(a) DSD论文真机实验结果,论文报告DSD-BIN平均成功率较BIN提升13.3个百分点(60.0%→73.3%,无机器人预训练);(b) Agent首轮复现报告:自行将动作归一化取值范围从论文的1/99分位扩大至0.1/99.9分位后,未观察到DSD相对基线的明显优势(45.3% vs 46.0%);(c) 恢复论文基线参数后的复现结果:DSD平均成功率45.3%,基线32.0%,提升13.3个百分点。论文与复现实验的任务集与测试条件不同,结果不可直接互换比较。
来源:(a) Duan Y, Yin H, Longhini A, et al. Direction-Scale Decomposition in Action Representation: Rethinking What to Tokenize for Vision-Language-Action Models[EB/OL]. arXiv:2609.28865, 2026-09-24, p.7, Fig.4. (b)(c) Poke & Wiggle. Chapter 2: Towards an agent-native CERN of AI robotics[EB/OL]. (2026-10-14)[2026-10-16].

这对产业研发有非常直接的启示:如果目标是复现论文结论,就必须严格守住关键实验条件;如果目标是筛选最优落地方案,则有必要对比经过合理优化的多种替代路径。

Poke & Wiggle接入微软Rho的实验,进一步展示了通用模型与专用机器人模型在研发流程中的协作。

据公司披露,Agent在接到任务后的次日完成了Rho的集成、训练和真机测试,并在倒螺丝任务上取得87%的成功率,结果限于其平台与测试条件[3]。在这之中,Claude承担模型接入、训练与评测等开发工作,Rho承担机器人动作生成。





图注:通用模型与专用模型的协作:Rho接入实验与其模型设计。(a) Poke & Wiggle团队内部沟通记录:Agent完成Rho接入后,倒螺丝任务成功率达87%(基于其平台与测试条件);(b) Rho的三个双臂本体版本,模型设计将"适配机器人本体"与"适配具体任务"拆为两个独立阶段。
来源:(a) POKE & WIGGLE. Chapter 2: Towards an agent-native CERN of AI robotics[EB/OL]. (2026-10-14)[2026-10-16].(b) RHO TEAM. Rho: A Foundation for Efficiently Adaptable VLA Models[EB/OL]. arXiv:2609.38164, 2026-09-29, p.2, Fig.1.

微软对Rho的设计也印证了这种分工趋势:这是一组开放权重、约50亿参数的双臂操作模型,提供适配不同机器人平台的版本,把“适配机器人本体”和“适配具体任务”拆成两个阶段处理[10]。

除了做实验,Agent的自主排错能力同样刷新了研发的效率边界。在一次实验中,Agent发现连续10次真机评估全部失败,便主动读取运行日志,定位到自己修改的推理代码存在缺陷,随后自动回滚代码、更新服务镜像并重启测试。据公司披露,从发现问题到修复后重新启动评估,全程不到35分钟[3]。

当写代码、调bug这些软件侧的工作越来越多地被Agent承接,研发迭代的瓶颈就开始向硬件端转移:真机可用时长、环境复位速度、评测体系可靠性,正在成为新的限速步。

软件迭代越快,对可靠、高效的实验基础设施的依赖就越强。



真正的壁垒,

仍是可沉淀的工程能力

通用大模型正在拉平机器人行业的基础开发门槛,竞争逻辑随之重构。

对依赖人工编程调试的系统集成商而言,基础开发成本下探,团队人效提升——但成本能否转化为利润,仍取决于交付定价、维护投入与方案可复制性。

对自研专用模型的企业,这轮变化无疑带来了一次更为直接的拷问:相比外部通用能力,自身方案在数据效率、响应速度、复杂接触操作上的独有优势是什么?这些优势又能否稳定、低成本地复现?上游硬件厂商同样无法置身事外。

MicroFactory采用FAIRINO FR3机械臂的案例印证:通用硬件对接大模型可快速拓展应用边界。

对国内厂商而言,接口标准化、文档完善度与软件适配能力,将直接决定新场景的切入效率。

当写代码、调算法不再是高门槛,企业的核心护城河正向工程层面沉淀:经过验证的任务程序库、故障纠错数据、成熟工装方案,以及跨设备复制维护的工具体系。

通用AI拓宽的是全行业的技术供给,而非替代所有机器人控制方案。其短期价值在于提效方案设计、代码实现、调试排错与实验编排全流程;在实时、连续、复杂操作场景中,VLA与专用控制程序仍是执行核心。

技术供给是全行业的公地,只有将通用能力转化为稳定可靠的任务交付、低成本规模化复制,才能把模型势能沉淀为商业价值。行业长期的核心壁垒,最终将落在可验证的程序、真实场景数据、成熟工装与可复制的交付能力上。

参考资料:

[1] KULAKOV I. Over the past month, we completely switched to frontier LLMs to control a robot in a customer deployment[EB/OL]. X, post 2110866012333838675[2026-10-16].

[2] KULAKOV I. [X post: 2110866629714469204][EB/OL]. X[2026-10-16].

[3] POKE & WIGGLE. Chapter 2: Towards an agent-native CERN of AI robotics[EB/OL]. (2026-10-14)[2026-10-16].

[4] BERMAN S, ILIE M, DENG J, et al. Claude plays robotics[EB/OL]. Anthropic, (2026-07-09)[2026-10-16].

[5] MICROFACTORY. MicroFactory[EB/OL]. [2026-10-16].

[6] KULAKOV I. [X post: 2110866864092143973][EB/OL]. X (2026-10-16)[2026-10-16].

[7] POKE & WIGGLE. Patch Policy (CLS versus Dense)[EB/OL]. (2026-10-08)[2026-10-16].

[8] POKE & WIGGLE. DSD iteration 1[EB/OL]. (2026-10-05)[2026-10-16].

[9] POKE & WIGGLE. DSD[EB/OL]. (2026-10-12)[2026-10-16].

[10] RHO TEAM. Rho: A Foundation for Efficiently Adaptable VLA Models[EB/OL]. (2026-09-29)[2026-10-16].





声明:个人原创,仅供参考

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
历史性的3-2!中国女足爆冷掀翻美国,世界杯乱了:直播平台如下

历史性的3-2!中国女足爆冷掀翻美国,世界杯乱了:直播平台如下

大秦壁虎白话体育
2026-10-26 07:01:13
6个省级政府主要领导有调整

6个省级政府主要领导有调整

吉刻新闻
2026-10-26 18:50:36
这一回中国真要杀鸡给猴看,挑中的是荷兰。不是美国,不是日本,不是菲律宾,是荷兰

这一回中国真要杀鸡给猴看,挑中的是荷兰。不是美国,不是日本,不是菲律宾,是荷兰

扶苏聊历史
2026-10-26 14:36:51
土耳其网友破大防:问他们打败中国多少次,被AI一句话终结了比赛

土耳其网友破大防:问他们打败中国多少次,被AI一句话终结了比赛

言过于诚
2026-10-26 21:47:24
日本捂了福田康夫4天死讯,“致力中日友好”的日本前首相,日本为什么要拖延4天死讯?

日本捂了福田康夫4天死讯,“致力中日友好”的日本前首相,日本为什么要拖延4天死讯?

蓝星杂谈
2026-10-26 18:18:53
用力过猛!一段尴尬的“女强人妈妈接孩子放学”视频火了,网友不给面子,很扎心

用力过猛!一段尴尬的“女强人妈妈接孩子放学”视频火了,网友不给面子,很扎心

蝴蝶花雨话教育
2026-10-26 06:54:43
令人愤怒!男子在机场帮陌生女生提行李,道别说有缘再见,却被对方调侃成“仆人”发到网上

令人愤怒!男子在机场帮陌生女生提行李,道别说有缘再见,却被对方调侃成“仆人”发到网上

火山詩话
2026-10-26 20:59:45
踢皇马赛前打封闭!巴萨官宣19岁新星重伤+今年报销,伤员已达6人

踢皇马赛前打封闭!巴萨官宣19岁新星重伤+今年报销,伤员已达6人

小火箭爱体育
2026-10-26 22:42:48
涉案11.66亿!全国最大酒商倒塌,这一造富神话彻底破灭

涉案11.66亿!全国最大酒商倒塌,这一造富神话彻底破灭

纳食
2026-10-26 10:26:22
美国断供C919发动机一年后,外媒称中国会造一台更好的,如今怎么样了?

美国断供C919发动机一年后,外媒称中国会造一台更好的,如今怎么样了?

互联鱼
2026-10-25 14:53:18
以色列爆发10万多人的示威,要求对10月7日的失败进行调查

以色列爆发10万多人的示威,要求对10月7日的失败进行调查

老王说正义
2026-10-25 10:50:36
大学老师工资将通过数字人民币钱包发放,江苏多所高校收到通知

大学老师工资将通过数字人民币钱包发放,江苏多所高校收到通知

IT之家
2026-10-26 13:36:10
塞尔维亚政坛一夜变天!武契奇爆冷落败!中国73亿欧元投资怎么办

塞尔维亚政坛一夜变天!武契奇爆冷落败!中国73亿欧元投资怎么办

余憁搞笑段子
2026-10-26 18:30:18
原来他已在美国去世,仅55岁,是中国男篮名宿,哥哥是篮球"狂"徒

原来他已在美国去世,仅55岁,是中国男篮名宿,哥哥是篮球"狂"徒

娱圈办事处
2026-10-26 14:42:15
49岁汤姆·布雷迪被曝恋上38岁超模,双方均未回应

49岁汤姆·布雷迪被曝恋上38岁超模,双方均未回应

热搜摘要官
2026-10-26 01:03:13
风暴已经出现,中国不得不面对!40年来从未出现的四种情况已到来

风暴已经出现,中国不得不面对!40年来从未出现的四种情况已到来

影孖看世界
2026-10-17 21:54:52
多所高校将通过数字人民币发工资,网友:会不会所有人都身无分文?

多所高校将通过数字人民币发工资,网友:会不会所有人都身无分文?

东方豪侠
2026-10-26 18:16:19
加勒万河谷:9万边防警察已整装待命,随时给中国士兵一个教训!

加勒万河谷:9万边防警察已整装待命,随时给中国士兵一个教训!

蒋南强读历史
2026-10-22 08:10:08
人民日报:一些地区将12345热线满意率作为重要考核指标,导致部分工作人员只管追着群众要“好评”,不关心问题是否解决

人民日报:一些地区将12345热线满意率作为重要考核指标,导致部分工作人员只管追着群众要“好评”,不关心问题是否解决

每日经济新闻
2026-10-26 17:45:20
梅德韦杰夫喊话特朗普:泽连斯基有“十宗罪”,他的危害比你捏造的委内瑞拉、古巴和伊朗的总和还多

梅德韦杰夫喊话特朗普:泽连斯基有“十宗罪”,他的危害比你捏造的委内瑞拉、古巴和伊朗的总和还多

极目新闻
2026-10-26 09:48:09
2026-10-27 02:48:49
智讯智库
智讯智库
AI时代的产业洞察 让复杂 变清晰 Clarity from Complexity
2文章数 5关注度
往期回顾 全部

科技要闻

苹果发iPad mini 8:5499元起售 配A20 Pro

头条要闻

外媒称"中印边境发生冲突印度指责中国军队" 中方回应

头条要闻

外媒称"中印边境发生冲突印度指责中国军队" 中方回应

体育要闻

13年后重回诺坎普,穆里尼奥又滑跪了

娱乐要闻

胡歌杨幂刘诗诗袁弘陈龙结伴去埃及

财经要闻

卢锋:全球失衡背后 大国博弈与多边治理

汽车要闻

云辇-M上车 第二代海豹07让驾驶者也能爱上的家用车

态度原创

艺术
时尚
数码
旅游
游戏

艺术要闻

这才是真·泰剧一姐!写真一出,美貌身材实力三杀,网友:彻底服气!

围巾,女人气质的延伸

数码要闻

苹果把TechWoven编织面料引入iPad mini 智能保护套售价79美元

旅游要闻

这个塞尔维亚小哥 为何反复来中共一大纪念馆?

黑客上报PS5漏洞获利33万元 又买GTA6又救绝症老母

无障碍浏览 进入关怀版