网易首页 > 网易号 > 正文 申请入驻

蚂蚁灵波开源 LingBot-Video,全球首个面向具身的视频基模来了!

0
分享至

7 月 9 日,蚂蚁灵波开源 LingBot-Video,这是全球首个基于 Mixture-of-Experts(MoE)架构、面向具身智能的开源视频生成基础模型。该模型围绕机器人和具身智能的核心需求重新设计视频预训练范式,在推理效率、物理合理性、动作理解和任务完成度等方面取得系统性提升,为视频基础模型从数字内容创作走向具身智能提供了新的开源底座。

在北京大学联合字节跳动发布的基准 RBench 上,LingBot-Video 的总分是 0.620,超越了 Wan2.6(0.607)、Seedance 1.5 Pro(0.584)、Cosmos3 Super(0.581)。RBench 作为面向机器人操作视频的综合评测基准,重点考察模型能否生成符合真实物理规律的机器人行为。这一结果表明,LingBot-Video 在生成机器人相关视频时,更能保持动作过程的合理性和任务执行的完整性。



(图说:LingBot-Video 在 RBench 上性能最优)

为进一步验证 LingBot-Video 对物理世界变化的建模能力,蚂蚁灵波在内部 benchmark 中从通用质量和具身领域两个维度进行评估。结果显示,对比 NVIDIA Cosmos 3、Wan 2.2 A14B、LongCat-Video、Hunyuan Video 1.5、LTX-2.3 等五个开源模型,LingBot-Video 在具身领域表现优于主要基线模型。



(图说:综合评测显示,LingBot-Video在具身相关场景中展现出更强的物理理解和动作一致性)

过去几年,视频生成模型在画质、流畅度和创意表达上快速进步,但对于具身智能来说,一个看起来逼真、动作流畅的视频,却无法反映真实的物理规律,难以支撑机器人连续预测、规划和执行任务。与此同时,具身智能还要求模型具备更高推理效率,以适应实时交互和控制闭环。

这也让视频生成开始出现两种不同的演进方向:一条通向影院,服务于内容创作;另一条通向机器人,服务于物理世界的理解、预测与交互。LingBot-Video 正是蚂蚁灵波面向具身智能开辟视频生成新路线的重要探索。

LingBot-Video 从架构、数据和训练三方面进行了系统创新。

在架构上,LingBot-Video 采用 DiT + MoE 设计,以 MoE 替代传统 Dense 架构,在扩大模型容量的同时控制单次推理成本。其 30B 总参数模型在生成时仅激活约 3B 参数,相比同等参数规模 Dense 架构拥有约 3 倍推理效率。这一设计使模型既能获得大规模参数带来的视觉表达能力,又更适合具身智能对高效推理的要求。

在数据上,LingBot-Video 构建了数据画像引擎,在海量互联网视频的基础上进一步引入 VLA、VLN、Ego 等机器人相关数据,覆盖灵巧操作、机器人移动和第一视角交互等场景,总规模达 7 万小时的具身数据。这些数据帮助模型学习动作与环境变化之间的关系,而不只是学习视频的表面纹理和视觉风格。







在训练上,LingBot-Video 引入多维强化学习奖励系统。除美学、prompt 跟随和运动一致性等常规指标外,模型进一步围绕物理合理性和任务完成度进行对齐,使生成结果更符合真实世界规律,也更贴近机器人在真实世界完成任务的需求。

据介绍,LingBot-Video 可用于机器人动作预测、仿真数据生成、动作条件建模、世界模型研究等方向。目前,LingBot-Video 已正式开源。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
广东中山300万粉包工头才哥被工程压垮,自曝再干就倾家荡产,转型卖99元五粮液

广东中山300万粉包工头才哥被工程压垮,自曝再干就倾家荡产,转型卖99元五粮液

草莓解说体育
2026-09-06 00:50:02
明天A股就开盘!就问你怕不怕!

明天A股就开盘!就问你怕不怕!

龙行天下虎
2026-09-06 19:52:11
郑钦文赢球不到1天,不对劲一幕发生,原来她和李娜“经历相似”

郑钦文赢球不到1天,不对劲一幕发生,原来她和李娜“经历相似”

素玉姑娘
2026-09-06 09:58:18
拍完新龙门客栈,梁家辉对张曼玉说:以后除了拍戏,咱俩别联系,这样对你我都好

拍完新龙门客栈,梁家辉对张曼玉说:以后除了拍戏,咱俩别联系,这样对你我都好

草莓解说体育
2026-08-10 16:30:35
佟丽娅:本以为离婚后有儿子陪伴就够了,没想到,现在幸福又升级

佟丽娅:本以为离婚后有儿子陪伴就够了,没想到,现在幸福又升级

岁月轻纱
2026-09-06 22:14:06
美方特使结束俄美三小时会谈后抵达基辅,泽连斯基率团队亲自会面

美方特使结束俄美三小时会谈后抵达基辅,泽连斯基率团队亲自会面

土澳的故事
2026-09-06 22:34:47
关于两岸统一,黄智贤交底后,邱毅发声亮了,不简单

关于两岸统一,黄智贤交底后,邱毅发声亮了,不简单

观星赏月
2026-09-06 14:08:28
27.98万起!奥迪官宣:降价18.78万!

27.98万起!奥迪官宣:降价18.78万!

DeepAuto车探
2026-09-04 14:07:08
1876 年左宗棠吃老农一块饼,走七步便下杀令,实则保全众人性命

1876 年左宗棠吃老农一块饼,走七步便下杀令,实则保全众人性命

唠叨说历史
2026-06-12 11:35:58
碧桂园若爆雷,问题大过恒大!看到许家印结局,杨氏父女疯狂求生

碧桂园若爆雷,问题大过恒大!看到许家印结局,杨氏父女疯狂求生

铭记历史呀
2026-09-05 18:54:06
女人假装高潮的3个信号,看懂后让她体验一次真正的爽与满足

女人假装高潮的3个信号,看懂后让她体验一次真正的爽与满足

精彩分享快乐
2026-09-04 12:00:12
钾是香蕉28倍!入秋隔天吃这菜,腿脚有劲精神足!

钾是香蕉28倍!入秋隔天吃这菜,腿脚有劲精神足!

美食店主
2026-09-05 08:18:38
特斯拉推送FSD v14.3.9监督版:手动开车时FSD可强行介入避险

特斯拉推送FSD v14.3.9监督版:手动开车时FSD可强行介入避险

IT之家
2026-09-06 15:15:10
已确认!上海,踩刹车了!

已确认!上海,踩刹车了!

财经要参
2026-09-06 16:00:04
26岁女孩“上门服务”,4个男人一起招嫖都要睡她,2014年她被4个男子抛尸

26岁女孩“上门服务”,4个男人一起招嫖都要睡她,2014年她被4个男子抛尸

汉史趣闻
2026-09-06 09:33:05
撒贝宁:本以为生了龙凤胎已经够幸福,没想到,如今幸福又升级了

撒贝宁:本以为生了龙凤胎已经够幸福,没想到,如今幸福又升级了

白面书誏
2026-09-06 13:20:56
锤娜丽莎否认“打减肥针”传闻,强硬表示减重30斤全靠健康自律

锤娜丽莎否认“打减肥针”传闻,强硬表示减重30斤全靠健康自律

娱乐寡姐
2026-09-06 22:33:19
坐高铁遇到一位特别爱干净的阿姨,旁边人本来没在意,看到她这一举动,大家都没忍住多了看两眼

坐高铁遇到一位特别爱干净的阿姨,旁边人本来没在意,看到她这一举动,大家都没忍住多了看两眼

背包旅行
2026-08-30 16:57:10
一副美瞳戴上就不取,想起来才换下一副!14岁女孩这样“省事”半年,左眼真菌溃烂仅剩指数视力

一副美瞳戴上就不取,想起来才换下一副!14岁女孩这样“省事”半年,左眼真菌溃烂仅剩指数视力

极目新闻
2026-09-05 12:36:48
乔治:进球的时候就想着尽量发力;我们的目标是冲击欧战

乔治:进球的时候就想着尽量发力;我们的目标是冲击欧战

懂球帝
2026-09-06 23:37:09
2026-09-06 23:52:49
未来网 incentive-icons
未来网
爱心传递希望 专业成就梦想
8461文章数 88498关注度
往期回顾 全部

科技要闻

DeepSeek被曝将采购16万颗华为昇腾950DT

头条要闻

CHINA GT发生重大撞车起火事故 救援人员因为害怕逃离

头条要闻

CHINA GT发生重大撞车起火事故 救援人员因为害怕逃离

体育要闻

3.9秒绝平!杨舒予18+5成女篮救世主

娱乐要闻

杨紫获白玉兰影后!爸爸:累了就回家

财经要闻

亏损高达200亿,昔日彩电霸主走下巅峰!

汽车要闻

带升降立标MPV 岚图梦想家9预售价42.99万起

态度原创

时尚
艺术
本地
亲子
公开课

金秋最流行的鞋子,“红色”更时髦!

艺术要闻

日本第7大城市再添新地标!OMA设计

本地新闻

扒完小作文,富豪们私藏的度假胜地有多绝

亲子要闻

工程车小故事:淘气的小警车

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版