网易首页 > 网易号 > 正文 申请入驻

世界模型走了一些弯路

0
分享至


「不如直接数字人

私以为,世界模型这个概念的发展经过了三个非常幽默的阶段。

第一阶段:硅谷真懂行的老登如杨立昆、李飞飞,觉得大语言模型在讲故事上没啥空间了,所以从学术圈拽了个新概念过来尝试弯道超车。

但老登们坏就坏在,都在那忙活自己的,也不把概念给统一了,因而导致了世界模型圈的礼乐崩坏。

第二阶段:一些做不好本职工作的视频模型厂独立思考了一下,觉得反正现在能实时生成就能叫世界模型,那我直接别做传统视频模型了,做实时生成视频模型,然后就声称自己是世界模型公司得了呗。

于是爱诗、快乐生蚝之流都把世界模型当配货给震撼首发了。

对吧,而且老百姓根本也不知道世界模型应该是啥样,谁先做出来哪怕是一坨也能抢占话语权。

第三阶段:有些邪恶的奋斗逼(如Vivix)开始给这种实时生成视频模型找应用场景了。

比如虚拟陪伴虚拟直播,所以别的蹭世界模型的公司也没法纯靠不明所以的demo骗钱了,都得开始假装思考消费者需求了,都得开始把自己包装成数字人公司了。

近几个月此类公司不约而同批量涌现啊。

比如最近大力炒作的10人00后团队猫薄荷(Catnip)做的缅因猫(MaineCoon),声称自己做了个「史上最快流式音视频社交模型」,我以为终于有个不炒世界模型概念的了。

结果点进官网一看,人家直接宣布自己发明了一种全新的世界模型——社交世界模型。


你们这么造词也太累了,以后直接叫第一世界模型、第二世界模型、第三世界模型得了。

我去查了下,猫薄荷这团队去年底还在做AI视频互动产品(这大概就是社交大模型这个词的来历),思考的还是怎么低成本获客,怎么今年趁着世界模型风摇身直接有训练模型能力了?

现在怎么拿开源框架做个后训练就说自己是世界模型,这风气到底谁开始带的?

造词还不是最封神的,它们还自己造了个基准测试叫SocialVideo Bench,然后自己拉了个榜单,宣布自己取得了第一名。


自己办比赛自己当裁判然后自己进球,建议男足学学,明年咱们也办场世界杯。

这招其实我们的好朋友也干过。

马卡龙花大力气搞的Macaron-V1-Preview,实际上是给GLM 5.1后训练加了5个Lora。刚好和他们跑的基准测试挨个对应。

然后下图马卡龙自己跑出来自己第一的4个Bench里,前两个都是马卡龙自己做的。


不知道该说啥了,AI应用转模型原来是这么一回事。

那歌怎么唱来着~听说你还在搞什么原创,搞来搞去好像也就这样~

不过也无所谓了。智谱现在这么火,纯做贴牌代工厂,给大客户搞GLM 5.2后训练不出意外能爆到大金币。你知道的,我们一直相信马卡龙很牛逼❤️

回到主角,我们直接来测测MaineCoon到底有没有东西。

MaineCoon现在主要有两个功能。首先是Instant Video,主打传统的AI视频生成,但特点是快。他们团队的人非常自信,直接在这个功能后面加了个Fast&SOTA的标识。


我用了一下确实特别快,生成一个20秒的视频,基本只需要8~9秒。可以说在Fast这个赛道确实SOTA了。

但在Fast之外,这些视频都不具备使用价值。

比如我输入了一段提示词:世界杯赛场上日本队和巴西队踢球,一个身穿蓝色球衣的日本队队员射门射进了,穿国旗衫的巴西守门员抱头痛哭,看台上穿和服的日本球迷一边跳舞一边庆祝。

成品如下⬇️

可以看出,MaineCoon属于塔可夫斯基入脑了,只会拍长镜头不会分镜,人物主体的动作也不会变化,基本只体现氛围感。

而且整个画面里只有主人公是相对清晰的,背景里的人物全都量子化了,不知道的以为三体人提前打来了,非常恐怖。

所以作为视频模型而言,MaineCoon没啥可聊的,就是比较快,但快也不能当饭吃。

但它还有第二个功能,也就是处于Beta阶段的流式视频生成。使用方法和之前测过的Pixverse、7verse差不多,先生成一个场景,然后通过输入提示词实时改变画面。


分为Control Mode和Chat Mode两个模式

Control Mode就是当导演,Chat Mode就是找陪聊。我先用Control Mode让它生成了一个外卖小哥跑外卖的场景,然后中途让车撞他、车主打他、警察逮捕他,最后一起吃饺子,成品如下⬇️

画面质量上,和视频生成的问题一样,全是量子人,全是粒子特效,有一种做梦的感觉。

反应速度上,输入一段指令后,也基本是在10秒左右之后对画面进行改变,和之前测过的世界模型差不多,中规中矩吧。

不过MaineCoon生成的世界里,角色还真有点逻辑上的一致性,会根据发生的事件改变之后场景、行为和语言。这确实比之前只有七秒记忆的世界模型强。

最后我又测了一下Chat Mode,让它生成一个年轻的狼人帅哥跟我谈恋爱,弥补某乙游下架某男主的遗憾。

结果大半夜差点把我吓晕啊⬇️

MaineCoon生成的角色不知道为啥,会持续缓慢地向屏幕这边凑,可能是想亲我。反正脸就越来越大,嘴巴越来越多,伊藤润二来了都得找个出马的压压惊。

但这确实是MaineCoon三个功能里最能想象到商业化应用场景的那个了:

Instant Video固然快,但Seedance也出mini了;

Control Mode比别的实时生成视频项目耐看,但这玩意真能助力具身或预测未来吗;

唯有Chat Mode,虽然生成的角色都快赶上恐怖片boss了,但万一有人的xp就不是人呢?

神了,这流式生成视频要不直接改名叫刘氏生成视频得了,反正都是跟刘宇抢业务。

当然矬子里拔大个,MaineCoon已经是最近这个赛道炒作得比较成功的了,让我们看看它的对手:


没错,伟大的生数在我们发完道歉信后,终于不研究什么龙虾人了,开始研究正经福瑞了。

这实时交互模型,放别人家肯定也直接叫世界模型了。但生数毕竟已经开始做物理向的世界模型Motus了,可能没必要在这也蹭蹭了。

我和他们放在首页的角色「狐妖玉宝」聊了一下,剪辑后的成品如下⬇️

生数这个比MaineCoon强的是,可以打开摄像头和屏幕里的角色面对面聊,不用打字,说话就行。

而且屏幕里的角色确实能看到你的动作,be like:


我问她这是几,她说是三

然而这种对用户的观测是需要通过指令触发的,比如我后来啥也不说,纯手舞足蹈了一会,姐们就一点反应都没有,跟个死人一样。

然后生数应该是为了避免像MaineCoon一样人物乱动吓到观众的情况,对角色做了硬性规定:原地站着不动,眼睛死死盯着用户。

所以当我要求她跳个舞的时候,她在那自己像念经一样喃喃自语:轻轻晃肩、转圈、摆动手臂……把提示词给朗诵出来了。

所以当我要求她转个圈的时候,她说:不行,因为我要一直看着你……

️️小姐姐在看着你Little sister is watching you ️️

我建议直接改名伪人模拟器上架Steam得了。

我觉得MaineCoon Chat Mode和Vidu S1作为虚拟陪伴产品最致命的问题有两个:

第一,10秒的延迟在视频生成这个赛道完全能当个卖点,但当用户的需求是唠嗑,就显得太前现代了。都谈人机恋了,谁能接受对面过了10秒才回复你啊?

第二,这俩产品的对话体验还是半双工,类似对讲机,你说一句她说一句,你打断她她也不闭嘴,完全就是小爱同学水平,非常不尊重用户。

不理解以上两点的可以给豆姐打个电话,纯聊日常话题的话,基本是秒听秒回,而且可以随时打断。

豆姐率先一步启动边说边监听的全双工模型了,而ChatGPT目前是支持中途打断的半双工,最近也开始内测全双工了,这是大势不可逆。

低延迟反应快的细糠吃多了,谁能受得了粗粮啊?

当然,MaineCoon Chat Mode、Vidu S1以及其他实时视频生成产品做不到这些也情有可原:除了处理音频信息之外,哥几个还得处理视频信息,什么口型啊什么人物动作啊都得纳入思考,耗时耗力耗token。

但真有必要吗?

你们现在做的这玩意,动也不动,转身也不会,场景也不变,本质上不就是数字人vtuber吗?

那何必走流式视频的技术路径呢,你们直接把钱投到AI 2.5D建模,做100个皮套,再把豆包的语音模型插进去,直接对口型不就完事了?

这使用体验绝对比现在这些世界模型好。

在类似路线上,字节有OmniHuman,快手有Kling-Avatar,蔡浩宇团队都整了个LPM 1.0骄傲地声称已达到全双工无限流水平,说明只要不硬贴世界模型大家都有美好的未来。

这世界模型本没有路,走的公司多了就有了一条弯路,然后创业者都开始走这条弯路,走着走着都忘了两点之间线段最短了。

可怜呐。

最后插播一条幽默新闻。

100年没有新消息的虎牙,最近突然开始搞AI,倒腾出一个叫VAM 1.0的数字人模型。

任谁都能看出来这是个些许过时的缓解焦虑用的向上汇报产品,但它仍然比那些流式生成的数字人有更强的观赏性和可用性。

那还能说啥呢,兄弟们回头是岸吧,骗投资人可以骗AI媒体小编也可以别把自己骗了。

如果真有AI陪伴理想,不如趁现在赶紧把公司卖了,买几台硅胶机器人,研究研究怎么把Grok装它们嘴里得了。

(本文封面由ChatGPT 生成,纯人工写作,顺便点个歌吧)

⬇️

欢迎订阅我们的Substack

funeralai.substack.com

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
浙江一“猪景房”8888元一晚,牧场回应:送一头价值6888元的两头乌猪;房间紧挨着两头乌猪圈,只隔了层玻璃

浙江一“猪景房”8888元一晚,牧场回应:送一头价值6888元的两头乌猪;房间紧挨着两头乌猪圈,只隔了层玻璃

大风新闻
2026-09-17 17:21:04
李小璐疑似新男友曝光!被拍到与嘻哈歌手赵涛逛公园,4年3次同框引猜测

李小璐疑似新男友曝光!被拍到与嘻哈歌手赵涛逛公园,4年3次同框引猜测

露珠聊影视
2026-09-17 16:25:38
9月17日新消息!大家苦等的2026退休养老金到底涨不涨,怎么涨?

9月17日新消息!大家苦等的2026退休养老金到底涨不涨,怎么涨?

兵卒史
2026-09-17 15:19:10
快讯!印尼认栽了!

快讯!印尼认栽了!

故事终将光明磊落
2026-09-17 13:49:41
1999 年公安部下达秘密指令抓捕赖昌星,福建省公安厅一位副厅长深夜接连拨打四通电话,他在通话中的一句话,令专案组成员全部大为震惊

1999 年公安部下达秘密指令抓捕赖昌星,福建省公安厅一位副厅长深夜接连拨打四通电话,他在通话中的一句话,令专案组成员全部大为震惊

温柔记事簿
2026-09-17 10:41:47
有后续了!快递员救助摔倒老人反被索赔92万,驳回老人上诉请求

有后续了!快递员救助摔倒老人反被索赔92万,驳回老人上诉请求

西昆仑Bruce
2026-09-17 16:15:19
奥迪新车官宣:9月20日,正式上市

奥迪新车官宣:9月20日,正式上市

科技堡垒
2026-09-17 11:09:13
女网红和健身男子发生性关系,用力过猛导致女生腰部骨折,网友询问:什么招式,这么生猛?

女网红和健身男子发生性关系,用力过猛导致女生腰部骨折,网友询问:什么招式,这么生猛?

黯泉
2026-09-17 15:54:41
rapper赵涛恋情曝光!带甜馨妈妈和小女孩散步,4年前约会曾被拍

rapper赵涛恋情曝光!带甜馨妈妈和小女孩散步,4年前约会曾被拍

杨仔述
2026-09-17 14:56:22
合着查了半天,跟文物没一毛钱关系 :原南博院长徐湖平以“受贿罪”被判三年有期徒刑

合着查了半天,跟文物没一毛钱关系 :原南博院长徐湖平以“受贿罪”被判三年有期徒刑

云中有一鹤
2026-09-17 00:20:04
苹果新品官宣,9月18日,正式发售

苹果新品官宣,9月18日,正式发售

科技堡垒
2026-09-17 11:07:17
离谱!中国女子板球队1场未打告别亚运 场地积水致比赛取消+被判负

离谱!中国女子板球队1场未打告别亚运 场地积水致比赛取消+被判负

我爱英超
2026-09-17 12:29:33
四年流向华为体系 1113 亿、自身扣非仅赚 14.8 亿:赛力斯这笔账到底亏不亏

四年流向华为体系 1113 亿、自身扣非仅赚 14.8 亿:赛力斯这笔账到底亏不亏

新浪财经
2026-09-17 09:17:03
美国中将公开承认:打完伊朗,我才看清中国到底有多强大!

美国中将公开承认:打完伊朗,我才看清中国到底有多强大!

果妈聊娱乐
2026-09-17 08:20:56
太现实了!17999元买台手机,上海打工67天,西宁却要174天

太现实了!17999元买台手机,上海打工67天,西宁却要174天

可达鸭面面观
2026-09-17 17:06:02
已击毙!乌克兰宣布重大战果!

已击毙!乌克兰宣布重大战果!

故事终将光明磊落
2026-09-17 08:13:53
实锤了!隔壁班同学证实杨景媛确实在西班牙读博了,网友:让她无处可逃

实锤了!隔壁班同学证实杨景媛确实在西班牙读博了,网友:让她无处可逃

小徐讲八卦
2026-09-17 14:59:38
美国与胡塞武装达成协议:胡塞不打美国,以色列船只,只打沙特

美国与胡塞武装达成协议:胡塞不打美国,以色列船只,只打沙特

以色列飛飛
2026-09-17 15:30:03
敬一丹告别仪式:董卿罕现身,王宁表情沉痛,挽联写尽一生风骨

敬一丹告别仪式:董卿罕现身,王宁表情沉痛,挽联写尽一生风骨

林轻吟
2026-09-17 16:19:15
扶不扶?老人摔倒京东快递小哥施救后,反被家属索赔92万,法院还他清白

扶不扶?老人摔倒京东快递小哥施救后,反被家属索赔92万,法院还他清白

汉史趣闻
2026-09-17 09:07:10
2026-09-17 20:32:50
葬AI
葬AI
整点真实
155文章数 28关注度
往期回顾 全部

科技要闻

影视飓风Tim反掰iPhoneDuo被质疑

头条要闻

小伙拍母亲最后14天看哭网友:从"铿锵有力"到天人永隔

头条要闻

小伙拍母亲最后14天看哭网友:从"铿锵有力"到天人永隔

体育要闻

逆转朝鲜,国足亚运队“啃老”过关

娱乐要闻

rapper赵涛恋情曝光!带甜馨妈妈散步

财经要闻

缺钱的追觅 隐藏的债务?

汽车要闻

猛士X700内饰正式公开 华为技术加持打造家庭泛越野智能座舱

态度原创

家居
教育
时尚
数码
艺术

家居要闻

2026建博会(广州) 公装联探展交流活动

教育要闻

机考真题小作文示范写作 | 流程图 碳酸饮料制作过程

初秋衣服不用买得太多,准备几件针织衫,温柔大方又显气质

数码要闻

小米澎湃OS 4正式版推送计划公布:10月15日开始推送!小米17、K100 Pro/K90系列首批

艺术要闻

深圳第二座机场,5张效果图透露新地标样貌!

无障碍浏览 进入关怀版