网易首页 > 网易号 > 正文 申请入驻

一张图生成一个世界?Vidu S1体验:问题比想象的要多

0
分享至

我这人没什么养宠物的耐心,但却很喜欢折腾AI角色。

有段时间,小雷隔三岔五就去豆包、千问里翻别人的Bot。有人让诸葛亮来到现代,有人让霸道总裁教高数,还有人捏了个天天催自己上班的二次元老婆。好不好用先放一边,至少每次点进去,都不知道会遇上什么新品种的电子活人。

结果前阵子再打开,小雷发现这帮Bot要集体毕业了,豆包、千问接连宣布下线相关功能。眼看聊天框里的电子朋友一个接一个消失,我本来已经准备接受现实,结果转头又刷到一个更抽象的东西。

Vidu S1。



(图源:Vidu)

Vidu S1是一个主打实时视频交互的模型,不同于普通的AI Bot,用户只需上传一张图片,模型就能快速理解角色的身份、外观和风格,并在交互过程中实时生成该角色的各种表情和动作,并尽量保持形象与音色的统一。

诶,既然大厂的Bot不让玩了,那小雷(ID:leitech)干脆自己造一个。

要我说,一个会说中文、能听懂指令,最好还能当场打坐的哈兰德就蛮有意思。

一张图就能生成可对话的哈兰德

Vidu S1的使用流程不算复杂。

这个模型本身是完全公开的,只要在手机应用商店搜索Vidu AI Pro下载最新版本,进入APP内点击Vidu S1即可体验。

注意啊,别下错成Vidu AI,这是两个不同的APP,我就被他们骗了一个下载量。



(图源:雷科技)

为了方便体验,Vidu S1里已经准备了一批预设角色。

这里头数量最多的是各式各样的妹子,从古装到现代,从魔幻到现实,此外还有一些动画角色、拆家狗子可供选择,多样性这一块是没啥问题。

我先没急着上传图片,随便挑了一个聊了几句。

就像这样,用户只要选定角色,就可以通过麦克风直接发出语音指令。角色会在画面中实时回应,并根据对话内容实时生成表情、口型,搭配上身子左右自然晃动,还真有几分在打视频通话的感觉。



(图源:雷科技)

就是这画面本身嘛...确实有点糊,看了一下官方规格,说是540P、25帧,你就把它当成网络不佳的效果吧。

当然,这玩意的能力不止对口型,我们还可以直接用语音指挥角色做出不同动作。

当我发出“举起左手”的指令后,画面中的角色确实能够做出响应,对应的举手动作也很流畅,没有出现什么穿帮的情况。



(图源:雷科技)

稍微复杂一点的,比如推眼镜、撩头发,都算是能较好地完成。

我甚至提出了一个类似于“左手整理头发,右手整理衣襟,然后双手放在胸前比心”的复合指令,角色也能勉强做到,就是没有那么到位。



(图源:雷科技)

至于槽点嘛...延迟挺大的。

它的“实时”是站在AI视频角度说的,你讲完一句,角色往往还要停顿一下,再开始回答。这个速度放在视频生成里确实不赖,但是放进视频通话里就很明显,尤其是角色还会一直盯着你,让人心里多少有些毛毛的。

动作也是同样的情况。

为了防止穿帮,Vidu S1似乎在系统层面写死了不准转身的限制,无论怎么尝试角色都会拒绝,至于跳舞、上下蹲这类连续动作更是直接糊弄。



(图源:雷科技)

属于是嘴上答应得很积极,身体只象征性地晃两下,有点像我摆烂的样子。

当然,预设角色毕竟经过官方挑选,Vidu S1也支持用户上传图片创建自己的角色,接着就该试试我自己上传的角色了。

我先选了一张Q版角色,正好可以看看它在面对非常规体型时的处理效果。

上传菲比啾比的图片后,填写角色描述,选择系统提供的预置音色,或者是录制自己的声音,然后等个1分钟左右,一个自定义角色就完成了。



(图源:雷科技)

结果非常吓人,角色的动作和体型完全不匹配。

在我发出“跳起”的指令后,可以看到画面里的角色身体被骤然拉长,其他指令也都是类似橡胶人的效果。



(图源:雷科技)

更别说我设置的角色描述似乎完全没用,角色无论如何都会在那里自说自话。

最后,我上传了一张挪威前锋哈兰德的图片。

估计是因为训练集的缘故,真人图片比二次元要简单。静止时,Vidu S1能把五官和发型保持得不错;开始说话后,嘴型也能跟上。但表情一激动,牙齿、脸颊和眼神偶尔就会有点不协调。

比较抽象的是声音,我录制的声音完全没生效,而是随机在几种不同的男/女声中进行切换,画面看起来异常诡异。

我让他复刻招牌打坐庆祝,他先低头,再抬了抬手,最后还是稳稳站在镜头前。



(图源:雷科技)

看来Vidu S1只能造出一个会聊天的哈兰德,但暂时造不出那个能在球场上跑起来的哈兰德,可以改进的地方还是太多了。

AI让「一分钟创建一个世界」梦想成真

无独有偶,今年初谷歌推出了Genie,最近灵光App也升级了世界模型体验功能。

这类产品的宣传点都很一致:用户只要上传一张图片,AI就会自己解析画面元素、理解什么是地面、什么是障碍物、角色该怎么动,把静态画面变成可以交互的视频应用,听起来跟小时候幻想的“随便画张图就能变成游戏”差不多。

尤其是灵光App,公开展示里又是攻击,又是射箭,又是施法的,看起来相当厉害,还没有什么会员之类的资格限制,难免让人手痒痒的。



(图源:雷科技)

既然手痒了,那就去试试,咱们直接从系统推荐的图片开始。

我选择了“解锁冷冽的高科技都市”,灵光自动上传了一张高度类似于《赛博朋克2077》的场景截图,等了不到半分钟,系统就提醒我专属世界已经就位了。



(图源:雷科技)

这速度...真的假的?

你别说,灵光App还真就在短时间内生成了一个像模像样的赛博朋克世界,你往前走,前方路径会实时生成,你转视角,镜头也会跟着同步调整,整个过程更像是在一个持续展开的空间里进行探索。



(图源:雷科技)

生成完成后,画面下方除了基础方向键,还出现了一些个性化交互按钮。第一眼看着确实比过去丰富,仿佛模型已经理解了图片里的内容,专门设计了一套玩法。

实际按下去就会发现,这些按钮更多只是让这个世界播放不同的效果。

画面里即便还有其他人物,也不能靠近对话,不能攻击,甚至很难产生任何像样的接触。所谓交互,基本还是用户控制一个角色,在AI持续生成的视频里走来走去。



(图源:雷科技)

而且这个操作延迟...移动角色差不多有1-2秒延迟,切换视角更是卡到吓人。

为了测试它到底能不能看懂图片,我又上传了一张《怪物猎人》的游戏截图。



(图源:雷科技)

按理来说,画面里有人物、有怪物,还有非常明确的战斗场景,模型即便不能还原完整玩法,至少也应该根据内容生成攻击、闪避或者狩猎相关的按钮。

结果它并没有。

系统给出的交互方式非常通用,跟图片里的《怪物猎人》没有多少关系。更抽象的是,角色才走了没多久,原来的猎人就慢慢变成了悟空。



(图源:雷科技)

看来模型确实知道这是一张游戏截图,但至于玩的是啥游戏,它可能觉得都差不多,反正手里拿着东西打怪就行。

再来,这次我上传了一张哈兰德参加足球比赛的截图。

这次的问题更直接。进入场景后,原本最关键的足球很快就消失了,系统也没有让我操控哈兰德,反而选中了对面一名穿白衣服的球员。

这个角色没办法踢球,也不能跟哈兰德或者其他球员产生有效互动。画面里的球门、草地和观众更像背景贴纸,看着都在,实际上碰不到,也用不上。

更麻烦的是,一旦角色开始移动,整个画面都会跟着发生变化。



(图源:雷科技)

因为原图里的元素本来就不多,模型又无法稳定记住人物和场景,角色稍微跑两步,球场、球员位置甚至衣服细节都会重新生成。上一秒还在身边的人,下一秒可能已经换了长相,连主控角色自己都像边跑边整容,队服换了又换。

真要说有什么体验好一点的...我觉得是POV视角的风景图片吧。

给这玩意一张风景图片,倒是真的能够享受到在一个不存在的世界里旅行的感觉,只要你能忍受时不时的顿卡就行。



(图源:雷科技)

当个新鲜玩具,玩个几分钟娱乐一下或许还行,长期的可玩性肯定是支撑不起的。

世界模型成了AI的下一个核心战场?

说到这里,可能有人会觉得,既然画质这么渣,Bug这么多,那这些厂商花这么多钱搞这个可交互的世界模型,是不是点错科技树了?

在我看来,恰恰相反。

这类模型和应用的出现,其意义远不止做个游戏这么简单,它代表了人工智能从“理解静态世界”迈向了“模拟真实世界”的关键一步。

我们现在熟悉的Seedance、可灵这些视频生成模型,虽然能做出足够唬人的大片感画面,但它们是被动展示的。观众只能看,不能互动。



(图源:字节跳动)

而这些厂商发力世界模型,核心就是想让AI理解:我做了一个动作,世界就会跟着变化,让AI从被动展示到主动交互,从静态叙事到动态推演,这也是通往更强通用智能的重要路径之一。

试想一下,如果未来的灵光世界模型能进化到4K画质、60帧,并且物理逻辑完全准确,那意味着什么?

直观点说,这意味着我们不需要在现实中去训练机器人了。我们可以让AI机器人在灵光生成的虚拟世界里,摔倒一万次,学会走路,学会拿杯子,然后再把这个算法加载到实体机器人身上。

当然了,目前盯着这个赛道的,可不止这几家厂商。

OpenAI早在介绍Sora时,就曾把视频模型放进世界模型的语境里讨论;英伟达推出的Cosmos,同样把重点放在物理世界模拟上;国内不少智能驾驶、机器人和游戏公司也在布局。大家都在赌,谁能先造出那个成熟的世界雏形。

对这个新领域而言,好戏才刚刚开场。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
男人不会无缘无故阳痿!医生:男人硬不起来,离不开这4个原因

男人不会无缘无故阳痿!医生:男人硬不起来,离不开这4个原因

医学原创故事会
2026-09-05 16:46:41
“这就是挣钱的意义”,家长晒商务座儿子:我生下他,没亏待他!

“这就是挣钱的意义”,家长晒商务座儿子:我生下他,没亏待他!

番外行
2026-08-29 10:26:18
随着奥巴梅扬绝杀+拉科鲁尼亚3-2逆转,西甲最新积分榜出炉

随着奥巴梅扬绝杀+拉科鲁尼亚3-2逆转,西甲最新积分榜出炉

侧身凌空斩
2026-09-06 06:53:14
“有药企代表出来了!”直击国谈首日:中药和创新药企同天谈,有企业不到半小时结束“战斗”

“有药企代表出来了!”直击国谈首日:中药和创新药企同天谈,有企业不到半小时结束“战斗”

第一财经资讯
2026-09-05 15:20:39
虽说阿姨有30多岁了,但是这样打扮一下反而比年轻的女生更有魅力

虽说阿姨有30多岁了,但是这样打扮一下反而比年轻的女生更有魅力

美女穿搭分享
2026-09-06 09:40:17
“普京公开夸特朗普:他明知自己困难,却仍想着…”

“普京公开夸特朗普:他明知自己困难,却仍想着…”

观察者网
2026-09-06 07:47:05
九月下旬开始有贵人相助,惊喜扎堆来到身边的3个生肖!

九月下旬开始有贵人相助,惊喜扎堆来到身边的3个生肖!

情感事聊
2026-09-06 10:10:37
李连杰一家三口拜见仁波切,64岁利智许久不见,颜值回春如昔日!

李连杰一家三口拜见仁波切,64岁利智许久不见,颜值回春如昔日!

娱乐团长
2026-06-02 15:09:12
张雪峰看景甜那一眼,我足足回拉了七次进度条。

张雪峰看景甜那一眼,我足足回拉了七次进度条。

阿废冷眼观察所
2026-09-06 00:05:12
白忙活一场?81 岁杜特尔特抓住致命漏洞,全案或将作废重审!

白忙活一场?81 岁杜特尔特抓住致命漏洞,全案或将作废重审!

麓谷隐士
2026-09-06 00:10:03
重回中国,马布里兴奋,正式上任,新岗位曝光,曾被推荐执教宏远

重回中国,马布里兴奋,正式上任,新岗位曝光,曾被推荐执教宏远

任心荒芜h
2026-09-06 10:46:33
国产“迈巴赫”来了!吉利星越L PLUS刚亮相,这配置单把我震住了

国产“迈巴赫”来了!吉利星越L PLUS刚亮相,这配置单把我震住了

沙雕小琳琳
2026-09-06 12:16:53
快讯!俄总统新闻秘书向全球通报:总统普京已下达命令,未来三天暂停对基辅实施打击

快讯!俄总统新闻秘书向全球通报:总统普京已下达命令,未来三天暂停对基辅实施打击

坠入二次元的海洋
2026-09-06 11:29:57
1高+4射搭配!火箭组全新2阵,进攻火力持续升级,三分+防守成主打战术

1高+4射搭配!火箭组全新2阵,进攻火力持续升级,三分+防守成主打战术

熊哥爱篮球
2026-09-06 09:37:38
袁咏仪55岁生日,儿子准备的“包”蛋糕,精准狙击妈妈软肋!

袁咏仪55岁生日,儿子准备的“包”蛋糕,精准狙击妈妈软肋!

娱乐小叨叨
2026-09-05 15:20:53
承诺开玩笑:去年车企集体承诺"60天内付款",一个都没做到!小鹏汽车最猛,一口气拉长57天!

承诺开玩笑:去年车企集体承诺"60天内付款",一个都没做到!小鹏汽车最猛,一口气拉长57天!

新浪财经
2026-09-06 10:42:08
王鹤任汉口学院校长

王鹤任汉口学院校长

高教网
2026-09-05 22:38:08
公安部:有人威胁“弄死你”,报案会受理吗,警察会如何处理?

公安部:有人威胁“弄死你”,报案会受理吗,警察会如何处理?

周军律师聊案子
2026-09-04 11:37:32
0 5到7 5!郑钦文美网硬甩七局逆转让央视破音,下轮硬刚斯瓦泰克,这签咋就这么憋屈?

0 5到7 5!郑钦文美网硬甩七局逆转让央视破音,下轮硬刚斯瓦泰克,这签咋就这么憋屈?

无色的梦x
2026-09-06 10:55:15
被当街扒裤的女子回应了:她是女主播,打她的女人找不到老公了,怀疑她是小三

被当街扒裤的女子回应了:她是女主播,打她的女人找不到老公了,怀疑她是小三

汉史趣闻
2026-09-02 18:57:28
2026-09-06 12:51:00
雷科技 incentive-icons
雷科技
专注AI硬科技
37881文章数 812382关注度
往期回顾 全部

科技要闻

DeepSeek被曝将采购16万颗华为昇腾950DT

头条要闻

5架退役民航客机被打包拍卖 起拍价500万元

头条要闻

5架退役民航客机被打包拍卖 起拍价500万元

体育要闻

本西蒙斯加盟国王,不管怎样,回来就好

娱乐要闻

低调富养!郭富城两女儿入读香港名校

财经要闻

亏损高达200亿,昔日彩电霸主走下巅峰!

汽车要闻

带升降立标MPV 岚图梦想家9预售价42.99万起

态度原创

健康
教育
数码
本地
游戏

脑梗取栓成功≠活下来,还有这三关

教育要闻

开学首周,北京中小学生手绘精彩“第一课”

数码要闻

V社为Meta Quest头显Steam Link应用新增USB有线串流功能

本地新闻

扒完小作文,富豪们私藏的度假胜地有多绝

曝《美末》艾莉故事或将继续 还有战神汤米衍生作!

无障碍浏览 进入关怀版