网易首页 > 网易号 > 正文 申请入驻

一张图生成一个世界?Vidu S1体验:问题比想象的要多

0
分享至

我这人没什么养宠物的耐心,但却很喜欢折腾AI角色。

有段时间,小雷隔三岔五就去豆包、千问里翻别人的Bot。有人让诸葛亮来到现代,有人让霸道总裁教高数,还有人捏了个天天催自己上班的二次元老婆。好不好用先放一边,至少每次点进去,都不知道会遇上什么新品种的电子活人。

结果前阵子再打开,小雷发现这帮Bot要集体毕业了,豆包、千问接连宣布下线相关功能。眼看聊天框里的电子朋友一个接一个消失,我本来已经准备接受现实,结果转头又刷到一个更抽象的东西。

Vidu S1。



(图源:Vidu)

Vidu S1是一个主打实时视频交互的模型,不同于普通的AI Bot,用户只需上传一张图片,模型就能快速理解角色的身份、外观和风格,并在交互过程中实时生成该角色的各种表情和动作,并尽量保持形象与音色的统一。

诶,既然大厂的Bot不让玩了,那小雷(ID:leitech)干脆自己造一个。

要我说,一个会说中文、能听懂指令,最好还能当场打坐的哈兰德就蛮有意思。

一张图就能生成可对话的哈兰德

Vidu S1的使用流程不算复杂。

这个模型本身是完全公开的,只要在手机应用商店搜索Vidu AI Pro下载最新版本,进入APP内点击Vidu S1即可体验。

注意啊,别下错成Vidu AI,这是两个不同的APP,我就被他们骗了一个下载量。



(图源:雷科技)

为了方便体验,Vidu S1里已经准备了一批预设角色。

这里头数量最多的是各式各样的妹子,从古装到现代,从魔幻到现实,此外还有一些动画角色、拆家狗子可供选择,多样性这一块是没啥问题。

我先没急着上传图片,随便挑了一个聊了几句。

就像这样,用户只要选定角色,就可以通过麦克风直接发出语音指令。角色会在画面中实时回应,并根据对话内容实时生成表情、口型,搭配上身子左右自然晃动,还真有几分在打视频通话的感觉。



(图源:雷科技)

就是这画面本身嘛...确实有点糊,看了一下官方规格,说是540P、25帧,你就把它当成网络不佳的效果吧。

当然,这玩意的能力不止对口型,我们还可以直接用语音指挥角色做出不同动作。

当我发出“举起左手”的指令后,画面中的角色确实能够做出响应,对应的举手动作也很流畅,没有出现什么穿帮的情况。



(图源:雷科技)

稍微复杂一点的,比如推眼镜、撩头发,都算是能较好地完成。

我甚至提出了一个类似于“左手整理头发,右手整理衣襟,然后双手放在胸前比心”的复合指令,角色也能勉强做到,就是没有那么到位。



(图源:雷科技)

至于槽点嘛...延迟挺大的。

它的“实时”是站在AI视频角度说的,你讲完一句,角色往往还要停顿一下,再开始回答。这个速度放在视频生成里确实不赖,但是放进视频通话里就很明显,尤其是角色还会一直盯着你,让人心里多少有些毛毛的。

动作也是同样的情况。

为了防止穿帮,Vidu S1似乎在系统层面写死了不准转身的限制,无论怎么尝试角色都会拒绝,至于跳舞、上下蹲这类连续动作更是直接糊弄。



(图源:雷科技)

属于是嘴上答应得很积极,身体只象征性地晃两下,有点像我摆烂的样子。

当然,预设角色毕竟经过官方挑选,Vidu S1也支持用户上传图片创建自己的角色,接着就该试试我自己上传的角色了。

我先选了一张Q版角色,正好可以看看它在面对非常规体型时的处理效果。

上传菲比啾比的图片后,填写角色描述,选择系统提供的预置音色,或者是录制自己的声音,然后等个1分钟左右,一个自定义角色就完成了。



(图源:雷科技)

结果非常吓人,角色的动作和体型完全不匹配。

在我发出“跳起”的指令后,可以看到画面里的角色身体被骤然拉长,其他指令也都是类似橡胶人的效果。



(图源:雷科技)

更别说我设置的角色描述似乎完全没用,角色无论如何都会在那里自说自话。

最后,我上传了一张挪威前锋哈兰德的图片。

估计是因为训练集的缘故,真人图片比二次元要简单。静止时,Vidu S1能把五官和发型保持得不错;开始说话后,嘴型也能跟上。但表情一激动,牙齿、脸颊和眼神偶尔就会有点不协调。

比较抽象的是声音,我录制的声音完全没生效,而是随机在几种不同的男/女声中进行切换,画面看起来异常诡异。

我让他复刻招牌打坐庆祝,他先低头,再抬了抬手,最后还是稳稳站在镜头前。



(图源:雷科技)

看来Vidu S1只能造出一个会聊天的哈兰德,但暂时造不出那个能在球场上跑起来的哈兰德,可以改进的地方还是太多了。

AI让「一分钟创建一个世界」梦想成真

无独有偶,今年初谷歌推出了Genie,最近灵光App也升级了世界模型体验功能。

这类产品的宣传点都很一致:用户只要上传一张图片,AI就会自己解析画面元素、理解什么是地面、什么是障碍物、角色该怎么动,把静态画面变成可以交互的视频应用,听起来跟小时候幻想的“随便画张图就能变成游戏”差不多。

尤其是灵光App,公开展示里又是攻击,又是射箭,又是施法的,看起来相当厉害,还没有什么会员之类的资格限制,难免让人手痒痒的。



(图源:雷科技)

既然手痒了,那就去试试,咱们直接从系统推荐的图片开始。

我选择了“解锁冷冽的高科技都市”,灵光自动上传了一张高度类似于《赛博朋克2077》的场景截图,等了不到半分钟,系统就提醒我专属世界已经就位了。



(图源:雷科技)

这速度...真的假的?

你别说,灵光App还真就在短时间内生成了一个像模像样的赛博朋克世界,你往前走,前方路径会实时生成,你转视角,镜头也会跟着同步调整,整个过程更像是在一个持续展开的空间里进行探索。



(图源:雷科技)

生成完成后,画面下方除了基础方向键,还出现了一些个性化交互按钮。第一眼看着确实比过去丰富,仿佛模型已经理解了图片里的内容,专门设计了一套玩法。

实际按下去就会发现,这些按钮更多只是让这个世界播放不同的效果。

画面里即便还有其他人物,也不能靠近对话,不能攻击,甚至很难产生任何像样的接触。所谓交互,基本还是用户控制一个角色,在AI持续生成的视频里走来走去。



(图源:雷科技)

而且这个操作延迟...移动角色差不多有1-2秒延迟,切换视角更是卡到吓人。

为了测试它到底能不能看懂图片,我又上传了一张《怪物猎人》的游戏截图。



(图源:雷科技)

按理来说,画面里有人物、有怪物,还有非常明确的战斗场景,模型即便不能还原完整玩法,至少也应该根据内容生成攻击、闪避或者狩猎相关的按钮。

结果它并没有。

系统给出的交互方式非常通用,跟图片里的《怪物猎人》没有多少关系。更抽象的是,角色才走了没多久,原来的猎人就慢慢变成了悟空。



(图源:雷科技)

看来模型确实知道这是一张游戏截图,但至于玩的是啥游戏,它可能觉得都差不多,反正手里拿着东西打怪就行。

再来,这次我上传了一张哈兰德参加足球比赛的截图。

这次的问题更直接。进入场景后,原本最关键的足球很快就消失了,系统也没有让我操控哈兰德,反而选中了对面一名穿白衣服的球员。

这个角色没办法踢球,也不能跟哈兰德或者其他球员产生有效互动。画面里的球门、草地和观众更像背景贴纸,看着都在,实际上碰不到,也用不上。

更麻烦的是,一旦角色开始移动,整个画面都会跟着发生变化。



(图源:雷科技)

因为原图里的元素本来就不多,模型又无法稳定记住人物和场景,角色稍微跑两步,球场、球员位置甚至衣服细节都会重新生成。上一秒还在身边的人,下一秒可能已经换了长相,连主控角色自己都像边跑边整容,队服换了又换。

真要说有什么体验好一点的...我觉得是POV视角的风景图片吧。

给这玩意一张风景图片,倒是真的能够享受到在一个不存在的世界里旅行的感觉,只要你能忍受时不时的顿卡就行。



(图源:雷科技)

当个新鲜玩具,玩个几分钟娱乐一下或许还行,长期的可玩性肯定是支撑不起的。

世界模型成了AI的下一个核心战场?

说到这里,可能有人会觉得,既然画质这么渣,Bug这么多,那这些厂商花这么多钱搞这个可交互的世界模型,是不是点错科技树了?

在我看来,恰恰相反。

这类模型和应用的出现,其意义远不止做个游戏这么简单,它代表了人工智能从“理解静态世界”迈向了“模拟真实世界”的关键一步。

我们现在熟悉的Seedance、可灵这些视频生成模型,虽然能做出足够唬人的大片感画面,但它们是被动展示的。观众只能看,不能互动。



(图源:字节跳动)

而这些厂商发力世界模型,核心就是想让AI理解:我做了一个动作,世界就会跟着变化,让AI从被动展示到主动交互,从静态叙事到动态推演,这也是通往更强通用智能的重要路径之一。

试想一下,如果未来的灵光世界模型能进化到4K画质、60帧,并且物理逻辑完全准确,那意味着什么?

直观点说,这意味着我们不需要在现实中去训练机器人了。我们可以让AI机器人在灵光生成的虚拟世界里,摔倒一万次,学会走路,学会拿杯子,然后再把这个算法加载到实体机器人身上。

当然了,目前盯着这个赛道的,可不止这几家厂商。

OpenAI早在介绍Sora时,就曾把视频模型放进世界模型的语境里讨论;英伟达推出的Cosmos,同样把重点放在物理世界模拟上;国内不少智能驾驶、机器人和游戏公司也在布局。大家都在赌,谁能先造出那个成熟的世界雏形。

对这个新领域而言,好戏才刚刚开场。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
上海最多领先31分轻取广东:拉塞尔22+6三分 李弘权27分李添荣20分

上海最多领先31分轻取广东:拉塞尔22+6三分 李弘权27分李添荣20分

醉卧浮生
2026-10-26 21:19:58
人民日报:一些地区将12345热线满意率作为重要考核指标,导致部分工作人员只管追着群众要“好评”,不关心问题是否解决

人民日报:一些地区将12345热线满意率作为重要考核指标,导致部分工作人员只管追着群众要“好评”,不关心问题是否解决

每日经济新闻
2026-10-26 17:45:20
突然,直线下挫!伊朗,突传大消息!特朗普最新表态

突然,直线下挫!伊朗,突传大消息!特朗普最新表态

证券时报
2026-10-26 17:58:03
无人机绞杀战将见分晓,曾预判志愿军入朝的兰德公司预言俄乌结局

无人机绞杀战将见分晓,曾预判志愿军入朝的兰德公司预言俄乌结局

猫智深
2026-10-26 10:16:40
刘德华《白衣逆行者》将上映却引来骂声一片,票房恐创近十年新低

刘德华《白衣逆行者》将上映却引来骂声一片,票房恐创近十年新低

陈意小可爱
2026-10-26 04:50:21
歌手苏醒自曝跟好几个朋友都闹掰了,原因都是对方借了钱没还;本人发文:看大家笑这么开心,我也就没那么难过了

歌手苏醒自曝跟好几个朋友都闹掰了,原因都是对方借了钱没还;本人发文:看大家笑这么开心,我也就没那么难过了

台州交通广播
2026-10-26 08:09:34
“在星巴克开会1小时被提醒点单5次”冲上热搜,门店回应执行细节

“在星巴克开会1小时被提醒点单5次”冲上热搜,门店回应执行细节

中国能源网
2026-10-26 11:28:09
小鹏新车官宣:10月29日,正式上市!

小鹏新车官宣:10月29日,正式上市!

科技堡垒
2026-10-26 11:33:17
出狱后的朴槿惠生活状态曝光:入住1676平别墅,与小10岁律师相伴

出狱后的朴槿惠生活状态曝光:入住1676平别墅,与小10岁律师相伴

磊子讲史
2026-10-26 15:55:19
果然没猜错,刚说完保留75%领土谈判才两天,泽连斯基态度就变了

果然没猜错,刚说完保留75%领土谈判才两天,泽连斯基态度就变了

军机图
2026-10-26 09:45:17
日照渔民捕获2.46米长“鲅鱼王”,重达268斤,当地一水饺厂老板花数万元买下:原想做成鲅鱼水饺,改了主意想把它做成标本

日照渔民捕获2.46米长“鲅鱼王”,重达268斤,当地一水饺厂老板花数万元买下:原想做成鲅鱼水饺,改了主意想把它做成标本

极目新闻
2026-10-26 19:58:13
中金公司:A股可能已经超调,不必过于悲观!创业板估值逼近924,部分科技领域投资吸引力显著提升,建议重回科技+红利配置

中金公司:A股可能已经超调,不必过于悲观!创业板估值逼近924,部分科技领域投资吸引力显著提升,建议重回科技+红利配置

投资者内参
2026-10-26 16:41:49
大瓜!太原网约车网传视频流出,境外账号有美女主动认领自称女主,剧情反转不断,事件真相依旧扑朔迷离

大瓜!太原网约车网传视频流出,境外账号有美女主动认领自称女主,剧情反转不断,事件真相依旧扑朔迷离

火山詩话
2026-10-25 16:18:13
懂车帝与华为之争本质上是美帝对东大本土企业的精准狙击

懂车帝与华为之争本质上是美帝对东大本土企业的精准狙击

林鼎盛有约
2026-10-18 00:20:39
苍井空公开承认南京大屠杀:我在上学时学到过,一切的根源都在于战争

苍井空公开承认南京大屠杀:我在上学时学到过,一切的根源都在于战争

不掉线电波
2026-10-21 12:22:08
又一汽车踏板被踩断了!

又一汽车踏板被踩断了!

电动内参
2026-10-25 19:14:43
凌晨,美国飞北京航班起飞后突然返航,机上有262人,航司回应

凌晨,美国飞北京航班起飞后突然返航,机上有262人,航司回应

南方都市报
2026-10-26 08:21:39
卢拉逆转连任巴西总统!巴西ETF暴跌近20%,雷亚尔重挫超9%,市场押注落空

卢拉逆转连任巴西总统!巴西ETF暴跌近20%,雷亚尔重挫超9%,市场押注落空

投资者内参
2026-10-26 10:11:15
中石油成大牛股!不知不觉已暴涨7倍,股价创18年新高,仅次07年上市巅峰时期,中东冲突叠加风格切换,50万坚守股民迎红包

中石油成大牛股!不知不觉已暴涨7倍,股价创18年新高,仅次07年上市巅峰时期,中东冲突叠加风格切换,50万坚守股民迎红包

金融界
2026-10-26 13:43:26
iPhone Duo价格血崩,苹果社死了

iPhone Duo价格血崩,苹果社死了

李东阳朋友圈
2026-10-26 11:19:06
2026-10-26 22:56:49
雷科技 incentive-icons
雷科技
专注AI硬科技
38106文章数 812451关注度
往期回顾 全部

科技要闻

K3.1 Pro发布才两天,Kimi道歉补额度!

头条要闻

外媒称"中印边境发生冲突印度指责中国军队" 中方回应

头条要闻

外媒称"中印边境发生冲突印度指责中国军队" 中方回应

体育要闻

13年后重回诺坎普,穆里尼奥又滑跪了

娱乐要闻

胡歌杨幂刘诗诗袁弘陈龙结伴去埃及

财经要闻

卢锋:全球失衡背后 大国博弈与多边治理

汽车要闻

云辇-M上车 第二代海豹07让驾驶者也能爱上的家用车

态度原创

教育
本地
亲子
健康
手机

教育要闻

10月21日雅思大作文示范写作 | 文物是否应该物归原主

本地新闻

这么近,那么美,周末赴贺州丨大湾区后花园

亲子要闻

6个实操办法,让孩子彻底摆脱摆烂造作!

痘痘能根治吗?皮肤科医生说实话

手机要闻

受内存涨价影响,曝三星计划减产20% Galaxy A系中低端手机

无障碍浏览 进入关怀版