网易首页 > 网易号 > 正文 申请入驻

视频版 GPT-Live 来了!事事有回应,时时它都在

0
分享至


视频版 GPT-Live 来了?

似乎,我们正在见证一个「长时、智能的AI互动娱乐基础设施」的诞生。

麦克卢汉说过,媒介真正塑造的,是「人类关联与行动的规模和形式」。

未来最成功最有代表性的公司或个体,很可能都将呈现同一种特征:一半媒体,一半机器;既生产产品,也生产现实。

从文本到语音,到视频,再到世界模型,AI正在从回答问题走向陪伴用户,以及用新交互创造新世界……


上面的这些感受,都来自于形界智能这次发布的 Genesis-1.0。

实时,持续互动,模型能在一个开放环境里不断理解我、回应我,还能维持住自己的状态。


官网:https://www.frame-x.ai/models/genesis

过去的AI产品,用户一次打开,是为了得到一个答案;

但在AI陪伴、虚拟人、直播互动等新场景里,用户正在逐渐进入更长时间、更高频的持续互动。

而这一切背后的模型基础设施,也在构建一个更精彩的沉浸式娱乐宇宙的雏形。

当我发现,可以像跟真人主播一样,在直播间实时互动,事情变得越来越有趣了……


01视频版 GPT-Live,非常有想象力

之前做过不少视频生成和数字人测评。

很多时候,生成的片段给我一种预制菜的感觉,像视频片段拼接起来的回应,缺少一个稳定世界。

Genesis-1.0 提出的新架构里,有一个点我很感兴趣。

它把规划层和感知渲染层解耦。

Genesis-1.0 具备视频双工能力,负责感知用户、渲染画面,实现极低的端到端角色行为延迟,包括动作和表情。

Genesis-1.0-Brain 则负责处理语言风格以及 MCP 调用等。

视频双工场景里,语言智能和视觉行为智能需要不同的优化路径。

Brain 处理内容、风格、工具调用,渲染层处理看和动。两者解耦,开发者更容易理解,也更容易接入。


基于新的视频双工架构,从数据和效果看,Genesis-1.0 已经在生成时长、响应速度、应用成本上达到业内领先的 Interactive Avatar 水准。

全身渲染支持;端到端画面延迟最佳 1.2 秒;最大生成时长是 24 小时。

效率和成本还能有很好的平衡,Pricing 是 0.003 美元每秒,行业平均价格在 0.006 美元每秒……

相比HeyGen LiveAvatar,Runway Avatar等上一代的数字人产品,我想说已经来到了新的竞争维度。


对于开发者来说,纸面参数还在其次,关键这是产品能不能成立的边界。

我在想,一个 AI 陪伴产品,如果每 5 分钟就要重启一次世界,用户体验会断。

一个虚拟人直播,如果响应超过 2 秒,互动感会明显下降。

同样,一个互动娱乐应用,如果成本压不下来,商业模型就跑不通。

Genesis-1.0 作为一个长时、智能的AI互动娱乐基础设施,已经悄悄把很多背后的技术支持做到了更好。

我之前的创业项目,意识永藏,是一个面向老年富豪群体的意识上传以及定制化陪伴,一度因为模型能力和配套设施的限制,在家族形象传承、数字人交互上,存在各种问题。

但现在,长时陪伴、类人交互,新的可能性因为Genesis-1.0重新打开了。

02新交互带来全新体验,类人交互有了行为闭环

类人的感觉,外表、静态视觉还在其次,行为才是关键。

体验下来给我的感觉是,Genesis 能感受到我的存在。

Genesis-1.0 同时具备主动感知与生成能力,支持和用户摄像头直接交互,并以极低的端到端延迟,实时反馈角色的行为。

很多数字人产品,它们能说话,能对口型和能做预设动作,但一旦打开摄像头,它们就露馅了。

这种交互本质上还是 Chatbot 加一层视频的皮。

真正的视频双工,需要模型持续看到用户,并把视觉理解直接转化为下一步行为。

Genesis-1.0 在视频双工场景中,展现出类人交互和端到端推理能力。

看起来是一个视频,其实背后包含了三个交互效果。

我说话时,它会思考,能互动打招呼、倾听,甚至还会模仿人:

聆听是感知,思考是推理,反馈是决策,表达是生成。

四个环节都要在极低延迟下完成。更低的的响应速度,放在这个闭环里,才有意义。

在我看来,这个能力会直接影响 AI 社交和陪伴产品的形态。

过去的 AI 陪伴更多是文字和语音,用户想象对方的形象。

视频双工加入后,用户直接看到一个角色,角色也直接看到用户。互动从语言扩展到表情、动作、视线和环境。产品设计空间会变大。

虚拟人直播可以实时回应观众动作。AI 陪伴可以感知用户情绪和状态。互动娱乐可以让用户成为场景的一部分。

这些场景都需要模型持续看到用户,并且把视觉理解转化为下一步行为。

0324h 形象不崩,视频双工有了长度的跃迁

24 小时,我觉得不只是生成时长变长。

过去实时视频生成,主要采用 Auto-Regressive 方式连续生成,模型以前序生成结果作为上下文,持续预测后续内容。

随着生成时间拉长,微小误差不断累积,最终会导致 IP 漂移和场景状态崩溃。

所以实时视频从分钟级走向长时生成,核心难题在于更长的时间尺度上保持世界状态稳定。

生成更多内容只是表面,真正难的是让模型始终知道世界现在是什么样,下一刻应该发生什么。


形界智能的Genesis-1.0,他们认为视频模型最终应该自己学会理解和维护世界状态。

不需要把世界拆成一套额外的 3D 表示,可以直接在视频表征中学习世界的结构、状态与变化规律。

这种统一的视频表征也更符合 Scaling 规律。

随着模型规模、数据规模和训练规模提升,模型可以持续学习更复杂的世界与交互,而无需同步扩张一套外部的结构化世界表示。

形界想走的路,是让视频模型自己在表征里学会世界状态。

Genesis-1.0 针对长时误差累积与生成一致性进行专项优化,将业界约 5 分钟级的互动时长,提升至稳定 24 小时。


因为长时生成最怕只看开头。开头漂亮没有意义,24 小时后的状态才说明问题。

人物身份是否一致,服装是否漂移,场景结构是否稳定,物理交互是否合理,行为逻辑是否连贯。这些才是世界状态稳定性的真实考题。

这让我想到长上下文 LLM 的能力演进。长上下文是在更长的历史中,依然能够正确理解当前状态并做出下一步判断。视频世界模型也是如此。

长时生成是在更长的时间里,始终知道世界现在是什么样,以及下一刻应该发生什么。

Genesis-1.0 让视频生成从生成一段内容,走向持续维护一个状态。

对于我们这些开发者、参与者,也意味着虚拟人直播、AI 陪伴、互动娱乐等产品,可以从每次生成一段内容,真正升级到一个角色持续存在。

新的关系感、养成感、陪伴感,体验也会得到大的升级。

04模型即产品,下一代 AI 社交与陪伴的基础设施

Model is Product 的时代,Genesis 本身就是一款高成熟度的产品。

不管是开发者还是普通玩家,拿到的不再只是一个视频生成能力,是一套全新的互动内容生产方式。

Genesis-1.0 把规划层和感知渲染层解耦,也是降低门槛的一部分。

Brain 处理问答内容、语言风格和 MCP 调用。

视频双工层负责感知用户、渲染画面,实现极低的端到端角色行为延迟。

开发者可以更灵活地接入自己的业务逻辑。需要工具调用,交给 Brain。


需要视觉交互,交给视频双工层。

需要长时稳定,交给 Genesis-1.0 的世界状态维护能力。

分工很精准也很实用。

背后的团队,年轻、快、务实、一直在向市场交付东西。

从产品到模型,都给我一种很有突破创新精神的感觉。

持续在场、持续感知、持续回应。

未来一两年,视频模型的竞争会从单次生成质量,转向持续互动质量。

谁能在一个更长的时间尺度上维持世界状态,谁能让角色持续存在,谁能以极低延迟理解用户并回应,谁就能拿到下一代互动娱乐和 AI 陪伴的入场券。

尼尔·波兹曼,Neil Postman,美国著名媒介理论家,《娱乐至死》的作者,长期在纽约大学研究媒介生态学。

他有一个极其重要的判断:技术变化不是叠加式的,而是生态式的。

他的意思是,一项新技术进入社会,并非在原来的世界上多加一个工具,它会把整个环境一起改掉。

Genesis-1.0 就在改变一整套环境,在构建一个新的AI原生的娱乐及陪伴生态。


官网:https://www.frame-x.ai/models/genesis

快去官网看一看!还有24小时无人在线的直播间,数字人主播全天侯陪你互动!

也许,这将是我们和AI深度关系的开始……


朋友圈会发一些具体的案例和商业化日常~

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
外网网友如何看待姆巴配事件?

外网网友如何看待姆巴配事件?

辣条叨叨叨
2026-10-29 22:46:49
赚完16亿退役本可闭嘴,他却站出来硬刚姆巴佩!这才是真正的世界级球星

赚完16亿退役本可闭嘴,他却站出来硬刚姆巴佩!这才是真正的世界级球星

曹老师评球
2026-10-29 21:36:46
阿维塔取消新车发布会,内部会议视频遭吐槽

阿维塔取消新车发布会,内部会议视频遭吐槽

界面新闻
2026-10-29 15:56:57
10月29日国家再次实施调控,成品油价格适当调整

10月29日国家再次实施调控,成品油价格适当调整

界面新闻
2026-10-29 15:01:20
奉劝所有中国人,一定要记住这次围堵我们的九个国家!

奉劝所有中国人,一定要记住这次围堵我们的九个国家!

叶葉夜
2026-10-28 17:07:51
多方回应徽剑遇害!东南亚狗急跳墙,拿2000万悬赏,追杀中国博主

多方回应徽剑遇害!东南亚狗急跳墙,拿2000万悬赏,追杀中国博主

李橑在北漂
2026-10-29 17:37:34
尴尬!AMD华人女CEO被当成路人采访,主持人开口就问“你会说英语吗?”如今身价惊人

尴尬!AMD华人女CEO被当成路人采访,主持人开口就问“你会说英语吗?”如今身价惊人

华人生活网
2026-10-29 04:47:42
外网查了查,可算知道,这家伙到底说了啥,他道歉了,要原谅吗?

外网查了查,可算知道,这家伙到底说了啥,他道歉了,要原谅吗?

辣条叨叨叨
2026-10-29 18:51:40
许勤、喻红秋、尹弘、刘海星、钟佰均、李贤玉、王浩,出镜谈学习贯彻五中全会精神

许勤、喻红秋、尹弘、刘海星、钟佰均、李贤玉、王浩,出镜谈学习贯彻五中全会精神

政知新媒体
2026-10-29 23:56:34
俗厚辣椒!金正恩同志让它重现人世

俗厚辣椒!金正恩同志让它重现人世

IN朝鲜
2026-10-29 13:48:18
大消息!刚刚,美国重大发布

大消息!刚刚,美国重大发布

证券时报
2026-10-29 22:14:10
我嫁给部队28岁男通讯兵,婚后每晚同房3次,次次都折腾到后半夜。直到他退伍后消失不见,首长亲自上门:你知道你丈夫隐瞒16年的秘密吗?

我嫁给部队28岁男通讯兵,婚后每晚同房3次,次次都折腾到后半夜。直到他退伍后消失不见,首长亲自上门:你知道你丈夫隐瞒16年的秘密吗?

朝暮书屋
2026-10-29 18:45:31
抵制老干妈是新时代的卢德运动

抵制老干妈是新时代的卢德运动

牛角说
2026-10-29 11:28:06
耍小聪明?姆巴佩道歉声明用的是“小号”,1.3亿粉丝账号未同步

耍小聪明?姆巴佩道歉声明用的是“小号”,1.3亿粉丝账号未同步

大秦壁虎白话体育
2026-10-29 10:18:54
姆巴佩恐面临6亿天价赔偿,震惊全球!

姆巴佩恐面临6亿天价赔偿,震惊全球!

互联网品牌官
2026-10-29 12:16:13
李子祺后续,导师论文被撤,考研厦大外科学初试349,成绩倒数,复试92.5分逆袭

李子祺后续,导师论文被撤,考研厦大外科学初试349,成绩倒数,复试92.5分逆袭

东东趣谈
2026-10-29 18:41:00
塞尔:皇马原本不计划发声;一记者称不理解姆巴佩事件造成严重后果

塞尔:皇马原本不计划发声;一记者称不理解姆巴佩事件造成严重后果

懂球帝
2026-10-29 11:48:11
这6样食物可及时预防脑卒中,身体越来越好,你知道是什么吗?

这6样食物可及时预防脑卒中,身体越来越好,你知道是什么吗?

轩辕岛
2026-10-28 12:05:06
内塔尼亚胡获胜,狠狠打了谁的脸?

内塔尼亚胡获胜,狠狠打了谁的脸?

壹家言
2026-10-29 08:11:27
国防部回应美官员分析中国大陆攻台时间:何时以何种方式解决台湾问题,完全是中国人自己的事,外部势力无权干涉

国防部回应美官员分析中国大陆攻台时间:何时以何种方式解决台湾问题,完全是中国人自己的事,外部势力无权干涉

极目新闻
2026-10-29 20:05:16
2026-10-30 05:19:00
AI异类 incentive-icons
AI异类
从硅谷到中关村,AI信息与测评
281文章数 11关注度
往期回顾 全部

科技要闻

MacBook终于能触屏了:22999元起

头条要闻

媒体:守住不该守住的底盘 77岁的内塔尼亚胡逃出生天

头条要闻

媒体:守住不该守住的底盘 77岁的内塔尼亚胡逃出生天

体育要闻

超级黑马!球队不败 29岁的他得分榜前三

娱乐要闻

白百何被曝和二婚丈夫离婚 和男生逛街

财经要闻

两大娱乐巨头,谈崩了

汽车要闻

标配宁德时代电池 智己LS8 NEO纯电预售24.98万起

态度原创

时尚
家居
亲子
游戏
军事航空

新剧吻戏不断引猜疑!王玉雯杨玏被曝分手,团队沉默背后藏何隐情

家居要闻

2026建博会(广州) 公装联探展交流活动

亲子要闻

育见未来丨科学守护儿童营养,专家共议行业良性发展

《巫师3重制版》突然更新!CDPR火速解决游戏问题

军事要闻

万斯致信伊朗安全高官试图重启谈判

无障碍浏览 进入关怀版