网易首页 > 网易号 > 正文 申请入驻

从“听清”到“看懂”再到“行动”,科大讯飞让AI走进真实世界

0
分享至



导读:从“语音交互”到“多模交互”,再到“具身多模交互”。每一步都不是简单叠加,而是在真实世界里补上一块此前缺失的能力。

作者| 小趣姐 编辑 | 顾适

如果AI只在安静房间里答题,它很聪明;但如果它走进嘈杂街头、多人餐桌、车流不息的座舱和人声鼎沸的超市,它还能不能听清、看懂、动起来?这才是AI从数字世界走向物理世界时,真正要跨过的门槛。

10月22日,在2026科大讯飞全球1024开发者节上,科大讯飞发布了星火语音大模型SparkAudio 1.0、多模交互技术、星火具身多模交互技术及相关产品。没有只停留在“模型更强了”的参数叙事,而是把一条路径摆了出来:先让AI在真实噪声里“听清”,再让它在复杂场景中“看懂”,最后让机器人把语音、视觉和动作协调起来,“动起来”。

刘庆峰说:“大家千呼万唤,期待机器人从运动会、表演舞台走向日常生活、走进千家万户。”

“听得清”,复杂音频感知

语音交互听起来不新鲜,但真正难的不是在安静房间里识别一句话,而是在高噪环境下依然保持准确。这是行业公认的难点;在此之上的复杂音频感知和多人语音分析,更是进阶能力。科大讯飞此次发布的SparkAudio 1.0,瞄准的正是这块“硬骨头”。

SparkAudio 1.0带来了语音识别、同传与交互,以及音频理解、情绪识别、实时说话人分离和环境声理解等能力的全面提升。更直观地说,它有点像刑侦剧里的“声音侦探”:即使置身嘈杂街头,也能辨别喇叭声、叫卖声、车轮摩擦地面的声音,分清交织在一起的人声,并从声音线索中推理周围环境。它不只是“听清说了什么”,更是“听懂发生了什么”。



背后靠的是三项技术创新,半监督音频编码器、动态分段端到端建模、双范式协同解码,名字不必记,记住三个数字就行:整体效果提升20%、响应时间降低15%、成本降低60%。

前两个数字关乎体验——听得更准、反应更快;第三个数字关乎商业逻辑——成本降下来,语音能力就不再是大客户专属,而是可以规模化铺向更多产品和场景。一项技术能不能走出实验室,很多时候不只看它有多先进,也看它有多便宜。

SparkAudio 1.0已经在讯飞产品中上线,讯飞输入法16.0、讯飞听见、讯飞智能办公本等产品都能体验。现场还发布了讯飞AI录音环,可像手机支架一样磁吸贴在手机背面,随时开启录音,2小时录音转写仅需2分钟,综合识别准确率超96%。

语音能力正在从软件功能变成随身硬件,从“打开App用一下”变成“贴在身上随时用”。交互的入口在变,背后是对拾音、降噪、转写全链条能力的考验。

“看得懂”,AI还要让听和看对上

但问题随之而来:听见,不等于理解。

如果AI只靠耳朵,它可能听到你在说话,却不知道你在对谁说、在看什么、真正想办什么事。多模交互要解决的,就是“听和看对不上”的问题。AI不仅要能听会说,还要结合视觉信息理解场景,把不同来源的信息准确对应起来。

此次发布的多模交互技术,融合了远场识别、多人交流、视听结合、个性化记忆和情绪理解等能力,让AI理解更丰富的场景信息。



讯飞AI眼镜是这项技术最典型的落地产品。科大讯飞穿戴业务事业部总经理林会杰现场展示了一副刚用来记录刘庆峰演讲过程的眼镜纪要,内容层次清晰、图文并茂。

随后,他与西班牙语、英语使用者分别用各自母语交流,由眼镜实时翻译;还通过眼镜为同台嘉宾点咖啡,并联动电脑端处理办公任务,呈现了辅助记录、沟通和办事三类场景。

这副眼镜重约40克,通过5麦阵列、骨传导与唇动识别协同改善复杂环境拾音,支持120余种语言翻译,同传首响低至2秒。它还有智能提词、声图文纪要、多语种翻译、拍照搜索、实时导览、骑行记录等功能。

汽车场景更考验远场拾音与抗噪能力。以“47秒念完350字”语速著称的主持人华少现场体验了星火智慧座舱3.0,一口气说出一长段初次到一座城市的办事和接待需求。座舱不仅立刻理解、安排了最优路线,还顺带推荐店铺、预定餐厅。



星火智慧座舱3.0提供超100项多模感知能力,多模感知成功率超95%,模糊理解准确率超93%,车外远场交互距离达30米,远超行业平均水平。换言之,车不只是在等你下指令,而是在嘈杂环境里主动听懂你要办什么事。

多模交互的价值,不在于把语音、视觉、触控简单叠加,而在于让AI在真实场景里做“信息对齐”:听到的、看到的、你想要的,能对上。

“动得了”,具身交互把AI拽进物理世界

能理解,还不等于能行动。

“人机交互历来是牵引着产业革命的。”刘庆峰说。机器人不仅要具备行动能力,更要能在行动中与人自然交流:在距离和噪声不断变化的环境里听清指令、理解多人意图,并协调语音与动作。从智能终端走向移动机器人,交互要适应空间变化、多人参与和动作执行——这是另一个量级的挑战。

科大讯飞此次发布的星火具身多模交互技术,在复杂空间动态降噪、多目标人的交互意图识别、语音与动作统一规划与执行、视觉触发的主动交互等方面取得突破。



现场,科大讯飞展示了机器人超市和机器人物流驿站。在现场嘈杂、多人围观的情况下,机器人都准确完成了任务。“嘈杂、多人围观”恰恰是家庭和社会服务场景的常态,机器人能不能在真实噪声里找准该回应的人,决定了它能不能从运动会和表演舞台走进日常生活。

配套发布的机器人超脑平台V3.0,把星火超脑板、具身智能开发套件、多模态交互模组及具身多模交互Harness等能力整合起来,通过端云协同、前后台协同,让机器人前台畅聊不停、后台持续办事,并支持模块化、配置化的行业定制。

更直白地说,这套平台想做的是机器人的“大脑底座”:前台负责和人自然交流,后台负责把事办成,开发者不用从零搭一套交互系统。端云协同和前后台协同这两个词,指向的是同一个现实约束——机器人不能把所有计算都扛在身上,也不能把所有任务都推给云端,必须在响应速度和办事能力之间找平衡。

从“听清”到“看懂”再到“行动”,科大讯飞正在把AI从安静房间里的答题者,变成真实世界里的参与者。这条路径并不轻松:先解决噪声中的准确识别,再解决视听信息对齐,最后解决动态环境中的意图理解与动作协同。每一步都有转折,每一步也都需要软硬一体、端云协同的长期投入。

“一代人有一代人的长征,人工智能是一场凝心聚力的长跑。”刘庆峰说,科大讯飞将持续以国产AI创造社会价值,解放生产力、释放想象力,用人工智能建设美好世界。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
油价调整最新消息!

油价调整最新消息!

新浪财经
2026-10-27 17:11:36
上海海港球迷意难平!不止因为2-3河内公安,更多在于以下五点!

上海海港球迷意难平!不止因为2-3河内公安,更多在于以下五点!

球场新视角1号
2026-10-27 20:08:52
老师与15岁学生发生关系,判十一年,终身禁业

老师与15岁学生发生关系,判十一年,终身禁业

李肖峰律师
2026-07-23 22:56:02
巴西最高法院裁定禁止弗拉维奥·博索纳罗离境

巴西最高法院裁定禁止弗拉维奥·博索纳罗离境

新华社
2026-10-27 10:00:07
几乎全是假货!利润高达2400%,为何消费者还前赴后继争相购买?

几乎全是假货!利润高达2400%,为何消费者还前赴后继争相购买?

星星跌入梦里中
2026-09-26 05:47:11
已经宣布独立建国,但是中国不肯承认的5个国家

已经宣布独立建国,但是中国不肯承认的5个国家

七号说三国
2026-09-29 19:11:46
民宿房东晒日本游客和韩国游客退房照!一边整整齐齐,一边满地垃圾,网友吵翻了!

民宿房东晒日本游客和韩国游客退房照!一边整整齐齐,一边满地垃圾,网友吵翻了!

日本物语
2026-10-26 23:22:42
菲律宾传来消息,杜特尔特案出现了意想不到的变数!

菲律宾传来消息,杜特尔特案出现了意想不到的变数!

做个平凡的轩友
2026-10-26 16:30:36
19年前的那场崩盘,正在给2026年敲警钟

19年前的那场崩盘,正在给2026年敲警钟

拾榴询财
2026-09-04 13:49:13
笑死,胆子都这么肥的吗啥油水都敢捞?网友:捞了一套房!

笑死,胆子都这么肥的吗啥油水都敢捞?网友:捞了一套房!

夜深爱杂谈
2026-10-24 20:03:36
DeepSeek梁文锋被曝长期在北京租房 房间布置比较简单

DeepSeek梁文锋被曝长期在北京租房 房间布置比较简单

快科技
2026-10-27 14:46:23
前途无量!U15世界杯中国队进亚洲前6:有望出战阿根廷英格兰

前途无量!U15世界杯中国队进亚洲前6:有望出战阿根廷英格兰

邱泽云
2026-10-27 16:12:51
两性关系:发现了没,寿命长的男人,大多都有这五个好习惯

两性关系:发现了没,寿命长的男人,大多都有这五个好习惯

荔子言
2026-09-08 14:55:50
爆料中国男篮大名单调整,广东队三国手只留一人,张镇麟引发争议

爆料中国男篮大名单调整,广东队三国手只留一人,张镇麟引发争议

宗介说体育
2026-10-27 14:24:44
刘涛晚宴抓拍曝光:笑容僵硬、眼神躲闪,明星的酒局有多难熬?

刘涛晚宴抓拍曝光:笑容僵硬、眼神躲闪,明星的酒局有多难熬?

做一个合格的吃瓜群众
2026-10-25 11:35:56
法治在线丨8个摄像头没拍到正脸 警方靠月光抓获黄金大盗

法治在线丨8个摄像头没拍到正脸 警方靠月光抓获黄金大盗

环球网资讯
2026-10-27 16:22:22
姆巴佩致歉:绝非本意

姆巴佩致歉:绝非本意

五星体育
2026-10-27 22:23:18
我感觉阿姨这身打扮,就是成熟女人该有的样子

我感觉阿姨这身打扮,就是成熟女人该有的样子

美女穿搭分享
2026-10-05 15:22:36
知名经济学家:居民不花钱,其实是因为已经进入了极限状态

知名经济学家:居民不花钱,其实是因为已经进入了极限状态

午夜搭车a
2026-10-22 01:32:16
苹果详解iPhone Duo手写笔支持:仅支持Apple Pencil(USB-C),需使用线缆连接配对

苹果详解iPhone Duo手写笔支持:仅支持Apple Pencil(USB-C),需使用线缆连接配对

IT之家
2026-10-27 14:56:16
2026-10-28 01:16:49
智趣财经 incentive-icons
智趣财经
有趣有料的商业故事和商业人物
1910文章数 85关注度
往期回顾 全部

科技要闻

M6芯片版14英寸MacBook Pro:15999元起

头条要闻

光明日报批姆巴佩:不容侮辱中国已故伟大领袖

头条要闻

光明日报批姆巴佩:不容侮辱中国已故伟大领袖

体育要闻

世界上最无趣的前锋,拿下了金球奖

娱乐要闻

芒果遇到厉娜和许飞笑发财了!

财经要闻

订单越厚,账单越重:算力租赁的杠杆游戏

汽车要闻

纯电续航1003km 大五座SUV腾势N8正式开启预订

态度原创

本地
教育
艺术
健康
家居

本地新闻

十月奔赴迪庆,解锁梅里日照金山

教育要闻

拒绝老师包办!树德这群高中生,自己办了一台学校大型晚会

艺术要闻

550米!20年前的“上海第一高楼”方案,SOM设计

查不出猝死风险?可能是项目没做对

家居要闻

2026建博会(广州) 公装联探展交流活动

无障碍浏览 进入关怀版