网易首页 > 网易号 > 正文 申请入驻

引领新一代人机交互,科大讯飞发布具身多模交互技术

0
分享至

嘈杂环境里听清每一句话,多人交谈中找准回应对象,甚至是在复杂声音场景中听懂人类语言以外的声音……AI 从数字世界走向物理世界,不仅要听清、看懂,还要在动态环境中理解意图、协调行动。

10 月 22 日,2026 科大讯飞全球 1024 开发者节主论坛上,董事长刘庆峰发布星火语音大模型 SparkAudio 1.0、多模交互技术以及星火具身多模交互技术及相关产品。“大家千呼万唤,期待机器人从运动会、表演舞台走向日常生活、走进千家万户。”刘庆峰表示,科大讯飞沿着“语音交互—多模交互—具身多模交互”持续进阶,以软硬一体的技术和产品创新,引领新一代人机交互走进千家万户。



语音交互:效果提升、响应更快、成本降低

在语音交互领域,高噪识别一直是行业难点,在此基础上的复杂音频感知和多人语音分析更属于进阶功能。

针对这些难点,科大讯飞发布星火语音基座大模型SparkAudio 1.0,带来语音识别、同传和交互,以及音频理解、情绪识别、实时说话人分离和环境声理解等智能语音能力的全面提升。



SparkAudio 1.0有刑侦剧中“声音侦探”的类似能力,即使置身嘈杂的街头,也能辨别喇叭声、叫卖声、车轮摩擦地面的声音,分清交织的人声,从声音线索中推理周围环境,不仅“听清说了什么”,更能“听懂发生了什么”。

这背后,是半监督音频编码器、动态分段端到端建模、双范式协同解码等三项技术创新,相关测试显示整体效果提升20%、响应时间降低15%、成本降低60%,让语音服务更准确、更及时,也更易规模化应用。

SparkAudio 1.0 已在讯飞产品中上线,大家在讯飞输入法 16.0、讯飞听见、讯飞智能办公本等产品中都能体验。现场还发布了讯飞AI录音环,可如手机支架一样磁吸贴在手机背面,随时开启录音,2小时录音转写仅需2分钟,综合识别准确率超96%。

多模交互,已应用在AI眼镜、智慧座舱等产品

从语音交互走向多模交互,AI不仅要能听会说,还要结合视觉信息理解场景,并将不同来源的信息准确对应起来,进一步提升理解与推理能力。

此次发布的多模交互技术进一步融合多模远场识别、多人交互、视听觉融合理解、个性化记忆和情感语义,让AI理解更丰富的场景信息。

讯飞 AI 眼镜就是该技术的典型应用产品。科大讯飞穿戴业务事业部总经理林会杰现场展示了刚刚用讯飞AI眼镜记录的刘庆峰演讲过程纪要,内容层次清晰、图文并茂。随后与西班牙语、英语使用者分别用各自母语交流,由眼镜实时翻译,他还通过眼镜为同台嘉宾点咖啡,并联动电脑端处理办公任务,呈现辅助记录、沟通和办事的应用场景。



这副重约 40 克的眼镜,通过 5 麦阵列、骨传导与唇动识别协同改善复杂环境拾音,支持 120 余种语言翻译,同传首响低至 2 秒。不仅有智能提词、声图文纪要、多语种翻译等功能,还能拍照搜索、实时导览、骑行记录,助力工作和生活。

汽车场景更考验远场拾音与抗噪能力。以“47秒念完350字”的语速著称的主持人华少体验星火智慧座舱 3.0 ,一口气对它说了一长段初次到一个城市的办事和接待需求,星火智慧座舱3.0不仅立刻理解、安排了最优路线,并顺带推荐了店铺、预定了餐厅。



星火智慧座舱3.0提供超100项多模感知能力,多模感知成功率超95%,模糊理解准确率超93%,车外远场交互距离达30米,远超行业平均水平,“更懂你、会办事、超临感”。

发布具身多模交互技术,推出机器人超脑平台V3.0

“人机交互历来是牵引着产业革命的。”刘庆峰表示,机器人不仅要具备行动能力,更要能在行动中与人自然交流,在距离和噪声不断变化的环境中听清指令、理解多人意图,并协调语音与动作。



从智能终端走向移动机器人,交互还要适应空间变化、多人参与和动作执行。针对这些挑战,科大讯飞发布星火具身多模交互技术,在复杂空间动态降噪、多目标人的交互意图识别、语音与动作统一规划与执行、视觉触发的主动交互等方面取得突破,让机器人在动态环境中既能与人交流,又能协同完成任务,为其进入家庭和社会服务场景提供关键技术支撑。

主会现场展示了机器人超市、机器人物流驿站,在现场嘈杂、多人围观的情况下,机器人都准确完成了任务。

科大讯飞还推出了机器人超脑平台V3.0,整合星火超脑板、具身智能开发套件、多模态交互模组及具身多模交互Harness,通过端云协同、前后台协同,让机器人前台畅聊不停、后台持续办事,并支持模块化、配置化的行业定制。

本次主论坛,科大讯飞回应AI时代“如何兼顾安全与成本,如何从数字世界走向物理世界,如何将个人提效转化为组织成效”等关键问题。除了星火语音大模型 SparkAudio 1.0、星火具身多模交互技术及相关产品,科大讯飞还发布端云一体讯飞星火X2.6及系列产品,以及讯飞星帆WinWork数字员工平台和科大讯飞AIPC等,并面向智能硬件和企业应用等领域开发者发布新的技术解决方案,星辰TaaS平台也进一步推动“从Token到Solution”。

“一代人有一代人的长征,人工智能是一场凝心聚力的长跑。” 刘庆峰最后说,科大讯飞将持续以国产AI创造社会价值,解放生产力、释放想象力,用人工智能建设美好世界。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
CCTV5直播,中国男篮VS沙特男篮,网上流传12人名单版本,郭士强醒醒吧!

CCTV5直播,中国男篮VS沙特男篮,网上流传12人名单版本,郭士强醒醒吧!

体坛小快灵
2026-10-30 10:00:00
姆巴佩发表发表涉华不当言论,一句话“非我族类,其心必异”

姆巴佩发表发表涉华不当言论,一句话“非我族类,其心必异”

胡言炫语
2026-10-28 00:46:03
中美贸易战按下暂停键,美忽然发现:中国让美忌惮的,竟不是经济

中美贸易战按下暂停键,美忽然发现:中国让美忌惮的,竟不是经济

广西阿妹香香
2026-10-30 16:20:58
郭梓阁曾冒生命危险救毛泽东,27年后被划为地主,毛泽东称他是好人!

郭梓阁曾冒生命危险救毛泽东,27年后被划为地主,毛泽东称他是好人!

历史龙元阁
2026-10-30 12:00:24
“吃相,长相到面相,没一个顺眼的!”宝妈晒女儿吃饭被骂惨!

“吃相,长相到面相,没一个顺眼的!”宝妈晒女儿吃饭被骂惨!

世界圈
2026-10-14 07:32:45
一把好牌打得稀烂!“消失”4年、无戏可拍的张翰,面相真的变了

一把好牌打得稀烂!“消失”4年、无戏可拍的张翰,面相真的变了

谢鵑解说
2026-10-29 05:22:56
网红黄婉均整容后回老家,熟人都认不出,丈夫梅尼耶看旧照被吓跑

网红黄婉均整容后回老家,熟人都认不出,丈夫梅尼耶看旧照被吓跑

乡野小珥
2026-10-30 16:48:35
山东男篮追爆点外援基诺内斯:天赋断层领先,但三大死结难破

山东男篮追爆点外援基诺内斯:天赋断层领先,但三大死结难破

兰亭墨未干
2026-10-30 15:12:53
未来10天!提醒中老年人:1不去,2不洗,3不跳,4不吃,安稳入冬

未来10天!提醒中老年人:1不去,2不洗,3不跳,4不吃,安稳入冬

健康科普365
2026-10-28 11:25:11
博索纳罗抵美现场画面:海关工作人员用巨大雨伞掩护其离开

博索纳罗抵美现场画面:海关工作人员用巨大雨伞掩护其离开

每日经济新闻
2026-10-29 20:50:49
江苏省政府关于杜小刚等职务任免的通知

江苏省政府关于杜小刚等职务任免的通知

上观新闻
2026-10-30 11:08:59
豆包开始学腾讯,WorkBuddy的好日子到头了?

豆包开始学腾讯,WorkBuddy的好日子到头了?

人人都是产品经理社区
2026-10-30 11:58:40
俄媒感慨:俄罗斯扛到现在没有崩盘,是因为中国两只手托举

俄媒感慨:俄罗斯扛到现在没有崩盘,是因为中国两只手托举

乌克兰小静
2026-10-30 10:16:55
178cm 撑起的"人间黄金量角器",凭什么火得这么清醒?

178cm 撑起的"人间黄金量角器",凭什么火得这么清醒?

云端小院
2026-10-29 07:49:30
中午一度恢复“欢声笑语”的股票群,午后再度“鸦雀无声”

中午一度恢复“欢声笑语”的股票群,午后再度“鸦雀无声”

每经牛眼
2026-10-30 16:59:51
令英国痛苦的“入侵花”,在中国沦为咸菜,吃到人工种植成笑谈

令英国痛苦的“入侵花”,在中国沦为咸菜,吃到人工种植成笑谈

谭老师地理大课堂
2026-10-20 09:13:52
浙江丽水一公园钢板脱落,17个月大幼童被砸身亡

浙江丽水一公园钢板脱落,17个月大幼童被砸身亡

王二哥老搞笑
2026-10-29 16:55:03
欧盟27国北极新规,不认中国近北极身份,中俄船舶建造合作

欧盟27国北极新规,不认中国近北极身份,中俄船舶建造合作

流史岁月
2026-10-29 19:30:04
西蒙斯:季前赛我问科尔为什么勇士不要我,他说担心我的健康

西蒙斯:季前赛我问科尔为什么勇士不要我,他说担心我的健康

懂球帝
2026-10-30 15:50:10
蒋经国为何喜欢已经生了两个小孩的章亚若?

蒋经国为何喜欢已经生了两个小孩的章亚若?

冰点历史
2025-07-04 09:23:22
2026-10-30 18:12:49
深眸财经 incentive-icons
深眸财经
专注商业故事与行业研究
607文章数 716关注度
往期回顾 全部

科技要闻

谷歌一天跌没5000亿美元!AI烧钱吓傻华尔街

头条要闻

男子称在会所按摩时睡着遭技师"手推"下体 警方已立案

头条要闻

男子称在会所按摩时睡着遭技师"手推"下体 警方已立案

体育要闻

第三年合同获保障 杨瀚森在垃圾时间抢饭碗

娱乐要闻

72岁成龙上热搜!手抱甥外孙和蔼

财经要闻

直播退烧,品牌迎来梦醒时分

汽车要闻

全能百变空间 神行者8五座版便捷更实用

态度原创

本地
时尚
数码
房产
公开课

本地新闻

秋假去哪玩,4 站打卡京郊限定秋色

内娱流量生,扎堆假结婚?

数码要闻

消息称三星拟调整旧款Galaxy Watch智能手表系统更新政策

房产要闻

学校扩容+近百亩地块调规!迈瀛,又有大动作!

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版