网易首页 > 网易号 > 正文 申请入驻

引领新一代人机交互,科大讯飞发布具身多模交互技术

0
分享至

嘈杂环境里听清每一句话,多人交谈中找准回应对象,甚至是在复杂声音场景中听懂人类语言以外的声音……AI 从数字世界走向物理世界,不仅要听清、看懂,还要在动态环境中理解意图、协调行动。

10 月 22 日,2026 科大讯飞全球 1024 开发者节主论坛上,董事长刘庆峰发布星火语音大模型 SparkAudio 1.0、多模交互技术以及星火具身多模交互技术及相关产品。“大家千呼万唤,期待机器人从运动会、表演舞台走向日常生活、走进千家万户。”刘庆峰表示,科大讯飞沿着“语音交互—多模交互—具身多模交互”持续进阶,以软硬一体的技术和产品创新,引领新一代人机交互走进千家万户。



语音交互:效果提升、响应更快、成本降低

在语音交互领域,高噪识别一直是行业难点,在此基础上的复杂音频感知和多人语音分析更属于进阶功能。

针对这些难点,科大讯飞发布星火语音基座大模型SparkAudio 1.0,带来语音识别、同传和交互,以及音频理解、情绪识别、实时说话人分离和环境声理解等智能语音能力的全面提升。



SparkAudio 1.0有刑侦剧中“声音侦探”的类似能力,即使置身嘈杂的街头,也能辨别喇叭声、叫卖声、车轮摩擦地面的声音,分清交织的人声,从声音线索中推理周围环境,不仅“听清说了什么”,更能“听懂发生了什么”。

这背后,是半监督音频编码器、动态分段端到端建模、双范式协同解码等三项技术创新,相关测试显示整体效果提升20%、响应时间降低15%、成本降低60%,让语音服务更准确、更及时,也更易规模化应用。

SparkAudio 1.0 已在讯飞产品中上线,大家在讯飞输入法 16.0、讯飞听见、讯飞智能办公本等产品中都能体验。现场还发布了讯飞AI录音环,可如手机支架一样磁吸贴在手机背面,随时开启录音,2小时录音转写仅需2分钟,综合识别准确率超96%。

多模交互,已应用在AI眼镜、智慧座舱等产品

从语音交互走向多模交互,AI不仅要能听会说,还要结合视觉信息理解场景,并将不同来源的信息准确对应起来,进一步提升理解与推理能力。

此次发布的多模交互技术进一步融合多模远场识别、多人交互、视听觉融合理解、个性化记忆和情感语义,让AI理解更丰富的场景信息。

讯飞 AI 眼镜就是该技术的典型应用产品。科大讯飞穿戴业务事业部总经理林会杰现场展示了刚刚用讯飞AI眼镜记录的刘庆峰演讲过程纪要,内容层次清晰、图文并茂。随后与西班牙语、英语使用者分别用各自母语交流,由眼镜实时翻译,他还通过眼镜为同台嘉宾点咖啡,并联动电脑端处理办公任务,呈现辅助记录、沟通和办事的应用场景。



这副重约 40 克的眼镜,通过 5 麦阵列、骨传导与唇动识别协同改善复杂环境拾音,支持 120 余种语言翻译,同传首响低至 2 秒。不仅有智能提词、声图文纪要、多语种翻译等功能,还能拍照搜索、实时导览、骑行记录,助力工作和生活。

汽车场景更考验远场拾音与抗噪能力。以“47秒念完350字”的语速著称的主持人华少体验星火智慧座舱 3.0 ,一口气对它说了一长段初次到一个城市的办事和接待需求,星火智慧座舱3.0不仅立刻理解、安排了最优路线,并顺带推荐了店铺、预定了餐厅。



星火智慧座舱3.0提供超100项多模感知能力,多模感知成功率超95%,模糊理解准确率超93%,车外远场交互距离达30米,远超行业平均水平,“更懂你、会办事、超临感”。

发布具身多模交互技术,推出机器人超脑平台V3.0

“人机交互历来是牵引着产业革命的。”刘庆峰表示,机器人不仅要具备行动能力,更要能在行动中与人自然交流,在距离和噪声不断变化的环境中听清指令、理解多人意图,并协调语音与动作。



从智能终端走向移动机器人,交互还要适应空间变化、多人参与和动作执行。针对这些挑战,科大讯飞发布星火具身多模交互技术,在复杂空间动态降噪、多目标人的交互意图识别、语音与动作统一规划与执行、视觉触发的主动交互等方面取得突破,让机器人在动态环境中既能与人交流,又能协同完成任务,为其进入家庭和社会服务场景提供关键技术支撑。

主会现场展示了机器人超市、机器人物流驿站,在现场嘈杂、多人围观的情况下,机器人都准确完成了任务。

科大讯飞还推出了机器人超脑平台V3.0,整合星火超脑板、具身智能开发套件、多模态交互模组及具身多模交互Harness,通过端云协同、前后台协同,让机器人前台畅聊不停、后台持续办事,并支持模块化、配置化的行业定制。

本次主论坛,科大讯飞回应AI时代“如何兼顾安全与成本,如何从数字世界走向物理世界,如何将个人提效转化为组织成效”等关键问题。除了星火语音大模型 SparkAudio 1.0、星火具身多模交互技术及相关产品,科大讯飞还发布端云一体讯飞星火X2.6及系列产品,以及讯飞星帆WinWork数字员工平台和科大讯飞AIPC等,并面向智能硬件和企业应用等领域开发者发布新的技术解决方案,星辰TaaS平台也进一步推动“从Token到Solution”。

“一代人有一代人的长征,人工智能是一场凝心聚力的长跑。” 刘庆峰最后说,科大讯飞将持续以国产AI创造社会价值,解放生产力、释放想象力,用人工智能建设美好世界。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
沪指盘中再度跌破3600点

沪指盘中再度跌破3600点

财闻
2026-10-30 14:46:54
外交部:中方决定延长APEC商务旅行卡停留期

外交部:中方决定延长APEC商务旅行卡停留期

界面新闻
2026-10-30 14:21:56
中方宣布:海赛姆将访华

中方宣布:海赛姆将访华

政知新媒体
2026-10-30 15:38:25
黄仁勋被曝遭华裔高管接近,英伟达回应

黄仁勋被曝遭华裔高管接近,英伟达回应

碳基打工人
2026-10-30 07:54:31
证监会:全力稳市场稳预期 持续提升资本市场韧性和信心

证监会:全力稳市场稳预期 持续提升资本市场韧性和信心

科创板日报
2026-10-30 17:15:21
当年刘强东力排众议,花27亿在北京买下连年亏损的北京翠宫饭店…

当年刘强东力排众议,花27亿在北京买下连年亏损的北京翠宫饭店…

坠入二次元的海洋
2026-10-30 01:18:32
专家大胆预测:2027年房价将是今年的4-5倍,信号太强烈了!

专家大胆预测:2027年房价将是今年的4-5倍,信号太强烈了!

细说职场
2026-10-30 12:15:38
男子在星巴克不消费占座,被店员提醒后竟然报警!警察赶到后……知情人:他连续多日占座不消费

男子在星巴克不消费占座,被店员提醒后竟然报警!警察赶到后……知情人:他连续多日占座不消费

扬子晚报
2026-10-30 16:08:56
没钱开发布会?阿维塔总裁承认“内部会议视频”摆拍!品牌销量未达预期目标

没钱开发布会?阿维塔总裁承认“内部会议视频”摆拍!品牌销量未达预期目标

红星新闻
2026-10-30 17:53:20
全军覆没,欧洲球队无缘本届U17女足世界杯八强

全军覆没,欧洲球队无缘本届U17女足世界杯八强

懂球帝
2026-10-30 11:07:06
乌克兰总统泽连斯基公开表示:乌军对俄罗斯军事设施发动两次导弹袭击,击毁两架俄军苏-34战机损毁、击中一套“伊斯坎德尔”导弹发射器

乌克兰总统泽连斯基公开表示:乌军对俄罗斯军事设施发动两次导弹袭击,击毁两架俄军苏-34战机损毁、击中一套“伊斯坎德尔”导弹发射器

吉刻新闻
2026-10-30 10:52:29
这下老实了!中国航母战斗群精锐全出,“贴身”绕菲律宾一周!网友:实力可单挑一国

这下老实了!中国航母战斗群精锐全出,“贴身”绕菲律宾一周!网友:实力可单挑一国

军武次位面
2026-10-29 17:04:35
外企在加速撤离?网传在华深耕30年的行业巨头将出售大中华区业务,上万员工该失业了!

外企在加速撤离?网传在华深耕30年的行业巨头将出售大中华区业务,上万员工该失业了!

黯泉
2026-10-30 11:02:13
离谱,跌到破防了

离谱,跌到破防了

隔壁老投
2026-10-30 15:21:47
哈登历史第二人,鹰王17+8+7奥孔武打爆双塔,老鹰15分逆转骑士

哈登历史第二人,鹰王17+8+7奥孔武打爆双塔,老鹰15分逆转骑士

钉钉陌上花开
2026-10-30 10:31:04
土耳其网友:中国人是我见过最无能的足球国家!中国网友排队点赞

土耳其网友:中国人是我见过最无能的足球国家!中国网友排队点赞

故事终将光明磊落
2026-10-30 12:54:48
男子奸杀女友的姨妈和表妹,2015年还侵犯过一女子,只为练胆杀女友

男子奸杀女友的姨妈和表妹,2015年还侵犯过一女子,只为练胆杀女友

汉史趣闻
2026-10-30 09:57:29
刚刚,美国FCC封杀所有中国实验室!

刚刚,美国FCC封杀所有中国实验室!

EETOP半导体社区
2026-10-30 11:36:33
最强基因战士!布泽尔轰本届新秀首记三双,超詹姆斯创历史纪录!

最强基因战士!布泽尔轰本届新秀首记三双,超詹姆斯创历史纪录!

田先生篮球
2026-10-30 14:58:39
姆巴佩被抵制后,网上却陆续出现了他公开的支持者,这该怎么办?

姆巴佩被抵制后,网上却陆续出现了他公开的支持者,这该怎么办?

李昕言温度空间
2026-10-29 20:34:22
2026-10-30 19:16:49
深眸财经 incentive-icons
深眸财经
专注商业故事与行业研究
607文章数 716关注度
往期回顾 全部

科技要闻

谷歌一天跌没5000亿美元!AI烧钱吓傻华尔街

头条要闻

网红边牧被盗遭宰杀犬主人接受30万赔偿 称将全部捐出

头条要闻

网红边牧被盗遭宰杀犬主人接受30万赔偿 称将全部捐出

体育要闻

第三年合同获保障 杨瀚森在垃圾时间抢饭碗

娱乐要闻

李冰冰任泉亲密照流出,情谊胜过夫妻

财经要闻

直播退烧,品牌迎来梦醒时分

汽车要闻

全能百变空间 神行者8五座版便捷更实用

态度原创

艺术
本地
亲子
时尚
公开课

艺术要闻

Emile Claus:比利时著名印象派画家

本地新闻

秋假去哪玩,4 站打卡京郊限定秋色

亲子要闻

保障婴幼儿日常活动安全,儿童呵护用品系列国家标准实施

内娱流量生,扎堆假结婚?

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版