网易首页 > 网易号 > 正文 申请入驻

引领新一代人机交互,科大讯飞发布具身多模交互技术

0
分享至

嘈杂环境里听清每一句话,多人交谈中找准回应对象,甚至是在复杂声音场景中听懂人类语言以外的声音……AI 从数字世界走向物理世界,不仅要听清、看懂,还要在动态环境中理解意图、协调行动。

10 月 22 日,2026 科大讯飞全球 1024 开发者节主论坛上,董事长刘庆峰发布星火语音大模型 SparkAudio 1.0、多模交互技术以及星火具身多模交互技术及相关产品。“大家千呼万唤,期待机器人从运动会、表演舞台走向日常生活、走进千家万户。”刘庆峰表示,科大讯飞沿着“语音交互—多模交互—具身多模交互”持续进阶,以软硬一体的技术和产品创新,引领新一代人机交互走进千家万户。



语音交互:效果提升、响应更快、成本降低

在语音交互领域,高噪识别一直是行业难点,在此基础上的复杂音频感知和多人语音分析更属于进阶功能。

针对这些难点,科大讯飞发布星火语音基座大模型SparkAudio 1.0,带来语音识别、同传和交互,以及音频理解、情绪识别、实时说话人分离和环境声理解等智能语音能力的全面提升。



SparkAudio 1.0有刑侦剧中“声音侦探”的类似能力,即使置身嘈杂的街头,也能辨别喇叭声、叫卖声、车轮摩擦地面的声音,分清交织的人声,从声音线索中推理周围环境,不仅“听清说了什么”,更能“听懂发生了什么”。

这背后,是半监督音频编码器、动态分段端到端建模、双范式协同解码等三项技术创新,相关测试显示整体效果提升20%、响应时间降低15%、成本降低60%,让语音服务更准确、更及时,也更易规模化应用。

SparkAudio 1.0 已在讯飞产品中上线,大家在讯飞输入法 16.0、讯飞听见、讯飞智能办公本等产品中都能体验。现场还发布了讯飞AI录音环,可如手机支架一样磁吸贴在手机背面,随时开启录音,2小时录音转写仅需2分钟,综合识别准确率超96%。

多模交互,已应用在AI眼镜、智慧座舱等产品

从语音交互走向多模交互,AI不仅要能听会说,还要结合视觉信息理解场景,并将不同来源的信息准确对应起来,进一步提升理解与推理能力。

此次发布的多模交互技术进一步融合多模远场识别、多人交互、视听觉融合理解、个性化记忆和情感语义,让AI理解更丰富的场景信息。

讯飞 AI 眼镜就是该技术的典型应用产品。科大讯飞穿戴业务事业部总经理林会杰现场展示了刚刚用讯飞AI眼镜记录的刘庆峰演讲过程纪要,内容层次清晰、图文并茂。随后与西班牙语、英语使用者分别用各自母语交流,由眼镜实时翻译,他还通过眼镜为同台嘉宾点咖啡,并联动电脑端处理办公任务,呈现辅助记录、沟通和办事的应用场景。



这副重约 40 克的眼镜,通过 5 麦阵列、骨传导与唇动识别协同改善复杂环境拾音,支持 120 余种语言翻译,同传首响低至 2 秒。不仅有智能提词、声图文纪要、多语种翻译等功能,还能拍照搜索、实时导览、骑行记录,助力工作和生活。

汽车场景更考验远场拾音与抗噪能力。以“47秒念完350字”的语速著称的主持人华少体验星火智慧座舱 3.0 ,一口气对它说了一长段初次到一个城市的办事和接待需求,星火智慧座舱3.0不仅立刻理解、安排了最优路线,并顺带推荐了店铺、预定了餐厅。



星火智慧座舱3.0提供超100项多模感知能力,多模感知成功率超95%,模糊理解准确率超93%,车外远场交互距离达30米,远超行业平均水平,“更懂你、会办事、超临感”。

发布具身多模交互技术,推出机器人超脑平台V3.0

“人机交互历来是牵引着产业革命的。”刘庆峰表示,机器人不仅要具备行动能力,更要能在行动中与人自然交流,在距离和噪声不断变化的环境中听清指令、理解多人意图,并协调语音与动作。



从智能终端走向移动机器人,交互还要适应空间变化、多人参与和动作执行。针对这些挑战,科大讯飞发布星火具身多模交互技术,在复杂空间动态降噪、多目标人的交互意图识别、语音与动作统一规划与执行、视觉触发的主动交互等方面取得突破,让机器人在动态环境中既能与人交流,又能协同完成任务,为其进入家庭和社会服务场景提供关键技术支撑。

主会现场展示了机器人超市、机器人物流驿站,在现场嘈杂、多人围观的情况下,机器人都准确完成了任务。

科大讯飞还推出了机器人超脑平台V3.0,整合星火超脑板、具身智能开发套件、多模态交互模组及具身多模交互Harness,通过端云协同、前后台协同,让机器人前台畅聊不停、后台持续办事,并支持模块化、配置化的行业定制。

本次主论坛,科大讯飞回应AI时代“如何兼顾安全与成本,如何从数字世界走向物理世界,如何将个人提效转化为组织成效”等关键问题。除了星火语音大模型SparkAudio 1.0、星火具身多模交互技术及相关产品,科大讯飞还发布端云一体讯飞星火X2.6及系列产品,以及讯飞星帆WinWork数字员工平台和科大讯飞AIPC等,并面向智能硬件和企业应用等领域开发者发布新的技术解决方案,星辰TaaS平台也进一步推动“从Token到Solution”。

“一代人有一代人的长征,人工智能是一场凝心聚力的长跑。” 刘庆峰最后说,科大讯飞将持续以国产AI创造社会价值,解放生产力、释放想象力,用人工智能建设美好世界。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
突发!巴西大选刚落幕,司法风波接踵而至:小博索纳罗被禁出境

突发!巴西大选刚落幕,司法风波接踵而至:小博索纳罗被禁出境

巴西商业资讯网
2026-10-27 06:54:11
弗拉格复出29+11独行侠送热火开季4连败,欧文18分字母哥29+15+11

弗拉格复出29+11独行侠送热火开季4连败,欧文18分字母哥29+15+11

湖人崛起
2026-10-27 10:07:05
争议!凯恩获奖时,姆巴佩和亚马尔都没有起身祝贺,两人略显沮丧

争议!凯恩获奖时,姆巴佩和亚马尔都没有起身祝贺,两人略显沮丧

风过乡
2026-10-27 07:38:49
半年吃掉110只羊,“羊亡爷”如今连一碗粥都喝不利索

半年吃掉110只羊,“羊亡爷”如今连一碗粥都喝不利索

手工制作阿歼
2026-10-26 14:02:41
张雪到重庆大学进行校招演讲称“风浪越大鱼越贵”,入职后年薪10万起,学生:张总说一年后大部分能涨薪20%

张雪到重庆大学进行校招演讲称“风浪越大鱼越贵”,入职后年薪10万起,学生:张总说一年后大部分能涨薪20%

极目新闻
2026-10-26 21:18:09
女义工被要求陪客、酒后搂抱;深夜民宿老板试图开门闯入,结伴仓皇出逃……警惕以工换宿“义工旅行”

女义工被要求陪客、酒后搂抱;深夜民宿老板试图开门闯入,结伴仓皇出逃……警惕以工换宿“义工旅行”

都市快报橙柿互动
2026-10-27 02:27:03
绿军35分狂胜公牛:塔图姆23+7+6 普里查德28+7三分

绿军35分狂胜公牛:塔图姆23+7+6 普里查德28+7三分

醉卧浮生
2026-10-27 10:07:26
塞尔维亚政坛一夜变天!武契奇爆冷落败!中国73亿欧元投资怎么办

塞尔维亚政坛一夜变天!武契奇爆冷落败!中国73亿欧元投资怎么办

余憁搞笑段子
2026-10-26 18:30:18
姆巴佩涉华不当言论引爆舆论 商业代言紧急“切割”

姆巴佩涉华不当言论引爆舆论 商业代言紧急“切割”

伟少说球
2026-10-27 09:46:47
至今为止,也未能说清楚“大量免费招收、补贴留学生”于国于民有何好处

至今为止,也未能说清楚“大量免费招收、补贴留学生”于国于民有何好处

山中虎说
2026-10-26 16:48:25
慕岩自曝财产被冻结生活拮据,朋友圈发收款码“化缘”

慕岩自曝财产被冻结生活拮据,朋友圈发收款码“化缘”

三言科技
2026-10-26 18:25:07
网传女孩抑郁症,结三次婚,每次不到半年就离,彩礼不退,已经攒了几十万,光金手镯就有仨

网传女孩抑郁症,结三次婚,每次不到半年就离,彩礼不退,已经攒了几十万,光金手镯就有仨

丫头舫
2026-10-26 23:07:52
骑士队2分险胜森林狼,赢球后这3人却遭怒喷,2.24亿合同打水漂

骑士队2分险胜森林狼,赢球后这3人却遭怒喷,2.24亿合同打水漂

南海浪花
2026-10-27 10:16:54
刚2-1掀翻巴萨!皇马赛后传来穆里尼奥消息,姆巴佩说的很实在

刚2-1掀翻巴萨!皇马赛后传来穆里尼奥消息,姆巴佩说的很实在

画夕
2026-10-26 12:34:01
我问了美院油画系的同学,王诗龄的绘画水平到底怎么样。同学轻轻叹气:我们最羡慕的,是她爷爷用画笔陪她长大。

我问了美院油画系的同学,王诗龄的绘画水平到底怎么样。同学轻轻叹气:我们最羡慕的,是她爷爷用画笔陪她长大。

背包旅行
2026-10-26 09:49:31
河南一小区有人在电梯内虐猫,住户称是一对母子,男子手撑电梯借力,踩踏猫身长达5分钟;警方已介入调查

河南一小区有人在电梯内虐猫,住户称是一对母子,男子手撑电梯借力,踩踏猫身长达5分钟;警方已介入调查

扬子晚报
2026-10-27 09:48:24
雷霆两将大概率报销!杰威左踝脱位+腓骨骨折 华莱士左肩盂唇撕裂

雷霆两将大概率报销!杰威左踝脱位+腓骨骨折 华莱士左肩盂唇撕裂

罗说NBA
2026-10-27 06:17:17
Anthropic科学家宣布:全球博士生职业生涯一夜清零!

Anthropic科学家宣布:全球博士生职业生涯一夜清零!

新智元
2026-10-27 02:27:43
奥迪南北分治方案落地:上汽奥迪聚焦AUDI字母标,四环品牌全归一汽奥迪

奥迪南北分治方案落地:上汽奥迪聚焦AUDI字母标,四环品牌全归一汽奥迪

新京报
2026-10-26 17:03:33
甘肃敦煌2名女生花150万元开“无烟酒吧”已关闭,140平方米门店单日营收曾为0元;店主:创业失败不丢人,人生的容错率很高,可大胆去尝试

甘肃敦煌2名女生花150万元开“无烟酒吧”已关闭,140平方米门店单日营收曾为0元;店主:创业失败不丢人,人生的容错率很高,可大胆去尝试

三湘都市报
2026-10-26 15:37:31
2026-10-27 10:39:00
靠谱的阿星 incentive-icons
靠谱的阿星
靠谱汇创始人,科技专栏作家
819文章数 262503关注度
往期回顾 全部

科技要闻

Anthropic最硬气招股书,先把丑话说在前头

头条要闻

举报电诈大佬的自媒体人遇害 死前被人用钳子夹掉指甲

头条要闻

举报电诈大佬的自媒体人遇害 死前被人用钳子夹掉指甲

体育要闻

世界上最无趣的前锋,拿下了金球奖

娱乐要闻

李连杰回应抛妻弃女传闻,透露四个女儿关系

财经要闻

金价跌回8字头

汽车要闻

云辇-M上车 第二代海豹07让驾驶者也能爱上的家用车

态度原创

教育
艺术
家居
亲子
健康

教育要闻

在韩国留学注意!搬出宿舍租房,15天内必须申报新地址!

艺术要闻

这才是真·泰剧一姐!写真一出,美貌身材实力三杀,网友:彻底服气!

家居要闻

2026建博会(广州) 公装联探展交流活动

亲子要闻

旗下早教发声书被检出二甲苯超标4倍!企业称已启动核查

痘痘能根治吗?皮肤科医生说实话

无障碍浏览 进入关怀版