网易首页 > 网易号 > 正文 申请入驻

新华社研究院发布大模型体验报告,讯飞星火总分第一

0
分享至

8月12日,新华社研究院中国企业发展研究中心发布《人工智能大模型体验报告2.0》,对当前国内风生水起的主流大模型进行了客观评测,结果显示,科大讯飞星火总分第一。



相对于6月首次发布的《人工智能大模型体验报告》,本次测评在题目设计、对标Benchmark(人类)、打分权重、专家测评团队四大维度进行了全面升级。

其中,在题目设计方面,测评题目由300道扩展至500道,并进一步完善了题目分类:

在对标Benchmark方面,本次测评将接受过高等教育的人类作为对照,来考评大模型真实能力;

在打分标准上,本次测评根据对产业、生活的实际价值,对基础能力、智商能力、情商能力和工具提效四大测评维度进行了权重设计;

在测评团队方面,本次测评特邀北京大学文化与传播研究所及其他产界、学界专家全程参与。

本次研究设置了用户体验项目,抓取了7月31日—8月4日数据,通过人机互动提问等形式,对国内主流大模型进行使用体验评测,旨在为科技企业调整努力方向提供参考。

报告显示,与2023年6月相比,当前中国大模型产品进步显著。但与接受过高等教育的人类相比,大模型在智商、情商等方面还存在一定程度差距。

综合基础能力、智商能力、情商能力和工具提效四大能力综合得分情况来看,科大讯飞星火大模型得分1013,仅比人类答案少1分,在各主流大模型中排名第一。其它排在第二、第三的分别为百度文心一言和商汤商量。

据了解,科大讯飞星火大模型发布于5月6日,并于6月9日完成首次升级。相对于初始版本,讯飞星火讯飞新版本无论是知识问答能力、推理能力、数学能力、语言理解、代码能力还是文本生成能力均有较大提升。



科大讯飞星火之所以有如此表现,此前科大讯飞董事长刘庆峰表示,主要是因为公司员工努力和技术积累所致。

刘庆峰表示,在过去24年的创业历程中,为了让机器实现像人一样能听会说、能理解会思考,用人工智能建设美好世界的梦想,科大讯飞人没有一天停止过,也没有一天不再奋斗。

在过去的创业历程中,科大讯飞不仅彻底扭转了中文语音产业的竞争格局,而且在英文等多语种领域获得了全球第一的地位。

在全球首次让机器语音转写超过专业书记员;首次让机器翻译通过国家翻译师资格考试;首次让机器通过了国家执业医师资格考试。同时也是中国唯一一家承担认知智能国家重点实验室建设的公司。

除技术积累外,科大讯飞还拥有成建制的团队,且每一个关键模块都是完全自主研发的,有完整的创新体系,这是科大讯飞在人工智能领域得以踏实前行的关键。

科大讯飞星火大模型当前的版本为1.5,据悉,8月15日,科大讯飞将正式发布讯飞星火2.0版,在文本生成、语言理解、逻辑推理等各项能力持续提升的同时,代码能力和多模态能力将登上全新高度。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
伊朗完成“关门”行动 泽连斯基在联大开诊断书

伊朗完成“关门”行动 泽连斯基在联大开诊断书

西楼饮月
2026-09-24 20:20:57
斯马特炮轰湖人报价毫无诚意:很多球员打得远不如我 却拿到更好合同

斯马特炮轰湖人报价毫无诚意:很多球员打得远不如我 却拿到更好合同

罗说NBA
2026-09-24 06:11:02
闪电锐评丨9瓶水621元:明码标价就是合理定价吗?

闪电锐评丨9瓶水621元:明码标价就是合理定价吗?

闪电新闻
2026-09-24 13:34:12
美媒集体震惊:这次访华,才真正见识到中国温度!

美媒集体震惊:这次访华,才真正见识到中国温度!

福建睿平
2026-05-18 11:56:20
张本美和飘了,赛后阴阳怪气,她说,不知道为什么和我打比赛的对手,总是莫名其妙的叫医疗暂停,我都习惯了!

张本美和飘了,赛后阴阳怪气,她说,不知道为什么和我打比赛的对手,总是莫名其妙的叫医疗暂停,我都习惯了!

乒乓乐园
2026-08-10 00:04:07
焦雅辉任广西壮族自治区副主席

焦雅辉任广西壮族自治区副主席

界面新闻
2026-09-24 10:01:16
没有任何退路可言!中国国防部向世界警告:解放军已做好全部准备

没有任何退路可言!中国国防部向世界警告:解放军已做好全部准备

阿芒娱乐说
2026-09-23 15:11:19
林秀成,被刑拘

林秀成,被刑拘

中国基金报
2026-09-24 22:23:39
瞒不住了,菲政坛变天,能把老杜送进监狱的人出手,对华底牌曝光

瞒不住了,菲政坛变天,能把老杜送进监狱的人出手,对华底牌曝光

孤单是寂寞的毒
2026-08-15 20:18:42
高市访美刚结束,日本万万没想到,美国民众对华态度突然变了

高市访美刚结束,日本万万没想到,美国民众对华态度突然变了

晓鰀爱八卦
2026-09-23 15:47:12
央国企摸底55岁在岗职工,内退重新启动,和过去老模式差别很大

央国企摸底55岁在岗职工,内退重新启动,和过去老模式差别很大

职场资深秘书
2026-09-24 17:13:30
直击风波中的西贝一线:部分核心门店尚能盈利,还有门店新签三年租约,但员工感叹“再也回不到以前了”

直击风波中的西贝一线:部分核心门店尚能盈利,还有门店新签三年租约,但员工感叹“再也回不到以前了”

每日经济新闻
2026-09-24 07:49:23
江西一男生无法拿出60万彩礼主动提出分手,倾尽积蓄转了三万多补偿五年感情,女生却嫌弃数额太少不断指责

江西一男生无法拿出60万彩礼主动提出分手,倾尽积蓄转了三万多补偿五年感情,女生却嫌弃数额太少不断指责

捣蛋窝
2026-09-23 07:00:50
超越赞比亚,国足3-0胜马尔代夫后实时FIFA排名上升至第90

超越赞比亚,国足3-0胜马尔代夫后实时FIFA排名上升至第90

懂球帝
2026-09-24 21:38:07
《微微一笑很倾城》AI换脸郑爽!女主变成她…全剧重上架陆网傻眼

《微微一笑很倾城》AI换脸郑爽!女主变成她…全剧重上架陆网傻眼

ETtoday星光云
2026-09-24 15:51:02
日本 5 人破 13 秒!吴艳妮坦言实力差距,撕开国内短跨人才困境!

日本 5 人破 13 秒!吴艳妮坦言实力差距,撕开国内短跨人才困境!

大橙看世界
2026-09-23 18:35:03
“酱油大王”走下神坛?昔日百亿帝国,如今一家三口成了老赖

“酱油大王”走下神坛?昔日百亿帝国,如今一家三口成了老赖

花小猫的美食日常
2026-09-24 04:56:29
已击毙!伊朗军方宣布重大战果。

已击毙!伊朗军方宣布重大战果。

回京历史梦
2026-09-23 09:21:02
美财长称中美已同意将贸易休战协议延期至明年1月,外交部回应

美财长称中美已同意将贸易休战协议延期至明年1月,外交部回应

澎湃新闻
2026-09-24 16:14:57
难怪朱倩老公这次下手这么狠,这女人的聊天记录,实在是太野了

难怪朱倩老公这次下手这么狠,这女人的聊天记录,实在是太野了

皮蛋儿电影
2026-09-02 10:26:48
2026-09-24 22:59:00
数码日记 incentive-icons
数码日记
数码圈里的那些事儿!
1109文章数 5469关注度
往期回顾 全部

科技要闻

Claude在DNA里挖出新发现!大佬张锋点赞

头条要闻

高市飞十几小时只见特朗普35分钟 回国未见美官员送机

头条要闻

高市飞十几小时只见特朗普35分钟 回国未见美官员送机

体育要闻

巴图姆,以父之名

娱乐要闻

93岁游本昌去世 最后一句话惹人泪目

财经要闻

跌光1400亿,“女王”亏麻了

汽车要闻

全新第四代博越L 上市限时价9.29万元起

态度原创

健康
本地
时尚
公开课
军事航空

鼻子三角区的痘,千万别乱挤!

本地新闻

中秋逛白塔寺,体验国医妙荟雅集

奶茶色穿出秋日味道,高级

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

韩国首架“准隐身”战斗机正式入列

无障碍浏览 进入关怀版