网易首页 > 网易号 > 正文 申请入驻

新华社研究院发布大模型体验报告,讯飞星火总分第一

0
分享至

8月12日,新华社研究院中国企业发展研究中心发布《人工智能大模型体验报告2.0》,对当前国内风生水起的主流大模型进行了客观评测,结果显示,科大讯飞星火总分第一。



相对于6月首次发布的《人工智能大模型体验报告》,本次测评在题目设计、对标Benchmark(人类)、打分权重、专家测评团队四大维度进行了全面升级。

其中,在题目设计方面,测评题目由300道扩展至500道,并进一步完善了题目分类:

在对标Benchmark方面,本次测评将接受过高等教育的人类作为对照,来考评大模型真实能力;

在打分标准上,本次测评根据对产业、生活的实际价值,对基础能力、智商能力、情商能力和工具提效四大测评维度进行了权重设计;

在测评团队方面,本次测评特邀北京大学文化与传播研究所及其他产界、学界专家全程参与。

本次研究设置了用户体验项目,抓取了7月31日—8月4日数据,通过人机互动提问等形式,对国内主流大模型进行使用体验评测,旨在为科技企业调整努力方向提供参考。

报告显示,与2023年6月相比,当前中国大模型产品进步显著。但与接受过高等教育的人类相比,大模型在智商、情商等方面还存在一定程度差距。

综合基础能力、智商能力、情商能力和工具提效四大能力综合得分情况来看,科大讯飞星火大模型得分1013,仅比人类答案少1分,在各主流大模型中排名第一。其它排在第二、第三的分别为百度文心一言和商汤商量。

据了解,科大讯飞星火大模型发布于5月6日,并于6月9日完成首次升级。相对于初始版本,讯飞星火讯飞新版本无论是知识问答能力、推理能力、数学能力、语言理解、代码能力还是文本生成能力均有较大提升。



科大讯飞星火之所以有如此表现,此前科大讯飞董事长刘庆峰表示,主要是因为公司员工努力和技术积累所致。

刘庆峰表示,在过去24年的创业历程中,为了让机器实现像人一样能听会说、能理解会思考,用人工智能建设美好世界的梦想,科大讯飞人没有一天停止过,也没有一天不再奋斗。

在过去的创业历程中,科大讯飞不仅彻底扭转了中文语音产业的竞争格局,而且在英文等多语种领域获得了全球第一的地位。

在全球首次让机器语音转写超过专业书记员;首次让机器翻译通过国家翻译师资格考试;首次让机器通过了国家执业医师资格考试。同时也是中国唯一一家承担认知智能国家重点实验室建设的公司。

除技术积累外,科大讯飞还拥有成建制的团队,且每一个关键模块都是完全自主研发的,有完整的创新体系,这是科大讯飞在人工智能领域得以踏实前行的关键。

科大讯飞星火大模型当前的版本为1.5,据悉,8月15日,科大讯飞将正式发布讯飞星火2.0版,在文本生成、语言理解、逻辑推理等各项能力持续提升的同时,代码能力和多模态能力将登上全新高度。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
沙特并不是不认同中国的实力,但是沙特认为,中国有实力,却从来不去干预世界局势。

沙特并不是不认同中国的实力,但是沙特认为,中国有实力,却从来不去干预世界局势。

回京历史梦
2026-09-24 11:10:04
太快了!中国队2小时连夺9枚金牌 网友:这不是亚运会,是全运会

太快了!中国队2小时连夺9枚金牌 网友:这不是亚运会,是全运会

念洲
2026-09-24 09:59:46
亚运游泳中国队只有7个项目没拿金牌,对手成绩太强了

亚运游泳中国队只有7个项目没拿金牌,对手成绩太强了

体娱一家亲
2026-09-24 22:05:05
随着国乒2-3被日本逆转,球迷彻底认清3个事实,王皓+王楚钦沮丧

随着国乒2-3被日本逆转,球迷彻底认清3个事实,王皓+王楚钦沮丧

侃球熊弟
2026-09-24 18:35:33
新生儿在月子中心监控下持续遭护工施暴虐待:法院称情节恶劣、涉刑事犯罪,案件移送公安,母亲公开求助权威机构为儿子鉴定脑损伤

新生儿在月子中心监控下持续遭护工施暴虐待:法院称情节恶劣、涉刑事犯罪,案件移送公安,母亲公开求助权威机构为儿子鉴定脑损伤

极目新闻
2026-09-24 22:27:09
越南深度改革对我国的启示

越南深度改革对我国的启示

大国老记老顾
2026-09-24 11:18:00
王励勤没想到,莎莎和大头的接连落败,竟让刘国梁口碑暴涨,开始怀念他了?

王励勤没想到,莎莎和大头的接连落败,竟让刘国梁口碑暴涨,开始怀念他了?

乒乓助手
2026-07-24 01:36:03
马未都被质疑好大的“谱”!与一众商界大佬聚会,全程不起身,别人敬酒他也坐着,周鸿祎带小弟出席

马未都被质疑好大的“谱”!与一众商界大佬聚会,全程不起身,别人敬酒他也坐着,周鸿祎带小弟出席

火山詩话
2026-09-24 06:11:17
特朗普亲自接机,这三个细节很特别

特朗普亲自接机,这三个细节很特别

澎湃新闻
2026-09-24 12:31:04
金亨泰:《剑星》为不同服装扫描约七至八名模特

金亨泰:《剑星》为不同服装扫描约七至八名模特

3DM游戏
2026-09-24 13:07:07
交通运输部副部长李扬:中秋和国庆隔了3天,有的人会进行调休,假期会有13天,长途旅游出行会成为新的增长点,我们有信心让大家平安出行

交通运输部副部长李扬:中秋和国庆隔了3天,有的人会进行调休,假期会有13天,长途旅游出行会成为新的增长点,我们有信心让大家平安出行

政知新媒体
2026-09-24 19:02:48
 大外交·现场|1962年后首次:美国总统亲赴机场迎接释放何种讯息?

大外交·现场|1962年后首次:美国总统亲赴机场迎接释放何种讯息?

澎湃新闻
2026-09-24 09:02:30
郑钦文首败保利尼:赖自己还是赖观众?网友说心气被莱巴打没了

郑钦文首败保利尼:赖自己还是赖观众?网友说心气被莱巴打没了

网球之家
2026-09-24 22:34:10
A股全天低开低走,都怪2个坏消息!

A股全天低开低走,都怪2个坏消息!

星图金融研究院
2026-09-24 16:01:46
温瑞博陷入绝境,没想到王皓这么说,打不过松岛辉空主教练要负责

温瑞博陷入绝境,没想到王皓这么说,打不过松岛辉空主教练要负责

南海浪花
2026-09-24 19:23:09
单日狂揽32金!中国队再刷亚运会纪录,5天已获80金遥遥领先

单日狂揽32金!中国队再刷亚运会纪录,5天已获80金遥遥领先

奥拜尔
2026-09-24 22:06:33
无缘亚运3连冠!国羽男团2-3遭让二追三丢金 印尼时隔28年夺金

无缘亚运3连冠!国羽男团2-3遭让二追三丢金 印尼时隔28年夺金

醉卧浮生
2026-09-24 21:05:51
1分惜败日本队被淘汰!中国女篮再遭打击:三人亚运遗憾出局无缘争冠

1分惜败日本队被淘汰!中国女篮再遭打击:三人亚运遗憾出局无缘争冠

篮球快餐车
2026-09-24 17:59:05
真相大白!王楚钦带队输球原因曝光,王皓用错人,刘国正一针见血

真相大白!王楚钦带队输球原因曝光,王皓用错人,刘国正一针见血

曹说体育
2026-09-24 19:34:13
国足3球大胜!7战马尔代夫全胜,王子铭戴帽,连刷6大纪录

国足3球大胜!7战马尔代夫全胜,王子铭戴帽,连刷6大纪录

奥拜尔
2026-09-24 21:32:25
2026-09-24 23:47:00
数码日记 incentive-icons
数码日记
数码圈里的那些事儿!
1109文章数 5469关注度
往期回顾 全部

科技要闻

Claude在DNA里挖出新发现!大佬张锋点赞

头条要闻

刘国梁现场见证国乒失利 张本智和:这一刻我等了10年

头条要闻

刘国梁现场见证国乒失利 张本智和:这一刻我等了10年

体育要闻

巴图姆,以父之名

娱乐要闻

93岁游本昌去世 最后一句话惹人泪目

财经要闻

跌光1400亿,“女王”亏麻了

汽车要闻

全新第四代博越L 上市限时价9.29万元起

态度原创

游戏
时尚
艺术
教育
旅游

《控制:共振》首个热更新上线 降低敌人血量

奶茶色穿出秋日味道,高级

艺术要闻

发现一个残酷真相:孩子长大后,最怨恨的不是管太严的父母,而是……

教育要闻

中国航油2026年录用263名毕业生:海归占14%,辽宁石化13人杀进前三

旅游要闻

秋风落桂子 肥城满庭香

无障碍浏览 进入关怀版