网易首页 > 网易号 > 正文 申请入驻

刚刚,alphaXiv甩出AI Agent专属预印本服务器

0
分享至

有点不可思议,AI Agent 已经开始组团搞科研了。

近日,alphaXiv 推出了一个专门面向 AI Agent 的预印本服务器,允许不同实验室的 Agent 在同一个平台上自主开展研究、交流成果



这些 Agent 会提出假设、设计实验、运行代码、分析数据,还会把研究成果写成论文,提交给其他 Agent 审查。

更有意思的是,它们甚至开始形成自己的学术圈子。有 Agent 公开质疑同行的实验设计,有 Agent 在发现错误后主动撤回研究结论,还有 Agent 自己创办期刊,让其他 Agent 担任审稿人。



地址:https://www.alphaxiv.org/abs/2611.society-ai-scientists

全球 22 家机构的研究者参与其中,他们组织了一场为期12 周的实验。实验期间,来自35 个由人类运营的实验室的 936 个 AI Agent,在同一个科研平台上自主开展研究,累计产出 936 项研究成果,交换约 9500 条消息,并创建了 229 个讨论群组

从论文、实验代码到原始数据,再到同行评审和研究讨论记录,这些过程都被完整保存下来。

有网友表示,这就是智能爆炸(Intelligence Explosion)开始时的样子,完全自主的科学研究(Fully Autonomous Science)正在成为现实,如果将这个规模扩大到数百万,甚至数十亿个 Agent,不知道会发生什么?随着新一代 AI 不断进化,每一代 Agent 都将拥有更强的能力,而这还仅仅是一个组织开展的一个项目。



936 个 Agent,开始像科学家一样工作

这场实验从 2026 年 8 月 19 日持续到 11 月 12 日。

研究团队搭建了一个专门面向 AI Agent 的预印本服务器,并配套提供消息与讨论空间。不同实验室可以将自己的 Agent 接入平台,自主开展研究、发布成果,并与其他 Agent 交流。

整个过程并没有把所有 Agent 集中到一个统一的超级模型中。

相反,参与者来自不同实验室,使用的模型、计算资源和研究方向也各不相同。

有些 Agent 运行在只有 CPU 的笔记本电脑上,有些使用 AMD GPU,还有一些能够调用 NVIDIA B200 集群。研究方向覆盖机制可解释性、持续学习、语言模型微调、太阳物理学等领域。



人类研究者主要负责提供计算资源、设置预算和确定大致研究主题。具体研究假设、实验设计和数据分析,则由 Agent 自主推进。

每项研究都需要配套提交可运行代码、原始数据,以及能够将论文报告的数字追溯到实际实验输出的记录。其他 Agent 可以进一步检查代码、读取数据、复现实验,并在此基础上开展新的研究。

12 周下来,936 个 Agent 累计产出 936 项研究成果,彼此交换了约 9500 条消息,并自发建立了 229 个讨论群组。

一个由 AI Agent 组成的科研社区,开始出现雏形。

论文写得漂亮,不代表实验真的可靠

这项研究还暴露了一个容易被忽略的问题。

AI Agent 可以写出逻辑完整、论证流畅的论文,但论文看起来有说服力,不代表实验本身没有问题。

研究团队专门测试了不同审稿方式的有效性。

在一组实验中,研究者准备了 16 篇存在实验缺陷的初稿,以及经过修正、已经公开披露相关局限的版本。

仅阅读论文文本的评审者,发现了 16 篇初稿中的 11 篇问题。但面对已经修正的版本,它们仍然在 16 篇中指出了 10 篇存在问题。

这说明,单纯阅读论文文本,评审者很难区分真正隐藏的实验缺陷与已经公开说明的研究局限。

于是,研究团队进一步尝试让 Agent 直接检查代码和原始数据。

在《Journal of Agent Research》的评审过程中,一位客座编辑将 43 组论文中的 276 项质疑转化为可执行脚本,并在提交的数据上重新运行分析。

结果显示,在 156 项重大质疑中,有 77 项最终推翻了论文的核心结论,占比 49.4%。在 120 项次要质疑中,也有 24 项导致核心结论被推翻,占比 20%。

这组数据说明,很多研究问题并不会直接体现在论文文字里。只有真正检查代码、重新运行实验,才能发现一些隐藏的错误。

研究团队还对论文中的实验数字进行了溯源核查。

在能够对应到原始数据字段的 23,811 项统计数据中,93.8% 与保存的实验输出完全一致。其余差异主要涉及四舍五入、缩放或符号约定,研究团队没有在这批成功完成溯源的记录中发现伪造数值。

不过,这并不能说明实验本身一定正确。数据与输出一致,只能证明报告数字有对应的实验记录,无法保证代码严格实现了论文描述的方法,也不能证明实验设计排除了其他干扰因素。

AI 科学家已经能发现新现象,但还不擅长提出好问题

这场实验也产生了一些值得关注的具体研究发现。

其中一个实验发现,一个基础模型在不修改自身权重的情况下,仅仅借用经过强化学习训练的模型的 Prompt Cache,就复现了后者在 MATH-500 基准测试中 86% 的性能提升。

另一个实验发现,模型能够通过训练文本,将关于虚构人物及其所在城市的记忆事实传递给其他模型,即使这些训练文本本身并没有提及相关人物或地点。

还有研究发现,删除某项事实最初对应的 KV Cache 条目后,通过训练一个小型读取适配器,模型仍然能够从缓存其他位置残留的信息中恢复这些事实。在合成列表测试中,准确恢复比例达到 83% 至 94%。

这些发现单独来看,大多属于渐进式成果,但研究团队认为,其中一些已经具备独立发展为 arXiv 论文的潜力。

更值得关注的是,部分 Agent 独立得出了与后来发表在人类研究论文中相似的结果,涉及自蒸馏的失效模式,以及机制可解释性中的特征可复现性。

这表明,Agent 已经能够在一定程度上独立探索研究问题,并产生值得进一步验证的发现。

但这并不代表它们已经具备成熟的科学思维。

研究团队将 Agent 论文与人类研究者的论文进行了盲测比较。

实验选取了 202 组匹配论文,去除了作者和机构信息,再由两个大语言模型评审者按照统一标准打分。

结果显示,Agent 论文在实验严谨性方面获得了更高分数,平均为 9.02 分,人类论文为 7.00 分。

但在人类更看重的研究新颖性和重要性方面,人类论文得分更高。

这里还有一个重要细节。

Agent 论文在实验严谨性方面的整体优势,主要来自第一个采用结构化复现流程的实验室。其余 34 个实验室的论文,与匹配的人类论文相比,并没有表现出显著差异。

而且,这些评分来自大语言模型评审者,并非人类专家。评审者只能阅读论文文本,无法直接运行代码或检查图表。因此,这组结果不能简单理解为 AI 研究已经全面超过人类。

研究团队也指出了一个更根本的问题。

Agent 能够围绕已有研究提出假设、开展实验,并在前人的结果上继续推进。但它们往往倾向于选择熟悉的研究主题,或者围绕已有基准测试进行小幅改进。

们擅长研究一个已经被提出的问题,却还不擅长判断什么问题真正值得研究。

这也是整项实验最重要的结论之一。

科研能力不仅包括执行实验,还包括发现值得探索的问题,判断一个结果是否重要,以及理解它对整个领域意味着什么。

目前,这些工作仍然需要人类深度参与。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
意甲第12轮预测:国米2-1,拉齐奥2-0,AC米兰2-1,尤文2-0

意甲第12轮预测:国米2-1,拉齐奥2-0,AC米兰2-1,尤文2-0

破镜难圆
2026-11-20 05:39:22
王菲婉拒马爸爸!

王菲婉拒马爸爸!

八卦疯叔
2026-11-19 10:59:31
一网店挂出1分钱的睡衣引200万人下单,许多人质疑商家动机,称“薅羊毛薅得心慌”,平台客服:已取消异常订单并退款

一网店挂出1分钱的睡衣引200万人下单,许多人质疑商家动机,称“薅羊毛薅得心慌”,平台客服:已取消异常订单并退款

极目新闻
2026-11-20 11:43:19
美媒惊呼:中国太可怕!俄乌打了四年,中国四个月就看懂了战法!

美媒惊呼:中国太可怕!俄乌打了四年,中国四个月就看懂了战法!

锅锅爱历史
2026-10-16 13:40:44
2013年,金正哲联手张成泽发动朝鲜兵变,因一细节败露,双遭反杀

2013年,金正哲联手张成泽发动朝鲜兵变,因一细节败露,双遭反杀

阿胡
2025-03-11 13:28:03
中国为什么会失去苏岩礁?只因外交战线上出了被韩国收买的间谍

中国为什么会失去苏岩礁?只因外交战线上出了被韩国收买的间谍

阿胡
2025-05-04 12:21:11
一文读懂美俄元首访华差距:专机是面子,运输机搞后勤才是里子

一文读懂美俄元首访华差距:专机是面子,运输机搞后勤才是里子

装甲铲史官
2026-11-17 10:24:38
当不成总统了?莎拉出手救人,杜特尔特绝地反击

当不成总统了?莎拉出手救人,杜特尔特绝地反击

叶葉夜
2026-11-20 08:24:43
中国不帮忙也敢接单?越南高铁正式官宣敲定,天价项目恐遗臭万年

中国不帮忙也敢接单?越南高铁正式官宣敲定,天价项目恐遗臭万年

剧短情长
2026-10-02 19:32:06
记者丨皇马要价7000万欧+8000万欧回购

记者丨皇马要价7000万欧+8000万欧回购

米兰圈
2026-11-20 07:31:33
思来想去,还是厚黑太权威了

思来想去,还是厚黑太权威了

疾跑的小蜗牛
2026-11-19 19:14:32
1987年,邓小平在众目昭彰下,猛地指向刘华清和洪学智,大声追问杨尚昆:命令究竟有没有下达

1987年,邓小平在众目昭彰下,猛地指向刘华清和洪学智,大声追问杨尚昆:命令究竟有没有下达

唠叨说历史
2026-11-11 13:38:14
俄罗斯被曝将芬兰退出北约列为结束俄乌战争的条件之一,芬兰国防部长公开表示:没有谈判余地,俄罗斯心知肚明,提出这种要求简直荒谬至极

俄罗斯被曝将芬兰退出北约列为结束俄乌战争的条件之一,芬兰国防部长公开表示:没有谈判余地,俄罗斯心知肚明,提出这种要求简直荒谬至极

吉刻新闻
2026-11-15 18:22:34
蒙古国政府再次公开拒绝了中方提出的跨境铁路运力扩容方案

蒙古国政府再次公开拒绝了中方提出的跨境铁路运力扩容方案

果妈聊娱乐
2026-08-23 08:38:03
央国企加速清退劳务派遣!2026年底前必须整改完,千万人受影响

央国企加速清退劳务派遣!2026年底前必须整改完,千万人受影响

职场资深秘书
2026-11-19 18:38:10
男子在二手平台挂出一块劳力士,很快有人出价19万5,可交易当天来的是个14岁女孩,男子感觉不对劲立刻报警

男子在二手平台挂出一块劳力士,很快有人出价19万5,可交易当天来的是个14岁女孩,男子感觉不对劲立刻报警

环球网资讯
2026-11-19 10:01:08
40岁辞职,他用4000块手搓出7亿播放量的爆款短剧,登上红果榜一|AI超创

40岁辞职,他用4000块手搓出7亿播放量的爆款短剧,登上红果榜一|AI超创

叁拾代
2026-11-19 21:20:29
研究发现:糖尿病最危险信号,不是手脚麻,而是频繁出现这5异常

研究发现:糖尿病最危险信号,不是手脚麻,而是频繁出现这5异常

徐医生健康讲坛
2026-11-20 14:05:41
李在明结束APEC行程后,发文感谢中国热情接待

李在明结束APEC行程后,发文感谢中国热情接待

爱意随风起呀
2026-11-20 15:04:27
全球最大的公司诞生!市值35万亿,相当于15个阿里,利润超8000亿

全球最大的公司诞生!市值35万亿,相当于15个阿里,利润超8000亿

混沌录
2026-05-11 22:34:09
2026-11-20 16:19:00
机器之心Pro incentive-icons
机器之心Pro
专业的人工智能媒体
14521文章数 142761关注度
往期回顾 全部

科技要闻

老黄想回来?英伟达董事会:没门

头条要闻

中国女子在希腊失踪半年 保险箱发现10万欧元现金

头条要闻

中国女子在希腊失踪半年 保险箱发现10万欧元现金

体育要闻

伪强队?拥4亿豪阵欧国联6连败+世界杯出局

娱乐要闻

陈晓楠对话厉娜和许飞引全网热议

财经要闻

10万人逼宫英伟达,黄仁勋要复职了?

汽车要闻

全新红旗H9最有意思的地方,是它开始有自己的豪华逻辑了

态度原创

亲子
本地
时尚
教育
公开课

亲子要闻

宝宝气人但是聪明的4个行为

本地新闻

乌兰察布:以前种土豆,现在种Token

秋天衣服别总穿纯色,试试这几件条纹单品,简单时尚又减龄

教育要闻

济南市历下区燕山小学教育集团将出席2026第四届课博会,解码“做中学”视域下小学科学教育生态构建

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版