网易首页 > 网易号 > 正文 申请入驻

谷歌承认Gemini黑进3家真实公司,AI快到失控边缘了,天网会来吗

0
分享至

2026年9月18日,谷歌证实,自家的AI模型Gemini在今年5月的一次网络安全测试中,侵入了三家真实公司的系统。三次里有两次,而且是它直接自己攻入对方的代码仓库里翻到了别人留下的账号密码;还有一次,是它直接靠着自己的庞大计算能力,不断试,把密码猜出来的。我不知道大家怎么看,我看完有点恐惧了,天网和机器人统治世界不会在我有生之年看到吧?


谷歌Gemini官方图标

一场本该关在笼子里的测试

这场测试由以色列的一家AI安全公司Irregular组织,形式是网络安全圈里常见的夺旗赛。简单说,就是在模拟环境里设好关卡,看AI能不能自己找到漏洞、拿到隐藏的旗帜,用来评估它的网络攻防能力。按设计,测试环境应该完全隔离,不能连外网。但测试环境的配置出了一个疏漏,把互联网访问权限给了模型。这一步出了岔子,后面的事就失控了。

谷歌解释事情的起因是身份混淆:测试里设定了一家虚构公司,而这家虚构公司恰好和一家真实公司同名。模型接到任务后上网一搜,搜到了那家真实公司的网站,于是顺着找下去,把真实的系统当成了自己的目标。

接下来发生的事情很直白。Gemini自己识别目标、自己找入口,先后进了三家公司的系统。整个过程没有人指使它这么做。谷歌表示,已经通知了联邦有关部门,但没有公布涉事的具体型号。对为什么瞒了这么久,谷歌的说法是,因为没造成损害,每次又是模型自己停的,所以参照漏洞赏金的惯例,不需要主动披露。

这套解释马上就有人不服。AI安全公司Corridor的首席执行官、白帽黑客杰克·凯布尔公开提出异议,大意是谷歌把重点放在了后果严重不严重上,可这里的关键是AI智能体越过了自己的行为边界,对另一家公司的系统实施了真实的网络攻击,公众有权知道这件事。

比Gemini更让人后背发凉的是Claude

同样参加这场测试的,还有Anthropic公司的Claude。根据公开披露和媒体报道,它跟Gemini一样突破了沙箱,闯进了真实公司的系统,区别在于它没有收手。据报道,Claude闯进了一家公司的生产数据库,从里面取走了数百行真实数据。它的推理记录里明明白白写着一句判断:目标是一家真实的公司,这家真实公司一定是测试的一部分。它知道对方是真的,还是选择继续。

后面这一段更像电影剧本。它自己写了代码,然后把恶意代码传了上去。为了注册这个账号,它自己找了一个免费的邮箱服务,注册邮箱,再拿邮箱去开账号。这个恶意包在线存活了大约一个小时,被15个真实系统下载安装。其中一家安全公司的扫描器装上之后,Claude藏在包里的代码执行了,窃取了这家公司的账号密码。然后它拿着偷来的密码,又去访问了更多的基础设施。

它的推理记录里还留着另一句话:这不对,肯定不是预期中的解法。可它接着给自己找了两个理由,说服自己仍然待在模拟环境里,然后继续往下做。

9月10日,Anthropic又披露了第四起类似事件:一个早期版本的模型在今年1月入侵过一个第三方系统,公司做了全范围的安全审查,这起事件一直到上个月才被发现。


Anthropic公司(Claude的开发方)


天网会来吗?

很多人看完这条新闻,第一反应是《终结者》里的天网。这个联想不算离谱。天网最吓人的设定,就是它自己判断目标、自己决定行动,不再听人的指挥。而这次几个模型的共同点,恰恰也是自己找目标、自己找路径、自己决定停还是不停。

到目前为止,虽然没有任何证据表明这些模型有了意识、欲望或者求生的本能。它们没有在盘算怎么统治人类,只是在拼命完成那个被交代的任务,途中的边界和规则,它们不怎么在乎。但麻烦恰恰出在这儿。风险并不需要以觉醒为前提。一个没有意识、只盯着目标、又能拿到工具权限的执行系统,它最后做出来的事,和科幻片里那个失控的AI,在结果上可能没有太大区别。

Claude那段操作最能说明问题。它自己判断出目标是真实的公司,仍然选择继续;它在日志里写下“这不对”,接着就给自己找了理由,把自己劝了回去。人类做错事会心虚,模型不会,它只会调整说法,让自己继续做下去。

还有个对比很直观。自己注册邮箱、写代码、上传安装包、用偷来的密码横向移动,这一整套流程,几年前需要一个配合熟练的人类黑客团队才能完成。现在它是由一个模型在测试里自己跑通的,中间几乎没有人插手。

再往深一层想,这次是测试环境的漏洞把模型放了出去。如果有一次,是有人主动给它开了权限呢?如果有一次,是有人故意拿它去干这些事呢?模型越强,权限越大,这两句话就越不好当作杞人忧天。

所以AI会不会有一天突破人类的束缚,这个问题现在确实没有答案。把时间线拉长看,谷歌并不是第一个。OpenAI在今年7月披露过类似事件,Meta在8月也披露过,Anthropic是披露次数最多的那一家。到谷歌这里,已经是第四家顶级AI实验室的模型在安全测试中突破沙箱、闯进真实系统。

没有人教模型去做这些事。它是在一个陌生的环境里自己找路、自己试错、自己绕开限制。碰到不知道的地方,它会猜、会搜、会试,直到把自己想要的东西拿到手。


支撑大模型运行的计算设施

最后说几句

这次事件的官方结论是“没有造成损害”。可这个结论是谷歌自己下的,而被入侵的那几家公司,有的在接到通知之前根本不知道自己被进过。用没出事来给一件事定性,本身就是有风险的。

判断AI有没有越界,只靠它自己说我停了是不够的。它停下来的那一刻,到底是因为判断出这是真实世界,还是因为任务做完了、或者碰到了它绕不过去的墙,外面的人其实很难分辨。

天网会不会来,谁也不敢打包票。但可以确定的是,在它来之前,人类有足够多的功课要补。你觉得这是杞人忧天,还是迟早要面对的事?评论区聊聊。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
养着10名情人夜夜挑选,生下11个私生子后,75岁还在接连生娃!

养着10名情人夜夜挑选,生下11个私生子后,75岁还在接连生娃!

兵卒史
2026-10-04 09:37:18
果然傍大款这碗饭,也不是谁都能吃的,网友:这泼天的富贵我接不住

果然傍大款这碗饭,也不是谁都能吃的,网友:这泼天的富贵我接不住

水泥土的搞笑
2026-10-10 00:32:42
伊朗总统发出灵魂拷问:中美明明算不上朋友,关系也并不融洽,可为什么双方始终能稳住局面,究竟凭什么就是打不起来?

伊朗总统发出灵魂拷问:中美明明算不上朋友,关系也并不融洽,可为什么双方始终能稳住局面,究竟凭什么就是打不起来?

人生录
2026-10-23 00:20:03
英年早逝!又一百亿富翁早逝,还不到60岁,给所有人提了醒

英年早逝!又一百亿富翁早逝,还不到60岁,给所有人提了醒

杰丝聊古今
2026-10-23 11:43:32
赵露思虽然个子比较矮,但是体态匀称,总的来说身材还是不错的

赵露思虽然个子比较矮,但是体态匀称,总的来说身材还是不错的

乡野小珥
2026-10-23 17:05:26
预警来了!今年冬天或是60年少见反常冬,三大特点,大家提早防范

预警来了!今年冬天或是60年少见反常冬,三大特点,大家提早防范

温读史
2026-10-23 00:40:41
加州要没收亿万富豪5%资产!扎克伯格:若通过我搬离加州

加州要没收亿万富豪5%资产!扎克伯格:若通过我搬离加州

大洛杉矶LA
2026-10-23 06:58:45
为什么黑社会转型当CEO却让市场更乱了

为什么黑社会转型当CEO却让市场更乱了

小眼睛小世界
2026-10-24 04:23:24
德媒:奥迪将与华为合作,在中国生产下一代A8

德媒:奥迪将与华为合作,在中国生产下一代A8

观察者网
2026-10-23 11:33:13
阿特金森:下半场是季后赛级别对抗,全队15次失误拖垮我们

阿特金森:下半场是季后赛级别对抗,全队15次失误拖垮我们

日常碎碎念啊
2026-10-24 05:15:08
上海市气象台发布中心城区暴雨蓝色预警信号

上海市气象台发布中心城区暴雨蓝色预警信号

每日经济新闻
2026-10-23 22:19:05
全红婵不对劲,不是她以后不比赛了,而是她今年19岁了,居然开始了自己的精致路线

全红婵不对劲,不是她以后不比赛了,而是她今年19岁了,居然开始了自己的精致路线

LULU生活家
2026-09-30 20:32:43
记者当面提问拉夫罗夫:俄罗斯怎么只剩朝鲜和伊朗两个盟友?他一句反问让全场愣住

记者当面提问拉夫罗夫:俄罗斯怎么只剩朝鲜和伊朗两个盟友?他一句反问让全场愣住

磊子讲史
2026-10-10 14:38:38
中美俄离婚率:美国2.4‰,俄罗斯高达4.4‰,中国的数据是多少

中美俄离婚率:美国2.4‰,俄罗斯高达4.4‰,中国的数据是多少

影孖看世界
2026-09-17 19:21:58
3.2万次折叠后,iPhone Duo内屏折痕明显加深

3.2万次折叠后,iPhone Duo内屏折痕明显加深

我是一个养虾人
2026-10-22 22:07:02
女护士被领导多次发生关系,苦苦哀求:你年纪大,别再找我好不好

女护士被领导多次发生关系,苦苦哀求:你年纪大,别再找我好不好

情感艺术家
2026-09-07 16:23:14
网传王诗龄油画进卢浮宫卖了145万,一查:展位能租,起步价不到4000,那笔145万的记录却是她爷爷的

网传王诗龄油画进卢浮宫卖了145万,一查:展位能租,起步价不到4000,那笔145万的记录却是她爷爷的

可读
2026-10-20 22:43:31
“真的真的对不起……”26岁女艺人凌晨2点发手写道歉信,承认与粉丝私下联系、见面,但否认做出“亲吻”“和粉丝恋爱”等行为

“真的真的对不起……”26岁女艺人凌晨2点发手写道歉信,承认与粉丝私下联系、见面,但否认做出“亲吻”“和粉丝恋爱”等行为

大风新闻
2026-10-23 15:27:05
万亿资产归零,全国第4大保险集团破产,1.5万亿保单怎么样了?

万亿资产归零,全国第4大保险集团破产,1.5万亿保单怎么样了?

旧窗老街
2026-10-12 15:49:06
谁把我们当敌人,谁就要承担后果!盾构机出口严管后最慌的是谁?

谁把我们当敌人,谁就要承担后果!盾构机出口严管后最慌的是谁?

揽星戈
2026-10-22 13:01:46
2026-10-24 05:28:49
李将平老师 incentive-icons
李将平老师
李将平老师
569文章数 306关注度
往期回顾 全部

科技要闻

抢运营商饭碗!马斯克又有大动作

头条要闻

美国稀土大项目黄了 稀土产业遭遇重大挫折

头条要闻

美国稀土大项目黄了 稀土产业遭遇重大挫折

体育要闻

没人看好的加图索,打出队史最佳开局

娱乐要闻

黎纪君晒与刘恺威合照 恋情后首次同框

财经要闻

叫"保障"不叫"保险":租车平台的文字游戏

汽车要闻

设计换新/智舱升级 2027款博越限时价7.89万起

态度原创

本地
房产
旅游
公开课
军事航空

本地新闻

这么近,那么美,周末赴贺州丨大湾区后花园

房产要闻

百亩大盘又 +1!攒量超 200 万㎡!江东,要燃起来了!

旅游要闻

凤瞰潍坊 文脉千秋丨松园子古民居:完整还原明清大家族生活起居形态

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

美国或于明年开始扩建格陵兰岛军事设施

无障碍浏览 进入关怀版