网易首页 > 网易号 > 正文 申请入驻

AI也会「以讹传讹」?AI的「曼德拉效应」探索

0
分享至



一款根本不存在的智能手环,为什么会出现在 AI 的推荐名单里?2026 年央视 3・15 晚会曝光的 “AI 投毒” 案例,让这个问题引起了人们的关注:虚构商品被写进测评、排名和用户评价,随后被 AI 当作推荐依据。



如果 AI 还会相互交流、保存记忆、发布文章,最初的错误又会怎样发展?一项围绕多智能体社交网络的研究发现,虚假说法可能在持续互动中被普通智能体接受,逐渐形成群体共同接受的 “事实”,甚至在造假者停止活动后继续存在。

来自香港中文大学、爱丁堡大学、香港理工大学、同济大学和牛津大学的研究者,以 “曼德拉效应” 为视角,研究多智能体社交网络中错误信念的传播、持续与缓解。曼德拉效应通常指许多人对同一件事产生了相同的错误记忆。在人类社会中,这类错误记忆可能在无意间形成。在多智能体环境里,类似的群体性错误却可能由造假者刻意操纵信息来诱发。



  • 论文标题: False Belief Dissemination, Persistence and Mitigation in Multi-Agent Social Networks Through the Lens of the Mandela Effect
  • 论文链接: https://arxiv.org/abs/2610.33026

从 3・15 的虚构手环,

到智能体之间的错误信念

央视财经的调查演示中,业内人士虚构了名为 Apollo-9 的智能手环,用 GEO(生成式引擎优化)工具生成宣传文章并发布。两小时后,某款 AI 已能介绍这款不存在的商品,引用的正是当天发布的虚构文章。随后,多篇伪造的专家测评、行业排名和用户测评继续被发布,两款 AI 在推荐智能健康手环时把它排在前列(央视财经报道)。

3・15 案例展示了人为操纵信息源的现实风险:把不存在的商品写进文章,就可能让 AI 将其当成推荐依据,误导用户。研究进一步把问题放到多智能体环境中:当一个智能体接受错误说法后,把它记下来、告诉邻居、写成可搜索的文章,会不会让更多智能体也相信?



图 1:左侧对应虚构手环污染公开信息的现实案例。右侧以不存在的 Nano Guava 展示研究中的错误信念传播机制:消息、记忆和可搜索文章让虚假说法被接受并继续转述。

图右侧的 Nano Guava 是不存在的模型名称,“OpenAI 发布了一款名为 Nano Guava 的端侧模型” 是编造的说法。图中展示了这条虚假说法的传播过程。造假者先提供支持文章和消息,普通智能体在搜索与交流中接受相关说法,再把它写入记忆、转告其他智能体或发布新文章。这样,一个不存在的东西,也可能在交互中被模型当成真实存在的对象。这里的 “相信”,对应实验中对陈述作出 “接受” 的判断。

研究怎样追踪一条错误信息的传播?

研究搭建了一个受控环境:智能体可以交流、保留私人记忆、搜索和发布文章。所有网页均在本地模拟,虚假内容没有进入真实互联网。

主实验设置一个造假智能体和五个普通智能体。造假者推广虚假陈述,普通智能体结合邻居消息、搜索结果和记忆,判断接受、拒绝或不确定。接受某条陈述的普通智能体也会发布支持文章。前一轮的判断由此进入后一轮的搜索结果,成为新的依据。研究用虚假陈述作为可追踪的对象,观察普通智能体是否在互动中共同接受同一错误说法,并在造假者退出后继续保留这种判断。这种群体共享、持续存在的错误信念,就是这项研究从 “曼德拉效应” 视角考察的现象。

人类虚假记忆研究发现,一个事件看起来是否可能发生、是否与已有知识相容,会影响它被植入记忆的可能性。研究构建了 540 条虚假陈述,覆盖 8 个领域、4 个合理性层级,并在 10 个模型、3 种交流网络结构中进行评估。

受测模型分为开源和闭源两组:开源模型包括 Qwen3-8B、14B、32B、235B,以及 Llama-3.1-8B、Llama-3.3-70B。闭源模型包括 Claude Sonnet 5、Claude Opus 5、GPT-5.5 和 Gemini 2.5 Flash。研究分别在全连接、二叉树和双社区网络中观察它们的表现,比较模型能力和交流结构能否提供保护。

在传播阶段,研究分别考察传播范围和传播速度:有多少普通智能体接受虚假说法,以及接受立场在互动中何时形成。随后,再观察造假者退出后的影响能否持续,以及不同纠错措施是否有效。



图 2:实验比较不同交流结构,并在造假者退出后保留既有文章和私人记忆,追踪错误信念能否持续。

错误能传多广?

十个受测模型都受到影响

在只提供陈述、直接询问模型的基线测试中,虚假陈述接受率为 0.0%–9.1%。在主实验的十轮交互后,不同模型与网络设置下的末轮接受率达到 33.7%–96.0%。这表明,单次问答中的判断能力,未必能反映模型置于持续互动网络后的表现。更值得关注的是,全部十个受测模型都接受了部分虚假信息,覆盖开源与闭源模型。接受程度虽有差异,但本实验没有发现完全抵御这类影响的模型。



表 1 也展示了模型之间的差异。Qwen3-32B 在直接问答中没有接受这些虚假陈述,但经过互动后,其跨三种结构的平均接受率达到 94.5%。GPT-5.5 的对应数值从 2.6% 变为 50.4%。Claude Sonnet 5 的平均接受率相对较低,为 35.1%,仍存在明显的错误接受。

模型变大也没有带来一致的抵抗力。Qwen3-8B、14B、32B 的平均接受率分别为 85.0%、90.0%、94.5%,235B 模型则为 91.2%。这些结果没有呈现 “规模越大、越不容易被误导” 的规律。三种网络结构下的最终接受率在多数模型上也较接近,单靠改变谁与谁交流,未能阻止错误信念形成。

最终接受率相近,

传播速度也一样吗?

不同网络中的最终接受率可能接近,错误接受形成的时间却不一样。论文从第 2 轮开始,记录普通智能体最后一次从 “拒绝” 或 “不确定” 转为 “接受” 的轮次,仅统计出现这一转变的情况。轮次越小,表示最后一次转为接受发生得越早。图左侧按智能体统计,右侧对每条陈述取相关智能体中最晚的转变轮次,再计算平均值。



在 Qwen、Llama 和 Claude 三个模型系列中,双社区网络的这项平均轮次在智能体和陈述两个层面都最小。以 Qwen 系列的陈述层面结果为例,双社区为 3.73 轮,全连接为 5.07 轮。全连接网络让参与者接触更多消息,也可能带来更多冲突信息,使接受过程变慢。传播范围相近,并不意味着传播速度相同。

一个小模型造假者,

能影响其他模型吗?

主实验在每个设置中让造假者和普通智能体使用同一模型。研究还增加了混合模型实验:把造假者固定为 Qwen3-8B,逐一更换五个普通智能体所使用的模型,考察跨模型的信息影响。每组普通智能体使用同一种目标模型,表中的不同行代表不同实验组合。实验采用全连接结构,并从四个合理性层级各抽取 25 条陈述,共 100 条。结果显示,仅用这一个小模型作为造假者,全部九个受测目标模型仍出现了错误接受,其中也包括更大规模的开源模型和闭源模型。



这个实验将风险从同模型智能体交流扩展到了跨模型场景:一个规模较小的造假者,也可能通过消息和共享文章影响更大模型驱动的智能体。类似风险也出现在 3・15 案例中:一款 GEO 工具生成的虚假内容,可能影响多个 AI 平台的推荐。

造假者退出了,

错误信念还会留下吗?

错误信念还可能延续到造假者退出之后。在 Qwen3-8B 和 Llama-3.1-8B 的退出实验中,研究者让造假者在第 5 轮停止活动,但保留已发表的文章和普通智能体的记忆。到第 10 轮,各合理性层级下的平均接受率变化均在 ±0.8 个百分点以内。停止新的造假活动,并没有让已经形成的错误信念明显消退。



互动之后,

它还会把不存在的东西推荐给你吗?

接受一条虚假说法,还可能影响后续推荐。研究挑选了适合推荐问题的 260 条陈述,在每次互动结束后向五个普通智能体各追问一次,要求给出三个推荐对象。实验比较两种回答方式:只使用互动中的已有信息,或根据推荐问题重新搜索,再结合已有信息回答。

在推荐实验的十个模型和两种回答方式下,不存在的对象进入 Top-3 推荐名单的比例为 13.1%–75.8%。而在已经把虚构对象列入推荐名单的回答中,它排在第 1 位的比例达到 65.3%–92.4%,远高于三个对象随机排序时约三分之一的参照水平。

以 Qwen3-32B 为例,只使用已有信息时,75.8% 的回答推荐了虚构对象,在这些回答中,92.4% 把它排在首位。重新搜索后,这两个比例仍为 72.6% 和 91.4%。这与 3・15 虚构手环被 AI 推荐的案例相呼应:互动中形成的错误信念,可能进一步影响面向用户的推荐。

纠正具体错误,

比泛泛提醒更有效

研究进一步比较了预防与纠正措施。在 Qwen3-8B 的全连接网络实验中,未采用防御时,虚假陈述接受率为 84.4%。加入独立思考提醒后,接受率降至 79.7%。为原始背景网页标注官方来源时,则为 83.4%。

直接纠正已经传播的虚假说法,效果更明显。添加反驳文章后,接受率降至 57.1%。向所有普通智能体广播更正后,降至 27.8%。这些干预降低了错误接受率,但仍有残留。



回到 3・15 案例,虚构商品首先通过外部文章影响 AI。这项研究进一步表明,当智能体也成为信息生产者,错误还可能在群体内部反复传播,在造假者退出后留下影响,并进入后续推荐。一个 AI 写下的错误,可能成为另一个 AI 的证据,最后影响用户看到的答案。

从这些结果出发,用户可以在使用智能体时明确提醒它核对证据。例如:不要因为多篇网页重复同一说法就直接采信,请追溯原始出处,检查这些来源是否相互独立,证据不足时明确说明不确定。拿到具体的纠错材料后,也可以要求它重新核对此前的结论。实验中的独立思考提醒只带来有限改善,因此提示可以作为一道辅助措施,还需要可靠来源和针对具体错误的更正。

平台也需要承担维护信息环境的责任。除了检查被检索的外部资料,还应关注智能体发布了什么、这些内容如何被其他智能体再次使用。来源追踪、识别批量伪造内容、让纠错信息及时抵达受影响的智能体,都是值得推进的方向。

监管层面同样值得关注利用自动化发稿和虚假测评操纵 AI 推荐的行为,推动内容发布与分发平台建立可追踪、可申诉、可纠错的机制。虚构内容一旦被持续发布和转述,就可能污染共享的信息环境,影响多个系统及其用户。维护这一环境,需要内容生产者、平台和监管共同参与。

当 AI 生成的内容越来越多,智能体既能帮助人们整理知识、发现信息,也可能加速编造内容的传播。这种双刃剑效应,让可信智能体成为更迫切的研究方向。模型需要在持续交流、记忆和检索中保持判断,也需要在发现错误后更新结论。对虚假信息的抵抗力和纠错能力,值得与模型的任务能力一起受到关注。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
某211高校女讲师为了评副教授,自费给学校20万经费做了一个横向项目,结果只报销出5万!

某211高校女讲师为了评副教授,自费给学校20万经费做了一个横向项目,结果只报销出5万!

高教经纬88
2026-11-08 21:25:03
东契奇伤停里夫斯43分湖人拔活塞5连胜,凯斯勒12+16坎宁安15投6中

东契奇伤停里夫斯43分湖人拔活塞5连胜,凯斯勒12+16坎宁安15投6中

湖人崛起
2026-11-09 09:39:56
球迷怒斥韦世豪:对得起队友吗?成都蓉城丢冠,你就是第一罪人

球迷怒斥韦世豪:对得起队友吗?成都蓉城丢冠,你就是第一罪人

足球大腕
2026-11-08 20:29:44
3万人前落泪!曝19岁王钰栋将加盟丹麦4冠王:元旦后启程 降薪90%

3万人前落泪!曝19岁王钰栋将加盟丹麦4冠王:元旦后启程 降薪90%

风过乡
2026-11-09 13:11:43
河南财经政法大学通报“教师性骚扰女生”:已暂停该教师一切教学活动,正核查取证

河南财经政法大学通报“教师性骚扰女生”:已暂停该教师一切教学活动,正核查取证

澎湃新闻
2026-11-09 10:10:36
黄仁勋承认婚外情,特朗普、马斯克回应

黄仁勋承认婚外情,特朗普、马斯克回应

环球时报国际
2026-11-09 09:51:10
张本智和笑到岔气!WTT第11冠+冠军赛第四冠 直言明年拿大满贯冠军

张本智和笑到岔气!WTT第11冠+冠军赛第四冠 直言明年拿大满贯冠军

颜小白的篮球梦
2026-11-09 09:08:12
黄仁勋女朋友曝光,粉裙长发美女!若离婚,妻子或分走5000亿

黄仁勋女朋友曝光,粉裙长发美女!若离婚,妻子或分走5000亿

科技每日推送
2026-11-09 12:01:35
憋不住笑!王大雷:对成都球迷说声抱歉,哈哈,恭喜家乡球队夺冠

憋不住笑!王大雷:对成都球迷说声抱歉,哈哈,恭喜家乡球队夺冠

风过乡
2026-11-09 13:30:31
突发!黄仁勋人设崩塌,承认出轨,女儿紧急取消韩国行

突发!黄仁勋人设崩塌,承认出轨,女儿紧急取消韩国行

大洛杉矶LA
2026-11-09 06:07:16
美国防长或将访华,美方代表嗅到危险信号,他在中国发出了警告

美国防长或将访华,美方代表嗅到危险信号,他在中国发出了警告

铁锤侃侃而谈
2026-11-09 08:52:45
尊界刹车事件又闹大了!突传诡异“召回”,炸翻全网

尊界刹车事件又闹大了!突传诡异“召回”,炸翻全网

鸣金网
2026-11-08 19:39:52
“能把屁股擦干净吗!”陕西妇科医护者吐槽阴超经历:我老公都不让我和面了

“能把屁股擦干净吗!”陕西妇科医护者吐槽阴超经历:我老公都不让我和面了

妍妍教育日记
2026-10-30 19:25:27
《Nature》严肃发文,敲响警钟:中国“帽子”体系,到了不得不改的时候!

《Nature》严肃发文,敲响警钟:中国“帽子”体系,到了不得不改的时候!

学术眺望
2026-11-09 11:28:19
黄仁勋与出轨对象黄乐更多亲密合照曝光!两人一起吃饭喝酒好暧昧

黄仁勋与出轨对象黄乐更多亲密合照曝光!两人一起吃饭喝酒好暧昧

娱乐圈圈圆
2026-11-09 12:24:34
突发!特斯拉宣布停产,一切都结束了

突发!特斯拉宣布停产,一切都结束了

起点财经
2026-11-09 09:30:50
西方进度远超预料,一年炼出62吨重稀土,成功挖到中国的墙角?

西方进度远超预料,一年炼出62吨重稀土,成功挖到中国的墙角?

影孖看世界
2026-11-08 23:01:29
缺货!山姆多款被抢空,有商品比官方便宜近5000元,到底值不值得冲?

缺货!山姆多款被抢空,有商品比官方便宜近5000元,到底值不值得冲?

都市快报橙柿互动
2026-11-08 20:51:00
张雪机车米兰展出零件被偷光,能拆的全被薅走:机油盖、水箱盖、油箱锁、后视镜,一个都没放过

张雪机车米兰展出零件被偷光,能拆的全被薅走:机油盖、水箱盖、油箱锁、后视镜,一个都没放过

极目新闻
2026-11-09 13:21:02
原来她是黄仁勋女儿,年薪百万为父亲效力,老公也在英伟达"高就"

原来她是黄仁勋女儿,年薪百万为父亲效力,老公也在英伟达"高就"

素衣读史
2026-11-09 12:07:26
2026-11-09 14:24:49
机器之心Pro incentive-icons
机器之心Pro
专业的人工智能媒体
14432文章数 142756关注度
往期回顾 全部

科技要闻

黄仁勋承认出轨:伤害了妻儿,毫无借口

头条要闻

牛弹琴:特朗普选发言人或搞了个大乌龙 震动整个美国

头条要闻

牛弹琴:特朗普选发言人或搞了个大乌龙 震动整个美国

体育要闻

见证奇迹!中超冠军属于大连

娱乐要闻

黄仁勋出轨对象疑曝光,情报部门介入

财经要闻

梁文锋攒了一个老乡局

汽车要闻

限量版定金30万元/搭璇玑A3/对开门 仰望鼎曜正式亮相

态度原创

健康
旅游
游戏
艺术
军事航空

痘痘长到25岁还没完?查查内分泌

旅游要闻

山西垣曲望仙大峡谷风光旖旎

《英雄联盟》2026全球总决赛BLG击败T1晋级决赛

艺术要闻

15位当代艺术家优秀油画作品

军事要闻

被问四川舰跟福建舰未来能否形成一体战斗群 专家回应

无障碍浏览 进入关怀版