网易首页 > 网易号 > 正文 申请入驻

315曝光的AI大模型投毒,技术上很好治,生意上很难治

0
分享至


AI大模型投毒技术,我可太熟悉了,我的工作就是折腾大模型deepsearch。

简单了解一下豆包、千问这些AI的技术原理,就能理解如何AI投毒、如何收拾投毒者。AI APP收到用户提问后,响应过程分为三步:S1.把用户问题分解为几个搜索关键词,S2.去网络搜索,S3.从搜索结果中提取问题答案。

S1和S3都是大模型推理运算,数据都在GPU里,很安全。S2可以做手脚。315晚会曝光的AI投毒正是发生在S2步,好听的名字叫GEO(Generative Engine Optimization, 生成式引擎优化)。


GEO公司用AI生成一批文章,可能几篇、十几篇、几十篇,然后发布到一堆僵尸自媒体账号上。AI大模型搜索的时候,搜到这些虚假文章,然后当成真实内容一本正经地告诉用户。AI中毒了。

很明显,整治AI投毒的技术方法有多个:

一是,自媒体平台提前识别AI生成的文章,打上标记,让大模型不采纳这些文章的信息。国标GB 45438-2025《网络安全技术 人工智能生成合成内容标识方法》[1]已经在2025年9月1日开始实施。网信办在2025年03月14日发布的《人工智能生成合成内容标识办法》,也是2025年9月1日开始实施。

按照这两个文件的规定,社交平台有责任识别AI生成的自媒体文章,并打上显式标识和隐式标识。显式标识看得见,例如图片上的水印“AI生成”;隐式标签看不见,例如文件的元数据、图片的元数据。

二是,把投毒骗子控制的僵尸账号都封掉,至少得限流,让它0曝光。

三是,AI APP只搜索可靠的信源,例如媒体账号、政府企业账号、身份经过认证的大号,例如雷军的账号、杨紫的账号,粉丝小于100万的小卡拉米账号不收录。我自己的工作中,deepsearch的信源只选蓝V(媒体、政企机构)和金橙V(头部大V),避免中毒。

技术上给AI排毒很简单,但实际上不容易。先是社交平台没动力,GEO公司运营着大量的僵尸账号,而且发贴很多,舍得出钱买流量。如果把这些账号封了,平台财报上的日活、月活、营收数据都不好看。

AI APP也没动力,大模型推理很费钱,生成一张图片要3毛钱,生成1秒视频要一块钱。每天上亿人在免费用,烧钱太快,必须得想办法挣钱,否则没法向投资人交待。

AI APP没有能力杀掉所有虚假文章。搜索引擎的技术含量很高,不是一个初创团队能搞得定的。因此,AI APP会向某度等公司购买数据。某度,大家都了解,挣钱不要命,夹杂虚假信息再正常不过了。

最后一个原因,也是315晚会上所有乱象的根本原因:消费者没有实力把坏蛋送进去踩缝纫机,没有实力让他们倾家荡产。有毒的鸡爪天天吃,有毒的文字看点咋了?!多大点事!

全文完,求关注,求转评赞三连。


特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
人民日报这段话刷屏:请告诉你的孩子,人生这条路上,不会有人一直催着你、管着你、叫你起床、看你写作业……

人民日报这段话刷屏:请告诉你的孩子,人生这条路上,不会有人一直催着你、管着你、叫你起床、看你写作业……

阿呆爸
2026-09-08 22:24:52
拒签率高达95%!大批印度人被中国拒之门外,印度急到开始跳脚了

拒签率高达95%!大批印度人被中国拒之门外,印度急到开始跳脚了

莫地方
2026-09-08 20:15:49
就煮三回,肺部老痰就通开了!白痰黄痰一抹而空,嗓子好舒服!

就煮三回,肺部老痰就通开了!白痰黄痰一抹而空,嗓子好舒服!

小谈食刻美食
2026-09-08 08:59:43
汤家凤老师怒斥胡锡进!你跟极端反华的记者私下吃饭,老百姓不能质疑你?

汤家凤老师怒斥胡锡进!你跟极端反华的记者私下吃饭,老百姓不能质疑你?

小徐讲八卦
2026-09-08 08:39:12
9月4日,中国国防部正式宣布:中国人民解放军陆军受邀如约赴俄,准备参与东盟防长扩大会人道主义扫雷专家组主持的实兵演练

9月4日,中国国防部正式宣布:中国人民解放军陆军受邀如约赴俄,准备参与东盟防长扩大会人道主义扫雷专家组主持的实兵演练

扶苏聊历史
2026-09-07 17:42:55
墙皮都烧卷了,值班员还在电话里“走流程”:“领导咋整?”

墙皮都烧卷了,值班员还在电话里“走流程”:“领导咋整?”

小鹿姐姐情感说
2026-09-08 05:34:56
山东泰山要正式换帅?新主帅已经浮出水面,他有两大优势无人能及

山东泰山要正式换帅?新主帅已经浮出水面,他有两大优势无人能及

零度眼看球
2026-09-09 07:17:40
如果你的存款有三四十万,记住一条铁律:手里的钱换成任何东西都很容易,手里的东西想换回钱就很难。花钱,是一件不可逆的事…

如果你的存款有三四十万,记住一条铁律:手里的钱换成任何东西都很容易,手里的东西想换回钱就很难。花钱,是一件不可逆的事…

LULU生活家
2026-09-06 14:04:18
退休大爷帮忙接小孩2年,住院要借8千应急,邻居没借,隔天傻眼了

退休大爷帮忙接小孩2年,住院要借8千应急,邻居没借,隔天傻眼了

五元讲堂
2025-09-02 10:40:18
中国的萝卜快跑明明已经跑了4年,可为什么生意越来越少了?

中国的萝卜快跑明明已经跑了4年,可为什么生意越来越少了?

流苏晚晴
2026-09-07 11:52:58
福耀科技大学2026本科新生代表田智鹤走红:她来自甘肃,高考656分,是福耀科大在甘肃录取的第一名,本人透露选择福耀科大原因!

福耀科技大学2026本科新生代表田智鹤走红:她来自甘肃,高考656分,是福耀科大在甘肃录取的第一名,本人透露选择福耀科大原因!

凯旋学长
2026-09-08 12:24:30
黄仁勋大发慈悲!RTX 5090公版显卡只卖1.35万元:市场价已超3.35万元

黄仁勋大发慈悲!RTX 5090公版显卡只卖1.35万元:市场价已超3.35万元

快科技
2026-09-07 10:18:21
意媒:由于西班牙法律禁止,国米客战皇马球衣无赞助商

意媒:由于西班牙法律禁止,国米客战皇马球衣无赞助商

懂球帝
2026-09-08 20:45:35
喜讯!首位在本赛季荷乙联赛首发的中国球员诞生,表现可圈可点

喜讯!首位在本赛季荷乙联赛首发的中国球员诞生,表现可圈可点

懂个球
2026-09-09 00:45:27
14亿中国人养不起高速?中国高速8年亏了6万亿,美国高速大部分免费还能盈利,这组数字在网上传疯了。

14亿中国人养不起高速?中国高速8年亏了6万亿,美国高速大部分免费还能盈利,这组数字在网上传疯了。

回京历史梦
2026-09-07 17:47:23
九大代言品牌集体发声祝贺!郑钦文商业价值一路暴涨

九大代言品牌集体发声祝贺!郑钦文商业价值一路暴涨

喜欢历史的阿繁
2026-09-09 06:56:12
除了性生活,就是打麻将!2000多县城普通人的生活现状只能这样?

除了性生活,就是打麻将!2000多县城普通人的生活现状只能这样?

流史岁月
2026-07-06 18:00:06
克里米亚解放进程加快!十年大梦一场空,亲俄民众开始后悔了

克里米亚解放进程加快!十年大梦一场空,亲俄民众开始后悔了

知兵
2026-09-06 22:23:44
贵州3名失联女孩全部找到!12岁女孩远在千里江苏,真相仍待查清

贵州3名失联女孩全部找到!12岁女孩远在千里江苏,真相仍待查清

荷兰豆爱健康
2026-09-09 04:27:29
原主悔到心肝疼!网友213元买板卡内藏3块2TB固态:价值超万元

原主悔到心肝疼!网友213元买板卡内藏3块2TB固态:价值超万元

快科技
2026-09-07 19:36:21
2026-09-09 09:15:00
小小河
小小河
数学博士,互联网大厂AI算法工程师。 互联网、科技、AI, 白话说清背后真相。 关注一下,给你信息差
139文章数 256关注度
往期回顾 全部

科技要闻

DeepSeek V4 Flash明日降价,V4.1 Flash已内测

头条要闻

小店卖美式咖啡36岁以上老人2.99元一杯 36岁店主发声

头条要闻

小店卖美式咖啡36岁以上老人2.99元一杯 36岁店主发声

体育要闻

韩旭:我一定会再次走出去

娱乐要闻

郭德纲被处罚,郭麒麟被曝恋情瓜

财经要闻

美国“虹吸”全球铜库存,伦铜再创新高

汽车要闻

领克20 领克的纯电小钢炮这次更运动了

态度原创

教育
游戏
艺术
公开课
军事航空

教育要闻

周长是20,AB=8,求三角形ABC的面积

《塞尔达》限定NS2细节太多 pro手柄还多个支架

艺术要闻

毛泽东写给蒋的钢笔信,硬笔书法天花板!

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

停止互袭首都3天后 俄乌猛烈交火

无障碍浏览 进入关怀版