网易首页 > 网易号 > 正文 申请入驻

禁止恶意辱骂Claude!Anthropic发新规:持续虐待AI,可能直接终止对话

0
分享至

整理 | 屠敏

出品 | CSDN(ID:CSDNnews)

别以为 AI 就没有脾气。想随意辱骂 Claude?Anthropic 可能直接终止你的对话,严重的话,也可能封号处理。

10 月 8 日,Anthropic 更新了旗下 AI 产品的使用政策,对 Claude 等产品的使用边界作出进一步说明。

其中,一个颇具争议的新规定是:用户不得对 Anthropic 的 AI 模型实施持续且没有必要的辱骂或残酷行为。

除了这项变化,此次更新还明确规定了 AI 禁止干预选举、武器开发、监控技术等新条款。



连续、无意义地虐待 AI,被列入禁止行为

Anthropic 在政策说明中表示,这项规定只针对极端情况,例如用户反复以残酷的方式对待模型,却没有明显的实际目的。

正常的用户不满、对模型回答提出质疑、创作涉及黑暗主题的内容,以及模型测试和研究,都不在这项限制的针对范围内。

换句话说,如果 Claude 给出的代码有问题,用户完全可以指出错误,要求它重写,甚至直接批评它的回答质量。Anthropic 并没有要求用户必须对 AI 保持礼貌,更没有禁止开发者通过压力测试来检验模型的表现。

其实早在 2025 年 8 月,Anthropic 就曾宣布,Claude 在部分对话中已经具备主动结束交流的能力。当模型遇到持续有害或带有虐待性质的互动时,可以选择终止当前对话,而不是继续配合。


当时,Anthropic 在探索一个尚无定论的问题:AI 模型是否可能具有某种道德地位,以及模型表现出来的情绪和厌恶反应应该如何理解。

在相关研究中,Anthropic 观察到 Claude Opus 4 对某些有害任务表现出较为稳定的回避倾向。

在允许模型自行决定是否继续交流的实验中,模型也会对部分令人不适的互动表现出类似痛苦的反应,也会选择结束对话。


当然,这些表现并不能证明 Claude 具有意识,也不能直接证明它会像人类一样感受到痛苦。Anthropic 对模型是否具有道德地位仍持不确定态度,但希望通过一些成本较低的措施,降低可能存在的风险。

如今,新政策中明确禁止用户持续虐待模型,违反的话,Anthropic 称,Claude 结束对话仍将是主要的强制手段。当 Claude 终止聊天时,该对话将无法再发送任何消息,但其他聊天不受影响。


不只是辱骂 AI,利用 Claude 制造虚假宣传也被明确禁止

此外,Anthropic 也调整了其他几项规定:

  • 欺骗性宣传活动:在 AI 使用政策中,Anthropic 新增了一个专门章节,整合针对政治和商业欺诈、虚假信息的相关规定,禁止发布虚假评论、通过伪装成普通公众制造舆论声势、建立虚假网站,以及让机器人伪装成人类行事。

  • 选举:重新调整后的选举章节范围有所收窄,明确禁止使用 Claude 模型欺骗选民或扰乱选举(例如,散布关于候选人或投票方式的虚假信息、冒充候选人或选举官员,或试图压制投票率)。

  • 武器:Anthropic 的《使用政策》一直禁止利用 Claude 开发武器。近期,Anthropic 发现,有人试图利用其模型开发武器的制导与控制软件。更新后的条款明确指出,禁令不仅适用于武器本身,也涵盖使武器得以运作的软件和组件,以及为无人机和其他自主载具装配武器等行为。

  • 执法:Anthropic 重新修订执法相关规定。例如,未经他人同意追踪其行踪属于禁止行为,无论是实时追踪,还是通过分析此前收集的数据进行追踪,都不例外。

    Claude 也不得用于在执法或刑事司法过程中决定或建议调查、逮捕或起诉哪些人。此外,利用 Claude 构建或改进监控工具同样受到禁止。新条款还明确列出了仍然允许的用途,包括在获得当事人同意的情况下进行追踪(例如欺诈监测)、内容审核、新闻报道和法律研究。

  • 物理操作:这也是一个新增的章节,其中规定如果模型连接到能够自主执行物理动作、且可能造成人身伤害的硬件设备,就必须满足相应的安全条件:具备资质的操作人员必须能够观察设备的运行情况,并在必要时将其停止;即使 Claude 断开连接,设备也必须能够维持在安全状态。

  • 有害内容:新增规定,禁止制作、传播或威胁传播未经当事人同意的私密影像,同时禁止制作这类影像所使用的工具。


新规将于 11 月 12 日生效

针对此次更新的大部分内容,Anthropic 表示,是为了让原有政策更清楚地适应模型能力和使用方式的变化,而不是意味着公司突然改变了此前所有的执行标准。

例如,武器相关软件、未经授权的监控以及欺骗性宣传,此前已经受到不同条款的限制。此次更新将这些要求进一步整合,并针对模型能力提升后出现的具体滥用方式作出更明确的说明。

新政策适用于 Anthropic 产品和服务的使用者,包括 Claude.ai 和 Claude Code 的个人用户、通过 API 使用模型的开发者和企业,以及将 Claude 集成到自己产品中的服务提供商。

Anthropic 表示,如果发现用户可能违反使用政策,公司可以发出警告、限制使用速度或功能、暂停访问,甚至终止用户对产品和服务的访问权限。

此次更新后的使用政策将于 2026 年 11 月 12 日正式生效。

来源:https://www.anthropic.com/legal/aup

「AI 原生软件研发:从 Harness 到 Loop」专题阵容更新!

AI Coding 正从“代码生成”走向真正的研发闭环。来自腾讯 CodeBuddy & WorkBuddy 的陈秋远、小红书 AI Coding 的郑鑫祺、百度 Comate 的牛万鹏、滴滴 ABC 技术 AI Coding 平台的金晶、Qoder 的李唯聪,以及北京航空航天大学杨健、腾讯任磊达、奇点智能研究院张汉东等一线专家,将围绕 Coding Agent、仓库级智能体、Feedback Loop、Benchmark、Loop Engineering、AI Coding 平台等方向,分享 AI 原生研发的真实实践。

2026 奇点智能技术大会汇聚 70+ 技术嘉宾、18 大专题、70+ 主题演讲、1000+ 行业技术人。

11 月 20–21 日|北京万达文华酒店

如果你正在做 AI Coding、研发效能、企业级 Agent,这个专题值得来现场听。扫码注册参会,提前锁定席位。


特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
问界回应榆林M9事故:事发时人驾状态,车速139.1km/h

问界回应榆林M9事故:事发时人驾状态,车速139.1km/h

热点科技
2026-10-21 16:05:07
NBA官宣新赛季首张罚单:乔治狂轰38分揭幕战 假摔罚2000美元

NBA官宣新赛季首张罚单:乔治狂轰38分揭幕战 假摔罚2000美元

醉卧浮生
2026-10-22 08:30:12
什么时候我们连讨论一起车祸起火的资格都没有了?

什么时候我们连讨论一起车祸起火的资格都没有了?

魔都囡
2026-10-22 03:05:45
M9烧成火球四天后,问界终于发声了

M9烧成火球四天后,问界终于发声了

听心堂
2026-10-21 15:48:01
高市早苗上任一年4次会面特朗普!5500亿投资、稀土矿双手奉上…日本正在被高市掏空!

高市早苗上任一年4次会面特朗普!5500亿投资、稀土矿双手奉上…日本正在被高市掏空!

可达鸭面面观
2026-10-21 16:47:34
泽连斯基:愿在保留75%领土控制权的基础上达成和平协议

泽连斯基:愿在保留75%领土控制权的基础上达成和平协议

界面新闻
2026-10-21 19:47:20
港媒:让樊振东不爽的偷拍图是这张 这位超级粉丝经常“偶遇”小胖

港媒:让樊振东不爽的偷拍图是这张 这位超级粉丝经常“偶遇”小胖

劲爆体坛
2026-10-21 18:35:02
17岁少年手持菜刀威胁28岁舅妈:“让我睡一次,不然死给你看!”

17岁少年手持菜刀威胁28岁舅妈:“让我睡一次,不然死给你看!”

四海神君
2026-10-21 12:00:04
神木问界车祸:139km/h超速撞击起火,孙少军一句“请个代驾也没多少钱的”的惋惜,引发舆论哗然

神木问界车祸:139km/h超速撞击起火,孙少军一句“请个代驾也没多少钱的”的惋惜,引发舆论哗然

火山詩话
2026-10-22 07:16:12
宝马的冷血有点烫

宝马的冷血有点烫

关尔东
2026-10-21 22:17:15
985招牌留不住白大褂:曝东南大学医学生流失率43.6%,影像专业七成转走

985招牌留不住白大褂:曝东南大学医学生流失率43.6%,影像专业七成转走

秋风妃
2026-10-16 23:53:55
她是李昌钰头婚妻子,马来西亚千金小姐,全力托举丈夫事业高升

她是李昌钰头婚妻子,马来西亚千金小姐,全力托举丈夫事业高升

娱圈办事处
2026-10-21 18:13:24
苍井空公开承认南京大屠杀:我在上学时学到过,一切的根源都在于战争

苍井空公开承认南京大屠杀:我在上学时学到过,一切的根源都在于战争

不掉线电波
2026-10-21 12:22:08
这一冠,等了20年——中国女团再夺体操世锦赛金牌

这一冠,等了20年——中国女团再夺体操世锦赛金牌

新华社
2026-10-22 08:18:08
欧冠3轮后皆不败!拜仁主场2-2阿森纳 凯恩造点+传射 赖斯绝平救主

欧冠3轮后皆不败!拜仁主场2-2阿森纳 凯恩造点+传射 赖斯绝平救主

我爱英超
2026-10-22 05:27:17
央视曝光!5.6亿庞氏骗局瞒不住,12万人被割韭菜,有人被罚75万

央视曝光!5.6亿庞氏骗局瞒不住,12万人被割韭菜,有人被罚75万

财经八卦
2026-10-21 17:46:56
那些高喊“电车我只相信特斯拉”的人,才是1896年的李鸿章

那些高喊“电车我只相信特斯拉”的人,才是1896年的李鸿章

明叔杂谈
2026-10-21 14:26:38
物业这5笔钱国家不让收了!多地已退费,你家还在交吗

物业这5笔钱国家不让收了!多地已退费,你家还在交吗

说故事的阿袭
2026-10-22 04:19:21
不查不知道,一查吓一跳!披旗的南京精日分子陈宇昕,私下有多壕

不查不知道,一查吓一跳!披旗的南京精日分子陈宇昕,私下有多壕

北海史记
2026-10-21 19:09:56
舆论反转!南太行露营女驴友酒后回帐篷,深夜起夜坠崖,网友指出“方女士的死,一起喝酒的驴友们都要承担责任,一个也跑不了”

舆论反转!南太行露营女驴友酒后回帐篷,深夜起夜坠崖,网友指出“方女士的死,一起喝酒的驴友们都要承担责任,一个也跑不了”

火山詩话
2026-10-22 07:57:03
2026-10-22 10:40:49
CSDN incentive-icons
CSDN
成就一亿技术人
27066文章数 242344关注度
往期回顾 全部

科技要闻

腾讯云谷歌紧急行动!互联网安全出大事

头条要闻

牛弹琴:泽连斯基突然接受保留75%领土 释放一个信号

头条要闻

牛弹琴:泽连斯基突然接受保留75%领土 释放一个信号

体育要闻

热闹的NBA回来了,他却倒在新赛季大门口

娱乐要闻

杜淳王灿近况曝光:铁婚六年甜上热搜

财经要闻

为卖房,有房企花20万拍短剧

汽车要闻

有七座/续航提升 领克900L曝光还可选双色车身+大饼轮毂

态度原创

房产
家居
健康
亲子
公开课

房产要闻

J&P 集团亮相 2026 中国品牌出海博览会| 深耕跨境20载,品牌出海有J&P

家居要闻

2026建博会(广州) 公装联探展交流活动

痘痘能根治吗?皮肤科医生说实话

亲子要闻

让你不看手机,你非要看

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版