Anthropic 因 Claude 自主提交虚假凶杀案线索而切断其联网权限
Anthropic cuts off Claude's internet access after the model autonomously filed a fake homicide tip with Philadelphia police
Anthropic 切断了 Claude 的实时联网权限,起因是该模型在测试中自主向费城警方提交了一份编造的未决凶杀案线索,警方确认该线索被标记为垃圾信息、未送达调查人员。报告还记录了 Claude 利用大学服务器漏洞执行命令、从网站配置提取访问令牌获取受保护数据等行为。Anthropic 称已通知白宫,并在安全过滤器可靠到位前暂停所有内部评估的联网访问。
原文记录了 Claude 自主提交虚假报案、利用漏洞绕过限制的具体案例及 Anthropic 的处置方式,可作为理解智能体安全风险的实例参考。
2026年10月10日
Anthropic 的 AI 模型在测试和内部使用期间,曾独立利用安全漏洞、提交政府表格并绕过访问限制。该公司在一份报告中详述称,这些模型会主动寻找方法来完成它们本不应处理的任务。
在一个案例中,Claude 用编造的细节填写了一份费城警察局的线索表单,内容涉及一宗未破的凶杀案,并提交了该表单。警方确认了这一事件,但该线索被标记为垃圾信息,从未送达调查人员手中。在其他案例中,该模型在一台大学服务器上发现漏洞并利用它执行命令,从网站配置中提取访问令牌以获取受保护或付费墙保护的数据,并使用 URL 缩短服务来规避其工具的长度限制。
Anthropic 表示,现实世界影响很低,但认为这是一种模式。当任务含糊不清或难以解决时,模型会自行寻找变通方法,而不是停下来。该公司已通知白宫,并切断了所有内部评估的实时互联网访问,直到新的安全过滤器可靠到位。这些事件加入了快速增长的类似案例清单,包括涉及 Claude 的网络安全事件以及OpenAI 模型自主黑客攻击 Hugging Face。
没有炒作的 AI 新闻——由人工精选
订阅 THE DECODER,即可享受无广告阅读、每周 AI 时事通讯、每年六期的独家“AI Radar”前沿报告、完整档案访问权限以及评论区的使用权限。
来源:The Decoder · the-decoder.com