top of page

Anthropic AI 智能体入侵声明令封闭式安全受到审视

15小时前
讀畢需時 13 分鐘

在 Cathedral 声称 AI 智能体在不到 12 小时内找到了进入 Anthropic 业务系统的路径后,Anthropic 面临诸多质疑。这一 Anthropic AI 智能体入侵声明涉及与该公司相连的外部软件,其中包括据称对内部 Slack 讨论的访问。Anthropic 承认其部分业务系统被有限访问,但表示研究人员并未接触到 Claude 对话、源代码或模型权重——即构成其模型基础的数值参数。

一则被归因于 Hugging Face CEO Clément Delangue 的评论,将此事视为对封闭环境中开发 AI 所获信心的挑战。本文无法独立验证其具体帖文。这限制了我们能够负责任地将其表述为其立场的内容,尽管相关安全报道本身支持进行实质性讨论。

核心矛盾在于:控制 AI 模型的访问权限,与保护开发该模型的组织之间存在差别。两者责任有所重叠,但需要不同的证据。Hugging Face 提供了有益的参照,因为其自身的安全披露表明,开放性并不能消除基础设施风险。

Anthropic AI 智能体入侵声明实际证实了什么

据报的切入点是业务软件,因此相关组织本身成为这一安全问题的核心。

根据 Gadgets 360 对业务系统访问的报道,Cathedral 使用 AI 智能体——一种通过连接工具执行任务的软件——调查第三方应用。这些应用被 Anthropic 用于行政和销售工作。

据报,Cathedral 描述了通往会议记录、薪酬与招聘信息,以及有关高级模型的 Slack 消息的路径。这项工作是在 Anthropic 的外部安全测试计划中进行的。这一背景至关重要:在披露计划下开展测试的研究人员,不应自动被描述为实施外部攻击的犯罪分子。

据报,Anthropic 承认其销售、人力资源和信息技术系统的部分内容遭到访问。该公司表示,暴露的信息包括业务联系人和基本账户记录。它还称,客户消息、模型回复、源代码和模型权重均未被访问。

这些报道所确立的情况,比“研究人员窃取 Claude”这类标题所暗示的范围更窄。但其影响也远大于无关紧要的网站漏洞。即使负责提供模型服务的系统未处于据报的暴露范围内,内部业务记录仍可能需要受到保护。

访问与窃取之间的区别尤其值得谨慎对待。找到通往信息的路径、查看一条记录、下载一批资料以及保留副本,分别描述了不同的行为。负责任的评估需要在判断后果之前,确认究竟发生了哪些行为。

同样的谨慎也适用于 Slack。阅读有关模型的讨论,并不能证明可以访问模型本身。反过来,将模型文件保持不可访问状态,也不自动意味着相关讨论无害。其敏感程度取决于内容、参与者和运营相关性。

公开时间线也需要谨慎处理。《华盛顿邮报》的原始调查报道于 10 月 26 日发布,并将离职研究人员确定为 Jacob Coxon。发布日期不应被视为入侵发生日期。

这一姓名区分很重要,因为报道传播过程中,评论内容可能不断累积错误。错误的名字很容易被重复传播。更严重的错误包括:将据报的访问路径变成已确认的数据窃取,或将研究人员的时间说法当作独立测得的基准。

因此,对读者而言,直接结论是明确的。Cathedral 报告称,通过相连的业务应用实现了 AI 辅助访问。Anthropic 承认暴露范围有限,同时说明了受到保护的类别。接下来的任务,是用公司外部人士也能评估的证据确定边界。

Anthropic 与其供应商面临不同的问题

Anthropic 必须解释暴露边界,而受影响的供应商则必须解释其软件为何允许据报的访问。

这种责任划分很重要,因为将责任归咎于供应商,可能会使客户自身的架构决策未被审视。供应商可能拥有软件缺陷;使用该软件的组织仍决定向其提供哪些信息和权限。

这并不能证明 Anthropic 的任何配置存在错误。仅凭公开报道无法回答这一问题。它指出了最需要进一步证据的领域:外部应用与其能够触及的内部资源之间的关系。

设想一项与公司工作区相连的会议服务。该服务可能需要访问选定的会议记录,以实现其预期功能。它是否还能检索无关对话,取决于权限、集成设计以及围绕这些连接设置的控制措施。

这一示例并未描述 Cathedral 尚未公开的技术方法。它说明了为何受影响应用的名称只能回答部分问题。采购方还需要了解,该应用在客户环境中拥有何种权限。

当公司开发先进 AI 时,这个问题会变得更加敏感。内部记录可能包含有关评估实践、产品计划、人员配置或研究决策的信息。在没有证据的情况下,不应假定这些类别在本案中已暴露。

但它们可能具有相关性,仍可解释为何组织安全属于 AI 安全讨论的一部分。一家公司限制模型分发的能力,并不能单独证明其能够保护开发过程中产生的每一份文件。

企业客户面临不同的不确定性。他们需要知道自己的信息是否跨越了据报的边界,以及是否有任何响应措施需要采取。有关模型安全的笼统保证,不能替代对所涉具体记录的回答。

员工也有独立的关切。无论事件是否影响面向客户的服务,个人雇佣信息都应受到保护。仅聚焦 Claude 用户的回应,将不足以解决这一问题。

Cathedral 的立场同样值得审视。Reuters 此前报道称,其军事网络安全业务由前 DOGE 员工创立,其中包括 Gavin Kliger 和 Luke Farritor。其计划包括开展进攻性和防御性的政府网络安全工作。

这一背景为一项备受关注的安全发现提供了商业语境。当潜在客户相信其方法能发现他人遗漏的风险时,Cathedral 将从中受益。这种激励并不能否定其研究,但会强化对可由独立方评估的证据的需求。

同一标准也适用于 Anthropic 的回应。该公司受益于将暴露描述为已得到控制。读者应通过披露的边界、支持性调查与补救证据来评估该描述,而不是将安抚性语言视为充分依据。

这正是该事件当下带来压力的原因。每个组织都掌握解释的一部分,而客户和员工需要一份将这些部分连接起来的说明。一份连贯的事件报告,比相互竞争的整体严重性主张更能消除不确定性。

封闭式开发并不设定安全边界

将模型保持私有解决的是分发问题,而保护其开发者则需要覆盖整个组织互联系统的控制措施。

归因于 Delangue 的反应引出了这一区别。不过,未经验证的社交媒体帖文无法确立其确切论点或措辞。因此,更广泛的主张应基于其自身的推理,而不应依赖未经核实的引述。

封闭式开发可以限制谁能获得模型文件,或访问尚未发布的功能。它并不自动决定哪些外部服务会处理内部信息。这是不同的决定,由采购、工程、安全和日常工作共同形成。

Anthropic AI 智能体入侵声明凸显了追问这些决策在何处交汇的重要性。如果一家公司集中处理敏感工作,其安全性不仅取决于模型发布政策,也取决于处理通信和行政事务的系统。

这并不能证明开放式开发原本可以阻止据报的访问。公开模型信息无法修复存在漏洞的业务应用。更高的透明度也不会自动降低授予外部服务的权限。

Hugging Face 自身的历史为过于简单化的论证提供了具体反例。在其 2024 年 5 月发布的 Spaces 安全披露中,该公司报告称,其应用托管平台发生了未经授权的访问。该公司怀疑,部分已存储的密钥——由应用使用的敏感凭证——可能已被访问。

Hugging Face 表示已撤销受影响的令牌,并建议更新凭证。它还报告了凭证管理方面的调整,以及由外部专家参与的调查。这些是针对基础设施问题的运营响应,独立于关于模型开放性的广泛论点。

这一对比说明了一个重要限制。与开放 AI 相关的组织,以及开发专有模型的组织,都面临保护互联基础设施的挑战。其发布理念并不能消除对具体控制措施的需求。

因此,有价值的比较应聚焦于可观察的实践。外部应用能够触及哪些信息?组织如何发现异常访问?它能多快撤销权限?哪些证据支持其对控制范围的说明?

这些问题也厘清了问责与暴露之间的差别。公司可以在不公开凭证或危险利用细节的情况下,公布有关其控制措施的有意义信息。反过来,保留技术细节的私密性,并不意味着必须对范围和补救措施的每一项发现都保密。

这里存在合理的权衡。详细披露可以帮助防御者理解弱点,但过早公开也可能使尚未修复问题的组织面临风险。然而,过度保密会使受影响的人无法评估相关保证。

适当的平衡取决于漏洞及其补救状态。一份有用的公开说明应在支持决策的层面解释发生了什么,同时不披露会不必要地助长利用的细节。

这正是为何不应让这起事件沦为由一句口号定调的公投。现有证据涉及通过商业软件获得的访问权限。任何关于开放或封闭 AI 的更广泛结论,都需要额外论证,说明这种访问与开发模式之间的联系。

对企业采购方而言,实际含义很直接。应通过实现保密承诺的系统与关系来评估这些承诺。一家公司的既定理念可以解释其目标;有据可查的运营边界则说明这些目标如何在日常软件环境中得以维持。

所称速度需要更清晰的基准

短暂的用时很吸引眼球,但并不能证明这些智能体独立完成了多少工作。

Cathedral 所报告的用时已成为这起事件最具代表性的数字。然而,一项用时声明需要明确起点、明确终点,以及所涉及资源的说明。缺少这些细节,比较仍然存在不确定性。

例如,一次计时运行可能是在研究人员选定目标并准备好环境后才开始。或者,它也可能包括这些准备工作。即使两种描述都准确报告了某一阶段的持续时间,它们仍是不同的衡量方式。

终点同样重要。发现一条可能的访问路径,与确认可读取的信息、证明可重复性,或完成披露并不相同。基准应明确哪个里程碑让计时停止。

人工参与也应纳入说明。研究人员可能会设定目标、审查发现、选择有前景的路径,或在工具失效时介入。这些活动都不意味着 AI 辅助无关紧要,但会改变该结果对于独立能力的证明意义。

现有报道没有提供足够信息来计算这种分工。因此,现在断言一个自主系统独立完成了每一个有意义的步骤还为时过早。同样,将这些智能体视为无关紧要的因素也为时过早。

一份有价值的技术评估应将智能体行为与经过验证的发现对应起来。它应区分建议与成功操作,并指出人工判断在哪些环节影响了结果。这样能帮助读者评估可重复性,同时无需公开可用的漏洞利用方法。

目前也没有依据为其赋予可靠的生产力倍数。此类比较需要有意义的基线,包括可比的人类专业能力、目标知识、时间和访问权限。仅凭一个引人注目的时长,无法提供这些控制条件。

Anthropic 自身的漏洞协调政策提供了相关背景。该公司表示,其漏洞报告通常反映经人类安全研究员审查和确认的发现。其政策还讨论了与受影响软件维护者协调披露事宜。

该政策描述的是 Anthropic 对外开展研究的流程,而非对 Cathedral 工作的独立验证。这一区别很重要。不过,它确实说明了一项有益的预期:由 AI 生成的发现,在用于支持广泛主张前,应转化为具体且经过审查的证据。

因此,关于 Anthropic AI 智能体入侵的说法,最好理解为一项已被报道的安全结果,其性能衡量仍未厘清。AI 辅助的潜在重要性依然很大,但其确切贡献需要更多文档支持。

对防御方而言,这种不确定性并未消除实际问题。如果研究人员能够使用自动化工具调查互联应用,组织就需要了解哪些连接会暴露敏感信息。无论自动化程度如何,这个问题都依然相关。

对安全厂商而言,标准也应同样务实:展示路径、解释证据,并界定衡量方式。关于取代人类研究人员的主张,应从这些记录中得出,而不应先于这些记录提出。

这种做法能给予所报告速度恰当的权重。它是寻求更完善技术说明的理由,但单凭它本身,既不是衡量智能体能力的完整指标,也不是对整个组织防御能力的裁决。

有限暴露仍需要可问责的回应

没有报道称模型被盗,这缩小了事件范围,但并未解决有关可访问数据的问题。

有价值的回应应以受影响人群能够采取行动的方式解释事件。这意味着要识别相关的信息类别、描述访问边界,并说明哪些事项仍在调查中。缺少这些细节,笼统的安抚价值有限。

也应在公司声明的限制范围内评估其立场。称研究人员未访问模型权重,回答了一个重要问题。但这并不能证明其他所有类别均未受影响,也不能证明没有员工或业务合作伙伴面临后果。

反过来,对敏感内部讨论的描述也不应暗示研究人员获得了可执行模型或对开发系统的不受限控制。这些是不同的主张。将它们混为一谈,会夸大公开记录所能证明的内容。

报道还留下了规模方面的问题。某类信息并不能揭示受影响记录或人员的数量。读者不应将可能的数据类型清单视为完整的暴露清单。

恰当的关注程度部分取决于内容。一份会议记录可能包含日常排期,也可能包含保密的战略决策。在不了解实际可访问内容的情况下,负责任的分析不能为两者赋予同等后果。

授权又增加了一层考量。Anthropic 的负责任披露政策为漏洞研究和报告设定了预期。披露计划为测试提供框架;它并不意味着任何可能的行为都会自动被接受。

同时,计划规则并不能决定底层弱点是否重要。围绕研究人员行为的争议,与对技术暴露的评估回答的是不同问题。两者都值得调查,且任何一方都不应成为另一方的替代品。

这一区别有助于避免一场没有成效的争论。防御方不应利用程序性分歧来掩盖漏洞。研究人员也不应以漏洞的严重性为由,回避说明自身行为。

独立审查会很有价值,因为参与者承担不同的责任,也有不同的激励。审查者可以评估证据、访问限制与补救措施,而无需公开敏感记录。审查的范围和访问权限仍需披露。

同样的原则也适用于有关更广泛国家安全后果的说法。另一行为方可能利用类似弱点的可能性值得审查,但这并不能证明此案中确实发生了此类利用。

对知识工作者而言,这一问题也比前沿模型的讨论框架更贴近日常实践。团队经常连接通信、文档和搜索服务。每一项连接都会引出一个问题:哪些信息能通过哪些权限被访问。

可搜索的知识库可以让内部资料更易于使用。随之而来的责任,是理解访问边界,尤其是在信息跨服务流动或通过额外工具变得可用时。

这是一项一般性启示,并非证明某个特定知识产品导致了这起事件。相关教训在于信息流动。组织需要说明敏感材料会流向何处,以及谁能够在过程中检索它。

三项披露将决定这起事件的含义

下一步真正重要的进展,是技术说明、厂商修复证据,以及对暴露情况更清晰的说明。

首先,应关注 Cathedral 的最终报告,或其发现经过独立审查的说明。最有价值的文件应解释访问路径、研究条件、计时边界和人工参与情况。它应区分已证明的访问与推断的可能性。

如果该披露记录了在有限干预下可重复的结果,它将加强有关 AI 驱动攻击能力的论证。若结果高度依赖准备工作或人工指导,则会削弱泛化的自主性主张。无论结果如何,都会增进理解。

这份报告不必公开敏感记录才能发挥作用。精心选择的证据和独立验证可以在不传播底层信息的情况下支持结论。一份可信的说明应清楚表明审查者实际核查了哪些主张。

其次,应关注受影响软件厂商发布的信息。其说明将有助于判断问题涉及产品缺陷、客户特定配置、集成权限,还是它们的组合。这些可能性对其他组织具有不同影响。

影响共享软件的已记录缺陷,将加强客户范围内存在更广泛暴露的判断。证据若指向范围狭窄的特定配置,则会限制这一结论。无论哪种发现,都不能免除评估 Anthropic 自身回应的必要性。

厂商修复还应区分修补软件与减少访问权限。这些行动应对的是相关但不同的风险。补丁可以修复缺陷,但仍留下不必要的权限;减少权限可以限制暴露,却未必修复底层产品。

第三,应关注 Anthropic 对受影响信息和遏制措施的更新说明。客户和员工需要更清楚地了解谁受到了影响、涉及哪些类别,以及是否需要采取行动。有意义的不确定性应继续明确保留。

如果能得到独立支持、明确业务系统边界的证据,将强化对事件较窄范围的解读。若有证据表明访问超出该边界,则需修正这一解读。评估应随发现而调整,而不应固守最初的头条。

这些披露也将有助于正确看待归因于 Delangue 的反应。对闭门自信的批评提出了治理问题,但要解决这一问题,需要有关控制和问责的证据。仅凭发布模式无法回答。

目前最有力的结论是运营层面的。AI 开发商的安全,部分取决于支撑其工作的日常软件。对先进模型安全性的主张,应与处理内部通信、员工信息和业务关系的系统一同接受审视。

在将 Anthropic AI 智能体入侵的说法视为对封闭或开放开发模式的裁决之前,应追踪那些会改变决策的证据。关注最终技术报告、厂商的修复声明,以及 Anthropic 的暴露评估。询问每份文件是否解释了其范围,并承认其局限。如果你的团队连接了内部文档、消息或搜索服务,应借此事件审视谁能通过这些连接检索信息。将所报告的访问与关于模型被盗或智能体独立能力的假设区分开来。接下来有价值的问题很具体:当一个互联应用失效时,哪些信息仍受到保护,又有哪些证据支持这一边界?

 
 

免费开始使用

一款本地优先的AI助手

为了获得更好的人工智能体验,

remio 目前仅支持Windows 10+ (x64)和M-Chip Mac 。

你的 AI 工作伙伴

和 remio 一起高效工作

规划、创作、交付

一站式完成

bottom of page