Chamath Palihapitiya 警告:AI agents 令自下而上软件与企业 IP 发生冲突
- Sophie Larsen

- 4天前
- 讀畢需時 17 分鐘
Chamath Palihapitiya 对自下而上的软件采用模式提出质疑,警告称,AI agents 会将随意的试用转变为知识产权泄露的潜在渠道。
8 月 6 日,Google News 的一则列表通过 Benzinga 的报道呈现了这一观点。其核心主张的重要性不止于又一次投资人对软件需求的预测。Palihapitiya 质疑的是:当员工教会 agents 了解公司如何运作时,所创造的知识究竟归谁所有。
传统上,自下而上的软件会先由个人用户带入公司,再在团队中扩散,最后才由高管洽谈企业协议。Slack、Zoom、Dropbox 和许多开发者工具都受益于这一模式。AI agents 令情况更为复杂,因为它们在执行工作时会吸收文档、更正意见、权限和运营上下文。
因此,核心冲突并不只是员工与安全团队之间的矛盾,而是自下而上的采用与受控的机构学习之间的矛盾。员工希望立即获得强大的工具,而企业则需要保留那些让自身业务与众不同的推理方式、工作流程和例外情形。
Google News 报道将软件采用转化为所有权问题
Palihapitiya 的警告重新定义了 AI 采用:这是一场围绕客户组织内部产生的学习成果归谁所有的竞争。
这篇 Google News 报道 将 Palihapitiya 的两项关联担忧归于他本人。第一,AI agents 削弱了既有的自下而上软件销售策略。第二,缺乏妥善控制的部署会导致他所称的“IP/alpha 泄露”。
在这一语境中,“alpha”指的是一家企业难以被复制的优势,而不只是机密文件。它包括定价判断、客户知识、运营捷径、研究方法,以及隐藏在正式流程背后的例外情形。许多此类知识从未出现在一份精心编写的政策文件中。
普通软件工具通常接收结构化输入,并返回可预测的输出。agent 则会接收更广泛的指令、选择工具、阅读支持材料,并完成多个步骤。通常,它需要经过多次更正,输出才能符合组织标准。
这些更正具有非同寻常的价值。员工可能会解释为何某位客户能获得例外、为何某家供应商存在风险,或为何某项技术捷径此前失败。每一次解释都会暴露组织实际决策体系的一部分。
这并不意味着每一次更正都会训练供应商的基础模型。大型供应商会区分处理客户数据和将其用于模型训练。这种担忧的范围也不限于某一个训练开关。
供应商仍可能深度嵌入客户的工作流程、集成、评估方法和运营习惯。客户随后会依赖外部智能层来应用其内部知识。即便不进行模型训练,这种依赖关系也可能改变议价能力。
Palihapitiya 此前曾指出,企业可能在自以为正在构建 AI 战略时,交出了自身优势。一篇 相关分析 将他的立场与知识封存和受治理部署联系起来。
在评估这一观点时,他的财务利益同样值得关注。Palihapitiya 共同创办了 8090,该公司开发 Software Factory——一个用于 AI 辅助软件开发的管理层。对失控 agents 和碎片化工具的担忧,有利于其产品定位。
这种利益冲突并不会使论点失效,但要求进行谨慎归因。Palihapitiya 并非一位描述已证实泄露事件的中立审计者。他既是投资人,也是供应商,所倡导的架构与其公司的产品一致。
这项被报道的警告同样缺乏证据表明,某家具名企业因主要商业 AI 供应商而失去了竞争优势。“IP/alpha 泄露”仍是一种战略风险模型,而非已有记录的普遍结果。读者应将其作用机制与最强版本的预测区分开来。
这一机制是可信的,因为 agents 需要上下文才能发挥价值。预测仍不确定,因为合同、技术控制和部署模型存在显著差异。这一差距界定了企业 AI 争论的核心。
自下而上的 AI 采用带来一种不同类型的暴露风险
AI agents 提高了自下而上试验的价值,同时也令其信息流更难盘点和治理。
产品驱动增长为软件供应商提供了一条绕过漫长采购周期的路径。员工可以先试用一款工具、邀请同事加入,并在高层管理者介入前证明其价值。买方获得了证据,供应商则获得了内部拥护者。
这一路径之所以奏效,是因为许多工具在狭窄边界内运作。设计应用处理设计文件,消息服务承载对话,项目追踪工具存储任务和评论。
agents 会跨越这些边界。一款实用的销售 agent 可能会读取电子邮件、搜索客户记录、准备提案、更新销售管道,并安排后续工作。编码 agent 则可能会检查代码库、工单、架构说明和部署日志。
每一项连接都会扩大 agent 的权限和上下文,也会扩大误操作、账户遭入侵或恶意指令所带来的后果。采用情况不能再只按席位数或活跃用户数衡量。
美国国家标准与技术研究院将 agents 定义为能够在真实环境中规划并采取自主行动的系统。其 2026 年 安全分析 发现,业界广泛认同 agents 会引入独特威胁,并形成采用障碍。
其中一项重要威胁是间接提示词注入。攻击者将指令隐藏在电子邮件、网站、文档或代码库中,供 agent 随后读取。agent 可能会将这些指令解读为命令,并泄露数据或执行非预期操作。
NIST 的红队测试发现,领先模型抵御此类攻击的能力存在显著差异。模型能力并不能持续地预测安全性。更强的通用模型并不会自动成为更安全的企业 agent。
这对自下而上的部署尤为重要,因为员工会优先追求即时可用性。他们可能会让一个 agent 访问多个系统,却没有梳理数据如何在这些系统之间流动。安全团队或许只有在该工作流变得具有运营重要性后才会发现它。
风险并不限于蓄意攻击。agent 可能在生成的邮件中放入敏感信息、将错误文档复制到工作区,或在意料之外的日志中保留机密上下文。当软件能够采取行动时,普通的配置错误会变得更严重。
传统的数据泄露防护控制会检查文件、消息和网络流量。agent 工作流则增加了提示词、检索到的上下文、工具调用、中间推理、记忆和生成的操作。一家公司需要覆盖整条链路的可见性。
自下而上采用的倡导者可以合理地认为,中央审批往往推进得太慢。员工最了解自己的工作,也能比高管更早识别有价值的用途。压制试验可能会将采用行为推向个人账户和未经批准的服务。
这构成了 Palihapitiya 论点中的第一次反转。严格禁止可能会因将活动推到受管理系统之外而增加暴露风险。更安全的路径未必是减少试验,而是在明确的技术边界内进行试验。
受治理的沙盒可以限制可访问数据、允许使用的工具和外部操作。它可以要求在发送消息、修改记录或执行代码前由人工批准,也可以保留日志以供调查和评估。
企业必须区分三个经常被混为一谈的问题。供应商能否使用客户内容训练模型?供应商可以保留该内容多久?agent 在每次会话中可以访问什么、执行什么?
第一个问题涉及模型开发,第二个涉及数据处理,第三个涉及运营权限——而这将成为 agents 最关键的安全问题。
供应商可能承诺不使用业务数据进行训练,但员工仍可能赋予其 agent 过多权限。反之,一个限制得当的 agent 即便使用外部模型也可以安全运行。架构和治理决定实际暴露程度。
因此,自下而上的采用只有在其自由度受到边界约束时才能延续。员工仍可发现用例,但身份、权限、留存和审计规则必须先于大规模部署。自发的软件试用将变成受管理的实验。
真正的冲突是客户学习与供应商依赖之间的冲突
Palihapitiya 论点的最强版本,关乎对外部学习循环的依赖,而非字面意义上窃取每一条客户提示词。
agent 会通过反复接触公司的工作内容而变得更有价值。它会了解员工信任哪些来源、哪些例外需要升级处理,以及哪些输出能够通过内部审核。这种改进通常来自周边系统,而不是模型权重的永久变化。
这一周边系统包括提示词、检索索引、集成、评估集、政策和用户更正。它们共同构成一个学习循环。谁控制这一循环,谁就控制着一项日益重要的运营资产。
由供应商运营的系统具有明显优势。供应商负责维护模型、安全基础设施和产品集成。客户无需自行构建每一个组件。
当切换变得困难时,取舍便会显现。一家公司或许拥有原始文档,却没有可迁移的 agent 行为、评估、更正和工作流历史记录。迁移到另一家供应商时,就意味着要重建机构上下文。
这是一种比专有文件格式更微妙的锁定形式。底层记录或许仍可导出,但围绕这些记录形成的行为无法顺畅迁移。员工必须再次向新系统传授同样的非成文规则。
这种担忧与 Microsoft CEO Satya Nadella 所说的“反向信息悖论”相似。Microsoft 的高管页面将他 7 月 12 日对这一概念的讨论列为其公开文章之一。Nadella 认为,AI 买家为了让购买的智能服务发挥作用,会披露有价值的知识。
历史上的信息悖论涉及卖方在买方评估之前披露信息。AI 则反转了这一方向。买方在评估和改进所购买的服务时,会暴露自身知识。
据报道,Palihapitiya 的观点将这一逻辑延伸到了软件分发。自下而上的增长促使员工在管理层决定由何处承载由此产生的知识之前,先行启动这种交换。等到采购部门介入时,工作流可能已经依赖于某一家供应商。
AI 提供商对“普通企业使用会自动将客户知识输入共享模型”这一暗示提出异议。OpenAI 在其业务隐私承诺中表示,默认情况下不会将业务输入和输出用于训练。
Anthropic 同样表示,不会使用商业客户数据训练生成式模型。其对商业处理的说明称,客户仍是控制方,而 Anthropic 则作为处理方行事。
这些承诺显著削弱了“模型训练会自动泄露数据”的说法。严谨的分析不能将每一条企业提示词都视为未来的训练材料。合同类型、账户配置、可选的数据共享计划以及产品界面都会产生影响。
不过,不用于训练的承诺并不能解决所有所有权问题。它们并不会自动保证评估结果、代理记忆、工作流定义或累积用户反馈的可移植性,也无法阻止内部员工将信息输入错误的账户。
消费者服务与企业服务之间的区别尤为重要。组织或许会为获批的企业账户协商强有力的保护措施,但员工可能在这些协议之外使用个人账户。当身份和采购控制无法匹配实际行为时,治理就会失效。
数据保留也不同于训练。提供商可能会为了滥用监测、服务交付或产品状态而临时保留数据,却不会用它来改进共享模型。安全团队需要针对每个端点和功能获得精确答案。
同样的审查也适用于连接器。模型或许不会利用检索到的文档进行训练,但其代理在执行过程中仍会接收敏感内容。除非控制措施始终保持一致,否则这些内容可能出现在日志、生成输出或下游工具中。
这正是私有部署并非完整答案的原因。在公司基础设施内部运行开放模型可以减少第三方暴露,但也会将安全、评估、补丁、身份管理和监控的责任转移给客户。
拥有广泛权限的内部模型仍可能在部门之间泄露数据。配置不当的检索系统可能会将一位客户的记录返回给另一支团队。未打补丁的开放组件则可能引入供应链风险。
因此,真正的选择并不是外部 AI 与绝对安全的内部 AI 之间的二选一,而是在外包控制与内部治理控制之间取舍,两者的成本和失效模式各不相同。大多数大型组织很可能会结合使用二者。
它们可以将常规任务路由至托管的外部服务,同时为敏感工作流保留隔离系统。它们还可以在模型无关的控制层中保留提示词、评估结果和工作流定义。这样既能降低依赖性,也无需让每个模型都在本地运行。
知识工作者已经在使用个人知识系统,以便跨工具保留上下文。结构化的AI knowledge base在更小的范围内运用了同样的原则。用户保留有组织的源材料,而不是完全依赖某一份聊天记录。
在企业规模下,与之对应的体系需要访问控制、来源追溯和可审计的检索。它还需要一项政策,明确哪些知识可以离开组织。没有这种分类,“保护 alpha”就只是一句口号。
Palihapitiya 的论点同时给 SaaS 供应商和 AI 实验室施压
代理威胁着软件行业自下而上的增长引擎,但治理要求可能会强化那些拥有可信分发渠道的成熟平台。
传统 SaaS 供应商面临的压力最为直接。它们的产品将工作流封装在界面、权限和数据库之中。代理有可能跨多个系统执行这些工作流,而无需用户在每个应用中花费太多时间。
销售代表或许会让代理准备续约事宜,而不是分别打开 CRM、电子邮件、文档和日程安排工具。代理成为界面,现有应用则成为其背后的记录系统。
这种转变削弱了熟悉的参与度指标。更少的界面访问并不一定意味着产品价值降低,但会使差异化更难证明。供应商必须证明其数据、工作流逻辑或权限仍不可或缺。
当安全团队集中控制代理访问权限时,自下而上的获客也会变得更加困难。员工可以使用数据范围有限的独立应用;但请求访问电子邮件、源代码或财务系统的代理会受到更严格的审查。
这有利于那些已经与企业身份和合规系统集成的供应商。Microsoft、Google、Salesforce、ServiceNow 及其他平台提供商可以将代理置于现有权限和记录旁边。它们的既有用户基础形成了分发优势。
前沿模型公司面临的是另一种压力。它们最好的模型会吸引员工和开发者,但企业买家越来越要求合同控制、可审计性、区域化处理和可预测的数据保留。仅凭模型质量无法满足这些要求。
Anthropic 通过咨询合作伙伴进行扩张,说明了这种应对方式。今年 6 月,该公司表示,已有超过 40,000 家企业申请加入其合作伙伴计划。它还称,已有超过 10,000 名顾问获得 Claude 认证。
该公司列举了 Accenture、Cognizant、Deloitte、KPMG、Infosys 和 PwC 等机构的大规模部署或培训承诺。这些数据来自 Anthropic,描述的是其合作伙伴网络,而不是经过独立审计的采用成果。不过,它们显示出代理部署正以多快的速度成为一门服务业务。
这与 Palihapitiya 的警告形成张力。咨询公司可以帮助客户实施治理,但也会加深模型提供商对企业工作流的接入。同一合作伙伴既可能降低技术风险,也可能增加战略依赖。
Palihapitiya 自己的公司则处于该市场的另一端。Software Factory 将自身定位为跨模型和软件开发工作的控制层。这种架构承诺赋予客户更多控制权,但其益处需要在生产部署中获得独立证据支持。
控制平面是用于管理其他系统如何被选择、授权、观察和变更的软件。在代理环境中,它可以在不同模型之间路由任务,同时保留政策和日志。但它并不能消除对其底层供应商的依赖。
控制平面本身也可能成为新的锁定来源。它可能拥有工作流定义、评估数据和运营历史。无论供应商销售的是模型、应用还是编排服务,客户都应提出同样的可移植性问题。
开源和开放权重模型提供了另一条路径。公司可以在受控基础设施中部署它们,并定制周边系统。这可以限制外部处理,并在与商业提供商谈判时创造筹码。
然而,开放部署需要专业人员和持续的运营工作。团队必须评估模型更新、保护推理系统、监控输出,并管理硬件或云容量。规模较小的组织或许能从管理良好的企业服务中获得更高的安全性。
SaaS 供应商也并非被动目标。它们可以通过应用程序编程接口暴露受控操作,同时将权限和审计轨迹保留在自身产品中。如此一来,代理可以使用软件,而不会绕过其治理机制。
供应商还可以让工作流具备可移植性和模型中立性。客户可能更青睐允许其切换模型、同时保留政策、评估结果和业务逻辑的提供商。可移植性将成为销售功能,而不再只是合规脚注。
最可能的结果既不是 SaaS 的消失,也不是不受限制的自下而上代理,而是一个分层市场:员工选择体验,公司控制访问权限,平台竞争以掌握编排权。价值将转向那些既能保留上下文、又不会将其锁死的一方。
这一结果将部分验证 Palihapitiya 的观点。自下而上的分发将失去自主性,而受治理的代理平台将获得更大重要性。但这并不能证明外部提供商会常规性地侵占客户 IP。
压力将最沉重地落在那些唯一优势只是为通用模型提供便捷界面的产品上。其功能可以被复制、捆绑,或由另一代理调用。拥有专有数据、可信工作流或受监管控制的产品则保留了更强的防御能力。
泄露论断仍需要更严格的证据检验
Palihapitiya 指出了真实的治理问题,但公开证据尚不足以证明模型提供商普遍侵占企业知识。
“IP/alpha 泄露”这一表述混合了几种不同风险。一种是员工的意外披露,另一种是提供商的数据保留,第三种是模型训练,第四种则是对提供商基础设施的战略依赖。
这些风险需要不同证据。暴露的文档可以通过日志和访问记录调查。训练数据的使用需要合同和技术分析。战略依赖则体现在转换成本、集中度和可移植性失败上。
将这四种风险都视为同一种泄露,或许能制造醒目的标题,却会导致薄弱的控制方案。首席信息安全官无法缓解一种隐喻。团队需要识别涉及的数据、端点、用户、权限和下游操作。
最有力的反驳来自提供商政策。OpenAI 和 Anthropic 都明确表示,默认情况下不会将商业客户内容用于模型训练。这些表述是客户可以在采购过程中审查的合同主张。
这些政策并不能消除实施风险。员工可能使用消费者产品、启用可选共享、提交反馈,或连接未经批准的应用。第三方代理构建商也可能适用与底层模型提供商不同的条款。
另一项不确定性涉及代理实际“学到”什么。大多数生产系统不会在每次员工纠正后永久更新模型权重。它们可能改为存储对话历史、记忆、检索内容或评估结果。
这种区别改变了威胁模型。被保留的工作流仍可能很敏感,但这并不等同于训练一个共享的基础模型。报道应避免在没有证据的情况下暗示某种技术过程。
Palihapitiya 的商业激励同样值得关注。如果企业认定模型中立的编排和知识隔离是战略优先事项,他的公司将从中受益。读者应将其警告视为一项附带商业利益的、有见地的论点。
行业仍缺乏衡量知识可移植性的标准方法。买家可以比较模型准确率或延迟,但很难量化多少机构学习成果仍可转移。这一缺口使宏大论断难以得到确认或否定。
一项有用的评估将检验公司能否在不重建整个工作流的情况下替换其模型提供商。它会衡量可转移的提示词、政策、记忆、评估、连接器和审批规则,还会比较迁移后的输出质量。
另一项测试将检查敏感内容是否会在 agent 执行过程中流向未获授权的系统。安全团队可以在受控文档中植入合成标记,并追踪它们出现的位置。这将揭示运营层面的泄漏,而无需暴露真实机密。
独立审计还应审查供应商的承诺。采购方需要证据证明,账户设置、保留规则和训练排除机制能够在每一项连接的产品中正常生效。一项覆盖 API 的政策,未必覆盖面向消费者的工作区或第三方插件。
持审慎态度的结论很直接:AI agents 扩大了企业知识可能被暴露的范围,但暴露并非不可避免。架构、合同条款、员工行为和身份控制共同决定结果。
Palihapitiya 的警告最适合作为一个采购问题。将其视为“自下而上的软件模式已然失败”的既定预测,说服力则较弱。企业仍在尝试利用模型实现受治理的自助服务。
这一区别对员工很重要。过于宽泛的限制可能降低生产力,并鼓励影子使用。成功的政策应为员工提供获批准、且能力足以与个人替代方案竞争的工具。
这对供应商同样重要。基于恐惧的营销可以赢得关注,却可能掩盖具体控制措施。采购方应要求具备可导出性、受限权限、模型选择、审计日志和清晰的事件处理流程。
举证责任在双方。模型提供商应证明其商业数据控制措施能够如承诺般运行。控制层供应商则应证明,其系统能够降低风险,同时不会制造另一种专有依赖。
企业采购方下一步应关注什么
这场争论的下一阶段,将由可移植性测试、安全证据以及企业采购方式的变化决定。
第一个信号是,主要供应商是否会让 agent 学习成果具备可移植性。客户需要的不只是文档导出,还需要可转移的工作流定义、评估集、修正记录、权限和记忆结构。
如果供应商采用通用格式,Palihapitiya 对锁定效应的担忧就会减弱。企业可以在更换模型或执行平台时保留其组织学习成果。如果可移植性仍然有限,关于控制权的论点就会更有力。
第二个信号是有关 agent 安全性的独立证据。NIST 已将间接提示注入、数据外泄、权限过度和授权薄弱列为实质性问题。未来的基准测试应检验完整系统,而非孤立模型。
企业部署的不是单独一个模型,而是一个连接到身份系统、数据库、文件和外部工具的模型。安全结果必须反映这种运行环境。
如果独立测试显示,受约束的 agents 能够抵御攻击并阻止未经授权的数据流动,那么自下而上的试验就可以在受管控的边界内继续进行。持续的失败则会推动权力向集中化的安全和采购团队转移。
第三个信号是企业的采购行为。观察企业是会统一采用一个 agent 平台、采用模型中立的控制层,还是针对不同敏感等级维持多家供应商。合同结构将揭示采购方如何看待控制权。
采购请求也会变得更加具体。采购方会询问数据是否用于训练模型、每个端点保留内容多长时间,以及管理员是否可以禁用高风险连接器。他们还会要求提供操作级审计日志和审批检查点。
个人账户与企业账户之间的区别将获得更多关注。提供强大受管工具的组织,可以减少影子 AI。仅依赖政策文件的组织,则很难控制员工行为。
SaaS 财报将提供另一条线索。供应商应披露 agents 是否在减少界面交互的同时提高了工作流量。他们还应解释客户是为结果、操作、用量还是传统席位付费。
席位增长下降并不自动意味着软件的崩溃。Agents 可能提升底层记录和权限的价值。商业模式可以在产品类别消失之前发生变化。
模型提供商将面临压力,需要澄清可选训练计划的运作方式。他们需要在 APIs、企业工作区、编码产品和合作伙伴构建的服务中提供一致的说明。模糊的边界将加剧泄漏担忧。
企业现在就应建立内部清单。每个已部署的 agent 都应有负责人、获批准的数据源、允许执行的操作、保留政策和回滚流程。团队应记录每一个步骤由哪家供应商处理。
在实际可行的情况下,他们还应将学习层与模型分开保存。提示、评估、政策和经过验证的修正可以保留在客户控制的存储库中。模型随之成为可替换的组件,而非运营智能的唯一载体。
对于具有重大影响的操作,人工审批仍然重要。发送付款、更改生产系统、披露客户信息或作出雇佣决策,都应要求明确授权。只有在经过衡量的表现支持后,自治程度才应扩大。
8 月 6 日的 Google News 条目捕捉了一场将比其标题更持久的争论。Palihapitiya 正在质疑这样一种假设:由员工主导的采用自然会让客户受益。对于 agents 而言,每一次成功的实验也都在教会系统公司是如何运作的。
决定性问题不是企业是否会使用 AI agents。它们已经有强烈动机去自动化研究、编码、销售和行政工作。问题在于,它们能否保留对那些使 agents 变得有效的知识的控制权。
企业采购方在批准下一次部署前,应提出一个实际问题:如果供应商明天消失,组织能否保留其员工教给系统的内容?
如果答案是否定的,那么企业创造的不只是一个有用工具。它已将部分运营记忆转移为一种依赖。这正是标题背后的警告,在更广泛采用之前值得加以检验。


