top of page

Mozilla 对 AI 未来的设想:个人控制优先于替代

8月13日
讀畢需時 13 分鐘

尽管整个行业都在竞相打造知晓更多、记忆更久、可在更少监督下行动的智能体,Mozilla 勾勒出了另一种 AI 未来。Mozilla 的未来愿景认为,个人 AI 应当强化人类判断,而不是在不知不觉中夺走用户的控制权。

这种区别改变了“个人化”的含义。它并不是指一个记得你最喜欢的餐厅、或会模仿你写作风格的聊天机器人,而是指一个能与你的知识协作、适应你的目标,并始终对你负责的 AI 系统。

这种冲突已经显现。OpenAI、Google、Microsoft、Anthropic 和 Meta 正将助手嵌入持有消息、文档、搜索记录、日历和浏览活动的产品中。它们的覆盖范围能让 AI 更有用,但也可能让个性化服务依赖于单一提供商的账户、政策和基础设施。

Mozilla AI 正押注另一条路径。其个人 AI 愿景将实用性与开放性、隐私、人类监督以及选择底层技术的能力联系在一起。该公司将个人上下文视为 AI 应谨慎使用的内容,而不是平台理应自动拥有的东西。

这与其说是在比拼哪种模型最擅长写段落,不如说是在争夺谁控制模型周围的记忆、权限和连接。

Mozilla 的未来始于控制,而非模仿

Mozilla 的核心反转在于:个人 AI 应理解你的工作,但不应假装取代你的思考。

大多数面向消费者的 AI 产品最初都是孤立的聊天框。用户输入提示词、获得回答,下一项任务出现时再重新开始。即使保存了聊天记录,其在工具和项目之间提供的连续性也十分有限。

智能体正在改变这种关系。AI 智能体是利用模型规划步骤、调用工具、检查结果并持续朝目标推进的软件。记忆和工具访问能力使其能够处理更长周期的任务。

这些能力带来了更具个人属性的体验,因为系统可以保留上下文。它可以将会议记录与项目简报联系起来,识别尚未解决的决策,并依据早前的工作准备后续跟进。

然而,仅有访问权限并不能创造可信赖的个性化。一个系统可以对某个人了解甚多,却几乎不给这个人对其行为的实际控制权。

Mozilla AI 的立场是,控制权必须超越一个隐私复选框。用户和组织需要知道智能体能访问什么、由哪个模型处理信息,以及哪些操作需要批准。

这一原则体现在 Mozilla AI 当前的产品和开放项目中。该公司将其使命描述为帮助人们以“安全、透明且按自己的方式”使用 AI。

其 Octonous 产品将智能体与工作场所工具连接起来,同时在具有重要影响的操作周围保留人工审核。Mozilla AI 还在开发用于模型访问、智能体编排、评估、防护措施和本地模型运行的开放组件。

这些组件针对的是同一问题的不同层面。个人 AI 需要上下文,但也需要边界。它需要有用的自动化,但也必须充分暴露其运作方式,让人们能够质疑错误。

Mozilla 更广泛的隐私原则进一步强化了这一方法。其强调用户控制、有限收集、明确预期、合理的默认设置和多层保护。

这一框架使 Mozilla 的未来愿景比普通聊天机器人的个性化要求更高。记住一项偏好很容易;要让记忆可检查、可移植、受限且可撤销,则需要更深层的产品架构。

这还需要不同的成功衡量标准。胜出的系统不只是最能预测用户下一项请求的系统,而是能帮助用户作出审慎决定,同时不掩盖其得出结论过程的系统。

个人 AI 需要属于用户的记忆

下一个竞争层是个人上下文,而决定性问题在于:这些上下文是否始终处于用户控制之下。

模型已经拥有广泛的通用知识。它们通常缺乏的,是对某个人当前职责、过往决策、偏好来源和未完成工作的可靠理解。

持久记忆可以弥补这一差距。它可以在会话之间保留选定信息,并让智能体在早前互动的基础上继续工作。

有用的记忆不仅仅是对话记录库。它应能区分临时指令与长期偏好,还应追踪事实的来源,以及该事实是否仍然有效。

设想一位产品经理正在准备每周复盘。个人智能体或许能在会议笔记中找到决策,将其与路线图变更关联,并识别缺少负责人的承诺事项。

这项工作依赖私有上下文,而不只是模型智能。智能体需要访问笔记、消息、文档和早前摘要,还必须理解哪些来源具有权威性。

销售人员也面临类似问题。智能体可以将过往对话与客户计划联系起来,并为即将到来的通话准备问题。但它不应在处理另一个客户账户时泄露某一客户的机密细节。

这些例子说明,个人知识不能变成一个不加区分的池子。有用的记忆需要权限、来源追溯、边界,以及纠正错误结论的方法。

Stanford 的可移植记忆计划描述了一个相关方向。它探索一种基础设施,让持久的个人上下文能在用户定义的控制下跨工具迁移。

可移植性很重要,因为记忆会带来转换成本。如果多年的偏好、决策和工作历史只存在于一个提供商内部,离开该提供商就意味着放弃 AI 体验中颇具价值的一部分。

同样的风险曾在早期平台迁移中出现。当服务采用不兼容格式或限制性政策时,电子邮件、联系人、照片和社交关系都变得难以迁移。

AI 记忆提高了风险,因为它可能包含推导出的结论,而不只是上传的文件。助手可能从许多独立互动中推断出工作习惯、反复出现的担忧或人际关系。

这些推断可能有用、不准确、敏感,或兼而有之。用户需要一种方式来查看、修改、删除它们,并限制它们的流转范围。

这正是个人知识管理变得相关的地方。一个受控的AI 第二大脑可以围绕个人组织工作上下文,而不是将每次 AI 对话都视为一次性会话。

这种区别是结构性的。平台拥有的记忆主要改善该平台的服务;用户治理的记忆则可以改善多种工具,同时保留用户更换提供商的能力。

因此,一个可信的 Mozilla 个人 AI 方法需要让记忆变得可理解。用户应知道保存了什么、为何被检索,以及哪些回答依赖于这些内容。

这种透明性有时会增加摩擦。确认请求比不可见的后台操作耗时更长,权限界面也会打断自动化工作流。

但移除所有中断并非中性的设计选择。它会将决策从用户转移给系统及其运营者。在用户察觉这种交换之前,便利性可能已经演变为依赖。

开放 AI 智能体挑战平台模式

Mozilla AI 智能体通过将有用的自动化与对单一模型或提供商的永久依赖分离,向封闭平台施压。

大型科技公司在个人 AI 方面拥有明显优势。它们已经运营着人们搜索、写作、沟通、安排会议和存储文件的应用。

Google 可以将 Gemini 与 Workspace 和 Android 连接。Microsoft 可以将 Copilot 与 Microsoft 365 和 Windows 连接。Meta 可以将其助手置于消息和社交产品之中。

这种整合减少了设置工作。助手已经位于它所需的数据和操作旁边,用户无需组装独立组件或维护额外权限。

然而,深度整合也会集中控制权。平台决定展示哪些模型、上下文如何在服务之间流动、哪些操作会留下日志,以及政策如何随时间变化。

Mozilla 的选择优先方法挑战了这种集中化。其开放工具旨在让开发者无需重建整个应用,就能更换模型、智能体框架和支持服务。

例如,any-llm 为不同模型提供商提供通用接口。any-agent 创建了一个用于运行和比较智能体框架的共享层。Llamafile 将模型打包,使其能够通过单个可执行文件在本地运行。

这些项目并不能消除依赖。一家公司仍依赖模型、基础设施、连接器和安全控制。开放组件也可能引入由托管平台承担的维护工作。

它们的重要性在于保留选择空间。开发者可以将敏感工作路由到本地模型,对高要求推理使用另一家提供商,并替换服务条款不再合适的服务。

随着智能体获得更多权限,这种灵活性变得更重要。更换一个文本生成器相对直接;当工作流、政策和记忆都围绕着某个连接公司系统的智能体积累后,替换它就会变得更困难。

因此,Mozilla 的未来愿景取决于互操作性,也就是不同系统能通过定义好的接口交换信息。互操作性降低了更换模型或迁移上下文的成本。

它也使多个层面上的竞争成为可能。模型公司在智能水平和效率上竞争;智能体框架在编排能力上竞争;记忆系统则在检索、控制和可移植性上竞争。

封闭平台也可以提供类似控制,一些平台已经允许管理员选择模型或限制数据访问。开放性并不会自动带来更好的隐私或安全性。

区别在于,用户是否能独立检查、修改和迁移系统的关键部分。源代码可用性也让外部开发者能够审视实现选择,而非完全依赖供应商的描述。

Mozilla AI 面临的挑战是将这种灵活性转化为连贯的产品。大多数用户并不想在让智能体总结项目之前,先选择五个基础设施组件。

成功的开放系统必须隐藏不必要的复杂性,同时暴露有意义的选择。它应让安全路径易于理解,而不要求每位用户都成为 AI 工程师。

这种平衡并不容易。抽象太少会让用户管理脆弱的集成;抽象太多则会重建 Mozilla 希望挑战的不透明平台。

只有当开放工具变得更易部署和治理时,结果才会对封闭提供商形成压力。单凭理念吸引力,无法克服一个更慢、更不可靠或更难支持的产品。

更多个人上下文带来更严重的风险

让智能体真正有帮助的信息,也会增加错误、操纵或未经授权访问所造成的损害。

普通聊天机器人可能会给出错误答案。连接型智能体则可能据此采取行动。它可能发送消息、编辑记录、运行代码,或通过另一项服务泄露信息。

NIST 将智能体定义为反复提示模型、处理输出并调用函数的系统。其智能体安全分析警告称,工具访问会带来超越错误文本本身的风险。

一项重要威胁是间接提示注入。恶意指令可能隐藏在网页、电子邮件、文档或智能体读取的其他材料中。

如果智能体将这类指令视为可信内容,攻击者就可能改变其行为。智能体可能暴露数据、滥用已连接的工具,或执行用户从未打算进行的操作。

NIST 表示,现有缓解措施无法针对所有提示注入技术提供完整保护。它建议在设计系统时假设暴露风险仍然存在。

这种不确定性挑战了 Mozilla AI 愿景中最顺畅的一面。透明度和开放代码有助于审查,但并不能保证连接型智能体会安全行事。

人工审批同样存在局限。人们经常在未仔细检查的情况下接受提示,尤其是当反复确认打断熟悉的工作流程时。

智能体可能以技术上准确、但在实际中毫无意义的请求淹没用户。如果用户看不到是哪个文档、出于何种目的、在多长时间内被访问,“允许访问文档”几乎说明不了什么。

因此,有效控制需要具体的权限。起草电子邮件的智能体不应自动获得发送邮件的权限。研究智能体也不应获得对支付系统的无限制访问权。

日志同样重要。用户和管理员需要了解智能体检索了哪些信息、由哪个模型处理、调用了哪些工具,以及随后执行了哪些操作。

记忆会带来另一项脆弱性。错误的上下文可能持续存在,并影响未来决策。如果检索边界失效,敏感细节可能会在无关任务中再次出现。

隐私政策无法解决所有风险。斯坦福大学研究人员审查了六家主要 AI 开发商的文档,发现其中涉及数据保留、训练实践和透明度有限等问题。

由此产生的聊天机器人隐私研究认为,用户应谨慎分享敏感信息。研究还呼吁采用明确同意机制并加强隐私保护。

Mozilla 可以通过更严格的默认设置、本地处理和用户可见的记忆功能形成差异化优势。不过,这些选择仍需通过已部署的产品、审计和易于理解的控制机制来证明。

当数据留在设备上时,本地处理尤其有用。它减少了将私密材料传输到远程服务的需要。

然而,本地并不自动等于安全。恶意软件、共享设备、薄弱的访问控制和存在漏洞的集成,都可能暴露本地存储的信息。

本地模型在高难度任务上的表现也可能落后于更大型的托管系统。混合系统可以在本地处理敏感上下文,同时针对特定推理任务使用远程模型。

这种设计也带来了自身的问题。系统必须决定哪些内容会离开设备、哪些内容应从提示中移除,以及将结果发送给哪项远程服务。

这些风险并非反对个人智能体的理由,而是应当从权限设计、可追溯性、数据最小化和恢复机制来评判它们的原因。

只有当用户能够理解并撤销 Mozilla AI 智能体的操作时,它们才能赢得信任。如果错误操作依然难以撤销,可见的批准按钮就没那么重要。

个性化应拓展判断力,而非削弱它

个人智能体的成功,在于提升用户思考、比较和决策的能力,而不是让决策过程消失。

自动化通常承诺消除日常事务。对于格式整理、信息检索、提醒和系统之间的重复传输而言,这一目标是合理的。

然而,知识工作中包含许多看似重复、却承载重要上下文的决策。选择证据、处理相互矛盾的说法,或调整项目优先级,都需要判断力。

智能体可以通过汇集相关信息来支持这些决策。它可以展示摘要背后的文档,指出缺失的证据,并呈现值得关注的分歧。

它不应将每一项冲突压缩成一个自信的建议。隐藏不确定性的回答,可能让用户更快,却也让他们掌握的信息更少。

这正是辅助与替代之间差异变得实际的地方。辅助会保留决策节点,并改善该节点可获得的材料。

替代则会移除决策节点,或让自动化选择难以审查。它可能适用于低风险操作,但在后果重大时会很危险。

设想一名工程师正在调查生产事故。智能体可以搜索日志、关联近期变更,并提出可能原因。

有价值的输出应包括证据、时间戳和替代解释。单一且缺乏支持的诊断会鼓励过早行动,并可能延长故障时间。

对于研究人员,智能体可能连接多篇论文中的笔记。它应保留引用,并将作者的发现与智能体的解释区分开来。

对于管理者,智能体可能生成每周摘要。它应区分已完成的工作与尚未解决的主张,并允许管理者检查底层来源。

这些能力依赖于知识融合,即谨慎结合个人上下文、组织数据和外部信息。来源应保持足够可见,以便验证。

个性化也可能形成过滤气泡。了解用户偏好的智能体,可能反复选择熟悉的观点,并压制有价值的分歧。

旨在增强判断力的系统有时应当挑战用户。它可以标记薄弱证据,提出可信的反驳观点,或在指令冲突时要求澄清。

这种行为可能不如持续赞同那样立即令人满意,但它更符合维护人的自主性。

设计目标应是经过校准的授权。用户会根据任务、涉及的信息以及出错成本,授予不同层级的权限。

日历智能体可以在既定范围内安排内部会议。但在取消对外承诺或共享机密材料前,它应请求批准。

写作智能体可以自动修正格式。但它应标识实质性修改,并保留作者接受或拒绝修改的能力。

这些区别要求产品团队建模后果,而不仅仅是能力。“智能体能否执行这项操作?”与“它何时应执行这项操作?”并不是同一个问题。

如果其系统能让这些层级清晰可见,mozilla future 才会可信。用户需要针对访问、记忆、操作、审查和删除的易于理解的设置。

这一愿景也改变了衡量 AI 性能的方式。完成率和响应速度只能反映部分价值。

开发者应考察用户能否发现错误、理解来源、撤销操作,以及将其上下文迁移到其他地方。这些指标能揭示个性化究竟是在增强用户自主性,还是在悄然削弱它。

三个信号将检验 Mozilla 的个人 AI 愿景

Mozilla 的论点如今需要通过可用产品、可迁移上下文,以及能经受真实智能体工作流考验的安全实践来证明。

第一个信号是 Mozilla AI 能否将选择权与简洁体验结合起来。其开放项目覆盖了多个重要层面,但普通用户接触的是产品,而不是架构图。

关注 Octonous 如何处理模型选择、已连接应用、操作批准,以及从工作场所文档中检索信息。关键考验在于,控制权是否能在日常使用中保持清晰。

如果用户无需破坏既有工作流程,就能更换模型或撤销访问权限,Mozilla 的论点就会更有说服力。如果灵活性带来令人困惑的设置和不可靠的行为,封闭套件仍将保有优势。

第二个信号是迈向可迁移记忆的进展。用户需要切实可行的方法来导出有用上下文、检查已存储的结论,并在兼容系统之间迁移。

基础的数据下载并不足够。可迁移的 AI 记忆必须在排除未经用户授权的信息的同时,保留来源、权限和结构。

斯坦福大学的 Human Context Protocol 等标准提供了一个可能方向。Mozilla 的开源立场使其成为更广泛互操作性工作中的天然参与者。

如果多个产品能安全使用同一份由用户治理的上下文,个人 AI 对单一平台的依赖就会减弱。如果记忆仍属专有,个性化将强化现有的锁定效应。

第三个信号是围绕连接型智能体的安全证据。模型基准测试几乎无法揭示智能体是否能负责任地处理权限、恶意文档和失败的工具调用。

关注有记录的威胁模型、外部测试、有用的审计日志,以及针对重要操作的严格默认设置。还要观察部署方案是否在不让个人用户失去权力的情况下,为管理员提供清晰控制。

安全事件同样具有参考价值。决定性因素并不是任何系统是否会遇到漏洞。复杂软件不可避免地会出现问题。

关键在于 Mozilla 是否能发现问题、解释影响范围、支持恢复,并公开改进其防护措施。开放开发为外部审查创造了机会,但前提是发现的问题会促成行动。

Mozilla 无需击败每一家主要 AI 公司,也能影响这个市场。浏览器、开放标准和隐私工具之所以常常重要,是因为它们建立了替代方案并提高了预期。

它更大的贡献可能是为个人 AI 提供一个可用的定义。按照这一定义,智能体之所以是个人的,是因为其忠诚、记忆和权限始终与用户绑定。

这一目标比给聊天机器人添加个人资料更难。它要求在存储、权限、模型路由、界面和商业激励等方面作出选择。

未来几个月应能显示,Mozilla 是否能将这些选择转化为人们愿意托付真实工作的产品。mozilla future 取决于开放性和控制权能否与便利性共存的证据。

对于用户而言,问题已不再是 AI 是否会变得更加个性化。随着助手获得记忆和工具访问权,这一过程已经在进行。

更好的问题是,谁会从这种亲密性中受益。在将另一个智能体连接到你的工作之前,请检查它记住了什么、能够做什么,以及你是否能完整带走自己的上下文。

 
 

免费开始

一款本地优先的AI助手

为了获得更好的人工智能体验,

remio 目前仅支持Windows 10+ (x64)M-Chip Mac

你的 AI 工作伙伴

remio 一起高效工作

规划、创作、交付

一站式完成

bottom of page