top of page

腾讯 AI 生物学警告令开放模型发布受到审视

19分钟前
讀畢需時 13 分鐘
Generic biology laboratory research; not a Tencent laboratory or experiment. Credit: Edward Jenner. Source: https://www.pexels.com/photo/man-using-a-microscope-inside-the-laboratory-4033020/. Pexels License.
Generic biology laboratory research; not a Tencent laboratory or experiment. Credit: Edward Jenner. Source: https://www.pexels.com/photo/man-using-a-microscope-inside-the-laboratory-4033020/. Pexels License.

腾讯首席 AI 科学家姚顺雨警告称,AI 日益增强的生物学能力可能造成严重伤害,使开放模型的发布受到审视。据《南华早报》报道,这一腾讯 AI 生物学警告针对的是他预计将会发展的能力,而非证明 AI 已经能够控制生物学的证据。这一区别对于寻求更好工具的研究人员,以及决定模型应在多大范围内分发的开发者而言至关重要。

据对其在香港发言的报道,姚顺雨承认将先进模型保持闭源的安全理由,同时也认可开放所带来的益处。Anthropic 提供了一个有益的对照:由于担忧危险的科学协助,它已对某些模型采取了更严格的保障措施。核心冲突在于获取有用研究能力与限制其被滥用的能力之间的平衡。

这一警告给腾讯及其同行留下了一个现实问题:什么证据能够证明,发布一款帮助人们推理生物学问题的模型是合理的?回答这一问题,需要区分科学知识、研究协助,以及在物理实验中可靠的表现。这些能力彼此重叠,但将其视为可以互换,便会导致薄弱的安全主张和夸大的标题。

腾讯 AI 生物学警告涉及的是一个门槛,而非已被证明的精通能力

据次日发布的报道,姚顺雨于 11 月 7 日在香港的一场科学活动上发言。《南华早报》描述了他对于 AI 即将具备生物学能力的警告。The Next Web 随后报道称,他敦促发布可下载模型的开发者认真对待安全问题。其报道还称,他担忧生物学风险可能比网络安全风险更难管理。这些都是经报道的判断,而非独立验证的能力发现。生物风险警告确立的是他的立场,而非已被证明的有害结果。

这场活动是一位高级开发者就发布责任发出的警告,而非宣布 AI 已掌握生物学。

这一框架改变了读者解读标题的方式。精通意味着在一个领域内具备广泛且可靠的能力。生物学涵盖分子相互作用、细胞行为、生物体、环境和实验方法。一个系统可以在狭窄的预测任务上表现出色,同时在其他方面仍不可靠。它也可以提供有用协助,而不理解影响一项实验的每一个因素。

危险能力门槛提出的是一个更狭窄的问题:获得该系统的访问权,是否会实质性提升某人造成伤害的能力?这一门槛不必要求全面的科学能力。反过来,令人印象深刻的科学回答也无法证明某人能够将其转化为可运作的现实流程。

这给模型开发者带来了令人不安的责任。公司不能仅凭模型在生物学考试中取得高分就解决这个问题。它也不能仅仅因为模型缺乏通用的科学精通能力,就否认该问题。两种回应都是以方便的衡量指标替代真正重要的能力。

因此,腾讯 AI 生物学警告值得关注,但不应将其暗示的时间表视为既成事实。“很快”一词表达的是预测,并未指出经过验证的发布日期、测得的概率,或区分安全模型和危险模型的普遍边界。

读者还应区分公开表态与公司政策变化。科学家承认限制访问的理由,并不一定意味着公司已经放弃开放发布。得出这一结论需要有关于分发、访问条件或被保留能力的文件化决定。

眼下的变化在于围绕这些决定展开的公开讨论。开放性如今必须与以下说明一并得到辩护:模型能够实现什么、如何评估这些能力,以及在分发后哪些保障措施依然有效。

对腾讯而言,可信度的考验在于未来的文档是否清晰呈现这些区别。一项明确的评估应识别被评估的能力、承认不确定性,并说明发现如何影响发布条件。缺少这种关联,警告或许能吸引关注,却仍让实际的分发决定难以评估。

开发者面临解释其模型能够实现什么的压力

承受压力的利益相关方不止发布模型的公司。研究机构、软件开发者、云服务商和企业采购方都在对访问权作出决定。每一方都需要与自身责任相匹配的证据。当拟议用途涉及敏感科学工作时,“模型是安全的”这类笼统说法几乎没有帮助。

开发者需要解释其系统带来的新增能力,而不能依赖令人安心的标签。

有用的概念是能力提升,即可归因于获得 AI 系统访问权的个人表现改善。相关比较对象很重要。胜过没有辅助的参与者,与胜过已经拥有搜索工具、参考资料和适当专业知识的人并不相同。

对于模型开发者,问题关乎分发。一项拟议发布是否会带来新的风险,而现有控制措施能够有意义地降低这些风险?对于研究机构,问题关乎授权:哪些用户应在何种监督下获得哪些功能的访问权?

企业采购方也面临相关的采购问题。一个模型可能在广泛评估中表现良好,却缺少针对专业工作流程的证据。采购方应将供应商的通用能力排名视为起点,而非替代对预期应用的评估。

这些是姚顺雨警告所带来的分析性含义,并非据报道对腾讯客户施加的新要求。现有报道并未证明存在新的合规义务或全行业限制。不过,它确实让认真负责的采购方在扩大访问权之前应提出的问题变得更加明确。

设想一个示例性的制药研究团队使用 AI 整理出版物,并识别需要进一步研究的问题。该工作流程不同于允许软件启动物理实验。将同一助手连接到额外工具,会改变其权限、可能后果和监督需求。

在讨论 AI 智能体时,这一区别尤其重要:它们是通过连接的工具执行任务的软件系统。助手的文本输出与智能体被授权执行的操作带来不同的风险暴露。仅评估底层语言模型,会使已部署系统的一部分未受到审查。

因此,文档和系统设计层面的压力是即时的。长期后果取决于评估揭示了什么。如果一个系统在敏感任务上提供了实质性协助,开发者就需要为其访问规则给出站得住脚的理由。如果没有,限制措施仍需有相称的理由。

科学用户也有理由担忧过度控制。不明确的限制可能中断正常研究,并使相关决定难以被质疑。可信的安全方法应同时说明它所针对的风险,以及旨在保留的合法工作。

困难的工作介于全面开放与一概拒绝之间。机构需要反映能力、权限和背景的边界。这要求比有关科学智能的标题所能提供的更详细证据。

开放访问与有效保障措施拉向不同方向

开放权重模型会分发在开发者托管服务之外运行模型所需的已学习数值参数。这可以支持独立研究、本地部署和修改,但也会改变模型发布后由谁控制系统。

托管服务可以保留对访问和运行的集中控制。一旦可下载的权重开始流传,原始开发者通常无法对每一份副本实施同等控制。这并不意味着每个开放模型都不安全,而是说明安全论证必须考虑不同的分发结构。

核心权衡在于:谁能够使用科学能力,以及谁保留限制这些能力的权力。

Anthropic 提供了一个具体对照。2025 年 5 月,该公司在 Claude Opus 4 推出之际启用了更严格的部署和安全标准。公司描述了应对潜在滥用的措施,涉及化学、生物、放射性和核武器。其AI 安全保护措施既涵盖了对令人担忧的协助的访问,也包括防止模型权重被盗。这是一项公司安全决策,而非独立证明有害结果可以实现的证据。

这一区别避免了误导性的比较。不能仅因为腾讯和 Anthropic 描述了不同的发布方法,就将其评为更安全或更不安全。它们的模型、评估、访问安排和保障措施都需要依据自身情况进行审查。

闭源访问保留了某些执行控制的选项,但也带来其他问题。外部研究人员对测试的可见性可能有限。用户依赖提供商持续提供服务及其政策。集中控制也可能将重要判断留在其激励机制值得审视的公司内部。

开放访问带来了不同的益处和限制。独立研究人员可以在不完全依赖托管界面的情况下审查行为。组织可以使系统适应本地要求。然而,更高的可检查性并不能保证每一种下游部署都会接受审慎的安全审查。

腾讯 AI 生物学警告使这种张力成为焦点,因为科学实用性无法被整齐地划分为无害知识和危险知识。双重用途描述的是既能服务有益目的,也可能具有有害应用的研究或技术。同一种广泛能力可以同时促进两者。

这种重叠使简单的内容分类不足以应对问题。在一种研究背景下合法的讨论,在另一种背景下可能令人担忧。评估需要考虑所请求的协助和周围权限,而非假定科学词汇本身就能表明意图。

发表研究发现与分发可适配模型之间也存在差异。科学论文传达经过选择的结果。模型权重提供的是一个可重复使用的系统,其他人可以修改并与额外软件结合。这些发布所附带的责任彼此相关,但并不相同。

相称的方法应将分发选择与关于能力及现有控制措施有效性的证据联系起来。风险较低的系统可能有理由广泛开放。更令人担忧的能力则可能需要额外审查或受限部署。这些是可能的治理选择,而非经验证的腾讯政策。

实际标准在于一致性。如果一家公司认为生物能力需要谨慎对待,其发布文件应说明这种谨慎如何影响决策。如果它认为开放有利于安全,就应解释具体产生了哪些益处,以及如何处理剩余风险。

科学进展并不等于可靠的生物学执行能力

AI 在生物学领域的发展有充分理由令人振奋。但也很容易将一个范围有限的结果,夸大为对整个领域都缺乏依据的主张。当这些区别被忽略时,安全争论就更难解决。

AlphaFold 3 展示了范围明确的重要进展。该研究于 2024 年 5 月发表在 Nature,描述了涉及蛋白质及其他分子成分复合物的预测。其生物分子相互作用预测将结构预测扩展到了多种相互作用类型。这一结果支持的是有关预测能力的具体主张,而非 AI 能够可靠开展生物学研究的笼统说法。

有科学价值的预测,仍不同于经过验证的实验结果或可靠的现实世界结果。

对于领域外读者而言,分子结构涉及分子或相互作用复合物中原子的排列方式。预测这种排列可以帮助研究人员决定哪些假设值得进一步研究。但这并不会自动证明某项拟议疗法在人体内的表现。

研究团队可能会利用预测结果来确定后续研究的优先级。但他们仍需要获得能够回答研究问题的证据。一项有前景的计算结果,并不能消除有关实验条件、测量或实际相关性的不确定性。

这一局限在科学讨论中已有充分认识。Nature Methods 的一篇论文强调,AlphaFold 输出能提供有价值的假设,但与结构细节相关的部分仍需要实验验证。其对实验结构验证的分析支持对预测作出审慎解读,包括关注不确定性以及模型范围之外的相互作用。

这种谨慎并不意味着这些工具不重要。即使实验仍不可或缺,改进假设筛选也可能具有价值。科学进步往往来自于减少某一特定阶段的不确定性,而不是消除后续的每一个障碍。

同样的推理也适用于安全问题。一个系统不需要自动化完成整个有害流程,才会引发担忧。能够减少关键障碍的协助值得评估。然而,在某个孤立环节展现能力,并不能证明它可以可靠地完成整个流程。

这正是“掌握生物学”这一说法将过多内容压缩进过少文字的原因。它掩盖了哪项任务有所改善、谁会受益,以及哪些部分仍然困难。更具体的描述能为评估科学价值和滥用风险提供更坚实的基础。

与 AlphaFold 的比较也避免了一种类别错误。专门的预测模型和通用对话助手是不同类型的系统。它们的评估应反映各自的功能。一个系统的强劲表现并不会自动迁移到另一个系统。

对开发者而言,这意味着应同时报告具体能力与局限。对采购方而言,这意味着应询问结果是否符合预期应用。对读者而言,这意味着应避免从令人印象深刻的演示,直接跳到关于自主科学的宏大结论。

通过这些区别来理解,Tencent 的警告会更有意义。其重要性在于预见具有重要后果的协助能力,并准备恰当的防护措施。它并不要求人们接受每一道剩余的科学障碍都即将消失这一观点。

生物风险证据仍取决于测试方式

最有力的怀疑论回应,是追问证据是否测量了其所声称的风险。这比假定所有警告都被夸大,或把每一个令人担忧的回答都视为危险证明更有用。评估设计会改变结果的含义。

RAND 于 2024 年 1 月发布的一项研究,将在语言模型协助下进行的生物攻击规划,与仅使用互联网的条件进行了比较。研究发现,对于所测试的模型,计划可行性并不存在统计学显著差异。其生物风险评估也强调需要监测后续系统。这些发现涉及早一代模型在规划任务上的表现,而非所有可能的生物学应用。

无论是旧的阴性结果,还是新的令人警觉演示,都无法确定另一套系统所带来的风险。

统计学上不显著的结果意味着,该研究在其方法下未能证明所测试的差异。这并不证明该差异始终不存在。同样,狭窄任务上的阳性结果,也不应被视为对现实世界伤害的测量。

《International AI Safety Report 2026》描述了能力提升与现实世界增益证据不一并存的情况。报告指出,较新的发现显示了代理任务上的协助能力,以及影响早期研究的局限性。代理任务代表研究人员无法直接适当测试的结果。其生物能力评估支持持续开展评估,同时保留对其能否转化为实际伤害的不确定性。

分析上的挑战在于连接这些不同层次的证据。知识测试评估回答。受控演练评估限定环境中的表现。现实部署则引入更多用户、工具、权限和激励机制。在一个层次上得到支持的结论,若要延伸到另一个层次,就需要额外论证。

参与者选择同样重要。一个帮助新手整理信息的工具,对专家可能几乎没有额外价值。反过来,对专家有用的协助,也可能依赖新手不具备的知识。平均分数可能掩盖这些差异。

比较条件也值得关注。互联网访问、参考材料及其他软件本就能提供大量协助。评估者需要识别模型带来的额外贡献,而不是将整个任务结果都归因于 AI。

防护措施测试提出了一个独立问题。评估一个不受限制的系统能做什么,与测试已部署服务允许什么不同。两者都可能相关。若不说明条件便合并两者的结果,安全结论就很难解读。

公开披露也存在边界。有用的评估摘要可以描述方法、不确定性和发现,而不公布可能促成滥用的细节。透明度应支持独立评估,同时避免不必要的操作性信息。

这些考量直接适用于 Tencent。任何公开的安全结论都值得从其范围、方法及其与发布条件的关系来审查。公司的内部阈值具有参考价值,但仅凭其标签无法证明它与另一家开发者标准相比处于何种水平。

因此,怀疑论立场强化了对证据的要求,而非否定担忧。问题在于:哪些能力发生了变化、在什么条件下发生变化,以及控制措施是否针对这些能力。这正是评估接近阈值警告应采用的标准。

关注发布证据、独立测试与访问决策

未来数月,最有价值的发展将涉及读者能够审阅的文件和决策。与将能力联系到具体发布版本的证据相比,另一项有关科学智能的预测价值更低。

下一个有意义的信号,是警告是否会产生可测试的主张与可见的访问权限变化。

首先,关注 Tencent 的模型发布文件。重要信息在于:经评估的生物能力与分发条件之间的联系。一份有用的评估应说明测试了什么、哪些方面仍不确定,以及为何选择相应的访问安排。

这类文件将强化这样一种论点:该警告反映的是操作层面的安全担忧。没有支撑方法的笼统保证,会让核心问题仍悬而未决。文件延迟发布会造成信息缺口,但本身并不能证明模型具有危险性。

其次,关注对相关系统的独立评估。比较应区分模型协助与用户已经拥有的资源。它们还应识别参与者的专业程度,并说明结果涉及的是知识、受控表现,还是更广泛的执行能力。

若有证据表明模型提供了有意义的额外协助,将强化实施针对性防护措施的理由。若发现增益有限,则会削弱有关即时危险的泛化主张。无论哪种结果,都比一般能力排名更具信息价值,因为它直接回应了实际问题。

第三,关注开发者和研究机构是否改变访问安排。相关信号包括有文件记录的限制、审查程序,或针对敏感功能的新监督机制。关键在于,这些决定是否源于明确的能力发现,并为合法工作保留适当渠道。

访问权限变化不会自动验证每一项警告。它可能反映了不确定性下的谨慎。其意义取决于所提供的证据、受影响的能力,以及控制措施是否针对已识别的担忧。

对企业采购方而言,实际影响是保留采纳决策背后的推理过程。团队需要知道他们评估的是哪个模型版本、它获得了哪些权限,以及哪些限制影响了批准决定。当能力或部署条件发生变化时,清晰的文件能让后续重新评估更加容易。

这也是一个知识管理问题。可搜索的知识库可以帮助团队保留评估报告和内部决策。整理这些记录有助于审查,同时仍应由具备资质的专家负责评估科学与安全影响。

应将 Tencent 的 AI 生物学警告视为更仔细审读能力主张的理由。先从模型实际执行的任务入手。询问它提供了哪些额外协助、评估了哪些用户,以及防护措施是否与部署相匹配。将科学收益、滥用潜力与已证明的执行能力区分开来。当下一次发布到来时,应将其证据与访问规则进行比较,而不是依赖标题或安全标签。阅读底层评估,保留其中的局限,并核查独立发现是否支持开发者的结论。在赋予 AI 系统更广泛的科学工作角色之前,你的团队能否说明为何它的能力与权限足以证明这一决定合理?

 
 

免费开始使用

一款本地优先的AI助手

为了获得更好的人工智能体验,

remio 目前仅支持Windows 10+ (x64)和M-Chip Mac 。

你的 AI 工作伙伴

和 remio 一起高效工作

规划、创作、交付

一站式完成

bottom of page