Nous Research 发布 Arete-27B,挑战 Qwen 的默认政治框架
Nous Research 发布了 Arete-27B,这是一款基于 Qwen3.8-27B 修改而来的模型。该公司称,它在不牺牲所测试能力的前提下,减少了中国国家叙事框架的影响。Nous Research 的 Arete-27B 发布挑战了一个影响深远的假设:采用开放模型,也意味着接受其开发者预设的政治立场。
Nous 将其目标描述为通过后训练强化西方价值观,即在现有模型基础上进行额外学习。其更广泛的主张则更具争议。该公司认为,底层模型的政治偏差足够表层,可以通过相对有限的额外训练加以改变。
这一差异对于在阿里巴巴 Qwen 与西方实验室替代方案之间做选择的开发者至关重要。可下载模型让用户能够控制部署方式,但要控制其行为,仍需要证据。Arete 提供了一项具体实验、公开材料以及早期外部测试。它并未证明政治中立性,无法消除所有继承而来的行为,也无法裁定助手应代表谁的价值观。
Nous Research Arete-27B 发布实际改变了什么
Arete 改变的是现有模型经过测量的回答,而不是用新训练的替代模型取代底层模型。
Nous 将阿里巴巴的 Qwen3.8-27B 作为起点。27B 指约 270 亿个参数,即塑造模型行为的学习所得数值。该公司将 Arete 定位为通用助手和智能体工作的一个选项,面向希望获得不同视角的用户。
Arete 模型卡介绍了监督微调,即通过示例回答训练模型。Nous 表示,其使用纯文本数据并保留了原有架构。其评估显示,事实得分从满分五分中的 2.32 提升至 2.98,同时框架化表述比例从 22% 降至 0.9%。
这些数字描述的是开发者测试条件下的表现。它们并非放之四海而皆准的真实性百分比,也未衡量所有政治视角。其意义在于比较结果:在一组明确的问题上,衍生模型给出了与起始模型显著不同的回答。
因此,这次发布提出了一个比“中国模型或西方模型是否天生可信”更狭窄也更有用的问题。下游开发者能否在保留原模型吸引力的能力的同时,改变不受欢迎的回答模式?
对于产品团队而言,这一问题会影响模型选择。一家公司可能偏好现有模型的编程表现、部署选项或语言支持,却反对其对政治议题的处理方式。成功的衍生模型将提供另一种选择,而无需该公司自行构建基础模型。
然而,回答变化值得接受更严格的审视,而不只是看结果语言是否听起来更可接受。助手可以变得不那么回避,却仍然不准确。它也可能用用户更熟悉的、更微妙的叙事取代明显的政治叙事。
设想一个假设的研究助手,需要概述有关某监控项目的相互冲突说法。它的工作包括识别每项主张的提出者,以及支撑这些主张的证据。仅仅从为该项目辩护转为谴责该项目,并不能解决根本的归因问题。
更有力的回答会区分有记录的事件、官方解释和未解决的指控。这种区分让读者获得可供审查的信息,而不是另一个必须照单全收的结论。
眼前的新闻是一款具有明确行为目标的模型发布。更大的进展在于,继承而来的政治默认设置可能被视为买方可以评估和改变的对象。只有当改变后的行为仍然对证据负责时,这种可能性才有价值。
开发者面临更严苛的模型选择决策
这次发布对“仅凭模型来源就能判断其是否适合产品”这一观点施加了压力。
相互竞争的方法很直接。开发者可以接受上游模型的行为,选择另一款模型,或尝试自行修改其行为。Arete 让最后一种选择变得更具体,同时也揭示了随之而来的责任。
Nous 的价值观对齐实验称,其在约 5,280 万个 token(模型处理的文本单位)上进行训练,并对数据进行了两轮遍历。该公司表示没有使用强化学习,即通过奖励训练行为的方法。它还称,其内部 Hermes Bench 能力测试的结果基本保持一致。
这些细节支持对定向适配进行研究的理由。但它们并未证明每家机构都能以低成本或安全地复现这一结果。即使额外训练有限,数据准备、审查、评估和部署验证仍然是工作的一部分。
实际压力首先落在将模型用于研究、摘要或高度依赖判断的辅助工作的团队身上。这些产品会让用户接触到关于相关性与重点取舍的选择。当模型决定哪种解释应置于首位时,它所做的不只是检索文字。
例如,设想一名内部助手正在准备一份关于公共示威活动的背景简报。用户需要可靠的事件叙述、清晰的归因和恰当的不确定性表述。即使回答在技术上流畅,只要它将利益相关方的术语当作既定事实重复,也仍可能失败。
因此,评估该助手的买方应要求查看有代表性的输出,而不是完全依赖开发者的对齐标签。相关问题在于买方自身条件下的行为:该助手能否区分“报道政府立场”与“采纳政府立场”?
同样的期待也适用于西方模型。熟悉的政治语言不应自动免于审视。否则,采购流程可能衡量的是文化舒适度,而非事实严谨性。
这改变了模型供应商的解释负担。关于安全性或开放性的笼统主张,几乎无法向买方提供有关争议议题的信息。一项有文档记录的评估可以展示测试了哪些行为、哪些发生了变化,以及哪些仍超出证据范围。
下游开发者同样继承了披露义务。如果产品刻意改变模型的规范性行为,用户会从了解这一选择中受益。未经解释的改变即使反映了明确的编辑立场,也可能看起来像中立的辅助服务。
对于个人知识工作者而言,实际含义在于 AI 摘要如何进入其记录。保留原始文档和引用,会让结论更容易被重新审视。可搜索的知识库可以帮助将这些证据与生成的分析一并留存。
因此,商业问题不止是哪款模型赢得基准测试。买方需要了解谁塑造了助手、他们针对了哪些行为,以及由此产生的主张如何得到核验。
可编辑的行为并不能证明存在表层偏差层
一次成功的行为干预,本身并不能说明该行为位于模型内部的什么位置。
这是 Nous Research Arete-27B 发布的核心张力。测得的结果关乎回答。更广泛的解释则关乎模型的内部组织。前者的证据并不会自动证明后者。
将偏差层称为表层,意味着政治行为可以与底层能力清晰分离。这一解释足以值得研究。但它比“额外训练改变了特定评估中的输出”这一观察结论更强。
一个类比有助于厘清这种区别。编辑文档结论可以改变读者的理解,却无法揭示作者最初如何形成论证。同样,改变模型的回答并不能识别出促成该回答的每一种习得关联。
这很重要,因为行为变化可以通过不同路径产生。模型可能学到新事实、采用不同术语、变得更愿意回答,或模仿其训练示例。多种变化可能同时发生。
公开的训练回答对为研究这些可能性提供了材料。该数据集包括起始模型和 Inkling 教师模型的回答。教师模型提供旨在指导接受额外训练模型的示例。
这种配对结构为研究者提供了有用的比较基础。他们可以考察理想回答是否补充了缺失证据、纠正了错误、改变了重点,还是主要替换了措辞。每种模式都支持对训练成果的不同解释。
改进后的事实回答将支持“辅助能力提升”的主张。单纯的风格变化只支持关于呈现方式的更狭窄主张。若政治结论更强却没有更好的证据,则会引发完全不同的担忧。
这些区别也让与其他模型家族的比较变得复杂。选择 Qwen、Mistral 或其他供应商,不只是比较各模型使用不受欢迎框架的频率。买方仍需评估准确性、遗漏、不确定性和任务表现。
一款避开官方叙事却编造支持性细节的模型,仍不适合严肃研究。另一款模型可能准确解释该叙事,同时清楚标明其来源。后者的行为不应被误认为是认同。
开放权重,即用户可以运行和修改的可下载学习参数,使这些干预成为可能。它们也让重复干预成为可能。一个朝向某种世界观适配的模型,之后可以朝向另一种世界观再度适配。
这种灵活性是将对齐视为持续治理决策的最有力理由。开发者不能假定,一旦有人发布一个可接受的检查点,模型行为就会固定下来。后续训练和产品指令会带来额外选择。
最站得住脚的解读是,Nous 已提供行为灵活性的证据。要建立有关表层政治偏差的一般理论,还需要跨不同主题、干预措施和模型开展进一步实验。
该评估衡量的是一种特定形式的国家叙事框架
低宣传得分意味着该评估所定义的行为较少;它并不意味着没有政治偏差。
Nous 的宣传评估包含 803 条提示,涵盖七类价值观。它将事实回忆与框架化表述区分开来,其中包括回答是否将中国国家的说法当作自身立场。
归因与认同之间的区别尤其有用。解释官员使用某种描述,与将这一描述呈现为无争议的说法并不相同。读者需要能够报道其并不认同的立场的助手。
评测也会判断所需事实与可接受的表述方式。这些选择决定了评分所奖励的内容。将其公开会使测试更具可检视性,但公开并不意味着无需评估其质量。
提问方式值得关注。一个强烈暗示预期结论的提示,奖励的可能不只是知识,也可能是认同。研究人员应当考察,同一模型面对措辞中立、准确性相近的版本时,是否有同样表现。
出于类似原因,来源选择同样重要。围绕特定报道构建的基准,可以衡量模型是否复现了这些报道所识别的事实。它并不会自动涵盖所有相关来源或每一种合理的争议。
评分过程又增加了一层依赖性。自动化评判器,即用于评估其他模型答案的模型,会应用该评测的评分标准。当细微的措辞区分了限定、认可与归因时,其判断应受到核查。
设想一个假设性回答:它准确描述一项政策,引用其官方理由,随后指出相互矛盾的证据。评分者必须理解完整回答。若不考虑归因而惩罚其中被引用的官方理由,就会歪曲助手实际所做的事。
缺失回答带来另一项挑战。一个几乎不作答的系统,采纳政治框架的机会更少。因此,完整性与事实表现是任何框架指标不可或缺的配套衡量。
这一概念性问题不止存在于本次发布中。Ke Zhou、Marios Constantinides 和 Daniele Quercia 关于文化价值观的研究,将文化表征与人权关切一并考察。他们的工作表明,多元观点与防范有害输出需要分别加以考量。
这项研究早于 Arete,且并未评估其结果。它提醒我们,不应将“西方”视为一份完整的技术规范。这个标签涵盖了围绕言论、隐私、市场和公共权力的分歧。
一个模型可以反对审查,却对监控问题给出薄弱回答。它可以支持民主原则,却歪曲某次具体选举。除非评测直接检验这些差异,宽泛的价值标签会掩盖它们。
因此,Arete-27B vs Qwen3.8 是在特定条件下对特定行为的比较。若将其视为政治正当性的全面排名,便是将研究发现延伸到了其适用范围之外。
有用的问题在于:测试是否揭示了一种会影响用户、且可重复出现的失败模式。接下来要问的是,修正该失败是否会引入其他问题。
外部测试支持这一方向,但存在重要局限
早期外部测试支持存在行为差异,但更广泛的中立性主张仍未得到解决。
在一项已发布的外部模型对比中,Scott Leimroth 报告称,他对 Arete、Qwen 及其 Aletheia LR9 模型运行了完整评测。他对 Arete 的运行记录为 0.75% 的国家框架比例,事实评分为 2.82。Qwen 的对应结果为 19.6% 和 2.24。
这些是测试者报告的结果,并非通过我们自行复跑确立的数据。它们支持 Nous 在同一评测中发现的趋势。它们也说明,即使具体分数不同,复现工作仍值得重视。
Leimroth 明确限制了这一解读。他的对比对每个模型只进行了一次运行,并使用自动化评判器。他还参与开发了其中一个被比较的模型,在评估其独立性与激励时,这一点是相关背景。
最重要的是,重新运行相同问题,检验的是该评测内部的可重复性。它并不能证明模型在陌生政治问题上的表现。模型可以复现有利结果,同时仍在基准边界之外失效。
因此,外部结果强化了一个更狭窄的命题:这一报告中的回答模式值得进一步研究。它并未独立证明该模型在政治上中立,也未证明所有继承而来的偏见都已消失。
对开发者而言,这一区别会影响验收标准。评估研究助手的团队应纳入陌生文档与问题,并在审阅模型输出之前完成选择。否则,团队可能构建出一个只会确认既有预期的测试。
审阅者应像检查平均分一样仔细检查分歧。一个模型可能整体提升,却在某个对特定组织至关重要的话题上变得不那么可靠。汇总分数可能掩盖这种局部失败。
他们还应将事实修正与信心增强区分开来。即使证据并未改善,更为肯定的回答也可能显得更有用。评估引用支持情况,有助于区分有依据的信心与具有说服力的呈现。
部署条件引入了另一项不确定性来源。生产环境中的助手通常会接收指令、检索到的文档、对话历史以及执行操作的请求。一次干净的基准交互无法代表这些输入的所有组合。
设想一款产品同时检索官方声明和独立报道。模型必须在处理相互冲突的叙述时保留归因。在这种场景下的行为,对买方的重要性高于它对一个孤立政治问题的回答。
因此,Arete-27B vs Qwen3.8 的对比需要扩展到现实任务中。有价值的证据应包括基于来源的摘要、冲突文档分析,以及承认信息缺失的能力。这些任务检验框架如何影响人们实际委托给模型的工作。
外部复现是一个有价值的开端,因为它为围绕可观察结果的分歧创造了空间。下一步应增加证据的多样性,而不只是对熟悉分数进行更多重复测试。
关注新问题、真实任务和后续版本
下一批证据应证明,报告中的变化在多大程度上能超出原始测试。
第一个值得关注的信号,是对新问题的评测及独立人工审阅。强劲结果将强化 Arete 学到了更广泛行为变化的论点。若出现大幅下降,则意味着原始评测捕捉到的是更狭窄的成功。
新问题应改变其措辞,并在不扭曲事实的前提下包含可产生分歧的机会。审阅者应检查遗漏、缺乏支持的断言,以及模型是否区分证据与解释。这会让成功比认同某个偏好结论更有意义。
第二个信号,是其在实际研究和智能体任务中的表现。智能体是能够使用工具或跨多个步骤执行操作的助手。它们的框架选择会影响其检查哪些来源,以及会延续哪些发现。
令人鼓舞的结果应将准确摘要与有用的任务完成情况结合起来。令人失望的结果则会显示政治表述有所改善,但证据处理变弱,或出现无关的性能损失。无论哪种结果,都会使采购决策更清晰。
一项假设性的企业试点,可以比较由同一组源文档生成的简报。审阅者随后能够将每项重要断言追溯到其证据。核心问题将是,修改后的模型是否改善了工作本身,而不仅仅是改变了语气。
第三个信号,是其在后续版本和部署配置中的稳定性。进一步训练、变更指令和调整服务软件,都值得重新检查。已发布的结果描述的是特定模型设置;它不应成为永久证书。
在这些变化中保持一致的行为,将强化适配可控的论据。若失败再次出现,则表明维持所需行为需要持续监督。这种维护负担应纳入对模型的任何严肃评估。
Nous Research 的 Arete-27B 发布,为开发者提供了一种具体替代方案:不经审视地接受上游的政治默认设置。它也让开发者自身的选择更加可见。选择教师模型、挑选示例和定义可接受答案,都是值得记录的决策。
对买方而言,最有力的回应是要求提供与预期任务同等层面的证据。询问助手能够支持哪些主张、何处会变得不确定,以及审阅者如何识别不可接受的框架。在比较其答案时,应保留原始来源。
在因模型承诺符合熟悉的价值观而采用它之前,应检查它如何处理一项陌生的分歧。比较准确的官方叙述、缺乏支持的官方主张,以及与两者均相矛盾的独立证据。检查助手在撰写简明摘要时,是否保留了这些区别。然后,对一个你所在组织本身也有偏好立场的主题重复该练习。Nous Research Arete-27B 发布的实际价值取决于这一标准:用户获得有意义的选择,同时保留质疑答案的能力。哪一个模型最能帮助你的团队清楚看见证据,包括在证据使你原本想要的结论变得复杂时?



