top of page

Claude Code Utah 试点:10 个机构的 34 名开发者报告节省时间

58分钟前
讀畢需時 12 分鐘

Anthropic 表示,Claude Code Utah 试点让来自 10 个州政府机构的 34 名开发者获得了其编码助手的使用权限。该公司称,80% 的参与者在 30 分钟内搭建好了可用环境。为期四周的试点结束时,71% 的参与者报告称至少节省了 20 小时。这些数据反映出令人鼓舞的采用情况和感知收益,但并不能证明生产力获得了独立测量的提升。

这些结果出现在 Anthropic 于 10 月 27 日发布的公告中,该公告扩展了其与联邦采购机构——总务管理局(GSA)的政府合作伙伴关系。这一时机让一项小规模州级实验具备了更广泛的意义。随着供应商竞相将初步实验转化为持续的运营使用,政府采购方正获得更多采购选择。

核心张力在于,开发者报告的时间节省与政府软件交付获得验证的改进之间存在差距。OpenAI 同样扩大了与 GSA 的协议,为各机构提供了另一个可评估的供应商。对采购方而言,犹他州的经验为考察编码助手提供了理由。但更大的采购问题仍未得到解答:哪些收益能经受住安全审查、代码审查、维护和日常工作负载的考验?

Claude Code Utah 试点实际报告了什么

犹他州报告的结果释放出积极的采用信号,但这些数据的衡量范围存在重要局限。

Anthropic 的 犹他州开发者试点摘要提供了核心数据:34 名开发者、10 个州政府机构,以及为期四周的评估。该公司报告了较短的环境搭建时间,以及开发者自行报告的大量时间节省。这两项观察彼此相关,却回答了采用陌生工具时不同的问题。

环境搭建数据涉及参与者能否迅速进入可用状态。这一点很重要,因为安装、账户访问、权限和配置都可能延迟有价值的实验。开发者若无法轻松开始使用某项工具,就会立即形成采用障碍。犹他州报告的经验表明,对大多数参与者而言,初始设置是可控的。

然而,可用环境只是起点,并不等同于完整的运营评估。它无法证明开发者是否接入了所有相关系统,或完成了所有必需审批。它对计时开始前参与者获得了多少协助也几乎没有说明。这些细节将有助于其他机构判断,其入门体验是否会与犹他州相似。

时间节省数据反映的是参与者使用该工具后的评估。报告称至少节省 20 小时,说明受访者认为其收益不止于最初的新鲜感。尽管如此,公告并未提供与未使用 Claude Code 完成同等工作相比的独立测量结果。转述这一结论时,读者应保留这一差别。

这些百分比同样需要谨慎解读。描述开发者达到某一报告节省时间门槛的百分比,并不等同于平均生产力提升。它并未说明每位参与者实际节省了多少时间,也不能证明整个机构的项目周期缩短,或已完成的公共服务实现了相应增长。

公开汇总的数据没有明确说明其底层调查流程。回复率、参与者选择方式和任务构成等问题仍然重要。这些问题并不会否定已报告的体验,但会决定其他组织能以多大信心将这些发现应用于自身开发者。

跨机构的广泛覆盖,使这项试点比孤立的个人证言更值得关注。不同部门可能带来不同的工作条件和要求。然而,摘要未说明参与者或报告收益如何分布在这些部门之间。因此,广泛参与不应被误认为是广泛且均等成果的证据。

发布时点同样值得精确对待。Anthropic 在其 10 月 27 日的公告中纳入了这些发现,但这并不能确定试点的确切开始日期。公告描述的是一项已完成的评估,不应被理解为犹他州与新的采购协议同时启动了这项实验。

公开变化的是一个具体州级采用案例与更广泛采购计划之间的联系。Claude Code Utah 试点如今成为 Anthropic 政府业务扩张叙事中的证据。它对采购方的价值取决于能否将已报告的体验与摘要无法支持的结论区分开来。

政府采购方面临更广泛的采购决策

采购渠道的扩大,促使机构领导者在延长试点前明确成功采用的定义。

GSA 于 10 月 27 日发布的政府采购协议确认,Claude 的使用权限通过按使用量计费条款得到扩展。按使用量采购意味着费用随实际用量而定。该机构称,该安排面向广泛的政府主体开放,并提供多种订购途径,且不设最低采购要求。

这一安排改变了犹他州这类实验所处的商业环境。采购方可以评估持续使用情况,而不必将每一位感兴趣的开发者都视为固定的长期承诺。然而,灵活采购并不能消除运营规划的必要性。机构仍需了解谁将使用这项服务,以及用于哪些工作。

直接压力落在技术领导者、采购团队和安全官员身上。开发者可能已经看到了编码助手的价值,其他团队则必须决定组织能否以负责任且一致的方式支持这种使用。他们的回应需要将个人热情与可问责的部署决策联系起来。

这项决策还包括服务本身以外的成本。培训、内部支持、审查时间和行政工作都会消耗员工能力。这些是评估考量,而非犹他州试点中已被记录的缺陷。它们说明,为何采购协议和开发者调查结合起来,仍无法构成完整的商业论证。

使用量也可能因不同原因增长。更多开发者可能觉得该工具有帮助,现有用户也可能为其分配更多任务。有些任务可能需要反复尝试,才能得到可接受的结果。采购方需要具备足够可见性,以区分有生产力的扩张与消耗资源却未改善交付的活动。

这为工程经理带来了实际责任。他们需要识别哪些工作应当变得更容易,以及这种改进将如何体现在日常运营中。在某一工作流程中,更快起草可能很重要;在其他场景中,减少中断、缩短审查周期或改进文档可能更重要。

OpenAI 提供了一个相关的竞争参照。GSA 在 9 月宣布了一项单独的 OpenAI 采购协议,同样提及按使用量计费的访问方式和更广泛的政府适用资格。这确立了一个竞争性的采购选项,但并不能证明产品、部署条件或编码结果是等同的。

因此,恰当的比较应从机构需求出发,而非供应商宣传。采购方应考察可用服务、获批环境、管理控制、支持安排以及实际任务表现。优惠的商业报价无法消除工具在特定开发工作流程中表现差异。

犹他州的结果强化了这种比较,但并未为其定论。供应商可以指出,多家机构的开发者报告了有意义的收益。竞争供应商则面临提供同样相关证据的压力。机构领导者也相应有责任追问:这些证据是否反映了自身的工作条件?

更大的转变,是从获准实验转向为持续使用提供理由。初始访问解决的是开发者能否尝试一项工具的问题;持续部署则需要更清楚地说明机构获得了什么、哪些责任仍由员工承担,以及如何检验结果。

报告的工时与交付的软件衡量的是不同事物

开发者可以在一项任务上节省时间,却未必能缩短软件变更获准接受的完整路径。

设想一项可能的政府维护任务,涉及某个陌生应用程序。开发者可能要求编码助手解释一段代码,或起草拟议的变更。这是一个说明性场景,而非已记录的犹他州项目。它说明了为何参与者可能合理地报告节省时间,却无法给出可直接比较的交付指标。

节省的工作量可能发生在调查阶段。理解现有行为可能很困难,尤其是在文档不完整时。助手的解释可以帮助开发者确定下一步应查看的位置。有用的结果将是调查时间缩短,即使开发者最终仍手动编写变更。

或者,收益可能发生在起草阶段。更快形成常规变更的初始版本,可能为核查假设留出更多时间。这可能很有价值。但在组织获得可用成果前,仍需要完成测试、审查、批准和部署。

这些阶段很重要,因为工作可能在不同人员之间流转。一名作者可能更早完成草稿,而审查者却要花更长时间进行核查。从该个人的角度看,作者报告的节省可能是准确的。组织则需要进行更广泛的测量,才能确定总工作量是否下降。

反过来也可能如此。开发者可能额外花时间准备更清晰的变更,使审查者更容易接受。个人时间估计可能因此低估组织层面的收益。这正是评估应考察工作流程,而非假定每一项有用效果都会体现为更快打字的原因。

质量进一步增加了比较的复杂性。如果产生的变更需要大量返工,较短的完成时间价值有限。反之,改进的测试或文档可能值得投入更多工作量。相关问题是,机构是否以更好的时间、质量和可维护性平衡,获得了可接受的成果。

基线,即展示类似工作在没有干预时如何推进的对比,有助于回答这一问题。公开汇总的犹他州结果未提供这种经测量的比较。因此,采购方应将这些发现视为已报告体验的证据,避免将其转化为普遍适用的加速比率。

任务差异同样重要。调查陌生代码与修改熟悉组件,对开发者提出的要求不同。常规变更与影响重大的系统决策,也需要不同程度的判断。除非底层评估将其区分开来,否则一项汇总的节省时间主张无法显示哪些任务带来了最显著的收益。

这种区分会让未来的报告更具参考价值。政府机构可以区分调研、起草、测试、文档编写和审查,并据此识别哪些环节的收益会反复出现,哪些环节中额外的监督会抵消节省的时间。这将支持有针对性的采用,而不是笼统地假设每项开发活动都会同样得到改善。

Claude Code 在犹他州的试点为这项研究提供了具体起点。参与者报告的收益足以说明进一步评估是值得的。下一步的分析工作,是将这些报告与被接受的工作成果联系起来。这种联系应当保留开发者所重视的改进,同时检验组织是否获得了相应的收益。

选择并不在于相信开发者或衡量结果之间二选一。开发者的报告能够指出应当关注的方向。运营证据随后可以解释所报告的收益、揭示其局限,并帮助确定哪些条件能让这些收益得以重复实现。

独立研究显示为何衡量需要谨慎

有关开发者生产力的研究支持对自我评估保持审慎,但并未否定犹他州所报告的体验。

独立 AI 评估机构 METR 研究了经验丰富的开发者:他们使用 2025 年初的工具,在熟悉的开源项目上工作。其开发者生产力实验随机为任务分配允许或禁止使用 AI 辅助的条件。随机分配有助于研究人员比较结果,同时减少参与者选择自己偏好条件所带来的差异。

该研究包括 16 名开发者完成的 246 项任务。参与者认为 AI 缩短了完成时间,而研究人员测得的结果却是时间增加了 19%。这些发现表明,感知到的加速与实际测得的完成时间可能存在偏差。但它们并不能说明犹他州发生了什么。

两种环境在重要方面存在差异。METR 研究的是较早时期的特定开发者、项目、工具和任务。犹他州的公告描述的是一项政府试点,涉及不同的人群和评估方法。将任一结果视为普遍结论,都会超出其研究设计所能支持的证据范围。

METR 后来也描述了衡量更新工具时遇到的困难。在其 2026 年 2 月发布的测量设计更新中,该机构表示,参与选择和时间追踪削弱了后续实验的结论。它还说明了有理由相信开发者比以往获益更多。这一更新进一步强调,审视方法论应与关注标题中的结果同样重要。

对于政府采购方而言,有用的启示在于所回答问题的力度。满意度调查可以识别用户是否希望继续获得使用权限。时间估算可以识别感知到的收益。对已完成工作的比较则可以反映交付表现。当各自目的保持明确时,这些指标能够相互补充。

审查质量也应纳入这一图景。一项拟议变更可能看似正确,却依赖不合适的假设。审查者需要足够的背景,才能依据实际要求进行评估。生产力评估应包含这类核查工作,而不是将生成的输出视为已完成的工作。

安全性构成了另一条边界。更快的辅助并不能决定某项任务是否适合特定环境。政府机构必须将自身要求应用于所涉及的信息和系统。成功的试点应让这些边界更加清晰,而不是让积极的用户反馈取而代之。

该公告也没有说明收益是否在评估期后持续存在。最初的热情可能推动探索,而后续使用会暴露反复出现的优势和弱点。持续采用是有用的证据,但仅凭持续采用仍无法证明质量或总时间节省。

没有依据可以声称犹他州经历了 METR 早期实验中测得的效率下降。同样,也几乎没有依据可以声称犹他州报告的节省已解决更广泛的生产力争论。现有证据支持的是一个更有限的判断:该州的案例值得关注,而其报告的结果需要谨慎解读。

这一立场对开发者和采购方同样重要。夸大的说法可能对工作量和人员配置造成不切实际的预期。低估可信的用户体验则可能阻碍有益的采用。稳健的评估应为实验保留空间,同时要求与重大采购和交付决策相称的证据。

最有力的下一份报告,应将开发者体验、被接受的变更、审查投入和后续维护联系起来。它还应解释参与者如何被选中,以及时间如何估算。这些补充将帮助读者判断收益的规模,以及收益出现所需的条件。

犹他州试点后值得关注的事项

下一批有价值的证据将涉及持续采用、被接受的工作成果,以及可重复的部署条件。

第一个信号是超出受评估群体的持续使用。在接下来的数月中,读者应关注犹他州是否说明使用权限是否持续或扩大。有记录的扩展将强化这样一种看法:参与者和管理者发现了持久价值。若没有扩展,则只会让这一问题悬而未决,而不能自动证明试点失败。

扩展的细节与宣布扩展本身同样重要。政府机构可能扩大使用权限,但将其限制在特定任务或环境中。它们也可能根据试点经验提供额外支持。这些决定将揭示一项正面实验如何转化为运营政策。

持续使用也应与强制参与区分开来。自愿再次使用某个工具可能表明其有用性,而组织层面的推广则意味着工具可用。两者都不能独立衡量交付表现。清晰的报告应说明使用权限、实际使用情况以及分配给助手的工作分别发生了哪些变化。

第二个信号是有关被接受的软件变更的证据。读者应关注涉及已完成任务、审查投入、返工或维护的比较。如果报告中的个人节省伴随着可接受的质量和更低的总投入,这类报告将强化相关论点。若额外核查消耗了这些节省,则简单的生产力主张会被削弱。

可信的比较应解释任务选择方式和任务之间的相关差异。它应避免假设每项变更的难度都相同,也应计入审查者和支持人员完成的工作。这些背景将使研究结果更容易迁移到其他政府团队。

第三个信号是采购与部署安排是否支持可重复的采用。采购方应关注明确的订购指引、适用服务、获批准的环境以及实用的行政控制措施。更高的清晰度将强化政府机构能够复现有用评估的论据。尚未解决的条件,则会使关于可及性的广泛结论为时过早。

竞争性证据也应纳入同一评估。另一家供应商的成功评估会为政府机构提供更多选择,但不会抹去犹他州使用 Claude Code 的报告体验。有价值的比较应考察相似的任务和要求,使采购方能够识别影响自身运营的差异。

随着政府机构走出试点阶段,知识连续性也值得关注。开发者需要能够获取关于需求、既往决策和现有系统的说明。当这些背景可用时,编码助手的输出会更容易评估。因此,工具评估也应包含开发者所依赖信息的状况。

对于审查这类支撑性工作的团队而言,可搜索知识库提供了有关组织技术文档的相关视角。文档访问和编码辅助涉及开发工作中相互关联的部分。两者都不能免除员工核查拟议变更是否适合系统的必要性。

应将 Claude Code 犹他州试点视为审视特定工作流程的邀请,而非一套人员配置公式。先从开发者所说得到改善的任务开始,再追问审查和交付过程中发生了什么。将他们的反馈与被接受工作和持续维护的证据并列考量。对于采购方而言,最有价值的后续工作,是在不将这些内容压缩为单一标题百分比的前提下,把它们联系起来。在延长类似试验之前,应界定哪些结果足以证明继续提供使用权限,哪些结果需要作出调整。然后保留足够的背景来解释结果。什么证据能够表明,开发者节省的时间已转化为贵组织所交付软件中可靠的改进?

 
 

免费开始使用

一款本地优先的AI助手

为了获得更好的人工智能体验,

remio 目前仅支持Windows 10+ (x64)和M-Chip Mac 。

你的 AI 工作伙伴

和 remio 一起高效工作

规划、创作、交付

一站式完成

bottom of page