top of page

Amazon AWS 引入 OpenAI GPT-5.6,但模型访问只是规模化的第一项考验

7月26日
讀畢需時 13 分鐘

Amazon AWS 已在 Bedrock 上全面推出三款 OpenAI GPT-5.6 模型,弥补了其托管模型目录中的一项重要空缺。Sol、Terra 和 Luna 分别覆盖不同层级的推理能力、速度与成本。但仅有访问权限并不能解决更棘手的问题。企业仍需判断:Bedrock 是否能为生产级智能体提供足够的控制能力、容量与运维透明度。

此次发布让 OpenAI 模型与 Amazon Bedrock 上已有的更广泛模型选择并列。它还为开发者提供 OpenAI 兼容的 Responses API、新的 Bedrock 推理端点、提示词缓存,以及面向 Codex 编程智能体的直接连接。根据 AWS 发布指南,现有应用只需相对有限的集成工作即可迁移。

这改变了企业 AI 部署领域的竞争压力。团队不再只是在 OpenAI 模型访问与 AWS 治理之间二选一。两者可以结合,但这一组合也带来了区域、配额、保留政策和模型可移植性方面的新限制。

因此,核心竞争并非 OpenAI 对阵另一家模型开发商,而是直接模型访问对阵经由云平台调度的控制能力。Bedrock 加入了 AWS 身份管理、网络、日志、承诺用量和区域处理能力。作为交换,客户接受了额外的平台层,而这一层会影响身份验证、容量规划、数据处理和事件诊断。

Amazon AWS 实际为 Bedrock 增加了什么

此次发布让 OpenAI 模型成为 AWS 托管推理工作流中的原生选项,而不只是市场中列出的外部 API。

GPT-5.6 Sol、Terra 和 Luna 于 2026 年 7 月 13 日在 Amazon Bedrock 上全面可用。AWS 随后于 7 月 24 日发布了技术实施指南。首份公告确认了可用性,第二份则说明生产团队如何调用、保护、缓存和扩展这些模型。

这些模型均拥有 272,000 token 的上下文窗口。它们接受文本和图像输入、输出文本,并支持 Responses API。每款模型还提供六档推理强度设置:none、low、medium、high、xhigh 和 max。

这些通用接口让开发者无需重建整条请求链路,就能切换不同的能力等级。模型标识符仍会变化,但周边 API 结构可以保持一致。

这三个名称代表稳定的能力层级:

  • Sol 是旗舰推理模型。AWS 将其定位于自主编码、安全研究、科学分析和高难度多步骤工作。

  • Terra 面向通用生产工作负载,在推理质量、响应时间和运行成本之间取得平衡。

  • Luna 专注于高吞吐、低延迟任务,例如分类、摘要、请求路由及其他重复性工作。

这种分层很重要,因为智能体系统很少需要为每次调用都使用最强模型。一个用户请求可能触发规划、检索、分类、工具选择、执行、验证和最终内容生成。如果 Luna 可以路由请求、Terra 可以完成常规步骤,那么将每个阶段都交给 Sol 会浪费容量。

这些模型的区域覆盖并不完全相同。Sol 可在美国东部使用,覆盖北弗吉尼亚和俄亥俄。Terra 和 Luna 还支持美国西部的俄勒冈。官方 Sol 模型卡记录了其活跃生命周期、支持的端点和上下文限制。

区域差异会立即影响架构。一家公司可能希望将 Sol 用于最困难的请求,但又因运营或数据位置要求而需要在俄勒冈处理。这类团队不能假定每个模型都能在每种部署环境中互换使用。

AWS 表示,定价与 OpenAI 的第一方价格一致,使用量也计入现有 AWS 承诺用量。更重要的实际变化是采购整合。已经在 AWS 协议框架下运营的公司,可以将 OpenAI 推理纳入既有的云服务关系。

不过,采购便利并不保证具备生产就绪能力。团队仍需要设计工作负载路由、规划配额、准备评估数据和定义回退行为。全面可用消除了访问门槛,却没有消除从成功演示到可靠服务之间所需的工程工作。

Bedrock-Mantle 端点改变了集成边界

Amazon Bedrock 保留了熟悉的 Responses API,但 AWS 现在控制着每次调用周围的身份验证、区域端点和基础设施。

开发者通过 bedrock-mantle 端点访问这些模型。Mantle 是 AWS 用于大规模模型服务的分布式推理引擎。GPT-5.6 Responses API 位于 /openai/v1/responses,这是 Bedrock 上这些 OpenAI 模型专用的路径。

基础 URL 遵循以下结构:

https://bedrock-mantle.{region}.api.aws/openai/v1

配置为北弗吉尼亚的应用会将区域占位符替换为 us-east-1,随后选择诸如 openai.gpt-5.6-terra 的 Bedrock 模型标识符。

对于已在使用 OpenAI SDK 的应用,这一设计降低了迁移阻力。开发者可以保留熟悉的响应对象、工具调用和单一 input 字段,主要只需更改基础 URL、凭据和模型标识符。

AWS 层在身份验证环节变得清晰可见。团队可以使用短期 bearer key,也可以通过 SDK 凭据链使用 AWS 凭据。AWS 建议生产应用使用自动刷新的令牌提供程序,因为手动提供的短期密钥会过期。

要使用文档中所述的 BedrockOpenAI 客户端,OpenAI Python SDK 必须为 2.45.0 或更高版本。AWS 还提供了 AmazonBedrockMantleInferenceAccess 托管策略,涵盖官方示例中使用的读取和推理权限。

这一安排为安全团队提供了熟悉的控制点。模型调用在 AWS Identity and Access Management 策略下运行。AWS 表示,请求在客户的虚拟私有云上下文中执行,并会出现在 CloudTrail 日志中。

区域内推理会将处理保留在选定的 AWS Region 中。对于有数据驻留要求,或内部规则限制跨区域处理的组织而言,这项能力很重要。它也让区域选择成为架构决策,而不只是端点偏好。

数据处理细节需要仔细阅读。Responses API 可以存储多轮对话的状态,且在通用接口中默认启用存储。已存储的响应会限定在 Bedrock 项目范围内。AWS 文档称,应用可以通过将 store 设为 false 来禁用存储。

AWS 还表示,提示词和补全内容不会被用于训练模型,也不会与 OpenAI 共享。不过,被分类器标记的流量可能会因自动化滥用检测而最多保留 30 天。除非客户选择加入与提供商共享,否则 AWS 会存储并处理这些保留材料。

这些说法并不矛盾,但也不等同于零保留。安全审查应区分模型训练、提供商访问、对话存储和滥用监控保留。每一项都涉及不同的数据路径和政策问题。

Responses API 文档说明了项目范围和响应保留机制。处理受监管或敏感信息的团队应核实实际设置,而不是从笼统的隐私声明中推断。

这是此次发布背后的主要取舍。直接访问 OpenAI 能让应用与模型提供商之间的关系更短。Amazon AWS 加入了一个托管控制平面,可简化治理,但客户必须理解这一控制平面的实际行为。

模型选择如今是一个路由问题

Sol、Terra 和 Luna 让模型选择更具灵活性,同时也将困难决策转移到了生产路由和评估上。

AWS 将这一模型家族呈现为能力阶梯。Sol 处理深度推理,Terra 覆盖日常生产任务,Luna 优先考虑速度和吞吐量。这一概述很有用,但对于运营策略而言仍然过于宽泛。

真实应用需要一套规则,用来决定每个请求应交给哪款模型。这些规则应反映任务难度、响应时间目标、风险、上下文规模,以及错误答案的代价。

以软件工程智能体为例。Luna 可以对工单进行分类并识别相关代码仓库。Terra 可以检查常规代码、生成补丁并编写测试。只有当变更跨越多个服务、涉及陌生故障或需要长时间调试时,才由 Sol 介入。

安全工作流需要不同的平衡。Sol 可以分析复杂的漏洞链,Terra 可将发现结果规范化并生成结构化报告,Luna 则可以路由告警或汇总重复性遥测数据。

对于知识密集型工作,长上下文并不能消除对检索纪律的需求。272,000 token 的窗口可以容纳大量文档,但不加区分地发送所有可用文件会增加处理负担,也可能让决定性证据淹没在无关上下文中。

推理强度增加了另一项路由维度。三款模型都支持六档设置,让应用可为困难任务分配更多内部计算。更高的推理设置可以改善多步骤工作的结果,但也会增加延迟和 token 使用量。

因此,模型层级与推理强度构成了一个双轴控制系统。团队可能会在困难但成本敏感的任务中使用高推理强度的 Terra;也可能在基础能力比最大程度审慎思考更重要时,使用中等推理强度的 Sol。

挑战在于,供应商标签无法替代针对应用的评估。“通用”描述的是 Terra 的预期定位,而不是它在某家公司合同、代码库、支持历史或内部分类体系上的准确性。

团队需要从真实工作中抽取测试集。这些测试集应涵盖常规请求、失败案例、长上下文输入、模糊指令、工具错误和对抗性提示词。评估应衡量任务完成情况,而不只是答案偏好。

AWS 新版 Bedrock 控制台支持项目和并排模型评估。用户可以先在同一提示词上比较最多三款模型,再编写应用代码。这有助于早期筛选,但控制台比较无法复现生产负载下长期运行的智能体。

竞争对手仍是重要的辅助背景。Bedrock 已提供多家开发商的模型,而 Microsoft Azure 则围绕与 OpenAI 技术的紧密接入构建了其企业 AI 定位。Google Cloud 则在第三方模型之外推广其 Gemini 家族。

对于希望获得 OpenAI 能力、同时不离开 AWS 治理体系的企业,Amazon AWS 现在有了更有力的回应。但多模型可用性也带来了可移植性问题。OpenAI 兼容端点让初始迁移更容易,但模型行为、缓存控制、安全系统和工具调用细节仍可能不同。

真正的赢家不会是拥有最长模型目录的平台,而是能够让客户在保持可观测性能和可预测容量的同时,可靠地路由工作负载的平台。

Prompt Caching 减少重复,而非所有成本

Prompt caching 针对的是 Agent 成本中的一个特定来源:反复处理相同的指令、工具和参考资料。

Agent 工作负载往往会复用大部分上下文。一个编程 Agent 可能会在连续多个步骤中发送相同的代码库指南、工具定义、安全策略和架构说明,只有最新的观察结果或所请求的操作会发生变化。

GPT-5.6 在 Amazon Bedrock 上支持隐式和显式缓存。对于符合条件的请求,隐式缓存默认启用。显式缓存则允许开发者通过缓存断点标记可复用提示词前缀的结尾。

当后续请求共享该前缀时,Bedrock 可以复用已处理的上下文。AWS 表示,缓存输入相比未缓存输入可享受 90% 的折扣。将内容写入缓存的初始费率较高,因此缓存最适合用于会被重复使用的前缀。

其经济性取决于重复频率。仅使用一次的大型指令块不会带来明显的复用收益;而在数十个 Agent 步骤中使用同一指令块,则可能成为很有价值的缓存对象。

显式断点提供了控制能力,但也增加了设计工作。开发者必须将稳定内容放在断点之前,将变化内容放在之后。可复用前缀中的细微差异都可能导致缓存未命中。

版本管理同样重要。如果团队修改了缓存前缀中的一句策略,新内容就需要不同的逻辑缓存标识。糟糕的缓存键管理可能造成难以理解的测量结果或更低的命中率。

官方 prompt caching guide 表示,缓存命中还可以减轻速率限制压力。这一优势在 Agent 突发调用期间尤为重要,因为一次请求可能会产生大量重复调用。

应用程序应检查令牌使用数据,而不是想当然地认为缓存正在发挥作用。AWS 会在响应的使用详情中公开缓存令牌数量。团队可以计算由缓存提供的输入占比,并将其与整体请求量进行比较。

合理的测量方案应追踪多个信号:

  • 缓存创建令牌显示有多少上下文进入新的缓存条目。

  • 缓存输入令牌显示 Bedrock 复用了多少重复上下文。

  • 未缓存输入令牌揭示变化部分及任何未命中的前缀。

  • 端到端延迟显示缓存是否改善了用户体验。

  • 任务完成情况表明,为稳定提示词所做的尝试是否损害了模型表现。

缓存也带来了运营层面的问题。团队必须决定复用在多长时间内仍有价值、部署如何使旧提示词失效,以及客户专属资料是否应共享任何缓存边界。敏感工作负载需要在租户和项目之间进行明确隔离。

最重要的是,缓存并不会降低每一种成本来源。输出生成仍然需要计算工作;更高的推理强度仍会消耗额外算力。工具执行、检索系统、数据库和周边应用基础设施仍处于模型输入缓存的覆盖范围之外。

设计不佳的 Agent 可能只是以更快、更便宜的方式发起不必要的调用,同时继续浪费资源。缓存应当补充工作流简化、模型路由和请求限制,不能替代它们。

这一差异让公告保持在务实的范围内。90% 的缓存输入折扣是具体的,但只适用于符合条件的重复上下文。实际节省取决于提示词结构和缓存命中频率。

Bedrock 上的 Codex 检验企业控制论点

通过 Amazon Bedrock 路由 Codex,使这次发布从模型托管公告转变为对托管 Agent 基础设施的检验。

Codex 是 OpenAI 的编程 Agent,可处理代码库、终端、本地文件、测试和开发环境。它能够编写功能、诊断故障、运行命令并准备拉取请求。

AWS 表示,Codex CLI、受支持的 IDE 扩展和 ChatGPT 桌面应用可以通过 Amazon Bedrock 路由模型推理。配置会选择一个 OpenAI 模型,并将 amazon-bedrock 指定为提供商。

基础 Codex 配置使用 openai.gpt-5.6-sol,并指定如 us-east-1 的 AWS Region。身份验证会优先检查 AWS_BEARER_TOKEN_BEDROCK,随后回退至 AWS SDK 凭证链。

这一连接回应了企业的常见顾虑。编程 Agent 往往会接触敏感源代码、内部文档、构建输出、基础设施设置和安全发现。将推理保留在成熟的 AWS 控制环境中,能够简化内部审批流程。

它还为组织提供了更熟悉的审计界面。IAM 可以限制谁能够调用模型;CloudTrail 可以记录调用;区域化处理可以支持数据位置策略;现有 AWS 凭证可以取代另一套长期有效的提供商凭证。

不过,推理治理只是 Agent 治理的一部分。Codex 可以与 Bedrock 之外的文件和工具交互。控制模型调用的 IAM 策略,并不会自动治理每一条终端命令、每一次代码库写入、每个外部请求或每个拉取请求。

组织仍需要在 Agent 层设置权限边界。他们必须决定 Agent 何时可以编辑文件、执行命令、访问网络或发布变更。对于破坏性或对外可见的操作,人工审批仍然重要。

Bedrock 连接也形成了一条诊断边界。当任务失败时,团队必须区分模型行为、配额限制、端点错误、凭证问题、工具故障和本地环境问题。

如果从一开始就设计好可观测性,这种复杂性是可控的;如果团队将编程 Agent 当作单一的黑盒产品,问题就会变得棘手。

最稳健的生产模式会将规划、推理、工具执行和审批分开。每个阶段都应输出足够的信息,以解释 Agent 尝试了什么,以及为何停止。敏感值则应在这些记录中保持受保护状态。

模型选择在这里同样重要。AWS 建议,对于复杂重构和调试使用更高的推理强度,而较低设置适合常规编辑。团队还可以将较简单的工作路由给 Terra,并将 Sol 留给持续时间更长的调查任务。

OpenAI 的 GPT-5.6 preview 将 Sol 定位为旗舰层级,Terra 和 Luna 分别承担均衡型与更快速的角色。Bedrock 将这些角色纳入由 AWS 运营的路径,但企业仍必须验证这些模型在自身开发工作流中的行为是否一致。

压力现在转向其他托管 AI 平台和内部开发者工具供应商。他们必须匹配以下组合:强大的编程 Agent、云治理、区域化处理和灵活的模型选择。

在提出这一论点后,AWS 也面临更高标准。客户将依据持续运行的 Agent 来评判该服务,而不是短提示词。凭证刷新、容量错误、缓存行为和日志必须在数百个步骤中持续保持可靠。

配额、区域与保留策略将成为下一轮考验

接下来的三个信号将是:突发性 Agent 负载下的配额表现、更广泛的区域可用性,以及企业采用的明确证据。

第一个信号是生产环境中的配额表现。Agent 工作负载与普通聊天应用不同:一次用户操作可能引发一轮模型调用高峰,随后执行工具,再出现另一轮高峰。

AWS 表示,其新一代推理引擎会汇集容量,同时隔离不同客户的吞吐量。这一说法应通过持续工作负载进行测试,而不应仅从正式发布中推断。团队需要在流量高峰期间衡量限流、排队时间、重试频率和完成率。

在上线前,开发者应申请合适的配额,并实现带抖动的指数退避。抖动会加入小幅随机延迟,避免大量失败请求同时重试。应用程序还需要并发限制和截止时间,以免单个 Agent 耗尽所有可用请求槽位。

如果 Bedrock 能够在没有不可预测限流的情况下承受长时间运行的 Agent 流量,托管云的论点就会更有说服力。频繁的容量故障会削弱这一论点,尤其对于依赖多个相互关联调用的工作负载而言。

第二个信号是区域扩展。Sol 目前在美国的覆盖范围比 Terra 和 Luna 更窄。这一差异限制了部分架构,也使回退方案更加复杂。

新增区域将表明,AWS 能够将其旗舰 OpenAI 产品扩展到最初发布范围之外。扩展缓慢则会让跨国和受监管客户面临更少的部署选择。

区域可用性也会影响灾难恢复。团队不能假设其偏好的模型在每个备份区域都可用。他们必须决定是故障转移到另一个 GPT-5.6 层级、另一个 Bedrock 模型,还是降级服务模式。

第三个信号是可观测的企业采用情况。计入 AWS 承诺的用量会形成采购激励,但激励并不能说明客户是否将关键应用迁移过来。

有用的证据包括公开的生产案例研究、持续运行的 Agent 部署,以及描述缓存命中率或配额行为的技术报告。当客户在谈论收益的同时也讨论限制时,采用情况会更具可信度。

在采用过程中,保留设置值得持续关注。团队应明确选择是否存储 Responses API 状态;还应记录如何处理被分类器标记的流量,以及哪些数据类别允许出现在提示词中。

成熟的部署清单应覆盖模型选择、推理强度、区域部署、存储控制、缓存边界、配额告警、回退逻辑和 Agent 权限。它还应明确:当故障跨越 AWS、OpenAI 模型行为和客户应用时,由谁负责。

Amazon AWS 已经消除了 OpenAI 模型在采购和集成方面的一个重要障碍,但并未消除对严谨系统设计的需求。

对于开发者而言,眼下的行动是使用全部三个层级测试具有代表性的工作负载。比较完成质量、延迟、缓存令牌使用情况和故障行为。不要仅因为 Sol 是旗舰模型就选择它。

企业买家应提出另一个问题:AWS 控制层减少的运营风险,是否大于其引入的风险?答案将取决于现有云承诺、区域要求、内部治理以及对模型选择的需求。

知识工作者将间接感受到结果。更好的路由和缓存可以让编程、研究和摘要 Agent 更快、更具成本效益。糟糕的配额规划或不明确的保留策略,则可能让同样的系统变得不可靠或难以获得批准。

在未来三个月内,首先关注配额表现,其次关注区域扩展,第三关注可信的生产采用。这些信号将表明 Bedrock 上的 GPT-5.6 会成为核心企业基础设施,还是仍只是一个便捷的访问选项。

Amazon AWS 现在已经提供了模型、API 兼容性、缓存和 Codex 连接,足以争夺严肃的 Agent 工作负载。决定性的工作始于第一次成功响应之后:当真实用户、敏感数据和持续需求到来时,团队能否以可预测的方式运营该系统?

 
 

免费开始使用

一款本地优先的AI助手

为了获得更好的人工智能体验,

remio 目前仅支持Windows 10+ (x64)M-Chip Mac

你的 AI 工作伙伴

remio 一起高效工作

规划、创作、交付

一站式完成

bottom of page