CBAM 晶圆缺陷检测准确率达 99.88%,但晶圆厂测试仍在前方
一款 CBAM 晶圆缺陷检测模型报告称,在仅使用 153,261 个可训练参数的情况下,实现了 99.88% 的准确率。这一组合挑战了工业检测必须依赖深度且昂贵的视觉主干网络这一假设。
该模型采用 32 位权重时,体积约为 598.7 KB。其作者还报告称,每次推理仅需 0.02 GFLOPs,并在仅使用 CPU 的环境中进行了实验。至少从纸面指标看,这些数据让该系统有望运行在配置适中的检测硬件上。
但这并非生产线上的胜利。研究人员评估的是来自公开基准的低分辨率晶圆图,而不是来自多家实际运行晶圆厂的实时光学图像。因此,这一结果带来了更明确的竞争:紧凑、面向特定任务的 CNN,与更大的迁移学习和 Transformer 模型之间的较量,而最终胜负仍将由工厂验证决定。
CBAM 晶圆缺陷检测研究实际发现了什么
这项研究的核心结果,是在异常小巧的分类器上实现了异常高的基准准确率。
该研究于 2026 年 3 月 12 日发表于 Frontiers in Electronics。来自孟加拉国、马来西亚和韩国机构的研究人员为九类晶圆图分类开发了这一模型。
晶圆图反映制造完成的晶圆上各个芯粒的测试结果。空间分布模式能够揭示工艺问题,包括划痕、局部失效、环状缺陷,以及集中在边缘附近的缺陷。
研究人员在一个由 WM-811K 衍生而来的平衡基准上测试了系统。这个公开数据集存在严重的类别失衡,其中包含大量未标注缺陷模式的晶圆图。
该模型对九类进行分类:Center、Donut、Edge-Loc、Edge-Ring、Loc、Random、Scratch、Near-Full 和 None。报告的测试准确率达到 99.88%,宏平均 F1 值达到 99.83%。
宏平均 F1 在结合精确率和召回率时,对每个类别赋予相同权重。它在这里尤其重要,因为总体准确率可能掩盖模型在罕见缺陷上的表现不足。
根据这篇同行评议论文,该模型约使用了 0.15 百万个参数。作为对比模型之一的 MobileNetV2 使用了 2.23 百万个参数,准确率为 97.56%。
EfficientNetV2-S 使用 20.19 百万个参数,准确率达到 98.33%。小型 Swin Transformer 使用 18.86 百万个参数,准确率为 97.41%。
这些比较使该结果格外引人注目。所提出的分类器以这些更大基线模型一小部分的参数量,报告了更高的准确率。
测试还针对了难度较高的少数类模式。论文报告称,各类别的召回率介于 0.96 至 1.00。Scratch 的召回率达到 0.99,局部缺陷的召回率则达到 0.96。
不过,该系统分类的是晶圆图模式,而不是在原始相机图像中定位物理缺陷。它无法替代自动视觉检测的每一个环节。
这一差异很重要。分类是为已处理好的图分配一个类别;而检测和分割还必须识别缺陷出现的位置,通常是在带有噪声的高分辨率图像中进行。
因此,公开报道中的标题可能比实验本身覆盖得更广。这项研究展示的是一款紧凑型晶圆图分类器,而非运行在制造设备旁的一整套检测系统。
为什么 598.7 KB 模型改变了成本方程
该模型的实际吸引力,在于无需牺牲基准准确率即可降低计算需求。
工业 AI 系统面临的限制,很少会出现在消费级图像识别中。检测设备必须以可预测的延迟、有限的内存和最小的中断处理重复性数据。
将每张晶圆图发送至远程加速器,会增加网络依赖。在每个检测站旁部署大型 GPU,则会提高集成、散热、维护和认证方面的要求。
亚 MB 级分类器提供了另一条路径。它可以部署在普通工业计算机上,并为采集软件、工艺控制和操作员界面保留资源空间。
论文报告称,实验在免费的 Google Colab 环境中仅使用 CPU 完成。仅使用 CPU 并不能证明生产环境下的延迟表现,但它表明该架构不依赖大型加速器。
其每次推理估算仅需 0.02 GFLOPs,也较为轻量。GFLOPs 用于衡量一次预测所需的十亿次浮点运算,为不同模型提供了粗略的计算量对比。
这一数值并不等同于实测速度。内存搬运、预处理、软件库和硬件行为都可能主导实际延迟。
不过,参数量和运算量确实会影响部署选择。更小的系统更容易复制到多台设备、多个检测单元或较旧的生产线中。
另一条路线是使用更大的预训练网络。迁移学习能够在工厂标签有限时提供帮助,因为模型可以从另一个数据集学到的特征开始。
Transformer 能够捕捉图像中的长距离关系。当缺陷模式涉及相距较远的区域,或包含多个重叠结构时,这种能力会很有价值。
新分类器则缩小了问题范围。它使用浅层卷积神经网络,随后在特征图已经较小的位置加入注意力机制。
这种专用化降低了通用能力,也去除了可能对九类低分辨率晶圆图任务贡献不大的计算。
另一项 2026 年研究描述了一款拥有 570 万参数的微型视觉 Transformer,用于混合晶圆缺陷检测。该模型在 WM-38K 上报告了 98.4% 的准确率,并针对两种、三种或四种缺陷的组合进行设计。
这一比较凸显了不同的优先方向。CBAM 分类器更小,并在单标签基准上报告了更高的准确率。Transformer 则处理混合模式,这与一些复杂制造场景更为接近。
两项结果都不能确立一个普适的赢家。合适的架构取决于实际问题涉及的是已知的单一模式、重叠缺陷、原始图像,还是未知异常。
对采购方而言,该模型改变了最初的问题。团队不必先问哪种加速器能够支撑大型网络,而可以先问:专门设计的模型是否足以解决任务中的关键部分。
这可能降低试点项目的准入门槛,也可能让本地推理成为可行方案,尤其是在网络隔离、数据控制或设备认证限制云端处理的场景中。
但只有预处理保持简单,这种预算优势才能延续。如果生产数据需要昂贵的转换、对齐或清洗,周边流程就可能抵消模型节省下来的成本。
注意力机制与合成训练数据如何带来这一结果
报告的准确率来自一套协同管线,而不只是缩小传统 CNN。
该分类器包含两个卷积和池化阶段。卷积学习空间特征,池化则缩小特征图尺寸并限制计算量。
在每个池化阶段之后,设计都会应用经修改的卷积块注意力模块,即 CBAM。注意力机制会重新加权特征,使网络专注于与预测相关的信息。
原始的 CBAM 架构先应用通道注意力,再应用空间注意力。通道注意力选择有用的特征类型,空间注意力则突出相关位置。
该晶圆分类器修改了这一公式。其通道门控采用带批归一化的共享多层感知器,以稳定学习到的特征权重。
其空间门控采用多种卷积尺寸。这些并行路径有助于表示细长划痕,以及环状或边缘带状等更宽泛的模式。
注意力模块位于池化之后,此时输入网格较小。这种布局在保持较低计算开销的同时扩大了上下文范围。
两个注意力模块仅增加了 836 个参数。模型的大部分权重位于分类头附近的一个 128 单元全连接层中。
仅靠架构无法解释这一得分。训练数据平衡构成了这一机制的第二部分。
WM-811K 具有长尾分布。在研究筛选后的训练集划分中,None 类包含 13,489 张图,占数据的 93.9%。
一些缺陷类别极为稀缺。筛选后的数据划分中仅包含 1 个 Donut 样本、16 张 Near-Full 图和 31 张 Edge-Ring 图。
若直接基于这一分布训练分类器,它可能通过偏向占主导地位的类别获得颇具吸引力的总体准确率,却仍会漏掉对工艺工程师最重要的罕见模式。
研究人员从两个方向处理了这种失衡。他们将 None 类从 13,489 个样本减少至 2,489 个,降幅为 81.56%。
他们还在训练集划分上训练了一个紧凑型卷积自编码器。自编码器将输入压缩为潜在表示,然后再对其进行重建。
团队在这一潜在表示中加入小幅变化,以生成更多少数类样本。每个少数类最终都拥有约 2,000 个或更多训练样本。
合成样本仅限于训练集。验证集和测试集包含真实的基准数据,从而降低了在模型自身生成样本上评估分类器的风险。
这一数据策略对结果有实质性贡献。根据论文的消融测试,移除数据增强后,宏平均 F1 从 99.83% 降至 98.55%。
移除 CBAM 则导致更大幅度的下降,宏平均 F1 降至 97.92%。保留通道注意力、移除多尺度空间分支时,宏平均 F1 为 98.80%。
这些测试支持了作者提出的机制。注意力机制改善了特征选择,而数据增强帮助分类器学习稀缺的缺陷类别。
可解释性工具又增加了一层分析。研究人员使用 Grad-CAM、积分梯度和遮挡敏感性来检查哪些区域会影响预测。
Grad-CAM 根据内部激活生成粗粒度热图。积分梯度为输入特征分配贡献值,而遮挡法则测量隐藏区域后预测如何变化。
据报告,得到的图与预期缺陷形状相吻合。环状类别突出环形区域,划痕激活线性结构,局部失效则集中于紧凑区域。
这些视觉检查很有价值,但并不能证明模型具备因果理解。解释图即使看似合理,模型仍可能依赖不稳定的相关性。
尽管如此,这种组合仍比单独的准确率信息更丰富。它让工程师能够检查模型是否关注了定义各类别的物理模式附近区域。
关于晶圆厂现场的说法超前于证据
最大的未知数是领域迁移,因为测试并未展示模型在不同运行晶圆厂、设备或生产批次间的表现。
研究人员将晶圆图标准化为 26 × 26 的三通道输入。这种受控表示与原始检测数据流大不相同。
真实生产数据会发生漂移。新的工艺节点、测试方案、设备供应商或产品布局,都可能改变分类器接收到的数据分布。
即使名义上相同的缺陷类别,在不同晶圆厂中也可能呈现不同形态。芯片密度、图谱尺寸、探针行为和标注规范的变化,都可能改变其几何特征。
作者承认这一缺口。他们列出的未来工作包括面向跨工具、晶圆厂和批次迁移的领域适应与校准。
论文还呼吁开展多标签分类。其当前的 softmax 输出会在九个类别中分配一个类别,但一片晶圆可能同时包含多种重叠的失效模式。
混合缺陷削弱了单标签基准测试背后的假设。环状缺陷和划痕可以共存,局部簇状缺陷也可能与边缘模式重叠。
未知失效又带来了另一个问题。当前分类器从固定分类体系中进行选择,即使输入图谱并不匹配任何已学习的类别。
开放集识别可让系统拒绝不熟悉的模式,转交人工复核。异常检测也可以标记落在训练分布之外的图谱。
这些能力之所以重要,是因为自信的误分类可能比弃权更糟。生产系统应识别其置信度在运营层面不值得信赖的情形。
报告中的统计数据也仅来自三个随机种子。相比单次运行,这提供了更多证据,但作者将该样本描述为不足以进行统计分析。
完整模型报告的准确率为 99.88%,波动为 0.05 个百分点。根据消融实验表,其预期校准误差为 0.42%。
在加入高斯噪声后,宏平均 F1 从 99.83% 降至 98.19%。仅使用 10% 的训练数据时,则降至 96.41%。
将 10% 训练数据与测试噪声结合后,宏平均 F1 降至 95.21%。分类器仍保持较高准确度,但这一降幅表明运行条件为何重要。
合成平衡尤其值得审视。该自编码器从极小的初始样本集扩增稀有类别,其中包括仅有少量筛选样本的类别。
生成的变化可以改善学习效果,但无法创造源数据中不存在的所有真实世界失效模式。它也可能强化已呈现的有限几何特征。
一项更广泛的晶圆检测研究引入了 1,055 张晶圆图像和 6,861 个标注缺陷。该研究考察了异常检测和分割,而非仅仅进行图谱分类。
这一差异说明,单一准确率数字无法概括工业检测。原始图像系统需要面对光照变化、表面纹理、微小缺陷边界以及分割错误。
另一套 2026 年系统 Wafer-YOLO使用了 9,739 张工厂图像,重点关注更快速的目标检测。它报告称,相较其 YOLOv10n 基线,帧率提升了 52.9%。
Wafer-YOLO 和 CBAM 分类器针对工作流的不同层面。前者在图像中发现缺陷,后者则识别预处理晶圆图谱中的模式。
晶圆厂或许两者都需要。图像分析可以定位缺陷,图谱分类则可将其空间分布与可能的工艺漂移联系起来。
因此,“晶圆厂现场预算”的表述有一定合理性,但仍为时尚早。较小的体积提高了可部署性,但部署所需的不只是将权重装入内存。
团队仍需要测量端到端延迟、持续负载测试、误报分析、监控、版本控制,以及安全的人工审核路径。
他们还需要证明系统能够改善制造决策。除非正确的类别标签能帮助操作人员定位原因、防止复发或保护良率,否则其价值有限。
紧凑型 CNN 让更大型视觉模型承受压力
该研究要求更大型模型证明:每增加一个参数,都能带来紧凑型 CNN 无法提供的能力。
大型视觉网络常因预训练检查点和软件支持易于获取而进入工业项目。其通用特征表示可以缩短早期实验周期。
这种便利也有代价。更多参数需要额外内存、增加推理计算量,并使其在旧设备上的部署更加复杂。
CBAM 的结果表明,任务结构有时可能比模型规模更重要。晶圆图谱具有重复的几何特征,以及数量有限的已知空间模式。
浅层网络可以利用这些约束。多尺度注意力带来了足够的灵活性,可区分细长划痕、紧凑簇状缺陷和宽环状缺陷。
这种方法类似于传统工业工程。团队围绕稳定任务优化系统,而不是携带任务从未使用过的广泛能力。
当任务发生变化时,这种权衡便会显现。专用分类器在面对未知产品、多种同时发生的缺陷,或训练分类体系之外的模式时,可能会遇到困难。
Transformer 在这些场景中有其优势。它们更广泛的上下文建模能力有助于处理远距离区域间的交互和更复杂的组合。
一项 2026 年 Micro-LED 研究报告称,基于 Transformer 的检测器在较容易的 0.5 重叠阈值下达到了 93.62% mAP。它使用了来自一条试点生产线的 2,000 张原始高分辨率图像。
该结果无法与 99.88% 的分类准确率直接比较。平均精度均值评估的是目标检测,而准确率评估的是类别分配。
这一差别对采购方至关重要。当基准、输入和实际任务不同,更高的数字并不意味着系统更好。
紧凑型 CNN 还面临传统方法的竞争。当缺陷模式稳定时,手工设计的形态学特征仍可保持高效且可解释。
但手动特征通常依赖精心选择的不变性和阈值。随着工艺或晶圆布局变化,它们可能变得脆弱。
新兴的竞争并不只是 CNN 对 Transformer,而是专门化的局部推理与承诺具备更高适应能力的广泛模型之间的竞争。
CBAM 分类器增强了专用方案的一方。它在单一流水线中报告了较高的少数类表现、小型内存占用和多种解释方法。
更大型模型现在需要展示具体回报。这种回报可以包括混合缺陷识别、原始图像处理、跨晶圆厂迁移,或更好地拒绝未知模式。
缺少这些能力,额外规模就很难辩护。较小的模型可以更容易认证、监控、再训练和替换。
运营工作流也会影响选择。工程师需要可检索的实验记录、失效案例、校准变化和设备条件。
结构化的工程知识库可以在模型版本之间保留这些背景信息。仅靠分类器无法解释工厂部署后性能为何发生变化。
当合成数据进入训练时,这一治理层尤为重要。团队应记录每轮增强使用了哪些源图谱,以及哪些模型版本使用了这些数据。
他们还应将基准测试进展与制造影响区分开来。只有当评估代表实际运行中遇到的错误、成本和不确定性时,更高准确率才有意义。
三项测试将决定结果能否进入生产
跨晶圆厂验证、硬件测量,以及对陌生缺陷的安全处理,将决定该模型是否能超越基准测试结果。
第一个信号是跨多个晶圆厂、工具或批次的外部评估。该研究使用公共数据集和固定划分,这有助于控制实验,却限制了环境多样性。
一项有说服力的后续研究应冻结模型,并在开发阶段未纳入的站点数据上进行测试。性能指标应包括各类别召回率、校准和拒绝行为。
如果准确率仍接近报告水平,紧凑型模型的论点将显著增强。若出现大幅下降,则表明基准专门化带来了优势的很大一部分。
第二个信号是在实际检测硬件上测得的性能。论文将参数量和 GFLOPs 作为代理指标,而没有报告生产延迟。
一项有用的测试应包括预处理、推理、后处理、内存使用和持续运行情况,同时还应报告批量大小及确切处理器型号。
工业 CPU 上稳定的低延迟将支持预算主张。若需要大量预处理或加速硬件,则会削弱这一主张。
第三个信号是对混合和未知缺陷的支持。当图谱包含重叠模式,或出现训练中从未见过的失效时,生产分类器需要做出安全响应。
弃权机制应将不确定案例转交工程师。多标签评估应独立衡量每种缺陷,而非强制给出一个最终类别。
这些任务上的成功将表明,该架构可以在不失去效率优势的情况下扩展。若失败,则更大型或混合模型将拥有更明确的角色。
量化是另一个相关的工程步骤。低精度权重可以减少内存占用并加快推理,但团队必须在转换后验证稀有类别的召回率。
论文明确将硬件感知训练和量化列为未来工作。这些结果将揭示 598.7 KB 的占用是起点,还是已接近实际极限。
目前而言,CBAM 晶圆缺陷检测在受控条件下提供了可信的效率结果。它尚不能证明已建立一套可立即部署到晶圆厂的自主检测系统。
该研究真正的贡献更为聚焦,也更具实用性。它表明,在明确的晶圆图谱任务中,谨慎的注意力布置和类别平衡可以胜过规模大得多的基线模型。
下一步取决于制造团队和独立研究人员。应在新站点测试冻结模型,记录每一次弃权,并在持续负载下测量完整流水线。
如果结果经受住这些检验,晶圆厂现场的 AI 采购可能会转向更小、更易审计的模型。若不能,该基准仍将准确阐明紧凑型专门化在何处失效。



