JP7618889B2 - 低コントラスト非参照欠陥検出 - Google Patents
低コントラスト非参照欠陥検出 Download PDFInfo
- Publication number
- JP7618889B2 JP7618889B2 JP2024503722A JP2024503722A JP7618889B2 JP 7618889 B2 JP7618889 B2 JP 7618889B2 JP 2024503722 A JP2024503722 A JP 2024503722A JP 2024503722 A JP2024503722 A JP 2024503722A JP 7618889 B2 JP7618889 B2 JP 7618889B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- machine learning
- segments
- learning network
- defect
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0004—Industrial image inspection
- G06T7/0008—Industrial image inspection checking presence/absence
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/20—Image enhancement or restoration using local operators
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/11—Region-based segmentation
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/136—Segmentation; Edge detection involving thresholding
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20021—Dividing image into blocks, subimages or windows
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20081—Training; Learning
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20084—Artificial neural networks [ANN]
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30108—Industrial image inspection
- G06T2207/30148—Semiconductor; IC; Wafer
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Quality & Reliability (AREA)
- Image Analysis (AREA)
- Testing Or Measuring Of Semiconductors Or The Like (AREA)
- Life Sciences & Earth Sciences (AREA)
- Data Mining & Analysis (AREA)
- Investigating Materials By The Use Of Optical Means Adapted For Particular Applications (AREA)
- Artificial Intelligence (AREA)
- Biomedical Technology (AREA)
- Biophysics (AREA)
- Computational Linguistics (AREA)
- Health & Medical Sciences (AREA)
- Evolutionary Computation (AREA)
- General Health & Medical Sciences (AREA)
- Molecular Biology (AREA)
- Computing Systems (AREA)
- General Engineering & Computer Science (AREA)
- Mathematical Physics (AREA)
- Software Systems (AREA)
Description
本出願は、2021年7月19日に出願された米国特許仮出願第63/223,121号に対する優先権の利益を主張し、その内容は、参照によりその全体が本明細書に組み込まれる。
本開示は、概して、半導体デバイスの欠陥、特に低コントラスト欠陥の検出に関する。
様々な注記
Claims (15)
- 半導体デバイスにおける欠陥を検出する方法であって、
前記半導体デバイスの画像の複数のバイナリスライスを生成することと、
前記画像の統計的コントラスト特性に基づいて、前記複数のバイナリスライスのうちの各バイナリスライスをセグメントにセグメント化することと、
前記セグメントのサブセットを機械学習ネットワークに入力することであって、前記セグメントの前記サブセットは、前記サブセットに含まれない他のセグメントと比較して、より高いコントラストプロファイルを有するセグメントを含む、入力することと、
前記画像内の少なくとも1つの欠陥の存在又は不在を識別する前記機械学習ネットワークの出力を受信することと、を含む、方法。 - 前記機械学習ネットワークが多層機械学習モデルを含み、各バイナリスライスが異なるグレースケールレベルに対応する、請求項1に記載の方法。
- 前記機械学習ネットワークが、少なくとも1つの訓練画像を用いて教師あり機械学習技術を使用して、
訓練画像スライスを作成するために、前記少なくとも1つの訓練画像の複数のバイナリスライスを生成し、
前記少なくとも1つの訓練画像の統計的コントラスト特性に基づいて、前記訓練画像スライスのうちの各スライスをセグメント化し、
既知の欠陥を有する1つ以上のセグメントに対して欠陥ラベルを受信し、前記既知の欠陥を有しない1つ以上のセグメントに対して欠陥なしラベルを受信し、
前記少なくとも1つの訓練画像の前記セグメントを前記機械学習ネットワークに入力し、かつ
前記セグメントの前記ラベルに基づいて前記機械学習ネットワークに参照出力を提供することによって、欠陥を検出するように訓練され、
前記機械学習ネットワークは、その出力が前記参照出力と実質的に一致するまで反復動作を実行する、請求項1に記載の方法。 - 前記欠陥が、低コントラストウォーターマーク欠陥である、請求項1に記載の方法。
- 前記画像の少なくとも1つの特徴を強調するために前記画像を変換することと、
一連の線形フィルタ及び非線形フィルタを用いて前記画像をフィルタリングすることを含む、前記画像を前処理することと、を更に含む、請求項1に記載の方法。 - 前記統計的コントラスト特性が、ヒストグラム、範囲、標準偏差、最小-最大、平均、及び明画素に対する暗画素の比のうちの1つ以上によって定義される、請求項1に記載の方法。
- 前記方法が、グラフィック処理ユニット(GPU)及びコンピュータ処理ユニット(CPU)を使用して実行される、請求項1に記載の方法。
- 半導体デバイスの画像をキャプチャする検出器と、
機械の1つ以上のプロセッサと、
命令を記憶するメモリと、を備え、前記命令は、前記1つ以上のプロセッサによって実行されると、前記機械に、
前記半導体デバイスの前記画像の複数のバイナリスライスを生成することと、
前記画像の統計的コントラスト特性に基づいて、前記複数のバイナリスライスのうちの各バイナリスライスをセグメントにセグメント化することと、
前記セグメントのサブセットを機械学習ネットワークに入力することであって、前記セグメントの前記サブセットは、前記サブセットに含まれない他のセグメントと比較して、より高いコントラストプロファイルを有するセグメントを含む、入力することと、
前記画像内の少なくとも1つの欠陥の存在又は不在を識別する前記機械学習ネットワークの出力を受信することとを含む動作を実行させる、検査システム。 - 前記機械学習ネットワークが多層機械学習モデルを含み、各バイナリスライスが異なるグレースケールレベルに対応する、請求項8に記載の検査システム。
- 前記機械学習ネットワークが、少なくとも1つの訓練画像を用いて教師あり機械学習技術を使用して、
訓練画像スライスを作成するために、前記少なくとも1つの訓練画像の複数のバイナリスライスを生成し、
前記少なくとも1つの訓練画像の統計的コントラスト特性に基づいて、前記訓練画像スライスのうちの各スライスをセグメント化し、
既知の欠陥を有する1つ以上のセグメントに対して欠陥ラベルを受信し、前記既知の欠陥を有しない1つ以上のセグメントに対して欠陥なしラベルを受信し、
前記少なくとも1つの訓練画像の前記セグメントを前記機械学習ネットワークに入力し、
前記セグメントの前記ラベルに基づいて前記機械学習ネットワークに参照出力を提供することによって、欠陥を検出するように訓練され、
前記機械学習ネットワークは、その出力が前記参照出力と実質的に一致するまで反復動作を実行する、請求項8に記載の検査システム。 - 前記欠陥が、低コントラストウォーターマーク欠陥である、請求項8に記載の検査システム。
- 前記動作が、
前記画像の少なくとも1つの特徴を強調するために前記画像を変換することと、
一連の線形フィルタ及び非線形フィルタを用いて前記画像をフィルタリングすることを含む、前記画像を前処理することと、を更に含む、請求項8に記載の検査システム。 - 前記統計的コントラスト特性が、ヒストグラム、範囲、標準偏差、最小-最大、平均、及び明画素に対する暗画素の比のうちの1つ以上によって定義される、請求項8に記載の検査システム。
- 前記1つ以上のプロセッサが、グラフィック処理ユニット(GPU)を含む、請求項8に記載の検査システム。
- 命令を具体化する機械記憶媒体であって、前記命令は、機械によって実行されると、前記機械に、請求項1~7のいずれか一項に記載の方法を実行させる、機械記憶媒体。
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| US202163223121P | 2021-07-19 | 2021-07-19 | |
| US63/223,121 | 2021-07-19 | ||
| PCT/US2022/073857 WO2023004294A1 (en) | 2021-07-19 | 2022-07-18 | Low contrast non-referential defect detection |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2024527847A JP2024527847A (ja) | 2024-07-26 |
| JP7618889B2 true JP7618889B2 (ja) | 2025-01-21 |
Family
ID=84892180
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2024503722A Active JP7618889B2 (ja) | 2021-07-19 | 2022-07-18 | 低コントラスト非参照欠陥検出 |
Country Status (7)
| Country | Link |
|---|---|
| US (1) | US12354254B2 (ja) |
| EP (1) | EP4374159A4 (ja) |
| JP (1) | JP7618889B2 (ja) |
| KR (1) | KR20240038020A (ja) |
| CN (1) | CN117957436A (ja) |
| TW (1) | TWI903093B (ja) |
| WO (1) | WO2023004294A1 (ja) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US12354254B2 (en) | 2021-07-19 | 2025-07-08 | Onto Innovation Inc. | Low contrast non-referential defect detection |
Families Citing this family (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| TWI798650B (zh) * | 2021-02-25 | 2023-04-11 | 環球晶圓股份有限公司 | 自動光學檢測方法、自動光學檢測系統及記錄媒體 |
| CN115861153A (zh) * | 2021-09-24 | 2023-03-28 | 鸿海精密工业股份有限公司 | 图像检测方法、计算机装置及存储介质 |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2006266872A (ja) | 2005-03-24 | 2006-10-05 | Hitachi High-Technologies Corp | 外観検査方法及びその装置 |
| JP2007309679A (ja) | 2006-05-16 | 2007-11-29 | Mitsubishi Electric Corp | 画像検査方法およびその方法を用いた画像検査装置 |
| US20190333197A1 (en) | 2018-04-25 | 2019-10-31 | Perkinelmer Cellular Technologies Germany Gmbh | Systems and Methods for Segmentation and Analysis of 3D Images |
Family Cites Families (22)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US4519041A (en) | 1982-05-03 | 1985-05-21 | Honeywell Inc. | Real time automated inspection |
| JPS6138450A (ja) * | 1984-07-30 | 1986-02-24 | Hitachi Ltd | パタ−ン欠陥検査方法および装置 |
| JPH06138450A (ja) | 1992-10-23 | 1994-05-20 | Matsushita Electric Ind Co Ltd | カラー液晶素子の製造方法 |
| US6947587B1 (en) | 1998-04-21 | 2005-09-20 | Hitachi, Ltd. | Defect inspection method and apparatus |
| JP3695993B2 (ja) | 1999-06-30 | 2005-09-14 | 株式会社東芝 | 半導体装置の検査装置と検査方法 |
| US8611639B2 (en) | 2007-07-30 | 2013-12-17 | Kla-Tencor Technologies Corp | Semiconductor device property extraction, generation, visualization, and monitoring methods |
| KR20100121250A (ko) * | 2009-05-08 | 2010-11-17 | 호서대학교 산학협력단 | 큐에프엔 반도체 패키지의 외형 결함 검사를 위한 비전 시스템 및 이를 이용한 결함 분류 방법 |
| US20140358830A1 (en) | 2013-05-30 | 2014-12-04 | Synopsys, Inc. | Lithographic hotspot detection using multiple machine learning kernels |
| TWI797699B (zh) | 2015-12-22 | 2023-04-01 | 以色列商應用材料以色列公司 | 半導體試樣的基於深度學習之檢查的方法及其系統 |
| US10181185B2 (en) | 2016-01-11 | 2019-01-15 | Kla-Tencor Corp. | Image based specimen process control |
| US11580398B2 (en) | 2016-10-14 | 2023-02-14 | KLA-Tenor Corp. | Diagnostic systems and methods for deep learning models configured for semiconductor applications |
| US10387755B2 (en) | 2017-06-28 | 2019-08-20 | Applied Materials, Inc. | Classification, search and retrieval of semiconductor processing metrology images using deep learning/convolutional neural networks |
| TWI653605B (zh) | 2017-12-25 | 2019-03-11 | Utechzone Co., Ltd. | 利用深度學習的自動光學檢測方法、設備、電腦程式、電腦可讀取之記錄媒體及其深度學習系統 |
| US11257207B2 (en) | 2017-12-28 | 2022-02-22 | Kla-Tencor Corporation | Inspection of reticles using machine learning |
| US10599951B2 (en) | 2018-03-28 | 2020-03-24 | Kla-Tencor Corp. | Training a neural network for defect detection in low resolution images |
| KR102150673B1 (ko) * | 2018-10-02 | 2020-09-01 | (주)지엘테크 | 외관불량 검사방법 및 외관불량 검사 시스템 |
| CN109741344B (zh) | 2018-12-28 | 2022-03-18 | 上海联影智能医疗科技有限公司 | 血管分割方法、装置、医疗影像设备及存储介质 |
| US11551348B2 (en) | 2019-04-09 | 2023-01-10 | KLA Corp. | Learnable defect detection for semiconductor applications |
| CN113950704B (zh) | 2019-06-07 | 2025-11-11 | 卡尔蔡司Smt有限责任公司 | 具有改良3d体积图像重建精度的横截面成像 |
| CN114599934B (zh) | 2019-10-31 | 2024-10-11 | 卡尔蔡司Smt有限责任公司 | 用于测量har结构的形状偏差的fib-sem 3d断层成像术 |
| CN112164074B (zh) | 2020-09-22 | 2021-08-10 | 江南大学 | 一种基于深度学习的3d ct床快速分割方法 |
| WO2023004294A1 (en) | 2021-07-19 | 2023-01-26 | Onto Innovation Inc. | Low contrast non-referential defect detection |
-
2022
- 2022-07-18 WO PCT/US2022/073857 patent/WO2023004294A1/en not_active Ceased
- 2022-07-18 US US17/867,444 patent/US12354254B2/en active Active
- 2022-07-18 JP JP2024503722A patent/JP7618889B2/ja active Active
- 2022-07-18 KR KR1020247005544A patent/KR20240038020A/ko active Pending
- 2022-07-18 EP EP22846779.1A patent/EP4374159A4/en active Pending
- 2022-07-18 CN CN202280063122.8A patent/CN117957436A/zh active Pending
- 2022-07-19 TW TW111127063A patent/TWI903093B/zh active
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2006266872A (ja) | 2005-03-24 | 2006-10-05 | Hitachi High-Technologies Corp | 外観検査方法及びその装置 |
| JP2007309679A (ja) | 2006-05-16 | 2007-11-29 | Mitsubishi Electric Corp | 画像検査方法およびその方法を用いた画像検査装置 |
| US20190333197A1 (en) | 2018-04-25 | 2019-10-31 | Perkinelmer Cellular Technologies Germany Gmbh | Systems and Methods for Segmentation and Analysis of 3D Images |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US12354254B2 (en) | 2021-07-19 | 2025-07-08 | Onto Innovation Inc. | Low contrast non-referential defect detection |
Also Published As
| Publication number | Publication date |
|---|---|
| CN117957436A (zh) | 2024-04-30 |
| JP2024527847A (ja) | 2024-07-26 |
| EP4374159A1 (en) | 2024-05-29 |
| TWI903093B (zh) | 2025-11-01 |
| US12354254B2 (en) | 2025-07-08 |
| KR20240038020A (ko) | 2024-03-22 |
| US20230012917A1 (en) | 2023-01-19 |
| WO2023004294A1 (en) | 2023-01-26 |
| TW202314234A (zh) | 2023-04-01 |
| EP4374159A4 (en) | 2025-05-14 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP7618889B2 (ja) | 低コントラスト非参照欠陥検出 | |
| KR102254773B1 (ko) | 영상정보를 이용한 건물 부위별 하자의 자동 판정과 분류 시스템 및 그 방법 | |
| US11132786B2 (en) | Board defect filtering method based on defect list and circuit layout image and device thereof and computer-readable recording medium | |
| TWI787296B (zh) | 光學檢測方法、光學檢測裝置及光學檢測系統 | |
| KR101836096B1 (ko) | 이미지 데이터의 상태 판단 방법, 장치 및 컴퓨터-판독가능 저장 매체에 저장된 컴퓨터 프로그램 | |
| DE112022002858T5 (de) | Bildbasierte anomalieerkennung basierend auf einer maschinellen lernanalyse eines objekts | |
| WO2019151393A1 (ja) | 食品検査システム、食品検査プログラム、食品検査方法および食品生産方法 | |
| CN117893817A (zh) | 晶圆缺陷分类方法及其装置、系统、电子设备和存储介质 | |
| JP7298176B2 (ja) | 欠点検査装置および学習済みモデル | |
| Revathy et al. | Fabric defect detection and classification via deep learning-based improved Mask RCNN | |
| TW202201283A (zh) | 訓練資料增量方法、電子裝置與電腦可讀取記錄媒體 | |
| CN106355579A (zh) | 烟条表面褶皱的缺陷检测方法 | |
| CN112150460A (zh) | 检测方法、检测系统、设备和介质 | |
| WO2020175666A1 (ja) | カラーフィルタ検査装置、検査装置、カラーフィルタ検査方法および検査方法 | |
| US20250336053A1 (en) | Automated substrate defect identification using multiple classification engine models | |
| CN116665134A (zh) | 一种用于射频滤波器的生产监测设备及其监测方法 | |
| CN117636045B (zh) | 基于图像处理的木材缺陷检测系统 | |
| JP2020112483A (ja) | 外観検査システム、計算モデル構築方法及び計算モデル構築プログラム | |
| CN119731692A (zh) | 衬底缺陷检测和比较 | |
| US9519963B2 (en) | Device and method for analysis of coating additive performance | |
| KR20180063869A (ko) | 이미지 데이터의 상태 판단 방법, 장치 및 컴퓨터-판독가능 저장 매체에 저장된 컴퓨터 프로그램 | |
| US12579633B2 (en) | Periodic-pattern background removal | |
| Dias et al. | Identification of marks on tires using artificial vision for quality control | |
| Mowa et al. | Blind Image Quality Assessment Using a CNN and Edge Distortion. | |
| US20250362996A1 (en) | Systems and methods for line-based error detection |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20240315 |
|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20240315 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20241209 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20241212 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20250108 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 7618889 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |