Deprecated: The each() function is deprecated. This message will be suppressed on further calls in /home/zhenxiangba/zhenxiangba.com/public_html/phproxy-improved-master/index.php on line 456
JP4353980B2 - イメージセンサ検査方法及び装置 - Google Patents
[go: Go Back, main page]

JP4353980B2 - イメージセンサ検査方法及び装置 - Google Patents

イメージセンサ検査方法及び装置 Download PDF

Info

Publication number
JP4353980B2
JP4353980B2 JP2006524726A JP2006524726A JP4353980B2 JP 4353980 B2 JP4353980 B2 JP 4353980B2 JP 2006524726 A JP2006524726 A JP 2006524726A JP 2006524726 A JP2006524726 A JP 2006524726A JP 4353980 B2 JP4353980 B2 JP 4353980B2
Authority
JP
Japan
Prior art keywords
image
inspection
digital
image sensor
light
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2006524726A
Other languages
English (en)
Other versions
JP2007503764A (ja
Inventor
ジェイ ゴム タイラー
ディー ブルース ジェフ
Original Assignee
マイクロン テクノロジー, インク.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by マイクロン テクノロジー, インク. filed Critical マイクロン テクノロジー, インク.
Publication of JP2007503764A publication Critical patent/JP2007503764A/ja
Application granted granted Critical
Publication of JP4353980B2 publication Critical patent/JP4353980B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N17/00Diagnosis, testing or measuring for television systems or their details
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N17/00Diagnosis, testing or measuring for television systems or their details
    • H04N17/002Diagnosis, testing or measuring for television systems or their details for television cameras

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • General Health & Medical Sciences (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Transforming Light Signals Into Electric Signals (AREA)
  • Solid State Image Pick-Up Elements (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Mechanical Light Control Or Optical Switches (AREA)

Description

本発明は、一般的にイメージセンサ検査方法及び装置に関するものであり、特に、静的検査パターンと動的検査パターンとの双方を用いて、単一のイメージセンサ又は複数のイメージセンサを自動的に検査する方法及び装置に関するものである。
通常のイメージセンサは、行及び列に配置された光感応回路と称される個々のピクセルのアレイより成る。ピクセルの行は、これらのそれぞれのアクセストランジスタの制御ゲートを接続する共通ラインを有する。データは、ピクセルからそのアクセストランジスタを介してデータラインに供給される。ピクセルの各列は共通データラインに接続されている。
電荷結合装置(CCD)や、ホトダイオードアレイや、相補型金属酸化物半導体(CMOS)イメージャを含む半導体に基づく種々のイメージャがある。CMOSイメージャ回路は、例えば、ピクセルの焦平面アレイを有し、各セルは、基板のドーピングされた領域内に光発生電荷を生ぜしめる光センサ、例えば、光ゲート、光導電体又はホトダイオードを基板上に有する。読出し回路は各ピクセルに対し設けられており、この読出し回路は、少なくとも、ソースホロワトランジスタと、このソースホロワトランジスタを列出力ラインに結合するための行選択トランジスタとを有している。ピクセルは代表的に、ソースホロワトランジスタのゲートに接続された浮動拡散ノードを有している。光センサにより発生される電荷は浮動拡散ノードに送られる。イメージャは、電荷を光センサから浮動拡散ノードに転送するトランジスタと、この電荷転送の前に浮動拡散ノードを予め決定した電荷レベルにリセットする他のトランジスタとを有することもできる。
CMOSイメージャピクセル、例えば、4トランジスタ(4T)ピクセルでは、ピクセルの全ての能動素子が、
(1)光子を電荷に変換する機能と、
(2)電荷を浮動拡散ノードに転送する機能と、
(3)電荷を浮動拡散ノードに転送する前に浮動拡散ノードを既知の状態にリセットする機能と、
(4)読出すためのピクセルを選択する機能と、
(5)リセット電圧を表わす信号と、光変換された電荷に基づくピクセル信号電圧とを出力及び増幅する機能と
を実行する。3トランジスタ(3T)回路も同様に動作するが、この回路は、電荷を光センサから浮動拡散領域に転送するトランジスタを省略しているとともに、浮動拡散領域と光センサとを互いに結合している。
CMOSイメージャは一般に知られており、例えば、1996年に発行された文献IEEE Journal of Solid-State Circuits, Vol. 31(12) の第2046〜2050頁における論文“256×256 CMOS Active Pixel Sensor Camera-on-a-Chip”(Nixon 氏等著)や、1994年に発行された文献IEEE Transactions on Electron Devices, Vol. 41(3) の第452〜453頁における論文“CMOS Active Pixel Image Sensors ”(Mendis氏等著)や、米国特許第 5,471,515号明細書に開示されている。これらの文献は全て参考のためにここに開示したものである。
図1は、ピクセルのアレイ200を有する従来のCMOSイメージャを示すブロック線図であり、これらのピクセルは、3トランジスタ、4トランジスタ又はその他の個数のトランジスタを用いたピクセルとすることができる。ピクセルアレイ200は、予め決定した個数の列及び行に配置された複数のピクセルを有する。ピクセルアレイ200における各行のピクセルは全て行選択ラインにより同時にターンオンされ、各列のピクセルはそれぞれの列選択ラインにより選択的に出力される。行ラインは行アドレスデコーダ220に応答して行ドライバ210により選択的に駆動され、列選択ラインは列アドレスデコーダ270に応答して列ドライバにより選択的に駆動される。CMOSイメージャは、ピクセルの動作及び読出しのための適切な行及び列ラインを選択するためにアドレスデコーダ220及び270を制御するとともに、駆動電圧を選択された行及び列ラインの駆動トランジスタに印加する行ドライバ210及び列ドライバ260を制御する制御回路250により動作させられる。列ラインに選択的に接続されたピクセルに対し、代表的にピクセルリセット信号Vrst 及びピクセル画像信号Vsig をそれぞれ有するピクセル列信号が、列ドライバ260と関連するサンプル‐ホールド回路265により読出され、ピクセルリセット信号Vrst 及びピクセル画像信号Vsig が増幅器267によって互いに減算されて各ピクセルに対し差信号Vrst −Vsig を形成し、これが増幅された後アナログ‐デジタル変換器275によりデジタル化される。このアナログ‐デジタル変換器275は供給されたアナログピクセル信号をデジタル信号に変換し、このデジタル信号をイメージプロセッサ280に供給してデジタル画像を形成する。
CMOSイメージャの電荷収集動作は、当該技術分野で既知であり、1994年発行の文献SPIE Vol. 2172の第19〜29頁の論文“Progress in CMOS Active Pixel Image Sensors ”(Mendis氏等著)、1997年発行の文献IEEE Journal of Solid State Circuits, Vol. 32(2)の論文“CMOS Active Pixel Image Sensors for Highly Integrated Imaging Systems ” (Mendis氏等著)、1995年発行の文献IEDM Vol. 95の17〜25頁の論文“CMOS Image Sensors:Electronic Camera on a Chip ”及びその他の文献に記載されている。これらの文献は参考のために導入したものである。
代表的なCMOSイメージャ回路、その処理工程及びイメージャ回路の種々のCMOS素子の機能の詳細な説明は例えば、米国特許第 6,140,630号明細書(発明者:Rhodes氏)、米国特許第 6,376,868号明細書(発明者:Rhodes氏)、米国特許第 6,310,366号明細書(発明者:Rhodes氏等)、米国特許第 6,326,652号明細書(発明者:Rhodes氏)、米国特許第 6,204,524号明細書(発明者:Rhodes氏)及び米国特許第 6,333,205号明細書(発明者:Rhodes氏)に開示されている。これらの米国特許明細書は全て参考のために導入したものである。
上述したCMOSイメージャのようなイメージセンサピクセルアレイには、種々の故障原因があり、これが最終的に画像を欠陥があるものにする。例えば、ピクセルアレイが製造中に短絡又は遮断し、従って、ピクセルアレイが適切な機能を実行しえなくなるおそれがある。これらの問題を解決し、使用可能なアレイを選択するためには、アレイ中の欠陥を検出する必要がある。
上述したCMOSイメージャのようなイメージセンサアレイは従来から、校正された静的光源を用いて検査されている。代表的には、製造検査中に、白から黒までの光度範囲を変えた光をイメージセンサに投射し、アレイの応答を判定する測定を行う。しかし、このイメージセンサ検査方法の精度には不安がある。例えば、製造処理中に、隣接する2つのピクセルが互いに短絡していたとしても、測定出力はこれらのピクセルが互いに短絡していない場合と同じとなってしまう。このことは、検査中これらのピクセルに同じ光度の光が投射されたものとみなされる為に生じる。従って、欠陥は、装置がシステム中に配置されて“現実世界”の状態の下で検査されるまで気づかれなくなるおそれがある。
表示装置(例えば、陰極線管又は液晶表示パネル)上に表示される出力を人間が見ることにより欠陥検出を行う場合には、この欠陥検査は特に困難である。例えば、光子が上述したCMOSイメージャのようなイメージセンサに衝突すると、センサの光感応領域が光子を電流に変換し、その後この電流がアナログ‐デジタル変換器を介して、監視者が見るための10ビットワードに変換される。集積回路上のピクセルの個数が増大するにつれ、人間が欠陥を検出するのが益々困難になる。人間が監視するには、特別な訓練が必要となり、その場合でも人間の観察力が、許容しうる製品を決定する際の大きな役割を奏することとなる。しかし、不運にも、人間は当然ながら一貫した観察能力に欠け、一日中で注意力が変化する。従って、この種類の検査は、大型で、高価なイメージセンサ製品にとって許容しうるものではない。
他のイメージセンサ検査技術にも同様に問題がある。例えば、静的な検査画像を用いてイメージセンサを検査する場合、検査画像で隣接する明暗部分をピクセルの隣接行又は列と整列させる注意を払う必要がある。この整列処理は困難であり時間を浪費するおそれがある。更に、静的な検査画像によると、ピクセルアレイ全体に亘る種々の故障原因に対しイメージセンサを検査することができない。
従って、従来の検査技術の欠点を解消するようにイメージセンサのアレイ全体を有効に検査する自動的な装置及び方法が必要であり、望まれている。
本発明の例によれば、静的及び動的検査画像を発生させるのにデジタルライトプロジェクションシステムを用いてイメージセンサを検査する装置及び方法を提供する。
本発明の例によれば、被検査イメージセンサ装置に高解像度の静的又は動的検査画像を投射しうるデジタルライトプロジェクションシステムと、この被検査イメージセンサ装置の出力を解析するイメージセンサ信号検出手段とを有する検出装置を提供する。更に、デジタルライトプロジェクションシステムは視準用光学系と、デジタルマイクロミラーデバイスと、集束用光学系とを有している。本発明の他の所望の装置は、静的又は動的な検査画像を複数の被検査イメージセンサ装置上に投射しうるデジタルライトプロジェクションシステムを採用したイメージセンサ検査装置を有する。
本発明の一例では、デジタルライトプロジェクションシステムを採用したイメージセンサ検査装置を用い、高解像度の静的画像を被検査イメージセンサ装置に投射する。デジタルライトプロジェクションシステムは光源と、視準用光学系と、デジタルマイクロミラーデバイスと、集束用光学系とを有している。光源からの光は、パルス幅変調技術を用いるデジタルマイクロミラーデバイスにより校正するとともに、所望の検査画像に変換する。次に、この検査画像を、被検査イメージセンサ装置のイメージセンサ回路アレイ上に集束させ、その出力をイメージセンサ信号検出手段により読出して入力デジタル検査画像と相関づける。
本発明の他の例では、上述したようにデジタルライトプロジェクションシステムを採用したイメージセンサ装置を用い、動的検査画像を被検査イメージセンサ装置に投射する。次に、この画像を被検査イメージセンサ装置のイメージセンサ回路アレイに亘って移動(マーチング)させ、その出力をイメージセンサ信号検出手段により読出して入力デジタル検査画像と相関づける。
本発明の更に他の例では、上述したようにデジタルライトプロジェクションシステムを採用したイメージセンサ装置を用いて、静的又は動的な何れかの検査画像を複数の被検査イメージセンサ装置のイメージセンサ回路アレイ上に投射する。
本発明は特に、イメージセンの種々の故障原因を検査するとともにイメージセンサ検査処理を自動化するのに有効である。
本発明の上述した及びその他の利点及び特徴は、添付図面を参照した以下の代表的な実施例の詳細な説明から一層明らかとなるであろう。
以下の詳細な説明では、その一部を成し、本発明を実現しうる特定の実施例を例示する添付図面を参照する。これらの実施例は、当業者が本発明を形成及び使用しうる程度に充分詳細に説明してあるものであるが、本発明の精神及び範囲を逸脱することなく、構造的、論理的及び手順的な変更を行いうることに注意すべきである。
図2は、本発明の代表的な第1実施例によるイメージセンサ検査装置を表わしている。この装置5は、上述したCMOSイメージャのような被検査イメージセンサ装置(DUT)20上に高解像度の画像を投射しうるデジタル光処理システム(DLPS)10と、DUT20の出力を読み取りうるイメージセンサ信号検出器30とを有している。DLPS10は、DUT20に対し、イメージャピクセルアレイ全体を検査しうる種々の検査パターンを生ぜしめることができる。
デジタル光処理システム10は、光源12と、視準用光学系14と、光フィルタ16と、デジタルマイクロミラーデバイス(DMD)18と、集束用光学系19とより成っている。代表的な光源は、点灯中の光度及び波長の変化が1%以下である均一DC光源を有する。代表的な光フィルタは、光源から特定の波長又は波長域を選択する波長選択フィルタ、赤外線を濾波して除去するIRカットフィルタ及び光源の光度を弱めるフラットニングフィルタを有する。しかし、このようなフィルタの必要性は特定の被検査装置に対する所望の検査パラメータに依存する。従って、このようなフィルタは本発明にとって必要不可欠なものではなく、省略することもできる。更に、視準用光学系14及びフィルタ16は図2では単一ユニットとして示してあるが、これらはそれぞれ個別の2つのユニットとすることもできる。視準用光学系14は、光をデジタルマイクロミラーデバイス18に指向させるように設計した1つ又は1群のレンズを有する。集束用光学系19はデジタルマイクロミラーデバイス18からの画像を被検査装置20上に集束させるように設計した1つ又は1群のレンズを有する。本発明の視準用光学系14及び集束用光学系19は当該技術分野において周知である。
イメージセンサ信号検出器30は、PCと関連して用いられて、被検査装置20からの出力データを受けるイメージアクイジションカード又はフレーム取り込みカードのようなシステムである。イメージセンサ出力は、イメージセンサ信号検出器30が、その出力信号と入力信号とを、LabVIEW (登録商標)又はMATLAB(登録商標)のようなデータ解析ソフトウェアを用いて比較することにより解析される。これによって、検出処理が自動化され、イメージセンサの欠陥を検出する際の人間による監視誤差が実質的に排除される。
本発明の代表的な第1実施例によれば、光源12からの光線が視準用光学系(コリメータレンズ)14により視準され、次にこの光学系がこの視準された光線をデジタルマイクロミラーデバイス18に指向させる。この光線の光路を図2に矢印AB、CD及びEFで示す。視準された光線は図2に示すように、最初に、視準用光学系14とデジタルマイクロミラーデバイス18との間に配置した1つの光フィルタ16又は一連の光フィルタを通過する。デジタルマイクロミラーデバイス18に入射された光線は高解像度の画像に変換され、これらの画像が集束用光学系19を介して被検査装置20上に集束させる。
図3(a)に示すデジタルマイクロミラーデバイス18はデジタル光処理システムの中心素子であり、数千個の小型ミラー32のアレイより成っている。これらのミラー32は本質的に、これらの入力として電気的なワードを受けて光学的なワードを出力するデジタル光スイッチとして作用する。デジタルマイクロミラーデバイスにおける各ミラー32は約16μ2 である。これらのミラー32は、図3(b)に示すように、メモリセル34と、ねじれヒンジ36と、ミラー部分36とを有する数個の層から成っている。各ミラー部分38は2状態に、すなわち、“オン”の場合+10度又は“オフ”の場合−10度に移動でき、これにより被検査装置20上の光の個々のピクセルを制御することができる。本質的には、ミラー部分38がそのオン状態に回動すると、光源からの光が集束用光学系を介して投射され、被検査装置の対応するピクセルを照明する。ミラー部分38がそのオフ状態に回動すると、光源からの光が集束用光学系からそれて投射され、被検査装置の対応するピクセルは暗状態に保たれる。
デジタル光処理システムの動作中、デジタル信号がデジタルマイクロミラーデバイスの各ミラー部分38の下側のメモリセル34を電気的にアドレスする。この電気信号に応答して、各ミラー部分38が上述したように光源からの入射光と作用し合い、各ミラーがどのくらい長くオン状態又はオフ状態に留まるかを入力信号により制御する。従って、入射光は時間変調束に切り替り、これが被検査装置に出力される。この切り替り形態がパルス幅変調と称され、高解像度の画像を生じるのに用いられ、本発明によれば、これらの画像を被検査装置上に集束させる。このデジタル光処理技術はDigital Light Processing and MEMS: Timely Convergence for a Bright Future, Proceedings SPIE, Vol.2639, Micro-machining and Microfabrication, (1995)で更に詳細に説明されている。この文献は参考のために記載したものである。
本発明の代表的な第2実施例では、イメージセンサ検査装置105は図4(a)に示すように、1つのライトプロジェクションシステムを用いて複数のイメージセンサ装置20を同時に検査しうる。本発明の代表的なこの第2実施例のイメージセンサ検査装置は、前述した代表的な第1実施例と同様に、静的画像及び動的画像の双方を生ぜしめるのにデジタル光処理システムを採用しているが、これらの画像を複数の被検査装置20上に同時に集束させる。代表的なこの第2実施例によれば、デジタルライトプロジェクションシステム10のデジタルマイクロミラーデバイス18が1つの画像を互いに隣接する複数の被検査装置20上に投射する。従って、マイクロミラーアレイの解像度は、被検査装置の総解像度よりも大きくする必要がある。これら被検査装置は、各被検査装置間のスペースと整列させることができる。その理由は、これら被検査装置間に入るデジタルライトプロジェクションシステムからのいかなる光も検査に悪影響を及ぼさない為である。しかし、被検査装置は、明るい検査画像の区分と暗い検査画像の区分との間のエッジが各被検査装置上で2つの互いに隣接するピクセル行又は列に一致するように整列させる必要がある。
上述した第2実施例に類似する本発明の代表的な第3実施例では、図4(b)に示すようなイメージセンサ検査装置205により静的な又は動的な検査画像を用いて複数のイメージセンサ装置を検査しうるが、この検査装置205は、デジタルマイクロミラーデバイス18から受けた検査画像を複数の並列な検査画像に分割してこれらの検査画像を複数の被検査装置上に集束させうるようにしうる集束用光学系219を用いている。従って、イメージセンサ検査装置は各DUT20に対し少なくとも1つの検査画像を発生し、次いで単一の検査画像を各DUT20上に集束させる。
イメージセンサに欠陥を生ぜしめるおそれのある機構には種々のものがある。これらの機構の多くはイメージセンサのピクセルアレイの設計概念に関するものである。例えば、行又は列ラインを共用している互いに隣接するピクセルは互いに短絡するおそれがある。この短絡は、検査画像の明暗エッジにおける2つ以上の隣接ピクセルの応答を比較することにより検出しうる。しかし、互いに隣接していないピクセルも、これらがあたかも互いに短絡しているかのように応答する場合もある。例えば、検査画像からの光がアレイの第2の区分上に投射されなかった場合でも、イメージセンサの第1の区分上に投射された検査画像がこのアレイの第2の区分内のピクセルを発光させるおそれがある。何故このような隣接していないピクセルが一緒に応答するかを説明することはできず、アレイ上のどのピクセルがこのように動作するかを予測することもできない。しかし、本発明の方法及び装置は、互いに隣接するピクセル及び互いに隣接しないピクセルの双方における欠陥を検出しうるものである。
図5は、本発明の方法の代表的な第1実施例を示すブロック線図である。図2と図5とを参照するに、最初に図5のブロック50において、光源12からの光を校正するために既知の光度をデジタルマイクロミラーデバイス18に入力させる。次に、ブロック51において、校正された光を、上述したパルス幅変調技術により所望のデジタル画像に変換する。次に、ブロック52において、このデジタル画像を、上述したCMOSイメージャにおけるピクセルのアレイのような被検査装置20上に集束させる。最後に、ブロック53において、被検査装置20の出力をイメージセンサ信号検出器30により電圧として読み取り、この電圧をデジタルマイクロミラーデバイス18への光入力量と比較する。これらの両者間に良好な相関関係が存在すると、被検査装置は合格となる。
上述したように検査画像を発生させるのにデジタルマイクロミラーデバイスを用いることにより、例えば、画像を1つのピクセルに送り、明るいピクセルとこれに隣接する暗いピクセルとの間のコントラストを鮮鋭にすることができる。例えば、行/列アドレスx,yにおけるマイクロミラーからの画像を被検査装置上の対応するx,yの行/列ピクセルアドレスに転送するようにプログラミングされたデジタルマイクロミラーデバイスに光量“A”を入力させる。アドレスx,yにおけるイメージセンサピクセルからの出力が、デジタルマイクロミラーデバイスへ入力された光量“A”に対応すると、ピクセルは合格となる。しかし、本発明は一度に1つのピクセルを検査するのに限定されるものではなく、対角線や格子縞のような種々の検査画像を被検査装置に送るのに用いることができる。更に、デジタルマイクロミラーデバイスは、検査画像をイメージセンサピクセルアレイの各行/列を横切って移動させて被検査装置の全イメージセンサアレイを検査しうるようにプログラミングすることもできる。
図2を再度参照するに、本発明によるイメージセンサ検査方法の第1の代表的な実施例では、上述したイメージセンサ検査装置5を用いて静的な検査画像を被検査装置20上に投射する。この代表的な方法によれば、明るい画像区分に続いて暗い画像区分を有する1つの静的な検査画像又は一連のこれら画像を被検査装置20上に投射する。次に、明るい画像区分と暗い画像区分との間のエッジを被検査装置20の互いに隣接する2つのピクセル列間に正確に整列させる。次に、イメージセンサ信号検出手段30が、画像の明暗エッジにおける2つ以上の隣接ピクセルの応答を比較する。更に、検査画像の明暗エッジに位置していないが検査画像に応答するアレイ全体にまたがるいかなる画素も検出される。
本発明のイメージセンサ検査方法の第2の代表的な実施例によれば、デジタルマイクロミラーデバイス18が動的な検査画像を被検査装置20に送り、イメージセンサの全アレイを検査しうるようにする。代表的な、動的な検査画像は、移動する行と、移動する対角線と、交互の格子縞とを有する。これらの動的な検査画像を用いることにより、静的な検査画像を用いるよりも多くの欠陥機構を検出することができる。例えば、上述したように静的な検査画像を用いる場合、被検査装置のイメージセンサアレイの一部のみの上にある明るいピクセルと暗いピクセルとの1つの組合わせのみがアレイの検査に用いられる。従って、明るいピクセルと暗いピクセルとのこの特定の組合わせと関連する欠陥機構のみを検出しうるにすぎない。しかし、動的な検査画像をイメージセンサアレイに亘って進ませると、アレイを検査するのに明るいピクセルと暗いピクセルとの複数の組合わせが用いられる。例えば、明るいピクセルと暗いピクセルとの特定の組合わせとのみ関連する欠陥機構は、動的な検査画像を用いて被検査装置20上のピクセルの種々の異なる組合わせを組織的に照明することにより検出しうる。更に、アレイ全体に亘って画像を進ませることにより、アレイの一部だけではなく、アレイ全体における全てのピクセルを検査することができる。最後に、検査画像をアレイに亘って進ませることにより、明るい画像区分と暗い画像区分との間のエッジを被検査装置20の互いに隣接する2つのピクセル行又は列間に正確に整列させる必要があるという問題を回避し、従って、検査処理をより一層自動化しうるようにする。
本発明のイメージセンサ検査方法の代表的な第3の実施例によれば、前述したように且つ図4(a)に示すように、複数の被検査装置20上に1つの画像を投射するデジタルライトプロジェクションシステム10を用いることにより、複数のイメージセンサを同時に検査する。図6は、本発明によるイメージセンサ検査方法の代表的な第3の実施例を示すブロック線図である。図6及び図4(a)を参照するに、デジタルマイクロミラーデバイス18を用いて光源12からの光を校正し(ブロック60)、次に、所望のデジタル画像に変換する(ブロック61)。次に、このデジタル画像を複数の被検査装置上に投射する(ブロック62)。マイクロミラーアレイの解像度は被検査装置の総解像度よりも大きくする必要がある。これらの被検査装置は各被検査装置間のスペースと整列させることができる。その理由は、これら被検査装置間に入るデジタルライトプロジェクションシステムからのいかなる光も検査に悪影響を及ぼさない為である。静的な検査画像を用いる場合には、明るい画像区分と暗い画像区分との間のエッジが各被検査装置上の互いに隣接する2つのピクセル行又は列に一致するように被検査装置を整列させる必要がある。最後に、ブロック63において、イメージセンサ信号検出手段30により全ての被検査装置20の出力を同時に解析し、従って、複数のイメージセンサを検査する方法を自動化する。
本発明のイメージセンサ検査方法の代表的な第4の実施例によれば、前述したように且つ図4(b)に示すように、複数の被検査画像を同時に発生させるデジタルライトプロジェクションシステム10を用いることにより、複数のイメージセンサを同時に検査する。図7は、本発明によるイメージセンサ検査方法の代表的なこの第4の実施例を示すブロック線図である。この図7及び図4(b)を参照するに、デジタルマイクロミラーデバイス18を用いて光源12からの光を校正し(ブロック70)、次に、複数のデジタル画像に変換する(ブロック71)。デジタルライトプロジェクションシステムは、例えば、デジタルマイクロミラーデバイスからの画像を複数の画像に分割しうる集束用光学系19を用いることにより複数のデジタル検査画像を生ぜしめることができる。次に、各被検査装置上に1つのみの検査画像が投射されるように、これらのデジタル検査画像を複数の被検査装置上に集束させる(ブロック72)。最後に、ブロック73において、イメージセンサ信号検出手段30により全ての被検査装置20の出力を同時に解析し、従って、複数のイメージセンサを検査する方法を自動化する。
本発明の個々の代表的な装置及び方法の実施例を上述し且つ図示したが、本発明の実施はこれらの代表的な実施例のうちの1つのみを用いるのに限定されるものではない。本発明の1つ以上の実施例を別々に又は一緒に用いてイメージセンサにおける欠陥を検出することができる。
更に、本発明の代表的な実施例を上述し且つ図示したが、本発明の精神又は範囲を逸脱することなしに、種々の変更を施すことができる。従って、本発明は上述した説明によって制限を受けるものではなく、特許請求の範囲によってのみ制限されるものである。
図1は、従来のCMOSイメージャを示すブロック線図である。 図2は、本発明の一実施例による代表的なイメージセンサ検査装置を示す線図である。 図3(a)は、従来のデジタルマイクロミラーデバイスを拡大して示す平面図である。 図3(b)は、2つの拡大した個々のマイクロミラーデバイスを示す斜視図である。 図4(a)は、本発明の他の実施例による代表的なイメージセンサ検査装置を示す線図である。 図4(b)は、本発明の更に他の実施例による代表的なイメージセンサ検査装置を示す線図である。 図5は、本発明による代表的なイメージセンサ検査方法を示すブロック線図である。 図6は、本発明による他の代表的なイメージセンサ検査方法を示すブロック線図である。 図7は、本発明による更に他の代表的なイメージセンサ検査方法を示すブロック線図である。

Claims (23)

  1. 動的な画像であるデジタル検査画像を発生するとともにこれらデジタル検査画像を少なくとも1つのイメージセンサ上に指向させるデジタルライトプロジェクションシステムと、
    前記デジタル検査画像の1つを複数の画像に分割しうる集束用光学系と、
    前記少なくとも1つのイメージセンサからの信号を検出するイメージセンサ信号検出器と
    を具えるイメージセンサ検査装置。
  2. 請求項1に記載のイメージセンサ検査装置において、前記動的な検査画像が、移動する行と、移動する対角線と、交互の格子縞とより成る群から選択した1つ以上の画像を有しているイメージセンサ検査装置。
  3. 請求項1に記載のイメージセンサ検査装置において、前記デジタルライトプロジェクションシステムが、光源と、この光源からの光をデジタル検査画像に変換するデジタルマイクロミラーデバイスと、前記光源からの光を前記デジタルマイクロミラーデバイス上に指向させる視準用光学系と、前記デジタル検査画像をイメージセンサ上に集束させる集束用光学系とを具えているイメージセンサ検査装置。
  4. 請求項3に記載のイメージセンサ検査装置において、前記光源が均一DC光源であるイメージセンサ検査装置。
  5. 請求項に記載のイメージセンサ検査装置において、前記デジタルライトプロジェクションシステムが更に、前記光源からの光を前記デジタルマイクロミラーデバイスに指向させる前に、この光を濾波するフィルタ光学系を具えているイメージセンサ検査装置。
  6. 請求項に記載のイメージセンサ検査装置において、複数の前記デジタル検査画像の各々が前記集束用光学系により分割されるようになっているイメージセンサ検査装置。
  7. 請求項6に記載のイメージセンサ検査装置において、前記複数の画像が複数の同一の画像となるようにしたイメージセンサ検査装置。
  8. 動的なデジタル検査画像を発生する画像発生器及びこれら動的なデジタル検査画像の1つを複数のイメージセンサ上に同時に指向させる検査画像指向装置を有するデジタルライトプロジェクションシステムと、
    前記イメージセンサからのそれぞれの信号を検出するイメージセンサ信号検出器と
    を具えている、複数のイメージセンサを同時に検査する装置において、
    前記デジタルライトプロジェクションシステムが、
    光源と、
    この光源からの光をデジタル検査画像に変換するデジタルマイクロミラーデバイスと、
    前記光源からの光を前記デジタルマイクロミラーデバイス上に指向させる視準用光学系と、
    前記デジタル検査画像をイメージセンサ上に集束させ、指向された前記デジタル検査画像を複数の同一の画像に分割しうるようにる集束用光学系と
    を具えている、複数のイメージセンサを同時に検査する装置。
  9. 光源と、この光源からの光を少なくとも1つの動的なデジタル検査画像に変換するデジタルマイクロミラーデバイスと、前記光源からの光を前記デジタルマイクロミラーデバイス上に指向させる視準用光学系と、前記デジタル検査画像を被検査イメージセンサ装置上に集束させる集束用光学系とを具えているデジタルライトプロジェクションシステム、及び
    被検査イメージセンサ装置からの連続信号を前記イメージセンサ信号検出器内に入力させる入力手段と、被検査イメージセンサ装置からの前記連続信号を、前記デジタルライトプロジェクションシステムにより入力された前記検査画像と自動的に比較する手段とを具えているイメージセンサ信号検出器
    を有している、自動化されたイメージセンサ検査装置であって、
    前記デジタルライトプロジェクションシステムが、複数の検査画像を用いて複数のイメージセンサを検査しうるようになっており、
    前記集束用光学系が、前記検査画像を複数の同一の検査画像に分割しうるようになっている
    自動化されたイメージセンサ検査装置。
  10. 動的なデジタル検査画像を発生させる過程と、
    この動的なデジタル検査画像を複数の検査画像に分割する過程と、
    この複数の検査画像の1つを少なくとも1つのイメージセンサに与える過程と、
    このイメージセンサから第1信号をイメージセンサ信号検出器内に入力させる過程と、
    前記デジタル検査画像を前記イメージセンサからの前記第1信号と相関づける過程と
    を有するイメージセンサ検査方法
  11. 請求項10に記載のイメージセンサ検査方法において、前記動的な検査画像が、移動する行と、移動する対角線と、交互の格子縞とより成る群から選択した1つ以上の画像を有するようにするイメージセンサ検査方法
  12. 請求項10に記載のイメージセンサ検査方法において、デジタル検査画像を発生させる前記過程がデジタルライトプロジェクションシステムにより実行するイメージセンサ検査方法
  13. 請求項12に記載のイメージセンサ検査方法において、前記デジタルライトプロジェクションシステムが、光源と、この光源からの光をデジタル検査画像に変換するデジタルマイクロミラーデバイスと、前記光源からの光を前記デジタルマイクロミラーデバイス上に指向させる視準用光学系と、前記デジタル検査画像をイメージセンサ上に集束させる集束用光学系とを具えるようにするイメージセンサ検査方法
  14. 請求項13に記載のイメージセンサ検査方法において、前記デジタルライトプロジェクションシステムが更に、前記光源からの光を前記デジタルマイクロミラーデバイスに指向させる前に、この光を濾波するフィルタ光学系を具えるようにするイメージセンサ検査方法
  15. 請求項10に記載のイメージセンサ検査方法において、前記イメージセンサから第1信号を入力させる前記過程と、前記デジタル検査画像を前記第1信号と相関づける前記過程とを、イメージセンサ信号検出器により実行するようにするイメージセンサ検査方法。
  16. 請求項10に記載のイメージセンサ検査方法において、前記検査画像をイメージセンサに与える前記過程が更に、前記検査画像を複数のイメージセンサに与える過程を有するイメージセンサ検査方法。
  17. 請求項10に記載のイメージセンサ検査方法において、デジタル検査画像を発生させる前記過程が更に、複数のデジタル検査画像を発生させる過程を有するイメージセンサ検査方法。
  18. 請求項13に記載のイメージセンサ検査方法において、前記集束用光学系が、前記デジタル検査画像を複数の同一の画像に分割しうるようにするイメージセンサ検査方法。
  19. デジタルライトプロジェクションシステムを用いて複数の動的なデジタル検査画像を発生させる過程と、
    発生された同一のデジタル検査画像を複数のイメージセンサの各々に与える過程と、
    これらのイメージセンサから複数の信号をイメージセンサ信号検出器内に入力させる過程と、
    発生された前記デジタル検査画像を、前記複数のイメージセンサから入力された前記複数の信号と相関づける過程と
    を有する、複数のイメージセンサを同時に検査する方法。
  20. 請求項19に記載の複数のイメージセンサを同時に検査する方法において、前記デジタルライトプロジェクションシステムが、光源と、この光源からの光をデジタル検査画像に変換するデジタルマイクロミラーデバイスと、前記光源からの光を前記デジタルマイクロミラーデバイス上に指向させる視準用光学系と、前記デジタル検査画像をイメージセンサ上に集束させる集束用光学系とを具えるようにする、複数のイメージセンサを同時に検査する方法。
  21. 請求項20に記載の複数のイメージセンサを同時に検査する方法において、前記デジタルライトプロジェクションシステムが更に、前記光源からの光を前記デジタルマイクロミラーデバイスに指向させる前に、この光を濾波するフィルタ光学系を具えるようにする、複数のイメージセンサを同時に検査する方法。
  22. 請求項20に記載の複数のイメージセンサを同時に検査する方法において、発生された同一の検査画像を複数のイメージセンサの各々に与える前記過程が、前記デジタル検査画像を複数の同一の検査画像に分割する過程を有する、複数のイメージセンサを同時に検査する方法。
  23. 請求項19に記載の複数のイメージセンサを同時に検査する方法において、イメージセンサ信号検出器により、前記イメージセンサから第1信号を前記イメージセンサ信号検出器内に入力させるとともに前記デジタル検査画像を前記第1信号と相関づけるようにする、複数のイメージセンサを同時に検査する方法。
JP2006524726A 2003-08-22 2004-08-18 イメージセンサ検査方法及び装置 Expired - Fee Related JP4353980B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US10/645,620 US7136157B2 (en) 2003-08-22 2003-08-22 Method and apparatus for testing image sensors
PCT/US2004/026875 WO2005022931A1 (en) 2003-08-22 2004-08-18 Method and apparatus for testing image sensors

Publications (2)

Publication Number Publication Date
JP2007503764A JP2007503764A (ja) 2007-02-22
JP4353980B2 true JP4353980B2 (ja) 2009-10-28

Family

ID=34194354

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2006524726A Expired - Fee Related JP4353980B2 (ja) 2003-08-22 2004-08-18 イメージセンサ検査方法及び装置

Country Status (7)

Country Link
US (2) US7136157B2 (ja)
EP (1) EP1658734A1 (ja)
JP (1) JP4353980B2 (ja)
KR (1) KR100810874B1 (ja)
CN (1) CN1871860B (ja)
TW (1) TWI254791B (ja)
WO (1) WO2005022931A1 (ja)

Families Citing this family (37)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7136157B2 (en) * 2003-08-22 2006-11-14 Micron Technology, Inc. Method and apparatus for testing image sensors
JP2005274925A (ja) * 2004-03-24 2005-10-06 Pioneer Electronic Corp ピント調整方法、ピント調整装置
US8634014B2 (en) * 2004-04-05 2014-01-21 Hewlett-Packard Development Company, L.P. Imaging device analysis systems and imaging device analysis methods
US8705151B2 (en) * 2004-04-05 2014-04-22 Hewlett-Packard Development Company, L.P. Imaging device calibration methods, imaging device calibration instruments, imaging devices, and articles of manufacture
US8587849B2 (en) * 2004-04-05 2013-11-19 Hewlett-Packard Development Company, L.P. Imaging systems, imaging device analysis systems, imaging device analysis methods, and light beam emission methods
EP1628123A1 (en) * 2004-08-17 2006-02-22 Dialog Semiconductor GmbH Testing of miniaturized cameras with electronic and/or optical zoom functions
EP1648181A1 (en) 2004-10-12 2006-04-19 Dialog Semiconductor GmbH A multiple frame grabber
US7760253B2 (en) * 2005-02-08 2010-07-20 Hewlett-Packard Development Company, L.P. Imaging device analysis methods, imaging device analysis systems, and articles of manufacture
KR100863985B1 (ko) * 2007-02-26 2008-10-16 (주)하이비젼시스템 이미지센서 테스트장치
US8000520B2 (en) * 2007-11-28 2011-08-16 Omnivision Technologies, Inc. Apparatus and method for testing image sensor wafers to identify pixel defects
JP4236123B1 (ja) * 2008-04-21 2009-03-11 株式会社林創研 三次元画像取得装置
DE102008022004A1 (de) * 2008-05-02 2009-11-05 Wincor Nixdorf International Gmbh Vorrichtung zur Ausrichtung von Belegen
US8659685B2 (en) * 2008-06-25 2014-02-25 Aptina Imaging Corporation Method and apparatus for calibrating and correcting shading non-uniformity of camera systems
KR100924115B1 (ko) * 2009-07-15 2009-10-29 김대봉 카메라 모듈 검사 장치 및 방법
JP4975177B2 (ja) * 2010-09-10 2012-07-11 キヤノン株式会社 撮像装置
US9083946B2 (en) * 2012-02-21 2015-07-14 Rockwell Automation Technologies, Inc. System to detect failed pixels in a sensor array
US8872113B2 (en) * 2012-02-21 2014-10-28 Rockwell Automation Technologies, Inc. System to test performance of pixels in a sensor array
EP2696590B1 (en) 2012-08-06 2014-09-24 Axis AB Image sensor positioning apparatus and method
CN103763546B (zh) * 2013-12-25 2016-07-13 宁波舜宇光电信息有限公司 手机摄像头单体校正光源差异校正方法
CN103969829B (zh) * 2014-05-16 2016-04-13 西安电子科技大学 基于mems微扫描镜的单探测器光学成像系统及方法
CN104049195A (zh) * 2014-05-22 2014-09-17 致茂电子(苏州)有限公司 影像感测器的测试装置及其测试方法
JP2015225059A (ja) * 2014-05-30 2015-12-14 株式会社リコー 光学素子検査装置および光学素子検査方法および光学素子検査システム
CN104458206A (zh) * 2014-12-08 2015-03-25 天津大学 基于labview的图像传感器测试系统
US9843794B2 (en) 2015-04-01 2017-12-12 Semiconductor Components Industries, Llc Imaging systems with real-time digital testing capabilities
US9843797B2 (en) 2015-06-11 2017-12-12 Semiconductor Components Industries, Llc Imaging systems having column readout circuitry with test data injection capabilities
CN106331693B (zh) * 2015-07-03 2018-06-19 群光电子股份有限公司 测试系统及测试方法
CN107466477B (zh) 2015-11-12 2021-08-10 松下电器(美国)知识产权公司 显示方法、计算机可读取记录介质以及显示装置
DE102016202344A1 (de) * 2016-02-16 2017-08-17 Siemens Aktiengesellschaft Vorrichtung mit einem Bildsensor zum Erfassen von Bilddaten sowie Verfahren zum Prüfen eines solchen Bildsensors
CN110114988B (zh) 2016-11-10 2021-09-07 松下电器(美国)知识产权公司 发送方法、发送装置及记录介质
WO2018106970A1 (en) 2016-12-09 2018-06-14 Formfactor, Inc. Led light source probe card technology for testing cmos image scan devices
CN107067390B (zh) * 2017-03-09 2020-01-14 深圳怡化电脑股份有限公司 一种检测图像传感器的灰度分辨率的方法及装置
JP2019066422A (ja) * 2017-10-04 2019-04-25 ソニーセミコンダクタソリューションズ株式会社 検査装置、および検査方法、並びに、プログラム
TWI701497B (zh) * 2018-10-17 2020-08-11 英錡科技股份有限公司 具有光點自動校正的投影裝置
KR102505817B1 (ko) * 2020-09-18 2023-03-06 문명일 3차원 이미지 획득 장치
CN116685797A (zh) 2021-01-06 2023-09-01 昕诺飞控股有限公司 基于灯丝的固态照明设备
JP2024053276A (ja) * 2022-10-03 2024-04-15 株式会社アドバンテスト 試験装置、試験システム、試験方法および試験プログラム
WO2025061857A1 (en) 2023-09-20 2025-03-27 Trinamix Gmbh Automated out-of-line pixel detection

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4648695A (en) 1983-08-10 1987-03-10 Nippon Kogaku K.K. Illumination apparatus for testing photoelectric transducer device
JPH03216566A (ja) 1990-01-22 1991-09-24 Mitsubishi Electric Corp Ccdリニアイメージセンサのテスト装置
US5120960A (en) * 1991-04-25 1992-06-09 Westinghouse Electric Corp. Infrared image detecting device and method
US5448395A (en) * 1993-08-03 1995-09-05 Northrop Grumman Corporation Non-mechanical step scanner for electro-optical sensors
US5457493A (en) * 1993-09-15 1995-10-10 Texas Instruments Incorporated Digital micro-mirror based image simulation system
DE4338390C2 (de) * 1993-11-10 2001-06-13 Bodenseewerk Geraetetech Szenensimulator, insbesondere zum Testen von Infrarot-Sensoren in Zielsuchköpfen
US5467128A (en) 1994-01-19 1995-11-14 The Regents Of The University Of California, Office Of Technology Transfer High speed imager test station
US5694053A (en) * 1995-06-07 1997-12-02 Xerox Corporation Display matrix tester
US5803570A (en) 1996-12-10 1998-09-08 Raytheon Company Calibration system and method for display optical systems
KR100510120B1 (ko) * 1998-08-26 2005-12-21 삼성전자주식회사 이미지 센서의 감마 특성 곡선 획득 장치 및 방법
JP2000292310A (ja) * 1999-04-08 2000-10-20 Sony Corp 検査装置及びその方法
US6618076B1 (en) * 1999-12-23 2003-09-09 Justsystem Corporation Method and apparatus for calibrating projector-camera system
KR100399884B1 (ko) * 2000-10-25 2003-09-29 주식회사 하이닉스반도체 이미지 센서의 결함 픽셀 보정 장치 및 그 방법
EP1303147A1 (en) 2001-10-12 2003-04-16 CSEM Centre Suisse d'Electronique et de Microtechnique SA Method for calibration of an electronic camera
DE10233175A1 (de) * 2002-07-22 2004-02-12 Leica Microsystems Semiconductor Gmbh Vorrichtung und Verfahren zum Kalibrieren eines opto-elektronischen Sensors und zur Vermessung von Strukturen auf einem Substrat
US7136157B2 (en) * 2003-08-22 2006-11-14 Micron Technology, Inc. Method and apparatus for testing image sensors

Also Published As

Publication number Publication date
TWI254791B (en) 2006-05-11
US7400389B2 (en) 2008-07-15
US20070019075A1 (en) 2007-01-25
US20050041242A1 (en) 2005-02-24
TW200523535A (en) 2005-07-16
EP1658734A1 (en) 2006-05-24
KR20060060697A (ko) 2006-06-05
WO2005022931A1 (en) 2005-03-10
US7136157B2 (en) 2006-11-14
CN1871860A (zh) 2006-11-29
CN1871860B (zh) 2010-11-03
JP2007503764A (ja) 2007-02-22
KR100810874B1 (ko) 2008-03-06

Similar Documents

Publication Publication Date Title
JP4353980B2 (ja) イメージセンサ検査方法及び装置
CN116783474B (zh) 扫描散射测量叠盖测量
JP4979159B2 (ja) 画像検出回路アレイをテストするための方法及び装置
US4301409A (en) Solar cell anomaly detection method and apparatus
JPH11252464A (ja) Cmosイメージャ用ピクセル補正システム及び方法
US20210096061A1 (en) Sensitive Optical Metrology in Scanning and Static Modes
JPH11239296A (ja) Cmosイメージャピクセルにおけるリーク性アクセススイッチを検知する回路
US8363042B2 (en) Photon transfer curve test time reduction
JP7147468B2 (ja) 赤外線検出器の読み出し回路及びその検査方法
US7847821B2 (en) On chip test mode implementation
CN101326436B (zh) 外观检查装置
JPH01313745A (ja) 着色周期性パターンの検査方法
US7122819B2 (en) Method and apparatus for imager die package quality testing
US20100231763A1 (en) Defective pixel detector for a digital video camera and associated methods
JP2001008237A (ja) Mos型固体撮像素子の検査方法およびこの検査方法を使用するmos型固体撮像素子
JP2683248B2 (ja) 着色周期性パターンの検査方法
JP2006128244A (ja) 固体撮像装置の検査方法および固体撮像装置
JP2007174655A (ja) イメージセンサ及びそのためのテストシステム並びにテスト方法
JPH036444A (ja) 蛍光検査装置
JPH05129401A (ja) 半導体デバイス検査システム
JPH04165641A (ja) ウェーハ外観検査装置
JPH10332534A (ja) レーザ光学系検査装置
JPS58222535A (ja) カラ−・イメ−ジ・センサ用テスト装置

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20090203

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20090428

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20090511

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20090603

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20090610

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20090623

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20090623

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20090721

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20090728

R150 Certificate of patent or registration of utility model

Ref document number: 4353980

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120807

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130807

Year of fee payment: 4

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees