Deprecated: The each() function is deprecated. This message will be suppressed on further calls in /home/zhenxiangba/zhenxiangba.com/public_html/phproxy-improved-master/index.php on line 456
JP7631794B2 - 検査方法および検査装置 - Google Patents
[go: Go Back, main page]

JP7631794B2 - 検査方法および検査装置 - Google Patents

検査方法および検査装置 Download PDF

Info

Publication number
JP7631794B2
JP7631794B2 JP2020216142A JP2020216142A JP7631794B2 JP 7631794 B2 JP7631794 B2 JP 7631794B2 JP 2020216142 A JP2020216142 A JP 2020216142A JP 2020216142 A JP2020216142 A JP 2020216142A JP 7631794 B2 JP7631794 B2 JP 7631794B2
Authority
JP
Japan
Prior art keywords
color
color difference
divided
information
divided regions
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2020216142A
Other languages
English (en)
Other versions
JP2022101824A (ja
Inventor
龍平 久利
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Seiko Epson Corp
Original Assignee
Seiko Epson Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Seiko Epson Corp filed Critical Seiko Epson Corp
Priority to JP2020216142A priority Critical patent/JP7631794B2/ja
Priority to CN202111591695.1A priority patent/CN114689593B/zh
Priority to US17/560,362 priority patent/US12086976B2/en
Publication of JP2022101824A publication Critical patent/JP2022101824A/ja
Application granted granted Critical
Publication of JP7631794B2 publication Critical patent/JP7631794B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/17Systems in which incident light is modified in accordance with the properties of the material investigated
    • G01N21/25Colour; Spectral properties, i.e. comparison of effect of material on the light at two or more different wavelengths or wavelength bands
    • G01N21/255Details, e.g. use of specially adapted sources, lighting or optical systems
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84Systems specially adapted for particular applications
    • G01N21/88Investigating the presence of flaws or contamination
    • G01N21/8806Specially adapted optical and illumination features
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01JMEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
    • G01J3/00Spectrometry; Spectrophotometry; Monochromators; Measuring colours
    • G01J3/46Measurement of colour; Colour measuring devices, e.g. colorimeters
    • G01J3/463Colour matching
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01JMEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
    • G01J3/00Spectrometry; Spectrophotometry; Monochromators; Measuring colours
    • G01J3/46Measurement of colour; Colour measuring devices, e.g. colorimeters
    • G01J3/50Measurement of colour; Colour measuring devices, e.g. colorimeters using electric radiation detectors
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/17Systems in which incident light is modified in accordance with the properties of the material investigated
    • G01N21/25Colour; Spectral properties, i.e. comparison of effect of material on the light at two or more different wavelengths or wavelength bands
    • G01N21/27Colour; Spectral properties, i.e. comparison of effect of material on the light at two or more different wavelengths or wavelength bands using photo-electric detection ; circuits for computing concentration
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84Systems specially adapted for particular applications
    • G01N21/88Investigating the presence of flaws or contamination
    • G01N21/8851Scan or image signal processing specially adapted therefor, e.g. for scan signal adjustment, for detecting different kinds of defects, for compensating for structures, markings, edges
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84Systems specially adapted for particular applications
    • G01N21/88Investigating the presence of flaws or contamination
    • G01N21/95Investigating the presence of flaws or contamination characterised by the material or shape of the object to be examined
    • G01N21/956Inspecting patterns on the surface of objects
    • G01N21/95607Inspecting patterns on the surface of objects using a comparative method
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0004Industrial image inspection
    • G06T7/001Industrial image inspection using an image reference approach
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/11Region-based segmentation
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/90Determination of colour characteristics
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84Systems specially adapted for particular applications
    • G01N21/88Investigating the presence of flaws or contamination
    • G01N21/8851Scan or image signal processing specially adapted therefor, e.g. for scan signal adjustment, for detecting different kinds of defects, for compensating for structures, markings, edges
    • G01N2021/8887Scan or image signal processing specially adapted therefor, e.g. for scan signal adjustment, for detecting different kinds of defects, for compensating for structures, markings, edges based on image processing techniques
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10024Color image
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20021Dividing image into blocks, subimages or windows
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30108Industrial image inspection

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Biochemistry (AREA)
  • Pathology (AREA)
  • Chemical & Material Sciences (AREA)
  • Analytical Chemistry (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Immunology (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Quality & Reliability (AREA)
  • Mathematical Physics (AREA)
  • Signal Processing (AREA)
  • Spectrometry And Color Measurement (AREA)
  • Investigating Materials By The Use Of Optical Means Adapted For Particular Applications (AREA)
  • Image Analysis (AREA)

Description

本発明は、検査方法および検査装置に関する。
例えば、印刷物において、真贋判定の基準となる基準画像と、比較対象である比較画像と、が一致しているか否かを判定する識別装置が知られている。例えば、特許文献1に記載されている印刷物画像識別装置では、全体積分処理と、ブロック積分処理と、ブロック微分処理と、判定段階と、を順次実行する。
全体積分処理は、比較対象となる画像全体の画素の画素値を色成分ごとに加算することによって全体積分値を算出する処理である。ブロック積分処理は、画像全体を複数のブロックに分割し、分割されたそれぞれのブロックごとにブロック内の各画素の画素値の色成分ごとに加算することによってブロック積分値を算出する処理である。ブロック微分処理は、分割されたそれぞれのブロックごとにブロック内の隣り合う画素間の差分を算出して、該差分の平均値を演算することによってブロック微分値を算出する処理である。判定段階は、基準画像と披検画像の全体積分値、ブロック積分値、ブロック微分値をそれぞれ比較することによって、基準画像と比較画像が一致しているか否かを判定する処理である。
特開2010-183471号公報
しかしながら、特許文献1に記載されている識別装置では、比較画像を撮像する際に測定対象の位置固定を前提としている。このため、測定対象の向きが、基準画像における測定対象の向きと異なっている場合には、本来であれば一致していると判定する場合において、一致していないと判定しまうおそれがある。
本発明の検査方法は、基準画像の基準画像データと、撮像画像の撮像画像データと、が一致しているか否かを検査する検査方法であって、
前記基準画像が分割された複数の第1分割領域のそれぞれに、基準色に対する色差の情報が割り振られた情報を取得する第1取得ステップと、
前記撮像画像が分割された複数の第2分割領域のそれぞれに、前記基準色に対する色差の情報が割り振られた情報を取得する第2取得ステップと、
前記各第1分割領域の色差の情報と、対応する前記各第2分割領域の色差の情報と、を比較する第1比較ステップと、
前記各第1分割領域の色差の情報と、前記各第2分割領域の色差の情報と、を、前記第1比較ステップで比較した組み合わせとは異なる組み合わせで比較する第2比較ステップと、を有し、
前記第1比較ステップで得られた第1比較結果と、前記第2比較ステップで得られた第2比較結果と、に基づいて、前記基準画像データと前記撮像画像データとが一致しているか否かを判定することを特徴とする。
本発明の検査装置は、基準画像の基準画像データと、撮像画像の撮像画像データと、が一致しているか否かを検査する制御部を備える検査装置であって、
前記制御部は、
前記基準画像が分割された複数の第1分割領域のそれぞれに、基準色に対する色差の情報が割り振られた情報を取得する第1取得ステップと、
前記撮像画像が分割された複数の第2分割領域のそれぞれに、前記基準色に対する色差の情報が割り振られた情報を取得する第2取得ステップと、
前記各第1分割領域の色差の情報と、対応する前記各第2分割領域の色差の情報と、を比較する第1比較ステップと、
前記各第1分割領域の色差の情報と、前記各第2分割領域の色差の情報と、を、前記第1比較ステップで比較した組み合わせとは異なる組み合わせで比較する第2比較ステップと、を実行し、
前記第1比較ステップで得られた第1比較結果と、前記第2比較ステップで得られた第2比較結果と、に基づいて、前記基準画像データと前記撮像画像データとが一致しているか否かを判定することを特徴とする。
図1は、本発明の検査装置の第1実施形態の機能ブロック図である。 図2は、図1に示す分光部の断面図である。 図3は、本発明の検査方法の第1実施形態の一例を説明するためのフローチャートである。 図4は、本発明の検査方法の第1実施形態の一例を説明するためのフローチャートである。 図5は、基準画像に第1分割領域を設定した状態を示す図である。 図6は、各第1分割領域と基準色とを比較している状態を示す図である。 図7は、各第1分割領域の色差を示す波形を示すグラフである。 図8は、撮像画像に第2分割領域を設定した状態を示す図である。 図9は、各第2分割領域と基準色とを比較している状態を示す図である。 図10は、各第2分割領域の色差を示す波形を示すグラフである。 図11は、回転させた状態の撮像画像に第2分割領域を設定した状態を示す図である。 図12は、各第2分割領域と基準色とを比較している状態を示す図である。 図13は、各第2分割領域の色差を示す波形を示すグラフである。 図14は、本発明の検査方法の第2実施形態において、各第1分割領域を基準として各第1分割領域の色差を示す波形を示すグラフである。
<第1実施形態>
図1は、本発明の検査装置の第1実施形態の機能ブロック図である。図2は、図1に示す分光部の断面図である。図3は、本発明の検査方法の第1実施形態の一例を説明するためのフローチャートである。図4は、本発明の検査方法の第1実施形態の一例を説明するためのフローチャートである。図5は、基準画像に第1分割領域を設定した状態を示す図である。図6は、各第1分割領域と基準色とを比較している状態を示す図である。図7は、各第1分割領域の色差を示す波形を示すグラフである。図8は、撮像画像に第2分割領域を設定した状態を示す図である。図9は、各第2分割領域と基準色とを比較している状態を示す図である。図10は、各第2分割領域の色差を示す波形を示すグラフである。図11は、回転させた状態の撮像画像に第2分割領域を設定した状態を示す図である。図12は、各第2分割領域と基準色とを比較している状態を示す図である。図13は、各第2分割領域の色差を示す波形を示すグラフである。
以下、本発明の検査方法および検査装置を添付図面に示す好適な実施形態に基づいて詳細に説明する。
1.検査装置
図1に示す検査装置1は、本発明の検査方法を実行する装置であり、撮像対象Xの画像である撮像画像Pxが、基準画像Psと一致しているか否かを検査する装置である。具体的には、撮像対象Xで反射した反射光を分光し、複数の波長の光に基づく分光画像、および、分光画像から求められるスペクトルを生成し、これらの情報に基づいて、上記検査を行う装置である。撮像対象Xとしては、特に限定されず、例えば、紙に印刷されたパターンや、模様ある布地やタイル等が挙げられる。
検査装置1は、分光計測部10と、制御部60と、表示部15と、入力部16と、記憶部17と、を備えている。以下、各部について順次説明する。
1.1.分光計測部
分光計測部10は、光源31と、撮像素子21と、分光部41と、を有している。
光源31は、撮像対象Xに光を照射する素子である。撮像対象Xに照射され、反射した光は、反射光として後述する分光部41を経て撮像素子21に入射する。なお、光源31は、検査装置1とは別に設けられていてもよい。
光源31としては、例えば、LED(Light Emitting Diode)素子、有機EL(Electro Luminescence)素子、キセノンランプ、ハロゲンランプ等が挙げられる。また、光源31には、後述する分光部41において分光可能な波長域全体に光強度を有する光源が好ましく用いられ、具体的には、可視光領域の全体に光強度を有する白色光を出射可能な光源が好ましく用いられる。また、光源31は、白色光以外の波長域の光、例えば赤外光等の可視光以外の光を照射可能な素子であってもよい。
撮像素子21は、撮像対象Xで反射した反射光を撮像する素子である。撮像素子21としては、例えば、CCD(Charge Coupled Device)、CMOS(Complementary Metal Oxide Semiconductor)等が挙げられる。
分光部41は、入射光から特定波長領域の光を選択的に出射(透過)させる機能を有する光学素子である。分光部41から出射した光は、撮像素子21に入射する。図2に示す分光部41は、出射する光の波長領域、つまり特定波長領域を変更可能な波長可変干渉フィルターである。
波長可変干渉フィルターとしては、例えば、波長可変型のファブリーペローエタロンフィルター、音響光学チューナブルフィルター(AOTF)、リニアバリアブルフィルター(LVF)、液晶チューナブルフィルター(LCTF)等が挙げられる。このうち、波長可変干渉フィルターとしては、波長可変型のファブリーペローエタロンフィルターが好ましく用いられる。波長可変型のファブリーペローエタロンフィルターでは、後述する静電アクチュエーター45等により2つのフィルター(ミラー)間のギャップの大きさを調整することができる。これにより、特定波長領域を変更することができる。
また、ファブリーペローエタロンフィルターは、2つのフィルターによる多重干渉を利用して、特定波長領域の光を取り出す。各フィルターは薄くすることが可能であるため、ファブリーペローエタロンフィルターが適用された分光部41は、十分に薄くすることができる。具体的には、分光部41の厚さを、2.0mm以下に設定することが可能となる。そのため、分光部41、ひいては検査装置1の小型化を図ることができる。
図2には、波長可変干渉フィルターとして波長可変型のファブリーペローエタロンフィルターが適用された分光部41を示している。
図2に示す分光部41は、図2の上下に延在する光軸OAを有し、光軸OAに対して交差する方向に広がる板状の部材である。このような分光部41は、固定基板410と、可動基板420と、固定反射膜411と、可動反射膜421と、固定電極412と可動電極422と、接合膜414と、を備えている。固定基板410および可動基板420は、互いに積層された状態で、接合膜414を介して一体的に接合されている。
固定基板410は、光軸OA上の位置からの平面視において、中央部に位置する反射膜設置部415と、その周りを取り囲む溝413と、を有している。固定基板410のうち、反射膜設置部415に対応する部分の光軸OAに沿った長さ、つまり厚さは、溝413に対応する部分よりも厚くなっている。反射膜設置部415の可動基板420側の面には、固定反射膜411が設けられている。固定反射膜411は、ファブリーペローエタロンフィルターの光学要素の1つである固定光学ミラーとして機能する。
可動基板420は、光軸OA上の位置からの平面視において、中央部に位置する反射膜設置部425と、その周りを取り囲む溝423と、を有している。可動基板420のうち、反射膜設置部425に対応する部分の光軸OAに沿った長さ、つまり厚さは、溝423に対応する部分よりも厚くなっている。そして、反射膜設置部425の固定基板410側の面には、可動反射膜421が設けられている。可動反射膜421も、ファブリーペローエタロンフィルターの光学要素の1つである可動光学ミラーとして機能する。
固定基板410が有する溝413の可動基板420側の面には、固定電極412が設けられている。また、可動基板420が有する溝423の固定基板410側の面には、可動電極422が設けられている。固定電極412および可動電極422は、これらの間に電圧が印加されることにより、静電引力を生じさせ、固定反射膜411と可動反射膜421との間のギャップの大きさを調整する。これにより、固定電極412および可動電極422は、静電アクチュエーター45を構成する。また、可動電極422が溝423に対応する位置に設けられているため、静電引力が生じたときの可動反射膜421の変位量を大きくすることができる。
なお、固定基板410の厚さおよび可動基板420の厚さは、0.1mm以上1.0mm以下程度であるのが好ましい。このような厚さであれば、分光部41全体の厚さを2.0mm以下に抑えることが可能である。これにより、分光計測部10の小型化を実現することができる。
ここで、固定反射膜411と可動反射膜421との間は、ギャップを介して対向配置されている。また、固定電極412と可動電極422との間も、ギャップを介して対向配置されている。前述したように、固定電極412および可動電極422は、固定反射膜411と可動反射膜421との間のギャップの大きさを調整する静電アクチュエーター45を構成する。具体的には、固定電極412と可動電極422との間に電圧を印加すると、静電引力が生じ、可動基板420に撓みが生じる。その結果、固定反射膜411と可動反射膜421との間のギャップの大きさ、すなわち距離を変化させることができる。そして、このギャップの大きさを適宜設定することにより、光軸OAに沿って分光部41を透過する光の波長領域を選択することができる。つまり、特定波長領域を変更することができる。また、固定反射膜411および可動反射膜421の構成を変えることにより、透過する光の半値幅、すなわちファブリーペローエタロンフィルターの分解能を制御することもできる。
固定基板410および可動基板420の各構成材料としては、例えば、ソーダガラス、結晶性ガラス、石英ガラス、鉛ガラス、カリウムガラス、ホウケイ酸ガラス、無アルカリガラス等の各種ガラス、水晶等が挙げられる。
接合膜414は、固定基板410と可動基板420とを接合している。接合膜414としては、特に限定されないが、一例として、シロキサンを主材料とするプラズマ重合膜が挙げられる。
固定反射膜411および可動反射膜421としては、それぞれ、例えば、Ag、Ag合金等の金属膜の他、高屈折層と低屈折層とを備える誘電体多層膜等が挙げられる。
固定電極412および可動電極422の各構成材料としては、例えば、各種導電性材料が挙げられる。
図1に示す分光計測部10は、さらに、分光部側光学系81および撮像素子側光学系83を有している。
分光部側光学系81は、撮像対象Xと分光部41との間に配置されている。図1に示す分光部側光学系81は、入射光学系としての入射レンズ811と、投射レンズ812と、を備えている。このような分光部側光学系81は、撮像対象Xで反射した反射光を分光部41に導く。
撮像素子側光学系83は、分光部41と撮像素子21との間に配置されている。図1に示す撮像素子側光学系83は、入出射レンズ831を備えている。このような撮像素子側光学系83は、分光部41から出射した出射光を撮像素子21に導く。
このような分光部側光学系81および撮像素子側光学系83のうちの少なくとも1つを分光計測部10に設けることにより、撮像対象Xで反射した反射光の、撮像素子21による集光率を高めることができる。
なお、分光部側光学系81および撮像素子側光学系83の少なくとも一方は、撮像素子21による集光率に応じて省略されていてもよい。
また、分光部側光学系81は、図1に示す位置の他、分光部41と撮像素子側光学系83との間に配置されていてもよい。
以上、分光計測部10について説明したが、分光部41の位置は図1に示す位置に限定されない。具体的には、図1に示す分光計測部10では、撮像対象Xと撮像素子21との間に分光部41が配置されているが、分光部41は、撮像対象Xと光源31との間に配置されていてもよい。
1.2.表示部
表示部15は、撮像素子21で撮像された分光画像を可視化した画像、および、その他の任意の情報を表示する。表示部15としては、例えば、液晶表示素子、有機EL表示素子等が用いられる。
1.3.入力部
入力部16は、検査装置1のユーザーにより、制御部60の作動に必要なデータの入力を受け付ける。
入力部16としては、例えば、タッチパネル、スライドパッド、キーボード、マウス等が用いられる。なお、入力部16は、表示部15と組み合わされ、表示部15と一体になっていてもよい。
1.4.記憶部
記憶部17は、制御部60の各機能部の作動に必要なプログラムおよびデータ、分光計測部10で取得されたデータ、表示部15の表示に必要なデータ、入力部16で入力されたデータ等の各種情報を記憶する。
記憶部17には、RAM(Random Access Memory)、ROM(Read Only Memory)等のメモリーが用いられる。
1.5.制御部
図1に示す制御部60は、光源制御部601と、分光制御部602と、画像生成部603と、表示制御部605と、判定部610と、を有している。これらの各機能部の作動は、CPU(Central Processing Unit)のようなプロセッサー、メモリーおよび外部インターフェース等のハードウェアの組み合わせにより実現される。例えば、制御部60は、記憶部17に記憶されているプログラムを読み出して実行することにより、各機能部を作動させ、その機能を実現する。
光源制御部601は、入力部16に入力された情報、記憶部17に記憶されている情報等に基づいて、光源31の点灯、消灯、出射光の波長、強度等を制御する。
分光制御部602は、記憶部17に記憶されている情報に基づき、分光部41から出射される光の特定波長領域に対応する駆動電圧を取得する。そして、取得した駆動電圧を分光部41の静電アクチュエーター45に印加させるための制御信号を出力する。これにより、分光制御部602は、分光部41の作動を制御して、分光部41から出射される光の特定波長領域を制御することができる。
画像生成部603は、分光計測部10の作動を制御し、分光部41を介して撮像素子21に入射する光を撮像させる。そして、撮像素子21から得られた撮像データに基づいて分光画像を生成する。また、生成した分光画像を、記憶部17に記憶させる。分光画像は撮像対象Xで反射した反射光から、複数の波長が選択され、各波長における撮像画像を含んでいる。なお、画像生成部603は、分光画像を記憶部17に記憶させる際に、かかる分光画像が生成されたときの特定波長領域も、併せて記憶部17に記憶させる。
なお、画像生成部603は、分光画像とともに、分光画像を可視化してなる可視化画像を記憶部17に記憶させるようにしてもよいし、そのまま表示部15に表示させるようにしてもよい。
表示制御部605は、分光画像や各種情報等を可視化画像として表示部15に表示させる。
判定部610は、分割部611と、基準値決定部612と、スペクトル生成部613と、色彩値算出部614と、色差算出部615と、判定部616と、を有している。
分割部611は、後に詳述するが、基準画像Psを分割して、複数の第1分割領域を複数生成するとともに、撮像対象Xの画像である撮像画像Pxを分割して、複数の第2分割領域を複数生成する。
このような分割部611は、後述するステップS102およびステップS202を実行する。
基準値決定部612は、後述の第2実施形態において、第1分割領域および第2分割領域の色差を求めるための基準値を決定する。
スペクトル生成部613は、記憶部17に記憶された、撮像対象Xの分光画像および特定波長領域から、各画素の分光スペクトルを生成する。分光スペクトルは、波長ごとの光強度の分布であり、分光画像からは画素ごとの分光スペクトルを生成することが可能である。したがって、スペクトル生成部613では、測定対象エリア全体の平均分光スペクトルである「全体スペクトル」、および、分割部611によって生成された各領域の平均分光スペクトルである「領域スペクトル」を算出することもできる。
また、本実施形態では、分光スペクトルを、4以上の波長帯域で光強度を計測して得られたスペクトルとする。さらに、本実施形態に係る分光スペクトルは、16以上の波長帯域で光強度を計測して得られたスペクトルであるのが好ましい。
なお、スペクトル生成部613は、記憶部17を介することなく、画像生成部603から直接得た情報に基づいて、分光情報を生成するように構成されていてもよい。生成した分光情報は、記憶部17に記憶される。
このようなスペクトル生成部613は、後述するステップS103およびステップS203を実行する。
色彩値算出部614は、例えば、分光スペクトルから各領域の三刺激値を算出し、さらに、求めた三刺激値から色彩値を算出する。この色彩値は、測定対象エリア全体の色彩や各領域の色彩を代表する値である。求めた色彩値は、測定対象エリア全体であることを特定する情報や各領域を識別する情報とともに、記憶部17に記憶される。
このような色彩値算出部614は、後述するステップS104およびステップS204を実行する。
色差算出部615は、色彩値算出部614により求めた各領域の色彩値から、基準値との色差を算出する。色差算出部615は、後述するステップS105およびステップS205を実行する。
判定部616は、色差算出部615により求めた色差と閾値とを比較し、色差が許容範囲内か否かを判定する。判定結果は、記憶部17に記憶されるとともに、必要に応じて表示部15に表示される。判定部616は、後述するステップS106およびステップS206~ステップS212を実行する。
2.検査方法
次に、図3および図4に示すフローチャートに基づいて、本発明の検査方法の一例を説明する。
検査方法は、図3に示すように、基準画像Psの基準画像データDPsを取得し、各種準備を行う第1ステップS1と、図4に示すように、検査を行う第2ステップS2と、を有する。
2.1.第1ステップS1
まず、ステップS101において、基準画像Psの基準画像データDPsを取得する。
本ステップでは、分光計測部10を用いて基準物を撮像して基準画像Psの基準画像データDPsを取得する構成であってもよく、入力部16から入力された基準画像Psの基準画像データDPsを取得する構成であってもよく、予め記憶部17に記憶されている基準画像Psの基準画像データDPsを読み出して取得する構成であってもよい。
次いで、ステップS102において、縦と横の分割数を指定する。すなわち、基準画像Psをどのように分割して第1分割画像を設定するかを決定する。本実施形態では、図5に示すように、2行4列の計8個の第1分割領域を設定する。なお、以下の説明では、図中上段の4つの分割領域を図中左側から順に、第1分割領域Ps1、第1分割領域Ps2、第1分割領域Ps3および第1分割領域Ps4とし、図中下段の4つの分割領域を図中左側から順に、第1分割領域Ps5、第1分割領域Ps6、第1分割領域Ps7および第1分割領域Ps8とする。
次いで、ステップS103において、第1分割領域Ps1~第1分割領域Ps8の各々の分光画像の計測を行う、すなわち、分光スペクトルを得る。分光スペクトルの掃引波長範囲は、可視光領域のうちの任意の波長域、例えば、400nm以上700nm以下の波長域や、380nm以上780nm以下の波長域とすることができる。また、これらの波長域は、入力部16を用いて設定可能な構成であってもよく、予め設定されていてもよい。また、測定間隔は、特に限定されず、例えば、5nm、10nm、20nmとすることができる。これらの測定間隔は、入力部16を用いて設定可能な構成であってもよく、予め設定されていてもよい。
次いで、ステップS104において、第1分割領域Ps1~第1分割領域Ps8の色彩値を計算する。ここで言う色彩値とは、第1分割領域Ps1~第1分割領域Ps8の各々の平均の色彩値のことを言う。色彩値の算出方法としては、所定の色空間の規定により、全体XYZ値から算出する方法が挙げられる。所定の色空間としては、例えば、L*a*b*表色系、LCH表色系、マンセル表色系、Yxy表色系等が挙げられる。印刷物やファブリック等の非発光体が検査対象の場合、色彩値は、L*a*b*表色系の色空間の規定により求められるものであることが好ましい。
次いで、ステップS105において、第1分割領域Ps1~第1分割領域Ps8の色差ΔEを計算し、計算結果を記憶する。本実施形態では、色差ΔEとは、基準色Csの色彩値との差のことを言う。すなわち、第1分割領域Ps1の色差ΔEは、第1分割領域Ps1の平均の色彩値と、基準色Csの色彩値との差を計算することにより求めることができる。同様に、第1分割領域Ps2の色差ΔEは、第1分割領域Ps2の平均の色彩値と、基準色Csの色彩値との差を計算することにより求めることができる。同様に、第1分割領域Ps3の色差ΔEは、第1分割領域Ps3の平均の色彩値と、基準色Csの色彩値との差を計算することにより求めることができる。同様に、第1分割領域Ps4の色差ΔEは、第1分割領域Ps4の平均の色彩値と、基準色Csの色彩値との差を計算することにより求めることができる。同様に、第1分割領域Ps5の色差ΔEは、第1分割領域Ps5の平均の色彩値と、基準色Csの色彩値との差を計算することにより求めることができる。同様に、第1分割領域Ps6の色差ΔEは、第1分割領域Ps6の平均の色彩値と、基準色Csの色彩値との差を計算することにより求めることができる。
色差の具体的な算出方法としては、特に限定されないが、公知の色差式を用いた方法が挙げられる。この色差式としては、例えば、CIE76色差式(ΔE76)、CIE94色差式(ΔE94)、CMC色差式(ΔEcmc)、CIEDE2000色差式(ΔE00)等が挙げられる。
次いで、ステップS106において、第1分割領域Ps1~第1分割領域Ps8の色差ΔEの波形情報、すなわち、ΔE波形を算出し、記憶する。ΔE波形は、図7に示すように、第1分割領域Ps1~第1分割領域Ps8の色差ΔEをプロットしたグラフで表すことができる。
以上のような第1ステップS1を経て、検査を行うに先立って、基準画像Psの基準画像データDPsに対する準備が完了する。すなわち、第1ステップS1は、基準画像Psが分割された複数の第1分割領域Ps1~第1分割領域Ps8のそれぞれに、基準色Csに対する色差の情報が割り振られた情報を取得する第1取得ステップである。
2.2.第2ステップS2
まず、ステップS201において、撮像画像Pxの撮像画像データDPxを取得する。本ステップでは、分光計測部10を用いて撮像対象Xを撮像して撮像画像Pxの撮像画像データDPxを取得する。ただし、この構成に限定されず、入力部16から入力された撮像画像Pxの撮像画像データDPxを取得する構成であってもよく、予め記憶部17に記憶されている撮像画像Pxの撮像画像データDPxを読み出して取得する構成であってもよい。
また、本ステップにおいて、撮像画像Px中の測定対象Xの位置が、基準画像Ps中の測定対象Xの位置とずれていた場合、同じ位置に配置するようなトリミング等の処理を行ってもよい。また、この処理は、事前に行っていてもよい。
次いで、ステップS202において、縦と横の分割数を指定する。すなわち、撮像画像Pxをどのように分割して第2分割画像を設定するかを決定する。本ステップでは、第1ステップS1のステップS102において設定した分割数と同じ分割数とする。このため、図8に示すように、2行4列の計8個の第1分割領域を設定する。なお、以下の説明では、図中上段の4つの分割領域を図中左側から順に、第2分割領域Px1、第2分割領域Px2、第2分割領域Px3および第2分割領域Px4とし、図中下段の4つの分割領域を図中左側から順に、第2分割領域Px5、第2分割領域Px6、第2分割領域Px7および第2分割領域Px8とする。
次いで、ステップS203において、第2分割領域Px1~第2分割領域Px8の各々の分光画像の計測を行う、すなわち、分光スペクトルを得る。本ステップでは、第1ステップS1のステップS103と同様にして分光スペクトルを得る。
次いで、ステップS204において、第2分割領域Px1~第2分割領域Px8の色彩値を計算する。ここで言う色彩値とは、第2分割領域Px1~第2分割領域Px8の各々の平均の色彩値のことを言う。この算出方法に関しては、第1ステップS1のステップS103と同様である。
次いで、ステップS205において、第2分割領域Px1~第2分割領域Px8の色差ΔEを計算し、計算結果を記憶する。図9に示すように、第2分割領域Px1の色差ΔEは、第2分割領域Px1の平均の色彩値と、基準色Csの色彩値との差を計算することにより求めることができる。同様に、第2分割領域Px2の色差ΔEは、第2分割領域Px2の平均の色彩値と、基準色Csの色彩値との差を計算することにより求めることができる。同様に、第2分割領域Px3の色差ΔEは、第2分割領域Px3の平均の色彩値と、基準色Csの色彩値との差を計算することにより求めることができる。同様に、第2分割領域Px4の色差ΔEは、第2分割領域Px4の平均の色彩値と、基準色Csの色彩値との差を計算することにより求めることができる。同様に、第2分割領域Px5の色差ΔEは、第2分割領域Px5の平均の色彩値と、基準色Csの色彩値との差を計算することにより求めることができる。同様に、第2分割領域Px6の色差ΔEは、第2分割領域Px6の平均の色彩値と、基準色Csの色彩値との差を計算することにより求めることができる。
色差の具体的な算出方法としては、ステップS105の説明で述べた通りである。
次いで、ステップS206において、第2分割領域Px1~第2分割領域Px8の色差ΔEの波形情報、すなわち、ΔE波形を算出し、記憶する。ΔE波形は、図10に示すように、第2分割領域Px1~第2分割領域Px8の色差ΔEをプロットしたグラフで表すことができる。
また、本ステップでは、図11に示すように、撮像画像Pxを180°回転させた撮像画像Px’の撮像画像データDPx’を作成する。すなわち、図中上段の4つの分割領域を図中左側から順に、第2分割領域Px8、第2分割領域Px2、第2分割領域Px6および第2分割領域Px5とし、図中下段の4つの分割領域を図中左側から順に、第2分割領域Px4、第2分割領域Px3、第2分割領域Px2および第2分割領域Px1とする。
そして、図12に示すように、第2分割領域Px1~第2分割領域Px8の色差ΔEを計算し、ΔE波形を算出し、記憶する。ΔE波形は、図13に示すように、第2分割領域Px8~第2分割領域Px2の色差ΔEを左側から順にプロットしたグラフで表すことができる。
このようなステップS201~ステップS205が、撮像画像Pxが分割された複数の第2分割領域Px1~第2分割領域Px8のそれぞれに、基準色Csに対する色差の情報が割り振られた情報を取得する第2取得ステップである。
次いで、ステップS207において、図7に示すΔE波形と、ステップS206で算出した、図10に示すΔE波形と、を比較し、一致しているか否かを判定する。本ステップにおける判定は、例えば、マハラノビス距離判定を用い、予め設定された閾値に基づいてなされる。すなわち、第1分割領域Ps1~第1分割領域Ps8の色差ΔEと、第2分割領域Px1~第2分割領域Px8の色差ΔEとを、それぞれ決められた組み合わせで比較し、乖離が所定値以下であるか否かを判定する。
なお、本ステップでの比較は、以下のような組み合わせ1で比較を行うということができる。
組み合わせ1:
(第1分割領域Ps1の色差の情報および第2分割領域Px1の色差の情報)
(第1分割領域Ps2の色差の情報および第2分割領域Px2の色差の情報)
(第1分割領域Ps3の色差の情報および第2分割領域Px3の色差の情報)
(第1分割領域Ps4の色差の情報および第2分割領域Px4の色差の情報)
(第1分割領域Ps5の色差の情報および第2分割領域Px5の色差の情報)
(第1分割領域Ps6の色差の情報および第2分割領域Px6の色差の情報)
(第1分割領域Ps7の色差の情報および第2分割領域Px7の色差の情報)
(第1分割領域Ps8の色差の情報および第2分割領域Px8の色差の情報)
このようなステップS207が、第1分割領域Ps1~第1分割領域Ps8の色差の情報と、対応する第2分割領域Px1~第2分割領域Px8の色差の情報と、を比較する第1比較ステップである。また、本ステップでの比較結果が、第1比較結果である。
ステップS207において、一致していると判定した場合、ステップS209に移行する。一方、ステップS207において、一致していないと判定した場合、ステップS207において、図7に示すΔE波形と、ステップS206で算出した、図13に示すΔE波形と、を比較し、一致しているか否かを判定する。本ステップにおける判定は、上記ステップS207と同様になされる。すなわち、第1分割領域Ps1~第1分割領域Ps8の色差ΔEと、第2分割領域Px1~第2分割領域Px8の色差ΔEとを、それぞれ決められた組み合わせで比較し、乖離が所定値以下であるか否かを判定する。
なお、本ステップでの比較は、以下のような組み合わせ2で比較を行うということができる。
組み合わせ2:
(第1分割領域Ps1の色差の情報および第2分割領域Px8の色差の情報)
(第1分割領域Ps2の色差の情報および第2分割領域Px7の色差の情報)
(第1分割領域Ps3の色差の情報および第2分割領域Px6の色差の情報)
(第1分割領域Ps4の色差の情報および第2分割領域Px5の色差の情報)
(第1分割領域Ps5の色差の情報および第2分割領域Px4の色差の情報)
(第1分割領域Ps6の色差の情報および第2分割領域Px3の色差の情報)
(第1分割領域Ps7の色差の情報および第2分割領域Px2の色差の情報)
(第1分割領域Ps8の色差の情報および第2分割領域Px1の色差の情報)
このようなステップS208が、第1分割領域Ps1~第1分割領域Ps8の色差の情報と、第2分割領域Px1~第2分割領域Px8の色差の情報と、を、第1比較ステップであるステップS207で比較した組み合わせとは異なる組み合わせで比較する第2比較ステップである。また、本ステップでの比較結果が、第2比較結果である。
ステップS208において、一致していないと判定した場合、ステップS212において、基準画像データDPsと、撮像画像データDPxと、が一致していないとみなす。なお、この判定結果を、必要に応じて表示部15に表示してもよい。一方、ステップS208において、一致していると判定した場合、ステップS209に移行する。
このようなステップS207およびステップS208を経ることにより、次のような利点を得ることができる。例えば、撮像画像Pxが180°回転した状態で取得し、180°回転した状態の撮像画像Pxと、基準画像Psを比較した場合、本来であれば一致したと判定しなければいけないのに、一致していないと判定してしまうことがある。これは、従来のように、1回の比較、すなわち、撮像画像Pxと基準画像Psとが同じ向きであることを前提として、1回しか比較を行わないことの弊害である。これに対し、本発明では、前述した第1比較ステップおよび第2比較ステップでの比較結果に基づいて、基準画像データDPsと撮像画像データDPxとが一致しているか否かを判定する従来のような誤判定を防止することができ、より正確な検査を行うことができる。
次いで、ステップS209では、色検査を行う。すなわち、基準画像Psと、撮像画像Pxとの色彩値を比較し、乖離の程度が許容範囲内か否かを判定する。
本ステップは、例えば、基準画像Ps全体の平均の色彩値と、撮像画像Px全体の色彩値との差が、閾値以下であるか否かを判定する構成であってもよく、第1分割領域Ps1~第1分割領域Ps8の各々の色彩値と、第2分割領域Px1~第2分割領域Px8の各々の色彩値と、を上記組み合わせ1または組み合わせ2で比較して、各領域間の色彩値の差が、閾値以下であるか否かを判定する構成であってもよい。後者の場合、組み合わせ1および組み合わせ2のうち、ステップS207またはステップS208で一致していると判定した組み合わせで比較する。
ステップS209において、基準画像Psの色彩値と、撮像画像Pxの色彩値との差が、閾値以下であると判定した場合、ステップS211において、基準画像データDPsと、撮像画像データDPxと、が一致しているとみなす。なお、この判定結果を、必要に応じて表示部15に表示してもよい。
ステップS209において、基準画像Psの色彩値と、撮像画像Pxの色彩値との差が、閾値を超えていると判定した場合、ステップS212において、基準画像データDPsと、撮像画像データDPxと、が一致していないと判定する。
なお、ステップS209およびステップS210は、省略してもよい。また、ステップS209において、基準画像Psの色彩値と、撮像画像Pxの色彩値との差が、閾値を超えていると判定した場合であっても、ステップS211に移行して、一致していると判定してもよい。ただし、この場合、基準画像データDPsと、撮像画像データDPxとが一致しているが、色味は一致していない旨を記憶することが好ましい。
このようなステップS209を経ることにより、色彩値まで一致している場合を、一致とみなすことができ、より正確な検査を行うことができる。
以上説明したように、本発明の検査方法は、基準画像Psの基準画像データDPsと、撮像画像Pxの撮像画像データDPxと、が一致しているか否かを検査する検査方法であって、基準画像Psが分割された複数の第1分割領域Ps1~第1分割領域Ps8のそれぞれに、基準色Csに対する色差の情報が割り振られた情報を取得する第1取得ステップと、撮像画像が分割された複数の第2分割領域Px1~第2分割領域Px8のそれぞれに、基準色Csに対する色差の情報が割り振られた情報を取得する第2取得ステップと、各第1分割領域Ps1~第1分割領域Ps8の色差の情報と、対応する第2分割領域Px1~第2分割領域Px8の色差の情報と、を比較する第1比較ステップと、第1分割領域Ps1~第1分割領域Ps8の色差の情報と、第2分割領域Px1~第2分割領域Px8の色差の情報と、を、第1比較ステップで比較した組み合わせとは異なる組み合わせで比較する第2比較ステップと、を有し、第1比較ステップで得られた第1比較結果と、第2比較ステップで得られた第2比較結果と、に基づいて、基準画像データDPsと撮像画像データDPxとが一致しているか否かを判定する。このような本発明によれば、以下のような利点を得ることができる。例えば、撮像画像Pxが180°回転した状態で取得し、180°回転した状態の撮像画像Pxと、基準画像Psを比較した場合、本来であれば一致したと判定しなければいけないのに、一致していないと判定してしまうことがある。これは、従来のように、1回の比較、すなわち、撮像画像Pxと基準画像Psとが同じ向きであることを前提として、1回しか比較を行わないことの弊害である。これに対し、本発明では、前述した第1比較ステップおよび第2比較ステップでの比較結果に基づいて、基準画像データDPsと撮像画像データDPxとが一致しているか否かを判定するため、従来のような誤判定を防止することができ、より正確な検査を行うことができる。
また、本発明の検査方法は、基準画像Psの基準画像データDPsと、撮像画像Pxの撮像画像データDPxと、が一致しているか否かを検査する制御部60を備え、制御部60は、基準画像Psが分割された複数の第1分割領域Ps1~第1分割領域Ps8のそれぞれに、基準色Csに対する色差の情報が割り振られた情報を取得する第1取得ステップと、撮像画像が分割された複数の第2分割領域Px1~第2分割領域Px8のそれぞれに、基準色Csに対する色差の情報が割り振られた情報を取得する第2取得ステップと、各第1分割領域Ps1~第1分割領域Ps8の色差の情報と、対応する第2分割領域Px1~第2分割領域Px8の色差の情報と、を比較する第1比較ステップと、第1分割領域Ps1~第1分割領域Ps8の色差の情報と、第2分割領域Px1~第2分割領域Px8の色差の情報と、を、第1比較ステップで比較した組み合わせとは異なる組み合わせで比較する第2比較ステップと、を有し、第1比較ステップで得られた第1比較結果と、第2比較ステップで得られた第2比較結果と、に基づいて、基準画像データDPsと撮像画像データDPxとが一致しているか否かを判定する。このような本発明によれば、前述したように、従来のような誤判定を防止することができ、より正確な検査を行うことができる。
また、本発明の検査方法では、第1比較結果および第2比較結果のうちの一方において、各第1分割領域Ps1~第1分割領域Ps8の色差の情報と、前記各第2分割領域Px1~第2分割領域Px8の色差の情報と、の乖離の度合いが閾値以下であった場合、基準画像データDPsと撮像画像データDPxとが一致していると判定し、第1比較結果および第2比較結果の双方において、各第1分割領域Ps1~第1分割領域Ps8の色差の情報と、前記各第2分割領域Px1~第2分割領域Px8の色差の情報と、の乖離の度合いが閾値超であった場合、基準画像データDPsと撮像画像データDPxとが一致していないと判定する。これにより、従来のような誤判定をより効果的に防止することができ、さらに正確な検査を行うことができる。
また、第2比較ステップでは、基準画像Psと撮像画像Pxとを相対的に回転させた画像同士を重ねたときに、重なっている第1分割領域および第2分割領域同士の色差の情報を比較する。これにより、180°回転した状態の撮像画像Pxを取得したとしても、従来のような誤判定をより効果的に防止することができる。
また、比較する色差の情報は、図7、図10および図13に示すように、色差と、第1分割領域Ps1~第1分割領域Ps8および第2分割領域Px1~第2分割領域Px8の位置と、の関係を示す波形情報である。これにより、波形情報を比較するという簡単な方法により、第1比較ステップおよび第2比較ステップを実行することができる。
また、基準色Csは、本実施形態では、予め定められた色である。これにより、簡単な制御によって、第1分割領域Ps1~第1分割領域Ps8および第2分割領域Px1~第2分割領域Px8の色差の情報を算出することができる。
また、ステップS209およびステップS210で述べたように、第1分割領域Ps1~第1分割領域Ps8および第2分割領域Px1~第2分割領域Px8の色彩値を加味して、基準画像データDPsと撮像画像データDPxとが一致しているか否かの判定を行う。これにより、さらに、第1分割領域Ps1~第1分割領域Ps8および第2分割領域Px1~第2分割領域Px8の色彩値が一致している場合を、一致とみなすことができ、より正確な検査を行うことができる。
<第2実施形態>
図14は、本発明の検査方法の第2実施形態において、基準色を決定する方法を説明するためのグラフである。
以下、第2実施形態について説明するが、以下の説明では、第1実施形態との相違点を中心に説明し、同様の事項についてはその説明を省略する。
本実施形態では、ステップS105において、色差を算出する際の基準色Csの決定方法が第1実施形態とは異なっている。このため、基準色Csの決定方法のみを説明する。
まず、第1分割領域Ps1の平均の色彩値を仮の基準色として、第1分割領域Ps1~第1分割領域Ps8との色差をそれぞれ算出する。色差の算出方法に関しては、前記第1実施形態で述べた通りである。そして、第1分割領域Ps1~第1分割領域Ps8の色差ΔEをプロットすることにより、図14に示すように、波形ΔE1を得ることができる。
次いで、第2分割領域Px3の平均の色彩値を仮の基準色として、第1分割領域Ps1~第1分割領域Ps8との色差をそれぞれ算出する。そして、第1分割領域Ps1~第1分割領域Ps8の色差ΔEをプロットすることにより、図14に示すように、波形ΔE3を得ることができる。
次いで、第2分割領域Px4の平均の色彩値を仮の基準色として、第1分割領域Ps1~第1分割領域Ps8との色差をそれぞれ算出する。そして、第1分割領域Ps1~第1分割領域Ps8の色差ΔEをプロットすることにより、図14に示すように、波形ΔE4を得ることができる。
次いで、第2分割領域Px5の平均の色彩値を仮の基準色として、第1分割領域Ps1~第1分割領域Ps8との色差をそれぞれ算出する。そして、第1分割領域Ps1~第1分割領域Ps8の色差ΔEをプロットすることにより、図14に示すように、波形ΔE5を得ることができる。
次いで、第2分割領域Px6の平均の色彩値を仮の基準色として、第1分割領域Ps1~第1分割領域Ps8との色差をそれぞれ算出する。そして、第1分割領域Ps1~第1分割領域Ps8の色差ΔEをプロットすることにより、図14に示すように、波形ΔE6を得ることができる。
次いで、第2分割領域Px7の平均の色彩値を仮の基準色として、第1分割領域Ps1~第1分割領域Ps8との色差をそれぞれ算出する。そして、第1分割領域Ps1~第1分割領域Ps8の色差ΔEをプロットすることにより、図14に示すように、波形ΔE7を得ることができる。
次いで、第2分割領域Px8の平均の色彩値を仮の基準色として、第1分割領域Ps1~第1分割領域Ps8との色差をそれぞれ算出する。そして、第1分割領域Ps1~第1分割領域Ps8の色差ΔEをプロットすることにより、図14に示すように、波形ΔE8を得ることができる。
そして、波形ΔE1~波形ΔE8のうち、最大色差と最小色差との差が、最も大きい波形を選択する。図示の構成の場合、波形ΔE1において、第1分割領域Ps1の色差と、第1分割領域Ps2の色差との差が、最も大きいため、波形ΔE1を選択し、その際の仮の基準色、すなわち、第1分割領域Ps1の平均の色彩値を基準色Csに設定し、以降のステップにおいて、波形ΔE1を用いる。
このような方法によれば、波形同士を比較するに際し、波形の特徴が最も明確に表れる波形を用いるため、より正確な検査を行うことができる。
このように、本実施形態では、基準色Csは、各第1分割領域Ps1~第1分割領域Ps8のうちの1つの領域内の平均の色、すなわち、平均の色彩値である。これにより、別途基準色Csを予め設定しておく必要が無く、制御を簡素にすることができる。
また、本実施形態では、第1分割領域Ps1~第1分割領域Ps8を1つずつ順に選択し、選択した第1分割領域内の平均の色と、選択した第1分割領域以外の第1分割領域の内の平均の色と、の乖離の程度を順に算出し、すなわち、色差を順に算出し、色差が最も大きいものと、色差が最も小さいものとの差が最大となる第1分割領域の色を、基準色Csとする。このような構成によれば、その都度、最適な基準色Csを設定することができる。よって、さらに正確な検査を行うことができる。
なお、予め基準色Csを記憶しておき、さらに、本実施形態のような制御を行ってもよい。すなわち、図7に示す波形と、図14に示す8つの波形の中から色差が最も大きいものと、色差が最も小さいものとの差が最大となる色を選択してもよい。
以上、本発明の検査方法および検査装置を図示の実施形態について説明したが、本発明は、これに限定されるものではない。また、検査方法および検査装置の各ステップ、各構造物は、同様の機能を発揮し得る任意のステップ、構造物と置換することができる。また、任意のステップ、構造物が付加されていてもよい。また、本発明は、各実施形態の特徴を組み合わせたものであってもよい。
また、第1比較ステップと第2比較ステップとは、この順で行ってもよく、逆順で行ってもよく、同時に行ってもよい。
なお、前記各実施形態では、色差の波形を比較する構成について説明したが、本発明ではこれに限定されず、例えば、さらに、分光スペクトル同士を比較する構成であってもよい。この場合、波形間の相関係数や、波形間の誤差の二乗和を用いて比較することができる。
また、前記各実施形態では、撮像画像を回転させて比較を行ったが、本発明ではこれに限定されず、基準画像を回転させて比較を行ってもよい。この場合、基準画像を予め回転させた基準画像データを生成しておくことが好ましい。
また、前記各実施形態では、基準画像および撮像画像が長方形で、かつ、2行4列の8分割で分割領域を設定したが、分割数、分割パターンは、本発明ではこれに限定されない。また、基準画像および撮像画像が正方形で、かつ、2行2列等、縦横の分割比が同じであった場合、90°ずつ回転させた4つの画像を生成し、それぞれを比較することが好ましい。
なお、前記各実施形態では、分光部を用いて撮像画像を取得する構成について説明したが、本発明ではこれに限定されず、分光部を省略した撮像部で撮像した画像を取得する構成であってもよい。
1…検査装置、10…分光計測部、15…表示部、16…入力部、17…記憶部、21…撮像素子、31…光源、41…分光部、45…静電アクチュエーター、60…制御部、81…分光部側光学系、83…撮像素子側光学系、410…固定基板、411…固定反射膜、412…固定電極、413…溝、414…接合膜、415…反射膜設置部、420…可動基板、421…可動反射膜、422…可動電極、423…溝、425…反射膜設置部、601…光源制御部、602…分光制御部、603…画像生成部、605…表示制御部、610…判定部、611…分割部、612…基準値決定部、613…スペクトル生成部、614…色彩値算出部、615…色差算出部、616…判定部、811…入射レンズ、812…投射レンズ、831…入出射レンズ、Cs…基準色、DPs…基準画像データ、DPx…撮像画像データ、DPx’…撮像画像データ、OA…光軸、Ps…基準画像、Ps1…第1分割領域、Ps2…第1分割領域、Ps3…第1分割領域、Ps4…第1分割領域、Ps5…第1分割領域、Ps6…第1分割領域、Ps7…第1分割領域、Ps8…第1分割領域、Px…撮像画像、Px’…撮像画像、Px1…第2分割領域、Px2…第2分割領域、Px3…第2分割領域、Px4…第2分割領域、Px5…第2分割領域、Px6…第2分割領域、Px7…第2分割領域、Px8…第2分割領域、X…撮像対象、ΔE1…波形、ΔE2…波形、ΔE3…波形、ΔE4…波形、ΔE5…波形、ΔE6…波形、ΔE7…波形、ΔE8…波形

Claims (9)

  1. 基準画像の基準画像データと、撮像画像の撮像画像データと、が一致しているか否かを検査する検査方法であって、
    前記基準画像が分割された複数の第1分割領域のそれぞれに、基準色に対する色差の情報が割り振られた情報を取得する第1取得ステップと、
    前記撮像画像が分割された複数の第2分割領域のそれぞれに、前記基準色に対する色差の情報が割り振られた情報を取得する第2取得ステップと、
    前記各第1分割領域の色差の情報と、対応する前記各第2分割領域の色差の情報と、を比較する第1比較ステップと、
    前記各第1分割領域の色差の情報と、前記各第2分割領域の色差の情報と、を、前記第1比較ステップで比較した組み合わせとは異なる組み合わせで比較する第2比較ステップと、を有し、
    前記第1比較ステップで得られた第1比較結果と、前記第2比較ステップで得られた第2比較結果と、に基づいて、前記基準画像データと前記撮像画像データとが一致しているか否かを判定し、
    前記第2比較ステップでは、前記基準画像と前記撮像画像とを相対的に回転させた画像同士を重ねたときに、重なっている前記第1分割領域および前記第2分割領域同士の色差の情報を比較することを特徴とする検査方法。
  2. 前記第1比較結果および前記第2比較結果のうちの一方において、前記各第1分割領域の色差の情報と、前記各第2分割領域の色差の情報と、の乖離の度合いが閾値以下であった場合、前記基準画像データと前記撮像画像データとが一致していると判定し、
    前記第1比較結果および前記第2比較結果の双方において、前記各第1分割領域の色差の情報と、前記各第2分割領域の色差の情報と、の乖離の度合いが閾値超であった場合、前記基準画像データと前記撮像画像データとが一致していないと判定する請求項1に記載の検査方法。
  3. 前記色差の情報は、色差と、前記第1分割領域および前記第2分割領域の位置と、の関係を示す波形情報である請求項1または2に記載の検査方法。
  4. 前記基準色は、予め定められた色である請求項1ないしのいずれか1項に記載の検査方法。
  5. 前記基準色は、前記各第1分割領域のうちの1つの領域内の平均の色である請求項1ないしのいずれか1項に記載の検査方法。
  6. 前記各第1分割領域を1つずつ順に選択し、選択した前記第1分割領域内の平均の色と、選択した前記第1分割領域以外の前記第1分割領域の内の平均の色と、の乖離の程度を順に算出し、乖離の程度が最も大きいものと、乖離の程度が最も小さいものとの差が最大となる前記第1分割領域の色を、前記基準色とする請求項に記載の検査方法。
  7. 前記第1分割領域および前記第2分割領域の色彩値を加味して前記判定を行う請求項1ないしのいずれか1項に記載の検査方法。
  8. 前記撮像画像は、分光カメラで撮像された分光画像である請求項1ないしのいずれか1項に記載の検査方法。
  9. 基準画像の基準画像データと、撮像画像の撮像画像データと、が一致しているか否かを検査する制御部を備える検査装置であって、
    前記制御部は、
    前記基準画像が分割された複数の第1分割領域のそれぞれに、基準色に対する色差の情報が割り振られた情報を取得する第1取得ステップと、
    前記撮像画像が分割された複数の第2分割領域のそれぞれに、前記基準色に対する色差の情報が割り振られた情報を取得する第2取得ステップと、
    前記各第1分割領域の色差の情報と、対応する前記各第2分割領域の色差の情報と、を比較する第1比較ステップと、
    前記各第1分割領域の色差の情報と、前記各第2分割領域の色差の情報と、を、前記第1比較ステップで比較した組み合わせとは異なる組み合わせで比較する第2比較ステップと、を実行し、
    前記第1比較ステップで得られた第1比較結果と、前記第2比較ステップで得られた第2比較結果と、に基づいて、前記基準画像データと前記撮像画像データとが一致しているか否かを判定し、
    前記第2比較ステップでは、前記基準画像と前記撮像画像とを相対的に回転させた画像同士を重ねたときに、重なっている前記第1分割領域および前記第2分割領域同士の色差の情報を比較することを特徴とする検査装置。
JP2020216142A 2020-12-25 2020-12-25 検査方法および検査装置 Active JP7631794B2 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2020216142A JP7631794B2 (ja) 2020-12-25 2020-12-25 検査方法および検査装置
CN202111591695.1A CN114689593B (zh) 2020-12-25 2021-12-23 检查方法以及检查装置
US17/560,362 US12086976B2 (en) 2020-12-25 2021-12-23 Inspection method and inspection device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2020216142A JP7631794B2 (ja) 2020-12-25 2020-12-25 検査方法および検査装置

Publications (2)

Publication Number Publication Date
JP2022101824A JP2022101824A (ja) 2022-07-07
JP7631794B2 true JP7631794B2 (ja) 2025-02-19

Family

ID=82117199

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2020216142A Active JP7631794B2 (ja) 2020-12-25 2020-12-25 検査方法および検査装置

Country Status (3)

Country Link
US (1) US12086976B2 (ja)
JP (1) JP7631794B2 (ja)
CN (1) CN114689593B (ja)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005172649A (ja) 2003-12-12 2005-06-30 A A N Corporation Kk 欠陥検査装置
JP2019041204A (ja) 2017-08-24 2019-03-14 王子ホールディングス株式会社 基準画像データ生成方法、印刷物の検査方法、及び基準画像データ生成システム
JP2019168930A (ja) 2018-03-23 2019-10-03 キヤノン株式会社 画像処理装置、画像処理方法及びプログラム
JP2020134365A (ja) 2019-02-21 2020-08-31 キリンテクノシステム株式会社 ラベルの検査方法及び検査装置

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE4310727C2 (de) * 1992-04-06 1996-07-11 Hell Ag Linotype Verfahren und Einrichtung zur Analyse von Bildvorlagen
US8004576B2 (en) * 2008-10-31 2011-08-23 Digimarc Corporation Histogram methods and systems for object recognition
JP4514823B1 (ja) 2009-02-09 2010-07-28 株式会社スカイワーカーズ 印刷物の画像識別方法および装置
JP5852641B2 (ja) * 2011-04-20 2016-02-03 株式会社メガトレード 自動検査装置および自動検査装置における位置合わせ方法
US8750613B2 (en) * 2011-12-13 2014-06-10 The Nielsen Company (Us), Llc Detecting objects in images using color histograms
JP6126450B2 (ja) * 2013-04-25 2017-05-10 株式会社ブリヂストン 検査装置
CN105354281B (zh) * 2014-02-03 2018-12-07 株式会社隆创 图像检查装置和图像检查方法
US9230188B2 (en) * 2014-03-31 2016-01-05 Verizon Patent And Licensing Inc. Objective metric relating to perceptual color differences between images
JP2017194421A (ja) 2016-04-22 2017-10-26 株式会社リコー 色差算出装置、色差算出方法及びプログラム
EP3239929B1 (en) * 2016-04-27 2019-06-12 Canon Kabushiki Kaisha Image processing apparatus, image processing method and program
CN108355987B (zh) * 2018-01-08 2019-10-11 西安交通大学 一种基于分块模板匹配的电池丝印质量检测方法
JP7467247B2 (ja) * 2020-06-11 2024-04-15 キヤノン株式会社 画像処理装置、画像処理方法及びプログラム

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005172649A (ja) 2003-12-12 2005-06-30 A A N Corporation Kk 欠陥検査装置
JP2019041204A (ja) 2017-08-24 2019-03-14 王子ホールディングス株式会社 基準画像データ生成方法、印刷物の検査方法、及び基準画像データ生成システム
JP2019168930A (ja) 2018-03-23 2019-10-03 キヤノン株式会社 画像処理装置、画像処理方法及びプログラム
JP2020134365A (ja) 2019-02-21 2020-08-31 キリンテクノシステム株式会社 ラベルの検査方法及び検査装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
鈴木 勇治 ,カラー画像による計測・検査を行う画像処理装置形F400の開発 ,OMRON TECHNICS,日本,オムロン株式会社,第39巻 第4号,p.303-306

Also Published As

Publication number Publication date
JP2022101824A (ja) 2022-07-07
CN114689593A (zh) 2022-07-01
US20220207685A1 (en) 2022-06-30
CN114689593B (zh) 2025-09-09
US12086976B2 (en) 2024-09-10

Similar Documents

Publication Publication Date Title
US11971355B2 (en) Fluorescence observation apparatus and fluorescence observation method
CN104010116B (zh) 分光照相机以及分光图像处理方法
JP5541644B2 (ja) 分光計の較正パラメータを決定する方法
JP6322939B2 (ja) 撮像システム及び色検査システム
CN106257919B (zh) 全场视觉中红外成像系统
JP6341335B2 (ja) 二次元測色装置
KR20010071403A (ko) 축방향 조명에 의한 광전기적 형태 획득 방법 및 장치
WO2021106299A1 (ja) 光学ユニット及び膜厚計測装置
JP7631794B2 (ja) 検査方法および検査装置
CN112858193B (zh) 分光测定方法及分光测定装置
CN112858194B (zh) 分光测定方法及分光测定装置
JP2010078418A (ja) 分光測定装置、校正装置、分光測定方法、および校正方法
US20200173849A1 (en) Spectroscopic camera and electronic device
JP2006165352A (ja) 半導体外観検査装置
JP2004279297A (ja) 膜厚取得方法
JP6260157B2 (ja) 分光測定装置
JP2000205954A (ja) 分光装置
JP2023000090A (ja) 画像評価方法および画像評価装置
CN121548722A (zh) 用于生成三维物体的3d记录的记录装置及方法
JP2025091987A (ja) 色比較方法および色比較装置
JP2023000091A (ja) 画像評価方法および画像評価装置
JP2022176530A (ja) レーザラスタ走査型画像取得装置及びこれを用いた画像表示装置
JP2022177441A (ja) 分光計測器、及びコンピュータープログラム
JP2007158577A (ja) 撮像データ補正方法、および、撮像データ補正装置

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20231127

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20240826

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20240903

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20241101

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20250107

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20250120

R150 Certificate of patent or registration of utility model

Ref document number: 7631794

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150