JP3549013B2 - 目の位置検出方法、目の位置検出装置および目の位置検出プログラムを記録した記録媒体 - Google Patents

Description

【０００１】
【発明の属する技術分野】
本発明は、目の位置検出方法、目の位置検出装置および目の位置検出プログラムを記録した記録媒体に係わり、特に、デジタルカメラやビデオカメラ等により、デジタルデータとしてコンピュータ等に取り込まれた人の顔画像の中から目の位置を自動的に検出する目の位置検出方法、目の位置検出装置および目の位置検出プログラムを記録した記録媒体に関する。
【０００２】
【従来の技術】
例えば、ある眼鏡を装用したとき自分の顔がどのように見えるかをシミュレーションする眼鏡装用シミュレーションシステムにおいては、人の顔画像から目の位置を検出する技術が必要となる。
即ち、眼鏡装用シミュレーションシステムでは、人の顔画像上に眼鏡画像を重畳表示するため、その重畳位置や眼鏡画像のサイズは顔画像中の両目の位置や両目の間隔に基づいて決める必要がある。
従来の顔画像中から目の位置を検出する方法として、下記（１）または（２）の方法が知られている。
（１）先ず、顔画像の中から肌色の領域を抽出しその領域を肌領域とみなし、次に、肌領域の中から肌色と異なる領域を抽出し目候補領域とし、目候補領域の中から肌領域の中心に対して上部にあり、かつ左右に対称に位置する一対の２つの領域を左目候補領域及び右目候補領域とみなして、その２領域それぞれの中心位置を両目の位置とする。
（２）顔画像中から肌色の領域を抽出し、その肌領域中で急激に輝度が変化している部分（エッジ）を抽出し、抽出されたエッジの中から、人の顔の中の目、鼻、口等の位置関係から目に対応するエッジを選択する。
【０００３】
【発明が解決しようとする課題】
しかしながら、顔画像中の肌領域は目や口以外はほとんど均一という場合はほとんどなく、顔の凹凸による陰影や肌の不均一性によって肌色と異なる領域やエッジとして抽出される領域は多数存在することが多い。
したがって、前記（１）、（２）の方法のように、そのような多数の領域から正しく両目に該当する一対の領域を顔の目、鼻、口等の位置関係のみに基づいて選択することは極めて困難となる。
【０００４】
例えば、目以外に眉の部分が肌色と大きく異なる領域として検出されることが多く、そのようなときは眉の領域を目の領域とみなしてしまい、最終的に目の位置として誤った位置を出力してしまうことが比較的高い確率で発生していた。
【０００５】
本発明は、前記従来技術の問題点を解決するためになされたものであり、本発明の目的は、目の位置検出方法および目の位置検出装置において、様々な撮影条件で撮影された様々な人の顔画像に対して、安定して正しい両目の位置を検出することが可能となる技術を提供することにある。
【０００６】
また、本発明の他の目的は、前記目の位置検出方法をコンピュータに実行させるための目の位置検出プログラムが記録された記録媒体を提供することにある。
【０００７】
本発明の前記ならびにその他の目的と新規な特徴は、本明細書の記述及び添付図面によって明らかにする。
【０００８】
【課題を解決するための手段】
本願において開示される発明のうち、代表的なものの概要を簡単に説明すれば、下記の通りである。
【０００９】
即ち、本発明は、先ず、人の典型的な顔画像からその目の位置を基準にして顔内部領域を切り出して生成した平均顔画像を予め用意しておき、入力された人のカラー顔画像をＹＩＱ色表現に変換してＹＩＱ顔画像を生成し、当該ＹＩＱ顔画像のＩ成分画像をその画素値分布に基づいて決定されたしきい値により２値化して２値化画像を生成し、当該２値化画像から顔画像の中央付近に位置し所定の面積より大きい連結領域を肌領域として抽出し、当該肌領域の最外周より内側に存在する肌領域でない複数の連結領域を目候補領域として抽出し、当該複数の目候補領域の中から左目候補領域と右目候補領域の対を選択し、当該選択された左目候補領域と右目候補領域との位置を基準にして入力されたカラー顔画像から顔内部領域を切出して部分顔画像を生成し、部分顔画像と前記平均顔画像との相違度を計算し、目候補領域内の全ての左目候補領域と右目候補領域の対に対して前記部分顔画像の生成と相違度の計算を行い最も相違度が小さくなる左目候補領域と右目候補領域の対を、それぞれを左目領域および右目領域と決定し目の位置とすることを特徴とする。
【００１０】
また、本発明は、決定された左目領域および右目領域それぞれの重心位置を求めることにより目の位置とすることを特徴とする。
【００１１】
また、本発明は、決定された左目領域および右目領域それぞれの縦横の中心を求めることにより目の位置とすることを特徴とする。
【００１２】
また、本発明は、眼球を正面から照明したときの眼球による反射光の輝度パターンを予め用意しておき、決定された左目領域および右目領域の内部で、当該輝度パターンと左目領域または右目領域の輝度との相違度を、当該輝度パターンを移動させながら計算し、相違度が最も小さくなるときの輝度パターンの中心位置を左目または右目の位置とすることを特徴とする。
【００１３】
【発明の実施の形態】
以下、図面を参照して本発明の実施の形態を詳細に説明する。
【００１４】
なお、実施の形態を説明するための全図において、同一機能を有するものは同一符号を付け、その繰り返しの説明は省略する。
【００１５】
図１は、本発明の実施の形態の目の位置検出装置の概略構成を示すブロック図である。
同図において、１０は制御部、１１は顔画像蓄積部、１２は平均顔画像蓄積部、１３は輝度パターン蓄積部、１４は顔画像蓄積部１１平均顔画像蓄積部１２および輝度パターン蓄積部１３が設けられる蓄積手段、２０は入力部、２１はＹＩＱ変換部、２２は２値化画像生成部、２３は肌領域抽出部、２４は目候補領域抽出部、２５は部分顔画像生成部、２６は顔画像相違度計算部、２７は左目・右目領域決定部、２８は左目・右目相違度計算部、２９は左目・右目位置決定部である。
【００１６】
図２は、本実施の形態の目の位置検出方法を説明するためのフローチャートである。
以下、図１、図２を用いて、本実施の形態の目の位置検出方法について説明する。
始めに、入力部２０から入力される平均顔画像を蓄積手段１４内の平均顔画像蓄積部１２に蓄積する（ステップ１０１）。
この平均顔画像とは、人の典型的な顔画像から、例えば、図３に示すように、その目の位置を基準にして、位置と大きさとを決めて切り出した背景、頭髪、衣類などを含まない顔内部のみの部分の画像である。
つまり、図３に示すように、典型的な顔画像において両目の間の距離が２Ｌ（または、両目の間の距離の１／２がＬ）である場合、ａ、ｂ、ｃを予め適切な値に設定した定数とし、左右方向には左右の目の位置からそれぞれａ×Ｌ、上方向には目の位置からｂ×Ｌ、下方向には目の位置からｃ×Ｌほどの大きさとなるように範囲を決めて切り出し、平均顔画像とする。
ここでは説明を簡単にするために、平均顔画像は白黒画像とする。
【００１７】
次に、入力部２０から入力される眼球による反射光の輝度パターンを蓄積手段１４内の輝度パターン蓄積部１３に蓄積する（ステップ１０２）。
この眼鏡による反射光の輝度パターンとは、図４に示すように、目に正面から光をあてた場合に生じるスポット状の輝点を中心として、所定の大きさにその部分を切り取った画像である。
ここでは説明を簡単にするために、輝度パターンは白黒の輝度画像とするが、カラー画像であっても良い。
【００１８】
次に、入力部２０から入力される、目の位置を検出するカラー顔画像を蓄積手段１４内の顔画像蓄積部１１に蓄積する（ステップ１０３）。
ここでは説明を簡単にするために、カラー顔画像は、赤、緑、青の三原色（ＲＧＢ）で表現されているものとするが、別の色表現方法で表現されたカラー画像であってもよい。
なお、顔画像を撮影時には、顔の正面から一つの光源で照明して撮影するものとする。
【００１９】
次に、ＹＩＱ変換部２１で、カラー顔画像をＹＩＱ色表現に変換し、ＹＩＱ顔画像を生成する（ステップ１０４）。
ＲＧＢ色表現からＹＩＱ色表現への変換は、よく知られており、例えば、下記（１）式の計算により変換できる。
【００２０】
【数１】
Ｙ＝０．２９９Ｒ＋０．５８７Ｇ＋０．１１４Ｂ
Ｉ＝０．５９６Ｒ−０．２７４Ｇ−０．３２２Ｂ
Ｑ＝０．２１１Ｒ−０．５２２Ｇ＋０．３１１Ｂ ・・・（１）
次に、２値化画像生成部２２で、ＹＩＱ顔画像のＩ成分画像の各画素の値があるしきい値より大きい場合はその画素の値を「１」に、小さい場合は「０」にすることにより、Ｉ成分画像を２値化する（ステップ１０５）。
２値化するためのしきい値は、Ｉ成分画像の各画素の値の分布に基づいて決めることができる。
このしきい値の決め方はいろいろあるが、例えば、画素の値を横軸に、その値を持つ画素の個数を縦軸とするヒストグラムを生成し、そのヒストグラムをあるしきい値によって２つにクラスに分割したときのクラス間の分散が最大になるようにしきい値を選ぶ方法（大津：”判別及び最小２乗規準に基づく自動しきい値選定法”、電子通信学会論文誌、ｖｏｌ．Ｊ６３−Ｄ，ｎｏ．４，ＰＰ．３４９−３５６，１９８０年参照）等がある。
【００２１】
次に、肌領域抽出部２３で、２値化画像から「１」の値を持ち隣接している画素の集合である連結領域を抽出し、また、その連結領域の重心位置と面積を求め、その重心位置が画像の中央部を示す所定の範囲内にある連結領域の中で最も面積が大きい連結領域を選択し、それを肌領域とする（ステップ１０６）。
領域の重心位置とは、その領域に含まれている各画素のｘ座標値の平均を重心位置のｘ座標、領域に含まれている各画素のｙ座標値の平均を重心位置のｙ座標とする位置である。
【００２２】
次に、目候補領域抽出部２４で、Ｉ成分画像において、肌領域の最外周を通る閉曲線の内側にあり「０」の値の画素で構成される連結領域、即ち、肌領域の最外周の内部に存在する肌領域ではない領域（つまり肌領域内の穴）を抽出し、それらの連結領域を目候補領域とする（ステップ１０７）。
図５に、肌領域３１と目候補領域３２との一例を図示する。
【００２３】
次に、部分顔画像生成部２５で、部分顔画像を生成する。
即ち、目候補領域（図５に示す３２）から肌領域（図５に示す３１）の左右の中心線の左側にある領域を一つ選択して左目候補領域とし、右側にある領域を一つ選択して右目候補領域とする（ステップ１０８）。
次に、ステップ１０８で選択した左目候補領域および右目候補領域の重心位置に基づいて平均顔画像の生成と同じ方法で顔画像の顔部分を切出し、さらに切り出した画像の大きさが平均顔画像と同じになるように拡大縮小して部分顔画像を生成する（ステップ１０９）。
【００２４】
図６に、眉の部分が左目候補領域および右目候補領域とされた場合の部分顔画像の切出しの様子を示す。
図６に示すように、左目候補領域および右目候補領域である左右の眉の間の距離が２Ｘ（または、左右の眉の間の距離の１／２がＸ）の場合、図３に示すＬの代わりにＸとして、図２と同様に入力されたカラー顔画像４１から所定の範囲を切出し、部分顔画像４２とする。
なお、以下の説明を簡単にするために、部分顔画像４２はＹＩＱ顔画像のＹ成分画像を切り出した白黒画像とする。
【００２５】
次に、顔画像相違度計算部２６で、部分顔画像（図６の４２）と平均顔画像との相違度を計算する（ステップ１１０）。
この相違度の計算は、例えば、部分顔画像および平均顔画像の座標（ｉ，ｊ）の位置の画素の輝度（値）をそれぞれＰ（ｉ，ｊ）、Ａ（ｉ，ｊ）とするとき、下記（２）式により計算する。
【００２６】
【数２】

【００２７】
なお、この（２）式において、Ｎ、Ｍはそれぞれ部分顔画像または平均顔画像の横または縦の大きさ（画素数）である。
また、前記（２）式のように、Ｐ（ｉ，ｊ）とＡ（ｉ，ｊ）の差の２乗和の平方根ではなく、Ｐ（ｉ，ｊ）とＡ（ｉ，ｊ）の差の絶対値の和を求めて、それを相違度とする方法もあり、さらに、部分顔画像４２と平均顔画像の相互相関係数を求めて、例えば、求められた相互相関係数の逆数を相違度とする方法などもある。
【００２８】
次に、今回の計算で得られた相違度が、今までの相違度の最小よりもさらに小さい場合、今回の相違度とその相違度を与えた左目候補領域および右目候補領域を記録する（ステップ１１１）。
そして、前記ステップ１０８からステップ１１１までの処理を、目候補領域から選択される左目候補領域および右目候補領域の対のすべての可能な選択について行い、左目・右目領域決定部２７で、最小の相違度を与える左目候補領域および右目候補領域を、左目領域および右目領域と決定する（ステップ１１３）。
【００２９】
ＹＩＱ顔画像のＩ成分画像を２値化することにより、安定して肌領域を抽出できることが経験上分かっており、その肌領域内の肌色でない部分を抽出することにより、目や眉の領域を安定して抽出できる。
したがって、本実施の形態の目の位置検出方法のように、これらの目候補領域から左目候補領域および右目候補領域を適当に選択し、その左目候補領域および右目候補領域の位置に基づいて切り出された部分顔画像（図６に示す４２）と、人の典型的な顔画像から生成された平均顔画像を比較して、全体的に最も平均顔画像に類似している部分顔画像を作り出すような左目候補領域および右目候補領域を選び出すことにより、確実に左目領域および右目領域を選び出すことができる。
なお、本実施の形態の目の位置検出方法においては、左目候補領域および右目候補領域のみを検出し、口の検出を行わないので、不確実な口の検出（唇の色は肌色に近いため肌領域から口領域を抽出することが困難となる）を必要としないために、安定した結果を得ることができる。
【００３０】
次に、左目・右目相違度計算部２８で、輝度パターン蓄積部１３に蓄積されている輝度パターンと顔画像のＹ成分画像との相違度を計算する。
即ち、輝度パターン蓄積部１３に蓄積されている、眼球による反射光の輝度パターンの中心を、前記左目・右目領域決定部２７で決定された左目領域および右目領域内の適当な場所に置き（ステップ１１４）、その位置において輝度パターンと顔画像のＹ成分画像との相違度を輝度パターンの範囲内で計算する（ステップ１１５）。
【００３１】
この相違度の計算を、輝度パターン中心を左目領域内または右目領域内で移動させながら行い（ステップ１１６、ステップ１１７）、左目領域または右目領域のそれぞれにおいて最も小さい相違度を与える輝度パターンの中心位置を求め、左目・右目位置決定部２９で、最小の相違度を与える輝度パターンの中心位置を左目の位置または右目の位置と決定する（ステップ１１８）。
なお、前記各ステップは、制御部１０の指示の基に実行される。
このように、本実施の形態の目の位置検出方法では、眼球を正面から照明したときの眼球による反射光の輝度パターンを、左目領域および右目領域中から検出するようにしたので、正確な目の中心位置を得ることができる。
なお、本実施の形態において、最終的な目の位置として、眼球に照明光が反射して生じるスポット状の輝点を検出し、その位置を目の位置と決定（ステップ１１４〜ステップ１１８）するようにしたが、ステップ１１３で得られた左目領域および右目領域の重心位置を目の位置としたり、左目領域および右目領域の左右・上下の中心の位置を目の位置とすることも可能である。
また、前記実施の形態において、例えば、入力画像中の微小なノイズを低減するための処理や、色や輝度の補正処理や、肌領域や目候補領域の抽出の時に微小な連結領域を無視するための平滑化処理など、必要があればよく知られている画像の処理を付加するようにしてもよい。
【００３２】
また、本実施の形態の目の位置検出方法においては、制御部１０、入力部２０、ＹＩＣ変換部２１、２値化画像生成部２２、肌領域抽出部２３、目領域抽出部２４、部分顔画像生成部２５、顔画像相違度計算部２６、左目・右目領域決定部２７、左目・右目相違度計算部２８、および左目・右目決定部２９がそれぞれ専用のハードウェアで構成される場合について説明したが、本発明はこれに限定されるものではなく、例えば、コンピュータのソフトウェア処理で実行することも可能である。
この場合に、本実施の形態の目の位置検出方法は、図７に示す中央処理装置（ＣＰＵ）２１０が、主メモリ２０２に読み込まれた目の位置検出プログラムを実行することにより行われる。
この場合に、ＹＩＣ変換部２１、２値化画像生成部２２、肌領域抽出部２３、目領域抽出部２４、部分顔画像生成部２５、顔画像相違度計算部２６、左目・右目領域決定部２７、左目・右目相違度計算部２８、および左目・右目決定部２９は、図７に示すＹＩＣ変換部２１１、２値化画像生成部２１２、肌領域抽出部２１３、目領域抽出部２１４、部分顔画像生成部２１５、顔画像相違度計算部２１６、左目・右目領域決定部２１７、左目・右目相違度計算部２１８、および左目・右目決定部２１９のように、中央処理装置（ＣＰＵ）２１０により実現される機能手段となる。
なお、図７は、本実施の形態の目の位置検出プログラムを実行するコンピュータの概略構成を示すブロック図である。
同図において、２０１は画像を入力するための画像入力装置、２０２は主メモリ、２０３はキーボード・マウス等の入力装置、２０４は補助記憶装置、２０５は表示装置、２０６はバスライン、２１０は中央処理装置（ＣＰＵ）である。
前記目の位置検出プログラムは、例えば、ＣＤ−ＲＯＭ等の記録媒体により提供され主メモリ２０２に読み込まれか、あるいは、例えば、補助記憶装置２０４に格納される。
【００３３】
以上、本発明者によってなされた発明を、前記実施の形態に基づき具体的に説明したが、本発明は、前記実施の形態に限定されるものではなく、その要旨を逸脱しない範囲において種々変更可能であることは勿論である。
【００３４】
【発明の効果】
本願において開示される発明のうち代表的なものによって得られる効果を簡単に説明すれば、下記の通りである。
【００３５】
（１）本発明によれば、肌領域内の肌色でない部分として抽出された目候補領域から左目候補領域および右目候補領域を適当に選択し、その左目候補領域および右目候補領域の位置に基づいて切り出された部分顔画像と人の典型的な顔画像から生成された平均顔画像を比較して、全体的に最も平均顔画像に類似している部分顔画像を生成する左目候補領域および右目候補領域を選び出すようにしたので、左目領域および右目領域を確実に選び出すことが可能となる。
【００３６】
（２）本発明によれば、眼球を正面から照明したときの眼球による反射光の輝度パターンを、左目領域および右目領域中から検出するようにしたので、目の中心位置を正確に得ることが可能となる。
【図面の簡単な説明】
【図１】本発明の実施の形態の目の位置検出装置の概略構成を示すブロック図である。
【図２】本実施の形態の目の位置検出方法を説明するためのフローチャートである。
【図３】図１に示す平均顔画像を説明するための図である。
【図４】図１に示す眼球による反射光の輝度パターンを説明するための図である。
【図５】本実施の形態における、肌領域と目候補領域との一例を示す図である。
【図６】本実施の形態における、眉の部分が左目候補領域および右目候補領域とされた場合の部分顔画像の切出しの様子を示す。
【図７】本実施の形態の目の位置検出プログラムを実行するコンピュータの概略構成を示すブロック図である。
【符号の説明】
１０…制御部、１１…顔画像蓄積部、１２…平均顔画像蓄積部、１３…輝度パターン蓄積部、１４…蓄積手段、２０…入力部、２１，２１１…ＹＩＣ変換部、２２，２１２…２値化画像生成部、２３，２１３…肌領域抽出部、２４，２１４…目領域抽出部、２５，２１５…部分顔画像生成部、２６，２１６…顔画像相違度計算部、２７，２１７…左目・右目領域決定部、２８，２１８…左目・右目相違度計算部、２９，２１９…左目・右目決定部、３１…肌領域、３２…目候補領域、４１…カラー顔画像、４２…部分顔画像、２０１…画像入力装置、２０２…主メモリ、２０３…キーボード・マウス等の入力装置、２０４…補助記憶装置、２０５…表示装置、２０６…バスライン、２１０…中央処理装置（ＣＰＵ）。

Claims (9)

1. 人のカラー顔画像から目の位置を検出する目の位置検出装置において、
   入力された人のカラー顔画像をＹＩＱ色表現に変換してＹＩＱ顔画像を生成する第１の手段と、
   前記第１の手段で生成されたＹＩＱ顔画像のＩ成分画像を、その画素値分布に基づいて決定されるしきい値により２値化して２値化画像を生成する第２の手段と、
   前記第２の手段で生成された２値化画像から顔画像の中央付近に位置し所定の面積より大きい連結領域を肌領域として抽出する第３の手段と、
   前記第３の手段で抽出された肌領域の最外周より内側に存在する肌領域でない複数の連結領域を目候補領域として抽出する第４の手段と、
   前記第４の手段で抽出された複数の目候補領域の中から左目候補領域と右目候補領域の対を選択する第５の手段と、
   前記第５の手段で選択された全ての左目候補領域と右目候補領域の対に対して、左目候補領域と右目候補領域との位置を基準にして、前記入力されたカラー顔画像から顔内部領域を切出して部分顔画像を生成する第６の手段と、
   前記第６の手段で生成された部分顔画像と、人の典型的な顔画像からその目の位置を基準にして顔内部領域を切り出して生成した平均顔画像との相違度を計算する第７の手段と、
   前記第７の手段で計算された相違度が最も小さくなる左目候補領域と右目候補領域の対を、左目領域および右目領域と決定する第８の手段とを有することを特徴とする目の位置検出装置。
2. 前記第８の手段で決定された左目領域および右目領域の重心の位置、あるいは、前記第８の手段で決定された左目領域および右目領域のそれぞれの領域の左右並びに上下の中心の位置を目の位置と決定する第９の手段を、さらに有することを特徴とする請求項１に記載の目の位置検出装置。
3. 前記第８の手段で決定された左目領域および右目領域の内部で、眼球を正面から照明したときの眼球による反射光の輝度パターンと左目領域または右目領域の輝度との相違度を、前記輝度パターンを移動させながら計算し、相違度が最も小さくなるときの前記輝度パターンの中心位置を左目または右目の位置と決定する第９の手段とを、さらに有することを特徴とする請求項１に記載の目の位置検出装置。
4. 人のカラー顔画像から目の位置を検出する目の位置検出方法において、
   人の典型的な顔画像からその目の位置を基準にして顔内部領域を切り出して生成した平均顔画像を予め用意する第１のステップと、
   入力された人のカラー顔画像をＹＩＱ色表現に変換してＹＩＱ顔画像を生成する第２のステップと、
   前記第２のステップで生成されたＹＩＱ顔画像のＩ成分画像を、その画素値分布に基づいて決定されるしきい値により２値化して２値化画像を生成する第３のステップと、
   前記第３のステップで生成された２値化画像から顔画像の中央付近に位置し所定の面積より大きい連結領域を肌領域として抽出する第４のステップと、
   前記第４のステップで抽出された肌領域の最外周より内側に存在する肌領域でない複数の連結領域を目候補領域として抽出する第５のステップと、
   前記第５のステップで抽出された複数の目候補領域の中から左目候補領域と右目候補領域の対を選択する第６のステップと、
   前記第６のステップで選択された左目候補領域と右目候補領域との位置を基準にして、前記入力されたカラー顔画像から顔内部領域を切出して部分顔画像を生成する第７のステップと、
   前記第７のステップで生成された部分顔画像と、前記第１のステップで予め用意された平均顔画像との相違度を計算する第８のステップと、
   前記第５のステップで抽出された目候補領域内の全ての左目候補領域と右目候補領域の対に対して、前記第６ないし第８のステップを実行し、最も相違度が小さくなる左目候補領域と右目候補領域の対を、左目領域および右目領域と決定する第９のステップとを有することを特徴とする目の位置検出方法。
5. 前記第９のステップで決定された左目領域および右目領域の重心の位置、あるいは、前記第９のステップで決定された左目領域および右目領域のそれぞれの領域の左右並びに上下の中心の位置を目の位置と決定する第１０のステップを、さらに有することを特徴とする請求項４に記載の目の位置検出方法。
6. 眼球を正面から照明したときの眼球による反射光の輝度パターンを予め用意する第１０のステップと、前記第９のステップで決定された左目領域および右目領域の内部で、前記第１０のステップで予め用意された輝度パターンと左目領域または右目領域の輝度との相違度を、前記輝度パターンを移動させながら計算し、相違度が最も小さくなるときの輝度パターンの中心位置を左目または右目の位置と決定する第１１のステップとを、さらに有することを特徴とする請求項４に記載の目の位置検出方法。
7. コンピュータによって、人のカラー顔画像から目の位置を検出するための目の位置検出プログラムを記録した記録媒体であって、
   当該目の位置検出プログラムは、コンピュータに、入力された人のカラー顔画像をＹＩＱ色表現に変換してＹＩＱ顔画像を生成させ、前記生成させたＹＩＱ顔画像のＩ成分画像をその画素値分布に基づいて決定されるしきい値により２値化して２値化画像を生成させ、前記生成させた２値化画像から顔画像の中央付近に位置し所定の面積より大きい連結領域を肌領域として抽出させ、前記抽出させた肌領域の最外周より内側に存在する肌領域でない複数の連結領域を目候補領域として抽出させ、前記抽出させた複数の目候補領域の中から左目候補領域と右目候補領域の対を選択させ、前記選択させた全ての左目候補領域と右目候補領域の対に対して、左目候補領域と右目候補領域との位置を基準にして前記入力されたカラー顔画像から顔内部領域を切出して部分顔画像を生成させ、前記生成させた部分顔画像と人の典型的な顔画像からその目の位置を基準にして顔内部領域を切り出して生成した平均顔画像との相違度を計算させ、前記計算させた相違度が最も小さくなる左目候補領域と右目候補領域の対を左目領域および右目領域と決定させることを特徴とする目の位置検出プログラムを記録した記録媒体。
8. 前記目の位置検出プログラムは、さらに、コンピュータに、前記決定させた左目領域および右目領域の重心の位置、あるいは、前記決定させた左目領域および右目領域のそれぞれの領域の左右並びに上下の中心の位置を目の位置と決定させることを特徴とする請求項７に記載の目の位置検出プログラムを記録した記録媒体。
9. 前記目の位置検出プログラムは、さらに、コンピュータに、前記決定させた左目領域および右目領域の内部で、眼球を正面から照明したときの眼球による反射光の輝度パターンと左目領域または右目領域の輝度との相違度を、前記輝度パターンを移動させながら計算し、相違度が最も小さくなるときの前記輝度パターンの中心位置を左目または右目の位置と決定させることを特徴とする請求項７に記載の目の位置検出プログラムを記録した記録媒体。

Images