JP6686280B2

JP6686280B2 - Registration device and image forming device

Info

Publication number: JP6686280B2
Application number: JP2015041651A
Authority: JP
Inventors: 直哉延谷; 真史小野; 訓稔山本; 林　学; 学林
Original assignee: Fuji Xerox Co Ltd; Fujifilm Business Innovation Corp
Current assignee: Fujifilm Business Innovation Corp
Priority date: 2015-03-03
Filing date: 2015-03-03
Publication date: 2020-04-22
Anticipated expiration: 2035-03-03
Also published as: JP2016162304A

Description

本発明は、登録装置および画像形成装置に関する。 The present invention relates to a registration device and an image forming device.

公報記載の従来技術として、複写機の操作パネルにＣＣＤカメラを配置し、使用者の顔をＣＣＤカメラにより撮影し、撮影で得た顔の画像の特徴量を、予め登録されている特徴量と比較することで、この使用者が正規の使用者であるか否かを判定し、正規の使用者である場合には複写機の利用を許可し、正規の使用者でない場合には複写機の利用を禁止するものが存在する（特許文献１参照）。また、特許文献１では、正規の使用者については、予め、使用者の顔をＣＣＤカメラにより撮影し、撮影で得た顔の画像から特徴量を抽出し、この使用者のＩＤと抽出によって得た特徴量とを対応付けて登録している。 As a conventional technique described in the publication, a CCD camera is arranged on an operation panel of a copying machine, a user's face is photographed by the CCD camera, and the feature amount of the image of the face obtained by the photographing is compared with a previously registered feature amount. By comparing, it is determined whether or not this user is a legitimate user. If the user is a legitimate user, use of the copier is permitted. There are some that are prohibited from use (see Patent Document 1). Further, in Patent Document 1, for a regular user, the face of the user is photographed in advance by a CCD camera, the feature amount is extracted from the image of the face obtained by photographing, and the feature amount is obtained by the ID of the user and the extraction. The feature amounts are registered in association with each other.

特開２００２−１１１９２４号公報JP, 2002-111924, A

ここで、正規の使用者を予め登録する処理において、使用者が撮影ボタン等を押下した直後に使用者の顔の画像を撮影するような構成を採用した場合には、使用者の顔が撮影できないことがあった。また、使用者の顔が撮影できたとしても、例えば使用者の顔の大部分が髪で覆われているような状態であった場合には、得られた顔の画像から特徴量を抽出できなくなることがあった。
本発明は、顔画像に関する情報の登録に先立って行われる顔画像の撮影において、より良好な顔画像を取得することを目的とする。 Here, in the process of registering a regular user in advance, if a configuration is adopted in which the image of the face of the user is taken immediately after the user presses the shooting button or the like, the face of the user is taken. There were things I couldn't do. Even if the user's face can be photographed, for example, if most of the user's face is covered with hair, the feature amount can be extracted from the obtained face image. It was sometimes gone.
It is an object of the present invention to acquire a better face image in the face image shooting performed prior to the registration of information about the face image.

請求項１記載の発明は、使用者の顔を撮影する撮影手段と、前記撮影手段が撮影した使用者の顔画像の取得に関する指示を受け付ける受付手段と、前記受付手段が前記指示を受け付けてから予め決められた撮影猶予期間が経過した後に、前記撮影手段が撮影した前記顔画像を取得する取得手段と、前記取得手段が取得した前記顔画像に関する情報を登録する登録手段と、前記撮影手段が撮影した前記顔画像を表示する表示手段とを含み、前記表示手段は、前記撮影猶予期間中に、前記顔画像とともに時間の経過に関する経過画像として複数の画像を順次表示し、前記経過画像として順次表示される前記複数の画像は、時間の経過に伴って画像の大きさが順次縮小していくことを特徴とする登録装置である。
請求項２記載の発明は、前記経過画像は、白抜きまたは半透明の画像で構成されることを特徴とする請求項１記載の登録装置である。
請求項３記載の発明は、記録材に画像を形成する画像形成手段と、使用者の顔を撮影する撮影手段と、前記撮影手段が撮影した使用者の顔画像の取得に関する指示を受け付ける受付手段と、前記受付手段が前記指示を受け付けてから予め決められた撮影猶予期間が経過した後に、前記撮影手段が撮影した前記顔画像を取得する取得手段と、前記取得手段が取得した前記顔画像に関する情報を登録する登録手段と、前記撮影手段が新たに撮影した使用者の顔画像に関する情報と、前記登録手段に既に登録されている顔画像に関する情報とを照合することで、前記画像形成手段の使用を許可する使用者の認証を行う認証手段と、前記撮影手段が撮影した前記顔画像を表示する表示手段とを含み、前記表示手段は、前記撮影猶予期間中に、前記顔画像とともに時間の経過に関する経過画像として複数の画像を順次表示し、前記経過画像として順次表示される前記複数の画像は、時間の経過に伴って画像の大きさが順次縮小していくことを特徴とする画像形成装置である。 According to a first aspect of the present invention, a photographing means for photographing the face of the user, a receiving means for receiving an instruction regarding acquisition of the face image of the user photographed by the photographing means, and the receiving means after receiving the instruction. After a predetermined shooting grace period has elapsed, an acquisition unit that acquires the face image captured by the imaging unit, a registration unit that registers information regarding the face image acquired by the acquisition unit, and the imaging unit And a display unit for displaying the photographed face image, wherein the display unit sequentially displays a plurality of images as the progress image regarding the passage of time together with the face image during the photographing grace period, and sequentially as the progress image. The plurality of images to be displayed is a registration device characterized in that the sizes of the images are sequentially reduced with the passage of time.
The invention according to claim 2 is the registration device according to claim 1 , wherein the progress image is formed of a white or translucent image.
According to a third aspect of the present invention, an image forming means for forming an image on a recording material, a photographing means for photographing a user's face, and an acceptance means for accepting an instruction regarding acquisition of a face image of the user photographed by the photographing means. And an acquisition unit that acquires the face image captured by the image capturing unit after a predetermined image capturing grace period has elapsed after the receiving unit receives the instruction, and the face image acquired by the acquiring unit. The registration means for registering information, the information on the face image of the user newly photographed by the photographing means, and the information on the face image already registered in the registration means are collated, thereby An authentication unit that authenticates a user who is permitted to use the image, and a display unit that displays the face image captured by the image capturing unit are provided. A plurality of images are sequentially displayed together as a progress image with the passage of time, and the plurality of images sequentially displayed as the progress image are characterized in that the size of the image is sequentially reduced with the passage of time. Image forming apparatus.

請求項１記載の発明によれば、顔画像に関する情報の登録に先立って行われる顔画像の撮影において、使用者の目線をより顔画像側に誘導することができ、より良好な顔画像を取得することができる。
請求項２記載の発明によれば、使用者による顔画像の認識を容易にすることができる。
請求項３記載の発明によれば、顔画像に関する情報の登録に先立って行われる顔画像の撮影において、使用者の目線をより顔画像側に誘導することができ、より良好な顔画像を取得することができる。 According to the invention described in claim 1, in the face image shooting performed prior to the registration of the information about the face image, it is possible to guide the user's eyes toward the face image side and obtain a better face image. can do.
According to the second aspect of the present invention, the user can easily recognize the face image.
According to the third aspect of the present invention, when the face image is captured prior to the registration of the information about the face image, it is possible to guide the user's eyes toward the face image side and obtain a better face image. can do.

画像形成装置の斜視図である。FIG. 3 is a perspective view of the image forming apparatus. ユーザインタフェースの上面図である。It is a top view of a user interface. 画像形成装置のブロック図である。FIG. 3 is a block diagram of the image forming apparatus. 顔登録処理の手順を示すフローチャートである。It is a flow chart which shows the procedure of face registration processing. （ａ）、（ｂ）は、顔登録画面を説明するための図である。(A), (b) is a figure for demonstrating a face registration screen. （ａ）〜（ｃ）は、顔登録画面におけるカウントダウンの一例を説明するための図である。(A)-(c) is a figure for demonstrating an example of the countdown in a face registration screen. （ａ）〜（ｃ）は、顔登録画面におけるカウントダウンの他の一例を説明するための図である。(A)-(c) is a figure for demonstrating another example of the countdown in a face registration screen. （ａ）〜（ｃ）は、顔登録画面におけるカウントダウンの他の一例を説明するための図である。(A)-(c) is a figure for demonstrating another example of the countdown in a face registration screen. （ａ）〜（ｃ）は、顔登録画面におけるカウントダウンの他の一例を説明するための図である。(A)-(c) is a figure for demonstrating another example of the countdown in a face registration screen. 顔登録処理の他の手順を示すフローチャートである。It is a flow chart which shows other procedures of face registration processing. 顔登録処理の他の手順を示すフローチャート（つづき）である。9 is a flowchart (continued) showing another procedure of face registration processing.

以下、添付図面を参照して、本発明の実施の形態について詳細に説明する。
図１は、本実施の形態が適用される画像形成装置１０の斜視図である。この画像形成装置１０は、スキャン機能、プリント機能、コピー機能およびファクシミリ機能を備えた所謂複合機である。 Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings.
FIG. 1 is a perspective view of an image forming apparatus 10 to which this exemplary embodiment is applied. The image forming apparatus 10 is a so-called multi-function peripheral having a scan function, a print function, a copy function, and a facsimile function.

画像形成装置１０は、スキャナ１１と、プリンタ１２と、ユーザインタフェース（ＵＩ）１３とを備える。これらのうち、スキャナ１１は、原稿に形成された画像を読み取るための装置であり、プリンタ１２は、記録材に画像を形成するための装置である。また、ユーザインタフェース１３は、使用者が画像形成装置１０を使用する際に、使用者による操作（指示）を受け付け、且つ、使用者に対し各種情報の表示を行うための装置である。 The image forming apparatus 10 includes a scanner 11, a printer 12, and a user interface (UI) 13. Of these, the scanner 11 is a device for reading an image formed on a document, and the printer 12 is a device for forming an image on a recording material. The user interface 13 is a device for receiving an operation (instruction) by the user and displaying various information to the user when the user uses the image forming apparatus 10.

本実施の形態のスキャナ１１は、プリンタ１２の上方に配置されている。また、ユーザインタフェース１３は、スキャナ１１に取り付けられている。ここで、ユーザインタフェース１３は、画像形成装置１０を使用する際に使用者が立つ、画像形成装置１０（スキャナ１１）のフロント側に配置される。そして、ユーザインタフェース１３は、画像形成装置１０のフロント側に立った使用者が上方から下方を見た状態で操作できるように、上方に向けて配置される。 The scanner 11 of this embodiment is arranged above the printer 12. The user interface 13 is attached to the scanner 11. Here, the user interface 13 is arranged on the front side of the image forming apparatus 10 (scanner 11) on which the user stands when using the image forming apparatus 10. The user interface 13 is arranged facing upward so that a user standing on the front side of the image forming apparatus 10 can operate the image forming apparatus 10 while looking down from above.

また、この画像形成装置１０は、焦電センサ１４と、第１カメラ１５と、第２カメラ１６とをさらに備える。これらのうち、焦電センサ１４および第１カメラ１５は、プリンタ１２のフロント側且つ左側に取り付けられている。そして、第１カメラ１５は、焦電センサ１４の上方に配置されている。また、撮影手段の一例としての第２カメラ１６は、ユーザインタフェース１３における左側に、上方に向けて取り付けられている。 The image forming apparatus 10 further includes a pyroelectric sensor 14, a first camera 15, and a second camera 16. Of these, the pyroelectric sensor 14 and the first camera 15 are attached to the front side and the left side of the printer 12. The first camera 15 is arranged above the pyroelectric sensor 14. The second camera 16, which is an example of an image capturing unit, is attached to the left side of the user interface 13 facing upward.

ここで、焦電センサ１４は、画像形成装置１０のフロント側における、使用者を含む移動体の移動を検知する機能を有している。また、第１カメラ１５は所謂ビデオカメラで構成されており、画像形成装置１０のフロント側の画像を撮影する機能を有している。さらに、第２カメラ１６も所謂ビデオカメラで構成されており、画像形成装置１０の上側の画像を撮影する機能を有している。 Here, the pyroelectric sensor 14 has a function of detecting movement of a moving body including a user on the front side of the image forming apparatus 10. The first camera 15 is a so-called video camera and has a function of capturing an image on the front side of the image forming apparatus 10. Further, the second camera 16 is also composed of a so-called video camera and has a function of capturing an image on the upper side of the image forming apparatus 10.

図２は、図１に示すユーザインタフェース１３の上面図である。ただし、図２は、ユーザインタフェース１３に配置される第２カメラ１６も、併せて示している。 FIG. 2 is a top view of the user interface 13 shown in FIG. However, FIG. 2 also shows the second camera 16 arranged in the user interface 13.

ユーザインタフェース１３は、タッチパネル１３０と、第１操作ボタン群１３１と、第２操作ボタン群１３２と、ＵＳＢメモリ装着部１３３とを有する。ここで、第１操作ボタン群１３１は、タッチパネル１３０の右側に配置されている。また、第２操作ボタン群１３２、ＵＳＢメモリ装着部１３３および第２カメラ１６は、タッチパネル１３０の左側に配置されている。 The user interface 13 includes a touch panel 130, a first operation button group 131, a second operation button group 132, and a USB memory mounting section 133. Here, the first operation button group 131 is arranged on the right side of the touch panel 130. The second operation button group 132, the USB memory mounting portion 133, and the second camera 16 are arranged on the left side of the touch panel 130.

ここで、表示手段の一例としてのタッチパネル１３０は、使用者に対し画像を用いた情報を表示し、且つ、使用者からの入力を受け付ける機能を有している。また、第１操作ボタン群１３１および第２操作ボタン群１３２は、使用者からの入力を受け付ける機能を有している。さらに、ＵＳＢメモリ装着部１３３は、使用者によるＵＳＢメモリの装着を受け付ける機能を有している。 Here, the touch panel 130 as an example of a display unit has a function of displaying information using an image to the user and receiving an input from the user. The first operation button group 131 and the second operation button group 132 have a function of receiving an input from the user. Further, the USB memory mounting unit 133 has a function of accepting mounting of the USB memory by the user.

また、ユーザインタフェース１３に取り付けられる第２カメラ１６は、画像形成装置１０を使用する使用者の顔の画像を撮影できる位置に配置されている。そして、第２カメラ１６で撮影された画像（使用者の顔の画像を含む）は、タッチパネル１３０に表示されるようになっている。 The second camera 16 attached to the user interface 13 is arranged at a position where an image of the face of the user who uses the image forming apparatus 10 can be captured. The image captured by the second camera 16 (including the image of the user's face) is displayed on the touch panel 130.

図３は、画像形成装置１０のブロック図である。この画像形成装置１０は、制御部２１と、通信部２２と、操作部２３と、表示部２４と、記憶部２５と、画像読取部２６と、画像形成部２７と、撮影部２８と、顔登録認証部２９とを備える。 FIG. 3 is a block diagram of the image forming apparatus 10. The image forming apparatus 10 includes a control unit 21, a communication unit 22, an operation unit 23, a display unit 24, a storage unit 25, an image reading unit 26, an image forming unit 27, a photographing unit 28, and a face. The registration authentication unit 29 is provided.

制御部２１は、例えばＣＰＵ（Central Processing Unit）とメモリとを備え、画像形成装置１０の各部を制御する。ＣＰＵは、メモリ又は記憶部２５に記憶されたプログラムを実行する。メモリは、例えばＲＯＭ（Read Only Memory）とＲＡＭ（Random Access Memory）とを備える。ＲＯＭは、予めプログラムやデータを記憶する。ＲＡＭは、プログラムやデータを一時的に記憶し、ＣＰＵがプログラムを実行する際の作業領域として用いられる。なお、本実施の形態では、制御部２１が取得手段としての機能を有している。 The control unit 21 includes, for example, a CPU (Central Processing Unit) and a memory, and controls each unit of the image forming apparatus 10. The CPU executes the program stored in the memory or the storage unit 25. The memory includes, for example, a ROM (Read Only Memory) and a RAM (Random Access Memory). The ROM stores programs and data in advance. The RAM temporarily stores programs and data and is used as a work area when the CPU executes the programs. In addition, in this Embodiment, the control part 21 has a function as an acquisition means.

通信部２２は、図示しない通信回線に接続される通信用のインタフェースである。通信部２２は、クライアント装置や他の画像形成装置（ともに図示せず）と、通信回線を介して通信を行う。 The communication unit 22 is an interface for communication connected to a communication line (not shown). The communication unit 22 communicates with a client device and another image forming apparatus (both not shown) via a communication line.

操作部２３は、使用者の操作に応じた情報を制御部２１に入力する。この例において、操作部２３は、ユーザインタフェース１３に設けられたタッチパネル１３０、第１操作ボタン群１３１および第２操作ボタン群１３２によって実現される。 The operation unit 23 inputs information according to the user's operation to the control unit 21. In this example, the operation unit 23 is realized by the touch panel 130, the first operation button group 131, and the second operation button group 132 provided on the user interface 13.

表示部２４は、使用者に対し各種情報を表示する。この例において、表示部２４は、ユーザインタフェース１３に設けられたタッチパネル１３０によって実現される。 The display unit 24 displays various information to the user. In this example, the display unit 24 is realized by the touch panel 130 provided on the user interface 13.

記憶部２５は、例えばハードディスクであり、制御部２１により用いられる各種のプログラムやデータを記憶する。 The storage unit 25 is, for example, a hard disk, and stores various programs and data used by the control unit 21.

画像読取部２６は、原稿の画像を読み取って画像データを生成する。この例において、画像読取部２６はスキャナ１１によって実現される。 The image reading unit 26 reads an image of a document and generates image data. In this example, the image reading unit 26 is realized by the scanner 11.

画像形成手段の一例としての画像形成部２７は、画像データに応じた画像を用紙等のシート状の記録材に形成する。この例において、画像形成部２７はプリンタ１２によって実現される。なお、画像形成部２７は、電子写真方式により画像を形成してもよいし、その他の方式により画像を形成してもよい。 The image forming unit 27, which is an example of an image forming unit, forms an image corresponding to image data on a sheet-shaped recording material such as paper. In this example, the image forming unit 27 is realized by the printer 12. The image forming unit 27 may form an image by an electrophotographic method, or may form an image by another method.

撮影部２８は、撮影対象の撮影あるいは検知を行う。この例において、撮影部２８は、焦電センサ１４、第１カメラ１５および第２カメラ１６によって実現される。 The image capturing unit 28 captures or detects an object to be imaged. In this example, the photographing unit 28 is realized by the pyroelectric sensor 14, the first camera 15, and the second camera 16.

登録手段および認証手段の一例としての顔登録認証部２９は、この画像形成装置１０を使用することが可能な使用者について、事前に、この使用者の顔画像を用いた登録を行う。ここで、登録においては、使用者の顔画像の撮影を行うとともに、撮影で得られた顔画像から特徴量の抽出を行う。そして、使用者のＩＤと、使用者の顔画像と、使用者の顔画像から抽出された特徴量とを対応付けて記憶させる。ここで、使用者のＩＤ、使用者の顔画像および使用者の顔画像から抽出された特徴量は、顔画像に関する情報の一例である。また、顔登録認証部２９は、使用者がこの画像形成装置１０を使用しようとする際に、この使用者の顔画像を用いた認証を行う。ここで、認証においては、使用者の顔画像の撮影を行うとともに、撮影で得られた顔画像から特徴量の抽出を行う。そして、今回の撮影で得られた特徴量が、既に登録されている特徴量と一致するか否かを調べ、一致するものがある場合には画像形成装置１０の使用を許可し、一致するものがない場合には画像形成装置１０の使用を禁止する。 The face registration / authentication unit 29, which is an example of a registration unit and an authentication unit, registers in advance a user who can use the image forming apparatus 10, using the face image of the user. Here, in registration, the face image of the user is captured, and the feature amount is extracted from the face image obtained by the capture. Then, the user ID, the face image of the user, and the feature amount extracted from the face image of the user are stored in association with each other. Here, the user ID, the user's face image, and the feature amount extracted from the user's face image are examples of information about the face image. Further, the face registration authentication unit 29 performs authentication using the face image of the user when the user tries to use the image forming apparatus 10. Here, in the authentication, the face image of the user is photographed and the feature amount is extracted from the face image obtained by the photographing. Then, it is checked whether or not the feature amount obtained by this photographing matches the already registered feature amount, and if there is a match, the use of the image forming apparatus 10 is permitted, and the match is obtained. If there is not, the use of the image forming apparatus 10 is prohibited.

この画像形成装置１０では、スキャン処理、コピー処理、プリント処理、ファクシミリ送信処理およびファクシミリ受信処理が行われる。スキャン処理とは、原稿の画像を読み取って画像データを生成する処理をいう。このスキャン処理は、画像読取部２６によって行われる。コピー処理とは、原稿の画像を読み取って画像データを生成し、この画像データに基づいて記録材に画像を形成する処理をいう。このコピー処理は、画像読取部２６および画像形成部２７によって行われる。プリント処理とは、外部に設けられたクライアント装置から受信した画像データに基づいて記録材に画像を形成する処理をいう。このプリント処理は、通信部２２および画像形成部２７によって行われる。ファクシミリ送信処理は、原稿の画像を読み取って画像データを生成し、生成した画像データを、通信部２２を介してファクシミリ装置に送信する処理をいう。このファクシミリ送信処理は、画像読取部２６及び通信部２２によって行われる。ファクシミリ受信処理は、ファクシミリ装置から受信した画像データに基づいて記録材に画像を形成する処理をいう。このファクシミリ受信処理は、通信部２２および画像形成部２７によって行われる。 The image forming apparatus 10 performs scan processing, copy processing, print processing, facsimile transmission processing, and facsimile reception processing. The scanning process is a process of reading an image of a document and generating image data. This scanning process is performed by the image reading unit 26. The copy process is a process of reading an image of a document to generate image data and forming an image on a recording material based on the image data. The copy process is performed by the image reading unit 26 and the image forming unit 27. The print process is a process of forming an image on a recording material based on image data received from an externally provided client device. This print processing is performed by the communication unit 22 and the image forming unit 27. The facsimile transmission process is a process of reading an image of a document to generate image data and transmitting the generated image data to the facsimile device via the communication unit 22. The facsimile transmission process is performed by the image reading unit 26 and the communication unit 22. The facsimile reception process is a process of forming an image on a recording material based on image data received from a facsimile device. The facsimile reception process is performed by the communication unit 22 and the image forming unit 27.

では次に、画像形成装置１０を使用しようとする使用者が、事前に行う顔登録処理の手順を説明する。図４は、顔登録処理の手順を示すフローチャートである。なお、以下に説明する処理は、画像形成装置１０に設けられた制御部２１および顔登録認証部２９が実行する。 Next, a procedure of face registration processing performed in advance by a user who intends to use the image forming apparatus 10 will be described. FIG. 4 is a flowchart showing the procedure of face registration processing. Note that the processing described below is executed by the control unit 21 and the face registration authentication unit 29 provided in the image forming apparatus 10.

この処理では、最初に顔登録画面を起動する（ステップ１０２）。ここで、顔登録画面は、ユーザインタフェース１３に設けられたタッチパネル１３０に表示される。続いて、タッチパネル１３０に表示された顔登録画面に、第２カメラ１６を用いて撮影した画像（以下では「カメラ画像」と称する）を表示する（ステップ１０４）。なお、ステップ１０４では、顔登録画面に、カメラ画像とともにガイド画像（詳細は後述する）の表示も行う。そして、顔登録画面に表示された顔登録の撮影ボタンの押下を待つ（ステップ１０６）。また、撮影ボタンの押下を待ちつつ、顔登録画面に表示されるカメラ画像を更新する（ステップ１０８）。 In this process, the face registration screen is first activated (step 102). Here, the face registration screen is displayed on the touch panel 130 provided in the user interface 13. Then, the face registration screen displayed on the touch panel 130 displays an image captured by the second camera 16 (hereinafter referred to as "camera image") (step 104). In step 104, a guide image (details will be described later) is displayed on the face registration screen together with the camera image. Then, it waits for the pressing of the shooting button for face registration displayed on the face registration screen (step 106). Also, the camera image displayed on the face registration screen is updated while waiting for the pressing of the shooting button (step 108).

それから、顔登録画面に表示されるカメラ画像から、使用者の顔が検知できたか否かを判断する（ステップ１１０）。ステップ１１０で肯定の判断（ＹＥＳ）を行った場合は、顔登録画面に、顔が検知されたことを使用者に知らせるための顔検知枠を表示する（ステップ１１２）。一方、ステップ１１０で否定の判断（ＮＯ）を行った場合は、顔検知枠を非表示にする（ステップ１１４）。なお、顔検知枠の詳細については後述する。 Then, it is determined whether or not the face of the user has been detected from the camera image displayed on the face registration screen (step 110). When an affirmative determination (YES) is made in step 110, a face detection frame for notifying the user that a face has been detected is displayed on the face registration screen (step 112). On the other hand, if a negative determination (NO) is made in step 110, the face detection frame is hidden (step 114). The details of the face detection frame will be described later.

そして、撮影ボタンが押下されたか否かを判断する（ステップ１１６）。ステップ１１６で否定の判断（ＮＯ）を行った場合は、ステップ１０６へと戻って処理を続行する。一方、ステップ１１６で肯定の判断（ＹＥＳ）を行った場合は、顔登録画面に表示されるカメラ画像を更新し（ステップ１１８）、このカメラ画像とともにカウント画像を表示する（ステップ１２０）。なお、カウント画像の詳細については後述する。 Then, it is determined whether or not the photographing button is pressed (step 116). If a negative determination (NO) is made in step 116, the process returns to step 106 to continue the processing. On the other hand, if a positive determination (YES) is made in step 116, the camera image displayed on the face registration screen is updated (step 118), and the count image is displayed together with this camera image (step 120). The details of the count image will be described later.

次に、顔登録画面に表示されるカメラ画像から、使用者の顔が検知できたか否かを判断する（ステップ１２２）。ステップ１２２で肯定の判断（ＹＥＳ）を行った場合は、顔登録画面に顔検知枠を表示する（ステップ１２４）。一方、ステップ１２２で否定の判断（ＮＯ）を行った場合は、顔検知枠を非表示にする（ステップ１２６）。 Next, it is determined from the camera image displayed on the face registration screen whether or not the user's face has been detected (step 122). When a positive determination (YES) is made in step 122, the face detection frame is displayed on the face registration screen (step 124). On the other hand, if a negative determination (NO) is made in step 122, the face detection frame is hidden (step 126).

次いで、カメラ画像とともに表示するカウント画像を更新し（ステップ１２８）、カウントが完了したか否かを判断する（ステップ１３０）。ステップ１３０で否定の判断（ＮＯ）を行った場合は、ステップ１１８に戻って処理を続行する。一方、ステップ１３０で肯定の判断（ＹＥＳ）を行った場合は、顔画像の登録（顔登録と称する）を実行する（ステップ１３２）。ここで、顔登録とは、カメラ画像から使用者の顔画像を取得し、取得した顔画像から特徴量を抽出し、得られた顔画像と特徴量とを、使用者のＩＤに対応付けて登録する処理をいう。したがって、カメラ画像から使用者の顔画像が取得できない場合、あるいは、取得した顔画像から特徴量が抽出できない場合は、顔登録が行えないことになる。 Next, the count image displayed together with the camera image is updated (step 128), and it is determined whether the count is completed (step 130). If a negative determination (NO) is made in step 130, the process returns to step 118 to continue the processing. On the other hand, if an affirmative determination (YES) is made in step 130, face image registration (referred to as face registration) is executed (step 132). Here, the face registration is to acquire a face image of a user from a camera image, extract a feature amount from the acquired face image, and associate the obtained face image and the feature amount with a user ID. This is the process of registering. Therefore, if the face image of the user cannot be acquired from the camera image, or if the feature amount cannot be extracted from the acquired face image, face registration cannot be performed.

そして、顔登録ができたか否かの判断を行う（ステップ１３４）。ステップ１３４で否定の判断（ＮＯ）を行った場合は、例えばタッチパネル１３０を介して使用者にエラー（顔登録エラー）を通知し（ステップ１３６）、ステップ１０６に戻って処理を続行する。一方、ステップ１３４で肯定の判断（ＹＥＳ）を行った場合は、例えばタッチパネル１３０を介して使用者に顔登録結果を表示する（ステップ１３８）。なお、ここでいう顔登録結果とは、顔登録に使用した顔画像をいう。 Then, it is determined whether or not the face has been registered (step 134). When a negative determination (NO) is made in step 134, the user is notified of an error (face registration error) via the touch panel 130 (step 136), and the process returns to step 106 to continue the process. On the other hand, if a positive determination (YES) is made in step 134, the face registration result is displayed to the user via the touch panel 130, for example (step 138). The face registration result here refers to the face image used for face registration.

続いて、使用者に対し、この顔登録結果を本当に登録してもよいか否かの判断を仰ぐ（ステップ１４０）。ステップ１４０で否定の判断（ＮＯ）を受け付けた場合は、登録した顔登録結果を削除し（ステップ１４２）、ステップ１０２に戻って処理を続行する。一方、ステップ１４０で肯定の判断（ＹＥＳ）を受け付けた場合は、この一連の処理を完了する。 Then, the user is asked to judge whether or not the face registration result may be actually registered (step 140). If a negative determination (NO) is received in step 140, the registered face registration result is deleted (step 142), and the process returns to step 102 and continues. On the other hand, when a positive determination (YES) is received in step 140, this series of processing is completed.

では、上述した顔登録処理で用いられる顔登録画面について、例を挙げて説明を行う。
図５は、顔登録処理においてユーザインタフェース１３のタッチパネル１３０に表示される顔登録画面３０を説明するための図である。また、図６は、顔登録画面３０におけるカウントダウンの一例を説明するための図である。 Now, the face registration screen used in the face registration processing described above will be described with an example.
FIG. 5 is a diagram for explaining the face registration screen 30 displayed on the touch panel 130 of the user interface 13 in the face registration process. Further, FIG. 6 is a diagram for explaining an example of the countdown on the face registration screen 30.

まず、図５（ａ）は、ステップ１０４（図４参照）で表示される顔登録画面３０を示している。
この顔登録画面３０は、横長の長方形状を呈するウィンドウ画面である。そして、図５（ａ）に示す顔登録画面３０は、カメラ画像３１と、メッセージ画像３２と、撮影ボタン３３と、取消ボタン３４と、ガイド画像３５とを含んでいる。 First, FIG. 5A shows the face registration screen 30 displayed in step 104 (see FIG. 4).
The face registration screen 30 is a window screen having a horizontally long rectangular shape. The face registration screen 30 shown in FIG. 5A includes a camera image 31, a message image 32, a shooting button 33, a cancel button 34, and a guide image 35.

カメラ画像３１は、顔登録画面３０における左側に配置される。そして、カメラ画像３１には、顔登録画面３０が表示されるタッチパネル１３０の左側に近接して配置された第２カメラ１６（図２参照）により撮影された画像が表示される。なお、図５（ａ）に示す例において、カメラ画像３１には、使用者９０の顔が映り込んでいる。 The camera image 31 is arranged on the left side of the face registration screen 30. Then, in the camera image 31, an image taken by the second camera 16 (see FIG. 2) arranged close to the left side of the touch panel 130 on which the face registration screen 30 is displayed is displayed. In the example shown in FIG. 5A, the face of the user 90 is reflected in the camera image 31.

メッセージ画像３２は、顔登録画面３０における右側に配置される。そして、メッセージ画像３２は、顔画像の撮影において使用者９０に促すべき注意点を、箇条書きにて記載したもので構成される。 The message image 32 is arranged on the right side of the face registration screen 30. Then, the message image 32 is composed of a list of points to be noted for prompting the user 90 in capturing the face image.

受付手段の一例としての撮影ボタン３３は、顔登録画面３０におけるカメラ画像３１の下側に配置される。そして、使用者９０がタッチパネル１３０上にてこの撮影ボタン３３を押下することで、ステップ１１６（図４参照）にて肯定の判断（ＹＥＳ）がなされる。 The shooting button 33 as an example of the reception unit is arranged below the camera image 31 on the face registration screen 30. Then, when the user 90 presses the photographing button 33 on the touch panel 130, an affirmative determination (YES) is made in step 116 (see FIG. 4).

取消ボタン３４は、顔登録画面３０における右上側に配置される。そして、使用者９０がタッチパネル１３０上にてこの取消ボタン３４を押下することで、顔登録処理が中断される。 The cancel button 34 is arranged on the upper right side of the face registration screen 30. Then, when the user 90 presses the cancel button 34 on the touch panel 130, the face registration processing is interrupted.

ガイド画像３５は、顔登録画面３０における左側に、カメラ画像３１と重ねて表示される。ここで、ガイド画像３５は、破線で構成された縦長の楕円画像である。また、ガイド画像３５は、カメラ画像３１の中央部に表示される。このガイド画像３５は、上記メッセージ画像３２に記載される「ガイド」に対応するものである。このガイド画像３５は、使用者９０の顔をカメラ画像３１の中央部すなわちガイド画像３５で囲われた領域の範囲内に誘導するとともに、使用者９０の顔を目的とする大きさで撮影するために表示される。 The guide image 35 is displayed on the left side of the face registration screen 30 so as to overlap the camera image 31. Here, the guide image 35 is a vertically long elliptical image formed by broken lines. Further, the guide image 35 is displayed in the center of the camera image 31. The guide image 35 corresponds to the “guide” described in the message image 32. This guide image 35 guides the face of the user 90 to the center portion of the camera image 31, that is, within the range surrounded by the guide image 35, and also captures the face of the user 90 in a desired size. Is displayed in.

続いて、図５（ｂ）は、ステップ１１２（図４参照）で表示される顔登録画面３０を示している。
図５（ｂ）に示す顔登録画面３０は、上述したカメラ画像３１、メッセージ画像３２、撮影ボタン３３、取消ボタン３４およびガイド画像３５に加えて、さらに顔検知枠３６を有している。 Then, FIG.5 (b) has shown the face registration screen 30 displayed by step 112 (refer FIG. 4).
The face registration screen 30 shown in FIG. 5B has a face detection frame 36 in addition to the above-described camera image 31, message image 32, shooting button 33, cancel button 34, and guide image 35.

顔検知枠３６は、顔登録画面３０における左側に、カメラ画像３１およびガイド画像３５と重ねて表示される。ここで、顔検知枠３６は、実線で構成された縦長の長方形画像である。この顔検知枠３６は、上記メッセージ画像３２に記載される「四角い枠」に対応するものである。この顔検知枠３６は、使用者の顔が画像形成装置１０側で検知できたことを使用者に通知するために表示される。 The face detection frame 36 is displayed on the left side of the face registration screen 30 in an overlapping manner with the camera image 31 and the guide image 35. Here, the face detection frame 36 is a vertically long rectangular image formed by a solid line. The face detection frame 36 corresponds to the “square frame” described in the message image 32. The face detection frame 36 is displayed to notify the user that the face of the user has been detected on the image forming apparatus 10 side.

ここで、顔検知枠３６は、カメラ画像から取得した使用者９０の顔画像に基づいて、特徴量が抽出できた場合に表示される。このため、例えば使用者９０の顔の主要部（眉、目、鼻、口）に髪がかかってしまっている場合や、使用者９０がマスクを着用している場合には、例えばガイド画像３５の範囲内に使用者９０の顔があったとしても、顔検知枠３６は表示されないことがある。 Here, the face detection frame 36 is displayed when the feature amount can be extracted based on the face image of the user 90 acquired from the camera image. For this reason, for example, when the main part (eyebrows, eyes, nose, mouth) of the face of the user 90 is covered with hair, or when the user 90 wears a mask, for example, the guide image 35 Even if there is the face of the user 90 within the range, the face detection frame 36 may not be displayed.

図６（ａ）は、１回目のステップ１２０（図４参照）で表示される顔登録画面３０を示している。また、図６（ｂ）は、１回目のステップ１２０で図６（ａ）に示す顔登録画面３０を表示し、１回目のステップ１２８でカウント画像を更新した後、ステップ１３０で否定の判断（ＮＯ）がなされることにより、２回目のステップ１２０で表示される顔登録画面３０を示している。さらに、図６（ｃ）は、２回目のステップ１２０で図６（ｂ）に示す顔登録画面３０を表示し、２回目のステップ１２８でカウント画像を更新した後、ステップ１３０で否定の判断（ＮＯ）がなされることにより、３回目のステップ１２０で表示される顔登録画面３０を示している。なお、本実施の形態では、ステップ１１６（図４参照）で撮影ボタン３３が押下された後、３カウントを行ってから、使用者９０の顔の画像を撮影するようになっている。したがって、ステップ１３０では、カウント数が３となったときに、カウント完了との判断がなされる。 FIG. 6A shows the face registration screen 30 displayed in the first step 120 (see FIG. 4). Further, in FIG. 6B, the face registration screen 30 shown in FIG. 6A is displayed in the first step 120, the count image is updated in the first step 128, and then a negative determination is made in step 130 ( When the answer is NO, the face registration screen 30 displayed in the second step 120 is shown. Further, in FIG. 6C, the face registration screen 30 shown in FIG. 6B is displayed in the second step 120, the count image is updated in the second step 128, and then a negative determination is made in step 130 ( When the answer is NO, the face registration screen 30 displayed in the third step 120 is shown. It should be noted that in the present embodiment, after the photographing button 33 is pressed in step 116 (see FIG. 4), 3 counts are performed and then the image of the face of the user 90 is photographed. Therefore, in step 130, it is determined that the count is completed when the count number reaches 3.

図６（ａ）〜（ｃ）に示す顔登録画面３０は、上述したカメラ画像３１と、メッセージ画像３２と、取消ボタン３４と、ガイド画像３５と、顔検知枠３６とを含んでいる。また、この顔登録画面３０では、ステップ１１６で撮影ボタン３３（図５参照）が押下されることに伴い、撮影ボタン３３が消えている。そして、この顔登録画面３０では、撮影ボタン３３が配置されていた位置に、新たに追加メッセージ画像３７およびタイムバー３８が表示されるようになっている。また、図６（ａ）に示す顔登録画面３０には第１カウント画像３９１が、図６（ｂ）に示す顔登録画面３０には第２カウント画像３９２が、図６（ｃ）に示す顔登録画面３０には第３カウント画像３９３が、それぞれ表示されるようになっている。 The face registration screen 30 shown in FIGS. 6A to 6C includes the camera image 31, the message image 32, the cancel button 34, the guide image 35, and the face detection frame 36 described above. Further, in the face registration screen 30, the photographing button 33 (see FIG. 5) is pressed in step 116, so that the photographing button 33 disappears. Then, on the face registration screen 30, an additional message image 37 and a time bar 38 are newly displayed at the position where the shooting button 33 was arranged. Further, the first count image 391 is displayed on the face registration screen 30 shown in FIG. 6A, the second count image 392 is displayed on the face registration screen 30 shown in FIG. 6B, and the face shown in FIG. A third count image 393 is displayed on the registration screen 30.

本実施の形態では、カウントダウンにおいて最初に表示される、図６（ａ）に示す顔登録画面３０において、第１カウント画像３９１が、アラビア数字の「３」を正方形状の枠で囲ったものに設定される。また、カウントダウンにおいて２番目に表示される、図６（ｂ）に示す顔登録画面３０において、第２カウント画像３９２がアラビア数字の「２」を正方形状の枠で囲ったものに設定される。さらに、カウントダウンにおいて３番目（最後）に表示される、図６（ｃ）に示す顔登録画面３０において、第３カウント画像３９３がアラビア数字の「１」を正方形状の枠で囲ったものに設定される。なお、以下の説明においては、これら第１カウント画像３９１、第２カウント画像３９２および第３カウント画像３９３を、まとめてカウント画像３９と称することがある。ここで、カウント画像３９は、経過画像の一例である。 In the present embodiment, in the face registration screen 30 shown in FIG. 6A, which is first displayed in the countdown, the first count image 391 is an Arabic numeral “3” surrounded by a square frame. Is set. Further, in the face registration screen 30 shown in FIG. 6B, which is displayed second in the countdown, the second count image 392 is set to have the Arabic numeral “2” surrounded by a square frame. Furthermore, in the face registration screen 30 shown in FIG. 6C, which is displayed third (last) in the countdown, the third count image 393 is set to the Arabic numeral “1” surrounded by a square frame. To be done. In the following description, the first count image 391, the second count image 392, and the third count image 393 may be collectively referred to as the count image 39. Here, the count image 39 is an example of a progress image.

この例において、カウント画像３９は、カメラ画像３１の中央部に、カメラ画像３１、ガイド画像３５および顔検知枠３６と重ねて表示される。そして、カウント画像３９は白抜きの画像または半透明の画像で構成されている。また、この例において、カウント画像３９を構成する第１カウント画像３９１、第２カウント画像３９２および第３カウント画像３９３は、ほぼ同じ大きさに設定されるとともに、カメラ画像３１におけるほぼ同じ位置に表示される。 In this example, the count image 39 is displayed in the center of the camera image 31 so as to overlap the camera image 31, the guide image 35, and the face detection frame 36. The count image 39 is composed of a white image or a semitransparent image. Further, in this example, the first count image 391, the second count image 392, and the third count image 393 forming the count image 39 are set to have substantially the same size and are displayed at substantially the same position in the camera image 31. To be done.

本実施の形態の画像形成装置１０では、使用者９０の顔画像を撮影する第２カメラ１６が、上向きに取り付けられている。このため、例えば髪の長い使用者９０は、第２カメラ１６を向いたときに髪が顔にかかりやすくなってしまう。 In the image forming apparatus 10 of the present embodiment, the second camera 16 that captures the face image of the user 90 is attached upward. For this reason, for example, the user 90 with long hair tends to get hair on his / her face when facing the second camera 16.

ここで、例えば使用者９０が撮影ボタン３３を押下した後に直ちに撮影（顔画像の取得）を行う構成を採用した場合には、髪が顔にかからないようにするための時間がなくなる。すると、顔画像から特徴量を抽出することができなくなってしまうために、いつまでたっても顔登録が行えないという事態を招くことになる。 Here, for example, when the configuration is adopted in which the user 90 immediately presses the shooting button 33 to perform shooting (acquisition of a face image), there is no time to prevent the hair from covering the face. Then, it becomes impossible to extract the feature amount from the face image, which causes a situation in which face registration cannot be performed forever.

これに対し、本実施の形態では、使用者が撮影ボタン３３を押下した後、カウントダウンによる撮影猶予期間（この例では３カウント）を設けるようにした。これにより、撮影ボタン３３を押下した後、髪が顔にかからないようにするための時間を確保できるようになり、顔画像から特徴量を抽出できる可能性を高めることができる。 On the other hand, in the present embodiment, after the user presses the shooting button 33, the shooting grace period (3 counts in this example) is provided by the countdown. As a result, after pressing the shooting button 33, it becomes possible to secure a time for preventing the hair from covering the face, and it is possible to increase the possibility of extracting the feature amount from the face image.

また、本実施の形態では、カウントダウンを行っている間、ユーザインタフェース１３のタッチパネル１３０に表示される顔登録画面３０のカメラ画像３１に、カウント画像３９を順次表示するようにした。これにより、使用者９０の目線を、カメラ画像３１に誘導しやすくなる。ここで、顔登録で行われる特徴量の抽出は、使用者９０が正面を向いた状態の顔画像に基づいて行うとよいことが知られている。したがって、カウント画像３９をカメラ画像３１と重ね合わせて表示することで、顔画像からの特徴量の抽出も容易となる。 Further, in the present embodiment, the count image 39 is sequentially displayed on the camera image 31 of the face registration screen 30 displayed on the touch panel 130 of the user interface 13 during the countdown. As a result, the eyes of the user 90 can be easily guided to the camera image 31. Here, it is known that the extraction of the feature amount performed in the face registration may be performed based on the face image in which the user 90 faces the front. Therefore, by displaying the count image 39 and the camera image 31 in an overlapping manner, it becomes easy to extract the feature amount from the face image.

さらに、本実施の形態では、カウントダウン中に、カメラ画像３１と重ねて表示されるカウント画像３９を、白抜きまたは半透明の画像で構成するようにした。ここで、カメラ画像３１にカウント画像３９を重ねて表示する場合には、カメラ画像３１における使用者９０の顔が、カウント画像３９によって隠されてしまい、使用者９０による確認がしにくくなる場合がある。これに対し、本実施の形態のように、カウント画像３９を白抜きあるいは半透明の画像とすることで、カメラ画像３１に重ねてカウント画像３９を表示した場合であっても、カメラ画像３１における使用者９０の確認を容易なものとすることができる。 Further, in the present embodiment, during the countdown, the count image 39 displayed so as to be superimposed on the camera image 31 is configured by a white or semi-transparent image. Here, when the count image 39 is displayed over the camera image 31, the face of the user 90 in the camera image 31 may be hidden by the count image 39, which makes it difficult for the user 90 to confirm. is there. On the other hand, as in the present embodiment, by setting the count image 39 to be a white or semi-transparent image, the count image 39 in the camera image 31 can be displayed even if the count image 39 is displayed so as to be superimposed on the camera image 31. The confirmation of the user 90 can be facilitated.

なお、本実施の形態では、カウントダウンにおいて、第１カウント画像３９１〜第３カウント画像３９３をほぼ同じ大きさに設定するとともにほぼ同じ位置に表示するようにしていたが、これに限られるものではない。 In the present embodiment, in the countdown, the first count image 391 to the third count image 393 are set to have substantially the same size and are displayed at substantially the same position, but the present invention is not limited to this. .

図７は、顔登録画面３０におけるカウントダウンの他の一例を説明するための図である。ここで、図７（ａ）はカウントダウンにおいて１番目（最初）に表示される顔登録画面３０を、図７（ｂ）はカウントダウンにおいて２番目に表示される顔登録画面３０を、図７（ｃ）はカウントダウンにおいて３番目（最後）に表示される顔登録画面３０を、それぞれ示している。 FIG. 7 is a diagram for explaining another example of the countdown on the face registration screen 30. Here, FIG. 7A shows the face registration screen 30 displayed first (first) in the countdown, FIG. 7B shows the face registration screen 30 displayed second in the countdown, and FIG. ) Indicates the third (last) face registration screen 30 in the countdown, respectively.

この例において、図７（ａ）に示す第１カウント画像３９１、図７（ｂ）に示す第２カウント画像３９２および図７（ｃ）に示す第３カウント画像３９３の内容（「３」→「２」→「１」）は、図６に示したものと同じである。また、これら第１カウント画像３９１〜第３カウント画像３９３が、それぞれカメラ画像３１の中央部に表示されることも、図６に示したものと同じである。ただし、図６に示す例では、第１カウント画像３９１〜第３カウント画像３９３がほぼ同じ大きさに設定されていたのに対し、図７に示す例では、第１カウント画像３９１よりも第２カウント画像３９２が小さく設定され、且つ、第２カウント画像３９２よりも第３カウント画像３９３が小さく設定されている点が異なる。 In this example, the contents of the first count image 391 shown in FIG. 7A, the second count image 392 shown in FIG. 7B and the third count image 393 shown in FIG. 7C (“3” → “ 2 ”→“ 1 ”) is the same as that shown in FIG. Also, the first count image 391 to the third count image 393 are displayed in the center of the camera image 31, respectively, as in the case shown in FIG. However, in the example shown in FIG. 6, the first count image 391 to the third count image 393 are set to have substantially the same size, whereas in the example shown in FIG. The difference is that the count image 392 is set smaller and the third count image 393 is set smaller than the second count image 392.

また、図８は、顔登録画面３０におけるカウントダウンの他の一例を説明するための図である。ここで、図８（ａ）はカウントダウンにおいて１番目（最初）に表示される顔登録画面３０を、図８（ｂ）はカウントダウンにおいて２番目に表示される顔登録画面３０を、図８（ｃ）はカウントダウンにおいて３番目（最後）に表示される顔登録画面３０を、それぞれ示している。 FIG. 8 is a diagram for explaining another example of the countdown on the face registration screen 30. Here, FIG. 8A shows the face registration screen 30 displayed first (first) in the countdown, FIG. 8B shows the face registration screen 30 displayed second in the countdown, and FIG. ) Indicates the third (last) face registration screen 30 in the countdown, respectively.

この例において、図８（ａ）に示す第１カウント画像３９１、図８（ｂ）に示す第２カウント画像３９２および図８（ｃ）に示す第３カウント画像３９３の内容（「３」→「２」→「１」）は、図６に示したものと同じである。また、図８（ｂ）に示す第２カウント画像３９２が図８（ａ）に示す第１カウント画像３９１よりも小さく設定され、図８（ｃ）に示す第３カウント画像３９３が図８（ｂ）に示す第２カウント画像３９２よりも小さく設定される点は、図７に示したものと同じである。ただし、図６および図７に示す例では、第１カウント画像３９１〜第３カウント画像３９３が、すべてカメラ画像３１の中央部に表示されていたのに対し、図８に示す例では、第１カウント画像３９１、第２カウント画像３９２、第３カウント画像３９３の順で、カメラ画像３１の左上側から順次中央部に向かって移動している点が異なる。 In this example, the contents of the first count image 391 shown in FIG. 8A, the second count image 392 shown in FIG. 8B, and the third count image 393 shown in FIG. 8C (“3” → “ 2 ”→“ 1 ”) is the same as that shown in FIG. In addition, the second count image 392 shown in FIG. 8B is set smaller than the first count image 391 shown in FIG. 8A, and the third count image 393 shown in FIG. The point that it is set smaller than the second count image 392 shown in () is the same as that shown in FIG. 7. However, in the example shown in FIGS. 6 and 7, the first count image 391 to the third count image 393 were all displayed in the central portion of the camera image 31, whereas in the example shown in FIG. The difference is that the count image 391, the second count image 392, and the third count image 393 are sequentially moved from the upper left side of the camera image 31 toward the central portion in this order.

さらに、図９は、顔登録画面３０におけるカウントダウンの他の一例を説明するための図である。ここで、図９（ａ）はカウントダウンにおいて１番目（最初）に表示される顔登録画面３０を、図９（ｂ）はカウントダウンにおいて２番目に表示される顔登録画面３０を、図９（ｃ）はカウントダウンにおいて３番目（最後）に表示される顔登録画面３０を、それぞれ示している。 Further, FIG. 9 is a diagram for explaining another example of the countdown on the face registration screen 30. 9A shows the face registration screen 30 displayed first (first) in the countdown, and FIG. 9B shows the face registration screen 30 displayed second in the countdown. ) Indicates the third (last) face registration screen 30 in the countdown, respectively.

この例において、図９（ａ）に示す第１カウント画像３９１、図９（ｂ）に示す第２カウント画像３９２および図９（ｃ）に示す第３カウント画像３９３は、異なるアラビア数字を含むものではなく、すべて共通の「○」形状となっている点が、図６〜図８に示したものとは異なる。また、図９に示す例では、第１カウント画像３９１、第２カウント画像３９２および第３カウント画像３９３は、ほぼ同じ大きさに設定されている。そして、図９に示す例では、第１カウント画像３９１、第２カウント画像３９２、第３カウント画像３９３の順で、カメラ画像３１の右側から順次中央部に向かって移動している。 In this example, the first count image 391 shown in FIG. 9A, the second count image 392 shown in FIG. 9B, and the third count image 393 shown in FIG. 9C include different Arabic numerals. Rather than being shown in FIG. 6 to FIG. 8, it has a common “◯” shape. Moreover, in the example shown in FIG. 9, the first count image 391, the second count image 392, and the third count image 393 are set to have substantially the same size. Then, in the example shown in FIG. 9, the first count image 391, the second count image 392, and the third count image 393 are sequentially moved from the right side of the camera image 31 toward the central portion.

図７〜図９に示したようなカウント画像３９を採用した場合には、撮影対象となる使用者９０の目線を、カメラ画像３１の中央部にさらに誘導しやすくなる。 When the count image 39 as shown in FIGS. 7 to 9 is adopted, it becomes easier to guide the line of sight of the user 90, who is the shooting target, to the central portion of the camera image 31.

なお、上述した各例においては、撮影ボタン３３を押下した後のカウントダウンの数を３としていたが、これに限られるものではない。すなわち、カウントダウンの数については、１または２としてもよいし、４以上としてもかまわない。 In each example described above, the countdown number after pressing the shooting button 33 is set to 3, but the number is not limited to this. That is, the number of countdowns may be 1 or 2, or 4 or more.

また、図４に示した顔登録処理では、一度の撮影結果（１つの顔画像）に基づいて顔登録を行っていたが、これに限られるものではない。図１０および図１１は、顔登録処理の他の手順を示すフローチャートである。なお、この処理も、画像形成装置１０に設けられた制御部２１および顔登録認証部２９が実行する。 Further, in the face registration processing shown in FIG. 4, the face registration is performed based on the one-time shooting result (one face image), but the present invention is not limited to this. 10 and 11 are flowcharts showing another procedure of face registration processing. Note that this processing is also executed by the control unit 21 and the face registration authentication unit 29 provided in the image forming apparatus 10.

この処理でも、最初に顔登録画面３０を起動する（ステップ２０２）。ここで、顔登録画面３０は、ユーザインタフェース１３に設けられたタッチパネル１３０に表示される。次に、顔登録候補の取得数をリセットする（ステップ２０４）。この例において、顔登録候補の取得数は、２以上（例えば３）に設定される。続いて、タッチパネル１３０に表示された顔登録画面３０に、第２カメラ１６を用いて撮影したカメラ画像３１を表示する（ステップ２０６）。なお、ステップ２０６では、顔登録画面３０に、カメラ画像３１とともにガイド画像３５の表示も行う。そして、顔登録画面３０に表示された顔登録の撮影ボタン３３の押下を待つ（ステップ２０８）。また、撮影ボタン３３の押下を待ちつつ、顔登録画面３０に表示されるカメラ画像３１を更新する（ステップ２１０）。 Also in this process, the face registration screen 30 is first activated (step 202). Here, the face registration screen 30 is displayed on the touch panel 130 provided in the user interface 13. Next, the number of acquired face registration candidates is reset (step 204). In this example, the number of acquired face registration candidates is set to 2 or more (for example, 3). Then, the camera image 31 photographed using the second camera 16 is displayed on the face registration screen 30 displayed on the touch panel 130 (step 206). In step 206, the guide image 35 is displayed on the face registration screen 30 together with the camera image 31. Then, it waits for the pressing of the shooting button 33 for face registration displayed on the face registration screen 30 (step 208). The camera image 31 displayed on the face registration screen 30 is updated while waiting for the shooting button 33 to be pressed (step 210).

それから、顔登録画面３０に表示されるカメラ画像３１から、使用者９０の顔が検知できたか否かを判断する（ステップ２１２）。ステップ２１２で肯定の判断（ＹＥＳ）を行った場合は、顔検知枠３６を表示する（ステップ２１４）。一方、ステップ２１２で否定の判断（ＮＯ）を行った場合は、顔検知枠３６を非表示にする（ステップ２１６）。 Then, it is determined whether or not the face of the user 90 has been detected from the camera image 31 displayed on the face registration screen 30 (step 212). When an affirmative determination (YES) is made in step 212, the face detection frame 36 is displayed (step 214). On the other hand, if a negative determination (NO) is made in step 212, the face detection frame 36 is hidden (step 216).

そして、撮影ボタン３３が押下されたか否かを判断する（ステップ２１８）。ステップ２１８で否定の判断（ＮＯ）を行った場合は、ステップ２０８へと戻って処理を続行する。一方、ステップ２１８で肯定の判断（ＹＥＳ）を行った場合は、顔登録画面３０に表示されるカメラ画像３１を更新し（ステップ２２０）、このカメラ画像３１とともにカウント画像３９を表示する（ステップ２２２）。 Then, it is determined whether or not the photographing button 33 has been pressed (step 218). When a negative determination (NO) is made in step 218, the process returns to step 208 to continue the processing. On the other hand, if a positive determination (YES) is made in step 218, the camera image 31 displayed on the face registration screen 30 is updated (step 220), and the count image 39 is displayed together with this camera image 31 (step 222). ).

次に、顔登録画面３０に表示されるカメラ画像３１から、使用者９０の顔が検知できたか否かを判断する（ステップ２２４）。ステップ２２４で肯定の判断（ＹＥＳ）を行った場合は、顔検知枠３６を表示し（ステップ２２６）、ステップ２３０へと進む。一方、ステップ２２４で否定の判断（ＮＯ）を行った場合は、顔検知枠３６を非表示にし（ステップ２２８）、ステップ２３８へと進む。 Next, it is determined whether or not the face of the user 90 has been detected from the camera image 31 displayed on the face registration screen 30 (step 224). If an affirmative determination (YES) is made in step 224, the face detection frame 36 is displayed (step 226) and the process proceeds to step 230. On the other hand, when a negative determination (NO) is made in step 224, the face detection frame 36 is hidden (step 228) and the process proceeds to step 238.

ステップ２２６で顔検知枠３６を表示した場合は、次に、顔登録候補の取得数が、取得できる最大値数未満となっているか否かを判断する（ステップ２３０）。ステップ２３０で肯定の判断（ＹＥＳ）を行った場合は、そのまま次のステップ２３４へと進む。一方、ステップ２３０で否定の判断（ＮＯ）を行った場合は、既に登録されている顔登録候補のうち、最も前に取得した最古の顔登録候補を１つ削除し（ステップ２３２）、次のステップ２３４へと進む。 When the face detection frame 36 is displayed in step 226, next, it is determined whether or not the number of acquired face registration candidates is less than the maximum number that can be acquired (step 230). When a positive determination (YES) is made in step 230, the process directly proceeds to the next step 234. On the other hand, if a negative determination (NO) is made in step 230, one of the earliest acquired face registration candidates is deleted from the already registered face registration candidates (step 232). Go to step 234.

そして、ステップ２３０またはステップ２３２を経た後、現在のカメラ画像３１を、最新の顔登録候補として取得し（ステップ２３４）、顔登録候補の取得数を１つ加算する（ステップ２３６）。 Then, after step 230 or step 232, the current camera image 31 is acquired as the latest face registration candidate (step 234), and the number of acquired face registration candidates is incremented by 1 (step 236).

次いで、カメラ画像３１とともに表示するカウント画像３９を更新し（ステップ２３８）、カウントが完了したか否かを判断する（ステップ２４０）。ステップ２４０で否定の判断（ＮＯ）を行った場合は、ステップ２２０に戻って処理を続行する。一方、ステップ２４０で肯定の判断（ＹＥＳ）を行った場合は、顔登録候補の取得数が０を超えているか（１つ以上あるか）否かを判断する（ステップ２４２）。ステップ２４２で肯定の判断（ＹＥＳ）を行った場合は、次に、顔登録ができたか否かの判断を行う（ステップ２４４）。ここで、ステップ２４２で否定の判断（ＮＯ）を行った場合、および、ステップ２４４で否定の判断（ＮＯ）を行った場合は、使用者９０にエラーを通知し（ステップ２４６）、ステップ２０８に戻って処理を続行する。 Next, the count image 39 displayed together with the camera image 31 is updated (step 238), and it is determined whether or not the count is completed (step 240). If a negative determination (NO) is made in step 240, the process returns to step 220 to continue the processing. On the other hand, if an affirmative determination (YES) is made in step 240, it is determined whether the number of face registration candidates acquired exceeds 0 (one or more) (step 242). When an affirmative determination (YES) is made in step 242, it is next determined whether or not face registration has been completed (step 244). Here, if a negative determination (NO) is made in step 242 and if a negative determination (NO) is made in step 244, the user 90 is notified of the error (step 246), and step 208 is performed. Return to continue processing.

一方、ステップ２４４で肯定の判断（ＹＥＳ）を行った場合は、続いて、顔登録候補の取得数が、取得できる最大値未満となっているか否かを判断する（ステップ２４８）。ステップ２４８で肯定の判断（ＹＥＳ）を行った場合は、そのまま次のステップ２５２へと進む。一方、ステップ２４８で否定の判断（ＮＯ）を行った場合は、既に登録されている顔登録候補のうち、最も前に取得した最古の顔登録候補を１つ削除し（ステップ２５０）、次のステップ２５２へと進む。 On the other hand, if an affirmative determination (YES) is made in step 244, then it is determined whether or not the number of face registration candidates acquired is less than the maximum value that can be acquired (step 248). If an affirmative determination (YES) is made in step 248, the process directly proceeds to the next step 252. On the other hand, when a negative determination (NO) is made in step 248, one of the earliest acquired face registration candidates among the already registered face registration candidates is deleted (step 250), and the next To step 252.

そして、ステップ２４８またはステップ２５０を経た後、現在のカメラ画像３１を、最新の顔登録候補として取得する（ステップ２５２）。続いて、ステップ２５２で取得した最新の顔候補結果を、例えばタッチパネル１３０を介して使用者９０に表示する（ステップ２５４）。次に、使用者９０に対して、複数の顔候補が表示されているか否かを判断する（ステップ２５６）。ステップ２５６で否定の判断（ＮＯ）を行った場合は、後述するステップ２６２へと進む。一方、ステップ２５６で肯定の判断（ＹＥＳ）を行った場合は、表示される複数の顔候補からの使用者９０の選択を待ち（ステップ２５８）、使用者９０による選択がなされたか否かを判断する（ステップ２６０）。ステップ２６０において否定の判断（ＮＯ）が行われた場合は、ステップ２５８に戻って処理を続行する。一方、ステップ２６０において肯定の判断（ＹＥＳ）が行われた場合は、この選択された顔候補を登録してもよいか否かの判断を仰ぐ（ステップ２６２）。ステップ２６２で否定の判断（ＮＯ）を受け付けた場合は、取得したこの顔登録情報を削除し（ステップ２６６）、ステップ２０２に戻って処理を続行する。一方、ステップ２６２で肯定の判断（ＹＥＳ）を行った場合は、選択した顔情報を登録し（ステップ２６４）、一連の処理を完了する。 Then, after step 248 or step 250, the current camera image 31 is acquired as the latest face registration candidate (step 252). Subsequently, the latest face candidate result acquired in step 252 is displayed to the user 90 via the touch panel 130, for example (step 254). Next, it is determined whether or not a plurality of face candidates are displayed for the user 90 (step 256). When a negative determination (NO) is made in step 256, the process proceeds to step 262 described later. On the other hand, if an affirmative determination (YES) is made in step 256, the selection of the user 90 from the plurality of face candidates displayed is awaited (step 258), and it is determined whether or not the user 90 has made a selection. (Step 260). When a negative determination (NO) is made in step 260, the process returns to step 258 and the process is continued. On the other hand, if an affirmative determination (YES) is made in step 260, a determination is made as to whether or not the selected face candidate may be registered (step 262). When a negative determination (NO) is received in step 262, the acquired face registration information is deleted (step 266), and the process returns to step 202 to continue the processing. On the other hand, if a positive determination (YES) is made in step 262, the selected face information is registered (step 264), and a series of processing is completed.

このように、複数の顔登録候補を使用者９０に提示し、これらの中から選択された１つの顔登録候補を顔登録に用いることができる。 In this way, a plurality of face registration candidates can be presented to the user 90, and one face registration candidate selected from these can be used for face registration.

１０…画像形成装置、１１…スキャナ、１２…プリンタ、１３…ユーザインタフェース（ＵＩ）、１４…焦電センサ、１５…第１カメラ、１６…第２カメラ、２１…制御部、２２…通信部、２３…操作部、２４…表示部、２５…記憶部、２６…画像読取部、２７…画像形成部、２８…撮影部、２９…顔登録認証部、３０…顔登録画面、３１…カメラ画像、３２…メッセージ画像、３３…撮影ボタン、３４…取消ボタン、３５…ガイド画像、３６…顔検知枠、３７…追加メッセージ画像、３８…タイムバー、３９…カウント画像、９０…使用者、３９１…第１カウント画像、３９２…第２カウント画像、３９３…第３カウント画像 10 ... Image forming apparatus, 11 ... Scanner, 12 ... Printer, 13 ... User interface (UI), 14 ... Pyroelectric sensor, 15 ... First camera, 16 ... Second camera, 21 ... Control section, 22 ... Communication section, 23 ... Operation unit, 24 ... Display unit, 25 ... Storage unit, 26 ... Image reading unit, 27 ... Image forming unit, 28 ... Shooting unit, 29 ... Face registration authentication unit, 30 ... Face registration screen, 31 ... Camera image, 32 ... Message image, 33 ... Shoot button, 34 ... Cancel button, 35 ... Guide image, 36 ... Face detection frame, 37 ... Additional message image, 38 ... Time bar, 39 ... Count image, 90 ... User, 391 ... No. 1st count image, 392 ... 2nd count image, 393 ... 3rd count image

Claims

A photographing means for photographing the face of the user,
Receiving means for receiving an instruction regarding acquisition of the face image of the user photographed by the photographing means,
An acquisition unit that acquires the face image captured by the image capturing unit after a predetermined image capturing grace period has elapsed after the receiving unit receives the instruction;
Registration means for registering information about the face image acquired by the acquisition means,
A display unit for displaying the face image captured by the image capturing unit,
The display means sequentially displays a plurality of images as a progress image regarding the passage of time together with the face image during the shooting grace period,
The registration device, wherein the plurality of images sequentially displayed as the progress image are reduced in size as time elapses.

The registration device according to claim 1 , wherein the progress image is formed of a white or semi-transparent image.

Image forming means for forming an image on a recording material,
A photographing means for photographing the face of the user,
Receiving means for receiving an instruction regarding acquisition of the face image of the user photographed by the photographing means,
An acquisition unit that acquires the face image captured by the image capturing unit after a predetermined image capturing grace period has elapsed after the receiving unit receives the instruction;
Registration means for registering information about the face image acquired by the acquisition means,
Authentication of the user who permits the use of the image forming unit by collating the information about the face image of the user newly captured by the image capturing unit with the information about the face image already registered in the registration unit. Authentication means for
A display unit for displaying the face image captured by the image capturing unit,
The display means sequentially displays a plurality of images as a progress image regarding the passage of time together with the face image during the shooting grace period,
The image forming apparatus is characterized in that the plurality of images sequentially displayed as the progress image are sequentially reduced in size as time passes.