JP6565864B2

JP6565864B2 - Image forming system

Info

Publication number: JP6565864B2
Application number: JP2016206868A
Authority: JP
Inventors: 文博陳
Original assignee: Kyocera Document Solutions Inc
Current assignee: Kyocera Document Solutions Inc
Priority date: 2016-10-21
Filing date: 2016-10-21
Publication date: 2019-08-28
Anticipated expiration: 2036-10-21
Also published as: JP2018067875A

Description

本発明は、画像形成装置と無線通信する通信部を有し、ユーザーが装着するメガネ型端末及び画像形成システムに関する。 The present invention relates to a glasses-type terminal and an image forming system that have a communication unit that wirelessly communicates with an image forming apparatus and are worn by a user.

近年、カメラが撮影者のジェスチャーを認識して自動的に撮影する技術が提案されている（例えば、特許文献１、２を参照）。特許文献１に開示の技術では、撮影者がメガネ型のカメラを装着すると共に、カメラを制御するリモコンを手首に装着しており、リモコンが検出する撮影者の手の動きに基づいてカメラの撮影動作を制御することで、撮影者の顔の向きと同じ方向を撮影することができる。特許文献２に開示の技術では、リモコンが不要であり、撮影の指示者である被撮影者が、三脚に固定したカメラに対してジェスチャーを行うことで、自動的に撮影が行われる。 In recent years, a technique has been proposed in which a camera recognizes a photographer's gesture and automatically captures an image (see, for example, Patent Documents 1 and 2). In the technique disclosed in Patent Document 1, a photographer wears a glasses-type camera and a remote control that controls the camera is worn on the wrist, and the camera takes a picture based on the movement of the photographer's hand detected by the remote control. By controlling the operation, it is possible to photograph the same direction as the direction of the photographer's face. In the technique disclosed in Patent Document 2, a remote controller is not necessary, and a subject who is a photographing instructor automatically performs photographing by performing a gesture on a camera fixed on a tripod.

特開２０００−１３８８５８号公報JP 2000-138858 A 特開２００５−０５１４７２号公報JP-A-2005-051472

ところで、手元のドキュメントをコピーしたくても、近くに複写機がなかったり、ドキュメントがステープル付きだったりして、手軽にコピーできないことがある。しかしながら、従来の技術では、カメラでドキュメントを撮影したとしても、カメラが画像形成装置と連携していなかったため、手元のドキュメントを手軽に画像形成装置でコピーしたりすることができなかったという問題があった。 By the way, even if you want to copy a document at hand, you may not be able to copy it easily because there is no copier nearby or the document is stapled. However, in the conventional technology, even when a document is photographed with a camera, the camera is not linked to the image forming apparatus, so that the document at hand cannot be easily copied with the image forming apparatus. there were.

本発明は上記課題に鑑みてなされたものであり、いつでも手元のドキュメントを読み取って、手軽に画像形成装置でコピーしたりすることができる技術を提供することを目的とする。 The present invention has been made in view of the above problems, and an object of the present invention is to provide a technique that allows a user to read a document at any time and easily copy it with an image forming apparatus.

本発明の画像形成システムは、印刷部を有する画像形成装置と、該画像形成装置と無線通信する通信部を有し、ユーザーが装着するメガネ型端末とを備えた画像形成システムであって、前記メガネ型端末は、動作開始、印刷指示、保存指示及び動作終了のそれぞれの操作指示をそれぞれ異なるジェスチャーと対応付けて記憶する設定記憶部と、前記ユーザーの前方視界の画像を撮像する視界撮像部と、撮像された前記画像に基づいて前記ジェスチャーを認識することで、前記操作指示を受け付ける操作受付部と、前記操作受付部によって、前記動作開始の前記操作指示が受け付けられた後、前記動作終了の前記操作指示が受け付けられるまでの間に、前記印刷指示もしくは前記保存指示の前記操作指示が受け付けられた場合に、前記画像から印刷物を検出してドキュメント画像として切り出すドキュメント切出部と、前記ドキュメント切出部によって切り出された前記ドキュメント画像を前記印刷指示もしくは前記保存指示と関連づけしたドキュメントデータとして記憶するドキュメント記憶部と、前記画像形成装置が前記通信部の通信圏内になったときに、前記ドキュメント記憶部に記憶された前記ドキュメントデータを前記通信部経由で前記画像形成装置に送信し、送信済みの前記ドキュメントデータを前記ドキュメント記憶部から削除する送信処理部とを有し、前記画像形成装置は、前記ドキュメント画像を特定形式の電子ファイルに変換する画像変換部と、該画像変換部によって変換された前記電子ファイルを記憶する記憶部とを有し、前記ドキュメント画像を前記印刷指示と関連づけした前記ドキュメントデータを受信した場合に、前記印刷部によって前記ドキュメント画像を印刷し、前記ドキュメント画像を前記保存指示と関連づけした前記ドキュメントデータを受信した場合に、前記画像変換部によって前記電子ファイルに変換した前記ドキュメント画像を前記記憶部に記憶することを特徴とする。 Images forming system of the present invention, an image forming apparatus having a printing unit, a communication unit for the image forming apparatus and the wireless communication, an image forming system comprising a spectacle-type terminal users attached, The glasses-type terminal includes a setting storage unit that stores each operation instruction of operation start, print instruction, storage instruction, and operation end in association with different gestures, and a field imaging unit that captures an image of the user's front field of view And the operation accepting unit that accepts the operation instruction by recognizing the gesture based on the captured image, and the operation end after the operation instruction for starting the operation is accepted by the operation accepting unit . until the operation instruction is accepted, when the print instruction or the operation instruction of the storage instruction is received from the image And document cutting unit for cutting out a document image by detecting Surimono, and document storage unit that stores the document image extracted by the document cutting unit as a document data associated with the print instruction or the store instruction, the When the image forming apparatus is within the communication range of the communication unit, the document data stored in the document storage unit is transmitted to the image forming apparatus via the communication unit , and the transmitted document data is transmitted to the document A transmission processing unit that is deleted from the storage unit , and the image forming apparatus stores an image conversion unit that converts the document image into an electronic file of a specific format, and the electronic file converted by the image conversion unit. And storing the document image on the printing finger. When the document data associated with a document is received, the document image is printed by the printing unit, and when the document data associated with the save instruction is received, the image conversion unit causes the electronic file to be printed. The document image that has been converted into the document image is stored in the storage unit.

本発明によれば、いつでも手元のドキュメントを読み取って、手軽に画像形成装置でコピーしたりすることができる。 According to the present invention, a document at hand can be read at any time and easily copied by an image forming apparatus.

本発明に係る実施形態の画像形成システムのシステム構成図である。1 is a system configuration diagram of an image forming system according to an embodiment of the present invention. 図１に示すメガネ型端末の構成を示す機能ブロック図である。It is a functional block diagram which shows the structure of the glasses-type terminal shown in FIG. 図２に示すジェスチャー登録情報の登録例である。It is a registration example of gesture registration information shown in FIG. 図１に示す画像形成装置の構成を示す機能ブロック図である。FIG. 2 is a functional block diagram illustrating a configuration of the image forming apparatus illustrated in FIG. 1. 図２に示すメガネ型端末のジェスチャー認識動作の流れを示すフローチャートである。It is a flowchart which shows the flow of gesture recognition operation | movement of the glasses-type terminal shown in FIG. 図２に示すメガネ型端末のジェスチャー認識動作のイメージ図である。It is an image figure of gesture recognition operation | movement of the glasses-type terminal shown in FIG. メガネ型端末がドキュメントデータを画像形成装置に送信する処理の流れを示すフローチャートである。6 is a flowchart showing a flow of processing in which the glasses-type terminal transmits document data to the image forming apparatus. 報知部を備えたメガネ型端末の外観図である。It is an external view of the glasses-type terminal provided with the alerting | reporting part.

以下、図を参照して本発明の実施形態を詳細に説明する。なお、以下の実施形態において、同様の機能を示す構成には、同一の符号を付してある。 Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings. Note that, in the following embodiments, the same reference numerals are given to configurations showing similar functions.

本実施の形態の画像形成システム１００は、図１に示すように、メガネ型端末１と、画像形成装置２とを備えている。画像形成装置２は、プリンター、複写機、複合機等の画像形成機能を有する装置である。メガネ型端末１は、画像形成装置２で印刷したり保存したりする画像データを取得して無線通信により画像形成装置２に送信する装置である。 As shown in FIG. 1, the image forming system 100 according to the present embodiment includes a glasses-type terminal 1 and an image forming apparatus 2. The image forming apparatus 2 is an apparatus having an image forming function, such as a printer, a copier, or a multifunction machine. The glasses-type terminal 1 is an apparatus that acquires image data to be printed or stored by the image forming apparatus 2 and transmits the image data to the image forming apparatus 2 by wireless communication.

メガネ型端末１は、ユーザーが頭部に装着するメガネ型のウェアラブル端末である。図２に示すように、メガネ型端末１は、視界撮像部１１と、記憶部１２と、通信部１３と、制御部１４とを備えている。 The glasses-type terminal 1 is a glasses-type wearable terminal that a user wears on the head. As shown in FIG. 2, the glasses-type terminal 1 includes a field-of-view imaging unit 11, a storage unit 12, a communication unit 13, and a control unit 14.

視界撮像部１１は、図１に示すように、メガネ型端末１の前方側に向けて配置されたＣＣＤカメラやＣＭＯＳカメラ等の固体撮像素子で構成されたカメラであり、ユーザーの前方視界の画像（カラー）を撮像する。視界撮像部１１は、メガネ型端末１の電源がＯＮになると、撮影を開始してもよいし、メガネ型端末１に設けられた不図示の撮影開始ボタンが操作されると、撮影を開始してもよい。以下、視界撮像部１１によって撮像された画像を視界画像（図６を参照）８０と称す。 As shown in FIG. 1, the field-of-view imaging unit 11 is a camera composed of a solid-state imaging device such as a CCD camera or a CMOS camera arranged toward the front side of the glasses-type terminal 1. (Color) is imaged. The field-of-view imaging unit 11 may start shooting when the glasses-type terminal 1 is turned on, or start shooting when a shooting start button (not shown) provided on the glasses-type terminal 1 is operated. May be. Hereinafter, an image captured by the visual field imaging unit 11 is referred to as a visual field image (see FIG. 6) 80.

記憶部１２は、半導体メモリー（例えば、フラッシュメモリー）等の記憶手段である。記憶部１２は、ジェスチャー登録情報１２２を記憶する設定記憶部１２１として機能すると共に、画像形成装置２に送信するドキュメントデータ１２４を記憶するドキュメント記憶部１２３として機能する。 The storage unit 12 is a storage unit such as a semiconductor memory (for example, a flash memory). The storage unit 12 functions as a setting storage unit 121 that stores gesture registration information 122 and also functions as a document storage unit 123 that stores document data 124 to be transmitted to the image forming apparatus 2.

図３に示すように、ジェスチャー登録情報１２２は、操作指示とジェスチャーとを対応付けて登録している。例えば、図３に示すジェスチャー登録情報１２２の登録例では、「動作開始」を指示する操作に、図６（ａ）に示す略○状を描くジェスチャー８１が割り当てられ、「動作終了」を指示する操作に、図６（ｄ）に示す略□状を描くジェスチャー８１が割り当てられている。また、「読取：印刷（モノクロ）」を指示する操作に、図６（ｃ）に示す略レ点状を描くジェスチャー８１が割り当てられ、「読取：保存（カラー）」を指示する操作に、図６（ｂ）に示す略△状を描くジェスチャー８１が割り当てられている。 As shown in FIG. 3, the gesture registration information 122 registers operation instructions and gestures in association with each other. For example, in the registration example of the gesture registration information 122 illustrated in FIG. 3, the gesture 81 that draws a substantially circle shape illustrated in FIG. 6A is assigned to the operation that instructs “operation start”, and “end operation” is instructed. A gesture 81 that draws a substantially square shape shown in FIG. 6D is assigned to the operation. Further, the operation 81 for instructing “reading: printing (monochrome)” is assigned the gesture 81 for drawing a substantially dotted pattern shown in FIG. 6C, and the operation for instructing “reading: saving (color)” is performed in FIG. A gesture 81 that draws a substantially Δ shape shown in (b) is assigned.

「動作開始」は、後述するドキュメント切出部１４３に対してドキュメント（図６を参照）８２の検出処理を開始させることができる操作である。「動作終了」は、後述するドキュメント切出部１４３に対してドキュメント８２の検出処理を終了させることができる操作である。 “Start of operation” is an operation that can start detection processing of a document (see FIG. 6) 82 with respect to a document cutout unit 143 described later. “End of operation” is an operation that allows the document cutout unit 143, which will be described later, to end the detection processing of the document 82.

「読取：印刷（モノクロ）」は、ドキュメント切出部１４３に対してドキュメント８２の「読取」を指示する操作（読取指示）と、画像形成装置２に対してドキュメント切出部１４３が読み取ったドキュメント８２の「印刷（モノクロ）」を指示する操作（印刷指示）との２つの操作を含んでいる。「読取：保存（カラー）」は、ドキュメント切出部１４３に対してドキュメント８２の「読取」を指示する操作と、画像形成装置２に対してドキュメント切出部１４３が読み取ったドキュメント８２の「保存（カラー）」を指示する操作（保存指示）との２つの操作を含んでいる。 “Reading: printing (monochrome)” includes an operation (reading instruction) for instructing the document cutting unit 143 to “read” the document 82 and a document read by the document cutting unit 143 to the image forming apparatus 2. 82 includes an operation (print instruction) for instructing 82 “print (monochrome)”. “Reading: saving (color)” is an operation for instructing the document cutting unit 143 to “read” the document 82 and “save” the document 82 read by the document cutting unit 143 to the image forming apparatus 2. (Color) "and the operation (save instruction) are included.

「印刷（モノクロ）」の操作指示は、画像形成装置２に対する印刷設定を含んでおり、例えば、Ａ４の用紙サイズにモノクロでドキュメント画像を印刷することができる。「保存（カラー）」の操作指示は、画像形成装置２に対する保存設定を含んでおり、例えば、ドキュメント画像をユーザーが予め指定した特定形式（ｊｐｅｇ、ｇｉｆ、ｐｄｆ等）のカラー画像の電子ファイルに変換して画像形成装置２の記憶部２３に保存することができる。この他にも、画像形成装置２に対する操作指示として、ドキュメント画像を特定の宛先（例えばメガネ型端末１を装着しているユーザー）に電子メールで送信させたり、通信部２６に接続された特定のサーバーにアップロードさせてもよい。 The “print (monochrome)” operation instruction includes print settings for the image forming apparatus 2. For example, a document image can be printed in monochrome on a paper size of A4. The operation instruction of “save (color)” includes a save setting for the image forming apparatus 2. For example, a document image is converted into an electronic file of a color image in a specific format (such as jpeg, gif, pdf) designated by the user. The image data can be converted and stored in the storage unit 23 of the image forming apparatus 2. In addition, as an operation instruction for the image forming apparatus 2, a document image is transmitted to a specific destination (for example, a user wearing the glasses-type terminal 1) by e-mail, or a specific image connected to the communication unit 26 is specified. It may be uploaded to the server.

通信部１３は、Ｂｌｕｅｔｏｏｔｈ（登録商標）やＷｉ−Ｆｉ（登録商標）、ＮＦＣ（ＮｅａｒＦｉｅｌｄＣｏｍｍｕｎｉｃａｔｉｏｎ）等の無線通信によって、画像形成装置２と各種データを送受信する機能を有する。通信部１３は、画像形成装置２との接続設定が済んでいるものとする。 The communication unit 13 has a function of transmitting and receiving various data to and from the image forming apparatus 2 through wireless communication such as Bluetooth (registered trademark), Wi-Fi (registered trademark), or NFC (Near Field Communication). It is assumed that the communication unit 13 has been set for connection with the image forming apparatus 2.

制御部１４は、視界撮像部１１、記憶部１２と、通信部１３とにそれぞれ接続され、メガネ型端末１全体の動作制御を実行する。制御部１４は、ＣＰＵ（Central Processing Unit）、ＲＯＭ（Read Only Memory）、ＲＡＭ（Random Access Memory）等を備えたマイクロコンピュータ等の情報処理部である。ＲＯＭにはメガネ型端末１の動作制御を行うための制御プログラムが記憶されている。制御部１４のＣＰＵは、ＲＯＭに記憶されている制御プログラムを読み出し、制御プログラムをＲＡＭに展開させることで、端末全体の制御を行う。また、制御部１４は、ジェスチャー登録部１４１と、操作受付部１４２と、ドキュメント切出部１４３と、送信処理部１４４としてそれぞれ機能する。 The control unit 14 is connected to the visual field imaging unit 11, the storage unit 12, and the communication unit 13, and performs operation control of the glasses-type terminal 1 as a whole. The control unit 14 is an information processing unit such as a microcomputer including a CPU (Central Processing Unit), a ROM (Read Only Memory), a RAM (Random Access Memory), and the like. The ROM stores a control program for controlling the operation of the glasses-type terminal 1. The CPU of the control unit 14 controls the entire terminal by reading a control program stored in the ROM and developing the control program in the RAM. Further, the control unit 14 functions as a gesture registration unit 141, an operation reception unit 142, a document cutout unit 143, and a transmission processing unit 144, respectively.

ジェスチャー登録部１４１は、操作指示に対応付けるジェスチャーの登録を受け付ける機能を有し、受け付けたジェスチャーをジェスチャー登録情報１２２に登録する。例えば、ジェスチャー登録部１４１は、通信部１３経由でＷｅｂブラウザからユーザーによるジェスチャーの登録を受け付けてもよいし、不図示のＵＳＢ端子等を介してユーザーによる登録操作を受け付けてもよい。 The gesture registration unit 141 has a function of accepting registration of a gesture associated with an operation instruction, and registers the accepted gesture in the gesture registration information 122. For example, the gesture registration unit 141 may accept registration of a gesture by a user from a Web browser via the communication unit 13, or may accept registration operation by a user via a USB terminal (not shown).

操作受付部１４２は、視界画像８０に基づいてユーザーのジェスチャー８１を認識するジェスチャー認識処理を実行し、認識したジェスチャー８１に対応する操作指示を受け付ける機能を有する。ジェスチャー認識処理では、操作受付部１４２は、例えば公知の画像認識技術を用いて、単位時間当たりの視界画像８０のそれぞれから図６に示すようなユーザーの指先８３（手でもよい）を検出する。そして、操作受付部１４２は、検出した指先８３の軌跡を図２に示すジェスチャー登録情報１２２に登録されているジェスチャーと照合することで、ユーザーのジェスチャー８１を認識する。ジェスチャー８１を認識すると、操作受付部１４２は、ジェスチャー登録情報１２２に基づいて、認識したジェスチャー８１に対応する操作指示を受け付ける。 The operation receiving unit 142 has a function of executing a gesture recognition process for recognizing the user's gesture 81 based on the view image 80 and receiving an operation instruction corresponding to the recognized gesture 81. In the gesture recognition process, the operation reception unit 142 detects a user's fingertip 83 (which may be a hand) as shown in FIG. 6 from each of the field-of-view images 80 per unit time using, for example, a known image recognition technique. And the operation reception part 142 recognizes the user's gesture 81 by collating the locus | trajectory of the detected fingertip 83 with the gesture registered in the gesture registration information 122 shown in FIG. When the gesture 81 is recognized, the operation reception unit 142 receives an operation instruction corresponding to the recognized gesture 81 based on the gesture registration information 122.

ドキュメント切出部１４３は、操作受付部１４２により自端末に対するドキュメント８２の読み取りを指示する操作（読取操作）が受け付けられると、公知の画像認識技術を用いて視界画像８０からドキュメント（印刷物）８２を検出し、検出したドキュメントをドキュメント画像として視界画像８０から切り出す。ドキュメント８２は、文字や、図、模様等が記載された印刷物である。そして、ドキュメント切出部１４３は、切り出したドキュメント画像を操作受付部１４２により受け付けられた画像形成装置２に対する操作指示（印刷（モノクロ）や、保存（カラー）等）と共にドキュメントデータ１２４としてドキュメント記憶部１２３に保存する。なお、ドキュメント切出部１４３は、操作受付部１４２により動作開始を指示する操作が受け付けられると、視界画像８０に対するドキュメント８２の検出処理を開始し、操作受付部１４２により動作終了を指示する操作が受け付けられると、ドキュメント８２の検出処理を終了してもよい。ドキュメント切出部１４３は、視界画像８０を視界撮像部１１から取得してもよいし、操作受付部１４２から取得してもよい。 When the operation accepting unit 142 accepts an operation (reading operation) for instructing reading of the document 82 to the own terminal, the document cutout unit 143 extracts the document (printed matter) 82 from the view image 80 using a known image recognition technique. The detected document is cut out from the view image 80 as a document image. The document 82 is a printed matter on which characters, figures, patterns, and the like are described. Then, the document cutout unit 143 includes a document storage unit as the document data 124 together with an operation instruction (print (monochrome), storage (color), etc.) for the image forming apparatus 2 that has received the cutout document image received by the operation reception unit 142. 123. When the operation accepting operation 142 is accepted by the operation accepting unit 142, the document cutout unit 143 starts the process of detecting the document 82 with respect to the view image 80, and the operation accepting unit 142 accepts the operation end instruction. If accepted, the detection process of the document 82 may be terminated. The document cutout unit 143 may acquire the view field image 80 from the view field image capturing unit 11 or the operation reception unit 142.

送信処理部１４４は、ドキュメント記憶部１２３に記憶されたドキュメントデータ１２４を通信部１３経由で画像形成装置２に送信する機能を有する。 The transmission processing unit 144 has a function of transmitting the document data 124 stored in the document storage unit 123 to the image forming apparatus 2 via the communication unit 13.

次に、図４を参照して、画像形成装置２について説明する。本実施の形態の画像形成装置２は、操作パネル２１と、原稿読取部２２と、記憶部２３と、画像処理部２４と、印刷部２５と、通信部２６と、制御部２７とを備えている。 Next, the image forming apparatus 2 will be described with reference to FIG. The image forming apparatus 2 according to the present embodiment includes an operation panel 21, an original reading unit 22, a storage unit 23, an image processing unit 24, a printing unit 25, a communication unit 26, and a control unit 27. Yes.

操作パネル２１は、タッチパネルと操作ボタンとを備えている。タッチパネルは、各種操作キーや画像形成状況を表示する表示部の表面に透明の感圧センサーが設けられており、表示手段及び入力手段として機能する。タッチパネルは、表示面へのタッチ操作を検知して、タッチ操作が検知された位置に対応する信号を出力することで、表示部に表示した操作キーへの操作を受け付ける。また、操作ボタンは、印刷枚数等の数値を入力するためのテンキー、設定情報を初期化させる指示を入力するためのリセットキー、複写動作を停止させるためのストップキー、印刷動作を開始させる出力指示を入力するためのスタートキー等の各種操作キーを備えている。 The operation panel 21 includes a touch panel and operation buttons. The touch panel is provided with a transparent pressure-sensitive sensor on the surface of a display unit that displays various operation keys and image formation status, and functions as a display unit and an input unit. The touch panel detects a touch operation on the display surface and outputs a signal corresponding to the position where the touch operation is detected, thereby accepting an operation on the operation key displayed on the display unit. The operation buttons are a numeric keypad for inputting a numerical value such as the number of prints, a reset key for inputting an instruction to initialize setting information, a stop key for stopping a copying operation, and an output instruction for starting a printing operation. Various operation keys such as a start key for inputting.

原稿読取部２２は、図示しない原稿給紙装置により給紙されてきた原稿や、ユーザーによってプラテンガラスに載置された原稿に対して光を照射し、その反射光等を受光して原稿画像を読み取るスキャナーである。 The document reading unit 22 emits light to a document fed by a document feeder (not shown) or a document placed on a platen glass by a user, and receives reflected light or the like to form a document image. It is a scanner that reads.

記憶部２３は、半導体メモリーやＨＤＤ等の記憶手段であり、原稿読取部２２によって読み取られた画像データや、通信部２６を介して受信された画像データ等が印刷データとして蓄積される記憶手段である。また、記憶部２３は、後述する画像変換部２７２によって変換された電子ファイルを記憶する。 The storage unit 23 is a storage unit such as a semiconductor memory or an HDD, and is a storage unit in which image data read by the document reading unit 22, image data received via the communication unit 26, and the like are accumulated as print data. is there. Further, the storage unit 23 stores the electronic file converted by the image conversion unit 272 described later.

画像処理部２４は、画像データに対して所定の画像処理を行う手段である。画像処理部２４では、例えば、拡大縮小処理や、濃度調整、階調調整等の画像改善処理が行われる。 The image processing unit 24 is means for performing predetermined image processing on the image data. In the image processing unit 24, for example, image improvement processing such as enlargement / reduction processing, density adjustment, and gradation adjustment is performed.

印刷部２５は、記憶部２３に記憶された画像データを印刷する印刷手段である。印刷部２５は、例えば、記憶部２３から読み出した画像データに基づき感光体ドラムの表面に潜像を形成し、トナーによってその潜像をトナー像とする画像形成を行い、その感光体ドラムから記録紙にトナー像を転写させ、そのトナー像を記録紙に定着させて排紙する。印刷部２５は、モノクロ印刷だけでなく、カラー印刷が可能であってもよい。 The printing unit 25 is a printing unit that prints image data stored in the storage unit 23. For example, the printing unit 25 forms a latent image on the surface of the photosensitive drum based on the image data read from the storage unit 23, performs image formation using the latent image as a toner image with toner, and records from the photosensitive drum. The toner image is transferred onto the paper, and the toner image is fixed onto the recording paper and discharged. The printing unit 25 may be capable of color printing as well as monochrome printing.

通信部２６は、Ｂｌｕｅｔｏｏｔｈ（登録商標）やＷｉ−Ｆｉ（登録商標）、ＮＦＣ等の無線通信によって、メガネ型端末１や外部端末と各種データを送受信する機能を有する。他にも、通信部２６は、ＬＡＮケーブル等の有線ケーブルを介して外部端末と各種データを送受信する機能を有している。 The communication unit 26 has a function of transmitting / receiving various data to / from the glasses-type terminal 1 and an external terminal through wireless communication such as Bluetooth (registered trademark), Wi-Fi (registered trademark), or NFC. In addition, the communication unit 26 has a function of transmitting / receiving various data to / from an external terminal via a wired cable such as a LAN cable.

制御部２７は、操作パネル２１、原稿読取部２２、記憶部２３、画像処理部２４、印刷部２５及び通信部２６にそれぞれ接続されている。制御部２７は、ＲＯＭ、ＲＡＭ等を備えたマイクロコンピュータ等の情報処理部である。ＲＯＭには画像形成装置２の動作制御を行うための制御プログラムが記憶されている。制御部２７は、ＲＯＭに記憶されている制御プログラムを読み出し、制御プログラムをＲＡＭに展開させることで、装置全体の制御を行う。また、制御部２７は、ドキュメント処理部２７１と、画像変換部２７２として機能する。 The control unit 27 is connected to the operation panel 21, the document reading unit 22, the storage unit 23, the image processing unit 24, the printing unit 25, and the communication unit 26, respectively. The control unit 27 is an information processing unit such as a microcomputer provided with a ROM, a RAM, and the like. The ROM stores a control program for controlling the operation of the image forming apparatus 2. The control unit 27 reads out the control program stored in the ROM and develops the control program in the RAM, thereby controlling the entire apparatus. The control unit 27 functions as a document processing unit 271 and an image conversion unit 272.

ドキュメント処理部２７１は、通信部２６がメガネ型端末１からドキュメントデータ１２４を受信すると、受信したドキュメントデータ１２４に含まれる自装置に対する操作指示に従って、ドキュメントデータ１２４に含まれるドキュメント画像を処理する機能を有する。例えば、ドキュメント処理部２７１は、自装置に対する操作指示が印刷指示である場合に、印刷指示に基づいて印刷部２５によりドキュメント画像を印刷する。また、ドキュメント処理部２７１は、印刷指示がモノクロである場合、画像処理部２４によりドキュメント画像をモノクロ画像に階調調整してから印刷することができる。また、ドキュメント処理部２７１は、自装置に対する操作指示が保存指示である場合に、保存指示に基づいて画像変換部２７２によりドキュメント画像を特定形式の電子ファイルに変換して記憶部２３に保存する。 When the communication unit 26 receives the document data 124 from the glasses-type terminal 1, the document processing unit 271 has a function of processing a document image included in the document data 124 in accordance with an operation instruction for the own device included in the received document data 124. Have. For example, when the operation instruction for the apparatus is a print instruction, the document processing unit 271 prints a document image by the printing unit 25 based on the print instruction. Further, when the print instruction is monochrome, the document processing unit 271 can perform printing after adjusting the gradation of the document image to a monochrome image by the image processing unit 24. Further, when the operation instruction for the apparatus is a save instruction, the document processing unit 271 converts the document image into a specific format electronic file based on the save instruction and saves the document image in the storage unit 23.

画像変換部２７２は、保存指示に基づいてドキュメント画像を特定形式（例えばｊｅｐｇ、ｇｉｆ、ｐｄｆ等）の電子ファイルに変換して記憶部２３に保存する機能を有する。 The image conversion unit 272 has a function of converting a document image into an electronic file of a specific format (for example, jepg, gif, pdf, etc.) based on the save instruction and saving the document image in the storage unit 23.

次に、図５〜図７を参照して、本実施形態の画像形成システム１００の動作の流れを説明する。 Next, an operation flow of the image forming system 100 of the present embodiment will be described with reference to FIGS.

図５を参照して、メガネ型端末１は、例えば不図示の電源ボタンがＯＮされたり、撮影開始を指示する不図示の撮影ボタンが操作されたりすることにより、視界撮像部１１が撮影を開始する（ステップｓ１１）。つづいて、操作受付部１４２が、視界撮像部１１から図６に示す視界画像８０を取得して、ユーザーのジェスチャー８１を認識するためのジェスチャー認識処理を実行する（ステップｓ１２）。これにより、操作受付部１４２は、例えば単位時間当たりの視界画像８０のそれぞれからユーザーの指先８３を検出し、指先８３の軌跡をジェスチャー登録情報１２２に登録されているジェスチャーと照合することで、ユーザーのジェスチャー８１を認識することができる。単位時間当たりの視界画像８０は、不図示のバッファーメモリーに蓄積されてもよいし、記憶部１２に蓄積されてもよい。 With reference to FIG. 5, in the glasses-type terminal 1, for example, when the power button (not shown) is turned on or the shooting button (not shown) instructing the start of shooting is operated, the visual field imaging unit 11 starts shooting. (Step s11). Subsequently, the operation receiving unit 142 acquires the view image 80 shown in FIG. 6 from the view image capturing unit 11 and executes a gesture recognition process for recognizing the user's gesture 81 (step s12). Thereby, for example, the operation reception unit 142 detects the user's fingertip 83 from each of the view images 80 per unit time, and collates the locus of the fingertip 83 with the gesture registered in the gesture registration information 122, thereby Gesture 81 can be recognized. The view image 80 per unit time may be accumulated in a buffer memory (not shown) or may be accumulated in the storage unit 12.

つづいて、操作受付部１４２は、図６（ａ）に示すように、認識したジェスチャー８１が「○」であるか否かを判断する（ステップｓ１３）。認識したジェスチャー８１が「○」である場合（ステップｓ１３でＹｅｓ）、操作受付部１４２は、ジェスチャー登録情報１２２に基づいて、動作開始の操作指示を受け付ける（ステップｓ１４）。認識したジェスチャー８１が「○」以外である場合は（ステップｓ１３でＮｏ）、ステップｓ１２に処理が戻る。 Subsequently, as illustrated in FIG. 6A, the operation reception unit 142 determines whether or not the recognized gesture 81 is “◯” (step s13). When the recognized gesture 81 is “◯” (Yes in Step s13), the operation reception unit 142 receives an operation instruction to start an operation based on the gesture registration information 122 (Step s14). If the recognized gesture 81 is other than “◯” (No in step s13), the process returns to step s12.

操作受付部１４２は、動作開始の操作指示を受け付けると、再び視界撮像部１１から視界画像８０を取得して、ジェスチャー認識処理を実行する（ステップｓ１５）。 When the operation accepting unit 142 accepts the operation start instruction, the operation accepting unit 142 acquires the view image 80 from the view image capturing unit 11 again, and executes gesture recognition processing (step s15).

つづいて、操作受付部１４２は、図６（ｂ）に示すように、認識したジェスチャー８１が「レ」であるか否かを判断する（ステップｓ１６）。認識したジェスチャー８１が「レ」である場合（ステップｓ１６でＹｅｓ）、操作受付部１４２は、ジェスチャー登録情報１２２に基づいて、読取／印刷（モノクロ）の操作指示を受け付ける（ステップｓ１７）。 Subsequently, as shown in FIG. 6B, the operation reception unit 142 determines whether or not the recognized gesture 81 is “Le” (step s16). When the recognized gesture 81 is “Le” (Yes in step s16), the operation reception unit 142 receives an operation instruction for reading / printing (monochrome) based on the gesture registration information 122 (step s17).

操作受付部１４２により読取／印刷（モノクロ）の操作指示が受け付けられると、ドキュメント切出部１４３は、読取指示に従って、視界画像８０からドキュメント８２を検出して、検出したドキュメント８２をドキュメント画像として切り出す（ステップｓ１８）。つづいて、ドキュメント切出部１４３は、切り出したドキュメント画像に印刷（モノクロ）の操作指示（印刷指示）を関連付けてドキュメントデータ１２４として記憶部１２に保存し（ステップｓ１９）、ステップｓ１５に処理を戻す。 When an operation instruction for reading / printing (monochrome) is received by the operation receiving unit 142, the document cutout unit 143 detects the document 82 from the view image 80 according to the reading instruction, and cuts out the detected document 82 as a document image. (Step s18). Subsequently, the document cutout unit 143 associates a print (monochrome) operation instruction (print instruction) with the cut out document image and stores it in the storage unit 12 as document data 124 (step s19), and returns the process to step s15. .

一方、操作受付部１４２は、認識したジェスチャー８１が「レ」でない場合（ステップｓ１６でＮｏ）、図６（ｃ）に示すように、認識したジェスチャー８１が「△」であるか否かを判断する（ステップｓ２０）。認識したジェスチャー８１が「△」である場合（ステップｓ２０でＹｅｓ）、操作受付部１４２は、読取／保存（カラー）の操作指示を受け付ける（ステップｓ２１）。 On the other hand, when the recognized gesture 81 is not “Le” (No in step s16), the operation reception unit 142 determines whether the recognized gesture 81 is “Δ” as illustrated in FIG. 6C. (Step s20). When the recognized gesture 81 is “Δ” (Yes in step s20), the operation receiving unit 142 receives a reading / saving (color) operation instruction (step s21).

操作受付部１４２により読取／保存（カラー）の操作指示が受け付けられると、ドキュメント切出部１４３は、読取指示に従って、視界画像８０からドキュメント８２を検出して、検出したドキュメント８２をドキュメント画像として切り出す（ステップｓ２２）。つづいて、ドキュメント切出部１４３は、切り出したドキュメント画像に保存（カラー）の操作指示（保存指示）を関連付けてドキュメントデータ１２４として記憶部１２に保存し（ステップｓ２３）、ステップｓ１５に処理を戻す。 When a reading / saving (color) operation instruction is received by the operation receiving unit 142, the document cutout unit 143 detects the document 82 from the view image 80 according to the reading instruction, and cuts out the detected document 82 as a document image. (Step s22). Subsequently, the document cutout unit 143 associates a save (color) operation instruction (save instruction) with the cut out document image, saves it as document data 124 in the storage unit 12 (step s23), and returns the process to step s15. .

一方、操作受付部１４２は、認識したジェスチャー８１が「△」でない場合（ステップｓ２０でＮｏ）、図６（ｄ）に示すように、認識したジェスチャー８１が「□」であるか否かを判断する（ステップｓ２４）。認識したジェスチャー８１が「□」である場合（ステップｓ２４でＹｅｓ）、操作受付部１４２は、動作終了の操作指示を受け付ける（ステップｓ２５）。認識したジェスチャー８１が「□」でない場合、ステップｓ１５に処理が戻り、ユーザーは継続してジェスチャー８１により操作指示を出すことができる。 On the other hand, when the recognized gesture 81 is not “Δ” (No in step s20), the operation accepting unit 142 determines whether the recognized gesture 81 is “□” as shown in FIG. (Step s24). When the recognized gesture 81 is “□” (Yes in Step s24), the operation reception unit 142 receives an operation instruction to end the operation (Step s25). If the recognized gesture 81 is not “□”, the process returns to step s15, and the user can continuously issue an operation instruction using the gesture 81.

つづいて、図７を参照して、メガネ型端末１の送信処理部１４４は、通信部１３を介して、画像形成装置２と通信可能か否かを判断する（ステップｓ２６）。 Next, referring to FIG. 7, the transmission processing unit 144 of the glasses-type terminal 1 determines whether or not communication with the image forming apparatus 2 is possible via the communication unit 13 (step s26).

なお、メガネ型端末１に画像形成装置２との通信の開始を指示する操作部を設けてもよい。この場合、送信処理部１４４は、この操作部によって通信の開始が指示されたタイミングで通信部１３により画像形成装置２との通信を試みてもよい。また、画像形成装置２の操作パネル２１からメガネ型端末１との通信の開始を指示することもできる。 Note that an operation unit that instructs the glasses-type terminal 1 to start communication with the image forming apparatus 2 may be provided. In this case, the transmission processing unit 144 may try to communicate with the image forming apparatus 2 through the communication unit 13 at the timing when the start of communication is instructed by the operation unit. It is also possible to instruct the start of communication with the glasses-type terminal 1 from the operation panel 21 of the image forming apparatus 2.

メガネ型端末１が画像形成装置２の設置場所から離れたところにあり、画像形成装置２が通信部１３の通信圏外である場合（ステップｓ２６でＮｏ）、送信処理部１４４は、ステップｓ２６に戻り、ユーザーの移動等で画像形成装置２が通信部１３の通信圏内になるまで待機する（ステップｓ２６、ステップｓ２６でＮｏ）。この場合、送信処理部１４４は、未送信のドキュメントデータ１２４をドキュメント記憶部１２３に保管したままにしておく。 When the glasses-type terminal 1 is located away from the installation location of the image forming apparatus 2 and the image forming apparatus 2 is outside the communication range of the communication unit 13 (No in step s26), the transmission processing unit 144 returns to step s26. The apparatus waits until the image forming apparatus 2 enters the communication range of the communication unit 13 due to the movement of the user (No in step s26 and step s26). In this case, the transmission processing unit 144 keeps the untransmitted document data 124 in the document storage unit 123.

一方、画像形成装置２と通信可能になると（ステップｓ２６でＹｅｓ）、送信処理部１４４は、ドキュメント記憶部１２３に保存されている未送信のドキュメントデータ１２４を無線通信により画像形成装置２に送信する（ステップｓ２７）。つづいて、送信処理部１４４は、記憶部１２から送信済みのドキュメントデータ１２４を削除し（ステップｓ２８）、本処理を終了する。 On the other hand, when communication with the image forming apparatus 2 becomes possible (Yes in step s26), the transmission processing unit 144 transmits unsent document data 124 stored in the document storage unit 123 to the image forming apparatus 2 by wireless communication. (Step s27). Subsequently, the transmission processing unit 144 deletes the transmitted document data 124 from the storage unit 12 (step s28), and ends this processing.

画像形成装置２のドキュメント処理部２７１は、通信部２６を介してメガネ型端末１からドキュメントデータ１２４を受信するまで待機する（ステップｓ３１、ステップｓ３１でＮｏ）。通信部２６がメガネ型端末１からドキュメントデータ１２４を受信すると（ステップｓ３１でＹｅｓ）、ドキュメント処理部２７１は、ドキュメントデータ１２４に含まれる操作指示に従って、ドキュメントデータ１２４に含まれるドキュメント画像を処理する（ステップｓ３２）。 The document processing unit 271 of the image forming apparatus 2 waits until the document data 124 is received from the glasses-type terminal 1 via the communication unit 26 (No in Step s31 and Step s31). When the communication unit 26 receives the document data 124 from the glasses-type terminal 1 (Yes in step s31), the document processing unit 271 processes the document image included in the document data 124 according to the operation instruction included in the document data 124 ( Step s32).

これにより、ドキュメント処理部２７１は、例えば操作指示が印刷（モノクロ）であれば、画像処理部２４によりドキュメント画像の階調をモノクロに変換して、印刷部２５を介してドキュメント画像のモノクロ印刷を実行する。また、例えば操作指示が保存（カラー）であれば、ドキュメント処理部２７１は、画像変換部２７２を介してドキュメント画像をｊｐｅｇ、ｇｉｆ又はｐｄｆ等の特定形式の電子ファイルとして記憶部２３に保存する。ドキュメントデータ１２４に対する処理が終了すると、画像形成装置２は本処理を終了する。 Thereby, for example, if the operation instruction is printing (monochrome), the document processing unit 271 converts the gradation of the document image to monochrome by the image processing unit 24 and performs monochrome printing of the document image via the printing unit 25. Run. For example, if the operation instruction is stored (color), the document processing unit 271 stores the document image in the storage unit 23 as an electronic file in a specific format such as jpeg, gif, or pdf via the image conversion unit 272. When the process for the document data 124 is completed, the image forming apparatus 2 ends the process.

このように、本実施形態のメガネ型端末１は、画像形成装置２と無線通信する通信部１３を有し、ユーザーが装着するメガネ型端末１であって、操作指示とジェスチャーを対応付けて記憶する設定記憶部１２１と、ユーザーの前方視界の画像を撮像する視界撮像部１１と、撮像された画像に基づいてジェスチャーを認識することで、操作指示を受け付ける操作受付部１４２と、操作受付部１４２で受け付けられた操作指示がドキュメントの読取指示である場合に、画像から印刷物を検出してドキュメント画像として切り出すドキュメント切出部１４３と、切り出されたドキュメント画像を記憶するドキュメント記憶部１２３と、記憶されたドキュメント画像を通信部１３経由で画像形成装置２に送信する送信処理部１４４とを備えている。これにより、ユーザーはメガネ型端末１を装着した状態で、コピーを取りたい資料を見ながら指先で簡単なジェスチャーをすることで、現在見ている資料のドキュメント画像を画像形成装置２に送信して、簡単にコピーしたり保存したりすることができる。 As described above, the glasses-type terminal 1 according to the present embodiment includes the communication unit 13 that wirelessly communicates with the image forming apparatus 2 and is a glasses-type terminal 1 that is worn by the user, and stores operation instructions and gestures in association with each other. The setting storage unit 121, the visual field imaging unit 11 that captures an image of the user's forward visual field, the operation reception unit 142 that receives an operation instruction by recognizing a gesture based on the captured image, and the operation reception unit 142. In the case where the operation instruction received in step S1 is a document reading instruction, a document cutout unit 143 that detects a printed matter from the image and cuts it out as a document image, and a document storage unit 123 that stores the cutout document image are stored. A transmission processing unit 144 that transmits the document image to the image forming apparatus 2 via the communication unit 13. As a result, the user can send a document image of the currently viewed material to the image forming apparatus 2 by performing a simple gesture with the fingertip while viewing the material to be copied while wearing the glasses-type terminal 1. Can be easily copied and saved.

また、送信処理部１４４は、画像形成装置２が通信部１３の通信圏外である場合、未送信のドキュメントデータをドキュメント記憶部１２３に保管しておき、画像形成装置２が通信部１３の通信圏内になったときに、ドキュメント記憶部１２３から未送信のドキュメントデータを画像形成装置２に送信する。そのため、確実に画像形成装置２にドキュメントデータを送信することができる。 Further, when the image forming apparatus 2 is outside the communication area of the communication section 13, the transmission processing section 144 stores untransmitted document data in the document storage section 123, and the image forming apparatus 2 is within the communication area of the communication section 13. At this time, unsent document data is transmitted from the document storage unit 123 to the image forming apparatus 2. Therefore, document data can be reliably transmitted to the image forming apparatus 2.

また、メガネ型端末１は、操作指示に対応付けるジェスチャーの登録を受け付けるジェスチャー登録部１４１を備えているので、ユーザーが好みのジェスチャーを操作指示に対応付けることができる。 In addition, since the glasses-type terminal 1 includes the gesture registration unit 141 that receives registration of a gesture associated with an operation instruction, the user can associate a favorite gesture with the operation instruction.

さらに、操作指示は、メガネ型端末１に対するドキュメントの読取指示と共に、画像形成装置２に対するドキュメント画像の印刷指示を含む場合があり、送信処理部１４４は、操作指示が印刷指示を含んでいる場合、記憶されたドキュメント画像と共に印刷指示を画像形成装置２に送信する。また、操作指示は、メガネ型端末１に対するドキュメントの読取指示と共に、画像形成装置２に対するドキュメント画像の保存指示を含む場合があり、送信処理部１４４は、操作指示が保存指示を含んでいる場合、記憶されたドキュメント画像と共に保存指示を画像形成装置２に送信する。そのため、ユーザーは、ドキュメント画像が画像形成装置２に送信された後に、画像形成装置２に対してドキュメント画像を処理するための操作指示を別途出す必要がない。また、１つのジェスチャーにメガネ型端末１に対する操作指示と画像形成装置２に対する操作指示とを含ませることができるので、ジェスチャー操作が簡単である。 Furthermore, the operation instruction may include a document reading instruction for the image forming apparatus 2 together with a document reading instruction for the glasses-type terminal 1, and the transmission processing unit 144 may include a case where the operation instruction includes a printing instruction. A print instruction is transmitted to the image forming apparatus 2 together with the stored document image. The operation instruction may include a document reading instruction for the image forming apparatus 2 together with a document reading instruction for the glasses-type terminal 1, and the transmission processing unit 144 may include a storage instruction when the operation instruction includes a storage instruction: A save instruction is transmitted to the image forming apparatus 2 together with the stored document image. Therefore, the user does not need to separately issue an operation instruction for processing the document image to the image forming apparatus 2 after the document image is transmitted to the image forming apparatus 2. Further, since an operation instruction for the glasses-type terminal 1 and an operation instruction for the image forming apparatus 2 can be included in one gesture, the gesture operation is simple.

なお、メガネ型端末１は、操作受付部１４２が認識したジェスチャー８１や受け付けた操作指示の１つ以上をユーザーに報知する報知部をさらに備えてもよい。図８は、新たに報知部を備えたメガネ型端末５の外観図である。メガネ型端末５は、メガネ型端末１に報知部が追加されたものであり、その他はメガネ型端末１と同一構成となっている。報知部は、例えば、図８に示すようにメガネ型端末５のユーザーの眼球の直前に位置するハーフミラー５１を表示画面として有し、ハーフミラー５１に画像光を投影することで、操作受付部１４２が認識したジェスチャー８１や受け付けた操作指示をユーザーが視認可能に表示してもよい。また、報知部は、操作受付部１４２が認識したジェスチャー８１や受け付けた操作指示のそれぞれを、区別可能に音で報知するスピーカー５２や、点灯や点滅パターンにより区別可能に報知するＬＥＤ５３を有してもよい。 The glasses-type terminal 1 may further include a notification unit that notifies the user of one or more of the gesture 81 recognized by the operation reception unit 142 and the received operation instruction. FIG. 8 is an external view of the glasses-type terminal 5 newly provided with a notification unit. The glasses-type terminal 5 is obtained by adding a notification unit to the glasses-type terminal 1, and the rest has the same configuration as the glasses-type terminal 1. For example, as shown in FIG. 8, the notification unit includes a half mirror 51 positioned immediately in front of the user's eyeball of the glasses-type terminal 5 as a display screen, and projects image light onto the half mirror 51, thereby allowing the operation reception unit The gesture 81 recognized by the user 142 or the received operation instruction may be displayed so as to be visible to the user. In addition, the notification unit includes a speaker 52 that notifies each of the gesture 81 recognized by the operation reception unit 142 and the received operation instruction with a sound that can be distinguished, and an LED 53 that notifies the difference by a lighting or blinking pattern. Also good.

本発明は上述した実施の形態に限定されるものではなく、本発明の趣旨を逸脱しない範囲で種々様々に変更が可能であることは言うまでもない。 The present invention is not limited to the above-described embodiment, and it goes without saying that various changes can be made without departing from the spirit of the present invention.

１、５メガネ型端末
２画像形成装置
１１視界撮像部
１２記憶部
１３通信部（端末側通信部）
１４制御部
２１操作パネル
２２原稿読取部
２３記憶部
２４画像処理部
２５印刷部
２６通信部（装置側通信部）
２７制御部
８０視界画像
８１ジェスチャー
８２ドキュメント
８３指先
５１ハーフミラー（報知部）
５２スピーカー（報知部）
５３ＬＥＤ（報知部）
１００画像形成システム
１２１設定記憶部
１２２ジェスチャー登録情報
１２３ドキュメント記憶部
１２４ドキュメントデータ
１４１ジェスチャー登録部
１４２操作受付部
１４３ドキュメント切出部
１４４送信処理部
２７１ドキュメント処理部
２７２画像変換部 1, 5 Glasses type terminal 2 Image forming apparatus 11 Field of view imaging unit 12 Storage unit 13 Communication unit (terminal side communication unit)
14 control unit 21 operation panel 22 document reading unit 23 storage unit 24 image processing unit 25 printing unit 26 communication unit (device side communication unit)
27 control unit 80 view image 81 gesture 82 document 83 fingertip 51 half mirror (notification unit)
52 Speaker (notification part)
53 LED (notification part)
100 Image Forming System 121 Setting Storage Unit 122 Gesture Registration Information 123 Document Storage Unit 124 Document Data 141 Gesture Registration Unit 142 Operation Accepting Unit 143 Document Extraction Unit 144 Transmission Processing Unit 271 Document Processing Unit 272 Image Conversion Unit

Claims

An image forming system comprising: an image forming apparatus having a printing unit; a communication unit that wirelessly communicates with the image forming apparatus; and a glasses-type terminal worn by a user.
The glasses-type terminal
And operation start, print instruction, store instruction and the operation end of the respective operation instruction set in association with different gesture storage unit,
A visual field imaging unit that captures an image of the user's forward visual field;
An operation receiving unit that receives the operation instruction by recognizing the gesture based on the captured image;
When the operation instruction of the print instruction or the save instruction is received by the operation receiving unit after the operation instruction for starting the operation is received and before the operation instruction for ending the operation is received In addition, a document cutout unit that detects a printed matter from the image and cuts it out as a document image;
A document storage unit that stores the document image cut out by the document cutout unit as document data associated with the print instruction or the save instruction ;
When the image forming apparatus is within the communication range of the communication unit, the document data stored in the document storage unit is transmitted to the image forming apparatus via the communication unit , and the transmitted document data is transmitted to the image forming apparatus. A transmission processing unit to be deleted from the document storage unit ,
The image forming apparatus includes:
An image conversion unit for converting the document image into an electronic file of a specific format;
A storage unit for storing the electronic file converted by the image conversion unit,
When the document data in which the document image is associated with the print instruction is received, the document image is printed by the printing unit;
When the document data in which the document image is associated with the save instruction is received, the document image converted into the electronic file by the image conversion unit is stored in the storage unit .