JP7494586B2 - 画像処理装置及び画像処理プログラム - Google Patents

Description

本発明は、画像処理装置及び画像処理プログラムに関する。

従来より、媒体に画像を記録するプリンタ部、原稿に記録された画像を読み取って画像データを生成するスキャナ部、外部装置に画像データをＦＡＸ送信するＦＡＸ部などを備えた複合機が知られている。このような複合機は、スキャナ部が生成した画像データを送信先装置の能力に合わせて画像処理（圧縮）し、画像処理後の画像データを送信先装置に送信する処理を実行することができる。

上記の処理を実行可能な複合機のなかには、画像処理後の画像データで示される画像データをディスプレイにプレビュー表示し、オペレータに画質を確認させてから送信する機能を有するものがある（例えば、特許文献１を参照）。

上記構成の複合機によれば、画質が過度に劣化した画像データの送信を停止させることはできるものの、オペレータが画質の調整をして再びスキャナ部に原稿を読み取らせる必要がある。そのため、オペレータの操作負担が大きいという課題がある。

本発明は、このような課題を解決するためになされたものであり、オペレータの操作負担を増加させることなく、画像処理後の画像データの画質を適切に調整して送信することが可能な画像処理装置を提供することを目的とする。

上記課題を解決するために、画像処理装置は、画像を表示するディスプレイと、オペレータからの入力操作を受け付ける入力部と、外部装置と通信する通信インタフェースと、コントローラとを備え、前記コントローラは、入力画像データに画像処理を施して出力画像データを生成し、前記出力画像データで示される出力画像を前記ディスプレイに表示させ、前記出力画像データの送信許可が前記入力部に入力された場合に、前記通信インタフェースを通じて前記出力画像データを外部装置に送信し、前記出力画像データの送信拒否が前記入力部に入力された場合に、前記入力画像データ及び前記出力画像データそれぞれに含まれる文字を抽出し、前記入力画像データで示される入力画像のうち、前記入力画像データ及び前記出力画像データそれぞれから抽出した文字の認識結果が異なる誤認識領域の画像を切り抜いて、切抜画像データを生成し、前記切抜画像データで示される切抜画像を、前記出力画像の前記誤認識領域に合成し、前記切抜画像を合成後の前記出力画像を示す前記出力画像データを、前記通信インタフェースを通じて外部装置に送信することを特徴とする。

本発明によれば、オペレータの操作負担を増加させることなく、画像処理後の画像データの画質を適切に調整して送信することができる。

画像処理システムの概略図。 ＭＦＰのハードウェア構成図。 ＭＦＰの機能ブロック図。 画像データ送信処理のフローチャート。 （Ａ）はＦＡＸ送信画面、（Ｂ）はプレビュー画面。 画質調整処理のフローチャート。 （Ａ）は読取画像データに対するＯＣＲ処理の結果、（Ｂ）は圧縮画像データに対するＯＣＲ処理の結果。 ２値化処理部の処理を説明するための図。

以下、図面を参照して、本発明の実施形態について説明する。図１は、画像処理システム１の概略図である。画像処理システム１は、通信ネットワーク２を通じて接続された複数の装置間において、画像データを送受信するシステムである。図１に示すように、画像処理システム１では、複数のＭＦＰ１００Ａ、１００Ｂ、１００Ｃ（以下、これらを参照して、「ＭＦＰ１００」と表記することがある。）と、ＰＣ１１０とが、通信ネットワーク２を介して接続されている。

ＭＦＰ１００（ＭＦＰ：Multifunction Peripheral/Product/Printer）は、媒体に画像を記録するプリンタ機能、原稿に記録された画像を読み取って画像データを生成するスキャナ機能、外部装置に画像データをＦＡＸ送信するＦＡＸ機能などを備えた画像処理装置の一例である。ＰＣ１１０は、画像データを編集する機能を有すると共に、通信ネットワーク２を通じて画像データを送受信可能に構成された画像処理装置の他の例である。さらに、画像処理システム１には、画像処理装置の他の例であるタブレット端末やスマートフォン等が接続されてもよい。

また、ＭＦＰ１００Ａ、１００Ｂ、１００Ｃには、通信ネットワーク２上で当該装置を一意に識別する宛先情報（例えば、ＦＡＸ番号、ＩＰアドレス等）が割り当てられている。本実施形態では、ＭＦＰ１００Ａの宛先情報を“ｘｘ－ｘｘｘｘ－ｘｘｘｘ”とし、ＭＦＰ１００Ｂの宛先情報を“ｙｙ－ｙｙｙｙ－ｙｙｙｙ”とし、ＭＦＰ１００Ｃの宛先情報を“ｚｚ－ｚｚｚｚ－ｚｚｚｚ”とする。また図示は省略するが、ＰＣ１１０にも宛先情報が割り当てられる。

また、ＭＦＰ１００Ａ、１００Ｂ、１００Ｃは、処理能力（例えば、用紙サイズ、解像度、色）が互いに異なっていてもよい。用紙サイズとは、例えば、スキャナ部２３１で読取可能な原稿のサイズ、及びプリンタ部２３２で画像を形成可能な媒体のサイズを指す。解像度とは、例えば、スキャナ部２３１で生成可能な画像データの解像度、及びプリンタ部２３２で形成可能な画像データの解像度を指す。色とは、例えば、スキャナ部２３１で読取可能な色、及びプリンタ部２３２で媒体に形成可能な色を指す。

本実施形態では、ＭＦＰ１００Ａ、１００Ｃは、用紙サイズ“Ａ３”、“Ａ４”、“Ａ５”、解像度“６００ｄｐｉ”、“４００ｄｐｉ”、“３００ｄｐｉ”、色“カラー”、“モノクロ”に対応する。ＭＦＰ１００Ｂは、最大の用紙サイズ“Ａ４”、“Ａ５”、最大の解像度“４００ｄｐｉ”、“３００ｄｐｉ”、色“モノクロ”に対応する。そして、ＭＦＰ１００Ａ、１００Ｂ、１００Ｃは、ＩＴＵ－Ｔ勧告、Ｔ．３０勧告に基づき、ＮＳＦやＤＩＳによって、処理能力を示す能力情報を相互に交換（送受信）することができる。

通信ネットワーク２は、インターネット、公衆電話回線、ＬＡＮなどの一部または全部によって構成されている。また、通信ネットワーク２は、有線通信のみならず、無線通信に対応していてもよい。そして、通信ネットワーク２に接続された装置１００Ａ、１００Ｂ、１００Ｃ、１１０は、ＨＴＴＰ、ＦＴＰ、ＦＡＸプロトコルなど、様々なプロトコルに準拠した方法で通信することができる。

図２は、ＭＦＰ１００のハードウェア構成図である。図２に示されているように、ＭＦＰ１００は、コントローラ２１０、近距離通信Ｉ／Ｆ２２０、エンジン制御部２３０、操作パネル２４０（入力部）、ネットワークＩ／Ｆ２５０（通信インタフェース）を備えている。

これらのうち、コントローラ２１０は、コンピュータの主要部であるＣＰＵ２０１、システムメモリ（ＭＥＭ－Ｐ）２０２、ノースブリッジ（ＮＢ）２０３、サウスブリッジ（ＳＢ）２０４、ＡＳＩＣ(Application Specific Integrated Circuit)２０６、記憶部であるローカルメモリ（ＭＥＭ－Ｃ）２０７、ＨＤＤコントローラ２０８、及び、記憶部であるＨＤ２０９を有し、ＮＢ２０３とＡＳＩＣ２０６との間をＡＧＰ(Accelerated Graphics Port)バス２２１で接続した構成となっている。

これらのうち、ＣＰＵ２０１は、ＭＦＰ１００の全体制御を行う制御部である。ＮＢ２０３は、ＣＰＵ２０１と、ＭＥＭ－Ｐ２０２、ＳＢ２０４、及びＡＧＰバス２２１とを接続するためのブリッジであり、ＭＥＭ－Ｐ２０２に対する読み書きなどを制御するメモリコントローラと、ＰＣＩ(Peripheral Component Interconnect)マスタ及びＡＧＰターゲットとを有する。

ＭＥＭ－Ｐ２０２は、コントローラ２１０の各機能を実現させるプログラムやデータの格納用メモリであるＲＯＭ２０２ａ、プログラムやデータの展開、及びメモリ印刷時の描画用メモリなどとして用いるＲＡＭ２０２ｂとからなる。なお、ＲＡＭ２０２ｂに記憶されているプログラムは、インストール可能な形式又は実行可能な形式のファイルでＣＤ－ＲＯＭ、ＣＤ－Ｒ、ＤＶＤ等のコンピュータで読み取り可能な記録媒体に記録して提供するように構成してもよい。

ＳＢ２０４は、ＮＢ２０３とＰＣＩデバイス、周辺デバイスとを接続するためのブリッジである。ＡＳＩＣ２０６は、画像処理用のハードウェア要素を有する画像処理用途向けのＩＣ(Integrated Circuit)であり、ＡＧＰバス２２１、ＰＣＩバス２２２、ＨＤＤコントローラ２０８およびＭＥＭ－Ｃ２０７をそれぞれ接続するブリッジの役割を有する。このＡＳＩＣ２０６は、ＰＣＩターゲットおよびＡＧＰマスタ、ＡＳＩＣ２０６の中核をなすアービタ（ＡＲＢ）、ＭＥＭ－Ｃ２０７を制御するメモリコントローラ、ハードウェアロジックなどにより画像データの回転などを行う複数のＤＭＡＣ(Direct Memory Access Controller)、並びに、スキャナ部２３１、プリンタ部２３２、及びＦＡＸ部２３３との間でＰＣＩバス２２２を介したデータ転送を行うＰＣＩユニットとからなる。なお、ＡＳＩＣ２０６には、ＵＳＢ(Universal Serial Bus)のインタフェースや、ＩＥＥＥ１３９４(Institute of Electrical and Electronics Engineers 1394)のインタフェースを接続するようにしてもよい。

ＭＥＭ－Ｃ２０７は、コピー用画像バッファ及び符号バッファとして用いるローカルメモリである。ＨＤ２０９は、画像データの蓄積、印刷時に用いるフォントデータの蓄積、フォームの蓄積を行うためのストレージである。ＨＤ２０９は、ＣＰＵ２０１の制御にしたがってＨＤ２０９に対するデータの読出又は書込を制御する。ＡＧＰバス２２１は、グラフィック処理を高速化するために提案されたグラフィックスアクセラレータカード用のバスインタフェースであり、ＭＥＭ－Ｐ２０２に高スループットで直接アクセスすることにより、グラフィックスアクセラレータカードを高速にすることができる。

また、近距離通信Ｉ／Ｆ２２０には、近距離通信回路２２０ａが備わっている。近距離通信回路２２０ａは、ＮＦＣ、Ｂｌｕｅｔｏｏｔｈ（登録商標）等の通信回路である。

また、エンジン制御部２３０には、スキャナ部２３１、プリンタ部２３２、及びＦＡＸ部２３３が接続されている。スキャナ部２３１は、コンタクトガラスまたはＡＤＦ（Auto Document Feeder：自動原稿送り装置）にセットされた原稿を読み取って、画像データを生成する。プリンタ部２３２は、指定された画像データで示される画像を媒体（例えば、用紙、ＯＨＰシート）に形成する。ＦＡＸ部２３３は、ＦＡＸプロトコルに準拠して、外部装置との間で画像データを送受信する。

また、操作パネル２４０は、現在の設定値や選択画面等を表示させ、操作者からの入力を受け付けるタッチパネル等のパネル表示部２４０ａ（ディスプレイ）、並びに、濃度の設定条件などの画像形成に関する条件の設定値を受け付けるテンキー及びコピー開始指示を受け付けるスタートキー等からなる操作パネル２４０ｂを備えている。コントローラ２１０は、ＭＦＰ１００全体の制御を行い、例えば、描画、通信、操作パネル２４０からの入力等を制御する。

なお、ＭＦＰ１００は、操作パネル２４０のアプリケーション切り替えキーにより、ドキュメントボックス機能、コピー機能、プリンタ機能、およびファクシミリ機能を順次に切り替えて選択することが可能となる。ドキュメントボックス機能の選択時にはドキュメントボックスモードとなり、コピー機能の選択時にはコピーモードとなり、プリンタ機能の選択時にはプリンタモードとなり、ファクシミリモードの選択時にはファクシミリモードとなる。

また、ネットワークＩ／Ｆ２５０は、通信ネットワーク２を利用してデータ通信をするためのインタフェースである。近距離通信Ｉ／Ｆ２２０及びネットワークＩ／Ｆ２５０は、ＰＣＩバス２２２を介して、ＡＳＩＣ２０６に電気的に接続されている。

次に、図３～図５を参照して、コントローラ２１０が実行する処理を説明する。図３は、ＭＦＰ１００の機能ブロック図である。図４は、画像データ送信処理のフローチャートである。図５は、画像データ送信処理でパネル表示部２４０ａに表示される画面例であって、（Ａ）はＦＡＸ送信画面を、（Ｂ）はプレビュー画面を示す。

図３に示すように、ＭＦＰ１００は、スキャン処理部３１０、画像圧縮部（画像処理部）３２０、プレビュー処理部３３０、ＦＡＸ送信部３４０、及び画質調整部３５０を備える。また、画質調整部３５０は、ＯＣＲ処理部３５１、画像切抜部３５２、２値化処理部３５３、及び画像合成部３５４を備える。図３に示す各機能ブロック３１０～３５４は、コントローラ２１０内のＣＰＵ３０１が、ＨＤ２０９に記憶されている画像処理プログラムをＲＡＭ２０２ｂに展開し、演算実行することで実現される機能部である。

図３に示す画像データ送信処理は、例えば、操作パネル２４０を通じてＦＡＸ部２３３が起動されたことによって開始される。以下、ＭＦＰ１００Ａのコントローラ２１０が画像データ送信処理を実行する例を説明する。但し、画像データ送信処理は、ＭＦＰ１００Ｂ、１００Ｃ或いはＰＣ１１０によって実行されてもよい。

まず、スキャン処理部３１０は、図５（Ａ）に示すＦＡＸ送信画面を、パネル表示部２４０ａに表示させる（Ｓ４０１）。ＦＡＸ送信画面は、ＦＡＸ送信の条件（例えば、宛先情報、原稿の読取条件など）をオペレータに指定させるための画面である。但し、ＦＡＸ送信画面のレイアウトは、図５（Ａ）に限定されない。

図５（Ａ）に示すように、ＦＡＸ送信画面は、宛先情報の入力を受け付けるテキストボックス５１１と、原稿サイズ、読取解像度Ｒ_１（第１解像度）、及び読取色の選択を受け付けるプルダウンメニュー５１２、５１３、５１４と、［実行］ボタン５１５とを含む。プルダウンメニュー５１２、５１３、５１４には、ＭＦＰ１００の能力情報に対応する複数の選択肢が設定される。

そして、スキャン処理部３１０は、操作パネル２４０を通じて、テキストボックス５１１に宛先が入力され、プルダウンメニュー５１２～５１４で読取条件が設定され、［実行］ボタン５１５が押下されるまで（Ｓ４０２：Ｎｏ）、ステップＳ４０３以降の処理の実行を待機する。本実施形態では、図５（Ａ）に示すように、テキストボックス５１１に宛先情報“ｙｙ－ｙｙｙｙ－ｙｙｙｙ”が入力され、プルダウンメニュー５１２、５１３、５１４で原稿サイズ“Ａ４”、読取解像度Ｒ_１“６００ｄｐｉ”、読取色“モノクロ”が選択されたものとして、以下の処理を説明する。

次に、スキャン処理部３１０は、［実行］ボタン５１５が押下された場合に（Ｓ４０２：Ｙｅｓ）、プルダウンメニューで指定された読取条件に従って、コンタクトガラス或いはＡＤＦにセットされた原稿を、スキャナ部２３１に読み取らせる（Ｓ４０３）。すなわち、スキャナ部２３１は、Ａ４サイズの原稿に記録された画像を読み取って、解像度が６００ｄｐｉでモノクロの読取画像データ（入力画像データ）を生成し、生成した読取画像データをＨＤ２０９に保存する。そして、スキャン処理部３１０は、画像圧縮部３２０に制御を引き継ぐ（Ｓ４０４）。

次に、スキャン処理部３１０から制御を引き継いだ画像圧縮部３２０は、テキストボックス５１１に入力された宛先情報“ｙｙ－ｙｙｙｙ－ｙｙｙｙ”で特定されるＭＦＰ１００Ｂから、ネットワークＩ／Ｆ２５０を通じて能力情報を取得する（Ｓ４０４）。以下、ＭＦＰ１００Ｂの能力情報に含まれる解像度のうち、最大の解像度“４００ｄｐｉ”を、「宛先解像度Ｒ_２（第２解像度）」と表記する。そして、画像圧縮部３２０は、読取解像度Ｒ_１と宛先解像度Ｒ_２とを比較する（Ｓ４０５）。

画像圧縮部３２０は、読取解像度Ｒ_１が宛先解像度Ｒ_２より大きい場合に（Ｓ４０５：Ｙｅｓ）、読取解像度Ｒ_１の読取画像データを圧縮して宛先解像度Ｒ_２の圧縮画像データ（入力画像データ）を生成し、生成した圧縮画像データをＨＤ２０９に保存する（Ｓ４０６）。すなわち、圧縮画像データは、読取画像データより解像度の低い画像データである。画像データの圧縮には、周知の技術を用いることができる。以下、読取画像データで示される画像を「読取画像（入力画像）」と表記し、圧縮画像データで示される画像を「圧縮画像（出力画像）」と表記する。

そして、画像圧縮部３２０は、プレビュー処理部３３０に制御を引き継ぐ（Ｓ４０７）。一方、画像圧縮部３２０は、読取解像度Ｒ_１が宛先解像度Ｒ_２以下の場合に（Ｓ４０５：Ｎｏ）、ステップＳ４０７～Ｓ４０９の処理をスキップして、ＦＡＸ送信部３４０に制御を引き継ぐ（Ｓ４１０）。

次に、画像圧縮部３２０から制御を引き継いだプレビュー処理部３３０は、図５（Ｂ）に示すプレビュー画面を、パネル表示部２４０ａに表示させる（Ｓ４０７）。プレビュー画面は、圧縮画像データで示される圧縮画像を、オペレータに確認させるための画面である。但し、プレビュー画面のレイアウトは、図５（Ｂ）の例に限定されない。

図５（Ｂ）に示すように、プレビュー画面は、圧縮画像を表示するプレビュー領域５２１と、［＋拡大］ボタン５２２と、［－縮小］ボタン５２３と、［送信］ボタン５２４と、［調整］ボタン５２５とを含む。［＋拡大］ボタン５２２は、プレビュー領域５２１上での圧縮画像の拡大表示を指示するボタンである。［－縮小］ボタン５２３は、プレビュー領域５２１上での圧縮画像の縮小表示を指示するボタンである。［送信］ボタン５２４は、圧縮画像データの送信を許可するボタンである。［調整］ボタン５２５は、圧縮画像データの送信を拒否（換言すれば、圧縮画像データの調整を指示）するボタンである。

そして、プレビュー処理部３３０は、操作パネル２４０を通じて、［送信］ボタン５２４及び［調整］ボタン５２５のいずれかが押下されるまで（Ｓ４０８）、ステップＳ４０９以降の処理の実行を待機する。また、プレビュー処理部３３０は、［＋拡大］ボタン５２２が押下された場合に、プレビュー領域５２１上での圧縮画像の倍率を上昇させ、［－縮小］ボタン５２３が押下された場合に、プレビュー領域５２１上での圧縮画像の倍率を減少させる。

オペレータは、必要に応じて［＋拡大］ボタン５２２及び［－縮小］ボタン５２３を押下しながら、プレビュー領域５２１に表示された圧縮画像の画質を確認する。そして、オペレータは、圧縮画像の画質に問題がなければ（例えば、圧縮画像に含まれる文字が判別できれば）、［送信］ボタン５２４を押下する。一方、オペレータは、圧縮画像の画質に問題があれば（例えば、圧縮画像に判別しにくい文字が含まれていれば）、［調整］ボタン５２５を押下する。

そして、プレビュー処理部３３０は、［調整］ボタン５２５が押下（すなわち、圧縮画像データの送信拒否が入力）された場合に（Ｓ４０８：調整）、画質調整部３５０に制御を引き継ぐ（Ｓ４０９）。一方、プレビュー処理部３３０は、［送信］ボタン５２４が押下（すなわち、圧縮画像データの送信許可が入力）された場合に（Ｓ４０８：送信）、ＦＡＸ送信部３４０に制御を引き継ぐ（Ｓ４１０）。

プレビュー処理部３３０から制御を引き継いだＦＡＸ送信部３４０は、ＦＡＸ部２３３を制御することによって、ＨＤ２０９に保存されている圧縮画像データを、宛先情報“ｙｙ－ｙｙｙｙ－ｙｙｙｙ”で特定されるＭＦＰ１００Ｂに、ネットワークＩ／Ｆ２５０を通じてＦＡＸ送信する（Ｓ４１０）。また、画像圧縮部３２０から制御を引き継いだＦＡＸ送信部３４０は、ＦＡＸ部２３３を制御することによって、ＨＤ２０９に保存されている読取画像データを、宛先情報“ｙｙ－ｙｙｙｙ－ｙｙｙｙ”で特定されるＭＦＰ１００Ｂに、ネットワークＩ／Ｆ２５０を通じてＦＡＸ送信する（Ｓ４１０）。なお、「ＦＡＸ送信」とは、ＦＡＸプロトコルに準拠した手順で画像データを送信することを指す。

また、プレビュー処理部３３０から制御を引き継いだ画質調整部３５０は、画質調整処理（Ｓ４０９）を実行する。図６は、画質調整処理のフローチャートである。図７は、（Ａ）は読取画像データに対するＯＣＲ処理の結果を示し、（Ｂ）は圧縮画像データに対するＯＣＲ処理の結果を示す。図８は、２値化処理部３５３の処理を説明するための図である。画質調整処理は、ＨＤ２０９に保存された圧縮画像データの画質を調整する処理である。

まず、画質調整部３５０のＯＣＲ処理部３５１は、ＨＤ２０９に保存された読取画像データ及び圧縮画像データそれぞれに対して、フィルタ処理、２値化処理、及びＯＣＲ処理を実行する（Ｓ６０１）。そして、画質調整部３５０は、処理結果をＨＤ２０９に保存して、画像切抜部３５２に制御を引き継ぐ（Ｓ６０２）。

より詳細には、ＯＣＲ処理部３５１は、読取画像データ及び圧縮画像データそれぞれに対して、エッジを強調するフィルタ処理を実行する。エッジとは、画像データで示される画像に含まれる地色及び文字の境界を指す。エッジを強調するフィルタ処理の具体例としては、例えば、ラプラシアンフィルタ等が挙げられる。

次に、ＯＣＲ処理部３５１は、フィルタ処理後の読取画像データ及び圧縮画像データそれぞれを２値化する。２値化とは、各画像データを構成する複数の画素値のうち、画素値が２値化閾値以上の画素に画素値“１”を設定し、画素値が２値化閾値未満の画素に画素値“０”を設定する処理である。これにより、各画像データで示される画像のうち、文字を構成する画素に画素値“１”が設定され、地色を構成する画素に画素値“０”が設定される。２値化閾値は、予め定められた固定値でもよいし、画像データの特性に合わせた可変値でもよい。

次に、ＯＣＲ処理部３５１は、２値化処理後の読取画像データ及び圧縮画像データそれぞれに対して、ＯＣＲ処理を実行する。ＯＣＲ処理は、各画像に含まれる文字を抽出する処理である。より詳細には、ＯＣＲ処理は、各画像に含まれる文字画像に対応する文字コード（例えば、ＡＳＣＩＩ、Ｕｎｉｃｏｄｅ等）を抽出する処理である。

ＯＣＲ処理は、例えば、周知のＯＣＲエンジンによって実現されるが、例えば以下の手順で処理を行う。まず、ＯＣＲ処理部３５１は、画像から抽出した文字画像を所定の大きさに正規化し、特徴（方向成分）を抽出する。次に、ＯＣＲ処理部３５１は、文字画像から抽出した特徴と、予め用意された標準パターンとをマッチングする。そして、ＯＣＲ処理部３５１は、特徴の一致度が最も高い標準パターンに対応付けられた文字コードを、文字画像に対応する文字コードとして抽出する。但し、ＯＣＲ処理の具体的な処理方法は、前述の例に限定されない。

次に、ＯＣＲ処理部３５１から処理を引き継いだ画像切抜部３５２は、読取画像及び圧縮画像の対応する領域から抽出した文字（文字コード）同士を比較する。そして、ＯＣＲ処理部３５１は、対応する領域から抽出した文字の認識結果が異なる誤認識領域を特定する（Ｓ６０２）。図７の例では、読取画像及び圧縮画像の対応する領域のうち、読取画像から抽出された文字“ｃ”（図７（Ａ））と、圧縮画像から抽出された文字“ｏ”（図７（Ｂ））との認識結果が異なる。

次に、画像切抜部３５２は、読取画像から誤認識領域の画像を切り抜いて、切抜画像データを生成する。本実施形態では、図８に示すように、図７（Ａ）の文字“ｃ”を囲む矩形の画像が切り抜かれる。また、画像切抜部３５２は、生成した切抜画像データを読取解像度Ｒ_１から宛先解像度Ｒ_２に圧縮して、圧縮後の切抜画像データをＨＤ２０９に保存する（Ｓ６０３）。すなわち、画像切抜部３５２は、ステップＳ６０３において、入力画像データから出力画像データを生成するための画像処理を、切抜画像データに施す。以下、切抜画像データで示される画像を、「切抜画像」と表記する。そして、画像切抜部３５２は、２値化処理部３５３に制御を引き継ぐ。

次に、画像切抜部３５２から制御を引き継いだ２値化処理部３５３は、宛先解像度Ｒ_２に圧縮後の切抜画像データに対してフィルタ処理（第１フィルタ処理）を実行する（Ｓ６０４）。ステップＳ６０４におけるフィルタ処理は、切抜画像のエッジを強調する処理であって、具体的な方法はステップＳ６０１と同様でよい。

次に、２値化処理部３５３は、フィルタ処理後の切抜画像データから、エッジ画素の最小画素値Ｐ_ｍｉｎと、非エッジ画素の最大画素値Ｐ_ｍａｘとを抽出する（Ｓ６０５）。エッジ画素とは、切抜画像内のエッジを構成する画素であって、図８の画素１－Ｄ、１－Ｅ、２－Ｂ、２－Ｃ、２－Ｅ、３－Ｃ、３－Ｄ等の画素を指す。非エッジ画素とは、切抜画像内の地色を構成する画素であって、図８の前述した画素以外の画素を指す。

そして、最小画素値Ｐ_ｍｉｎは、切抜画像のエッジを構成する複数のエッジ画素のうち、最も地色に近い画素（例えば、画素２－Ｂ）の画素値を指す。一方、非エッジ画素の画素値は、原稿に付着した埃や読み取り時のノイズ等によってバラツキがある。そのため、最大画素値Ｐ_ｍａｘは、切抜画像の地色を構成する複数の非エッジ画素のうち、地色以外の成分が最も多い画素の画素値を指す。

次に、２値化処理部３５３は、エッジ画素の最小画素値Ｐ_ｍｉｎと非エッジ画素の最大画素値Ｐ_ｍａｘとを比較する（Ｓ６０６）。そして、２値化処理部３５３は、最小画素値Ｐ_ｍｉｎが最大画素値Ｐ_ｍａｘより大きい場合に（Ｓ６０６：Ｙｅｓ）、最大画素値Ｐ_ｍａｘを２値化閾値として、切抜画像データに対して２値化処理を実行する（Ｓ６０７）。

一方、２値化処理部３５３は、最小画素値Ｐ_ｍｉｎが最大画素値Ｐ_ｍａｘ以下の場合に（Ｓ６０６：Ｎｏ）、切抜画像データに対して第２フィルタ処理を実行する（Ｓ６０４）。そして、２値化処理部３５３は、最小画素値Ｐ_ｍｉｎが最大画素値Ｐ_ｍａｘより大きくなるまで（Ｓ６０６：Ｎｏ）、ステップＳ６０４～Ｓ６０６の処理を繰り返し実行する。

なお、２値化処理部３５３は、Ｎ（Ｎは２以上の整数）回目のステップＳ６０４において、（Ｎ－１）回目のステップＳ６０４よりエッジをさらに強調するフィルタ処理（第Ｎフィルタ処理）を実行する。エッジをさらに強調する具体的な方法としては、例えば、第Ｎフィルタ処理と第（Ｎ－１）フィルタ処理とで、ラプラシアンフィルタのパラメータを変更してもよいし、異なるアルゴリズムのフィルタ処理を実行してもよい。

なお、ステップＳ６０７における２値化処理は、ステップＳ６０１と同様でよい。これにより、切抜画像のうち、文字を構成する画素に画素値“１”が設定され、地色を構成する画素に画素値“０”が設定される。次に、２値化処理部３５３は、２値化処理後の切抜画像データをＨＤ２０９に保存する。そして、２値化処理部３５３は、画像合成部３５４に制御を引き継ぐ（Ｓ６０８）。

次に、２値化処理部３５３から制御を引き継いだ画像合成部３５４は、２値化後の圧縮画像データで示される圧縮画像の誤認識領域に、２値化後の切抜画像データで示される切抜画像を合成する（Ｓ６０８）。本実施形態では、図７（Ｂ）の文字“ｏ”を囲む矩形の画像が、図８の文字“ｃ”を囲む矩形の画像に置換される。次に、画像合成部３５４は、切抜画像を合成後の圧縮画像を示す圧縮画像データで、ＨＤ２０９に保存された圧縮画像データを上書きする。そして、画像合成部３５４は、プレビュー処理部３３０に制御を引き継ぐ（Ｓ４０７）。

次に図４に戻って、画像合成部３５４から制御を引き継いだプレビュー処理部３３０は、画質調整処理で画質が調整された圧縮画像データを用いて、ステップＳ４０７以降の処理を実行する。すなわち、コントローラ２１０は、オペレータが［送信］ボタン５２４を押下するまで、ステップＳ４０７～Ｓ４０９の処理を繰り返し実行する。そして、オペレータが［送信］ボタン５２４を押下すると（Ｓ４０８：送信）、ＦＡＸ送信部３４０は、ＨＤ２０９に保存された（すなわち、画質が調整された）圧縮画像データを、ＭＦＰ１００Ｂに対してＦＡＸ部２３３にＦＡＸ送信させる（Ｓ４１０）。

上記の実施形態によれば、例えば以下の作用効果を奏する。

上記の実施形態によれば、オペレータがプレビュー画面を見て文字が判別できないと判断した場合に（Ｓ４０８：調整）、画質調整処理（Ｓ４０９）を実行するので、オペレータの操作負担を増加させることなく、圧縮画像データの画質を適切に調整して送信することができる。なお、上記の実施形態では、画質調整処理（Ｓ４０９）の後に、プレビュー画面を再び表示する（Ｓ４０７）例を説明したが、画質調整処理の後に直接ステップＳ４１０を実行してもよい。

また、上記の実施形態によれば、読取画像データ及び圧縮画像データそれぞれから抽出した文字の認識結果が異なる誤認識領域に切抜画像を合成するので、文字が潰れて判別しにくい部分の画質を選択的に調整することができる。このように、本発明は、文字が主体の原稿（文書原稿）を読み取って読取画像データを生成する場合に、特に有利な作用効果を奏する。但し、本発明の対象となる入力画像データは、文字のみを含むものに限定されず、少なくとも文字を含み、さらに図柄（例えば、イラスト、写真、グラフ、表など）を含んでもよい。

また、上記の実施形態によれば、圧縮画像データ及び切抜画像データそれぞれを２値化してから合成するので、各画像に含まれる文字がさらに鮮明になる。このように、本発明は、原稿をモノクロで読み取って読取画像データを生成する場合に、特に有利な作用効果を奏する。

また、上記の実施形態によれば、エッジ画素の最小画素値Ｐ_ｍｉｎが、非エッジ画素の最大画素値Ｐ_ｍａｘより大きくなるまでフィルタ処理を繰り返し実行し、非エッジ画素の最大画素値Ｐ_ｍａｘを２値化閾値として切抜画像データを２値化するので、切抜画像に含まれる文字をさらに鮮明にすることができる。

なお、上記の実施形態では、スキャナ部２３１が生成した読取画像データを入力画像データの一例として説明したが、入力画像データの具体例はこれに限定されない。他の例として、ＰＣ１１０が画像データ送信処理を実行する場合は、画像作成（編集）アプリケーションを用いて作成（編集）した画像データを、入力画像データとしてもよい。さらに他の例として、タブレット端末やスマートフォンが画像データ送信処理を実行する場合は、内蔵カメラで撮影した画像データを、入力画像データとしてもよい。

また、上記の実施形態では、画像データをＦＡＸ送信する例を説明したが、画像データの送信プロトコルはＦＡＸプロトコルに限定されず、ＨＴＴＰ、ＦＴＰなど、画像データを送受信可能なあらゆるプロトコルが適用できる。

また、上記の実施形態では、宛先装置の能力に応じて宛先解像度Ｒ_２を決定する例を説明したが、宛先解像度Ｒ_２の決定方法は前述の例に限定されない。他の例として、宛先解像度Ｒ_２は、通信ネットワーク２の帯域幅に応じて決定されてもよいし、予め定められた固定値でもよい。読取解像度Ｒ_１の決定方法についても同様である。

さらに、上記の実施形態では、読取画像データを圧縮して圧縮画像データを生成する例を説明したが、入力画像データから出力画像データを生成するための画像処理は、「圧縮」に限定されない。すなわち、コントローラ２１０は、画質を低下させる画像処理を入力画像データに施して、出力画像データを生成すればよい。画像処理の他の例としては、コントラスト補正、明るさ補正、色補正、ノイズ除去、拡大及び縮小などが挙げられる。

上記で説明した実施形態の各機能は、一又は複数の処理回路によって実現することが可能である。ここで、本明細書における「処理回路」とは、電子回路により実装されるプロセッサのようにソフトウェアによって各機能を実行するようプログラミングされたプロセッサや、上記で説明した各機能を実行するよう設計されたASIC（Application Specific Integrated Circuit）、DSP（digital signal processor）、FPGA（field programmable gate array）や従来の回路モジュール等のデバイスを含むものとする。

明細書中の対応テーブル（表）は、機械学習の学習効果によって生成されたものでもよい。また、各パラメータを機械学習にて分類付けすることで、対応テーブルを使用しなくてもよい。ここで、機械学習とは、コンピュータに人のような学習能力を獲得させるための技術であり，コンピュータが，データ識別等の判断に必要なアルゴリズムを，事前に取り込まれる学習データから自律的に生成し，新たなデータについてこれを適用して予測を行う技術のことをいう。機械学習のための学習方法は、教師あり学習、教師なし学習、半教師学習、強化学習、深層学習のいずれかの方法でもよく、さらに、これらの学習方法を組み合わせた学習方法でもよく、機械学習のための学習方法は問わない。

なお、本発明は上述した実施形態に限定されるものではなく、その技術的要旨を逸脱しない範囲で種々の変形が可能であり、特許請求の範囲に記載された技術思想に含まれる技術的事項の全てが本発明の対象となる。上記実施形態は、好適な例を示したものであるが、当業者であれば、開示した内容から様々な変形例を実現することが可能である。そのような変形例も、特許請求の範囲に記載された技術的範囲に含まれる。

１ ：画像処理システム
２ ：通信ネットワーク
１００ ：ＭＦＰ
１１０ ：ＰＣ
２０１ ：ＣＰＵ
２０２ａ ：ＲＯＭ
２０２ｂ ：ＲＡＭ
２０６ ：ＡＳＩＣ
２０８ ：ＨＤＤコントローラ
２１０ ：コントローラ
２２０ ：近距離通信Ｉ／Ｆ
２２０ａ ：近距離通信回路
２２１ ：ＡＧＰバス
２２２ ：ＰＣＩバス
２３０ ：エンジン制御部
２３１ ：スキャナ部
２３２ ：プリンタ部
２３３ ：ＦＡＸ部
２４０ ：操作パネル
２４０ａ ：パネル表示部
２４０ｂ ：操作パネル
２５０ ：ネットワークＩ／Ｆ
３０１ ：ＣＰＵ
３１０ ：スキャン処理部
３２０ ：画像圧縮部
３３０ ：プレビュー処理部
３４０ ：ＦＡＸ送信部
３５０ ：画質調整部
３５１ ：ＯＣＲ処理部
３５２ ：画像切抜部
３５４ ：画像合成部
５１１ ：テキストボックス
５１２，５１３，５１４ ：プルダウンメニュー
５１５ ：［実行］ボタン
５２１ ：プレビュー領域
５２２ ：［＋拡大］ボタン
５２３ ：［－縮小］ボタン
５２４ ：［送信］ボタン
５２５ ：［調整］ボタン

特開２０１６－０５８８５６号公報

Claims (6)

1. 画像を表示するディスプレイと、
   オペレータからの入力操作を受け付ける入力部と、
   外部装置と通信する通信インタフェースと、
   コントローラとを備え、
   前記コントローラは、
   入力画像データに画像処理を施して出力画像データを生成し、
   前記出力画像データで示される出力画像を前記ディスプレイに表示させ、
   前記出力画像データの送信許可が前記入力部に入力された場合に、前記通信インタフェースを通じて前記出力画像データを外部装置に送信し、
   前記出力画像データの送信拒否が前記入力部に入力された場合に、
   前記入力画像データ及び前記出力画像データそれぞれに含まれる文字を抽出し、
   前記入力画像データで示される入力画像のうち、前記入力画像データ及び前記出力画像データそれぞれから抽出した文字の認識結果が異なる誤認識領域の画像を切り抜いて、切抜画像データを生成し、
   前記切抜画像データで示される切抜画像を、前記出力画像の前記誤認識領域に合成し、
   前記切抜画像を合成後の前記出力画像を示す前記出力画像データを、前記通信インタフェースを通じて外部装置に送信することを特徴とする画像処理装置。
2. 前記コントローラは、前記画像処理として、第１解像度の前記入力画像データを圧縮して、前記第１解像度より低い第２解像度の前記出力画像データを生成することを特徴とする請求項１に記載の画像処理装置。
3. 前記コントローラは、
   前記切抜画像データを前記第１解像度から前記第２解像度に圧縮し、
   地色及び文字の境界であるエッジの位置の最小画素値が地色の位置の最大画素値より大きくなるまで、前記エッジを強調するフィルタ処理を、前記第２解像度の前記切抜画像データに対して繰り返し実行し、
   前記最小画素値より小さくなった前記最大画素値を２値化閾値として、前記切抜画像データを２値化し、
   ２値化後の前記切抜画像データで示される前記切抜画像を、前記出力画像の前記誤認識領域に合成することを特徴とすることを特徴とする請求項２に記載の画像処理装置。
4. 前記コントローラは、
   前記入力画像データ及び前記出力画像データそれぞれに対して、地色及び文字の境界であるエッジを強調するフィルタ処理を実行し、
   前記フィルタ処理後の前記入力画像データ及び前記出力画像データそれぞれを２値化し、
   ２値化後の前記入力画像データ及び前記出力画像データそれぞれに含まれる文字を抽出することを特徴とする請求項１または２に記載の画像処理装置。
5. 原稿に記録された画像を読み取って前記入力画像データを生成するスキャナ部を備え、
   前記コントローラは、前記スキャナ部が生成した前記入力画像データに前記画像処理を施して、前記出力画像データを生成することを特徴とする請求項１乃至４のいずれか１項に記載の画像処理装置。
6. 画像を表示するディスプレイと、
   オペレータからの入力操作を受け付ける入力部と、
   外部装置と通信する通信インタフェースとに接続されたコンピュータによって実行される画像処理プログラムであって、
   入力画像データに画像処理を施して出力画像データを生成し、
   前記出力画像データで示される出力画像を前記ディスプレイに表示させ、
   前記出力画像データの送信許可が前記入力部に入力された場合に、前記通信インタフェースを通じて前記出力画像データを外部装置に送信し、
   前記出力画像データの送信拒否が前記入力部に入力された場合に、
   前記入力画像データ及び前記出力画像データそれぞれに含まれる文字文字を抽出し、
   前記入力画像データで示される入力画像のうち、前記入力画像データ及び前記出力画像データそれぞれから抽出した文字の認識結果が異なる誤認識領域の画像を切り抜いて、切抜画像データを生成し、
   前記切抜画像データで示される切抜画像を、前記出力画像の前記誤認識領域に合成し、
   前記切抜画像を合成後の前記出力画像を示す前記出力画像データを、前記通信インタフェースを通じて外部装置に送信する処理を、前記コンピュータに実行させることを特徴とする画像処理プログラム。