JP6201727B2 - 画像読み取り装置、画像読み取り方法及びプログラム - Google Patents

Description

本発明は、画像読み取り装置、画像読み取り方法及びプログラムに関する。

従来、例えば図２７に示すように、見開いた状態の本Ｂの上方に撮像手段２０１を配置し、当該撮像手段２０１によって本Ｂの頁Ｐを一頁ずつ画像として読み取る画像読み取り装置２００が知られている。ここで、本Ｂによってはサイズが異なるために、そのサイズに応じた読み取り処理を行うべく、画像読み取り装置２００には図２８に示すように撮像手段２０１で取得した画像Ｇ１０から必要な領域だけを切り取るように、原稿サイズＲ１０を指定できる機能が搭載されている（例えば特許文献１参照）。
そして、近年においては、撮影時に頁を押さえる手指が読み取り画像中に存在した場合、その手指部分を画像中から指定して削除する画像読み取り装置の開発も進んでいる。

特開２００６−１１４９９３号公報

ところで、すでに周知となっている手指部分などの所定部分を画像中から削除する画像読み取り装置の場合、所定部分を画像毎に逐一指定しなければならず、ユーザーにとっては煩雑な作業となる。
そこで本発明の課題は、多数の読み取り画像における所定部分の削除処理の効率化を図ることである。

以上の課題を解決するため、本発明の一の態様によれば、
本の頁を撮像手段によって頁毎に撮像し、撮像された画像のうち所定領域を補正して取り込む画像読み取り装置であって、
前記頁をめくり始める側の頁での前記所定領域に関する第一パラメータを指定する初期パラメータ指定手段と、
前記頁をめくり終える側の頁での前記所定領域に関する第一パラメータを指定する終期パラメータ指定手段と、
前記初期パラメータ指定手段及び前記終期パラメータ指定手段により指定された前記第一パラメータに基づいて、任意の頁での前記第一パラメータを決定する決定手段と、
前記決定手段で決定された前記任意の頁の第一パラメータに基づいて、前記任意の頁の画像を補正する補正手段とを備え、
前記補正手段は、前記任意の頁の前記所定領域の少なくとも一部を、前記任意の頁の第一パラメータに基づいて削除する削除手段を含むことを特徴とする画像読み取り装置が提供される。

本発明によれば、多数の読み取り画像における所定部分の削除処理を効率化することができる。

本実施形態に係る書画カメラシステムの概略構成を示す斜視図である。 本実施形態に係る載置台、本及びカメラの位置関係を示す説明図である。 本実施形態に係る載置台及び本の上面視図である。 図３の載置台の変形例を示す説明図である。 図３の載置台の変形例を示す説明図である。 本実施形態に係る書画カメラシステムの主制御構成を示すブロック図である。 左右の手指によって本の頁を押さえた状態を示す説明図である。 画像処理モードの処理の流れを示すフローチャートである。 最初の基準画像を示す説明図である。 最初の基準画像に対して指定された所定領域を示す説明図である。 最初の基準画像に対して指定されたトリミング領域を示す説明図である。 最後の基準画像を示す説明図である。 最後の基準画像に対して指定された所定領域を示す説明図である。 最後の基準画像に対して指定されたトリミング領域を示す説明図である。 左側の最初の頁における所定領域を示す説明図である。 左側のｉ番目の頁における所定領域を示す説明図である。 左側の最後の頁における所定領域を示す説明図である。 最初の頁におけるトリミング領域を示す説明図である。 ｉ番目の頁におけるトリミング領域を示す説明図である。 最後の頁におけるトリミング領域を示す説明図である。 削除処理の流れを示すフローチャートである。 基準画像に対して所定領域が指定された状態を示す説明図である。 所定領域内で検出された削除対象色の検出エリアを示す模式図である。 所定領域内の手指部分を背景色に置換した後の基準画像を示す説明図である。 切出処理の流れを示すフローチャートである。 手指削除画像に対してトリミング領域が指定された状態を示す説明図である。 従来の画像読み取り装置で最初の頁を撮像する際の状態を示す模式図である。 図２７の画像読み取り装置で撮像された最初の頁の画像を示す説明図である。

以下に、本発明を実施するための最良の形態について図面を用いて説明する。ただし、以下に述べる実施形態には、本発明を実施するために技術的に好ましい種々の限定が付されているが、発明の範囲を以下の実施形態及び図示例に限定するものではない。

図１は本発明に係る画像読み取り装置としての書画カメラシステムの概略構成を示す斜視図である。図１に示すように、書画カメラシステム１には、本Ｂの頁Ｐを撮像する撮像手段としての書画カメラ２と、本Ｂが載置される載置台３と、書画カメラ２に通信自在に接続されたパソコン４とを備えている。なお、本発明に係る本Ｂとしては一般的な本の他にも、綴じられた書類等も含むこととする。

書画カメラ２には、スタンド部２１と、スタンド部２１の上端に取り付けられたカメラ２２とが設けられている。スタンド部２１は本Ｂとカメラ２２との相対的な位置関係を調整できるように、前後方向、左右方向に傾倒自在であるとともに、上下方向に伸縮自在となっている。カメラ２２は、その画角内に本Ｂが収まるようにレンズが下方を向いている。カメラ２２とスタンド部２１との接合部には位置調整機構が設けられており、これによってカメラ２２のレンズが向く方向も調整できるようになっている。

図２は、載置台３、本Ｂ及びカメラ２２の位置関係を示す説明図であり、図３は載置台３及び本Ｂの上面視図である。
図２及び図３に示すように、載置台３は、図示しないヒンジにより折り畳み自在な左右一対の保持板３１，３２を備えている。これら一対の保持板３１，３２の上面で、開いた状態の本Ｂを保持する。一対の保持板３１，３２には、本Ｂの表紙及び裏表紙をそれぞれ保持するバンド状の保持部３３が設けられている。また、保持板３１，３２の外側の縁部には、頁Ｐを押さえる手指の位置の基準となるマーク３４が設けられている。

ここで、開きやすい本Ｂの場合には、図２に示すように一対の保持板３１，３２を平坦に配置する。そして、カメラ２２は左右両方の頁Ｐを撮像するように、左右両方の頁Ｐの綴じ目の上方に配置する。これにより、一回の撮影で２頁分の画像を取得することができる。
また、完全に開くことが容易でない本Ｂの場合には、図４に示すように、一対の保持板３１，３２をＶ字状となるように傾ける。そして、カメラ２２は左右両方の頁Ｐを撮像するように、左右両方の頁Ｐの綴じ目の上方に配置する。これにより、一回の撮影で２頁分の画像を取得することができる。
また、大きく開くのが困難である本Ｂの場合には、図５に示すように、一方の頁Ｐのみを平坦とし、他方の頁Ｐは傾くように一対の保持板３１，３２を調整する。そして、カメラ２２は、平坦な頁Ｐの上方に配置する。これにより、一回の撮影で１頁分の画像を取得することができる。以下の説明では、図２に示した場合を例示して説明する。
なお、いずれの場合においても、カメラ２２が頁Ｐに正対しない場合があり、取得した各頁Ｐの画像に対して画像処理のどこかの段階で台形補正を施すことが好ましい。

次に、本実施形態の書画カメラシステム１の主制御構成について説明する。図６は書画カメラシステム１の主制御構成を示すブロック図である。図６に示すように、パソコン４には、カメラ２２で撮像された基準画像Ｇ（図９等参照）及び当該基準画像Ｇからトリミングして得られたトリミング画像等を記録する記録部４１と、種々の操作指示がパソコン４自体に入力されるキーボード、タッチパネル、マウス等の操作手段４２と、各種プログラムが記録されたＲＯＭ４３と、ＲＯＭ４３中のプログラムの実行時に当該プログラムが展開されるＲＡＭ４４と、操作手段４２からの指示に基づいてＲＯＭ４３中のプログラムをＲＡＭ４４に展開し実行するＣＰＵ４５とが備えられている。
パソコン４のＣＰＵ４５にて画像読み取り用のプログラムが実行されると、操作手段４２の所定のボタンが撮影ボタンとして対応付けされる。この撮影ボタンを操作することに連動してカメラ２２が本Ｂの画像を撮影するようになっている。

以下、書画カメラシステム１による画像読み取り方法について説明する。
まず、ユーザーは、操作手段４２を操作して画像読み取り用のプログラムをパソコン４に実行させる。これにより、まずは画像撮影モードが実行される。画像撮影モードにおいては、まずユーザーは、本Ｂの最初の頁Ｐを開いて、マーク３４に合わせて手指を置き、頁Ｐを押さえる。
図７は、左右の手指ｈ１，ｈ２によって頁Ｐを押さえた状態を示す説明図である。図７中、点線で囲まれた領域はカメラ２２の撮影エリアＰａである。
そして、この状態の左右の頁Ｐをカメラ２２によって一画像として撮影されるようにする。具体的には、例えば撮影ボタンを操作してから所定時間（例えば３秒）後に撮像されるような設定（セルフタイマー設定）をしておき、撮影毎に撮影ボタンを操作し、その３秒の間に頁Ｐをめくり、頁Ｐを手で押さえるようにすればよい。あるいは、カメラ２２でマーク３４付近の領域を監視して、その領域に手指が存在し、静止したと判断される場合に静止画が取り込まれるようにしてもよい。
これを本Ｂの最後の頁Ｐまで繰り返すことにより、一冊の本Ｂの全ての頁Ｐの基準画像Ｇがパソコン４の記録部４１に記録されることになる。
最後の頁Ｐの撮影が終了すると、ユーザーは操作手段４２を操作して、画像撮影モードの終了をパソコン４に促す。パソコン４は、画像撮影モードの終了に伴って、画像処理モードに切り替える。
なお、以下の説明においては、左右の二頁分を含んだ一画像毎に頁番号を割り振っている。

図８は画像処理モードの処理の流れを示すフローチャートである。
ステップＳ１ではＣＰＵ４５は最初の頁Ｐにおける第一パラメータ及び第二パラメータを指定する。つまり、ＣＰＵ４５が本発明に係る初期パラメータ指定手段である。具体的には、まずＣＰＵ４５は図９に示すように最初の基準画像Ｇを画面上に表示する。本実施形態の場合、左開きの本Ｂが撮影対象であるため、一頁目の基準画像Ｇ内においては、左側の頁Ｐが薄く、右側の頁Ｐが厚くなっている。つまり、左側の頁Ｐはカメラ２２から遠いために比較的小さく撮影されており、右側の頁Ｐはカメラ２２に近いため比較的大きく撮影されている。

第一パラメータの指定時においては、ユーザーは操作手段４２を操作して、図１０に示すように、頁Ｐに対して重なった手指ｈ１，ｈ２を囲むように矩形状の所定領域Ｋ，Ｌを指定する。操作手段４２がマウスである場合には所定領域Ｋ，Ｌを形成するようにドラッグすることで、ＣＰＵ４５が所定領域Ｋ，Ｌを特定する。この所定領域Ｋ，Ｌの各角部の座標値が、めくり始めでの第一パラメータとなる。

他方、第二パラメータの指定時においては、ユーザーは操作手段４２を操作して、図１１に示すように、頁Ｐから切り出したい領域を囲むように矩形状のトリミング領域Ｑ，Ｒを指定する。このトリミング領域Ｑ，Ｒの各角部の座標値が、めくり始めでの第二パラメータとなる。

ステップＳ２では、ＣＰＵ４５は最後の頁Ｐにおける第一パラメータ及び第二パラメータを指定する。つまり、ＣＰＵ４５が本発明に係る終期パラメータ指定手段である。具体的には、まずＣＰＵ４５は図１２に示すように最後の基準画像Ｇを画面上に表示する。本実施形態の場合、左開きの本Ｂが撮影対象であるため、最後の基準画像Ｇ内においては、左側の頁Ｐが厚く、右側の頁Ｐが薄くなっている。

第一パラメータの指定時においては、ユーザーは操作手段４２を操作して、図１３に示すように、頁Ｐに対して重なった手指ｈ１，ｈ２を囲むように矩形状の所定領域Ｋ，Ｌを指定する。この所定領域Ｋ，Ｌの各角部の座標値が、めくり終わりでの第一パラメータとなる。

他方、第二パラメータの指定時においては、ユーザーは操作手段４２を操作して、図１４に示すように、頁Ｐから切り出したい領域を囲むように矩形状のトリミング領域Ｑ，Ｒを指定する。このトリミング領域Ｑ，Ｒの各角部の座標値が、めくり終わりでの第二パラメータとなる。

ステップＳ３では、ＣＰＵ４５は、所定領域Ｋ，Ｌ内から削除対象色及び背景色を指定する。つまり、ＣＰＵ４５が本発明に係る第一指定手段及び第二指定手段である。
削除対象色の指定においては、例えば所定領域Ｋ内の手指部分ｈ１の所定箇所をユーザーが操作手段４２で指定することで、その所定箇所の色をＣＰＵ４５が削除対象色として設定する。なお、手指部分ｈ１においても場所によって色が微妙に異なるために、削除対象色としては、ある程度の許容範囲を予め含んで設定されていることが好ましい。
また、削除対象色を逐一設定しなくとも、肌色と同程度の色を削除対象色として予め設定しておくことも可能である。なお、肌色と言っても白人、黒人、黄色人種等のように人種によって肌の色が異なる場合もあれば、個人差による違いもあり、さらには同一人物であっても季節によって肌の色が異なる。このため、これらを包含するように肌色として認識する許容範囲を予め設定していてもよいし、人種毎の許容範囲が個別に登録されていて、使用する人種によって該当する許容範囲を選択するようにしてもよい。

また、背景色の指定においても、例えば基準画像Ｇにおける手指部分ｈ１以外の所定箇所をユーザーが操作手段４２で指定することで、その所定箇所の色をＣＰＵ４５が背景色として設定する。

ステップＳ４では、ＣＰＵ４５は、ｉ＝１と設定する。
ステップＳ５では、ＣＰＵ４５は、ｉ頁目の基準画像Ｇに対する第一パラメータ及び第二パラメータを決定する。つまり、ＣＰＵ４５が本発明に係る決定手段である。

まず、第一パラメータの決定方法について説明する。まず左側の頁Ｐにおける第一パラメータの決定方法を例示して説明する。

図１５は左側の最初の頁Ｐにおける所定領域Ｋ１を示す説明図であり、図１６は左側のｉ番目の頁Ｐにおける所定領域Ｋｉを示す説明図であり、図１７は左側の最後（ｍ番目）の頁Ｐにおける所定領域Ｋｍを示す説明図である。
所定領域Ｋ１の各角部をＫａ（１），Ｋｂ（１），Ｋｃ（１），Ｋｄ（１）とし、所定領域Ｋｍの各角部をＫａ（ｍ），Ｋｂ（ｍ），Ｋｃ（ｍ），Ｋｄ（ｍ）とし、ｉ番目の頁Ｐにおける所定領域Ｋｉの各角部をＫａ（ｉ），Ｋｂ（ｉ），Ｋｃ（ｉ），Ｋｄ（ｉ）とすると、ｉ番目の頁Ｐにおける所定領域Ｋｉの各角部の座標値は、所定領域Ｋ１の各角部の座標値と、所定領域Ｋｍの各角部の座標値と、頁番号とを用いて線形補間する以下の式（１）〜（４）により求められる。

Ｋａ（ｉ）＝Ｋａ（１）・｛（ｍ−ｉ）／（ｍ−１）｝＋Ｋａ（ｍ）・｛ｉ／（ｍ−１）｝…（１）
Ｋｂ（ｉ）＝Ｋｂ（１）・｛（ｍ−ｉ）／（ｍ−１）｝＋Ｋｂ（ｍ）・｛ｉ／（ｍ−１）｝…（２）
Ｋｃ（ｉ）＝Ｋｃ（１）・｛（ｍ−ｉ）／（ｍ−１）｝＋Ｋｃ（ｍ）・｛ｉ／（ｍ−１）｝…（３）
Ｋｄ（ｉ）＝Ｋｄ（１）・｛（ｍ−ｉ）／（ｍ−１）｝＋Ｋｄ（ｍ）・｛ｉ／（ｍ−１）｝…（４）

この式によって、各頁Ｐの第一パラメータ、つまり所定領域Ｋｉの各角部の座標値が決定される。
また、右側の頁ＰにおけるＬについても同様の式、
Ｌａ（ｉ）＝Ｌａ（１）・｛（ｍ−ｉ）／（ｍ−１）｝＋Ｌａ（ｍ）・｛ｉ／（ｍ−１）｝…（５）
Ｌｂ（ｉ）＝Ｌｂ（１）・｛（ｍ−ｉ）／（ｍ−１）｝＋Ｌｂ（ｍ）・｛ｉ／（ｍ−１）｝…（６）
Ｌｃ（ｉ）＝Ｌｃ（１）・｛（ｍ−ｉ）／（ｍ−１）｝＋Ｌｃ（ｍ）・｛ｉ／（ｍ−１）｝…（７）
Ｌｄ（ｉ）＝Ｌｄ（１）・｛（ｍ−ｉ）／（ｍ−１）｝＋Ｌｄ（ｍ）・｛ｉ／（ｍ−１）｝…（８）
によって各頁Ｐの第一パラメータ、つまり所定領域Ｌｉの各角部の座標値が決定される。
なお、各角部の座標値は、Ｘ座標値、Ｙ座標値ともに以下の式（１）〜（８）に個別に代入することにより求められる。

次に、第二パラメータの決定方法について説明する。

図１８は最初の頁Ｐにおけるトリミング領域Ｑ１，Ｒ１を示す説明図であり、図１９はｉ番目の頁Ｐにおけるトリミング領域Ｑｉ，Ｒｉを示す説明図であり、図２０は最後（ｍ番目）の頁Ｐにおけるトリミング領域Ｑｍ，Ｒｍを示す説明図である。
左側の頁Ｐのトリミング領域Ｑ１の各角部をＱａ（１），Ｑｂ（１），Ｑｃ（１），Ｑｄ（１）とし、トリミング領域Ｑｍの各角部をＱａ（ｍ），Ｑｂ（ｍ），Ｑｃ（ｍ），Ｑｄ（ｍ）とし、ｉ番目の頁Ｐにおけるトリミング領域Ｑｉの各角部をＱａ（ｉ），Ｑｂ（ｉ），Ｑｃ（ｉ），Ｑｄ（ｉ）とすると、ｉ番目の頁Ｐにおけるトリミング領域Ｑｉの各角部の座標値は、トリミング領域Ｑ１の各角部の座標値と、トリミング領域Ｑｍの各角部の座標値と、頁番号とを用いて線形補間する以下の式（９）〜（１２）により求められる。

Ｑａ（ｉ）＝Ｑａ（１）・｛（ｍ−ｉ）／（ｍ−１）｝＋Ｑａ（ｍ）・｛ｉ／（ｍ−１）｝…（９）
Ｑｂ（ｉ）＝Ｑｂ（１）・｛（ｍ−ｉ）／（ｍ−１）｝＋Ｑｂ（ｍ）・｛ｉ／（ｍ−１）｝…（１０）
Ｑｃ（ｉ）＝Ｑｃ（１）・｛（ｍ−ｉ）／（ｍ−１）｝＋Ｑｃ（ｍ）・｛ｉ／（ｍ−１）｝…（１１）
Ｑｄ（ｉ）＝Ｑｄ（１）・｛（ｍ−ｉ）／（ｍ−１）｝＋Ｑｄ（ｍ）・｛ｉ／（ｍ−１）｝…（１２）

他方、右側の頁Ｐのトリミング領域Ｒ１の各角部をＲａ（１），Ｒｂ（１），Ｒｃ（１），Ｒｄ（１）とし、トリミング領域Ｒｍの各角部をＲａ（ｍ），Ｒｂ（ｍ），Ｒｃ（ｍ），Ｒｄ（ｍ）とし、ｉ番目の頁Ｐにおけるトリミング領域Ｒｉの各角部をＲａ（ｉ），Ｒｂ（ｉ），Ｒｃ（ｉ），Ｒｄ（ｉ）とすると、ｉ番目の頁Ｐにおけるトリミング領域Ｒｉの各角部の座標値は、トリミング領域Ｒ１の各角部の座標値と、トリミング領域Ｒｍの各角部の座標値と、頁番号とを用いて線形補間する以下の式（１３）〜（１６）により求められる。

Ｒａ（ｉ）＝Ｒａ（１）・｛（ｍ−ｉ）／（ｍ−１）｝＋Ｒａ（ｍ）・｛ｉ／（ｍ−１）｝…（１３）
Ｒｂ（ｉ）＝Ｒｂ（１）・｛（ｍ−ｉ）／（ｍ−１）｝＋Ｒｂ（ｍ）・｛ｉ／（ｍ−１）｝…（１４）
Ｒｃ（ｉ）＝Ｒｃ（１）・｛（ｍ−ｉ）／（ｍ−１）｝＋Ｒｃ（ｍ）・｛ｉ／（ｍ−１）｝…（１５）
Ｒｄ（ｉ）＝Ｒｄ（１）・｛（ｍ−ｉ）／（ｍ−１）｝＋Ｒｄ（ｍ）・｛ｉ／（ｍ−１）｝…（１６）
なお、各角部の座標値は、Ｘ座標値、Ｙ座標値ともに上記の式（９）〜（１６）に個別に代入することにより求められる。

これらの式によって、各頁Ｐの第二パラメータ、つまりトリミング領域Ｑｉ，Ｒｉの各角部の座標値が決定する。

ステップＳ６では、ＣＰＵ４５は削除処理を実行する。
図２１は削除処理の流れを示すフローチャートである。
ステップＳ６１では、ＣＰＵ４５はｉ頁目の基準画像Ｇを記録部４１から読み出す。
ステップＳ６２では、ＣＰＵ４５は、ｉ頁目の基準画像Ｇの所定領域Ｋｉ，Ｌｉを上記の式（１）〜（８）により決定する。
図２２は基準画像Ｇに対して所定領域Ｋｉ，Ｌｉが指定された状態を示す説明図である。
そして、ＣＰＵ４５は、ステップＳ３で指定した削除対象色を所定領域Ｋｉ，Ｌｉから検出する。
図２３は、所定領域Ｋｉ内で検出された削除対象色（例えば肌色等）の検出エリアを示す模式図である。この図２３の場合では、所定領域Ｋｉ内に二つの検出エリアＵ１，Ｕ２が存在しており、検出エリアＵ１の方が大きい面積となっている。

ステップＳ６３では、ＣＰＵ４５は、所定領域Ｋｉ，Ｌｉ内における最も大きな削除対象色の塊（図２３の場合では検出エリアＵ１）を手指部分として特定する。
ステップＳ６４では、ＣＰＵ４５は、手指部分として特定した部分を、ステップＳ３で指定した背景色（頁の色、白に近い灰色、白に近いアイボリー色等）に置き換える。
図２４は、所定領域Ｋｉ，Ｌｉ内の手指部分を背景色に置換した後の基準画像Ｇを示す説明図である。
ステップＳ６５では、ＣＰＵ４５は、置換後の基準画像Ｇを手指削除画像として記録部４１に保存し、ステップＳ７に移行する。
このように削除処理では、ＣＰＵ４５が、第一パラメータに基づいて所定領域Ｋｉ，Ｌｉ内の少なくとも一部を削除することで、基準画像Ｇを補正するようになっている。つまり、ＣＰＵ４５が本発明に係る補正手段及び削除手段である。

図８に示すようにステップＳ７では、ＣＰＵ４５は切出処理を実行する。
図２５は切出処理の流れを示すフローチャートである。
ステップＳ７１では、ＣＰＵ４５はｉ頁目の手指削除画像Ｇ１（図２６参照）を記録部４１から読み出す。
ステップＳ７２では、ＣＰＵ４５はｉ頁目の手指削除画像Ｇ１のトリミング領域Ｑｉ，Ｒｉを上記の式（９）〜（１６）により決定する。
図２６は手指削除画像Ｇ１に対してトリミング領域Ｑｉ，Ｒｉが指定された状態を示す説明図である。
そして、ＣＰＵ４５は、トリミング領域Ｑｉ，Ｒｉを手指削除画像Ｇ１から切り出す。つまり、ＣＰＵ４５が本発明に係る切出手段である。

ステップＳ７３では、ＣＰＵ４５は、切り出した二つの画像のうち、頁順の先の画像を２×ｉ−１頁とし、後の画像を２×ｉ頁としてナンバリングする。本実施形態の場合、左開きの本Ｂが撮影対象であるため、左側の画像（トリミング領域Ｑｉ）が頁順の先の画像となり、右側の画像（トリミング領域Ｒｉ）が頁順の後の画像となる。右開きの本が撮影対象である場合は逆となる。

ステップＳ７４では、ＣＰＵ４５は、ナンバリングされた頁番号と、切出画像とを対応付けして、トリミング画像として記録部４１に保存し、ステップＳ８に移行する。

図８に示すようにステップＳ８では、ＣＰＵ４５はｉ値が最後の頁番号（ｍ）であるか否かを判断し、異なると判断した場合にはステップＳ５に移行し、同じと判断した場合には画像処理モードを終了する。

以上のように、本実施形態によれば、めくり始めの頁Ｐでの所定領域Ｋ，Ｌに関する第一パラメータと、めくり終わりの頁Ｐでの所定領域Ｋ，Ｌに関する第一パラメータに基づいて、任意の頁Ｐでの第一パラメータが決定されているので、全ての頁Ｐに対する第一パラメータを手動で個別に設定しなくとも、全ての頁Ｐに対する第一パラメータが自動で設定されることとなる。このように第一パラメータに基づいて任意の頁Ｐの所定領域Ｋ，Ｌが設定されると、全ての頁Ｐに対して手指ｈ１，ｈ２を含んだ所定領域Ｋ，Ｌを自動で最適に設定することができる。そして、全ての頁Ｐにおける所定領域Ｋ，Ｌの少なくとも一部が自動で削除されるので、多数の読み取り画像における手指ｈ１，ｈ２（所定部分）の削除処理を効率化することができる。

また、手指ｈ１，ｈ２に対応する削除対象色が予め指定されているので、その削除対象色を基準として削除する領域を決定することになる。したがって、削除領域の検出が容易となり、処理を軽く高速にすることができる。

また、背景色が予め指定されているので、その背景色を単に削除された領域に置き換えるだけで処理後の画像の見栄えを良くすることができる。背景色が予め指定されていれば背景色の選別の容易となり、処理を軽く高速にすることができる。

めくり始めの頁Ｐでのトリミング領域Ｑ，Ｒに関する第二パラメータと、めくり終わりの頁Ｐでのトリミング領域Ｑ，Ｒに関する第二パラメータに基づいて、任意の頁Ｐでの第二パラメータが決定されているので、全ての頁Ｐに対する第二パラメータを手動で個別に設定しなくとも、全ての頁Ｐに対する第二パラメータが自動で設定されることとなる。そして、全ての頁Ｐに対して、トリミング領域Ｑ，Ｒに基づく切出処理が行われるため、頁Ｐ毎に揃った画像を取り込むことが可能となる。

また、削除処理の前に切出処理を行う場合、切り出された画像内にある手指部分を囲むように所定領域を設定することになるが、すでに不要な部分のほとんどが取り除かれた状態であるために画像内に残存する手指部分は小さく、その位置や大きさも頁毎におおきくばらついてしまう。ばらつきが大きいと、上述した削除処理の確実性も不安定なものとなる。
しかしながら、上述したように削除処理の後に切出処理が実行されれば、手指ｈ１，ｈ２の頁毎のばらつきも抑えられるために、手指ｈ１，ｈ２に対する削除処理の確実性を高めることができる。

また、第一パラメータ及び第二パラメータの補間方法として線形補間が用いられているので、簡単な計算で各頁Ｐの第一パラメータ及び第二パラメータを補間することができる。したがって、補間にかかるパソコン４の処理を軽減化することが可能である。なお、正確性を求めるのであればより高度な補間方法を用いることも可能である。

また、本Ｂが載置される載置台３が設けられているので、安定して頁をめくることができるとともに、開いた頁Ｐを安定して保持することができる。

また、頁を押さえる手指の位置の基準となるマーク３４が載置台３に設けられているので、いずれの頁Ｐに対してもマーク３４を基準とすることでほぼ同じ位置に手指をおくことが可能となる。このように手指の位置が安定すれば、削除処理の正確性も高まることになる。

なお、本発明は上記実施形態に限らず適宜変更可能である。
例えば、本実施形態では、所定領域Ｋｉ，Ｌｉ内における最も大きな削除対象色の塊を手指として特定し、当該部分を背景色に置換する場合を例示して説明したが、所定領域Ｋｉ，Ｌｉ内の全ての削除対象色部分を背景色に置換することも可能である。

また、上記実施形態では、ユーザーが操作手段４２を操作することでトリミング領域Ｑ１，Ｒ１，Ｑｍ，Ｒｍを指定している場合を例示しているが、パソコン４によって最初の頁Ｐ及び最後の頁Ｐのそれぞれの基準画像Ｇに対して周知の画像処理を行うことで、文書領域と余白部分との境界を抽出し、その抽出結果からトリミング領域Ｑ１，Ｒ１，Ｑｍ，Ｒｍを特定することも可能である。パソコン４は、最初の頁Ｐの基準画像Ｇから特定されたトリミング領域Ｑ１，Ｒ１から、頁Ｐのめくり始め時点での第二パラメータを指定する。他方、パソコン４は、最後の頁Ｐの基準画像Ｇから指定されたトリミング領域Ｑｍ，Ｒｍから、頁Ｐのめくり終わり時点での第二パラメータを指定する。これにより、自動でパラメータを指定することが可能となる。

なお、自動でパラメータの指定を行った場合、ユーザーにとっては好ましくない指定結果となる場合も考えられる。このため、パソコン４は、画像処理によるトリミング領域Ｑ１，Ｒ１，Ｑｍ，Ｒｍの特定が行われた後に、画面上にそのトリミング領域Ｑ１，Ｒ１，Ｑｍ，Ｒｍを表示させることで、当該トリミング領域Ｑ１，Ｒ１，Ｑｍ，Ｒｍの良否を判断するようにユーザーに問い合わせる。ユーザーは、操作手段４２を操作することで良否を入力する。パソコン４は、操作手段４２を介して入力されたユーザーの応答結果が「良」である場合には、画像処理によるトリミング領域Ｑ１，Ｒ１，Ｑｍ，Ｒｍに基づいて第二パラメータを指定する。他方、操作手段４２を介して入力されたユーザーの応答結果が「否」である場合には、パソコン４は、画像処理によるトリミング領域Ｑ１，Ｒ１，Ｑｍ，Ｒｍを調整し、その調整後のトリミング領域Ｑ１，Ｒ１，Ｑｍ，Ｒｍに基づいて第二パラメータを指定する。
トリミング領域Ｑ１，Ｒ１，Ｑｍ，Ｒｍの調整方式としては、例えば、別の条件で画像処理を行って再度トリミング領域Ｑ１，Ｒ１，Ｑｍ，Ｒｍを特定する方式や、ユーザーが操作手段４２を操作して画面上のトリミング領域Ｑ１，Ｒ１，Ｑｍ，Ｒｍを微調整する方式などが挙げられる。

また、上記実施形態では、第一パラメータや第二パラメータを、頁Ｐのめくり始め時点及び頁Ｐのめくり終わり時点で決定している場合を例示して説明したが、この決定範囲としては多少の許容範囲を持たせてもよい。つまり、パソコン４は、頁Ｐのめくり始め近傍となる複数の頁Ｐからパラメータ決定に適した頁Ｐを選択し、当該選択された頁Ｐでの第一パラメータ及び第二パラメータを決定する。同様に、パソコン４は、頁Ｐのめくり終わり近傍となる複数の頁Ｐからパラメータ決定に適した頁Ｐを選択し、当該選択された頁Ｐでの第一パラメータ及び第二パラメータを決定する。これにより、パラメータ決定の正確性を高めることができる。
例えば、めくり始めやめくり終わりの頁には、トリミング領域Ｑ１，Ｒ１，Ｑｍ，Ｒｍ内に文字や画像が含まれていない可能性もある。この場合、正確なパラメータの決定が行われない可能性が高い。しかしながら、上述したようにパラメータ決定用の頁Ｐが複数の頁Ｐから選択されていれば、トリミング領域Ｑ１，Ｒ１，Ｑｍ，Ｒｍ内に文字が含まれている可能性も高くなり、パラメータ決定の正確性が高くなる。
具体的な処理としては、パソコン４は、パラメータ決定用の候補である各頁Ｐ内に文字を含む領域が存在しているか否かを判別し、存在している頁Ｐをパラメータ決定用の頁Ｐとして選択する。このとき、文字を含む領域がパラメータ決定用として最適な領域（範囲）に位置している頁Ｐを優先して選択する。これにより、パラメータ決定の正確性をより一層高めることが可能である。
そして、上述の補間式と同様の式を用い、めくり始め近傍の頁Ｐとのめくり終わり近傍の頁Ｐの間の頁Ｐだけでなくその外側の頁のパラメータを決定できることは言うまでもない。

本発明のいくつかの実施形態を説明したが、本発明の範囲は、上述の実施の形態に限定するものではなく、特許請求の範囲に記載された発明の範囲とその均等の範囲を含む。
以下に、この出願の願書に最初に添付した特許請求の範囲に記載した発明を付記する。付記に記載した請求項の項番は、この出願の願書に最初に添付した特許請求の範囲の通りである。

〔付記〕
＜請求項１＞
本を頁毎にめくり、当該本の頁を撮像手段によって頁毎に撮像し、撮像された画像のうち所定領域を補正して取り込む画像読み取り装置であって、
前記頁のめくり始め近傍の頁での前記所定領域に関する第一パラメータを指定する初期パラメータ指定手段と、
前記頁のめくり終わり近傍の頁での前記所定領域に関する第一パラメータを指定する終期パラメータ指定手段と、
前記初期パラメータ指定手段及び前記終期パラメータ指定手段により指定された前記第一パラメータに基づいて、任意の頁での前記第一パラメータを決定する決定手段と、
前記決定手段で決定された前記任意の頁の第一パラメータに基づいて、前記任意の頁の画像を補正する補正手段とを備え、
前記補正手段は、前記任意の頁の前記所定領域の少なくとも一部を、前記任意の頁の第一パラメータに基づいて削除する削除手段を含むことを特徴とする画像読み取り装置。
＜請求項２＞
請求項１記載の画像読み取り装置において、
前記削除手段は、前記所定領域内から削除対象色を指定する第一指定手段を含み、
前記削除手段は、前記第一指定手段によって指定された前記削除対象色を前記所定領域から削除することを特徴とする画像読み取り装置。
＜請求項３＞
請求項２記載の画像読み取り装置において、
前記削除手段は、前記所定領域内から背景色を指定する第二指定手段を含み、
前記削除手段は、前記第二指定手段によって指定された前記背景色で前記削除対象色を置き換えることを特徴とする画像読み取り装置。
＜請求項４＞
請求項１〜３のいずれか一項に記載の画像読み取り装置において、
前記初期パラメータ指定手段は、前記撮像された画像から切り出されるトリミング領域に関する第二パラメータを、前記頁のめくり始め近傍の頁から指定し、
前記終期パラメータ指定手段は、前記第二パラメータを前記頁のめくり終わり近傍の頁から指定し、
前記決定手段は、前記初期パラメータ指定手段及び前記終期パラメータ指定手段により指定された前記第二パラメータに基づいて、任意の頁での前記第二パラメータを決定し、
前記補正手段は、前記撮像された画像から前記任意の頁の第二パラメータに基づいて前記トリミング領域をトリミング画像として切り出す切出手段を有することを特徴とする画像読み取り装置。
＜請求項５＞
請求項４記載の画像読み取り装置において、
前記補正手段は、前記削除手段による削除処理の後に前記切出手段による切出処理を実行することを特徴とする画像読み取り装置。
＜請求項６＞
請求項１〜５の何れか一項に記載の画像読み取り装置において、
前記決定手段は、
前記初期パラメータ指定手段で指定された前記パラメータと、前記終期パラメータ指定手段で指定された前記パラメータと、頁番号とを用いて線形補間を行うことで、前記任意の頁における前記パラメータを決定することを特徴とする画像読み取り装置。
＜請求項７＞
請求項１〜６のいずれか一項に記載の画像読み取り装置において、
前記本が載置される載置台を前記撮像手段の下方に備えることを特徴とする画像読み取り装置。
＜請求項８＞
請求項７記載の画像読み取り装置において、
前記載置台には、前記頁を押さえる手指の位置の基準となるマークが設けられていることを特徴とする画像読み取り装置。
＜請求項９＞
本を頁毎にめくり、当該本の頁を撮像手段によって頁毎に撮像し、撮像された画像のうち所定領域を補正して取り込む画像読み取り方法であって、
前記頁のめくり始め近傍の頁での前記所定領域に関する第一パラメータを指定する初期パラメータ指定工程と、
前記頁のめくり終わり近傍の頁での前記所定領域に関する第一パラメータを指定する終期パラメータ指定工程と、
前記初期パラメータ指定工程及び前記終期パラメータ指定工程により指定された前記第一パラメータに基づいて、任意の頁での前記第一パラメータを決定する決定工程と、
前記決定工程で決定された前記任意の頁の第一パラメータに基づいて、前記任意の頁の画像を補正する補正工程とを含み、
前記補正工程は、前記任意の頁の前記所定領域の少なくとも一部を、前記任意の頁の第一パラメータに基づいて削除する削除工程を含むことを特徴とする画像読み取り方法。
＜請求項１０＞
頁毎にめくられた本の頁を撮像手段によって頁毎に撮像し、撮像された画像のうち所定領域を補正して取り込むコンピュータを、
前記頁のめくり始め近傍の頁での前記所定領域に関する第一パラメータを指定する初期パラメータ指定手段と、
前記頁のめくり終わり近傍の頁での前記所定領域に関する第一パラメータを指定する終期パラメータ指定手段と、
前記初期パラメータ指定手段及び前記終期パラメータ指定手段により指定された前記第一パラメータに基づいて、任意の頁での前記第一パラメータを決定する決定手段と、
前記決定手段で決定された前記任意の頁の第一パラメータに基づいて、前記任意の頁の画像を補正する補正手段として機能させ、
前記補正手段は、前記任意の頁の前記所定領域の少なくとも一部を、前記任意の頁の第一パラメータに基づいて削除する削除手段を含むことを特徴とするプログラム。

１ 書画カメラシステム（画像読み取り装置）
２ 書画カメラ（撮像手段）
３ 載置台
４ パソコン
２１ スタンド部
２２ カメラ
３１ 保持板
３２ 保持板
３３ 保持部
３４ マーク
４１ 記録部
４２ 操作手段
４３ ＲＯＭ
４４ ＲＡＭ
４５ ＣＰＵ（初期パラメータ指定手段、終期パラメータ指定手段、決定手段、補正手段、削除手段、第一指定手段、第二指定手段、切出手段）
Ｂ 本
Ｇ 基準画像
Ｇ１ 手指削除画像
Ｋ，Ｌ 所定領域
Ｐ 頁
Ｑ，Ｒ トリミング領域
Ｕ１，Ｕ２ 検出エリア

Claims (10)

1. 頁毎にめくられた本の頁を撮像手段によって頁毎に撮像し、撮像された画像のうち所定領域を補正して取り込む画像読み取り装置であって、
   前記頁をめくり始める側の頁での前記所定領域に関する第一パラメータを指定する初期パラメータ指定手段と、
   前記頁をめくり終える側の頁での前記所定領域に関する第一パラメータを指定する終期パラメータ指定手段と、
   前記初期パラメータ指定手段及び前記終期パラメータ指定手段により指定された前記第一パラメータに基づいて、任意の頁での前記第一パラメータを決定する決定手段と、
   前記決定手段で決定された前記任意の頁の第一パラメータに基づいて、前記任意の頁の画像を補正する補正手段とを備え、
   前記補正手段は、前記任意の頁の前記所定領域の少なくとも一部を、前記任意の頁の第一パラメータに基づいて削除する削除手段を含むことを特徴とする画像読み取り装置。
2. 請求項１記載の画像読み取り装置において、
   前記削除手段は、前記所定領域内から削除対象色を指定する第一指定手段を含み、
   前記削除手段は、前記第一指定手段によって指定された前記削除対象色を前記所定領域から削除することを特徴とする画像読み取り装置。
3. 請求項２記載の画像読み取り装置において、
   前記削除手段は、前記所定領域内から背景色を指定する第二指定手段を含み、
   前記削除手段は、前記第二指定手段によって指定された前記背景色で前記削除対象色を置き換えることを特徴とする画像読み取り装置。
4. 請求項１〜３のいずれか一項に記載の画像読み取り装置において、
   前記初期パラメータ指定手段は、前記撮像された画像から切り出されるトリミング領域に関する第二パラメータを、前記頁をめくり始める側の頁から指定し、
   前記終期パラメータ指定手段は、前記第二パラメータを、前記頁をめくり終える側の頁から指定し、
   前記決定手段は、前記初期パラメータ指定手段及び前記終期パラメータ指定手段により指定された前記第二パラメータに基づいて、任意の頁での前記第二パラメータを決定し、
   前記補正手段は、前記撮像された画像から前記任意の頁の第二パラメータに基づいて前記トリミング領域をトリミング画像として切り出す切出手段を有することを特徴とする画像読み取り装置。
5. 請求項４記載の画像読み取り装置において、
   前記補正手段は、前記削除手段による削除処理の後に前記切出手段による切出処理を実行することを特徴とする画像読み取り装置。
6. 請求項１〜５の何れか一項に記載の画像読み取り装置において、
   前記決定手段は、
   前記初期パラメータ指定手段で指定された前記第一パラメータと、前記終期パラメータ指定手段で指定された前記第一パラメータと、頁番号とを用いて線形補間を行うことで、前記任意の頁における前記第一パラメータを決定することを特徴とする画像読み取り装置。
7. 請求項１〜６のいずれか一項に記載の画像読み取り装置において、
   前記本が載置される載置台を前記撮像手段の下方に備えることを特徴とする画像読み取り装置。
8. 請求項７記載の画像読み取り装置において、
   前記載置台には、前記頁を押さえる手指の位置の基準となるマークが設けられていることを特徴とする画像読み取り装置。
9. 本を頁毎にめくり、当該本の頁を撮像手段によって頁毎に撮像し、撮像された画像のうち所定領域を補正して取り込む画像読み取り方法であって、
   前記頁をめくり始める側の頁での前記所定領域に関する第一パラメータを指定する初期パラメータ指定工程と、
   前記頁をめくり終える側の頁での前記所定領域に関する第一パラメータを指定する終期パラメータ指定工程と、
   前記初期パラメータ指定工程及び前記終期パラメータ指定工程により指定された前記第一パラメータに基づいて、任意の頁での前記第一パラメータを決定する決定工程と、
   前記決定工程で決定された前記任意の頁の第一パラメータに基づいて、前記任意の頁の画像を補正する補正工程とを含み、
   前記補正工程は、前記任意の頁の前記所定領域の少なくとも一部を、前記任意の頁の第一パラメータに基づいて削除する削除工程を含むことを特徴とする画像読み取り方法。
10. 頁毎にめくられた本の頁を撮像手段によって頁毎に撮像し、撮像された画像のうち所定領域を補正して取り込むコンピュータを、
    前記頁をめくり始める側の頁での前記所定領域に関する第一パラメータを指定する初期パラメータ指定手段と、
    前記頁をめくり終える側の頁での前記所定領域に関する第一パラメータを指定する終期パラメータ指定手段と、
    前記初期パラメータ指定手段及び前記終期パラメータ指定手段により指定された前記第一パラメータに基づいて、任意の頁での前記第一パラメータを決定する決定手段と、
    前記決定手段で決定された前記任意の頁の第一パラメータに基づいて、前記任意の頁の画像を補正する補正手段として機能させ、
    前記補正手段は、前記任意の頁の前記所定領域の少なくとも一部を、前記任意の頁の第一パラメータに基づいて削除する削除手段を含むことを特徴とするプログラム。

Images