JP4375182B2 - 文書画像表示装置、文書画像表示装置の制御方法、プログラム及び文書画像データ - Google Patents

Description

本発明は文書画像表示装置、文書画像表示装置の制御方法、プログラム及び文書画像データに関する。

文書画像のデータには、文字（テキスト）部分や、自然画などの部分（絵柄部分）など、互いに性状の異なる多くの画像要素が含まれ得る。こうした画像要素は、その性状の相違から、例えば圧縮処理において異なる方式での圧縮が適していたりするなど、画像要素ごとに異なる画像処理を行うことが好ましい場合がある。このため、文書画像のデータを、該文書画像に含まれる画像要素ごとに分けて生成した画像要素データを含んで構成するようにすることが行われている。

ところで、画像データの表示方法として、ＪＰＥＧ（Joint Picture Experts Group）圧縮処理された画像データのプログレッシブ表示が知られている（特許文献１）。かかる表示方法によれば、画像が完全に表示される前であっても、ユーザがその全体像を把握できるよう図ることができる。
特開平１０−１０８１８０号公報

文書画像に含まれる画像要素ごとに分けて生成した画像要素データを含んで構成されるような文書画像データについても、以上の画像データの表示方法のように、文書画像が完全に表示される前にユーザがその全体像を把握できるようにすることが望まれている。

本発明は上記課題に鑑みてなされたものであって、その目的は、文書画像に含まれる画像要素ごとに分けて生成した画像要素データを含んで構成されるような文書画像データについて、文書画像が完全に表示される前にユーザがその全体像を把握できるように図る文書画像表示装置、文書画像表示装置の制御方法、プログラム及び文書画像データを提供することにある。

上記課題を解決するために、本発明に係る文書画像表示装置は、文書画像を表す画像データであって、該文書画像に含まれる画像要素ごとに分けて生成された画像要素データを含んで構成される文書画像データを取得する文書画像データ取得手段と、前記文書画像データに含まれる各画像要素データに基づく画像を、前記文書画像における各画像要素に係る面積に基づく順序で表示手段に表示させるようにして、前記文書画像を前記表示手段に表示させる文書画像表示制御手段と、を含むことを特徴とする。

また、本発明に係る文書画像表示装置の制御方法は、文書画像を表す画像データであって、該文書画像に含まれる画像要素ごとに分けて生成された画像要素データを含んで構成される文書画像データを取得する文書画像データ取得ステップと、前記文書画像データに含まれる各画像要素データに基づく画像を、前記文書画像における各画像要素に係る面積に基づく順序で表示手段に表示させるようにして、前記文書画像を前記表示手段に表示させる文書画像表示制御ステップと、を含むことを特徴とする。

また、本発明に係るプログラムは、文書画像表示装置として、例えばパーソナルコンピュータなどのコンピュータを機能させるためのプログラムであって、文書画像を表す画像データであって、該文書画像に含まれる画像要素ごとに分けて生成された画像要素データを含んで構成される文書画像データを取得する文書画像データ取得手段、及び、前記文書画像データに含まれる各画像要素データに基づく画像を、前記文書画像における各画像要素に係る面積に基づく順序で表示手段に表示させるようにして、前記文書画像を前記表示手段に表示させる文書画像表示制御手段、として前記コンピュータを機能させるプログラムである。

本発明では、文書画像を表す画像データであって、該文書画像に含まれる画像要素ごとに分けて生成された画像要素データを含んで構成される文書画像データが取得される。そして、文書画像データに含まれる各画像要素データに基づく画像が、該文書画像における各画像要素に係る面積に基づく順序で表示手段に表示されるようにして、該文書画像が表示手段に表示される。このため、文書画像に含まれる画像要素ごとに分けて生成した画像要素データを含んで構成されるような文書画像データについて、文書画像が完全に表示される前にユーザがその全体像を把握できるように図るできるようになる。

また、本発明の一態様は、前記文書画像データは、前記文書画像における各画像要素の表示位置を特定するための位置特定情報を含み、前記文書画像表示制御手段は、前記文書画像データに含まれる各画像要素データに基づく画像を前記表示手段に表示させる順序を、前記文書画像データに含まれる位置特定情報に基づいて決定することを特徴とする。

また、本発明の一態様は、前記文書画像データは、前記文書画像における各画像要素に係る面積に基づいて決定された、各画像要素データの表示順序を示す表示順序情報を含み、前記文書画像表示制御手段は、前記文書画像データに含まれる各画像要素データに基づく画像を、前記文書画像データに含まれる表示順序情報に基づく順序で前記表示手段に表示させることを特徴とする。

また、本発明に係る文書画像データは、文書画像を表す画像データであって、該文書画像に含まれる画像要素ごとに分けて生成された画像要素データを、該文書画像における各画像要素に係る面積に基づく順序で含んで構成される文書画像データである。

また、本発明に係る文書画像データは、文書画像を表す画像データであって、該文書画像に含まれる画像要素ごとに分けて生成された画像要素データと、該文書画像における各画像要素に係る面積に基づいて決定された各画像要素データの表示順序を示す表示順序情報と、を含んで構成される文書画像データである。

以下、本発明の好適な実施の一形態について図面に基づき詳細に説明する。

図１は、本実施の形態に係る文書画像表示装置の全体構成を示す図である。文書画像表示装置１０は、例えばパーソナルコンピュータなどのコンピュータによって構成され、同図に示すように、制御部１１と、記憶部１２と、表示部１３と、入力部１４とを含んでいる。

制御部１１は、記憶部１２に格納されているプログラムに従って動作しており、例えば複数ページを有する文書データを表示部１３に表示させる処理を実行する。

記憶部１２は、コンピュータ読み取り可能な情報記憶媒体と当該情報記憶媒体に対してデータを書き込み、又は当該情報記憶媒体かデータを読み出す装置（例えばハードディスク装置やメモリ装置）によって実現される。記憶部１２は、制御部１１によって実行されるプログラムを記憶する。また、記憶部１２は、制御部１１の処理の過程で必要となる種々のデータを記憶するワークメモリとしても動作する。

表示部１３は、例えばディスプレイ装置によって実現され、制御部１１から入力される指示に従って画像の表示を行う。入力部１４は、例えばマウスやキーボードなどの入力装置によって実現され、ユーザの操作を受け付ける。

本実施の形態に係る文書画像表示装置１０では、複数のページからなる文書データを表示するための文書表示プログラムが実行される。

ここで、この文書表示プログラムの対象となる文書データについて説明する。

文書表示プログラムで扱われる文書データは、複数のページからなる文書のデータであり、各ページごとの画像データ（各ページの画像を表す画像データ）を含んで構成される。

図２は、文書データの各ページの画像（文書画像）の一例を示している。同図に示すように、文書データの各ページの画像には、文字部分２０、線画部分２１、写真部分２２などの画像要素が含まれ得る。こうした画像要素は互いに性状が異なることから、例えば圧縮処理において異なる方式での圧縮が適していたりするなど、画像要素ごとに異なる画像処理を行うことが好ましい場合が多い。このため、文書表示プログラムの対象となる文書データでは、各ページごとの画像データがそのページに含まれる画像要素ごとに分けて生成された画像要素データ（すなわち、そのページの画像に含まれる各画像要素に対応する画像要素データ）の集合（画像要素データ群）として構成されている。

具体的には、例えば図３に示すように、各ページの画像データ（文書画像データ）は、文字部分２０を表す画像要素データ３０（以下、文字レイヤデータ３０と呼ぶ。）と、線画部分２１を表す画像要素データ３１（以下、線画レイヤデータ３１と呼ぶ。）と、写真部分２２を表す画像要素データ３２（以下、写真レイヤデータ３２と呼ぶ。）との少なくとも１つを含んで構成される、階層構造形式の画像データとなっている。

これらの文字レイヤデータ３０，線画レイヤデータ３１，写真レイヤデータ３２は、各々に係る画像要素の属性（性状）に応じた圧縮方式で圧縮されている。例えば、文字部分２０を表示するための文字レイヤデータ３０は、かかる画像要素に適した２値系圧縮方式（例えば、Ｇ４，ＪＢＩＧ，ＪＢＩＧ２などの圧縮方式）によって圧縮された画像データとなっている。また、線画部分２１を表示するための線画レイヤデータ３１や、写真部分２２を表示するための写真レイヤデータ３２は、かかる画像要素に適した多値系圧縮方式（例えば、ＪＰＥＧ，ＪＰＥＧ２０００などの圧縮方式）によって圧縮された画像データとなっている。

文書画像データには、以上のレイヤデータの他に、文書画像の下地部分を表す下地画像データが含まれる。また、各画像要素の外接矩形の座標情報（文書画像における各画像要素の表示位置を特定するための情報）が含まれる。

次に、文書表示プログラムによって表示される画面について説明する。

図４は、文書表示プログラムによって表示されるページ一覧画面の一例を示している。このページ一覧表示画面は、文書表示プログラムが起動され、表示対象の文書データが特定された場合に表示される。同図に示すように、このページ一覧画面には、ページアイコン４０と、カーソル４１とが表示される。

ページアイコン４０は、文書データの各ページに対応している。このページ一覧画面では、ページアイコン４０として、各ページに含まれる画像要素のうちの最も面積が大きいもののみが表示されるようになっている。例えば、図２に示すページの場合であれば、写真部分２２、すなわち写真レイヤデータ３２に基づく画像（サムネイル画像）がページアイコン４０として表示される。なお、ページ一覧画面には、すべてのページについてページアイコン４０が表示されるようにしてもよいし、一部のページについてページアイコン４０が表示されるようにしてもよい。

カーソル４１は、マウス（入力部１４）に対する操作に応じて画面上を移動する。ページ一覧画面では、ユーザがカーソル４１を所望のページアイコン４０上に移動させ、マウスをクリックすると（すなわち、所望のページアイコン４０をクリックすると）、ページ参照画面が表示され、そのページアイコン４０に対応するページの画像が表示される。

図５は、文書表示プログラムによって表示されるページ参照画面の一例を示している。同図に示すように、このページ参照画面には、文書画像表示領域５１と、カーソル５１と、前ボタン５２と、次ボタン５３と、ページ一覧ボタン５４とが含まれている。

文書画像表示領域５０には、文書データの各ページの画像（文書画像）が表示される。カーソル５１は、マウス（入力部１４）に対する操作に応じて画面上を移動する。このページ参照画面では、ユーザがカーソル５１を文書表示領域５０上に移動させ、マウスをクリックすると（すなわち、文書表示領域５０をクリックすると）、現在表示中のページの次のページの画像が文書表示領域５０に表示されるようになっている。同様に、ユーザが次ボタン５３をクリックした場合にも、次のページの画像が文書表示領域５０に表示されるようになっている。また、ユーザが前ボタン５２をクリックすると、現在表示中のページの前のページの画像が文書表示領域５０に表示されるようになっている。また、ユーザがページ一覧ボタン５４をクリックすると、ページ一覧画面（図４）が表示される。

このページ参照画面では、文書画像表示領域５０に表示対象ページの画像が表示される場合、各画像要素に係る面積の大きい順で、各画像要素が表示されるようになっている。すなわち、最も面積の大きいものから順に表示されるようになっている。例えば、例えば図５の場合であれば（図２に示すページの画像が表示される場合であれば）、まず最初に写真部分５７が表示され、その次に線画部分５６が表示され、最後に文字部分５５が表示されるようになっている。このため、文書画像が完全に表示される前であっても、ユーザが表示対象のページの特徴を把握できるようになっている。以下、この点に関する構成について詳しく説明する。

図６は、文書画像表示装置１０において実現される機能ブロックのうち、本発明に関連するものを中心として示している。同図に示すように、文書画像表示装置１０は、文書画像データ取得部６０と、表示制御部６１と、表示部６２とを含んで構成される。これらの機能は、コンピュータにより読み取り可能な情報記憶媒体や通信ネットワークによって供給されるプログラムが制御部１１によって実行されることによって実現される。

［１．文書画像データ取得部］
文書画像データ取得部６０は、文書画像を表す画像データとして、図３において説明したように構成される文書画像データを取得する。文書画像データ取得部６０は、例えば文書画像データが記憶部１２（ハードディスク装置など）に記憶されている場合には、文書画像データを記憶部１２から読み出す。また例えば、文書画像表示装置１０と通信可能な文書管理装置に文書画像データが記憶されている場合には、文書管理装置に記憶されている文書画像データを取得する。例えば、文書画像データ取得部６０は、文書画像データ配信要求（文書データ配信要求）を文書管理装置に送信し、該文書データ取得要求に応じて文書管理装置から送信される文書画像データ（文書データ）を受信する。

具体的には、文書画像データ取得部６０は、ページ一覧画面（図４）においてページアイコン４０がクリックされた場合や、ページ参照画面（図５）において文書画像表示領域５０、前ボタン５２、次ボタン５３がクリックされた場合に、文書表示領域５０の表示対象となるページの画像データ（文書画像データ）を取得する。

［２．文書画像表示制御部］
表示制御部６１は、文書画像データ取得部６０において取得された文書画像データに基づいて、文書画像を表示部６２に表示させる。特に、表示制御部６１は、文書画像データに含まれる各画像要素データに基づく画像を、文書画像における各画像要素に係る面積に基づく順序で表示部６２に表示させるようにして、文書画像を表示部６２に表示させる。

例えば、表示制御部６１は、文書画像データに含まれる各画像要素データに基づく画像を表示部６２に表示させる順序を、各画像要素の外接矩形の座標情報（位置特定情報）に基づいて決定するようにしてもよい。なお、かかる座標情報は文書画像データに含まれているものである。

具体的には、表示制御部６１は、各画像要素の外接矩形の座標情報を文書画像データから読み出す。そして、各画像要素ごとにその外接矩形の面積を算出する。そして、各画像要素ごとに算出した面積に基づいて、各画像要素データに基づく画像を表示部６２に表示させる順序（表示順）を決定する。例えば、算出した面積が大きい画像要素から順に表示されるように表示順を決定する。なお、各画像要素ごとにその外接矩形に含まれる実画素数を算出し、各画像要素ごとに算出した実画素数に基づいて表示順を決定するようにしてもよい。例えば、算出した実画素数の大きい画像要素から順に表示されるように表示順を決定するようにしてもよい。

表示制御部６１は、画像要素データの表示順を決定したら、その表示順に従って、各画像要素データに基づく画像を表示部６２に表示させていく。具体的には次のように処理を行う。なお、ここでは、画像要素データの表示順が写真レイヤデータ３２、線画レイヤデータ３１、文字レイヤデータ３０と決定されたこととして説明する。

表示制御部６１は、まず文書画像データから下地画像データを読み出して、下地の画像データを生成する。次に、表示制御部６１は、写真レイヤデータ３２を文書画像データから取り出して伸長し、写真部分２２の外接矩形の座標情報に基づいて、下地の画像データ上の対応する位置に、当該伸長した画像データを上書きした画像データを生成する。そして、表示制御部６１は、この画像データを表示部６２に表示させる。

ここで、写真部分２２に複数のオブジェクト（オブジェクト領域）が含まれる場合、表示制御部６１は、オブジェクト領域の座標情報に基づく表示順で、各オブジェクト（各オブジェクト領域）を表示部６２に表示させるようにしてもよい。例えば、各オブジェクトの外接矩形の基準座標値（例えば左上座標値）を取得し、その基準座標値の小さい順で各オブジェクトを表示部６２に表示させるようにしてもよい。また例えば、各オブジェクトの外接矩形の面積を取得し、その面積の大きい順で各オブジェクトを表示部６２に表示させるようにしてもよい。なお、線画レイヤデータ３１に基づく画像や文字レイヤデータ３０に基づく画像を表示させる場合についても同様にしてよい。

次に、表示制御部６１は、線画レイヤデータ３１を文書画像データから取り出して伸長し、線画部分２１の外接矩形の座標情報に基づいて、上記生成した画像データ上の対応する位置に、当該伸長した画像データを上書きした画像データを生成する。そして、表示制御部６１は、当該上書きした画像データを表示部６２に表示させる。

次に、表示制御部６１は、文字レイヤデータ３０を文書画像データから取り出して伸長し、文字部分２０の外接矩形の座標情報に基づいて、上記生成した画像データ上の対応する位置に、当該伸長した画像データを上書きした画像データを生成する。そして、表示制御部６１は、当該上書きした画像データを表示部６２に表示させる。こうして、表示部６２には文書画像が表示される。

なお、文書データのデータ構成を例えば図７や図８に示すようにすることによって、表示制御部６１における処理がより簡易に実現されるようにしてもよい。なお、図７及び図８は、図２に示すように、写真部分２２、線画部分２１、文字部分２０の順で面積が大きいような文書画像の文書画像データの例を示している。

例えば図７に示すように、文書画像に含まれる画像要素ごとに分けて生成された画像要素データを、該文書画像における各画像要素に係る面積に基づく順序で含ませて、文書画像データを構成するようにしてもよい。なお、ヘッダデータには、例えば各画像要素の外接矩形の座標情報などが含まれる。

この場合、表示制御部６１は、文書画像データの先頭から順にヘッダデータ、下地画像データ、各画像要素データを取り出していき、その画像要素データに基づく画像を表示部６２に表示させていくようにすればよい。こうすれば、表示制御部６１において、各画像要素データの表示順を決定する必要がなくなり、表示制御部６１における処理負担を軽減することができるようになる。

また、例えば図８に示すように、文書画像に含まれる画像要素ごとに分けて生成された画像要素データと、該文書画像における各画像要素に係る面積に基づいて決定された各画像要素データの表示順序を示す表示順序情報とを含ませて、文書画像データを構成するようにしてもよい。この場合、ヘッダデータには各画像要素の外接矩形の座標情報などとともに、例えば図９に示すような表示順序情報が含まれるようにすればよい。同図に示すように、この表示順序情報は、表示順序を示す情報と、画像要素データの読み出し開始位置とを対応づけてなるものとなっている。このように、表示順序情報は、表示順序を示す情報と、その順序で読み出すべき画像要素データを特定する情報とを対応づけてなるものとすればよい。

この場合、表示制御部６１は、文書画像データからまずヘッダデータを取り出し、そこから表示順序情報を読み出す。そして、下地画像データを読み出した後は、表示順序情報に定められた順序で所定の読み出し開始位置から画像要素データを読み出していき、その画像要素データに基づく画像を表示部６２に表示させていくようにすればよい。こうすれば、表示制御部６１において、各画像要素データの表示順を決定する必要がなくなり、表示制御部６１における処理負担を軽減することができるようになる。

以上に説明したように、文書画像表示装置１０は、文書画像を表示する場合、該文書画像に含まれる画像要素のうち、相対的に面積の大きい画像要素から順に表示する。このため、文書画像が完全に表示される前であっても、ユーザが文書画像の全体的な特徴を把握できるよう図ることができる。

なお、本発明は以上説明した実施の形態に限定されるものではない。

例えば、本発明が対象とするのは複数のページ（文書画像）からなる文書データに限られず、本発明は一の文書画像や、複数の文書画像を含んでなる文書画像群を対象とすることができるものである。

また例えば、表示すべき１つのオブジェクトを予め面積の異なる複数のレイヤに分割し、面積によって表示されるレイヤ順に、例えば、オブジェクトの外形画像から内側の画像まで数段階に分けることにより、外形画像から順にプログレッシブに表示させるようにしてもよい。

本実施の形態に係る文書画像表示装置の構成を示す図である。 文書画像の一例を示す図である。 文書画像データの構成を示す図である。 ページ一覧画面の一例を示す図である。 ページ参照画面の一例を示す図である。 本実施の形態に係る文書画像表示装置の機能ブロック図である。 文書画像データのデータ構成を示す図である。 文書画像データのデータ構成を示す図である。 表示順序情報の一例を示す図である。

符号の説明

１０ 文書画像表示装置、１１ 制御部、１２ 記憶部、１３ 表示部、１４ 入力部、２０，５５ 文字部分、２１，５６ 線画部分、２２，５７ 写真部分、３０ 文字レイヤデータ、３１ 線画レイヤデータ、３２ 写真レイヤデータ、４０ ページアイコン、４１，５１ カーソル、５０ 文書画像表示領域、５２ 前ボタン、５３ 次ボタン、５４ ページ一覧ボタン、６０ 文書画像データ取得部、６１ 表示制御部、６２ 表示部。

Claims (7)

1. 画像要素ごとに分けて生成された画像要素データを含んで構成されている文書データのページを取得する手段と、
   前記文書データのページのサムネイル画像を表示させる手段であって、該ページに含まれる画像要素のうちで最も面積が大きい画像要素を前記ページのサムネイル画像として表示させるサムネイル画像表示制御手段と、
   を含むことを特徴とする文書画像表示装置。
2. 請求項１に記載の文書画像表示装置において、
   前記サムネイル画像表示制御手段は、前記文書データの複数のページのサムネイル画像を表示させ、
   前記文書画像表示装置は、いずれかのページのサムネイル画像が指示された場合、該ページを表示させるページ表示制御手段を含む、
   ことを特徴とする文書画像表示装置。
3. 請求項２に記載の文書画像表示装置において、
   前記ページ表示制御手段は、前記ページを表示させる場合、該ページに含まれる各画像要素を、該ページにおける各画像要素に係る面積に基づく順序で表示手段に表示させるようにして、該ページを表示させることを特徴とする文書画像表示装置。
4. 請求項３に記載の文書画像表示装置において、
   前記文書データは、前記ページにおける各画像要素の表示位置を特定するための位置特定情報を含み、
   前記ページ表示制御手段は、前記ページを表示させる場合、該ページに含まれる各画像要素を前記表示手段に表示させる順序を、前記文書データに含まれる位置特定情報に基づいて決定する、
   ことを特徴とする文書画像表示装置。
5. 請求項３に記載の文書画像表示装置において、
   前記文書データは、前記ページにおける各画像要素に係る面積に基づいて決定された、該ページにおける各画像要素の表示順序を示す表示順序情報を含み、
   前記ページ表示制御手段は、前記ページを表示させる場合、該ページに含まれる各画像要素を、前記文書データに含まれる表示順序情報に基づく順序で前記表示手段に表示させる、
   ことを特徴とする文書画像表示装置。
6. 画像要素ごとに分けて生成された画像要素データを含んで構成されている文書データのページを取得するステップと、
   前記文書データのページのサムネイル画像を表示させるステップであって、該ページに含まれる画像要素のうちで最も面積が大きい画像要素を前記ページのサムネイル画像として表示させるステップと、
   を含むことを特徴とする文書画像表示装置の制御方法。
7. 文書画像表示装置としてコンピュータを機能させるためのプログラムであって、
   画像要素ごとに分けて生成された画像要素データを含んで構成されている文書データのページを取得する手段、及び
   前記文書データのページのサムネイル画像を表示させる手段であって、該ページに含まれる画像要素のうちで最も面積が大きい画像要素を前記ページのサムネイル画像として表示させる手段、
   として前記コンピュータを機能させるプログラム。

Images