JP5665459B2 - 携帯端末、制御方法及びプログラム - Google Patents

Description

本発明は、ノート型パソコン（以下、パソコンを「ＰＣ」と記述する）や電子書籍リーダーとして利用できる携帯端末に関する。

近年、ノート型ＰＣやモバイルＰＣ等の小型の携帯型ＰＣ（携帯端末とも記述する）は、使用者の膝上や、机上、屋外使用など、様々な形態で使用されるようになってきている。それに伴って、カメラ付携帯電話のようにＰＣへのカメラ内蔵が望まれるようになっている。一方、電子書籍リーダーやノート型ＰＣ等の複数の利用態様を有する携帯端末などが提案されている。

例えば、特許文献１では、ノートＰＣにおいてカメラ内蔵表示パネルにより、表示パネルに搭載したカメラの撮影方向を一定方向に維持させる電子機器が開示されている。

また、特許文献２では、ノートモードとタブレットモードを切り替え可能なカメラ付携帯装置において、カメラ操作手段を適正に配置し、それぞれの操作手段に適正な機能を割り付けることができるカメラ付携帯装置が開示されている。ノートモードとは、キーボード入力部と表示装置とをノート型ＰＣのように開いて使用するモードである。また、タブレットモードとは、表示装置を裏返して入力部上に重ねて使用するモードである。

特開平１１−９５８６５号公報 特開２００９−２２３４６９号公報

特許文献１に記載されている電子機器は、テレビ電話などのようにオペレータの姿や表情を撮影し、相手側に映像として伝えるものである。このため、上記特許文献１は表示パネル上部にカメラを搭載し、机上などにノート型ＰＣを置いて使用することを前提としているため、屋外など様々な形態では使用できない。

また、特許文献２に記載されているカメラ付携帯装置は、ノートモードとタブレットモードとに切り替え可能であり、カメラ撮影中に表示画面を縦横回転させた場合、カメラ画像と操作画面が正立像になるように表示画面を回転させるようにしている。しかし、キーボード入力部とタッチパッド操作部とが配設されているため、表示画面を大きくするには携帯装置自体のサイズを大型化しなければならない。

また、屋内や屋外使用など様々な形態で使用し、電子書籍リーダーやノート型ＰＣ等の複数の利用態様に対応するためには、携帯端末の周囲の明るさに応じて、表示画面の明るさを調整する必要がある。しかし、携帯端末の周囲の明るさに応じて表示画面の明るさを常に調整してしまうと、携帯端末の利用態様によっては表示画面の明るさを頻繁に変更してしまうことになり、携帯端末の使用者にとって煩わしくなる。

本発明は、上記問題点に鑑みてなされたものであり、携帯端末の利用態様に応じて表示部の明るさを調整することが可能な携帯端末、制御方法及びプログラムを提供することを目的とする。

上記課題を解決するため、本発明に係る携帯端末は、第１の表示部を有する第１の筐体と、第２の表示部を有する第２の筐体と、が開閉可能な携帯端末であって、前記携帯端末の周囲の明るさを検知する照度センサと、前記携帯端末の動きを検知するセンサと、前記照度センサで検知した明るさに基づいて前記第１の表示部と前記第２の表示部との明るさを調整する輝度調整手段と、前記第２の表示部の裏側の前記第２の筐体に配設され、前記携帯端末の周囲を撮影するカメラと、前記カメラにより取得した画像に応じて、前記輝度調整手段による前記表示部の明るさ調整を停止する制御手段と、を有し、前記制御手段は、前記センサにより前記携帯端末の静止状態を検知した場合に、前記カメラにより前記携帯端末の周囲を撮影することを特徴とする。

本発明に係る制御方法は、第１の表示部を有する第１の筐体と、第２の表示部を有する第２の筐体と、が開閉可能な携帯端末で行う制御方法であって、前記携帯端末は、前記携帯端末の周囲の明るさを検知する照度センサと、前記携帯端末の動きを検知するセンサと、前記第２の表示部の裏側の前記第２の筐体に配設され、前記携帯端末の周囲を撮影するカメラと、を有し、前記照度センサで検知した明るさに基づいて前記第１の表示部と前記第２の表示部との明るさを調整する輝度調整工程と、前記カメラにより取得した画像に応じて、前記輝度調整工程による前記表示部の明るさ調整を停止する制御工程と、を有し、前記制御工程は、前記センサにより前記携帯端末の静止状態を検知した場合に、前記カメラにより前記携帯端末の周囲を撮影することを特徴とする。

本発明に係るプログラムは、上記に記載の制御方法をコンピュータに実行させることを特徴とする。

本発明により、携帯端末の利用態様に応じて表示部の明るさを調整することが可能な携帯端末、制御方法及びプログラムを提供することが可能になる。

本発明の実施形態に係る携帯端末の外観図である。 本発明の実施形態に係る携帯端末を水平面に載置した状態図である。 本発明の実施形態に係る携帯端末を横に略１８０度開いた状態図である。 本発明の実施形態に係る携帯端末を縦に略１８０度開いた状態図である。 本発明の実施形態に係る携帯端末の内部構成図である。 本発明の実施形態に係る携帯端末の内部構成図である。 本発明の実施形態に係る携帯端末の表示部の制御例を説明する図である。 本発明の実施形態に係る携帯端末の表示部の制御例を説明する図である。

本発明の好適な実施の形態について以下に図面を参照して詳細に説明する。

＜携帯端末の概要＞
まず、図１〜図４を参照しながら、本実施形態の携帯端末の概要について説明する。

最初に概要説明の前に、本実施形態における携帯端末の、縦向き、横向き、内側の額縁、外側の額縁について定義しておく。
縦向きとは、図２に示す第１の表示部と第２の表示部を上下に開いた状態で、ノート型ＰＣのように机上等に置いて使用するラップトップ状態の使用形態を示し、第１の表示部１をディスプレイとし、第２の筐体２をキーボードとして使用する使用形態を示す。横向きとは、図３に示す第１の表示部１と第２の表示部２を左右に開いた状態で、見開きの書籍リーダーのように第１の表示部１と第２の表示部２を左右に開いて両方をディスプレイとして使用する使用形態を示す。
内側の額縁とは、図２及び図３に示す、第１の表示部１と第２の表示部２の間に挟まれた領域の額縁１Ｄ，２Ｄを示す。外側の額縁とは、図１及び図３に示す、内側の額縁１Ｄ，２Ｄを除いた、第１の表示部１と第２の表示部２の外側に配置される額縁１Ａ，１Ｂ，１Ｃと２Ａ，２Ｂ，２Ｃのことを示す。

本実施形態の携帯端末１００は、第１の表示部1を有する第１の筐体１０と、第２の表示部２を有する第２の筐体２０と、が二軸ヒンジ３０Ａ、３０Ｂにより連結され開閉可能な携帯端末１００である。

図１及び図２に示すように、本実施形態の携帯端末１００は、第１の筐体１０と第２の筐体２０を閉じた状態で、第２の表示部２の裏側の操作部７とは離れた位置にある方のヒンジ３０Ａに近い位置にカメラ３が配設されている。これは図３に示した第１の表示部１と第２の表示部２を左右に開いた横向きで持った時でもカメラ３を手で覆うことがない位置としたからである。

また、図２に示すように、本実施形態の携帯端末１００は、第１の表示部と第２の表示部を上下に開いた縦向きにして第２の筐体２０を机上等の水平面に載置した状態（以下、ラップトップ状態と記述する）では、カメラ３は机上等の水平面を撮影することとなり、この状態を検知したらラップトップの使用形態と判断し、第１の表示部１と第２の表示部の輝度調整を停止して、自動又は手動で第２の表示部２に携帯端末１００を操作するタッチパネル液晶の操作画面（ソフトウエアキーボード等）を少なくとも表示するようになっている。

従って、本実施形態の携帯端末１００は、図２に示すように、第１の表示部と第２の表示部を上下に開いた縦向きにして机上等に置いた場合、ノート型ＰＣのように使用することができる。

また、図３に示すように、携帯端末１００を第１の表示部１と第２の表示部２を左右に開いた横向きにして見開きの書籍のように使用することもできる。さらに、第１の筐体１０と第２の筐体２０とを表示部１、２よりも外側の額縁１Ｂ，２Ｂ、１Ｃ，２Ｃに配置した２つの二軸ヒンジ３０Ａ、３０Ｂにより連結しているため、図３、図４に示すように、第１の表示部１と第２の表示部２とを近接して略１８０度まで開くことが可能であり、第１の表示部１と第２の表示部２とを平らな状態にすることができる。この状態の時は、照度センサ４が携帯端末１００の使用環境の照度を検知して表示部１、２の輝度調整をするようになっている。

そしてこの完全に平らに開いた状態でカメラ撮影モードを選択した場合、カメラ３で撮影した画像を第１の表示部１と第２の表示部２とに跨って全画面表示をすることが可能であり、表示部１、２を大型のファインダーとしてカメラ撮影を行うことが可能となっている。
以下、添付図面を参照しながら、本実施形態の携帯端末１００について詳細に説明する。

＜携帯端末の構成＞
最初に、図１〜図４を参照しながら、本実施形態の携帯端末１００の構成について説明する。

本実施形態の携帯端末１００は、第１の表示部１を有する第１の筐体１０と、第２の表示部２を有する第２の筐体２０と、が２つの二軸ヒンジ３０Ａ、３０Ｂにより連結して折り畳み可能になっている。なお二軸ヒンジは公知の構造のものが適用可能である。

図１に示すように、第２の筐体２０の第２の表示部２の裏側の操作部７とは離れた位置にある方のヒンジ３０Ａに近い位置にカメラ３が配設されている。第１および第２の筐体１０、２０の外側には、複数のランプ５と、第１および第２の筐体１０、２０を開くためのストッパーを解除するボタン８と、充電するための接続端子９と、が配設されている。

また図示しないが第２の筐体の外側には、電源ボタンと音量ボタンとが配設され、第１および第２の筐体の内部には、電池と回路基板とＳＤメモリーカード（ＳＤ Ｍｅｍｏｒｙ Ｃａｒｄ：登録商標）の差込口とアンテナとスピーカと各種センサとが配設されている。

本実施形態の携帯端末１００は、カメラ３を第２の表示部２の裏側の操作部７とは離れた位置にある方のヒンジ３０Ａに近い位置に配設したことを特徴とし、電子書籍リーダーのように両手で掴んで持った場合、例えば、図３に示すように携帯端末１００を第１の表示部１と第２の表示部２を左右に開いた横向きで持った時でも、図４に示すように携帯端末１００を第１の表示部と第２の表示部を上下に開いた縦向きで持った時でも、カメラ３を手で覆うことのない位置としたことである。

また、本実施形態の携帯端末１００は、携帯端末１００の周囲をカメラ３で撮影し、そのカメラ３で撮影した画像に基づいて、携帯端末１００の周囲の明るさ（照度）と、カメラ３で撮影した画像に占める所定の値以上の高周波成分の割合と、画像が所定時間同じ画像である場合と、を検知するようになっていることが特徴である。

携帯端末１００が机上等に置かれた場合、カメラ３はレンズ面が覆われるので暗くなる。このためカメラ３で撮影した画像の明るさ（輝度）が所定の値未満の場合に、携帯端末１００が机上等に置かれたと判断する。また、カメラ３で撮影した画像に含まれる所定の値以上の高周波成分の割合が所定値未満の場合に、携帯端末１００が机上等に置かれたと判断する。また、カメラ３で撮影した画像が所定時間同じ画像である場合に、携帯端末１００が机上等に置かれたと判断する。上述した３つの判断条件の少なくとも１つの条件を満たした場合に携帯端末１００が机上等に置かれたと判断し、表示部１、２の輝度調整を停止するようになっている。

なお、例えば携帯端末１００が机上等にあることの検出は、カメラ３で撮影した撮影画像の周波数成分の解析により可能である。すなわち、携帯端末１００が机上等にある場合は、カメラ３は机の表面（平坦な面）を撮影することになり、その撮影画像には所定の値以上の高周波成分はほとんど含まれないことを利用する。これは、全体に滑らかな部分の多い画像（平坦な面の画像）は低周波成分が多く、変化の激しい部分の多い画像は高周波成分が多いことから判断できる。ただし、ノイズの高周波成分を誤検出しないように高周波成分の割合が所定の値未満の場合に携帯端末１００が机上等に置かれたと判断する。

さらに加速度センサが静止状態を検出した時に、上述した画像の明るさ（輝度）、画像の周波数、画像の静止状態などを解析して、３つの判断条件の少なくとも１つの条件を満たした場合に携帯端末１００が机上等に置かれたと判断し、表示部１、２の輝度調整を停止するようにしても良い。

なお上述の説明において、カメラ３で画像情報を取得する場合は予め設定した間隔で画像情報を取得して解析するようにする。また、画像の明るさ（輝度）が暗くなった場合、画像に含まれる所定の値以上の高周波成分の割合が所定値未満の場合、画像が所定時間同じ画像である場合、に画像情報を取得するようにしても良い。また、加速度センサが静止状態を検出した場合に、画像情報を取得するようにしても良い。なお画像情報の取得間隔は任意に設定可能である。

以下に、周波数特性に基づく撮影画像の評価について若干の説明を行う。撮影画像（２次元画像データ）の各点の輝度値又は濃度値ｆ（ｘ，ｙ）を周波数変換したＦ（ｕ，ｖ）を算出し、周波数毎の振幅値や係数から画像の周波数特性、画像全体に占める高周波成分や低周波成分の比率等から画像のボケの程度や、鮮明度（シャープネス）、コントラスト等を評価することができる。周波数変換としては、公知のフーリエ変換、離散フーリエ変換（ＤＦＴ：Ｄｉｓｃｒｅｔｅ Ｆｏｕｒｉｅｒ Ｔｒａｎｓｆｏｒｍ）、離散コサイン変換（ＤＣＴ：Ｄｉｓｃｒｅｔｅ Ｃｏｓｉｎｅ Ｔｒａｎｓｆｏｒｍ）、それらを高速計算する高速フーリエ変換（ＦＦＴ：Ｆａｓｔ Ｆｏｕｒｉｅｒ Ｔｒａｎｓｆｏｒｍ）アルゴリズム等を用いることができる。

このように、２次元画像ｆ（ｘ、ｙ）を周波数空間に変換して、周波数成分Ｆ（ｕ、ｖ）を算出し、全周波数成分に占める高周波成分の比率、全周波数成分に占める低周波成分の比率に基づいて画像の評価値を決定することができる。

なお予め、撮影画像を順次走査して１次元信号に並び替えてから周波数変換を施して、評価値を算出してもよいし、撮影画像を周波数変換したＦ（ｕ、ｖ）の振幅値を、ジグザグ走査などで１次元に並び替えてから、評価値を算出するようにしてもよい。

なお周波数特性に基づく画像の評価方法については、例えば特開２００６−５０４９４号公報に記載されている公知の方法などを参照されたい。

また、本実施形態のカメラ３は、オートフォーカスであるが、単焦点のものでも良い。

なお、カメラ３の撮像素子にはＣＣＤ（Ｃｈａｒｇｅｄ Ｃｏｕｐｌｅｄ Ｄｅｖｉｃｅ）やＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ Ｍｅｔａｌ Ｏｘｉｄｅ Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）タイプの撮像素子など公知のものを適用することができる。

図２に示すように、第１の筐体１０と第２の筐体２０とを開いた内側には、第２の筐体２０に照度センサ４と十字キー６とホームやメニュー及びバックなどを行うことができる複数の操作ボタン７とが配設されている。

照度センサ４が携帯端末１００の使用環境の照度を検知して表示部１、２の輝度調整をするようになっている。例えば、屋外などの明るい環境の場合は、表示部１、２を明るく表示し、屋内などの少し暗い環境の場合は、表示部１、２を暗く表示するようにして見やすく、かつ目が疲れないように調節する。

十字キー６は、例えばカーソル表示などを移動させ、決定を入力するためのものであるが、これに限定されることはなく任意の機能を設定することが可能となっている。また、操作ボタン７に割り付ける機能は任意に設定することが可能となっている。

図３、図４に示すように、２つの二軸ヒンジ３０Ａ、３０Ｂを表示部１、２よりも外側の額縁１Ｂ，２Ｂ，１Ｃ，２Ｃに配置することにより、第１の表示部１と第２の表示部２とを近接して略１８０度まで開くことが可能であり、第１の表示部１と第２の表示部２とを平らな状態にすることができる。

第１の表示部１および第２の表示部２は、それぞれが各種情報を表示したり、各種操作をしたりすることができるタッチパネル式のＬＣＤ（Ｌｉｑｕｉｄ Ｃｒｙｓｔａｌ Ｄｉｓｐｌａｙ）であり、本実施形態の携帯端末１００は、図２、図３、図４に示すように、第１の筐体１０と、第２の筐体２０と、が２つの二軸ヒンジ３０Ａ、３０Ｂを介して開いた状態で第１の表示部１や第２の表示部２に各種情報を表示したりして使用する。

ＬＣＤは公知のものが適用可能であり、タッチパネルの方式は、抵抗膜方式、表面弾性波方式、電磁誘導方式、静電容量方式など公知の方式が適用可能である。また、液晶に限らず、プラズマ、ＬＥＤ（Ｌｉｇｈｔ Ｅｍｉｔｔｉｎｇ Ｄｉｏｄｅ）、有機ＥＬ（Ｏｒｇａｎｉｃ ｌｉｇｈｔ−ｅｍｉｔｔｉｎｇ ｄｉｏｄｅｓ （ＯＬＥＤｓ））、無機ＥＬ、ＦＥＤ（Ｆｉｅｌｄ Ｅｍｉｓｓｉｏｎ Ｄｉｓｐｌａｙ）なども適用可能である。

また、例えば、本実施形態の携帯端末１００をノート型ＰＣのように使用する場合は、図２に示すようにラップトップ状態で、第２の表示部２にタッチパネル液晶の操作画面（ソフトウエアキーボード等）などを表示し、そのソフトウエアキーボード等を操作して第１の表示部１に各種情報を表示するように制御する。

また、本実施形態の携帯端末１００を電子書籍リーダーのように使用する場合は、図３に示すように、第１の表示部１と第２の表示部２とに各種情報を表示するように制御する。

また、例えば、カメラ撮影モードを選択した場合、完全に平らに開いた状態で、カメラ３で撮影した撮影画像を第１の表示部１と第２の表示部２とに跨って全画面表示をすることが可能であり、表示部１、２を大型のファインダーとしてカメラ撮影を行うことができる。また、第１の表示部１と第２の表示部２にそれぞれ違う情報を表示することもできるので、一方の表示部に撮影画像を表示しながら、他方の表示部に違う情報を表示することが可能となっている。

また、２つの二軸ヒンジ３０Ａ、３０Ｂにより、第１の筐体１０と第２の筐体２０との開き角度が少なくとも略１８０度になるように構成し、第１の表示部１と第２の表示部２とに跨って画像を表示することができ、大画面表示を可能にしている。また、第１の筐体１０と第２の筐体２０を折り畳むことができるので、持ち運ぶ時にはコンパクトになる。

本実施形態の第１の表示部１側の筐体１０は、内側の額縁１Ｄの形状を、他の位置の額縁１Ａ、１Ｂ、１Ｃよりも細長い形状で構成し、第１の表示部１と第２の表示部２がより近接して配置する構成となっている。なお、本実施形態では、第１の表示部１と第２の表示部２とは同じタイプのＬＣＤを使用し、第１の表示部１と第２の表示部２とに跨って全画面表示をする際の表示制御を簡素化するようにしている。

本実施形態の携帯端末１００は、第１の表示部と第２の表示部を上下に開いた縦向き、第１の表示部１と第２の表示部２を左右に開いた横向き、方位、位置などを検知するセンサ等を有しているので、検知した向きにより、表示部への表示向きを制御するようになっている。なお表示向きの制御技術としては同様な携帯端末の公知の技術が適用可能である。センサとしては、例えば３軸加速度センサ、地磁気センサ、ＧＰＳ（Ｇｌｏｂａｌ Ｐｏｓｉｔｉｏｎｉｎｇ Ｓｙｓｔｅｍ）などであるが、公知のものを適用可能である。

なお、本実施形態では、第１の筐体１０と、第２の筐体２０と、を２つの二軸ヒンジ３０Ａ、３０Ｂで連結することにした。しかし、第１の筐体１０と、第２の筐体２０と、を１つの二軸ヒンジで連結することも可能である。この場合は、図４の１Ｄ、２Ｄと示す部分の１箇所に二軸ヒンジを配置することで、その２軸ヒンジ内を通して配設されるケーブル類（第１の筐体１０内の電子回路と第２の筐体２０内の電子回路とを接続するケーブル）の引き回しを容易にすることができる。しかし、第１の表示部１と第２の表示部２とを近接して配置することが出来ず、電子書籍リーダーのように使用する場合は、違和感があるものとなるので好適ではない。

本実施形態の携帯端末１００は、図示しないが内部は制御部、情報処理部、入出力部、記憶部など情報処理装置としての公知の構成を有している。例えば、ＣＰＵとチップセットとメモリとフラッシュメモリとＨＤＤとＵＳＢインターフェイスと駆動電源などである。なお、ＣＰＵとチップセットとメモリとが制御部や情報処理部を構成し、フラッシュメモリとＨＤＤは記憶部を構成し、ＵＳＢやＤＶＩ（Ｄｉｇｉｔａｌ Ｖｉｓｕａｌ Ｉｎｔｅｒｆａｃｅ）がインターフェイス部を構成する。

＜携帯端末の内部構成例＞
次に、図５及び図６を参照しながら、本実施形態の携帯端末１００の内部構成について説明する。

図５において、本実施形態の携帯端末１００は、照度センサ４と輝度調整部４１と表示部１、２（４２）と表示制御部４３とカメラ（入力部）３と画像取得・解析部４４と制御部４５とを主な構成として備えて構成される。照度センサ４からの信号により輝度調整部４１は表示部１、２（４２）の輝度調整をする。カメラ（入力部）３から入力する画像情報は画像取得・解析部４４により取得・解析され、その結果に基づいて表示制御部４３は表示部１、２に例えばソフトウエアキーボード等を表示する。制御部４５は、装置全体を制御する。なお照度センサ４からの信号がない場合には表示部１、２（４２）の輝度調整の制御は行わないようになっている。

図６において、本実施形態の携帯端末１００は、照度センサ４と輝度調整部４１と表示部１、２（４２）と表示制御部４３とカメラ（入力部）３と画像取得・解析部４４と制御部４５と加速度センサ４６とを主な構成として備えて構成される。図５の構成との違いは加速度センサ４６を備えていることである。制御部４５は加速度センサ４６の信号を検出して照度センサ４や表示制御部４３を制御するとともに、装置全体を制御する。なお照度センサ４からの信号がない場合には表示部１、２（４２）の輝度調整の制御は行わないようになっている。

＜表示部の制御例＞
次に、本実施形態の携帯端末１００の表示部の制御例について説明する。

本実施形態の携帯端末１００の第１の表示部１と第２の表示部２はタッチパネルであり、表示部１、２を指でタッチすることにより各種の操作を入力することが可能となっている。

本実施形態の携帯端末１００は、カメラ３で画像情報を取得し、その画像情報から画像の明るさ（輝度）と、画像に占める所定の値以上の高周波成分の割合と、前記画像が所定時間同じ画像である場合と、を検知することが特徴である。そして上述した３つの判断条件の少なくとも１つの条件を満たした場合に表示部１、２の輝度調整を停止するようになっている。

従って、図２に示すような机上等の水平面に置いた場合、カメラ３から入力される画像情報に基づいて、ラップトップ状態であると判断した場合は、表示部１、２の輝度調整を停止するように制御する。そして自動又は手動で第２の表示部２にタッチパネル式のソフトウエアキーボード等を表示する。

上述したように制御するのは図２に示すように、第２の筐体２にソフトウエアキーボード等が表示され、そのソフトウエアキーボードを操作した場合に照度センサ４を手で覆い隠してしまう可能性があるためである。そこでラップトップ状態では、表示部１、２の輝度調整をしないようにする。このように制御することで携帯端末１００の利用態様によって表示画面の明るさを頻繁に変更してしまうことを防止することができる。また輝度調整機能を停止するのは、ラップトップ状態と判断し、かつ、ソフトウエアキーボードを表示する時としても良い。

また、本実施形態の携帯端末１００が机上などに置かれていないと判断した場合は、第２の筐体２に配設された照度センサ４は携帯端末１００の使用環境の照度を検知して表示部１、２の輝度調整をするように制御する。

机上等に置かれた場合の判断は、カメラ３から取得される画像の明るさ（輝度）が暗くなった場合、画像の周波数成分の解析から画像に含まれる所定の値以上の高周波成分の割合が所定値未満の場合、画像が所定時間同じ画像である場合、などに行うものとする。上述した３つの判断条件の少なくとも１つの条件を満たした場合に表示部１、２の輝度調整を停止するようになっている。また加速度センサが静止状態を検出した時に、上述した画像の明るさ（輝度）、画像の高周波成分の割合、画像の静止状態、などを解析して総合的に判断するようにしても良い。

なお上述の説明において、カメラ３で画像情報を取得する場合は予め設定した間隔で画像情報を取得して解析するようにする。また、画像の明るさ（輝度）が暗くなった場合、画像に含まれる所定の値以上の高周波成分の割合が所定値未満の場合、画像が所定時間同じ画像である場合、に画像情報を取得するようにしても良い。また、加速度センサが静止状態を検出した場合に、画像情報を取得するようにしても良い。なお画像情報の取得間隔は任意に設定可能である。

本実施形態の携帯端末１００を第１の表示部１と第２の表示部２を左右に開いた横向きにして電子書籍リーダーのように使用する場合は、図３に示すように、第１の表示部１と第２の表示部２とに各種情報を表示するように制御する。電子書籍リーダーの場合は、第１の表示部に左ページを表示し、第２の表示部に右ページを表示するというように表示部１、２を制御する。

また、カメラ撮影の場合は、カメラモードを選択し、図３に示すように携帯端末１００を第１の表示部１と第２の表示部２を左右に開いた横向きに持った場合は、左側の第１の表示部１と右側の第２の表示部２とにカメラ画像を跨って表示するように表示部１、２を制御する。図４に示すように携帯端末１００を第１の表示部と第２の表示部を上下に開いた縦向きに持った場合は、上側の第１の表示部１と下側の第２の表示部とに跨ってカメラ画像を表示するように表示部１、２を制御する。

なお左右または上下の表示部１、２に跨って大画面表示するだけでなく、第１の表示部１と第２の表示部２にそれぞれ違う情報を表示するように制御することも可能である。

＜表示部の制御の流れ＞
次に、図７、図８を参照しながら、本実施形態の携帯端末１００の表示部の制御の流れについて説明する。

（第１の制御の流れ）
まず図７に基づいて説明する。本実施形態は、カメラ３で取得される画像情報を解析することにより携帯端末１００が机上等に置かれたことを判断する。

本実施形態の携帯端末１００を電子書籍リーダーのように使用する場合は、照度センサ４により表示部１、２の輝度を調整する（ステップＳ１）。そしてカメラ３から入力される画像情報を取得して画像情報の解析を行う（ステップＳ２）。次に、画像情報の明るさ（輝度）を判断し（ステップＳ３）、画像情報の明るさ（輝度）が明るい場合（ステップＳ３、ＮＯ）は、ステップＳ１に戻る。画像情報の明るさ（輝度）が暗い場合（ステップＳ３、ＹＥＳ）は、画像に含まれる所定の値以上の高周波成分の割合が所定値未満かを判断する（ステップＳ４）。高周波成分の割合が所定値未満でない場合（ステップＳ４、ＮＯ）は、ステップＳ１に戻る。高周波成分の割合が所定値未満の場合（ステップＳ４、ＹＥＳ）は、画像が所定時間同じ画像であるかを判断する（ステップＳ５）。画像が所定時間同じ画像でない場合（ステップＳ５、ＮＯ）は、ステップＳ１に戻る。画像が所定時間同じ画像である場合（ステップＳ５、ＹＥＳ）は、携帯端末１００はラップトップ状態（机上等に置かれている）と判断する（ステップＳ６）。そして照度センサ４の機能を停止して表示部１、２の輝度調整を停止する（ステップＳ７）。その後に自動又は手動で第２の表示部２にソフトウエアキーボードを表示する（ステップＳ８）。このように制御するのはユーザが、ソフトウエアキーボードを用いて文字等をタイプ入力する際に、ユーザの腕や手が照度センサ４を覆ったり覆わなかったりする現象が繰り返され、照度センサ４による照度検出値が変動することで、必要以上に輝度調整が行われてしまうことを防ぐために照度センサ４の機能を停止してから、ソフトウエアキーボード表示をするのである。

なお上述した制御の流れでは、カメラ３で取得される画像の明るさ（輝度）が暗くなった場合、画像の周波数成分の解析から画像に含まれる所定の値以上の高周波成分の割合が所定値未満の場合、画像が所定時間同じ画像である場合、の３つの判断条件から表示部１、２の輝度調整の停止および自動又は手動で第２の表示部２へのソフトウエアキーボードの表示を行うものとして説明したが、これに限ることではなく、上述のうちの１つの判断条件を満たした時に同様の制御を行っても良い。なお、携帯端末１００が机上等に置かれた状態の判断を間違いないものにするには、少なくとも２つの判断条件を満たした時とすることが好適である。また、上述の１つの判断条件を満たした時で、かつ、第２の表示部２へソフトウエアキーボードの表示を行った場合に表示部１、２の輝度調整の停止を行うようにしても良い。このように制御することで、ユーザが、ソフトウエアキーボードを用いて文字等をタイプ入力する際に、ユーザの腕や手が照度センサ４を覆ったり覆わなかったりする現象が繰り返され、照度センサ４による照度検出値が変動することで、必要以上に輝度調整が行われてしまう問題を解消できるからである。

また上述した制御の流れは、カメラ３で画像情報を取得する場合は予め設定した間隔で画像情報を取得して解析するようにすることが特徴である。なお画像情報の取得間隔は任意に設定可能である。

（第２の制御の流れ）
次に図８に基づいて説明する。図７と同様な部分は同じ符号を付けている。本実施形態は加速度センサの出力を監視して携帯端末１００が静止状態であることをトリガとして、カメラ３で取得される画像情報を解析することにより携帯端末１００が机上等に置かれたことを判断する。

本実施形態の携帯端末１００を電子書籍リーダーのように使用する場合は、照度センサ４により表示部１、２の輝度を調整する（ステップＳ１）。加速度センサの出力を監視して、携帯端末１００が静止状態かを判断し（ステップＳ９）、携帯端末１００が動いている（手持ちの状態）と判断した場合（ステップＳ９、ＮＯ）は、ステップＳ１に戻る。携帯端末１００が静止状態と判断した場合（ステップＳ９、ＹＥＳ）は、カメラ３から入力される画像情報を取得して画像情報の解析を行う（ステップＳ２）。次に画像情報の明るさ（輝度）を判断し（ステップＳ３）、画像情報の明るさ（輝度）が明るい場合（ステップＳ３、ＮＯ）は、ステップＳ１に戻る。画像情報の明るさ（輝度）が暗い場合（ステップＳ３、ＹＥＳ）は、画像に含まれる所定の値以上の高周波成分の割合が所定値未満かを判断する（ステップＳ４）。高周波成分の割合が所定値未満でない場合（ステップＳ４、ＮＯ）は、ステップＳ１に戻る。高周波成分の割合が所定値未満の場合（ステップＳ４、ＹＥＳ）は、画像が所定時間同じ画像であるかを判断する（ステップＳ５）。画像が所定時間同じ画像でない場合（ステップＳ５、ＮＯ）は、ステップＳ１に戻る。画像が所定時間同じ画像である場合（ステップＳ５、ＹＥＳ）は、携帯端末１００はラップトップ状態（机上等に置かれている）と判断する（ステップＳ６）。そして照度センサ４の機能を停止して表示部１、２の輝度調整を停止する（ステップＳ７）。その後に自動又は手動で第２の表示部２にソフトウエアキーボードを表示する（ステップＳ８）。このように制御するのはユーザが、ソフトウエアキーボードを用いて文字等をタイプ入力する際に、ユーザの腕や手が照度センサ４を覆ったり覆わなかったりする現象が繰り返され、照度センサ４による照度検出値が変動することで、必要以上に輝度調整が行われてしまうことを防ぐために照度センサ４の機能を停止してから、ソフトウエアキーボード表示をするのである。

なお上述した制御の流れでは、加速度センサの出力より携帯端末１００が静止状態であると判断した場合に、カメラ３で取得される画像の明るさ（輝度）が暗くなった場合、画像の周波数成分の解析から画像に含まれる所定の値以上の高周波成分の割合が所定値未満の場合、画像が所定時間同じ画像である場合、の３つの判断条件から表示部１、２の輝度調整の停止および自動又は手動で第２の表示部２へのソフトウエアキーボードの表示を行うものとして説明したが、これに限ることではなく、加速度センサの出力と、上述の１つの判断条件を満たした時に同様の制御を行っても良い。なお携帯端末１００が机上等に置かれた状態の判断を間違いないものにするには、加速度センサの出力と、少なくとも１つの判断条件を満たした時とすることが好適である。また、上述の１つの判断条件を満たした時で、かつ、第２の表示部２へソフトウエアキーボードの表示を行った場合に表示部１、２の輝度調整の停止を行うようにしても良い。このように制御することで、ユーザが、ソフトウエアキーボードを用いて文字等をタイプ入力する際に、ユーザの腕や手が照度センサ４を覆ったり覆わなかったりする現象が繰り返され、照度センサ４による照度検出値が変動することで、必要以上に輝度調整が行われてしまう問題を解消できるからである。

また上述した制御の流れでは、加速度センサの出力より携帯端末１００が動いている（手持ち状態である）と判断している時には、画像情報の取得・解析は行わないことが特徴である。

＜本実施形態の携帯端末の作用・効果＞
このように、本実施形態の携帯端末１００は、照度センサ４とカメラ３で取得される画像情報とに基づいて、電子書籍リーダーやノート型ＰＣ等の複数の携帯端末１００の利用態様に応じて表示部の輝度調整をすることができる。

また、本実施形態の携帯端末１００は、カメラ３で画像情報を取得し、その画像情報から画像の明るさ（輝度）と、画像に占める所定の値以上の高周波成分の割合と、前記画像が所定時間同じ画像である場合と、を検知することができる。そして上述した３つの判断条件の少なくとも１つの条件を満たした場合に表示部１、２の輝度調整を停止する。

また、本実施形態の携帯端末１００は、完全に平らに開いた状態で、カメラ３で撮影した画像を第１の表示部１と第２の表示部２とに跨って全画面表示をすることが可能であり、表示部１、２を大型のファインダーとしてカメラ撮影を行うことができる。

また、本実施形態の携帯端末１００は、第１の筐体１０と第２の筐体２０とを２つの二軸ヒンジ３０Ａ、３０Ｂにより連結しているため、図３に示すように、第１の表示部１と第２の表示部２とを近接して略１８０度まで開くことが可能であり、平らな状態にすることができる。

また、本実施形態の携帯端末１００の第１の表示部１と第２の表示部の筐体１０、２０は、図３に示すように、第１の表示部１と第２の表示部２を左右に開いた横向き時における内側の額縁１Ｄ、２Ｄの形状を、他の位置の額縁１Ａ、１Ｂ、１Ｃ、２Ａ、２Ｂ、２Ｃよりも細長い形状で構成したので、第１の表示部１と第２の表示部２とを、より近接して配置することができ、書籍リーダーのように使用する場合でも第１の表示部１と第２の表示部２とに跨って画像を表示することができるので違和感がない。

なお、上述する実施形態は、本発明の好適な実施形態であり、上記実施形態のみに本発明の範囲を限定するものではなく、本発明の要旨を逸脱しない範囲において種々の変更を施した形態での実施が可能である。

例えば、上述した本実施形態における携帯端末１００を構成する各装置における制御動作は、ハードウェア、または、ソフトウェア、あるいは、両者の複合構成を用いて実行することも可能である。

なお、ソフトウェアを用いて処理を実行する場合には、処理シーケンスを記録したプログラムを、専用のハードウェアに組み込まれているコンピュータ内のメモリにインストールして実行させることが可能である。あるいは、各種処理が実行可能な汎用コンピュータにプログラムをインストールして実行させることが可能である。

例えば、プログラムは、記録媒体としてのハードディスクやＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）に予め記録しておくことが可能である。あるいは、プログラムは、リムーバブル記録媒体に、一時的、あるいは、永続的に格納（記録）しておくことが可能である。このようなリムーバブル記録媒体は、いわゆるパッケージソフトウエアとして提供することが可能である。なお、リムーバブル記録媒体としては、フロッピー（登録商標）ディスク、ＣＤ−ＲＯＭ（Ｃｏｍｐａｃｔ Ｄｉｓｃ Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）、ＭＯ（Ｍａｇｎｅｔｏ ｏｐｔｉｃａｌ）ディスク、ＤＶＤ（Ｄｉｇｉｔａｌ Ｖｅｒｓａｔｉｌｅ Ｄｉｓｃ）、磁気ディスク、半導体メモリなどが挙げられる。

なお、プログラムは、上述したようなリムーバブル記録媒体からコンピュータにインストールすることになる。また、ダウンロードサイトから、コンピュータに無線転送することになる。また、ネットワークを介して、コンピュータに有線で転送することになる。

また、本実施形態における携帯端末１００は、上記実施形態で説明した処理動作に従って時系列的に実行されるのみならず、処理を実行する装置の処理能力、あるいは、必要に応じて並列的にあるいは個別に実行するように構築することも可能である。

また、本発明に係る携帯端末の前記制御手段は、前記制御手段は、前記画像の明るさの値が所定の値未満の場合と、前記画像に占める所定の値以上の高周波成分の割合が所定の値未満の場合と、前記画像が所定時間同じ画像である場合と、の少なくとも１つの条件を満たしている場合に、前記輝度調整手段による前記表示部の明るさ調整を停止することを特徴とする。

また、本発明に係る携帯端末は、前記携帯端末の動きを検知するセンサを有し、前記制御手段は、前記センサにより前記携帯端末の静止状態を検知した場合に、前記カメラにより前記携帯端末の周囲を撮影することを特徴とする。

また、本発明に係る携帯端末は、前記第２の表示部にタッチパネル式の操作画面を表示する表示制御手段を有し、前記制御手段が前記輝度調整手段による前記表示部の明るさ調整を停止した場合、前記表示制御手段が前記操作画面にソフトウエアキーボードを表示することを特徴とする。

また、本発明に係る携帯端末は、前記携帯端末は、さらに、前記第２の表示部にタッチパネル式の操作画面を表示する表示制御手段を有し、前記制御手段は、前記操作画面にソフトウエアキーボードを表示する場合に、前記カメラにより取得した画像に応じて、前記輝度調整手段による前記表示部の明るさ調整を停止するように制御することを特徴とする。

また、本発明に係る携帯端末は、前記表示制御手段が前記操作画面にソフトウエアキーボードの表示を停止した場合、前記制御手段は、前記輝度調整手段による前記前記表示部の明るさ調整を再開することを特徴とする。

また、本発明に係る制御方法の前記制御工程は、前記制御工程は、前記画像の明るさの値が所定の値未満の場合と、前記画像に占める所定の値以上の高周波成分の割合が所定の値未満の場合と、前記画像が所定時間同じ画像である場合と、の少なくとも１つの条件を満たしている場合に、前記輝度調整工程による前記表示部の明るさ調整を停止することを特徴とする。

また、本発明に係る制御方法の前記携帯端末は、前記携帯端末の動きを検知するセンサを有し、前記制御工程は、前記センサにより前記携帯端末の静止状態を検知した場合に、前記カメラにより前記携帯端末の周囲を撮影することを特徴とする。

また、本発明に係る制御方法は、前記第２の表示部にタッチパネル式の操作画面を表示する表示制御工程を有し、前記制御工程が前記輝度調整工程による前記表示部の明るさ調整を停止した場合、前記表示制御工程が前記操作画面にソフトウエアキーボードを表示することを特徴とする。

また、本発明に係る制御方法は、前記携帯端末は、さらに、前記第２の表示部にタッチパネル式の操作画面を表示する表示制御工程を有し、前記制御工程は、前記操作画面にソフトウエアキーボードを表示する場合に、前記カメラにより取得した画像に応じて、前記輝度調整工程による前記表示部の明るさ調整を停止するように制御することを特徴とする。

また、本発明に係る制御方法は、前記表示制御工程が前記操作画面にソフトウエアキーボードの表示を停止した場合、前記制御工程は、前記輝度調整工程による前記前記表示部の明るさ調整を再開することを特徴とする。

本発明によれば、携帯情報端末、携帯端末及び電子書籍リーダーなどの用途に適用できる。

１ 第１の表示部
１Ａ、１Ｂ、１Ｃ、１Ｄ 額縁
２ 第２の表示部
２Ａ、２Ｂ、２Ｃ、２Ｄ 額縁
３ カメラ
４ 照度センサ
５ 駆動ランプ
６ 十字キー
７ 操作キー
８ 解錠ボタン（リリースキー）
１０ 第１の筐体
２０ 第２の筐体
３０Ａ，３０Ｂ 二軸ヒンジ
４０ 携帯端末の内部構成例
４１ 照度調整部
４２ 表示部１、２
４３ 表示制御部
４４ 画像取得・解析部
４５ 制御部
４６ 加速度センサ
１００ 携帯端末

Claims (11)

1. 第１の表示部を有する第１の筐体と、第２の表示部を有する第２の筐体と、が開閉可能な携帯端末であって、
   前記携帯端末の周囲の明るさを検知する照度センサと、
   前記携帯端末の動きを検知するセンサと、
   前記照度センサで検知した明るさに基づいて前記第１の表示部と前記第２の表示部との明るさを調整する輝度調整手段と、
   前記第２の表示部の裏側の前記第２の筐体に配設され、前記携帯端末の周囲を撮影するカメラと、
   前記カメラにより取得した画像に応じて、前記輝度調整手段による前記表示部の明るさ調整を停止する制御手段と、を有し、
   前記制御手段は、
   前記センサにより前記携帯端末の静止状態を検知した場合に、前記カメラにより前記携帯端末の周囲を撮影することを特徴とする携帯端末。
2. 前記制御手段は、
   前記画像の明るさの値が所定の値未満の場合と、
   前記画像に占める所定の値以上の高周波成分の割合が所定の値未満の場合と、
   前記画像が所定時間同じ画像である場合と、
   の少なくとも１つの条件を満たしている場合に、前記輝度調整手段による前記表示部の明るさ調整を停止することを特徴とする請求項１に記載の携帯端末。
3. 前記第２の表示部にタッチパネル式の操作画面を表示する表示制御手段を有し、
   前記制御手段が前記輝度調整手段による前記表示部の明るさ調整を停止した場合、
   前記表示制御手段が前記操作画面にソフトウエアキーボードを表示することを特徴とする請求項１に記載の携帯端末。
4. 前記携帯端末は、さらに、前記第２の表示部にタッチパネル式の操作画面を表示する表示制御手段を有し、
   前記制御手段は、前記操作画面にソフトウエアキーボードを表示する場合に、前記カメラにより取得した画像に応じて、前記輝度調整手段による前記表示部の明るさ調整を停止するように制御することを特徴とする請求項１に記載の携帯端末。
5. 前記表示制御手段が前記操作画面にソフトウエアキーボードの表示を停止した場合、前記制御手段は、前記輝度調整手段による前記表示部の明るさ調整を再開することを特徴とする請求項３または４に記載の携帯端末。
6. 第１の表示部を有する第１の筐体と、第２の表示部を有する第２の筐体と、が開閉可能な携帯端末で行う制御方法であって、
   前記携帯端末は、
   前記携帯端末の周囲の明るさを検知する照度センサと、
   前記携帯端末の動きを検知するセンサと、
   前記第２の表示部の裏側の前記第２の筐体に配設され、前記携帯端末の周囲を撮影するカメラと、を有し、
   前記照度センサで検知した明るさに基づいて前記第１の表示部と前記第２の表示部との明るさを調整する輝度調整工程と、
   前記カメラにより取得した画像に応じて、前記輝度調整工程による前記表示部の明るさ調整を停止する制御工程と、を有し、
   前記制御工程は、
   前記センサにより前記携帯端末の静止状態を検知した場合に、前記カメラにより前記携帯端末の周囲を撮影することを特徴とする制御方法。
7. 前記制御工程は、
   前記画像の明るさの値が所定の値未満の場合と、
   前記画像に占める所定の値以上の高周波成分の割合が所定の値未満の場合と、
   前記画像が所定時間同じ画像である場合と、
   の少なくとも１つの条件を満たしている場合に、前記輝度調整工程による前記表示部の明るさ調整を停止することを特徴とする請求項６に記載の制御方法。
8. 前記第２の表示部にタッチパネル式の操作画面を表示する表示制御工程を有し、
   前記制御工程が前記輝度調整工程による前記表示部の明るさ調整を停止した場合、
   前記表示制御工程が前記操作画面にソフトウエアキーボードを表示することを特徴とする請求項６に記載の制御方法。
9. 前記携帯端末は、さらに、前記第２の表示部にタッチパネル式の操作画面を表示する表示制御工程を有し、
   前記制御工程は、前記操作画面にソフトウエアキーボードを表示する場合に、前記カメラにより取得した画像に応じて、前記輝度調整工程による前記表示部の明るさ調整を停止するように制御することを特徴とする請求項６に記載の制御方法。
10. 前記表示制御工程が前記操作画面にソフトウエアキーボードの表示を停止した場合、前記制御工程は、前記輝度調整工程による前記表示部の明るさ調整を再開することを特徴とする請求項８または９に記載の制御方法。
11. 請求項６から１０のいずれか１項に記載の制御方法をコンピュータに実行させるためのプログラム。

Images