JP6133766B2 - Display device, display method, and display program - Google Patents
Display device, display method, and display program Download PDFInfo
- Publication number
- JP6133766B2 JP6133766B2 JP2013266978A JP2013266978A JP6133766B2 JP 6133766 B2 JP6133766 B2 JP 6133766B2 JP 2013266978 A JP2013266978 A JP 2013266978A JP 2013266978 A JP2013266978 A JP 2013266978A JP 6133766 B2 JP6133766 B2 JP 6133766B2
- Authority
- JP
- Japan
- Prior art keywords
- range
- display
- viewer
- person
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Liquid Crystal Display Device Control (AREA)
- Transforming Electric Information Into Light Information (AREA)
- Control Of Indicators Other Than Cathode Ray Tubes (AREA)
- Controls And Circuits For Display Device (AREA)
- Image Analysis (AREA)
Description
本発明は、表示装置、表示方法および表示プログラムに関する。 The present invention relates to a display device, a display method, and a display program.
近年、環境への配慮から、各種の電気機器の省電力化が積極的に行われている。 In recent years, in consideration of the environment, power saving of various electric devices has been actively performed.
特許文献１は、省電力化が要求される各種ＡＶ機器、携帯型機器およびゲーム機器などに用いられ、多段階の階調表示を行う液晶表示駆動装置を開示している。特許文献１記載の発明では、階調表示用コントローラ１２は、液晶表示素子１１に印加すべき駆動電圧を、液晶駆動用ドライバＩＣ１３を介して制御する。次に、表示状況および表示内容情報などを含む表示パターンに応じて、フレーム間引きによる階調表示、パルス幅変調による階調表示および、両階調表示方式を併用した多段階の階調表示のうち、何れの階調表示を行うかを選択する。次に、この選択した階調表示方式を識別する階調方式切替信号を液晶駆動用ドライバＩＣ１３に送出する。そして、階調表示方式切替信号により、選択されている階調表示方式に従った階調表示データに変調して、階調表示データを駆動電圧として液晶表示素子１１に送出する。
Patent Document 1 discloses a liquid crystal display driving device that is used in various AV devices, portable devices, game devices, and the like that require power saving, and performs multi-level gradation display. In the invention described in Patent Document 1, the
特許文献２は、放送中の番組を録画しながら視聴することのできる自動録画機能付きの放送信号受信システムを開示している。特許文献２記載の発明では、カメラ部２５はテレビジョン受像機前の視聴者を撮影する。個人認証部２６はカメラ部２５の撮影画像から顔画像を検出し、この検出された顔画像から視聴者の目の開閉状態を判別する。個人認証部２６は、視聴者の目は閉じていると判別した場合、制御部１８に居眠検出信号を送信する。居眠検出信号を受信した制御部１８は、視聴者がテレビジョン受像機の前で居眠り状態であると判断し、テレビジョン受像機を省電力モード（ＴＶモニタ１５の表示をオフ）にする。
特許文献１に記載された発明は、液晶表示画面に表示される表示パターンに合わせて、表示方式を切り替えることで、表示品位を維持または向上させつつ省電力化および長動作を実現できる液晶表示駆動装置を提供するものである。 The invention described in Patent Document 1 is a liquid crystal display drive capable of realizing power saving and long operation while maintaining or improving display quality by switching a display method according to a display pattern displayed on a liquid crystal display screen. A device is provided.
しかし、特許文献１記載の発明は、表示パターンに合わせて表示方式を切り替えるのみであり、表示パターンを見ている視聴者の状況に応じて表示方式を切り替えるものではなかった。 However, the invention described in Patent Document 1 only switches the display method according to the display pattern, and does not switch the display method according to the situation of the viewer watching the display pattern.
それに対し、特許文献２に記載された発明では、視聴者がＴＶモニタを見ているか見ていないかを判別し、ＴＶモニタを見ていないと判別した場合、ＴＶモニタの表示をオフにしてＴＶモニタを省電力動作させている。しかし、特許文献２記載の発明では、視聴者がＴＶモニタを見ているか見ていないかを判別し、ＴＶモニタを省電力動作させる発明であり、視聴者がＴＶモニタを見ているときに、ＴＶモニタに表示された表示を省電力で表示させることはできなかった。
On the other hand, in the invention described in
本発明の目的は、人物が表示装置を見ているときに、表示装置に表示された表示を省電力で表示させることができないという上述した課題を解決する表示装置、表示方法および表示プログラムを提供することにある。 An object of the present invention is to provide a display device, a display method, and a display program that solve the above-described problem that a display displayed on a display device cannot be displayed with power saving when a person is looking at the display device. There is to do.
本発明の表示装置は、映像を所定の表示面に表示する表示手段と、前記表示手段の前に位置する人物を撮像して生成した画像データを出力する撮像手段と、前記画像データから求めた前記人物の視線を示す情報を出力する解析手段と、前記表示面のうち、前記人物の視線との交点を内部に含む所定の大きさである第一の範囲に映像表示するよう制御し、前記第一の範囲以外の第二の範囲を前記第一の範囲よりも少ない電力で動作させるよう制御する表示範囲決定手段とを備える。 The display device of the present invention is obtained from display means for displaying video on a predetermined display surface, imaging means for outputting image data generated by imaging a person located in front of the display means, and the image data. Analyzing means for outputting information indicating the line of sight of the person, and controlling to display an image in a first range having a predetermined size including an intersection with the line of sight of the person on the display surface, Display range determining means for controlling the second range other than the first range to operate with less power than the first range.
本発明の表示方法は、映像を所定の表示面に表示する表示ステップと、人物を撮像して生成した画像データを出力する撮像ステップと、前記画像データから求めた前記人物の視線を示す情報を出力する解析ステップと、前記表示面のうち、前記人物の視線との交点を内部に含む所定の大きさである第一の範囲に映像表示するよう制御し、前記第一の範囲以外の第二の範囲を前記第一の範囲よりも少ない電力で動作させるよう制御する表示範囲決定ステップとを有する。 The display method of the present invention includes a display step for displaying video on a predetermined display surface, an imaging step for outputting image data generated by imaging a person, and information indicating the line of sight of the person obtained from the image data. Control is performed so as to display an image in a first range having a predetermined size including an intersection of the analysis step to be output and the line of sight of the person in the display surface, and a second other than the first range. A display range determining step for controlling the range to be operated with less power than the first range.
本発明の表示プログラムは、映像を所定の表示面に表示する表示処理と、人物を撮像して生成した画像データを出力する撮像処理と、前記画像データから求めた前記人物の視線を示す情報を出力する解析処理と、前記表示面のうち、前記人物の視線との交点を内部に含む所定の大きさである第一の範囲に映像表示するよう制御し、前記第一の範囲以外の第二の範囲を前記第一の範囲よりも少ない電力で動作させるよう制御する表示範囲決定処理とをコンピュータに実行させる。 The display program of the present invention includes display processing for displaying a video on a predetermined display surface, imaging processing for outputting image data generated by imaging a person, and information indicating the line of sight of the person obtained from the image data. Control is performed to display an image in a first range having a predetermined size including an intersection of the analysis process to be output and the line of sight of the person on the display surface, and a second other than the first range. And a display range determination process for controlling the display range to operate with less power than the first range.
本発明の表示装置、表示方法および表示プログラムは、人物が表示装置を見ている場合に、表示装置に表示される表示を省電力で表示させることができるという効果がある。 The display device, the display method, and the display program of the present invention have an effect that when a person is looking at the display device, the display displayed on the display device can be displayed with power saving.
＜第１の実施形態＞
本発明の第１の実施形態において、表示装置は、人物が表示装置を見ている場合に、表示装置に表示される表示を省電力で表示させることができる。なお、付記した図面参照符号は、理解を助けるための一例として各要素に便宜上付記したものであり、本発明を図示の態様に限定することを意図するものではない。
<First Embodiment>
In the first embodiment of the present invention, the display device can display the display displayed on the display device with power saving when the person is looking at the display device. Note that the attached drawing reference numerals are added for convenience to each element as an example for facilitating understanding, and are not intended to limit the present invention to the illustrated embodiment.
まず、図１を用いて人間の視野について説明する。図１に示すように、人間１０の視野には色を識別できる視野範囲１１および文字を識別できる視野範囲１２が存在することが知られている。従って、人間１０は色を識別できる視野範囲１１内では、例えば物体の色のみしか識別できず、物体の詳細までは確認できない。一方、文字を機別できる視野範囲１２内では、例えば物体の色のみならず、文字なども詳細に識別することができる。すなわち、人間１０の視野には、詳細まで確認できる範囲と、詳細まで確認できない範囲が存在する。本実施形態では、この人間の持つ視野の特性を利用して、表示装置に表示される表示を省電力で表示する。
First, the human visual field will be described with reference to FIG. As shown in FIG. 1, it is known that there are a
図２は、本実施形態における、表示装置２の構成例を示す。図２に示すように、表示装置２は、撮像手段２０と、解析手段２１と、表示範囲決定手段２２と、表示手段２３を備える。
FIG. 2 shows a configuration example of the
本実施形態において、撮像手段２０は、視聴者を撮像して生成した画像データを出力する。撮像手段２０は、例えば、カメラである。
In the present embodiment, the
解析手段２１は、前記撮像手段２０が撮像した前記画像データから求めた前記人物の視線を示す情報を出力する。
The
表示範囲決定手段２２は、表示手段２３の表示面のうち前記視聴者の視線との交点を内部に含む所定の大きさである第一の範囲に映像表示するよう表示範囲を決定し、表示手段２３を制御する。また、前記第一の範囲以外の第二の範囲を前記第一の範囲よりも少ない電力で動作させるように表示手段２３を制御する。なお、第一の範囲および第二の範囲は、人間が有する平均的な視野範囲に基づいて制御してもよい。
The display
表示手段２３は、表示範囲決定手段２２が制御する第一の範囲および第二の範囲を考慮して、表示手段２３の所定の表示面に映像を表示する。表示する映像は、例えば図示しない映像再生手段より映像データを受け取り、それを再生してもよい。
The
表示手段２３に映像表示を行う方法および表示手段２３を少ない電力で動作させる方法として、例えば図３に示すように、表示手段２３が液晶画面３である場合を説明する。図３は表示手段２３である液晶画面３の表示面を拡大したものであり、表示面は、映像表示を行うための三原色の各液晶ドット３０から構成されている。また、各駆動ライン３１は、各液晶ドット３０を駆動することができる。
As a method for displaying an image on the display means 23 and a method for operating the display means 23 with a small amount of power, a case where the display means 23 is a
図４は、映像表示を行っている液晶画面３の表示面を拡大した例である。図３に示す液晶画面３に、映像表示を行う場合は、図４に示すように、全ての駆動ライン３１を駆動し、対応する少なくとも１つの液晶ドットをＯＮにして映像表示を行う。例えば、色つきで示す赤ドット４０はＯＮになった液晶ドットを示し、赤色で発光している。同様に、色つきで示す液晶ドットは各色発光している。
FIG. 4 is an example in which the display surface of the
また、図５は、少ない電力で映像表示を行っている液晶画面３の表示面を拡大した例である。図３に示す液晶画面３に、少ない電力で映像表示を行う場合は、図５に示すように、各色左側の駆動ライン３１のみを駆動し、右側の駆動ライン３１は省電力のために駆動しないようにする。このように、図４の映像表示を行う場合と比較して、図５に示す少ない電力で映像表示を行う場合では、ＯＮにする液晶ドット数を間引くことにより表示手段２３の省電力動作を実現させることができる。なお、少ない電力で動作させる方法は、この方法に限らず、省電力動作が実現できるものであればよく、また、表示手段２３も液晶画面３に限定されない。また、上述した少ない電力で映像表示を行う方法のほかに表示手段２３を少ない電力で動作させる方法として、全ての駆動ラインを駆動せず、全く映像を表示しないようにしてもよい。この場合、液晶ドットをＯＮにしないことによる省電力に加え、余計なデータ転送を行わないため表示装置の処理能力を落とすことができ、さらなる省電力を実現できる。また、表示手段２３は、プラズマ方式の表示手段２３であっても同様に動作させることができる。また、プロジェクターなどスクリーンに映像を投影させるような表示手段２３を用いる場合には、プロジェクターの輝度、照度などを下げるようにすればよい。また、映像表示を行う方法は上述した例のように全ての駆動ラインを駆動する必要はなく、一部の駆動ラインを駆動して映像表示を行ってもよい。また、少ない電力で映像表示を行う方法は、上述した例のように映像表示を行う場合と比べて、半分の液晶ドットを駆動する場合に限られず、映像表示を行う場合に比べて少ない電力となる動作を実現するものであればよい。
FIG. 5 is an example in which the display surface of the
図６は、本実施形態の表示装置の動作例を示すフローチャートである。 FIG. 6 is a flowchart showing an operation example of the display device of the present embodiment.
本実施形態において、撮像手段２０は、視聴者を撮像して、画像データを生成し、解析手段２１へ該画像データを送る（Ｓ００１）。 In the present embodiment, the imaging means 20 images the viewer, generates image data, and sends the image data to the analysis means 21 (S001).
撮像された画像データを受けた解析手段２１は、該画像データから視聴者の視線を解析し、その解析結果を表示範囲決定手段２２に通知する（Ｓ００２）。
Receiving the captured image data, the
表示範囲決定手段２２は、表示手段２３の表示面のうち前記視聴者の視線との交点を内部に含む所定の大きさである第一の範囲に映像表示するよう表示範囲を決定し、表示手段２３を制御する。また、前記第一の範囲以外の第二の範囲を前記第一の範囲よりも少ない電力で動作させるように表示手段２３を制御する（Ｓ００３）。例えば、表示範囲決定手段２２は、人間が有する平均的な視野範囲を図示しない表示範囲決定手段２２の記憶部に記憶しておき、該予め記憶しておいた範囲に基づいて第一および第二の範囲を決定してもよい。
The display
表示手段２３は、表示範囲決定手段２２が制御した第一の範囲および第二の範囲を考慮して表示手段２３の所定の表示面に映像表示を行う（Ｓ００４）。表示する映像は、例えば図示しない映像再生手段より映像データを受け取り、それを再生してもよい。
The
本実施形態において、表示装置の撮像手段は、視聴者を撮像して生成した画像データを出力する。解析手段は、前記撮像手段が撮像した前記画像データから求めた前記人物の視線を示す情報を出力する。表示範囲決定手段は、表示手段の表示面のうち前記視聴者の視線との交点を内部に含む所定の大きさである第一の範囲に映像表示するよう表示範囲を決定し、表示手段を制御する。また、前記第一の範囲以外の第二の範囲を前記第一の範囲よりも少ない電力で動作させるように表示手段を制御する。表示手段は、表示範囲決定手段が制御した第一の範囲および第二の範囲を考慮して、所定の表示面に映像を表示する。 In the present embodiment, the imaging means of the display device outputs image data generated by imaging the viewer. The analysis unit outputs information indicating the line of sight of the person obtained from the image data captured by the imaging unit. The display range determining means determines the display range so as to display an image in a first range having a predetermined size including an intersection with the viewer's line of sight on the display surface of the display means, and controls the display means To do. In addition, the display unit is controlled so that the second range other than the first range is operated with less power than the first range. The display means displays an image on a predetermined display surface in consideration of the first range and the second range controlled by the display range determination means.
従って、本実施形態によれば、表示装置は、視聴者の視線から定まる第一および第二の範囲に基づいて、映像表示を行う範囲および省電力で動作する範囲を制御し、表示装置に表示される表示を省電力で表示することができる。また、視聴者の視野に合わせて映像表示を行う範囲を決定しているため、視聴者にとって違和感のない映像表示を行う表示装置を提供することができる。なお、本実施形態において、図２に示した各手段は、専門のハードウェアで実現してもよいし、ソフトウェアで実現できるように構成してもよい。また、表示手段２３は、映像表示を行う第一の範囲および省電力で動作する第二の範囲を考慮して映像表示を行うが、表示する映像は、表示手段２３に映像を表示するものであればよい。例えば、任意の記録媒体に記録された映像データを図示しない映像再生手段で再生してもよく、また、テレビ放送などの映像でもよい。また、表示される映像とともに音声を出力してもよい。
Therefore, according to the present embodiment, the display device controls the display range and the power saving range based on the first and second ranges determined from the viewer's line of sight, and displays them on the display device. The displayed display can be displayed with power saving. In addition, since the video display range is determined in accordance with the viewer's field of view, it is possible to provide a display device that performs video display that is comfortable for the viewer. In the present embodiment, each unit illustrated in FIG. 2 may be realized by specialized hardware or may be configured by software. In addition, the
＜第２の実施形態＞
本発明の第２の実施形態について図面を参照して説明する。本実施形態では、表示装置の解析手段は、撮像手段により撮像された視聴者の画像データのうち、視聴者の眼球部の画像データを解析する。なお、付記した図面参照符号は、理解を助けるための一例として各要素に便宜上付記したものであり、本発明を図示の態様に限定することを意図するものではない。本実施形態に関する表示装置の構成例は、第１の実施形態で示した図２と同様である。
<Second Embodiment>
A second embodiment of the present invention will be described with reference to the drawings. In the present embodiment, the analysis unit of the display apparatus analyzes the image data of the viewer's eyeball portion of the viewer's image data captured by the imaging unit. Note that the attached drawing reference numerals are added for convenience to each element as an example for facilitating understanding, and are not intended to limit the present invention to the illustrated embodiment. The configuration example of the display device according to this embodiment is the same as that of FIG. 2 shown in the first embodiment.
図７は、本実施形態における、表示装置７０のより詳細な構成例および表示装置７０の映像表示を見る視聴者７１を示す。
FIG. 7 illustrates a more detailed configuration example of the
本実施形態において、撮像手段７００は、視聴者を撮像して生成した画像データを出力する。
In the present embodiment, the
解析手段７０１は、撮像手段７００により撮像された視聴者７１の画像データのうち、該視聴者７１の眼球部の画像データを解析し、視聴者７１がどの方向を見ているかを判断する。図８に撮像手段７００により撮像された眼球部８０の画像データの解析例を示す。図８は視聴者７１の片方の眼球部８０を解析する例であるが、両眼球を解析してもよい。
The
解析手段７０１は、図８のように、撮像手段７００が撮像した視聴者７１の画像データのうち、眼球部８０の画像データを所定の領域に分割する。なお、所定の領域の大きさや数は、撮像される視聴者７１の目の大きさなどに応じて適宜変更してもよい。
As shown in FIG. 8, the
解析手段７０１は、分割された眼球部８０の画像データの黒目８１を境に該眼球の左右の白目８２、８３の領域数を求め、その領域数の比較を行い、その結果から視聴者７１が見ている方向を判断する。例えば、図８に示すように黒目８１を境に左右の白目８２、８３の領域数がほぼ等しい場合は、解析手段７０１は、視聴者７１が正面を見ていると判断する。また、例えば、黒目８１を境に、右の白目８３の領域数が左の白目８２の領域数より大きい場合は、解析手段７０１は、視聴者７１は右方向を見ていると判断する。また、例えば、黒目８１を境に左の白目８２の領域数が右の白目８３の領域数より大きい場合は、解析手段７０１は、視聴者７１は左方向を見ていると判断する。
The analysis means 701 obtains the number of areas of the
表示範囲決定手段７０２は、表示手段７０３の表示面のうち、前記視聴者の視線との交点を内部に含む所定の大きさである第一の範囲に映像表示するよう表示範囲を決定し、表示手段７０３を制御する。また、前記第一の範囲以外の第二の範囲を前記第一の範囲よりも少ない電力で動作させるよう表示手段７０３を制御する。例えば、図９のように、解析手段７０１が視聴者７１は正面を見ていると判断した場合、視聴者７１の視野範囲のうち視聴者７１が詳細まで識別できる範囲は視聴者７１の正面となる。この場合、表示範囲決定手段７０２は、表示手段７０３のうち視聴者７１の正面にあたる第一の範囲９０に映像表示するよう表示範囲を決定し、表示手段７０３を制御する。また、前記第一の範囲以外の第二の範囲９１を前記第一の範囲よりも少ない電力で動作させるよう表示手段７０３を制御する。なお、第一の範囲９０および第二の範囲９１は、人間が有する平均的な視野範囲に基づいて決定してもよい。また、第二の範囲９１とは、第一の範囲９０よりも省電力で動作する範囲をいう。例えば、省電力で映像表示を行う範囲や、何も映像表示を行わない範囲などをいう。
The display
表示手段７０３は表示範囲決定手段７０２が制御した第一の範囲９０および第二の範囲９１を考慮して表示手段７０３の所定の表示面に映像表示を行う。
The
図１０は、本実施形態の表示装置７０の動作例を示すフローチャートである。
FIG. 10 is a flowchart showing an operation example of the
本実施形態において、撮像手段７００は、表示手段７０３前に位置する視聴者７１を撮像して、画像データを生成し、解析手段７０１へ該画像データを送る（Ｓ１０１）。
In the present embodiment, the
撮像手段７０１より視聴者７１の画像データが送られてくると、解析手段７０１は、視聴者７１の眼球部の画像データを所定の領域に分割する。（Ｓ１０２）
解析手段７０１は、所定の領域に分割された眼球部の画像データの黒目を境に、左右の白目の領域数を求める（Ｓ１０３）。
When the image data of the
The
解析手段７０１は、黒目を境にした左右の白目の領域数を比較する（Ｓ１０４）。
The
解析手段７０１は、比較の結果、黒目を境に左右の白目の領域数がほぼ等しい場合（Ｓ１０４で左の白目≒右の白目の場合）は、解析手段７０１は、視聴者７１が正面を見ていると判断する（Ｓ１０５）。
If the result of the comparison is that the number of white eye regions on the left and right sides of the black eye is almost equal (when the left white eye is equal to the right white eye in S104), the analyzing means 701 causes the
また、比較の結果、黒目を境に右の白目の領域数が左の白目の領域数より大きい場合（Ｓ１０４で右の白目＞左の白目の場合）は、解析手段７０１は、視聴者７１は右方向を見ていると判断する（Ｓ１０６）。
As a result of the comparison, when the number of areas of the right white eye is larger than the number of areas of the left white eye with the black eye as a boundary (when the right white eye> the left white eye in S104), the analyzing
また、比較の結果、黒目を境に左の白目の領域数が右の白目の領域数より大きい場合（Ｓ１０４で左の白目＞右の白目の場合）は、解析手段７０１は、視聴者７１は左方向を見ていると判断する（Ｓ１０７）。
As a result of the comparison, if the number of areas of the left white eye is larger than the number of areas of the right white eye at the boundary of the black eye (left white eye> right white eye in S104), the analyzing
表示範囲決定手段７０２は、解析手段７０１による解析結果に基づいて、表示手段７０３の表示面のうち、前記視聴者の視線との交点を内部に含む所定の大きさである第一の範囲に映像表示するよう表示範囲を決定し、表示手段７０３を制御する。また、前記第一の範囲以外の第二の範囲を前記第一の範囲よりも少ない電力で動作させるよう表示手段７０３を制御する。（Ｓ１０５、Ｓ１０６、Ｓ１０７）。例えば、解析手段７０１が、視聴者７１は正面を見ていると判断した場合、視聴者７１の視野範囲のうち視聴者７１が詳細まで確認できる範囲は視聴者７１の正面となる。この場合、表示範囲決定手段７０２は、表示手段７０３のうち、視聴者７１の正面にあたる第一の範囲に映像表示するよう表示範囲を決定し、表示手段７０３を制御する。また、前記第一の範囲以外の第二の範囲を前記第一の範囲よりも少ない電力で動作させるよう表示手段７０３を制御する。また、例えば、解析手段７０１が、視聴者７１は右方向を見ていると判断した場合、視聴者７１の視野範囲のうち視聴者７１が詳細まで確認できる範囲は視聴者７１の右側となる。この場合、表示範囲決定手段７０２は、表示手段７０３のうち、視聴者７１の右側にあたる第一の範囲に映像表示するよう表示範囲を決定し、表示手段７０３を制御する。前記第一の範囲以外の第二の範囲を前記第一の範囲よりも少ない電力で動作させるよう表示手段７０３を制御する。また、例えば、解析手段７０１が、視聴者７１は左方向を見ていると判断した場合、視聴者７１の視野範囲のうち視聴者７１が詳細まで確認できる範囲は視聴者７１の左側となる。この場合、表示範囲決定手段７０２は、表示手段７０３のうち、視聴者７１の左側にあたる第一の範囲に映像表示するよう表示範囲を決定し、表示手段７０３を制御する。前記第一の範囲以外の第二の範囲を前記第一の範囲よりも少ない電力で動作させるよう表示手段７０３を制御する。
Based on the analysis result of the
表示手段７０３は、表示範囲決定手段７０２が制御した第一の範囲および第二の範囲を考慮して、表示手段７０３の所定の表示面に映像表示を行う（Ｓ１０５、Ｓ１０６、Ｓ１０７）。
The
なお、本実施形態において、解析手段７０１による眼球部の画像データの解析方法は、上記方法に限るものではなく、視聴者７１がどこを見ているか判断できる方法であればよい。例えば、解析手段７０１は、角膜反射法など任意の視線検出法を用いて視聴者７１の視線を検出し、その検出結果から視聴者７１が見ている方向を判断してもよい。また、表示範囲決定手段７０２は、解析手段７０１の解析結果に基づき、表示手段７０３のうち、第一の範囲を正面、右方向、左方向の３方向のいずれかに決定しているが、これに限るものではない。例えば、表示範囲決定手段７０２は、解析手段７０１が解析した視聴者の視線から定まる第一の範囲および第二の範囲に基づいて、表示手段７０３の任意の箇所を映像表示および省電力で動作する範囲と制御してもよい。また、視聴者７１にどちらの眼球を解析するかを選択させてもよい。解析手段７０１は、選択された眼球について解析を行うことで、視聴者７１の状況に合った解析を行うことができる。また、表示手段７０３は、第一の範囲および第二の範囲を考慮して映像表示を行うが、表示する映像は表示手段７０３に映像を表示するものであればよい。例えば、任意の記録媒体に記録された映像データを図示しない映像再生手段で再生しそれを表示してもよく、また、テレビ放送などの映像でもよい。また、表示される映像とともに音声を出力してもよい。また、表示手段７０３は図９のような視聴者を取り囲む曲面形状であってもよいし、平面形状であってもよい。曲面形状の場合は平面形状の場合に比べ、視聴者７１はより実体験に近い映像表示を体験することができる。なお、表示手段７０３は、視聴者の周囲をすべて取り囲む形状であってもよく、形状は任意である。
In the present embodiment, the analysis method of the eyeball image data by the
本実施形態において、表示装置の解析手段は、撮像手段が出力した視聴者の画像データのうち、視聴者の眼球部の画像データを解析し、視線を示す情報を出力する。表示範囲決定手段は、前記解析手段が解析した情報に基づき、表示手段の表示面のうち視聴者の視線との交点を内部に含む所定の大きさである第一の範囲に映像表示するよう表示範囲を決定し、表示手段を制御する。また、前記第一の範囲以外の第二の範囲を前記第一の範囲よりも少ない電力で動作させるように表示手段を制御する。 In the present embodiment, the analysis unit of the display device analyzes the image data of the viewer's eyeball portion of the viewer's image data output by the imaging unit, and outputs information indicating the line of sight. The display range determining means is configured to display an image in a first range having a predetermined size including an intersection with the viewer's line of sight on the display surface of the display means based on the information analyzed by the analyzing means. Determine the range and control the display means. In addition, the display unit is controlled so that the second range other than the first range is operated with less power than the first range.
従って、本実施形態によれば、表示装置は、視聴者の視線から定まる第一および第二の範囲に基づいて、映像表示を行う範囲および省電力で動作する範囲を制御し、表示装置に表示される表示を省電力で表示することができる。また、視聴者の視野に合わせて映像表示を行う範囲を決定しているため、視聴者にとって違和感のない映像表示を行う表示装置を提供することができる。 Therefore, according to the present embodiment, the display device controls the display range and the power saving range based on the first and second ranges determined from the viewer's line of sight, and displays them on the display device. The displayed display can be displayed with power saving. In addition, since the video display range is determined in accordance with the viewer's field of view, it is possible to provide a display device that performs video display that is comfortable for the viewer.
＜第３の実施形態＞
本発明の第３の実施形態について図面を参照して説明する。本実施形態では、表示装置の解析手段は、撮像手段により撮像された視聴者の画像データのうち、視聴者の顔部の画像データを解析する。なお、付記した図面参照符号は、理解を助けるための一例として各要素に便宜上付記したものであり、本発明を図示の態様に限定することを意図するものではない。なお、本実施形態において、本発明の上記実施形態のいずれかと同様の構成については、説明を省略する。本実施形態に関する表示装置の構成例は、第１の実施形態で示した図２と同様である。
<Third Embodiment>
A third embodiment of the present invention will be described with reference to the drawings. In the present embodiment, the analysis unit of the display apparatus analyzes the image data of the viewer's face among the viewer image data captured by the imaging unit. Note that the attached drawing reference numerals are added for convenience to each element as an example for facilitating understanding, and are not intended to limit the present invention to the illustrated embodiment. In the present embodiment, the description of the same configuration as that of any of the above embodiments of the present invention will be omitted. The configuration example of the display device according to this embodiment is the same as that of FIG. 2 shown in the first embodiment.
図１１は、本実施形態における、表示装置１１０のより詳細な構成例および表示装置１１０の映像表示を見る視聴者７１を示す。
FIG. 11 shows a more detailed configuration example of the
本実施形態において、解析手段１１００は、視聴者７１の顔部の画像データを解析し、視聴者７１がどの方向を見ているかを判断する。図１２に撮像手段７００により撮像された顔部１２００の画像データの解析例を示す。
In the present embodiment, the
解析手段１１００は、図１２のように、撮像手段７００から送られた視聴者７１の画像データのうち、顔部１２００の画像データを所定の領域に分割する。なお、所定の領域の大きさや数は、撮像される視聴者７１の顔の大きさなどに応じて適宜変更してもよい。
As shown in FIG. 12, the
解析手段１１００は、所定の領域に分割された視聴者７１の顔部１２００の画像データの鼻１２０１を境に、顔の左端から鼻１２０１までの顔１２０３の領域数および顔の右端から鼻１２０１までの顔１２０４の領域数を求める。求めた領域数の比較を行い、視聴者７１の向いている方向を判断する。例えば、図１２のように、鼻１２０１を通る中心線１２０２を境に左右の顔１２０３、１２０４の領域数がほぼ等しい場合は、解析手段１１００は、視聴者７１が正面を向いていると判断する。また、例えば、鼻１２０１を通る中心線１２０２を境に、顔の右端から鼻１２０１までの顔１２０４の領域数が顔の左端から鼻１２０１までの顔１２０３の領域数より大きい場合は、解析手段１１００は、視聴者７１は右方向を向いていると判断する。また、例えば、鼻１２０１を通る中心線１２０２を境に、顔の左端から鼻１２０１までの顔１２０３の領域数が顔の右端から鼻１２０１までの顔１２０４の領域数より大きい場合は、解析手段１１００は、視聴者７１は左方向を向いていると判断する。
The
表示範囲決定手段７０２は、表示手段７０３の表示面のうち、前記視聴者の視線との交点を内部に含む所定の大きさである第一の範囲に映像表示するよう表示範囲を決定し、表示手段７０３を制御する。また、前記第一の範囲以外の第二の範囲を前記第一の範囲よりも少ない電力で動作させるよう表示手段７０３を制御する。例えば、図１３のように解析手段１１００が、視聴者７１は正面を見ていると判断した場合、視聴者７１の視野範囲のうち視聴者７１が詳細に識別できる範囲は視聴者７１の正面となる。この場合、表示範囲決定手段７０２は、表示手段７０３のうち、視聴者７１の正面にあたる第一の範囲９０に映像表示するよう表示範囲を決定し、表示手段７０３を制御する。また、前記第一の範囲以外の第二の範囲９１を前記第一の範囲よりも少ない電力で動作させるよう表示手段７０３を制御する。なお、第一の範囲９０および第二の範囲９１は、人間が有する平均的な視野範囲に基づいて決定してもよい。また、第二の範囲９１とは、第一の範囲９０よりも省電力で動作する範囲をいう。例えば、省電力で映像表示を行う範囲や、何も映像表示を行わない範囲などをいう。
The display
図１４は、本実施形態における、表示装置１１０の動作例を示すフローチャートである。
FIG. 14 is a flowchart illustrating an operation example of the
本実施形態において、撮像手段７００は、表示手段７０３前に位置する視聴者７１を撮像して、画像データを生成し、解析手段１１００へ該画像データを送る（Ｓ２０１）。なお、このＳ２０１は、第２の実施形態の図１０のＳ１０１と同じ動作を行ってもよい。
In the present embodiment, the
撮像手段７００より視聴者７１の画像データが送られてくると、解析手段１１００は、視聴者７１の顔部の画像データを所定の領域に分割する。（Ｓ２０２）
解析手段１１００は、視聴者７１の顔の鼻を境に、顔の左端から鼻までの顔の領域数および顔の右端から鼻までの顔の領域数を求める（Ｓ２０３）。
When the image data of the
The
解析手段１１００は、Ｓ２０３で求めた鼻を境にした左右の顔の領域数を比較する（Ｓ２０４）。
The
鼻を境に左右の顔の領域数がほぼ等しい場合（Ｓ２０４で左の顔≒右の顔の場合）は、解析手段１１００は、視聴者７１が正面を向いていると判断する（Ｓ２０５）。
When the number of areas of the left and right faces is almost equal with the nose as a boundary (in the case of left face≈right face in S204), the
また、鼻を境に右の顔の領域数が左の顔の領域数より大きい場合（Ｓ２０４で右の顔＞左の顔の場合）は、解析手段１１００は、視聴者７１は右方向を向いていると判断する（Ｓ２０６）。
When the number of right face areas is larger than the left face area with the nose as a boundary (when the right face is greater than the left face in S204), the analyzing means 1100 causes the
また、鼻を境に左の顔の領域数が右の顔の領域数より大きい場合（Ｓ２０４で左の顔＞右の顔の場合）は、解析手段１１００は、視聴者７１は左方向を向いていると判断する（Ｓ２０７）。
In addition, when the number of areas of the left face is larger than the number of areas of the right face at the boundary of the nose (when the left face> the right face in S204), the
表示範囲決定手段７０２は、解析手段１１００による解析結果に基づいて、表示手段７０３の表示面のうち、前記視聴者の視線との交点を内部に含む所定の大きさである第一の範囲に映像表示するよう表示範囲を決定し、表示手段７０３を制御する。また、前記第一の範囲以外の第二の範囲を前記第一の範囲よりも少ない電力で動作させるよう表示手段７０３を制御する。（Ｓ２０５、Ｓ２０６、Ｓ２０７）。例えば、解析手段１１００が、視聴者７１は正面を見ていると判断した場合、視聴者７１の視野範囲のうち視聴者７１が詳細まで確認できる範囲は視聴者７１の正面となる。この場合、表示範囲決定手段７０２は、表示手段７０３のうち、視聴者７１の正面にあたる第一の範囲に映像表示するよう表示範囲を決定し、表示手段７０３を制御する。また、前記第一の範囲以外の第二の範囲を前記第一の範囲よりも少ない電力で動作させるよう表示手段７０３を制御する。また、例えば、解析手段１１００が、視聴者７１は右方向を見ていると判断した場合、視聴者７１の視野範囲のうち視聴者７１が詳細まで確認できる範囲は視聴者７１の右側となる。この場合、表示範囲決定手段７０２は、表示手段７０３のうち、視聴者７１の右側にあたる第一の範囲に映像表示するよう表示範囲を決定し、表示手段７０３を制御する。また、前記第一の範囲以外の第二の範囲を前記第一の範囲よりも少ない電力で動作させるよう表示手段７０３を制御する。また、例えば、解析手段１１００が、視聴者７１は左方向を見ていると判断した場合、視聴者７１の視野範囲のうち視聴者７１が詳細まで確認できる範囲は視聴者７１の左側となる。この場合、表示範囲決定手段７０２は、表示手段７０３のうち、視聴者７１の左側にあたる第一の範囲に映像表示するよう表示範囲を決定し、表示手段７０３を制御する。また、前記第一の範囲以外の第二の範囲を前記第一の範囲よりも少ない電力で動作させるよう表示手段７０３を制御する。
Based on the analysis result of the
表示手段７０３は、表示範囲決定手段７０２が制御した第一の範囲および第二の範囲を考慮して、表示手段７０３の所定の表示面に映像表示を行う（Ｓ２０５、Ｓ２０６、Ｓ２０７）。
The
なお、本実施形態において、解析手段１１００による顔部の画像データの解析は上記方法に限るものではなく、視聴者７１がどこを向いているか判断できる方法であればよい。例えば、解析手段１１００は視聴者７１の顔の各部分の位置を検出し、検出できた顔の部分とできなかった顔の部分から顔の方向を判断してもよい。また、解析手段１１００が解析に使用する顔の部分は鼻に限らず、口、眉、耳など解析可能な顔の部分であればよく、顔の部分を複数解析してもよい。また、表示範囲決定手段７０２は、解析手段１１００の解析結果に基づき、表示手段７０３のうち第一の範囲を正面、右方向、左方向の３方向のいずれかに決定しているが、これに限るものではない。例えば、表示範囲決定手段７０２は、解析手段７０１が解析した視聴者の顔の方向から定まる第一の範囲および第二の範囲に基づいて、表示手段の任意の箇所を映像表示および省電力で動作する範囲と制御してもよい。また、例えば、本実施形態と同様の方法を顔の上下方向の判断にも応用できる。また、視聴者７１に解析する顔の部分を選択させてもよい。解析手段１１００は、選択された顔の部分について解析を行うことで、視聴者７１の状況に合った解析を行うことができる。また、表示手段７０３は、第一の範囲および第二の範囲を考慮して映像表示を行うが、表示する映像は表示手段７０３に映像を表示するものであればよい。例えば、任意の記録媒体に記録された映像データを図示しない映像再生手段で再生してもよく、また、テレビ放送などの映像でもよい。また、表示される映像とともに音声を出力してもよい。
In the present embodiment, the analysis of the face image data by the
本実施形態において、表示装置の解析手段は、撮像手段が出力した視聴者の画像データのうち、視聴者の顔部の画像データを解析し、視線を示す情報を出力する。表示範囲決定手段は、前記解析手段が解析した情報に基づき、表示手段の表示面のうち視聴者の視線との交点を内部に含む所定の大きさである第一の範囲に映像表示を行うよう表示範囲を決定し、表示手段を制御する。また、前記第一の範囲以外の第二の範囲を前記第一の範囲よりも少ない電力で動作させるように表示手段を制御する。 In this embodiment, the analysis unit of the display device analyzes the image data of the viewer's face among the viewer's image data output by the imaging unit, and outputs information indicating the line of sight. The display range determining means performs video display in a first range having a predetermined size including an intersection with the viewer's line of sight on the display surface of the display means based on the information analyzed by the analyzing means. The display range is determined and the display means is controlled. In addition, the display unit is controlled so that the second range other than the first range is operated with less power than the first range.
従って、本実施形態によれば、表示装置は、視聴者の視線から定まる第一および第二の範囲に基づいて、映像表示を行う範囲および省電力で動作する範囲を制御し、表示装置に表示される表示を省電力で表示することができる。また、視聴者の視野に合わせて映像表示を行う範囲を決定しているため、視聴者にとって違和感のない映像表示を行う表示装置を提供することができる。 Therefore, according to the present embodiment, the display device controls the display range and the power saving range based on the first and second ranges determined from the viewer's line of sight, and displays them on the display device. The displayed display can be displayed with power saving. In addition, since the video display range is determined in accordance with the viewer's field of view, it is possible to provide a display device that performs video display that is comfortable for the viewer.
＜第４の実施形態＞
本発明の第４の実施形態について図面を参照して説明する。本実施形態では、表示装置の解析手段は、撮像手段により撮像された視聴者の画像データのうち、視聴者の眼球部および顔部の画像データを解析する。なお、付記した図面参照符号は、理解を助けるための一例として各要素に便宜上付記したものであり、本発明を図示の態様に限定することを意図するものではない。なお、本実施形態において、本発明の上記実施形態のいずれかと同様の構成については、説明を省略する。本実施形態に関する表示装置の構成例は、第１の実施形態で示した図２と同様である。
<Fourth Embodiment>
A fourth embodiment of the present invention will be described with reference to the drawings. In the present embodiment, the analysis unit of the display apparatus analyzes the image data of the viewer's eyeball and face from the viewer's image data captured by the imaging unit. Note that the attached drawing reference numerals are added for convenience to each element as an example for facilitating understanding, and are not intended to limit the present invention to the illustrated embodiment. In the present embodiment, the description of the same configuration as that of any of the above embodiments of the present invention will be omitted. The configuration example of the display device according to this embodiment is the same as that of FIG. 2 shown in the first embodiment.
図１５は、本実施形態における、表示装置１５０のより詳細な構成例および表示装置１５０の映像表示を見る視聴者７１を示す。
FIG. 15 shows a more detailed configuration example of the
本実施形態において、解析手段１５００は、視聴者７１の眼球部および顔部の画像データから得られた眼球および顔の方向に基づいて、視聴者７１がどの方向を見ているかを判断する。眼球部および顔部の画像データの解析は、第２の実施形態および第３の実施形態の解析方法と同様の方法でもよい。
In the present embodiment, the
表示範囲決定手段７０２は、表示手段７０３の表示面のうち、前記視聴者の視線との交点を内部に含む所定の大きさである第一の範囲に映像表示するよう表示範囲を決定し、表示手段７０３を制御する。また、前記第一の範囲以外の第二の範囲に前記第一の範囲よりも少ない電力で動作させるよう表示手段７０３を制御する。例えば、解析手段１５００が、視聴者７１の眼球が正面を見ており、かつ顔が正面を向いていると判断した（眼球および顔の方向が一致していると判断した）場合、視聴者７１の視野範囲のうち視聴者７１が詳細まで確認できる範囲は視聴者７１の正面となる。この場合、表示範囲決定手段７０２は、表示手段７０３のうち、視聴者７１の正面にあたる第一の範囲に映像表示するよう表示範囲を決定し、表示手段７０３を制御する。また、前記第一の範囲以外の第二の範囲を前記第一の範囲よりも少ない電力で動作させるよう表示手段７０３を制御する。また、例えば、眼球および顔の方向が一致していない場合、解析手段１５００は、眼球の向きが解析できたかを判断する。眼球の向きが解析できていた場合には、表示範囲決定手段７０２は、解析された視聴者の視線（眼球の向き）から定まる第一の範囲に映像表示するよう表示範囲を決定し、表示手段７０３を制御する。また、前記第一の範囲以外の第二の範囲を前記第一の範囲よりも少ない電力で動作させるように表示手段７０３を制御する。また、例えば、解析手段１５００が、眼球および顔の方向が一致しないと判断し、かつ、眼球の向きが解析できない場合は、表示範囲決定手段７０２は、解析された視線（顔の向き）から定まる第一の範囲に映像表示するよう表示範囲を決定し、表示手段７０３を制御する。また、前記第一の範囲以外の第二の範囲を前記第一の範囲よりも少ない電力で動作させるように表示手段７０３を制御する。なお、第一の範囲および第二の範囲は、人間が有する平均的な視野範囲に基づいて決定してもよい。また、第二の範囲とは、第一の範囲よりも省電力で動作する範囲をいう。例えば、省電力で映像表示を行う範囲や、何も映像表示を行わない範囲などをいう。
The display
図１６は、本実施形態における、表示装置１５０の動作例を示すフローチャートである。
FIG. 16 is a flowchart illustrating an operation example of the
本実施形態において、撮像手段７００は、表示手段７０３前に位置する視聴者７１を撮像して、画像データを生成し、解析手段１１００へ該画像データを送る（Ｓ３０１）。なお、このＳ３０１は、第２の実施形態の図１０のＳ１０１と同じ動作を行ってもよい。
In the present embodiment, the
撮像手段７００より視聴者７１の画像データが送られてくると、解析手段１５００は、視聴者７１の眼球部の画像データの解析を行う（Ｓ３０２）。この解析は、第２の実施形態で示した方法と同様の解析方法でもよい。
When the image data of the
解析手段１５００は、視聴者７１の顔部の画像データの解析を行う（Ｓ３０３）。この解析は、第３の実施形態で示した方法と同様の解析方法でもよい。
The
解析手段１５００は、眼球および顔の方向がどちらも解析できたかを判断する（Ｓ３０４）。
The
眼球および顔の方向がどちらとも解析できた場合（Ｓ３０４、ＹＥＳ）、解析手段１５００は、解析した眼球および顔の方向が一致しているかを判断する（Ｓ３０５）。
When both the eyeball and face directions can be analyzed (S304, YES), the
眼球および顔の方向が一致していた場合（Ｓ３０５、ＹＥＳ）、解析手段１５００は、視聴者７１は正面を向いていると判断し、表示範囲決定手段７０２は、表示手段７０３のうち、視聴者７１の正面にあたる第一の範囲に映像表示するよう表示範囲を決定し、表示手段７０３を制御する。また、前記第一の範囲以外の第二の範囲を前記第一の範囲よりも少ない電力で動作させるように表示手段７０３を制御する。（Ｓ３０６）。
When the directions of the eyeball and face match (S305, YES), the
眼球および顔の方向が一致していない場合（Ｓ３０５、ＮＯ）、解析手段１５００は、視聴者７１は解析した眼球の方向を見ていると判断する。この場合、表示範囲決定手段７０２は、解析された視聴者の視線（眼球の向き）から定まる第一の範囲に映像表示するよう表示範囲を決定し、表示手段７０３を制御する。また、前記第一の範囲以外の第二の範囲を前記第一の範囲よりも少ない電力で動作させるように表示手段７０３を制御する。（Ｓ３０７）。
When the directions of the eyeball and the face do not match (S305, NO), the
眼球および顔の方向のうち、少なくともどちらか一方が解析できなかった場合（Ｓ３０４、ＮＯ）、解析手段１５００は、眼球の向きが解析できたかを判断する（Ｓ３０８）。
When at least one of the directions of the eyeball and the face cannot be analyzed (S304, NO), the
眼球の向きが解析できた場合（Ｓ３０８、ＹＥＳ）、解析手段１５００は、視聴者７１はＳ３０２で解析した眼球の方向を見ていると判断する。この場合、表示範囲決定手段７０２は、解析された視聴者の視線（眼球の向き）から定まる第一の範囲に映像表示するよう表示範囲を決定し、表示手段７０３を制御する。また、前記第一の範囲以外の第二の範囲を前記第一の範囲よりも少ない電力で動作させるように表示手段７０３を制御する。（Ｓ３０７）。
When the direction of the eyeball can be analyzed (S308, YES), the
一方、眼球の向きが解析できない場合、すなわち顔の向きのみが解析できる場合（Ｓ３０８、ＮＯ）、解析手段１５００は、視聴者７１はＳ３０３で解析した顔の方向を見ていると判断する。この場合、表示範囲決定手段７０２は、解析された視線（顔の向き）から定まる第一の範囲に映像表示するよう表示範囲を決定し、表示手段７０３を制御する。また、前記第一の範囲以外の第二の範囲を前記第一の範囲よりも少ない電力で動作させるように表示手段７０３を制御する。（Ｓ３０９）。
On the other hand, when the direction of the eyeball cannot be analyzed, that is, when only the direction of the face can be analyzed (NO in S308), the
表示手段７０３は、表示範囲決定手段７０２が制御した第一の範囲および第二の範囲を考慮して、表示手段７０３の所定の表示面に映像表示を行う（Ｓ３０６、Ｓ３０７、Ｓ３０９）。
The
なお、本実施形態においては、解析手段１５００による眼球部および顔部の画像データの解析方法は、上記方法に限るものではなく、視聴者７１がどこを見ているか、およびどこを向いているかを判断できる方法であればよい。例えば、解析手段１５００は、角膜反射法など任意の視線検出法を用いて視聴者７１の視線方向を検出し、その検出結果から視聴者７１が見ている方向を判断してもよい。また、例えば、解析手段１５００は視聴者７１の顔の各部分の位置を検出し、検出できた顔の部分とできなかった顔の部分から顔の方向を判断してもよい。また、解析に使用する顔の部分は鼻に限らず、口、眉、耳など解析可能な顔の部分であればよく、顔の部分を複数解析してもよい。また、眼球部および顔部の解析の順序は問わない。また、表示範囲決定手段７０２は、解析手段１５００の解析結果に基づき、表示手段７０３のうち、第一の範囲を正面、右方向、左方向の３方向のいずれかに決定しているが、これに限るものではない。例えば、表示範囲決定手段７０２は、解析手段１５００が解析した視聴者の眼球および顔の方向から定まる第一の範囲および第二の範囲に基づいて、表示手段７０３の任意の箇所を映像表示および省電力で動作する範囲と制御してもよい。また、視聴者７１にどちらの眼球を解析するか、どの顔の部分を解析するかを選択させてもよい。解析手段１５００は、選択された眼球、顔の部分について解析を行うことで、視聴者７１の状況に合った解析を行うことができる。また、表示手段７０３は、第一の範囲および第二の範囲を考慮して映像表示を行うが、表示する映像は、表示手段７０３に映像を表示するものであればよい。例えば、任意の記録媒体に記録された映像データを図示しない映像再生手段で再生してもよく、また、テレビ放送などの映像でもよい。また、表示される映像とともに音声を出力してもよい。
In this embodiment, the analysis method of the image data of the eyeball part and the face part by the
本実施形態において、表示装置の解析手段は、撮像手段が出力した視聴者の画像データのうち、視聴者の眼球部および顔部の画像データを解析する。表示範囲決定手段は、前記解析手段が解析した情報に基づき、表示手段の表示面のうち視聴者の視線との交点を内部に含む所定の大きさである第一の範囲に映像表示するよう表示範囲を決定し、表示手段を制御する。また、前記第一の範囲以外の第二の範囲を前記第一の範囲よりも少ない電力で動作させるように表示手段を制御する。 In this embodiment, the analysis unit of the display device analyzes the image data of the viewer's eyeball and face from the viewer's image data output by the imaging unit. The display range determining means is configured to display an image in a first range having a predetermined size including an intersection with the viewer's line of sight on the display surface of the display means based on the information analyzed by the analyzing means. Determine the range and control the display means. In addition, the display unit is controlled so that the second range other than the first range is operated with less power than the first range.
従って、本実施形態によれば、表示装置は、視聴者の視線から定まる第一および第二の範囲に基づいて、映像表示を行う範囲および省電力で動作する範囲を制御し、表示装置に表示される表示を省電力で表示することができる。また、視聴者の視野に合わせて映像表示を行う範囲を決定しているため、視聴者にとって違和感のない映像表示を行う表示装置を提供することができる。 Therefore, according to the present embodiment, the display device controls the display range and the power saving range based on the first and second ranges determined from the viewer's line of sight, and displays them on the display device. The displayed display can be displayed with power saving. In addition, since the video display range is determined in accordance with the viewer's field of view, it is possible to provide a display device that performs video display that is comfortable for the viewer.
さらに、本実施形態によれば、視聴者の視聴状況に応じて表示装置に表示される表示を省電力動作させることができる。例えば、マスクなどにより視聴者の鼻が隠れてしまい、顔の方向が解析できなかった場合でも、眼球の方向を解析することができる。これにより、映像表示する範囲および省電力で動作する範囲を制御することができ、表示装置を省電力動作させることができる。また、例えばサングラスなどにより視聴者の眼球の解析ができなかった場合でも、顔の方向を解析することができる。これにより、映像表示を行う範囲および省電力で動作する範囲を制御することができ、表示装置を省電力動作させることができる。 Furthermore, according to the present embodiment, the display displayed on the display device can be operated in a power saving manner in accordance with the viewing status of the viewer. For example, even when the viewer's nose is hidden by a mask or the like and the face direction cannot be analyzed, the direction of the eyeball can be analyzed. As a result, it is possible to control the range in which video is displayed and the range in which power saving is performed, and the display device can be operated in power saving. Further, even when the viewer's eyeball cannot be analyzed with sunglasses or the like, for example, the face direction can be analyzed. Accordingly, it is possible to control the range in which video display is performed and the range in which power saving is performed, and the display device can be operated in power saving mode.
＜第５の実施形態＞
本発明の第５の実施形態について図面を参照して説明する。本実施形態では、表示装置の解析手段は、視聴者の眼球および顔の向きを解析し、さらに視聴者の顔情報を検出する。表示範囲決定手段は、解析手段による視聴者の眼球および顔の向きの解析結果に基づいて、映像表示を行う範囲および省電力で動作する範囲を制御する。表示装置は、さらに記憶手段を有し、記憶手段は、解析手段が検出した視聴者の顔情報と表示範囲決定手段が制御した第一の範囲および第二の範囲とを対応付けて記憶する。また、表示範囲決定手段は、表示手段の第一の範囲および第二の範囲を記憶手段から読み出して制御する。なお、付記した図面参照符号は、理解を助けるための一例として各要素に便宜上付記したものであり、本発明を図示の態様に限定することを意図するものではない。なお、本実施形態において、本発明の上記実施形態のいずれかと同様の構成については、説明を省略する。
<Fifth Embodiment>
A fifth embodiment of the present invention will be described with reference to the drawings. In the present embodiment, the analysis unit of the display device analyzes the orientation of the viewer's eyeball and face, and further detects the viewer's face information. The display range determination unit controls a range in which video is displayed and a range in which power saving is performed based on the analysis result of the viewer's eyeball and face orientation by the analysis unit. The display device further includes storage means, and the storage means stores the face information of the viewer detected by the analysis means in association with the first range and the second range controlled by the display range determination means. Further, the display range determining means reads and controls the first range and the second range of the display means from the storage means. Note that the attached drawing reference numerals are added for convenience to each element as an example for facilitating understanding, and are not intended to limit the present invention to the illustrated embodiment. In the present embodiment, the description of the same configuration as that of any of the above embodiments of the present invention will be omitted.
図１７は、本実施形態における、表示装置１７０の構成例を示す。図１７に示すように、本実施形態における表示装置１７０は、記憶手段１７０１を備える。
FIG. 17 shows a configuration example of the
本実施形態において、解析手段１７００は、前記撮像手段２０が撮像した前記画像データのうち、視聴者の眼球部および顔部の画像データを解析し、求めた前記視聴者の視線を示す情報を出力する。また、前記視聴者の顔情報を検出する。ここで視聴者の顔情報とは、視聴者の輪郭、目（眼球）、鼻、口、耳、眉などの顔の部分の位置情報である。
In this embodiment, the
記憶手段１７０１は、解析手段１７００が検出した視聴者の顔情報と表示範囲決定手段１７０２が制御した第一の範囲および第二の範囲とを対応付けて記憶する。ここで、第二の範囲とは、第一の範囲よりも省電力で動作する範囲をいい、例えば、省電力で映像表示を行う範囲や、何も映像表示を行わない範囲などをいう。また、記憶手段１７０１とは、例えばハードディスクや光磁気ディスクなどでもよい。
The
表示範囲決定手段１７０２は、表示手段２３の表示面のうち、前記視聴者の視線との交点を内部に含む所定の大きさである第一の範囲に映像表示するよう表示範囲を決定し、表示手段２３を制御する。また、前記第一の範囲以外の第二の範囲を前記第一の範囲よりも少ない電力で動作させるよう表示手段２３を制御する。なお、第一の範囲および第二の範囲は、人間が有する平均的な視野範囲に基づいて決定してもよい。また、表示範囲決定手段１７０２は、表示手段２３の第一の範囲および第二の範囲を記憶手段１７０１から読み出して表示手段２３を制御する。
The display
図１８は、本実施形態における、表示範囲決定手段１７０２が記憶手段１７０１から情報を読み出して、視聴者毎に異なる第一の範囲および第二の範囲を制御し、表示手段２３が表示手段２３の所定の表示面に映像表示を行うフローチャートである。
In FIG. 18, in this embodiment, the display
本実施形態において、撮像手段２０は、表示手段２３前に位置する視聴者を撮像して、画像データを生成し、解析手段１７００へ該画像データを送る（Ｓ４０１）。なお、このＳ４０１は、第１の実施形態の図６のＳ００１と同じ動作を行ってもよい。
In the present embodiment, the
撮像手段２０より視聴者の画像データが送られてくると、解析手段１７００は、視聴者の顔情報を検出する（Ｓ４０２）。ここで、視聴者の顔情報とは、視聴者の輪郭、目（眼球）、鼻、口、耳、眉などの顔の部分の位置情報である。 When viewer image data is sent from the imaging means 20, the analysis means 1700 detects the viewer's face information (S402). Here, the viewer's face information is position information of face portions such as the viewer's contour, eyes (eyeballs), nose, mouth, ears, and eyebrows.
表示範囲決定手段１７０２は、Ｓ４０２で検出した視聴者の顔情報が記憶手段１７０１に記憶されているかを検索する（Ｓ４０３）。
The display
記憶手段１７０１に記憶されていた場合（Ｓ４０３、ＹＥＳ）、表示範囲決定手段１７０２は、記憶されている情報に基づいて、表示手段２３の表示面のうち、第一の範囲および第二の範囲の決定および表示手段２３の制御を行う。表示手段２３は、表示範囲決定手段１７０２が制御した第一の範囲および第二の範囲を考慮して、表示手段２３の所定の表示面に映像表示を行う（Ｓ４０４）。
When stored in the storage unit 1701 (S403, YES), the display
記憶手段１７０１に記憶されていない場合（Ｓ４０３、ＮＯ）、記憶手段１７０１への第一の範囲および第二の範囲の登録処理を行う（Ｓ４０５）。
If not stored in the storage unit 1701 (S403, NO), registration processing of the first range and the second range to the
図１８の記憶手段１７０１への第一の範囲および第二の範囲の登録処理（図１８のＳ４０５）について詳細に説明する。図１９は、その処理を示したフローチャートである。
The first range and second range registration processing (S405 in FIG. 18) in the
本実施形態において、図示しない映像再生手段は、表示手段２３に、視聴者の視線を合わせるための映像を表示する（Ｓ５０１）。例えば、図示しない映像再生手段は、表示手段２３のうち、視聴者から見た正面、右側および左側の３か所に視聴者の視線を合わせるための映像を表示する。なお、視線を合わせるための映像を表示する箇所は前記３か所でなくてもよい。
In the present embodiment, a video reproduction unit (not shown) displays a video for matching the viewer's line of sight on the display unit 23 (S501). For example, a video playback unit (not shown) displays video for matching the viewer's line of sight at three locations on the
撮像手段２０は、表示手段２３前に位置し、視線を合わせるための映像を見ている視聴者を撮像して、画像データを生成し、解析手段１７００へ該画像データを送る（Ｓ５０２）。なお、このＳ５０２は、第１の実施形態の図６のＳ００１と同じ動作を行ってもよい。 The image pickup means 20 is located in front of the display means 23, picks up an image of a viewer who is watching the video for adjusting the line of sight, generates image data, and sends the image data to the analysis means 1700 (S502). In S502, the same operation as S001 in FIG. 6 of the first embodiment may be performed.
撮像手段２０より視聴者の画像データが送られてくると、解析手段１７００は、視聴者が視線を合わせるための映像を見ているときの、視聴者の顔情報を検出する（Ｓ５０３）。ここで、視聴者の顔情報とは、視聴者の輪郭、目（眼球）、鼻、口、耳、眉などの顔の部分の位置情報である。 When the viewer's image data is sent from the imaging means 20, the analysis means 1700 detects the viewer's face information when the viewer is watching the video for matching the line of sight (S503). Here, the viewer's face information is position information of face portions such as the viewer's contour, eyes (eyeballs), nose, mouth, ears, and eyebrows.
さらに、解析手段１７００は、視聴者が視線を合わせるための映像を見ているときの、視聴者の眼球部および顔部の画像データから、視聴者の眼球および顔の向きの解析する（Ｓ５０４、Ｓ５０５）。なお、眼球部または顔部の画像データのいずれかを解析してもよい。また、解析方法は、上記第２、第３および第４の実施形態で示したいずれかの方法でもよい。
Furthermore, the
表示範囲決定手段１７０２は、解析手段１７００による解析結果および所定の値として予め定められた平均的な人間の視野に基づいて、表示手段２３の表示面のうち第一の範囲および第二の範囲の決定、制御を行う（Ｓ５０６）。例えば、解析手段１７００がＳ５０４およびＳ５０５での解析結果から視聴者は正面を見ていると判断した場合を考える。この場合、視聴者の視野範囲のうち視聴者が詳細まで確認できる範囲は視聴者の正面となる。従って、表示範囲決定手段１７０２は、表示手段２３のうち、視聴者の正面にあたる第一の範囲に映像表示するよう表示範囲を決定し、表示手段２３を制御する。また、前記第一の範囲以外の第二の範囲を前記第一の範囲よりも少ない電力で動作させるよう表示手段２３を制御する。なお、表示範囲決定手段１７０２による第一の範囲および第二の範囲の制御方法は、上記第２、第３および第４の実施形態で示したいずれかの方法でもよい。所定の値として予め定められた平均的な人間の視野は図示しない表示範囲決定手段の記憶部に予め記憶されているものとする。
Based on the analysis result of the
表示範囲決定手段１７０２は、視聴者からの指示により、前記所定の値として予め定められた第一の範囲および第二の範囲の補正および決定を行い、表示手段２３を制御する（Ｓ５０７）。例えば、表示範囲決定手段１７０２がＳ５０６で制御した第一の範囲および第二の範囲に基づいて、表示手段２３はサンプル映像を表示したとする。このとき、視聴者は、該制御した範囲では視聴者自身の視野内にぼやけたところが残るなど、表示される映像に違和感があるとする。この場合、視聴者は図示しない表示範囲調節手段を用いて、視聴者自身の視野に合うように前記所定の値として決定された第一の範囲および第二の範囲の補正を行う。表示範囲決定手段１７０２は、その補正後の範囲を前記視聴者に適した映像表示を行う範囲および省電力で動作する範囲として表示手段２３を制御する。また、補正後、表示手段２３にサンプル映像を流し、直前に補正を行った第一の範囲および第二の範囲の再調整を行ってもよい。
The display
記憶手段１７０１は、解析手段１７００により検出された視聴者の顔情報と表示範囲決定手段１７０２により補正および制御された第一の範囲および第二の範囲とを対応付けて記憶する（Ｓ５０８）。
The
なお、本実施形態において、図示しない映像再生手段を設け、該映像再生手段は表示手段２３にサンプル映像を表示させ、第一の範囲および第二の範囲の変更を行うためのチュートリアルを表示させてもよい。また、視聴者毎に異なる第一の範囲および第二の範囲を、視聴者の顔情報と対応付けて記憶手段に記憶しているがこれに限られず、視聴者個人を特定できる情報と対応付けてもよい。また、視線を合わせるための映像が複数あった場合には、その映像毎に第一の範囲および第二の範囲の補正および決定を行い、その結果を記憶手段は記憶してもよい。
In this embodiment, a video playback unit (not shown) is provided, and the video playback unit displays a sample video on the
本実施形態において、表示装置の表示範囲決定手段は、前記解析手段が解析した情報に基づき、表示手段の表示面のうち視聴者の視線との交点を内部に含む所定の大きさである第一の範囲に映像表示するよう表示範囲を決定し、表示手段を制御する。また、前記第一の範囲以外の第二の範囲を前記第一の範囲よりも少ない電力で動作させるように表示手段を制御する。また、視聴者毎の前記第一の範囲および第二の範囲の補正および決定を行う。また、記憶手段を参照して、視聴者毎の前記第一の範囲、第二の範囲および視聴者の顔情報を考慮して、映像を表示および省電力で動作するよう表示手段を制御する。 In the present embodiment, the display range determining means of the display device is a first size having a predetermined size including an intersection with the viewer's line of sight on the display surface of the display means based on the information analyzed by the analyzing means. The display range is determined so that the video is displayed in the range, and the display means is controlled. In addition, the display unit is controlled so that the second range other than the first range is operated with less power than the first range. In addition, the first range and the second range are corrected and determined for each viewer. Further, referring to the storage means, the display means is controlled to display video and operate with power saving in consideration of the first range, the second range, and the face information of the viewer for each viewer.
記憶手段は、視聴者の顔情報と前記第一の範囲および前記第二の範囲とを対応付けて記憶する。 The storage means stores the viewer's face information in association with the first range and the second range.
従って、本実施形態によれば、表示装置は、視聴者の視線から定まる第一の範囲および第二の範囲に基づいて、映像表示を行う範囲および省電力で動作する範囲を制御し、表示装置に表示される表示を省電力で表示することができる。また、視聴者の視野に合わせて映像表示を行う範囲を決定しているため、視聴者にとって違和感のない映像表示を行う表示装置を提供することができる。 Therefore, according to the present embodiment, the display device controls the video display range and the power-saving range based on the first range and the second range determined from the viewer's line of sight, and the display device The display displayed on can be displayed with power saving. In addition, since the video display range is determined in accordance with the viewer's field of view, it is possible to provide a display device that performs video display that is comfortable for the viewer.
さらに、本実施形態によれば、視聴者毎に異なる視野範囲を考慮して、映像表示を行う範囲および省電力で動作する範囲を制御することができる。また、視聴者毎の視野に適した表示を行うことができ、表示装置に表示される表示をより精度よく省電力動作させることができる。また、視聴者自身の視野範囲に合った表示がなされるため、視聴者は違和感のない映像表示を見ることができる。 Furthermore, according to the present embodiment, it is possible to control a range in which video display is performed and a range in which power saving is performed in consideration of a different visual field range for each viewer. In addition, display suitable for the field of view for each viewer can be performed, and the display displayed on the display device can be operated more accurately with power saving. In addition, since the display suitable for the viewer's own visual field range is performed, the viewer can view the video display without any sense of incongruity.
＜第６の実施形態＞
本発明の第６の実施形態について図面を参照して説明する。本実施形態では、表示装置は、撮像手段を複数有する。なお、この概要に付記した図面参照符号は、理解を助けるための一例として各要素に便宜上付記したものであり、本発明を図示の態様に限定することを意図するものではない。なお、本実施形態において、本発明の上記実施形態のいずれかと同様の構成については、説明を省略する。
<Sixth Embodiment>
A sixth embodiment of the present invention will be described with reference to the drawings. In the present embodiment, the display device has a plurality of imaging means. Note that the reference numerals of the drawings attached to this summary are attached to the respective elements for convenience as an example for facilitating understanding, and are not intended to limit the present invention to the illustrated embodiment. In the present embodiment, the description of the same configuration as that of any of the above embodiments of the present invention will be omitted.
図２０は、本実施形態における、表示装置２００のより詳細な構成例および表示装置２００の映像表示を見る視聴者７１を示す。図２０に示すように、表示装置２００は、２つの撮像手段７００Ａおよび７００Ｂと、解析手段１９００と、表示範囲決定手段７０２と、表示手段７０３とを備える。
FIG. 20 illustrates a more detailed configuration example of the
２つの撮像手段７００Ａおよび７００Ｂは、視聴者７１を撮像して生成した画像データを出力する。撮像手段７００Ａおよび７００Ｂは、例えば、カメラである。
The two imaging means 700A and 700B output image data generated by imaging the
解析手段２０００は、上記２つの撮像手段７００Ａおよび７００Ｂによって出力された各画像データの解析を行い、視聴者７１の眼球の向きおよび顔の向きのうち少なくともどちらか一つが判別可能な画像データを選択する。なお、解析手段２０００による解析は、第２、第３および第４の実施の形態で示したいずれかの方法と同様の方法でもよい。
The
図２１は、本実施形態における、表示装置２００の動作例を示すフローチャートである。
FIG. 21 is a flowchart illustrating an operation example of the
本実施形態において、２つの撮像手段７００Ａおよび７００Ｂは表示手段７０３前に位置する視聴者７１を撮像して、画像データをそれぞれ生成し、解析手段２０００へ該画像データを送る（Ｓ６０１）。
In the present embodiment, the two imaging means 700A and 700B image the
２つの撮像手段７００Ａおよび７００Ｂより視聴者７１の画像データが送られてくると、解析手段２０００は、視聴者７１の眼球部および顔部の画像データから、眼球および顔の向きの解析を行う（Ｓ６０２、Ｓ６０３）。なお、眼球部または顔部の画像データから、いずれか一方の向きを解析してもよい。また、解析方法は、上記第２、第３および第４の実施形態で示したいずれかの方法でもよい。
When the image data of the
解析手段２０００は、解析した２つの画像データのうち、視聴者７１の眼球および顔の少なくともどちらか一方の向きが解析されている画像データを選択する（Ｓ６０４）。
The
表示範囲決定手段７０２は、解析手段２０００により選択された画像データの解析結果に基づいて、表示手段７０３の表示面のうち、前記視聴者の視線との交点を内部に含む所定の大きさである第一の範囲に映像表示するよう表示範囲を決定し、表示手段７０３を制御する。また、前記第一の範囲以外の第二の範囲を前記第一の範囲よりも少ない電力で動作させるよう表示手段７０３を制御する。（Ｓ６０５）。
Based on the analysis result of the image data selected by the
表示手段７０３は、表示範囲決定手段７０２が制御した第一の範囲および第二の範囲を考慮して、表示手段７０３の所定の表示面に映像表示を行う（Ｓ６０６）。表示する映像は、例えば図示しない映像再生手段より映像データを受け取り、それを再生してもよい。
The
なお、本実施形態では撮像手段を２つに限定していたが、撮像手段がそれ以上の数あった場合でも同様の動作を行うことができる。また、撮像手段の位置は、図２０に限定されない。また、複数撮像された画像データのうち、眼球部および顔部の画像データのうち少なくともどちらか一方が撮像されている画像データを選択していたが、これに限定するものではない。例えば、複数の撮像手段により複数撮像された画像データのうち、眼球および顔の向きをよりよく判別できる画像データを選択し、同様の動作を行うこともできる。また、一つの撮像手段で撮像された画像データでは視聴者の視線方向が解析不可能と解析手段が判断した場合に、図示しない撮像手段切替手段により、他の撮像手段に切り替え、他の撮像手段による撮像を行ってもよい。この場合、切替後、他の撮像手段によって撮像された画像データを解析することで、同様の動作を実現することができる。また、表示手段７０３は、第一の範囲および第二の範囲を考慮して映像表示を行うが、表示する映像は、表示手段７０３に映像を表示するものであればよい。例えば、任意の記録媒体に記録された映像データを図示しない映像再生手段で再生しそれを表示してもよく、また、テレビ放送などの映像でもよい。また、表示される映像とともに音声を出力してもよい。
In the present embodiment, the number of imaging units is limited to two, but the same operation can be performed even when there are more imaging units. Further, the position of the imaging means is not limited to FIG. In addition, image data in which at least one of eyeball part and face part image data is selected from among a plurality of captured image data is not limited to this. For example, image data that can better determine the orientation of the eyeball and face is selected from among a plurality of image data captured by a plurality of imaging means, and the same operation can be performed. In addition, when the analysis unit determines that the viewer's line-of-sight direction cannot be analyzed in the image data captured by one imaging unit, the imaging unit switching unit (not shown) switches to another imaging unit, and the other imaging unit You may image by. In this case, the same operation can be realized by analyzing the image data picked up by other image pickup means after switching. In addition, the
本実施形態において、表示装置は撮像手段を複数有する。解析手段は、複数の撮像手段が出力した視聴者の画像データのうち、視聴者の眼球部および顔部の画像データから、眼球および顔の向きを解析する。さらに、解析手段は、解析した画像データのうち、視聴者の眼球および顔の少なくともどちらか一方の向きが解析されている画像データを選択する。表示範囲決定手段は、前記解析手段が選択した画像データの解析結果に基づき、表示手段の表示面のうち視聴者の視線との交点を内部に含む所定の大きさである第一の範囲に映像表示するよう表示範囲を決定し、表示手段を制御する。また、前記第一の範囲以外の第二の範囲を前記第一の範囲よりも少ない電力で動作させるように表示手段を制御する。 In the present embodiment, the display device has a plurality of imaging means. The analysis unit analyzes the orientation of the eyeball and the face from the image data of the viewer's eyeball and face from among the viewer's image data output by the plurality of imaging units. Furthermore, the analysis means selects image data in which the orientation of at least one of the viewer's eyeball and face is analyzed from the analyzed image data. The display range determining means is based on the analysis result of the image data selected by the analyzing means, and displays the video in a first range having a predetermined size including an intersection with the viewer's line of sight on the display surface of the display means. The display range is determined so as to display, and the display means is controlled. In addition, the display unit is controlled so that the second range other than the first range is operated with less power than the first range.
従って、本実施形態によれば、表示装置は、視聴者の視線から定まる第一および第二の範囲に基づいて、映像表示を行う範囲および省電力で動作する範囲を制御し、表示装置に表示される表示を省電力で表示することができる。また、視聴者の視野に合わせて映像表示を行う範囲を決定しているため、視聴者にとって違和感のない映像表示を行う表示装置を提供することができる。 Therefore, according to the present embodiment, the display device controls the display range and the power saving range based on the first and second ranges determined from the viewer's line of sight, and displays them on the display device. The displayed display can be displayed with power saving. In addition, since the video display range is determined in accordance with the viewer's field of view, it is possible to provide a display device that performs video display that is comfortable for the viewer.
さらに、視聴者が一つの撮像手段の撮像範囲の死角にいる場合でも、他の撮像手段が撮像した画像データの解析を行うことで、表示装置に表示される表示を省電力で表示することができる。 Furthermore, even when the viewer is in the blind spot of the imaging range of one imaging unit, the display displayed on the display device can be displayed with power saving by analyzing the image data captured by the other imaging unit. it can.
＜第７の実施形態＞
本発明の第７の実施形態について図面を参照して説明する。本実施形態では、表示装置は、さらに重量センサを有する。なお、付記した図面参照符号は、理解を助けるための一例として各要素に便宜上付記したものであり、本発明を図示の態様に限定することを意図するものではない。なお、本実施形態において、本発明の上記実施形態のいずれかと同様の構成については、説明を省略する。
<Seventh Embodiment>
A seventh embodiment of the present invention will be described with reference to the drawings. In the present embodiment, the display device further includes a weight sensor. Note that the attached drawing reference numerals are added for convenience to each element as an example for facilitating understanding, and are not intended to limit the present invention to the illustrated embodiment. In the present embodiment, the description of the same configuration as that of any of the above embodiments of the present invention will be omitted.
図２２は、本実施形態における、表示装置２２０の構成例を示す。図２２に示すように、表示装置２２０は、撮像手段２０と、解析手段１５００と、重量センサ２２００と、表示範囲決定手段２２０１と表示手段２３とを備える。
FIG. 22 shows a configuration example of the
重量センサ２２００は、視聴者の位置を検出する。例えば、重量センサ２２００は表示手段２３の表示面前方の床に設置し、視聴者がどの位置から表示手段２３を見ているかを検出する。
The
表示範囲決定手段２２０１は、前記解析手段１５００および重量センサ２２００の情報に基づき、表示手段２３の表示面のうち、前記視聴者の視線との交点を内部に含む所定の大きさである第一の範囲に映像表示するよう表示範囲を決定し、表示手段２３を制御する。また、前記第一の範囲以外の第二の範囲を前記第一の範囲よりも少ない電力で動作させるよう表示手段２３を制御する。なお、第一の範囲および第二の範囲は、人間が有する平均的な視野範囲に基づいて決定してもよい。また、第二の範囲とは、第一の範囲よりも省電力で動作する範囲をいい、例えば、省電力で映像表示を行う範囲や、何も映像表示を行わない範囲などをいう。
The display
図２３は、本実施形態における、表示装置２２０の動作例を示すフローチャートである。
FIG. 23 is a flowchart illustrating an operation example of the
本実施形態において、撮像手段２０は、表示手段２３前に位置する視聴者を撮像して、画像データを生成し、解析手段１５００へ該画像データを送る（Ｓ７０１）。なお、このＳ７０１は、第１の実施形態の図６のＳ００１と同じ動作を行ってもよい。
In the present embodiment, the
撮像手段２０より視聴者の画像データが送られてくると、解析手段１５００は、視聴者の眼球部および顔部の画像データから眼球および顔の向きの解析を行う（Ｓ７０２、Ｓ７０３）。なお、眼球部または顔部の画像データのいずれかを解析してもよい。また、解析方法は、上記第２、第３および第４の実施形態で示したいずれかの方法でもよい。
When viewer image data is sent from the
重量センサ２２００は、表示手段２３に対する視聴者の位置を検出する（Ｓ７０４）。
The
表示範囲決定手段２２０１は、前記解析手段１５００および重量センサ２２００の情報に基づき、表示手段２３の表示面のうち、前記視聴者の視線との交点を内部に含む所定の大きさである第一の範囲に映像表示するよう表示範囲を決定し、表示手段２３を制御する。また、前記第一の範囲以外の第二の範囲を前記第一の範囲よりも少ない電力で動作させるよう表示手段２３を制御する。（Ｓ７０５）。例えば、表示範囲決定手段２２０１は視聴者の位置に応じて、第一の範囲および第二の範囲の角度や幅を変更してもよい。
The display
表示手段２３は、表示範囲決定手段２２０１が制御した第一の範囲および第二の範囲を考慮して、表示手段２３の所定の表示面に映像表示を行う（Ｓ７０６）。表示する映像は、例えば図示しない映像再生手段より映像データを受け取り、それを再生してもよい。
The
本実施形態において、表示装置は重量センサを有する。解析手段は、撮像手段が出力した視聴者の画像データのうち、視聴者の眼球部および顔部の画像データを解析し、視線を示す情報を出力する。重量センサは、視聴者の位置を検出する。表示範囲決定手段は、解析手段および重量センサの情報に基づき、表示手段の表示面のうち視聴者の視線との交点を内部に含む所定の大きさである第一の範囲に映像表示するよう表示範囲を決定し、表示手段を制御する。また、前記第一の範囲以外の第二の範囲を前記第一の範囲よりも少ない電力で動作させるように表示手段を制御する。 In the present embodiment, the display device has a weight sensor. The analysis unit analyzes the image data of the viewer's eyeball and face from the viewer image data output by the imaging unit, and outputs information indicating the line of sight. The weight sensor detects the position of the viewer. The display range determining means is configured to display an image in a first range having a predetermined size including an intersection with the viewer's line of sight on the display surface of the display means based on the information of the analyzing means and the weight sensor. Determine the range and control the display means. In addition, the display unit is controlled so that the second range other than the first range is operated with less power than the first range.
従って、本実施形態によれば、表示装置は、視聴者の視線方向から定まる第一および第二の範囲に基づいて、映像表示を行う範囲および省電力で動作する範囲を決定し、表示装置に表示される表示を省電力で表示することができる。また、視聴者の視野に合わせて映像表示を行う範囲を決定しているため、視聴者にとって違和感のない映像表示を行う表示装置を提供することができる。 Therefore, according to the present embodiment, the display device determines the video display range and the power-saving range based on the first and second ranges determined from the viewer's line-of-sight direction. The displayed display can be displayed with power saving. In addition, since the video display range is determined in accordance with the viewer's field of view, it is possible to provide a display device that performs video display that is comfortable for the viewer.
さらに、本実施形態によれば、視聴者の位置に応じて、映像表示を行う範囲および省電力で動作する範囲を制御することができるため、より精度の高い省電力動作を実現することができる。 Furthermore, according to the present embodiment, it is possible to control the range in which video display is performed and the range in which power saving is performed according to the position of the viewer, and thus it is possible to realize more accurate power saving operation. .
＜第８の実施形態＞
本発明の第８の実施形態について図面を参照して説明する。本実施形態では、表示装置は、さらに刺激発生手段を有する。なお、付記した図面参照符号は、理解を助けるための一例として各要素に便宜上付記したものであり、本発明を図示の態様に限定することを意図するものではない。なお、本実施形態において、本発明の上記実施形態のいずれかと同様の構成については、説明を省略する。なお、本実施形態における刺激発生手段は、人間が知覚できる種々の刺激を発生する。本実施形態では、刺激発生手段の一例としてスピーカーである場合を示す。
<Eighth Embodiment>
An eighth embodiment of the present invention will be described with reference to the drawings. In the present embodiment, the display device further includes stimulus generation means. Note that the attached drawing reference numerals are added for convenience to each element as an example for facilitating understanding, and are not intended to limit the present invention to the illustrated embodiment. In the present embodiment, the description of the same configuration as that of any of the above embodiments of the present invention will be omitted. Note that the stimulus generating means in the present embodiment generates various stimuli that can be perceived by humans. In this embodiment, the case where it is a speaker is shown as an example of a stimulus generation means.
図２４は、本実施形態における、表示装置２４０の構成例を示す。図２４に示すように、表示装置２４０は、撮像手段２０と、解析手段１５００と、スピーカー２４００と、表示範囲決定手段２４０１と、表示手段２３とを備える。
FIG. 24 shows a configuration example of the
スピーカー２４００は音声を出力する。また、スピーカー２４００は表示範囲決定手段２４０１に、表示範囲を切り替えるための信号を送信する。なお、スピーカー２４００は表示手段２３に表示される映像に合わせて音声を出力してもよい。
The
表示範囲決定手段２４０１は、表示手段２３の表示面のうち、前記視聴者の視線との交点を内部に含む所定の大きさである第一の範囲に映像表示するよう表示範囲を決定し、表示手段２３を制御する。また、前記第一の範囲以外の第二の範囲を前記第一の範囲よりも少ない電力で動作させるように表示手段２３を制御する。なお、第一の範囲および第二の範囲は、人間が有する平均的な視野範囲に基づいて決定してもよい。また、第二の範囲とは、第一の範囲よりも省電力で動作する範囲をいい、例えば、省電力で映像表示を行う範囲や、何も映像表示を行わない範囲などをいう。また、表示範囲決定手段２４０１はスピーカー２４００から発せられる音声とその音声方向に合わせて、第一の範囲と第二の範囲とを切り替える。
The display
図２５は、本実施形態における、表示装置２４０の動作例を示すフローチャートである。
FIG. 25 is a flowchart illustrating an operation example of the
本実施形態において、撮像手段２０は、表示手段２３前に位置する視聴者を撮像して、画像データを生成し、解析手段１５００へ該画像データを送る（Ｓ８０１）。なお、このＳ８０１は、第１の実施形態の図６のＳ００１と同じ動作を行ってもよい。
In the present embodiment, the
撮像手段２０より視聴者の画像データが送られてくると、解析手段１５００は、視聴者の眼球部および顔部の画像データの解析を行う（Ｓ８０２、Ｓ８０３）。なお、眼球部または顔部の画像データのいずれかを解析してもよい。また、解析方法は、上記第２、第３および第４の実施形態で示したいずれかの方法でもよい。 When the viewer's image data is sent from the imaging means 20, the analysis means 1500 analyzes the image data of the viewer's eyeball and face (S802, S803). Note that either the eyeball part or the face image data may be analyzed. The analysis method may be any of the methods shown in the second, third, and fourth embodiments.
表示範囲決定手段２４０１は、前記解析手段１５００が解析した画像データに基づき、表示手段２３の表示面のうち、前記視聴者の視線との交点を内部に含む所定の大きさである第一の範囲に映像表示するよう表示範囲を決定し、表示手段２３を制御する。また、前記第一の範囲以外の第二の範囲を前記第一の範囲よりも少ない電力で動作させるように表示手段２３を制御する（Ｓ８０４）。
Based on the image data analyzed by the
表示手段２３は、表示範囲決定手段２４０１が制御した第一の範囲および第二の範囲を考慮して、表示手段２３の所定の表示面に映像表示を行う（Ｓ８０５）。表示する映像は、例えば図示しない映像再生手段より映像データを受け取り、それを再生してもよい。
The
表示手段２３の映像表示中に、スピーカー２４００は特徴的な音声を発する（Ｓ８０６）。スピーカー２４００はその音声とともに、表示範囲決定手段２４０１に表示範囲を切り替えるための信号を送信する。
During the video display on the display means 23, the
信号を受信した表示範囲決定手段２４０１は、スピーカー２４００から発せられる音声とその音声の方向に合わせて、前記音声方向の第二の範囲を、第一の範囲に切り替える。（Ｓ８０７）。
The display
表示手段２３は、切替後の第一の範囲および第二の範囲を考慮して表示手段２３の所定の表示面に映像表示を行う（Ｓ８０８）。
The
例えば、図２６のように、表示手段７０３の左右にひとつずつ左スピーカー２４００Ａおよび右スピーカー２４００Ｂを設けた表示装置２６０において、視聴者７１が表示手段７０３の左側方向を向いている場合を考える。この場合、表示装置２３の表示面のうち、視聴者７１の左側あたる第一の範囲９０に映像表示が行われる。また、第一の範囲以外の第二の範囲９１は省電力動作している。このとき、図２７のように、右スピーカー２４００Ｂが特徴的な音声２４０２を発したとする。その特徴的な音声２４０２とともに、表示範囲決定手段２４０１は、表示手段７０３のうち、視聴者の右側にあたる部分を第一の範囲９０に切り替え、その他の部分を第二の範囲９１とする。そして、表示手段は切替後の第一および第二の範囲を考慮して映像表示を行う。なお、上記例のようにスピーカー２４００は左右２つ設ける必要はなく、スピーカー２４００は少なくとも１つ以上あればよい。また、スピーカー２４００の設置場所は表示手段７０３の左右に限らない。
For example, as shown in FIG. 26, consider a case where the
また、スピーカーの設置位置およびスピーカーが発する音、音の大きさなどを適宜変更することで、視聴者を任意の方向に振り向かせ、その方向に映像表示を行うことも可能である。また、本実施形態では、刺激発生手段としてスピーカーの一例を示したが、スピーカーに限定されることはない。例えば、風や熱、冷たさ、においなど人間が知覚できるものを発生させる手段であれば同様の動作を実現することができる。また、異なる複数の刺激発生手段を組合せてもよい。 In addition, by appropriately changing the installation position of the speaker, the sound emitted by the speaker, the volume of the sound, and the like, it is possible to turn the viewer in an arbitrary direction and display an image in that direction. In the present embodiment, an example of the speaker is shown as the stimulus generating means, but the present invention is not limited to the speaker. For example, the same operation can be realized as long as it is a means for generating things that can be perceived by humans such as wind, heat, coldness, and smell. A plurality of different stimulus generating means may be combined.
本実施形態において、表示装置は、さらにスピーカーを有する。解析手段は、撮像手段が出力した視聴者の画像データのうち、視聴者の眼球部および顔部の画像データを解析し、視線を示す情報を出力する。表示範囲決定手段は、前記解析手段が解析した情報に基づき、表示手段の表示面のうち、視聴者の視線との交点を内部に含む所定の大きさである第一の範囲に映像表示するよう表示範囲を決定し、表示手段を制御する。また、前記第一の範囲以外の第二の範囲を前記第一の範囲よりも少ない電力で動作させるように表示手段を制御する。スピーカーは特徴的な音声を発するとともに、表示範囲決定手段に表示範囲を切り替えるための信号を送信する。その信号を受信した表示範囲決定手段は、スピーカー発せられる音声とその音声方向に合わせて、第一の範囲と第二の範囲とを切り替える。 In the present embodiment, the display device further includes a speaker. The analysis unit analyzes the image data of the viewer's eyeball and face from the viewer image data output by the imaging unit, and outputs information indicating the line of sight. Based on the information analyzed by the analysis means, the display range determination means displays a video in a first range having a predetermined size including an intersection with the viewer's line of sight on the display surface of the display means. The display range is determined and the display means is controlled. In addition, the display unit is controlled so that the second range other than the first range is operated with less power than the first range. The speaker emits a characteristic sound and transmits a signal for switching the display range to the display range determining means. The display range determining means that has received the signal switches between the first range and the second range in accordance with the sound emitted from the speaker and the sound direction.
従って、本実施形態によれば、表示装置は、視聴者の視線から定まる第一および第二の範囲に基づいて、映像表示を行う範囲および省電力で動作する範囲を制御し、表示装置に表示される表示を省電力で表示することができる。また、視聴者の視野に合わせて映像表示を行う範囲を決定しているため、視聴者にとって違和感のない映像表示を行う表示装置を提供することができる。 Therefore, according to the present embodiment, the display device controls the display range and the power saving range based on the first and second ranges determined from the viewer's line of sight, and displays them on the display device. The displayed display can be displayed with power saving. In addition, since the video display range is determined in accordance with the viewer's field of view, it is possible to provide a display device that performs video display that is comfortable for the viewer.
さらに本実施形態によれば、表示装置は、刺激発生手段から発せられる特徴的な刺激とその方向に合わせて、表示範囲決定手段は映像表示を行う範囲と省電力で動作する範囲とを切り替える。このため、視聴者を刺激発生手段から発せられた刺激方向に振り向かせるとともに、向いた方向を映像表示を行う範囲とすることができ、視聴者は実体験に近い、より臨場感のある映像表示を体験することができる。 Furthermore, according to the present embodiment, the display device switches the display range determination unit between the range in which video display is performed and the range in which power saving is performed in accordance with the characteristic stimulus emitted from the stimulus generation unit and its direction. For this reason, the viewer can be turned to the stimulus direction emitted from the stimulus generating means, and the direction in which the viewer is directed can be set as a range for displaying the image. Can experience.
以上、本発明の実施形態を説明したが、本発明は、上記したそれぞれの実施形態に限定されるものではない。本発明は、各実施形態の変形・置換・調整に基づいて実施できる。また、本発明は、各実施形態を任意に組合せて実施することもできる。すなわち、本発明は、本明細書の全ての開示内容、技術的思想に従って実現できる各種変形、修正を含む。なお、各図面に付記した図面参照符号は、理解を助けるための一例として各要素に便宜上付記したものであり、本発明を図示の態様に限定することを意図するものではない。 As mentioned above, although embodiment of this invention was described, this invention is not limited to each above-mentioned embodiment. The present invention can be implemented based on modifications, substitutions, and adjustments of the embodiments. The present invention can also be implemented by arbitrarily combining the embodiments. That is, the present invention includes various modifications and corrections that can be realized in accordance with all the disclosed contents and technical ideas of the present specification. In addition, the drawing reference numerals attached to each drawing are added to each element for convenience as an example for facilitating understanding, and are not intended to limit the present invention to the illustrated embodiment.
上記の実施形態の一部又は全部は、以下の付記のようにも記載されうるが、以下には限られない。 A part or all of the above-described embodiment can be described as in the following supplementary notes, but is not limited thereto.
（付記１）
映像を所定の表示面に表示する表示手段と、
前記表示手段の前に位置する人物を撮像して生成した画像データを出力する撮像手段と、
前記画像データから求めた前記人物の視線を示す情報を出力する解析手段と、
前記表示面のうち、前記人物の視線との交点を内部に含む所定の大きさである第一の範囲に映像表示するよう前記表示手段を制御し、前記第一の範囲以外の第二の範囲を前記第一の範囲よりも少ない電力で動作させるよう前記表示手段を制御する表示範囲決定手段と、
を有する表示装置。
(Appendix 1)
Display means for displaying an image on a predetermined display surface;
Imaging means for outputting image data generated by imaging a person located in front of the display means;
Analyzing means for outputting information indicating the line of sight of the person obtained from the image data;
Of the display surface, the display means is controlled to display an image in a first range having a predetermined size including an intersection with the line of sight of the person, and a second range other than the first range Display range determining means for controlling the display means to operate with less power than the first range;
A display device.
（付記２）
前記解析手段は、前記人物の眼球部の画像データを解析し、前記人物の眼球の方向を解析することを特徴とする付記１に記載の表示装置。
(Appendix 2)
The display device according to claim 1, wherein the analyzing unit analyzes image data of an eyeball portion of the person and analyzes a direction of the eyeball of the person.
（付記３）
前記解析手段は、前記人物の顔部の画像データを解析し、前記人物の顔の方向を解析することを特徴とする付記１または２に記載の表示装置。
(Appendix 3)
The display device according to
（付記４）
前記解析手段は、前記人物の眼球部の画像データを所定の領域に分け、前記人物の眼球部の画像データの黒目を境にした白目の領域数から前記人物の眼球の方向を解析することを特徴とする付記１乃至３のいずれかに記載の表示装置。
(Appendix 4)
The analyzing means divides the image data of the person's eyeball part into predetermined areas, and analyzes the direction of the person's eyeball from the number of white eye areas bordering on the black eye of the image data of the person's eyeball part. 4. The display device according to any one of supplementary notes 1 to 3, which is characterized.
（付記５）
前記解析手段は、前記人物の顔部の画像データを所定の領域に分け、前記人物の顔部の画像データの鼻を境にした顔面の領域数から前記人物の顔の方向を解析することを特徴とする付記１乃至４のいずれかに記載の表示装置。
(Appendix 5)
The analysis means divides the image data of the person's face into predetermined areas, and analyzes the direction of the person's face from the number of face areas bordered by the nose of the image data of the person's face. 5. The display device according to any one of appendices 1 to 4, which is characterized.
（付記６）
前記解析手段は、前記人物が選択した顔の部分を解析することを特徴とする付記１乃至５のいずれかに記載の表示装置。
(Appendix 6)
The display device according to any one of appendices 1 to 5, wherein the analyzing unit analyzes a face portion selected by the person.
（付記７）
前記表示手段は、前記人物を取り囲む形状であることを特徴とする付記１乃至６のいずれかに記載の表示装置。
(Appendix 7)
The display device according to any one of appendices 1 to 6, wherein the display means has a shape surrounding the person.
（付記８）
前記人物の前記第一の範囲、前記第二の範囲および前記人物の顔情報を記憶する記憶手段を有し、前記表示範囲決定手段は、前記記憶された情報に基づいて前記表示手段を制御することを特徴とする付記１乃至７のいずれかに記載の表示装置。
(Appendix 8)
The storage unit stores the first range, the second range, and the face information of the person, and the display range determination unit controls the display unit based on the stored information. The display device according to any one of appendices 1 to 7, characterized in that:
（付記９）
前記人物の位置を検出する重量センサを有し、前記表示範囲決定手段は、前記重量センサより得られる前記人物の位置情報に基づいて前記表示手段の第一の範囲および前記第二の範囲を制御することを特徴とする付記１乃至８のいずれかに記載の表示装置。
(Appendix 9)
A weight sensor for detecting the position of the person; and the display range determination means controls the first range and the second range of the display means based on the position information of the person obtained from the weight sensor. The display device according to any one of appendices 1 to 8, wherein:
（付記１０）
刺激発生手段を有し、前記表示範囲決定手段は、前記刺激発生手段が発生する刺激に合わせて、前記第一の範囲と前記第二の範囲とを切り替えることを特徴とする付記１乃至９のいずれかに記載の表示装置。
(Appendix 10)
Appendices 1 to 9 having stimulus generation means, wherein the display range determination means switches between the first range and the second range according to the stimulus generated by the stimulus generation means. The display apparatus in any one.
（付記１１）
映像を所定の表示面に表示する表示ステップと、
人物を撮像して生成した画像データを出力する撮像ステップと、
前記画像データから求めた前記人物の視線を示す情報を出力する解析ステップと、
前記表示面のうち、前記人物の視線との交点を内部に含む所定の大きさである第一の範囲に映像表示するよう制御し、前記第一の範囲以外の第二の範囲を前記第一の範囲よりも少ない電力で動作させるよう制御する表示範囲決定ステップと、
を有する表示方法。
(Appendix 11)
A display step for displaying an image on a predetermined display surface;
An imaging step of outputting image data generated by imaging a person;
An analysis step of outputting information indicating the line of sight of the person obtained from the image data;
Of the display surface, control is performed so that an image is displayed in a first range having a predetermined size including an intersection with the line of sight of the person, and a second range other than the first range is set in the first range. A display range determining step for controlling to operate with less power than the range,
Display method.
（付記１２）
前記解析ステップは、前記人物の眼球部の画像データを解析し前記人物の眼球の方向を解析することを特徴とする付記１１に記載の表示方法。
(Appendix 12)
The display method according to
（付記１３）
前記解析ステップは、前記人物の顔部の画像データを解析し前記人物の顔の方向を解析することを特徴とする付記１１または１２に記載の表示方法。
(Appendix 13)
13. The display method according to
（付記１４）
前記解析ステップは、前記人物の眼球部の画像データを所定の領域に分け、前記人物の眼球部の画像データの黒目を境にした白目の領域数から前記人物の眼球の方向を解析することを特徴とする付記１１乃至１３のいずれかに記載の表示方法。
(Appendix 14)
The analyzing step divides the image data of the eyeball portion of the person into predetermined regions, and analyzes the direction of the eyeball of the person from the number of white eye regions bordering on the black eye of the image data of the eyeball portion of the person. 14. The display method according to any one of
（付記１５）
前記解析ステップは、前記人物の顔部の画像データを所定の領域に分け、前記人物の顔部の画像データの鼻を境にした顔面の領域数から前記人物の顔の方向を解析することを特徴とする付記１１乃至１４のいずれかに記載の表示方法。
(Appendix 15)
The analyzing step divides image data of the person's face into predetermined areas, and analyzes the direction of the person's face from the number of face areas bordered by the nose of the image data of the person's face. 15. The display method according to any one of
（付記１６）
前記解析ステップは、前記人物が選択した顔の部分を解析することを特徴とする付記１１乃至１５のいずれかに記載の表示方法。
(Appendix 16)
16. The display method according to any one of
（付記１７）
前記人物の前記第一の範囲、前記第二の範囲および前記人物の顔情報を記憶する記憶ステップを有し、前記表示範囲決定ステップは、前記記憶された情報に基づいて前記所定の表示面を制御することを特徴とする付記１１乃至１６のいずれかに記載の表示方法。
(Appendix 17)
Storing the first range of the person, the second range of the person, and face information of the person, wherein the display range determining step is configured to display the predetermined display surface based on the stored information. The display method according to any one of
（付記１８）
前記表示範囲決定ステップは、前記人物の位置情報に基づいて前記第一の範囲および前記第二の範囲を制御することを特徴とする付記１１乃至１７のいずれかに記載の表示方法。
(Appendix 18)
18. The display method according to any one of
（付記１９）
前記表示範囲決定ステップは、発生する刺激に合わせて、前記第一の範囲と前記第二の範囲とを切り替えることを特徴とする付記１１乃至１８のいずれかに記載の表示方法。
(Appendix 19)
The display method according to any one of
（付記２０）
映像を所定の表示面に表示する表示処理と、
人物を撮像して生成した画像データを出力する撮像処理と、
前記画像データから求めた前記人物の視線を示す情報を出力する解析処理と、
前記表示面のうち、前記人物の視線との交点を内部に含む所定の大きさである第一の範囲に映像表示するよう制御し、前記第一の範囲以外の第二の範囲を前記第一の範囲よりも少ない電力で動作させるよう制御する表示範囲決定処理と、
をコンピュータに実行させる表示プログラム。
(Appendix 20)
Display processing for displaying video on a predetermined display surface;
Imaging processing for outputting image data generated by imaging a person;
An analysis process for outputting information indicating the line of sight of the person obtained from the image data;
Of the display surface, control is performed so that an image is displayed in a first range having a predetermined size including an intersection with the line of sight of the person, and a second range other than the first range is set in the first range. Display range determination processing for controlling to operate with less power than the range,
A display program that causes a computer to execute.
（付記２１）
前記解析処理は、前記人物の眼球部の画像データを解析し前記人物の眼球の方向を解析することを特徴とする付記２０に記載の表示プログラム。
(Appendix 21)
The display program according to
（付記２２）
前記解析処理は、前記人物の顔部の画像データを解析し前記人物の顔の方向を解析することを特徴とする付記２０または２１に記載の表示プログラム。
(Appendix 22)
The display program according to
（付記２３）
前記解析処理は、前記人物の眼球部の画像データを所定の領域に分け、前記人物の眼球部の画像データの黒目を境にした白目の領域数から前記人物の眼球の方向を解析することを特徴とする付記２０乃至２２のいずれかに記載の表示プログラム。
(Appendix 23)
The analysis processing includes dividing image data of the eyeball portion of the person into predetermined regions, and analyzing the direction of the eyeball of the person from the number of white eye regions bordering on the black eye of the image data of the eyeball portion of the person. 23. The display program according to any one of
（付記２４）
前記解析処理は、前記人物の顔部の画像データを所定の領域に分け、前記人物の顔部の画像データの鼻を境にした顔面の領域数から前記人物の顔の方向を解析することを特徴とする付記２０乃至２３のいずれかに記載の表示プログラム。
(Appendix 24)
The analysis process divides image data of the person's face into predetermined areas, and analyzes the direction of the person's face from the number of face areas bordered by the nose of the image data of the person's face. The display program according to any one of
（付記２５）
前記解析処理は、前記人物が選択した顔の部分を解析することを特徴とする付記２０乃至２４のいずれかに記載の表示プログラム。
(Appendix 25)
The display program according to any one of
（付記２６）
前記人物の前記第一の範囲、前記第二の範囲および前記人物の顔情報を記憶する記憶処理を有し、前記表示範囲決定処理は、前記記憶された情報に基づいて前記所定の表示面を制御することを特徴とする付記２０乃至２５のいずれかに記載の表示プログラム。
(Appendix 26)
A storage process for storing the first range of the person, the second range of the person, and face information of the person, and the display range determination process is configured to display the predetermined display surface based on the stored information. The display program according to any one of
（付記２７）
前記表示範囲決定処理は、前記人物の位置情報に基づいて前記第一の範囲および前記第二の範囲を制御することを特徴とする付記２０乃至２６のいずれかに記載の表示プログラム。
(Appendix 27)
The display program according to any one of
（付記２８）
前記表示範囲決定処理は、発生する刺激に合わせて、前記第一の範囲と前記第二の範囲とを切り替えることを特徴とする付記２０乃至２７のいずれかに記載の表示プログラム。
(Appendix 28)
The display program according to any one of
１０ 人間
１１ 色を識別できる視野範囲
１２ 文字を識別できる視野範囲
２、７０、１１０、１５０、１７０、２００、２２０、２４０、２６０ 表示装置
２０、７００、７００Ａ、７００Ｂ 撮像手段
２１、７０１、１１００、１５００、１７００、２０００ 解析手段
２２、７０２、１７０２、２２０１、２４０１ 表示範囲決定手段
２３、７０３ 表示手段
３ 液晶画面
３０ 液晶ドット
３１ 駆動ライン
４０ 赤ドット
７１ 視聴者
８０ 眼球部
８１ 黒目
８２ 左の白目
８３ 右の白目
９０ 第一の範囲
９１ 第二の範囲
１２００ 顔部
１２０１ 鼻
１２０２ 鼻を通る中心線
１２０３ 顔の左端から鼻までの顔
１２０４ 顔の右端から鼻までの顔
１７０１ 記憶手段
２２００ 重量センサ
２４００、２４００Ａ、２４００Ｂ スピーカー
２４０２ 特徴的な音声
DESCRIPTION OF
Claims (6)
前記表示手段の前に位置する人物を撮像して生成した画像データを出力する撮像手段と、
前記画像データから求めた前記人物の視線を示す情報を出力する解析手段と、
前記表示面のうち、前記人物の視線との交点を内部に含む所定の大きさである第一の範囲に映像表示するよう前記表示手段を制御し、前記第一の範囲以外の第二の範囲を前記第一の範囲よりも少ない電力で動作させるよう前記表示手段を制御し、かつ、前記人物の視線を示す情報と前記人物からの指示とに基づいて前記第一の範囲および前記第二の範囲を決定する表示範囲決定手段と、
前記人物の前記第一の範囲および前記第二の範囲が対応付けられた前記人物の顔の特徴を示す顔情報を記憶する記憶手段とを有し、
前記表示範囲決定手段は、前記顔情報に基づいて前記表示手段を制御する
ことを特徴とする表示装置。 Display means for displaying an image on a predetermined display surface;
Imaging means for outputting image data generated by imaging a person located in front of the display means;
Analyzing means for outputting information indicating the line of sight of the person obtained from the image data;
Of the display surface, the display means is controlled to display an image in a first range having a predetermined size including an intersection with the line of sight of the person, and a second range other than the first range Is controlled with less power than the first range, and the first range and the second range based on information indicating the line of sight of the person and instructions from the person Display range determining means for determining the range;
Storage means for storing face information indicating features of the face of the person associated with the first range and the second range of the person,
The display range determining unit controls the display unit based on the face information.
人物を撮像して生成した画像データを出力する撮像ステップと、
前記画像データから求めた前記人物の視線を示す情報を出力する解析ステップと、
前記表示面のうち、前記人物の視線との交点を内部に含む所定の大きさである第一の範囲に映像表示するよう制御し、前記第一の範囲以外の第二の範囲を前記第一の範囲よりも少ない電力で動作させるよう制御し、かつ、前記人物の視線を示す情報と前記人物からの指示とに基づいて前記第一の範囲および前記第二の範囲を決定する表示範囲決定ステップと、
前記人物の前記第一の範囲および前記第二の範囲が対応付けられた前記人物の顔の特徴を示す顔情報を記憶する記憶ステップとを有し、
前記表示範囲決定ステップで、前記顔情報に基づいて前記表示面における前記映像表示を制御する
ことを特徴とする表示方法。 A display step for displaying an image on a predetermined display surface;
An imaging step of outputting image data generated by imaging a person;
An analysis step of outputting information indicating the line of sight of the person obtained from the image data;
Of the display surface, control is performed so that an image is displayed in a first range having a predetermined size including an intersection with the line of sight of the person, and a second range other than the first range is set in the first range. Display range determining step for controlling to operate with less power than the range , and determining the first range and the second range based on information indicating the line of sight of the person and an instruction from the person When,
Storing face information indicating the characteristics of the face of the person associated with the first range and the second range of the person,
The display method characterized in that, in the display range determining step, the video display on the display surface is controlled based on the face information.
人物を撮像して生成した画像データを出力する撮像処理と、
前記画像データから求めた前記人物の視線を示す情報を出力する解析処理と、
前記表示面のうち、前記人物の視線との交点を内部に含む所定の大きさである第一の範囲に映像表示するよう制御し、前記第一の範囲以外の第二の範囲を前記第一の範囲よりも少ない電力で動作させるよう制御し、かつ、前記人物の視線を示す情報と前記人物からの指示とに基づいて前記第一の範囲および前記第二の範囲を決定する表示範囲決定処理と、
前記人物の前記第一の範囲および前記第二の範囲が対応付けられた前記人物の顔の特徴を示す顔情報を記憶する記憶処理とをコンピュータに実行させ、
前記表示範囲決定処理で、前記顔情報に基づいて前記表示面における前記映像表示を制御させる
ことを特徴とする表示プログラム。 Display processing for displaying video on a predetermined display surface;
Imaging processing for outputting image data generated by imaging a person;
An analysis process for outputting information indicating the line of sight of the person obtained from the image data;
Of the display surface, control is performed so that an image is displayed in a first range having a predetermined size including an intersection with the line of sight of the person, and a second range other than the first range is set in the first range. Display range determination processing for controlling to operate with less power than the range and determining the first range and the second range based on information indicating the line of sight of the person and an instruction from the person When,
Causing the computer to execute storage processing for storing face information indicating the facial features of the person associated with the first range and the second range of the person,
The display program for controlling the video display on the display surface based on the face information in the display range determination process.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2013266978A JP6133766B2 (en) | 2013-12-25 | 2013-12-25 | Display device, display method, and display program |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2013266978A JP6133766B2 (en) | 2013-12-25 | 2013-12-25 | Display device, display method, and display program |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2015122711A JP2015122711A (en) | 2015-07-02 |
| JP6133766B2 true JP6133766B2 (en) | 2017-05-24 |
Family
ID=53533960
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2013266978A Active JP6133766B2 (en) | 2013-12-25 | 2013-12-25 | Display device, display method, and display program |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP6133766B2 (en) |
Family Cites Families (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH07184191A (en) * | 1993-12-24 | 1995-07-21 | Sega Enterp Ltd | Video display |
| JP3571859B2 (en) * | 1996-08-12 | 2004-09-29 | 富士通株式会社 | Image display control device and image display system |
| JP3489491B2 (en) * | 1999-06-24 | 2004-01-19 | 日本電気株式会社 | PERSONAL ANALYSIS DEVICE AND RECORDING MEDIUM RECORDING PERSONALITY ANALYSIS PROGRAM |
| JP2001350549A (en) * | 2000-06-08 | 2001-12-21 | Hitachi Ltd | Display screen power saving control method, recording medium |
| JP2010098421A (en) * | 2008-10-15 | 2010-04-30 | Nippon Telegr & Teleph Corp <Ntt> | Display control device, display control method, program, and recording medium |
| JP5370380B2 (en) * | 2011-01-25 | 2013-12-18 | ソニー株式会社 | Video display method and video display device |
| JP2012194751A (en) * | 2011-03-16 | 2012-10-11 | Nippon Telegr & Teleph Corp <Ntt> | Image processing method, image processing system and computer program |
| JP2013019964A (en) * | 2011-07-07 | 2013-01-31 | Panasonic Corp | Image display device for vehicle |
| US9823837B2 (en) * | 2011-11-29 | 2017-11-21 | Panasonic Intellectual Property Management Co., Ltd. | Display control device, display control method, and display control program |
-
2013
- 2013-12-25 JP JP2013266978A patent/JP6133766B2/en active Active
Also Published As
| Publication number | Publication date |
|---|---|
| JP2015122711A (en) | 2015-07-02 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US8587710B2 (en) | Apparatus and method for controlling picture using image recognition | |
| US20170140713A1 (en) | Liquid crystal display method, device, and storage medium | |
| US9298246B2 (en) | Information processing device, system, and information processing method | |
| US8094185B2 (en) | Three-dimensional image display method and apparatus | |
| JP2011087281A (en) | Display apparatus, and image processing method thereof | |
| US20120236131A1 (en) | Display device, display system, and method for controlling display device | |
| JP2012216953A (en) | Information processing apparatus, display control method, and display controller | |
| KR20190020633A (en) | Apparatus and method for controlling brightness of display based on eye tracking | |
| JP2013064827A (en) | Electronic apparatus | |
| JP2009031981A (en) | Interface device, interface method, and interface program | |
| US20120249758A1 (en) | Electric apparatus and control method of indicator | |
| US20150070477A1 (en) | Image processing device, image processing method, and program | |
| CN113301367A (en) | Audio and video processing method, device and system and storage medium | |
| KR20190050555A (en) | Electronic apparatus and image correction method thereof | |
| JP6133766B2 (en) | Display device, display method, and display program | |
| US20120218399A1 (en) | Electronic apparatus, controller of indicator, and control method of the same | |
| US11580922B2 (en) | Display latency reduction | |
| US20130113817A1 (en) | Display apparatus and control method thereof | |
| US12283221B2 (en) | Display control device, display control method, and program | |
| KR20110041066A (en) | TV video size adjusting device according to viewing distance | |
| JP5828400B2 (en) | Video display device and video display method | |
| CN106023870A (en) | Display enabling adaptive display effect | |
| US8573786B2 (en) | Projector apparatus and method for dynamically masking objects | |
| JP2016061983A (en) | Projection system, projection system control method, and projection system control program | |
| TW201830217A (en) | Display adjustment method and electronic device |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20150417 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20160210 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20160308 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20160428 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20160823 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20161021 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20170328 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20170420 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 6133766 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |