JP6743691B2 - 表示制御装置、表示制御方法およびコンピュータプログラム - Google Patents

Description

本開示は、表示制御装置、表示制御方法およびコンピュータプログラムに関する。

頭部に装着して映像を視聴する表示装置、すなわちヘッドマウントディスプレイ（ＨＭＤ）が広く知られている（例えば特許文献１等参照）。ヘッドマウントディスプレイは、左右の眼毎に光学ユニットを持ち、また、ヘッドフォンと併用し、視覚および聴覚を制御できるように構成されている。また最近では、装着時にユーザの視線の前方の様子をユーザに提示することが出来る、いわゆる透過型のヘッドマウントディスプレイについての技術も進められている。

特開２０１３−２５７４５７号公報

ユーザが透過型のヘッドマウントディスプレイを使用している際は、常にヘッドマウントディスプレイが着用され、ユーザの眼前にディスプレイが存在する状態になっている。従って、メールや電話の着信などを知らせる通知情報が、ユーザの意図しないタイミングでディスプレイに表示される場合がある。通知情報が突然ディスプレイに表示されると、ユーザの視界の一部がその通知情報で覆われてしまい、危険である。

またユーザが透過型のヘッドマウントディスプレイを使用している際に、通知情報に注目させるために通知情報を点滅させたり移動させたりすると、ユーザの注目がその点滅や移動に向いてしまい、危険である。さらに、視野の一部に常に何らかの情報が表示されている場合も、ユーザの視界の一部がその情報で覆われてしまい、危険である。

そこで本開示は、ユーザが透過型のヘッドマウントディスプレイを使用する際に、ユーザの視界を安全に確保することが可能な、新規かつ改良された表示制御装置、表示制御方法およびコンピュータプログラムを提供する。

本開示によれば、透過型ディスプレイが使用されている状況の情報を取得する状況取得部と、前記状況取得部が取得した前記情報を用いて前記透過型ディスプレイに対して前記透過型ディスプレイへの情報表示が徐々に明確になる表示制御を実行する表示制御部と、
を備える、表示制御装置が提供される。

また本開示によれば、透過型ディスプレイが使用されている状況の情報を取得することと、取得された前記情報を用いて前記透過型ディスプレイに対して前記透過型ディスプレイへの情報表示が徐々に明確になる表示制御を実行することと、を含む、表示制御方法が提供される。

また本開示によれば、コンピュータに、透過型ディスプレイが使用されている状況の情報を取得することと、取得された前記情報を用いて前記透過型ディスプレイに対して前記透過型ディスプレイへの情報表示が徐々に明確になる表示制御を実行することと、を実行させる、コンピュータプログラムが提供される。

以上説明したように本開示によれば、ユーザが透過型のヘッドマウントディスプレイを使用する際に、ユーザの視界を安全に確保することが可能な、新規かつ改良された表示制御装置、表示制御方法およびコンピュータプログラムを提供することができる。

なお、上記の効果は必ずしも限定的なものではなく、上記の効果とともに、または上記の効果に代えて、本明細書に示されたいずれかの効果、または本明細書から把握され得る他の効果が奏されてもよい。

本開示の一実施形態に係るヘッドマウントディスプレイ１００の外観例を示す説明図である。 本開示の一実施形態に係るヘッドマウントディスプレイ１００’の外観例を示す説明図である。 本開示の一実施形態に係るヘッドマウントディスプレイ１００の機能構成例を示す説明図である。 本開示の一実施形態に係るヘッドマウントディスプレイ１００の表示部１１０に表示される画像の一例を示す説明図である。 本開示の一実施形態に係るヘッドマウントディスプレイ１００の表示部１１０に表示される画像の一例を示す説明図である。 本開示の一実施形態に係るヘッドマウントディスプレイ１００の表示部１１０に表示される画像の一例を示す説明図である。 本開示の一実施形態に係るヘッドマウントディスプレイ１００の表示部１１０に表示される画像の一例を示す説明図である。 表示部１１０に表示されるアイコン１３１の透過度（または表示部１１０の輝度）の変化の一例をグラフで示す説明図である。 表示部１１０に表示されるアイコン１３１の透過率（または表示部１１０の輝度）の変化の一例をグラフで示す説明図である。 表示部１１０に表示されるアイコン１３１の透過率（または表示部１１０の輝度）の変化の一例をグラフで示す説明図である。 本開示の一実施形態に係るヘッドマウントディスプレイ１００の表示部１１０に表示される画像の一例を示す説明図である。 本開示の一実施形態に係るヘッドマウントディスプレイ１００の表示部１１０に表示される画像の一例を示す説明図である。 本開示の一実施形態に係るヘッドマウントディスプレイ１００の表示部１１０に表示される画像の一例を示す説明図である。 ユーザの視線に応じてアイコンの表示制御を実行する際の、具体的な演算方法の一例を示す説明図である。 本開示の一実施形態に係るヘッドマウントディスプレイ１００の表示部１１０に表示される画像の一例を示す説明図である。 本開示の一実施形態に係るヘッドマウントディスプレイ１００の表示部１１０に表示される画像の一例を示す説明図である。 本開示の一実施形態に係るヘッドマウントディスプレイ１００の表示部１１０に表示される画像の一例を示す説明図である。 本開示の一実施形態に係るヘッドマウントディスプレイ１００の動作例を示す流れ図である。

以下に添付図面を参照しながら、本開示の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。

なお、説明は以下の順序で行うものとする。
１．本開示の一実施形態
１．１．ヘッドマウントディスプレイの外観例
１．２．ヘッドマウントディスプレイの機能構成例
１．３．ヘッドマウントディスプレイの動作例
２．まとめ

＜１．本開示の一実施形態＞
［１．１．ヘッドマウントディスプレイの外観例］
まず、図面を参照しながら本開示の一実施形態に係るヘッドマウントディスプレイの外観例について説明する。図１は、本開示の一実施形態に係るヘッドマウントディスプレイ１００の外観例を示す説明図である。

ヘッドマウントディスプレイ１００は、図１に示したようにメガネ型の表示装置であり、右眼用表示部１１０Ｒおよび左眼用表示部１１０Ｌからなる表示部１１０を備える。ヘッドマウントディスプレイ１００は、いわゆる透過型のヘッドマウントディスプレイであり、ユーザに、実際の視野に重ねて画面を確認させることが出来る。

ヘッドマウントディスプレイ１００は、鼻パッド１０１が装着センサを兼ねており、鼻パッドにユーザ（鑑賞者）の鼻頭が当接することにより装着を検出する仕組みとなっている。

表示部１１０は、例えば有機ＥＬディスプレイで構成され得る。表示部１１０には、画像が表示されていない状態（スルー状態）と、ユーザの実際の視野に重なって画像が表示される状態（画像表示状態）と、片側の表示部だけに画像が表示される状態（片眼表示状態）と、が切り替えられる表示制御が実行される。

ヘッドマウントディスプレイ１００は、外部の装置（パーソナルコンピュータ、スマートフォン、タブレット型携帯端末等）から有線または無線で画像信号を受信し、受信した画像信号に基づいて画像を表示部１１０に表示する。

以上、図１は、本開示の一実施形態に係るヘッドマウントディスプレイ１００の外観例について説明した。続いてヘッドマウントディスプレイの別の外観例を示す。図２は、本開示の一実施形態に係るヘッドマウントディスプレイ１００’の外観例を示す説明図である。

ヘッドマウントディスプレイ１００’は、図２に示したようにメガネ型の表示装置であり、両側頭部から後頭部にかけて半周回するようなフレームの構造の装着ユニットを備える。ヘッドマウントディスプレイ１００’は、右眼用表示部１１０Ｒ’および左眼用表示部１１０Ｌ’からなる表示部１１０’を備える。

図１に示したヘッドマウントディスプレイ１００や、図２に示したヘッドマウントディスプレイ１００’は、ユーザに対し、実際の視野に重ねて画面を確認させることが出来る。しかし、上述したように、ユーザが透過型のヘッドマウントディスプレイを使用している際は、常にヘッドマウントディスプレイが着用され、ユーザの眼前にディスプレイが存在する状態になっている。従って、メールや電話の着信などを知らせる通知情報が、ユーザの意図しないタイミングでディスプレイに表示される場合がある。通知情報が突然ディスプレイに表示されると、ユーザの視界の一部がその通知情報で覆われてしまい、危険である。

またユーザが透過型のヘッドマウントディスプレイを使用している際に、通知情報に注目させるために通知情報を点滅させたり移動させたりすると、ユーザの注目がその点滅や移動に向いてしまい、危険である。さらに、視野の一部に常に何らかの情報が表示されている場合も、ユーザの視界の一部がその情報で覆われてしまい、危険である。

そこで本開示の一実施形態では、ユーザの視界を安全に確保するヘッドマウントディスプレイについて説明する。

［１．２．ヘッドマウントディスプレイの機能構成例］
続いて、本開示の一実施形態に係るヘッドマウントディスプレイの機能構成例について説明する。図３は、本開示の一実施形態に係るヘッドマウントディスプレイ１００の機能構成例を示す説明図である。以下、図３を用いて本開示の一実施形態に係るヘッドマウントディスプレイ１００の機能構成例について説明する。

図３に示したように、本開示の一実施形態に係るヘッドマウントディスプレイ１００は、センサ部１０１と、システムコントローラ１０２と、表示部１１０と、センサ信号処理部１１１と、センサ制御部１１２と、撮像部１１３と、撮像信号処理部１１４と、撮像制御部１１５と、音声入力部１１６と、音声出力部１１７と、音声信号処理部１１８と、音声生成部１１９と、画像生成部１２０と、表示画像処理部１２１と、表示制御部１２２と、表示駆動部１２３と、通信部１２４と、ストレージ部１２５と、を含んで構成される。

システムコントローラ１０２は、例えばＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）、不揮発性メモリ部、インターフェース部を備えたマイクロコンピュータにより構成され、本実施形態の全体を制御する制御部として機能し得る。このシステムコントローラ１０２は、内部の動作プログラムに基づいて各部の制御を行い、表示部１１０において所要の画像表示を実行させる。また、システムコントローラ１０２は本開示の状況取得部の一例として機能し得る。つまり、システムコントローラ１０２は、後述するセンサ信号処理部１１１、撮像信号処理部１１４、音声信号処理部１１８から送られる各信号の内容に基づいて、ヘッドマウントディスプレイ１００が使用されている状況の情報を取得する。

センサ部１０１は、主に表示部１１０の近辺に搭載されるセンサである。センサ部１０１は、例えば加速度センサ、ジャイロセンサ、磁気センサ、気圧センサなどで構成され、ユーザの動きに応じた信号として、例えば頭部の動き、首の動き、ヘッドマウントディスプレイ１００の動きなどを検出することができる。センサ部１０１は、センサ信号をセンサ信号処理部１１１に送る。

静電容量センサやボタン、ＧＰＳ（Ｇｌｏｂａｌ Ｐｏｓｉｔｉｏｎｉｎｇ Ｓｙｓｔｅｍ）など、ユーザがヘッドマウントディスプレイ１００を操作するために使うセンサ系の信号もセンサ部１０１で処理さる。なお、これらの静電容量センサやボタン、ＧＰＳ等の入力デバイスの装着位置は、表示部１１０の近辺に限らない。

撮像部１１３は、ユーザの視覚を検出するセンサとして、例えば表示部１１０の近辺に配置されて、ユーザの眼部を撮像する。撮像部１１３が撮像したユーザの眼部の画像について画像解析を行うことで、ヘッドマウントディスプレイ１００は、ユーザの視線方向、焦点距離、瞳孔の開き具合、眼底パターン、まぶたの開閉などを検出できる。なお、これらユーザの視線方向、焦点距離、瞳孔の開き具合、眼底パターン、まぶたの開閉などの検出は、表示部１１０の近辺に配置されてユーザの眼部に光を照射する発光部と、眼部からの反射光を受光する受光部により行われても良い。例えば受光部の受光信号から、ユーザの水晶体の厚みを検知することも可能である。

センサ制御部１１２は、システムコントローラ１０２からの指示により、どのタイミングでどのセンサを駆動するか、もしくはどういった駆動方法で行うかなどのセンサ制御を行う。センサ信号処理部１１１は、システムコントローラ１０２にセンサ部１０１からのセンサ信号を送る前処理として、平均や分散などの各種数値処理を行う。

本実施形態では、電源オン／オフ、各種情報画像の表示開始、終了、画像内容の変更、輝度レベルや色合い等の表示調整、表示画面上の表示領域の変更等のために、ユーザの操作が必要になる場合がある。図３には図示しないが、それらのユーザ操作（処理動作のトリガ検出）のためには、例えばユーザが操作する操作キーや操作ダイヤルとしての操作子と、その操作子の操作を検知する操作検知機構を設け、システムコントローラ１０２がユーザの操作を検知できるようにすればよい。あるいはこのような操作子を設けなくても、センサ部１０１で検出されるユーザの状況（例えば眼の動きや身体の挙動や状態等）に基づいて、システムコントローラ１０２がユーザの操作意志や適切な動作処理を判別し、それに応じた処理を実行するようにしてもよい。

さらには、ヘッドマウントディスプレイ１００は、センサ部１０１によって外界情報（表示装置の周囲の状況や、場所、日時、被写体の状況などの検知情報）を検知することができる構成とし、システムコントローラ１０２が外界情報に基づいて適切な動作処理を判別し、処理を実行するようにしてもよい。

音声生成部１１９は、システムコントローラ１０２の指示に基づいて、音声合成処理を行ってメッセージ音声等の音声信号を生成したり、電子音その他のユーザに提示する音声信号を生成したりする。音声出力部１１７は、例えばヘッドマウントディスプレイ１００に搭載されたスピーカまたはイヤホンスピーカ（図示せず）と、そのスピーカに対するアンプ回路と、を有する。音声生成部１１９で生成された音声信号が音声出力部１１７に供給されることにより、ユーザはメッセージ音声や電子音等を聞くことができる。なお音声出力部１１７は、いわゆる骨伝導スピーカとして構成されてもよい。

音声入力部１１６は、マイクロホンで得られた音声信号を増幅処理するマイクアンプ部やＡ／Ｄ変換器を有し、音声信号処理部１１８へ音声データを出力する。音声信号処理部１１８は、例えばデジタルシグナルプロセッサ、Ｄ／Ａ変換器などからなる。この音声信号処理部１１８には、音声入力部１１６で得られた音声データや、音声生成部１１９で生成された音声データが供給される。

音声信号処理部１１８は、供給された音声データに対して、システムコントローラ１０２の制御に応じて、音量調整、音質調整、音響エフェクト等の処理を行う。そして音声信号処理部１１８は、処理した音声データをアナログ信号に変換して音声出力部１１７に供給する。なお、音声信号処理部１１８は、デジタル信号処理を行う構成に限られず、アナログアンプやアナログフィルタによって信号処理を行うものでも良い。音声信号処理部１１８から出力された音声信号は、音声出力部１１７のイヤホンスピーカから音声として出力される。このような構成により、ユーザは、音声入力部１１６で集音された外部音声を聞いたり、音声生成部１１９で生成された音声を聞いたりすることができる。

画像生成部１２０は、システムコントローラ１０２の制御に基づいて、画像信号を生成する。システムコントローラ１０２は、各部から得られる内容や数値に応じて、ユーザに提示するための画像となる画像信号を画像生成部１２０に生成させ、イメージ画像、グラフ画像、文字表示画像、ユーザに対する警告提示の為の画像、その他の画像としての画像信号を生成する。画像生成部１２０は、生成した画像信号を表示画像処理部１２１に供給する。

表示画像処理部１２１は、例えばビデオプロセッサで構成され、画像生成部１２０から供給された画像信号に対して各種表示のための処理を実行する。表示画像処理部１２１は、画像信号の輝度レベル調整、色補正、コントラスト調整、シャープネス（輪郭強調）調整などを行うことができる。また表示画像処理部１２１は、表示部１１０における表示画面上での表示位置の設定も行う。さらに表示画像処理部１２１は、画像信号の一部を拡大した拡大画像の生成や、縮小した縮小画像の生成、ソフトフォーカス、モザイク、輝度反転、画像内の一部のハイライト表示（強調表示）、全体の色の雰囲気の変化などの画像エフェクト処理、画像の分割表示のための画像信号の分離や合成、キャラクタ画像やイメージ画像の生成及び生成した画像を、画像生成部１２０から供給された画像信号に合成する処理なども行うことができるようにしてもよい。表示画像処理部１２１には、画像生成部１２０で生成された画像信号が供給されるが、画像信号に対して表示のための所要の信号処理を行って表示駆動部１２３に供給する。

表示駆動部１２３は、表示画像処理部１２１から供給される画像信号を、表示部１１０において表示させるための画素駆動回路で構成されている。即ち表示駆動部１２３は、表示部１１０においてマトリクス状に配置されている各画素について、それぞれ所定の水平／垂直駆動タイミングで画像信号に基づく駆動信号を印加し、表示部１１０に表示を実行させる。また表示駆動部１２３は、表示部１１０の各画素の輝度を制御して、画面全体及び一部をスルー状態とすることもできる。

表示制御部１２２は、システムコントローラ１０２の指示に基づいて、表示画像処理部１２１の処理動作や表示駆動部１２３の動作、表示部１１０（左右それぞれの表示部１１０Ｒ、１１０Ｌに対する処理を含む）に表示する画像を制御し、表示画像処理部１２１に対する信号処理の指示を行う。また表示制御部１２２は、表示駆動部１２３に対して、スルー状態と、画像表示状態と、片眼表示状態と、の切り換えが行われるように制御する。

撮像部１１３は、撮像レンズや、絞り、ズームレンズ、フォーカスレンズなどを備えて構成されるレンズ系や、レンズ系に対してフォーカス動作やズーム動作を行わせるための駆動系、さらにレンズ系で得られる撮像光を検出し、光電変換を行うことで撮像信号を生成する固体撮像素子アレイなどが設けられる。固体撮像素子アレイは、例えばＣＣＤ（Ｃｈａｒｇｅ Ｃｏｕｐｌｅｄ Ｄｅｖｉｃｅ）センサアレイや、ＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ Ｍｅｔａｌ Ｏｘｉｄｅ Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）センサアレイである。本実施形態では、この撮像部１１３によって、ヘッドマウントディスプレイ１００を装着したユーザの前方の光景が撮像されることになる。もちろん、撮像部１１３によってユーザの後方等、他の方向の光景が撮像されるようにしてもよい。

撮像信号処理部１１４は、撮像部１１３の固体撮像素子によって得られる信号に対するゲイン調整や波形整形を行うサンプルホールド／ＡＧＣ（Ａｕｔｏｍａｔｉｃ Ｇａｉｎ Ｃｏｎｔｒｏｌ）回路や、ビデオＡ／Ｄコンバータを備え、デジタルデータとしての撮像信号を得る。また撮像信号処理部１１４は、撮像信号に対してホワイトバランス処理、輝度処理、色信号処理、ぶれ補正処理なども行っても良い。

撮像制御部１１５は、システムコントローラ１０２からの指示に基づいて、撮像部１１３及び撮像信号処理部１１４の動作を制御する。撮像制御部１１５は、例えば撮像部１１３や撮像信号処理部１１４の動作のオン／オフを制御する。また撮像制御部１１５は、撮像部１１３に対して、オートフォーカス、自動露出調整、絞り調整、ズーム、焦点変更などの動作を実行させるための制御（モータ制御）を行っても良い。なお、撮像レンズによる被写体方向を可変できる可動機構が撮像部１１３に設けられている場合は、撮像制御部１１５は、システムコントローラ１０２の指示に基づいて、上記可動機構の動作を制御して、撮像部１１３における撮像レンズの方向を変化させても良い。

また撮像制御部１１５は、タイミングジェネレータを備えてもよい。撮像制御部１１５は、固体撮像素子及び撮像信号処理部１１４のサンプルホールド／ＡＧＣ回路、ビデオＡ／Ｄコンバータに対して、タイミングジェネレータにて生成されるタイミング信号により信号処理動作を制御してもよい。また、このタイミング制御により撮像フレームレートの可変制御を行なっても良い。

さらに、撮像制御部１１５は、固体撮像素子及び撮像信号処理部１１４における撮像感度や信号処理の制御を行っても良い。撮像制御部１１５は、例えば撮像感度制御として、固体撮像素子から読み出される信号のゲイン制御を行ったり、黒レベル設定制御や、デジタルデータ段階の撮像信号処理の各種係数制御、ぶれ補正処理における補正量制御などを行ったりしても良い。撮像制御部１１５は、撮像感度制御に関しては、特に波長帯域を考慮しない全体的な感度調整や、例えば赤外線領域、紫外線領域など、特定の波長帯域の撮像感度を調整する感度調整（例えば特定波長帯域をカットするような撮像）なども可能である。波長に応じた感度調整は、撮像レンズ系における波長フィルタの挿入や、撮像信号に対する波長フィルタ演算処理により可能である。これらの場合、撮像制御部１１５は、波長フィルタの挿入制御や、フィルタ演算係数の指定等により、感度制御を行うことができる。

撮像部１１３及び撮像信号処理部１１４によって得られる撮像画像信号が、画像生成部１２０で生成される情報画像信号とともに表示画像処理部１２１に供給される。表示画像処理部１２１は、撮像画像信号及び情報画像信号について、上述した各種信号処理を実行し、また撮像画像信号及び情報画像信号について、撮像画像および情報画像を同時に表示部１１０に表示させるための、画面分割としての信号処理（画像合成処理）を行う。

表示画像処理部１２１で合成処理された画像信号が、表示駆動部１２３に供給されて表示部１１０で表示されることで、表示部１１０では、撮像画像とその他の画像とが、同時表示されることになる。言い換えれば、ユーザは、撮像部１１３で撮像された画像を見ている状態においても、種々の画像を見ることができる。

撮像動作の開始、終了、ズーム動作、フォーカス動作、撮像画像調整などのためにユーザの操作が必要になる場合がある。もちろん、電源オン／オフ、各種情報画像の表示開始、終了、画像内容の変更、輝度レベルや色合い等の表示調整、表示画面上の表示領域の変更等のために、ユーザの操作が必要になる場合もある。それらの操作（動作のトリガ）のために、ヘッドマウントディスプレイ１００は、操作キー等の操作子を設けても良いが、センサ部１０１で検出されるユーザの状況（例えば眼の動きや身体の挙動や状態等）からシステムコントローラ１０２がユーザの操作意志や適切な動作処理を判別し、それに応じた処理を実行するようにしてもよい。さらには、ヘッドマウントディスプレイ１００は、外界情報（表示装置の周囲の状況や、場所、日時、被写体の状況などの検知情報）を検知することができる構成とし、システムコントローラ１０２が外界情報に基づいて適切な動作処理を判別し、処理を実行するようにしてもよい。

ストレージ部１２５は、所定の記録媒体に対してデータの記録再生を行う部位であり、例えばＨＤＤ（Ｈａｒｄ Ｄｉｓｋ Ｄｒｉｖｅ）やＳＳＤ（Ｓｏｌｉｄ Ｓｔａｔｅ Ｄｒｉｖｅ）として実現される。もちろん記録媒体としては、フラッシュメモリ等の固体メモリ、固定メモリを内蔵したメモリカード、光ディスク、光磁気ディスク、ホログラムメモリなど各種考えられ、ストレージ部１２５としては、採用される記録媒体に応じて記録再生を実行できる構成とされればよい。例えば、撮像部１１３で撮像され、撮像信号処理部１１４で処理された撮像信号としての画像データや、通信部１２４で受信した画像データ、さらには画像生成部１２０で生成された各種情報画像信号は、ストレージ部１２５に供給されてもよい。また音声入力部１１６で得られた音声データや、通信部１２４で受信した音声データ、さらには音声生成部１１９で生成された音声データも、ストレージ部１２５に供給されてもよい。

ストレージ部１２５は、システムコントローラ１０２の制御に従って、供給された画像データや音声データに対して、所定の記録媒体への記録のためのエンコード処理を行い、上記記録媒体に記録する。またストレージ部１２５は、システムコントローラ１０２の制御に従って、上記記録媒体に記録した画像データや音声データを再生し、出力する。ストレージ部１２５で再生されるデータとしては、例えば映画やビデオクリップなどの動画コンテンツ、デジタルスチルカメラ等で撮像されて記録媒体に記録された静止画コンテンツ、電子書籍等のデータ、ユーザがパーソナルコンピュータ等で作成した画像データ、テキストデータ、表計算データ等のコンピュータユースのデータ、ゲーム画像など、表示対象となるあらゆるデータが想定される。

通信部１２４は、外部機器との間でデータの送受信を行う。外部機器としては、例えば通信機能を備えたビデオカメラ、デジタルスチルカメラ等の撮像装置、コンピュータ装置、スマートフォン、スマートウォッチ、ビデオストレージ機器やテレビジョン受像器等のＡＶ機器、ネットワークサーバ装置などが想定される。通信部１２４は、無線ＬＡＮ、ブルートゥース（登録商標）などの方式で、例えばネットワークアクセスポイントに対する近距離無線通信を介してネットワーク通信を行う構成としても良いし、対応する通信機能を備えた外部機器との間で直接無線通信を行う構成としても良い。外部機器からヘッドマウントディスプレイ１００に送信されるデータとしては、外部機器が撮像装置である場合は、その撮像装置で撮像された画像データが想定され、また外部機器がコンテンツソース機器となる機器である場合は、映画やビデオクリップなどの動画コンテンツ、デジタルスチルカメラ等で撮像されて記録媒体に記録された静止画コンテンツ、電子書籍等のデータ、ユーザがパーソナルコンピュータ等で作成した画像データ、テキストデータ、表計算データ等のコンピュータユースのデータ、ゲーム画像など、表示対象となるあらゆるデータが想定される。

また、音声入力部１１６が得た音声データ、ストレージ部１２５が再生した音声データ、通信部１２４が受信した音声データは、システムコントローラ１０２の指示によって音声信号処理部１１８に供給される。従ってユーザは、デバイスを装着した状態で、撮像画像が撮像される時の外部音声を視聴したり、ストレージ部１２５で再生された画像や音声を視聴したり、通信部１２４で受信した画像や音声を視聴することができる。そして特に、画像生成部１２０での画像が、これらの撮像画像、又は再生画像、又は受信画像とともに表示画像処理部１２１に供給されることで、撮像画像、又は再生画像、又は受信画像とともにさまざまな情報画像が表示部１１０に表示される。また音声生成部１１９で音声データが生成されたタイミングで、その生成された音声データが音声信号処理部１１８に供給されることで、ユーザは、例えば外部音声、再生音声、受信音声を聞いている際に、音声生成部１１９で生成されたメッセージ音声や警告音等を聞くことができる。

表示系の動作や撮像機能にかかる動作に加え、ストレージ部での再生、頭出し、早送り／早戻し、一時停止、記録などのための動作制御や、通信部での送受信に関する動作制御のトリガを、システムコントローラ１０２が判断する場合がある。この場合も、ユーザが操作する操作キー等の操作子を設け、操作に応じた処理を実行するか、或いはセンサ部１０１で検出されるユーザの状況（例えば眼の動きや身体の挙動や状態等）からシステムコントローラが１０２ユーザの操作意志や適切な動作処理を判別し、それに応じた処理を実行するようにしてもよい。さらには、ヘッドマウントディスプレイ１００は、外界情報（表示装置の周囲の状況や、場所、日時、被写体の状況などの検知情報）を検知することができる構成とし、システムコントローラ１０２が外界情報に基づいて適切な動作処理を判別し、処理を実行するようにしてもよい。

図３に示したように構成されるヘッドマウントディスプレイ１００が画像表示状態または片眼表示状態で動作している場合に、ヘッドマウントディスプレイ１００の外部装置、またはヘッドマウントディスプレイ１００自身が、メールや電話などの着信があると、システムコントローラ１０２は、表示部１１０へ、着信があったことを示す画像、例えば所定のアイコンを表示させる処理を実行する。この際、システムコントローラ１０２は、着信があったことを示す画像をいきなり表示部１１０へ表示させるのではなく、アイコンの透過率（または表示部１１０の輝度）を変化させつつ表示部１１０へ表示させる。このようにアイコンの透過率（または表示部１１０の輝度）を変化させつつ、表示部１１０へ着信があったことを示す画像を表示させることで、本実施形態に係るヘッドマウントディスプレイ１００は、ヘッドマウントディスプレイ１００を着用するユーザの視界を安全に確保することが可能になる。

本開示の一実施形態に係るヘッドマウントディスプレイ１００の表示部１１０に表示される画像の例について説明する。図４Ａ〜図４Ｄは、本開示の一実施形態に係るヘッドマウントディスプレイ１００の表示部１１０に表示される画像の一例を示す説明図であり、メールの着信などの割り込みが発生した際のアイコンの表示例を示す説明図である。なお、図４Ａ〜図４Ｄには、ヘッドマウントディスプレイ１００が表示部１１０に表示する画像に加えて、ヘッドマウントディスプレイ１００のユーザが表示部１１０を通して視認する光景を合わせて示している。

図４Ａは、メールの着信などの割り込みが発生した直後に表示部１１０に表示される画像の例である。システムコントローラ１０２は、割り込みが発生したことを示すアイコンを表示部１１０に表示する。その際、メールの着信などの割り込みが発生した直後は、システムコントローラ１０２は、表示部１１０に表示するアイコン１３１の透過度を高く、または表示部１１０の輝度を低くするよう、表示制御部１２２に指示する。すなわちシステムコントローラ１０２は、メールの着信などの割り込みが発生した直後は、アイコン１３１が表示として認知し辛くなる制御を実行する。

図４Ｂは、図４Ａの状態から所定時間後（例えば１００ミリ秒〜２００ミリ秒後）に表示部１１０に表示される画像の例である。また図４Ｃは、図４Ｂの状態から所定時間後（例えば１００ミリ秒〜２００ミリ秒後）に表示部１１０に表示される画像の例である。システムコントローラ１０２は、図４Ｂ及び図４Ｃに示したように、アイコン１３１の透過度を徐々に低くして、または表示部１１０の輝度を高くして、アイコン１３１が表示として認知できるよう、表示制御部１２２に指示する。

図４Ｄは、図４Ｃの状態からさらに所定時間後（例えば１００ミリ秒〜２００ミリ秒後）に表示部１１０に表示される画像の例である。システムコントローラ１０２は、図４Ｄに示したように、アイコン１３１の透過度を最低にして、または表示部１１０の輝度を最高にして、アイコン１３１が表示として完全に認知できるよう、表示制御部１２２に指示する。表示制御部１２２は、システムコントローラ１０２からの指示に基づいて、アイコン１３１の透過度を最低にして、または表示部１１０の輝度を最高にする制御を実行する。

図５は、本開示の一実施形態に係るヘッドマウントディスプレイ１００の表示部１１０に表示されるアイコン１３１の透過度（または表示部１１０の輝度）の変化の一例をグラフで示す説明図である。図５に示したグラフの横軸は時間、縦軸はアイコン１３１の透過度（または表示部１１０の輝度）を示している。時刻ｔ１は図４Ａの状態の時点、時刻ｔ２は図４Ｂの状態の時点、時刻ｔ３は図４Ｃの状態の時点、時刻ｔ４は図４Ｄの状態の時点であるとする。本開示の一実施形態に係るヘッドマウントディスプレイ１００は、このように、着信があったことを示すアイコン１３１の透過率（または表示部１１０の輝度）をゆっくりと変化させることで、ユーザが無意識にアニメーションに注意を惹かれしまうことを回避している。

時刻ｔ４の時点でアイコン１３１がはっきり表示された後は、システムコントローラ１０２は、図５に示したグラフの実線のように、再びアイコン１３１を表示しないようにアイコン１３１の透過度、または表示部１１０の輝度を調整してもよく、図５に示したグラフの破線のように、アイコン１３１の透過度、または表示部１１０の輝度を変化させないようにしてもよい。

システムコントローラ１０２は、図４Ａ〜４Ｃに示したようにアイコン１３１を表示部１１０に表示させた後で、さらに別の着信を受信した場合は、その別の着信に対応するアイコン１３１を、図４Ａ〜４Ｃに示したように表示部１１０に新たに表示させてもよく、また、表示部１１０に表示していたアイコン１３１を表示部１１０から消去させてから、その別の着信に対応するアイコン１３１を、図４Ａ〜４Ｃに示したように表示部１１０に表示させてもよい。

このように本開示の一実施形態に係るヘッドマウントディスプレイ１００は、この着信があったことを示すアイコン１３１の透過率（または表示部１１０の輝度）を時間とともに変化させることで、アイコン１３１を徐々に表示部１１０に表示させている。表示部１１０に表示されるアイコン１３１が１つだけの場合は、システムコントローラ１０２は、アイコン１３１の透過率と、表示部１１０の輝度のいずれかを変化させるようにしてもよい。しかし表示部１１０に表示されるアイコン１３１が２つ以上の場合は、システムコントローラ１０２は、アイコン１３１を一律に変化させる場合は表示部１１０の輝度を時間とともに変更させ、特定のアイコン１３１だけを変化させる場合はアイコン１３１の透過率を時間とともに変更させるようにしても良い。

なお、本開示の一実施形態に係るヘッドマウントディスプレイ１００は、図４Ａ〜４Ｃに示したようにアイコン１３１が徐々に明確になるように表示部１１０に表示する表示処理と、アイコン１３１を最初から明確に表示部１１０に表示する表示処理とが切り替え可能であってもよい。かかる切り替えは、ユーザによって設定されてもよく、ヘッドマウントディスプレイ１００が使用される状況に応じて自動的に設定されてもよい。例えば、室外にユーザがいる場合など、ユーザの視界を突然妨げることに問題のある状況では、ヘッドマウントディスプレイ１００は、ユーザ自身の設定やヘッドマウントディスプレイ１００による自動的な設定により、図４Ａ〜４Ｃに示したようにアイコン１３１が徐々に明確になるように表示部１１０に表示する表示処理を実行してもよい。

本開示の一実施形態に係るヘッドマウントディスプレイ１００は、この着信があったことを示す画像の透過率（または表示部１１０の輝度）を、外光の強度によっても変化させても良い。すなわち、外光が弱い時は、画像の透過率（または表示部１１０の輝度）の変化量は小さくてもユーザはその変化を十分認知することが出来るが、外光が強い場合は、ユーザは変化の認知が困難になる。そこで、本開示の一実施形態に係るヘッドマウントディスプレイ１００は、センサ部１０１に、照度センサやカメラなど外光の強度を測定できるセンサを用いて外光強度を測定し、外光の強度によって透過度・輝度の変化量を調整してもよい。

図６Ａは、本開示の一実施形態に係るヘッドマウントディスプレイ１００の表示部１１０に表示されるアイコン１３１の透過率（または表示部１１０の輝度）の変化の一例をグラフで示す説明図である。図６Ａの符号１４１は、外光強度の弱い場合の透過率（または表示部１１０の輝度）の表示遷移を示しており、符号１４２は、外光強度が符号１４１の場合よりも強い場合の透過率（または表示部１１０の輝度）の表示遷移を示しており、符号１４３は、外光強度が符号１４２の場合よりもさらに強い場合の透過率（または表示部１１０の輝度）の表示遷移を示している。本開示の一実施形態に係るヘッドマウントディスプレイ１００は、このように、着信があったことを示すアイコン１３１の透過率（または表示部１１０の輝度）を、外光強度の強さに応じてゆっくりと変化させることで、ユーザが無意識にアニメーションに注意を惹かれしまうことを回避している。

なお、図５に示した例と同様に、アイコン１３１がはっきり表示された後は、システムコントローラ１０２は、再びアイコン１３１を表示しないようにアイコン１３１の透過度、または表示部１１０の輝度を調整してもよく、アイコン１３１の透過度、または表示部１１０の輝度を変化させないようにしてもよい。

なお、図６Ａに示した例では、外光強度の強さに関係なく、アイコン１３１が表示として完全に認知できるようになるまでの時間を全て同じにしていたが、かかる例に限定されるものではない。本開示の一実施形態に係るヘッドマウントディスプレイ１００は、外光強度の強さが強くなるに連れて、アイコン１３１が表示として完全に認知できるようになるまでの時間を長くする表示制御を実行してもよい。

図６Ｂは、本開示の一実施形態に係るヘッドマウントディスプレイ１００の表示部１１０に表示されるアイコン１３１の透過率（または表示部１１０の輝度）の変化の一例をグラフで示す説明図である。図６Ｂには、外光強度の強さが強くなるに連れて、アイコン１３１が表示として完全に認知できるようになるまでの時間を長くする表示制御を実行する場合の、アイコン１３１の透過率（または表示部１１０の輝度）の変化の一例が示されている。

上述したような、アイコンや表示情報の透過率（または表示部１１０の輝度）を変化させる手法は、ユーザの視線や頭部の動きなどをセンサ部１０１で検知して得られるセンサ値と組み合わせることも可能である。例えば、操作できるアイコンやメッセージが常に眼前に表示される場合、視野の一部を遮断する事からユーザに不快感を与えやすい。そこで、ユーザの視線を組み合わせて表示制御することでユーザに不快感を与えることを回避する効果をもたらす表示制御例を示す。

図７Ａ〜図７Ｃは、本開示の一実施形態に係るヘッドマウントディスプレイ１００の表示部１１０に表示される画像の一例を示す説明図であり、メールの着信など割り込みが発生した際のアイコンの表示例を示す説明図である。

図７Ａ〜図７Ｃの点１５０は、ヘッドマウントディスプレイ１００を装着したユーザの視線の位置を示している。図７Ａのように、視線がアイコン１３１の表示領域から離れている場合は、システムコントローラ１０２は、アイコン１３１の透過度を高く、または表示部１１０の輝度を低く表示部１１０に表示するよう、表示制御部１２２に指示する。

図７Ｂ、図７Ｃのように、ユーザの視線がアイコン１３１の表示領域に近づくと、システムコントローラ１０２は、アイコン１３１の透過率（または表示部１１０の輝度）を変化させて、透明ではなく明確に表示部１１０に表示するよう、表示制御部１２２に指示する。

本開示の一実施形態に係るヘッドマウントディスプレイ１００は、ユーザの視線の場所に応じたアイコンの表示制御を実行することで、普段は眼前に表示が出ていないが、ヘッドマウントディスプレイ１００を装着したユーザが情報を見たいと思って視線を変更する操作を行った時にのみ、アイコン１３１を表示部１１０に表示する事が出来るようになる。

図８は、ユーザの視線に応じてアイコン１３１の表示制御を実行する際の、具体的な演算方法の一例を示す説明図である。アイコン１３１の表示領域の座標を（Ｘ１，Ｙ１）、視線の座標を（Ｘ２，Ｙ２）とする。その両者の距離Ａは、Ａ＝｛（Ｘ２−Ｘ１）^２＋（Ｙ２−Ｙ１）^２｝^０．５で求めることが出来る。システムコントローラ１０２は、Ａが大きい時は透過率を高く（もしくは輝度が低く）して透明に見えるように、Ａが小さいときは透過率を低く（もしくは輝度を高い）して明確に見えるよう、表示制御部１２２に指示しても良い。

本開示の一実施形態に係るヘッドマウントディスプレイ１００は、ユーザの視線ではなく、センサ部１０１を用いてユーザの頭部の角度を検出し、その角度を利用して、同様にアイコンの表示制御を行なっても良い。

図９Ａ〜図９Ｃは、本開示の一実施形態に係るヘッドマウントディスプレイ１００の表示部１１０に表示される画像の一例を示す説明図であり、メールの着信など割り込みが発生した際のアイコンの表示例を示す説明図である。

図９Ａのように、ユーザが首を傾けずに正面を向いていることをセンサ部１０１が取得したデータから検出した場合は、システムコントローラ１０２は、アイコン１３１の透過度を高く、または表示部１１０の輝度を低く表示部１１０に表示するよう、表示制御部１２２に指示する。

そして、図９Ｂ、図９Ｃのように、ユーザの首の傾きがだんだん大きくなり、ユーザが足元を向いていることをセンサ部１０１が取得したデータから検出した場合は、システムコントローラ１０２は、アイコン１３１の透過率（または表示部１１０の輝度）を変化させて、透明ではなく明確に表示部１１０に表示するよう、表示制御部１２２に指示する。

このように本開示の一実施形態に係るヘッドマウントディスプレイ１００は、ユーザの頭部の角度に応じてアイコン１３１をはっきりと表示させる表示制御を実行するが、本開示は係る例に限定されるものではない。例えばシステムコントローラ１０２は、ユーザの頭部の動き量が所定の閾値を超えたらアイコン１３１をはっきりと表示させる表示制御を実行してもよい。

本開示の一実施形態に係るヘッドマウントディスプレイ１００は、センサ部１０１を用いてユーザの移動速度を検出し、その移動速度を利用して、同様にアイコンの表示制御を行なっても良い。つまり、ユーザが歩いている状態でアイコンを表示部１１０に表示させて、ユーザの注目をアイコンに向かせてしまうと、前方への注意が疎かになって、危険である。従って、本開示の一実施形態に係るヘッドマウントディスプレイ１００は、ユーザが歩行している場合はアイコンを薄く表示させて、ユーザが停止している場合はアイコンをはっきりと表示させるように表示制御を実行してもよい。

本開示の一実施形態に係るヘッドマウントディスプレイ１００は、ユーザの移動速度を検出し、その移動速度を利用してアイコンの表示制御を行なう際に、ユーザが歩いている状態であっても、緊急性を要する通知を意味するアイコンであれば、ユーザが歩行している場合であっても、アイコンをはっきりと表示させるように表示制御を実行してもよい。緊急性を要する通知としては、例えば特定の相手からの電話の受信やメールの着信、優先度の高いリマインダ等が想定されうるが、緊急性を要する通知を何にするかはヘッドマウントディスプレイ１００のユーザが適宜決定し得るものであり、特定の内容に限定されるものではない。

本開示の一実施形態に係るヘッドマウントディスプレイ１００は、センサ部１０１の他に、撮像部１１３や音声入力部１１６を用いてユーザの活動状態を検出し、そのユーザの活動状態の検出結果を利用して表示部１１０へ表示するアイコンの表示制御を実行してもよい。

例えば、ユーザがヘッドマウントディスプレイ１００を装着して自動車を運転するような場合、撮像部１１３が撮像した画像に車のハンドルが含まれていたり、音声入力部１１６が集音した音にエンジン音が含まれていたりすることが分かれば、システムコントローラ１０２は、ユーザが自動車を運転している状態にあることが分かる。自動車を運転している状態では、上述のユーザが歩行している場合と同様に、アイコンを表示部１１０に表示させて、ユーザの注目をアイコンに向かせてしまうと、前方への注意が疎かになって非常に危険である。従ってユーザが自動車を運転している状態にあることが分かれば、システムコントローラ１０２は、ユーザが自動車を運転している最中はアイコンを薄く表示させるか、またはアイコンを全く表示させないようにして、自動車が停止した場合に、上述したようなアイコンをはっきりと表示させる表示制御を実行してもよい。

本開示の一実施形態に係るヘッドマウントディスプレイ１００では、音声入力部１１６が集音した音に人間の会話音が含まれていることが分かれば、システムコントローラ１０２は、ヘッドマウントディスプレイ１００を使用しているユーザが他人と会話している状態にあることが分かる。ヘッドマウントディスプレイ１００を使用しているユーザが他人と会話している状態で、アイコンを表示部１１０に表示させて、ユーザの注目をアイコンに向かせてしまうと、その他人との会話が疎かになり、円滑なコミュニケーションの妨げとなる。従ってユーザが他人と会話している状態にあることが分かれば、システムコントローラ１０２は、ユーザが会話している最中はアイコンを薄く表示させるか、またはアイコンを全く表示させないようにして、会話が途絶えた場合に、上述したようなアイコンをはっきりと表示させる表示制御を実行してもよい。

このように、本開示の一実施形態に係るヘッドマウントディスプレイ１００は、撮像部１１３が撮像した画像や音声入力部１１６で集音した音によってヘッドマウントディスプレイ１００を使用するユーザの状況を認識し、そのユーザの状況に応じた表示部１１０へのアイコン表示を制御することが出来る。

上述の例では、アイコンの透過率や、表示部１１０の輝度を変化させることで、アイコンを表示部１１０に徐々に表示させる例を示したが、例えば本開示の一実施形態に係るヘッドマウントディスプレイ１００は、アイコンの大きさを徐々に大きくしていくことで、アイコンを徐々にはっきりと表示部１１０に表示させるようにしても良い。

以上、本開示の一実施形態に係るヘッドマウントディスプレイ１００の機能構成例について説明した。続いて、本開示の一実施形態に係るヘッドマウントディスプレイ１００の動作例について説明する。

［１．３．ヘッドマウントディスプレイの動作例］
図１０は、本開示の一実施形態に係るヘッドマウントディスプレイ１００の動作例を示す流れ図である。図１０に示したのは、表示部１１０へ、電話やメールの着信等があった等、ユーザに通知すべき情報があることを示す画像、例えば所定のアイコンを表示させる処理を実行する際の、ヘッドマウントディスプレイ１００の動作例である。以下、図１０を用いて本開示の一実施形態に係るヘッドマウントディスプレイ１００の動作例について説明する。

本開示の一実施形態に係るヘッドマウントディスプレイ１００は、まず、電話やメールの着信等があった等、ユーザに通知すべき情報があることを示すアイコンを表示部１１０へ表示させる処理が発生するまで待機する（ステップＳ１０１）。アイコンを表示部１１０へ表示させる処理が発生したことを検出すると（ステップＳ１０１、Ｙｅｓ）、ヘッドマウントディスプレイ１００は、アイコンの透過率（または表示部１１０の輝度）を調整しながら、アイコンを表示部１１０へ表示する（ステップＳ１０２）。このステップＳ１０２の調整及び表示処理は、例えばシステムコントローラ１０２の指示により表示制御部１２２が実行する。

アイコンの透過率（または表示部１１０の輝度）の調整は、上述したように、時間の経過と共にアイコンをはっきりと表示させるようにするものであってもよく、視線の場所に応じてアイコンをはっきりと表示させるようにするものであってもよく、頭部の傾きに応じてアイコンをはっきりと表示させるようにするものであってもよく、ユーザの移動速度に応じてアイコンをはっきりと表示させるようにするものであってもよい。

このようにアイコンの透過率（または表示部１１０の輝度）を変化させつつ表示部１１０へ着信があったことを示す画像を表示させることで、ヘッドマウントディスプレイ１００を着用するユーザの視界が安全に確保される。

本開示の一実施形態に係るヘッドマウントディスプレイ１００は、ユーザの視界における色の情報を用いて、アイコンを徐々にはっきりと表示させる表示制御を実行してもよい。例えば、壁面が白い部屋にヘッドマウントディスプレイ１００を使用しているユーザがいる場合、システムコントローラ１０２は、最初は表示部１１０へ白色のアイコンを表示させる表示制御を実行する。壁面が白い部屋にヘッドマウントディスプレイ１００を使用しているユーザがいる場合、最初は表示部１１０へ白色のアイコンを表示させることで、本開示の一実施形態に係るヘッドマウントディスプレイ１００は、表示部１１０にアイコンが表示されたことをユーザに気付かせないように出来る。

そしてシステムコントローラ１０２は、表示部１１０へ白色のアイコンを表示させた後に、徐々にアイコンを本来の色へ、または、白色が本来の色であれば違う色へ変化させる表示制御を実行する。このような表示制御により、本開示の一実施形態に係るヘッドマウントディスプレイ１００は、ユーザが無意識に表示された情報を意識してしまったり、視野を邪魔してしまったりするような情報の表示を回避できる。

また例えば、システムコントローラ１０２は、最初は表示部１１０へ緑色の成分を除外した色のアイコンを表示させる表示制御を実行する。緑色は人間にとって一番感受性が強い色であるので、緑色の成分を除外した色のアイコンを表示させることで、本開示の一実施形態に係るヘッドマウントディスプレイ１００は、ユーザが無意識に表示された情報を意識してしまったり、視野を邪魔してしまったりするような情報の表示を回避できる。

＜２．まとめ＞
以上説明したように本開示の一実施形態によれば、透過型のヘッドマウントディスプレイ１００において、ユーザの視野の一部を覆うような情報の表示に際し、アイコンの透過率、または表示部１１０の輝度を調整しながらはっきりと情報の表示を行なっていくヘッドマウントディスプレイ１００が提供される。本開示の一実施形態に係るヘッドマウントディスプレイ１００は、ユーザに通知すべき情報を表示部１１０に表示する際に、例えば、時間の経過と共に、視線の場所に応じて、頭部の傾きに応じて、またはユーザの移動速度に応じて、透過率、または表示部１１０の輝度を調整しながらはっきりと情報の表示を行なっていく。

本開示の一実施形態に係るヘッドマウントディスプレイ１００は、このように、透過率、または表示部１１０の輝度を調整しながらはっきりと情報の表示を行なっていくことで、ユーザが無意識に表示された情報を意識してしまったり、視野を邪魔してしまったりするような情報の表示を回避でき、ヘッドマウントディスプレイ１００を利用する際のユーザの危険性を低減させることが出来る。

上述した実施形態では、表示部１１０への表示制御は、ヘッドマウントディスプレイ１００に含まれているシステムコントローラ１０２の指示により表示制御部１２２が実行した例を示したが、本開示は係る例に限定されるものではない。例えば、表示部１１０への表示制御は、ヘッドマウントディスプレイ１００とは別の装置であって、ヘッドマウントディスプレイ１００と有線または無線で接続される別の装置が実行しても良い。

本明細書の各装置が実行する処理における各ステップは、必ずしもシーケンス図またはフローチャートとして記載された順序に沿って時系列に処理する必要はない。例えば、各装置が実行する処理における各ステップは、フローチャートとして記載した順序と異なる順序で処理されても、並列的に処理されてもよい。

また、各装置に内蔵されるＣＰＵ、ＲＯＭおよびＲＡＭなどのハードウェアを、上述した各装置の構成と同等の機能を発揮させるためのコンピュータプログラムも作成可能である。また、該コンピュータプログラムを記憶させた記憶媒体も提供されることが可能である。また、機能ブロック図で示したそれぞれの機能ブロックをハードウェアで構成することで、一連の処理をハードウェアで実現することもできる。

なお、上記実施形態で示したユーザインタフェースやアプリケーションを実現するソフトウェアは、インターネット等のネットワークを介して使用するウェブアプリケーションとして実現されてもよい。ウェブアプリケーションは、例えば、ＨＴＭＬ（ＨｙｐｅｒＴｅｘｔ Ｍａｒｋｕｐ Ｌａｎｇｕａｇｅ）、ＳＧＭＬ（Ｓｔａｎｄａｒｄ Ｇｅｎｅｒａｌｉｚｅｄ Ｍａｒｋｕｐ Ｌａｎｇｕａｇｅ）、ＸＭＬ（Ｅｘｔｅｎｓｉｂｌｅ Ｍａｒｋｕｐ Ｌａｎｇｕａｇｅ）などのマークアップ言語により実現されてもよい。

以上、添付図面を参照しながら本開示の好適な実施形態について詳細に説明したが、本開示の技術的範囲はかかる例に限定されない。本開示の技術分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本開示の技術的範囲に属するものと了解される。

また、本明細書に記載された効果は、あくまで説明的または例示的なものであって限定的ではない。つまり、本開示に係る技術は、上記の効果とともに、または上記の効果に代えて、本明細書の記載から当業者には明らかな他の効果を奏しうる。

なお、以下のような構成も本開示の技術的範囲に属する。
（１）
ユーザの眼前に位置して装着される透過型ディスプレイが使用されている状況の情報を取得する状況取得部と、
前記状況取得部が取得した前記情報を用いて、前記透過型ディスプレイへの情報表示が徐々に明確になる表示制御を前記透過型ディスプレイに対して実行する表示制御部と、
を備える、表示制御装置。
（２）
前記状況取得部は、外光の状態を取得し、
前記表示制御部は、前記外光の状態に応じて前記透過型ディスプレイへの情報表示が徐々に明確になる表示制御を実行する、前記（１）に記載の表示制御装置。
（３）
前記表示制御部は、前記外光が強いほど、前記透過型ディスプレイへの情報表示が明確になるまでの時間が長くなる表示制御を実行する、前記（２）に記載の表示制御装置。
（４）
前記状況取得部は、前記透過型ディスプレイを視認するユーザの視線の状態を取得し、
前記表示制御部は、前記視線の状態に応じて前記透過型ディスプレイへの情報表示が徐々に明確になる表示制御を実行する、前記（１）に記載の表示制御装置。
（５）
前記状況取得部は、前記透過型ディスプレイを視認するユーザの頭の動きの状態を取得し、
前記表示制御部は、前記頭の動きの状態に応じて前記透過型ディスプレイへの情報表示が徐々に明確になる表示制御を実行する、前記（１）に記載の表示制御装置。
（６）
前記状況取得部は、前記透過型ディスプレイを視認するユーザの頭の傾きの状態を取得し、
前記表示制御部は、前記頭の傾きの大きさに応じて前記透過型ディスプレイへの情報表示が徐々に明確になる表示制御を実行する、前記（１）に記載の表示制御装置。
（７）
前記状況取得部は、前記透過型ディスプレイを視認するユーザの活動状態の状態を取得し、
前記表示制御部は、前記活動状態に応じて前記透過型ディスプレイへの情報表示が徐々に明確になる表示制御を実行する、前記（１）に記載の表示制御装置。
（８）
前記状況取得部は、前記ユーザの前記透過型ディスプレイの視線の先の背景を取得し、
前記表示制御部は、前記背景の状態に応じて前記透過型ディスプレイへの情報表示が徐々に明確になる表示制御を実行する、前記（１）に記載の表示制御装置。
（９）
前記表示制御部は、前記背景の色に応じて前記透過型ディスプレイへの情報表示が徐々に明確になる表示制御を実行する、前記（８）に記載の表示制御装置。
（１０）
前記表示制御部は、前記透過型ディスプレイへの情報表示の透過率を変化させることで前記透過型ディスプレイへの情報表示が徐々に明確になる表示制御を実行する、前記（１）に記載の表示制御装置。
（１１）
前記表示制御部は、前記透過型ディスプレイの輝度を変化させることで前記透過型ディスプレイへの情報表示が徐々に明確になる表示制御を実行する、前記（１）に記載の表示制御装置。
（１２）
透過型ディスプレイが使用されている状況の情報を取得することと、
取得された前記情報を用いて前記透過型ディスプレイに対して前記透過型ディスプレイへの情報表示が徐々に明確になる表示制御を実行することと、
を含む、表示制御方法。
（１３）
コンピュータに、
透過型ディスプレイが使用されている状況の情報を取得することと、
取得された前記情報を用いて前記透過型ディスプレイに対して前記透過型ディスプレイへの情報表示が徐々に明確になる表示制御を実行することと、
を実行させる、コンピュータプログラム。

１００ ヘッドマウントディスプレイ
１０１ センサ部
１０２ システムコントローラ
１１０ 表示部
１１１ センサ信号処理部
１１２ センサ制御部
１１３ 撮像部
１１４ 撮像信号処理部
１１５ 撮像制御部
１１６ 音声入力部
１１７ 音声出力部
１１８ 音声信号処理部
１１９ 音声生成部
１２０ 画像生成部
１２１ 表示画像処理部
１２２ 表示制御部
１２３ 表示駆動部
１２４ 通信部
１２５ ストレージ部
１３１ アイコン

Claims (16)

1. ユーザの眼前に位置して装着される透過型ディスプレイが通知情報に関する割り込みを受信した際に、当該割り込みが受信されたか否かを示す通知情報であるアイコンの表示の視認性を高めるための第１の指示を送信するシステムコントローラと、
   前記透過型ディスプレイによる前記割り込みの受信に基づいて、前記システムコントローラからの前記第１の指示に従って、前記通知情報の表示が非表示状態から徐々にかつ連続的に明確になる表示制御を前記透過型ディスプレイに対して実行する表示制御部と、
   を備える、表示制御装置。
2. 前記システムコントローラは、前記透過型ディスプレイが使用されている状況に関する状況情報を取得し、
   前記表示制御部は、前記状況情報に応じて前記通知情報の表示の視認性が徐々に高くなる表示制御を行う、請求項１に記載の表示制御装置。
3. 前記システムコントローラは、前記状況情報として前記透過型ディスプレイの外光の強度を取得し、
   前記表示制御部は、前記外光の強度が大きくなるほど前記透過型ディスプレイへの通知情報の表示の視認性の変化速度が速くなる表示制御を実行する、請求項２に記載の表示制御装置。
4. 前記システムコントローラは、前記状況情報として前記透過型ディスプレイの外光の強度を取得し、
   前記表示制御部は、前記外光の強度が大きくなるほど、前記透過型ディスプレイへの通知情報の表示が明確になるまでの時間が長くなる表示制御を実行する、請求項２に記載の表示制御装置。
5. 前記システムコントローラは、前記透過型ディスプレイを視認するユーザの視線の状態を前記状況情報として取得し、
   前記ユーザの視線が前記通知情報の表示位置に近いと判断した場合に、前記ユーザの視線が前記通知情報の位置から離れていると判断された場合に送信される前記通知情報の第２の指示に応じた前記通知情報の表示の視認性よりも、前記通知情報の表示の視認性を高める前記第１の指示を送信し、
   前記表示制御部は、前記第１の指示または前記第２の指示に応じて前記透過型ディスプレイへの通知情報の表示制御を実行する、請求項２〜４のいずれか一項に記載の表示制御装置。
6. 前記システムコントローラは、前記透過型ディスプレイを視認するユーザの頭部の角度を前記状況情報として取得し、
   前記ユーザの頭部の向きが前記通知情報の表示に近づくように前記ユーザの頭部の角度が変化したと判断した場合に前記通知情報の表示の視認性を高める前記第１の指示を送信し、
   前記ユーザの頭部の向きが前記通知情報の表示から離れている場合に、前記通知情報の表示の視認性を相対的に低い状態とするための第３の指示を送信し、
   前記表示制御部は、前記第１の指示または前記第３の指示に応じて前記通知情報の表示制御を実行する、請求項２〜４のいずれか一項に記載の表示制御装置。
7. 前記表示制御部は、前記透過型ディスプレイの下部の領域に前記通知情報を表示するよう表示制御を行い、
   前記システムコントローラは、前記ユーザの頭部の向きが下方向に移動するように前記ユーザの頭部の角度が変化したと判断した場合に前記第１の指示を送信し、前記ユーザの頭部が正面を向いていると判断した場合に前記第３の指示を送信する、請求項６に記載の表示制御装置。
8. 前記システムコントローラは、前記透過型ディスプレイを視認するユーザの前方の画像を前記状況情報として取得し、
   前記表示制御部は、前記画像に車のハンドルの画像が含まれていると判断すると前記透過型ディスプレイに前記通知情報を表示させない、請求項２〜４のいずれか一項に記載の表示制御装置。
9. 前記システムコントローラは、撮像された画像または集音された音を前記状況情報として用い、前記ユーザが運転する自動車が停止したと判断した場合に前記第１の指示を送信する、請求項２〜４のいずれか一項に記載の表示制御装置。
10. 前記システムコントローラは、集音された音を前記状況情報として用い、前記ユーザと他人との会話が途切れたと判断した場合に、前記第１の指示を送信する、請求項２〜４のいずれか一項に記載の表示制御装置。
11. 前記システムコントローラは、前記状況情報として前記ユーザの移動速度を用い、前記ユーザの移動速度に基づいて前記ユーザが停止していると判断すると前記第１の指示を送信する、請求項２〜４のいずれか一項に記載の表示制御装置。
12. 前記システムコントローラは、前記ユーザの視界における色を前記状況情報として取得し、
    前記表示制御部は、前記色に応じて前記通知情報の表示色を調整することで前記通知情報の表示が徐々に明確になる表示制御を実行する、請求項２〜４のいずれか一項に記載の表示制御装置。
13. 前記表示制御部は、前記通知情報の表示の視認性が徐々に変化するように、前記通知情報の表示の透明度または前記透過型ディスプレイの輝度の少なくとも一方を変更する表示制御を実行する、請求項１に記載の表示制御装置。
14. 前記割り込みは、前記透過型ディスプレイの外部装置または前記透過型ディスプレイ自身が受信した、メールまたは電話の着信である、請求項１〜１３のいずれか一項に記載の表示制御装置。
15. ユーザの眼前に位置して装着される透過型ディスプレイが通知情報に関する割り込みを受信した際に、当該割り込みが受信されたか否かを示す通知情報であるアイコンの表示の視認性を高めるための第１の指示を送信することと、
    前記透過型ディスプレイによる前記割り込みの受信に基づいて、前記第１の指示に従って、前記透過型ディスプレイに対して前記通知情報の表示が非表示状態から徐々にかつ連続的に明確になる表示制御を実行することと、
    を含む、表示制御方法。
16. コンピュータに、
    ユーザの眼前に位置して装着される透過型ディスプレイが通知情報に関する割り込みを受信した際に、当該割り込みが受信されたか否かを示す通知情報であるアイコンの表示の視認性を高めるための第１の指示を送信することと、
    前記透過型ディスプレイによる前記割り込みの受信に基づいて、前記第１の指示に従って、前記透過型ディスプレイに対して前記通知情報の表示が非表示状態から徐々にかつ連続的に明確になる表示制御を実行することと、
    を実行させる、コンピュータプログラム。

Images