JP5640175B2 - 画像表示装置及びこの画像表示装置をファインダ装置として搭載した撮影装置並びに画像表示方法 - Google Patents

Description

本発明は、画像表示装置及びこの画像表示装置をファインダ装置として搭載した撮影装置並びに画像表示方法に関する。

例えば山歩きに行き、双眼鏡で八ヶ岳連峰を観たとき、どの山が赤岳でその隣に見える山が何の山なのかは、初心者には分かりづらい。このとき、双眼鏡内に見える山の光学像毎に、山の名前が合成して表示されると、使い勝手の優れた双眼鏡になる。

或いは、都会の空き地にビルを建てる場合に、建築設計士が所持しているデジタルカメラのファインダ装置を通して空き地周りのビル群を観察したとき、周りのビル群の光学像と一緒に、設計したビルのＣＧ画像が空き地に立った状態を観察できれば、建築後の景観を事前に確認できるため、便利である。

また、目的地に行きたい人が道に迷った場合に、デジタルカメラのファインダでその方向を覗けば、ビル群に隠れてしまった目的地の位置や周りのビルの名前がファインダ内に表示される、というものが実現されていれば、デジタルカメラの利用価値が高まる。

デジタルカメラのレンズをある方向に向け、その撮像画像（ライブビュー画像）をカメラ背面のＬＣＤ表示装置に表示させたとき、撮像画像中に、ランドマークの情報やその地名，ビル名称等を重畳して表示させるものは既に存在する（例えば、特許文献１）。

ランドマーク情報やビル名称等を知ることが主な目的であれば、従来の様に、カメラ背面等に設けたＬＣＤ表示装置に被写体のライブビュー画像を表示させ、これにビル名称等を重畳表示すれば良い。しかし、被写体の観察が主な目的であれば、被写体の鮮明な光学像を、直接、双眼鏡や光学ファインダ装置の観察窓を通して観たいという要望が高い。

下記の特許文献２には、双眼鏡や拡大鏡などで被写体を観察するとき、観察窓から覗いた視界の中に、図鑑情報等の電子情報も併せて合成表示する装置が提案されている。

被写体の光学像を目で直接観察し、その視界中にランドマークの名称等を電子情報で合成表示できれば、鮮明な光学像を観察できると同時に、必要な電子情報も一緒に知ることができる。しかし、それを実現する装置を具体的にどの様に構成すれば良いかは、特許文献２に記載されていない。

電子情報を光学像に重ねて表示する技術は、例えば下記の特許文献３記載の従来技術を応用すれば可能である。この特許文献３記載のデジタルカメラでは、光学ファインダを通してユーザの目に入ってくる被写体の光学像に、ファインダ内に設けた投射型表示装置の表示画像を重ねて投射する構成になっている。このため、必要となる電子情報を投写型表示装置に表示すれば、光学像と電子情報とが重畳した画像をユーザは目で見ることが可能となる。

被写体の光学像と、この光学像の近くの、大まかに合わせた位置に名称等の関連情報を表示することは容易である。しかし、例えば沢山の山々が連なった連峰を双眼鏡で見たときに、個々の山の名称が少しずつずれた位置に重畳表示されてしまうと、ユーザに誤った情報を提供することになってしまう。このため、被写体の光学像に高精度に整合する位置に電子情報を表示することが必要となる。

例えば、特許文献４，５には、光学ファインダと電子ビューファインダとを組み合わせたファインダ装置が開示されている。このファインダ装置の電子ビューファインダに表示される被写体の撮像画像は、光学ファインダに入射してくる被写体からの光学像ではない。ファインダ装置から少し離れた位置に設けられた撮影レンズで集光され撮像素子で撮像された光学像である。

つまり、光学ファインダを通した光学像と、電子ビューファインダに表示される撮像画像との間には、パララックスが生じる。このパララックスは、単焦点レンズのカメラであれば常に一定の関係があるため補正は容易である。しかし、撮影レンズがズームレンズの場合には、倍率変動に応じてパララックスが変化してしまい、光学像と撮像画像との高精度の位置合わせは困難となる。

日本国特開２００６―５９１３６号公報 日本国特開２０１１―２５３５１２号公報 日本国特開２０１０―１０７５２９号公報 日本国特開２００９―２００５５２号公報 日本国特開平３―２９２０６７号公報

本発明の目的は、被写体の光学像に高精度に位置合わせして電子情報を重畳表示することが可能な画像表示装置と、この画像表示装置をファインダ装置として搭載する撮影装置と、画像表示方法を提供することにある。

本発明の画像表示装置は、被写体側から取り込んだ入射光を分割するビームスプリッタと、そのビームスプリッタで分割された一方の入射光による第１の光学像を電気信号に変換し撮像画像として出力する撮像素子と、上記撮像画像の中の主要被写体画像に位置合わせした電子情報画像を生成する合成画像生成部と、その電子情報画像を表示するディスプレイパネルと、上記分割された他方の入射光による第２の光学像に上記ディスプレイパネルから投射された上記電子情報画像の光学像を重畳して出射させる光学プリズムとを備えることを特徴とする。

本発明の撮影装置は、上記の画像表示装置をファインダ装置として搭載することを特徴とする。

本発明の画像表示方法は、被写体側から取り込んだ入射光をビームスプリッタで分割し、上記ビームスプリッタで分割された一方の入射光による第１の光学像を撮像素子で電気信号に変換し撮像画像として出力し、その撮像画像の中の主要被写体画像に位置合わせした電子情報画像を合成画像生成部で生成し、上記電子情報画像をディスプレイパネルに表示し、上記分割された他方の入射光による第２の光学像に上記ディスプレイパネルから投射された上記電子情報画像の光学像を光学プリズムで重畳して出射させることを特徴とする。

本発明によれば、画像表示装置内に撮像素子を設け、ユーザが目で見る被写体光学像と同じ画像を撮像素子で撮像するため、その撮像画像に基づいて、即ち、高精度に位置合わせした電子情報画像を被写体光学像に重ねて表示できる。

本発明の第１の実施形態に係る画像表示装置としてのファインダ装置を搭載したデジタルカメラの外観斜視図である。 図１のデジタルカメラの機能ブロック図である。 図２に示すファインダ装置の画像合成方法の説明図である。 ファインダ装置を通して見える光学像の一例を示す図である。 図４の光学像を撮像したときの白飛び部分を示す図である。 本発明の第２の実施形態に係るデジタルカメラの機能ブロック図である。 図６の合成画像生成部が生成した合成画像の一例を示す図である。 本発明の第３の実施形態に係るデジタルカメラの機能ブロック図である。 図８のＣＰＵが実行する制御手順を示すフローチャートである。 本発明の第３の実施形態に係るデジタルカメラのファインダ装置の視野内から検索対象オブジェクトを探す説明図である。 本発明の第３の実施形態に係るファインダ装置の視野内から検索対象オブジェクトを探す説明図である。 本発明の第３の実施形態に係るファインダ装置内の撮像素子による撮像画像の一例を示す図である。 図１２に示す撮像画像の中から検索対象オブジェクトに該当する画像領域を切り出した図である。 本発明の第３の実施形態に係るデジタルカメラのファインダ装置で覗いた光学像に図１３の画像を合成した画像を示す図である。 本発明の第４の実施形態に係るデジタルカメラの機能ブロック図である。 本発明の第４の実施形態で実現する合成画像の説明図である。 図１５のＣＰＵが実行する制御手順を示すフローチャートである。 図１７のフローチャート中のコンテンツ配置条件決定処理の詳細手順を示すフローチャートである。 図１７のフローチャート中のコンテンツ隠蔽領域算出処理の説明図である。 本発明の第５の実施形態に係るデジタルカメラ（スマートフォン）の外観斜視図である。 図２０のスマートフォンの機能ブロック図である。

以下、本発明の一実施形態について、図面を参照して説明する。なお、実施形態では、デジタルカメラに搭載されるファインダ装置（画像表示装置）を例に説明するが、本発明の画像表示装置としてはこれに限定されるものではなく、撮像素子を内蔵した双眼鏡，単眼鏡，フィールドスコープ，ヘッドマウンドディスプレイ等、被写体を光学像と撮像画像の両方で観察できる画像表示装置であれば適用可能である。

図１は、本発明の第１の実施形態に係るデジタルカメラ１０の外観斜視図である。デジタルカメラ１０は、カメラ筐体１１の前部に、撮影レンズ１２を収納するレンズ鏡筒１３が沈胴可能に取り付けられている。カメラ筐体１１前面の向かって上面左肩部にはシャッタレリーズボタン１４が設けられており、カメラ筐体１１の背部には、図示省略の液晶表示部が設けられている。

カメラ筐体１１の前面上部には、フラッシュ光の発光部１５が設けられており、カメラ筐体１１前面の向かって右肩部の内部には、ファインダ装置１６が設けられている。ファインダ装置１６は、被写体側の開口窓１７と、撮影者側（ユーザ側）の覗き窓１８との間に設けられている。

図２は、図１に示すデジタルカメラ１０の機能ブロック構成図である。被写体の静止画像や動画像を撮影する撮像系２１は、図１に示す撮影レンズ１２と、その背部に設けられたＣＭＯＳイメージセンサ等の撮像素子２２とを備える。

デジタルカメラ１０は、カメラ全体を統括制御するＣＰＵ２４と、メモリ２５と、合成画像生成部２６と、画像解析部２７とを備え、これらはバス３０によって相互に接続されている。撮像素子２２による撮像画像信号Ａは、バス３０に出力される。

デジタルカメラ１０のバス３０には、通常のデジタルカメラと同様に、撮像画像信号に対してオフセット処理やガンマ補正処理，ＲＧＢ／ＹＣ変換処理等を行う画像信号処理部や、画像処理後の撮像画像信号をＪＰＥＧ形式の画像データに変換する画像圧縮部、ＪＰＥＧ画像データをメモリカード等に記録するカードインタフェース、カメラ背部の液晶表示部に撮像画像やライブビュー画像を表示する表示制御部等を備えるが、これらの図示は、省略している。

本実施形態のファインダ装置１６は、図１に示す被写体側開口窓１７の背部に設けた対物レンズ３１と、対物レンズ３１の背部に設けたハーフミラーなどのビームスプリッタ３２と、ビームスプリッタ３２の背部に設けた光学プリズム３３と、光学プリズム３３の背部に設けられ図１に示すユーザ側覗き窓１８に対面する接眼レンズ３４とを備える。対物レンズ３１をズームレンズとし、これを撮影レンズ１２のズーム倍率に連動させて駆動させる構成とするのが良い。

ビームスプリッタ３２は、対物レンズ３１及び接眼レンズ３４の共通光軸に対して４５度に傾けて配置され、対物レンズ３１を通して入ってくる入射光を２分割する。分割光の一方は光軸に沿って直進し、他方は４５度に反射される。

この４５度に反射される入射光の先に、ファインダ装置１６の集光レンズ３５が設けられ、集光レンズ３５の背部にＣＭＯＳイメージセンサ等の撮像素子３６が設けられる。撮像素子３６による撮像画像信号Ｂ１は、バス３０に出力される。

ビームスプリッタ３２を直進した分割光が入射する光学プリズム３３は、入射面３３ａと出射面３３ｂを備える。入射面３３ａは、光軸に対して垂直に設けられ、出射面３３ｂは、光軸に対して４５度に傾けて設けられている。そして、出射面３３ｂに臨む位置であって光軸に対して直交する位置に、ファインダ装置１６のディスプレイパネル３７と、ディスプレイパネル３７の表示画像光を出射面３３ｂに集光するレンズ３８とが設けられる。

ディスプレイパネル３７は、バス３０に接続された図示省略の表示制御部を介して、撮像素子３６による撮像画像信号Ｂ１に基づいて生成された電子情報Ｂ２が供給される。

図３は、ファインダ装置１６の機能説明図である。図２の集光レンズ３５の光軸方向位置を調整することで、被写体からの入射光の焦点距離と撮像素子３６の焦点距離を同一に合わせる。被写体からの入射光は、ビームスプリッタ３２で２分割され、直進する分割光は、光学プリズム３３，接眼レンズ３４を直進してユーザの目に入射する。これにより、ユーザは、図３の被写体光学像５１を観ることができる。

一方、ビームスプリッタ３２で４５度方向に反射した分割光は、撮像素子３６の受光面に結像する。この結像した被写体光学像５２を図３に示す。被写体光学像５１，５２の夫々の画面内の位置は、高精度に一致する。撮像素子３６による撮像画像信号Ｂ１は、被写体光学像５２の撮像画像信号であり、画像処理された後の撮像画像に基づいて例えば被写体の顔を囲む枠５３が、電子情報として図２の合成画像生成部２６で生成される。

この枠５３の画像を電子情報Ｂ２としてディスプレイパネル３７に表示させると、枠５３の画像が、ファインダ装置１６内を直進した被写体光学像５１と精度良く位置合わせされ、ユーザの目に入射することになる。このとき、枠５３の画像と一緒に、撮像素子３６で撮像された顔画像である被写体光学像５２を、例えば緑色で表示したとすると、被写体光学像５１の顔が緑色に見えることになる。被写体光学像５２の顔画像を真っ黒に表示すると、つまり、ディスプレイパネル３７の被写体光学像５２の顔画像部分を無表示にすると、被写体光学像５１のみが枠５３に囲まれてユーザの目に入射する。

図４は、ファインダ装置１６を通して見た被写体の一例を示す図である。ヴァイオリンの光学像となっている。図５は、図４の光学像と同じ光学像を撮像素子３６で撮像したとき、図２の画像解析部２７が解析して求めた白飛び部分５４だけを図示した図である。この図５の白飛び部分５４を例えば赤や白を点滅した電子情報の画像とし、他の領域をマスク画像（黒表示）として合成画像生成部２６が生成する。これを電子情報Ｂ２としてディスプレイパネル３７に表示すると、図４の光学像の中の白飛びを起こしている領域が赤や白が点滅する画像としてユーザの目に入力される。

図５で説明した白飛び部分５４は、ファインダ装置１６内の撮像素子３６が撮像した画像の中の白飛び部分である。つまり、実際に被写体を本撮影する撮像素子２２の撮像画像中の白飛び部分とは異なる。しかし、撮像素子３６と撮像素子２２との間の感度差や電荷飽和量の差等は予め分かっているため、その差に応じた白飛び部分の画像を求めれば、精度良く、撮像素子２２の白飛びを知ることができる。

或いは、本撮影を行う撮像素子２２の白飛び部分をファインダ装置１６を直進してユーザの目に入射する光学像に合成することもできる。撮像素子２２によるライブビュー画像中の白飛び部分を画像解析部２７で求め、この白飛び部分を表す画像を合成画像生成部２６で生成する。

この合成画像をそのままディスプレイパネル３７に表示してしまうと、ファインダ装置１６を直進してくる光学像との間にパララックス分のズレが生じてしまう。そこで、撮像素子２２による撮像画像と、撮像素子３６による撮像画像とのマッチング処理を行ってどの程度のズレが生じているかを画像解析部２７で解析し、ディスプレイパネル３７に表示する合成画像の表示位置をズレ分だけずらして表示する。これにより、ファインダ装置１６を直進してくる光学像に高精度に位置合わせした電子情報を合成画像として表示することが可能となる。

上記の実施形態は、白飛び部分の画像を光学像に合成する例であるが、黒潰れ領域や色飽和（ＲＧＢのうちの少なくとも１色が最大値となった状態）領域を光学像に合成することでも良い。

以上述べた実施形態によれば、ディスプレイパネル３７に表示した画像と、ファインダ装置１６を直進してユーザの目に入射する光学像との間の幾何的なズレが無くなるため、白飛び，黒潰れ等の警告といった画素単位のＧＵＩ表示を行っても、違和感のない表示が可能となる。

なお、図２の構成において、光学プリズム３３の前段に液晶シャッタを設けておけば、液晶シャッタを閉じ撮像素子２２のライブビュー画像をディスプレイパネル３７に表示することで、ファインダ装置１６を電子ビューファインダ装置として使用できる。

図６は、本発明の第２の実施形態に係るデジタルカメラの機能ブロック構成図である。図２の実施形態と異なるのは、ファインダ装置１６に設ける撮像素子４１として、位相差検出画素を撮像領域の全面に設けたものを使用する。また、バス３０に、位相差情報解析部２８を接続する。

位相差検出画素とは、例えば、隣接する２つの画素の一方の遮光膜開口と他方の遮光膜開口とを互いに反対方向に偏心して設けた画素をいう。これにより、一方の画素が被写体を右目（又は左目）で見た入射光を受光し、他方の画素が被写体を左目（又は右目）で見た入射光を受光することになり、被写体までの距離を検出することが可能となる。この様な位相差検出画素は、例えば特開２０１１―２３２３７１号公報や特開２０１１―２２７３８８号公報などで既に知られており、デジタルカメラの分野では、位相差ＡＦ方式に用いられるのが普通となっている。

本実施形態の撮像素子４１は、位相差検出画素ペアを撮像素子受光面の全面に離散的に設けているため、画面内に撮像された個々の被写体までの距離を個別に算出することが可能となっている。被写体までの距離や画像ボケは、図６の位相差情報解析部２８で検出される。

図７は、図６の合成画像生成部２６が生成する画像例を示す図である。図示する例では、撮像素子４１は、１画面内の主要被写体として、４つのビル１，２，３，４と３つの家５，６，７の画像を撮像している。位相差情報解析部２８は、これら４つのビル１〜４及び３つの家５〜７までの距離を算出し、合成画像生成部２６は、ビル１〜４及び家５〜７のぞれぞれの画像を背景画像から切り出した画像を求める。

そして、合成画像生成部２６は、ビル１〜４，家５〜７の画像に対して、ファインダ装置１６からの距離に応じた色付け画像を電子情報として生成する。例えば、最も近い家７やビル３は白画像，次に近いビル１と家６は少しピンク色画像，…，最も遠いビル４は赤色画像とし、背景画像を真っ黒にしてディスプレイパネル３７に表示する。ディスプレイパネル３７に表示されたビルや家の画像と、ファインダ装置１６を通してユーザの目に入射する家やビルの光学像とは、高精度に整合する。これにより、ユーザは、ファインダ装置１６を覗いて光学像を見たとき、主要被写体の表示色によって直感的に主要被写体までの距離を認識することが可能となる。

なお、位相差情報により、画像ボケが発生している領域を知ることができる。このため、撮像素子３６，４１（又は位相差検出画素が設けられた撮像素子２２）による撮像画像で発生している画像ボケの領域を示す電子情報を、ファインダ装置１６を透過する光学像に合わせて合成することもできる。

図８は、本発明の第３の実施形態に係るデジタルカメラの機能ブロック図である。図６の実施形態に、次の機能を付加した点が異なる。バス３０には、オブジェクト検索部４３と、被写体検出部４４と、オブジェクトデータベース（ＤＢ）４５と、第２バス４６とが接続され、第２バス４６には、位置情報取得部４７と、方位情報取得部４８と、姿勢情報取得部４９が接続されている。

オブジェクトデータベース４５は、カメラ内に設けても良いが、膨大なオブジェクトデータを利用する場合には、インターネット等のネットワークに接続されたデータベースを利用できる様にしても良い。

位置情報取得部４７は、例えばＧＰＳ（Global Positioning System）であり、方位情報取得部４８は方位を検出する電子コンパスであり、姿勢情報取得部４９は、例えばＧセンサ（重力方向の検出センサ）等でカメラの姿勢つまりファインダ装置１６の姿勢を検出するものである。オブジェクトデータベース４５には種々のオブジェクトが記憶されている。オブジェクトの例としては、例えば、公共施設や他の施設、建築物、地形、河川、湖沼、海、鉄道、道路、地名、更には、私的なユーザの知人居所等を示す地理情報のオブジェクト、或いは、知人等が所持する様々な情報機器（例えば、後述する図２０，図２１で説明するスマートフォン）の現在位置を示す情報のオブジェクト、等が挙げられる。

図９は、図８のＣＰＵ２４が実行する制御手順を示すフローチャートである。先ず、ステップＳ１で、ユーザは、検索対象オブジェクトを指定する。例えば、ユーザは、目的地の霞ヶ関ビル（例えば、図７のビル４）を見つけたいとして霞ヶ関ビル４を検索対象オブジェクトとして、カメラ背面の液晶表示部のメニュー画面を通して指定する。

次に、ＣＰＵ２４は、各種情報の取得部４７，４８，４９からの位置情報，方位情報，姿勢情報を取得し、次のステップＳ３で、図８のオブジェクト検索部４３が、検索条件を満たすオブジェクトを、オブジェクトデータベース４５から検索する。例えば、「現在地を中心として、半径Ｘｋｍ以内で、かつ、ファインダ装置１６の光軸が指す方位を中心として中心角Ｙ度の扇形領域内に存在する」という検索条件で検索する。

次のステップＳ４では、ファインダ装置１６を覗いた視野範囲内に存在するオブジェクトであってステップＳ３で検索されたオブジェクトの中に、検索対象オブジェクトが存在するか否かを判定する。検索対象オブジェクトが存在しない場合にはこの処理を終了する。図１０に検索条件を満たす扇形の視野範囲６１を示す。

視野範囲６１内に検索対象オブジェクトが存在する場合には、次のステップＳ５に進み、ファインダ装置内の撮像素子４１における位相差検出画素が撮影した位相差情報を取得する。次に、ステップＳ６で、図８の位相差情報解析部２８が位相差情報から距離情報を算出し、被写体検出部４４が同一距離にある被写体を撮像している画素群の撮像画像を被写体候補として抽出する。

次のステップＳ７では、被写体候補と検索対象オブジェクトとを照合する。図１１は、扇形の視野範囲６１内でデータベースを検索することで求めたオブジェクトと、ユーザが指定した検索対象オブジェクト（この例ではビル４）と、撮像素子４１による撮像画像との関係を示す図である。このステップＳ７での照合では、「被写体と画像表示装置（ファインダ装置１６）との相対方位角が検索対象オブジェクトに最も近いもの」という条件を満たす被写体候補を、検索対象オブジェクトであると決定する。

次のステップＳ８では、合成画像生成部２６が、検出された被写体の領域を強調色の画像（電子情報）に置き換え、他の領域を黒でマスクする。即ち、図１２は、撮像素子４１で撮像された主要被写体の画像であり、ビル１〜４と家５〜７が映っている。この画像から、検索対象オブジェクトとして決定された被写体候補の画像（ビル４の画像）だけを切り出す。切り出した画像を、図１３に示す。図１３では、ビル４のうち見えている部分の画像だけを切り出し、例えば赤色画像で生成する。そして、他の領域は黒表示とする。黒表示とは、これをディスプレイパネル３７に表示するとき、何も発光色の無い状態である。

次のステップＳ９では、図１３の画像を、被写体の光学像に合わせて合成する電子情報として、ディスプレイパネル３７に表示する。これにより、図１４に示す画像が、ユーザの目に入射されることになる。図１４の画像は、ファインダ装置１６を透過してユーザの目に入射する光学像に、図１３の画像が合成された画像となっている。図１３の黒領域は、ディスプレイパネル３７からの光は何もないため、ファインダ装置１６を透過した鮮明な光学像だけがユーザに目に入射する。これに対し、ビル４について、ファインダ装置１６を透過したビル４の光学像に、図１３で説明した赤色のビル４の画像が重畳してユーザの目に入射することになる。これにより、ユーザは、ファインダ装置１６を覗いたとき、ビル４だけが赤色強調色となった光学像を見ることになる。

なお、第３の実施形態では、検索対象オブジェクトに該当する被写体画像を強調色で色付けした。しかし、検索対象オブジェクトに該当する被写体が、他の被写体の影に隠れて見えない場合もある。検索対象オブジェクトが、奥行き方向の手前側に存在する被写体の影に隠れていることが検出できた場合、検索対象オブジェクトの存在を示す電子情報を合成表示すれば良い。例えば赤色の丸枠を、その手前側の被写体画像に重ねて点滅表示することで、ユーザに検索対象オブジェクトの存在を認識させることができる。

また、第３の実施形態では、検索対象オブジェクトに該当する被写体画像を強調色で色付けしただけであるが、検索対象オブジェクトの名称も一緒にディスプレイパネル３７に表示することも可能である。

或いは、名称だけを、撮像素子４１の撮像画像に重ねて表示することでも良い。ファインダ装置１６を透過した光学像と、この光学像を分割した分割光の撮像画像とは、高精度に位置が一致するため、例えば被写体が沢山の山々が連なった連峰である場合、この連峰を構成する個々の山の名称を位置ズレ無く光学像に合成して表示できる。

図１５は、本発明の第４の実施形態に係るデジタルカメラの機能ブロック構成図である。図８の実施形態に比べると、図８のオブジェクト検索部４３の代わりにコンテンツ配置条件決定部６３とコンテンツ隠蔽領域演算部６４を設けている。更に、オブジェクトデータべース４５の代わりにコンテンツデータベース６５を設けている。

第４の実施形態では、例えば図１６に示す様に、ファインダ装置１６を覗いて見えるビル１，２，３の光学像の間の空き地に、コンテンツの画像（仮想物ＣＧ画像）を合成してユーザに見せる画像合成を行う。

図１７は、図１５のＣＰＵ２４が行う制御手順を示すフローチャートである。先ず、ステップＳ１１で、コンテンツ（仮想物）８の配置条件を決定する。このステップＳ１１で行うコンテンツ配置条件決定処理手順の詳細を示すフローチャートを図１８に示す。

図１８において、先ず、ステップＳ２１で、図１５の各種情報取得部４７，４８，４９から、現在地の位置情報，方位情報，ファインダ姿勢情報のデータを受信する。

次のステップＳ２２では、図１５のコンテンツ配置条件決定部６３により、条件を満たすコンテンツをコンテンツデータベース６５から検索する。この条件とは、例えば、「現在地を中心として半径Ｘｋｍ以内であり、ファインダ光軸の指す方向を中心に中心角度Ｙ度の扇形領域内に存在する空きスペースに収めることができる。」である。コンテンツデータベース６５に格納されている各コンテンツには、世界座標による大きさ等が割り当てられており、ファインダ装置１６のＧＰＳ信号，方位信号，姿勢信号によって定まる条件により検索される。

次のステップＳ２３では、コンテンツデータベース６５を検索した結果、条件に合うコンテンツが少なくとも１つは存在したか否かを判定する。１つも存在しない場合には、ステップＳ２１に戻る。少なくとも１つのコンテンツが存在した場合には、ステップＳ２３からステップＳ２４に進み、検索されたコンテンツから、そのコンテンツと現在地との距離Ａを算出すると共に、そのコンテンツの実サイズＢをコンテンツデータベース６５から読み出して参照する。そして、図１７のステップＳ１２に進む。

ステップＳ１２では、ファインダ装置１６で覗いた領域を位相差検出画素付きの撮像素子４１で撮影し、位相差情報を取得する。次のステップＳ１３では、図１５の被写体検出部４４が位相差情報に基づき、図９のステップ６と同様にして撮像画像中のビル１，２，３を抽出する。

次のステップＳ１４では、被写体群（上記例では、ビル１，２，３）とコンテンツとの配置条件から、コンテンツの隠蔽領域を算出する。隠蔽領域とは、撮像画像の奥行き方向で、手前の被写体によって後側のコンテンツのうち隠れてしまう領域をいう。

図１９は、コンテンツの隠蔽領域を算出する説明図である。被写体群のビル１，２，３の撮像画像を仮想の三次元空間上に配置すると共に、描画対象とするコンテンツをこの三次元空間上に配置する。そして、ファインダ装置１６を基準視点として、周知の光線追跡法により、被写体群とコンテンツとの間の隠蔽関係を算出する。

光線追跡法とは、「目に飛び込んで来る光は、一番手前にある被写体から届く」という原理に基づいて、撮像素子４１の各画素に到達する光を計算する方法である。この光線追跡法は、各画素の搭載フィルタ色や輝度を決定する３ＤＣＧ描画方法の一般的な手法である。

図１７のステップＳ１４でコンテンツや被写体の隠蔽領域，描画する領域が分かると、次のステップＳ１５に進み、図１５の合成画像生成部２６は、コンテンツのＣＧ画像のうち描画する領域のみ生成する。そして、最後のステップＳ１６で、ディスプレイパネル３７に、コンテンツの描画領域のみ表示し、その他の領域は黒表示とする。

これにより、図１６に示す様に、コンテンツ８のＣＧ画像が、あたかも、手前のビル１，２の光学像の後に存在する様に表示される。コンテンツ８の後のビル３のうちコンテンツ８に隠れる部分は、コンテンツ８の表示によって上書きされ、ビル３の手前にコンテンツ８の画像が表示されることになる。

撮像素子４１と撮像素子２２との位置関係等は予め既知のため、撮像素子２２で被写体を撮像したとき、このコンテンツ８のＣＧ画像を、撮像素子２２による撮像画像中に、位置ズレ無く、合成することができる。

この第４の実施形態によれば、ファインダ装置１６の視野範囲内の空きスペースに設ける仮想物（コンテンツ）を、予めコンテンツデータベース６５に登録されているコンテンツの中から自動的に選択する構成になっている。このため、ユーザのコンテンツ選択の手間が軽減されるという利点がある。

しかし、ユーザによっては、自身の希望するコンテンツのＣＧ画像をファインダ装置１６内に合成表示させたい場合もある。また、空きスペースではなく、既存の建物に替えてユーザ指定のコンテンツのＣＧ画像を表示させたい場合もある。

この様な場合には、ユーザにコンテンツを選択させ、その大きさや設ける場所などを、カメラ背面の液晶表示部のメニュー画面を通して指定させることで、そのコンテンツを拡大／縮小して撮像画像中に合成すれば良い。

以上、本発明の画像表示装置の実施形態として、撮影装置のファインダ装置について説明してきたが、撮影装置の構成はこれに限定されない。撮影装置としては、例えば、内蔵型又は外付け型のPC用カメラ、或いは、以下に説明するような、撮影機能を有する携帯端末装置とすることができる。

撮影装置の一実施形態である携帯端末装置としては、例えば、携帯電話機やスマートフォン、PDA(Personal Digital Assistants)、携帯型ゲーム機が挙げられる。以下、スマートフォンを例に挙げ、図面を参照しつつ、詳細に説明する。

図２０は、撮影装置の一実施形態であるスマートフォン２００の外観を示すものである。図２０に示すスマートフォン２００は、平板状の筐体２０１を有し、筐体２０１の一方の面に表示部としての表示パネル２０２と、入力部としての操作パネル２０３とが一体となった表示入力部２０４を備えている。また、この様な筐体２０１は、スピーカ２０５と、マイクロホン２０６、操作部２０７と、カメラ部２０８とを備える他に、図２，図６の実施形態で説明したファインダ装置１６を備えている。なお、筐体２０１の構成はこれに限定されず、例えば、表示部と入力部とが独立した構成を採用したり、折り畳み構造やスライド機構を有する構成を採用したりすることもできる。

図２１は、図２０に示すスマートフォン２００の構成を示すブロック図である。図２１に示すように、スマートフォンの主たる構成要素として、無線通信部２１０と、表示入力部２０４と、通話部２１１と、操作部２０７と、カメラ部２０８と、記憶部２１２と、外部入出力部２１３と、ＧＰＳ(Global Positioning System)受信部２１４と、モーションセンサ部２１５と、電源部２１６と、主制御部２２０と、ファインダ装置１６とを備える。また、スマートフォン２００の主たる機能として、図示省略の基地局装置ＢＳと図示省略の移動通信網ＮＷとを介した移動無線通信を行う無線通信機能を備える。

無線通信部２１０は、主制御部２２０の指示にしたがって、移動通信網ＮＷに収容された基地局装置ＢＳに対し無線通信を行うものである。この無線通信を使用して、音声データ、画像データ等の各種ファイルデータ、電子メールデータなどの送受信や、Ｗｅｂデータやストリーミングデータなどの受信を行う。

表示入力部２０４は、主制御部２２０の制御により、画像（静止画像および動画像）や文字情報などを表示して視覚的にユーザに情報を伝達すると共に、表示した情報に対するユーザ操作を検出する、いわゆるタッチパネルであって、表示パネル２０２と、操作パネル２０３とを備える。

表示パネル２０２は、LCD(Liquid Crystal Display)、OELD(Organic Electro-Luminescence Display)などを表示デバイスとして用いたものである。操作パネル２０３は、表示パネル２０２の表示面上に表示される画像を視認可能に載置され、ユーザの指や尖筆によって操作される一又は複数の座標を検出するデバイスである。このデバイスをユーザの指や尖筆によって操作すると、操作に起因して発生する検出信号を主制御部２２０に出力する。次いで、主制御部２２０は、受信した検出信号に基づいて、表示パネル２０２上の操作位置（座標）を検出する。

図２０に示すように、本発明の撮影装置の一実施形態として例示しているスマートフォン２００の表示パネル２０２と操作パネル２０３とは一体となって表示入力部２０４を構成しているが、操作パネル２０３が表示パネル２０２を完全に覆うような配置となっている。係る配置を採用した場合、操作パネル２０３は、表示パネル２０２外の領域についても、ユーザ操作を検出する機能を備えてもよい。換言すると、操作パネル２０３は、表示パネル２０２に重なる重畳部分についての検出領域（以下、表示領域と称する）と、それ以外の表示パネル２０２に重ならない外縁部分についての検出領域（以下、非表示領域と称する）とを備えていてもよい。

なお、表示領域の大きさと表示パネル２０２の大きさとを完全に一致させても良いが、両者を必ずしも一致させる必要は無い。また、操作パネル２０３が、外縁部分と、それ以外の内側部分の２つの感応領域を備えていてもよい。更に、外縁部分の幅は、筐体２０１の大きさなどに応じて適宜設計されるものである。更にまた、操作パネル２０３で採用される位置検出方式としては、マトリクススイッチ方式、抵抗膜方式、表面弾性波方式、赤外線方式、電磁誘導方式、静電容量方式などが挙げられ、いずれの方式を採用することもできる。

通話部２１１は、スピーカ２０５やマイクロホン２０６を備え、マイクロホン２０６を通じて入力されたユーザの音声を主制御部２２０にて処理可能な音声データに変換して主制御部２２０に出力したり、無線通信部２１０或いは外部入出力部２１３により受信された音声データを復号してスピーカ２０５から出力したりするものである。また、図２０に示すように、例えば、スピーカ２０５を表示入力部２０４が設けられた面と同じ面に搭載し、マイクロホン２０６を筐体２０１の側面に搭載することができる。

操作部２０７は、キースイッチなどを用いたハードウェアキーであって、ユーザからの指示を受け付けるものである。例えば、図２０に示すように、操作部２０７は、スマートフォン２００の筐体２０１の側面に搭載され、指などで押下されるとオンとなり、指を離すとバネなどの復元力によってオフ状態となる押しボタン式のスイッチである。

記憶部２１２は、主制御部２２０の制御プログラムや制御データ、アプリケーションソフトウェア、通信相手の名称や電話番号などを対応づけたアドレスデータ、送受信した電子メールのデータ、ＷｅｂブラウジングによりダウンロードしたＷｅｂデータや、ダウンロードしたコンテンツデータを記憶し、またストリーミングデータなどを一時的に記憶するものである。また、記憶部２１２は、スマートフォン内蔵の内部記憶部２１７と着脱自在な外部メモリスロットを有する外部記憶部２１８により構成される。なお、記憶部２１２を構成するそれぞれの内部記憶部２１７と外部記憶部２１８は、フラッシュメモリタイプ（flash memory type）、ハードディスクタイプ（hard disk type）、マルチメディアカードマイクロタイプ（multimedia card micro type）、カードタイプのメモリ（例えば、ＭｉｃｒｏＳＤ（登録商標）メモリ等）、ＲＡＭ（Random Access Memory）、ＲＯＭ（Read Only Memory）などの格納媒体を用いて実現される。

外部入出力部２１３は、スマートフォン２００に連結される全ての外部機器とのインターフェースの役割を果たすものであり、他の外部機器に通信等（例えば、ユニバーサルシリアルバス（ＵＳＢ）、IEEE１３９４など）又はネットワーク（例えば、インターネット、無線ＬＡＮ、ブルートゥース（Bluetooth）（登録商標）、ＲＦＩＤ（Radio Frequency Identification）、赤外線通信（Infrared Data Association：ＩｒＤＡ）（登録商標）、ＵＷＢ（Ultra Wideband）（登録商標）、ジグビー（ZigBee）（登録商標）など）により直接的又は間接的に接続するためのものである。

スマートフォン２００に連結される外部機器としては、例えば、有／無線ヘッドセット、有／無線外部充電器、有／無線データポート、カードソケットを介して接続されるメモリカード（Memory card）やＳＩＭ(Subscriber Identity Module Card)／ＵＩＭ(User Identity Module Card)カード、オーディオ・ビデオＩ／Ｏ（Input/Output）端子を介して接続される外部オーディオ・ビデオ機器、無線接続される外部オーディオ・ビデオ機器、有／無線接続されるスマートフォン、有／無線接続されるパーソナルコンピュータ、有／無線接続されるPDA、有／無線接続されるパーソナルコンピュータ、イヤホンなどがある。外部入出力部２１３は、このような外部機器から伝送を受けたデータをスマートフォン２００の内部の各構成要素に伝達することや、スマートフォン２００の内部のデータが外部機器に伝送されるようにすることができる。

ＧＰＳ受信部２１４は、主制御部２２０の指示にしたがって、GPS衛星ＳＴ１〜ＳＴｎから送信されるGPS信号を受信し、受信した複数のGPS信号に基づく測位演算処理を実行し、そのスマートフォン２００の緯度、経度、高度からなる位置を検出する。ＧＰＳ受信部２１４は、無線通信部２１０や外部入出力部２１３（例えば、無線ＬＡＮ）から位置情報を取得できる時には、その位置情報を用いて位置を検出することもできる。

モーションセンサ部２１５は、例えば、３軸の加速度センサなどを備え、主制御部２２０の指示にしたがって、スマートフォン２００の物理的な動きを検出する。スマートフォン２００の物理的な動きを検出することにより、スマートフォン２００の動く方向や加速度が検出される。係る検出結果は、主制御部２２０に出力されるものである。

電源部２１６は、主制御部２２０の指示にしたがって、スマートフォン２００の各部に、バッテリ（図示しない）に蓄えられる電力を供給するものである。

主制御部２２０は、マイクロプロセッサを備え、記憶部２１２が記憶する制御プログラムや制御データにしたがって動作し、スマートフォン２００の各部を統括して制御するものである。また、主制御部２２０は、無線通信部２１０を通じて、音声通信やデータ通信を行うために、通信系の各部を制御する移動通信制御機能と、アプリケーション処理機能を備える。

アプリケーション処理機能は、記憶部２１２が記憶するアプリケーションソフトウェアにしたがって主制御部２２０が動作することにより実現するものである。アプリケーション処理機能としては、例えば、外部入出力部２１３を制御して対向機器とデータ通信を行う赤外線通信機能や、電子メールの送受信を行う電子メール機能、Webページを閲覧するWebブラウジング機能などがある。

また、主制御部２２０は、受信データやダウンロードしたストリーミングデータなどの画像データ（静止画像や動画像のデータ）に基づいて、映像を表示入力部２０４に表示する等の画像処理機能を備える。画像処理機能とは、主制御部２２０が、上記画像データを復号し、この復号結果に画像処理を施して、画像を表示入力部２０４に表示する機能のことをいう。

更に、主制御部２２０は、表示パネル２０２に対する表示制御と、操作部２０７、操作パネル２０３を通じたユーザ操作を検出する操作検出制御を実行する。表示制御の実行により、主制御部２２０は、アプリケーションソフトウェアを起動するためのアイコンや、スクロールバーなどのソフトウェアキーを表示したり、或いは電子メールを作成するためのウィンドウを表示したりする。なお、スクロールバーとは、表示パネル２０２の表示領域に収まりきれない大きな画像などについて、画像の表示部分を移動する指示を受け付けるためのソフトウェアキーのことをいう。

また、操作検出制御の実行により、主制御部２２０は、操作部２０７を通じたユーザ操作を検出したり、操作パネル２０３を通じて、上記アイコンに対する操作や、上記ウィンドウの入力欄に対する文字列の入力を受け付けたり、或いは、スクロールバーを通じた表示画像のスクロール要求を受け付ける。

更に、操作検出制御の実行により主制御部２２０は、操作パネル２０３に対する操作位置が、表示パネル２０２に重なる重畳部分（表示領域）か、それ以外の表示パネル２０２に重ならない外縁部分（非表示領域）かを判定し、操作パネル２０３の感応領域や、ソフトウェアキーの表示位置を制御するタッチパネル制御機能を備える。

また、主制御部２２０は、操作パネル２０３に対するジェスチャ操作を検出し、検出したジェスチャ操作に応じて、予め設定された機能を実行することもできる。ジェスチャ操作とは、従来の単純なタッチ操作ではなく、指などによって軌跡を描いたり、複数の位置を同時に指定したり、或いはこれらを組み合わせて、複数の位置から少なくとも１つについて軌跡を描く操作を意味する。

カメラ部２０８は、CMOS(Complementary Metal Oxide Semiconductor)やCCD(Charge-Coupled Device)などの撮像素子を用いて電子撮影するデジタルカメラである。また、カメラ部２０８は、主制御部２２０の制御により、撮像によって得た画像データを例えばJPEG(Joint Photographic coding Experts Group)などの圧縮した画像データに変換し、記憶部２１２に記録したり、外部入出力部２１３や無線通信部２１０を通じて出力することができる。図２０に示すにスマートフォン２００において、カメラ部２０８は表示入力部２０４と同じ面に搭載されているが、カメラ部２０８の搭載位置はこれに限らず、表示入力部２０４の背面に搭載されてもよいし、或いは、複数のカメラ部２０８が搭載されてもよい。なお、複数のカメラ部２０８が搭載されている場合には、撮影に供するカメラ部２０８を切り替えて単独にて撮影したり、或いは、複数のカメラ部２０８を同時に使用して撮影したりすることもできる。

また、カメラ部２０８はスマートフォン２００の各種機能に利用することができる。例えば、表示パネル２０２にカメラ部２０８で取得した画像を表示することや、操作パネル２０３の操作入力のひとつとして、カメラ部２０８の画像を利用することができる。また、ＧＰＳ受信部２１４が位置を検出する際に、カメラ部２０８からの画像を参照して位置を検出することもできる。更には、カメラ部２０８からの画像を参照して、３軸の加速度センサを用いずに、或いは、３軸の加速度センサと併用して、スマートフォン２００のカメラ部２０８の光軸方向を判断することや、現在の使用環境を判断することもできる。勿論、カメラ部２０８からの画像をアプリケーションソフトウェア内で利用することもできる。

その他、静止画又は動画の画像データにＧＰＳ受信部２１４により取得した位置情報、マイクロホン２０６により取得した音声情報（主制御部等により、音声テキスト変換を行ってテキスト情報となっていてもよい）、モーションセンサ部２１５により取得した姿勢情報等などを付加して記憶部２１２に記憶させたり、外部入出力部２１３や無線通信部２１０を通じて出力したりすることもできる。

上記した様な薄型のスマートフォン２００に設けるファインダ装置１６は、かなり小型のものとなり、ファインダ装置１６内に設ける撮像素子４１もかなり小型なものとなるが、図１〜図１９で説明した実施形態と同様のことを実現することは可能である。

なお、図２０の実施形態においては、カメラ部２０８を設けずに、ファインダ装置１６内の撮像素子をカメラ部２０８として兼用させても良い。また、図２，図６などの実施形態でも、撮影レンズ１２や撮像素子２２を省略し、ファインダ装置１６内の撮像素子３６，４１で本撮影を行う構成とすることも可能である。

スマートフォンの様な高機能な情報機器の場合、アプリケーションソフトが現在位置をオブジェクトデータベース４５に逐次連絡することができる。このため、例えば図１や図２０の撮影装置のユーザは、知人のスマートフォンの現在位置つまり知人の居場所を知りたい場合、検索対象オブジェクトとして知人のスマートフォンを指定すれば、ファインダ装置１６を覗くことで、容易に見つけることができる。

以上述べた様に、実施形態の画像表示装置は、被写体側から取り込んだ入射光を分割するビームスプリッタと、そのビームスプリッタで分割された一方の入射光による第１の光学像を電気信号に変換し撮像画像として出力する撮像素子と、上記撮像画像の中の主要被写体画像に位置合わせした電子情報画像を生成する合成画像生成部と、その電子情報画像を表示するディスプレイパネルと、上記分割された他方の入射光による第２の光学像に上記ディスプレイパネルから投射された上記電子情報画像の光学像を重畳して出射させる光学プリズムとを備えることを特徴とする。

また、実施形態の画像表示装置は、ユーザ指定のオブジェクトに該当する被写体を上記撮像画像の中から検出する検出部を備え、上記電子情報画像は、上記オブジェクトが上記第２の光学像の中に存在することを示す画像とすることを特徴とする。

また、実施形態の画像表示装置は、現在地の位置情報を検出する第１センサと、上記入射光が入射してくる方向を検出する第２センサと、その画像表示装置の姿勢を検出する第３センサとを備え、上記検出部は、上記第１，第２，第３センサの各検出信号に基づいて上記オブジェクトの存在を検出することを特徴とする。

また、実施形態の画像表示装置の上記オブジェクトは、オブジェクトデータベースに登録され、地理情報と、情報機器の現在位置を示す情報と、の少なくともいずれかの情報を含むことを特徴とする。

また、実施形態の画像表示装置の上記電子情報画像は、上記撮像画像の中の主要被写体の配置位置に応じた仮想物ＣＧ画像であり、かつ上記主要被写体により奥行き方向で隠れて見えない領域を除いた画像であることを特徴とする。

また、実施形態の画像表示装置は、現在地の位置情報を検出する第１センサと、上記入射光が入射してくる方向を検出する第２センサと、その画像表示装置の姿勢を検出する第３センサとを備え、上記合成画像生成部は、上記第１，第２，第３センサの各検出信号により上記仮想物ＣＧ画像の表示位置を決めることを特徴とする。

また、実施形態の撮影装置は、上記のいずれかに記載の画像表示装置を、ファインダ装置として搭載したことを特徴とする。

また、実施形態の画像表示方法は、被写体側から取り込んだ入射光をビームスプリッタで分割し、上記ビームスプリッタで分割された一方の入射光による第１の光学像を撮像素子で電気信号に変換し撮像画像として出力し、その撮像画像の中の主要被写体画像に位置合わせした電子情報画像を合成画像生成部で生成し、上記電子情報画像をディスプレイパネルに表示し、上記分割された他方の入射光による第２の光学像に上記ディスプレイパネルから投射された上記電子情報画像の光学像を光学プリズムで重畳して出射させることを特徴とする。

以上述べた実施形態によれば、フォインダ装置等の画像表示装置を覗くことで、ユーザは、鮮明な被写体の光学像をタイムラグ無しで観察することができる。しかも、この光学像に高精度に位置合わせした電子情報画像も併せて視界内で見ることができ、画像表示装置の使い勝手や使用価値が高くなる。

本発明に係る画像表示装置は、目で見る被写体の光学像に、高精度に位置合わせした電子情報を重畳して表示できるため、ユーザの使い勝手や使用価値の高い画像表示装置を提供できる。また、この画像表示装置をファインダ装置としてデジタルカメラ等に用いると有用である。
本出願は、２０１２年３月１６日出願の日本特許出願（特願２０１２−６０３８１）に基づくものであり、その内容はここに参照として取り込まれる。

１〜４ ビルの像
５〜７ 家の像
８ コンテンツのＣＧ画像
１０ デジタルカメラ
１１ 筐体
１２ 撮影レンズ
１６ ファインダ装置
２２ 本撮影用の撮像素子
２６ 合成画像生成部
２７ 画像解析部
２８ 位相差情報解析部
３２ ビームスプリッタ
３３ 光学プリズム
３６，４１ ファインダ装置内の撮像素子
４３ オブジェクト検索部
４４ 被写体検出部
４５ オブジェクトデータベース
４７ 位置情報取得部（ＧＰＳ）
４８ 方位情報取得部（電子コンパス）
４９ 姿勢情報取得部
６３ コンテンツ配置条件決定部
６４ コンテンツ隠蔽領域演算部
６５ コンテンツデータベース

Claims (6)

1. 被写体側から取り込んだ入射光を分割するビームスプリッタと、
   該ビームスプリッタで分割された一方の入射光による第１の光学像を電気信号に変換し撮像画像として出力する撮像素子と、
   前記撮像画像の主要被写体から求めた部分画像と、該部分画像の他の画像領域を黒表示画像としたマスク画像とを有する電子情報画像であって、前記電子情報画像の中の前記部分画像の位置が、前記撮像画像の中の主要被写体画像の位置と同じである電子情報画像を生成する合成画像生成部と、
   前記電子情報画像を表示するディスプレイパネルと、
   前記分割された他方の入射光による第２の光学像に前記ディスプレイパネルから投射された前記電子情報画像の光学像を重畳して出射させる光学プリズムとを備える画像表示装置。
2. 請求項１に記載の画像表示装置であって、ユーザ指定のオブジェクトに該当する被写体を前記撮像画像の中から検出する検出部を備え、
   前記電子情報画像は、前記オブジェクトが前記第２の光学像の中に存在することを示す画像とする画像表示装置。
3. 請求項２に記載の画像表示装置であって、
   現在地の位置情報を検出する第１センサと、前記入射光が入射してくる方向を検出する第２センサと、該画像表示装置の姿勢を検出する第３センサとを備え、前記検出部は、前記第１，第２，第３センサの各検出信号に基づいて前記オブジェクトの存在を検出する画像表示装置。
4. 請求項２又は請求項３に記載の画像表示装置であって、
   前記オブジェクトは、オブジェクトデータベースに登録され、地理情報と、情報機器の現在位置を示す情報と、の少なくともいずれかの情報を含む画像表示装置。
5. 請求項１乃至請求項４のいずれか１項に記載の画像表示装置を、ファインダ装置として搭載した撮影装置。
6. 被写体側から取り込んだ入射光をビームスプリッタで分割し、前記ビームスプリッタで分割された一方の入射光による第１の光学像を撮像素子で電気信号に変換し撮像画像として出力し、
   前記撮像画像の主要被写体から求めた部分画像と、該部分画像の他の画像領域を黒表示画像としたマスク画像とを有する電子情報画像であって、前記電子情報画像の中の前記部分画像の位置が、前記撮像画像の中の主要被写体画像の位置と同じである電子情報画像を合成画像生成部で生成し、
   前記電子情報画像をディスプレイパネルに表示し、
   前記分割された他方の入射光による第２の光学像に前記ディスプレイパネルから投射された前記電子情報画像の光学像を光学プリズムで重畳させる画像表示方法。

Images