JP4815042B2 - Image display device and image presentation method - Google Patents
Image display device and image presentation method Download PDFInfo
- Publication number
- JP4815042B2 JP4815042B2 JP2000115357A JP2000115357A JP4815042B2 JP 4815042 B2 JP4815042 B2 JP 4815042B2 JP 2000115357 A JP2000115357 A JP 2000115357A JP 2000115357 A JP2000115357 A JP 2000115357A JP 4815042 B2 JP4815042 B2 JP 4815042B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- display
- image signal
- shift
- input
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000000034 method Methods 0.000 title claims description 54
- 230000008569 process Effects 0.000 claims description 35
- 238000001514 detection method Methods 0.000 claims description 6
- 210000001508 eye Anatomy 0.000 description 84
- 230000004927 fusion Effects 0.000 description 11
- 230000006870 function Effects 0.000 description 8
- 238000010586 diagram Methods 0.000 description 5
- 230000000694 effects Effects 0.000 description 5
- 230000003287 optical effect Effects 0.000 description 5
- 239000011521 glass Substances 0.000 description 3
- 235000014443 Pyrus communis Nutrition 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 210000005252 bulbus oculi Anatomy 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 239000002131 composite material Substances 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 230000006866 deterioration Effects 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 230000010287 polarization Effects 0.000 description 1
- 230000011514 reflex Effects 0.000 description 1
Images
Landscapes
- Stereoscopic And Panoramic Photography (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
Description
【0001】
【発明の属する技術分野】
本発明は画像表示装置および画像提示方法に関し、特に立体画像の観察に好適な画像表示装置および画像提示方法に関する。
【0002】
【従来の技術】
画像に立体的情報を含ませて撮影記録し、これを再生観察する方式には多種多様なものがある。その中でも最も簡単、安価でその割に効果が大きいものとしては、左右両眼の視点に対応する視差を持った2画像を記録し、これを左右両眼に対してそれぞれ提示するという、いわゆる2眼式ステレオ方式が、旧くから今日に至るまで利用されている。
【0003】
この2眼式ステレオにおいても提示方式にはまた各種あり、例えば大画面による多人数同時観察を行なう場合には、偏光メガネを併用した偏光投影方式や、シャッタメガネを併用した時分割提示方式が使用されているが、これらはいずれも大がかりで高価なシステムを必要とするため特殊な業務用途以外には使用されることは少ない。そこでいわゆるパーソナルユースに対しては、同時には1人しか観察できないという制約はあるものの、最も基本的かつ古典的な方法であるステレオペア画像を用いる方式が、極めて安価にまた鮮明な画像を観察できる方式として、今日なお広く使用されている。
【0004】
このステレオペア画像について詳述すれば、左眼視点対応画像であるL画像と右眼視点対応画像であるR画像とが、通常僅かな隙間を介して2枚並列に並べられて1つの画像を構成している。この種の画像の最も手軽な撮影装置として普及している35ミリ1眼レフカメラ+ステレオアダプターのシステム上の制約等のため、LR画像は実際には1つの標準横位置画像(横3:縦2)を縦に2分割した形で構成されており、従って各画像すなわち観察される立体画像は縦位置(横縦比約3:4程度)になっているのが一般的である。
【0005】
本明細書に於いては、このようにLR2画像が空間的に(画像平面上に)併置されて1つの画像を構成しているものをステレオペア画像と称する。なお、上記した具体的な構成(数値等)は一例に過ぎないが、説明を簡明にするために、特記しない場合は上記具体例のものが例として取り上げられていることを前提に説明する。
【0006】
このステレオペア画像は、
(1)記録、印画、伝送、印刷等に際して何らの特殊なシステムを要しない
(2)適当な条件を充たせば、直接立体視観察できる(左右像の融合が何らの装置を用いることなくできる)
という極めて優れた特長を有している。
【0007】
特に(2)に関して詳述すれば、LR画像が正しく左右眼によって捉えられ、2つの異なる画像では無く一つの立体画像として認識される状態を左右像の融合と称するが、例えば適当な大きさ(具体的には横幅が眼幅の2倍よりやや小さい程度=10〜13cm)に印画された「平行配置」(Lを左、Rを右に配置)のものであれば、観察に際しても視線を平行に向けるいわゆる「平行法」(人によっては若干の練習を要するが)を用いることで融合可能である。またこれに対して左右の画像を入れ替えた「交差配置」も使用され、こちらは印画サイズの制約が無く、視線を交差させる「交差法」によってやはり直接立体視観察できるが、観察時の眼の疲労と立体観察時の不自然さ(箱庭現象)がやや大きいため、上記平行配置の方がより普及しているものである。
【0008】
いずれにせよこのように(1)システムを選ばず(2)直接観察も可能であるという2つの大きな特長をもつステレオペア画像は、互換性に優れているため、特にインターネットやデジタルカメラの普及などいわゆるメディアミックス化が進めば進むほど、その不朽の価値が見直され、利用され続けるものと予想される。
【0009】
一方、ステレオペア画像の直接観察には
(ア)比較的容易な平行法であっても若干の練習を要する(立体視=像の融合の難易の個人差が大きい)
(イ)視差情報と眼球の焦点合わせのための緊張(ピント情報)の食い違いが大きいことから生じる立体感の不自然さ(書割、箱庭効果)が大きいこと
(ウ)平行法の場合は画像サイズが限られること
などの問題がある。すなわち、この直接観察法は道具を用いることなく左右像の融合が可能であるという基本的優位性はあるものの、臨場感の高い高画質観察を容易に行なうという目的においては充分とは言えないものである。そこで従来より観察用補助光学系たるステレオビュアーが用いられていた。このようなビュアーとして公知のものには、いわゆるプリントビュアーとスライドビュアーとがあり、前者の一例は例えば特開平07−110536号公報にも記載されている。
【0010】
【発明が解決しようとする課題】
上記公報記載のものはプリントビュアーであるから印画(印刷)されたステレオペア画像は高画質に観察できるが、例えばディジタルカメラで撮影されたディジタルステレオペア画像のようなマルチメディア媒体におけるステレオペア画像(以下Stereo Pear in Multimedia:SPMと称する)については印刷しなければ適用できないという不具合があった。
【0011】
詳述すれば、このようなSPMであっても、マルチメディア環境のプラットフォームというべき汎用パーソナルコンピュータの画面上に表示した場合は単純にステレオペア画像が表示されるから、これを直接観察する限りは上記(2)と同じ状況であって、新たな不具合は生じない。しかしながら直接観察には(ア)〜(ウ)のような問題があることは上記したところであり、改善が必要であった。なお印刷してプリントビュアーを適用することは一つの策ではあるが、プリンターの画質が悪いと本来の画質が再現できない、印刷に時間がかかり紙やインクを消耗するため検索的な使用には適用困難であるなど、本質的な解決にならないことは明らかである。
【0012】
本発明は上述の事情を鑑みてなされたものであり、第1にはステレオペア画像(SPM)を用いて臨場感の高い高画質観察を容易に行なうことができ、また第2にはステレオ画像と通常の非ステレオ画像(モノキュラーまたはモノスコーピック画像)とが混在している状況でも不具合無く利用し得る画像表示装置および画像提示方法を提供することを目的とする。
【0013】
【課題を解決するための手段】
上述の課題を解決するため、本発明の画像表示装置は、左眼表示用の表示部および右眼表示用の表示部を含む表示手段と、前記左眼表示用の表示部および前記右眼表示用の表示部の各々に表示させるべき表示再生対象の入力画像信号を入力する入力手段と、左眼視点対応画像および右眼視点対応画像が空間的に併置されて1つの画像を形成しているステレオペア画像の画像信号であるステレオペア画像信号が前記入力手段により前記表示再生対象の入力画像信号として入力された場合、前記左眼表示用の表示部に対する表示再生対象の入力画像信号であるステレオペア画像信号と前記右眼表示用の表示部に対する表示再生対象の入力画像信号であるステレオペア画像信号とに互いに異なるシフト処理を施こす画像シフト処理を実行し、前記画像シフト処理された後の2種類のステレオペア画像信号を前記表示手段に送出する画像信号シフト手段と、前記画像信号シフト手段における画像シフト量の設定をマニュアル操作で行うためのシフト量可変設定スイッチとを具備し、前記画像信号シフト手段は、前記シフト量可変設定スイッチによる画像シフト量の設定に基いて、前記左眼表示用の表示部の表示画枠に対する前記左眼視点対応画像の相対位置と前記右眼表示用の表示部の表示画枠に対する前記右眼視点対応画像の相対位置とが相揃うように、前記画像シフト処理を施すことを特徴とする。
【0014】
本発明においては、ステレオ画像信号を前記入力手段により入力して前記表示手段により前記左眼視点対応画像および前記右眼視点対応画像を左眼および右眼に対して表示する場合に、前記ステレオ画像信号に対して前記左眼視点対応画像と前記右眼視点対応画像とで互いに異なる画像シフト処理を施す画像信号シフト手段と、前記画像信号シフト手段における画像シフト量の設定をマニュアル操作で行うためのシフト量可変設定手段とが設けられており、前記画像信号シフト手段は前記シフト量可変設定手段の設定に基いて前記画像シフト処理を施す。
【0015】
前記画像信号シフト手段は、前記表示手段の表示画枠に対する前記左眼視点対応画像の相対位置と前記表示画枠に対する前記右眼視点対応画像の相対位置とが前記左眼および右眼の両視点対応画像間で相揃うように前記画像シフト処理を施し、さらに微調整分として、前記シフト量可変設定手段の設定またはこれが記憶された設定に基いた前記画像シフト処理を施すように構成されている。これにより、まず、左右両眼に対する個別表示によって提示される仮想画面上で左眼視点対応画像(L画像)と右眼視点対応画像(R画像)を互いに融合可能な範囲内に近接させることが可能となり、そして微調整分として、シフト量可変設定手段の設定またはこれが記憶された設定に基いた画像シフト処理が施される。よって、FMDで拡大像観測を行った場合でも、SPMによる立体画像の観測を容易に行うことが可能となり、臨場感の高い高画質観察を実現できる。
【0016】
ここで、画像シフト処理はL画像とR画像の融合度を高めることを目的とするものであるので、左眼画像および右眼画像それぞれにおけるL画像とR画像の相対位置関係を必ずしも完全に一致させる必要はない。この意味で、相対位置を相揃えるための前述の画像シフト処理は、L画像とR画像がより融合し易くなるようなシフト処理であればよく、仮想表示画面上で左眼画像上のL画像と右眼画像上のR画像とが融合可能な範囲内に含まれるようにすればよい。
【0017】
また、画像シフト処理は、入力されたステレオペア画像の画像巾に基づいて行うことが好ましい。これにより、入力画像信号全体の画枠に対するLR画像の相対位置が不明であっても、例えば、左眼画像側についてはステレオペア画像の画像巾の1/4だけ画像信号を右シフトさせ、右眼画像側についてはステレオペア画像の画像巾の1/4だけ画像信号を左シフトさせることにより、適切な画像シフト処理を容易に行うことが可能となる。もちろん、左眼画像と右眼画像の一方のシフト量をステレオペア画像の画像巾の1/2に設定すれば、他方の画像についてはシフトを行わないという、いわゆるゼロシフト処理で済ませることも可能である。このようなゼロシフト処理をも含めて、左眼画像と右眼画像とで互いに異なる画像シフト処理が施されるのである。
【0018】
また、入力手段により入力された画像信号が前記ステレオペア画像信号であるか否かを検出するステレオペア画像検出手段をさらに設けることにより、ステレオペア画像信号であることが検出された場合は入力画像信号に対する画像シフト処理を自動実行し、非ステレオペア画像信号であることが検出された場合は入力画像信号に対する画像シフト処理の実行を禁止するという制御が可能となり、ペア画像と通常の非ステレオ画像とが混在する環境下でも、入力画像信号に合った適切な画像表示を実現することが可能となる。
【0019】
【発明の実施の形態】
以下、図面を参照して本発明の実施形態を説明する。
図1には、本発明の一実施形態に係わる画像表示装置の構成が示されている。この画像表示装置100はSPMを用いて立体画像の高画質画像観測を実現するためのビューアであり、例えばフェイスマウンテッドディスプレイ(FMD)などとして実現されている。図中、111は装置全体の動作を統括的に制御するためのシステムコントローラ(CPU)、112は各種操作ボタンからなる操作スイッチ系、113は操作状態及びモード状態等を表示するための操作表示系、114は各種画像信号処理機能を持つデジタルプロセス回路、115はLCD画像表示系を示している。
【0020】
LCD画像表示系115は左右両眼に対する各表示画像である左眼画像および右眼画像の各画像を左右両眼に対して個別に表示することによって、左眼画像および右眼画像の仮想的な合成拡大像を仮想表示画面として観察者に提示するためのものであり、左眼画像表示用のLCD表示デバイス(DL)115aおよび右眼画像表示用のLCD表示デバイス(DR)115bの2つのLCD表示デバイスを有している。
【0021】
また、図中の116はメモリカードインターフェース、117はメモリカード、118は各種設定情報等を記憶するための不揮発性メモリ(EEPROM)を示している。
【0022】
メモリカード117は表示再生対象の画像信号を記録するためのものであり、ここには電子的なステレオペア画像からなる上述のSPM、および他の通常の非ステレオ画像が公知の画像フォーマット(BMP、JPEG等)によって記録されている。
【0023】
本実施形態の画像表示装置100においては、システムコントローラ111の制御の下、表示再生対象の画像信号がメモリカード117から読み出され、それが表示再生対象の入力画像信号としてLCD画像表示系115に送られて2つの表示デバイス115a,115bにてそれぞれ個別に表示される。通常は、2つの表示デバイス115a,115bには同一の画像が表示されるが(モノキュラモード)、電子的なステレオペア画像たるSPMをメモリカード117から読み出して表示する場合には、左眼画像側と右眼画像側とで互いに異なるシフト処理が施された後の画像信号がそれぞれ左眼画像および右眼画像として表示デバイス115a,115bから表示される(ステレオモード)。
【0024】
すなわち、システムコントローラ111には図示のようにステレオペア画像シフト処理部201が設けられており、ステレオモードにおいてはステレオペア画像シフト処理部201によって上述のシフト処理が実行される。このシフト処理の詳細については図5以降で後述するが、基本的には、左眼画像側におけるL画像の位置と右眼画像側におけるR画像の位置とを合わせるために行われる。このシフト処理により、左右両眼で左眼画像および右眼画像をそれぞれ観察したときに左眼画像側におけるSPMのL画像と右眼画像側におけるSPMのR画像とが一つの立体画像として融合するようになり、臨場感の高い高画質の立体画像を容易に観察することが可能となる。
【0025】
(SPM)
図2には、本実施形態で用いられるSPMの構成の一例が示されている。
上述したように、SPMは、1枚の画像空間を2分割するように併置されたL、Rの2つの画像(PL,PR)から構成されている。L画像(PL)は左眼視点対応画像であり、R画像(PR)は右眼視点対応画像である。SPMの巾はWピクセル、高さがHピクセルである。また、ここで取扱うSPMの横縦比は一般的なフィルムカメラフォーマットに併せてH=W×2/3としている。
【0026】
(FMD)
図3には、本実施形態で用いられるFMDにおける表示部の構成が模式的に示されている。図3は観察者が装着した状態のFMDを上から見たものである。
【0027】
メガネ型の形状を持つFMDフレーム10の左眼対応位置には前述のLCD表示デバイス(DL)115aとルーペ光学系(LL)116aが取り付けられており、また右眼対応位置には前述のLCD表示デバイス(DR)115bとルーペ光学系(LR)116bが取り付けられている。ルーペ光学系116a,116bはFMD本来の像拡大機能並びに像距離変換作用を実現するための拡大光学系であり、ルーペ光学系116a,116bによって拡大され左眼画像および右眼画像を左右両眼に個別に提示することにより、例えば眼前1mに対角100インチ程度の仮想表示画面があるように表示される。
【0028】
また、FMDフレーム10には、ステレオ/モノキュラ切換スイッチ112aが設けられている。ステレオ/モノキュラ切換スイッチ112aは図1の操作スイッチ系112内の1操作スイッチであり、前述のステレオモード/モノキュラモードの切り換えのために用いられる。
【0029】
(インターフェースボックス)
実際のFMDに実現に際しては、その本体内に図1のブロック図の機能を単独で有する構成のもの(再生装置)のみならず、例えばパーソナルコンピュータやデジタルカメラなどからのディスプレイ出力を受けて、それを表示するための表示系のみを本体内に持つFMDも考えられる。この場合には、図4に示すように、パーソナルコンピュータやデジタルカメラなどの画像信号出力装置30からのディスプレイ出力を入力画像信号として受けるインターフェースボックス20を用意し、このインターフェースボックス20からケーブル等を通じてFMD10に入力画像信号を導けばよい。
【0030】
この際、FMD10は受けた画像信号をそのまま表示するだけであるので、前述のシフト処理機能はインターフェースボックス20内に設けた画像シフト処理部20aによって実行されることになる。画像シフト処理部20aとしては、例えば画像信号出力装置30からの入力画像信号を保持するバッファメモリと、このバッファメモリからの画像信号の読み出し時のアドレス制御を左眼画像と右眼画像とで独立に可変設定可能なメモリコントロール回路などによって実現することができる。その具体的な実施例としては「バッファメモリ、メモリコントロール回路とも左右独立に2系統とするもの」「バッファメモリは1系統(左右共通)で、読み出しアドレス制御を左右点順次の時分割(倍速読み出し)で行ない、左右独立(2系統)のラッチ回路によって左右分離を行なうもの」の2例を挙げておく。また、インターフェースボックス20には、前述と同様のステレオ/モノキュラ切換スイッチが設けられると共に、入力画像信号に対するシフト量Sの設定をマニュアル操作で行うためのシフト量可変設定スイッチが設けられる。
【0031】
シフト量Sの設定は基本的には観察者自身がシフト量可変設定スイッチの操作によってマニュアルで行うことになるが、一旦設定された値をインターフェースボックス20内のEEPROMに記録しておくことにより、再設定操作を簡略化することもできる。
【0032】
(画像表示動作1)
次に、FMDが図1のブロック図の機能を単独で有する再生装置として実現されている場合を例示して、その画像表示動作について説明する。
【0033】
<モノキュラモード>
ステレオ/モノキュラ切換スイッチ112aでモノキュラモードを選択した場合は従来どおりであるから、LCD表示デバイス(DL)115aに左眼画像として表示される表示画像(以下、ILと称する)と、LCD表示デバイス(DR)115bに右眼画像として表示される表示画像(以下、IRと称する)は全く同一である。
【0034】
この際、仮想画面上に表示される虚像の画像サイズは大きくなるので、仮に通常の20インチCRTディスプレイ上で表示した場合には並行法によって立体像の直接観察が可能であるようなステレオペア画像を表示した場合でも、FMDでは、例えば前述のように眼前1mに対角100インチ程度の仮想表示画面があるように表示されるため、ステレオペア画像のL画像(PL)とR画像(PR)の表示画像サイズが共に並行法による立体像観察可能範囲を超えてしまい、左右両像の融合は通常不可能となる。
【0035】
<ステレオモード>
ステレオ/モノキュラ切換スイッチ112aでステレオモードを選択した場合は、表示対象の入力画像信号に対してシフト処理が施される。ここで、シフト処理の原理を図5を参照して説明する。
【0036】
図1のシステムコントローラ111は表示対象入力画像信号であるSPMの画像サイズを認識しているので、シフト量SをSPMの画像幅Wの1/4に設定する。そして、SPMに対して左眼画像と右眼画像とで互いに異なるシフト処理を施し、図5に示すように、左眼表示画像ILについては右方向にW/4ピクセル分だけシフトし、逆に右眼表示画像IRについては左方向にW/4ピクセル分だけシフトする。
【0037】
図5は、LCD表示デバイス115a,115bそれぞれに対する入力画像信号全体をシフトした場合の例であり、LCD表示デバイス115aによって表示されるILの表示画枠の左端はW/4ピクセル分のブランク領域となり、SPMのLR画像は本来の表示位置よりも右側にW/4ピクセル分だけ移動することになる。この時、L画像(PL)の表示位置は、非ステレオ表示である通常表示(モノキュラーモード)におけるSPMの画枠中心位置(PLとPRの境界位置)に設定される。同様にして、LCD表示デバイス115bによって表示されるIRの表示画枠の右端はW/4ピクセル分のブランク領域となり、SPMのLR画像は本来の表示位置よりも左側にW/4ピクセル分だけ移動することになる。この時、R画像(PR)の表示位置は、非ステレオ表示である通常表示(モノキュラーモード)におけるSPMの画枠中心位置(PLとPRの境界位置)に設定される。
【0038】
このようなシフト処理により、ILの表示画枠に対するL画像(PL)の相対位置とIRの表示画枠に対するR画像(PR)の相対位置とが相等しく設定される。ここで、ILとIRを左右両眼でそれぞれ観察した場合に得られる仮想表示画面の様子を説明する。図6はSPMを非ステレオ表示(モノキュラーモード)で表示した場合の仮想表示画面を示し、また図7はSPMをステレオ表示(ステレオモード)で表示した場合の仮想表示画面を示している。
【0039】
図6から分かるように、仮想表示画面はILの表示画枠とIRの表示画枠とを一致するように重ねてそれを拡大した像に相当するものであるから、非ステレオ表示において観察されるのは、ILとIRの両表示画像間のL画像(PL)同士およびR画像(PR)同士を互いに合成した像となる。
【0040】
これに対し、ステレオモードを用いた場合には、図7に示すように、ILの表示画枠内のL画像(PL)とIRの表示画枠内のR画像(PR)との相対的な位置関係が一致するため、左眼で観測されるL画像(PL)と右眼で観測されるR画像(PR)とが一つの立体画像として認識されやすくなり、両画像の融合度を顕著に高めることが可能となる。
【0041】
すなわち、本実施形態のシフト処理は、左眼および右眼それぞれに対する左右像の相対的な位置関係を合わせるという一種のセンタリング処理である。したがって、L画像(PL)をILの表示画枠の中心に設定し、R画像(PR)をIRの表示画枠の中心に設定しても、同様の効果が得られる。実際、通常の非ステレオ表示でSPMがIL,IRの表示画枠の中心に表示されるような場合には、上述のシフト処理により、L画像(PL)はILの表示画枠の中心に設定され、R画像(PR)はIRの表示画枠の中心に設定されることになる。また、観察時の画像の融合という点では、ILの表示画枠に対するL画像(PL)の相対位置とIRの表示画枠に対するR画像(PR)の相対位置とが必ずしも完全に一致している必要はなく、仮想画面上でL画像(PL)とR画像(PR)とが重複して観察されるように、L画像(PL)の中心位置とR画像(PR)の中心位置を互いに近接させるようなシフト処理を施せば良い。
【0042】
なお、本実施形態ではSPMの画像巾に基づいてシフト量Sを決定しているが、これは入力画像信号中のSPMの画枠位置を認識せずとも、画像巾さえ認識していれば十分なセンタリング効果を得られるようにするためである。
【0043】
またシフト量Sの値は基本的には画像巾に基づいて自動的に決定されるが、立体画像の視認性を向上させるために微調整可能にしておくことが好ましい。例えば、EEPROM118に微調整用データを予め記録しておき、使用者によるスイッチ操作などに基づいて、その微調整用データを用いてシフト量Sの値を増減できるように構成しておくことにより、立体画像の視認性をより高めることが可能となる。
【0044】
<シフト処理 その2>
次に、図8を参照して、ステレオモード時に実行されるシフト処理の第2の例について説明する。
【0045】
本例は、左眼画像側あるいは右眼画像の一方を止めておき、他方のみをシフトさせることによって、左眼および右眼それぞれに対する左右像の相対的な位置関係を合わせるというものである。この場合、シフト量SをSPMの画像幅Wの1/2に設定する。そして、SPMの入力画像信号に対して例えば左眼画像についてのみシフト処理を施し、図8に示すように、左眼表示画像ILについては右方向にW/2ピクセル分だけシフトし、右眼画像IRについてはシフト量Sをゼロにして、原画像信号のまま保持する。
【0046】
これにより、LCD表示デバイス115aによって表示されるILの表示画枠の左端はW/2ピクセル分のブランク領域となり、SPMのLR画像は本来の表示位置よりも右側にW/2ピクセル分だけ移動することになる。この時、L画像(PL)の表示位置は、非ステレオ表示である通常表示(モノキュラーモード)におけるSPMのR画像(PR)の表示位置に設定される。よって、画像画面上ではILのL画像(PL)とIRのR画像(PR)とが重なり合い、両画像の融合が可能となる。
【0047】
(画像表示動作2)
次に、インターフェースボックス20によってシフト処理を行う場合を例示して、FMDによる画像表示動作を説明する。
【0048】
<モノキュラモード>
インターフェースボックス20のステレオ/モノキュラ切換スイッチでモノキュラモードを選択した場合は、前述の画像表示動作1と全く同じである。
【0049】
<ステレオモード>
インターフェースボックス20のステレオ/モノキュラ切換スイッチでステレオモードを選択した場合は、使用者は、画像サイズを考慮して自らシフト量可変設定スイッチを操作することによりシフト量Sの設定を行う。この場合、使用者がシフト量Sを直接設定するのではなく、シフト量可変設定スイッチによって画像巾Wの値のみを使用者が入力設定し、インターフェースボックス20内で自動的にシフト量SをW/4に決定するという仕組みを用いても良い。そして、シフト量Sだけ左右にそれぞれシフト処理された2種類の画像信号が並列にまたは時分割でFMDに送られ、左眼画像および右眼画像としてそれぞれ表示される。
【0050】
なお、インターフェースボックス20内のシフト処理においても、左眼画像側あるいは右眼画像の一方を止めておき、他方のみをシフトさせるという図8の処理を利用可能である。
【0051】
(動作モードの自動切り換え)
次に、図9のフローチャートを参照して、ステレオモード/モノキュラモードを自動的に切り換える場合の動作について説明する。
【0052】
これは、FMDが図1のブロック図の機能を単独で有する再生装置として実現されている場合に適用される制御であり、ステレオ/モノキュラ切換スイッチによるモード切り換えではなく、表示対象の画像がステレオペア画像であるか否かを検出し、それによってステレオモード/モノキュラモードの切り換えを行う。この場合、表示対象の画像がステレオペア画像であるか否かの検出は、画像ファイルのヘッダ領域に「ステレオペア画像」であるという情報を予め記録しておき、これを認識するという方法を利用することができる。
【0053】
まず、システムコントローラ111はメモリカード117から表示対象の画像ファイルを読み込み、そのヘッダ領域の解析を行う(ステップS101,S102)。そして、ヘッダ領域に「ステレオペア画像」である旨の情報が含まれているか否かによって、ステレオペア画像であるかどうかの判定を行う(ステップS103)。ステレオペア画像、つまりSPMであることが検出された場合には、システムコントローラ111は、動作モードをステレオモードとし、ステレオペア画像シフト処理部201に前述のシフト処理を自動実行させる(ステップS104)。そしてシフト処理後の画像信号がLCD表示系115により表示される(ステップS105)。一方、ステレオペア画像以外の画像であれば、システムコントローラ111は、不要なシフト処理が実行されることによる表示画像の位置ずれなどの問題が生じないように、ステレオペア画像シフト処理部201によるシフト処理の実行を禁止し、シフト処理を行わない状態でLCD表示系115により表示する(ステップS105)。
【0054】
これにより、SPM/モノキュラーの両画像が混在している場合であっても、入力される表示対象画像の種類に応じて適切な処理を行うことが可能となり、モノキュラーの画像に対して不要なシフト処理が誤って施されることによる表示画質低下などの問題を事前に防ぐことが可能となる。
【0055】
以上説明したように、本実施形態においては、FMD本体内、あるいはFMD本体内に外部からの入力画像信号を導くインターフェースボックス内にシフト処理機能を設けて、入力された画像信号に対して左眼画像と右眼画像とで互いに異なる画像シフト処理を施す構成を採用することにより、SPMを用いて臨場感の高い立体画像の高画質観察を行うことが可能となる。
【0056】
なお、以上の実施形態では、シフト量Sの基本値としてW/4(またはW/2)を用いたが、SPM内のLR画像間の隙間を考慮してシフト量Sを基本値よりも若干大きく設定したり、あるいは逆に臨場感の補正を考慮して若干小さくするなどしても良い。つまり、入力画像信号に対するシフト処理はL画像とR画像の融合度を高め、従来融合が不可能あるいは極めて困難であった画像を容易に融合可能ならしめることを最小限の目的とするものであるので、仮想画面上でL画像とR画像が融合可能な範囲内に位置されるように設定すればそれで必要最小限の基本的な効果が得られる。言い換えれば、より高次の目的としては臨場感の高い高画質の立体画像を容易に観察することにあるから、そのための最適配置を得るために、シフト量Sを上記基本的な例示値に対して調整的な範囲で適量だけ変更することは、望ましい1つの変形実施形態として本発明に当然に含まれるものである。
【0057】
また、L画像が右側に、R画像が左側に配置されてなる左右逆配置のSPMを用いることも可能である。ただし、この場合には、入力画像信号に対して左眼画像は左シフト、右眼画像は右シフトを施すことになる。
【0058】
さらに、L画像とR画像が上下に配置されてなるSPMを用いることもできる。この場合のシフト処理の様子を図10に示す。すなわち、左眼表示画像ILについては下方向にH/4ピクセル分だけシフトし、逆に右眼表示画像IRについては上方向にH/4ピクセル分だけシフトする。もちろん、どちらか一方の表示画像のみをH/2ピクセル分だけ上または下方向にシフトしてもよい。
【0059】
また、SPMの横縦比は任意であり、様々なアスペクト非の画像信号を扱うことが可能である。
【0060】
また、入力画像信号全体をシフトするのではなく、入力画像信号からSPMの画像領域だけを切り出し、その画像領域の表示位置をシフトするようにしてもよい。
【0061】
また、上記実施例においてはSPMは静止画の場合を例示したが、これに限られることなく、例えばMPEGなど動画であっても全く同様に適用可能である。動画SPMの場合、動画のままプリントすることは不可能であり従って従来のプリントビュアーを用いることができないという意味からも、極めて有効であることを付言する。
【0062】
【発明の効果】
以上説明したように、本発明によれば、ステレオペア画像による立体画像の観測を容易に行うことが可能となり、臨場感の高い高画質観察を実現できる。また、ステレオペア画像と通常の非ステレオ画像(モノキュラーまたはモノスコーピック画像)とが混在している状況でも不具合無く利用することが可能となる。
【図面の簡単な説明】
【図1】本発明の一実施形態に係わる画像表示装置の構成を示すブロック図。
【図2】同実施形態の画像表示装置で用いられるステレオペア画像SPMの構造を示す図。
【図3】同実施形態で用いられるFMDの表示部の構成を示す図。
【図4】同実施形態で用いられるFMDとインターフェースボックスとの関係を示す図。
【図5】同実施形態で実行されるシフト処理の第1の例を示す図。
【図6】同実施形態の非ステレオモード時における仮想表示画面の表示例を示す図。
【図7】同実施形態のステレオモード時における仮想表示画面の表示例を示す図。
【図8】同実施形態で実行されるシフト処理の第2の例を示す図。
【図9】同実施形態における動作モードの自動切り換え動作を説明するためのフローチャート。
【図10】同実施形態で実行されるシフト処理の第3の例を示す図。
【符号の説明】
111…システムコントローラ
112…操作スイッチ系
112a…ステレオ/モノキュラ切り換えスイッチ
117…メモリカード
115…LCD表示系
115a…左眼画像表示用のLCD表示デバイス(DL)
115b…右眼画像表示用のLCD表示デバイス(DR)
201…ステレオペア画像シフト処理部[0001]
BACKGROUND OF THE INVENTION
The present invention relates to an image display device and an image presentation method, and more particularly to an image display device and an image presentation method suitable for observing a stereoscopic image.
[0002]
[Prior art]
There are a wide variety of methods for capturing and recording three-dimensional information in an image and reproducing it. Among them, the simplest, cheapest and most effective one is that two images having parallax corresponding to the viewpoints of the left and right eyes are recorded and presented to the left and right eyes respectively, so-called 2 The ocular stereo system has been used from the old days to today.
[0003]
There are also various presentation methods in this binocular stereo. For example, when performing simultaneous observation of a large number of people on a large screen, a polarization projection method using polarized glasses or a time-sharing presentation method using shutter glasses is used. However, since these are large and require expensive systems, they are rarely used except for special business purposes. Therefore, for so-called personal use, there is a restriction that only one person can observe at the same time, but the method using stereo pair images, which is the most basic and classic method, can observe clear images at a very low cost. As a method, it is still widely used today.
[0004]
To describe this stereo pair image in detail, an L image that is an image corresponding to the left eye viewpoint and an R image that is an image corresponding to the right eye viewpoint are usually arranged in parallel with a small gap between two images. It is composed. The LR image is actually one standard horizontal position image (horizontal 3: vertical) due to restrictions on the system of 35 mm single-lens reflex camera + stereo adapter, which is widely used as the most convenient image capturing device of this type. 2) is vertically divided into two, and therefore each image, that is, the stereoscopic image to be observed is generally in a vertical position (aspect ratio of about 3: 4).
[0005]
In the present specification, an image in which LR2 images are arranged spatially (on the image plane) to form one image is referred to as a stereo pair image. The specific configuration (numerical values and the like) described above is merely an example, but for the sake of simplicity, the description will be made on the assumption that the specific example is taken as an example unless otherwise specified.
[0006]
This stereo pair image
(1) No special system is required for recording, printing, transmission, printing, etc.
(2) If appropriate conditions are satisfied, direct stereoscopic observation is possible (the fusion of left and right images can be performed without using any device).
It has an extremely excellent feature.
[0007]
Specifically, regarding (2), a state in which the LR image is correctly captured by the left and right eyes and is recognized as one stereoscopic image instead of two different images is referred to as fusion of the left and right images. Specifically, if it is of “parallel arrangement” (L is placed on the left and R is placed on the right) printed with a lateral width slightly smaller than twice the eye width = 10 to 13 cm, the line of sight is also observed during observation. Fusion can be achieved by using the so-called “parallel method” (although some practice may require some practice). On the other hand, the “crossing arrangement” in which the left and right images are interchanged is also used, and there is no restriction on the print size, and it is possible to directly observe stereoscopic vision by the “crossing method” that intersects the lines of sight. Since the fatigue and unnaturalness during stereoscopic observation (small garden phenomenon) are somewhat large, the parallel arrangement is more prevalent.
[0008]
In any case, stereo pair images that have two major features of (1) regardless of the system (2) that can be directly observed are excellent in compatibility. As so-called media mix progresses, its immortal value will be reviewed and expected to continue to be used.
[0009]
On the other hand, for direct observation of stereo pair images
(A) Even if it is a relatively easy parallel method, some practice is required (stereoscopic view = individual differences in difficulty of image fusion are large)
(B) Large unnaturalness (scrimming, miniature garden effect) due to large discrepancy between tension (focus information) for focusing parallax information and eyeballs
(C) In the parallel method, the image size is limited.
There are problems such as. In other words, although this direct observation method has the basic advantage that the left and right images can be fused without using tools, it is not sufficient for the purpose of easily performing high-quality observation with a high sense of reality. It is. Therefore, a stereo viewer, which is an auxiliary optical system for observation, has been used conventionally. Known viewers include so-called print viewers and slide viewers. An example of the former is also described in Japanese Patent Application Laid-Open No. 07-110536.
[0010]
[Problems to be solved by the invention]
Since the publication described in the above publication is a print viewer, a printed stereo pair image can be observed with high image quality. For example, a stereo pair image in a multimedia medium such as a digital stereo pair image taken by a digital camera ( (Stereo Pear in Multimedia: hereinafter referred to as SPM) has a problem that it cannot be applied unless it is printed.
[0011]
In detail, even if it is such an SPM, a stereo pair image is simply displayed when displayed on the screen of a general-purpose personal computer, which should be a platform for a multimedia environment. It is the same situation as the above (2), and no new trouble occurs. However, the direct observation has the problems (a) to (c) as described above, and improvement is necessary. Although printing and applying the print viewer is one measure, it cannot be reproduced if the image quality of the printer is poor, and it takes time to print and consumes paper and ink. Clearly, it is not an essential solution, such as difficulties.
[0012]
The present invention has been made in view of the above circumstances. First, a stereo image (SPM) can be used to easily perform high-quality observation with a high sense of reality, and second, a stereo image. An object of the present invention is to provide an image display device and an image presentation method that can be used without problems even in a situation where normal and non-stereo images (monocular or monoscopic images) are mixed.
[0013]
[Means for Solving the Problems]
In order to solve the above-described problems, an image display device according to the present invention includes:Includes a display for left-eye display and a display for right-eye displayDisplay means;Input an input image signal to be displayed and reproduced to be displayed on each of the display unit for left eye display and the display unit for right eye display.Input means;A stereo pair image signal, which is an image signal of a stereo pair image in which the left eye viewpoint image and the right eye viewpoint image are spatially juxtaposed to form one image, is input to the display / reproduction target by the input means. When input as a signal, a stereo pair image signal that is an input image signal to be displayed and reproduced for the display unit for left eye display and a stereo pair that is an input image signal to be displayed and reproduced for the display unit for right eye display An image shift process is performed in which different shift processes are performed on the image signal, and two types of stereo pair image signals after the image shift process are sent to the display meansImage signal shift means and shift amount variable setting for manually setting the image shift amount in the image signal shift meansswitchAnd the image signal shifting means is configured to variably set the shift amount.Setting of image shift amount by switchBased onThe relative position of the left-eye viewpoint corresponding image with respect to the display image frame of the display unit for the left-eye display and the relative position of the right-eye viewpoint corresponding image with respect to the display image frame of the display unit for the right eye display are aligned. In addition,The image shift process is performed.
[0014]
In the present invention, when the stereo image signal is input by the input means and the left eye viewpoint corresponding image and the right eye viewpoint corresponding image are displayed to the left eye and the right eye by the display means, the stereo image An image signal shift means for performing different image shift processing on the signal between the left-eye viewpoint corresponding image and the right-eye viewpoint corresponding image, and setting of an image shift amount in the image signal shift means by manual operation Shift amount variable setting means is provided, and the image signal shift means performs the image shift processing based on the setting of the shift amount variable setting means.
[0015]
The image signal shift means is configured such that a relative position of the left-eye viewpoint corresponding image with respect to a display image frame of the display means and a relative position of the right-eye viewpoint corresponding image with respect to the display image frame are both left eye and right eye viewpoints. The image shift processing is performed so that the corresponding images are aligned, and the image shift processing is performed based on the setting of the shift amount variable setting means or the stored setting as fine adjustment. . As a result,On the virtual screen presented by separate display for the left and right eyesLeft eye viewpoint compatible image (L image)WhenRight eye viewpoint compatible image (R image)Can be brought close to each other within a range where they can be fused together.Then, as a fine adjustment, an image shift process based on the setting of the shift amount variable setting means or the setting stored therein is performed.Therefore, even when magnified image observation is performed by FMD, stereoscopic image observation by SPM can be easily performed, and high-quality observation with high presence can be realized.
[0016]
Here, the purpose of the image shift process is to increase the degree of fusion of the L image and the R image, and therefore the relative positional relationship between the L image and the R image in the left eye image and the right eye image respectively does not necessarily match completely. There is no need to let them. In this sense, the above-described image shift process for aligning the relative positions may be any shift process that facilitates the fusion of the L image and the R image, and the L image on the left eye image on the virtual display screen. And the R image on the right eye image may be included in a range that can be fused.
[0017]
Moreover, it is preferable to perform an image shift process based on the image width of the input stereo pair image. As a result, even if the relative position of the LR image with respect to the image frame of the entire input image signal is unknown, for example, on the left eye image side, the image signal is shifted to the right by 1/4 of the image width of the stereo pair image, and the right On the eye image side, appropriate image shift processing can be easily performed by shifting the image signal to the left by 1/4 of the image width of the stereo pair image. Of course, if the shift amount of one of the left eye image and the right eye image is set to ½ of the image width of the stereo pair image, it is possible to perform the so-called zero shift processing in which the other image is not shifted. is there. Including such zero shift processing, the left eye image and the right eye image are subjected to different image shift processing.
[0018]
Further, when it is detected that the image signal input by the input means is a stereo pair image signal by further providing a stereo pair image detection means for detecting whether the image signal is the stereo pair image signal, the input image is detected. The image shift process is automatically executed on the signal, and when it is detected that the image signal is a non-stereo pair image signal, it is possible to control the execution of the image shift process on the input image signal. It is possible to realize an appropriate image display suitable for the input image signal even in an environment in which both are mixed.
[0019]
DETAILED DESCRIPTION OF THE INVENTION
Hereinafter, embodiments of the present invention will be described with reference to the drawings.
FIG. 1 shows the configuration of an image display apparatus according to an embodiment of the present invention. The
[0020]
The LCD
[0021]
In the figure,
[0022]
The
[0023]
In the
[0024]
That is, the
[0025]
(SPM)
FIG. 2 shows an example of the configuration of the SPM used in the present embodiment.
As described above, the SPM is composed of two images L and R (PL and PR) juxtaposed so as to divide one image space into two. The L image (PL) is a left-eye viewpoint corresponding image, and the R image (PR) is a right-eye viewpoint corresponding image. The width of the SPM is W pixels and the height is H pixels. In addition, the aspect ratio of the SPM handled here is H = W × 2/3 in accordance with a general film camera format.
[0026]
(FMD)
FIG. 3 schematically shows the configuration of the display unit in the FMD used in the present embodiment. FIG. 3 is a top view of the FMD worn by the observer.
[0027]
The LCD display device (DL) 115a and the loupe optical system (LL) 116a are attached to the position corresponding to the left eye of the
[0028]
Further, the
[0029]
(Interface box)
When an actual FMD is realized, not only the structure (reproducing device) having the function of the block diagram of FIG. 1 in its main body but also a display output from a personal computer or a digital camera, for example, An FMD having only a display system in the main body is also conceivable. In this case, as shown in FIG. 4, an
[0030]
At this time, since the
[0031]
The setting of the shift amount S is basically performed manually by the observer himself by operating the shift amount variable setting switch, but once the set value is recorded in the EEPROM in the
[0032]
(Image display operation 1)
Next, the image display operation will be described by exemplifying a case where the FMD is realized as a playback apparatus having the function of the block diagram of FIG.
[0033]
<Monocular mode>
When the monocular mode is selected with the stereo /
[0034]
At this time, since the image size of the virtual image displayed on the virtual screen becomes large, if it is displayed on a normal 20-inch CRT display, a stereo pair image in which a stereoscopic image can be directly observed by the parallel method. In the FMD, for example, as described above, the virtual display screen having a diagonal size of about 100 inches is displayed 1 m in front of the eyes as described above. Both of these display image sizes exceed the range in which stereoscopic images can be observed by the parallel method, and fusion of the left and right images is usually impossible.
[0035]
<Stereo mode>
When the stereo mode is selected with the stereo /
[0036]
Since the
[0037]
FIG. 5 shows an example in which the entire input image signal for each of the
[0038]
By such shift processing, the relative position of the L image (PL) with respect to the IL display image frame and the relative position of the R image (PR) with respect to the IR display image frame are set to be equal. Here, the state of the virtual display screen obtained when IL and IR are observed with both the left and right eyes will be described. 6 shows a virtual display screen when the SPM is displayed in a non-stereo display (monocular mode), and FIG. 7 shows a virtual display screen when the SPM is displayed in a stereo display (stereo mode).
[0039]
As can be seen from FIG. 6, the virtual display screen corresponds to an image obtained by superimposing the IL display image frame and the IR display image frame so as to coincide with each other, and is thus observed in a non-stereo display. Is an image obtained by combining the L images (PL) and the R images (PR) between the display images of IL and IR.
[0040]
On the other hand, when the stereo mode is used, as shown in FIG. 7, the relative relationship between the L image (PL) in the IL display image frame and the R image (PR) in the IR display image frame. Since the positional relationship is the same, the L image (PL) observed with the left eye and the R image (PR) observed with the right eye are easily recognized as one stereoscopic image, and the degree of fusion of both images is remarkably increased. It becomes possible to raise.
[0041]
That is, the shift process of the present embodiment is a kind of centering process in which the relative positional relationship of the left and right images with respect to the left eye and the right eye is matched. Therefore, the same effect can be obtained by setting the L image (PL) at the center of the IL display image frame and setting the R image (PR) at the center of the IR display image frame. Actually, when the SPM is displayed at the center of the IL and IR display image frames in the normal non-stereo display, the L image (PL) is set at the center of the IL display image frame by the above-described shift processing. The R image (PR) is set at the center of the IR display image frame. Further, in terms of fusion of images during observation, the relative position of the L image (PL) with respect to the IL display image frame and the relative position of the R image (PR) with respect to the IR display image frame are not necessarily completely coincident. The center position of the L image (PL) and the center position of the R image (PR) are close to each other so that the L image (PL) and the R image (PR) are observed in an overlapping manner on the virtual screen. The shift process may be performed.
[0042]
In this embodiment, the shift amount S is determined based on the image width of the SPM. However, this is sufficient if only the image width is recognized without recognizing the image frame position of the SPM in the input image signal. This is to obtain a good centering effect.
[0043]
Although the value of the shift amount S is basically automatically determined based on the image width, it is preferable that fine adjustment is possible in order to improve the visibility of the stereoscopic image. For example, the fine adjustment data is recorded in the
[0044]
<Shift process 2>
Next, a second example of the shift process executed in the stereo mode will be described with reference to FIG.
[0045]
In this example, one of the left eye image side or the right eye image is stopped, and only the other is shifted to match the relative positional relationship of the left and right images with respect to the left eye and the right eye, respectively. In this case, the shift amount S is set to ½ of the image width W of SPM. Then, for example, only the left eye image is shifted with respect to the input image signal of the SPM. As shown in FIG. 8, the left eye display image IL is shifted rightward by W / 2 pixels, and the right eye image is displayed. For IR, the shift amount S is set to zero and the original image signal is held as it is.
[0046]
As a result, the left end of the IL display image frame displayed by the
[0047]
(Image display operation 2)
Next, the image display operation by the FMD will be described by exemplifying a case where the shift process is performed by the
[0048]
<Monocular mode>
When the monocular mode is selected with the stereo / monocular selector switch of the
[0049]
<Stereo mode>
When the stereo mode is selected by the stereo / monocular switch of the
[0050]
In the shift process in the
[0051]
(Automatic switching of operation mode)
Next, the operation in the case of automatically switching between the stereo mode and the monocular mode will be described with reference to the flowchart of FIG.
[0052]
This is a control applied when the FMD is realized as a playback device having the function of the block diagram of FIG. 1 alone, and is not a mode switching by a stereo / monocular switch, and an image to be displayed is a stereo pair. Whether it is an image or not is detected, thereby switching between the stereo mode and the monocular mode. In this case, the detection of whether or not the display target image is a stereo pair image uses a method in which information indicating “stereo pair image” is recorded in advance in the header area of the image file and recognized. can do.
[0053]
First, the
[0054]
As a result, even when both SPM / monocular images are mixed, it is possible to perform appropriate processing according to the type of input display target image, and unnecessary shift to the monocular image. It is possible to prevent in advance problems such as deterioration in display image quality due to erroneous processing.
[0055]
As described above, in the present embodiment, a shift processing function is provided in the FMD main body or an interface box that guides an input image signal from the outside in the FMD main body, and the left eye is applied to the input image signal. By adopting a configuration in which different image shift processes are applied to the image and the right-eye image, it is possible to perform high-quality observation of a stereoscopic image with high presence using SPM.
[0056]
In the above embodiment, W / 4 (or W / 2) is used as the basic value of the shift amount S. However, the shift amount S is slightly smaller than the basic value in consideration of the gap between the LR images in the SPM. Alternatively, it may be set larger, or conversely, it may be made slightly smaller in consideration of the realistic correction. In other words, the shift process for the input image signal is intended to increase the degree of fusion of the L image and the R image, and to minimize the possibility of easily fusing images that were previously impossible or extremely difficult. Therefore, if the setting is made so that the L image and the R image are positioned within the range where the fusion can be performed on the virtual screen, the minimum necessary basic effect can be obtained. In other words, the higher-order purpose is to easily observe a high-quality stereoscopic image with a high sense of presence. Therefore, in order to obtain the optimum arrangement for that purpose, the shift amount S is set to the above basic example value. Therefore, it is a matter of course that the present invention is included in the present invention as one desirable modified embodiment.
[0057]
It is also possible to use a left-right reversed SPM in which the L image is arranged on the right side and the R image is arranged on the left side. However, in this case, the left eye image is left-shifted and the right eye image is right-shifted with respect to the input image signal.
[0058]
Further, an SPM in which an L image and an R image are arranged above and below can be used. The state of the shift process in this case is shown in FIG. That is, the left eye display image IL is shifted downward by H / 4 pixels, and the right eye display image IR is shifted upward by H / 4 pixels. Of course, only one of the display images may be shifted upward or downward by H / 2 pixels.
[0059]
Further, the aspect ratio of the SPM is arbitrary, and various non-aspect image signals can be handled.
[0060]
Instead of shifting the entire input image signal, only the SPM image area may be cut out from the input image signal, and the display position of the image area may be shifted.
[0061]
In the above embodiment, the SPM is exemplified as a still image. However, the present invention is not limited to this, and the present invention can be applied to a moving image such as MPEG. In the case of the moving image SPM, it is added that it is extremely effective from the viewpoint that it is impossible to print the moving image as it is, and therefore it is impossible to use a conventional print viewer.
[0062]
【The invention's effect】
As described above, according to the present invention, it is possible to easily observe a stereoscopic image using a stereo pair image, and it is possible to realize high-quality observation with a high sense of reality. Further, even in a situation where a stereo pair image and a normal non-stereo image (monocular or monoscopic image) are mixed, it can be used without problems.
[Brief description of the drawings]
FIG. 1 is a block diagram showing a configuration of an image display apparatus according to an embodiment of the present invention.
FIG. 2 is a view showing a structure of a stereo pair image SPM used in the image display apparatus of the embodiment.
FIG. 3 is a diagram showing a configuration of a display unit of an FMD used in the embodiment.
FIG. 4 is a view showing a relationship between an FMD and an interface box used in the embodiment.
FIG. 5 is a view showing a first example of shift processing executed in the embodiment;
FIG. 6 is a view showing a display example of a virtual display screen in the non-stereo mode of the embodiment.
FIG. 7 is a view showing a display example of a virtual display screen in the stereo mode of the embodiment.
FIG. 8 is a view showing a second example of the shift processing executed in the embodiment.
FIG. 9 is a flowchart for explaining an operation mode automatic switching operation according to the embodiment;
FIG. 10 is a view showing a third example of the shift processing executed in the embodiment.
[Explanation of symbols]
111 ... System controller
112 ... Operation switch system
112a ... Stereo / monocular switch
117 ... Memory card
115 ... LCD display system
115a: LCD display device (DL) for left eye image display
115b ... LCD display device (DR) for right eye image display
201: Stereo pair image shift processing unit
Claims (6)
前記左眼表示用の表示部および前記右眼表示用の表示部の各々に表示させるべき表示再生対象の入力画像信号を入力する入力手段と、
左眼視点対応画像および右眼視点対応画像が空間的に併置されて1つの画像を形成しているステレオペア画像の画像信号であるステレオペア画像信号が前記入力手段により前記表示再生対象の入力画像信号として入力された場合、前記左眼表示用の表示部に対する表示再生対象の入力画像信号であるステレオペア画像信号と前記右眼表示用の表示部に対する表示再生対象の入力画像信号であるステレオペア画像信号とに互いに異なるシフト処理を施こす画像シフト処理を実行し、前記画像シフト処理された後の2種類のステレオペア画像信号を前記表示手段に送出する画像信号シフト手段と、
前記画像信号シフト手段における画像シフト量の設定をマニュアル操作で行うためのシフト量可変設定スイッチとを具備し、
前記画像信号シフト手段は、前記シフト量可変設定スイッチによる画像シフト量の設定に基いて、前記左眼表示用の表示部の表示画枠に対する前記左眼視点対応画像の相対位置と前記右眼表示用の表示部の表示画枠に対する前記右眼視点対応画像の相対位置とが相揃うように、前記画像シフト処理を施すことを特徴とする画像表示装置。Display means including a display unit for left eye display and a display unit for right eye display ;
Input means for inputting an input image signal to be displayed and reproduced to be displayed on each of the display unit for left eye display and the display unit for right eye display ;
A stereo pair image signal, which is an image signal of a stereo pair image in which the left eye viewpoint image and the right eye viewpoint image are spatially juxtaposed to form one image, is input to the display / reproduction target by the input means. When input as a signal, a stereo pair image signal that is an input image signal to be displayed and reproduced for the display unit for left eye display and a stereo pair that is an input image signal to be displayed and reproduced for the display unit for right eye display An image signal shift means for performing an image shift process for performing different shift processes on the image signal, and sending two types of stereo pair image signals after the image shift process to the display means ;
A shift amount variable setting switch for manually setting the image shift amount in the image signal shift means;
The image signal shift means is configured to set the relative position of the left-eye viewpoint corresponding image to the display image frame of the display unit for left-eye display and the right-eye display based on the image shift amount set by the shift amount variable setting switch. An image display device , wherein the image shift processing is performed so that the relative position of the right-eye viewpoint corresponding image with respect to the display image frame of the display unit for display is aligned .
当該画像信号が前記ステレオペア画像信号である旨の検出結果を受けた場合、前記画像信号シフト手段は前記シフト量可変設定スイッチによる前記画像シフト量の設定に基いて前記画像シフト処理を行うように構成されていることを特徴とする請求項1または2記載の画像表示装置。Stereo pair image detection means for detecting whether the image signal input by the input means is the stereo pair image signal;
If the image signal is subjected to detection result indicating the the stereo pair image signal, as before Symbol image signal shift means for performing the image shift processing based on the setting of the image shift amount by the shift amount variable setting switch the image display apparatus according to claim 1 or 2, wherein it is configured to.
当該画像信号が前記ステレオペア画像信号でない旨の検出結果を受けた場合、前記画像信号シフト手段による前記画像シフト処理の実行が禁止されるように構成されていることを特徴とする請求項1または2記載の画像表示装置。Stereo image detection means for detecting whether or not the image signal input by the input means is the stereo pair image signal;
If the image signal is subjected to detection result that not the stereo pair image signal, according to claim 1, wherein the image signal shift unit by execution of the image shift processing is configured to be inhibited or 2. The image display device according to 2 .
前記ステレオ画像検出手段は、前記入力手段により入力された画像信号が前記ステレオペア画像信号であるか否かを、前記ファイル読み込み手段が読み込んだ画像ファイルのヘッダ情報に基いて検出することを特徴とする請求項3または4記載の画像表示装置。The input means includes file reading means for reading an image file in which an image signal is recorded,
The stereo image detecting means detects whether the image signal input by the input means is the stereo pair image signal based on header information of the image file read by the file reading means. The image display device according to claim 3 or 4 .
前記左眼表示用の表示部および前記右眼表示用の表示部の各々に表示させるべき表示再生対象の入力画像信号を入力する入力手段と、
左眼視点対応画像および右眼視点対応画像が空間的に併置されて1つの画像を形成しているステレオペア画像の画像信号であるステレオペア画像信号が前記入力手段により前記表示再生対象の入力画像信号として入力された場合、前記左眼表示用の表示部に対する表示再生対象の入力画像信号であるステレオペア画像信号と前記右眼表示用の表示部に対する表示再生対象の入力画像信号であるステレオペア画像信号とに互いに異なるシフト処理を施こす画像シフト処理を実行し、前記画像シフト処理された後の2種類のステレオペア画像信号を前記表示手段に送出する画像信号シフト手段と、
前記画像信号シフト手段における画像シフト量の設定をマニュアル操作で行うためのシフト量可変設定スイッチとを具備し、
前記画像信号シフト手段は、
前記ステレオペア画像の画像幅に基づいて、前記左眼表示用の表示部の表示画枠に対する前記左眼視点対応画像の相対位置と前記右眼表示用の表示部の表示画枠に対する前記右眼視点対応画像の相対位置とが相揃うように、前記画像シフト処理を実行し、さらに微調整分として、記憶された前記シフト量可変設定スイッチによる画像シフト量の設定に基づいて前記画像シフト処理を実行することを特徴とする画像表示装置。 Display means including a display unit for left eye display and a display unit for right eye display ;
Input means for inputting an input image signal to be displayed and reproduced to be displayed on each of the display unit for left eye display and the display unit for right eye display;
A stereo pair image signal, which is an image signal of a stereo pair image in which the left eye viewpoint image and the right eye viewpoint image are spatially juxtaposed to form one image, is input to the display / reproduction target by the input means. When input as a signal, a stereo pair image signal that is an input image signal to be displayed and reproduced for the display unit for left eye display and a stereo pair that is an input image signal to be displayed and reproduced for the display unit for right eye display An image signal shift means for performing an image shift process for performing different shift processes on the image signal, and sending two types of stereo pair image signals after the image shift process to the display means;
A shift amount variable setting switch for manually setting the image shift amount in the image signal shift means;
The image signal shift means includes
Based on the image width of the stereo pair image, the relative position of the left-eye viewpoint corresponding image with respect to the display image frame of the display unit for the left eye display and the right eye with respect to the display image frame of the display unit for the right eye display The image shift processing is executed so that the relative positions of the viewpoint-corresponding images are aligned, and the image shift processing is further performed based on the stored image shift amount setting by the shift amount variable setting switch. An image display device that is executed.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2000115357A JP4815042B2 (en) | 2000-04-17 | 2000-04-17 | Image display device and image presentation method |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2000115357A JP4815042B2 (en) | 2000-04-17 | 2000-04-17 | Image display device and image presentation method |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2001296499A JP2001296499A (en) | 2001-10-26 |
| JP4815042B2 true JP4815042B2 (en) | 2011-11-16 |
Family
ID=18627019
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2000115357A Expired - Fee Related JP4815042B2 (en) | 2000-04-17 | 2000-04-17 | Image display device and image presentation method |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP4815042B2 (en) |
Families Citing this family (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP3841630B2 (en) | 2000-08-29 | 2006-11-01 | オリンパス株式会社 | Image handling device |
| JP2006113807A (en) | 2004-10-14 | 2006-04-27 | Canon Inc | Multi-viewpoint image processing apparatus and image processing program |
Family Cites Families (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH0829725A (en) * | 1994-05-10 | 1996-02-02 | Canon Inc | Compound-eye image display device |
-
2000
- 2000-04-17 JP JP2000115357A patent/JP4815042B2/en not_active Expired - Fee Related
Also Published As
| Publication number | Publication date |
|---|---|
| JP2001296499A (en) | 2001-10-26 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP3841630B2 (en) | Image handling device | |
| KR100733047B1 (en) | Digital stereo cameras, 3D displays, 3D projectors, printers, and stereo viewers | |
| CN101964916B (en) | Image display device and method | |
| JP3441911B2 (en) | Information processing apparatus and method | |
| WO2010084724A1 (en) | Image processing device, program, image processing method, recording method, and recording medium | |
| JP2006332985A (en) | Stereoscopic image format determination device | |
| JP2010237410A (en) | Image display apparatus and method, and program | |
| WO2011162037A1 (en) | Stereoscopic image playback device, stereoscopic image playback system, and stereoscopic image playback method | |
| JP2006254074A (en) | Digital stereoscopic camera or digital stereoscopic camcorder, 3d display or 3d projector, printer, and stereoscopic viewer | |
| JP5396877B2 (en) | Image processing apparatus, program, image processing method, and recording method | |
| JP2002125245A (en) | Stereoscopic image editing method, stereoscopic image editing apparatus, and stereoscopic image display system | |
| US8849012B2 (en) | Image processing apparatus and method and computer readable medium having a program for processing stereoscopic image | |
| JP5156125B2 (en) | Joining device for horizontal / vertical alignment of 3D display panels | |
| JP4815042B2 (en) | Image display device and image presentation method | |
| JP4536231B2 (en) | Imaging device | |
| JP4516188B2 (en) | Image display device | |
| JPH0865715A (en) | Stereoscopic image display method and stereoscopic image display device | |
| JP2002218501A (en) | Image pickup device | |
| JP2010187385A (en) | Image display device | |
| JP2002271816A (en) | 3D mosaic creation device | |
| US20120249872A1 (en) | Video signal processing apparatus and video signal processing method | |
| JPH07264633A (en) | Stereoscopic video camera | |
| JP2007072269A (en) | 3D display device | |
| JPH06274579A (en) | 3D still image file system | |
| JP4819194B2 (en) | Compound eye photographing apparatus and method, and program |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20070417 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20100722 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20100817 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20101018 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20101124 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20110124 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20110607 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20110721 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20110809 |
|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20110829 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140902 Year of fee payment: 3 |
|
| S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
| LAPS | Cancellation because of no payment of annual fees |