Deprecated: The each() function is deprecated. This message will be suppressed on further calls in /home/zhenxiangba/zhenxiangba.com/public_html/phproxy-improved-master/index.php on line 456
JP5656676B2 - Video display device, video display method and program - Google Patents
[go: Go Back, main page]

JP5656676B2 - Video display device, video display method and program - Google Patents

Video display device, video display method and program Download PDF

Info

Publication number
JP5656676B2
JP5656676B2 JP2011025308A JP2011025308A JP5656676B2 JP 5656676 B2 JP5656676 B2 JP 5656676B2 JP 2011025308 A JP2011025308 A JP 2011025308A JP 2011025308 A JP2011025308 A JP 2011025308A JP 5656676 B2 JP5656676 B2 JP 5656676B2
Authority
JP
Japan
Prior art keywords
eye
video
image
dominant
shutter
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2011025308A
Other languages
Japanese (ja)
Other versions
JP2012165272A5 (en
JP2012165272A (en
Inventor
伊藤 博康
博康 伊藤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Priority to JP2011025308A priority Critical patent/JP5656676B2/en
Publication of JP2012165272A publication Critical patent/JP2012165272A/en
Publication of JP2012165272A5 publication Critical patent/JP2012165272A5/ja
Application granted granted Critical
Publication of JP5656676B2 publication Critical patent/JP5656676B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Description

本発明は、特に、立体映像を表示するために用いて好適な映像表示装置、映像表示方法及びプログラムに関する。   The present invention particularly relates to a video display device, a video display method, and a program suitable for use in displaying a stereoscopic video.

従来、両眼視差を利用した立体(3D)映像を視聴するためのガイドラインが策定されている(例えば、非特許文献1参照)。非特許文献1には、立体映像を視聴すると疲労が蓄積されやすいことから、視聴者の眼精疲労や不快感を低減するための施策がガイドラインとして規定されている。このように、右目及び左目の両眼視差を用いて立体映像を視聴することができるが、実際空間で両眼視した場合、利き目で対象物に着目して捉え、非利き目で漠然と全体を捉えているという研究結果も報告されている(例えば、非特許文献2参照)。   Conventionally, guidelines for viewing stereoscopic (3D) video using binocular parallax have been formulated (see, for example, Non-Patent Document 1). Non-Patent Document 1 stipulates guidelines for reducing eye strain and discomfort of viewers because fatigue tends to accumulate when viewing stereoscopic images. In this way, it is possible to view stereoscopic images using binocular parallax with right and left eyes, but when viewing in binocular viewing in real space, focus on the object with the dominant eye and vaguely with the non-dominant eye The research result that it captures is reported (for example, refer nonpatent literature 2).

一方、二眼式の立体視では、片方の映像の画質がある程度良ければ、もう一方の画質が多少悪くても、総合的な画質にはあまり影響しない。そこで、一方の映像信号の圧縮率を大きくしてデータ量を削減する記録再生装置が提案されている(例えば、特許文献1参照)。   On the other hand, in the binocular stereoscopic vision, if the image quality of one image is good to some extent, the overall image quality is not greatly affected even if the other image quality is somewhat bad. In view of this, a recording / reproducing apparatus that reduces the data amount by increasing the compression rate of one video signal has been proposed (see, for example, Patent Document 1).

特開平5−111057号公報JP-A-5-1111057

3Dコンソーシアム 安全ガイドライン部会「3DC安全ガイドライン」、2010年4月20日改訂3D Consortium Safety Guidelines Subcommittee “3DC Safety Guidelines”, revised on April 20, 2010 不二門尚「老視への対応」『日本視機能訓練士協会誌』第31巻、2002年、75−81頁Takashi Fujimon “Responding to Presbyopia”, Journal of the Japan Vision Training Association, Vol. 31, 2002, pp. 75-81

非特許文献1には、眼精疲労や不快感を低減する施策として、視聴姿勢、視聴位置、視差の範囲等、主に立体視を確実に行うための施策がガイドラインとして規定されている。ところが、前述した非特許文献2に記載されているような実際空間で両眼視した場合の映像の捉え方の違いが考慮されていないため、十分に眼精疲労や不快感を低減することができない。また、特許文献1には、一方の映像信号の圧縮率を大きくする技術が開示されているが、再生時において眼精疲労や不快感を低減するための技術ではないため、眼精疲労や不快感を低減できない。   In Non-Patent Document 1, as measures for reducing eyestrain and discomfort, measures for ensuring stereoscopic vision, such as viewing posture, viewing position, and parallax range, are defined as guidelines. However, since the difference in how to capture the image when viewing with both eyes in the actual space as described in Non-Patent Document 2 described above is not taken into consideration, eye strain and discomfort can be sufficiently reduced. Can not. Patent Document 1 discloses a technique for increasing the compression ratio of one video signal, but it is not a technique for reducing eye strain or discomfort during reproduction. Pleasure cannot be reduced.

本発明は前述の問題点に鑑み、立体映像を視聴した場合に、眼精疲労及び不快感を十分に低減できるようにすることを目的としている。   An object of the present invention is to make it possible to sufficiently reduce eye strain and discomfort when a stereoscopic image is viewed in view of the above-described problems.

本発明の映像表示装置は、ーザの利き目情報を取得する手段と、左目用映像及び右目用映像を交互に表示手段に表示させる表示制御手段と、ユーザの左目に入射される光を遮断するために用いられる左目用シャッタと、ユーザの右目に入射される光を遮断するために用いられる右目用シャッタと、前記左目用映像をぼかすために用いられる左目用ソフトフォーカスレンズと、前記右目用映像をぼかすために用いられる右目用ソフトフォーカスレンズとを備えるシャッタ式メガネに対して通知を行う処理手段であって、前記表示制御手段が前記左目用映像を表示させているときは、ユーザの右目に入射される光が遮断されるように前記右目用シャッタが駆動され、前記表示制御手段が前記右目用映像を表示させているときは、ユーザの左目に入射される光が遮断されるように前記左目用シャッタが駆動されるように、前記表示制御手段が前記左目用映像と右目用映像とのうち何れを表示させているかを前記シャッタ式メガネに対して通知すると共に、前記左目用映像と右目用映像とのうち、ユーザの利き目とは逆の映像が前記左目用ソフトフォーカスレンズ又は前記右目用ソフトフォーカスレンズによってぼかされるように、前記利き目情報を前記シャッタ式メガネに対して通知する処理手段とを備えること特徴とする。 Image display device of the present invention includes means for obtaining the dominant eye information Yu chromatography The, display control means for displaying on the display unit alternately left-eye video and the right-eye image, light incident to the left eye of the user A left-eye shutter used for blocking, a right-eye shutter used for blocking light incident on a user's right eye, a left-eye soft focus lens used for blurring the left-eye image, and the right eye Processing means for notifying shutter-type glasses having a right-eye soft focus lens used for blurring an image for use when the display control means is displaying the left-eye image. When the right-eye shutter is driven so that light incident on the right eye is blocked and the display control means displays the right-eye video, the user's left eye Which of the left-eye video and the right-eye video is displayed by the display control means for the shutter-type glasses so that the left-eye shutter is driven so that the emitted light is blocked. The dominant-eye information so that the image opposite to the user's dominant eye of the left-eye video and the right-eye video is blurred by the left-eye soft focus lens or the right-eye soft focus lens. the wherein further comprising a processing means for notifying to the shutter eyeglasses.

本発明によれば、実際空間での両眼視に近づけることができ、眼精疲労や不快感を十分に低減することができる。   According to the present invention, it is possible to approximate binocular vision in an actual space, and eye strain and discomfort can be sufficiently reduced.

第1の実施形態に係る映像表示装置の機能構成例を示すブロック図である。It is a block diagram which shows the function structural example of the video display apparatus which concerns on 1st Embodiment. 立体視映像の概要を説明するための図である。It is a figure for demonstrating the outline | summary of a stereoscopic vision image. 立体視映像を表示する処理手順の一例を示すフローチャートである。It is a flowchart which shows an example of the process sequence which displays a stereoscopic vision image. 第1の実施形態による立体視映像の一例を示す図である。It is a figure which shows an example of the stereoscopic vision image by 1st Embodiment. 第2の実施形態に係る映像表示装置の機能構成例を示すブロック図である。It is a block diagram which shows the function structural example of the video display apparatus which concerns on 2nd Embodiment. 立体視映像を視聴させる処理手順の一例を示すフローチャートである。It is a flowchart which shows an example of the process sequence which views a stereoscopic vision image. 第3の実施形態に係る映像表示装置の機能構成例を示すブロック図である。It is a block diagram which shows the function structural example of the video display apparatus which concerns on 3rd Embodiment. 左目用映像及び右目用映像に対して注視領域とする領域を示す図である。It is a figure which shows the area | region used as a gaze area | region with respect to the image | video for left eyes, and the image | video for right eyes. 非注視映像要素の抽出結果の一覧を示す図である。It is a figure which shows the list of the extraction result of a non-gaze image element. 立体視映像を表示する処理手順の一例を示すフローチャートである。It is a flowchart which shows an example of the process sequence which displays a stereoscopic vision image. 第3の実施形態による立体視映像の一例を示す図である。It is a figure which shows an example of the stereoscopic vision image by 3rd Embodiment. 立体視映像を表示する処理手順の一例を示すフローチャートである。It is a flowchart which shows an example of the process sequence which displays a stereoscopic vision image. 左右の映像要素の位置の算出結果の一覧を示す図である。It is a figure which shows the list of the calculation result of the position of a video element on either side. フィルタ係数を決定するためのテーブルの一例を示す図である。It is a figure which shows an example of the table for determining a filter coefficient. 第4の実施形態による立体視映像の一例を示す図である。It is a figure which shows an example of the stereoscopic vision image by 4th Embodiment.

(第1の実施形態)
以下、本発明の第1の実施形態に係る映像表示装置の構成について、図1のブロック図を参照しながら説明する。
図1は、本実施形態に係る映像表示装置100の機能構成例を示すブロック図である。
図1において、映像入力部101は、メモリカード、ハードディスク等の記憶媒体や、USB、ネットワーク等のインタフェースを介して映像データを入力する。このとき、映像データとして左目用映像と右目用映像とを入力する。利き目情報設定部102は、映像観察者であるユーザの利き目が右目であるか左目であるかを設定するためのものであり、ユーザが利き目情報を入力したり、公知技術を用いてユーザの利き目を判別したりして設定する。
(First embodiment)
The configuration of the video display apparatus according to the first embodiment of the present invention will be described below with reference to the block diagram of FIG.
FIG. 1 is a block diagram illustrating a functional configuration example of the video display device 100 according to the present embodiment.
In FIG. 1, a video input unit 101 inputs video data via a storage medium such as a memory card or a hard disk, or an interface such as a USB or a network. At this time, a left-eye video and a right-eye video are input as video data. The dominant eye information setting unit 102 is for setting whether the dominant eye of the user who is the video observer is the right eye or the left eye. The user inputs the dominant eye information or uses a known technique. Set by determining the user's dominant eye.

非利き目映像選択部103は、利き目情報設定部102によって設定された利き目情報を基に、映像入力部101より入力された映像データから非効き目映像を選択する。すなわち、利き目情報設定部102によって右目が利き目と設定された場合は非利き目映像として左目映像を選択し、利き目情報設定部102によって左目が利き目と設定された場合は非利き目映像として右目映像を選択する。   The non-dominant eye video selection unit 103 selects a non-effective eye image from the video data input from the video input unit 101 based on the dominant eye information set by the dominant eye information setting unit 102. That is, when the right eye is set as the dominant eye by the dominant eye information setting unit 102, the left eye image is selected as the non-dominant eye image, and when the left eye is set as the dominant eye by the dominant eye information setting unit 102, the non-dominant eye is selected. Select the right-eye image as the image.

映像加工処理部104は、非利き目映像選択部103で選択された映像データに対して加工処理であるボカシ処理を行う。ボカシ処理としては、高周波成分低減処理、コントラスト低減処理、彩度低減処理、明度低減処理の、1つもしくは任意の複数の組み合わせ処理を行う。また、例えば高周波成分低減処理には、空間ローパスフィルタを用いる。映像出力部105は、映像加工処理部104によってボカシ処理を施された非利き目映像と、非利き目映像選択部103より直接出力された利き目映像とを用いて立体視映像を表示画面に表示する表示制御を行う。   The video processing unit 104 performs blur processing, which is processing, on the video data selected by the non-dominant video selection unit 103. As the blur processing, one or any combination of a plurality of high frequency component reduction processing, contrast reduction processing, saturation reduction processing, and lightness reduction processing is performed. For example, a spatial low-pass filter is used for the high-frequency component reduction processing. The video output unit 105 uses the non-dominant eye image that has been subjected to the blurring process by the image processing unit 104 and the dominant eye image directly output from the non-dominant eye image selection unit 103 to display a stereoscopic image on a display screen. Perform display control.

図2は、立体映像を得るために、映像入力部101から入力される映像データに係る立体視映像の概要を説明するための図である。ここで、図2(a)及び図2(b)は、立体視映像201の左右視差による結像の仕方を説明する模式図であり、図2(a)には正面から見た図を示し、図2(b)には上から見た概念図を示している。図2(b)に示すように、映像要素202は表示面に対して奥に結像され、映像要素203は表示面と同じ深度に結像され、映像要素204、205は表示面に対して手前に結像されることを表している。   FIG. 2 is a diagram for explaining an overview of a stereoscopic video image related to video data input from the video input unit 101 in order to obtain a stereoscopic video image. Here, FIG. 2A and FIG. 2B are schematic diagrams for explaining how the stereoscopic image 201 is imaged by right and left parallax, and FIG. 2A shows a view seen from the front. FIG. 2 (b) shows a conceptual view seen from above. As shown in FIG. 2B, the video element 202 is imaged deeply with respect to the display surface, the video element 203 is imaged at the same depth as the display surface, and the video elements 204 and 205 are imaged with respect to the display surface. It shows that the image is formed in front.

図2(c)には、立体視映像201を構成するための左目用映像201Lと、右目用映像201Rとを示す。左目用映像201Lを左目で観察し、右目用映像201Rを右目で観察することにより、図2(a)に示す立体視映像201が立体映像としてユーザに知覚される。   FIG. 2C shows a left-eye video 201L and a right-eye video 201R for forming the stereoscopic video 201. By observing the left-eye video 201L with the left eye and the right-eye video 201R with the right eye, the stereoscopic video 201 shown in FIG. 2A is perceived by the user as a stereoscopic video.

映像要素202は、左目用映像要素202Lと右目用映像要素202Rとで構成されている。このとき、左目用映像要素202Lは、左目用映像201Lの左端から200ドットの位置に配置され、右目用映像要素202Rは、右目用映像201Rの左端から250ドットの位置に配置されている。このように、左目用映像要素202Lが、右目用映像要素202Rに比べて左の位置に存在する場合、左右の視差によって立体視したときの映像要素202は表示面より奥に結像される。   The video element 202 includes a left-eye video element 202L and a right-eye video element 202R. At this time, the left-eye video element 202L is arranged at a position of 200 dots from the left end of the left-eye video 201L, and the right-eye video element 202R is arranged at a position of 250 dots from the left end of the right-eye video 201R. In this way, when the left-eye video element 202L is present at the left position compared to the right-eye video element 202R, the video element 202 when viewed stereoscopically by left and right parallax is imaged deeper than the display surface.

映像要素203は、左目用映像要素203Lと右目用映像要素203Rとで構成されている。左目用映像要素203L及び右目用映像要素203Rは共に、左端から825ドットの位置に配置されている。このように、左目用映像要素203Lと、右目用映像要素203Rとで左右位置に差がない場合、立体視したときの映像要素202は表示面と同じ深度に結像される。   The video element 203 includes a left-eye video element 203L and a right-eye video element 203R. Both the left-eye video element 203L and the right-eye video element 203R are arranged at a position of 825 dots from the left end. As described above, when there is no difference in the left and right positions between the left-eye video element 203L and the right-eye video element 203R, the video element 202 when viewed stereoscopically is imaged at the same depth as the display surface.

一方、映像要素204は、左目用映像要素204Lと右目用映像要素204Rとで構成される。左目用映像要素204Lは、左目用映像201Lの左端から245ドットの位置に配置され、右目用映像要素204Rは、右目用映像201Rの左端から155ドットの位置に配置されている。このように、左目用映像要素204Lが、右目用映像要素204Rに比べて右の位置に存在する場合、左右の視差によって立体視したときの映像要素204は表示面より手前に結像される。映像要素205についても同様である。   On the other hand, the video element 204 includes a left-eye video element 204L and a right-eye video element 204R. The left-eye video element 204L is arranged at a position of 245 dots from the left end of the left-eye video 201L, and the right-eye video element 204R is arranged at a position of 155 dots from the left end of the right-eye video 201R. In this way, when the left-eye video element 204L is present at the right position compared to the right-eye video element 204R, the video element 204 when viewed stereoscopically by left and right parallax is imaged in front of the display surface. The same applies to the video element 205.

次に、図3のフローチャートを参照しながら、本実施形態における映像表示装置100の動作を説明する。図3は、本実施形態において、立体視映像を表示する処理手順の一例を示すフローチャートである。また、図3に示す処理を行う際には、利き目情報設定部102に利き目情報が予め設定されていることを前提とする。   Next, the operation of the video display apparatus 100 in the present embodiment will be described with reference to the flowchart of FIG. FIG. 3 is a flowchart illustrating an example of a processing procedure for displaying a stereoscopic video image in the present embodiment. Further, when performing the process shown in FIG. 3, it is assumed that dominant eye information is set in advance in the dominant eye information setting unit 102.

まず、映像入力部101により立体視映像に係る映像データを入力する(ステップS301)。次に、非利き目映像選択部103は、利き目情報設定部102に設定されている利き目情報を読み出す(ステップS302)。そして、ステップS302で読み出した利き目情報から、利き目が右目であるか否かを判定する(ステップS303)。この判定の結果、利き目が右目である場合、映像加工処理部104は左目用映像に係る映像データに対してボカシ処理を施す(ステップS304)。一方、利き目が左目である場合、映像加工処理部104は右目用映像に係る映像データに対してボカシ処理を施す(ステップS305)。そして、映像出力部105は、ボカシ処理を施していない利き目用の映像データと、ステップS304またはステップS305でボカシ処理を施した非利き目用の映像データとを用いて立体視映像を表示する(ステップS306)。   First, video data relating to a stereoscopic video is input by the video input unit 101 (step S301). Next, the non-dominant eye image selection unit 103 reads out the dominant eye information set in the dominant eye information setting unit 102 (step S302). Then, it is determined from the dominant eye information read in step S302 whether or not the dominant eye is the right eye (step S303). If the result of this determination is that the dominant eye is the right eye, the video processing unit 104 performs blur processing on the video data related to the left-eye video (step S304). On the other hand, when the dominant eye is the left eye, the video processing unit 104 performs blurring processing on the video data related to the right-eye video (step S305). Then, the video output unit 105 displays a stereoscopic video image using the dominant-eye video data that has not been subjected to the blurring process and the non-dominant-eye video data that has been subjected to the blurring process in step S304 or step S305. (Step S306).

図4は、映像出力部105から出力される立体視映像の一例を示す図である。図4(a)には、図2(c)に示す左目用映像201Lに対してボカシ処理を施した左目用映像401L、及び右目用映像201Rの一例を示す。また、図4(b)には、図2(c)に示す右目用映像201Rに対してボカシ処理を施した右目用映像401R、及び左目用映像201Lを示す。   FIG. 4 is a diagram illustrating an example of a stereoscopic video output from the video output unit 105. FIG. 4A illustrates an example of the left-eye video 401L and the right-eye video 201R obtained by performing blurring processing on the left-eye video 201L illustrated in FIG. FIG. 4B shows a right-eye video 401R and a left-eye video 201L obtained by subjecting the right-eye video 201R shown in FIG.

図4(a)において、点線で示した左目用映像要素402L、403L、404L、405Lが、ボカシ処理を施した映像要素であることを示している。また、図4(b)においては、点線で示した右目用映像要素402R、403R、404R、405Rが、ボカシ処理を施した映像要素であることを示している。図3のステップS303の判定の結果、右目が利き目の場合は、図4(a)に示す映像が表示され、左目が利き目の場合は、図4(b)に示す映像が表示される。   In FIG. 4A, the left-eye video elements 402L, 403L, 404L, and 405L indicated by dotted lines indicate that the video elements have been subjected to blur processing. In FIG. 4B, the right-eye video elements 402R, 403R, 404R, and 405R indicated by dotted lines indicate that the video elements have been subjected to blur processing. As a result of the determination in step S303 in FIG. 3, when the right eye is dominant, the image shown in FIG. 4A is displayed. When the left eye is dominant, the image shown in FIG. 4B is displayed. .

以上の説明したように、右目が利き目の場合は、左目用映像にボカシ処理を施し、左目が利き目の場合は、右目用映像にボカシ処理を施すことによって、非利き目では映像を漠然と捉えることが可能となる。この結果、実際空間での両眼視に近い状態で立体映像を視聴することができ、眼精疲労や不快感を低減することができる。   As described above, when the right eye is dominant, the left-eye image is blurred, and when the left eye is dominant, the right-eye image is blurred. It becomes possible to capture. As a result, stereoscopic images can be viewed in a state close to binocular vision in an actual space, and eye strain and discomfort can be reduced.

(第2の実施形態)
前述の第1の実施形態では、装置内でボカシ処理を施し、立体視映像を表示する場合について説明した。本実施形態では、液晶シャッタ式メガネ等、立体視専用の3Dメガネを用いて立体視する場合に、3Dメガネ側でボカシ処理を行う場合について説明する。
(Second Embodiment)
In the first embodiment described above, the case where the blur processing is performed in the apparatus and the stereoscopic video is displayed has been described. In the present embodiment, a case will be described in which blur processing is performed on the 3D glasses side when stereoscopic viewing is performed using 3D glasses dedicated to stereoscopic viewing, such as liquid crystal shutter glasses.

図5は、本実施形態に係る映像表示装置500の機能構成例を示すブロック図である。
図5において、映像表示装置500は、映像再生機501と3Dメガネ506とから構成されている。映像再生機501は、映像表示部502、LR信号送信部503、利き目情報設定部504、及び利き目情報送信部505を備えている。
FIG. 5 is a block diagram illustrating a functional configuration example of the video display apparatus 500 according to the present embodiment.
In FIG. 5, the video display device 500 includes a video player 501 and 3D glasses 506. The video player 501 includes a video display unit 502, an LR signal transmission unit 503, a dominant eye information setting unit 504, and a dominant eye information transmission unit 505.

映像表示部502は、液晶パネルやプラズマパネル等で構成される映像表示画面に、左目用映像と右目用映像とを交互に再生表示する。LR信号送信部503は、映像表示部502に表示されている映像が左目用映像である場合はL信号を3Dメガネ506に送信し、右目用映像である場合はR信号を送信する。利き目情報設定部504は、ユーザの利き目が右目であるか左目であるかを設定する。利き目情報の設定方法は、第1の実施形態と同様である。利き目情報送信部505は、利き目情報設定部504に設定された利き目情報を3Dメガネ506に送信する。   The video display unit 502 alternately reproduces and displays the left-eye video and the right-eye video on a video display screen formed of a liquid crystal panel, a plasma panel, or the like. The LR signal transmission unit 503 transmits the L signal to the 3D glasses 506 when the image displayed on the image display unit 502 is the left-eye image, and transmits the R signal when the image is the right-eye image. The dominant eye information setting unit 504 sets whether the user's dominant eye is the right eye or the left eye. The setting method of dominant eye information is the same as in the first embodiment. The dominant eye information transmission unit 505 transmits the dominant eye information set in the dominant eye information setting unit 504 to the 3D glasses 506.

3Dメガネ506は、後述する左目用レンズブロック507〜利き目情報受信部516の構成を備えている。左目用レンズブロック507は、ユーザの左目に入射される映像の制御を行う。左目用液晶シャッタ508は、ユーザの左目に入射される映像をオン/オフするためのシャッタであり、左目用液晶シャッタ508のオン/オフは、液晶シャッタ駆動部513によって制御される。左目用ソフトフォーカスレンズ509は、ユーザの左目に入射される映像にボカシ処理を施すためのレンズであり、レンズ駆動部515によって制御される。   The 3D glasses 506 include configurations of a left eye lens block 507 to a dominant eye information receiving unit 516, which will be described later. The left-eye lens block 507 controls an image incident on the user's left eye. The left-eye liquid crystal shutter 508 is a shutter for turning on / off an image incident on the user's left eye, and the on / off of the left-eye liquid crystal shutter 508 is controlled by the liquid crystal shutter driving unit 513. The left-eye soft focus lens 509 is a lens for performing blur processing on an image incident on the left eye of the user, and is controlled by the lens driving unit 515.

右目用レンズブロック510は、ユーザの右目に入射される映像の制御を行う。右目用液晶シャッタ511は、ユーザの右目に入射される映像をオン/オフするためのシャッタであり、右目用液晶シャッタ511のオン/オフは、液晶シャッタ駆動部513によって制御される。右目用ソフトフォーカスレンズ512は、ユーザの右目に入射される映像にボカシ処理を施すためのレンズであり、レンズ駆動部515によって制御される。   The right-eye lens block 510 controls an image incident on the user's right eye. The right-eye liquid crystal shutter 511 is a shutter for turning on / off an image incident on the right eye of the user, and the on / off of the right-eye liquid crystal shutter 511 is controlled by the liquid crystal shutter driving unit 513. The right-eye soft focus lens 512 is a lens for performing blur processing on an image incident on the right eye of the user, and is controlled by the lens driving unit 515.

液晶シャッタ駆動部513は、LR信号受信部514で受信した信号がL信号の場合は、左目用液晶シャッタ508をオフにして映像を透過するよう制御し、右目用液晶シャッタ511をオンにして映像を遮断するよう制御する。一方、LR信号受信部514で受信した信号がR信号の場合は、左目用液晶シャッタ508をオンにして映像を遮断するよう制御し、右目用液晶シャッタ511をオフにして映像を透過するよう制御する。LR信号受信部514は、LR信号送信部503によって送信されたL信号またはR信号を受信するための受信部である。   When the signal received by the LR signal receiving unit 514 is an L signal, the liquid crystal shutter driving unit 513 controls the left-eye liquid crystal shutter 508 to be turned off and transmits the video, and the right-eye liquid crystal shutter 511 is turned on to perform the video. Control to shut off. On the other hand, when the signal received by the LR signal receiving unit 514 is an R signal, the left eye liquid crystal shutter 508 is turned on to control to block the image, and the right eye liquid crystal shutter 511 is turned off to control to transmit the image. To do. The LR signal receiving unit 514 is a receiving unit for receiving the L signal or the R signal transmitted by the LR signal transmitting unit 503.

レンズ駆動部515は、利き目情報受信部516で受信した利き目情報が右目の場合は、右目用ソフトフォーカスレンズ512をオフにして映像をそのまま透過するよう制御する。そして、左目用ソフトフォーカスレンズ509をオンにしてソフトフォーカス効果により映像にボカシ処理を施す。一方、利き目情報受信部516で受信した利き目情報が左目の場合は、左目用ソフトフォーカスレンズ509をオフにして映像をそのまま透過するよう制御する。そして、右目用ソフトフォーカスレンズ512をオンにしてソフトフォーカス効果により映像にボカシ処理を施す。利き目情報受信部516は、利き目情報送信部505によって送信された利き目情報を受信する。   When the dominant eye information received by the dominant eye information receiving unit 516 is the right eye, the lens driving unit 515 controls to turn off the right eye soft focus lens 512 and transmit the image as it is. Then, the soft focus lens 509 for the left eye is turned on, and the image is blurred by the soft focus effect. On the other hand, when the dominant eye information received by the dominant eye information receiving unit 516 is the left eye, the left eye soft focus lens 509 is turned off and control is performed to transmit the image as it is. Then, the right-eye soft focus lens 512 is turned on, and the image is blurred by the soft focus effect. The dominant eye information receiving unit 516 receives the dominant eye information transmitted by the dominant eye information transmitting unit 505.

次に、図6のフローチャートを参照して、本実施形態における映像表示装置500の動作について説明する。図6は、本実施形態において、立体視映像を表示する処理手順の一例を示すフローチャートである。ここで、図6(a)は映像再生機501の動作を表し、図6(b)は3Dメガネ506の動作を表している。また、図6に示す処理を行う際には、利き目情報設定部504に利き目情報が予め設定されていることを前提とする。   Next, the operation of the video display apparatus 500 in this embodiment will be described with reference to the flowchart of FIG. FIG. 6 is a flowchart illustrating an example of a processing procedure for displaying a stereoscopic video image in the present embodiment. Here, FIG. 6A shows the operation of the video player 501, and FIG. 6B shows the operation of the 3D glasses 506. Further, when performing the process shown in FIG. 6, it is assumed that dominant eye information is set in advance in the dominant eye information setting unit 504.

まず、映像再生機501の動作として、利き目情報送信部505は、利き目情報設定部504より設定された利き目情報を読み出し(ステップS601)、読み出した利き目情報を3Dメガネ506に送信する(ステップS602)。次に、映像表示部502により左目用映像と右目用映像とを交互に再生表示する(ステップS603)。そして、現在表示している映像が左目用映像であるか否かを判定する(ステップS604)。この判定の結果、左目用映像である場合は、LR信号送信部503は、L信号を3Dメガネ506に送信し(ステップS605)、処理を終了する。一方、右目用映像である場合は、LR信号送信部503は、R信号を3Dメガネ506に送信し(ステップS606)、処理を終了する。   First, as the operation of the video player 501, the dominant eye information transmission unit 505 reads the dominant eye information set by the dominant eye information setting unit 504 (step S <b> 601), and transmits the read dominant eye information to the 3D glasses 506. (Step S602). Next, the video display unit 502 alternately reproduces and displays the left-eye video and the right-eye video (step S603). Then, it is determined whether or not the currently displayed video is a left-eye video (step S604). If the result of this determination is that the video is for the left eye, the LR signal transmission unit 503 transmits the L signal to the 3D glasses 506 (step S605), and the process ends. On the other hand, when the video is for the right eye, the LR signal transmission unit 503 transmits the R signal to the 3D glasses 506 (step S606), and ends the process.

一方、3Dメガネ506の動作としては、まず、利き目情報受信部516は、ステップS602で送信された利き目情報を受信する(ステップS611)。そして、受信した利き目情報により利き目が右目であるか否かを判定する(ステップS612)。この判定の結果、利き目が右目である場合は、レンズ駆動部515によって右目用ソフトフォーカスレンズ512をオフにし(ステップS613)、左目用ソフトフォーカスレンズ509をオンにする(ステップS614)。一方、利き目が左目の場合は、レンズ駆動部515によって左目用ソフトフォーカスレンズ509をオフにし(ステップS615)、右目用ソフトフォーカスレンズ512をオンにする(ステップS616)。   On the other hand, as the operation of the 3D glasses 506, first, the dominant eye information reception unit 516 receives the dominant eye information transmitted in step S602 (step S611). Then, it is determined whether or not the dominant eye is the right eye based on the received dominant eye information (step S612). If the result of this determination is that the dominant eye is the right eye, the lens driver 515 turns off the right eye soft focus lens 512 (step S613) and turns on the left eye soft focus lens 509 (step S614). On the other hand, if the dominant eye is the left eye, the lens driver 515 turns off the left-eye soft focus lens 509 (step S615) and turns on the right-eye soft focus lens 512 (step S616).

次に、LR信号受信部514は、ステップS605またはS606で送信された信号(L信号またはR信号)を受信する(ステップS617)。そして、受信した信号がL信号であるか否かを判定する(ステップS618)。この判定の結果、L信号である場合は、ステップS619において、液晶シャッタ駆動部513によって左目用液晶シャッタ508をオフにし(ステップS619)、右目用液晶シャッタ511をオンにする(ステップS620)。一方、R信号である場合は、液晶シャッタ駆動部513によって右目用液晶シャッタ511をオフにし(ステップS621)、左目用液晶シャッタ508をオンにする(ステップS622)。   Next, the LR signal receiving unit 514 receives the signal (L signal or R signal) transmitted in step S605 or S606 (step S617). Then, it is determined whether or not the received signal is an L signal (step S618). If the result of this determination is the L signal, in step S619, the liquid crystal shutter drive unit 513 turns off the left-eye liquid crystal shutter 508 (step S619), and turns on the right-eye liquid crystal shutter 511 (step S620). On the other hand, in the case of the R signal, the liquid crystal shutter drive unit 513 turns off the right eye liquid crystal shutter 511 (step S621) and turns on the left eye liquid crystal shutter 508 (step S622).

以上の説明したように、右目が利き目の場合は、3Dメガネの左目にソフトフォーカスレンズによるボカシ処理を施し、左目が利き目の場合は、3Dメガネの右目にソフトフォーカスレンズによるボカシ処理を施す。これによって、非利き目では映像を漠然と捉えることが可能となる。この結果、実際空間での両眼視に近い状態で立体映像を視聴することができ、眼精疲労や不快感を低減することができる。   As described above, when the right eye is dominant, the left eye of the 3D glasses is subjected to blur processing by the soft focus lens, and when the left eye is dominant, the right eye of the 3D glasses is subjected to the blur processing by the soft focus lens. . This makes it possible to grasp the video vaguely for non-dominant eyes. As a result, stereoscopic images can be viewed in a state close to binocular vision in an actual space, and eye strain and discomfort can be reduced.

(第3の実施形態)
前述の第1及び第2の実施形態では、非利き目用の映像全体に対してボカシ処理を施す例について説明したが、本実施形態では非利き目用の映像の一部に対してボカシ処理を施す例について説明する。
(Third embodiment)
In the first and second embodiments described above, an example in which blur processing is performed on the entire image for non-dominant eyes has been described, but in this embodiment, blur processing is performed on a portion of the image for non-dominant eyes. An example of applying is described.

図7は、本実施形態に係る映像表示装置700の機能構成例を示すブロック図である。なお、第1の実施形態で説明した図1と同一の構成については図1と同一の符号を付し、説明は省略する。
図7において、注視領域特定部701は、ユーザが注視している領域または注視している映像要素を特定する。ユーザが注視している領域の特定は、公知の技術であるユーザの視線検出技術等を用いることも可能であり、ユーザが注視している可能性の高い領域として、例えば映像の中心付近と特定することも可能である。本実施形態では、映像の中心付近を注視領域とする場合について説明する。
FIG. 7 is a block diagram illustrating a functional configuration example of the video display apparatus 700 according to the present embodiment. In addition, about the structure same as FIG. 1 demonstrated in 1st Embodiment, the code | symbol same as FIG. 1 is attached | subjected and description is abbreviate | omitted.
In FIG. 7, the gaze area specifying unit 701 specifies the area that the user is watching or the video element that is watching. The user's gaze area can be identified by using a known technique such as the user's gaze detection technique. For example, the area that is likely to be gazed at the user is identified as, for example, the vicinity of the center of the video. It is also possible to do. In the present embodiment, a case where the vicinity of the center of the video is set as the gaze area will be described.

図8は、本実施形態において、左目用映像201L及び右目用映像201Rに対して注視領域とする領域を示す図である。図8に示す例では、左目用映像201Lでは注視領域801Lを設定し、右目用映像201Rでは注視領域801Rを設定する。   FIG. 8 is a diagram illustrating an area as a gaze area for the left-eye video 201L and the right-eye video 201R in the present embodiment. In the example shown in FIG. 8, the gaze area 801L is set in the left-eye video 201L, and the gaze area 801R is set in the right-eye video 201R.

非注視映像要素抽出部702は、すべての映像要素の位置情報を生成し、注視領域に存在しない映像要素を抽出する。図8を例に説明すると、注視領域801L、801Rに存在しない映像要素202、203を非注視映像要素として抽出する。   The non-gaze video element extraction unit 702 generates position information of all video elements and extracts video elements that do not exist in the gaze area. In the example of FIG. 8, the video elements 202 and 203 that do not exist in the gaze areas 801L and 801R are extracted as non-gaze video elements.

図9は、非注視映像要素抽出部702による抽出結果の一覧を示す図である。図9に示すように、映像要素毎に、非注視映像要素を注視フラグ=0、注視映像要素を注視フラグ=1として表している。   FIG. 9 is a diagram illustrating a list of extraction results obtained by the non-gaze video element extraction unit 702. As shown in FIG. 9, for each video element, a non-gaze video element is represented as a gaze flag = 0, and a gaze video element is represented as a gaze flag = 1.

映像加工処理条件設定部703は、非注視映像要素に施すボカシ処理を決定する。ボカシ処理としては、高周波成分低減処理、コントラスト低減処理、彩度低減処理、明度低減処理の処理種別を決定する。また、高周波成分低減処理である場合には、さらに空間ローパスフィルタの係数等の処理内容を決定する。映像加工処理部704は、映像加工処理条件設定部703で設定された処理条件に基づき、非利き目映像選択部103で選択された映像データに対してボカシ処理を施す。   The video processing condition setting unit 703 determines the blur processing to be applied to the non-gaze video element. As blur processing, processing types of high frequency component reduction processing, contrast reduction processing, saturation reduction processing, and lightness reduction processing are determined. In the case of high-frequency component reduction processing, the processing content such as the coefficient of the spatial low-pass filter is further determined. The video processing processing unit 704 performs blur processing on the video data selected by the non-dominant video selection unit 103 based on the processing conditions set by the video processing processing condition setting unit 703.

次に、本実施形態における映像表示装置700の動作について、図10のフローチャートを参照しながら説明する。図10は、本実施形態において、立体視映像を表示する処理手順の一例を示すフローチャートである。なお、図10に示す処理を行う際には、利き目情報設定部102に利き目情報が予め設定されていることを前提とする。また、図3と同一の処理ステップについては図3と同一の符号を付し、説明は省略する。   Next, the operation of the video display apparatus 700 in the present embodiment will be described with reference to the flowchart of FIG. FIG. 10 is a flowchart illustrating an example of a processing procedure for displaying a stereoscopic video in the present embodiment. When performing the processing shown in FIG. 10, it is assumed that dominant eye information is set in advance in the dominant eye information setting unit 102. The same processing steps as those in FIG. 3 are denoted by the same reference numerals as those in FIG.

ステップS301において映像データが入力されると、注視領域特定部701は、入力された映像データに対し、注視領域を設定する(ステップS1001)。本実施形態では、例えば、図8に示すような注視領域801L、801Rをそれぞれ設定する。次に、非注視映像要素抽出部702は、各映像要素の位置情報を生成し、入力された映像データから非注視映像要素を抽出する(ステップS1002)。抽出手順としては、例えば、図2に示す映像要素202〜205それぞれの映像要素が注視領域801L、801Rに存在するか否かを、図9に示した抽出結果を基に判別する。判別した結果、注視領域801L、801R内に映像要素が存在しない映像要素202、203を非注視映像要素として抽出される。   When video data is input in step S301, the gaze area specifying unit 701 sets a gaze area for the input video data (step S1001). In the present embodiment, for example, gaze areas 801L and 801R as shown in FIG. 8 are set. Next, the non-gaze video element extraction unit 702 generates position information of each video element, and extracts a non-gaze video element from the input video data (step S1002). As an extraction procedure, for example, it is determined based on the extraction result shown in FIG. 9 whether or not each of the video elements 202 to 205 shown in FIG. 2 exists in the gaze areas 801L and 801R. As a result of the determination, the video elements 202 and 203 having no video elements in the gaze areas 801L and 801R are extracted as non-gaze video elements.

ステップS303の判定の結果、利き目が右目である場合は、映像加工処理部704は、左目用映像の非注視映像要素にボカシ処理を施す。図8に示す例では、左目用映像の非注視映像要素である映像要素202L、203Lに対してボカシ処理を施す。一方、ステップS303の判定の結果、利き目が左目である場合は、右目用映像の非注視映像要素にボカシ処理を施す。図8に示す例では、右目用映像の非注視映像要素である映像要素202R、203Rに対してボカシ処理を施す。   If the result of determination in step S303 is that the dominant eye is the right eye, the video processing unit 704 performs blur processing on the non-gaze video element of the left-eye video. In the example illustrated in FIG. 8, blur processing is performed on the video elements 202 </ b> L and 203 </ b> L that are non-gaze video elements of the left-eye video. On the other hand, if the result of determination in step S303 is that the dominant eye is the left eye, blur processing is performed on the non-gaze image element of the right eye image. In the example shown in FIG. 8, blur processing is performed on the video elements 202R and 203R that are non-gaze video elements of the right-eye video.

図11は、映像出力部105より出力される立体視映像の一例を示す図である。図11(a)には、図2(c)に示す左目用映像201Lに対してボカシ処理を施した左目用映像1101L、及び右目用映像201Rを示す。一方、図11(b)には、右目用映像201Rに対してボカシ処理を施した右目用映像1101R、及び左目用映像201Lを示す。図11(a)において、点線で示した左目用映像要素1102L、1103Lがボカシ処理を施したことを示している。また、図11(b)において、点線で示した右目用映像要素1102R、1103Rがボカシ処理を施したことを示している。図3のステップS303の判定の結果、右目が利き目の場合は図11(a)に示す映像が表示され、左目が利き目の場合は図11(b)に示す映像が表示される。   FIG. 11 is a diagram illustrating an example of a stereoscopic video output from the video output unit 105. FIG. 11A shows a left-eye video 1101L and a right-eye video 201R obtained by subjecting the left-eye video 201L shown in FIG. On the other hand, FIG. 11B shows a right-eye video 1101R and a left-eye video 201L obtained by performing blur processing on the right-eye video 201R. FIG. 11A shows that the left-eye video elements 1102L and 1103L indicated by dotted lines have been subjected to blur processing. Further, in FIG. 11B, it is shown that the right-eye video elements 1102R and 1103R indicated by dotted lines have been subjected to blur processing. As a result of the determination in step S303 in FIG. 3, when the right eye is dominant, the image shown in FIG. 11A is displayed, and when the left eye is dominant, the image shown in FIG. 11B is displayed.

以上の説明したように、非利き目映像の注視領域外の映像要素にボカシ処理を施すことによって、非利き目では注視領域外の映像を漠然と捉えることが可能となる。この結果、実際空間での両眼視により近い状態で立体映像を視聴することができ、眼精疲労や不快感を低減することができる。   As described above, by performing blur processing on image elements outside the gaze area of the non-dominant eye image, it is possible to vaguely grasp the image outside the gaze area with the non-dominant eye. As a result, stereoscopic images can be viewed in a state closer to binocular vision in an actual space, and eye strain and discomfort can be reduced.

(第4の実施形態)
前述の第3の実施形態では、非注視映像要素に対して均一のボカシ処理を施す例について説明したが、本実施形態では、映像要素の視差に応じて異なるボカシ処理を施す例について説明する。なお、本実施形態に係る映像表示装置の機能構成については、図7と同様であるため、説明は省略する。
(Fourth embodiment)
In the third embodiment described above, an example in which uniform blur processing is performed on a non-gaze video element has been described. In the present embodiment, an example in which different blur processing is performed according to the parallax of a video element will be described. Note that the functional configuration of the video display apparatus according to the present embodiment is the same as that shown in FIG.

以下、本実施形態における映像表示装置700の動作について、図12〜図14を参照しながら説明する。図12は、本実施形態において、立体視映像を表示する処理手順の一例を示すフローチャートである。なお、図12に示す処理を行う際には、利き目情報設定部102に利き目情報が予め設定されていることを前提とする。また、図3と同一の処理ステップについては図3と同一の符号を付し、説明は省略する。   Hereinafter, the operation of the video display device 700 in the present embodiment will be described with reference to FIGS. FIG. 12 is a flowchart illustrating an example of a processing procedure for displaying a stereoscopic video image in the present embodiment. When performing the process shown in FIG. 12, it is assumed that dominant eye information is set in advance in the dominant eye information setting unit 102. The same processing steps as those in FIG. 3 are denoted by the same reference numerals as those in FIG.

ステップS301において映像データが入力されると、非注視映像要素抽出部702は、映像要素の位置を順に算出する(ステップS1201)。図13は、図2で示した左目用映像201L及び右目用映像201Rにおける、各映像要素の位置の算出結果の一覧を示す図である。例えば、映像要素202Lの中心座標が、水平位置として画面左端から200ドットの位置にあり、垂直位置として画面上端から125ドットの位置にあることを示している。他の映像要素に関しても同様である。   When video data is input in step S301, the non-gaze video element extraction unit 702 sequentially calculates the positions of the video elements (step S1201). FIG. 13 is a diagram showing a list of calculation results of the positions of the video elements in the left-eye video 201L and the right-eye video 201R shown in FIG. For example, the center coordinate of the video element 202L is located at a position of 200 dots from the left end of the screen as the horizontal position, and is located at a position of 125 dots from the upper end of the screen as the vertical position. The same applies to other video elements.

次に、非注視映像要素抽出部702は、各映像要素の視差を算出する(ステップS1202)。例えば、映像要素202の場合、左目用映像要素202L、右目用映像要素202Rの水平位置がそれぞれ200ドット、250ドットであるため、200−250の計算結果より水平視差はマイナス50ドットと算出される。他の映像要素に関しても同様である。   Next, the non-gaze video element extraction unit 702 calculates the parallax of each video element (step S1202). For example, in the case of the video element 202, since the horizontal positions of the left-eye video element 202L and the right-eye video element 202R are 200 dots and 250 dots, respectively, the horizontal parallax is calculated as minus 50 dots from the calculation result of 200-250. . The same applies to other video elements.

次に、非注視映像要素抽出部702は、画面の中心に近い映像要素を注視映像要素として選択する(ステップS1203)。なお、第3の実施形態では、非注視映像要素抽出部702は非注視映像要素を抽出していたが、本実施形態では、注視領域特定部701により注視映像要素を特定し、非注視映像要素抽出部702が注視映像要素を抽出するものとする。図13に示す例では、映像の水平方向の幅が1000ドット、垂直方向の幅が650ドットの場合の例を示す。このとき映像の中心座標は水平位置が500ドット、垂直位置が325ドットとなる。映像要素202〜205の中で、映像要素205が最も画面の中心に近いため、映像要素205が注視映像要素として選択される。   Next, the non-gaze video element extraction unit 702 selects a video element close to the center of the screen as the gaze video element (step S1203). In the third embodiment, the non-gaze video element extraction unit 702 extracts the non-gaze video element. However, in this embodiment, the gaze area identification unit 701 identifies the gaze video element, and the non-gaze video element It is assumed that the extraction unit 702 extracts a gaze image element. The example shown in FIG. 13 shows an example in which the horizontal width of the video is 1000 dots and the vertical width is 650 dots. At this time, the center coordinates of the video are 500 dots at the horizontal position and 325 dots at the vertical position. Since the video element 205 is closest to the center of the screen among the video elements 202 to 205, the video element 205 is selected as the watched video element.

次に、映像加工処理条件設定部703は、注視映像要素である映像要素205の視差を基準として、他の映像要素の視差との差を算出し、視差の差に基づいてボカシ処理条件を決定する(ステップS1204)。ボカシ処理としては、高周波成分低減処理、コントラスト低減処理、彩度低減処理、明度低減処理の、1つもしくは複数の組み合わせ処理を行う。本実施形態では、映像加工処理条件として、注視映像要素の視差との差に応じて異なるボカシ効果を得る。以下、空間ローパスフィルタのフィルタ係数を決定する方法について説明する。   Next, the video processing processing condition setting unit 703 calculates the difference from the parallax of the other video elements based on the parallax of the video element 205 that is the gaze video element, and determines the blur processing condition based on the parallax difference. (Step S1204). As the blur processing, one or a plurality of combination processings of high frequency component reduction processing, contrast reduction processing, saturation reduction processing, and lightness reduction processing are performed. In the present embodiment, a different blur effect is obtained as a video processing condition depending on the difference from the parallax of the watched video element. Hereinafter, a method for determining the filter coefficient of the spatial low-pass filter will be described.

図14は、フィルタ係数を決定するためのテーブルの一例を示す図である。図14に示すように、水平視差の差の絶対値が大きくなるに従ってボカシ効果が大きくなるフィルタ係数を与えている。水平視差の差の絶対値が50未満の場合は、ボカシ効果があまりないため、空間ローパスフィルタを適用しないようにする。また、水平視差の差の絶対値が50以上100未満の場合は、ボカシ効果が小となるフィルタ係数1/8、6/8、1/8を適用する。このように、水平視差の差の絶対値が100以上150未満の場合はボカシ効果が中となるフィルタ係数を適用し、150以上の場合はボカシ効果が大となるフィルタ係数を適用する。   FIG. 14 is a diagram illustrating an example of a table for determining filter coefficients. As shown in FIG. 14, a filter coefficient is given that increases the blur effect as the absolute value of the difference in horizontal parallax increases. When the absolute value of the difference in horizontal parallax is less than 50, there is not much blurring effect, so the spatial low-pass filter is not applied. When the absolute value of the difference in horizontal parallax is 50 or more and less than 100, filter coefficients 1/8, 6/8, and 1/8 that reduce the blur effect are applied. As described above, when the absolute value of the difference in horizontal parallax is 100 or more and less than 150, a filter coefficient with a medium blur effect is applied, and when the absolute value is 150 or more, a filter coefficient with a large blur effect is applied.

図2に示す映像要素202の場合、視差はマイナス50であり、注視映像要素である映像要素205の視差はプラス100である。したがって、水平視差の差の絶対値が150であるため、映像要素202に適用されるフィルタ係数は1/4、2/4、1/4と決定される。同様に、映像要素203と注視映像要素である映像要素205との視差の差の絶対値は100であるため、フィルタ係数は1/6、4/6、1/6と決定される。そして、映像要素204と注視映像要素である映像要素205との視差の差の絶対値は10であるため、フィルタ処理なしと決定される。   In the case of the video element 202 shown in FIG. 2, the parallax is minus 50, and the parallax of the video element 205 that is the gaze video element is plus 100. Accordingly, since the absolute value of the horizontal parallax difference is 150, the filter coefficients applied to the video element 202 are determined to be 1/4, 2/4, and 1/4. Similarly, since the absolute value of the parallax difference between the video element 203 and the video element 205 that is the gaze video element is 100, the filter coefficients are determined to be 1/6, 4/6, and 1/6. Then, since the absolute value of the parallax difference between the video element 204 and the video element 205 which is the gaze video element is 10, it is determined that no filtering is performed.

ステップS303の判定の結果、利き目が右目である場合は、映像加工処理部704は、左目用映像の映像要素に対して、ステップS1204で決定したフィルタ係数に基づいてボカシ処理を行う。図2(c)に示した例では、左目用映像要素202Lに対してはフィルタ係数1/4、2/4、1/4でフィルタ処理を行い、左目用映像要素203Lに対してはフィルタ係数1/6、4/6、1/6でフィルタ処理を行う。そして、左目用映像要素204L、205Lに対してはフィルタ処理を行わないようにする。   If the result of determination in step S303 is that the dominant eye is the right eye, the video processing unit 704 performs blurring processing on the video element of the left-eye video based on the filter coefficient determined in step S1204. In the example shown in FIG. 2 (c), the left eye video element 202L is filtered with the filter coefficients 1/4, 2/4, and 1/4, and the left eye video element 203L is filtered. Filter processing is performed at 1/6, 4/6, and 1/6. Then, filter processing is not performed on the left-eye video elements 204L and 205L.

ステップS303の判定の結果、利き目が左目である場合は、映像加工処理部704は、右目用映像の映像要素に対して、ステップS1204で決定したフィルタ係数に基づいてボカシ処理を行う。図2(c)に示した例では、右目用映像要素202Rに対してはフィルタ係数1/4、2/4、1/4でフィルタ処理を行い、右目用映像要素203Rに対してはフィルタ係数1/6、4/6、1/6でフィルタ処理を行う。そして、右目用映像要素204R、205Rに対してはフィルタ処理を行わないようにする。   If the result of determination in step S303 is that the dominant eye is the left eye, the video processing unit 704 performs blur processing on the video element of the right-eye video based on the filter coefficient determined in step S1204. In the example shown in FIG. 2C, the right-eye video element 202R is filtered with the filter coefficients 1/4, 2/4, and 1/4, and the right-eye video element 203R is filtered. Filter processing is performed at 1/6, 4/6, and 1/6. Then, the filtering process is not performed on the right-eye video elements 204R and 205R.

図15は、映像出力部105より出力される立体視映像の一例を示す図である。図15(a)には、図2(c)に示す左目用映像201Lに対し、左目用映像要素203Lに中程度のボカシ処理を施し、左目用映像要素202Lに大きなボカシ処理を施した左目用映像1501L、及び右目用映像201Rを表す。一方、図15(b)には、図2(c)に示す右目用映像201Rに対し、右目用映像要素203Rに中程度のボカシ処理を施し、右目用映像要素202Rに大きなボカシ処理を施した右目用映像1501R、及び左目用映像201Lを表す。図15(a)において、点線で示した左目用映像要素1502L、1503Lがボカシ処理を施したことを示している。また、図15(b)において、点線で示した右目用映像要素1502R、1503Rがボカシ処理を施したことを示している。図3のステップS303の判定の結果、右目が利き目の場合は図15(a)に示す映像が表示され、左目が利き目の場合は図15(b)に示す映像が表示される。   FIG. 15 is a diagram illustrating an example of a stereoscopic video output from the video output unit 105. In FIG. 15A, for the left-eye video 201L shown in FIG. 2C, a moderate blur process is applied to the left-eye video element 203L, and a large blur process is applied to the left-eye video element 202L. An image 1501L and a right-eye image 201R are represented. On the other hand, in FIG. 15B, a moderate blur process is applied to the right-eye video element 203R and a large blur process is applied to the right-eye video element 202R with respect to the right-eye video 201R shown in FIG. A right-eye image 1501R and a left-eye image 201L are shown. FIG. 15A shows that the left-eye video elements 1502L and 1503L indicated by dotted lines have been subjected to blur processing. FIG. 15B shows that the right-eye video elements 1502R and 1503R indicated by dotted lines have been subjected to blur processing. As a result of the determination in step S303 in FIG. 3, when the right eye is dominant, the image shown in FIG. 15A is displayed, and when the left eye is dominant, the image shown in FIG. 15B is displayed.

以上の説明したように、非利き目映像の注視領域外の映像要素に、注視映像要素の視差との差に応じて異なるボカシ処理を施すことによって、非利き目では注視領域外の映像を映像の深度に応じて漠然と捉えることが可能となる。この結果、実際空間での両眼視により近い状態で立体映像を視聴することができ、眼精疲労や不快感を低減することができる。   As explained above, by applying different blur processing to the image elements outside the gaze area of the non-dominant eye image according to the difference from the parallax of the gaze image element, the image outside the gaze area is imaged by the non-dominant eye It becomes possible to grasp vaguely according to the depth of the. As a result, stereoscopic images can be viewed in a state closer to binocular vision in an actual space, and eye strain and discomfort can be reduced.

なお、本実施形態では、ボカシ処理として3段階の3タップ空間ローパスフィルタ係数を例として説明したが、これに限るものではなく、3段階以外の段階を設けたり、異なるフィルタ係数及び異なるタップ数のフィルタ係数を用いたりしてもよい。さらには、本実施形態では、ボカシ処理として空間ローパスフィルタを例として説明したが、これに限るものではなく、コントラスト、彩度、明度を視差の差に応じて段階的に低減することにより、ボカシ処理を施してもよい。   In this embodiment, the three-stage three-tap spatial low-pass filter coefficient has been described as an example of the blur processing. However, the present invention is not limited to this, and a stage other than three stages is provided, or a different filter coefficient and a different number of taps are provided. Filter coefficients may be used. Furthermore, in the present embodiment, the spatial low-pass filter has been described as an example of the blur processing. However, the present invention is not limited to this, and by reducing the contrast, saturation, and lightness stepwise according to the difference in parallax, Processing may be performed.

(その他の実施形態)
また、本発明は、以下の処理を実行することによっても実現される。即ち、上述した実施形態の機能を実現するソフトウェア(プログラム)を、ネットワーク又は各種記憶媒体を介してシステム或いは装置に供給し、そのシステム或いは装置のコンピュータ(またはCPUやMPU等)がプログラムを読み出して実行する処理である。
(Other embodiments)
The present invention can also be realized by executing the following processing. That is, software (program) that realizes the functions of the above-described embodiments is supplied to a system or apparatus via a network or various storage media, and a computer (or CPU, MPU, or the like) of the system or apparatus reads the program. It is a process to be executed.

103 非利き目映像選択部
104 映像加工処理部
105 映像出力部
103 Non-dominant video selection unit 104 Video processing unit 105 Video output unit

Claims (3)

ーザの利き目情報を取得する手段と、
左目用映像及び右目用映像を交互に表示手段に表示させる表示制御手段と、
ユーザの左目に入射される光を遮断するために用いられる左目用シャッタと、ユーザの右目に入射される光を遮断するために用いられる右目用シャッタと、前記左目用映像をぼかすために用いられる左目用ソフトフォーカスレンズと、前記右目用映像をぼかすために用いられる右目用ソフトフォーカスレンズとを備えるシャッタ式メガネに対して通知を行う処理手段であって、
前記表示制御手段が前記左目用映像を表示させているときは、ユーザの右目に入射される光が遮断されるように前記右目用シャッタが駆動され、前記表示制御手段が前記右目用映像を表示させているときは、ユーザの左目に入射される光が遮断されるように前記左目用シャッタが駆動されるように、前記表示制御手段が前記左目用映像と右目用映像とのうち何れを表示させているかを前記シャッタ式メガネに対して通知すると共に、
前記左目用映像と右目用映像とのうち、ユーザの利き目とは逆の映像が前記左目用ソフトフォーカスレンズ又は前記右目用ソフトフォーカスレンズによってぼかされるように、前記利き目情報を前記シャッタ式メガネに対して通知する処理手段とを備えること特徴とする映像表示装置。
It means for obtaining the dominant eye information Yu over The,
Display control means for alternately displaying left-eye video and right-eye video on the display means;
A left-eye shutter used to block light incident on the user's left eye, a right-eye shutter used to block light incident on the user's right eye, and used to blur the left-eye image Processing means for notifying shutter-type glasses having a left-eye soft focus lens and a right-eye soft focus lens used to blur the right-eye image;
When the display control means is displaying the left-eye video, the right-eye shutter is driven so that light incident on the user's right eye is blocked, and the display control means displays the right-eye video. The display control means displays either the left-eye video or the right-eye video so that the left-eye shutter is driven so that light incident on the left eye of the user is blocked. Notifying the shutter-type glasses whether the
Among the left-eye video and the right-eye video, the dominant-eye information is converted into the shutter-type glasses so that an image opposite to the user's dominant eye is blurred by the left-eye soft focus lens or the right-eye soft focus lens. image display device comprising it and a processing unit to be notified to.
像表示装置が行う映像表示方法であって、
ユーザの利き目情報を取得する取得工程と、
左目用映像及び右目用映像を交互に表示手段に表示させる表示制御工程と、
ユーザの左目に入射される光を遮断するために用いられる左目用シャッタと、ユーザの右目に入射される光を遮断するために用いられる右目用シャッタと、前記左目用映像をぼかすために用いられる左目用ソフトフォーカスレンズと、前記右目用映像をぼかすために用いられる右目用ソフトフォーカスレンズとを備えるシャッタ式メガネに対して通知を行う処理工程であって、
前記表示制御工程が前記左目用映像を表示させているときは、前記右目用シャッタによってユーザの右目に入射される光が遮断され、前記表示制御工程が前記右目用映像を表示させているときは、前記左目用シャッタによってユーザの左目に入射される光が遮断されるように、前記表示制御工程が前記左目用映像と前記右目用映像とのうち何れを表示させているかを前記シャッタ式メガネに対して通知すると共に、
前記左目用映像と右目用映像とのうち、ユーザの利き目とは逆の映像が前記左目用ソフトフォーカスレンズ又は前記右目用ソフトフォーカスレンズによってぼかされるように、前記利き目情報を前記シャッタ式メガネに対して通知する処理工程とを備えること特徴とする映像表示方法。
A video display method Film image display apparatus performs,
An acquisition process for acquiring user's dominant eye information;
A display control step of alternately displaying left-eye video and right-eye video on the display means;
A left-eye shutter used to block light incident on the user's left eye, a right-eye shutter used to block light incident on the user's right eye, and used to blur the left-eye image A processing step of notifying shutter-type glasses having a left-eye soft focus lens and a right-eye soft focus lens used to blur the right-eye image,
When the display control step is displaying the left-eye video, light incident on the right eye of the user is blocked by the right-eye shutter, and when the display control step is displaying the right-eye video The shutter-type glasses indicate which of the left-eye video and the right-eye video is displayed by the display control step so that light incident on the user's left eye is blocked by the left-eye shutter. As well as
Among the left-eye video and the right-eye video, the dominant-eye information is converted into the shutter-type glasses so that an image opposite to the user's dominant eye is blurred by the left-eye soft focus lens or the right-eye soft focus lens. image display method, characterized by comprising a process to be notified to.
コンピュータを請求項に記載の映像表示装置として動作させるためのプログラム。 A program for causing a computer to operate as the video display device according to claim 1 .
JP2011025308A 2011-02-08 2011-02-08 Video display device, video display method and program Active JP5656676B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2011025308A JP5656676B2 (en) 2011-02-08 2011-02-08 Video display device, video display method and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2011025308A JP5656676B2 (en) 2011-02-08 2011-02-08 Video display device, video display method and program

Publications (3)

Publication Number Publication Date
JP2012165272A JP2012165272A (en) 2012-08-30
JP2012165272A5 JP2012165272A5 (en) 2014-03-27
JP5656676B2 true JP5656676B2 (en) 2015-01-21

Family

ID=46844215

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2011025308A Active JP5656676B2 (en) 2011-02-08 2011-02-08 Video display device, video display method and program

Country Status (1)

Country Link
JP (1) JP5656676B2 (en)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2019101811A (en) 2017-12-04 2019-06-24 富士通株式会社 Processing program, processing method, processing apparatus, display program, display method, and display controller
JP2020155827A (en) * 2019-03-18 2020-09-24 本田技研工業株式会社 Visible device and visible method
US20210327030A1 (en) * 2020-04-20 2021-10-21 Varjo Technologies Oy Imaging system and method incorporating selective denoising
CN116850012B (en) * 2023-06-30 2024-03-12 广州视景医疗软件有限公司 A visual training method and system based on binocular vision

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS5831691A (en) * 1981-08-19 1983-02-24 Matsushita Electric Ind Co Ltd Stereoscopic television device
JP3122191B2 (en) * 1991-10-16 2001-01-09 株式会社東芝 Recording and playback device
JP3182009B2 (en) * 1992-12-24 2001-07-03 日本電信電話株式会社 Binocular stereoscopic device
JP3524147B2 (en) * 1994-04-28 2004-05-10 キヤノン株式会社 3D image display device
JPH09504131A (en) * 1994-08-08 1997-04-22 フィリップス エレクトロニクス ネムローゼ フェンノートシャップ Image processing system for handling depth information
JPH11155154A (en) * 1997-11-19 1999-06-08 Toshiba Corp 3D image processing device
JP4815470B2 (en) * 2007-06-15 2011-11-16 富士フイルム株式会社 Image display device and image display method
JP5476910B2 (en) * 2009-10-07 2014-04-23 株式会社ニコン Image generating apparatus, image generating method, and program

Also Published As

Publication number Publication date
JP2012165272A (en) 2012-08-30

Similar Documents

Publication Publication Date Title
US8872902B2 (en) Stereoscopic video processing device and method for modifying a parallax value, and program
US20130038611A1 (en) Image conversion device
CN105894567B (en) Scaling pixel depth values of user-controlled virtual objects in a three-dimensional scene
KR102143472B1 (en) Multi view image processing apparatus and image processing method thereof
JP2011176541A (en) Three-dimensional video processing apparatus and method, and program thereof
CN102379126A (en) Image display device and method as well as program
US20110242296A1 (en) Stereoscopic image display device
JP5656676B2 (en) Video display device, video display method and program
EP2469876B1 (en) Stereoscopic image display control apparatus and operation control method of the same
CN102439553B (en) Apparatus and method for reproducing stereoscopic images, providing a user interface appropriate for a 3d image signal
JP2012253471A (en) Stereoscopic image display device and stereoscopic image display method
JP4787369B1 (en) Image processing apparatus and method, and program
JP5373222B2 (en) REPRODUCTION DEVICE, REPRODUCTION METHOD, AND COMPUTER PROGRAM
KR20130043836A (en) Apparatus for displaying a 3-dimensional image and method for adjusting viewing distance of 3-dimensional image
JP5725159B2 (en) Measuring device, stereoscopic image display device, and measuring method
CN103621076B (en) Stereoscopic image processing device and stereoscopic image processing method
JP2011193057A (en) Three-dimensional image display apparatus, and image processing apparatus
JP2013143736A (en) Information processor and display control method
KR101433082B1 (en) Video conversing and reproducing method to provide medium feeling of two-dimensional video and three-dimensional video
JP2006287813A (en) Three-dimensional image display device
JP5899910B2 (en) Image processing apparatus, image processing method, and image processing program
JP2012133179A (en) Stereoscopic device and control method of stereoscopic device
KR20120011161A (en) Apparatus and method for changing an image for three-dimensional display
KR20120023218A (en) Display device for 2d and 3d, 3d auxiliary device and optional display method
KR20130115036A (en) An apparatus for processing a three-dimensional image for multi-user and method of expanding a viewing angle of the same

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140205

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20140205

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20140724

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20140729

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140929

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20141028

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20141125

R151 Written notification of patent or utility model registration

Ref document number: 5656676

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151