JP5370175B2 - Image display device - Google Patents
Image display device Download PDFInfo
- Publication number
- JP5370175B2 JP5370175B2 JP2010010176A JP2010010176A JP5370175B2 JP 5370175 B2 JP5370175 B2 JP 5370175B2 JP 2010010176 A JP2010010176 A JP 2010010176A JP 2010010176 A JP2010010176 A JP 2010010176A JP 5370175 B2 JP5370175 B2 JP 5370175B2
- Authority
- JP
- Japan
- Prior art keywords
- image signal
- frame
- shift
- frame image
- mode
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Controls And Circuits For Display Device (AREA)
- Transforming Electric Information Into Light Information (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
- Control Of Indicators Other Than Cathode Ray Tubes (AREA)
Abstract
Description
本発明は、フレームレートを倍速にして表示する画像と立体(3D)画像とを切り替えて出力する画像表示装置に関する。 The present invention relates to an image display apparatus that switches and outputs an image to be displayed at a double frame rate and a stereoscopic (3D) image.
動きベクトルにより前後のフレーム画像信号から補間フレーム信号を生成し、この補間フレーム信号を用いて映像を倍速表示する処理(以下、倍速処理という)を実行する画像表示装置が提案されている(例えば、特許文献1参照)。 There has been proposed an image display device that generates an interpolated frame signal from previous and subsequent frame image signals based on a motion vector, and executes processing for displaying video at double speed (hereinafter referred to as double speed processing) using the interpolated frame signal (for example, Patent Document 1).
また、平面映像信号(2D(Dimensions)映像信号)を立体映像信号(3D映像信号)に変換して表示する処理(以下、2D/3D処理という)を実行する方法も提案されている(例えば、特許文献2参照)。 In addition, a method for executing a process (hereinafter referred to as a 2D / 3D process) for converting a planar video signal (2D (Dimensions) video signal) into a stereoscopic video signal (3D video signal) and displaying the same (for example, 2D / 3D processing) has been proposed (for example, Patent Document 2).
特許文献1に記載の倍速表示する画像表示装置では、倍速処理を実行するために、前後のフレーム画像信号から補間フレーム信号を生成する必要があり、早い動きに対応させたり補間する動きの間隔を細かくしたりするには、補間元の信号を幅広く保持するためのシフトレジスタが必要となる。また、フレームレートを変換して出力するためのフレームメモリも必要となる。 In the image display device for double-speed display described in Patent Document 1, it is necessary to generate an interpolated frame signal from the preceding and following frame image signals in order to execute the double-speed processing. In order to make it finer, a shift register for holding a wide range of interpolation source signals is required. In addition, a frame memory for converting the frame rate and outputting it is also required.
一方、特許文献2記載の方法では、2D/3D処理を実行するためには、左目用の画像と右目用の画像に視差をもたせるため、左右の画像の片方もしくは両方をシフトさせる。そこで、このシフトした画像を記憶するためのシフトレジスタが必要となる。また、2D/3D処理後の画像を出力するためのフレームメモリも必要となる。
On the other hand, in the method described in
そこで、これらの倍速処理と2D/3D処理とを独立したまま両立させる構成とすると、それぞれの処理に対応してシフトレジスタやフレームメモリ等を備える必要があり、装置構成が大規模なものとなる。 Therefore, if the double speed processing and the 2D / 3D processing are made independent and compatible, it is necessary to provide a shift register, a frame memory, etc. corresponding to each processing, and the apparatus configuration becomes large-scale. .
本発明は、上記課題に鑑みてなされたものであり、その目的は、装置構成を大規模なものにすることなく、補間フレームを挿入してフレームレートを倍速にして表示する画像(倍速画像)と3D画像とを切り替えて出力する画像表示装置を提供することにある。 The present invention has been made in view of the above-described problems, and an object of the present invention is to display an image (double-speed image) at a double frame rate by inserting an interpolation frame without making the apparatus configuration large-scale. It is to provide an image display device that switches and outputs 3D images.
上記目的を達成するため、本発明に係る画像表示装置の第1の特徴は、入力された第1のフレーム画像信号を記憶して、1フレーム期間遅延した第2のフレーム画像信号を出力する第1のフレームメモリと、前記第1のフレーム画像信号と、前記第2のフレーム画像信号との差分により動きベクトルを検出する動きベクトル検出手段と、前記動きベクトル検出手段により検出された動きベクトルと、前記第1のフレーム画像信号と、前記第2のフレーム画像信号のうち少なくとも一方のフレーム画像信号に基づいて、時系列的に前記第1のフレーム画像信号と前記第2のフレーム画像信号との間の画像信号である1以上の補間フレーム信号を生成する補間フレーム生成手段と、前記第1のフレーム画像信号の特徴を信号パターンとして検出するパターン検出手段と、前記パターン検出手段によって検出された信号パターンに基づいて、立体画像を表示するために前記第1のフレーム画像信号をシフトさせる量を決定するシフト量決定手段と、前記シフト量決定手段によって決定されたシフト量に応じて、前記第1のフレーム画像信号を主走査方向又は副走査方向の少なくとも一方にシフトさせてシフト画像信号として記憶するシフトレジスタと、外部入力に基づいて、前記第1のフレーム画像信号のフレームレートを倍速にして出力する倍速モード及び前記第1のフレーム画像信号を立体画像信号に変換して出力する2D/3Dモードのいずれが選択されたかを判定するモード選択判定手段と、前記1以上の補間フレーム信号又は前記シフト画像信号と、前記第1のフレーム画像信号とを記憶する第2のフレームメモリと、前記モード選択判定手段により倍速モードが選択されたと判定した場合、前記第1のフレーム画像信号と前記第2のフレーム画像信号との間に前記補間フレーム生成手段により生成された1以上の補間フレーム信号を出力させるように、前記1以上の補間フレーム信号を前記第2のフレームメモリに記憶させると共に、前記モード選択判定手段により2D/3Dモードが選択されたと判定した場合、前記第1のフレーム画像信号と前記シフトレジスタに記憶されたシフト画像信号とを交互に出力させるように、前記シフト画像信号を前記第2のフレームメモリに記憶させる選択処理手段とを備えたことにある。
In order to achieve the above object, the first feature of the image display device according to the present invention is that the input first frame image signal is stored and the second frame image signal delayed by one frame period is output. A motion vector detecting means for detecting a motion vector based on a difference between the first frame image signal, the first frame image signal, and the second frame image signal; a motion vector detected by the motion vector detecting means; Between the first frame image signal and the second frame image signal in time series based on at least one of the first frame image signal and the second frame image signal. Interpolating frame generating means for generating one or more interpolated frame signals that are image signals of the image, and detecting characteristics of the first frame image signal as signal patterns And pattern detecting means, based on a signal pattern detected by said pattern detecting means, and the shift amount determining means for determining the amount of shifting the first frame image signals for displaying a stereoscopic image, the shift amount determination Based on an external input, a shift register that shifts the first frame image signal in at least one of the main scanning direction or the sub-scanning direction and stores it as a shifted image signal according to the shift amount determined by the means, Mode selection for determining which of a double speed mode for outputting a frame rate of the first frame image signal at a double speed and a 2D / 3D mode for converting the first frame image signal into a stereoscopic image signal and outputting the same A determination means; the one or more interpolated frame signals or the shifted image signal; and the first frame image signal. And the interpolated frame generation between the first frame image signal and the second frame image signal when it is determined that the double speed mode has been selected by the mode selection determining means. The one or more interpolated frame signals are stored in the second frame memory so as to output one or more interpolated frame signals generated by the means, and the 2D / 3D mode is selected by the mode selection determining means. Selection processing means for storing the shift image signal in the second frame memory so as to alternately output the first frame image signal and the shift image signal stored in the shift register when the determination is made. Be prepared.
上記目的を達成するため、本発明に係る画像表示装置の第2の特徴は、入力された第1のフレーム画像信号を記憶して、1フレーム期間遅延した第2のフレーム画像信号を出力する第1のフレームメモリと、前記第1のフレーム画像信号と、前記第2のフレーム画像信号との差分により動きベクトルを検出する動きベクトル検出手段と、前記第1のフレーム画像信号の特徴を信号パターンとして検出するパターン検出手段と、前記パターン検出手段によって検出された信号パターンに基づいて、立体画像を表示するために前記第1のフレーム画像信号をシフトさせる量を決定するシフト量決定手段と、外部入力に基づいて、前記第1のフレーム画像信号のフレームレートを倍速にして出力する倍速モード及び前記第1のフレーム画像信号を立体画像信号に変換して出力する2D/3Dモードのいずれが選択されたかを判定するモード選択判定手段と、前記モード選択判定手段により倍速モードが選択されたと判定した場合、前記第1のフレームメモリに記憶された前記第2のフレーム画像信号を選択すると共に、前記モード選択判定手段により2D/3Dモードが選択されたと判定した場合、前記第1のフレーム画像信号を選択する第1の選択処理手段と、前記モード選択判定手段により倍速モードが選択されたと判定した場合、前記動きベクトル検出手段により検出された動きベクトルを選択すると共に、前記モード選択判定手段により2D/3Dモードが選択されたと判定した場合、前記シフト量決定手段により決定されたシフト量を選択する第2の選択処理手段と、前記モード選択判定手段により倍速モードが選択されたと判定した場合、前記第1の選択処理手段により選択された前記第2のフレーム画像信号と、前記第2の選択処理手段により選択された動きベクトルとを記憶し、前記モード選択判定手段により2D/3Dモードが選択されたと判定した場合、前記第1の選択処理手段により選択された前記第1のフレーム画像信号を主走査方向又は副走査方向の少なくとも一方にシフトさせてシフト画像信号として記憶する第1のシフトレジスタと、前記モード選択判定手段により倍速モードが選択されたと判定した場合、前記第1のフレーム画像信号を記憶する第2のシフトレジスタと、前記モード選択判定手段により倍速モードが選択されたと判定した場合、前記動きベクトルと、前記第1のシフトレジスタに記憶された第2のフレーム画像信号と、前記第2のシフトレジスタに記憶された第1のフレーム画像信号のうち少なくとも一方のフレーム画像信号に基づいて、時系列的に前記第1のフレーム画像信号と前記第2のフレーム画像信号との間の画像信号である1以上の補間フレーム信号を生成する補間フレーム生成手段と、前記1以上の補間フレーム信号又は前記シフト画像信号と、前記第1のフレーム画像信号とを記憶する第2のフレームメモリと、前記モード選択判定手段により倍速モードが選択されたと判定した場合、前記第1のフレーム画像信号と前記第2のフレーム画像信号との間に前記補間フレーム生成手段により生成された1以上の補間フレーム信号を出力させるように、前記1以上の補間フレーム信号を前記第2のフレームメモリに記憶させると共に、前記モード選択判定手段により2D/3Dモードが選択されたと判定した場合、前記第2のフレーム画像信号と前記第1のシフトレジスタにより記憶されたシフト画像信号とを交互に出力させるように、前記シフト画像信号を第2のフレームメモリに記憶させる第3の選択処理手段とを備えたことにある。 In order to achieve the above object, a second feature of the image display device according to the present invention is to store an input first frame image signal and output a second frame image signal delayed by one frame period. 1 frame memory, a motion vector detection means for detecting a motion vector based on a difference between the first frame image signal and the second frame image signal, and a feature of the first frame image signal as a signal pattern A pattern detecting unit for detecting, a shift amount determining unit for determining an amount of shifting the first frame image signal to display a stereoscopic image based on the signal pattern detected by the pattern detecting unit, and an external input Based on the double-speed mode in which the frame rate of the first frame image signal is doubled and output, and the first frame image signal is activated. When it is determined by the mode selection determination means that the 2D / 3D mode to be converted and output to the image signal is selected, and when the mode selection determination means determines that the double speed mode has been selected, the first frame memory Selecting the stored second frame image signal, and selecting the first frame image signal when the mode selection determining means determines that the 2D / 3D mode is selected; When it is determined that the double speed mode is selected by the mode selection determining means, when the motion vector detected by the motion vector detecting means is selected, and when the 2D / 3D mode is determined by the mode selection determining means Second selection processing means for selecting the shift amount determined by the shift amount determination means, and the mode When it is determined by the selection determining means that the double speed mode has been selected, the second frame image signal selected by the first selection processing means and the motion vector selected by the second selection processing means are stored. When it is determined that the 2D / 3D mode is selected by the mode selection determination unit, the first frame image signal selected by the first selection processing unit is set in at least one of the main scanning direction and the sub-scanning direction. A first shift register that shifts and stores it as a shifted image signal; a second shift register that stores the first frame image signal when it is determined that the double-speed mode is selected by the mode selection determining means; When it is determined by the mode selection determining means that the double speed mode has been selected, the motion vector and the first shift register Based on at least one of the second frame image signal stored in the second shift image and the first frame image signal stored in the second shift register in time series. Interpolation frame generation means for generating one or more interpolation frame signals, which are image signals between a signal and the second frame image signal, the one or more interpolation frame signals or the shift image signal, and the first When it is determined that the double-speed mode is selected by the second frame memory that stores the frame image signal and the mode selection determining unit, the first frame image signal and the second frame image signal are between the first frame image signal and the second frame image signal. The one or more interpolation frame signals are output from the second frame so as to output one or more interpolation frame signals generated by the interpolation frame generation means. And the second frame image signal and the shift image signal stored by the first shift register are alternately output when it is determined that the 2D / 3D mode has been selected by the mode selection determination means. And third selection processing means for storing the shifted image signal in the second frame memory.
上記目的を達成するため、本発明に係る画像表示装置の第3の特徴は、前記第1のシフトレジスタは、前記モード選択判定手段により倍速モードが選択されたと判定した場合、前記第1の選択処理手段により選択された前記第2のフレーム画像信号と、前記第2の選択処理手段により選択された動きベクトルとを記憶し、前記モード選択判定手段により2D/3Dモードが選択されたと判定した場合、前記第1の選択処理手段により選択された前記第1のフレーム画像信号を主走査方向又は副走査方向の少なくとも一方にシフトさせて第1のシフト画像信号として記憶し、前記第2のシフトレジスタは、前記モード選択判定手段により倍速モードが選択されたと判定した場合、前記第1のフレーム画像信号を記憶し、前記モード選択判定手段により2D/3Dモードが選択されたと判定した場合、供給された前記第1のフレーム画像信号を主走査方向又は副走査方向の少なくとも一方にシフトさせて第2のシフト画像信号として記憶し、前記第2のフレームメモリは、前記1以上の補間フレーム信号、又は前記第1のシフト画像信号若しくは第2のシフト画像信号と、前記第1のフレーム画像信号とを記憶し、前記第3の選択処理手段は、前記モード選択判定手段により倍速モードが選択されたと判定した場合、前記第1のフレーム画像信号と前記第1のフレーム画像信号との間に前記補間フレーム生成手段により生成された1以上の補間フレーム信号を出力させるように、前記1以上の補間フレーム信号を前記第2のフレームメモリに記憶させると共に、前記モード選択判定手段により2D/3Dモードが選択されたと判定した場合、前記第1のシフトレジスタにより記憶された第1のシフト画像信号と前記第2のシフトレジスタにより記憶された第2のシフト画像信号とを交互に出力させるように、前記第1のシフト画像信号を第2のフレームメモリに記憶させ、前記モード選択判定手段により倍速モードが選択されたと判定した場合、外部から供給された前記第1のフレーム画像信号を前記第2のフレームメモリに記憶させると共に、前記モード選択判定手段により2D/3Dモードが選択されたと判定した場合、前記第1のシフトレジスタにより記憶された第1のシフト画像信号と前記第2のシフトレジスタにより記憶された第2のシフト画像信号とを交互に出力させるように、前記第2のシフト画像信号を前記第2のフレームメモリに記憶させる第4の選択処理手段を、更に備えることにある。 In order to achieve the above object, a third feature of the image display device according to the present invention is that, when the first shift register determines that the double speed mode is selected by the mode selection determining means, the first selection is performed. When the second frame image signal selected by the processing means and the motion vector selected by the second selection processing means are stored, and it is determined that the 2D / 3D mode is selected by the mode selection determining means The first frame image signal selected by the first selection processing means is shifted in at least one of the main scanning direction and the sub-scanning direction and stored as a first shifted image signal, and the second shift register When it is determined that the double speed mode is selected by the mode selection determination means, the first frame image signal is stored, and the mode selection determination means If it is determined that the 2D / 3D mode is selected, the supplied first frame image signal is shifted in at least one of the main scanning direction and the sub-scanning direction and stored as the second shifted image signal, and the first The second frame memory stores the one or more interpolated frame signals, or the first shift image signal or the second shift image signal, and the first frame image signal, and the third selection processing means. Is one or more interpolations generated by the interpolation frame generation means between the first frame image signal and the first frame image signal when it is determined that the double speed mode is selected by the mode selection determination means The one or more interpolated frame signals are stored in the second frame memory so as to output a frame signal, and the mode selection determining means If it is determined that the 2D / 3D mode is selected, the first shift image signal stored by the first shift register and the second shift image signal stored by the second shift register are alternately used. When the first shift image signal is stored in the second frame memory so as to be output and it is determined that the double speed mode is selected by the mode selection determination means, the first frame image signal supplied from the outside Are stored in the second frame memory, and when it is determined that the 2D / 3D mode is selected by the mode selection determining means, the first shift image signal stored in the first shift register and the second The second shift image signal is output from the second shift image signal so as to be alternately output from the second shift image signal stored by the shift register. The present invention further includes fourth selection processing means for storing in the second frame memory.
上記目的を達成するため、本発明に係る画像表示装置の第4の特徴は、入力された第1のフレーム画像信号を記憶して、1フレーム期間遅延した第2のフレーム画像信号を出力する第1のフレームメモリと、前記第1のフレーム画像信号と、前記第2のフレーム画像信号との差分により動きベクトルを検出する動きベクトル検出手段と、前記第1のフレーム画像信号の特徴を信号パターンとして検出するパターン検出手段と、前記パターン検出手段によって検出された信号パターンに基づいて、立体画像を表示するために前記第1のフレーム画像信号を左目用及び右目用にそれぞれシフトさせるシフト量を決定するシフト量決定手段と、前記動きベクトル検出手段により検出された動きベクトルと、前記シフト量決定手段により決定された左目用及び右目用のうちいずれか一方のシフト量とを選択すると共に、前記シフト量決定手段により決定された左目用及び右目用のうち他方のシフト量を選択するシフト選択手段と、前記シフト選択手段により選択された前記一方のシフト量に基づいて、前記第1のフレームメモリにより出力された前記第2のフレーム画像信号を主走査方向又は副走査方向の少なくとも一方向にシフトさせて第2のシフト画像信号として記憶すると共に、前記シフト選択手段により選択された前記動きベクトルを記憶する第1のシフトレジスタと、前記シフト選択手段により選択された前記一方のシフト量に基づいて、入力された前記第1のフレーム画像信号を主走査方向又は副走査方向の少なくとも一方向にシフトさせた第1のシフト画像信号と、前記シフト選択手段により選択された動きベクトルとを記憶すると共に、前記シフト選択手段により選択された前記他方のシフト量に基づいて、入力された前記第1のフレーム画像信号を主走査方向又は副走査方向の少なくとも一方向にシフトさせた第3のシフト画像信号を記憶する第2のシフトレジスタと、前記動きベクトルと、前記第1のシフトレジスタに記憶された前記第2のシフト画像信号と前記第2のシフトレジスタに記憶された前記第1のシフト画像信号とのうち少なくとも一方のシフト画像信号に基づいて、時系列的に前記第1のシフト画像信号と前記第2のシフト画像信号との間の画像信号である1以上の補間フレーム信号を生成する補間フレーム生成手段と、前記1以上の補間フレーム信号と前記第3のシフト画像信号とを記憶する第2のフレームメモリと、前記第3のシフト画像信号と、この第3のシフト画像信号から1フレーム期間遅延した第4のシフト画像信号との間に前記補間フレーム生成手段により生成された1以上の補間フレーム信号を出力させるように、前記1以上の補間フレーム信号を前記第2のフレームメモリに記憶させる選択処理手段とを備えたことにある。 In order to achieve the above object, a fourth feature of the image display apparatus according to the present invention is that the input first frame image signal is stored and the second frame image signal delayed by one frame period is output. 1 frame memory, a motion vector detection means for detecting a motion vector based on a difference between the first frame image signal and the second frame image signal, and a feature of the first frame image signal as a signal pattern Based on the pattern detection means to be detected and the signal pattern detected by the pattern detection means, a shift amount for shifting the first frame image signal for the left eye and for the right eye in order to display a stereoscopic image is determined. A shift amount determining means; a motion vector detected by the motion vector detecting means; and a left determined by the shift amount determining means. Shift selection means for selecting one of the shift amounts for the right eye and the right eye, and selecting the other shift amount for the left eye and right eye determined by the shift amount determination means, and the shift selection means The second shift is performed by shifting the second frame image signal output from the first frame memory in at least one direction of the main scanning direction or the sub-scanning direction based on the one shift amount selected by A first shift register that stores the motion vector selected by the shift selection unit and stores the image signal as an image signal, and the first shift amount that is input based on the one shift amount selected by the shift selection unit. A first shifted image signal obtained by shifting one frame image signal in at least one of the main scanning direction and the sub-scanning direction; The motion vector selected by the selection unit is stored, and the input first frame image signal in the main scanning direction or the sub-scanning direction based on the other shift amount selected by the shift selection unit. A second shift register for storing a third shift image signal shifted in at least one direction; the motion vector; the second shift image signal stored in the first shift register; and the second shift register. An image between the first shift image signal and the second shift image signal in time series based on at least one of the first shift image signals stored in the shift register. Interpolation frame generation means for generating one or more interpolation frame signals, which are signals, and the one or more interpolation frame signals and the third shift image signal are stored. One or more generated by the interpolation frame generation means between a second frame memory, the third shift image signal, and a fourth shift image signal delayed by one frame period from the third shift image signal Selection processing means for storing the one or more interpolation frame signals in the second frame memory so as to output the interpolation frame signal.
上記目的を達成するため、本発明に係る画像表示装置の第5の特徴は、前記シフト選択手段は、外部入力に基づいて、前記第2のシフト画像信号及び前記動きベクトルのうちいずれか一方が前記第1のシフトレジスタに記憶される記憶領域の最大値として最大記憶容量が決定された場合、前記最大記憶容量を越えないように、前記第2のシフト画像信号及び前記動きベクトルのうちいずれか一方を記憶することにある。 In order to achieve the above object, according to a fifth feature of the image display apparatus of the present invention, the shift selection means is configured to determine whether one of the second shift image signal and the motion vector is based on an external input. When the maximum storage capacity is determined as the maximum value of the storage area stored in the first shift register, either the second shift image signal or the motion vector so as not to exceed the maximum storage capacity One is to remember one.
上記目的を達成するため、本発明に係る画像表示装置の第6の特徴は、前記シフト選択手段は、外部入力に基づいて、前記第1のシフト画像信号及び前記動きベクトルのうちいずれか一方が前記第2のシフトレジスタに記憶される記憶領域の最大値として最大記憶容量が決定された場合、前記最大記憶容量を越えないように、前記第1のシフト画像信号及び前記動きベクトルのうちいずれか一方を記憶することにある。 In order to achieve the above object, according to a sixth aspect of the image display device of the present invention, the shift selection unit is configured to determine whether one of the first shift image signal and the motion vector is based on an external input. When the maximum storage capacity is determined as the maximum value of the storage area stored in the second shift register, either the first shift image signal or the motion vector is set so as not to exceed the maximum storage capacity. One is to remember one.
本発明の画像表示装置によれば、装置構成を大規模なものにすることなく、倍速画像と3D画像とを切り替えて出力することができる。 According to the image display device of the present invention, a double-speed image and a 3D image can be switched and output without making the device configuration large-scale.
以下、本発明の実施の形態について図面を参照して説明する。 Hereinafter, embodiments of the present invention will be described with reference to the drawings.
本発明の実施例1では、フレームメモリを共有することにより、倍速画像と3D画像とを切り替えて、60Hzの入力画像信号を120Hzの出力画像信号として出力する画像表示装置を例に挙げて説明する。 In the first embodiment of the present invention, an image display apparatus that switches between a double-speed image and a 3D image by sharing a frame memory and outputs a 60 Hz input image signal as a 120 Hz output image signal will be described as an example. .
<画像表示装置の構成>
図1は、本発明の実施例1である画像表示装置の構成を示した構成図である。なお、図1では、画像信号の流れを実線で示し、制御信号の流れを破線で示している。
<Configuration of image display device>
FIG. 1 is a configuration diagram illustrating a configuration of an image display apparatus that is Embodiment 1 of the present invention. In FIG. 1, the flow of the image signal is indicated by a solid line, and the flow of the control signal is indicated by a broken line.
画像表示装置1は、入力端子11と、フレームメモリ12と、動きベクトル検出部13と、補間フレーム生成部14と、パターン検出部15と、シフト量決定部16と、シフトレジスタ17と、選択処理部18と、フレームメモリ19と、出力端子20と、CPU22と、操作部23とを備える。
The image display apparatus 1 includes an
入力端子11は、外部からフレーム画像を入力するための端子である。
The
フレームメモリ12は、入力端子11から供給された第1のフレーム画像信号を記憶して、1フレーム期間遅延した第2のフレーム画像信号を出力する。
The
動きベクトル検出部13は、フレームメモリ12に記憶された1フレーム前のフレーム画像信号である第2のフレーム画像信号と、新たに入力端子11から供給された第1のフレーム画像信号との差分により動きベクトルを検出する。
The motion
補間フレーム生成部14は、動きベクトル検出部13により検出された動きベクトルと、フレームメモリ12に記憶された第2のフレーム画像信号と、入力端子11から供給された第1のフレーム画像信号の少なくとも一方のフレーム画像信号に基づいて、時系列的に第1のフレーム画像信号と第2のフレーム画像信号との中間の画像信号である補間フレーム信号を生成する。
The interpolation
パターン検出部15は、第2のフレーム画像信号の特徴を信号パターンとして検出する。
The
シフト量決定部16は、パターン検出部15によって検出された信号パターンに基づいて、立体画像を表示するために第1のフレーム画像信号をシフトさせる量を決定する。
Based on the signal pattern detected by the
シフトレジスタ17は、シフト量決定部16によって決定されたシフト量に応じて、入力端子11から供給される第1のフレーム画像信号を主走査方向又は副走査方向の少なくとも一方にシフトさせてシフト画像信号として記憶する。
The
選択処理部18は、モード選択判定部22aにより倍速モードが選択されたと判定した場合、第1のフレーム画像信号と第2のフレーム画像信号との間に補間フレーム生成部14により生成された補間フレーム信号を出力させるように、補間フレーム信号をフレームメモリ19に記憶させる。なお、倍速モードとは入力画像信号のフレームレートを倍速にして出力するモードである。
When the
また、選択処理部18は、モード選択判定部22aにより2D/3Dモードが選択されたと判定した場合、第1のフレーム画像信号とシフトレジスタ17に記憶されたシフト画像信号とを交互に出力させるように、シフト画像信号をフレームメモリ19に記憶させる。なお、2D/3Dモードとは入力画像信号を立体画像信号に変換して出力するモードである。
Further, when the
フレームメモリ19は、フレームレートを変更(ここでは、60Hz→120Hz)して画像を出力するために備えられたメモリであり、補間フレーム信号又はシフト画像信号と、第1のフレーム画像信号とを記憶する。
The
出力端子20は、フレームメモリ19に記憶された補間フレーム信号又はシフト画像信号と、第1のフレーム画像信号とを、120Hzで出力するための出力端子である。
The
操作部23は、操作ボタンを備えており、利用者によってこの操作ボタンが押下操作されることによって、例えば、モードを選択するための操作信号を生成し、生成した操作信号をCPU22へ供給する。
The
CPU22は、画像表示装置の中枢的制御を行う。具体的には、上述したフレームメモリ12と、動きベクトル検出部13と、補間フレーム生成部14と、パターン検出部15と、シフト量決定部16と、シフトレジスタ17と、選択処理部18と、フレームメモリ19とを制御する。また、操作部23から供給される操作信号に基づいて、選択処理部18を切り替えさせる。
The
また、CPU22は、その機能上、モード選択判定部22aを備えており、モード選択判定部22aは、利用者による操作部23の操作に基づいて、倍速モード及び2D/3Dモードのいずれが選択されたかを判定する。
Further, the
<画像表示装置の作用>
本発明の実施例1である画像表示装置1の作用を説明する。
<Operation of image display device>
The operation of the image display apparatus 1 that is Embodiment 1 of the present invention will be described.
本発明の実施例1である画像表示装置1は、入力端子11からフレーム画像が供給される度に、倍速処理及び2D/3D処理のうちいずれか一方の処理を実行する。そのため、各々の処理について以下に詳細に説明する。
The image display device 1 that is Embodiment 1 of the present invention executes either one of the double speed processing and the 2D / 3D processing each time a frame image is supplied from the
≪倍速処理≫
本発明の実施例1である画像表示装置1による倍速処理について説明する。
≪Double speed processing≫
The double speed processing by the image display apparatus 1 which is Embodiment 1 of the present invention will be described.
図2は、本発明の実施例1である画像表示装置1による倍速処理の処理フローを示したフローチャートである。 FIG. 2 is a flowchart showing a processing flow of double speed processing by the image display apparatus 1 according to the first embodiment of the present invention.
図2に示すように、入力端子11から第1のフレーム画像信号が供給されると、CPU22は、倍速が選択されているか否かを判定する(ステップS101)。具体的には、利用者による操作部23の操作に基づいて倍速モードが設定されているか否かを判定する。
As shown in FIG. 2, when the first frame image signal is supplied from the
ステップS101において、倍速が選択されていると判定された場合(YESの場合)、CPU22の指示に基づいて、入力端子11から第1のフレーム画像信号が、少なくともフレームメモリ12と、動きベクトル検出部13と、補間フレーム生成部14と、パターン検出部15と、フレームメモリ19とに供給される(ステップS103)。
If it is determined in step S101 that the double speed is selected (in the case of YES), based on the instruction from the
次に、動きベクトル検出部13は、フレームメモリ12に記憶された1フレーム前のフレーム画像信号である第2のフレーム画像信号と、新たに入力端子11から供給された第1のフレーム画像信号との差分により動きベクトルを検出する(ステップS105)。
Next, the motion
そして、補間フレーム生成部14は、動きベクトル検出部13により検出された動きベクトルと、第1のフレーム画像信号と第2のフレーム画像信号のうち少なくとも一方のフレーム画像信号に基づいて、時系列的に第1のフレーム画像信号と第2のフレーム画像信号との中間の画像信号である補間フレーム信号を生成する(ステップS107)。
Then, the interpolation
次に、選択処理部18は、第1のフレーム画像信号と第2のフレーム画像信号との間に補間フレーム生成部14により生成された補間フレーム信号を出力させるように、補間フレーム信号をフレームメモリ19に記憶させる(ステップS109)。
Next, the
そして、CPU22は、順次入力端子11から供給され、フレームメモリ19に記憶された第1のフレーム画像信号と、第1のフレーム画像信号または第2のフレーム画像信号に基づいて順次生成され、フレームメモリ19に記憶された補間フレーム信号とを交互に、120(Hz)で出力端子20から出力することにより、2倍速の映像を出力する(ステップS111)。
The
≪2D/3D処理≫
本発明の実施例1である画像表示装置1による2D/3D処理について説明する。
≪2D / 3D processing≫
The 2D / 3D processing by the image display apparatus 1 that is Embodiment 1 of the present invention will be described.
図3は、本発明の実施例1である画像表示装置1による2D/3D処理の処理フローを示したフローチャートである。 FIG. 3 is a flowchart showing a processing flow of 2D / 3D processing by the image display apparatus 1 according to the first embodiment of the present invention.
図3に示すように、入力端子11から第1のフレーム画像信号が供給されると、CPU22は、2D/3Dが選択されているか否かを判定する(ステップS201)。具体的には、利用者による操作部23の操作に基づいて2D/3Dモードが設定されているか否かを判定する。
As shown in FIG. 3, when the first frame image signal is supplied from the
ステップS201において、2D/3Dが選択されていると判定された場合(YESの場合)、CPU22の指示に基づいて、入力端子11から第1のフレーム画像信号が、少なくともパターン検出部15と、シフトレジスタ17と、フレームメモリ19とに供給される(ステップS203)。
If it is determined in step S201 that 2D / 3D is selected (in the case of YES), the first frame image signal is shifted from at least the
パターン検出部15は、入力端子11から供給された第1のフレーム画像信号の特徴を信号パターンとして検出する(ステップS205)。具体的には、パターン検出部15は、奥行きや位置のバランスによって特徴付けられたパターンを予め記憶しており、この予め記憶されたパターンと、入力端子11から供給された第1のフレーム画像信号とのマッチングをすることにより、第1のフレーム画像信号の特徴を信号パターンとして検出する。
The
シフト量決定部16は、パターン検出部15によって検出された信号パターンに基づいて、立体画像を表示するために、入力端子11から供給された第1のフレーム画像信号を右目用にシフトさせる量を決定する(ステップS207)。
Based on the signal pattern detected by the
シフト量決定部16は、ステップS207において決定された右目用のシフト量をシフトレジスタ17へ供給する(ステップS209)。
The shift
シフトレジスタ17は、供給された右目用のシフト量に基づいて、入力端子11から供給された第1のフレーム画像信号に対して、主走査方向又は副走査方向の少なくとも一方にシフトさせて右目用のシフト画像信号を生成する(ステップS211)。
Based on the supplied shift amount for the right eye, the
次に、選択処理部18は、入力端子11から供給された第1のフレーム画像信号とシフトレジスタ17に記憶されたシフト画像信号とを交互に出力させるように、右目用のシフト画像信号をフレームメモリ19に記憶させる(ステップS213)。
Next, the
そして、CPU22は、順次入力端子11から供給され、フレームメモリ19に記憶された第1のフレーム画像信号と、第1のフレーム画像信号に基づいて順次生成され、フレームメモリ19に記憶された右目用のシフト画像信号とを交互に、120(Hz)で出力端子20から出力することにより、立体映像を出力する(ステップS215)。
Then, the
以上のように、本発明の実施例1である画像表示装置1によれば、フレームメモリ19を共有して、入力端子11からフレーム画像が供給される度に、倍速処理又は2D/3D処理を実行するので、倍速処理及び2D/3D処理のそれぞれでフレームメモリ19を備える必要がない。そのため、装置構成を大規模なものにすることなく、倍速画像と3D画像とを切り替えて出力することができる。なお、右目用のシフト画像信号を生成する構成として説明したが、どちらかの片目用のシフト画像信号を生成する構成であればよく、左目用のシフト画像信号を生成する構成としてもよいことはいうまでもない。
As described above, according to the image display apparatus 1 that is Embodiment 1 of the present invention, the
本発明の実施例2では、フレームメモリとシフトレジスタとを共有することにより、倍速画像と3D画像とを切り替えて、60Hzの入力信号を120Hzの出力信号として出力する画像表示装置を例に挙げて説明する。 In the second embodiment of the present invention, an image display device that switches between a double-speed image and a 3D image by sharing a frame memory and a shift register and outputs a 60 Hz input signal as a 120 Hz output signal is taken as an example. explain.
<画像表示装置の構成>
図4は、本発明の実施例2である画像表示装置2の構成を示した構成図である。なお、図4では、画像信号の流れを実線で示し、制御信号の流れを破線で示している。
<Configuration of image display device>
FIG. 4 is a configuration diagram showing a configuration of an
画像表示装置2は、入力端子11と、フレームメモリ12と、動きベクトル検出部13と、補間フレーム生成部14と、パターン検出部15と、シフト量決定部16と、フレームメモリ19と、出力端子20と、CPU22と、操作部23と、選択処理部24と、選択処理部25と、シフトレジスタ26と、シフトレジスタ27と、選択処理部28と、選択処理部29とを備える。
The
ここで、本発明の実施例2である画像表示装置2が備える構成のうち、入力端子11と、フレームメモリ12と、動きベクトル検出部13と、補間フレーム生成部14と、パターン検出部15と、シフト量決定部16と、フレームメモリ19と、出力端子20と、CPU22と、操作部23とは、それぞれ本発明の実施例1である画像表示装置1が備えるそれぞれ同一符号が付された構成と同一であるので、説明を省略する。
Here, among the configurations included in the
選択処理部24は、モード選択判定部22aにより倍速モードが選択されたと判定した場合、フレームメモリ12に記憶された1フレーム前の画像信号である第2のフレーム画像信号を選択すると共に、モード選択判定部22aにより2D/3Dモードが選択されたと判定した場合、入力端子11から供給された第1のフレーム画像信号を選択する。
When the
選択処理部25は、モード選択判定部22aにより倍速モードが選択されたと判定した場合、動きベクトル検出部13により検出された動きベクトルを選択すると共に、モード選択判定部22aにより2D/3Dモードが選択されたと判定した場合、シフト量決定部16により決定されたシフト量を選択する。
When the
シフトレジスタ26は、モード選択判定部22aにより倍速モードが選択されたと判定した場合、選択処理部24により選択された第2のフレーム画像信号と、選択処理部25により選択された動きベクトルとを記憶し、モード選択判定部22aにより2D/3Dモードが選択されたと判定した場合、選択処理部24により選択された第1のフレーム画像信号を主走査方向又は副走査方向の少なくとも一方にシフトさせて第1のシフト画像信号を記憶する。
The
シフトレジスタ27は、モード選択判定部22aにより倍速モードが選択されたと判定した場合、供給された第1のフレーム画像信号と、選択処理部25により選択された動きベクトルとを記憶し、モード選択判定部22aにより2D/3Dモードが選択されたと判定した場合、供給された第1のフレーム画像信号を主走査方向又は副走査方向の少なくとも一方にシフトさせて第2のシフト画像信号として記憶する。なお、動きベクトルは、シフトレジスタ26とシフトレジスタ27のうち、少なくとも一方に記憶される構成であればよい。
When the
選択処理部29は、モード選択判定部22aにより倍速モードが選択されたと判定した場合、時系列的に第1のフレーム画像信号と第2のフレーム画像信号との間に、補間フレーム生成部14により生成された補間フレーム信号を出力させるように、補間フレーム信号をフレームメモリ19に記憶させると共に、モード選択判定部22aにより2D/3Dモードが選択されたと判定した場合、シフトレジスタ26により記憶された第1のシフト画像信号とシフトレジスタ27により記憶された第2のシフト画像信号とを交互に出力させるように、第1のシフト画像信号をフレームメモリ19に記憶させる。
When the
選択処理部28は、モード選択判定部22aにより倍速モードが選択されたと判定した場合、入力端子11から供給された第1のフレーム画像信号をフレームメモリ19に記憶させると共に、モード選択判定部22aにより2D/3Dモードが選択されたと判定した場合、シフトレジスタ26により記憶された第1のシフト画像信号とシフトレジスタ27により記憶された第2のシフト画像信号とを交互に出力させるように、第2のシフト画像信号をフレームメモリ19に記憶させる。
When the
<画像表示装置の作用>
本発明の実施例2である画像表示装置2の作用を説明する。
<Operation of image display device>
The operation of the
本発明の実施例2である画像表示装置2は、入力端子11からフレーム画像が供給される度に、倍速処理及び2D/3D処理のうちいずれか一方の処理を実行する。そのため、各々の処理について以下に詳細に説明する。
The
≪倍速処理≫
本発明の実施例2である画像表示装置2による倍速処理について説明する。
≪Double speed processing≫
The double speed processing by the
図5は、本発明の実施例2である画像表示装置2による倍速処理の処理フローを示したフローチャートである。
FIG. 5 is a flowchart showing a processing flow of double speed processing by the
図5に示すように、入力端子11から第1のフレーム画像信号が供給されると、CPU22は、倍速が選択されているか否かを判定する(ステップS301)。具体的には、利用者による操作部23の操作に基づいて倍速モードが設定されているか否かを判定する。
As shown in FIG. 5, when the first frame image signal is supplied from the
ステップS301において、倍速が選択されていると判定された場合(YESの場合)、CPU22の指示に基づいて、入力端子11から供給された第1のフレーム画像信号が、少なくともフレームメモリ12と、動きベクトル検出部13と、パターン検出部15と、選択処理部24と、シフトレジスタ27と、選択処理部28とに供給される(ステップS303)。
If it is determined in step S301 that the double speed has been selected (in the case of YES), the first frame image signal supplied from the
次に、動きベクトル検出部13は、フレームメモリ12に記憶された1フレーム前のフレーム画像信号である第2のフレーム画像信号と、新たに入力端子11から供給された第1のフレーム画像信号との差分により動きベクトルを検出する(ステップS305)。
Next, the motion
次に、選択処理部24は、フレームメモリ12に記憶された1フレーム前のフレーム画像信号である第2のフレーム画像信号を選択し、この選択された第2のフレーム画像信号をシフトレジスタ26に供給する(ステップS307)。
Next, the
そして、選択処理部25は、動きベクトル検出部13により検出された動きベクトルを選択し、この選択された動きベクトルをシフトレジスタ26に供給する(ステップS309)。
Then, the
次に、補間フレーム生成部14は、シフトレジスタ26に記憶された動きベクトルと、シフトレジスタ26に記憶された第2のフレーム画像信号と、シフトレジスタ27に記憶された第1のフレーム画像信号のうち少なくとも一方のフレーム画像信号に基づいて、時系列的に第1のフレーム画像信号と第2のフレーム画像信号との中間の画像信号である補間フレーム信号を生成する(ステップS311)。
Next, the interpolation
そして、選択処理部29は、第1のフレーム画像信号と第2のフレーム画像信号との間に補間フレーム生成部14により生成された補間フレーム信号を出力させるように、補間フレーム生成部14により生成された補間フレーム信号をフレームメモリ19に記憶させる(ステップS313)。
Then, the
そして、CPU22は、順次入力端子11から供給され、選択処理部28により選択されて、フレームメモリ19に記憶された第1のフレーム画像信号と、第1のフレーム画像信号または第2のフレーム画像信号に基づいて順次生成され、フレームメモリ19に記憶された補間フレーム信号とを交互に、120(Hz)で出力端子20から出力することにより、2倍速の映像を出力する。
The
≪2D/3D処理≫
本発明の実施例2である画像表示装置2による2D/3D処理について説明する。
≪2D / 3D processing≫
The 2D / 3D processing by the
図6は、本発明の実施例2である画像表示装置2による2D/3D処理の処理フローを示したフローチャートである。
FIG. 6 is a flowchart showing a processing flow of 2D / 3D processing by the
図6に示すように、入力端子11から第1のフレーム画像信号が供給されると、CPU22は、2D/3Dが選択されているか否かを判定する(ステップS401)。具体的には、利用者による操作部23の操作に基づいて2D/3Dモードが設定されているか否かを判定する。
As shown in FIG. 6, when the first frame image signal is supplied from the
ステップS401において、2D/3Dが選択されていると判定された場合(YESの場合)、CPU22の指示に基づいて、入力端子11から供給された第1のフレーム画像信号が、少なくともパターン検出部15と、選択処理部24と、シフトレジスタ27とに供給される(ステップS403)。
If it is determined in step S401 that 2D / 3D is selected (in the case of YES), at least the first frame image signal supplied from the
パターン検出部15は、入力端子11から供給された第1のフレーム画像信号の特徴を信号パターンとして検出する(ステップS405)。
The
シフト量決定部16は、パターン検出部15によって検出された信号パターンに基づいて、立体画像を表示するために、入力端子11から供給された第1のフレーム画像信号に対して、右目用にシフトさせる量及び左目用にシフトさせる量を決定する(ステップS407)。
The shift
選択処理部25は、ステップS407において決定された右目用のシフト量をシフトレジスタ26へ供給すると共に、左目用のシフト量をシフトレジスタ27へ供給する(ステップS409)。
The
次に、シフトレジスタ26が、供給された右目用のシフト量に基づいて、選択処理部24により選択された第1のフレーム画像信号に対して、主走査方向又は副走査方向の少なくとも一方にシフトさせて、第1のシフト画像信号として右目用のシフト画像信号を生成すると共に、シフトレジスタ27が、供給された左目用のシフト量に基づいて、入力端子11から供給された第1のフレーム画像信号に対して、主走査方向又は副走査方向の少なくとも一方にシフトさせて、第2のシフト画像信号として左目用のシフト画像信号を生成する(ステップS411)。
Next, the
次に、シフトされた右目用のシフト画像信号及び左目用のシフト画像信号を、フレームメモリ19に記憶させる(ステップS413)。具体的には、選択処理部28が、シフトレジスタ27によりシフトされた左目用のシフト画像信号を、フレームメモリ19に記憶させると共に、選択処理部29が、シフトレジスタ26によりシフトされた右目用のシフト画像信号を、フレームメモリ19に記憶させる。
Next, the shifted right-eye shift image signal and left-eye shift image signal are stored in the frame memory 19 (step S413). Specifically, the
そして、CPU22は、第1のフレーム画像信号に基づいて順次生成され、フレームメモリ19に記憶された右目用のシフト画像信号と左目用のシフト画像信号とを交互に、120(Hz)で出力端子20から出力することにより、立体映像を出力する。
Then, the
以上のように、本発明の実施例2である画像表示装置2によれば、シフトレジスタ26と、シフトレジスタ27と、フレームメモリ19とを共有して、入力端子11からフレーム画像が供給される度に、倍速処理及び2D/3D処理のうちいずれか一方の処理を実行するので、倍速処理及び2D/3D処理のそれぞれでシフトレジスタ26と、シフトレジスタ27と、フレームメモリ19とを備える必要がない。そのため、本発明の実施例2である画像表示装置2は、装置構成を大規模なものにすることなく、倍速画像と3D画像とを切り替えて出力することができる。
As described above, according to the
なお、本発明の実施例2である画像表示装置2では、2D/3Dが選択されていると判定された場合、シフトレジスタ26が、第1のフレーム画像信号に対して、主走査方向又は副走査方向の少なくとも一方にシフトさせて、第1のシフト画像信号として右目用のシフト画像信号を生成すると共に、シフトレジスタ27が、第1のフレーム画像信号に対して、主走査方向又は副走査方向の少なくとも一方にシフトさせて、第2のシフト画像信号として左目用のシフト画像信号を生成したが、これに限らず、シフトレジスタ26でのみ第1のシフト画像信号として右目用のシフト画像信号を生成するようにしてもよい。
In the
この場合、フレームメモリ19は、2D/3Dが選択されていると判定されると、入力端子11から供給された第1のフレーム画像信号と、選択処理部29により供給された右目用のシフト画像信号とを記憶し、CPU22が、右目用のシフト画像信号と第1のフレーム画像信号とを交互に、120(Hz)で出力端子20から出力することにより、立体映像を出力するようにしてもよい。
In this case, if the
これにより、選択処理部28を構成から省略することができ、装置構成をより小さくすることができる。
Thereby, the
本発明の実施例2では、フレームメモリとシフトレジスタとを共有することにより、2倍速画像と3D画像とを切り替えて、60Hzの入力信号を120Hzの出力信号として出力する画像表示装置を例に挙げて説明したが、これに限らない。 In the second embodiment of the present invention, an image display device that switches between a double-speed image and a 3D image by sharing a frame memory and a shift register and outputs a 60 Hz input signal as a 120 Hz output signal is taken as an example. However, this is not restrictive.
本発明の実施例3では、フレームメモリとシフトレジスタとを共有することにより、4倍速画像と3D画像とを切り替えて、60Hzの入力信号を240Hzの出力信号として出力する画像表示装置を例に挙げて説明する。 In the third embodiment of the present invention, an image display device that switches between a 4 × speed image and a 3D image by sharing a frame memory and a shift register and outputs a 60 Hz input signal as a 240 Hz output signal is taken as an example. I will explain.
<画像表示装置の構成>
図7は、本発明の実施例3である画像表示装置3の構成を示した構成図である。なお、図7では、画像信号の流れを実線で示し、制御信号の流れを破線で示している。
<Configuration of image display device>
FIG. 7 is a configuration diagram showing a configuration of an image display apparatus 3 that is Embodiment 3 of the present invention. In FIG. 7, the flow of the image signal is indicated by a solid line, and the flow of the control signal is indicated by a broken line.
画像表示装置3は、入力端子11と、フレームメモリ12と、動きベクトル検出部13と、パターン検出部15と、シフト量決定部16と、フレームメモリ19と、出力端子20と、CPU22と、操作部23と、選択処理部24と、選択処理部25と、シフトレジスタ26と、シフトレジスタ27と、選択処理部28と、補間フレーム生成部30と、選択処理部31とを備える。
The image display device 3 includes an
ここで、本発明の実施例3である画像表示装置3が備える構成のうち、補間フレーム生成部30と、選択処理部31以外の構成については、それぞれ本発明の実施例2である画像表示装置2が備えるそれぞれ同一符号が付された構成と同一であるので、説明を省略する。
Here, among the configurations included in the image display device 3 according to the third embodiment of the present invention, the configurations other than the interpolation
補間フレーム生成部30は、動きベクトルと、シフトレジスタ26に記憶された1フレーム前のフレーム画像信号である第2のフレーム画像信号と、シフトレジスタ27に記憶された第1のフレーム画像信号のうち少なくとも一方のフレーム画像信号とに基づいて、時系列的に第1のフレーム画像信号と第2のフレーム画像信号との間に位置する画像信号である3つの補間フレーム信号を生成する。
The interpolation
補間フレーム生成部30は、60Hzの入力信号を240Hzの出力信号として出力するため、補間フレーム生成部30aと、補間フレーム生成部30bと、補間フレーム生成部30cとを備えている。
The interpolation
第2のフレーム画像信号が供給された時点をt0とし、第1のフレーム画像信号が供給された時点をt4とするとし、t0時点からt4時点までの時間をTとすると、補間フレーム生成部30aは、第2のフレーム画像信号と第1のフレーム画像信号のうち少なくとも一方のフレーム画像信号に基づいて、t0時点から(1/4)Tだけ経過した時点であるt1時点における第1の補間フレーム信号を生成する。
Assuming that the time when the second frame image signal is supplied is t0, the time when the first frame image signal is supplied is t4, and the time from the time t0 to the time t4 is T, the
同様に、補間フレーム生成部30bは、t0時点から(1/2)Tだけ経過した時点であるt2時点における第2の補間フレーム信号を生成し、補間フレーム生成部30cは、t0時点から(3/4)Tだけ経過した時点であるt3時点における第3の補間フレーム信号を生成する。
Similarly, the interpolation
選択処理部31は、モード選択判定部22aにより倍速モードが選択されたと判定した場合、第1のフレーム画像信号と第2のフレーム画像信号との間に、補間フレーム生成部30aにより生成された第1の補間フレーム信号と、補間フレーム生成部30bにより生成された第2の補間フレーム信号と、補間フレーム生成部30cにより生成された第3の補間フレーム信号とを、第2のフレーム画像信号、第1の補間フレーム信号、第2の補間フレーム信号、第3の補間フレーム信号、第1のフレーム画像信号の順に出力させるように、第1の補間フレーム信号、第2の補間フレーム信号、及び第3の補間フレーム信号をフレームメモリ19に記憶させる。
When the
また、選択処理部31は、モード選択判定部22aにより2D/3Dモードが選択されたと判定した場合、シフトレジスタ26により記憶された第1のシフト画像信号とシフトレジスタ27により記憶された第2のシフト画像信号とを交互に出力させるように、シフト画像信号をフレームメモリに記憶させる。
When the
以上のように、本発明の実施例3である画像表示装置3によれば、本発明の実施例2である画像表示装置2による効果に加え、4倍速画像と3D画像とを切り替えて、60Hzの入力信号を240Hzの出力信号として出力することができる。
As described above, according to the image display device 3 that is the third embodiment of the present invention, in addition to the effects of the
なお、本発明の実施例3では、フレームメモリとシフトレジスタとを共有することにより、4倍速画像と3D画像とを切り替えて、60Hzの入力信号を240Hzの出力信号として出力する画像表示装置を例に挙げて説明したが、4倍速画像に限らず、何倍でもよい。例えば、N倍速画像を出力するためには、(N−1)個の補間フレーム生成部を備える構成とすればよい。 In the third embodiment of the present invention, an image display device that switches between a quadruple speed image and a 3D image by sharing a frame memory and a shift register and outputs a 60 Hz input signal as a 240 Hz output signal is taken as an example. However, the image is not limited to a quadruple speed image and may be any number of times. For example, in order to output an N × speed image, a configuration including (N−1) interpolation frame generation units may be employed.
本発明の実施例4では、フレームメモリとシフトレジスタとを共有し、60Hzの入力信号に基づいて生成した2倍速3D画像を120Hzの出力信号として出力する画像表示装置を例に挙げて説明する。 In a fourth embodiment of the present invention, an image display device that shares a frame memory and a shift register and outputs a double-speed 3D image generated based on a 60 Hz input signal as a 120 Hz output signal will be described as an example.
<画像表示装置の構成>
図8は、本発明の実施例4である画像表示装置4の構成を示した構成図である。なお、図8では、画像信号の流れを実線で示し、制御信号の流れを破線で示している。
<Configuration of image display device>
FIG. 8 is a configuration diagram showing a configuration of an image display apparatus 4 that is Embodiment 4 of the present invention. In FIG. 8, the flow of the image signal is indicated by a solid line, and the flow of the control signal is indicated by a broken line.
画像表示装置4は、入力端子11と、フレームメモリ12と、動きベクトル検出部13と、パターン検出部15と、シフト量決定部16と、出力端子20と、CPU22と、操作部23と、選択処理部32と、シフト選択部33と、シフトレジスタ34と、シフトレジスタ35と、補間フレーム生成部36と、選択処理部37と、選択処理部38と、フレームメモリ39とを備える。
The image display device 4 includes an
ここで、本発明の実施例4である画像表示装置4が備える構成のうち、入力端子11と、フレームメモリ12と、動きベクトル検出部13と、パターン検出部15と、シフト量決定部16と、出力端子20と、操作部23とは、それぞれ本発明の実施例2である画像表示装置2が備えるそれぞれ同一符号が付された構成と同一であるので、説明を省略する。
Here, among the configurations of the image display device 4 that is Embodiment 4 of the present invention, the
CPU22は、画像表示装置4の中枢的制御を行う。具体的には、上述したフレームメモリ12と、動きベクトル検出部13と、補間フレーム生成部36と、パターン検出部15と、シフト量決定部16と、フレームメモリ39と、選択処理部32と、シフト選択部33と、シフトレジスタ34と、シフトレジスタ35と、選択処理部37と、選択処理部38とを制御する。
The
また、CPU22は、その機能上、モード選択判定部22bを備えており、モード選択判定部22bは、利用者による操作部23の操作に基づいて、倍速モード、2D/3Dモード、及び倍速2D/3Dモードのうちいずれが選択されたかを判定する。
Further, the
選択処理部32は、フレームメモリ12に記憶された第2のフレーム画像信号をシフトレジスタ34へ供給する。
The
シフト選択部33は、動きベクトル検出部13により検出された動きベクトルと、シフト量決定部16により決定された左目用及び右目用のうちいずれか一方のシフト量とを選択すると共に、シフト量決定部16により決定された左目用及び右目用のうち他方のシフト量を選択する。
The
シフトレジスタ34は、シフト選択部33により選択された一方のシフト量に基づいて、フレームメモリ12により出力された第2のフレーム画像信号を主走査方向又は副走査方向の少なくとも一方向にシフトさせて第2のシフト画像信号として記憶すると共に、シフト選択部33により選択された動きベクトルを記憶する。
The
シフトレジスタ35は、シフト選択部33により選択された一方のシフト量に基づいて、入力された第1のフレーム画像信号を主走査方向又は副走査方向の少なくとも一方向にシフトさせた第1のシフト画像信号と、シフト選択部33により選択された動きベクトルとを記憶すると共に、シフト選択部33により選択された他方のシフト量に基づいて、入力された第1のフレーム画像信号を主走査方向又は副走査方向の少なくとも一方向にシフトさせた第3のシフト画像信号を記憶する。
The
補間フレーム生成部36は、動きベクトルと、シフトレジスタ34に記憶された第2のシフト画像信号とシフトレジスタ35に記憶された第1のシフト画像信号とのうち少なくとも一方のシフト画像信号に基づいて、時系列的に第1のシフト画像信号と第2のシフト画像信号との間の画像信号である1以上の補間フレーム信号を生成する。
The interpolation
選択処理部37は、シフトレジスタ35に記憶された第3のシフト画像信号をフレームメモリ39へ供給する。
The
選択処理部38は、第3のシフト画像信号と、この第3のシフト画像信号から1フレーム期間遅延した第4のシフト画像信号との間に補間フレーム生成部36により生成された1以上の補間フレーム信号を出力させるように、1以上の補間フレーム信号をフレームメモリ39に記憶させる。
The
フレームメモリ39は、1以上の補間フレーム信号と第3のシフト画像信号とを記憶する。
The
<画像表示装置の作用>
本発明の実施例4である画像表示装置4の作用を説明する。
<Operation of image display device>
The operation of the image display device 4 that is Embodiment 4 of the present invention will be described.
本発明の実施例4である画像表示装置4は、入力端子11からフレーム画像が供給される度に、倍速2D/3D処理を実行する。なお、倍速処理及び2D/3D処理については、本発明の実施例2である画像表示装置2における倍速処理及び2D/3D処理と同一であるので、説明を省略する。
The image display device 4 that is Embodiment 4 of the present invention executes double speed 2D / 3D processing each time a frame image is supplied from the
≪倍速2D/3D処理≫
本発明の実施例4である画像表示装置4による倍速2D/3D処理について説明する。
≪Double speed 2D / 3D processing≫
The double speed 2D / 3D processing by the image display device 4 that is Embodiment 4 of the present invention will be described.
図9は、本発明の実施例4である画像表示装置4による倍速2D/3D処理の処理フローを示したフローチャートである。 FIG. 9 is a flowchart showing a processing flow of double speed 2D / 3D processing by the image display apparatus 4 which is Embodiment 4 of the present invention.
図9に示すように、入力端子11から第1のフレーム画像信号が供給されると、CPU22は、倍速2D/3Dが選択されているか否かを判定する(ステップS501)。具体的には、利用者による操作部23の操作に基づいて倍速2D/3Dモードが設定されているか否かを判定する。
As shown in FIG. 9, when the first frame image signal is supplied from the
ステップS501において、倍速2D/3Dが選択されていると判定された場合(YESの場合)、CPU22の指示に基づいて、入力端子11から供給された第1のフレーム画像信号が、少なくともフレームメモリ12と、動きベクトル検出部13と、パターン検出部15と、シフトレジスタ35とに供給される(ステップS503)。
If it is determined in step S501 that the double speed 2D / 3D is selected (in the case of YES), the first frame image signal supplied from the
次に、動きベクトル検出部13は、フレームメモリ12に記憶された1フレーム前のフレーム画像信号である第2のフレーム画像信号と、新たに入力端子11から供給された第1のフレーム画像信号との差分により動きベクトルを検出する(ステップS505)。
Next, the motion
次に、パターン検出部15は、入力端子11から供給された第1のフレーム画像信号の特徴を信号パターンとして検出する(ステップS507)。
Next, the
シフト量決定部16は、パターン検出部15によって検出された信号パターンに基づいて、立体画像を表示するために、入力端子11から供給された第1のフレーム画像信号に対して、右目用にシフトさせる量及び左目用にシフトさせる量を決定する(ステップS509)。
The shift
そして、シフト選択部33は、動きベクトル検出部13により検出された動きベクトルと、シフト量決定部16により決定された右目用のシフト量とを選択し、シフトレジスタ34と、シフトレジスタ35とに供給すると共に、シフト量決定部16により決定された左目用のシフト量を選択し、シフトレジスタ35に供給する(ステップS511)。
Then, the
次に、シフトレジスタ35は、シフト選択部33により選択された右目用のシフト量に基づいて、入力端子11から入力された第1のフレーム画像信号を主走査方向又は副走査方向の少なくとも一方向にシフトさせて第1のシフト画像信号(右目用のシフト画像信号)を生成し、生成した第1のシフト画像信号とシフト選択部33により選択された動きベクトルとを補間フレーム生成部36へ供給する(ステップS513)。
Next, the
さらに、シフトレジスタ35は、シフト選択部33により選択された左目用のシフト量に基づいて、入力端子11から入力された第1のフレーム画像信号を主走査方向又は副走査方向の少なくとも一方向にシフトさせた第3のシフト画像信号(左目用のシフト画像信号)を生成し、生成した第3のシフト画像信号を選択処理部37へ供給する(ステップS515)。
Furthermore, the
次に、選択処理部37は、ステップS515において供給された第3のシフト画像信号をフレームメモリ39に記憶させる(ステップS517)。
Next, the
次に、シフトレジスタ34は、シフト選択部33により選択された右目用のシフト量に基づいて、フレームメモリ12により出力された第2のフレーム画像信号を主走査方向又は副走査方向の少なくとも一方向にシフトさせて第2のシフト画像信号(右目用のシフト画像信号)を生成し、この生成された第2のシフト画像信号とシフト選択部33により選択された動きベクトルとを補間フレーム生成部36へ供給する(ステップS519)。
Next, the
そして、補間フレーム生成部36は、シフトレジスタ34に記憶された第2のシフト画像信号と、シフトレジスタ35に記憶された第1のシフト画像信号とのうち少なくとも一方のシフト画像信号と、動きベクトルとに基づいて、時系列的に第1のシフト画像信号と第2のシフト画像信号との間の画像信号である1以上の補間フレーム信号を生成する(ステップS521)。
Then, the interpolation
次に、選択処理部38は、第3のシフト画像信号と、この第3のシフト画像信号から1フレーム期間遅延した第4のシフト画像信号との間に補間フレーム生成部36により生成された補間フレーム信号を出力させるように、補間フレーム信号をフレームメモリ39に記憶させる(ステップS523)。
Next, the
そして、CPU22は、順次入力端子11から供給され、フレームメモリ39に記憶された第3のシフト画像信号と、第1のシフト画像信号または第2のシフト画像信号に基づいて順次生成され、フレームメモリ39に記憶された補間フレーム信号とを交互に、120(Hz)で出力端子20から出力することにより、2倍速かつ立体の映像を倍速3D画像として出力する(ステップS525)。
Then, the
以上のように、本発明の実施例4である画像表示装置4によれば、シフトレジスタ34と、シフトレジスタ35と、フレームメモリ39とを共有して、入力端子11からフレーム画像が供給される度に、倍速処理及び2D/3D処理を実行するので、倍速処理及び2D/3D処理のそれぞれでシフトレジスタ34と、シフトレジスタ35と、フレームメモリ39とを備える必要がない。そのため、本発明の実施例4である画像表示装置4は、装置構成を大規模なものにすることなく、倍速画像かつ立体画像である倍速3D画像を出力することができる。
As described above, according to the image display device 4 that is Embodiment 4 of the present invention, the frame image is supplied from the
なお、本発明の実施例4である画像表示装置4では、シフト選択部33が、動きベクトル検出部13により検出された動きベクトルと、シフト量決定部16により決定された右目用のシフト量とを選択し、シフトレジスタ34と、シフトレジスタ35とに供給すると共に、シフト量決定部16により決定された左目用のシフト量を選択し、シフトレジスタ35に供給したが、これに限らず左右が逆にしてもよい。具体的には、シフト選択部33が、動きベクトル検出部13により検出された動きベクトルと、シフト量決定部16により決定された左目用のシフト量とを選択し、シフトレジスタ34と、シフトレジスタ35とに供給すると共に、シフト量決定部16により決定された右目用のシフト量を選択し、シフトレジスタ35に供給するようにしてもよい。
In the image display device 4 that is Embodiment 4 of the present invention, the
図10は、シフト選択部33によるシフトレジスタ34及びシフトレジスタ35への記憶を模式的に示した図である。
FIG. 10 is a diagram schematically showing storage in the
図10に示すように、シフトレジスタ35は、シフト選択部33により選択された左目用のシフト量に基づいて、第1のフレーム画像の所定の画素35aを8画素分シフトさせて第3のシフト画像信号(左目用のシフト画像信号)の画素35bを得る。
As shown in FIG. 10, the
また、シフトレジスタ35は、シフト選択部33により選択された右目用のシフト量に基づいて、第1のフレーム画像の所定の画素35aを8画素分シフトさせて第1のシフト画像信号(右目用のシフト画像信号)の画素35cを得て、さらに、動きベクトルに基づいて、4画素分シフトさせて補間フレーム画像の画素35dを得る。
Further, the
一方、シフトレジスタ34は、シフト選択部33により選択された右目用のシフト量に基づいて、第2のフレーム画像の所定の画素34aを8画素分シフトさせて第2のシフト画像信号(右目用のシフト画像信号)の画素34cを得て、さらに、動きベクトルに基づいて、4画素分シフトさせて補間フレーム画像の画素34dを得る。
On the other hand, the
図11は、シフトレジスタ34の記憶領域を模式的に説明した図である。
FIG. 11 is a diagram schematically illustrating the storage area of the
図11に示すように、利用者による操作部23の操作に基づいて、第2のシフト画像信号及び動きベクトルのうちいずれか一方がシフトレジスタ34に記憶される記憶領域の最大値として最大記憶容量が決定される。
As illustrated in FIG. 11, based on the operation of the
そして、この最大記憶容量が決定された場合、シフト選択部33は、最大記憶容量を越えないように、第2のシフト画像信号及び動きベクトルのうちいずれか一方を記憶する。
When the maximum storage capacity is determined, the
図11(a)に示すように、倍速処理用に最大記憶容量が決定された場合、倍速処理用領域を最大限利用して動きベクトルを記憶する。このとき、図11(b)に示す記憶領域が倍速処理用の最大記憶容量となる。 As shown in FIG. 11A, when the maximum storage capacity is determined for the double speed processing, the motion vector is stored by making the maximum use of the double speed processing area. At this time, the storage area shown in FIG. 11B is the maximum storage capacity for double speed processing.
一方、図11(d)に示すように、2D/3D処理用に最大記憶容量が決定された場合、倍速処理用領域を最大限利用して第2のシフト画像信号を記憶する。このとき、図11(c)に示す記憶領域が2D/3D処理用の最大記憶容量となる。 On the other hand, as shown in FIG. 11D, when the maximum storage capacity is determined for 2D / 3D processing, the second shift image signal is stored by making the maximum use of the double speed processing area. At this time, the storage area shown in FIG. 11C is the maximum storage capacity for 2D / 3D processing.
このように、シフト選択部33は、外部入力に基づいて、第2のシフト画像信号及び動きベクトルのうちいずれか一方がシフトレジスタ34に記憶される記憶領域の最大値として最大記憶容量が決定された場合、最大記憶容量を越えないように、第2のシフト画像信号及び動きベクトルのうちいずれか一方を記憶するので、さらに、シフトレジスタ34の記憶領域を効率的に利用することができる。
As described above, the
また、シフトレジスタ35についても同様に、シフト選択部33は、外部入力に基づいて、第1のシフト画像信号及び動きベクトルのうちいずれか一方が第2のシフトレジスタに記憶される記憶領域の最大値として最大記憶容量が決定された場合、最大記憶容量を越えないように、第1のシフト画像信号及び動きベクトルのうちいずれか一方を記憶する。
Similarly, with respect to the
本発明の実施例4では、フレームメモリとシフトレジスタとを共有し、60Hzの入力信号に基づいて生成した2倍速3D画像を120Hzの出力信号として出力する画像表示装置を例に挙げて説明したが、これに限らない。 In the fourth embodiment of the present invention, an image display device that shares a frame memory and a shift register and outputs a double speed 3D image generated based on a 60 Hz input signal as an output signal of 120 Hz has been described as an example. Not limited to this.
本発明の実施例5では、フレームメモリとシフトレジスタとを共有し、60Hzの入力信号に基づいて生成した4倍速3D画像を240Hzの出力信号として出力する画像表示装置を例に挙げて説明する。 In the fifth embodiment of the present invention, an image display apparatus that shares a frame memory and a shift register and outputs a quadruple speed 3D image generated based on a 60 Hz input signal as an output signal of 240 Hz will be described as an example.
<画像表示装置の構成>
図12は、本発明の実施例5である画像表示装置5の構成を示した構成図である。なお、図12では、画像信号の流れを実線で示し、制御信号の流れを破線で示している。
<Configuration of image display device>
FIG. 12 is a configuration diagram showing a configuration of an image display device 5 that is Embodiment 5 of the present invention. In FIG. 12, the flow of the image signal is indicated by a solid line, and the flow of the control signal is indicated by a broken line.
画像表示装置5は、入力端子11と、フレームメモリ12と、動きベクトル検出部13と、パターン検出部15と、シフト量決定部16と、出力端子20と、CPU22と、操作部23と、選択処理部32と、シフト選択部33と、シフトレジスタ43と、シフトレジスタ35と、選択処理部37と、フレームメモリ39と、補間フレーム生成部40と、選択処理部41とを備える。
The image display device 5 includes an
ここで、本発明の実施例5である画像表示装置5が備える構成のうち、入力端子11と、フレームメモリ12と、動きベクトル検出部13と、パターン検出部15と、シフト量決定部16と、フレームメモリ39と、出力端子20と、CPU22と、操作部23と、選択処理部32と、シフトレジスタ35と、選択処理部37とは、それぞれ本発明の実施例4である画像表示装置4が備えるそれぞれ同一符号が付された構成と同一であるので、説明を省略する。
Here, among the configurations included in the image display device 5 that is Embodiment 5 of the present invention, the
シフトレジスタ43は、シフト選択部33により選択された一方のシフト量に基づいて、フレームメモリ12により出力された第2のフレーム画像信号を主走査方向又は副走査方向の少なくとも一方向にシフトさせて第2のシフト画像信号として記憶すると共に、シフト選択部33により選択された動きベクトルを記憶する。また、シフトレジスタ43は、シフト選択部33により選択された他方のシフト量に基づいて、フレームメモリ12により出力された第2のフレーム画像信号を主走査方向又は副走査方向の少なくとも一方向にシフトさせて第4のシフト画像信号として記憶すると共に、シフト選択部33により選択された動きベクトルを記憶する。
The
補間フレーム生成部40は、動きベクトルと、シフトレジスタ43に記憶された第2のシフト画像信号とシフトレジスタ35に記憶された第1のシフト画像信号とのうち少なくとも一方のシフト画像信号に基づいて、時系列的に第1のシフト画像信号と第2のシフト画像信号との間の画像信号である2つの補間フレーム信号とを生成すると共に、シフトレジスタ43に記憶された第4のシフト画像信号とシフトレジスタ35に記憶された第3のシフト画像信号とのうち少なくとも一方のシフト画像信号に基づいて、時系列的に第3のシフト画像信号と第4のシフト画像信号との間の画像信号である1つの補間フレーム信号を生成する。
The interpolation
補間フレーム生成部40は、60Hzの入力信号を240Hzの出力信号として出力するため、補間フレーム生成部40aと、補間フレーム生成部40bと、補間フレーム生成部40cとを備えている。
The interpolation
第2のシフト画像信号が供給された時点をt0とし、第1のシフト画像信号(右目用のシフト画像信号)が供給された時点をt4とし、t0時点からt4時点までの時間をTとすると、補間フレーム生成部40aは、第2のシフト画像信号と第1のシフト画像信号のうち少なくとも一方のシフト画像信号に基づいて、t0時点から(1/4)Tだけ経過した時点であるt1時点における第1の補間フレーム信号(右目用のシフト画像信号)を生成する。 The time point at which the second shift image signal is supplied is t0, the time point at which the first shift image signal (right-eye shift image signal) is supplied is t4, and the time from the time point t0 to the time point t4 is T. The interpolation frame generation unit 40a, based on at least one of the second shift image signal and the first shift image signal, is a time point t1 that is (1/4) T elapsed from the time point t0. The first interpolation frame signal (shifted image signal for the right eye) is generated.
補間フレーム生成部40bは、第4のシフト画像信号と第3のシフト画像信号とのうち少なくとも一方のシフト画像信号に基づいて、t0時点から(1/2)Tだけ経過した時点であるt1時点における第2の補間フレーム信号(左目用のシフト画像信号)を生成する。 The interpolated frame generation unit 40b is based on at least one of the fourth shift image signal and the third shift image signal, and is the time point t1 that is a time point that has passed (1/2) T from the time point t0. 2nd interpolation frame signal (shifted image signal for the left eye) is generated.
補間フレーム生成部40cは、第2のシフト画像信号と第1のシフト画像信号のうち少なくとも一方のシフト画像信号に基づいて、t0時点から(3/4)Tだけ経過した時点であるt3時点における第3の補間フレーム信号(右目用のシフト画像信号)を生成する。 The interpolation frame generation unit 40c is based on at least one shift image signal of the second shift image signal and the first shift image signal, at a time point t3 that is a time point when (3/4) T has elapsed from the time point t0. A third interpolation frame signal (shifted image signal for the right eye) is generated.
選択処理部41は、モード選択判定部22aにより倍速2D/3Dモードが選択されたと判定した場合、第3のシフト画像信号と、第3のシフト画像信号から1フレーム期間遅延した第4のシフト画像信号との間に、補間フレーム生成部40aにより生成された第1の補間フレーム信号と、補間フレーム生成部40bにより生成された第2の補間フレーム信号と、補間フレーム生成部40cにより生成された第3の補間フレーム信号とを、第4のシフト画像信号、第1の補間フレーム信号、第2の補間フレーム信号、第3の補間フレーム信号、第3のシフト画像信号の順に出力させるように、第1の補間フレーム信号、第2の補間フレーム信号、及び第3の補間フレーム信号をフレームメモリ39に記憶させる。
If the
以上のように、本発明の実施例5である画像表示装置5によれば、本発明の実施例4である画像表示装置4による効果に加え、4倍速画像かつ立体画像である4倍速3D画像を出力することができる。 As described above, according to the image display device 5 that is the fifth embodiment of the present invention, in addition to the effects of the image display device 4 that is the fourth embodiment of the present invention, a quadruple-speed image and a quadruple-speed 3D image that is a stereoscopic image. Can be output.
なお、本発明の実施例5では、フレームメモリとシフトレジスタとを共有し、60Hzの入力信号に基づいて生成した4倍速3D画像を240Hzの出力信号として出力する画像表示装置を例に挙げて説明したが、4倍速画像に限らず、何倍でもよい。例えば、N倍速画像を出力するためには、(N−1)個の補間フレーム生成部を備える構成とすればよい。 In the fifth embodiment of the present invention, an image display apparatus that shares a frame memory and a shift register and outputs a quadruple speed 3D image generated based on a 60 Hz input signal as an output signal of 240 Hz will be described as an example. However, it is not limited to a 4 × speed image, and any number of times may be used. For example, in order to output an N × speed image, a configuration including (N−1) interpolation frame generation units may be employed.
1,2,3,4,5…画像表示装置
11…入力端子
12,19…フレームメモリ
13…動きベクトル検出部
14,30,30a,30b,30c,36,40,40a,40b,40c…補間フレーム生成部
15…パターン検出部
16…シフト量決定部
17,26,27,34,35…シフトレジスタ
18,24,25,28,29,31,32,37,38,41…選択処理部
33…シフト選択部
20…出力端子
22…CPU
22a,22b…モード選択判定部
23…操作部
DESCRIPTION OF
22a, 22b ... mode
Claims (6)
前記第1のフレーム画像信号と、前記第2のフレーム画像信号との差分により動きベクトルを検出する動きベクトル検出手段と、
前記動きベクトル検出手段により検出された動きベクトルと、前記第1のフレーム画像信号と、前記第2のフレーム画像信号のうち少なくとも一方のフレーム画像信号に基づいて、時系列的に前記第1のフレーム画像信号と前記第2のフレーム画像信号との間の画像信号である1以上の補間フレーム信号を生成する補間フレーム生成手段と、
前記第1のフレーム画像信号の特徴を信号パターンとして検出するパターン検出手段と、
前記パターン検出手段によって検出された信号パターンに基づいて、立体画像を表示するために前記第1のフレーム画像信号をシフトさせる量を決定するシフト量決定手段と、
前記シフト量決定手段によって決定されたシフト量に応じて、前記第1のフレーム画像信号を主走査方向又は副走査方向の少なくとも一方にシフトさせてシフト画像信号として記憶するシフトレジスタと、
外部入力に基づいて、前記第1のフレーム画像信号のフレームレートを倍速にして出力する倍速モード及び前記第1のフレーム画像信号を立体画像信号に変換して出力する2D/3Dモードのいずれが選択されたかを判定するモード選択判定手段と、
前記1以上の補間フレーム信号又は前記シフト画像信号と、前記第1のフレーム画像信号とを記憶する第2のフレームメモリと、
前記モード選択判定手段により倍速モードが選択されたと判定した場合、前記第1のフレーム画像信号と前記第2のフレーム画像信号との間に前記補間フレーム生成手段により生成された1以上の補間フレーム信号を出力させるように、前記1以上の補間フレーム信号を前記第2のフレームメモリに記憶させると共に、前記モード選択判定手段により2D/3Dモードが選択されたと判定した場合、前記第1のフレーム画像信号と前記シフトレジスタに記憶されたシフト画像信号とを交互に出力させるように、前記シフト画像信号を前記第2のフレームメモリに記憶させる選択処理手段と、
を備えたことを特徴とする画像表示装置。 A first frame memory for storing the input first frame image signal and outputting a second frame image signal delayed by one frame period;
Motion vector detection means for detecting a motion vector based on a difference between the first frame image signal and the second frame image signal;
Based on at least one frame image signal of the motion vector detected by the motion vector detection means, the first frame image signal, and the second frame image signal, the first frame in time series. Interpolation frame generation means for generating one or more interpolation frame signals that are image signals between the image signal and the second frame image signal;
Pattern detecting means for detecting a characteristic of the first frame image signal as a signal pattern;
Shift amount determining means for determining an amount of shifting the first frame image signal to display a stereoscopic image based on the signal pattern detected by the pattern detecting means;
A shift register that shifts the first frame image signal in at least one of the main scanning direction and the sub-scanning direction according to the shift amount determined by the shift amount determining means, and stores it as a shifted image signal;
Based on an external input, either a double speed mode for outputting the frame rate of the first frame image signal at a double speed or a 2D / 3D mode for converting the first frame image signal to a stereoscopic image signal and selecting it is selected. Mode selection determination means for determining whether or not
A second frame memory for storing the one or more interpolated frame signals or the shifted image signal and the first frame image signal;
One or more interpolation frame signals generated by the interpolation frame generation unit between the first frame image signal and the second frame image signal when the mode selection determination unit determines that the double speed mode has been selected. The one or more interpolated frame signals are stored in the second frame memory, and when the 2D / 3D mode is selected by the mode selection determining means, the first frame image signal Selection processing means for storing the shift image signal in the second frame memory so as to alternately output the shift image signal stored in the shift register.
An image display device comprising:
前記第1のフレーム画像信号と、前記第2のフレーム画像信号との差分により動きベクトルを検出する動きベクトル検出手段と、
前記第1のフレーム画像信号の特徴を信号パターンとして検出するパターン検出手段と、
前記パターン検出手段によって検出された信号パターンに基づいて、立体画像を表示するために前記第1のフレーム画像信号をシフトさせる量を決定するシフト量決定手段と、
外部入力に基づいて、前記第1のフレーム画像信号のフレームレートを倍速にして出力する倍速モード及び前記第1のフレーム画像信号を立体画像信号に変換して出力する2D/3Dモードのいずれが選択されたかを判定するモード選択判定手段と、
前記モード選択判定手段により倍速モードが選択されたと判定した場合、前記第1のフレームメモリに記憶された前記第2のフレーム画像信号を選択すると共に、前記モード選択判定手段により2D/3Dモードが選択されたと判定した場合、前記第1のフレーム画像信号を選択する第1の選択処理手段と、
前記モード選択判定手段により倍速モードが選択されたと判定した場合、前記動きベクトル検出手段により検出された動きベクトルを選択すると共に、前記モード選択判定手段により2D/3Dモードが選択されたと判定した場合、前記シフト量決定手段により決定されたシフト量を選択する第2の選択処理手段と、
前記モード選択判定手段により倍速モードが選択されたと判定した場合、前記第1の選択処理手段により選択された前記第2のフレーム画像信号と、前記第2の選択処理手段により選択された動きベクトルとを記憶し、前記モード選択判定手段により2D/3Dモードが選択されたと判定した場合、前記第1の選択処理手段により選択された前記第1のフレーム画像信号を主走査方向又は副走査方向の少なくとも一方にシフトさせてシフト画像信号として記憶する第1のシフトレジスタと、
前記モード選択判定手段により倍速モードが選択されたと判定した場合、前記第1のフレーム画像信号を記憶する第2のシフトレジスタと、
前記モード選択判定手段により倍速モードが選択されたと判定した場合、前記動きベクトルと、前記第1のシフトレジスタに記憶された第2のフレーム画像信号と、前記第2のシフトレジスタに記憶された第1のフレーム画像信号のうち少なくとも一方のフレーム画像信号に基づいて、時系列的に前記第1のフレーム画像信号と前記第2のフレーム画像信号との間の画像信号である1以上の補間フレーム信号を生成する補間フレーム生成手段と、
前記1以上の補間フレーム信号又は前記シフト画像信号と、前記第1のフレーム画像信号とを記憶する第2のフレームメモリと、
前記モード選択判定手段により倍速モードが選択されたと判定した場合、前記第1のフレーム画像信号と前記第2のフレーム画像信号との間に前記補間フレーム生成手段により生成された1以上の補間フレーム信号を出力させるように、前記1以上の補間フレーム信号を前記第2のフレームメモリに記憶させると共に、前記モード選択判定手段により2D/3Dモードが選択されたと判定した場合、前記第2のフレーム画像信号と前記第1のシフトレジスタにより記憶されたシフト画像信号とを交互に出力させるように、前記シフト画像信号を第2のフレームメモリに記憶させる第3の選択処理手段と、
を備えたことを特徴とする画像表示装置。 A first frame memory for storing the input first frame image signal and outputting a second frame image signal delayed by one frame period;
Motion vector detection means for detecting a motion vector based on a difference between the first frame image signal and the second frame image signal;
Pattern detecting means for detecting a characteristic of the first frame image signal as a signal pattern;
Shift amount determining means for determining an amount of shifting the first frame image signal to display a stereoscopic image based on the signal pattern detected by the pattern detecting means;
Based on an external input, either a double speed mode for outputting the frame rate of the first frame image signal at a double speed or a 2D / 3D mode for converting the first frame image signal to a stereoscopic image signal and selecting it is selected. Mode selection determination means for determining whether or not
When it is determined that the double speed mode is selected by the mode selection determining means, the second frame image signal stored in the first frame memory is selected, and the 2D / 3D mode is selected by the mode selection determining means. A first selection processing means for selecting the first frame image signal when it is determined that
When it is determined that the double speed mode has been selected by the mode selection determining means, when the motion vector detected by the motion vector detecting means is selected, and when the 2D / 3D mode is determined by the mode selection determining means, Second selection processing means for selecting the shift amount determined by the shift amount determination means;
When it is determined that the double speed mode has been selected by the mode selection determination means, the second frame image signal selected by the first selection processing means, and the motion vector selected by the second selection processing means And when the 2D / 3D mode is determined to be selected by the mode selection determining means, the first frame image signal selected by the first selection processing means is at least in the main scanning direction or the sub-scanning direction. A first shift register that shifts one side and stores it as a shifted image signal;
A second shift register for storing the first frame image signal, when it is determined that the double speed mode is selected by the mode selection determining means;
When it is determined that the double speed mode has been selected by the mode selection determining means, the motion vector, the second frame image signal stored in the first shift register, and the second frame image signal stored in the second shift register. One or more interpolated frame signals that are image signals between the first frame image signal and the second frame image signal in time series based on at least one frame image signal of one frame image signal Interpolating frame generating means for generating
A second frame memory for storing the one or more interpolated frame signals or the shifted image signal and the first frame image signal;
One or more interpolation frame signals generated by the interpolation frame generation unit between the first frame image signal and the second frame image signal when the mode selection determination unit determines that the double speed mode has been selected. The one or more interpolated frame signals are stored in the second frame memory so that the second frame image signal is output when the mode selection determining unit determines that the 2D / 3D mode is selected. And a third selection processing means for storing the shift image signal in a second frame memory so as to alternately output the shift image signal stored by the first shift register.
An image display device comprising:
前記モード選択判定手段により倍速モードが選択されたと判定した場合、前記第1の選択処理手段により選択された前記第2のフレーム画像信号と、前記第2の選択処理手段により選択された動きベクトルとを記憶し、前記モード選択判定手段により2D/3Dモードが選択されたと判定した場合、前記第1の選択処理手段により選択された前記第1のフレーム画像信号を主走査方向又は副走査方向の少なくとも一方にシフトさせて第1のシフト画像信号として記憶し、
前記第2のシフトレジスタは、
前記モード選択判定手段により倍速モードが選択されたと判定した場合、前記第1のフレーム画像信号を記憶し、前記モード選択判定手段により2D/3Dモードが選択されたと判定した場合、供給された前記第1のフレーム画像信号を主走査方向又は副走査方向の少なくとも一方にシフトさせて第2のシフト画像信号として記憶し、
前記第2のフレームメモリは、
前記1以上の補間フレーム信号、又は前記第1のシフト画像信号若しくは第2のシフト画像信号と、前記第1のフレーム画像信号とを記憶し、
前記第3の選択処理手段は、
前記モード選択判定手段により倍速モードが選択されたと判定した場合、前記第1のフレーム画像信号と前記第1のフレーム画像信号との間に前記補間フレーム生成手段により生成された1以上の補間フレーム信号を出力させるように、前記1以上の補間フレーム信号を前記第2のフレームメモリに記憶させると共に、前記モード選択判定手段により2D/3Dモードが選択されたと判定した場合、前記第1のシフトレジスタにより記憶された第1のシフト画像信号と前記第2のシフトレジスタにより記憶された第2のシフト画像信号とを交互に出力させるように、前記第1のシフト画像信号を第2のフレームメモリに記憶させ、
前記モード選択判定手段により倍速モードが選択されたと判定した場合、外部から供給された前記第1のフレーム画像信号を前記第2のフレームメモリに記憶させると共に、前記モード選択判定手段により2D/3Dモードが選択されたと判定した場合、前記第1のシフトレジスタにより記憶された第1のシフト画像信号と前記第2のシフトレジスタにより記憶された第2のシフト画像信号とを交互に出力させるように、前記第2のシフト画像信号を前記第2のフレームメモリに記憶させる第4の選択処理手段を、更に備える
ことを特徴とする請求項2記載の画像表示装置。 The first shift register includes:
When it is determined that the double speed mode has been selected by the mode selection determination means, the second frame image signal selected by the first selection processing means, and the motion vector selected by the second selection processing means And when the 2D / 3D mode is determined to be selected by the mode selection determining means, the first frame image signal selected by the first selection processing means is at least in the main scanning direction or the sub-scanning direction. Shifted to one side and stored as the first shifted image signal,
The second shift register is
When it is determined that the double speed mode is selected by the mode selection determining means, the first frame image signal is stored, and when it is determined that the 2D / 3D mode is selected by the mode selection determining means, the supplied first Shifting one frame image signal in at least one of the main scanning direction and the sub-scanning direction and storing it as a second shifted image signal;
The second frame memory is
Storing the one or more interpolated frame signals, or the first shifted image signal or the second shifted image signal, and the first frame image signal;
The third selection processing means includes
One or more interpolation frame signals generated by the interpolation frame generation unit between the first frame image signal and the first frame image signal when the mode selection determination unit determines that the double speed mode has been selected. The one or more interpolated frame signals are stored in the second frame memory so that the 2D / 3D mode is selected by the mode selection determining means. The first shift image signal is stored in the second frame memory so as to alternately output the stored first shift image signal and the second shift image signal stored by the second shift register. Let
When it is determined that the double speed mode is selected by the mode selection determining means, the first frame image signal supplied from the outside is stored in the second frame memory, and the 2D / 3D mode is stored by the mode selection determining means. So that the first shift image signal stored by the first shift register and the second shift image signal stored by the second shift register are alternately output, The image display device according to claim 2, further comprising fourth selection processing means for storing the second shift image signal in the second frame memory.
前記第1のフレーム画像信号と、前記第2のフレーム画像信号との差分により動きベクトルを検出する動きベクトル検出手段と、
前記第1のフレーム画像信号の特徴を信号パターンとして検出するパターン検出手段と、
前記パターン検出手段によって検出された信号パターンに基づいて、立体画像を表示するために前記第1のフレーム画像信号を左目用及び右目用にそれぞれシフトさせるシフト量を決定するシフト量決定手段と、
前記動きベクトル検出手段により検出された動きベクトルと、前記シフト量決定手段により決定された左目用及び右目用のうちいずれか一方のシフト量とを選択すると共に、前記シフト量決定手段により決定された左目用及び右目用のうち他方のシフト量を選択するシフト選択手段と、
前記シフト選択手段により選択された前記一方のシフト量に基づいて、前記第1のフレームメモリにより出力された前記第2のフレーム画像信号を主走査方向又は副走査方向の少なくとも一方向にシフトさせて第2のシフト画像信号として記憶すると共に、前記シフト選択手段により選択された前記動きベクトルを記憶する第1のシフトレジスタと、
前記シフト選択手段により選択された前記一方のシフト量に基づいて、入力された前記第1のフレーム画像信号を主走査方向又は副走査方向の少なくとも一方向にシフトさせた第1のシフト画像信号と、前記シフト選択手段により選択された動きベクトルとを記憶すると共に、前記シフト選択手段により選択された前記他方のシフト量に基づいて、入力された前記第1のフレーム画像信号を主走査方向又は副走査方向の少なくとも一方向にシフトさせた第3のシフト画像信号を記憶する第2のシフトレジスタと、
前記動きベクトルと、前記第1のシフトレジスタに記憶された前記第2のシフト画像信号と前記第2のシフトレジスタに記憶された前記第1のシフト画像信号とのうち少なくとも一方のシフト画像信号に基づいて、時系列的に前記第1のシフト画像信号と前記第2のシフト画像信号との間の画像信号である1以上の補間フレーム信号を生成する補間フレーム生成手段と、
前記1以上の補間フレーム信号と前記第3のシフト画像信号とを記憶する第2のフレームメモリと、
前記第3のシフト画像信号と、この第3のシフト画像信号から1フレーム期間遅延した第4のシフト画像信号との間に前記補間フレーム生成手段により生成された1以上の補間フレーム信号を出力させるように、前記1以上の補間フレーム信号を前記第2のフレームメモリに記憶させる選択処理手段と、
を備えたことを特徴とする画像表示装置。 A first frame memory for storing the input first frame image signal and outputting a second frame image signal delayed by one frame period;
Motion vector detection means for detecting a motion vector based on a difference between the first frame image signal and the second frame image signal;
Pattern detecting means for detecting a characteristic of the first frame image signal as a signal pattern;
Shift amount determining means for determining a shift amount for shifting the first frame image signal for the left eye and for the right eye in order to display a stereoscopic image based on the signal pattern detected by the pattern detection means;
The motion vector detected by the motion vector detection means and the shift amount for either the left eye or right eye determined by the shift amount determination means are selected and determined by the shift amount determination means Shift selecting means for selecting the shift amount of the other of the left eye and the right eye;
Based on the one shift amount selected by the shift selection means, the second frame image signal output from the first frame memory is shifted in at least one of the main scanning direction and the sub-scanning direction. A first shift register that stores the motion vector selected by the shift selection means and stores it as a second shift image signal;
A first shifted image signal obtained by shifting the input first frame image signal in at least one direction of the main scanning direction or the sub-scanning direction based on the one shift amount selected by the shift selection unit; , The motion vector selected by the shift selection means, and the input first frame image signal based on the other shift amount selected by the shift selection means. A second shift register for storing a third shift image signal shifted in at least one direction of the scanning direction;
At least one shift image signal among the motion vector, the second shift image signal stored in the first shift register, and the first shift image signal stored in the second shift register. An interpolated frame generating means for generating one or more interpolated frame signals that are image signals between the first shifted image signal and the second shifted image signal in time series;
A second frame memory for storing the one or more interpolated frame signals and the third shifted image signal;
One or more interpolation frame signals generated by the interpolation frame generation unit are output between the third shift image signal and a fourth shift image signal delayed from the third shift image signal by one frame period. Selection processing means for storing the one or more interpolated frame signals in the second frame memory,
An image display device comprising:
外部入力に基づいて、前記第2のシフト画像信号及び前記動きベクトルのうちいずれか一方が前記第1のシフトレジスタに記憶される記憶領域の最大値として最大記憶容量が決定された場合、前記最大記憶容量を越えないように、前記第2のシフト画像信号及び前記動きベクトルのうちいずれか一方を記憶する
ことを特徴とする請求項4記載の画像表示装置。 The shift selection means includes
When a maximum storage capacity is determined as a maximum value of a storage area in which one of the second shift image signal and the motion vector is stored in the first shift register based on an external input, the maximum The image display apparatus according to claim 4, wherein either one of the second shift image signal and the motion vector is stored so as not to exceed a storage capacity.
外部入力に基づいて、前記第1のシフト画像信号及び前記動きベクトルのうちいずれか一方が前記第2のシフトレジスタに記憶される記憶領域の最大値として最大記憶容量が決定された場合、前記最大記憶容量を越えないように、前記第1のシフト画像信号及び前記動きベクトルのうちいずれか一方を記憶する
ことを特徴とする請求項4記載の画像表示装置。 The shift selection means includes
When a maximum storage capacity is determined as a maximum value of a storage area in which one of the first shift image signal and the motion vector is stored in the second shift register based on an external input, the maximum The image display apparatus according to claim 4, wherein either one of the first shift image signal and the motion vector is stored so as not to exceed a storage capacity.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2010010176A JP5370175B2 (en) | 2009-07-16 | 2010-01-20 | Image display device |
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2009167607 | 2009-07-16 | ||
| JP2009167607 | 2009-07-16 | ||
| JP2010010176A JP5370175B2 (en) | 2009-07-16 | 2010-01-20 | Image display device |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2011039475A JP2011039475A (en) | 2011-02-24 |
| JP5370175B2 true JP5370175B2 (en) | 2013-12-18 |
Family
ID=43767273
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2010010176A Expired - Fee Related JP5370175B2 (en) | 2009-07-16 | 2010-01-20 | Image display device |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP5370175B2 (en) |
Families Citing this family (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2012098974A1 (en) * | 2011-01-19 | 2012-07-26 | シャープ株式会社 | Image processing device and method, and image display device and method |
| WO2012098972A1 (en) * | 2011-01-19 | 2012-07-26 | シャープ株式会社 | Image processing device and method, and image display device and method |
Family Cites Families (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH01316092A (en) * | 1988-06-16 | 1989-12-20 | Matsushita Electric Ind Co Ltd | Three-dimemsional display device |
| JP3091629B2 (en) * | 1994-04-12 | 2000-09-25 | 三洋電機株式会社 | 3D image display device |
| JPH09298761A (en) * | 1996-03-04 | 1997-11-18 | Sanyo Electric Co Ltd | Stereoscopic image display device |
| JP3540626B2 (en) * | 1998-09-17 | 2004-07-07 | 三洋電機株式会社 | Apparatus and method for converting 2D image to 3D image |
| JP2003069961A (en) * | 2001-08-27 | 2003-03-07 | Seiko Epson Corp | Frame rate conversion |
-
2010
- 2010-01-20 JP JP2010010176A patent/JP5370175B2/en not_active Expired - Fee Related
Also Published As
| Publication number | Publication date |
|---|---|
| JP2011039475A (en) | 2011-02-24 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US20200372607A1 (en) | Video display system | |
| JP4251952B2 (en) | Stereoscopic image display apparatus and stereoscopic image display method | |
| JP4691697B2 (en) | Electronic device and program | |
| JP4994622B2 (en) | Method for generating stereoscopic video signal and scaling method suitable for the method | |
| JP5663857B2 (en) | Image display device and image display method | |
| JP5160741B2 (en) | 3D graphic processing apparatus and stereoscopic image display apparatus using the same | |
| KR20120063984A (en) | Multi-viewpoint image generating method and apparatus thereof | |
| JP5370175B2 (en) | Image display device | |
| JP2012053165A (en) | Information processing device, program, and information processing method | |
| JP5771754B2 (en) | Stereoscopic endoscope system | |
| JPH09298761A (en) | Stereoscopic image display device | |
| KR20170036278A (en) | Intelligent showcase including multi view monitor | |
| WO2006049208A1 (en) | Image composing device and method | |
| JP2015037282A (en) | Image processing device, image processing method, and program | |
| JP2019057866A (en) | Interpolation frame generation apparatus | |
| JP2013090129A (en) | Image processing apparatus, image processing method and program | |
| JP5880165B2 (en) | Video signal processing apparatus, video signal processing method, video signal processing program | |
| JP6478291B2 (en) | Display control apparatus and control method thereof | |
| KR20130036593A (en) | 3d display apparatus prevneting image overlapping | |
| JP2011217180A (en) | Image processing circuit | |
| KR100670152B1 (en) | 3D graphic processing device and 3D image display device using the same | |
| JP5700998B2 (en) | 3D image display apparatus and control method thereof | |
| JP5478728B2 (en) | 3D image processing apparatus and method, and 3D image display apparatus | |
| JP3096593B2 (en) | Method of utilizing field memory in 2D / 3D video converter | |
| JPH0865713A (en) | Stereoscopic image signal conversion device |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A712 Effective date: 20111012 |
|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20120329 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20130214 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20130528 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20130604 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20130723 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20130820 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20130902 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 5370175 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| LAPS | Cancellation because of no payment of annual fees |