Deprecated: The each() function is deprecated. This message will be suppressed on further calls in /home/zhenxiangba/zhenxiangba.com/public_html/phproxy-improved-master/index.php on line 456
JP4453647B2 - 動画像表示装置および動画像表示方法 - Google Patents
[go: Go Back, main page]

JP4453647B2 - 動画像表示装置および動画像表示方法 - Google Patents

動画像表示装置および動画像表示方法 Download PDF

Info

Publication number
JP4453647B2
JP4453647B2 JP2005314217A JP2005314217A JP4453647B2 JP 4453647 B2 JP4453647 B2 JP 4453647B2 JP 2005314217 A JP2005314217 A JP 2005314217A JP 2005314217 A JP2005314217 A JP 2005314217A JP 4453647 B2 JP4453647 B2 JP 4453647B2
Authority
JP
Japan
Prior art keywords
frame image
frame
luminance
image
moving image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2005314217A
Other languages
English (en)
Other versions
JP2007121704A (ja
Inventor
啓佐敏 竹内
隆博 佐川
英仁 飯坂
満広 稲積
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Seiko Epson Corp
Original Assignee
Seiko Epson Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Seiko Epson Corp filed Critical Seiko Epson Corp
Priority to JP2005314217A priority Critical patent/JP4453647B2/ja
Priority to US11/585,825 priority patent/US7903173B2/en
Priority to KR1020060104456A priority patent/KR100834567B1/ko
Priority to EP06022405A priority patent/EP1788803A3/en
Priority to TW095139454A priority patent/TWI354264B/zh
Priority to CNB2006101374676A priority patent/CN100452167C/zh
Publication of JP2007121704A publication Critical patent/JP2007121704A/ja
Application granted granted Critical
Publication of JP4453647B2 publication Critical patent/JP4453647B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/482End-user interface for programme selection
    • H04N21/4825End-user interface for programme selection using a list of items to be played back in a given order, e.g. playlists
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/20Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/20Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
    • G09G3/34Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters by control of light from an independent source
    • G09G3/36Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters by control of light from an independent source using liquid crystals
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • G09G5/39Control of the bit-mapped memory
    • G09G5/395Arrangements specially adapted for transferring the contents of the bit-mapped memory to the screen
    • G09G5/397Arrangements specially adapted for transferring the contents of two or more bit-mapped memories to the screen simultaneously, e.g. for mixing or overlay
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • G09G5/39Control of the bit-mapped memory
    • G09G5/399Control of the bit-mapped memory using two or more bit-mapped memories, the operations of which are switched in time, e.g. ping-pong buffers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/66Transforming electric information into light information
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/01Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
    • H04N7/0127Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level by changing the field or frame frequency of the incoming video signal, e.g. frame rate converter
    • H04N7/0132Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level by changing the field or frame frequency of the incoming video signal, e.g. frame rate converter the field or frame frequency of the incoming video signal being multiplied by a positive integer, e.g. for flicker reduction
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00Control of display operating conditions
    • G09G2320/02Improving the quality of display appearance
    • G09G2320/0247Flicker reduction other than flicker reduction circuits used for single beam cathode-ray tubes
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00Control of display operating conditions
    • G09G2320/02Improving the quality of display appearance
    • G09G2320/0261Improving the quality of display appearance in the context of movement of objects on the screen or movement of the observer relative to the screen
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00Control of display operating conditions
    • G09G2320/10Special adaptations of display systems for operation with variable images
    • G09G2320/106Determination of movement vectors or equivalent parameters within the image
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/20Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
    • G09G3/2092Details of a display terminals using a flat panel, the details relating to the control arrangement of the display terminal and to the interfaces thereto
    • G09G3/2096Details of the interface to the display terminal specific for a flat panel
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/003Details of a display terminal, the details relating to the control arrangement of the display terminal and to the interfaces thereto
    • G09G5/006Details of the interface to the display terminal
    • G09G5/008Clock recovery
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/01Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
    • H04N7/0135Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level involving interpolation processes
    • H04N7/014Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level involving interpolation processes involving the use of motion vectors

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Crystallography & Structural Chemistry (AREA)
  • Chemical & Material Sciences (AREA)
  • Control Of Indicators Other Than Cathode Ray Tubes (AREA)
  • Liquid Crystal Display Device Control (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Picture Signal Circuits (AREA)
  • Liquid Crystal (AREA)
  • Transforming Electric Information Into Light Information (AREA)

Description

本発明は、複数のフレーム画像を連続的に表示することで動画像を表示する技術に関し、詳しくは、複数のフレーム画像を合成して中間フレーム画像を生成する技術に関する。
従来、例えば、CRTやテレビ等の動画像表示装置において画像を表示する場合、60Hz未満のリフレッシュレートでは、画面全体にフリッカ(ちらつき)が生じる場合があった。しかし、リフレッシュレートが十分に確保されている場合でも、画面中を移動体が移動するような動画像を表示する場合には、画面全体ではなく、画面中の移動体部分にのみフリッカが生じることがあった。以下、このようなフリッカを「動画フリッカ」と呼ぶ。このような現象は、例えば、画面内を人や車、飛行機などが定速度で移動する動画像や、ビデオカメラを定速度でパンニングしている際の動画像などを表示する場合に生じることが多い。
このような現象は、CRTやテレビに限らず、液晶ディスプレイやプラズマディスプレイ、プロジェクタ等の動画像表示装置、PDAや携帯電話等の表示部、映画館のスクリーン等において動画を表示する場合にも見られ、動画表示に共通した問題であった。視聴者は、一旦、上述した動画フリッカの存在が気になり出すと、視聴上、ストレスを感じるおそれがあった。
このような問題に関連し、例えば、下記特許文献1には、ほぼ100%の発光時間率を有する液晶動画像表示装置等において、動画像表示時における動きの不自然さを抑制するために、2つのフレーム画像から新たな中間フレーム画像を動的に生成することで、動画を滑らかに表示する技術が開示されている。具体的には、特許文献1の図2にあるように、画面上の丸印が左から右に移動する映像であれば、2つの前後フレーム内の丸印の中間の位置にあたる丸印を新たに描画することで、中間フレーム画像を生成している。
また、下記特許文献2には、入力した映像が、動画であるか静止画であるかを検出し、動画を表示する場合には、フィールド周波数を2倍にするなどして動画表示に最適な表示方式に切り換える技術が開示されている。
特開平04−302289号公報 特開2001−296841号公報
しかし、上述した従来の技術では、2つのフレーム画像から全く新しい中間フレームを生成する必要があるため、その演算処理が膨大となり、動画の表示速度を向上させることが困難であった。また、全く新しい中間フレームを生成するには、フレームメモリの容量を多く確保する必要があり、コストアップにつながる要因となっていた。また、動画と静止画で表示方式を切り換える場合には、表示方式の切換時に虚像が生じるなど、スムーズに映像を表示できないおそれがあった。
このような問題を踏まえ、本発明が解決しようとする課題は、従来よりも簡易な手法によって動画フリッカを抑制し、滑らかな動画像の表示を実現することにある。
上記課題を解決するため、本発明の動画像表示装置を次のように構成した。すなわち、
複数のフレーム画像を連続的に表示することで動画像を表示する動画像表示装置であって、
所定のフレームレートで複数のフレーム画像が記録された動画像を入力する入力手段と、
前記入力した動画像から、連続して表示される第1のフレーム画像と第2のフレーム画像とを読み出す読出手段と、
前記第1のフレーム画像と前記第2のフレーム画像とに共通して撮像された移動体の動ベクトル量を求める動ベクトル量検出手段と、
前記動ベクトル量に応じて、前記第1のフレーム画像の輝度値に0以上1以下の第1の輝度係数を、前記第2のフレーム画像の輝度値に0以上1以下の第2の輝度係数をそれぞれ積算することで、前記第1のフレーム画像と前記第2のフレーム画像との少なくともいずれか一方に対して、輝度を低減する輝度低減処理を行う輝度調整手段と、
前記輝度低減処理を実行した後の前記第1のフレーム画像と前記第2のフレーム画像とを合成することで、1つ以上の中間フレーム画像を生成する合成手段と、
前記第1のフレーム画像の表示後で、前記第2のフレーム画像の表示前に、前記中間フレーム画像を表示しながら前記動画像の表示を行う表示手段と、を備え、
前記輝度調整手段は、前記動ベクトル量が0となる場合、および、人間の視覚の追従性に基づいて予め定められた所定値を超える場合には、前記第1の輝度係数と前記第2の輝度係数とを共に同じ値に設定し、前記動ベクトル量が0よりも大きく、かつ、前記所定値以下の範囲では、前記動ベクトル量が大きいほど、前記第2の輝度係数を大きくすると共に前記第1の輝度係数を小さくする
ことを要旨とする。

本発明の動画像表示装置によれば、連続して表示される第1のフレーム画像と第2のフレーム画像との輝度をそれぞれ調整しつつ、単純に合成を行うという極めて単純な処理により中間フレーム画像を生成することができるので、処理スピードを向上させることができる。この結果、フレームレートを元の動画像から向上させても、そのフレームレートに合成処理等を追従させることが容易となり、動画フリッカを抑制させた滑らかな動画像の表示を行うことが可能になる。
また、本発明では、第1のフレーム画像と第2のフレーム画像との輝度値を調整しつつ、単純に合成するという、極めて単純な処理により中間フレーム画像を生成しているため、全く新しい中間フレーム画像を生成する必要が無い。従って、かかる処理を行うハードウェアを極めてシンプルに構成することができ、また、使用するメモリ容量を削減することができる。そのため、コストダウンを図りつつ、滑らかな動画表示を行う動画表示装置を提供することが可能になる。
上記構成の動画像表示装置において、
前記輝度調整手段は、前記第1のフレーム画像の輝度値に0以上1以下の第1の輝度係数を、前記第2のフレーム画像の輝度値に0以上1以下の第2の輝度係数をそれぞれ積算することで前記輝度低減処理を行うものとしてもよい。
このような構成であれば、輝度係数を用いることで、容易に各フレーム画像の輝度を調整することができる。
上記構成の動画像表示装置において、
前記輝度調整手段における前記第1の輝度係数と第2の輝度係数とは、同一の値であるものとしてもよい。
このような構成であれば、第1のフレーム画像と第2のフレーム画像とに対して個別に輝度係数を決定する必要がないため、処理の単純化を図ることができる。
上記構成の動画像表示装置において、
前記輝度調整手段における前記第1の輝度係数は、前記第2の輝度係数よりも大きい値であるものとしてもよい。
このような構成であれば、第1のフレーム画像の輝度を、第2のフレーム画像の輝度に比べて高くすることができるので、時間的に先に表示される第1のフレーム画像の影響を高めた中間フレーム画像を生成することができる。
上記構成の動画像表示装置において、
前記輝度調整手段における前記第1の輝度係数は、前記第2の輝度係数よりも小さい値であるものとしてもよい。
このような構成であれば、第1のフレーム画像の輝度を、第2のフレーム画像の輝度に比べて低くすることができるので、時間的に後に表示される第2のフレーム画像の影響を高めた中間フレーム画像を生成することができる。
上記構成の動画像表示装置において、
更に、前記第1のフレーム画像と前記第2のフレーム画像とから、これらのフレーム画像中に撮像された移動体の動ベクトル量を求める動ベクトル量検出手段を備え、
前記輝度調整手段は、前記動ベクトル量に応じて前記第1の輝度係数と前記第2の輝度係数とを決定するものとしてもよい。
このような構成によれば、2つのフレーム画像間の動ベクトル量に応じて輝度係数を決定することができるので、より滑らかな動画表示を行うことが可能になる。
上記構成の動画像表示装置において、
前記輝度調整手段は、前記動ベクトル量と、前記第1および第2の輝度係数との関係を予め定義したテーブルに基づき、前記第1の輝度係数と前記第2の輝度係数とを決定するものとしてもよい。
このような構成によれば、テーブルを参照するだけで、動ベクトル量に応じた輝度係数を決定することができるので、処理の高速化を図ることができる。
上記構成の動画像表示装置において、
更に、前記第1のフレーム画像と前記第2のフレーム画像とから、これらのフレーム画像間の輝度の変化量を求める輝度変化量検出手段を備え、
前記輝度調整手段は、前記輝度変化量に応じて前記第1の輝度係数と前記第2の輝度係数とを決定するものとしてもよい。
このような構成によれば、2つのフレーム画像間の輝度変化量に応じて輝度係数を決定することができるので、より滑らかな動画表示を行うことが可能になる。
上記構成の動画像表示装置において、
前記輝度調整手段は、前記合成手段によって生成する中間フレーム画像の数に応じて、各中間フレーム画像を生成するための前記第1の輝度係数と前記第2の輝度係数とをそれぞれ決定するものとしてもよい。
このような構成によれば、複数生成される中間フレーム画像についてそれぞれ個別に輝度係数を積算することができるので、より滑らかな動画表示を行うことが可能になる。
上記構成の動画像表示装置において、
前記合成手段は、前記中間フレーム画像を2つ以上生成し、
前記輝度調整手段は、前記第1のフレーム画像側で表示する前記中間フレーム画像については、前記第1の輝度係数を前記第2の輝度係数よりも大きい値として前記輝度低減処理を行い、前記第2のフレーム画像側で表示する前記中間フレーム画像については、前記第1の輝度係数を、前記第2の輝度係数よりも小さい値として前記輝度低減処理を行うものとしてもよい。
このような構成によれば、徐々に第1のフレーム画像の輝度が低下するとともに徐々に第2のフレーム画像の輝度が高くなる中間フレーム画像を生成することができるので、より滑らかな動画表示を行うことが可能になる。
上記構成の動画像表示装置において、
前記輝度調整手段は、所定の区間において0から1まで漸増する第1の関数と1から0まで漸減する第2の関数とを用意し、該所定の区間を前記中間フレーム画像の数に応じて分割し、該分割点における前記第1および第2の関数の値に基づいて、前記第1の輝度係数と前記第2の輝度係数とを決定するものとしてもよい。
このような構成によれば、第1の関数と第2の関数とに応じて、容易に輝度係数を決定することができる。
上記構成の動画像表示装置において、
前記輝度調整手段における前記第1の関数と前記第2の関数とは、正弦関数の極小値から極大値までを表す関数であるものとしてもよい。
このような構成によれば、人間の目の輝度変化の追従特性に近似した正弦波を表す関数に基づいて輝度係数を決定することができるので、より滑らかな動画表示を行うことができる。
上記構成の動画像表示装置において、
前記読出手段は、前記第1のフレーム画像と第2のフレーム画像とを、フレーム単位、ライン単位、画素単位、走査線単位のうち、いずれかの単位によって読み出し、
前記輝度調整手段は、前記輝度低減処理を、フレーム単位、ライン単位、画素単位、走査線単位のうち、いずれかの単位によって行い、
前記合成手段は、前記合成を、フレーム単位、ライン単位、画素単位、走査線単位のうち、いずれかの単位によって行うものとしてもよい。
このような構成によれば、動画像表示装置が有するフレームメモリの容量などを勘案して設定した最適な単位で中間フレーム画像を生成することができる。なお、読出手段と輝度調整手段と合成手段とは、それぞれ同一の単位で各々の処理を行うものとしてもよいし、それぞれが異なる単位で各々の処理を行うものとしてもよい。
上記構成の動画像表示装置において、
前記表示手段は、前記フレームレートを、前記生成した中間フレーム画像の数に応じて逓倍して前記表示を行うものとしてもよい。
このような構成によれば、中間フレーム画像を挿入しつつ動画像のフレームレートを高めて表示を行うことができるので、滑らかな動画表示を行うことが可能になる。
上記構成の動画像表示装置において、
前記合成手段は、2以上の中間フレーム画像を生成し、
前記表示手段は、前記2以上の中間フレーム画像のうちの1の中間フレーム画像を表示するタイミングにおいて、該1の中間フレーム画像に換えて、輝度の低い所定のマスク画像の表示を行うものとしてもよい。なお、マスク画像としては、輝度係数の合計を1未満として輝度を低減させた画像としてもよいし、黒色等の輝度の低い画素のみによって予め構成した画像としてもよい。
また、上記構成の動画像表示装置において、
前記合成手段は、2以上の中間フレーム画像を生成し、
前記輝度調整手段は、前記合成手段によって生成する中間フレーム画像のうち、所定の1枚の中間フレーム画像について適用する前記第1の輝度係数と前記第2の輝度係数との合計を1未満とするものとしてもよい。
これらの構成によれば、中間フレーム画像を複数表示する場合において、そのうちの1枚の中間フレーム画像を輝度の低いマスク画像として表示することができる。そのため、動画フリッカの抑制に加え、液晶パネル等のホールド型表示デバイスに特有の残像現象を抑制することが可能になる。
なお、本発明は、上述した動画像表示装置としての構成のほか、動画像表示方法や、コンピュータプログラムとしても構成することができる。かかるコンピュータプログラムは、コンピュータが読取可能な記録媒体に記録されていてもよい。記録媒体としては、例えば、フレキシブルディスクやCD−ROM、DVD−ROM、光磁気ディスク、メモリカード、ハードディスク等の種々の媒体を利用することができる。
以下、上述した本発明の作用・効果を一層明らかにするため、本発明の実施の形態を実施例に基づき次の順序で説明する。
A.第1実施例:
(A−1)プロジェクタのハードウェア構成:
(A−2)中間フレーム生成回路の構成および動作:
(A−3)効果:
B.第2実施例:
C.変形例:
A.第1実施例:
(A−1)プロジェクタのハードウェア構成:
図1は、本願の動画像表示装置の実施例としてのプロジェクタ100のハードウェア構成を示すブロック図である。このプロジェクタ100は、元の動画像のフレームレートを少なくとも2倍に向上させて動画像の表示を行う機能を有している。2倍以上のフレームレートで表示を行う具体的な構成については、後で詳しく説明する。
図示するように、本実施例のプロジェクタ100は、映像信号入力回路110と、この映像信号入力回路110に接続されたメモリ書込制御回路120と、メモリ書込制御回路120に接続されたフレームメモリ130と、フレームメモリ130に接続された動ベクトル量検出回路150と、フレームメモリ130および動ベクトル量検出回路150に接続された中間フレーム生成回路140と、中間フレーム生成回路140に接続された拡大縮小回路160と、拡大縮小回路160に接続された液晶ドライバ170と、液晶ドライバ170に接続された液晶パネル180と、メモリ書込制御回路120、中間フレーム生成回路140、拡大縮小回路160および液晶ドライバ170に接続されたCPU190と、CPU190に接続された操作パネル200とを備えている。
映像信号入力回路110は、DVDプレーヤやビデオデッキ、パーソナルコンピュータなどの外部機器からコンポジット信号やSビデオ信号、コンポーネント信号などの映像信号を入力する回路である。これらの映像信号は、一般的に、1秒あたり30枚のフレーム画像から構成されているアナログ信号である。映像信号入力回路110は、同期分離回路112と、A/D変換回路114とを備えている。
同期分離回路112は、入力した映像信号から、垂直同期信号VSyncや水平同期信号HSync等の同期信号を分離する回路である。同期分離回路112は、分離を行った垂直同期信号VSyncや水平同期信号HSyncの周期に応じて、PLL回路等を利用してドットクロックDCKの生成も行う。なお、予め同期信号が分離された映像信号を入力する場合には、同期分離回路112を省略するものとしてもよい。
A/D変換回路114は、同期信号の分離されたアナログの映像信号をデジタルの映像信号に変換する回路である。A/D変換回路114は、デジタル映像信号を生成すると、このデジタル映像信号を、メモリ書込制御回路120に出力する。
メモリ書込制御回路120は、映像信号入力回路110から入力したデジタル映像信号を、1フレーム毎にフレームメモリ130に書き込む。フレームメモリ130には、2フレーム分の書き込み領域が確保されており(図中の「領域A」と「領域B」)、メモリ書込制御回路120は、これらの領域に対して、フレーム画像を交互に書き込む。なお、本実施例では、書き込み領域を2つ備えるものとしたが、3つ以上の書き込み領域を備え、これらの領域に、順次、書き込みを行うものとしてもよい。
動ベクトル量検出回路150は、フレームメモリ130に書き込まれた2つのフレーム画像を対比することで、これらのフレーム画像中に撮像されている移動体の動ベクトル量Vを検出する回路である。動ベクトル量Vは、2つのフレーム画像をそれぞれ複数のブロックに分割して、両フレーム画像に共通した各ブロックの輝度変化を検出することで求めることができる。かかる動ベクトル量の検出は、例えば、特開2003−69961号公報等に記載の周知の技術を適用することができる。
中間フレーム生成回路140は、フレームメモリ130から2つのフレーム画像データを読み込み、これらのフレーム画像データの輝度を調整しつつ合成することで、中間フレーム画像データを生成する。この中間フレーム生成回路140の詳細な構成および動作については後述する。中間フレーム生成回路140は、中間フレーム画像データを生成すると、この中間フレーム画像データと、フレームメモリ130から読み出したフレーム画像データとを拡大縮小回路160に出力する。
拡大縮小回路160は、中間フレーム生成回路140から入力したフレーム画像データを、液晶パネル180の解像度に適合するように拡大または縮小する回路である。なお、フレーム画像データの拡大/縮小は、メモリ書込制御回路120がフレームメモリ130にフレーム画像を書き込む際に行うものとしてもよいし、中間フレーム生成回路140がフレームメモリ130からフレーム画像を読み出す際に行うものとしてもよい。このような場合には、拡大縮小回路160を省略することができる。
液晶ドライバ170は、拡大縮小回路160からフレーム画像データを入力し、そのRGB階調値に応じて液晶パネル180を駆動する回路である。
液晶パネル180は、液晶ドライバ170によって駆動され、出力画像の形成を行う。液晶パネル180によって形成された出力画像は、図示していない光学系によって投写スクリーン上に投写表示される。
CPU190は、操作パネル200によって、ユーザから、中間フレームを生成する際の合成モード(後述)や種々の設定操作を受け付け、これらの設定に応じて、メモリ書込制御回路120や中間フレーム生成回路140、拡大縮小回路160、液晶ドライバ170の制御を行う。
(A−2)中間フレーム生成回路の構成および動作:
図2は、中間フレーム生成回路140の詳細な構成を示すブロック図である。図示するように、この中間フレーム生成回路140は、動ベクトル量検出回路150に接続された輝度係数決定回路210と、この輝度係数決定回路210に接続されたマルチプレクサ220と、フレームメモリ130に接続された第1ラッチ回路272と、マルチプレクサ220および第1ラッチ回路272に接続された合成回路230と、合成回路230に接続された第2ラッチ回路274と、第1ラッチ回路272に接続された第3ラッチ回路276と、第2ラッチ回路274および第3ラッチ回路276に接続された選択回路240とを備えている。更に、中間フレーム生成回路140は、映像信号入力回路110と接続され、上述した各回路を制御するための制御回路250と、フィールド識別信号生成回路260とを備えている。
フィールド識別信号生成回路260は、映像信号入力回路110から水平同期信号HSyncと垂直同期信号VSyncとを入力し、これらの同期信号からフィールド識別信号を生成する。フィールド識別信号とは、インタレース表示方式において、表示すべきフィールドが偶数フィールドか奇数フィールドかを識別するための信号である。フィールド識別信号生成回路260は、フィールド識別信号を生成すると、かかるフィールド識別信号を制御回路250に対して出力する。
制御回路250は、映像信号入力回路110から水平同期信号HSync、垂直同期信号VSyncおよびドットクロックDCKを入力するとともに、フィールド識別信号生成回路260からフィールド識別信号を入力し、これらの信号に基づき、フレームメモリ130からのフレーム画像データの読み出しや、第1ラッチ回路272、第2ラッチ回路274、第3ラッチ回路276、マルチプレクサ220、合成回路230、選択回路240の動作を制御する。
制御回路250は、フレームメモリ130内の領域Aおよび領域Bから、先に表示すべきフレーム画像データ(以下、「先フレーム画像」と呼ぶ)と、後に表示すべきフレーム画像データ(以下、「後フレーム画像」と呼ぶ)とを、それぞれ、元の映像のフレームレートの2倍の周期で、3回連続して読み出す(以下、このような読み出しを「オーバスキャン」と呼ぶ)。このとき、3回目の先フレーム画像と1回目の後フレーム画像については、画素毎に交互に読み出すことで、同時読み出しを行う(図5の中段参照)。フレームメモリ130からは、各領域からバーストモードによって読み出しを行うことができる。こうしてオーバスキャンされたフレーム画像データは、第1ラッチ回路272によって画素単位で保持される。第1ラッチ回路272は、フレームメモリ130内の領域A/Bを保持したフレーム画像データD1を、合成回路230と第3ラッチ回路276とに分岐して出力する。第3ラッチ回路276は、第1ラッチ回路272から出力されたフレーム画像データD1のうち、3回中、2回目に読み出された先フレーム画像のデータのみをフレーム画像データD3として保持する。
輝度係数決定回路210は、CPU190によって設定された合成モードに応じて、輝度係数K2および輝度係数K3の値を決定し、これらの値を表す信号を合成回路230に出力する。輝度係数K2は、中間フレーム画像の生成元となる先フレーム画像の輝度を調整するパラメータであり、輝度係数K3は、中間フレーム画像の生成元となる後フレーム画像の輝度を調整するためのパラメータである。
CPU190によって設定される合成モードとしては、固定モードと可変モードとがある。固定モードとは、動ベクトル量Vに関係なく、輝度係数K2と輝度係数K3とを一定の値に固定するモードである。この固定モードには、例えば、輝度係数K2と輝度係数K3とをそれぞれ1とし、先フレーム画像と後フレーム画像の輝度を変化させない「前後対等モード」や、輝度係数K2と輝度係数K3とを1よりも小さい共通の固定値(例えば0.7)とする「前後対等緩和モード」、後フレーム画像の輝度を先フレーム画像よりも高くする「後フレーム優先モード」、先フレーム画像の輝度を後フレーム画像よりも高くする「前フレーム優先モード」などがある。
「前後対等モード」や「前後対等緩和モード」によれば、先フレーム画像と後フレーム画像に積算する輝度係数を同一の値にすることができるので、処理の簡略化を図ることができる。また、「後フレーム優先モード」によれば、先フレーム画像よりも後フレーム画像の影響度が高い中間フレーム画像を生成することができる。これに対して、「前フレーム優先モード」によれば、後フレーム画像よりも先フレーム画像の影響度が高い中間フレーム画像を生成することができる。
上述した固定モードに対して、可変モードとは、動ベクトル量検出回路150から入力した動ベクトル量Vに応じて、輝度係数K2および輝度係数K3の値を可変させるモードである。輝度係数決定回路210は、このモードに設定されると、図3に示す輝度係数テーブルに基づき、輝度係数K2と輝度係数K3とを決定する。
図3は、輝度係数テーブルの一例を示す説明図である。この輝度係数テーブルには、動ベクトル量Vが0、すなわち前後フレーム間に動きがない場合と、動ベクトル量Vが、人間の視覚が追従できる最大視覚限界値MHmaxを超える場合には、輝度係数K2と輝度係数K3とが共に0.5になるように設定されている。また、動ベクトル量Vが0よりも大きく、最大視覚限界値MHmaxよりも小さい場合には、動ベクトル量Vが大きくなるほど、輝度係数K3を大きくし、輝度係数K2を小さくするように設定している。つまり、この輝度係数テーブルによれば、通常の動ベクトル量Vの範囲においては、動ベクトル量Vが大きくなるほど、中間フレーム画像には、後フレーム画像の影響が強く反映されることになる。
上述した種々の合成モードは、操作パネル200の操作に応じてユーザが任意に選択することができる。CPU190は、ユーザによる合成モードの選択を受け付け、選択された合成モードを輝度係数決定回路210に設定する。こうすることにより、ユーザは動画表示の目的に応じて、その動画に適した合成モードを柔軟に設定することが可能になる。
なお、プロジェクタ100が固定モードのみをサポートし、可変モードをサポートしない場合には、動ベクトル量検出回路150は省略するものとしてもよい。こうすることにより、処理の単純化および低コスト化を図ることができる。また、上述した固定モードで適用する輝度係数の値は、ユーザが任意に設定することができるものとしてもよい。
マルチプレクサ220は、輝度係数決定回路210から輝度係数K2および輝度係数K3を表す信号を入力し、これらの信号を時分割で多重化して合成回路230に出力する。
合成回路230は、マルチプレクサ220から輝度係数K2および輝度係数K3を表す信号を入力するとともに、オーバスキャンされたフレーム画像データD1を画素単位で第1ラッチ回路272から入力する。合成回路230は、第1ラッチ回路272から先フレーム画像と後フレーム画像を同時に入力した場合、つまり、3回目に読み出した先フレーム画像と1回目に読み出した後フレーム画像とを同時に入力した場合に、先フレーム画像の画素の輝度値に対して、輝度係数K2を積算し、後フレーム画像の画素の輝度値に対して、輝度係数K3を積算する。そして、輝度係数をそれぞれ積算した先フレーム画像の画素と後フレーム画像の画素とを下記式(1)に基づき合成し、中間フレーム画像データD2を生成する。合成回路230によって中間フレーム画像データD2が生成されると、この中間フレーム画像データD2は、第2ラッチ回路274によって保持される。
D2=(先フレーム画像D1*K2)+(後フレーム画像D1*K3) ・・・(1)
選択回路240は、第2ラッチ回路274によって保持された中間フレーム画像データD2と、第3ラッチ回路276によって保持されたフレーム画像データD3とを入力すると、元の映像の垂直同期信号VSyncを2逓倍した周期で、2つのデータを交互に選択する。そして、選択したフレーム画像データを、フレーム画像データD4として拡大縮小回路160に出力する。なお、拡大縮小回路160に対しては、制御回路250から、フレーム画像データD4を液晶パネル180に表示させるために必要なドットクロックMDCKや水平同期信号MHSync、垂直同期信号MVSyncが出力される。本実施例の場合には、垂直同期信号MVSyncは、映像信号入力回路110から入力した垂直同期信号VSyncを2逓倍した周期となる。
図4は、中間フレーム生成回路140の動作のタイミングチャートを簡易的に示す説明図である。上述した中間フレーム生成回路140によれば、映像信号入力回路110から水平同期信号HSyncと垂直同期信号VSyncとドットクロックDCKとが入力されると、こられの同期信号から、フィールド識別信号FSが生成される。そして、中間フレーム生成回路140からは、最終的に出力を行うフレーム画像データD4として、偶数フィールドを表示するタイミングevenで、元の動画像からそのまま取得したフレーム画像データD3(図中のD3(n−1)、D3(n)、D3(n+1))が出力され、奇数フィールドを表示するタイミングoddで、中間フレーム生成回路140によって生成された中間フレーム画像データD2(図中のD2(n−1)、D2(n)、D2(n+1))が出力されることになる。
図5は、中間フレーム生成回路140によって出力されたフレーム画像データに応じて、液晶パネル180上に形成される動画像を視覚的に表した説明図である。図の上段には、フレームメモリ130に記憶されたフレーム画像データDataを示し、図の中段には、このフレームメモリからオーバスキャンされたフレーム画像データD1を示した。また、図の下段には、選択回路240から出力されるフレーム画像データD4を示した。図の下段に示したフレーム画像データD4については、図4に示したフレーム画像データD4と共通のフレーム番号を付している。
図の上段に示すように、フレームメモリ130内に、フレーム(N−1)、フレーム(N)、フレーム(N+1)のフレーム画像データが順次記憶されると、図の中段に示すように、これらのフレーム画像が、制御回路250によってオーバスキャンされ、各フレームが、それぞれ3枚ずつ出力される。なお、図示の都合上、フレーム(N−1)とフレーム(N+1)については、3枚中、2枚分の出力について示している。こうしてオーバスキャンされた3枚のフレーム画像のうち、2枚目のフレーム画像については、選択回路240によってそのままフレーム画像データD4として出力される。これに対して、先フレーム画像の3枚目および後フレーム画像の1枚目については、合成回路230によって、それぞれの画像の輝度値に輝度係数K2,K3が積算されて合成され、中間フレーム画像データD2が生成される。そして、この中間フレーム画像データD2が、選択回路240によって選択され、フレーム画像データD4として出力される。この結果、図の下段に示すように、選択回路240からは、D3,D2,D3,D2,・・・というように、元の動画像を構成していたフレーム画像データD3と中間フレーム生成回路140によって生成された中間フレーム画像データD2とが交互に出力され、液晶パネル180上にその画像が形成される。
図5に示した例では、フレーム(N−1)とフレームNとの間の動ベクトル量Vは10としている。そのため、フレーム(N−1)とフレーム(N)との合成結果である中間フレーム画像データD2には、この動ベクトル量Vと、図3に示した輝度係数テーブルとに応じて輝度係数K2,K3が決定され、その結果として、それぞれのフレーム画像の輝度値を低減させた画像が合成されている。一方、フレーム(N)とフレーム(N+1)との間の動ベクトル量Vは0としているため、図3によって、輝度係数K2,K3はともに0.5となり、かかる輝度係数によって合成されたフレーム画像D2は、結局、元のフレーム画像と同一の内容となっている。
(A−3)効果:
図6は、本実施例の効果を示す説明図である。ここでは、黒丸の図形が左から右に移動する動画像を表示している例を示した。図の左側には、中間フレーム画像を生成しない場合の表示例を示し、図の右側には、本実施例によって中間フレーム画像を生成した場合の表示例を示している。図の左側に示すように、中間フレーム画像を生成しない場合には、黒丸の表示状態が、表示する/表示しないの2段階に変化するにすぎないため、フレームレートが適切に確保されている場合でも、黒丸の移動速度が速い場合には不連続に移動していくように観察され、動画フリッカが発生してしまう。しかし、本実施例では、図の右側に示すように、元の動画像を構成するフレーム画像の間に、前後フレームの輝度を調整して合成した中間フレーム画像が挿入されるため、滑らかに黒丸が移動していくように観察される。そのため、動画フリッカが軽減され、ユーザの視聴上の負荷を軽減することができる。
また、本実施例では、先フレーム画像と後フレーム画像との輝度をそれぞれ調整しつつ、単純に合成するという、極めて単純な処理により中間フレーム画像を生成しているため、処理スピードを向上させることができる。この結果、フレームレートを元の動画像から2倍以上に向上させても、そのフレームレートに合成処理等を追従させることが容易となり、滑らかに動画像の表示を行うことが可能になる。
また、本実施例では、上述のように、先フレーム画像と後フレーム画像との輝度をそれぞれ調整しつつ、単純に合成するという、極めて単純な処理により中間フレーム画像を生成しているため、全く新しい中間フレーム画像を生成する必要が無い。従って、かかる処理を行うデジタル回路を極めてシンプルに構成することができ、また、使用するメモリ容量を削減することができる。そのため、コストダウンを図りつつ、滑らかな動画表示を行うことが可能なプロジェクタを提供することが可能になる。
また、本実施例では、同一の映像中で動画と静止画とが切り替わったとしても、同一の回路およびアルゴリズムで中間フレーム画像を生成し、動画のみに対して動画フリッカの発生を抑制することができる。そのため、動画を表示するための回路と静止画を表示するための回路とを2つ用意し、これらを切り換えるといった処理を行う必要がなく回路をシンプルに構成することができる。また、動画と静止画とに対して異なる方式による表示を行うことがないので、動画と静止画の表示切換時における虚像の発生を抑制することができる。このような効果は、動ベクトル量検出回路150を省略するなどして固定モードによって出力を行う場合に特に顕著である。
B.第2実施例:
上述した第1実施例では、中間フレーム画像を1枚生成して、もとの映像の2倍のフレームレートで動画像の表示を行う場合について説明した。これに対して、第2実施例では、中間フレーム画像を2枚生成し、元の映像の3倍のフレームレートで動画像を表示する場合について説明する。
図7は、第2実施例において、液晶パネル180上に形成される動画像を視覚的に表した説明図である。図の上段および中段に示すように、本実施例において、メモリ書込制御回路120が、フレームメモリ130に、フレーム(N−1)、フレーム(N)、フレーム(N+1)のフレーム画像データを順次書き込むと、制御回路250は、元の映像のフレームレートの2倍の周期で、5回連続して読み出しを行う。このとき、4回目の先フレーム画像と1回目の後フレーム画像、および、5回目の先フレーム画像と2回目の後フレーム画像は、それぞれ画素毎に交互に読み出すことで同時読み出しを行う。この結果、図の下段に示すように、オーバスキャンを行った5枚中、3枚目のフレーム画像については、選択回路240によってそのままフレーム画像データD4として出力される。これに対して、上述した4回目の先フレーム画像と1回目の後フレーム画像、および、5回目の先フレーム画像と2回目の後フレーム画像については、合成回路230によって、それぞれの画像の輝度値に輝度係数K2,K3が積算されて合成され、中間フレーム画像データD2が生成される。そして、この中間フレーム画像データD2が、選択回路によって選択され、フレーム画像データD4として出力される。
図7に示した例では、2枚連続して生成される中間フレーム画像データD2のうち1枚目の中間フレーム画像データD2と、2枚目の中間フレーム画像データD2とでは、輝度係数K2および輝度係数K3の値をそれぞれ異なる組み合わせで積算している。具体的には、1枚目の中間フレーム画像では、輝度係数K2を0.7、輝度係数K3を0.3としており、2枚目の中間フレーム画像では、輝度係数K2を0.3、輝度係数K3を0.7としている。こうすることで、先フレーム画像の輝度が徐々に低下し、後フレーム画像の輝度が徐々に上がることになり、移動体が徐々に移動しているかのような効果を得ることができる。
なお、図7では、輝度係数K2,K3の値をそれぞれ固定した例を示したが、例えば、1枚目の中間フレーム画像については、図3に示した輝度係数テーブルを用いて輝度係数K2および輝度係数K3の値を決定し、2枚目の中間フレーム画像については、1枚目の輝度係数K2および輝度係数K3の値を入れ替えることで輝度係数の値を決定するものとしてもよい。また、1枚目の輝度係数K2,K3を決定するためのテーブルと、2枚目の輝度係数K2,K3を決定するためのテーブルとを個別に用意しておくものとしてもよい。
以上で説明した第2実施例によれば、第1実施例よりも多くの中間フレーム画像を生成して表示することができるため、動画フリッカの発生をより抑制することが可能になる。なお、本実施例では、中間フレーム画像を2枚生成する場合について説明したが、3枚以上の中間フレーム画像を生成する場合にも、各中間フレーム画像について、輝度係数K2,K3をそれぞれ決定することで、同様の方式を用いることができる。この場合、元の映像信号のフレームレートを、中間フレーム画像の枚数に応じた倍率によって逓倍することで各フレーム画像の表示を行う。中間フレーム画像の枚数が増加すれば、それだけ、動画フリッカを軽減させる効果を高めることができる。
C.変形例:
以上、本発明の種々の実施例について説明したが、本発明はこのような実施例に限定されず、その趣旨を逸脱しない範囲で種々の構成を採ることができることはいうまでもない。例えば、ハードウェアによって実現した機能を、ソフトウェアによって実現することにより、コンピュータが動画像を表示するものとしてもよい。その他、次のような変形も可能である。
(C−1)変形例1:
以下、図8ないし図10を用いて、輝度係数K2,K3の決定方法の変形例について説明する。本変形例では、図2に示した輝度係数決定回路210は、動ベクトル量Vとは関係なく、生成しようとする中間フレーム画像の数nと正弦波の特性とに応じて輝度係数K2,K3の値を決定する。
本変形例において、輝度係数決定回路210は、合成回路230によって生成を行う中間フレーム画像の枚数をCPU190から設定されると、図8に示すテーブルに基づき、輝度係数K2,K3を求めるための角度θ(rd)(0≦θ≦π)を各中間フレーム画像毎に決定する。図8に示したテーブルには、0からπまでの区間を中間フレーム画像の枚数によって分割することによって得られる値が定義されている。このテーブルによれば、例えば、中間フレーム画像を3枚生成する場合には、1枚目の中間フレーム画像を生成するためのθは(1/4)πとなり、2枚目は、(1/2)π、3枚目は(3/4)πとなる。そして、このθの値と、下記式(2)および(3)に示す正弦関数を用いて、各中間フレーム画像の生成に用いる輝度係数K2,K3をそれぞれ決定する。下記式(2)は、正弦関数の極大値(=1)から極小値(=0)までを表す関数であり、式(3)は、正弦関数の極小値(=0)から極大値(=1)までを表す関数である。図9には、下記関数をグラフ化した図を示し、図10には、角度θに対応する輝度係数K2および輝度係数K3の値の具体例を示している。
K2=(COSθ)/2+0.5 ・・・(2)
K3=0.5−(COSθ)/2 ・・・(3)
図10を参照すると、上記関数(2)および(3)によれば、中間フレーム画像を3枚生成する場合には、1枚目の中間フレーム画像に適用する輝度係数K2は、0.85となり、輝度係数K3は、0.15となる。また、2枚目の中間フレーム画像に適用する輝度係数K2は、0.50となり、輝度係数K3も0.50となる。更に、3枚目の中間フレーム画像に適用する輝度係数K2は、0.15となり、輝度係数K3は、0.85となる。
以上で説明した輝度係数の決定方法によれば、正弦波の波形の特性に応じて各中間フレーム画像に適用する輝度係数を決定することができる。人間の目の輝度変化の追従特性は、この正弦波の特性に近似していると考えられるため、本変形例によれば、中間フレーム画像の枚数が増加したとしても、動画像の輝度変化が非常に滑らかになり、動画フリッカを効果的に抑制することが可能になる。
なお、本変形例では、正弦関数を用いて輝度係数を求めるものとしたが、その他にも、漸増あるいは漸減する種々の関数を用いて輝度係数を求めるものとしてもよい。このような関数の一例を図11に示した。
図11は、輝度係数K3が0から1までリニアに増加し、輝度係数K2が1から0までリニアに減少する関数をグラフ化した図である。このような関数によっても、先フレーム画像の影響が徐々に低下し、後フレーム画像の影響が徐々に増加する効果を得ることができるので、滑らかな動画表示を行うことができる。
なお、本変形例において、図9や図11に示した関数は、輝度係数K2と輝度係数K3とを加算した値が常に1となる関数であるものとした。そのため、通常のフレーム画像に対して、中間フレーム画像の輝度を低下させることなく動画フリッカを軽減することができる。
(C−2)変形例2:
上記実施例では、フレームメモリ130に記憶された2つのフレーム画像間の動ベクトル量に応じて、輝度係数K2,K3を決定する例を示した。これに対して、2つのフレーム画像の輝度変化量に応じて、輝度係数K2,K3を決定することもできる。
この場合、例えば、輝度係数決定回路210が、まず、先フレーム画像を構成する各画素の輝度の平均値と、後フレーム画像を構成する各画素の輝度の平均値とを求め、これらの平均値から輝度の変化量を求める。そして、この変化量が、プラスであれば、その変化量に応じて、先フレーム画像に積算する輝度係数K2の値を後フレーム画像に積算する輝度係数K3よりも低くする。一方、マイナスであれば、その変化量に応じて先フレーム画像に積算する輝度係数K2の値を後フレーム画像に積算する輝度係数K3よりも高くするものとすることができる。このような変形例によっても、動画像を滑らかに表示することができる。
(C−3)変形例3:
上記実施例では、本願の動画像表示装置をプロジェクタ100として構成した例を示したが、動画像表示装置は、液晶ディスプレイや、ブラウン管ディスプレイ、プラズマディスプレイ等として構成するものとしてもよい。この場合、図1に示した液晶ドライバ170や液晶パネル180は、各表示装置に適合した駆動回路や表示デバイスに置き換えるものとする。また、これらの表示デバイスの種類に応じて、輝度係数を可変させるものとしてもよい。
(C−4)変形例4:
上記実施例では、中間フレーム画像の生成の際に、前後フレームの輝度値を調整することで、中間フレーム画像を生成することとした。これに対して、例えば、色相や色彩、あるいは、R,G,B値のうちいずれかの値を調整することで中間フレーム画像を生成するものとしてもよい。もちろん、これらのパラメータを組み合わせて調整を行うものとしてもよい。
(C−5)変形例5:
上記実施例では、制御回路250によるフレームメモリ130からの画像の読み出しや、合成回路230による画像の輝度調整および合成を、画素単位で行うものとして説明した。しかし、これらの処理を行う単位は、画素単位ではなく、フレーム単位やライン単位、走査線単位で行うものとしてもよい。どの単位で処理を行うかは、各ラッチ回路で保持可能なデータ容量や、合成回路230内のバッファ容量に応じて決定することができる。
(C−6)変形例6:
上述した第2実施例では、中間フレーム画像を2枚生成する例を示した。これに対して、本変形例では、複数生成した中間フレーム画像のうちの1枚の中間フレーム画像の輝度を、他の中間フレーム画像よりも低減させて表示を行うものとする。
図12は、本変形例における中間フレーム画像の生成例を示す説明図である。図示した例では、中間フレーム画像を3枚生成し、そのうちの中間の1枚について、先フレーム画像に対して適用する輝度係数K2と、後フレーム画像に対して適用する輝度係数K3とを共に0.1とし、その合計値を1未満とするものとした。このように、低い輝度係数を適用した中間フレーム画像を生成すれば、他のフレーム画像よりも暗いマスク画像が一定のタイミングで表示されることになる。このように、定期的な周期で、暗いマスク画像を表示するものとすれば、液晶パネル等のホールド型表示デバイスに特有な残像現象を抑制することが可能になる。
なお、本変形例では、先フレーム画像と後フレーム画像とに対して、それぞれ低い輝度係数を適用することによって、暗い中間フレーム画像を生成するものとした。これに対して、複数の中間フレーム画像のうちの1の中間フレーム画像を表示するタイミングで、その中間フレーム画像に換えて、輝度を低くして黒い画像にするための所定のマスク画像を挿入して表示するものとしてもよい。このようなマスク画像としては、黒色のような輝度の低い画素のみからなる画像を予め用意しておくことができる。マスク画像を挿入するデバイスは、合成回路230であってもよいし選択回路240や拡大縮小回路160でもよい。このような構成であっても、容易に、残像現象を抑制することが可能になる。また、図12では、中間フレーム画像を3枚生成し、そのうち1枚を暗い画像とするものとしたが、生成する中間フレーム画像は2枚以上であればよく、そのうちの1枚を暗い画像とすればよい。
プロジェクタ100のハードウェア構成を示すブロック図である。 中間フレーム生成回路140の詳細な構成を示すブロック図である。 輝度係数テーブルの一例を示す説明図である。 中間フレーム生成回路140の動作のタイミングチャートを簡易的に示す説明図である。 中間フレーム生成回路140によって出力されたフレーム画像データに応じて液晶パネル180上に形成される動画像を視覚的に表した説明図である。 実施例の効果を示す説明図である。 第2実施例において液晶パネル180上に形成される動画像を視覚的に表した説明図である。 0からπまでの区間を中間フレーム画像の枚数によって分割することによって得られる値を定義したテーブルを示す図である。 輝度係数の決定に用いる関数をグラフ化した図である。 角度θに対応する輝度係数K2および輝度係数K3の値の具体例を示す図である。 輝度係数K3が0から1までリニアに増加し、輝度係数K2が1から0までリニアに減少する関数をグラフ化した図である。 変形例6における中間フレーム画像の生成例を示す説明図である。
符号の説明
100…プロジェクタ
110…映像信号入力回路
112…同期分離回路
114…A/D変換回路
120…メモリ書込制御回路
130…フレームメモリ
140…中間フレーム生成回路
150…動ベクトル量検出回路
160…拡大縮小回路
170…液晶ドライバ
180…液晶パネル
190…CPU
200…操作パネル
210…輝度係数決定回路
220…マルチプレクサ
230…合成回路
240…選択回路
250…制御回路
260…フィールド識別信号生成回路
272…第1ラッチ回路
274…第2ラッチ回路
276…第3ラッチ回路

Claims (9)

  1. 複数のフレーム画像を連続的に表示することで動画像を表示する動画像表示装置であって、
    所定のフレームレートで複数のフレーム画像が記録された動画像を入力する入力手段と、
    前記入力した動画像から、連続して表示される第1のフレーム画像と第2のフレーム画像とを読み出す読出手段と、
    前記第1のフレーム画像と前記第2のフレーム画像とに共通して撮像された移動体の動ベクトル量を求める動ベクトル量検出手段と、
    前記動ベクトル量に応じて、前記第1のフレーム画像の輝度値に0以上1以下の第1の輝度係数を、前記第2のフレーム画像の輝度値に0以上1以下の第2の輝度係数をそれぞれ積算することで、前記第1のフレーム画像と前記第2のフレーム画像との少なくともいずれか一方に対して、輝度を低減する輝度低減処理を行う輝度調整手段と、
    前記輝度低減処理を実行した後の前記第1のフレーム画像と前記第2のフレーム画像とを合成することで、1つ以上の中間フレーム画像を生成する合成手段と、
    前記第1のフレーム画像の表示後で、前記第2のフレーム画像の表示前に、前記中間フレーム画像を表示しながら前記動画像の表示を行う表示手段と、を備え、
    前記輝度調整手段は、前記動ベクトル量が0となる場合、および、人間の視覚の追従性に基づいて予め定められた所定値を超える場合には、前記第1の輝度係数と前記第2の輝度係数とを共に同じ値に設定し、前記動ベクトル量が0よりも大きく、かつ、前記所定値以下の範囲では、前記動ベクトル量が大きいほど、前記第2の輝度係数を大きくすると共に前記第1の輝度係数を小さくする、
    動画像表示装置。
  2. 請求項1に記載の動画像表示装置であって、
    前記輝度調整手段は、前記動ベクトル量と、前記第1および第2の輝度係数との関係を予め定義したテーブルに基づき、前記第1の輝度係数と前記第2の輝度係数とを決定する
    動画像表示装置。
  3. 請求項1または請求項2に記載の動画像表示装置であって、
    前記読出手段は、前記第1のフレーム画像と第2のフレーム画像とを、フレーム単位、ライン単位、画素単位、走査線単位のうち、いずれかの単位によって読み出し、
    前記輝度調整手段は、前記輝度低減処理を、フレーム単位、ライン単位、画素単位、走査線単位のうち、いずれかの単位によって行い、
    前記合成手段は、前記合成を、フレーム単位、ライン単位、画素単位、走査線単位のうち、いずれかの単位によって行う
    動画像表示装置。
  4. 請求項1ないし請求項のいずれか一項に記載の動画像表示装置であって、
    前記表示手段は、前記フレームレートを、前記生成した中間フレーム画像の数に応じて逓倍して前記表示を行う
    動画像表示装置。
  5. 請求項1ないし請求項4のいずれか一項に記載の動画像表示装置であって、
    前記合成手段は、2以上の中間フレーム画像を生成し、
    前記表示手段は、前記2以上の中間フレーム画像のうちの1の中間フレーム画像を表示するタイミングにおいて、該1の中間フレーム画像に換えて、輝度の低い所定のマスク画像の表示を行う
    動画像表示装置。
  6. 請求項1ないし請求項4のいずれか一項に記載の動画像表示装置であって、
    前記合成手段は、2以上の中間フレーム画像を生成し、
    前記輝度調整手段は、前記合成手段によって生成する中間フレーム画像のうち、所定の1枚の中間フレーム画像について適用する前記第1の輝度係数と前記第2の輝度係数との合計を1未満とする
    動画像表示装置。
  7. 動画像表示装置が、複数のフレーム画像を連続的に表示することで動画像を表示する動画像表示方法であって、
    所定のフレームレートで複数のフレーム画像が記録された動画像を入力し、
    前記入力した動画像から、連続して表示される第1のフレーム画像と第2のフレーム画像とを読み出し、
    前記第1のフレーム画像と前記第2のフレーム画像とに共通して撮像された移動体の動ベクトル量を求め、
    前記動ベクトル量に応じて、前記第1のフレーム画像の輝度値に0以上1以下の第1の輝度係数を、前記第2のフレーム画像の輝度値に0以上1以下の第2の輝度係数をそれぞれ積算することで、前記第1のフレーム画像と前記第2のフレーム画像との少なくともいずれか一方に対して、輝度を低減する輝度低減処理を行い、
    前記輝度低減処理を実行した後の前記第1のフレーム画像と前記第2のフレーム画像とを合成することで、1つ以上の中間フレーム画像を生成し、
    前記第1のフレーム画像の表示後で、前記第2のフレーム画像の表示前に、前記中間フレーム画像を表示しながら前記動画像の表示を行う動画像表示方法であり、
    前記輝度低減処理を行う際に、前記動ベクトル量が0となる場合、および、人間の視覚の追従性に基づいて予め定められた所定値を超える場合には、前記第1の輝度係数と前記第2の輝度係数とを共に同じ値に設定し、前記動ベクトル量が0よりも大きく、かつ、前記所定値以下の範囲では、前記動ベクトル量が大きいほど、前記第2の輝度係数を大きくすると共に前記第1の輝度係数を小さくする、
    動画像表示方法。
  8. コンピュータが、複数のフレーム画像を連続的に表示することで動画像を表示するためのコンピュータプログラムであって、
    所定のフレームレートで複数のフレーム画像が記録された動画像を入力する機能と、
    前記入力した動画像から、連続して表示される第1のフレーム画像と第2のフレーム画像とを読み出す機能と、
    前記第1のフレーム画像と前記第2のフレーム画像とに共通して撮像された移動体の動ベクトル量を求める機能と、
    前記動ベクトル量に応じて、前記第1のフレーム画像の輝度値に0以上1以下の第1の輝度係数を、前記第2のフレーム画像の輝度値に0以上1以下の第2の輝度係数をそれぞれ積算することで、前記第1のフレーム画像と前記第2のフレーム画像との少なくともいずれか一方に対して、輝度を低減する輝度低減処理を行う機能と、
    前記輝度低減処理を実行した後の前記第1のフレーム画像と前記第2のフレーム画像とを合成することで、1つ以上の中間フレーム画像を生成する機能と、
    前記第1のフレーム画像の表示後で、前記第2のフレーム画像の表示前に、前記中間フレーム画像を表示しながら前記動画像の表示を行う機能と
    をコンピュータに実現させるためのコンピュータプログラムであり、
    前記輝度低減処理を行う機能は、前記動ベクトル量が0となる場合、および、人間の視覚の追従性に基づいて予め定められた所定値を超える場合には、前記第1の輝度係数と前記第2の輝度係数とを共に同じ値に設定し、前記動ベクトル量が0よりも大きく、かつ、前記所定値以下の範囲では、前記動ベクトル量が大きいほど、前記第2の輝度係数を大きくすると共に前記第1の輝度係数を小さくする、
    コンピュータプログラム。
  9. 請求項に記載のコンピュータプログラムを記録したコンピュータ読取可能な記録媒体。
JP2005314217A 2005-10-28 2005-10-28 動画像表示装置および動画像表示方法 Expired - Fee Related JP4453647B2 (ja)

Priority Applications (6)

Application Number Priority Date Filing Date Title
JP2005314217A JP4453647B2 (ja) 2005-10-28 2005-10-28 動画像表示装置および動画像表示方法
US11/585,825 US7903173B2 (en) 2005-10-28 2006-10-25 Moving image display device and method for moving image display
KR1020060104456A KR100834567B1 (ko) 2005-10-28 2006-10-26 동화상 표시 장치 및 동화상 표시 방법
EP06022405A EP1788803A3 (en) 2005-10-28 2006-10-26 Moving image display device and method
TW095139454A TWI354264B (en) 2005-10-28 2006-10-26 Video display device and method for video display
CNB2006101374676A CN100452167C (zh) 2005-10-28 2006-10-27 动态图像显示装置和动态图像显示方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2005314217A JP4453647B2 (ja) 2005-10-28 2005-10-28 動画像表示装置および動画像表示方法

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2009277309A Division JP2010055112A (ja) 2009-12-07 2009-12-07 動画像表示装置および動画像表示方法

Publications (2)

Publication Number Publication Date
JP2007121704A JP2007121704A (ja) 2007-05-17
JP4453647B2 true JP4453647B2 (ja) 2010-04-21

Family

ID=37684842

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2005314217A Expired - Fee Related JP4453647B2 (ja) 2005-10-28 2005-10-28 動画像表示装置および動画像表示方法

Country Status (6)

Country Link
US (1) US7903173B2 (ja)
EP (1) EP1788803A3 (ja)
JP (1) JP4453647B2 (ja)
KR (1) KR100834567B1 (ja)
CN (1) CN100452167C (ja)
TW (1) TWI354264B (ja)

Families Citing this family (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4306671B2 (ja) * 2005-11-04 2009-08-05 セイコーエプソン株式会社 動画像表示装置および動画像表示方法
US7965274B2 (en) * 2006-08-23 2011-06-21 Ricoh Company, Ltd. Display apparatus using electrophoretic element
JP2008287119A (ja) * 2007-05-18 2008-11-27 Semiconductor Energy Lab Co Ltd 液晶表示装置の駆動方法
JP5091575B2 (ja) * 2007-07-20 2012-12-05 三洋電機株式会社 映像表示装置
JP4525946B2 (ja) * 2007-10-19 2010-08-18 ソニー株式会社 画像処理装置、画像表示装置および画像処理方法
TWI397889B (zh) * 2008-01-03 2013-06-01 Chi Lin Technology Co Ltd 具有改善畫面閃爍及畫面殘影之液晶顯示裝置與方法
TWI406217B (zh) * 2008-12-29 2013-08-21 Prime View Int Co Ltd 電泳式顯示裝置的顯示方法及運用此方法之電泳式顯示裝置
JP5556089B2 (ja) * 2009-09-01 2014-07-23 セイコーエプソン株式会社 画像表示装置および画像調整方法
US20110063522A1 (en) * 2009-09-14 2011-03-17 Jeyhan Karaoguz System and method for generating television screen pointing information using an external receiver
JP6099884B2 (ja) 2012-05-25 2017-03-22 三菱電機株式会社 立体画像表示装置
JP6337506B2 (ja) 2014-02-24 2018-06-06 セイコーエプソン株式会社 画像表示装置、及び、画像表示装置の制御方法
US9779484B2 (en) 2014-08-04 2017-10-03 Adobe Systems Incorporated Dynamic motion path blur techniques
US9955065B2 (en) * 2014-08-27 2018-04-24 Adobe Systems Incorporated Dynamic motion path blur user interface
US9723204B2 (en) 2014-08-27 2017-08-01 Adobe Systems Incorporated Dynamic motion path blur kernel
US10587818B2 (en) * 2016-08-02 2020-03-10 Magna Electronics Inc. Vehicle vision system with enhanced camera brightness control
KR20190041181A (ko) * 2017-10-12 2019-04-22 삼성전자주식회사 디스플레이 장치 및 그 제어방법
KR102242334B1 (ko) * 2019-12-16 2021-04-20 한국전자기술연구원 데이터 변형을 통한 고해상도 동영상 프레임 율 고속 변환 방법 및 장치
CN111883073B (zh) * 2020-07-22 2022-02-25 上海创功通讯技术有限公司 一种电子设备的显示方法及电子设备
CN111898701B (zh) * 2020-08-13 2023-07-25 网易(杭州)网络有限公司 模型训练、帧图像生成、插帧方法、装置、设备及介质

Family Cites Families (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE3144050C2 (de) 1981-11-03 1983-09-29 Deutsche Forschungs- und Versuchsanstalt für Luft- und Raumfahrt e.V., 5000 Köln Verfahren zur Übertragung und Wiedergabe von Videoszenen, insbesondere Luftbildszenen, mit reduzierter Bildfolgefrequenz
DE3523424C1 (de) 1985-06-29 1986-10-30 Deutsche Forschungs- und Versuchsanstalt für Luft- und Raumfahrt e.V., 5000 Köln Verfahren zur UEbertragung und Wiedergabe von Videoszenen,insbesondere Luftbildszenen,mit reduzierter Bildfolgefrequenz bei Relativbewegung der aufgenommenen Szene gegenueber dem Aufnahmesensor
US5214751A (en) 1987-06-04 1993-05-25 Thomson Grand Public Method for the temporal interpolation of images and device for implementing this method
FR2630842B1 (fr) 1988-04-29 1994-04-08 Labo Electronique Physique Appli Dispositif pour interpoler des images par estimation et compensation de mouvement et systeme convertisseur de standards de television constitue a partir d'un tel dispositif
JP3295437B2 (ja) 1991-03-29 2002-06-24 日本放送協会 表示装置
US5648814A (en) * 1995-09-27 1997-07-15 Intel Corporation Method and apparatus for optimizing camera function for video conferencing systems
US5872602A (en) * 1995-12-13 1999-02-16 Johnson; Robert E. Fluoroscopic imaging system with image enhancement apparatus and method
JP3716478B2 (ja) 1995-12-28 2005-11-16 ヤマハ株式会社 画像符号化復号方式
JPH10257435A (ja) 1997-03-10 1998-09-25 Sony Corp 映像信号再生装置及び映像信号再生方法
KR100247318B1 (ko) * 1997-11-22 2000-03-15 구자홍 영상신호의 밝기보정장치
JP2001296841A (ja) 1999-04-28 2001-10-26 Matsushita Electric Ind Co Ltd 表示装置
KR100363826B1 (ko) * 1999-06-07 2002-12-06 히다치덴시 가부시키가이샤 넓은 다이내믹레인지의 영상신호를 생성하는텔레비젼신호처리장치와 그 신호처리장치를 가지는텔레비젼카메라 및 텔레비젼신호처리방법
JP2001008216A (ja) 1999-06-21 2001-01-12 Matsushita Electric Ind Co Ltd 画像処理装置
JP3385530B2 (ja) 1999-07-29 2003-03-10 日本電気株式会社 液晶表示装置およびその駆動方法
JP2001218172A (ja) 2000-01-31 2001-08-10 Nec Corp 動画像復号器におけるフレームレート変換装置、フレームレート変換方法、およびその記録媒体、集積回路装置
JP3643770B2 (ja) 2000-11-30 2005-04-27 三洋電機株式会社 液晶表示装置及びその表示方法
KR100367015B1 (ko) 2000-12-29 2003-01-09 엘지.필립스 엘시디 주식회사 액정 표시장치의 구동방법
JP2003069961A (ja) 2001-08-27 2003-03-07 Seiko Epson Corp フレームレートの変換
JP4198550B2 (ja) 2002-09-10 2008-12-17 株式会社東芝 フレーム補間方法およびこのフレーム補間方法を用いた装置
KR100530223B1 (ko) * 2003-05-13 2005-11-22 삼성전자주식회사 프레임 레이트 변환시의 프레임 보간 방법 및 그 장치
JP3958254B2 (ja) 2003-06-11 2007-08-15 株式会社東芝 液晶表示装置、液晶表示方法
KR100524077B1 (ko) * 2003-11-13 2005-10-26 삼성전자주식회사 중간 영상 합성을 위한 시간적 평활화 장치 및 방법
JP3801179B2 (ja) 2004-01-30 2006-07-26 松下電器産業株式会社 フレーム巡回型ノイズ低減方法
JP2005241787A (ja) 2004-02-25 2005-09-08 Victor Co Of Japan Ltd 画像表示装置

Also Published As

Publication number Publication date
KR100834567B1 (ko) 2008-06-02
TW200729151A (en) 2007-08-01
US20070097260A1 (en) 2007-05-03
EP1788803A3 (en) 2009-04-29
US7903173B2 (en) 2011-03-08
CN100452167C (zh) 2009-01-14
EP1788803A2 (en) 2007-05-23
KR20070045949A (ko) 2007-05-02
JP2007121704A (ja) 2007-05-17
TWI354264B (en) 2011-12-11
CN1956053A (zh) 2007-05-02

Similar Documents

Publication Publication Date Title
JP4306671B2 (ja) 動画像表示装置および動画像表示方法
JP4453647B2 (ja) 動画像表示装置および動画像表示方法
CN100510854C (zh) 数据写入电路和使用该数据写入电路的显示装置
JP4795870B2 (ja) 液晶表示装置の駆動装置及び駆動方法
CN101518067B (zh) 图像显示装置及方法
US7800691B2 (en) Video signal processing apparatus, method of processing video signal, program for processing video signal, and recording medium having the program recorded therein
JP2009109694A (ja) 表示装置
JP2007213017A (ja) 液晶表示装置の駆動装置及び駆動方法
JP2007271842A (ja) 表示装置
TW201409448A (zh) 顯示器,影像處理單元,以及顯示方法
JP3841104B2 (ja) 動画ボケ改善のための信号処理
JP2010055112A (ja) 動画像表示装置および動画像表示方法
JP4181613B2 (ja) 画像表示装置及び方法
JP2012095035A (ja) 画像処理装置及びその制御方法
JP4923635B2 (ja) 動画像表示装置及び動画像表示方法
JP2010091711A (ja) 表示装置
CN100511391C (zh) 用于动图像模糊改善的信号处理
JP4181612B2 (ja) 画像表示装置及び方法
JP3841105B1 (ja) 動画ボケ改善のための信号処理
KR100747290B1 (ko) 액정 표시장치의 잔상 저감 장치 및 그 방법
JP5561081B2 (ja) 画像表示装置
JP5003063B2 (ja) 動画像表示装置および動画像表示方法。
JP2008058483A (ja) 動画像表示装置および動画像表示方法
JP2008072300A (ja) 映像表示装置
JP2006165974A (ja) 映像信号処理回路、画像表示システム、及び、映像信号処理方法

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20090915

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20091006

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20091207

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20100112

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20100125

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130212

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Ref document number: 4453647

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130212

Year of fee payment: 3

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

LAPS Cancellation because of no payment of annual fees