JP3767582B2 - 画像表示装置、画像表示方法及び画像表示プログラム - Google Patents
画像表示装置、画像表示方法及び画像表示プログラム Download PDFInfo
- Publication number
- JP3767582B2 JP3767582B2 JP2003179595A JP2003179595A JP3767582B2 JP 3767582 B2 JP3767582 B2 JP 3767582B2 JP 2003179595 A JP2003179595 A JP 2003179595A JP 2003179595 A JP2003179595 A JP 2003179595A JP 3767582 B2 JP3767582 B2 JP 3767582B2
- Authority
- JP
- Japan
- Prior art keywords
- frame data
- image display
- image
- data
- corrected
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/426—Internal components of the client ; Characteristics thereof
- H04N21/42692—Internal components of the client ; Characteristics thereof for reading from or writing on a volatile storage medium, e.g. Random Access Memory [RAM]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/426—Internal components of the client ; Characteristics thereof
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/438—Interfacing the downstream path of the transmission network originating from a server, e.g. retrieving encoded video stream packets from an IP network
- H04N21/4382—Demodulation or channel decoding, e.g. QPSK demodulation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/14—Picture signal circuitry for video frequency region
- H04N5/20—Circuitry for controlling amplitude response
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/66—Transforming electric information into light information
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/14—Systems for two-way working
- H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
- H04N7/147—Communication arrangements, e.g. identifying the communication as a video-communication, intermediate storage of the signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/14—Systems for two-way working
- H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
- H04N7/142—Constructional details of the terminal equipment, e.g. arrangements of the camera and the display
- H04N2007/145—Handheld terminals
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Liquid Crystal Display Device Control (AREA)
- Control Of Indicators Other Than Cathode Ray Tubes (AREA)
- Transforming Electric Information Into Light Information (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Controls And Circuits For Display Device (AREA)
Description
【０００１】
【発明の属する技術分野】
本発明は、液晶表示パネルその他の画像表示部を有し、圧縮動画データに対して復号を行ってフレームデータを作成し、さらに前記フレームデータを前記画像表示部の表示特性を改善するように補正して表示する画像表示装置、画像表示方法及び画像表示プログラムに関する。
【０００２】
【背景技術】
画像をデジタル化して記憶媒体に記憶する場合、一般的には画像データは圧縮符号化して記憶される。特に画像が動画像である場合には、データ量が膨大であるためにハードウェアの負担が大きいことから、画像を圧縮する必要がある。その圧縮技術としては、例えば国際標準規格の画像圧縮技術がＭＰＥＧ（Moving Picture Experts Group）として定められている。この方法により符号化した動画像は、画像の画質をほとんど損なうことなく再生することができる。
【０００３】
一般的に多く用いられているＤＣＴ（Discrete Cosine Transform：離散コサイン変換）の直交変換をベースとした方式で符号化された画像を復号して再生する画像処理技術が特許文献１に開示されている。特許文献１に記載されている画像表示装置は、ＭＰＥＧデータに対して復号を行うＤＳＰ（Digital Signal Processor）と、ＤＳＰからのデータに基づいて表示パネルの表示制御を行うドライバとを信号線で接続してなる。
【０００４】
ＤＳＰは、ＭＰＥＧデータに対して可変長のハフマン符号による復号を行う可変長復号部と、可変長復号部からのデータに対して逆量子化を行う逆量子化部と、逆量子化部からのデータに対して逆離散コサイン変換を行ってフレームデータを生成するＩＤＣＴ（Inverse Discrete Cosine Transform：逆離散コサイン変換）部とで構成されており、ＩＤＣＴ部からのフレームデータを信号線を介してドライバに出力するようになっている。
【０００５】
ドライバは、ＤＳＰからのフレームデータを参照フレームデータとして格納する内蔵型のメモリである参照フレームメモリと、参照フレームメモリのフレームデータを参照してＤＳＰからのフレームデータに対して動き補償を行う動き補償部と、ＤＳＰからのフレームデータまたは動き補償部からのフレームデータに対して色素変換を行うＲＧＢ変換部と、ＲＧＢ変換部からのフレームデータを表示データとして記憶する表示メモリと、表示メモリの表示データを表示パネルに出力する表示データ出力部とで構成されている。
【０００６】
以上の例のように、ＭＰＥＧに従う動画像の再生においては、参照フレームメモリ内に格納されたフレームデータを参照して、表示すべき画像が作成される。即ち、ＭＰＥＧなどにより圧縮された動画像を復号して表示するためには、動き補償処理を実行するために前フレームの画像データを一時的に保持する参照フレームメモリが必要となる。
【０００７】
一方、液晶表示パネルなどにおいては、液晶材料の応答が遅いことにより動画像の表示特性が低下するという問題があり、それに対する対策としてレベルアダプティブ・オーバードライブ（Level Adaptive Overdrive、以下「ＬＡＯ」ともいう。）という手法が知られている。ＬＡＯにより液晶表示パネルの表示特性を改善する手法が例えば特許文献２に記載されている。特許文献２においては、フレーム間の画像変化量を強調して駆動する手法が記載されている。
【０００８】
このＬＡＯを実施する場合においても、現在のフレームデータと前のフレームデータとの差分を取る工程があるため、参照フレームが必要となり、そのためのフレームメモリが要求される。
【０００９】
また、ＭＰＥＧにより符号化された動画の再生時に、上述のようなＬＡＯ技術を適用した動画再生システムについて報告されている（非特許文献１）。この技術においては、ＭＰＥＧデータの復号とオーバードライブ処理を異なるブロックで実施しているため、それぞれに参照フレームメモリが設けられている。
【００１０】
【特許文献１】
特開２００１−２９６８４７号公報
【特許文献２】
特許第３３０５２４０号
【非特許文献１】
M. Baba and H. Okumura, EURODISPLAY2002, pp.155-158, Oct, 2002
【００１１】
【発明が解決しようとする課題】
このように、ＭＰＥＧによる圧縮動画像データを復号する時には必ず参照フレームが必要になり、また液晶表示パネルに動画像を再生する場合に液晶パネルの表示特性を改善するＬＡＯ処理を行う場合も参照フレームが必要となる。よって、上述の非特許文献１のように、ＭＰＥＧデータの復号を液晶表示パネルの表示特性を改善するＬＡＯ技術と併用して行った場合には、ＭＰＥＧデータの復号ブロックと、ＬＡＯ処理のブロックのそれぞれに参照フレームメモリが必要となる。
【００１２】
近年では、携帯電話等の携帯端末を利用して、オーディオや動画等の様々なマルチメディアデータを利用することができるようになってきている。しかし、携帯端末は、実用上、消費電力の低減、小型化、コストの削減および軽量化等を図る必要がある。よって、ＭＰＥＧによる動画像データを液晶表示パネルに表示するタイプの携帯端末においてＬＡＯ技術を用いて画像表示特性を改善する場合、コストなどの面から複数の参照フレームメモリを搭載することは難しい。
【００１３】
本発明は、上記のような問題を解決するためになされたもので、その目的とするところは、液晶表示パネルその他の画像表示部を有し、圧縮動画データに対して復号を行い、表示特性を改善するように補正して表示する場合に、フレームメモリの数を削減して、消費電力の低減、小型化、低コスト化などを実現することが可能な画像表示装置、画像表示方法及び画像表示プログラムを提供することにある。
【００１４】
【課題を解決するための手段】
本発明の１つの観点では、画像表示部を備え、圧縮動画データを表示する画像表示装置において、入力された前記圧縮動画データに対して復号を行い、前記画像表示部に表示されるフレームデータを作成する画像復号手段と、前記画像復号手段により作成されたフレームデータを記憶するフレームデータ記憶部と、前記フレームデータ記憶部に記憶された先行するフレームデータを利用して、入力された補正の対象となるフレームデータを補正するフレームデータ補正手段と、前記復号及び前記補正がなされたフレームデータを前記画像表示部に表示する表示手段と、を備え、前記画像復号手段は、前記先行するフレームデータを利用して前記圧縮動画データの復号を行う。
【００１５】
本発明の同様の観点では、画像表示部を備え、圧縮動画データを表示する画像表示装置において実行される画像表示方法において、入力された前記圧縮動画データに対して復号を行い、前記画像表示部に表示されるフレームデータを作成する画像復号工程と、前記画像復号手段により作成されたフレームデータをフレームデータ記憶部に記憶する記憶工程と、前記フレームデータ記憶部に記憶された先行するフレームデータを利用して、入力された補正の対象となるフレームデータを補正する補正工程と、前記復号及び前記補正がなされたフレームデータを前記画像表示部に表示する表示工程と、を備え、前記画像復号工程では、前記先行するフレームデータを利用して前記圧縮動画データの復号を行う。
【００１６】
本発明の同様の観点では、画像表示部及びフレームデータ記憶部を備え、圧縮動画データを表示する画像表示装置において実行される画像表示プログラムであって、前記画像表示装置を、入力された前記圧縮動画データに対して復号を行い、前記画像表示部に表示されるフレームデータを作成する画像復号手段、前記画像復号手段により作成されたフレームデータを前記フレームデータ記憶部に記憶する記憶手段、前記フレームデータ記憶部に記憶された先行するフレームデータを利用して、入力された補正の対象となるフレームデータを補正する補正手段、及び前記復号及び前記補正がなされたフレームデータを前記画像表示部に表示する表示制御手段、として機能させ、前記画像復号手段は、前記先行するフレームデータを利用して前記圧縮動画データの復号を行う。
【００１７】
上記の画像表示装置、画像表示方法及び画像表示プログラムは、携帯電話などの携帯端末に好適に適用され、外部から入力される圧縮動画データを携帯端末上に表示する。圧縮動画データの一例はＭＰＥＧデータである。入力された動画データを復号してフレームデータが生成され、これが例えばフレームメモリなどのフレームデータ記憶部に記憶される。圧縮動画データは時間的に前後するフレーム画像間の相関を利用して圧縮がなされており、復号時には、フレームデータ記憶部に記憶された先行するフレームデータを利用して復号が行われる。また、復号により得られたフレームデータに対しては、例えばＬＡＯ処理などの補正処理が行われる。この補正処理も、先行するフレームデータを利用するものであり、補正後のフレームデータが画像表示部に表示される。圧縮動画データの復号処理と、復号により得られたフレームデータの補正処理はともに先行するフレームデータを利用して行われるが、同一のフレームデータ記憶部を両処理で共用することにより、個別にフレームデータ記憶部を設ける必要が無くなり、装置全体のコスト低減などが可能となる。
【００１８】
上記の画像表示装置の一態様では、前記フレームデータ補正手段は、前記補正の対象となるフレームデータと、当該フレームデータの前の前記先行するフレームデータとの差分値に応じて定められた係数により、前記補正の対象となるフレームデータのレベルを補正する。液晶表示装置などにおいては、いわゆるＬＡＯ処理により、前後するフレームデータ間で画素値の変化が大きい部分に対して大きなレベルで表示装置を駆動することにより、動画像表示特性の改善が図られる。
【００１９】
上記の画像表示装置の他の一態様では、画像表示部を備え、圧縮動画データを表示する画像表示装置において、入力された前記圧縮動画データに対して復号を行い、前記画像表示部に表示されるフレームデータを作成する画像復号手段と、前記画像復号手段により作成されたフレームデータを記憶するフレームデータ記憶部と、前記フレームデータ記憶部に記憶された先行するフレームデータを利用して、入力された補正の対象となるフレームデータを補正するフレームデータ補正手段と、前記復号及び前記補正がなされたフレームデータを前記画像表示部に表示する表示手段と、を備え、前記画像復号手段は、前記先行するフレームデータを利用して前記圧縮動画データの復号を行い、前記フレームデータ補正手段は、入力された前記補正の対象となるフレームデータに補正を行ったフレームデータと、入力された前記補正の対象となるフレームデータに補正を行わないフレームデータとを出力し、前記表示手段は、前記フレームデータ補正手段により補正されたフレームデータと、補正されていないフレームデータとを交互に出力することにより、前記画像表示部に表示する。これにより、上述のＬＡＯ処理などによる補正に加えて、表示すべき画像データのフレームレートを上げることにより、さらに画質の改善が可能となる。
【００２０】
上記の画像表示装置の他の一態様では、画像表示部を備え、圧縮動画データを表示する画像表示装置において、入力された前記圧縮動画データに対して復号を行い、前記画像表示部に表示されるフレームデータを作成する画像復号手段と、前記画像復号手段により作成されたフレームデータを記憶するフレームデータ記憶部と、前記フレームデータ記憶部に記憶された先行するフレームデータを利用して、入力された補正の対象となるフレームデータを補正するフレームデータ補正手段と、前記復号及び前記補正がなされたフレームデータを前記画像表示部に表示する表示手段と、を備え、前記画像復号手段は、前記先行するフレームデータを利用して前記圧縮動画データの復号を行い、前記フレームデータ補正手段に入力される前記補正の対象となるフレームデータが輝度成分を含み、前記フレームデータ補正手段は、前記輝度成分のみに補正を行う。人間の視覚は、色差成分よりも輝度成分に対する感度が高いことがわかっている。よって、フレームデータの全成分に対して補正を行うのではなく、輝度成分のみに補正を行うこととしても、かなりの画質改善が期待できる。これにより、補正処理の負担を軽減することができ、コストの削減が可能となる。
【００２１】
【発明の実施の形態】
以下、図面を参照して本発明の好適な実施の形態について説明する。
【００２２】
（第１実施形態）
図１は、本発明の第１実施形態に係る動画再生装置を示す図である。図１は、本実施形態に係る画像表示装置を、例えば携帯端末において、ＭＰＥＧによる圧縮画像を復号して表示パネルに動画を表示する場合について適用したものである。なお、携帯端末には、携帯電話、ＰＤＡ、小型コンピュータなどの各種の端末装置が含まれる。
【００２３】
本実施形態に係る画像表示装置５００の構成を、図１を参照しながら説明する。図１は、画像表示装置５００の構成を示すブロック図である。なお、ＭＰＥＧデータについては、従来のＭＰＥＧに基づく符号フォーマットを採用するものとする。
【００２４】
画像表示装置５００は、図１に示すように、ＭＰＥＧデータに対して復号を行うＤＳＰ（Digital Signal Processor）１００と、ＤＳＰ１００からのデータに基づいて表示パネル３００の表示制御を行うドライバ２００とを信号線１５０で接続して構成される。なお、入力されるＭＰＥＧの画像データは、ＹＵＶ形式のデータ（Ｙ；輝度、Ｕ；赤の色差、Ｖ；青の色差）であるものとする。
【００２５】
まず、ＤＳＰ１００でのデータ処理について説明する。可変長復号部１１は、ＭＰＥＧデータに対して可変長のハフマン符号による復号を行う。次に、この可変長復号部１１からのデータに対して、逆量子化部１２では逆量子化の処理を行う。さらに逆量子化部１２からのデータに対して、ＩＤＣＴ（Inverse Discrete Cosine Transform：逆離散コサイン変換）部１３では逆離散コサイン変換を行ってフレームデータを生成する。このＩＤＣＴ部１３からのフレームデータは、信号線１５０を介してドライバ２００に出力される。
【００２６】
次に、ドライバ２００内での処理について説明する。まず、内蔵型のメモリである参照フレームメモリ１７内に、ＤＳＰ１００からのフレームデータが参照フレームデータとして格納される。次に、動き補償部１８では参照フレームメモリ１７のフレームデータを参照して、ＤＳＰ１００からのフレームデータに対して動き補償が行われ、表示すべき画像のフレームデータが作成される。さらに本実施形態においては、ドライバ２００は、表示パネル３００の表示特性を改善するために、このフレームデータにオーバードライブ処理を行うＬＡＯ処理部１９を備えている。この処理については、詳しくは後述する。ＬＡＯ処理部１９で処理されたフレームデータは、ＲＧＢ変換部１４でＹＵＶ形式の画像データからＲＧＢ形式の画像データに色素変換され、このＲＧＢ変換部１４からのフレームデータは表示メモリ１５に表示データとして記憶される。最後に、この記憶した表示データは表示データ出力部１６に送られ、表示パネル３００に供給されて表示される。
【００２７】
次に、本実施形態の詳細な処理について説明する。
【００２８】
まず、動き補償部１８での処理について述べる。ＭＰＥＧによる圧縮動画データは、Ｉピクチャ（Intra Coded Picture）、Ｐピクチャ（Predictive Coded Picture）およびＢピクチャ（Bidirectionally Predictive Coded Picture）の３種類を含む。画像データのタイプと復号時の順序について図２を用いて説明する。Ｉピクチャは画像を単独で復号することができるデータであり、Ｐピクチャは過去のフレームから一方向のフレーム間予測を行い、差分を符号化したデータであり、Ｂピクチャは過去と未来の２つのフレームから二方向のフレーム間予測を行い、差分を符号化したデータである。このようにＭＰＥＧデータは、３種類の異なる形式のデータを含んでいるので、画像表示装置５００では、Ｉピクチャ、ＰピクチャおよびＢピクチャに応じてそれぞれ復号が行われる。具体的には、以下のような処理が行われる。
【００２９】
Ｉピクチャについては、ドライバ２００は、ＤＳＰ１００からフレームデータが入力されると、入力されたフレームデータを参照フレームメモリ１７に格納するとともにＬＡＯ処理部１９に出力する。
【００３０】
Ｐピクチャについては、ドライバ２００では、ＤＳＰ１００からフレームデータが入力されると、動き補償部１８が参照フレームメモリ１７の前フレームデータを参照して、ＩＤＣＴ部１３から入力された各ブロックの差分値と、参照された前フレームのブロックの画素値とを加算し、参照フレームメモリ１７に格納するとともにＬＡＯ処理部１９に出力する。
【００３１】
Ｂピクチャについては、ドライバ２００では、ＤＳＰ１００からフレームデータが入力されると、動き補償部１８が参照フレームメモリ１７の前／後フレームデータを参照して、ＩＤＣＴ部１３から入力された各ブロックの差分値と、参照された前／後フレームのブロックの画素値とを加算してＬＡＯ処理部１９に出力する。
【００３２】
次に、ＬＡＯ処理部１９での処理について述べる。ＬＡＯ処理部１９では、ＬＣＤなどの表示パネルにおいて、動画像を表示する際の表示特性を改善するためにＬＡＯ処理が行われる。
【００３３】
まず、上述したＬＡＯ処理について、具体例を挙げて説明する。一般に液晶表示パネルに使用されている液晶が持つ粘性により、液晶分子の配向の変化は電界の変化に対して遅れてしまう。例えば図３（ａ）に示すように急峻なレベル変化を有する入力信号Ｓiにより液晶パネルの画素を駆動した場合でも、液晶分子の配向は時間的に緩やかに変化するため、信号Ｓｏで示す画素の階調レベルの変化には応答の遅れが生じる。なお、立ち下がりも同様に遅れるが図示は省略する。そこで、液晶パネルの駆動回路に供給する入力信号波形にレベル補正を行い、応答を改善する手法が用いられる。即ち、図３（ｂ）に示すように、入力信号Ｓiに対して、所定期間にわたりレベルを増加した信号Ｓｃを生成し、この信号Ｓｃで液晶パネルを駆動することにより、液晶パネルの応答を改善することができる。信号Ｓｃの最大レベル部分のレベルは、入力信号のレベルと一定時間前の入力信号のレベルなどに基づいて決定される。例えば、入力信号のレベルと一定時間前の入力信号のレベルの差分の絶対値が大きければ、補正後の信号Ｓｃの最大レベルには大きな値が決定される。なお、ｔ１はレベルが増加された信号の時間幅であり、例えば１フレーム期間の時間に相当する。
【００３４】
このように、ＬＡＯ処理においては、一定時間前の入力信号のレベルを知る必要があるために、参照フレームメモリ内のフレームデータが用いられることとなる。
【００３５】
本実施形態においては、オーバードライブ処理を行うときに用いる上述したような参照フレームメモリを、ＭＰＥＧデータを復号する際に用いるものと共用するようにした。以下で、ＬＡＯ処理部１９で行われる具体的な処理方法について説明する。
【００３６】
ＬＡＯ処理部１９では、参照フレームメモリ１７に記憶されているフレームデータ（前フレームデータ）と動き補償部１８から送られてくる表示すべきフレームデータ（現フレームデータ）に基づき補正が行われる。具体的には、例えば、参照フレームメモリ１７に格納されているフレームデータと、動き補償部１８から送られてくるフレームデータの差分値にある係数を掛けた値を、動き補償部１８から送られてくるフレームデータに加算するような補正が行われる。この係数は、差分値の絶対値が大きければ大きな値に決定される。以上のようにＬＡＯ処理部１９で処理されたフレームデータは、ＲＧＢ変換部１４に送られ、表示パネル３００への表示に至る後続の処理がなされていく。
【００３７】
このように、ＬＡＯ処理部１９でのオーバードライブ処理により、動画像を表示する際の表示パネル３００の表示特性が改善されることになる。ここで、本実施形態では、オーバードライブ処理に用いる参照フレームメモリと、ＭＰＥＧデータの復号に用いる参照フレームメモリを共用しているため、余分なフレームメモリを削減することができる。
【００３８】
（第２実施形態）
次に、第２実施形態に係る画像表示装置について、図４を用いて説明する。本実施形態では、第１実施形態と同様にＬＡＯ処理により画像表示特性を改善することに加え、表示すべき動画像のフレームレートを増大することにより、さらに表示特性を改善する。即ち、画像表示装置に対して入力される動画像データを復号した後、フレームデータを内挿することによりフレームレートを例えば２倍に増加させる。その際、ＬＡＯ処理部１９において処理が行われて表示されるに至った画像の直後に表示するフレームデータに対してはオーバードライブ処理を行わない。なお、本実施形態を適用する画像表示装置は、入力される動画像データの２倍のフレームレートで画像表示能力を有することが前提となる。以下、その具体的な処理方法について説明する。
【００３９】
まず、ＭＰＥＧデータが入力されたときのＤＳＰ１００での処理は、第１実施形態と同様である。可変長復号部１１は、ＭＰＥＧデータに対して可変長のハフマン符号による復号を行う。この可変長復号部１１からのデータに対して、逆量子化部１２では逆量子化の処理を行う。さらに逆量子化部１２からのデータに対して、ＩＤＣＴ部１３では逆離散コサイン変換を行ってフレームデータを生成する。このＩＤＣＴ部１３からのフレームデータは、信号線１５０を介してドライバ２００に出力するようになっている。
【００４０】
次に、ドライバ２００内での処理について説明する。ドライバ２００は、第１実施形態と同様に、フレームデータを格納する参照フレームメモリ１７と、動き補償を行う動き補償部１８と、オーバードライブの処理を行うＬＡＯ処理部１９と、ＹＵＶ形式の画像データからＲＧＢ形式の画像データに色素変換するＲＧＢ変換部１４と、表示データを記憶する表示メモリ１５と、表示データ出力部１６から構成される。表示データ出力部１６からの出力がＬＣＤなどの表示パネル３００に供給されて表示される。
【００４１】
ここで、本実施形態に係る動画再生方法と、データの処理方法について説明する。まず、動き補償部１８から送られてくるフレームデータに対して、ＬＡＯ処理部１９で表示パネル３００の表示特性を改善するためのＬＡＯ処理が、第１実施形態と同様の方法で行われ、さらに、この後の処理が行われて表示パネル３００に表示される。本実施形態においては、この後に表示されるフレームデータには、ＬＡＯ処理部１９で処理を行わない。ＬＡＯ処理では、前フレームデータとの差分値に応じてレベルを変更するが、本実施形態の場合は同じフレームデータを内挿してフレームレートを２倍にするため、内挿されたフレームデータはそれに先行するフレームデータと同一であり、差分は０となるため、ＬＡＯ処理は不要となる。
【００４２】
具体的な方法としては、例えば、ＬＡＯ処理の後に表示されるフレームデータにおいては、差分値に掛ける係数を「０」として処理を行うという方法がある。つまり、ＬＡＯ処理の後に表示される画像は、前の画像と同じものが表示されることになり、例えば、奇数番目のフレームはＬＡＯ処理が行われたものが表示され、偶数番目のフレームはＬＡＯ処理が行われていない、前と同じものが表示されることになる。
【００４３】
以上の処理により、元のＭＰＥＧデータに対して、ＬＡＯ処理がなされたフレームが内挿された動画像が再生されることになる。また、入力したＭＰＥＧデータのフレームレートの２倍のフレームレートで動画像が表示できるようになる。例えば、毎秒６０フレームのフレームレートで再生可能の表示装置に対して、毎秒３０フレームのＭＰＥＧデータが入力されたとき、上述の処理により毎秒６０フレームで再生することができる。
【００４４】
このように、本実施形態では、ＬＡＯ処理に加えて、表示画像のフレームレートを増加させて表示するので、動画像を表示する際の表示特性をさらに改善することが可能となる。
【００４５】
（第３実施形態）
次に、本発明の第３実施形態について説明する。第３実施形態においては、ＬＡＯ処理部１９で行う処理が第１実施形態及び第２実施形態とは異なる。第３実施形態に係る画像表示装置を適用した表示制御装置を図５に示す。
【００４６】
前述の第１及び第２実施形態ではＬＡＯ処理部１９において、入力されるＹＵＶ形式の画像データのＹ、Ｕ，Ｖの全ての成分にＬＡＯ処理を行っていたのに対して、本実施形態では、入力されるＹＵＶ形式の画像データのＹ成分のみにＬＡＯ処理を行い、ＵとＶ成分にはＬＡＯ処理を行わない。人間の視覚は、視覚刺激の色差や色相の空間（Ｕ、Ｖ空間）に対する感度よりも輝度（Ｙ）に対する感度の方が優れているという特性を有している。よって、輝度（Ｙ）成分に対してのみＬＡＯ処理を適用しても、人間が視覚上感じる表示特性改善効果は大きく、これによりＬＡＯ処理部における処理負担を軽減することができる
具体的には、図５に示すように、動き補償部１８から出力されるＹ、Ｕ、Ｖ成分のうち、Ｙ成分のみをＬＡＯ処理部１９に入力し、他のＵ及びＶ成分はＬＡＯ処理部１９をバイパスしてＲＧＢ処理部１４へ供給する。また、参照フレームメモリ１７からＬＡＯ処理部１９へは、連続するフレーム間のＹ成分のみの差分値が供給される。これにより、ＬＡＯ処理部１９はＹ成分のみに対してＬＡＯ処理を行う。
【００４７】
このように第３実施形態では、ＬＡＯ処理部における演算量が削減される。よって、演算回路を簡素化することができ、装置を低価格化することができる。
【図面の簡単な説明】
【図１】 第１実施形態に係る画像表示装置の構成を示すブロック図である。
【図２】 ＭＰＥＧによる圧縮画像データについて説明する図である。
【図３】 オーバードライブ処理を説明するための図である。
【図４】 第２実施形態に係る画像表示装置の構成を示すブロック図である。
【図５】 第３実施形態に係る画像表示装置の構成を示すブロック図である。
【符号の説明】
１００ ＤＳＰ、 ２００ ドライバ、 ３００表示パネル、 ５００ 画像表示装置、 １１ 可変長復号部、 １２ 逆量子化部、 １３ ＩＤＣＴ部、１４ ＲＧＢ変換部、 １５ 表示メモリ、 １６ 表示データ出力部、 １７ 参照フレームメモリ、 １８ 動き補償部、 １９ ＬＡＯ処理部
【発明の属する技術分野】
本発明は、液晶表示パネルその他の画像表示部を有し、圧縮動画データに対して復号を行ってフレームデータを作成し、さらに前記フレームデータを前記画像表示部の表示特性を改善するように補正して表示する画像表示装置、画像表示方法及び画像表示プログラムに関する。
【０００２】
【背景技術】
画像をデジタル化して記憶媒体に記憶する場合、一般的には画像データは圧縮符号化して記憶される。特に画像が動画像である場合には、データ量が膨大であるためにハードウェアの負担が大きいことから、画像を圧縮する必要がある。その圧縮技術としては、例えば国際標準規格の画像圧縮技術がＭＰＥＧ（Moving Picture Experts Group）として定められている。この方法により符号化した動画像は、画像の画質をほとんど損なうことなく再生することができる。
【０００３】
一般的に多く用いられているＤＣＴ（Discrete Cosine Transform：離散コサイン変換）の直交変換をベースとした方式で符号化された画像を復号して再生する画像処理技術が特許文献１に開示されている。特許文献１に記載されている画像表示装置は、ＭＰＥＧデータに対して復号を行うＤＳＰ（Digital Signal Processor）と、ＤＳＰからのデータに基づいて表示パネルの表示制御を行うドライバとを信号線で接続してなる。
【０００４】
ＤＳＰは、ＭＰＥＧデータに対して可変長のハフマン符号による復号を行う可変長復号部と、可変長復号部からのデータに対して逆量子化を行う逆量子化部と、逆量子化部からのデータに対して逆離散コサイン変換を行ってフレームデータを生成するＩＤＣＴ（Inverse Discrete Cosine Transform：逆離散コサイン変換）部とで構成されており、ＩＤＣＴ部からのフレームデータを信号線を介してドライバに出力するようになっている。
【０００５】
ドライバは、ＤＳＰからのフレームデータを参照フレームデータとして格納する内蔵型のメモリである参照フレームメモリと、参照フレームメモリのフレームデータを参照してＤＳＰからのフレームデータに対して動き補償を行う動き補償部と、ＤＳＰからのフレームデータまたは動き補償部からのフレームデータに対して色素変換を行うＲＧＢ変換部と、ＲＧＢ変換部からのフレームデータを表示データとして記憶する表示メモリと、表示メモリの表示データを表示パネルに出力する表示データ出力部とで構成されている。
【０００６】
以上の例のように、ＭＰＥＧに従う動画像の再生においては、参照フレームメモリ内に格納されたフレームデータを参照して、表示すべき画像が作成される。即ち、ＭＰＥＧなどにより圧縮された動画像を復号して表示するためには、動き補償処理を実行するために前フレームの画像データを一時的に保持する参照フレームメモリが必要となる。
【０００７】
一方、液晶表示パネルなどにおいては、液晶材料の応答が遅いことにより動画像の表示特性が低下するという問題があり、それに対する対策としてレベルアダプティブ・オーバードライブ（Level Adaptive Overdrive、以下「ＬＡＯ」ともいう。）という手法が知られている。ＬＡＯにより液晶表示パネルの表示特性を改善する手法が例えば特許文献２に記載されている。特許文献２においては、フレーム間の画像変化量を強調して駆動する手法が記載されている。
【０００８】
このＬＡＯを実施する場合においても、現在のフレームデータと前のフレームデータとの差分を取る工程があるため、参照フレームが必要となり、そのためのフレームメモリが要求される。
【０００９】
また、ＭＰＥＧにより符号化された動画の再生時に、上述のようなＬＡＯ技術を適用した動画再生システムについて報告されている（非特許文献１）。この技術においては、ＭＰＥＧデータの復号とオーバードライブ処理を異なるブロックで実施しているため、それぞれに参照フレームメモリが設けられている。
【００１０】
【特許文献１】
特開２００１−２９６８４７号公報
【特許文献２】
特許第３３０５２４０号
【非特許文献１】
M. Baba and H. Okumura, EURODISPLAY2002, pp.155-158, Oct, 2002
【００１１】
【発明が解決しようとする課題】
このように、ＭＰＥＧによる圧縮動画像データを復号する時には必ず参照フレームが必要になり、また液晶表示パネルに動画像を再生する場合に液晶パネルの表示特性を改善するＬＡＯ処理を行う場合も参照フレームが必要となる。よって、上述の非特許文献１のように、ＭＰＥＧデータの復号を液晶表示パネルの表示特性を改善するＬＡＯ技術と併用して行った場合には、ＭＰＥＧデータの復号ブロックと、ＬＡＯ処理のブロックのそれぞれに参照フレームメモリが必要となる。
【００１２】
近年では、携帯電話等の携帯端末を利用して、オーディオや動画等の様々なマルチメディアデータを利用することができるようになってきている。しかし、携帯端末は、実用上、消費電力の低減、小型化、コストの削減および軽量化等を図る必要がある。よって、ＭＰＥＧによる動画像データを液晶表示パネルに表示するタイプの携帯端末においてＬＡＯ技術を用いて画像表示特性を改善する場合、コストなどの面から複数の参照フレームメモリを搭載することは難しい。
【００１３】
本発明は、上記のような問題を解決するためになされたもので、その目的とするところは、液晶表示パネルその他の画像表示部を有し、圧縮動画データに対して復号を行い、表示特性を改善するように補正して表示する場合に、フレームメモリの数を削減して、消費電力の低減、小型化、低コスト化などを実現することが可能な画像表示装置、画像表示方法及び画像表示プログラムを提供することにある。
【００１４】
【課題を解決するための手段】
本発明の１つの観点では、画像表示部を備え、圧縮動画データを表示する画像表示装置において、入力された前記圧縮動画データに対して復号を行い、前記画像表示部に表示されるフレームデータを作成する画像復号手段と、前記画像復号手段により作成されたフレームデータを記憶するフレームデータ記憶部と、前記フレームデータ記憶部に記憶された先行するフレームデータを利用して、入力された補正の対象となるフレームデータを補正するフレームデータ補正手段と、前記復号及び前記補正がなされたフレームデータを前記画像表示部に表示する表示手段と、を備え、前記画像復号手段は、前記先行するフレームデータを利用して前記圧縮動画データの復号を行う。
【００１５】
本発明の同様の観点では、画像表示部を備え、圧縮動画データを表示する画像表示装置において実行される画像表示方法において、入力された前記圧縮動画データに対して復号を行い、前記画像表示部に表示されるフレームデータを作成する画像復号工程と、前記画像復号手段により作成されたフレームデータをフレームデータ記憶部に記憶する記憶工程と、前記フレームデータ記憶部に記憶された先行するフレームデータを利用して、入力された補正の対象となるフレームデータを補正する補正工程と、前記復号及び前記補正がなされたフレームデータを前記画像表示部に表示する表示工程と、を備え、前記画像復号工程では、前記先行するフレームデータを利用して前記圧縮動画データの復号を行う。
【００１６】
本発明の同様の観点では、画像表示部及びフレームデータ記憶部を備え、圧縮動画データを表示する画像表示装置において実行される画像表示プログラムであって、前記画像表示装置を、入力された前記圧縮動画データに対して復号を行い、前記画像表示部に表示されるフレームデータを作成する画像復号手段、前記画像復号手段により作成されたフレームデータを前記フレームデータ記憶部に記憶する記憶手段、前記フレームデータ記憶部に記憶された先行するフレームデータを利用して、入力された補正の対象となるフレームデータを補正する補正手段、及び前記復号及び前記補正がなされたフレームデータを前記画像表示部に表示する表示制御手段、として機能させ、前記画像復号手段は、前記先行するフレームデータを利用して前記圧縮動画データの復号を行う。
【００１７】
上記の画像表示装置、画像表示方法及び画像表示プログラムは、携帯電話などの携帯端末に好適に適用され、外部から入力される圧縮動画データを携帯端末上に表示する。圧縮動画データの一例はＭＰＥＧデータである。入力された動画データを復号してフレームデータが生成され、これが例えばフレームメモリなどのフレームデータ記憶部に記憶される。圧縮動画データは時間的に前後するフレーム画像間の相関を利用して圧縮がなされており、復号時には、フレームデータ記憶部に記憶された先行するフレームデータを利用して復号が行われる。また、復号により得られたフレームデータに対しては、例えばＬＡＯ処理などの補正処理が行われる。この補正処理も、先行するフレームデータを利用するものであり、補正後のフレームデータが画像表示部に表示される。圧縮動画データの復号処理と、復号により得られたフレームデータの補正処理はともに先行するフレームデータを利用して行われるが、同一のフレームデータ記憶部を両処理で共用することにより、個別にフレームデータ記憶部を設ける必要が無くなり、装置全体のコスト低減などが可能となる。
【００１８】
上記の画像表示装置の一態様では、前記フレームデータ補正手段は、前記補正の対象となるフレームデータと、当該フレームデータの前の前記先行するフレームデータとの差分値に応じて定められた係数により、前記補正の対象となるフレームデータのレベルを補正する。液晶表示装置などにおいては、いわゆるＬＡＯ処理により、前後するフレームデータ間で画素値の変化が大きい部分に対して大きなレベルで表示装置を駆動することにより、動画像表示特性の改善が図られる。
【００１９】
上記の画像表示装置の他の一態様では、画像表示部を備え、圧縮動画データを表示する画像表示装置において、入力された前記圧縮動画データに対して復号を行い、前記画像表示部に表示されるフレームデータを作成する画像復号手段と、前記画像復号手段により作成されたフレームデータを記憶するフレームデータ記憶部と、前記フレームデータ記憶部に記憶された先行するフレームデータを利用して、入力された補正の対象となるフレームデータを補正するフレームデータ補正手段と、前記復号及び前記補正がなされたフレームデータを前記画像表示部に表示する表示手段と、を備え、前記画像復号手段は、前記先行するフレームデータを利用して前記圧縮動画データの復号を行い、前記フレームデータ補正手段は、入力された前記補正の対象となるフレームデータに補正を行ったフレームデータと、入力された前記補正の対象となるフレームデータに補正を行わないフレームデータとを出力し、前記表示手段は、前記フレームデータ補正手段により補正されたフレームデータと、補正されていないフレームデータとを交互に出力することにより、前記画像表示部に表示する。これにより、上述のＬＡＯ処理などによる補正に加えて、表示すべき画像データのフレームレートを上げることにより、さらに画質の改善が可能となる。
【００２０】
上記の画像表示装置の他の一態様では、画像表示部を備え、圧縮動画データを表示する画像表示装置において、入力された前記圧縮動画データに対して復号を行い、前記画像表示部に表示されるフレームデータを作成する画像復号手段と、前記画像復号手段により作成されたフレームデータを記憶するフレームデータ記憶部と、前記フレームデータ記憶部に記憶された先行するフレームデータを利用して、入力された補正の対象となるフレームデータを補正するフレームデータ補正手段と、前記復号及び前記補正がなされたフレームデータを前記画像表示部に表示する表示手段と、を備え、前記画像復号手段は、前記先行するフレームデータを利用して前記圧縮動画データの復号を行い、前記フレームデータ補正手段に入力される前記補正の対象となるフレームデータが輝度成分を含み、前記フレームデータ補正手段は、前記輝度成分のみに補正を行う。人間の視覚は、色差成分よりも輝度成分に対する感度が高いことがわかっている。よって、フレームデータの全成分に対して補正を行うのではなく、輝度成分のみに補正を行うこととしても、かなりの画質改善が期待できる。これにより、補正処理の負担を軽減することができ、コストの削減が可能となる。
【００２１】
【発明の実施の形態】
以下、図面を参照して本発明の好適な実施の形態について説明する。
【００２２】
（第１実施形態）
図１は、本発明の第１実施形態に係る動画再生装置を示す図である。図１は、本実施形態に係る画像表示装置を、例えば携帯端末において、ＭＰＥＧによる圧縮画像を復号して表示パネルに動画を表示する場合について適用したものである。なお、携帯端末には、携帯電話、ＰＤＡ、小型コンピュータなどの各種の端末装置が含まれる。
【００２３】
本実施形態に係る画像表示装置５００の構成を、図１を参照しながら説明する。図１は、画像表示装置５００の構成を示すブロック図である。なお、ＭＰＥＧデータについては、従来のＭＰＥＧに基づく符号フォーマットを採用するものとする。
【００２４】
画像表示装置５００は、図１に示すように、ＭＰＥＧデータに対して復号を行うＤＳＰ（Digital Signal Processor）１００と、ＤＳＰ１００からのデータに基づいて表示パネル３００の表示制御を行うドライバ２００とを信号線１５０で接続して構成される。なお、入力されるＭＰＥＧの画像データは、ＹＵＶ形式のデータ（Ｙ；輝度、Ｕ；赤の色差、Ｖ；青の色差）であるものとする。
【００２５】
まず、ＤＳＰ１００でのデータ処理について説明する。可変長復号部１１は、ＭＰＥＧデータに対して可変長のハフマン符号による復号を行う。次に、この可変長復号部１１からのデータに対して、逆量子化部１２では逆量子化の処理を行う。さらに逆量子化部１２からのデータに対して、ＩＤＣＴ（Inverse Discrete Cosine Transform：逆離散コサイン変換）部１３では逆離散コサイン変換を行ってフレームデータを生成する。このＩＤＣＴ部１３からのフレームデータは、信号線１５０を介してドライバ２００に出力される。
【００２６】
次に、ドライバ２００内での処理について説明する。まず、内蔵型のメモリである参照フレームメモリ１７内に、ＤＳＰ１００からのフレームデータが参照フレームデータとして格納される。次に、動き補償部１８では参照フレームメモリ１７のフレームデータを参照して、ＤＳＰ１００からのフレームデータに対して動き補償が行われ、表示すべき画像のフレームデータが作成される。さらに本実施形態においては、ドライバ２００は、表示パネル３００の表示特性を改善するために、このフレームデータにオーバードライブ処理を行うＬＡＯ処理部１９を備えている。この処理については、詳しくは後述する。ＬＡＯ処理部１９で処理されたフレームデータは、ＲＧＢ変換部１４でＹＵＶ形式の画像データからＲＧＢ形式の画像データに色素変換され、このＲＧＢ変換部１４からのフレームデータは表示メモリ１５に表示データとして記憶される。最後に、この記憶した表示データは表示データ出力部１６に送られ、表示パネル３００に供給されて表示される。
【００２７】
次に、本実施形態の詳細な処理について説明する。
【００２８】
まず、動き補償部１８での処理について述べる。ＭＰＥＧによる圧縮動画データは、Ｉピクチャ（Intra Coded Picture）、Ｐピクチャ（Predictive Coded Picture）およびＢピクチャ（Bidirectionally Predictive Coded Picture）の３種類を含む。画像データのタイプと復号時の順序について図２を用いて説明する。Ｉピクチャは画像を単独で復号することができるデータであり、Ｐピクチャは過去のフレームから一方向のフレーム間予測を行い、差分を符号化したデータであり、Ｂピクチャは過去と未来の２つのフレームから二方向のフレーム間予測を行い、差分を符号化したデータである。このようにＭＰＥＧデータは、３種類の異なる形式のデータを含んでいるので、画像表示装置５００では、Ｉピクチャ、ＰピクチャおよびＢピクチャに応じてそれぞれ復号が行われる。具体的には、以下のような処理が行われる。
【００２９】
Ｉピクチャについては、ドライバ２００は、ＤＳＰ１００からフレームデータが入力されると、入力されたフレームデータを参照フレームメモリ１７に格納するとともにＬＡＯ処理部１９に出力する。
【００３０】
Ｐピクチャについては、ドライバ２００では、ＤＳＰ１００からフレームデータが入力されると、動き補償部１８が参照フレームメモリ１７の前フレームデータを参照して、ＩＤＣＴ部１３から入力された各ブロックの差分値と、参照された前フレームのブロックの画素値とを加算し、参照フレームメモリ１７に格納するとともにＬＡＯ処理部１９に出力する。
【００３１】
Ｂピクチャについては、ドライバ２００では、ＤＳＰ１００からフレームデータが入力されると、動き補償部１８が参照フレームメモリ１７の前／後フレームデータを参照して、ＩＤＣＴ部１３から入力された各ブロックの差分値と、参照された前／後フレームのブロックの画素値とを加算してＬＡＯ処理部１９に出力する。
【００３２】
次に、ＬＡＯ処理部１９での処理について述べる。ＬＡＯ処理部１９では、ＬＣＤなどの表示パネルにおいて、動画像を表示する際の表示特性を改善するためにＬＡＯ処理が行われる。
【００３３】
まず、上述したＬＡＯ処理について、具体例を挙げて説明する。一般に液晶表示パネルに使用されている液晶が持つ粘性により、液晶分子の配向の変化は電界の変化に対して遅れてしまう。例えば図３（ａ）に示すように急峻なレベル変化を有する入力信号Ｓiにより液晶パネルの画素を駆動した場合でも、液晶分子の配向は時間的に緩やかに変化するため、信号Ｓｏで示す画素の階調レベルの変化には応答の遅れが生じる。なお、立ち下がりも同様に遅れるが図示は省略する。そこで、液晶パネルの駆動回路に供給する入力信号波形にレベル補正を行い、応答を改善する手法が用いられる。即ち、図３（ｂ）に示すように、入力信号Ｓiに対して、所定期間にわたりレベルを増加した信号Ｓｃを生成し、この信号Ｓｃで液晶パネルを駆動することにより、液晶パネルの応答を改善することができる。信号Ｓｃの最大レベル部分のレベルは、入力信号のレベルと一定時間前の入力信号のレベルなどに基づいて決定される。例えば、入力信号のレベルと一定時間前の入力信号のレベルの差分の絶対値が大きければ、補正後の信号Ｓｃの最大レベルには大きな値が決定される。なお、ｔ１はレベルが増加された信号の時間幅であり、例えば１フレーム期間の時間に相当する。
【００３４】
このように、ＬＡＯ処理においては、一定時間前の入力信号のレベルを知る必要があるために、参照フレームメモリ内のフレームデータが用いられることとなる。
【００３５】
本実施形態においては、オーバードライブ処理を行うときに用いる上述したような参照フレームメモリを、ＭＰＥＧデータを復号する際に用いるものと共用するようにした。以下で、ＬＡＯ処理部１９で行われる具体的な処理方法について説明する。
【００３６】
ＬＡＯ処理部１９では、参照フレームメモリ１７に記憶されているフレームデータ（前フレームデータ）と動き補償部１８から送られてくる表示すべきフレームデータ（現フレームデータ）に基づき補正が行われる。具体的には、例えば、参照フレームメモリ１７に格納されているフレームデータと、動き補償部１８から送られてくるフレームデータの差分値にある係数を掛けた値を、動き補償部１８から送られてくるフレームデータに加算するような補正が行われる。この係数は、差分値の絶対値が大きければ大きな値に決定される。以上のようにＬＡＯ処理部１９で処理されたフレームデータは、ＲＧＢ変換部１４に送られ、表示パネル３００への表示に至る後続の処理がなされていく。
【００３７】
このように、ＬＡＯ処理部１９でのオーバードライブ処理により、動画像を表示する際の表示パネル３００の表示特性が改善されることになる。ここで、本実施形態では、オーバードライブ処理に用いる参照フレームメモリと、ＭＰＥＧデータの復号に用いる参照フレームメモリを共用しているため、余分なフレームメモリを削減することができる。
【００３８】
（第２実施形態）
次に、第２実施形態に係る画像表示装置について、図４を用いて説明する。本実施形態では、第１実施形態と同様にＬＡＯ処理により画像表示特性を改善することに加え、表示すべき動画像のフレームレートを増大することにより、さらに表示特性を改善する。即ち、画像表示装置に対して入力される動画像データを復号した後、フレームデータを内挿することによりフレームレートを例えば２倍に増加させる。その際、ＬＡＯ処理部１９において処理が行われて表示されるに至った画像の直後に表示するフレームデータに対してはオーバードライブ処理を行わない。なお、本実施形態を適用する画像表示装置は、入力される動画像データの２倍のフレームレートで画像表示能力を有することが前提となる。以下、その具体的な処理方法について説明する。
【００３９】
まず、ＭＰＥＧデータが入力されたときのＤＳＰ１００での処理は、第１実施形態と同様である。可変長復号部１１は、ＭＰＥＧデータに対して可変長のハフマン符号による復号を行う。この可変長復号部１１からのデータに対して、逆量子化部１２では逆量子化の処理を行う。さらに逆量子化部１２からのデータに対して、ＩＤＣＴ部１３では逆離散コサイン変換を行ってフレームデータを生成する。このＩＤＣＴ部１３からのフレームデータは、信号線１５０を介してドライバ２００に出力するようになっている。
【００４０】
次に、ドライバ２００内での処理について説明する。ドライバ２００は、第１実施形態と同様に、フレームデータを格納する参照フレームメモリ１７と、動き補償を行う動き補償部１８と、オーバードライブの処理を行うＬＡＯ処理部１９と、ＹＵＶ形式の画像データからＲＧＢ形式の画像データに色素変換するＲＧＢ変換部１４と、表示データを記憶する表示メモリ１５と、表示データ出力部１６から構成される。表示データ出力部１６からの出力がＬＣＤなどの表示パネル３００に供給されて表示される。
【００４１】
ここで、本実施形態に係る動画再生方法と、データの処理方法について説明する。まず、動き補償部１８から送られてくるフレームデータに対して、ＬＡＯ処理部１９で表示パネル３００の表示特性を改善するためのＬＡＯ処理が、第１実施形態と同様の方法で行われ、さらに、この後の処理が行われて表示パネル３００に表示される。本実施形態においては、この後に表示されるフレームデータには、ＬＡＯ処理部１９で処理を行わない。ＬＡＯ処理では、前フレームデータとの差分値に応じてレベルを変更するが、本実施形態の場合は同じフレームデータを内挿してフレームレートを２倍にするため、内挿されたフレームデータはそれに先行するフレームデータと同一であり、差分は０となるため、ＬＡＯ処理は不要となる。
【００４２】
具体的な方法としては、例えば、ＬＡＯ処理の後に表示されるフレームデータにおいては、差分値に掛ける係数を「０」として処理を行うという方法がある。つまり、ＬＡＯ処理の後に表示される画像は、前の画像と同じものが表示されることになり、例えば、奇数番目のフレームはＬＡＯ処理が行われたものが表示され、偶数番目のフレームはＬＡＯ処理が行われていない、前と同じものが表示されることになる。
【００４３】
以上の処理により、元のＭＰＥＧデータに対して、ＬＡＯ処理がなされたフレームが内挿された動画像が再生されることになる。また、入力したＭＰＥＧデータのフレームレートの２倍のフレームレートで動画像が表示できるようになる。例えば、毎秒６０フレームのフレームレートで再生可能の表示装置に対して、毎秒３０フレームのＭＰＥＧデータが入力されたとき、上述の処理により毎秒６０フレームで再生することができる。
【００４４】
このように、本実施形態では、ＬＡＯ処理に加えて、表示画像のフレームレートを増加させて表示するので、動画像を表示する際の表示特性をさらに改善することが可能となる。
【００４５】
（第３実施形態）
次に、本発明の第３実施形態について説明する。第３実施形態においては、ＬＡＯ処理部１９で行う処理が第１実施形態及び第２実施形態とは異なる。第３実施形態に係る画像表示装置を適用した表示制御装置を図５に示す。
【００４６】
前述の第１及び第２実施形態ではＬＡＯ処理部１９において、入力されるＹＵＶ形式の画像データのＹ、Ｕ，Ｖの全ての成分にＬＡＯ処理を行っていたのに対して、本実施形態では、入力されるＹＵＶ形式の画像データのＹ成分のみにＬＡＯ処理を行い、ＵとＶ成分にはＬＡＯ処理を行わない。人間の視覚は、視覚刺激の色差や色相の空間（Ｕ、Ｖ空間）に対する感度よりも輝度（Ｙ）に対する感度の方が優れているという特性を有している。よって、輝度（Ｙ）成分に対してのみＬＡＯ処理を適用しても、人間が視覚上感じる表示特性改善効果は大きく、これによりＬＡＯ処理部における処理負担を軽減することができる
具体的には、図５に示すように、動き補償部１８から出力されるＹ、Ｕ、Ｖ成分のうち、Ｙ成分のみをＬＡＯ処理部１９に入力し、他のＵ及びＶ成分はＬＡＯ処理部１９をバイパスしてＲＧＢ処理部１４へ供給する。また、参照フレームメモリ１７からＬＡＯ処理部１９へは、連続するフレーム間のＹ成分のみの差分値が供給される。これにより、ＬＡＯ処理部１９はＹ成分のみに対してＬＡＯ処理を行う。
【００４７】
このように第３実施形態では、ＬＡＯ処理部における演算量が削減される。よって、演算回路を簡素化することができ、装置を低価格化することができる。
【図面の簡単な説明】
【図１】 第１実施形態に係る画像表示装置の構成を示すブロック図である。
【図２】 ＭＰＥＧによる圧縮画像データについて説明する図である。
【図３】 オーバードライブ処理を説明するための図である。
【図４】 第２実施形態に係る画像表示装置の構成を示すブロック図である。
【図５】 第３実施形態に係る画像表示装置の構成を示すブロック図である。
【符号の説明】
１００ ＤＳＰ、 ２００ ドライバ、 ３００表示パネル、 ５００ 画像表示装置、 １１ 可変長復号部、 １２ 逆量子化部、 １３ ＩＤＣＴ部、１４ ＲＧＢ変換部、 １５ 表示メモリ、 １６ 表示データ出力部、 １７ 参照フレームメモリ、 １８ 動き補償部、 １９ ＬＡＯ処理部
Claims (6)
- 画像表示部を備え、圧縮動画データを表示する画像表示装置において、
入力された前記圧縮動画データに対して復号を行い、前記画像表示部に表示されるフレームデータを作成する画像復号手段と、
前記画像復号手段により作成されたフレームデータを記憶するフレームデータ記憶部と、
前記フレームデータ記憶部に記憶された先行するフレームデータを利用して、入力された補正の対象となるフレームデータを補正するフレームデータ補正手段と、
前記復号及び前記補正がなされたフレームデータを前記画像表示部に表示する表示手段と、を備え、
前記画像復号手段は、前記先行するフレームデータを利用して前記圧縮動画データの復号を行うことを特徴とする画像表示装置。 - 前記フレームデータ補正手段は、前記補正の対象となるフレームデータと、当該フレームデータの前の前記先行するフレームデータとの差分値に応じて定められた係数により、前記補正の対象となるフレームデータのレベルを補正することを特徴とする請求項１に記載の画像表示装置。
- 画像表示部を備え、圧縮動画データを表示する画像表示装置において、
入力された前記圧縮動画データに対して復号を行い、前記画像表示部に表示されるフレームデータを作成する画像復号手段と、
前記画像復号手段により作成されたフレームデータを記憶するフレームデータ記憶部と、
前記フレームデータ記憶部に記憶された先行するフレームデータを利用して、入力された補正の対象となるフレームデータを補正するフレームデータ補正手段と、
前記復号及び前記補正がなされたフレームデータを前記画像表示部に表示する表示手段と、を備え、
前記画像復号手段は、前記先行するフレームデータを利用して前記圧縮動画データの復号を行い、
前記フレームデータ補正手段は、入力された前記補正の対象となるフレームデータに補正を行ったフレームデータと、入力された前記補正の対象となるフレームデータに補正を行わないフレームデータとを出力し、
前記表示手段は、前記フレームデータ補正手段により補正されたフレームデータと、補正されていないフレームデータとを交互に出力することにより、前記画像表示部に表示することを特徴とする画像表示装置。 - 画像表示部を備え、圧縮動画データを表示する画像表示装置において、
入力された前記圧縮動画データに対して復号を行い、前記画像表示部に表示されるフレームデータを作成する画像復号手段と、
前記画像復号手段により作成されたフレームデータを記憶するフレームデータ記憶部と、
前記フレームデータ記憶部に記憶された先行するフレームデータを利用して、入力された補正の対象となるフレームデータを補正するフレームデータ補正手段と、
前記復号及び前記補正がなされたフレームデータを前記画像表示部に表示する表示手段と、を備え、
前記画像復号手段は、前記先行するフレームデータを利用して前記圧縮動画データの復号を行い、
前記フレームデータ補正手段に入力される前記補正の対象となるフレームデータが輝度成分を含み、
前記フレームデータ補正手段は、前記輝度成分のみに補正を行うことを特徴とする画像表示装置。 - 画像表示部を備え、圧縮動画データを表示する画像表示装置において実行される画像表示方法において、
入力された前記圧縮動画データに対して復号を行い、前記画像表示部に表示されるフレームデータを作成する画像復号工程と、
前記画像復号手段により作成されたフレームデータをフレームデータ記憶部に記憶する記憶工程と、
前記フレームデータ記憶部に記憶された先行するフレームデータを利用して、入力された補正の対象となるフレームデータを補正する補正工程と、
前記復号及び前記補正がなされたフレームデータを前記画像表示部に表示する表示工程と、を備え、
前記画像復号工程では、前記先行するフレームデータを利用して前記圧縮動画データの復号を行うことを特徴とする画像表示方法。 - 画像表示部及びフレームデータ記憶部を備え、圧縮動画データを表示する画像表示装置において実行される画像表示プログラムであって、前記画像表示装置を、
入力された前記圧縮動画データに対して復号を行い、前記画像表示部に表示されるフレームデータを作成する画像復号手段、
前記画像復号手段により作成されたフレームデータを前記フレームデータ記憶部に記憶する記憶手段、
前記フレームデータ記憶部に記憶された先行するフレームデータを利用して、入力された補正の対象となるフレームデータを補正する補正手段、及び
前記復号及び前記補正がなされたフレームデータを前記画像表示部に表示する表示制御手段、として機能させ、
前記画像復号手段は、前記先行するフレームデータを利用して前記圧縮動画データの復号を行うことを特徴とする画像表示プログラム。
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2003179595A JP3767582B2 (ja) | 2003-06-24 | 2003-06-24 | 画像表示装置、画像表示方法及び画像表示プログラム |
| US10/857,000 US20050008078A1 (en) | 2003-06-24 | 2004-06-01 | Image display device, image display method, and recording medium on which image display program is recorded |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2003179595A JP3767582B2 (ja) | 2003-06-24 | 2003-06-24 | 画像表示装置、画像表示方法及び画像表示プログラム |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2005017484A JP2005017484A (ja) | 2005-01-20 |
| JP3767582B2 true JP3767582B2 (ja) | 2006-04-19 |
Family
ID=33562245
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2003179595A Expired - Fee Related JP3767582B2 (ja) | 2003-06-24 | 2003-06-24 | 画像表示装置、画像表示方法及び画像表示プログラム |
Country Status (2)
| Country | Link |
|---|---|
| US (1) | US20050008078A1 (ja) |
| JP (1) | JP3767582B2 (ja) |
Families Citing this family (15)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US7495647B2 (en) * | 2004-06-14 | 2009-02-24 | Genesis Microchip Inc. | LCD blur reduction through frame rate control |
| US8711072B2 (en) * | 2004-09-03 | 2014-04-29 | Entropic Communications, Inc. | Motion blur reduction for LCD video/graphics processors |
| US7986846B2 (en) * | 2004-10-26 | 2011-07-26 | Samsung Electronics Co., Ltd | Apparatus and method for processing an image signal in a digital broadcast receiver |
| KR101136900B1 (ko) * | 2005-06-28 | 2012-04-20 | 엘지디스플레이 주식회사 | 오버 드라이빙 구동장치 및 구동방법 |
| JP4488979B2 (ja) | 2005-08-16 | 2010-06-23 | 株式会社東芝 | 画像処理装置、画像処理方法および画像処理プログラム |
| JP2007127972A (ja) * | 2005-11-07 | 2007-05-24 | Toshiba Corp | 画像表示調整装置 |
| KR101252002B1 (ko) | 2006-05-23 | 2013-04-08 | 삼성디스플레이 주식회사 | 액정 표시 장치 |
| JP5080132B2 (ja) * | 2006-06-12 | 2012-11-21 | 三星電子株式会社 | データ補償回路及びこれを有する表示装置 |
| JP2008089943A (ja) * | 2006-10-02 | 2008-04-17 | ▲し▼創電子股▲ふん▼有限公司 | オーバードライブ図画データの保存構造とその方法 |
| JP5096986B2 (ja) * | 2007-04-11 | 2012-12-12 | パナソニック株式会社 | 動画像表示装置、動画像表示方法及び集積回路 |
| JP2008268672A (ja) * | 2007-04-23 | 2008-11-06 | Hitachi Displays Ltd | 表示装置 |
| KR20090105061A (ko) * | 2008-04-01 | 2009-10-07 | 삼성전자주식회사 | 신호 처리 장치에서의 메모리 절감 방법 및 이를 이용한영상 복원 장치 |
| JP5185697B2 (ja) * | 2008-05-28 | 2013-04-17 | ルネサスエレクトロニクス株式会社 | 表示装置、表示パネルドライバ、表示パネルの駆動方法、及び表示パネルドライバへの画像データ供給方法 |
| JP5358482B2 (ja) * | 2010-02-24 | 2013-12-04 | 株式会社ルネサスエスピードライバ | 表示駆動回路 |
| JP5394305B2 (ja) | 2010-04-14 | 2014-01-22 | 株式会社メガチップス | 画像処理装置 |
Family Cites Families (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US6243140B1 (en) * | 1998-08-24 | 2001-06-05 | Hitachi America, Ltd | Methods and apparatus for reducing the amount of buffer memory required for decoding MPEG data and for performing scan conversion |
| US20020150248A1 (en) * | 2001-03-06 | 2002-10-17 | Kovacevic Branko D. | System for digital stream reception via memory buffer and method thereof |
| JP3808788B2 (ja) * | 2002-03-12 | 2006-08-16 | 株式会社東芝 | 液晶表示方法 |
| US7408986B2 (en) * | 2003-06-13 | 2008-08-05 | Microsoft Corporation | Increasing motion smoothness using frame interpolation with motion analysis |
-
2003
- 2003-06-24 JP JP2003179595A patent/JP3767582B2/ja not_active Expired - Fee Related
-
2004
- 2004-06-01 US US10/857,000 patent/US20050008078A1/en not_active Abandoned
Also Published As
| Publication number | Publication date |
|---|---|
| JP2005017484A (ja) | 2005-01-20 |
| US20050008078A1 (en) | 2005-01-13 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US7262818B2 (en) | Video system with de-motion-blur processing | |
| JP5358482B2 (ja) | 表示駆動回路 | |
| JP3767582B2 (ja) | 画像表示装置、画像表示方法及び画像表示プログラム | |
| US8014445B2 (en) | Methods and systems for high dynamic range video coding | |
| US6301304B1 (en) | Architecture and method for inverse quantization of discrete cosine transform coefficients in MPEG decoders | |
| JP3540855B2 (ja) | ブロック歪み補正器 | |
| JP2911114B2 (ja) | 輪郭線復号化装置 | |
| JP3282577B2 (ja) | 画像処理装置 | |
| US20090074312A1 (en) | High-speed motion compensation apparatus and method | |
| US20080117970A1 (en) | Method and apparatus for encoding and decoding rgb image | |
| KR101081074B1 (ko) | 데이터 값의 다운-샘플링 방법 및 디바이스와 이를 포함하는 저장 유닛, 디스플레이 유닛, 비디오 인코더, 비디오 디코더, 휴대용 장치 및 컴퓨터 판독가능 매체 | |
| JP2003069859A (ja) | 動きに適応した動画像処理 | |
| JP2010035157A (ja) | 画像処理装置 | |
| US20050008259A1 (en) | Method and device for changing image size | |
| JP2010135885A (ja) | 画像符号化装置および画像符号化方法 | |
| US7167520B2 (en) | Transcoder | |
| JPH11155129A (ja) | Ｍｐｅｇ画像再生装置およびｍｐｅｇ画像再生方法 | |
| US8270773B2 (en) | Image processing apparatus and image processing method | |
| JPH08205178A (ja) | 量子化ノイズの低減方法及び画像データの復号化装置 | |
| JP2008225241A (ja) | 映像信号処理装置、映像信号処理方法及び映像信号処理プログラム | |
| JPH1165535A (ja) | 画像表示装置の駆動回路と駆動方法 | |
| KR100671354B1 (ko) | 알지비영상 잔상제거장치 및 방법 | |
| US6680747B1 (en) | Image processing apparatus and image processing method | |
| JP4184223B2 (ja) | トランスコーダ | |
| JP2002199405A (ja) | 動画像再生装置、及び動画像再生方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20050906 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20051011 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20051129 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20060110 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20060123 |
|
| R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090210 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100210 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110210 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110210 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120210 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130210 Year of fee payment: 7 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130210 Year of fee payment: 7 |
|
| S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
| LAPS | Cancellation because of no payment of annual fees |