JP4670169B2 - 情報信号処理装置、情報信号処理方法、画像信号処理装置およびそれを使用した画像表示装置、それに使用される係数種データ生成装置、並びに情報記録媒体 - Google Patents

Description

【０００１】
【発明の属する技術分野】
この発明は、例えばＮＴＳＣ方式のビデオ信号をハイビジョンのビデオ信号に変換する際に適用して好適な情報信号処理装置、情報信号処理方法、画像信号処理装置およびそれを使用した画像表示装置、それに使用される係数種データ生成装置、並びに情報記録媒体に関する。詳しくは、第１の情報信号を第２の情報信号に変換する際に使用される推定式の係数データを、所定のパラメータを含む生成式の係数データである係数種データと入力されたパラメータの値とを用いて当該生成式により生成することによって、大量の係数データを格納しておくメモリを必要とすることなく、任意のパラメータの値に対応した推定式の係数データを生成でき、メモリの節約を図るようにした情報信号処理装置等に係るものである。
【０００２】
【従来の技術】
近年、オーディオ・ビジュアル指向の高まりから、より高解像度の画像を得ることができるようなテレビ受信機の開発が望まれ、この要望に応えて、いわゆるハイビジョンが開発された。ハイビジョンの走査線数は、ＮＴＳＣ方式の走査線数が５２５本であるのに対して、２倍以上の１１２５本である。また、ハイビジョンの縦横比は、ＮＴＳＣ方式の縦横比が３：４であるのに対して、９：１６となっている。このため、ハイビジョンでは、ＮＴＳＣ方式に比べて、高解像度で臨場感のある画像を表示することができる。
【０００３】
ハイビジョンはこのように優れた特性を有するが、ＮＴＳＣ方式のビデオ信号をそのまま供給しても、ハイビジョン方式による画像表示を行うことはできない。これは、上述のようにＮＴＳＣ方式とハイビジョンとでは規格が異なるからである。
【０００４】
そこで、ＮＴＳＣ方式のビデオ信号に応じた画像をハイビジョン方式で表示するため、本出願人は、先に、ＮＴＳＣ方式のビデオ信号をハイビジョンのビデオ信号に変換するための変換装置を提案した（特願平６−２０５９３４号参照）。この変換装置では、ＮＴＳＣ方式のビデオ信号から、ハイビジョンのビデオ信号に係る注目画素に対応するブロック（領域）の画素データを抽出し、このブロックの画素データのレベル分布パターンに基づいて上記注目画素のクラスを決定し、このクラスに対応して上記注目画素の画素データを生成するようになっている。
【０００５】
【発明が解決しようとする課題】
上述した変換装置においては、各クラスの推定式の係数データを予めメモリに格納しておくものであり、分類されるクラス数が多くなると、必要とする推定式の係数データの数も増加し、大容量のメモリが必要となる。
【０００６】
また、上記した変換装置においては、ハイビジョンのビデオ信号による画像の解像度は固定されており、従来のコントラストやシャープネス等の調整のように、画像内容等に応じて所望の解像度とすることができなかった。このように所望の画質を得るために、各画質の推定式の係数データを予めメモリに格納しておくことが考えられるが、必要とする推定式の係数データの数が増加し、大容量のメモリが必要となる。
【０００７】
この発明は、第１の情報信号を推定式を使用して第２の情報信号に変換する際に、大量の係数データを格納しておくメモリを必要とせず、メモリ容量を節約し得る情報信号処理装置等を提供することを目的とする。また、この発明は、例えば画像の画質を無段階になめらかに調整可能にした情報処理装置等を提供することを目的とする。
【０００８】
【課題を解決するための手段】
この発明に係る情報信号処理装置は、複数の情報データからなる第１の情報信号を複数の情報データからなる第２の情報信号に変換する情報信号処理装置であって、予め求められた推定式の係数データを生成する所定のパラメータを含む生成式の係数データである係数種データを記憶するメモリ手段と、パラメータの値を入力するパラメータ入力手段と、メモリ手段に記憶されている係数種データとパラメータ入力手段で入力されたパラメータの値とを用いて生成式によって生成され、入力されたパラメータの値に対応した推定式の係数データを発生する係数データ発生手段と、第１の情報信号から第２の情報信号に係る注目点の周辺に位置する複数の情報データを選択するデータ選択手段と、係数データ発生手段で発生された係数データとデータ選択手段で選択された複数の情報データとから、上記推定式を用いて上記注目点の情報データを算出して得る演算手段とを備えるものである。
【００１０】
この発明においては、予め求められた推定式の係数データを生成する所定のパラメータを含む生成式の係数データである係数種データがメモリ手段に記憶されている。例えば、パラメータは、第２の情報信号による出力の質（解像度、ノイズ抑圧度など）を決めるためのもの、あるいは第２の情報信号の注目点が属するクラスに対応したものである。
【００１１】
そして、メモリ手段に記憶されている係数種データと、入力されたパラメータの値とを用いて、生成式により、パラメータの値に対応した推定式の係数データが生成される。この係数データと複数の第２の情報データとから、推定式を用いて、注目点の情報データが生成される。
【００１２】
このように、大量の係数データを格納しておくメモリを必要とすることなく、任意のパラメータの値に対応した推定式の係数データを生成でき、メモリの節約を図ることができる。
【００１３】
この発明に係る情報信号処理装置は、複数の情報データからなる第１の情報信号を複数の情報データからなる第２の情報信号に変換する情報信号処理装置であって、第１の情報信号から第２の情報信号に係る注目点の周辺に位置する複数の第１の情報データを選択する第１のデータ選択手段と、この第１のデータ選択手段で選択された複数の第１の情報データに基づいて、注目点が属するクラスを検出するクラス検出手段と、第２の情報信号によって得られる出力の質を決めるパラメータの値を調整するパラメータ調整手段と、クラス検出手段で検出されるクラス毎に予め求められた、推定式の係数データを生成する上記パラメータを含む生成式の係数データである係数種データを記憶する第１のメモリ手段と、この第１のメモリ手段に記憶されている係数種データとパラメータ調整手段で調整されたパラメータの値とを用いて上記生成式によって生成され、クラス検出手段で検出されたクラスおよび上記調整されたパラメータの値に対応した上記推定式の係数データを発生する係数データ発生手段と、第１の情報信号から第２の情報信号に係る注目点の周辺に位置する複数の第２の情報データを選択する第２のデータ選択手段と、係数データ発生手段で発生された係数データと第２のデータ選択手段で選択された複数の第２の情報データとから、上記推定式を用いて上記注目点の情報データを算出して得る演算手段とを備えるものである。
【００１４】
例えば、係数データ発生手段は、第１のメモリ手段に記憶されている係数種データと上記調整されたパラメータの値とを用い、上記生成式により、クラス検出手段で検出されるクラス毎に推定式の係数データを生成する係数データ生成手段と、この係数データ生成手段で生成された各クラスにおける推定式の係数データを記憶する第２のメモリ手段と、この第２のメモリ手段よりクラス検出手段で検出されたクラスに対応した推定式の係数データを読み出して出力する係数データ読み出し手段とを有してなるものである。
【００１５】
また、この発明に係る情報信号処理方法は、複数の情報データからなる第１の情報信号を複数の情報データからなる第２の情報信号に変換する情報信号処理方法であって、第１の情報信号から第２の情報信号に係る注目点の周辺に位置する複数の第１の情報データを選択する第１のステップと、この第１のステップで選択された複数の第１の情報データに基づいて、上記注目点が属するクラスを検出する第２のステップと、第２の情報信号によって得られる出力の質を決めるパラメータの値を調整する第３のステップと、第２のステップで検出されるクラス毎に予め求められた、推定式の係数データを生成する上記パラメータを含む生成式の係数データである係数種データと第３のステップで調整されたパラメータの値とを用いて、上記生成式により、第２のステップで検出されたクラスおよび上記調整されたパラメータの値に対応した上記推定式の係数データを生成する第４のステップと、第１の情報信号から第２の情報信号に係る注目点の周辺に位置する複数の第２の情報データを選択する第５のステップと、第４のステップで生成された係数データと第５のステップで選択された複数の第２の情報データとから、上記推定式を用いて上記注目点の情報データを算出して得る第６のステップとを備えるものである。
【００１６】
また、この発明に係る情報記録媒体は、上述の情報信号処理方法の各ステップをコンピュータに実行させるためのプログラムを記録するものである。
【００１７】
また、この発明に係る画像信号処理装置は、複数の画素データからなる第１の画像信号を複数の画素データからなる第２の画像信号に変換する画像信号処理装置であって、第１の画像信号から第２の画像信号に係る注目画素の周辺に位置する複数の第１の画素データを選択する第１のデータ選択手段と、この第１のデータ選択手段で選択された上記複数の第１の画素データに基づいて、上記注目画素が属するクラスを検出するクラス検出手段と、第２の画像信号によって得られる画像の画質を決めるパラメータの値を調整するパラメータ調整手段と、クラス検出手段で検出されるクラス毎に予め求められた、推定式の係数データを生成する上記パラメータを含む生成式の係数データである係数種データを記憶するメモリ手段と、このメモリ手段に記憶されている係数種データとパラメータ調整手段で調整されたパラメータの値とを用いて上記生成式によって生成され、クラス検出手段で検出されたクラスおよび上記調整されたパラメータの値に対応した上記推定式の係数データを発生する係数データ発生手段と、第１の画像信号から第２の画像信号に係る注目画素の周辺に位置する複数の第２の画素データを選択する第２のデータ選択手段と、係数データ発生手段で発生された上記係数データと第２のデータ選択手段で選択された複数の第２の画素データとから、上記推定式を用いて上記注目画素の画素データを算出して得る演算手段とを備えるものである。
【００１８】
また、この発明に係る画像表示装置は、複数の画素データからなる第１の画像信号を入力する画像信号入力手段と、この画像信号入力手段手段より入力された第１の画像信号を複数の画素データからなる第２の画像信号に変換して出力する画像信号処理手段と、この画像信号処理手段より出力される第２の画像信号による画像を画像表示素子に表示する画像表示手段と、画像表示素子に表示される画像の画質を決めるパラメータの値を調整するパラメータ調整手段とを有してなるものである。そして、画像信号処理手段は、第１の画像信号から第２の画像信号に係る注目画素の周辺に位置する複数の第１の画素データを選択する第１のデータ選択手段と、この第１のデータ選択手段で選択された複数の第１の画素データに基づいて、上記注目画素が属するクラスを検出するクラス検出手段と、このクラス検出手段で検出されるクラス毎に予め求められた、推定式の係数データを生成する上記パラメータを含む生成式の係数データである係数種データを記憶する第１のメモリ手段と、この第１のメモリ手段に記憶されている係数種データとパラメータ調整手段で調整されたパラメータの値とを用いて上記生成式によって生成され、クラス検出手段で検出されたクラスおよびパラメータの値に対応した上記推定式の係数データを発生する係数データ発生手段と、第１の画像信号から第２の画像信号に係る注目画素の周辺に位置する複数の第２の画素データを選択する第２のデータ選択手段と、係数データ発生手段で発生された係数データと第２のデータ選択手段で選択された複数の第２の画素データとから、上記推定式を用いて上記注目画素の画素データを算出して得る演算手段とを備えるものである。
【００１９】
この発明においては、第１の情報信号から第２の情報信号に係る注目点の周辺に位置する複数の第１の情報データが選択され、その複数の第１の情報データに基づいて、上記注目点が属するクラスが検出される。例えば、複数の第１の情報データのレベル分布パターンが検出され、このレベル分布パターンに基づいて上記注目点の属するクラスが検出される。また、第１の情報信号から第２の情報信号に係る注目点の周辺に位置する複数の第２の情報データが選択される。第１および第２のデータ選択手段が共通に構成され、従って複数の第１の情報データと複数の第２の情報データとが同じであってもよい。ここで、情報信号は、例えば画像信号や音声信号である。
【００２０】
パラメータ調整手段により、第２の情報信号によって得られる出力の質を決めるパラメータの値が調整される。例えば、情報信号が画像信号である場合、パラメータの値が調整されて、第２の情報信号（画像信号）による画像の画質が決められる。また、情報信号が音声信号である場合、パラメータの値が調整されて、第２の情報信号（音声信号）による音声の音質が決められる。例えば、パラメータ調整手段は、パラメータの調整位置を表示する表示手段と、この表示手段の表示を参照してパラメータの値を調整するユーザ操作手段とを有するものとされる。これにより、ユーザは、ユーザ操作手段、例えばポインティングデバイスを操作して、パラメータの値を所望位置に容易に調整できる。
【００２１】
そして、検出されたクラスおよび調整されたパラメータの値に対応して、注目点の情報データが生成される。すなわち、クラス毎に予め求められた推定式の係数データを生成するための生成式の係数データである係数種データがメモリ手段に記憶されており、この係数種データと調整されたパラメータの値と用いて、検出されたクラスおよび調整されたパラメータの値に対応した推定式の係数データが発生され、この係数データと複数の第２の情報データとから、推定式を用いて、注目点の情報データが生成される。
【００２２】
このように、第１の情報信号を第２の情報信号に変換する際に使用される推定式の係数データを係数種データを用いて生成するものであり、検出されたクラスおよび調整されたパラメータの値に対応した係数データを容易に得ることができ、第２の情報信号によって得られる出力の質、例えば画像の画質等を無段階になめらかに調整することが可能となる。
【００２３】
なお、係数種データを用いて生成された推定式の係数データの総和を求め、上述したように推定式を用いて生成された注目点の情報データをその総和で除算して正規化することで、係数種データを用いて生成式で推定式の係数データを求める際の丸め誤差による注目点の情報データのレベル変動を除去できる。
【００２４】
また、この発明に係る情報信号処理装置は、複数の情報データからなる第１の情報信号を複数の情報データからなる第２の情報信号に変換する情報信号処理装置であって、第１の情報信号から第２の情報信号に係る注目点の周辺に位置する複数の第１の情報データを選択する第１のデータ選択手段と、この第１のデータ選択手段で選択された複数の第１の情報データに基づいて、注目点が属するクラスを検出するクラス検出手段と、このクラス検出手段で検出されるクラスに対応したパラメータを持ち、推定式の係数データを生成する生成式の係数データである係数種データを記憶する第１のメモリ手段と、この第１のメモリ手段に記憶されている係数種データとクラス検出手段で検出されるクラスの値とを用いて上記生成式によって生成され、クラス検出手段で検出されたクラスの値に対応した上記推定式の係数データを発生する係数データ発生手段と、第１の情報信号から第２の情報信号に係る注目点の周辺に位置する複数の第２の情報データを選択する第２のデータ選択手段と、係数データ発生手段で発生された係数データと第２のデータ選択手段で選択された複数の第２の情報データとから、上記推定式を用いて上記注目点の情報データを算出して得る演算手段とを備えるものである。
【００２５】
例えば、クラス検出手段にクラス分類の細かさを決めるパラメータの値を入力するパラメータ入力手段をさらに備えるものである。また例えば、係数データ発生手段は、第１のメモリ手段に記憶されている係数種データと入力されたパラメータの値とを用い、上記生成式により、クラス検出手段で検出されるクラス毎に推定式の係数データを生成する係数データ生成手段と、この係数データ生成手段で生成された各クラスにおける推定式の係数データを記憶する第２のメモリ手段と、この第２のメモリ手段よりクラス検出手段で検出されたクラスに対応した推定式の係数データを読み出して出力する係数データ読み出し手段とを有してなるものである。
【００２６】
また、この発明に係る情報信号処理方法は、複数の情報データからなる第１の情報信号を複数の情報データからなる第２の情報信号に変換する情報信号処理方法であって、第１の情報信号から、上記第２の情報信号に係る注目点の周辺に位置する複数の第１の情報データを選択する第１のステップと、この第１のステップで選択された複数の第１の情報データに基づいて、上記注目点が属するクラスを検出する第２のステップと、この第２のステップで検出されるクラスに対応したパラメータを持ち、推定式の係数データを生成する生成式の係数データである係数種データを用いて、上記生成式により、第２のステップで検出されたクラスの値に対応した上記推定式の係数データを生成する第３のステップと、第１の情報信号から第２の情報信号に係る注目点の周辺に位置する複数の第２の情報データを選択する第４のステップと、第３のステップで生成された係数データと第４のステップで選択された複数の第２の情報データとから、上記推定式を用いて上記注目点の情報データを算出して得る第５のステップとを備えるものである。
【００２７】
この発明に係る情報記録媒体は、上述の情報信号処理方法の各ステップをコンピュータに実行させるためのプログラムを記録するものである。
【００２８】
また、この発明に係る画像信号処理装置は、複数の画素データからなる第１の画像信号を複数の画素データからなる第２の画像信号に変換する画像信号処理装置であって、第１の画像信号から第２の画像信号に係る注目画素の周辺に位置する複数の第１の画素データを選択する第１のデータ選択手段と、この第１のデータ選択手段で選択された複数の第１の画素データに基づいて、上記注目画素が属するクラスを検出するクラス検出手段と、このクラス検出手段で検出されるクラスに対応したパラメータを持ち、推定式の係数データを生成する生成式の係数データである係数種データを記憶するメモリ手段と、このメモリ手段に記憶されている係数種データとクラス検出手段で検出されるクラスの値とを用いて上記生成式によって生成され、クラス検出手段で検出されたクラスの値に対応した上記推定式の係数データを発生する係数データ発生手段と、第１の画像信号から第２の画像信号に係る注目画素の周辺に位置する複数の第２の画素データを選択する第２のデータ選択手段と、係数データ発生手段で発生された係数データと第２のデータ選択手段で選択された複数の第２の画素データとから、上記推定式を用いて上記注目画素の画素データを算出して得る演算手段とを備えるものである。
【００２９】
また、この発明に係る画像表示装置は、複数の画素データからなる第２の画像信号を入力する画像信号入力手段と、この画像信号入力手段で入力された第１の画像信号を複数の画素データからなる第２の画像信号に変換して出力する画像信号処理手段と、この画像信号処理手段から出力される第２の画像信号による画像を画像表示装置に表示する画像表示手段とを有してなるものである。そして、画像信号処理手段は、第１の画像信号から第２の画像信号に係る注目画素の周辺に位置する複数の第１の画素データを選択する第１のデータ選択手段と、この第１のデータ選択手段で選択された複数の第１の画素データに基づいて、上記注目画素が属するクラスを検出するクラス検出手段と、このクラス検出手段で検出されるクラスに対応したパラメータを持ち、推定式の係数データを生成する生成式の係数データである係数種データを記憶する第１のメモリ手段と、この第１のメモリ手段に記憶されている係数種データとクラス検出手段で検出されるクラスの値とを用いて上記生成式によって生成され、クラス検出手段で検出されたクラスの値に対応した上記推定式の係数データを発生する係数データ発生手段と、第１の画像信号から第２の画像信号に係る注目画素の周辺に位置する複数の第２の画素データを選択する第２のデータ選択手段と、係数データ発生手段で発生された係数データと第２のデータ選択手段で選択された複数の第２の画素データとから、上記推定式を用いて上記注目画素の画素データを算出して得る演算手段とを備えるものである。
【００３０】
この発明においては、第１の情報信号から第２の情報信号に係る注目点の周辺に位置する複数の第１の情報データが選択され、その複数の第１の情報データに基づいて、上記注目点が属するクラスが検出される。例えば、複数の第１の情報データのレベル分布パターンが検出され、このレベル分布パターンに基づいて上記注目点の属するクラスが検出される。また、第１の情報信号から第２の情報信号に係る注目点の周辺に位置する複数の第２の情報データが選択される。第１および第２のデータ選択手段が共通に構成され、従って複数の第１の情報データと複数の第２の情報データとが同じであってもよい。ここで、情報信号は、例えば画像信号や音声信号である。
【００３１】
そして、検出されたクラスに対応して、注目点の情報データが生成される。すなわち、クラス検出手段で検出されるクラスに対応したパラメータを持ち、推定式の係数データを生成する生成式の係数データである係数種データがメモリ手段に記憶されており、この係数種データとクラス検出手段で検出されたクラスの値と用いて、検出されたクラスの値に対応した推定式の係数データが発生され、この係数データと複数の第２の情報データとから、推定式を用いて、注目点の情報データが生成される。
【００３２】
このように、第１の情報信号を第２の情報信号に変換する際に使用される、各クラスの推定式の係数データを、係数種データを用いて生成式により生成するものであり、大量の係数データを格納しておくメモリを必要とせず、メモリ容量を節約できる。
【００３３】
なお、係数種データを用いて生成された推定式の係数データの総和を求め、上述したように推定式を用いて生成された注目点の情報データをその総和で除算して正規化することで、係数種データを用いて生成式で推定式の係数データを求める際の丸め誤差による注目点の情報データのレベル変動を除去できる。
【００３４】
また、クラス検出手段にクラス分類の細かさを決めるパラメータの値を入力することで、クラス検出手段で検出されるクラスの分類の細かさを変更することができる。例えば、このパラメータの値はユーザ操作手段によって調整される。また例えば、このパラメータの値は、第１の情報信号から検出された所定の特徴量に対応して自動的に変更される。また例えば、このパラメータの値は、第１の情報信号から抽出された情報に基づいて自動的に変更される。
【００３５】
一般的に、クラス検出手段で検出されるクラスの分類を細かくするほど、第２の情報信号による出力の質を高めることができる。しかし、学習時のクラス分類の細かさによっては、クラス検出手段で検出されるクラス分類を細かくしても、動画、静止画、アニメーション画などの第１の情報信号によっては、第２の情報信号による出力の質を高めることができず、却ってその出力の質を低下させるおそれがある。クラス検出手段にクラス分類の細かさを決めるパラメータの値を入力する構成とすることで、第２の情報信号による出力の質の最適に調整できるようになる。
【００３６】
また、この発明に係る係数種データ生成装置は、複数の情報データからなる第１の情報信号を複数の情報データからなる第２の情報信号に変換する際に使用される推定式の係数データを生成するための生成式の係数データである係数種データを生成する装置であって、第２の情報信号に対応した教師信号を処理して第１の情報信号に対応する入力信号を得る信号処理手段と、上記生成式に含まれるパラメータに対応し、入力信号によって得られる出力の質を決めるパラメータの値を調整するパラメータ調整手段と、入力信号から、教師信号に係る注目点の周辺に位置する複数の第１の情報データを選択する第１のデータ選択手段と、この第１のデータ選択手段で選択された複数の第１の情報データに基づいて、上記注目点が属するクラスを検出するクラス検出手段と、入力信号から、教師信号に係る注目点の周辺に位置する複数の第２の情報データを選択する第２のデータ選択手段と、クラス検出手段で検出されたクラス、第２のデータ選択手段で選択された複数の第２の情報データおよび教師信号に係る注目点の情報データから、クラス毎に、係数種データを得るための正規方程式を生成する正規方程式生成手段と、正規方程式を解いてクラス毎に係数種データを得る係数種データ演算手段とを備えるものである。
【００３９】
この発明においては、第２の情報信号に対応する教師信号が処理されて、第１の情報信号に対応する入力信号が得られる。この場合、入力信号によって得られる出力の質は調整されたパラメータの値で決定される。例えば、情報信号が画像信号である場合、パラメータの値が調整されて、入力信号による画像の画質が決められる。また、情報信号が音声信号である場合、パラメータの値が調整されて、入力信号による音声の音質が決められる。
【００４０】
この入力信号から、教師信号に係る注目点の周辺に位置する複数の第１の情報データが選択され、その複数の第１の情報データに基づいて、上記注目点が属するクラスが検出される。また、この入力信号から、教師信号に係る注目点の周辺に位置する複数の第２の情報データが選択される。
【００４１】
そして、パラメータの値が複数段階に調整され、教師信号に係る注目点が属するクラス、選択された複数の第２の情報データおよび教師信号に係る注目点の情報データから、クラス毎に係数種データを得るための正規方程式が生成され、この方程式を解くことで、クラス毎の係数種データが得られる。
【００４２】
ここで、係数種データは、第１の情報信号から第２の情報信号に変換する際に使用される推定式の係数データを生成する上記パラメータを含む生成式の係数データである。この係数種データを使用することで、生成式によって、任意に調整されたパラメータの値に対応した係数データを得ることが可能となる。これにより、推定式を使用して第１の情報信号から第２の情報信号に変換する場合に、パラメータの値を調整することで、第２の情報信号によって得られる出力の質、例えば画像の画質等を無段階になめらかに調整することが可能となる。
【００４３】
また、この発明に係る係数種データ生成装置は、複数の情報データからなる第１の情報信号を複数の情報データからなる第２の情報信号に変換する際に使用される推定式の係数データを生成するための生成式の係数データである係数種データを生成する装置であって、第２の情報信号に対応した教師信号を処理して第１の情報信号に対応する入力信号を得る信号処理手段と、上記生成式に含まれるパラメータに対応し、入力信号によって得られる出力の質を決めるパラメータの値を調整するパラメータ調整手段と、入力信号から、教師信号に係る注目点の周辺に位置する複数の第１の情報データを選択する第１のデータ選択手段と、この第１のデータ選択手段で選択された複数の第１の情報データに基づいて、注目点が属するクラスを検出するクラス検出手段と、入力信号から、教師信号に係る注目点の周辺に位置する複数の第２の情報データを選択する第２のデータ選択手段と、クラス検出手段で検出されたクラス、第２のデータ選択手段で選択された複数の第２の情報データおよび教師信号に係る注目点の情報データから、クラス検出手段で検出されるクラスおよびパラメータ調整手段で調整されるパラメータの値の組み合わせ毎に推定式の係数データを得るための第１の正規方程式を生成する第１の正規方程式生成手段と、この第１の正規方程式を解いて、上記組み合わせ毎に推定式の係数データを得る係数データ演算手段と、この係数データ演算手段で得られた上記組み合わせ毎の係数データから、クラス毎に、係数種データを得るための第２の正規方程式を生成する第２の正規方程式生成手段と、この第２の正規方程式を解いて、クラス毎に係数種データを得る係数種データ演算手段とを備えるものである。
【００４６】
この発明においては、第２の情報信号に対応する教師信号が処理されて、第１の情報信号に対応する入力信号が得られる。この場合、入力信号によって得られる出力の質は調整されたパラメータの値で決定される。例えば、情報信号が画像信号である場合、パラメータの値が調整されて、入力信号による画像の画質が決められる。また、情報信号が音声信号である場合、パラメータの値が調整されて、入力信号による音声の音質が決められる。
【００４７】
この入力信号から、教師信号に係る注目点の周辺に位置する複数の第１の情報データが選択され、その複数の第１の情報データに基づいて、上記注目点が属するクラスが検出される。また、この入力信号から、教師信号に係る注目点の周辺に位置する複数の第２の情報データが選択される。
【００４８】
そして、パラメータの値が複数段階に順次調整され、教師信号に係る注目点が属するクラス、選択された複数の第２の情報データおよび教師信号に係る注目点の情報データから、クラスおよびパラメータの値の組み合わせ毎に、推定式の係数データを得るための第１の正規方程式が生成され、この方程式を解くことで、上記組み合わせ毎の推定式の係数データが得られる。
【００４９】
そしてさらに、上記組み合わせ毎の係数データから、クラス毎に、係数種データを得るための第２の正規方程式が生成され、この方程式を解くことで、クラス毎の係数種データが得られる。
【００５０】
ここで、係数種データは、第１の情報信号から第２の情報信号に変換する際に使用される推定式の係数データを生成する上記パラメータを含む生成式の係数データである。この係数種データを使用することで、生成式によって、任意に調整されたパラメータの値に対応した係数データを得ることが可能となる。これにより、推定式を使用して第１の情報信号から第２の情報信号に変換する場合に、パラメータの値を調整することで、第２の情報信号によって得られる出力の質、例えば画像の画質等を無段階になめらかに調整することが可能となる。
【００５１】
また、この発明に係る係数種データ生成装置は、複数の情報データからなる第１の情報信号を複数の情報データからなる第２の情報信号に変換する際に使用される推定式の係数データを生成する、第２の情報信号に対応した教師信号に係る注目点が属するクラスに対応したパラメータを持つ生成式の係数データである係数種データを生成する装置であって、第１の情報信号に対応する入力信号を得る信号処理手段と、入力信号から、教師信号に係る注目点の周辺に位置する複数の第１の情報データを選択する第１のデータ選択手段と、この第１のデータ選択手段で選択された複数の第１の情報データに基づいて、上記注目点が属するクラスを検出するクラス検出手段と、入力信号から、教師信号に係る注目点の周辺に位置する複数の第２の情報データを選択する第２のデータ選択手段と、クラス検出手段で検出されたクラス、第２のデータ選択手段で選択された複数の第２の情報データおよび教師信号に係る注目点の情報データから、係数種データを得るための正規方程式を生成する正規方程式生成手段と、正規方程式を解いて係数種データを得る係数種データ演算手段とを備えるものである。
【００５４】
この発明においては、第２の情報信号に対応する教師信号が処理されて、第１の情報信号に対応する入力信号が得られる。この入力信号から、教師信号に係る注目点の周辺に位置する複数の第１の情報データが選択され、その複数の第１の情報データに基づいて、上記注目点が属するクラスが検出される。また、この入力信号から、教師信号に係る注目点の周辺に位置する複数の第２の情報データが選択される。
【００５５】
そして、教師信号に係る注目点が属するクラス、選択された複数の第２の情報データおよび教師信号に係る注目点の情報データから係数種データを得るための正規方程式が生成され、この正規方程式を解くことで係数種データが得られる。
【００５６】
ここで、係数種データは、第１の情報信号から第２の情報信号に変換する際に使用される各クラスの推定式の係数データを生成するものである。この係数種データを使用することで、生成式により、各クラスの推定式の係数データを得ることが可能となる。
【００５７】
また、この発明に係る係数種データ生成装置は、複数の情報データからなる第１の情報信号を複数の情報データからなる第２の情報信号に変換する際に使用される推定式の係数データを生成する、第２の情報信号に対応した教師信号に係る注目点が属するクラスに対応したパラメータを持つ生成式の係数データである係数種データを生成する装置であって、第１の情報信号に対応する入力信号を得る信号処理手段と、入力信号から、教師信号に係る注目点の周辺に位置する複数の第１の情報データを選択する第１のデータ選択手段と、この第１のデータ選択手段で選択された複数の第１の情報データに基づいて、注目点が属するクラスを検出するクラス検出手段と、入力信号から、教師信号に係る注目点の周辺に位置する複数の第２の情報データを選択する第２のデータ選択手段と、クラス検出手段で検出されたクラス、第２のデータ選択手段で選択された複数の第２の情報データおよび教師信号に係る注目点の情報データから、クラス検出手段で検出されるクラス毎に推定式の係数データを得るための第１の正規方程式を生成する第１の正規方程式生成手段と、この第１の正規方程式を解いてクラス毎に推定式の係数データを得る係数データ演算手段と、この係数データ演算手段で得られたクラス毎の係数データから係数種データを得るための第２の正規方程式を生成する第２の正規方程式生成手段と、この第２の正規方程式を解いて係数種データを得る係数種データ演算手段とを備えるものである。
【００６０】
この発明においては、第２の情報信号に対応する教師信号が処理されて、第１の情報信号に対応する入力信号が得られる。この入力信号から、教師信号に係る注目点の周辺に位置する複数の第１の情報データが選択され、その複数の第１の情報データに基づいて、上記注目点が属するクラスが検出される。また、この入力信号から、教師信号に係る注目点の周辺に位置する複数の第２の情報データが選択される。
【００６１】
そして、教師信号に係る注目点が属するクラス、選択された複数の第２の情報データおよび教師信号に係る注目点の情報データから、クラス毎に、推定式の係数データを得るための第１の正規方程式が生成され、この方程式を解くことで、クラス毎の推定式の係数データが得られる。
【００６２】
そしてさらに、クラス毎の係数データから係数種データを得るための第２の正規方程式が生成され、この方程式を解くことで、係数種データが得られる。
【００６３】
ここで、係数種データは、第１の情報信号から第２の情報信号に変換する際に使用される各クラスの推定式の係数データを生成するものである。この係数種データを使用することで、生成式により、各クラスの推定式の係数データを得ることが可能となる。
【００６４】
【発明の実施の形態】
以下、図面を参照しながら、この発明の実施の形態について説明する。図１は、実施の形態としてのテレビ受信機１００の構成を示している。このテレビ受信機１００は、放送信号よりＳＤ（Standard Definition）信号としての５２５ｉ信号を得、この５２５ｉ信号をＨＤ（High Definition）信号としての５２５ｐ信号または１０５０ｉ信号に変換し、その５２５ｐ信号または１０５０ｉ信号による画像を表示するものである。
【００６５】
ここで、５２５ｉ信号は、ライン数が５２５本でインタレース方式の画像信号を意味し、５２５ｐ信号は、ライン数が５２５本でプログレッシブ方式（ノンインタレース方式）の画像信号を意味し、さらに１０５０ｉ信号はライン数が１０５０本でインタレース方式の画像信号を意味している。
【００６６】
テレビ受信機１００は、マイクロコンピュータを備え、システム全体の動作を制御するためのシステムコントローラ１０１と、リモートコントロール信号を受信するリモコン信号受信回路１０２とを有している。リモコン信号受信回路１０２は、システムコントローラ１０１に接続され、リモコン送信機２００よりユーザの操作に応じて出力されるリモートコントロール信号ＲＭを受信し、その信号ＲＭに対応する操作信号をシステムコントローラ１０１に供給するように構成されている。
【００６７】
また、テレビ受信機１００は、受信アンテナ１０５と、この受信アンテナ１０５で捕らえられた放送信号（ＲＦ変調信号）が供給され、選局処理、中間周波増幅処理、検波処理等を行って上述したＳＤ信号Ｖａ（５２５ｉ信号）を得るチューナ１０６と、外部よりＳＤ信号Ｖｂ（５２５ｉ信号）を入力する外部入力端子１０７と、これらＳＤ信号Ｖａ，Ｖｂのいずれかを選択的に出力する切換スイッチ１０８と、この切換スイッチ１０８より出力されるＳＤ信号を一時的に保存するためのバッファメモリ１０９とを有している。
【００６８】
チューナ１０６より出力されるＳＤ信号Ｖａは切換スイッチ１０８のａ側の固定端子に供給され、外部入力端子１０７より入力されるＳＤ信号Ｖｂは切換スイッチ１０８のｂ側の固定端子に供給される。この切換スイッチ１０８の切り換え動作は、システムコントローラ１０１によって制御される。
【００６９】
また、テレビ受信機１００は、バッファメモリ１０９に一時的に保存されるＳＤ信号（５２５ｉ信号）を、ＨＤ信号（５２５ｐ信号または１０５０ｉ信号）に変換する画像信号処理部１１０と、この画像信号処理部１１０より出力されるＨＤ信号による画像を表示するディスプレイ部１１１と、このディスプレイ部１１１の画面上に文字図形等の表示を行うための表示信号ＳＣＨを発生させるためのＯＳＤ（On Screen Display）回路１１２と、その表示信号ＳＣＨを、上述した画像信号処理部１１０より出力されるＨＤ信号に合成してディスプレイ部１１１に供給するための合成器１１３とを有している。
【００７０】
ディスプレイ部１１１は、例えばＣＲＴ（cathode-ray tube)ディスプレイ、あるいはＬＣＤ（liquid crystal display）等のフラットパネルディスプレイで構成されている。また、ＯＳＤ回路１１２における表示信号ＳＣＨの発生動作は、システムコントローラ１０１によって制御される。
【００７１】
図１に示すテレビ受信機１００の動作を説明する。
【００７２】
ユーザのリモコン送信機２００の操作でチューナ１０６より出力されるＳＤ信号Ｖａに対応する画像表示を行うモードが選択される場合、システムコントローラ１０１の制御によって切換スイッチ１０８はａ側に接続されて、この切換スイッチ１０８よりＳＤ信号Ｖａが出力される。一方、ユーザのリモコン送信機２００の操作で外部入力端子１０７に入力されるＳＤ信号Ｖｂに対応する画像表示を行うモードが選択される場合、システムコントローラ１０１の制御によって切換スイッチ１０８はｂ側に接続されて、この切換スイッチ１０８よりＳＤ信号Ｖｂが出力される。
【００７３】
切換スイッチ１０８より出力されるＳＤ信号（５２５ｉ信号）はバッファメモリ１０９に記憶されて一時的に保存される。そして、このバッファメモリ１０９に一時的に保存されたＳＤ信号は画像信号処理部１１０に供給され、ＨＤ信号（５２５ｐ信号または１０５０ｉ信号）に変換される。すなわち、画像信号処理部１１０では、ＳＤ信号を構成する画素データ（以下、「ＳＤ画素データ」という）から、ＨＤ信号を構成する画素データ（以下、「ＨＤ画素データ」という）が得られる。ここで、５２５ｐ信号または１０５０ｉ信号の選択は、ユーザのリモコン送信機２００の操作によって行われる。この画像信号処理部１１０より出力されるＨＤ信号が合成器１１３を介してディスプレイ部１１１に供給され、ディスプレイ部１１１の画面上にはそのＨＤ信号による画像が表示される。
【００７４】
また、上述せずも、ユーザは、リモコン送信機２００の操作によって、上述したようにディスプレイ部１１１の画面上に表示される画像の水平および垂直の解像度を無段階になめらかに調整できる。画像信号処理部１１０では、後述するように、ＨＤ画素データが推定式によって算出されるが、この推定式の係数データとして、ユーザのリモコン送信機２００の操作によって調整された水平、垂直の解像度を決めるパラメータｈ，ｖに対応したものが、これらパラメータｈ，ｖを含む生成式によって生成されて使用される。これにより、画像信号処理部１１０より出力されるＨＤ信号による画像の水平、垂直の解像度は、調整されたパラメータｈ，ｖに対応したものとなる。
【００７５】
図２は、パラメータｈ，ｖを調整するためのユーザインタフェースの一例を示している。調整時には、ディスプレイ部１１１に、パラメータｈ，ｖの調整位置を☆印のアイコン１１５ａで示した調整画面１１５が、ＯＳＤ表示される。また、リモコン送信機２００は、ユーザ操作手段としてのジョイスティック２００ａを備えている。
【００７６】
ユーザは、ジョイスティック２００ａを操作することで、調整画面１１５上でアイコン１１５ａの位置を動かすことができ、水平、垂直の解像度を決定するパラメータｈ，ｖの値を任意に調整できる。図３は、調整画面１１５の部分を拡大して示している。アイコン１１５ａが左右に動かされることで水平解像度を決定するパラメータｈの値が調整され、一方アイコン１１５ａが上下に動かされることで垂直解像度を決定するパラメータｖの値が調整される。ユーザは、ディスプレイ部１１１に表示される調整画面１１５を参照してパラメータｈ，ｖの値を調整でき、その調整を容易に行うことができる。
【００７７】
なお、リモコン送信機２００は、ジョイスティック２００ａの代わりに、マウスやトラックボール等のその他のポインティングデバイスを備えていてもよい。さらに、ユーザによって調整されたパラメータｈ，ｖの値を、調整画面１１５上に数値表示してもよい。
【００７８】
次に、画像信号処理部１１０の詳細を説明する。この画像信号処理部１１０は、バッファメモリ１０９に記憶されているＳＤ信号（５２５ｉ信号）より、ＨＤ信号（１０５０ｉ信号または５２５ｐ信号）に係る注目画素の周辺に位置する複数のＳＤ画素のデータを選択的に取り出して出力する第１〜第３のタップ選択回路１２１〜１２３を有している。
【００７９】
第１のタップ選択回路１２１は、予測に使用するＳＤ画素（「予測タップ」と称する）のデータを選択的に取り出すものである。第２のタップ選択回路１２２は、ＳＤ画素データのレベル分布パターンに対応するクラス分類に使用するＳＤ画素（「空間クラスタップ」と称する）のデータを選択的に取り出すものである。第３のタップ選択回路１２３は、動きに対応するクラス分類に使用するＳＤ画素（「動きクラスタップ」と称する）のデータを選択的に取り出するものである。なお、空間クラスを複数フィールドに属するＳＤ画素データを使用して決定する場合には、この空間クラスにも動き情報が含まれることになる。
【００８０】
図４は、５２５ｉ信号および５２５ｐ信号の、あるフレーム（Ｆ）の奇数（ｏ）フィールドの画素位置関係を示している。大きなドットが５２５ｉ信号の画素であり、小さいドットが出力される５２５ｐ信号の画素である。偶数（ｅ）フィールドでは、５２５ｉ信号のラインが空間的に０．５ラインずれたものとなる。図４から分かるように、５２５ｐ信号の画素データとしては、５２５ｉ信号のラインと同一位置のラインデータＬ１と、５２５ｉ信号の上下のラインの中間位置のラインデータＬ２とが存在する。また、５２５ｐ信号の各ラインの画素数は、５２５ｉ信号の各ラインの画素数の２倍である。
【００８１】
図５は、５２５ｉ信号および１０５０ｉ信号のあるフレーム（Ｆ）の画素位置関係を示すものであり、奇数（ｏ）フィールドの画素位置を実線で示し、偶数（ｅ）フィールドの画素位置を破線で示している。大きなドットが５２５ｉ信号の画素であり、小さいドットが出力される１０５０ｉ信号の画素である。図５から分かるように、１０５０ｉ信号の画素データとしては、５２５ｉ信号のラインに近い位置のラインデータＬ１，Ｌ１′と、５２５ｉ信号のラインから遠い位置のラインデータＬ２，Ｌ２′とが存在する。ここで、Ｌ１，Ｌ２は奇数フィールドのラインデータ、Ｌ１′，Ｌ２′は偶数フィールドのラインデータである。また、１０５０ｉ信号の各ラインの画素数は、５２５ｉ信号の各ラインの画素数の２倍である。
【００８２】
図６および図７は、５２５ｉ信号から５２５ｐ信号に変換する場合に、第１のタップ選択回路１２１で選択される予測タップ（ＳＤ画素）の具体例を示している。図６および図７は、時間的に連続するフレームＦ-1，Ｆ，Ｆ+1の奇数（ｏ）、偶数（ｅ）のフィールドの垂直方向の画素位置関係を示している。
【００８３】
図６に示すように、フィールドＦ／ｏのラインデータＬ１，Ｌ２を予測するときの予測タップは、次のフィールドＦ／ｅに含まれ、作成すべき５２５ｐ信号の画素（注目画素）に対して空間的に近傍位置のＳＤ画素Ｔ１，Ｔ２，Ｔ３と、フィールドＦ／ｏに含まれ、作成すべき５２５ｐ信号の画素に対して空間的に近傍位置のＳＤ画素Ｔ４，Ｔ５，Ｔ６と、前のフィールドＦ-1／ｅに含まれ、作成すべき５２５ｐ信号の画素に対して空間的に近傍位置のＳＤ画素Ｔ７，Ｔ８，Ｔ９と、さらに前のフィールドＦ-1／ｏに含まれ、作成すべき５２５ｐ信号の画素に対して空間的に近傍位置のＳＤ画素Ｔ１０である。
【００８４】
図７に示すように、フィールドＦ／ｅのラインデータＬ１，Ｌ２を予測するときの予測タップは、次のフィールドＦ+1／ｏに含まれ、作成すべき５２５ｐ信号の画素に対して空間的に近傍位置のＳＤ画素Ｔ１，Ｔ２，Ｔ３と、フィールドＦ／ｅに含まれ、作成すべき５２５ｐ信号の画素に対して空間的に近傍位置のＳＤ画素Ｔ４，Ｔ５，Ｔ６と、前のフィールドＦ／ｏに含まれ、作成すべき５２５ｐ信号の画素に対して空間的に近傍位置のＳＤ画素Ｔ７，Ｔ８，Ｔ９と、さらに前のＦ-1／ｅに含まれ、作成すべき５２５ｐ信号の画素に対して空間的に近傍位置のＳＤ画素Ｔ１０である。
【００８５】
なお、ラインデータＬ１を予測する際にはＳＤ画素Ｔ９を予測タップとして選択しないようにし、一方ラインデータＬ２を予測する際にはＳＤ画素Ｔ４を予測タップとして選択しないようにしてもよい。
【００８６】
図８および図９は、５２５ｉ信号から１０５０ｉ信号に変換する場合に、第１のタップ選択回路１２１で選択される予測タップ（ＳＤ画素）の具体例を示している。図８および図９は、時間的に連続するフレームＦ-1，Ｆ，Ｆ+1の奇数（ｏ）、偶数（ｅ）のフィールドの垂直方向の画素位置関係を示している。
【００８７】
図８に示すように、フィールドＦ／ｏのラインデータＬ１，Ｌ２を予測するときの予測タップは、次のフィールドＦ／ｅに含まれ、作成すべき１０５０ｉ信号の画素（注目画素）に対して空間的に近傍位置のＳＤ画素Ｔ１，Ｔ２と、フィールドＦ／ｏに含まれ、作成すべき５２５ｐ信号の画素に対して空間的に近傍位置のＳＤ画素Ｔ３，Ｔ４，Ｔ５，Ｔ６と、前のフィールドＦ-1／ｅに含まれ、作成すべき１０５０ｉ信号の画素に対して空間的に近傍位置のＳＤ画素Ｔ７，Ｔ８である。
【００８８】
図９に示すように、フィールドＦ／ｅのラインデータＬ１′，Ｌ２′を予測するときの予測タップは、次のフィールドＦ+1／ｏに含まれ、作成すべき１０５０ｉｐ信号の画素に対して空間的に近傍位置のＳＤ画素Ｔ１，Ｔ２と、フィールドＦ／ｅに含まれ、作成すべき１０５０ｉ信号の画素に対して空間的に近傍位置のＳＤ画素Ｔ３，Ｔ４，Ｔ５，Ｔ６と、前のフィールドＦ／ｏに含まれ、作成すべき５２５ｐ信号の画素に対して空間的に近傍位置のＳＤ画素Ｔ７，Ｔ８である。
【００８９】
なお、ラインデータＬ１，Ｌ１′を予測する際にはＳＤ画素Ｔ６を予測タップとして選択しないようにし、一方ラインデータＬ２，Ｌ２′を予測する際にはＳＤ画素Ｔ３を予測タップとして選択しないようにしてもよい。
【００９０】
さらに、図６〜図９に示すように複数フィールドの同一位置にあるＳＤ画素に加えて、水平方向の一または複数のＳＤ画素を、予測タップとして選択するようにしてもよい。
【００９１】
図１０および図１１は、５２５ｉ信号から５２５ｐ信号に変換する場合に、第２のタップ選択回路１２２で選択される空間クラスタップ（ＳＤ画素）の具体例を示している。図１０および図１１は、時間的に連続するフレームＦ-1，Ｆ，Ｆ+1の奇数（ｏ）、偶数（ｅ）のフィールドの垂直方向の画素位置関係を示している。
【００９２】
図１０に示すように、フィールドＦ／ｏのラインデータＬ１，Ｌ２を予測するときの空間クラスタップは、次のフィールドＦ／ｅに含まれ、作成すべき５２５ｐ信号の画素（注目画素）に対して空間的に近傍位置のＳＤ画素Ｔ１，Ｔ２と、フィールドＦ／ｏに含まれ、作成すべき５２５ｐ信号の画素に対して空間的に近傍位置のＳＤ画素Ｔ３，Ｔ４，Ｔ５と、前のフィールドＦ-1／ｅに含まれ、作成すべき５２５ｐ信号の画素に対して空間的に近傍位置のＳＤ画素Ｔ６，Ｔ７である。
【００９３】
図１１に示すように、フィールドＦ／ｅのラインデータＬ１，Ｌ２を予測するときの空間クラスタップは、次のフィールドＦ+1／ｏに含まれ、作成すべき５２５ｐ信号の画素に対して空間的に近傍位置のＳＤ画素Ｔ１，Ｔ２と、フィールドＦ／ｅに含まれ、作成すべき５２５ｐ信号の画素に対して空間的に近傍位置のＳＤ画素Ｔ３，Ｔ４，Ｔ５，Ｔ６と、前のフィールドＦ／ｏに含まれ、作成すべき５２５ｐ信号の画素に対して空間的に近傍位置のＳＤ画素Ｔ６，Ｔ７である。
【００９４】
なお、ラインデータＬ１を予測する際にはＳＤ画素Ｔ７を空間クラスタップとして選択しないようにし、一方ラインデータＬ２を予測する際にはＳＤ画素Ｔ６を空間クラスタップとして選択しないようにしてもよい。
【００９５】
図１２および図１３は、５２５ｉ信号から１０５０ｉ信号に変換する場合に、第２のタップ選択回路１２２で選択される空間クラスタップ（ＳＤ画素）の具体例を示している。図１２および図１３は、時間的に連続するフレームＦ-1，Ｆ，Ｆ+1の奇数（ｏ）、偶数（ｅ）のフィールドの垂直方向の画素位置関係を示している。
【００９６】
図１２に示すように、フィールドＦ／ｏのラインデータＬ１，Ｌ２を予測するときの空間クラスタップは、フィールドＦ／ｏに含まれ、作成すべき１０５０ｉ信号の画素（注目画素）に対して空間的に近傍位置のＳＤ画素Ｔ１，Ｔ２，Ｔ３と、前のフィールドＦ-1／ｅに含まれ、作成すべき１０５０ｉ信号の画素に対して空間的に近傍位置のＳＤ画素Ｔ４，Ｔ５，Ｔ６，Ｔ７である。
【００９７】
図１３に示すように、フィールドＦ／ｅのラインデータＬ１′，Ｌ２′を予測するときの空間クラスタップは、フィールドＦ／ｅに含まれ、作成すべき１０５０ｉ信号の画素に対して空間的に近傍位置のＳＤ画素Ｔ１，Ｔ２，Ｔ３と、前のフィールドＦ／ｏに含まれ、作成すべき１０５０ｉ信号の画素に対して空間的に近傍位置のＳＤ画素Ｔ４，Ｔ５，Ｔ６，Ｔ７である。
【００９８】
なお、ラインデータＬ１，Ｌ１′を予測する際にはＳＤ画素Ｔ７を空間クラスタップとして選択しないようにし、一方ラインデータＬ２，Ｌ２′を予測する際にはＳＤ画素Ｔ４を空間クラスタップとして選択しないようにしてもよい。
【００９９】
さらに、図１０〜図１３に示すように複数フィールドの同一位置にあるＳＤ画素に加えて、水平方向の一または複数のＳＤ画素を、空間クラスタップとして選択するようにしてもよい。
【０１００】
図１４は、５２５ｉ信号から５２５ｐ信号に変換する場合に、第３のタップ選択回路１２３で選択される動きクラスタップ（ＳＤ画素）の具体例を示している。図１４は、時間的に連続するフレームＦ-1，Ｆの奇数（ｏ）、偶数（ｅ）のフィールドの垂直方向の画素位置関係を示している。図１４に示すように、フィールドＦ／ｏのラインデータＬ１，Ｌ２を予測するときの動きクラスタップは、次のフィールドＦ／ｅに含まれ、作成すべき５２５ｐ信号の画素（注目画素）に対して空間的に近傍位置のＳＤ画素ｎ２，ｎ４，ｎ６と、フィールドＦ／ｏに含まれ、作成すべき５２５ｐ信号の画素に対して空間的に近傍位置のＳＤ画素ｎ１，ｎ３，ｎ５と、前のフィールドＦ-1／ｅに含まれ、作成すべき５２５ｐ信号の画素に対して空間的に近傍位置のＳＤ画素ｍ２，ｍ４，ｍ６と、さらに前のフィールドＦ-1／ｏに含まれ、作成すべき５２５ｐ信号の画素に対して空間的に近傍位置のＳＤ画素ｍ１，ｍ３，ｍ５である。ＳＤ画素ｎ１〜ｎ６のそれぞれの垂直方向の位置は、ＳＤ画素ｍ１〜ｍ６のそれぞれの垂直方向の位置は一致する。
【０１０１】
図１５は、５２５ｉ信号から１０５０ｉ信号に変換する場合に、第３のタップ選択回路１２３で選択される動きクラスタップ（ＳＤ画素）の具体例を示している。図１５は、時間的に連続するフレームＦ-1，Ｆの奇数（ｏ）、偶数（ｅ）のフィールドの垂直方向の画素位置関係を示している。図１５に示すように、フィールドＦ／ｏのラインデータＬ１，Ｌ２を予測するときの動きクラスタップは、次のフィールドＦ／ｅに含まれ、作成すべき１０５０ｉ信号の画素に対して空間的に近傍位置のＳＤ画素ｎ２，ｎ４，ｎ６と、フィールドＦ／ｏに含まれ、作成すべき１０５０ｉ信号の画素に対して空間的に近傍位置のＳＤ画素ｎ１，ｎ３，ｎ５と、前のフィールドＦ-1／ｅに含まれ、作成すべき１０５０ｉ信号の画素に対して空間的に近傍位置のＳＤ画素ｍ２，ｍ４，ｍ６と、さらに前のフィールドＦ-1／ｏに含まれ、作成すべき１０５０ｉ信号の画素に対して空間的に近傍位置のＳＤ画素ｍ１，ｍ３，ｍ５である。ＳＤ画素ｎ１〜ｎ６のそれぞれの垂直方向の位置は、ＳＤ画素ｍ１〜ｍ６のそれぞれの垂直方向の位置は一致する。
【０１０２】
図１に戻って、また、画像信号処理部１１０は、第２のタップ選択回路１２２で選択的に取り出される空間クラスタップのデータ（ＳＤ画素データ）のレベル分布パターンを検出し、このレベル分布パターンに基づいて空間クラスを検出し、そのクラス情報を出力する空間クラス検出回路１２４を有している。
【０１０３】
空間クラス検出回路１２４では、例えば、各ＳＤ画素データを、８ビットデータから２ビットデータに圧縮するような演算が行われる。そして、空間クラス検出回路１２４からは、各ＳＤ画素データに対応した圧縮データが空間クラスのクラス情報として出力される。本実施の形態においては、ＡＤＲＣ（Adaptive Dynamic Range Coding）によって、データ圧縮が行われる。なお、情報圧縮手段としては、ＡＤＲＣ以外にＤＰＣＭ（予測符号化）、ＶＱ（ベクトル量子化）等を用いてもよい。
【０１０４】
本来、ＡＤＲＣは、ＶＴＲ（Video Tape Recorder）向け高性能符号化用に開発された適応再量子化法であるが、信号レベルの局所的なパターンを短い語長で効率的に表現できるので、上述したデータ圧縮に使用して好適なものである。ＡＤＲＣを使用する場合、空間クラスタップのデータ（ＳＤ画素データ）の最大値をＭＡＸ、その最小値をＭＩＮ、空間クラスタップのデータのダイナミックレンジをＤＲ（＝ＭＡＸ−ＭＩＮ＋１）、再量子化ビット数をＰとすると、空間クラスタップのデータとしての各ＳＤ画素データｋｉに対して、（１）式の演算により、圧縮データとしての再量子化コードｑｉが得られる。ただし、（１）式において、[ ]は切り捨て処理を意味している。空間クラスタップのデータとして、Ｎａ個のＳＤ画素データがあるとき、ｉ＝１〜Ｎａである。
ｑｉ＝［（ｋｉ−ＭＩＮ＋０．５）．２^P／ＤＲ］ ・・・（１）
【０１０５】
また、画像信号処理部１１０は、第３のタップ選択回路１２３で選択的に取り出される動きクラスタップのデータ（ＳＤ画素データ）より、主に動きの程度を表すための動きクラスを検出し、そのクラス情報を出力する動きクラス検出回路１２５を有している。
【０１０６】
この動きクラス検出回路１２５では、第３のタップ選択回路１２３で選択的に取り出される動きクラスタップのデータ（ＳＤ画素データ）ｍｉ，ｎｉからフレーム間差分が算出され、さらにその差分の絶対値の平均値に対してしきい値処理が行われて動きの指標である動きクラスが検出される。すなわち、動きクラス検出回路１２５では、（２）式によって、差分の絶対値の平均値ＡＶが算出される。第３のタップ選択回路１２３で、例えば上述したように１２個のＳＤ画素データｍ１〜ｍ６，ｎ１〜ｎ６が取り出されるとき、（２）式におけるＮｂは６である。
【０１０７】
【数１】

【０１０８】
そして、動きクラス検出回路１２５では、上述したように算出された平均値ＡＶが１個または複数個のしきい値と比較されて動きクラスのクラス情報ＭＶが得られる。例えば、３個のしきい値ｔｈ１，ｔｈ２，ｔｈ３（ｔｈ１＜ｔｈ２＜ｔｈ３）が用意され、４つの動きクラスを検出する場合、ＡＶ≦ｔｈ１のときはＭＶ＝０、ｔｈ１＜ＡＶ≦ｔｈ２のときはＭＶ＝１、ｔｈ２＜ＡＶ≦ｔｈ３のときはＭＶ＝２、ｔｈ３＜ＡＶのときはＭＶ＝３とされる。
【０１０９】
また、画像信号処理部１１０は、空間クラス検出回路１２４より出力される空間クラスのクラス情報としての再量子化コードｑｉと、動きクラス検出回路１２５より出力される動きクラスのクラス情報ＭＶに基づき、作成すべきＨＤ信号（５２５ｐ信号または１０５０ｉ信号）の画素（注目画素）が属するクラスを示すクラスコードＣＬを得るためのクラス合成回路１２６を有している。
【０１１０】
このクラス合成回路１２６では、（３）式によって、クラスコードＣＬの演算が行われる。なお、（３）式において、Ｎａは空間クラスタップのデータ（ＳＤ画素データ）の個数、ＰはＡＤＲＣにおける再量子化ビット数を示している。
【０１１１】
【数２】

【０１１２】
また、画像信号処理部１１０は、レジスタ１３０〜１３３と、係数メモリ１３４とを有している。後述する線順次変換回路１２９は、５２５ｐ信号を出力する場合と、１０５０ｉ信号を出力する場合とで、その動作を切り換える必要がある。レジスタ１３０は、線順次変換回路１２９の動作を指定する動作指定情報を格納するものである。線順次変換回路１２９は、レジスタ１３０より供給される動作指定情報に従った動作をする。
【０１１３】
レジスタ１３１は、第１のタップ選択回路１２１で選択される予測タップのタップ位置情報を格納するものである。第１のタップ選択回路１２１は、レジスタ１３１より供給されるタップ位置情報に従って予測タップを選択する。タップ位置情報は、例えば選択される可能性のある複数のＳＤ画素に対して番号付けを行い、選択するＳＤ画素の番号を指定するものである。以下のタップ位置情報においても同様である。
【０１１４】
レジスタ１３２は、第２のタップ選択回路１２２で選択される空間クラスタップのタップ位置情報を格納するものである。第２のタップ選択回路１２２は、レジスタ１３２より供給されるタップ位置情報に従って空間クラスタップを選択する。
【０１１５】
ここで、レジスタ１３２には、動きが比較的小さい場合のタップ位置情報Ａと、動きが比較的大きい場合のタップ位置情報Ｂとが格納される。これらタップ位置情報Ａ，Ｂのいずれを第２のタップ選択回路１２２に供給するかは、動きクラス検出回路１２５より出力される動きクラスのクラス情報ＭＶによって選択される。
【０１１６】
すなわち、動きがないか、あるいは動きが小さいためにＭＶ＝０またはＭＶ＝１であるときは、タップ位置情報Ａが第２のタップ選択回路１２２に供給され、この第２のタップ選択回路１２２で選択される空間クラスタップは、図１０〜図１３に示すように、複数フィールドに跨るものとされる。また、動きが比較的大きいためにＭＶ＝２またはＭＶ＝３であるときは、タップ位置情報Ｂが第２のタップ選択回路１２２に供給され、この第２のタップ選択回路１２２で選択される空間クラスタップは、図示せずも、作成すべき画素と同一フィールド内のＳＤ画素のみとされる。
【０１１７】
なお、上述したレジスタ１３１にも動きが比較的小さい場合のタップ位置情報と、動きが比較的大きい場合のタップ位置情報が格納されるようにし、第１のタップ選択回路１２１に供給されるタップ位置情報が動きクラス検出回路１２５より出力される動きクラスのクラス情報ＭＶによって選択されるようにしてもよい。
【０１１８】
レジスタ１３３は、第３のタップ選択回路１２３で選択される動きクラスタップのタップ位置情報を格納するものである。第３のタップ選択回路１２３は、レジスタ１３３より供給されるタップ位置情報に従って動きクラスタップを選択する。
【０１１９】
さらに、係数メモリ１３４は、後述する推定予測演算回路１２７で使用される推定式の係数データを、クラス毎に、格納するものである。この係数データは、ＳＤ信号としての５２５ｉ信号を、ＨＤ信号としての５２５ｐ信号または１０５０ｉ信号に変換するための情報である。係数メモリ１３４には上述したクラス合成回路１２６より出力されるクラスコードＣＬが読み出しアドレス情報として供給され、この係数メモリ１３４からはクラスコードＣＬに対応した係数データが読み出され、推定予測演算回路１２７に供給されることとなる。
【０１２０】
また、画像信号処理部１１０は、情報メモリバンク１３５を有している。この情報メモリバンク１３５には、レジスタ１３０に格納するための動作指定情報と、レジスタ１３１〜１３３に格納するためのタップ位置情報が予め蓄えられている。
【０１２１】
ここで、レジスタ１３０に格納するための動作指定情報として、情報メモリバンク１３５には、線順次変換回路１２９を５２５ｐ信号を出力するように動作させるための第１の動作指定情報と、線順次変換回路１２９を１０５０ｉ信号を出力するように動作させるための第２の動作指定情報とが予め蓄えられている。
【０１２２】
ユーザはリモコン送信機２００を操作することで、ＨＤ信号として５２５ｐ信号を出力する第１の変換方法、またはＨＤ信号として１０５０ｉ信号を出力する第２の変換方法を選択できる。情報メモリバンク１３５にはシステムコントローラ１０１よりその変換方法の選択情報が供給され、この情報メモリバンク１３５よりレジスタ１３０にはその選択情報に従って第１の動作指定情報または第２の動作指定情報がロードされる。
【０１２３】
また、情報メモリバンク１３５には、レジスタ１３１に格納するための予測タップのタップ位置情報として、第１の変換方法（５２５ｐ）に対応する第１のタップ位置情報と、第２の変換方法（１０５０ｉ）に対応する第２のタップ位置情報とが予め蓄えられている。この情報メモリバンク１３５よりレジスタ１３１には、上述した変換方法の選択情報に従って第１のタップ位置情報または第２のタップ位置情報がロードされる。
【０１２４】
また、情報メモリバンク１３５には、レジスタ１３２に格納するための空間クラスタップのタップ位置情報として、第１の変換方法（５２５ｐ）に対応する第１のタップ位置情報と、第２の変換方法（１０５０ｉ）に対応する第２のタップ位置情報とが予め蓄えられている。なお、第１および第２のタップ位置情報は、それぞれ動きが比較的小さい場合のタップ位置情報と、動きが比較的大きい場合のタップ位置情報とからなっている。この情報メモリバンク１３５よりレジスタ１３２には、上述した変換方法の選択情報に従って第１のタップ位置情報または第２のタップ位置情報がロードされる。
【０１２５】
また、情報メモリバンク１３５には、レジスタ１３３に格納するための動きクラスタップのタップ位置情報として、第１の変換方法（５２５ｐ）に対応する第１のタップ位置情報と、第２の変換方法（１０５０ｉ）に対応する第２のタップ位置情報とが予め蓄えられている。この情報メモリバンク１３５よりレジスタ１３３には、上述した変換方法の選択情報に従って第１のタップ位置情報または第２のタップ位置情報がロードされる。
【０１２６】
また、情報メモリバンク１３５には、第１および第２の変換方法のそれぞれに対応した各クラスの係数種データが予め蓄えられている。この係数種データは、上述した係数メモリ１３４に格納するための係数データを生成するための生成式の係数データである。
【０１２７】
後述する推定予測演算回路１２７では、予測タップのデータ（ＳＤ画素データ）ｘｉと、係数メモリ１３４より読み出される係数データＷｉとから、（４）式の推定式によって、作成すべきＨＤ画素データｙが演算される。第１のタップ選択回路１２１で選択される予測タップが、図４および図７に示すように１０個であるとき、（４）式におけるｎは１０となる。
【０１２８】
【数３】

【０１２９】
そして、この推定式の係数データＷｉ（ｉ＝１〜ｎ）は、（５）式に示すように、パラメータｈ，ｖを含む生成式によって生成される。情報メモリバンク１３５には、この生成式の係数データである係数種データｗ₁₀〜ｗ_n9が、変換方法毎かつクラス毎に、記憶されている。この係数種データの生成方法については後述する。
【０１３０】
【数４】

【０１３１】
また、画像信号処理部１１０は、各クラスの係数種データおよびパラメータｈ，ｖの値とを用い、（５）式によって、クラス毎に、パラメータｈ，ｖの値に対応した推定式の係数データＷｉ（ｉ＝１〜ｎ）を生成する係数生成回路１３６を有している。この係数生成回路１３６には、情報メモリバンク１３５より、上述した変換方法の選択情報に従って第１の変換方法または第２の変換方法に対応した各クラスの係数種データがロードされる。また、この係数生成回路１３６には、システムコントローラ１０１より、パラメータｈ，ｖの値が供給される。
【０１３２】
この係数生成回路１３６で生成される各クラスの係数データＷｉ（ｉ＝１〜ｎ）は、上述した係数メモリ１３４に格納される。この係数生成回路１３６における各クラスの係数データＷｉの生成は、例えば各垂直ブランキング期間で行われる。これにより、ユーザのリモコン送信機２００の操作によってパラメータｈ，ｖの値が変更されても、係数メモリ１３４に格納される各クラスの係数データＷｉを、そのパラメータｈ，ｖの値に対応したものに即座に変更でき、ユーザによる解像度の調整がスムーズに行われる。
【０１３３】
また、画像信号処理部１１０は、係数生成回路１３６で生成される各クラスの係数データＷｉ（ｉ＝１〜ｎ）に対応した正規化係数Ｓを、（６）式によって、演算する正規化係数生成回路１３７と、ここで生成された正規化係数Ｓを、クラス毎に格納する正規化係数メモリ１３８を有している。正規化係数メモリ１３８には上述したクラス合成回路１２６より出力されるクラスコードＣＬが読み出しアドレス情報として供給され、この正規化係数メモリ１３８からはクラスコードＣＬに対応した正規化係数Ｓが読み出され、後述する正規化演算回路１２８に供給されることとなる。
【０１３４】
【数５】

【０１３５】
また、画像信号処理部１１０は、第１のタップ選択回路１２１で選択的に取り出される予測タップのデータ（ＳＤ画素データ）ｘｉと、係数メモリ１３４より読み出される係数データＷｉとから、作成すべきＨＤ信号の画素（注目画素）のデータを演算する推定予測演算回路１２７を有している。
【０１３６】
この推定予測演算回路１２７では、５２５ｐ信号を出力する場合、上述した図４に示すように、奇数（ｏ）フィールドおよび偶数（ｅ）フィールドで、５２５ｉ信号のラインと同一位置のラインデータＬ１と、５２５ｉ信号の上下のラインの中間位置のラインデータＬ２とを生成し、また各ラインの画素数を２倍とする必要がある。また、この推定予測演算回路１２７では、１０５０ｉ信号を出力する場合、上述した図５に示すように、奇数（ｏ）フィールドおよび偶数（ｅ）フィールドで、５２５ｉ信号のラインに近い位置のラインデータＬ１，Ｌ１′と、５２５ｉ信号のラインから遠い位置のラインデータＬ２，Ｌ２′とを生成し、また各ラインの画素数を２倍とする必要がある。
【０１３７】
従って、推定予測演算回路１２７では、ＨＤ信号を構成する４画素のデータが同時的に生成される。例えば、４画素のデータはそれぞれ係数データを異にする推定式を使用して同時的に生成されるものであり、係数メモリ１３４からはそれぞれの推定式の係数データが供給される。ここで、推定予測演算回路１２７では、予測タップのデータ（ＳＤ画素データ）ｘｉと、係数メモリ１３４より読み出される係数データＷｉとから、上述の（４）式の推定式によって、作成すべきＨＤ画素データｙが演算される。
【０１３８】
また、画像信号処理部１１０は、推定予測演算回路１２７より出力されるラインデータＬ１，Ｌ２（Ｌ１′，Ｌ２′）を構成する各ＨＤ画素データｙを、正規化係数メモリ１３８より読み出され、それぞれの生成に使用された係数データＷｉ（ｉ＝１〜ｎ）に対応した正規化係数Ｓで除算して正規化する正規化演算回路１２８を有している。上述せずも、係数生成回路１３６で係数種データより生成式で推定式の係数データを求めるものであるが、生成される係数データは丸め誤差を含み、係数データＷｉ（ｉ＝１〜ｎ）の総和が１．０になることは保証されない。そのため、推定予測演算回路１２７で演算されるＨＤ画素データｙは、丸め誤差によってレベル変動したものとなる。上述したように、正規化演算回路１２８で正規化することで、その変動を除去できる。
【０１３９】
また、画像信号処理部１１０は、水平周期を１／２倍とするライン倍速処理を行って、推定予測演算回路１２７より正規化演算回路１２８を介して供給されるラインデータＬ１，Ｌ２（Ｌ１′，Ｌ２′）を線順次化する線順次変換回路１２９を有している。
【０１４０】
図１６は、５２５ｐ信号を出力する場合のライン倍速処理をアナログ波形を用いて示すものである。上述したように、推定予測演算回路１２７によってラインデータＬ１，Ｌ２が生成される。ラインデータＬ１には順にａ１，ａ２，ａ３，・・・のラインが含まれ、ラインデータＬ２には順にｂ１，ｂ２，ｂ３，・・・のラインが含まれる。線順次変換回路１２９は、各ラインのデータを時間軸方向に１／２に圧縮し、圧縮されたデータを交互に選択することによって、線順次出力ａ０，ｂ０，ａ１，ｂ１，・・・を形成する。
【０１４１】
なお、１０５０ｉ信号を出力する場合には、奇数フィールドおよび偶数フィールドでインタレース関係を満たすように、線順次変換回路１２９が線順次出力を発生する。したがって、線順次変換回路１２９は、５２５ｐ信号を出力する場合と、１０５０ｉ信号を出力する場合とで、その動作を切り換える必要がある。その動作指定情報は、上述したようにレジスタ１３０より供給される。
【０１４２】
次に、画像信号処理部１１０の動作を説明する。
【０１４３】
バッファメモリ１０９に記憶されているＳＤ信号（５２５ｉ信号）より、第２のタップ選択回路１２２で、空間クラスタップのデータ（ＳＤ画素データ）が選択的に取り出される。この場合、第２のタップ選択回路１２２では、レジスタ１３２より供給される、ユーザによって選択された変換方法、および動きクラス検出回路１２５で検出される動きクラスに対応したタップ位置情報に基づいて、タップの選択が行われる。
【０１４４】
この第２のタップ選択回路１２２で選択的に取り出される空間クラスタップのデータ（ＳＤ画素データ）は空間クラス検出回路１２４に供給される。この空間クラス検出回路１２４では、空間クラスタップのデータとしての各ＳＤ画素データに対してＡＤＲＣ処理が施されて空間クラス（主に空間内の波形表現のためのクラス分類）のクラス情報としての再量子化コードｑｉが得られる（（１）式参照）。
【０１４５】
また、バッファメモリ１０９に記憶されているＳＤ信号（５２５ｉ信号）より、第３のタップ選択回路１２３で、動きクラスタップのデータ（ＳＤ画素データ）が選択的に取り出される。この場合、第３のタップ選択回路１２３では、レジスタ１３３より供給される、ユーザによって選択された変換方法に対応したタップ位置情報に基づいて、タップの選択が行われる。
【０１４６】
この第３のタップ選択回路１２３で選択的に取り出される動きクラスタップのデータ（ＳＤ画素データ）は動きクラス検出回路１２５に供給される。この動きクラス検出回路１２５では、動きクラスタップのデータとしての各ＳＤ画素データより動きクラス（主に動きの程度を表すためのクラス分類）のクラス情報ＭＶが得られる。
【０１４７】
この動き情報ＭＶと上述した再量子化コードｑｉはクラス合成回路１２６に供給される。このクラス合成回路１２６では、これら動き情報ＭＶと再量子化コードｑｉとから、作成すべきＨＤ信号（５２５ｐ信号または１０５０ｉ信号）の画素（注目画素）が属するクラスを示すクラスコードＣＬが得られる（（３）式参照）。そして、このクラスコードＣＬは、係数メモリ１３４および正規化係数メモリ１３８に読み出しアドレス情報として供給される。
【０１４８】
係数メモリ１３４には、例えば各垂直ブランキング期間に、ユーザによって調整されたパラメータｈ，ｖの値および変換方法に対応した各クラスの推定式の係数データＷｉ（ｉ＝１〜ｎ）が係数生成回路１３６で生成されて格納される。また、正規化係数メモリ１３８には、上述したように係数生成回路１３６で生成された各クラスの係数データＷｉ（ｉ＝１〜ｎ）に対応した正規化係数Ｓが正規化係数生成回路１３７で生成されて格納される。
【０１４９】
係数メモリ１３４に上述したようにクラスコードＣＬが読み出しアドレス情報として供給されることで、この係数メモリ１３４からクラスコードＣＬに対応した係数データＷｉが読み出されて推定予測演算回路１２７に供給される。また、バッファメモリ１０９に記憶されているＳＤ信号（５２５ｉ信号）より、第１のタップ選択回路１２１で、予測タップのデータ（ＳＤ画素データ）が選択的に取り出される。この場合、第１のタップ選択回路１２１では、レジスタ１３１より供給される、ユーザによって選択された変換方法に対応したタップ位置情報に基づいて、タップの選択が行われる。この第１のタップ選択回路１２１で選択的に取り出される予測タップのデータ（ＳＤ画素データ）ｘｉは推定予測演算回路１２７に供給される。
【０１５０】
推定予測演算回路１２７では、予測タップのデータ（ＳＤ画素データ）ｘｉと、係数メモリ１３４より読み出される係数データＷｉとから、作成すべきＨＤ信号の画素（注目画素）のデータ（ＨＤ画素データ）ｙが演算される（（４）式参照）。この場合、ＨＤ信号を構成する４画素のデータが同時的に生成される。
【０１５１】
これにより、５２５ｐ信号を出力する第１の変換方法が選択されているときは、奇数（ｏ）フィールドおよび偶数（ｅ）フィールドで、５２５ｉ信号のラインと同一位置のラインデータＬ１と、５２５ｉ信号の上下のラインの中間位置のラインデータＬ２とが生成される（図４参照）。また、１０５０ｉ信号を出力する第２の変換方法が選択されているときは、奇数（ｏ）フィールドおよび偶数（ｅ）フィールドで、５２５ｉ信号のラインに近い位置のラインデータＬ１，Ｌ１′と、５２５ｉ信号のラインから遠い位置のラインデータＬ２，Ｌ２′とが生成される（図５参照）。
【０１５２】
このように推定予測演算回路１２７で生成されたラインデータＬ１，Ｌ２（Ｌ１′，Ｌ２′）は正規化演算回路１２８に供給される。正規化係数メモリ１３８に上述したようにクラスコードＣＬが読み出しアドレス情報として供給されることで、この正規化係数メモリ１３８からクラスコードＣＬに対応した正規化係数Ｓ、つまり推定予測演算回路１２７より出力されるラインデータＬ１，Ｌ２（Ｌ１′，Ｌ２′）を構成する各ＨＤ画素データｙの生成に使用された係数データＷｉ（ｉ＝１〜ｎ）に対応した正規化係数Ｓが読み出されて推定予測演算回路１２７に供給される。正規化演算回路１２８では、推定予測演算回路１２７より出力されるラインデータＬ１，Ｌ２（Ｌ１′，Ｌ２′）を構成する各ＨＤ画素データｙがそれぞれ対応する正規化係数Ｓで除算されて正規化される。これにより、係数種データを用いて生成式（（５）式参照）で推定式（（４）式参照）の係数データを求める際の丸め誤差による注目点の情報データのレベル変動が除去される。
【０１５３】
このように正規化演算回路１２８で正規化されたラインデータＬ１，Ｌ２（Ｌ１′，Ｌ２′）は、線順次変換回路１２９に供給される。そして、この線順次変換回路１２９では、ラインデータＬ１，Ｌ２（Ｌ１′，Ｌ２′）が線順次化されてＨＤ信号が生成される。この場合、線順次変換回路１２９は、レジスタ１３０より供給される、ユーザによって選択された変換方法に対応した動作指示情報に従った動作をする。そのため、ユーザによって第１の変換方法（５２５ｐ）が選択されているときは、線順次変換回路１２９より５２５ｐ信号が出力される。一方、ユーザによって第２の変換方法（１０５０ｉ）が選択されているときは、線順次変換回路１２９より１０５０ｉ信号が出力される。
【０１５４】
上述したように、係数生成回路１３６で、情報メモリバンク１３５よりロードされる係数種データを用いて、クラス毎に、パラメータｈ，ｖの値に対応した推定式の係数データＷｉ（ｉ＝１〜ｎ）が生成され、これが係数メモリ１３４に格納される。そして、この係数メモリ１３４より、クラスコードＣＬに対応して読み出される係数データＷｉ（ｉ＝１〜ｎ）を用いて推定予測演算回路１２７でＨＤ画素データｙが演算される。したがって、ユーザは、パラメータｈ，ｖの値を調整することで、ＨＤ信号によって得られる画像の水平および垂直の画質を、無段階になめらかに調整することができる。なお、この場合、調整されたパラメータｈ，ｖの値に対応した各クラスの係数データをその都度係数生成回路１３６で生成して使用するものであり、大量の係数データを格納しておくメモリを必要としない。
【０１５５】
上述したように、情報メモリバンク１３５には、係数種データが、変換方法毎かつクラス毎に、記憶されている。この係数種データは、予め学習によって生成されたものである。
【０１５６】
まず、この生成方法の一例について説明する。（５）式の生成式における係数データである係数種データｗ₁₀〜ｗ_n9を求める例を示すものとする。
【０１５７】
ここで、以下の説明のため、（７）式のように、ｔｉ（ｉ＝０〜９）を定義する。
【０１５８】

この（７）式を用いると、（５）式は、（８）式のように 書き換えられる。
【０１５９】
【数６】

【０１６０】
最終的に、学習によって未定係数ｗ_xyを求める。すなわち、変換方法毎かつクラス毎に、複数のＳＤ画素データとＨＤ画素データを用いて、二乗誤差を最小にする係数値を決定する。いわゆる最小二乗法による解法である。学習数をｍ、ｋ（１≦ｋ≦ｍ）番目の学習データにおける残差をｅ_k、二乗誤差の総和をＥとすると、（４）式および（５）式を用いて、Ｅは（９）式で表される。ここで、ｘ_ikはＳＤ画像のｉ番目の予測タップ位置におけるｋ番目の画素データ、ｙ_kはそれに対応するｋ番目のＨＤ画像の画素データを表している。
【０１６１】
【数７】

【０１６２】
最小二乗法による解法では、（９）式のｗ_xyによる偏微分が０になるようなｗ_xyを求める。これは、（１０）式で示される。
【０１６３】
【数８】

【０１６４】
以下、（１１）式、（１２）式のように、Ｘ_ipjq、Ｙ_ipを定義すると、（１０）式は、行列を用いて（１３）式のように書き換えられる。
【０１６５】
【数９】

【０１６６】
【数１０】

【０１６７】
この方程式は一般に正規方程式と呼ばれている。この正規方程式は、掃き出し法（Gauss-Jordanの消去法）等を用いて、ｗ_xyについて解かれ、係数種データが算出される。
【０１６８】
図１７は、上述した係数種データの生成方法の概念を示している。ＨＤ信号から複数のＳＤ信号を生成する。例えば、ＨＤ信号からＳＤ信号を生成する際に使用するフィルタの水平帯域と垂直帯域を可変するパラメータｈ，ｖをそれぞれ９段階に可変して、合計８１種類のＳＤ信号を生成している。このようにして生成した複数のＳＤ信号とＨＤ信号との間で学習を行って係数種データを生成する。
【０１６９】
図１８は、上述した概念で係数種データを生成する係数種データ生成装置１５０の構成を示している。
【０１７０】
この係数種データ生成装置１５０は、教師信号としてのＨＤ信号（５２５ｐ信号／１０５０ｉ信号）が入力される入力端子１５１と、このＨＤ信号に対して水平および垂直の間引き処理を行って、入力信号としてのＳＤ信号を得るＳＤ信号生成回路１５２とを有している。
【０１７１】
このＳＤ信号生成回路１５２には、変換方法選択信号が制御信号として供給される。第１の変換方法（図１の画像信号処理部１１０で５２５ｉ信号より５２５ｐ信号を得る）が選択される場合、ＳＤ信号生成回路１５２では５２５ｐ信号に対して間引き処理が施されてＳＤ信号が生成される（図４参照）。一方、第２の変換方法（図１の画像信号処理部１１０で５２５ｉ信号より１０５０ｉ信号を得る）が選択される場合、ＳＤ信号生成回路１５２では１０５０ｉ信号に対して間引き処理が施されてＳＤ信号が生成される（図５参照）。
【０１７２】
また、ＳＤ信号生成回路１５２には、パラメータｈ，ｖが制御信号として供給される。このパラメータｈ，ｖに対応して、ＨＤ信号からＳＤ信号を生成する際に使用するフィルタの水平帯域と垂直帯域とが可変される。ここで、フィルタの詳細について、いくつかの例を示す。
【０１７３】
例えば、フィルタを、水平帯域を制限する帯域フィルタと垂直帯域を制限する帯域フィルタとから構成することが考えられる。この場合、図１９に示すように、パラメータｈまたはｖの段階的な値に対応した周波数特性を設計し、逆フーリエ変換をすることにより、パラメータｈまたはｖの段階的な値に対応した周波数特性を持つ１次元フィルタを得ることができる。
【０１７４】
また例えば、フィルタを、水平帯域を制限する１次元ガウシアンフィルタと垂直帯域を制限する１次元ガウシアンフィルタとから構成することが考えられる。この１次元ガウシアンフィルタは（１４）式で示される。この場合、パラメータｈまたはｖの段階的な値に対応して標準偏差σの値を段階的に変えることにより、パラメータｈまたはｖの段階的な値に対応した周波数特性を持つ１次元ガウシアンフィルタを得ることができる。
【０１７５】
【数１１】

【０１７６】
また例えば、フィルタを、パラメータｈ，ｖの両方で水平および垂直の周波数特性が決まる２次元フィルタＦ(ｈ，ｖ）で構成することが考えられる。この２次元フィルタの生成方法は、上述した１次元フィルタと同様に、パラメータｈ，ｖの段階的な値に対応した２次元周波数特性を設計し、２次元の逆フーリエ変換をすることにより、パラメータｈ，ｖの段階的な値に対応した２次元周波数特性を持つ２次元フィルタを得ることができる。
【０１７７】
また、係数種データ生成装置１５０は、ＳＤ信号生成回路１５２より出力されるＳＤ信号（５２５ｉ信号）より、ＨＤ信号（１０５０ｉ信号または５２５ｐ信号）に係る注目画素の周辺に位置する複数のＳＤ画素のデータを選択的に取り出して出力する第１〜第３のタップ選択回路１５３〜１５５を有している。
【０１７８】
これら第１〜第３のタップ選択回路１５３〜１５５は、上述した画像信号処理部１１０の第１〜第３のタップ選択回路１２１〜１２３と同様に構成される。これら第１〜第３のタップ選択回路１５３〜１５５で選択されるタップは、タップ選択制御部１５６からのタップ位置情報によって指定される。
【０１７９】
タップ選択制御回路１５６には、変換方法選択信号が制御信号として供給される。第１の変換方法が選択される場合と第２の変換方法が選択される場合とで、第１〜第３のタップ選択回路１５３〜１５５に供給されるタップ位置情報が異なるようにされている。また、タップ選択制御回路１５６には後述する動きクラス検出回路１５８より出力される動きクラスのクラス情報ＭＶが供給される。これにより、第２のタップ選択回路１５４に供給されるタップ位置情報が動きが大きいか小さいかによって異なるようにされる。
また、係数種データ生成装置１５０は、第２のタップ選択回路１５４で選択的に取り出される空間クラスタップのデータ（ＳＤ画素データ）のレベル分布パターンを検出し、このレベル分布パターンに基づいて空間クラスを検出し、そのクラス情報を出力する空間クラス検出回路１５７を有している。この空間クラス検出回路１５７は、上述した画像信号処理部１１０の空間クラス検出回路１２４と同様に構成される。この空間クラス検出回路１５７からは、空間クラスタップのデータとしての各ＳＤ画素データ毎の再量子化コードｑｉが空間クラスを示すクラス情報として出力される。
【０１８０】
また、係数種データ生成装置１５０は、第３のタップ選択回路１５５で選択的に取り出される動きクラスタップのデータ（ＳＤ画素データ）より、主に動きの程度を表すための動きクラスを検出し、そのクラス情報ＭＶを出力する動きクラス検出回路１５８を有している。この動きクラス検出回路１５８は、上述した画像信号処理部１１０の動きクラス検出回路１２５と同様に構成される。この動きクラス検出回路１５８では、第３のタップ選択回路１５５で選択的に取り出される動きクラスタップのデータ（ＳＤ画素データ）からフレーム間差分が算出され、さらにその差分の絶対値の平均値に対してしきい値処理が行われて動きの指標である動きクラスが検出される。
【０１８１】
また、係数種データ生成装置１５０は、空間クラス検出回路１５７より出力される空間クラスのクラス情報としての再量子化コードｑｉと、動きクラス検出回路１５８より出力される動きクラスのクラス情報ＭＶに基づき、ＨＤ信号（５２５ｐ信号または１０５０ｉ信号）に係る注目画素が属するクラスを示すクラスコードＣＬを得るためのクラス合成回路１５９を有している。このクラス合成回路１５９も、上述した画像信号処理部１１０のクラス合成回路１２６と同様に構成される。
【０１８２】
また、係数種データ生成装置１５０は、入力端子１５１に供給されるＨＤ信号より得られる注目画素データとしての各ＨＤ画素データｙと、この各ＨＤ画素データｙにそれぞれ対応して第１のタップ選択回路１５３で選択的に取り出される予測タップのデータ（ＳＤ画素データ）ｘｉと、各ＨＤ画素データｙにそれぞれ対応してクラス合成回路１５９より出力されるクラスコードＣＬとから、各クラス毎に、係数種データｗ₁₀〜ｗ_n9を得るための正規方程式（（１３）式参照）を生成する正規方程式生成部１６０を有している。
【０１８３】
この場合、一個のＨＤ画素データｙとそれに対応するｎ個の予測タップ画素データとの組み合わせで学習データが生成されるが、ＳＤ信号生成回路１５２へのパラメータｈ，ｖが順次変更されていって水平および垂直の帯域が段階的に変化した複数のＳＤ信号が順次生成されていき、これにより正規方程式生成部１６０では多くの学習データが登録された正規方程式が生成される。
【０１８４】
ここで、ＨＤ信号と、そのＨＤ信号から帯域が狭いフィルタを作用させて生成したＳＤ信号との間で学習して算出した係数種データは、解像度の高いＨＤ信号を得るためのものとなる。逆に、ＨＤ信号と、そのＨＤ信号から帯域が広いフィルタを作用させて生成したＳＤ信号との間で学習して算出した係数種データは解像度の低いＨＤ信号を得るためのものとなる。上述したように複数のＳＤ信号を順次生成して学習データを登録することで、連続した解像度のＨＤ信号を得るための係数種データを求めることが可能となる。
【０１８５】
なお、図示せずも、第１のタップ選択回路１５３の前段に時間合わせ用の遅延回路を配置することで、この第１のタップ選択回路１５３から正規方程式生成部１６０に供給されるＳＤ画素データｘｉのタイミング合わせを行うことができる。
【０１８６】
また、係数種データ生成装置１５０は、正規方程式生成部１６０でクラス毎に生成された正規方程式のデータが供給され、クラス毎に正規方程式を解いて、各クラスの係数種データｗ₁₀〜ｗ_n9を求める係数種データ決定部１６１と、この求められた係数種データｗ₁₀〜ｗ_n9を記憶する係数種メモリ１６２とを有している。係数種データ決定部１６１では、正規方程式が例えば掃き出し法などによって解かれて、係数データｗ₁₀〜ｗ_n9が求められる。
【０１８７】
図１８に示す係数種データ生成装置１５０の動作を説明する。入力端子１５１には教師信号としてのＨＤ信号（５２５ｐ信号または１０５０ｉ信号）が供給され、そしてこのＨＤ信号に対してＳＤ信号生成回路１５２で水平および垂直の間引き処理が行われて入力信号としてのＳＤ信号（５２５ｉ信号）が生成される。
【０１８８】
この場合、第１の変換方法（図１の画像信号処理部１１０で５２５ｉ信号より５２５ｐ信号を得る）が選択される場合、ＳＤ信号生成回路１５２では５２５ｐ信号に対して間引き処理が施されてＳＤ信号が生成される。一方、第２の変換方法（図１の画像信号処理部１１０で５２５ｉ信号より１０５０ｉ信号を得る）が選択される場合、ＳＤ信号生成回路１５２では１０５０ｉ信号に対して間引き処理が施されてＳＤ信号が生成される。またこの場合、ＳＤ信号生成回路１５２にはパラメータｈ，ｖが制御信号として供給され、水平および垂直の帯域が段階的に変化した複数のＳＤ信号が順次生成されていく。
【０１８９】
このＳＤ信号（５２５ｉ信号）より、第２のタップ選択回路１５４で、ＨＤ信号（５２５ｐ信号または１０５０ｉ信号）に係る注目画素の周辺に位置する空間クラスタップのデータ（ＳＤ画素データ）が選択的に取り出される。この第２のタップ選択回路１５４では、タップ選択制御回路１５６より供給される、選択された変換方法、および動きクラス検出回路１５８で検出される動きクラスに対応したタップ位置情報に基づいて、タップの選択が行われる。
この第２のタップ選択回路１５４で選択的に取り出される空間クラスタップのデータ（ＳＤ画素データ）は空間クラス検出回路１５７に供給される。この空間クラス検出回路１５７では、空間クラスタップのデータとしての各ＳＤ画素データに対してＡＤＲＣ処理が施されて空間クラス（主に空間内の波形表現のためのクラス分類）のクラス情報としての再量子化コードｑｉが得られる（（１）式参照）。
【０１９０】
また、ＳＤ信号生成回路１５２で生成されたＳＤ信号より、第３のタップ選択回路１５５で、ＨＤ信号に係る注目画素の周辺に位置する動きクラスタップのデータ（ＳＤ画素データ）が選択的に取り出される。この場合、第３のタップ選択回路１５５では、タップ選択制御回路１５６より供給される、選択された変換方法に対応したタップ位置情報に基づいて、タップの選択が行われる。
【０１９１】
この第３のタップ選択回路１５５で選択的に取り出される動きクラスタップのデータ（ＳＤ画素データ）は動きクラス検出回路１５８に供給される。この動きクラス検出回路１５８では、動きクラスタップのデータとしての各ＳＤ画素データより動きクラス（主に動きの程度を表すためのクラス分類）のクラス情報ＭＶが得られる。
【０１９２】
この動き情報ＭＶと上述した再量子化コードｑｉはクラス合成回路１５９に供給される。このクラス合成回路１５９では、これら動き情報ＭＶと再量子化コードｑｉとから、ＨＤ信号（５２５ｐ信号または１０５０ｉ信号）に係る注目画素が属するクラスを示すクラスコードＣＬが得られる（（３）式参照）。
【０１９３】
また、ＳＤ信号生成回路１５２で生成されるＳＤ信号より、第１のタップ選択回路１５３で、ＨＤ信号に係る注目画素の周辺に位置する予測タップのデータ（ＳＤ画素データ）が選択的に取り出される。この場合、第１のタップ選択回路１５３では、タップ選択制御回路１５６より供給される、選択された変換方法に対応したタップ位置情報に基づいて、タップの選択が行われる。
【０１９４】
そして、入力端子１５１に供給されるＨＤ信号より得られる注目画素データとしての各ＨＤ画素データｙと、この各ＨＤ画素データｙにそれぞれ対応して第１のタップ選択回路１５３で選択的に取り出される予測タップのデータ（ＳＤ画素データ）ｘｉと、各ＨＤ画素データｙにそれぞれ対応してクラス合成回路１５９より出力されるクラスコードＣＬとから、正規方程式生成部１６０では、各クラス毎に、係数種データｗ₁₀〜ｗ_n9を生成するための正規方程式（（１３）式参照）が生成される。
【０１９５】
そして、係数種データ決定部１６１でその正規方程式が解かれ、各クラス毎の係数種データｗ₁₀〜ｗ_n9が求められ、その係数種データｗ₁₀〜ｗ_n9はクラス別にアドレス分割された係数種メモリ１６２に記憶される。
【０１９６】
このように、図１８に示す係数種データ生成装置１５０においては、図１の画像信号処理部１１０の情報メモリバンク１３５に記憶される各クラスの係数種データｗ₁₀〜ｗ_n9を生成することができる。この場合、ＳＤ信号生成回路１５２では、選択された変換方法によって５２５ｐ信号または１０５０ｉ信号を使用してＳＤ信号（５２５ｉ信号）が生成されるものであり、第１の変換方法（画像信号処理部１１０で５２５ｉ信号より５２５ｐ信号を得る）および第２の変換方法（画像信号処理部１１０で５２５ｉ信号より１０５０ｉ信号を得る）に対応した係数種データを生成できる。
【０１９７】
次に、係数種データの生成方法の他の例について説明する。この例においても、上述した（５）式の生成式における係数データである係数種データｗ₁₀〜ｗ_n9を求める例を示すものとする。
【０１９８】
図２０は、この例の概念を示している。ＨＤ信号から複数のＳＤ信号を生成する。例えば、ＨＤ信号からＳＤ信号を生成する際に使用するフィルタの水平帯域と垂直帯域を可変するパラメータｈ，ｖをそれぞれ９段階に可変して、合計８１種類のＳＤ信号を生成する。このようにして生成した各ＳＤ信号とＨＤ信号との間で学習を行って、（４）式の推定式の係数データＷｉを生成する。そして、各ＳＤ信号に対応して生成された係数データＷｉを使用して係数種データを生成する。
【０１９９】
まず、推定式の係数データの求め方を説明する。ここでは、（４）式の推定式の係数データＷｉ（ｉ＝１〜ｎ）を最小二乗法により求める例を示すものとする。一般化した例として、Ｘを入力データ、Ｗを係数データ、Ｙを予測値として、（１５）式の観測方程式を考える。この（１５）式において、ｍは学習データの数を示し、ｎは予測タップの数を示している。
【０２００】
【数１２】

【０２０１】
（１５）式の観測方程式により収集されたデータに最小二乗法を適用する。この（１５）式の観測方程式をもとに、（１６）式の残差方程式を考える。
【０２０２】
【数１３】

【０２０３】
（１６）式の残差方程式から、各Ｗiの最確値は、（１７）式のｅ²を最小にする条件が成り立つ場合と考えられる。すなわち、（１８）式の条件を考慮すればよいわけである。
【０２０４】
【数１４】

【０２０５】
つまり、（１８）式のｉに基づくｎ個の条件を考え、これを満たす、Ｗ₁，Ｗ₂，・・・，Ｗ_nを算出すればよい。そこで、（１６）式の残差方程式から、（１９）式が得られる。さらに、（１９）式と（１５）式とから、（２０）式が得られる。
【０２０６】
【数１５】

【０２０７】
そして、（１６）式と（２０）式とから、（２１）式の正規方程式が得られる。
【０２０８】
【数１６】

【０２０９】
（２１）式の正規方程式は、未知数の数ｎと同じ数の方程式を立てることが可能であるので、各Ｗiの最確値を求めることができる。この場合、掃き出し法等を用いて連立方程式を解くことになる。
【０２１０】
次に、各ＳＤ信号に対応して生成された係数データを使用して、係数種データの求め方を説明する。
【０２１１】
パラメータｈ，ｖに対応したＳＤ信号を用いた学習による、あるクラスの係数データが、ｋ_vhiとなったとする。ここで、ｉは予測タップの番号である。このｋ_vhiから、このクラスの係数種データを求める。
【０２１２】
各係数データＷｉ（ｉ＝１〜ｎ）は、係数種データｗ₁₀〜ｗ_n9を使って、上述した（５）式で表現される。ここで、係数データＷｉに対して最小二乗法を使用することを考えると、残差は、（２２）式で表される。
【０２１３】
【数１７】

【０２１４】
ここで、ｔ_jは、上述の（７）式に示されている。（２２）式に最小二乗法を作用させると、（２３）式が得られる。
【０２１５】
【数１８】

【０２１６】
ここで、Ｘ_jk，Ｙ_jをそれぞれ（２４）式、（２５）式のように定義すると、（２３）式は（２６）式のように書き換えられる。この（２６）式も正規方程式であり、この式を掃き出し法等の一般解法で解くことにより、係数種データｗ₁₀〜ｗ_n9を算出することができる。
【０２１７】
【数１９】

【０２１８】
図２１は、図２０に示す概念に基づいて係数種データを生成する係数種データ生成装置１５０′の構成を示している。この図２１において、図２０と対応する部分には同一符号を付し、その詳細説明は省略する。
【０２１９】
係数種データ生成装置１５０′は、入力端子１５１に供給されるＨＤ信号より得られる注目画素データとしての各ＨＤ画素データｙと、この各ＨＤ画素データｙにそれぞれ対応して第１のタップ選択回路１５３で選択的に取り出される予測タップのデータ（ＳＤ画素データ）ｘｉと、各ＨＤ画素データｙにそれぞれ対応してクラス合成回路１５９より出力されるクラスコードＣＬとから、クラス毎に、係数データＷｉ（ｉ＝１〜ｎ）を得るための正規方程式（（２１）式参照）を生成する正規方程式生成部１７１を有している。
【０２２０】
この場合、一個のＨＤ画素データｙとそれに対応するｎ個の予測タップ画素データとの組み合わせで学習データが生成されるが、ＳＤ信号生成回路１５２へのパラメータｈ，ｖが順次変更されていって水平および垂直の帯域が段階的に変化した複数のＳＤ信号が順次生成されていき、ＨＤ信号と各ＳＤ信号との間でそれぞれ学習データの生成が行われる。これにより、正規方程式生成部１７１では、各ＳＤ信号のそれぞれ対応して、クラス毎に、係数データＷｉ（ｉ＝１〜ｎ）を得るための正規方程式が生成される。
【０２２１】
また、係数種データ生成装置１５０′は、正規方程式生成部１７１で生成された正規方程式のデータが供給され、その正規方程式を解いて、各ＳＤ信号にそれぞれ対応した各クラスの係数データＷｉを求める係数データ決定部１７２と、この各ＳＤ信号に対応した各クラスの係数データＷｉを使用して、クラス毎に、係数種データｗ₁₀〜ｗ_n9を得るための正規方程式（（２６）式参照）を生成する正規方程式生成部１７３とを有している。
【０２２２】
また、係数種データ生成装置１５０′は、正規方程式生成部１７３でクラス毎に生成された正規方程式のデータが供給され、クラス毎に正規方程式を解いて、各クラスの係数種データｗ₁₀〜ｗ_n9を求める係数種データ決定部１７４と、この求められた係数種データｗ₁₀〜ｗ_n9を記憶する係数種メモリ１６２とを有している。
【０２２３】
図２１に示す係数種データ生成装置１５０′のその他は、図１８に示す係数種データ生成装置１５０と同様に構成される。
【０２２４】
図２１に示す係数種データ生成装置１５０′の動作を説明する。入力端子１５１には教師信号としてのＨＤ信号（５２５ｐ信号または１０５０ｉ信号）が供給され、そしてこのＨＤ信号に対してＳＤ信号生成回路１５２で水平および垂直の間引き処理が行われて入力信号としてのＳＤ信号（５２５ｉ信号）が生成される。
【０２２５】
この場合、第１の変換方法（図１の画像信号処理部１１０で５２５ｉ信号より５２５ｐ信号を得る）が選択される場合、ＳＤ信号生成回路１５２では５２５ｐ信号に対して間引き処理が施されてＳＤ信号が生成される。一方、第２の変換方法（図１の画像信号処理部１１０で５２５ｉ信号より１０５０ｉ信号を得る）が選択される場合、ＳＤ信号生成回路１５２では１０５０ｉ信号に対して間引き処理が施されてＳＤ信号が生成される。またこの場合、ＳＤ信号生成回路１５２にはパラメータｈ，ｖが制御信号として供給され、水平および垂直の帯域が段階的に変化した複数のＳＤ信号が順次生成されていく。
【０２２６】
このＳＤ信号（５２５ｉ信号）より、第２のタップ選択回路１５４で、ＨＤ信号（５２５ｐ信号または１０５０ｉ信号）に係る注目画素の周辺に位置する空間クラスタップのデータ（ＳＤ画素データ）が選択的に取り出される。この第２のタップ選択回路１５４では、タップ選択制御回路１５６より供給される、選択された変換方法、および動きクラス検出回路１５８で検出される動きクラスに対応したタップ位置情報に基づいて、タップの選択が行われる。
この第２のタップ選択回路１５４で選択的に取り出される空間クラスタップのデータ（ＳＤ画素データ）は空間クラス検出回路１５７に供給される。この空間クラス検出回路１５７では、空間クラスタップのデータとしての各ＳＤ画素データに対してＡＤＲＣ処理が施されて空間クラス（主に空間内の波形表現のためのクラス分類）のクラス情報としての再量子化コードｑｉが得られる（（１）式参照）。
【０２２７】
また、ＳＤ信号生成回路１５２で生成されたＳＤ信号より、第３のタップ選択回路１５５で、ＨＤ信号に係る注目画素の周辺に位置する動きクラスタップのデータ（ＳＤ画素データ）が選択的に取り出される。この場合、第３のタップ選択回路１５５では、タップ選択制御回路１５６より供給される、選択された変換方法に対応したタップ位置情報に基づいて、タップの選択が行われる。
【０２２８】
この第３のタップ選択回路１５５で選択的に取り出される動きクラスタップのデータ（ＳＤ画素データ）は動きクラス検出回路１５８に供給される。この動きクラス検出回路１５８では、動きクラスタップのデータとしての各ＳＤ画素データより動きクラス（主に動きの程度を表すためのクラス分類）のクラス情報ＭＶが得られる。
【０２２９】
この動き情報ＭＶと上述した再量子化コードｑｉはクラス合成回路１５９に供給される。このクラス合成回路１５９では、これら動き情報ＭＶと再量子化コードｑｉとから、ＨＤ信号（５２５ｐ信号または１０５０ｉ信号）に係る注目画素が属するクラスを示すクラスコードＣＬが得られる（（３）式参照）。
【０２３０】
また、ＳＤ信号生成回路１５２で生成されるＳＤ信号より、第１のタップ選択回路１５３で、ＨＤ信号に係る注目画素の周辺に位置する予測タップのデータ（ＳＤ画素データ）が選択的に取り出される。この場合、第１のタップ選択回路１５３では、タップ選択制御回路１５６より供給される、選択された変換方法に対応したタップ位置情報に基づいて、タップの選択が行われる。
【０２３１】
そして、入力端子１５１に供給されるＨＤ信号より得られる注目画素データとしての各ＨＤ画素データｙと、この各ＨＤ画素データｙにそれぞれ対応して第１のタップ選択回路１５３で選択的に取り出される予測タップのデータ（ＳＤ画素データ）ｘｉと、各ＨＤ画素データｙにそれぞれ対応してクラス合成回路１５９より出力されるクラスコードＣＬとから、正規方程式生成部１７１では、ＳＤ信号生成回路１５２で生成される各ＳＤ信号のそれぞれ対応して、クラス毎に、係数データＷｉ（ｉ＝１〜ｎ）を得るための正規方程式（（２１）式参照）が生成される。
【０２３２】
そして、係数データ決定部１７２でその正規方程式が解かれ、各ＳＤ信号にそれぞれ対応した各クラスの係数データＷｉが求められる。正規方程式生成部１７３では、この各ＳＤ信号にそれぞれ対応した各クラスの係数データＷｉから、クラス毎に、係数種データｗ₁₀〜ｗ_n9を得るための正規方程式（（２６）式参照）が生成される。
【０２３３】
そして、係数種データ決定部１７４でその正規方程式が解かれ、各クラスの係数種データｗ₁₀〜ｗ_n9が求められ、その係数種データｗ₁₀〜ｗ_n9はクラス別にアドレス分割された係数種メモリ１６２に記憶される。
【０２３４】
このように、図２１に示す係数種データ生成装置１５０′においても、図１の画像信号処理部１１０の情報メモリバンク１３５に記憶される各クラスの係数種データｗ₁₀〜ｗ_n9を生成することができる。この場合、ＳＤ信号生成回路１５２では、選択された変換方法によって５２５ｐ信号または１０５０ｉ信号を使用してＳＤ信号（５２５ｉ信号）が生成されるものであり、第１の変換方法（画像信号処理部１１０で５２５ｉ信号より５２５ｐ信号を得る）および第２の変換方法（画像信号処理部１１０で５２５ｉ信号より１０５０ｉ信号を得る）に対応した係数種データを生成できる。
【０２３５】
なお、図１の画像信号処理部１１０では、係数データＷｉ（ｉ＝１〜ｎ）を生成するために（５）式の生成式を使用したが、例えば、（２７）式、（２８）式などを使用してもよく、さらに次数の異なった多項式や、他の関数で表現される式でも実現可能である。
【０２３６】
【数２０】

【０２３７】
また、図１の画像信号処理部１１０では、水平解像度を指定するパラメータｈと垂直解像度を指定するパラメータｖとを設定し、これらパラメータｈ，ｖの値を調整することで画像の水平および垂直の解像度を調整し得るものを示したが、例えばノイズ除去度（ノイズ低減度）を指定するパラメータｚを設け、このパラメータｚの値を調整することで画像のノイズ除去度を調整し得るものも同様に構成することができる。
【０２３８】
この場合、係数データＷｉ（ｉ＝１〜ｎ）を生成する生成式として、例えば、（２９）式、（３０）式などを使用でき、さらに次数の異なった多項式や、他の関数で表現される式でも実現可能である。
【０２３９】
【数２１】

【０２４０】
なお、上述したようにパラメータｚを含む生成式の係数データである係数種データは、上述したパラメータｈ，ｖを含む生成式の係数データである係数種データを生成する場合と同様に、図１８に示す係数種データ生成装置１５０あるいは図２１に示す係数種データ生成装置１５０′により生成できる。
【０２４１】
その場合、ＳＤ信号生成回路１５２には、パラメータｚが制御信号として供給され、このパラメータｚの値に対応して、ＨＤ信号からＳＤ信号を生成する際に、ＳＤ信号に対するノイズ付加状態が段階的に可変される。このようにＳＤ信号に対するノイズ付加状態を段階的に可変させて学習データを登録することで、連続したノイズ除去度を得るための係数種データを生成することができる。
【０２４２】
ここで、パラメータｚの値に対応したノイズ付加方法の詳細について、いくつかの例を示す。
【０２４３】
例えば、図２２Ａに示すように、ＳＤ信号に振幅レベルを段階的に変化させたノイズ信号を加えて、段階的にノイズレベルが変化するＳＤ信号を生成する。
【０２４４】
また例えば、図２２Ｂに示すように、ＳＤ信号に一定振幅レベルのノイズ信号を加えるが、加える画面領域を段階的に可変する。
【０２４５】
さらに例えば、図２２Ｃに示すように、ＳＤ信号（１画面分）として、ノイズが含まれていないものと、ノイズが含まれているものとを用意する。そして、正規方程式を生成する際に、それぞれのＳＤ信号に対して複数回の学習を行う。
【０２４６】
例えば、「ノイズ０」ではノイズなしのＳＤ信号に対して１００回の学習を行い、「ノイズｉ」ではノイズなしのＳＤ信号に対して３０回の学習を行うと共にノイズありのＳＤ信号に対して７０回の学習を行う。この場合、「ノイズｉ」の方がノイズ除去度が高い係数種データを算出する学習系になる。このように、ノイズなしとノイズありのＳＤ信号に対する学習回数を段階的に変化させて学習を行うことにより、連続したノイズ除去度を得るための係数種データを得ることができる。
【０２４７】
この手法を、上述せずも、正規方程式の加算という形で実現することもできる。
【０２４８】
まず、「ノイズ０」〜「ノイズｉ」における推定式の係数データを算出するような学習を行う。このときの正規方程式は、上述した（２１）式に示すようになる。ここで、Ｐ_ij，Ｑ_jをそれぞれ（３１）式、（３２）式のように定義すると、（２１）式は（３３）式のように書き換えられる。ここで、ｘ_ijはｊ番目の予測タップ位置のＳＤ画素データのｉ番目の学習値、ｙ_iはＨＤ画素データのｉ番目の学習値、Ｗ_iは係数を表している。
【０２４９】
【数２２】

【０２５０】
このような学習を用いて、ノイズなしのＳＤ信号を学習した場合における、（３３）式の左辺を[Ｐ１_ij]、右辺を[Ｑ１_i]と定義し、同様に、ノイズありのＳＤ信号を学習した場合における、（３３）式の左辺を[Ｐ２_ij]、右辺を[Ｑ２_i]と定義する。このような場合に、（３４）式、（３５）式のように、[Ｐ_aij]、[Ｑ_ai]を定義する。ただし、ａ（０≦ａ≦１）である。
[Ｐ_aij]＝（１−ａ）[Ｐ１_ij]＋ａ[Ｐ２_ij] ・・・（３４）
[Ｑ_ai] ＝（１−ａ）[Ｑ１_i] ＋ａ[Ｑ２_i] ・・・（３５）
【０２５１】
ここで、ａ＝０の場合の正規方程式は（３６）式で表され、これは図２２Ｃの「ノイズ０」の場合の正規方程式と等価になり、ａ＝０．７の場合は「ノイズｉ」の場合の正規方程式と等価になる。
[Ｐ_aij][Ｗ_i]＝[Ｑ_ai] ・・・（３６）
【０２５２】
このａを段階的に変化させて各ノイズレベルの正規方程式を作ることにより、目的とする係数種データを得ることができる。この場合、図２１の係数種データ生成装置１５０′で説明したと同様に、各ノイズレベルの正規方程式よりそれぞれ係数データをＷｉを算出し、この各段階の係数データを使用して係数種データを求めることができる。
【０２５３】
また、各ノイズレベルの正規方程式を組み合わせることにより、上述した（１３）式のような係数種データを得るための正規方程式を生成することも可能である。この手法については、以下に具体的に説明する。ここでは、上述した（３０）式を用いて、係数種データを求める正規方程式を生成する場合を考える。
【０２５４】
予め、予め何種類かのパラメータｚに対応したノイズレベルのＳＤ信号を生成して学習を行い、上述した（３４）式、（３５）式に表される[Ｐ]、[Ｑ]を用意しておく。それらを、[Ｐ_nij]、[Ｑ_ni]と表す。また、また、上述した（７）式は、（３７）式のように書き換えられる。
ｔ₀＝１，ｔ₁＝ｚ，ｔ₂＝ｚ² ・・・（３７）
【０２５５】
この場合、上述した（２４）式、（２５）式は、それぞれ（３８）式、（３９）式のように書き換えられる。これらの式に対し、（４０）式を解くことで、係数種データｗ_ijを求めることができる。ここで、予測タップの総数を表す変数はｍに書き換えている。
【０２５６】
【数２３】

【０２５７】
また、図１の画像信号処理部１１０では、水平解像度を指定するパラメータｈと垂直解像度を指定するパラメータｖとを設定し、これらパラメータｈ，ｖの値を調整することで画像の水平および垂直の解像度を調整し得るものを示したが、水平および垂直の解像度を１個のパラメータで調整するように構成することもできる。例えば、水平および垂直の解像度を指定する１個のパラメータｒを設定する。この場合、例えば、ｒ＝１はｈ＝１、ｖ＝１、ｒ＝２はｈ＝２、ｖ＝２、・・・、あるいはｒ＝１はｈ＝１、ｖ＝２、ｒ＝２はｈ＝２、ｖ＝３、・・・のような対応関係とされる。この場合、係数データＷｉ（ｉ＝１〜ｎ）を生成する生成式としては、ｒの多項式等が使用されることとなる。
【０２５８】
また、図１の画像信号処理部１１０では、水平解像度を指定するパラメータｈと垂直解像度を指定するパラメータｖとを設定し、これら複数種類のパラメータｈ，ｖの値を調整することで画像の水平および垂直の解像度を調整し得るものを示したが、上述した水平および垂直の解像度を指定するパラメータｒと、上述ノイズ除去度（ノイズ低減度）を指定するパラメータｚとを設定し、これら複数種類のパラメータｒ，ｚの値を調整することで、画像の水平および垂直の解像度とノイズ除去度とを調整し得るものも同様に構成することができる。
【０２５９】
この場合、係数データＷｉ（ｉ＝１〜ｎ）を生成する生成式として、例えば、（４１）式等を使用でき、さらに次数の異なった多項式や、他の関数で表現される式でも実現可能である。
【０２６０】
【数２４】

【０２６１】
このようにパラメータｒ，ｚを調整するためのユーザインタフェースも、図２に示すように構成できる。ユーザは、ジョイスティック２００ａを操作することで、調整画面１１５上でアイコン１１５ａの位置を動かすことができ、解像度を指定するパラメータｒの値とノイズ除去度（ノイズ低減度）を指定するパラメータｚの値とを任意に調整できる。図２４は、調整画面１１５の部分を拡大して示している。アイコン１１５ａが左右に動かされることで解像度を決定するパラメータｒの値が調整され、一方アイコン１１５ａが上下に動かされることでノイズ除去度を決定するパラメータｚの値が調整される。
【０２６２】
ユーザは、ディスプレイ部１１１（図２参照）に表示される調整画面１１５を参照してパラメータｒ，ｚを調整でき、その調整を容易に行うことができる。なお、ユーザによって調整されたパラメータｒ，ｚの値を、調整画面１１５上に数値表示してもよい。
【０２６３】
このようにパラメータｒ，ｚを含む生成式の係数データである係数種データは、上述したパラメータｈ，ｖを含む生成式の係数データである係数種データを生成する場合と同様に、図１８に示す係数種データ生成装置１５０あるいは図２１に示す係数種データ生成装置１５０′により生成できる。
【０２６４】
その場合、ＳＤ信号生成回路１５２には、パラメータｒ，ｚが制御信号として供給され、このパラメータｒ，ｚの値に対応して、ＨＤ信号からＳＤ信号を生成する際に、ＳＤ信号の水平、垂直の帯域と、ＳＤ信号に対するノイズ付加状態とが段階的に可変される。
【０２６５】
図２３は、パラメータｒ，ｚの値に対応したＳＤ信号の生成例を示している。この例では、パラメータｒ，ｚはそれぞれ９段階に可変され、合計８１種類のＳＤ信号が生成される。なお、パラメータｒ，ｚを９段階よりもさらに多くの段階に可変するようにしてもよい。その場合には、算出される係数種データの精度は良くなるが、計算量は増えることとなる。
【０２６６】
また、図１の画像信号処理部１１０では、水平解像度を指定するパラメータｈと垂直解像度を指定するパラメータｖとを設定し、これら複数種類のパラメータｈ，ｖの値を調整することで画像の水平および垂直の解像度を調整し得るものを示したが、これらパラメータｈ，ｖの他に、さらに上述したノイズ除去度（ノイズ低減度）を指定するパラメータｚを設定し、これら複数種類のパラメータｈ，ｖ，ｚの値を調整することで、画像の水平および垂直の解像度とノイズ除去度とを調整し得るものも同様に構成することができる。
【０２６７】
この場合、係数データＷｉ（ｉ＝１〜ｎ）を生成する生成式として、例えば、（４２）式等を使用でき、さらに次数の異なった多項式や、他の関数で表現される式でも実現可能である。
【０２６８】
【数２５】

【０２６９】
このようにパラメータｈ，ｖ，ｚを調整するためのユーザインタフェースも、図２に示すように構成できる。ユーザは、ジョイスティック２００ａを操作することで、調整画面１１５上でアイコン１１５ａの位置を動かすことができ、解像度を指定するパラメータｈ，ｖの値とノイズ除去度（ノイズ低減度）を指定するパラメータｚの値とを任意に調整できる。
【０２７０】
図２６は、調整画面１１５の部分を拡大して示している。アイコン１１５ａが左右に動かされることで水平の解像度を決定するパラメータｈの値が調整され、一方アイコン１１５ａが上下に動かされることで垂直の解像度を決定するパラメータｖの値が調整され、さらにアイコン１１５ａが奥行き方向に動かされることでノイズ除去度を決定するパラメータｚの値が調整される。アイコン１１５ａを奥行き方向に動かすには、例えばジョイスティック２００ａを斜め方向に操作すればよい。
【０２７１】
この場合、アイコン１１５ａの大きさや色の濃さ、あるいは色合い等を変化させることで、奥行き方向を表現することが可能である。図中の破線で示されるアイコン１１５ａは、その大きさを変えることで、実線で示されるアイコン１１５ａが奥行き方向に移動された状態を示している。
【０２７２】
ユーザは、ディスプレイ部１１１（図２参照）に表示される調整画面１１５を参照してパラメータｈ，ｖ，ｚを調整でき、その調整を容易に行うことができる。なお、ユーザによって調整されたパラメータｈ，ｖ，ｚの値を、調整画面１１５上に数値表示してもよい。
【０２７３】
このようにパラメータｈ，ｖ，ｚを含む生成式の係数データである係数種データは、上述したパラメータｈ，ｖを含む生成式の係数データである係数種データを生成する場合と同様に、図１８に示す係数種データ生成装置１５０あるいは図２１に示す係数種データ生成装置１５０′により生成できる。
【０２７４】
その場合、ＳＤ信号生成回路１５２には、パラメータｈ，ｖ，ｚが制御信号として供給され、このパラメータｈ，ｖ，ｚの値に対応して、ＨＤ信号からＳＤ信号を生成する際に、ＳＤ信号の水平、垂直の帯域と、ＳＤ信号に対するノイズ付加状態とが段階的に可変される。
【０２７５】
図２５は、パラメータｈ，ｖ，ｚの値に対応したＳＤ信号の生成例を示している。この例では、パラメータｈ，ｖ，ｚはそれぞれ９段階に可変され、合計７２９種類のＳＤ信号が生成される。なお、パラメータｈ，ｖ，ｚを９段階よりもさらに多くの段階に可変するようにしてもよい。その場合には、算出される係数種データの精度は良くなるが、計算量は増えることとなる。
【０２７６】
なお、図１の画像信号処理部１１０における処理を、例えば図２７に示すような画像信号処理装置３００によって、ソフトウェアで実現することも可能である。
【０２７７】
まず、図２７に示す画像信号処理装置３００について説明する。この画像信号処理装置３００は、装置全体の動作を制御するＣＰＵ３０１と、このＣＰＵ３０１の動作プログラムや係数種データ等が格納されたＲＯＭ（read only memory）３０２と、ＣＰＵ３０１の作業領域を構成するＲＡＭ（random access memory）３０３とを有している。これらＣＰＵ３０１、ＲＯＭ３０２およびＲＡＭ３０３は、それぞれバス３０４に接続されている。
【０２７８】
また、画像信号処理装置３００は、外部記憶装置としてのハードディスクドライブ（ＨＤＤ）３０５と、フロッピー（Ｒ）ディスク３０６をドライブするフロッピー（Ｒ）ディスクドライブ（ＦＤＤ）３０７とを有している。これらドライブ３０５，３０７は、それぞれバス３０４に接続されている。
【０２７９】
また、画像信号処理装置３００は、インターネット等の通信網４００に有線または無線で接続する通信部３０８を有している。この通信部３０８は、インタフェース３０９を介してバス３０４に接続されている。
【０２８０】
また、画像信号処理装置３００は、ユーザインタフェース部を備えている。このユーザインタフェース部は、リモコン送信機２００からのリモコン信号ＲＭを受信するリモコン信号受信回路３１０と、ＬＣＤ（liquid crystal display）等からなるディスプレイ３１１とを有している。受信回路３１０はインタフェース３１２を介してバス３０４に接続され、同様にディスプレイ３１１はインタフェース３１３を介してバス３０４に接続されている。
【０２８１】
また、画像信号処理装置３００は、ＳＤ信号を入力するための入力端子３１４と、ＨＤ信号を出力するための出力端子３１５とを有している。入力端子３１４はインタフェース３１６を介してバス３０４に接続され、同様に出力端子３１５はインタフェース３１７を介してバス３０４に接続される。
【０２８２】
ここで、上述したようにＲＯＭ３０２に処理プログラムや係数種データ等を予め格納しておく代わりに、例えばインターネットなどの通信網４００より通信部３０８を介してダウンロードし、ハードディスクやＲＡＭ３０３に蓄積して使用することもできる。また、これら処理プログラムや係数種データ等をフロッピー（Ｒ）ディスク３０６で提供するようにしてもよい。
【０２８３】
また、処理すべきＳＤ信号を入力端子３１４より入力する代わりに、予めハードディスクに記録しておき、あるいはインターネットなどの通信網４００より通信部３０８を介してダウンロードしてもよい。また、処理後のＨＤ信号を出力端子３１５に出力する代わり、あるいはそれと並行してディスプレイ３１１に供給して画像表示をしたり、さらにはハードディスクに格納したり、通信部３０８を介してインターネットなどの通信網４００に送出するようにしてもよい。
【０２８４】
図２８のフローチャートを参照して、図２７に示す画像信号処理装置３００における、ＳＤ信号よりＨＤ信号を得るため処理手順を説明する。
【０２８５】
まず、ステップＳＴ１で、処理を開始し、ステップＳＴ２で、ＳＤ画素データをフレーム単位またはフィールド単位で入力する。このＳＤ画素データが入力端子３１４より入力される場合には、このＳＤ画素データをＲＡＭ３０３に一時的に格納する。また、このＳＤ画素データがハードディスクに記録されている場合には、ハードディスクドライブ３０７でこのＳＤ画素データを読み出し、ＲＡＭ３０３に一時的に格納する。そして、ステップＳＴ３で、入力ＳＤ画素データの全フレームまたは全フィールドの処理が終わっているか否かを判定する。処理が終わっているときは、ステップＳＴ４で、処理を終了する。一方、処理が終わっていないときは、ステップＳＴ５に進む。
【０２８６】
このステップＳＴ５では、ユーザがリモコン送信機２００を操作して入力した画質指定値（例えばパラメータｈ，ｖの値など）を例えばＲＡＭ３０３より読み込む。そして、ステップＳＴ６で、読み込んだ画質指定値および各クラスの係数種データを使用して、生成式（例えば（５）式）によって、各クラスの推定式（（４）式参照）の係数データＷｉを生成する。
【０２８７】
次に、ステップＳＴ７で、ステップＳＴ２で入力されたＳＤ画素データより、生成すべき各ＨＤ画素データに対応して、クラスタップおよび予測タップの画素データを取得する。そして、ステップＳＴ８で、入力されたＳＤ画素データの全領域においてＨＤ画素データを得る処理が終了したか否かを判定する。終了しているときは、ステップＳＴ２に戻り、次のフレームまたはフィールドのＳＤ画素データの入力処理に移る。一方、処理が終了していないときは、ステップＳＴ９に進む。
【０２８８】
このステップＳＴ９では、ステップＳＴ７で取得されたクラスタップのＳＤ画素データからクラスコードＣＬを生成する。そして、ステップＳＴ１０で、そのクラスコードＣＬに対応した係数データと予測タップのＳＤ画素データを使用して、推定式により、ＨＤ画素データを生成し、その後にステップＳＴ７に戻って、上述したと同様の処理を繰り返す。
【０２８９】
このように、図２８に示すフローチャートに沿って処理をすることで、入力されたＳＤ信号を構成するＳＤ画素データを処理して、ＨＤ信号を構成するＨＤ画素データを得ることができる。上述したように、このように処理して得られたＨＤ信号は出力端子３１５に出力されたり、ディスプレイ３１１に供給されてそれによる画像が表示されたり、さらにはハードディスクドライブ３０５に供給されてハードディスクに記録されたりする。
【０２９０】
また、処理装置の図示は省略するが、図１８の係数種データ生成装置１５０における処理を、ソフトウェアで実現することも可能である。
【０２９１】
図２９のフローチャートを参照して、係数種データを生成するための処理手順を説明する。
【０２９２】
まず、ステップＳＴ２１で、処理を開始し、ステップＳＴ２２で、学習に使われる、画質パターン（例えば、パラメータｈ，ｖで特定される）を選択する。そして、ステップＳＴ２３で、全ての画質パターンに対して学習が終わったか否かを判定する。全ての画質選択パターンに対して学習が終わっていないときは、ステップＳＴ２４に進む。
【０２９３】
このステップＳＴ２４では、既知のＨＤ画素データをフレーム単位またはフィールド単位で入力する。そして、ステップＳＴ２５で、全てのＨＤ画素データについて処理が終了したか否かを判定する。終了したときは、ステップＳＴ２２に戻って、次の画質パターンを選択して、上述したと同様の処理を繰り返す。一方、終了していないときは、ステップＳＴ２６に進む。
【０２９４】
このステップＳＴ２６では、ステップＳＴ２４で入力されたＨＤ画素データより、ステップＳＴ２２で選択された画質パターンに基づいて、ＳＤ画素データを生成する。そして、ステップＳＴ２７で、ステップＳＴ２６で生成されたＳＤ画素データより、ステップＳＴ２４で入力された各ＨＤ画素データに対応して、クラスタップおよび予測タップの画素データを取得する。そして、ステップＳＴ２８で、生成されたＳＤ画素データの全領域において学習処理を終了しているか否かを判定する。学習処理を終了しているときは、ステップＳＴ２４に戻って、次のＨＤ画素データの入力を行って、上述したと同様の処理を繰り返し、一方、学習処理を終了していないときは、ステップＳＴ２９に進む。
【０２９５】
このステップＳＴ２９では、ステップＳＴ２７で取得されたクラスタップのＳＤ画素データからクラスコードＣＬを生成する。そして、ステップＳＴ３０で、正規方程式（（１３）式参照）を生成する。その後に、ステップＳＴ２７に戻る。
【０２９６】
また、ステップＳＴ２３で、全ての画質パターンに対して学習が終わったときは、ステップＳＴ３１に進む。このステップＳＴ３１では、正規方程式を掃き出し法等で解くことによって各クラスの係数種データを算出し、ステップＳＴ３２で、その係数種データをメモリに保存し、その後にステップＳＴ３３で、処理を終了する。
【０２９７】
このように、図２９に示すフローチャートに沿って処理をすることで、図１８に示す係数種データ生成装置１５０と同様の手法によって、各クラスの係数種データを得ることができる。
【０２９８】
また、処理装置の図示は省略するが、図２１の係数種データ生成装置１５０′における処理も、ソフトウェアで実現可能である。
【０２９９】
図３０のフローチャートを参照して、係数種データを生成するための処理手順を説明する。
【０３００】
まず、ステップＳＴ４１で、処理を開始し、ステップＳＴ４２で、学習に使われる、画質パターン（例えば、パラメータｈ，ｖで特定される）を選択する。そして、ステップＳＴ４３で、全ての画質パターンに対する係数データの算出処理が終了したか否かを判定する。終了していないときは、ステップＳＴ４４に進む。
【０３０１】
このステップＳＴ４４では、既知のＨＤ画素データをフレーム単位またはフィールド単位で入力する。そして、ステップＳＴ４５で、全てのＨＤ画素データについて処理が終了したか否かを判定する。終了していないときは、ステップＳＴ４６で、ステップＳＴ４４で入力されたＨＤ画素データより、ステップＳＴ４２で選択された画質パターンに基づいて、ＳＤ画素データを生成する。
【０３０２】
そして、ステップＳＴ４７で、ステップＳＴ４６で生成されたＳＤ画素データより、ステップＳＴ４４で入力された各ＨＤ画素データに対応して、クラスタップおよび予測タップの画素データを取得する。そして、ステップＳＴ４８で、生成されたＳＤ画素データの全領域において学習処理を終了しているか否かを判定する。学習処理を終了しているときは、ステップＳＴ４４に戻って、次のＨＤ画素データの入力を行って、上述したと同様の処理を繰り返し、一方、学習処理を終了していないときは、ステップＳＴ４９に進む。
【０３０３】
このステップＳＴ４９では、ステップＳＴ４７で取得されたクラスタップのＳＤ画素データからクラスコードＣＬを生成する。そして、ステップＳＴ５０で、係数データを得るための正規方程式（（２１）式参照）を生成する。その後に、ステップＳＴ４７に戻る。
【０３０４】
上述したステップＳＴ４５で、全てのＨＤ画素データについて処理が終了したときは、ステップＳＴ５１で、ステップＳＴ５０で生成された正規方程式を掃き出し法などで解いて、各クラスの係数データを算出する。その後に、ステップＳＴ４２に戻って、次の画質パターンを選択して、上述したと同様の処理を繰り返し、次の画質パターンに対応した、各クラスの係数データを求める。
【０３０５】
また、上述のステップＳＴ４３で、全ての画質パターンに対する係数データの算出処理が終了したときは、ステップＳＴ５２に進む。このステップＳＴ５２では、全ての画質パターンに対する係数データから、係数種データを求めるための正規方程式（（２６）式参照）を生成する。
【０３０６】
そして、ステップＳＴ５３で、ステップＳＴ５２で生成された正規方程式を掃き出し法等で解くことによって各クラスの係数種データを算出し、ステップＳＴ５４で、その係数種データをメモリに保存し、その後にステップＳＴ５５で、処理を終了する。
【０３０７】
このように、図３０に示すフローチャートに沿って処理をすることで、図２１に示す係数種データ生成装置１５０′と同様の手法によって、各クラスの係数種データを得ることができる。
【０３０８】
次に、この発明の他の実施の形態について説明する。図３１は、他の実施の形態としてのテレビ受信機１００Ａの構成を示している。このテレビ受信機１００Ａは、放送信号よりＳＤ信号としての５２５ｉ信号を得、この５２５ｉ信号をＨＤ信号としての５２５ｐ信号または１０５０ｉ信号に変換し、その５２５ｐ信号または１０５０ｉ信号による画像を表示するものである。この図３１において、図１と対応する部分には同一符号を付して示している。
【０３０９】
テレビ受信機１００Ａは、図１に示すテレビ受信機１００の画像信号処理部１１０が画像信号処理部１１０Ａに置き換えられたものであって、テレビ受信機１００と略同様の動作をする。
【０３１０】
画像信号処理部１１０Ａの詳細を説明する。この画像信号処理部１１０Ａにおいて、図１に示す画像信号処理部１１０と対応する部分には同一符号を付し、その詳細説明は省略する。
【０３１１】
この画像信号処理部１１０Ａは、情報メモリバンク１３５Ａを有している。この情報メモリバンク１３５Ａには、図１に示す画像信号処理部１１０における情報メモリバンク１３５と同様に、レジスタ１３０に格納するための動作指定情報と、レジスタ１３１〜１３３に格納するためのタップ位置情報が予め蓄えられている。さらに、この情報メモリバンク１３５Ａには、第１の変換方法（５２５ｐ）および第２の変換方法（１０５０ｉ）のそれぞれに対応した係数種データが予め蓄えられている。この係数種データは、係数メモリ１３４に格納するための係数データを生成するための生成式の係数データである。
【０３１２】
推定予測演算回路１２７では、予測タップのデータ（ＳＤ画素データ）ｘｉと、係数メモリ１３４より読み出される係数データＷｉとから、（４）式の推定式によって、作成すべきＨＤ画素データｙが演算される。ここでは、この推定式の係数データＷｉ（ｉ＝１〜ｎ）が、（４３）式に示すように、パラメータｃを含む生成式によって生成される。このパラメータｃは、クラス合成回路１２５より出力されるクラスコードＣＬに対応している。情報メモリバンク１３５Ａには、この生成式の係数データである係数種データｗ_i0〜ｗ_i3が、変換方法毎に、記憶されている。この係数種データの生成方法については後述する。
Ｗｉ＝ｗ_i0＋ｗ_i1ｃ＋ｗ_i2ｃ²＋ｗ_i3ｃ³ ・・・（４３）
【０３１３】
また、画像信号処理部１１０Ａでは、システムコントローラ１０１より、空間クラス検出回路１２４、クラス合成回路１２６に、パラメータＰが供給される。このパラメータＰは、再量子化ビット数を示すものである。
【０３１４】
空間クラス合成回路１２６では、上述の（１）式の演算で空間クラスのクラス情報としての再量子化コードｑｉが演算され、クラス合成回路１２６では、（３）式の演算でクラスコードＣＬを得るものであるが、パラメータＰの値は、（１）式、（３）式の再量子化ビット数として使用される。このパラメータＰの値は、ユーザの操作によって、変更可能とされ、例えばＰ＝１，２，３の変更が可能とされている。
【０３１５】
このように、パラメータＰの値を変更することで、クラスコードＣＬで示されるクラス分類の細かさが変化する。例えば、Ｐ＝１であるとき２⁶クラスに分類され、Ｐ＝２のとき（２²）⁶＝２¹²クラスに分類され、Ｐ＝３のとき（２³）⁶＝２¹⁸クラスに分類される。ここで、パラメータＰの値が変更されても、クラスコードＣＬの変化範囲が変わらないようにするため、クラス合成回路１２６で（３）式の演算を行う際に、演算で求められたクラスコードＣＬが（２^P-1）⁶で除算される。
【０３１６】
また、画像信号処理部１１０Ａは、係数種データｗ_i0〜ｗ_i3およびパラメータＰの値とを用い、（４３）式によって、クラス毎に、推定式の係数データＷｉ（ｉ＝１〜ｎ）を生成する係数生成回路１３６Ａを有している。この係数生成回路１３６Ａには、情報メモリバンク１３５Ａより、上述した変換方法の選択情報に従って第１の変換方法または第２の変換方法に対応した係数種データｗ_i0〜ｗ_i3がロードされる。また、この係数生成回路１３６Ａには、システムコントローラ１０１より、パラメータＰの値が供給される。
【０３１７】
この係数生成回路１３６Ａでは、パラメータＰの値によって、係数データＷｉを求めるべきクラスの値（クラスコードＣＬの値）が分かる。例えば、Ｐ＝１であるとき係数データＷｉを求めるべき６４クラスの値が分かり、それらの値を（４３）式のｃに代入することで、６４クラス分の係数データＷｉを求めることができる。同様にし、Ｐ＝２、Ｐ＝３であるとき、それぞれ係数データＷｉを求めることができる。事前に、情報メモリバンク１３５Ａに格納されている係数種データがＰ＝１の６４クラスで学習されたものでも、Ｐ＝２、Ｐ＝３を入力することで、それぞれ６４クラスを、（２²）⁶クラス、（２³）⁶クラスに分類し直したときの係数データＷｉを求めることができる。これは、Ｐ＝２を入力することで（２²）⁶クラス分の係数データ、Ｐ＝３を入力することで（２³）⁶クラス分の係数データを、６４クラスの係数データから生成することである。
【０３１８】
この係数生成回路１３６Ａで生成される各クラスの係数データＷｉ（ｉ＝１〜ｎ）は、係数メモリ１３４に格納される。係数生成回路１３６Ａにおける各クラスの係数データＷｉの生成は、例えば各垂直ブランキング期間で行われる。これにより、ユーザのリモコン送信機２００の操作によってパラメータＰの値が変更されても、係数メモリ１３４に格納される各クラスの係数データＷｉを、そのパラメータＰの値に対応したものに即座に変更でき、ユーザによる調整がスムーズに行われる。
【０３１９】
画像信号処理部１１０Ａは以上のように構成され、その他は図１の画像信号処理部１１０と同様に構成される。
【０３２０】
次に、画像信号処理部１１０Ａの動作を説明する。
【０３２１】
バッファメモリ１０９に記憶されているＳＤ信号（５２５ｉ信号）より、第２のタップ選択回路１２２で、空間クラスタップのデータ（ＳＤ画素データ）が選択的に取り出される。この場合、第２のタップ選択回路１２２では、レジスタ１３２より供給される、ユーザによって選択された変換方法、および動きクラス検出回路１２５で検出される動きクラスに対応したタップ位置情報に基づいて、タップの選択が行われる。
【０３２２】
この第２のタップ選択回路１２２で選択的に取り出される空間クラスタップのデータ（ＳＤ画素データ）は空間クラス検出回路１２４に供給される。この空間クラス検出回路１２４では、空間クラスタップのデータとしての各ＳＤ画素データに対してＡＤＲＣ処理が施されて空間クラス（主に空間内の波形表現のためのクラス分類）のクラス情報としての再量子化コードｑｉが得られる（（１）式参照）。
【０３２３】
また、バッファメモリ１０９に記憶されているＳＤ信号（５２５ｉ信号）より、第３のタップ選択回路１２３で、動きクラスタップのデータ（ＳＤ画素データ）が選択的に取り出される。この場合、第３のタップ選択回路１２３では、レジスタ１３３より供給される、ユーザによって選択された変換方法に対応したタップ位置情報に基づいて、タップの選択が行われる。
【０３２４】
この第３のタップ選択回路１２３で選択的に取り出される動きクラスタップのデータ（ＳＤ画素データ）は動きクラス検出回路１２５に供給される。この動きクラス検出回路１２５では、動きクラスタップのデータとしての各ＳＤ画素データより動きクラス（主に動きの程度を表すためのクラス分類）のクラス情報ＭＶが得られる。
【０３２５】
この動き情報ＭＶと上述した再量子化コードｑｉはクラス合成回路１２６に供給される。このクラス合成回路１２６では、これら動き情報ＭＶと再量子化コードｑｉとから、作成すべきＨＤ信号（５２５ｐ信号または１０５０ｉ信号）の画素（注目画素）が属するクラスを示すクラスコードＣＬが得られる（（３）式参照）。そして、このクラスコードＣＬは、係数メモリ１３４および正規化係数メモリ１３８に読み出しアドレス情報として供給される。
【０３２６】
係数メモリ１３４には、例えば各垂直ブランキング期間に、ユーザによって調整されたパラメータＰの値に対応した各クラスの推定式の係数データＷｉ（ｉ＝１〜ｎ）が係数生成回路１３６Ａで生成されて格納される。また、正規化係数メモリ１３８には、係数生成回路１３６Ａで生成された各クラスの係数データＷｉ（ｉ＝１〜ｎ）に対応した正規化係数Ｓが正規化係数生成回路１３７で生成されて格納される。
【０３２７】
係数メモリ１３４に上述したようにクラスコードＣＬが読み出しアドレス情報として供給されることで、この係数メモリ１３４からクラスコードＣＬに対応したクラスの係数データＷｉが読み出されて推定予測演算回路１２７に供給される。また、バッファメモリ１０９に記憶されているＳＤ信号（５２５ｉ信号）より、第１のタップ選択回路１２１で、予測タップのデータ（ＳＤ画素データ）が選択的に取り出される。この場合、第１のタップ選択回路１２１では、レジスタ１３１より供給される、ユーザによって選択された変換方法に対応したタップ位置情報に基づいて、タップの選択が行われる。この第１のタップ選択回路１２１で選択的に取り出される予測タップのデータ（ＳＤ画素データ）ｘｉは推定予測演算回路１２７に供給される。
【０３２８】
推定予測演算回路１２７では、予測タップのデータ（ＳＤ画素データ）ｘｉと、係数メモリ１３４より読み出される係数データＷｉとから、作成すべきＨＤ信号の画素（注目画素）のデータ（ＨＤ画素データ）ｙが演算される（（４）式参照）。この場合、ＨＤ信号を構成する４画素のデータが同時的に生成される。
【０３２９】
これにより、５２５ｐ信号を出力する第１の変換方法が選択されているときは、奇数（ｏ）フィールドおよび偶数（ｅ）フィールドで、５２５ｉ信号のラインと同一位置のラインデータＬ１と、５２５ｉ信号の上下のラインの中間位置のラインデータＬ２とが生成される（図４参照）。また、１０５０ｉ信号を出力する第２の変換方法が選択されているときは、奇数（ｏ）フィールドおよび偶数（ｅ）フィールドで、５２５ｉ信号のラインに近い位置のラインデータＬ１，Ｌ１′と、５２５ｉ信号のラインから遠い位置のラインデータＬ２，Ｌ２′とが生成される（図５参照）。
【０３３０】
このように推定予測演算回路１２７で生成されたラインデータＬ１，Ｌ２（Ｌ１′，Ｌ２′）は正規化演算回路１２８に供給される。正規化係数メモリ１３８に上述したようにクラスコードＣＬが読み出しアドレス情報として供給されることで、この正規化係数メモリ１３８からクラスコードＣＬに対応した正規化係数Ｓ、つまり推定予測演算回路１２７より出力されるラインデータＬ１，Ｌ２（Ｌ１′，Ｌ２′）を構成する各ＨＤ画素データｙの生成に使用された係数データＷｉ（ｉ＝１〜ｎ）に対応した正規化係数Ｓが読み出されて推定予測演算回路１２７に供給される。正規化演算回路１２８では、推定予測演算回路１２７より出力されるラインデータＬ１，Ｌ２（Ｌ１′，Ｌ２′）を構成する各ＨＤ画素データｙがそれぞれ対応する正規化係数Ｓで除算されて正規化される。これにより、係数種データを用いて生成式（（４３）式参照）で推定式（（４）式参照）の係数データを求める際の丸め誤差による注目点の情報データのレベル変動が除去される。
【０３３１】
このように正規化演算回路１２８で正規化されたラインデータＬ１，Ｌ２（Ｌ１′，Ｌ２′）は、線順次変換回路１２９に供給される。そして、この線順次変換回路１２９では、ラインデータＬ１，Ｌ２（Ｌ１′，Ｌ２′）が線順次化されてＨＤ信号が生成される。この場合、線順次変換回路１２９は、レジスタ１３０より供給される、ユーザによって選択された変換方法に対応した動作指示情報に従った動作をする。そのため、ユーザによって第１の変換方法（５２５ｐ）が選択されているときは、線順次変換回路１２９より５２５ｐ信号が出力される。一方、ユーザによって第２の変換方法（１０５０ｉ）が選択されているときは、線順次変換回路１２９より１０５０ｉ信号が出力される。
【０３３２】
上述したように、係数生成回路１３６Ａで、情報メモリバンク１３５Ａよりロードされる係数種データｗ_i0〜ｗ_i3を用いて、クラス毎に、推定式の係数データＷｉ（ｉ＝１〜ｎ）が生成され、これが係数メモリ１３４に格納される。そして、この係数メモリ１３４より、クラスコードＣＬに対応して読み出される係数データＷｉ（ｉ＝１〜ｎ）を用いて推定予測演算回路１２７でＨＤ画素データｙが演算される。
【０３３３】
このように、画像信号処理部１１０Ａでは、係数生成回路１３６Ａで、各クラスの係数データＷｉを、情報メモリバンク１３５Ａに格納されている係数種データｗ_i0〜ｗ_i3を用い、（４３）式の生成式によって生成するものである。したがって、分類されるクラス数が多くても、大量の係数データを格納しておくメモリを必要とせず、メモリの節約を図ることができる。
【０３３４】
また、一般的に、クラスの分類を細かくするほど、ＨＤ信号による画質を高めることができる。しかし、学習時のクラス分類の細かさによっては、クラス分類を細かくしても、動画、静止画、アニメーション画などのＳＤ信号によっては、ＨＤ信号による画質を高めることができず、却ってその出力の質を低下させるおそれがある。上述画像信号処理部１１０Ａでは、クラス分類の細かさを決めるパラメータＰの値を入力する構成としているので、ユーザはパラメータＰの値を調整してＨＤ信号による画質を最適に調整できる。
【０３３５】
なお、図３１に示すテレビ受信機１００Ａでは、パラメータＰの値をユーザが設定するようにしたものであるが、このパラメータＰの値が、ＳＤ信号から検出された所定の特徴量（動画、静止画、アニメーション画などを区別できる）に対応して自動的に変更されるようにしてもよい。また例えば、このパラメータＰの値が、ＳＤ信号に付加されているパラメータＰの値を示す情報を抽出し、これに基づいて自動的に変更されるようにしてもよい。
【０３３６】
また、図３１に示すテレビ受信機１００Ａでは、係数生成回路１３６Ａで各クラスの係数データＷｉを生成して係数メモリ１３４に格納し、クラス合成回路１２６より出力されるクラスコードＣＬに対応した係数データＷｉをこの係数メモリ１３４より読み出して使用するものであったが、係数生成回路１３６Ａでクラス合成回路１２６からのクラスコードＣＬに対応した係数データＷｉをその都度生成し、これを推定予測演算回路１２７で使用するようにしてもよい。その場合には、係数メモリ１３４は不要となる。また、係数生成回路１３６ＡにパラメータＰを供給することが不要となる。
【０３３７】
次に、情報メモリバンク１３５Ａに格納される、係数種データｗ_i0〜ｗ_i3の生成について説明する。図３２は、係数種データｗ_i0〜ｗ_i3を求めるための係数種データ生成装置１５０Ａの構成を示している。この図３２において、図２１と対応する部分には同一符号を付し、その詳細説明は省略する。
【０３３８】
まず、図３３を使用して、この例の生成方法の概念を説明する。ＨＤ信号から複数のＳＤ信号を生成する。そして、ＳＤ信号とＨＤ信号との間で学習を行って、クラス毎に、（４）式の推定式の係数データＷｉを生成する。そして、クラス毎に生成された係数データＷｉを使用して係数種データｗ_i0〜ｗ_i3を生成する。
【０３３９】
図３２に戻って、係数種データ生成装置１５０Ａは、入力端子１５１に供給されるＨＤ信号より得られる注目画素データとしての各ＨＤ画素データｙと、この各ＨＤ画素データｙにそれぞれ対応して第１のタップ選択回路１５３で選択的に取り出される予測タップのデータ（ＳＤ画素データ）ｘｉと、各ＨＤ画素データｙにそれぞれ対応してクラス合成回路１５９より出力されるクラスコードＣＬとから、クラス毎に、係数データＷｉ（ｉ＝１〜ｎ）を得るための正規方程式（（２１）式参照）を生成する正規方程式生成部１７１Ａを有している。
【０３４０】
また、係数種データ生成装置１５０Ａは、正規方程式生成部１７１Ａで生成された正規方程式のデータが供給され、その正規方程式を解いて、各クラスの係数データＷｉを求める係数データ決定部１７２Ａと、各クラスの係数データＷｉを使用して、係数種データｗ_i0〜ｗ_i3を得るための正規方程式を生成する正規方程式生成部１７３Ａとを有している。
【０３４１】
また、係数種データ生成装置１５０Ａは、正規方程式生成部１７３Ａで生成された正規方程式のデータが供給され、正規方程式を解いて、係数種データｗ_i0〜ｗ_i3を求める係数種データ決定部１７４Ａと、この求められた係数種データｗ_i0〜ｗ_i3を記憶する係数種メモリ１６２Ａとを有している。
【０３４２】
図３２に示す係数種データ生成装置１５０Ａのその他は、図２１に示す係数種データ生成装置１５０′と同様に構成される。
【０３４３】
図３２に示す係数種データ生成装置１５０Ａの動作を説明する。入力端子１５１には教師信号としてのＨＤ信号（５２５ｐ信号または１０５０ｉ信号）が供給され、そしてこのＨＤ信号に対してＳＤ信号生成回路１５２で水平および垂直の間引き処理が行われて入力信号としてのＳＤ信号（５２５ｉ信号）が生成される。
【０３４４】
この場合、第１の変換方法（図３１の画像信号処理部１１０で５２５ｉ信号より５２５ｐ信号を得る）が選択される場合、ＳＤ信号生成回路１５２では５２５ｐ信号に対して間引き処理が施されてＳＤ信号が生成される。一方、第２の変換方法（図３１の画像信号処理部１１０で５２５ｉ信号より１０５０ｉ信号を得る）が選択される場合、ＳＤ信号生成回路１５２では１０５０ｉ信号に対して間引き処理が施されてＳＤ信号が生成される。
【０３４５】
このＳＤ信号（５２５ｉ信号）より、第２のタップ選択回路１５４で、ＨＤ信号（５２５ｐ信号または１０５０ｉ信号）に係る注目画素の周辺に位置する空間クラスタップのデータ（ＳＤ画素データ）が選択的に取り出される。この第２のタップ選択回路１５４では、タップ選択制御回路１５６より供給される、選択された変換方法、および動きクラス検出回路１５８で検出される動きクラスに対応したタップ位置情報に基づいて、タップの選択が行われる。
この第２のタップ選択回路１５４で選択的に取り出される空間クラスタップのデータ（ＳＤ画素データ）は空間クラス検出回路１５７に供給される。この空間クラス検出回路１５７では、空間クラスタップのデータとしての各ＳＤ画素データに対してＡＤＲＣ処理が施されて空間クラス（主に空間内の波形表現のためのクラス分類）のクラス情報としての再量子化コードｑｉが得られる（（１）式参照）。
【０３４６】
また、ＳＤ信号生成回路１５２で生成されたＳＤ信号より、第３のタップ選択回路１５５で、ＨＤ信号に係る注目画素の周辺に位置する動きクラスタップのデータ（ＳＤ画素データ）が選択的に取り出される。この場合、第３のタップ選択回路１５５では、タップ選択制御回路１５６より供給される、選択された変換方法に対応したタップ位置情報に基づいて、タップの選択が行われる。
【０３４７】
この第３のタップ選択回路１５５で選択的に取り出される動きクラスタップのデータ（ＳＤ画素データ）は動きクラス検出回路１５８に供給される。この動きクラス検出回路１５８では、動きクラスタップのデータとしての各ＳＤ画素データより動きクラス（主に動きの程度を表すためのクラス分類）のクラス情報ＭＶが得られる。
【０３４８】
この動き情報ＭＶと上述した再量子化コードｑｉはクラス合成回路１５９に供給される。このクラス合成回路１５９では、これら動き情報ＭＶと再量子化コードｑｉとから、ＨＤ信号（５２５ｐ信号または１０５０ｉ信号）に係る注目画素が属するクラスを示すクラスコードＣＬが得られる（（３）式参照）。
【０３４９】
また、ＳＤ信号生成回路１５２で生成されるＳＤ信号より、第１のタップ選択回路１５３で、ＨＤ信号に係る注目画素の周辺に位置する予測タップのデータ（ＳＤ画素データ）が選択的に取り出される。この場合、第１のタップ選択回路１５３では、タップ選択制御回路１５６より供給される、選択された変換方法に対応したタップ位置情報に基づいて、タップの選択が行われる。
【０３５０】
そして、入力端子１５１に供給されるＨＤ信号より得られる注目画素データとしての各ＨＤ画素データｙと、この各ＨＤ画素データｙにそれぞれ対応して第１のタップ選択回路１５３で選択的に取り出される予測タップのデータ（ＳＤ画素データ）ｘｉと、各ＨＤ画素データｙにそれぞれ対応してクラス合成回路１５９より出力されるクラスコードＣＬとから、正規方程式生成部１７１Ａでは、クラス毎に、係数データＷｉ（ｉ＝１〜ｎ）を得るための正規方程式（（２１）式参照）が生成される。
【０３５１】
そして、係数データ決定部１７２Ａでその正規方程式が解かれ、各クラスの係数データＷｉが求められる。正規方程式生成部１７３Ａでは、この各クラスの係数データＷｉから、係数種データｗ_i0〜ｗ_i3を得るための正規方程式が生成される。
【０３５２】
そして、係数種データ決定部１７４Ａでその正規方程式が解かれ、係数種データｗ_i0〜ｗ_i3が求められ、その係数種データｗ_i0〜ｗ_i3は係数種メモリ１６２Ａに記憶される。
【０３５３】
このように、図３２に示す係数種データ生成装置１５０Ａにおいては、図３１の画像信号処理部１１０Ａの情報メモリバンク１３５Ａに記憶される係数種データｗ_i0〜ｗ_i3を生成することができる。この場合、ＳＤ信号生成回路１５２では、選択された変換方法によって５２５ｐ信号または１０５０ｉ信号を使用してＳＤ信号（５２５ｉ信号）が生成されるものであり、第１の変換方法（画像信号処理部１１０Ａで５２５ｉ信号より５２５ｐ信号を得る）および第２の変換方法（画像信号処理部１１０Ａで５２５ｉ信号より１０５０ｉ信号を得る）に対応した係数種データを生成できる。
【０３５４】
教師画像から生徒画像を生成する例を用いて、学習（係数データ、種係数データ生成を）を説明した。しかし、画像取得時に、教師画像と生徒画像を取得できる撮像装置を利用するなどして、独立して得られた教師画像、生徒画像を用いて学習を行ってもよい。
【０３５５】
詳細説明は省略するが、係数種データｗ_i0〜ｗ_i3は、上述した図２１に対応した係数種データ生成装置で生成できる他、図１８に対応した係数種データ生成装置でも生成できる。
【０３５６】
また、詳細説明は省略するが、図３１の画像信号処理部１１０Ａにおける処理を、図１の画像信号処理部１１０における処理と同様に、図２７に示すような、画像信号処理装置３００を使用して、ソフトウェアで実現することも可能である（図２８のフローチャート参照）。
【０３５７】
なお、上述実施の形態においては、ＨＤ信号を生成する際の推定式として線形一次方程式を使用したものを挙げたが、これに限定されるものではなく、例えば推定式として高次方程式を使用するものであってもよい。
【０３５８】
また、上述実施の形態においては、ＳＤ信号（５２５ｉ信号）をＨＤ信号（５２５ｐ信号または１０５０ｉ信号）に変換する例を示したが、この発明はそれに限定されるものでなく、推定式を使用して第１の画像信号を第２の画像信号に変換するその他の場合にも同様に適用できることは勿論である。
【０３５９】
また、上述実地の形態においては、情報信号が画像信号である場合を示したが、この発明はこれに限定されない。例えば、情報信号が音声信号である場合にも、この発明を同様に適用することができる。
【０３６０】
【発明の効果】
この発明によれば、第１の情報信号を第２の情報信号に変換する際に使用される推定式の係数データを、所定のパラメータを含む生成式の係数データである係数種データと入力されたパラメータの値とを用いて当該生成式により生成するものであり、大量の係数データを格納しておくメモリを必要とすることなく、任意のパラメータの値に対応した推定式の係数データを生成でき、メモリの節約を図ることができる。
【図面の簡単な説明】
【図１】実施の形態としてのテレビ受信機の構成を示すブロック図である。
【図２】画質を調整するためのユーザインタフェース例を示す図である。
【図３】調整画面を拡大して示した図である。
【図４】５２５ｉ信号と５２５ｐ信号の画素位置関係を説明するための図である。
【図５】５２５ｉ信号と１０５０ｉ信号の画素位置関係を説明するための図である。
【図６】５２５ｉと５２５ｐの画素位置関係と、予測タップの一例を示す図である。
【図７】５２５ｉと５２５ｐの画素位置関係と、予測タップの一例を示す図である。
【図８】５２５ｉと１０５０ｉの画素位置関係と、予測タップの一例を示す図である。
【図９】５２５ｉと１０５０ｉの画素位置関係と、予測タップの一例を示す図である。
【図１０】５２５ｉと５２５ｐの画素位置関係と、空間クラスタップの一例を示す図である。
【図１１】５２５ｉと５２５ｐの画素位置関係と、空間クラスタップの一例を示す図である。
【図１２】５２５ｉと１０５０ｉの画素位置関係と、空間クラスタップの一例を示す図である。
【図１３】５２５ｉと１０５０ｉの画素位置関係と、空間クラスタップの一例を示す図である。
【図１４】５２５ｉと５２５ｐの画素位置関係と、動きクラスタップの一例を示す図である。
【図１５】５２５ｉと１０５０ｉの画素位置関係と、動きクラスタップの一例を示す図である。
【図１６】５２５ｐ信号を出力する場合のライン倍速処理を説明するための図である。
【図１７】係数種データの生成方法の一例の概念を示す図である。
【図１８】係数種データ生成装置の構成例を示すブロック図である。
【図１９】帯域フィルタの周波数特性の一例を示す図である。
【図２０】係数種データの生成方法の他の例の概念を示す図である。
【図２１】係数種データ生成装置の他の構成例を示すブロック図である。
【図２２】ノイズ付加方法を説明するための図である。
【図２３】ＳＤ信号（パラメータｒ，ｚ）の生成例を示す図である。
【図２４】パラメータｒ，ｚの調整画面の一例を示す図である。
【図２５】ＳＤ信号（パラメータｈ，ｖ，ｚ）の生成例を示す図である。
【図２６】パラメータｈ，ｖ，ｚの調整画面の一例を示す図である。
【図２７】ソフトウェアで実現するための画像信号処理装置の構成例を示すブロック図である。
【図２８】画像信号の処理手順を示すフローチャートである。
【図２９】係数種データ生成処理（その１）を示すフローチャートである。
【図３０】係数種データ生成処理（その２）を示すフローチャートである。
【図３１】他の実施の形態としてのテレビ受信機の構成を示すブロック図である。
【図３２】係数種データ生成装置の構成例を示すブロック図である。
【図３３】係数種データ生成方法の概念を示す図である。
【符号の説明】
１００，１００Ａ・・・テレビ受信機、１０１・・・システムコントローラ、１０２・・・リモコン信号受信回路、１０５・・・受信アンテナ、１０６・・・チューナ、１０７・・・外部入力端子、１１０，１１０Ａ・・・画像信号処理部、１１１・・・ディスプレイ部、１１２・・・ＯＳＤ回路、１１５・・・調整画面、１１５ａ・・・アイコン、１２１・・・第１のタップ選択回路、１２２・・・第２のタップ選択回路、１２３・・・第３のタップ選択回路、１２４・・・空間クラス検出回路、１２５・・・動きクラス検出回路、１２６・・・クラス合成回路、１２７・・・推定予測演算回路、１２８・・・正規化演算回路、１２９・・・線順次変換回路、１３０〜１３３・・・レジスタ、１３４・・・係数メモリ、１３５，１３５Ａ・・・情報メモリバンク、１３６，１３６Ａ・・・係数生成回路、１３７・・・正規化係数生成回路、１３８・・・正規化係数メモリ、１５０，１５０′・・・係数種データ生成装置、１５１・・・入力端子、１５２・・・ＳＤ信号生成回路、１５３・・・第１のタップ選択回路、１５４・・・第２のタップ選択回路、１５５・・・第３のタップ選択回路、１５６・・・タップ選択制御回路、１５７・・・空間クラス検出回路、１５８・・・動きクラス検出回路、１５９・・・クラス合成回路、１６０，１７１，１７３・・・正規方程式生成部、１６１，１７４・・・係数種データ決定部、１６２・・・係数種メモリ、１７２・・・係数データ決定部、２００・・・リモコン送信機、２００ａ・・・ジョイスティック、３００・・・画像信号処理装置、３０１・・・ＣＰＵ、３０２・・・ＲＯＭ、３０３・・・ＲＡＭ、３０４・・・バス、３０５・・・ハードディスクドライブ、３０７・・・フロッピー（Ｒ）ディスクドライブ、３０８・・・通信部、３０９，３１２，３１３，３１６，３１７・・・インタフェース、３１０・・・リモコン信号受信回路、３１１・・・ディスプレイ、３１４・・・入力端子、３１５・・・出力端子、４００・・・通信網

Claims (24)

1. 複数の情報データからなる第１の情報信号を複数の情報データからなる第２の情報信号に変換する情報信号処理装置であって、
   予め求められた推定式の係数データを生成する所定のパラメータを含む生成式の係数データである係数種データを記憶するメモリ手段と、
   上記パラメータの値を入力するパラメータ入力手段と、
   上記メモリ手段に記憶されている係数種データと上記パラメータ入力手段で入力された上記パラメータの値とを用いて上記生成式によって生成され、上記入力されたパラメータの値に対応した上記推定式の係数データを発生する係数データ発生手段と、
   上記第１の情報信号から、上記第２の情報信号に係る注目点の周辺に位置する複数の情報データを選択するデータ選択手段と、
   上記係数データ発生手段で発生された上記係数データと上記データ選択手段で選択された上記複数の情報データとから、上記推定式を用いて上記注目点の情報データを算出して得る演算手段と
   を備えることを特徴とする情報信号処理装置。
2. 複数の情報データからなる第１の情報信号を複数の情報データからなる第２の情報信号に変換する情報信号処理装置であって、
   上記第１の情報信号から、上記第２の情報信号に係る注目点の周辺に位置する複数の第１の情報データを選択する第１のデータ選択手段と、
   上記第１のデータ選択手段で選択された上記複数の第１の情報データに基づいて、上記注目点が属するクラスを検出するクラス検出手段と、
   上記第２の情報信号によって得られる出力の質を決めるパラメータの値を調整するパラメータ調整手段と、
   上記クラス検出手段で検出されるクラス毎に予め求められた、推定式の係数データを生成する上記パラメータを含む生成式の係数データである係数種データを記憶する第１のメモリ手段と、
   上記第１のメモリ手段に記憶されている係数種データと上記パラメータ調整手段で調整された上記パラメータの値とを用いて上記生成式によって生成され、上記クラス検出手段で検出されたクラスおよび上記調整されたパラメータの値に対応した上記推定式の係数データを発生する係数データ発生手段と、
   上記第１の情報信号から、上記第２の情報信号に係る注目点の周辺に位置する複数の第２の情報データを選択する第２のデータ選択手段と、
   上記係数データ発生手段で発生された上記係数データと上記第２のデータ選択手段で選択された上記複数の第２の情報データとから、上記推定式を用いて上記注目点の情報データを算出して得る演算手段と
   を備えることを特徴とする情報信号処理装置。
3. 上記係数データ発生手段は、
   上記第１のメモリ手段に記憶されている係数種データと上記調整されたパラメータの値とを用い、上記生成式により、上記クラス検出手段で検出されるクラス毎に上記推定式の係数データを生成する係数データ生成手段と、
   上記係数データ生成手段で生成された各クラスにおける上記推定式の係数データを記憶する第２のメモリ手段と、
   上記第２のメモリ手段より上記クラス検出手段で検出されたクラスに対応した上記推定式の係数データを読み出して出力する係数データ読み出し手段と
   を有してなることを特徴とする請求項２に記載の情報信号処理装置。
4. 上記係数データ発生手段で発生される上記推定式の係数データの総和を求める加算手段と、
   上記演算手段で得られた上記注目点の情報データを上記総和で除算して正規化する正規化手段とをさらに備える
   ことを特徴とする請求項２に記載の情報信号処理装置。
5. 上記パラメータ調整手段は、
   上記パラメータの調整位置を表示する表示手段と、
   上記表示手段の表示を参照して上記パラメータの値を調整するユーザ操作手段と
   を有してなることを特徴とする請求項２に記載の情報信号処理装置。
6. 複数の画素データからなる第１の画像信号を複数の画素データからなる第２の画像信号に変換する画像信号処理装置であって、
   上記第１の画像信号から、上記第２の画像信号に係る注目画素の周辺に位置する複数の第１の画素データを選択する第１のデータ選択手段と、
   上記第１のデータ選択手段で選択された上記複数の第１の画素データに基づいて、上記注目画素が属するクラスを検出するクラス検出手段と、
   上記第２の画像信号によって得られる画像の画質を決めるパラメータの値を調整するパラメータ調整手段と、
   上記クラス検出手段で検出されるクラス毎に予め求められた、推定式の係数データを生成する上記パラメータを含む生成式の係数データである係数種データを記憶するメモリ手段と、
   上記メモリ手段に記憶されている係数種データと上記パラメータ調整手段で調整された上記パラメータの値とを用いて上記生成式によって生成され、上記クラス検出手段で検出されたクラスおよび上記調整されたパラメータの値に対応した上記推定式の係数データを発生する係数データ発生手段と、
   上記第１の画像信号から、上記第２の画像信号に係る注目画素の周辺に位置する複数の第２の画素データを選択する第２のデータ選択手段と、
   上記係数データ発生手段で発生された上記係数データと上記第２のデータ選択手段で選択された上記複数の第２の画素データとから、上記推定式を用いて上記注目画素の画素データを算出して得る演算手段と
   を備えることを特徴とする画像信号処理装置。
7. 複数の画素データからなる第１の画像信号を入力する画像信号入力手段と、
   上記画像信号入力手段より入力された上記第１の画像信号を複数の画素データからなる第２の画像信号に変換して出力する画像信号処理手段と、
   上記画像信号処理手段より出力される上記第２の画像信号による画像を画像表示素子に表示する画像表示手段と、
   上記画像表示素子に表示される上記画像の画質を決めるパラメータの値を調整するパラメータ調整手段とを有してなり、
   上記画像信号処理手段は、
   上記第１の画像信号から、上記第２の画像信号に係る注目画素の周辺に位置する複数の第１の画素データを選択する第１のデータ選択手段と、
   上記第１のデータ選択手段で選択された上記複数の第１の画素データに基づいて、上記注目画素が属するクラスを検出するクラス検出手段と、
   上記クラス検出手段で検出されるクラス毎に予め求められた、推定式の係数データを生成する上記パラメータを含む生成式の係数データである係数種データを記憶する第１のメモリ手段と、
   上記第１のメモリ手段に記憶されている係数種データと上記パラメータ調整手段で調整された上記パラメータの値とを用いて上記生成式によって生成され、上記クラス検出手段で検出されたクラスおよび上記パラメータの値に対応した上記推定式の係数データを発生する係数データ発生手段と、
   上記第１の画像信号から、上記第２の画像信号に係る注目画素の周辺に位置する複数の第２の画素データを選択する第２のデータ選択手段と、
   上記係数データ発生手段で発生された上記係数データと上記第２のデータ選択手段で選択された上記複数の第２の画素データとから、上記推定式を用いて上記注目画素の画素データを算出して得る演算手段とを備える
   ことを特徴とする画像表示装置。
8. 複数の情報データからなる第１の情報信号を複数の情報データからなる第２の情報信号に変換する情報信号処理方法であって、
   上記第１の情報信号から、上記第２の情報信号に係る注目点の周辺に位置する複数の第１の情報データを選択する第１のステップと、
   上記第１のステップで選択された上記複数の第１の情報データに基づいて、上記注目点が属するクラスを検出する第２のステップと、
   上記第２の情報信号によって得られる出力の質を決めるパラメータの値を調整する第３のステップと、
   上記第２のステップで検出されるクラス毎に予め求められた、推定式の係数データを生成する上記パラメータを含む生成式の係数データである係数種データと上記第３のステップで調整された上記パラメータの値とを用いて、上記生成式により、上記第２のステップで検出されたクラスおよび上記調整されたパラメータの値に対応した上記推定式の係数データを生成する第４のステップと、
   上記第１の情報信号から、上記第２の情報信号に係る注目点の周辺に位置する複数の第２の情報データを選択する第５のステップと、
   上記第４のステップで生成された上記係数データと上記第５のステップで選択された上記複数の第２の情報データとから、上記推定式を用いて上記注目点の情報データを算出して得る第６のステップと
   を備えることを特徴する情報信号処理方法。
9. 複数の情報データからなる第１の情報信号を複数の情報データからなる第２の情報信号に変換するために、
   上記第１の情報信号から、上記第２の情報信号に係る注目点の周辺に位置する複数の第１の情報データを選択する第１のステップと、
   上記第１のステップで選択された上記複数の第１の情報データに基づいて、上記注目点が属するクラスを検出する第２のステップと、
   上記第２の情報信号によって得られる出力の質を決めるパラメータの値を調整する第３のステップと、
   上記第２のステップで検出されるクラス毎に予め求められた、推定式の係数データを生成する上記パラメータを含む生成式の係数データである係数種データと上記第３のステップで調整された上記パラメータの値とを用いて、上記生成式により、上記第２のステップで検出されたクラスおよび上記パラメータの値に対応した上記推定式の係数データを生成する第４のステップと、
   上記第１の情報信号から、上記第２の情報信号に係る注目点の周辺に位置する複数の第２の情報データを選択する第５のステップと、
   上記第４のステップで生成された上記係数データと上記第５のステップで選択された上記複数の第２の情報データとから、上記推定式を用いて上記注目点の情報データを算出して得る第６のステップと
   をコンピュータに実行させるためのプログラムを記録したコンピュータ読み取り可能な情報記録媒体。
10. 複数の情報データからなる第１の情報信号を複数の情報データからなる第２の情報信号に変換する情報信号処理装置であって、
    上記第１の情報信号から、上記第２の情報信号に係る注目点の周辺に位置する複数の第１の情報データを選択する第１のデータ選択手段と、
    上記第１のデータ選択手段で選択された上記複数の第１の情報データに基づいて、上記注目点が属するクラスを検出するクラス検出手段と、
    上記クラス検出手段で検出されるクラスに対応したパラメータを持ち、推定式の係数データを生成する生成式の係数データである係数種データを記憶する第１のメモリ手段と、
    上記第１のメモリ手段に記憶されている係数種データと上記クラス検出手段で検出されるクラスの値とを用いて上記生成式によって生成され、上記クラス検出手段で検出された
    クラスの値に対応した上記推定式の係数データを発生する係数データ発生手段と、
    上記第１の情報信号から、上記第２の情報信号に係る注目点の周辺に位置する複数の第２の情報データを選択する第２のデータ選択手段と、
    上記係数データ発生手段で発生された上記係数データと上記第２のデータ選択手段で選択された上記複数の第２の情報データとから、上記推定式を用いて上記注目点の情報データを算出して得る演算手段と
    を備えることを特徴とする情報信号処理装置。
11. 上記クラス検出手段に上記クラス分類の細かさを決めるパラメータの値を入力するパラメータ入力手段をさらに備える
    ことを特徴とする請求項１０に記載の情報信号処理装置。
12. 上記係数データ発生手段は、
    上記第１のメモリ手段に記憶されている係数種データと上記入力されたパラメータの値とを用い、上記生成式により、上記クラス検出手段で検出されるクラス毎に上記推定式の係数データを生成する係数データ生成手段と、
    上記係数データ生成手段で生成された各クラスにおける上記推定式の係数データを記憶する第２のメモリ手段と、
    上記第２のメモリ手段より上記クラス検出手段で検出されたクラスに対応した上記推定式の係数データを読み出して出力する係数データ読み出し手段と
    を有してなることを特徴とする請求項１１に記載の情報信号処理装置。
13. 上記係数データ発生手段で発生される上記推定式の係数データの総和を求める加算手段と、
    上記演算手段で得られた上記注目点の情報データを上記総和で除算して正規化する正規化手段とをさらに備える
    ことを特徴とする請求項１０に記載の情報信号処理装置。
14. 上記パラメータ入力手段は、
    上記パラメータの値を表示する表示手段と、
    上記表示手段の表示を参照して上記パラメータの値を調整するユーザ操作手段とを有してなる
    ことを特徴とする請求項１１に記載の情報信号処理装置。
15. 上記パラメータ入力手段は、
    上記第１の情報信号から所定の特徴量を検出する特徴量検出手段を有し、
    上記特徴量検出手段で検出された上記所定の特徴量に対応したパラメータの値を入力する
    ことを特徴とする請求項１１に記載の情報信号処理装置。
16. 上記パラメータ入力手段は、
    上記第１の情報信号に含まれる上記パラメータの値の情報を抽出する情報抽出手段を有し、
    上記情報抽出手段で抽出された情報で示されたパラメータの値を入力する
    ことを特徴とする請求項１１に記載の情報信号処理装置。
17. 複数の画素データからなる第１の画像信号を複数の画素データからなる第２の画像信号に変換する画像信号処理装置であって、
    上記第１の画像信号から、上記第２の画像信号に係る注目画素の周辺に位置する複数の第１の画素データを選択する第１のデータ選択手段と、
    上記第１のデータ選択手段で選択された上記複数の第１の画素データに基づいて、上記注目画素が属するクラスを検出するクラス検出手段と、
    上記クラス検出手段で検出されるクラスに対応したパラメータを持ち、推定式の係数データを生成する生成式の係数データである係数種データを記憶するメモリ手段と、
    上記メモリ手段に記憶されている係数種データと上記クラス検出手段で検出されるクラスの値とを用いて上記生成式によって生成され、上記クラス検出手段で検出されたクラスの値に対応した上記推定式の係数データを発生する係数データ発生手段と、
    上記第１の画像信号から、上記第２の画像信号に係る注目画素の周辺に位置する複数の第２の画素データを選択する第２のデータ選択手段と、
    上記係数データ発生手段で発生された上記係数データと上記第２のデータ選択手段で選択された上記複数の第２の画素データとから、上記推定式を用いて上記注目画素の画素データを算出して得る演算手段と
    を備えることを特徴とする画像信号処理装置。
18. 複数の画素データからなる第２の画像信号を入力する画像信号入力手段と、
    上記画像信号入力手段で入力された上記第１の画像信号を複数の画素データからなる第２の画像信号に変換して出力する画像信号処理手段と、
    上記画像信号処理手段から出力される上記第２の画像信号による画像を画像表示装置に表示する画像表示手段とを有してなり、
    上記画像信号処理手段は、
    上記第１の画像信号から、上記第２の画像信号に係る注目画素の周辺に位置する複数の第１の画素データを選択する第１のデータ選択手段と、
    上記第１のデータ選択手段で選択された上記複数の第１の画素データに基づいて、上記注目画素が属するクラスを検出するクラス検出手段と、
    上記クラス検出手段で検出されるクラスに対応したパラメータを持ち、推定式の係数データを生成する生成式の係数データである係数種データを記憶する第１のメモリ手段と、
    上記第１のメモリ手段に記憶されている係数種データと上記クラス検出手段で検出されるクラスの値とを用いて上記生成式によって生成され、上記クラス検出手段で検出されたクラスの値に対応した上記推定式の係数データを発生する係数データ発生手段と、
    上記第１の画像信号から、上記第２の画像信号に係る注目画素の周辺に位置する複数の第２の画素データを選択する第２のデータ選択手段と、
    上記係数データ発生手段で発生された上記係数データと上記第２のデータ選択手段で選択された上記複数の第２の画素データとから、上記推定式を用いて上記注目画素の画素データを算出して得る演算手段とを備える
    ことを特徴とする画像表示装置。
19. 複数の情報データからなる第１の情報信号を複数の情報データからなる第２の情報信号に変換する情報信号処理方法であって、
    上記第１の情報信号から、上記第２の情報信号に係る注目点の周辺に位置する複数の第１の情報データを選択する第１のステップと、
    上記第１のステップで選択された上記複数の第１の情報データに基づいて、上記注目点が属するクラスを検出する第２のステップと、
    上記第２のステップで検出されるクラスに対応したパラメータを持ち、推定式の係数データを生成する生成式の係数データである係数種データを用いて、上記生成式により、上記第２のステップで検出されたクラスの値に対応した上記推定式の係数データを生成する第３のステップと、
    上記第１の情報信号から、上記第２の情報信号に係る注目点の周辺に位置する複数の第２の情報データを選択する第４のステップと、
    上記第３のステップで生成された上記係数データと上記第４のステップで選択された上記複数の第２の情報データとから、上記推定式を用いて上記注目点の情報データを算出して得る第５のステップと
    を備えることを特徴とする情報信号処理方法。
20. 複数の情報データからなる第１の情報信号を複数の情報データからなる第２の情報信号に変換するために、
    上記第１の情報信号から、上記第２の情報信号に係る注目点の周辺に位置する複数の第１の情報データを選択する第１のステップと、
    上記第１のステップで選択された上記複数の第１の情報データに基づいて、上記注目点が属するクラスを検出する第２のステップと、
    上記第２のステップで検出されるクラスに対応したパラメータを持ち、推定式の係数データを用いて、上記生成式により、上記第２のステップで検出されたクラスの値に対応した上記推定式の係数データを生成する第３のステップと、
    上記第１の情報信号から、上記第２の情報信号に係る注目点の周辺に位置する複数の第２の情報データを選択する第４のステップと、
    上記第３のステップで生成された上記係数データと上記第４のステップで選択された上記複数の第２の情報データとから、上記推定式を用いて上記注目点の情報データを算出して得る第５のステップと
    をコンピュータに実行させるためのプログラムを記録したコンピュータ読み取り可能な情報記録媒体。
21. 複数の情報データからなる第１の情報信号を複数の情報データからなる第２の情報信号に変換する際に使用される推定式の係数データを生成するための生成式の係数データである係数種データを生成する装置であって、
    上記第１の情報信号に対応する入力信号を得る信号処理手段と、
    上記生成式に含まれるパラメータに対応し、上記入力信号によって得られる出力の質を決めるパラメータの値を調整するパラメータ調整手段と、
    上記入力信号から、上記教師信号に係る注目点の周辺に位置する複数の第１の情報データを選択する第１のデータ選択手段と、
    上記第１のデータ選択手段で選択された上記複数の第１の情報データに基づいて、上記注目点が属するクラスを検出するクラス検出手段と、
    上記入力信号から、上記教師信号に係る注目点の周辺に位置する複数の第２の情報データを選択する第２のデータ選択手段と、
    上記クラス検出手段で検出されたクラス、上記第２のデータ選択手段で選択された上記複数の第２の情報データおよび上記教師信号に係る注目点の情報データから、クラス毎に、上記係数種データを得るための正規方程式を生成する正規方程式生成手段と、
    上記正規方程式を解いて上記クラス毎に上記係数種データを得る係数種データ演算手段と
    を備えることを特徴とする係数種データ生成装置。
22. 複数の情報データからなる第１の情報信号を複数の情報データからなる第２の情報信号に変換する際に使用される推定式の係数データを生成するための生成式の係数データである係数種データを生成する装置であって、
    上記第１の情報信号に対応する入力信号を得る信号処理手段と、
    上記生成式に含まれるパラメータに対応し、上記入力信号によって得られる出力の質を決めるパラメータの値を調整するパラメータ調整手段と、
    上記入力信号から、上記教師信号に係る注目点の周辺に位置する複数の第１の情報データを選択する第１のデータ選択手段と、
    上記第１のデータ選択手段で選択された上記複数の第１の情報データに基づいて、上記注目点が属するクラスを検出するクラス検出手段と、
    上記入力信号から、上記教師信号に係る注目点の周辺に位置する複数の第２の情報データを選択する第２のデータ選択手段と、
    上記クラス検出手段で検出されたクラス、上記第２のデータ選択手段で選択された上記複数の第２の情報データおよび上記教師信号に係る注目点の情報データから、上記クラス検出手段で検出されるクラスおよび上記パラメータ調整手段で調整されるパラメータの値の組み合わせ毎に上記推定式の係数データを得るための第１の正規方程式を生成する第１の正規方程式生成手段と、
    上記第１の正規方程式を解いて、上記組み合わせ毎に上記推定式の係数データを得る係数データ演算手段と、
    上記係数データ演算手段で得られた上記組み合わせ毎の係数データから、クラス毎に、上記係数種データを得るための第２の正規方程式を生成する第２の正規方程式生成手段と、
    上記第２の正規方程式を解いて、上記クラス毎に上記係数種データを得る係数
    種データ演算手段と
    を備えることを特徴とする係数種データ生成装置。
23. 複数の情報データからなる第１の情報信号を複数の情報データからなる第２の情報信号に変換する際に使用される推定式の係数データを生成する、上記第２の情報信号に対応した教師信号に係る注目点が属するクラスに対応したパラメータを持つ生成式の係数データである係数種データを生成する装置であって、
    上記第１の情報信号に対応する入力信号を得る信号処理手段と、
    上記入力信号から、上記教師信号に係る注目点の周辺に位置する複数の第１の情報データを選択する第１のデータ選択手段と、
    上記第１のデータ選択手段で選択された上記複数の第１の情報データに基づいて、上記注目点が属するクラスを検出するクラス検出手段と、
    上記入力信号から、上記教師信号に係る注目点の周辺に位置する複数の第２の情報データを選択する第２のデータ選択手段と、
    上記クラス検出手段で検出されたクラス、上記第２のデータ選択手段で選択された上記複数の第２の情報データおよび上記教師信号に係る注目点の情報データから、上記係数種データを得るための正規方程式を生成する正規方程式生成手段と、
    上記正規方程式を解いて上記係数種データを得る係数種データ演算手段と
    を備えることを特徴とする係数種データ生成装置。
24. 複数の情報データからなる第１の情報信号を複数の情報データからなる第２の情報信号に変換する際に使用される推定式の係数データを生成する、上記第２の情報信号に対応した教師信号に係る注目点が属するクラスに対応したパラメータを持つ生成式の係数データである係数種データを生成する装置であって、
    上記第１の情報信号に対応する入力信号を得る信号処理手段と、
    上記入力信号から、上記教師信号に係る注目点の周辺に位置する複数の第１の情報データを選択する第１のデータ選択手段と、
    上記第１のデータ選択手段で選択された上記複数の第１の情報データに基づいて、上記注目点が属するクラスを検出するクラス検出手段と、
    上記入力信号から、上記教師信号に係る注目点の周辺に位置する複数の第２の情報データを選択する第２のデータ選択手段と、
    上記クラス検出手段で検出されたクラス、上記第２のデータ選択手段で選択された上記複数の第２の情報データおよび上記教師信号に係る注目点の情報データから、上記クラス検出手段で検出されるクラス毎に上記推定式の係数データを得るための第１の正規方程式を生成する第１の正規方程式生成手段と、
    上記第１の正規方程式を解いて、上記クラス毎に上記推定式の係数データを得る係数データ演算手段と、
    上記係数データ演算手段で得られた上記クラス毎の係数データから、上記係数種データを得るための第２の正規方程式を生成する第２の正規方程式生成手段と、
    上記第２の正規方程式を解いて、上記係数種データを得る係数種データ演算手段と
    を備えることを特徴とする係数種データ生成装置。

Images