JP5265358B2 - パラメトリックマルチチャネルオーディオ符号化とマトリックスサラウンドマルチチャネル符号化との間のギャップを埋めるための概念 - Google Patents

Description

本発明は、マルチチャネルオーディオ符号化および送信に関し、特に、マルチチャネルオーディオの効率的な符号化を可能にしながら、ステレオ装置およびフォーマットと完全に後方互換性のある形でマルチチャネルオーディオを符号化する技術に関する。

マルチチャネルオーディオ信号のパラメトリック符号化は、現在進行中の研究テーマである。一般に、マルチチャネルオーディオ信号を符号化するアプローチを２つに区分できる。国際標準化機構（ＩＳＯ）のサブグループであるエムペグ（ＭＰＥＧ）は、現在、ダウンミックス信号にわずかのヘルパー情報を加えることによって、ステレオさらにはモノラルのダウンミックス信号からマルチチャネルオーディオコンテントを再構成する技術の標準化作業を行っている。

並行して、元のマルチチャネルオーディオ信号の空間イメージを再構成するために、ダウンミックス信号に既に（間接的に）含まれる以外の一切の追加のサイド情報を必要としない、ステレオからマルチチャネルへのアップミックス方法が開発中である。

追加のサイド情報を用いない、ステレオ互換性のあるマルチチャネル送信の実用性のある既存の方法のほとんどは、Ｄｏｌｂｙ Ｐｒｏ Ｌｏｇｉｃ（Ｄｏｌｂｙ Ｐｒｏ Ｌｏｇｉｃ ＩＩ）およびＬｏｇｉｃ−７などのマトリックスサラウンド方法として特徴付けられ、これらは、「ドルビー（登録商標）サラウンドプロロジックＩＩデコーダ−動作の原理）（Ｄｏｌｂｙ Ｓｕｒｒｏｕｎｄ Ｐｒｏ Ｌｏｇｉｃ ＩＩ Ｄｅｃｏｒｄｅｒ − Ｐｒｉｎｃｉｐｌｅｓ ｏｆ Ｏｐｅｒａｔｉｏｎ）」、インターネット＜ＵＲＬ：ｈｔｔｐ：／／ｗｗｗ．ｄｏｌｂｙ．ｃｏｍ／ａｓｓｅｔｓ／ｐｄｆ／ｔｅｃｈ＿ｌｉｂｒａｒｙ／２０９＿Ｄｏｌｂｙ＿Ｓｕｒｒｏｕｎｄ＿Ｐｒｏ＿Ｌｏｇｉｃ＿ＩＩ＿Ｄｅｃｏｒｄｅｒ＿Ｐｒｉｎｃｉｐｌｅｓ＿ｏｆ＿Ｏｐｅｒａｔｉｏｎ．ｐｄｆ＞、およびＤ．グリージンガー（Ｇｒｉｅｓｉｇｅｒ）の「両耳聴取者のためのマルチチャネルサラウンドデコーダ（Ｍｕｌｔｉｃｈａｎｎｅｌ Ｍａｔｒｉｘ Ｓｕｒｒｏｕｎｄ Ｄｅｃｏｄｅｒｓ ｆｏｒ Ｔｗｏ−Ｅａｒｅｄ Ｌｉｓｔｅｎｅｒｓ）」、第１０１回ＡＥＳコンベンション、米国、ロサンジェルス、１９９６年、プレプリント４４０２に、さらに詳しく記載されている。これらの方法の共通の原理は、エンコーダが、ステレオダウンミックス信号を形成するために、前および中央チャネルと一緒にミキシングする前に、サラウンドチャネルに位相シフトを適用するという、マルチチャネルまたはステレオダウンミキシングの専用の方法を用いることである。このダウンミックス信号（Ｌｔ、Ｒｔ）の生成は、次式

で表される。

左ダウンミックス信号（Ｌｔ）は、左前信号（Ｌｆ）、ファクタｑを乗じた中央信号（Ｃ）、９０度位相回転され（ｊ）かつファクタａでスケールされた左サラウンド信号（Ｌｓ）、および同様に９０度位相回転されかつファクタｂでスケールされた右サラウンド信号（Ｒｓ）で構成される。右ダウンミックス信号（Ｒｔ）も、同様に生成される。典型的なダウンミックスファクタは、ｑおよびａについては０．７０７であり、さらにｂについては０．４０８である。右ダウンミックス信号（Ｒｔ）のサラウンドチャネルの符号と左ダウンミックス信号（Ｌｔ）のサラウンドチャネルの符号とが異なっている理由は、サラウンドチャネルをダウンミックスペア（Ｌｔ、Ｒｔ）に逆位相でミックスすると都合がよいからである。この特性は、デコーダが、ダウンミックス信号ペアから前チャネルと後チャネルとを区分けする助けになる。このため、ダウンミックスマトリックスは、逆マトリックス演算を適用することによってデコーダ内でステレオダウンミックスから出力されるマルチチャネル出力信号の部分的な再構成を可能にする。しかしながら、再生成されたマルチチャネル信号が元のエンコーダ入力信号にどれほど近似しているかは、マルチチャネルオーディオコンテントの特定の特性による。

サイド情報とも呼ばれるヘルパー情報を付加する符号化方法の例に、ＭＰＥＧサラウンドオーディオ符号化がある。このパラメトリックマルチチャネルオーディオ符号化の効率的な方法については、例えば、Ｊ．ヘレ（Ｈｅｒｒｅ）、Ｈ．パーンハーゲン（Ｐｕｒｎｈａｇｅｎ）、Ｊ．ブリーバート（Ｂｒｅｅｂａａｒｔ）、Ｃ．ファラー（Ｆａｌｌｅｒ）、Ｓ．ディシュ（Ｄｉｓｃｈ）、Ｋ．ケアリング（Ｋｊｏｅｒｌｉｎｇ）、Ｅ．シュイージャー（Ｓｃｈｕｉｊｅｒｓ）、Ｊ．ヒルペルト（Ｈｉｌｐｅｒｔ）、Ｆ．マイバーグ（Ｍｙｂｕｒｇ）の「ＭＰＥＧ空間オーディオ符号化に対する基準モデルアーキテクチャ（Ｔｈｅ Ｒｅｆｅｒｅｎｃｅ Ｍｏｄｅｌ Ａｒｃｈｉｔｅｃｔｕｒｅ ｆｏｒ ＭＰＥＧ Ｓｐａｔｉａｌ Ａｕｄｉｏ Ｃｏｄｉｎｇ）」、第１１８回ＡＥＳコンベンション、スペイン、バルセロナ、２００５年、および「空間オーディオ符号化（ＳＡＣ）についての作業草案本文（Ｔｅｘｔ ｏｆ Ｗｏｒｋｉｎｇ Ｄｒａｆｔ ｆｏｒ Ｓｐａｔｉａｌ Ａｕｄｉｏ Ｃｏｄｉｎｇ（ＳＡＣ））」、ＩＳＯ／ＩＥＣ ＪＴＣ１／ＳＣ２９／ＷＧ１１（ＭＰＥＧ）、文書Ｎ７１３６、韓国、釜山、２００５年に、記載されている。

空間オーディオ符号化に用いられるエンコーダの概略図が図６に示される。このエンコーダは、直交ミラーフィルタ（ＱＭＦ）１２によって、入力信号１０（入力１、・・・入力Ｎ）を別々の時間周波数タイルに分割する。得られる周波数タイル（バンド）のグループは、「パラメータバンド」といわれる。あらゆるパラメータバンドに対して、例えば、チャネルのペア間のレベル差（ＣＬＤ）、チャネルのペア間の相互相関（ＩＣＣ）または信号包絡線の情報（ＣＰＣ）などの空間イメージの特性を表現する多数の空間パラメータ１４が、パラメータ推定器１６によって決定される。これらのパラメータは、続いて量子化され、一緒に空間データのビットストリームにまとめられる。動作モードに応じて、このビットストリームは、良品質のマルチチャネルオーディオに対する数ｋビット／秒から始まり、ほぼ透明な品質の数十ｋビット／秒までの幅広い範囲のビットレートをカバーする。

パラメータの抽出に加えて、エンコーダは、マルチチャネル入力信号からモノラルまたはステレオダウンミックスを生成する。さらに、ステレオダウンミックスの場合、ユーザは、従来（ＩＴＵスタイル）のステレオダウンミックスまたはマトリックスサラウンドシステムと互換性のあるダウンミックスを選択できる。最後に、ステレオダウンミックスは、ＱＭＦ合成バンク１８によって時間ドメインに変換される。得られたダウンミックスは、空間パラメータまたは空間パラメータビットストリーム１４とともに、デコーダに送信できる。望ましくは、ダウンミックスは、（従来のモノラルまたはステレオのコアコーダを用いて）送信前に符号化され、さらに、コアコーダのビットストリームと空間パラメータのビットストリームとは、単一の出力ビットストリームを形成するために組み合わされ（多重化され）てもよい。

図７に描かれたデコーダは、原理的にエンコーダとは逆の処理を実行する。入力ストリームは、コアコーダのビットストリームとパラメータのビットストリームとに分割される。これは、図７に示されていない。次に、復号化されたダウンミックス２０は、エンコーダで適用されるのと同一のパラメータバンドを導出するためにＱＭＦ分析バンク２２によって処理される。空間合成ステージ２４は、制御データ２６（すなわち送信された空間パラメータ）によって、マルチチャネル信号を再構成する。最後に、ＱＭＦドメイン信号は、最終的なマルチチャネル出力信号２８を導出するＱＭＦ合成バンク２７によって、時間ドメインに変換される。

図８は、図６の従来技術のエンコーダおよび図７の従来技術のデコーダ内で実行されるＱＭＦ分析の簡単な例を示す。時間ドメインでサンプルされかつ４つのサンプル値を有するオーディオサンプル３０が、フィルタバンク３２に入力される。フィルタバンク３２は、各々が４つのサンプル値を有する３つの出力サンプル３４ａ、３４ｂおよび３４ｃを導出する。理想的な場合として、フィルタバンク３２は、出力信号中のサンプルが、基礎をなすオーディオ信号３０の離散周波数範囲に関する情報だけを含むように、出力サンプル３４ａ〜３４ｃを導出する。図８に示される場合では、サンプル３４ａは、ｆ０からｆ１の範囲の周波数間隔に関する情報を有し、サンプル３４ｂは、周波数間隔［ｆ１、ｆ２］の情報を有し、サンプル３４ｃは、周波数間隔［ｆ２、ｆ３］の情報を有する。図８の周波数間隔は、オーバーラップしていないが、もっと一般的な場合では、フィルタバンクから出力される出力サンプルの周波数間隔は、周波数オーバーラップを有することが極めて多い。

上述のように、従来技術のエンコーダは、２チャネルダウンミックスが求められる場合、ＩＴＵスタイルのダウンミックスまたはマトリックスサラウンドに互換性のあるダウンミックスを送る。（例えば、式１で与えられるマトリックスアプローチを用いる）マトリックスサラウンドに互換性のあるダウンミックスの場合、１つの可能性としては、エンコーダがマトリックスサラウンドに互換性のあるダウンミックスを直接生成することである。

図９は、標準的なステレオダウンミックス３２を処理するダウンミックス後処理ユニット３０を用いてマトリックスサラウンドに互換性のあるダウンミックスを生成する別のアプローチを示す。マトリックスサラウンドプロセッサ３０（ＭＴＸエンコーダ）は、標準的なステレオダウンミックス３２を、それがパラメータ抽出ステージ１６で抽出される空間パラメータ１４によって導かれるマトリックスサラウンドに互換性のあるように修正する。送信のために、マトリックスサラウンドに互換性のあるダウンミックス３４は、ＱＭＦ合成バンク１８を用いてＱＭＳ合成によって時間ドメインに変換される。

標準的なステレオダウンミックスを後処理することによってマトリックスサラウンドに互換性のある信号を導出する方法には、空間パラメータが利用可能であれば、そのマトリックスサラウンドに互換性のある処理がデコーダ側で完全に逆処理できるという利点がある。

両方のアプローチともマルチチャネル信号を送信するために適してはいるが、これらの最先端のシステムには特有の欠点がある。マトリックスサラウンド方法は、非常に効率的であるが、（というのは、パラメータを追加する必要ないので、）非常に限られたマルチチャネル再構成品質という代償を払った上でのことである。

他方では、パラメトリックマルチチャネルアプローチは、サイド情報のために高いビットレートを必要とし、制限がパラメトリック表現に対する最大許容ビットレートに設定される場合に、これが問題になる。符号化されたパラメータが相当に高いレベルのビットレートを必要とする場合、そのようなビットレート限度を可能にするただ１つの方法は、チャネルの圧縮率を上げることによって、符号化されたダウンミックスチャネルの品質を低下することである。このため、オーディオ品質において全体的な損失となり、それは受け入れ難いほど高くなることがある。言い換えれば、パラメトリックマルチチャネルアプローチでは、多くの場合、空間パラメータレイヤに必要とされる最少ビットレートに厳しい限度があり、それは場合によって受け入れ難いほど高いことがある。

マトリックスサラウンド方法と空間オーディオ方法との間での原理的な後方互換性は、図９に示されるように、従来技術のエンコーダによって達成できるが、このアプローチでは、マトリックスベースの復号化しか必要とされない場合でも追加のビットを節減できることはない。その場合でも、空間パラメータのフルセットは、送信されなければならなく、送信バンド幅の浪費である。

特定のアプリケーションシナリオの場合、パラメトリック方法を適用する場合に用いられなければならないビットレートが高くなりすぎることがあり、サイド情報を送信しない方法によって送られるオーディオ品質が不十分となる可能性がある。

米国特許出願公開第２００５／１５７８８３号は、入力信号およびパラメトリックサイド情報を用いてマルチチャネルオーディオを構成するための装置を示し、その入力信号は、元のマルチチャネル信号から導出される第１の入力チャネルおよび第２の入力チャネルを含み、そのパラメトリックサイド情報は、マルチチャネルの元の信号のチャネルの間の相互関係を表現している。

米国特許出願公開第２００５／１５７８８３号 「ドルビー（登録商標）サラウンドプロロジックＩＩデコーダ−動作の原理）（Ｄｏｌｂｙ Ｓｕｒｒｏｕｎｄ Ｐｒｏ Ｌｏｇｉｃ ＩＩ Ｄｅｃｏｒｄｅｒ−Ｐｒｉｎｃｉｐｌｅｓ ｏｆ Ｏｐｅｒａｔｉｏｎ）」、インターネット＜ＵＲＬ：ｈｔｔｐ：／／ｗｗｗ．ｄｏｌｂｙ．ｃｏｍ／ａｓｓｅｔｓ／ｐｄｆ／ｔｅｃｈ＿ｌｉｂｒａｒｙ／２０９＿Ｄｏｌｂｙ＿Ｓｕｒｒｏｕｎｄ＿Ｐｒｏ＿Ｌｏｇｉｃ＿ＩＩ＿Ｄｅｃｏｒｄｅｒ＿Ｐｒｉｎｃｉｐｌｅｓ＿ｏｆ＿Ｏｐｅｒａｔｉｏｎ．ｐｄｆ＞ Ｄ．グリージンガー（Ｇｒｉｅｓｉｇｅｒ）の「両耳聴取者のためのマルチチャネルサラウンドデコーダ（Ｍｕｌｔｉｃｈａｎｎｅｌ Ｍａｔｒｉｘ Ｓｕｒｒｏｕｎｄ Ｄｅｃｏｄｅｒｓ ｆｏｒ Ｔｗｏ−Ｅａｒｅｄ Ｌｉｓｔｅｎｅｒｓ）」、第１０１回ＡＥＳコンベンション、米国、ロサンジェルス、１９９６年、プレプリント４４０２ Ｊ．ヘレ（Ｈｅｒｒｅ）、Ｈ．パーンハーゲン（Ｐｕｒｎｈａｇｅｎ）、Ｊ．ブリーバート（Ｂｒｅｅｂａａｒｔ）、Ｃ．ファラー（Ｆａｌｌｅｒ）、Ｓ．ディシュ（Ｄｉｓｃｈ）、Ｋ．ケアリング（Ｋｊｏｅｒｌｉｎｇ）、Ｅ．シュイージャー（Ｓｃｈｕｉｊｅｒｓ）、Ｊ．ヒルペルト（Ｈｉｌｐｅｒｔ）、Ｆ．マイバーグ（Ｍｙｂｕｒｇ）の「ＭＰＥＧ空間オーディオ符号化に対する基準モデルアーキテクチャ（Ｔｈｅ Ｒｅｆｅｒｅｎｃｅ Ｍｏｄｅｌ Ａｒｃｈｉｔｅｃｔｕｒｅ ｆｏｒ ＭＰＥＧ Ｓｐａｔｉａｌ Ａｕｄｉｏ Ｃｏｄｉｎｇ）」、第１１８回ＡＥＳコンベンション、スペイン、バルセロナ、２００５年 「空間オーディオ符号化（ＳＡＣ）についての作業草案本文（Ｔｅｘｔ ｏｆ Ｗｏｒｋｉｎｇ Ｄｒａｆｔ ｆｏｒ Ｓｐａｔｉａｌ Ａｕｄｉｏ Ｃｏｄｉｎｇ（ＳＡＣ））」、ＩＳＯ／ＩＥＣ ＪＴＣ１／ＳＣ２９／ＷＧ１１（ＭＰＥＧ）、文書Ｎ７１３６、韓国、釜山、２００５年

本発明の目的は、マトリックスベースの符号化解決策に後方互換性がある、マルチチャネルオーディオ信号をより効率的に符号化するための概念を提供することである。

本発明の第１の態様によれば、この目的は、オーディオ信号を処理しさらにマルチチャネル信号の第１の部分を表現する第１のパラメトリックデータを処理するためのマルチチャネルオーディオデコーダによって達成され、マルチチャネル信号の第２の部分に対して、パラメトリックデータが処理されないかまたは第２のパラメトリックデータが処理され、第２のパラメトリックデータは、マルチチャネル信号の同一の部分を表現する場合に、第１のパラメトリックデータよりも少ない情報ユニットを必要とし、マルチチャネルオーディオデコーダは、オーディオ信号から中間信号を導出するためのプロセッサを含み、プロセッサは、中間信号の第１の部分を導出するための第１の導出ルールを用い、中間信号の第１の部分はマルチチャネルオーディオ信号の第１の部分に対応し、第１の導出ルールは第１のパラメトリックデータにより決まり、さらに中間信号の第２の部分を導出するための第２の導出ルールを用い、第２の導出ルールはパラメトリックデータを用いないかまたは第２のパラメトリックデータを用いる。

本発明の第２の態様によれば、この目的は、マルチチャネルオーディオ信号の空間特性を表現するパラメトリック表現を生成するためのマルチチャネルエンコーダによって達成され、マルチチャネルエンコーダは、空間パラメータを生成するためのパラメータ生成器と、パラメトリック表現を生成するための出力インタフェースとを含み、パラメータ生成器または出力インタフェースは、パラメトリック表現がマルチチャネル信号の第１の部分に対する第１のパラメトリックデータを含むように、パラメトリック表現を生成するように適応され、さらに、マルチチャネル信号の第２の部分に対して、パラメトリック表現にパラメトリックデータが含まれないかまたは第２のパラメトリックデータが含まれ、第２のパラメトリックデータは、マルチチャネル信号の同一の部分を表現する場合に、第１のパラメトリックデータよりも少ない情報ユニットを必要とする。

本発明の第３の態様によれば、この目的は、オーディオ信号を処理しさらにマルチチャネル信号の第１の部分を表現する第１のパラメトリックデータを処理するための方法によって達成され、マルチチャネル信号の第２の部分に対して、パラメトリックデータが処理されないかまたは第２のパラメトリックデータが処理され、第２のパラメトリックデータは、マルチチャネル信号の同一の部分を表現する場合に、第１のパラメトリックデータよりも少ない情報ユニットを必要とし、その方法は、中間信号の第１の部分を導出するための第１のパラメトリックデータにより決まる第１の導出ルールを用いてダウンミックス信号から中間信号を導出する工程であって、中間信号の第１の部分はマルチチャネルオーディオ信号の第１の部分に対応する、工程と、第２の導出ルールを用いて中間信号の第２の部分を導出する工程であって、第２の導出ルールは第２のパラメトリックデータを用いるかまたはパラメトリックデータを用いない、工程とを含む。

本発明の第４の態様によれば、この目的は、マルチチャネルオーディオ信号の空間特性を表現するパラメトリック表現を生成するための方法によって達成され、その方法は、空間パラメータを生成する工程と、パラメトリック表現がマルチチャネル信号の第１の部分に対する第１のパラメトリックデータを含むように、パラメトリック表現を生成する工程であって、マルチチャネル信号の第２の部分に対して、パラメトリック表現にパラメトリックデータが含まれないかまたは第２のパラメトリックデータが含まれ、第２のパラメトリックデータは、マルチチャネル信号の同一の部分を表現する場合に、第１のパラメトリックデータよりも少ない情報ユニットを必要とする、工程とを含む。

本発明の第５の態様によれば、この目的は、マルチチャネルオーディオ信号の空間特性を表現するパラメトリック表現によって達成され、そのパラメトリック表現はマルチチャネル信号の第１の部分に対する第１のパラメトリックデータを含み、さらに、そのパラメトリック表現はパラメトリックデータを含まないかまたはマルチチャネル信号の第２の部分に対して第２のパラメトリックデータを含み、第２のパラメトリックデータは、マルチチャネル信号の同一の部分に対して、第１のパラメトリックデータよりも少ない情報ユニットを必要とする。

本発明の第６の態様によれば、この目的は、コンピュータ上で実行される場合に、オーディオ信号を処理しさらにマルチチャネル信号の第１の部分を表現する第１のパラメトリックデータを処理するための方法を実行するためのプログラムコードを有するコンピュータプログラムによって達成され、マルチチャネル信号の第２の部分に対して、パラメトリックデータが処理されないかまたは第２のパラメトリックデータが処理され、第２のパラメトリックデータは、マルチチャネル信号の同一の部分を表現する場合に、第１のパラメトリックデータよりも少ない情報ユニットを必要とし、その方法は、中間信号の第１の部分を導出するための第１のパラメトリックデータにより決まる第１の導出ルールを用いてダウンミックス信号から中間信号を導出する工程であって、中間信号の第１の部分はマルチチャネルオーディオ信号の第１の部分に対応する、工程と、第２の導出ルールを用いて中間信号の第２の部分を導出する工程であって、第２の導出ルールは第２のパラメトリックデータを用いるかまたはパラメトリックデータを用いない、工程とを含む。

本発明の第７の態様によれは、この目的は、コンピュータ上で実行される場合に、マルチチャネルオーディオ信号の空間特性を表現するパラメトリック表現を生成するための方法を実行するためのプログラムコードを有するコンピュータプログラムによって達成され、その方法は、空間パラメータを生成する工程と、パラメトリック表現がマルチチャネル信号の第１の部分に対する第１のパラメトリックデータを含むように、パラメトリック表現を生成する工程であって、マルチチャネル信号の第２の部分に対して、パラメトリック表現にパラメトリックデータが含まれないかまたは第２のパラメトリックデータが含まれ、第２のパラメトリックデータは、マルチチャネル信号の同一の部分を表現する場合に、第１のパラメトリックデータよりも少ない情報ユニットを必要とする、工程とを含む。

本発明の第８の態様によれば、この目的は、マルチチャネルオーディオ信号の空間特性を表現する空間パラメータを用いてマルチチャネルオーディオ信号のパラメトリック表現を生成するためのトランスコーダによって達成され、パラメトリック表現がマルチチャネル信号の第１の部分に対して空間パラメータから導出される第１のパラメトリックデータを含むように、パラメトリック表現を生成するパラメータ生成器であって、マルチチャネル信号の第２の部分に対して、パラメトリック表現にパラメトリックデータが含まれないかまたは第２のパラメトリックデータが含まれ、第２のパラメトリックデータは、マルチチャネル信号の同一の部分を表現する場合に、第１のパラメトリックデータよりも少ない情報ユニットを必要とする、パラメータ生成器を含む。

本発明は、第１の導出ルールがマルチチャネル信号の第１の部分を表現するパラメトリック表現の第１のパラメトリックデータを導出するために用いられ、さらに、マルチチャネル信号の第２の部分に対して、パラメトリック表現に第２のパラメトリックデータが含まれるかまたはパラメトリックデータが含まれなく、第２のパラメトリックデータは、マルチチャネル信号の同一の部分を表現する場合に、第１のパラメトリックデータよりも少ない情報ユニットを必要とするようにすれば、マルチチャネルオーディオ信号がパラメトリック表現によって効率的に表現できるという発見に基づいている。

したがって、マルチチャネル信号の第１の部分は、第１のパラメータによって表現され、より高品質のマルチチャネル信号の再構成が可能になり、さらに、第２の部分は、第２のパラメータで表現され、やや低い品質の再構成が可能となる。第１のパラメトリックデータによって費やされるビットレートは、両方のパラメトリックデータがマルチチャネル信号の同一の部分を表現する場合、結果として第２のパラメトリックデータによって費やされるビットレートよりも高くなる。言い換えれば、第１のパラメータは、信号部分あたり、第２のパラメータよりも高いビットレートを必要とする。

本発明の目的は、サイド情報によって費やされるビットレートを０から始めてパラメトリック方法のビットレートまで上げながら、アップミックス信号のサウンドを徐々に改善することによって、両方の従来技術界の間のギャップを埋めることである。すなわち、本発明は、全面的なパラメトリック方法とマトリックスサラウンド方法との間でのビットレートと知覚品質とにおけるギャップを埋めることを目指している。さらに具体的には、本発明は、マトリックスサラウンド（サイド情報なし、低品質オーディオ）と全面的なパラメトリック再構成（フルサイド情報レートが必要、良品質）との間のどこかの「作動点」をフレキシブルに選択する方法を提供する。この作動点は、動的に（すなわち時間とともに変化するように）、そして、個別のアプリケーションによって決められるように、許容されるサイド情報レートに応じて、選択できる。

空間オーディオパラメータによって表現される、マルチチャネルオーディオ信号の部分である、マルチチャネルオーディオの第１の部分のサイズを動的に選択することによって、必要なビットレートは、広範囲に変化できる。空間オーディオパラメータによるマルチチャネル信号の大部分の表現は、良好な知覚品質の利点で比較的高いビットレートを費やす。マルチチャネルオーディオ信号の第２の部分に対して、パラメータ導出ルールが、より低いビットレートを費やすパラメータで済むように選択されるので、全ビットレートは、マルチチャネル信号の第２の部分のサイズを増加することによって低減できる。本発明の好適な実施の形態において、パラメトリックデータはマルチチャネル信号の第２の部分に対して全く送信されず、当然これは最大のビット節約となる。したがって、第２の部分のサイズに対して第１の部分のサイズを動的にシフトすることによって、ビットレート（または知覚品質）は、ニーズに動的に調整できる。

本発明の好適な実施の形態において、ダウンミックス信号は、マトリックスに互換性のある方法で導出される。その結果、マルチチャネルオーディオ信号の第１の部分は、空間オーディオパラメータを用いて高い知覚品質で再生でき、さらに、マルチチャネル信号の第２の部分は、マトリックスベースの解決策を用いて再生できる。これにより、高品質を必要とする信号の部分に対して高品質の再生が可能になる。同時に、再生された信号の品質がそれほど重要でない信号部分に対しては、マトリックスベースの再生を利用することによって、全体的なビットレートが削減される。

本発明のさらなる好適な実施の形態において、本発明の概念が、デコーダ側で、受信されたダウンミックス信号のＱＭＦ表現に適用される。アップミキシング処理は、主として、
相関除去前処理マトリックスの適用による入力信号（ＱＭＦドメインで受信されるダウンミックス信号）の前処理ステップ、
前処理された信号の部分の相関除去のステップ、および
このようにして導出された信号（前処理された信号および相関除去された信号）を混合マトリックス内でミキシングするステップであって、そのミキシングの出力がアップミックス信号のチャネルとなるステップ
の３つのステップに再分割できる。

相関除去前処理マトリックスおよび混合マトリックスの双方は、一方に「タイムスロットの数」の次元を、他方に「パラメータバンドの数」の次元を有する２次元マトリックスである。復号化処理中に、これらのマトリックスのエレメントは、空間ビットストリームから読み取られるパラメータから、すなわち第１のパラメータデータによって導出される値で満たされる。第１のパラメトリックデータだけがマルチチャネル信号の第１の部分に対して受信される場合、マルチチャネル信号の再構成の部分だけが、送信される第１のパラメトリックデータを用いて導出できる。本発明によれば、マルチチャネル信号の再構成の第２の部分を導出するためのマトリックスエレメントは、マトリックスに互換性のある符号化スキームを用いて導出される。したがって、これらのマトリックスエレメントは、ダウンミックス信号から得られる知識だけに基づいて導出されるか、または所定の値と置き換えられるかとすることができる。

好適な実施の形態において、本発明によるマルチチャネルオーディオデコーダは、送信された第１のパラメトリックデータの量によって、マトリックスのどの部分をまたはマルチチャネルオーディオ信号のどの部分が、空間パラメータに依存するルールによって処理されるか、さらに、どの部分がマトリックスベースの解決策によって処理されるかを認識する。

本発明の別の実施の形態において、オーディオエンコーダは、マルチチャネル信号のどの部分がマトリックスベースの解決策によってまたは空間オーディオに互換性のあるアプローチによって処理されるかを表示するウィンドウ情報を生成する。そのウィンドウ情報は、マルチチャネル信号のパラメトリック表現に含まれる。

したがって、本発明のデコーダは、ウィンドウ情報によって示されるマルチチャネルオーディオ信号の各部分に適切なアップミキシングルールを適用するために、生成されるウィンドウ情報を受信し、さらに、処理することができる。

本発明の好適な実施の形態において、本発明の概念は、信号処理中のＱＭＦドメインに、すなわち、信号が複数の表現によって表されかつ各表現が特定の周波数バンドに関する情報を有するドメインに適用される。

本発明のさらなる好適な実施の形態において、サイド情報が要らない方法（マトリックスベースのアプローチ）は、より高い周波数部分だけに適用され、低周波部分の適切な再生のために（明示された）パラメータ情報（すなわち、第１の符号化および復号化ルール）が適用される。これには、人間の聴力が、高い周波数に対するよりも低い周波数に対して、２つの類似した信号の間の小さな偏差（例えば位相ずれ）に気付きやすいので、利点がある。

本発明の大きな利点は、空間オーディオコーダの符号化および復号化ルールが適切に選択される場合、追加のハードまたはソフトウエアを持ち込まなくても、空間オーディオ符号化および復号化スキームとマトリックスベースの解決策との後方互換性が達成されることである。

さらに、他の従来技術の試みのように、追加のデータを送る必要なく、互換性が実現される。さらに、本発明による符号化スキームは、ビットレートまたは品質のシームレスな調整、すなわち、所定の信号の全面的なマトリックスベースの符号化と全面的な空間オーディオ符号化との間でのスムースな移行を可能にするように、非常にフレキシブルである。すなわち、適用される符号化スキームは、必要なビットレートまたは望まれる品質に関して、実際のニーズに応じて調整できる。

本発明の好適な実施の形態が添付図面を参照して以下に説明され、これらの図面としては：
図１は、本発明のエンコーダを示し、
図２は、本発明の概念によって生成されるパラメータビットストリームの例を示し、
図２ａは、本発明のトランスコーダを示し、
図３は、本発明のデコーダを示し、
図４は、本発明の概念を実施する空間オーディオデコーダの例を示し、
図５は、デコーダ側の別の符号化スキームの使用を図解し、
図６は、従来技術のエンコーダを示し、
図７は、従来技術のデコーダを示し、
図８は、フィルタバンクのブロック図を示し、
図９は、従来技術のエンコーダのさらなる例を示す。

図１は、本発明のマルチチャネルエンコーダを示す。マルチチャネルエンコーダ１００は、パラメータ生成器１０２および出力インタフェース１０４を有する。

マルチチャネルオーディオ信号１０６がエンコーダ１００に入力され、マルチチャネル信号１０６の第１の部分１０８および第２の部分１１０が処理される。パラメータ生成器１０２は、第１の部分１０８および第２の部分１１０を受信し、マルチチャネル信号１０６の空間特性を表現する空間パラメータを導出する。

空間パラメータは出力インタフェース１０４に送信され、出力インタフェースは、パラメトリック表現１１２がマルチチャネル信号の第１の部分１０８に対する第１のパラメトリックデータを含むように、マルチチャネル信号１０６のパラメトリック表現１１２を導出し、マルチチャネル信号１０６の第２の部分１１０に対して、パラメトリック表現１１２には、第１のパラメトリックデータよりも少ない情報を必要とする第２のパラメトリックデータが含まれるかまたはパラメータが含まれない。

同一の目的を達成するために、マルチチャネルエンコーダ１００のいくつかの変形が可能である。例えば、パラメータ生成器１０２は、第１の部分１０８と第２の部分１１０とに対する２つの異なるパラメータ導出ルールを適用でき、異なるパラメータセットを生成し、次に、これらは出力インタフェース１０４に送信され、インタフェースは、これらの異なったパラメータセットをパラメトリック表現１１２に組み合わせる。特定の好適な場合では、第２の部分１１０に対してパラメータが、パラメトリック表現に含まれず（したがって、パラメータ生成器１０２によって導出されず）、これは、デコーダ側において、デコーダがある発見的なルールによって必要な復号化パラメータを導出するからである。

別の可能性では、パラメータ生成器１０２は、第１の部分１０８と同様に第２の部分１１０に対しても空間オーディオパラメータのフルセットを導出する。このため、出力インタフェース１０４は、第２のパラメトリックデータが第１のパラメトリックデータよりも少ないビットを必要とするように、空間パラメータを処理しなければならない。

さらに、出力インタフェース１０４は、符号化の過程でマルチチャネル信号１０６がどのように第１の部分１０８と第２の部分１１０とに分割されたのかを、デコーダに信号伝達すべき追加のウィンドウ信号をパラメトリック表現１１２に加えることができる。マルチチャネルエンコーダ１００のこの好適な実施の形態の変形において、マルチチャネルエンコーダ１００は、マルチチャネル信号１０６のどの部分が第１の部分１０８として用いられ、さらに、どの部分が第２の部分１１０として用いられるかを、品質基準に基づいて決定するための部分決定器をさらに有することができる。

その品質基準は、パラメトリック表現１１２の結果として得られる全ビットレートに関してまたは品質面に関して、パラメトリック表現１１２に基づくマルチチャネル信号１０６の再生の知覚品質を考慮に入れて導出できる。

主な利点は、このようにパラメトリック表現によって費やされるビットレートが時間とともに変化でき、品質基準が符号化の過程のいつでも満たされていることを確実にしながら、従来技術の方法と比べて必要なビットレートの全体的な削減を可能にすることができることである。

図２は、本発明のエンコーダによって生成されるパラメトリック表現１１２の例を示す。

上述のように、オーディオ信号の処理は、ブロック単位で行われ、すなわち、時間ドメインにおけるマルチチャネル信号の多数の連続するサンプル、いわゆるフレームが、１つのステップで処理される。図２は、パラメータビットストリーム、すなわち２つの連続するフレームに対するパラメトリック表現を示す。パラメータビットストリームは、高品質フレーム１２０の表現と低品質フレーム１２２の表現とを有する。高品質フレーム１２０の符号化においては、パラメトリックデータによって表現される第１の部分１０８が、第２の部分に比べて大きくなければならないとの決定がされ、これは、例えば、符号化されるオーディオシーンがかなり複雑な場合に行われる。さらに、図２のパラメータビットストリームは、本発明のエンコーダの好適な実施の形態がマルチチャネル信号１０６の第２の部分１１０に対していかなるパラメトリックデータも導出しないように用いられるとの前提の下に生成される。図２から分かるように、２８個の空間パラメータＩＣＣおよびＩＣＬＤが、高品質フレーム１２０を表現するために、パラメトリック表現に含まれる。例として、２８個の空間パラメータは、マルチチャネル信号のＱＭＦ表現の低い周波数バンドを表現する。

低品質フレーム１２２は、所望の知覚品質にために十分であることが分かったので、ＩＣＣおよびＩＣＬＤパラメータを有する２１個の空間パラメータセットしか含まない。

図２ａは、本発明のトランスコーダ１５０を示す。本発明のトランスコーダは、入力として、マルチチャネルオーディオ信号の第１のフレーム１５４および第２のフレーム１５６を表現する空間パラメータのフルセットを有する入力ビットストリーム１５２を受信する。

トランスコーダ１５０は、マルチチャネルオーディオ信号の空間特性を表現するパラメトリック表現を有するビットストリーム１５８を生成する。図２ａに示される例では、トランスコーダ１５０は、第１のフレームに対してパラメータ１６０の数が僅かだけ少なくなるように、パラメトリック表現を導出する。入力パラメータ１５６に対応する第２のフレームを表現するパラメータ１６２の数は大きく低減され、これにより、得られるパラメトリック表現に対して必要なビットレートの量は大幅に削減される。したがって、本発明のトランスコーダ１５０は、送信過程ではより少ないビットレートをまたはコンピュータ読み取り可能な媒体に記憶する場合にはより小さな記憶スペースを必要とする、本発明のパラメトリック表現を導出するために、既に存在する空間パラメータのビットストリームを後処理するために用いることができる。ここで、空間パラメータを生成するために、もう一方の方向にトランスコードする、すなわち、パラメトリック表現を用いるトランスコーダを実施することも当然に可能であることに注意されたい。

本発明のトランスコーダ１５０は、例えば、所定のルールを用いてパラメータの量を削減したり、知覚品質が許容限度を超えて損なわれることなく可能なビットレートの低減量を分析するためにマルチチャネル信号をさらに受信したりするように、さまざまな異なった方法で実施することができる。

図３は、プロセッサ２０２を有する本発明のマルチチャネルオーディオデコーダ２００を示す。

プロセッサは、入力として、マルチチャネルオーディオ信号から導出されるダウンミックス信号２０４、マルチチャネル信号の第１の部分を表現する第１のパラメトリックデータ２０６、および、マルチチャネル信号の第２の部分に対しては第１のパラメトリックデータ２０６よりも少ないビットを必要とする任意の第２のパラメトリックデータ２０８を受信する。プロセッサ２０２は、中間信号の高品質部分２１２を導出するための第１の導出ルールを用いてダウンミックス信号２０４から中間信号２１０を導出し、中間信号２１２の高品質部分２１２は、マルチチャネルオーディオ信号の第１の部分に対応する。プロセッサ２０２は、中間信号２１０の第２の部分２１４に対して第２の導出ルールを用い、第２の導出ルールは、第２のパラメトリックデータを用いるかまたはパラメータデータを用いず、第１の導出ルールは、第１のパラメトリックデータ２０６により決まる。

プロセッサ２０２によって導出される中間信号２１０は、高品質部分２１２と第２の部分２１４との組み合わせで構成される。

マルチチャネルオーディオデコーダ２００は、例えば、第１のパラメトリックデータ２０６中に含まれる空間パラメータの数をカウントするおよび空間パラメトリックデータのカウントされた量と空間パラメトリックデータの基準量とを比較するなど、何らかの適切なルールを適用することによって、ダウンミックス信号２０４のどの部分が第１のパラメトリックデータ２０６で処理されるのかを、それ自体で導出することができる。あるいは、プロセッサ２０２には、エンコーダ側で導出されかつマルチチャネルオーディオ信号デコーダ２００にさらに送信される何らかの追加のウィンドウ情報によって、ダウンミックス信号２０４内の高品質部分２１２と第２の部分２１４との割合を信号伝達できる。

好適な実施の形態において、第２のパラメトリックデータ２０８は省略され、プロセッサ２０２は、ダウンミックス信号２０４に既に含まれる情報から第２の導出ルールを導出する。

図４は、本発明のマトリックス互換性の特徴を空間オーディオデコーダ中に組み合わせる本発明のさらなる実施の形態を示す。マルチチャネルオーディオデコーダ６００は、相関除去前処理器６０１、相関除去器６０２、および混合マトリックス６０３を含む。

マルチチャネルオーディオデコーダ６００はフレキシブルな装置であり、相関除去前処理器６０１に入力される入力信号６０５の構成に応じて異なった方法で作動することができる。一般に、相関除去前処理器６０１は中間信号６０７を導出し、中間信号は、相関除去器６０２の入力となり、さらに、中間信号は、相関除去器６０２によって計算される相関除去された信号と一緒に入力信号６０８を形成するために、部分的に変更されないまま送信される。入力信号６０８は、入力チャネル構成６０５に応じて、出力チャネル構成６１０ａまたは６１０ｂを導出する混合マトリックス６０３に入力される信号である。

１対５構成において、ダウンミックス信号および任意の残留信号が相関除去前処理器６０１に供給され、相関除去前処理器は相関除去器の入力として用いられる４つの中間信号（ｅ１〜ｅ４）を導出し、相関除去器は４つの相関除去された信号（ｄ１〜ｄ４）を導出し、これらは入力信号から導出される直接送信された信号ｍとともに入力パラメータ６０８を形成する。

なお、追加の残留信号が入力として供給される場合、一般にサブバンドドメインにおいて作動する相関除去器６０２は、相関除去された信号を導出する代わりに残留信号をそのまま転送するように作動できることに注意されたい。これは、特定の周波数バンドだけを選択して行うこともできる。

２対５構成において、入力信号６０５は、左チャネル、右チャネル、および任意に残留信号を含む。この構成において、相関除去前処理マトリックス６０１は、左、右および中央チャネルと、さらに２つの中間チャネル（ｅ１、ｅ２）とを導出する。このため、混合マトリックス６０３への入力信号は、左チャネル、右チャネル、中央チャネル、および２つの相関除去された信号（ｄ１およびｄ２）によって形成される。

さらなる変形において、相関解除前処理マトリックスは、追加の中間信号（ｅ５）を導出でき、これは相関除去器（Ｄ５）の入力として用いられ、それの出力は、信号（ｅ５）から導出される相関除去された信号（ｄ５）と相関除去された信号（ｄ１およびｄ２）との組み合わせとなる。この場合、追加の相関除去が中央チャネルと左および右チャネルとの間で保証できる。

本発明のオーディオデコーダ６００は、２対５構成において本発明の概念を実施する。送信されたパラメトリック表現は、相関除去前処理マトリックス６０１および混合マトリックス６０３において用いられる。本発明の概念は、図５にさらに詳細に示されるように、いろいろな方法で実施できる。

図５は、相関除去前処理マトリックス６０１として実施される相関除去前処理器および混合マトリックス６０３を原理的なスケッチで示し、マルチチャネルオーディオデコーダ６００の他のコンポーネントは省略される。

相関除去前処理およびミキシングを実行するために用いられるマトリックスは、タイムスロット、すなわち信号の個別の時間サンプルを表現する縦列と、異なるパラメータバンドを表現する横列、すなわちオーディオ信号の１つのパラメータバンドに関連付けられる各横列とを有する。

本発明の概念によれば、マトリックス６０１および６０３のマトリックスエレメントは、送信されたパラメトリックデータから部分的にだけ導出され、残りのマトリックスエレメントは、例えばダウンミックス信号の知識などに基づいて、デコータによって導出される。図５は、所定の周波数境界線６２２から下側では、相関除去前処理マトリックス６０１および混合マトリックス６０３のエレメントが、ビットストリームから読み取られるパラメータ６２０から、すなわちエンコーダから送信される情報に基づいて導出されるという１つの例を示す。周波数境界線６２２の上側では、マトリックスエレメントは、ダウンミックス信号からの知識だけに基づいてデコーダにおいて導出される。

境界周波数（または、一般的に、送信されたデータから導出されるマトリックスエレメントの量）は、特定のアプリケーションシナリオに対して満たさなければならない品質上および／またはビットレート上の制約に従って自由に適応できる。

本明細書に概説する新規の符号化方法に対しては、ＭＰＥＧの空間オーディオ符号化参照モデル０（ＭＰＥＧ Ｓｐａｔｉａｌ Ａｕｄｉｏ Ｃｏｄｉｎｇ Ｒｅｆｅｒｅｎｃｅ Ｍｏｄｅｌ ０）に概説されたものと同一構造を用いてサイド情報なしのアップミックス処理が実施できることが望ましい。本発明は、サイド情報なしのアップミックスの方法を表現することにあるといえるが、望ましくは、そのような概念とサイド情報支援のアップミックスとをシームレスで好都合に組み合わせる方法を提供する。

ＭＰＥＧの空間オーディオ符号化参照モデル０（ＭＰＥＧ Ｓｐａｔｉａｌ Ａｕｄｉｏ Ｃｏｄｉｎｇ Ｒｅｆｅｒｅｎｃｅ Ｍｏｄｅｌ ０）と違って、サイド情報なしのアップミックス処理において、マトリックスＭ１（６０１）およびＭ２（６０３）のエレメントは、望ましくは、ビットストリームで送信されるデータから導出されるのではなく、サイド情報の助けを受けない異なる手段によって、例えば、ダウンミックス信号から得られる知識だけに基づく発見的なルールを適用することによって導出される。

このように、ビットレートおよびオーディオ品質に関して、送信されたパラメータに基づくマトリックスの部分だけを得ること、および、残りの部分を満たすためにサイド情報なしの方法のルールを適用することによって、両方の技術の間で漸進的なスケーリングを実現することが可能である。概念的に言えば、このことは、マトリックスの部分に対しては空間パラメータを送信することに、他の部分いついてはデコーダでそれらを生成することに対応する。

マトリックスの部分が一方または他方の方法によって導出されるかの決定は、
・所定の水平境界線の下側のマトリックスの部分を１つの方法によって導出し、さらに、この境界線の上側を他の方法によって導出する、
・所定の垂直境界線の左側のマトリックスの部分を１つの方法によって導出し、さらに、この境界線の右側を他の方法によって導出する、
・両方のマトリックスのエレメントが１つの方法によって導出される両方のマトリックス内の任意の時間・周波数タイルを決定し、さらに、残りの時間・周波数タイルのエレメントを他の方法によって導出する、
というように、いろいろな多くの方法で行うことができる。
例えば、マルチチャネルオーディオデコーダは、中間信号に基づくマルチチャネル信号の再構成を計算するためのアップミキサをさらに含み、アップミキサは、マルチチャネル信号の第１の部分に対応するマルチチャネル信号の再構成の第１の部分を計算するための第１のアップミキシングルールを用い、第１のアップミキシングルールは第１の空間パラメトリックデータにより決まり、さらにマルチチャネル信号の再構成の第２の部分を計算するための第２のアップミキシングルールを用い、第２のアップミキシングルールは空間パラメトリックデータを用いないかまたは第２の空間パラメトリックデータを用いる。

上述のパラグラフにおいて、ある境界周波数までのマルチチャネル信号の全ての周波数部分を空間パラメータによって表現するが、マルチチャネル信号の残りの周波数部分は空間パラメータによって表現されないことが有利であることを詳述した。これには、高い周波数よりも低い周波数に対してより良好な知覚を有する人間の耳の特質が考慮に入れられている。もちろん、本発明は、第１の部分および第２の部分へのマルチチャネル信号のこの分割に決して限定されるものではなく、信号の高周波部分をより良い精度で表現することが有利で適切な場合もある。これは、オーディオ信号のエネルギーの大部分が高周波ドメインに含まれていて、信号の低周波領域にはわずかのエネルギーしか含まれていない場合には特にそうである。この場合、マスキング効果のために、低周波部分は高周波部分に圧倒されることになり、信号の高周波部分の高品質再生の可能性を提供することが有利である。

本発明の方法の特定の実現要求によっては、本発明の方法は、ハードウェアまたはソフトウェアで実施することができる。この実施は、本発明の方法が実行されるように、プログラム可能なコンピュータシステムと協働する、それに記憶された電子的に読み取り可能な制御信号を有する、デジタル記憶媒体、特に、ディスク、ＤＶＤまたはＣＤを用いて実行することができる。そのため、本発明は、一般に、コンピュータプログラム製品がコンピュータ上で実行される場合に、機械で読み取り可能なキャリアに記憶された本発明の方法を実行するためのプログラムコードを有するコンピュータプログラム製品である。言い換えると、本発明は、コンピュータプログラムがコンピュータ上で実行される場合に、少なくとも１つの本発明の方法を実行するためのプログラムコードを有するコンピュータプログラムである。

上述には本発明の特定の実施の形態に関して特に示され説明されたが、形式や詳細のさまざまな他の変更が本発明の精神および範囲から逸脱することなくできるということは、当業者にとって理解されよう。さまざまな変更が本願明細書において開示されさらに特許請求の範囲によって理解される上位概念から逸脱することなく異なる実施の形態に適応する際にできることを理解すべきである。

図１は、本発明のエンコーダを示す。 図２は、本発明の概念によって生成されるパラメータビットストリームの例を示す。 図２ａは、本発明のトランスコーダを示す。 図３は、本発明のデコーダを示す。 図４は、本発明の概念を実施する空間オーディオデコーダの例を示す。 図５は、デコーダ側の別の符号化スキームの使用を図解する。 図６は、従来技術のエンコーダを示す。 図７は、従来技術のデコーダを示す。 図８は、フィルタバンクのブロック図を示す。 図９は、従来技術のエンコーダのさらなる例を示す。

Claims (13)

1. 復号化されたマルチチャネルオーディオ信号を得るために符号化されたオーディオ信号を復号化するためのマルチチャネルオーディオデコーダであって、前記符号化されたオーディオ信号は、マルチチャネルオーディオ信号の第１の部分を表現する第１の空間パラメトリックデータを含み、さらに前記マルチチャネルオーディオ信号の第２の部分を表現する第２の空間パラメトリックデータを含むかまたは前記マルチチャネルオーディオ信号の前記第２の部分のための第２の空間パラメトリックデータを含まなく、前記第２の空間パラメトリックデータは、前記マルチチャネルオーディオ信号の同一の部分を表現する場合に、前記第１の空間パラメトリックデータよりも少ない情報ユニットを必要とし、前記マルチチャネルオーディオデコーダは、
   前記符号化されたオーディオ信号から中間信号を導出するためのプロセッサを含み、前記復号化されたマルチチャネルオーディオ信号は前記中間信号を用いて決定され、
   前記プロセッサは前記中間信号の第１の部分を導出するための第１の導出ルールを用いるために構成され、前記中間信号の前記第１の部分は前記マルチチャネルオーディオ信号の前記第１の部分に対応し、前記第１の導出ルールは前記第１の空間パラメトリックデータにより決まりさらに第１の品質の前記マルチチャネルオーディオ信号の再構成が可能になる空間パラメータ再構成ルールであり、さらに
   前記プロセッサは前記中間信号の第２の部分を導出するための第２の導出ルールを用いるために構成され、前記第２の導出ルールは前記第２の空間パラメトリックデータが存在する場合に前記第２の空間パラメトリックデータにより決まりさらに第２の品質の前記マルチチャネルオーディオ信号の再構成が可能になる空間パラメータ再構成ルールであり、または、前記第２の導出ルールは前記第２の空間パラメトリックデータが存在しない場合にマトリクスベースの導出ルールであり、前記第２の品質は前記第１の品質よりも低く、
   前記マルチチャネルオーディオ信号の前記第１の部分は第１の時間部分でありさらに前記マルチチャネルオーディオ信号の前記第２の部分は異なる第２の時間部分であり、または、前記マルチチャネルオーディオ信号の前記第１の部分は第１の周波数部分でありさらに前記マルチチャネルオーディオ信号の前記第２の部分は異なる第２の周波数部分である、マルチチャネルオーディオデコーダ。
2. 前記マルチチャネルオーディオ信号の時間部分の表現を含んでいる第１の空間パラメトリックデータを処理するように作動し、前記マルチチャネルオーディオ信号の所定の周波数バンドに関する情報だけが前記表現に含まれる、請求項１に記載のマルチチャネルオーディオデコーダ。
3. 前記プロセッサは、下限周波数から上限周波数の範囲の前記中間信号の周波数部分を導出するために前記第１の導出ルールを用いるように作動する、請求項１に記載のマルチチャネルオーディオデコーダ。
4. 少なくとも前記上限周波数を信号伝達するウィンドウ情報をさらに処理するように作動する、請求項３に記載のマルチチャネルオーディオデコーダ。
5. ウィンドウ推定ルールを用いて前記第１の空間パラメトリックデータから少なくとも前記上限周波数を導出するように作動する、請求項３に記載のマルチチャネルオーディオデコーダ。
6. 前記ウィンドウ推定ルールは、ダウンミックス信号の信号部分に対して送信される空間パラメトリックデータの量のカウント、および空間パラメトリックデータの前記カウントされた量と空間パラメトリックデータの基準量との比較を含む、請求項５に記載のマルチチャネルオーディオデコーダ。
7. 以下の空間オーディオパラメータのリスト
   ＩＣＣ（チャネル間相関）
   ＣＬＤ（チャネルレベル差）
   ＣＰＣ（チャネル予測係数）
   から選択される１つ以上の空間オーディオパラメータを含む空間パラメトリックデータを処理するように作動する、請求項１に記載のマルチチャネルオーディオデコーダ。
8. 相関除去フィルタを用いて前記中間信号から相関除去された信号を導出する相関除去器をさらに含む、請求項１に記載のマルチチャネルオーディオデコーダ。
9. 前記中間信号に基づく前記マルチチャネル信号の再構成を計算するためのアップミキサをさらに含み、前記アップミキサは、
   前記マルチチャネル信号の前記第１の部分に対応する前記マルチチャネル信号の前記再構成の第１の部分を計算するための第１のアップミキシングルールを用い、前記第１のアップミキシングルールは前記第１の空間パラメトリックデータにより決まり、さらに
   前記マルチチャネル信号の前記再構成の第２の部分を計算するための第２のアップミキシングルールを用い、前記第２のアップミキシングルールは空間パラメトリックデータを用いないかまたは前記第２の空間パラメトリックデータを用いる、請求項１に記載のマルチチャネルオーディオデコーダ。
10. マルチチャネルオーディオ信号の空間特性を表現する空間パラメトリック表現を生成するためのマルチチャネルエンコーダであって、前記マルチチャネルエンコーダは、
    前記マルチチャネル信号の前記第１の部分および前記第２の部分に対する空間パラメータのフルセットを生成するためのパラメータ生成器と、
    前記マルチチャネル信号からダウンミックス信号を導出するためのダウンミキサと、
    前記空間パラメトリック表現を生成しさらに前記ダウンミックス信号を出力するための出力インタフェースとを含み、
    前記パラメータ生成器または前記出力インタフェースは、前記空間パラメトリック表現が前記マルチチャネル信号の第１の部分に対する第１の空間パラメトリックデータを含むようにさらに前記空間パラメトリック表現が前記マルチチャネル信号の第２の部分に対して空間パラメトリックデータを含まないかまたは第２の空間パラメトリックデータを含むように、前記空間パラメトリック表現を生成するように適応され、前記第２の空間パラメトリックデータは、前記マルチチャネル信号の同一の部分を表現する場合に、前記第１の空間パラメトリックデータよりも少ない情報ユニットを必要とし、
    前記マルチチャネル信号の前記第１の部分は第１の時間部分でありさらに前記マルチチャネル信号の前記第２の部分は異なる第２の時間部分であり、または、前記マルチチャネル信号の前記第１の部分は第１の周波数部分でありさらに前記マルチチャネル信号の前記第２の部分は異なる第２の周波数部分である、マルチチャネルオーディオエンコーダ。
11. 復号化されたマルチチャネルオーディオ信号を得るために符号化されたオーディオ信号をマルチチャネルオーディオ復号化するための方法であって、前記符号化されたオーディオ信号は、マルチチャネルオーディオ信号の第１の部分を表現する第１の空間パラメトリックデータを含み、さらに前記マルチチャネルオーディオ信号の第２の部分を表現する第２の空間パラメトリックデータを含むかまたは前記マルチチャネルオーディオ信号の前記第２の部分のための第２の空間パラメトリックデータを含まなく、前記第２の空間パラメトリックデータは、前記マルチチャネル信号の同一の部分を表現する場合に、前記第１の空間パラメトリックデータよりも少ない情報ユニットを必要とし、マルチチャネルオーディオ復号化するための前記方法は、
    前記符号化されたオーディオ信号から中間信号を導出する工程を含み、前記復号化されたマルチチャネルオーディオ信号は前記中間信号を用いて決定され、
    導出する前記工程は前記中間信号の第１の部分を得るために前記第１の空間パラメトリックデータにより決まる第１の導出ルールを用い、前記中間信号の前記第１の部分は前記マルチチャネルオーディオ信号の前記第１の部分に対応し、前記第１の導出ルールは前記第１の空間パラメトリックデータにより決まりさらに第１の品質の前記マルチチャネルオーディオ信号の再構成が可能となる空間パラメータ再構成ルールであり、さらに
    導出する前記工程は前記中間信号の第２の部分を得るために第２の導出ルールを用い、前記第２の導出ルールは前記第２の空間パラメトリックデータが存在する場合に前記第２の空間パラメトリックデータにより決まりさらに第２の品質の前記マルチチャネルオーディオ信号の再構成が可能となる空間パラメータ再構成ルールであり、または、前記第２の導出ルールは前記第２の空間パラメトリックデータが存在しない場合にマトリックスベースの導出ルールであり、前記第２の品質は前記第１の品質よりも低く、
    前記マルチチャネルオーディオ信号の前記第１の部分は第１の時間部分でありさらに前記マルチチャネルオーディオ信号の前記第２の部分は異なる第２の時間部分であり、または、前記マルチチャネルオーディオ信号の前記第１の部分は第１の周波数部分でありさらに前記マルチチャネルオーディオ信号の前記第２の部分は異なる第２の周波数部分である、方法。
12. マルチチャネルオーディオ信号の空間特性を表現する空間パラメトリック表現を生成するためのマルチチャネル符号化の方法であって、前記方法は、
    前記マルチチャネル信号の第１の部分および第２の部分のためのフルセットの空間パラメータを生成する工程、
    前記マルチチャネル信号からダウンミックス信号を導出する工程、および
    前記空間パラメトリック表現を生成しさらに前記ダウンミックス信号を出力する工程を含み、
    前記フルセットの空間パラメータを生成する前記工程または前記空間パラメトリック表現を生成しさらに前記ダウンミックス信号を出力する工程は、前記空間パラメトリック表現が前記マルチチャネル信号の第１の部分に対する第１の空間パラメトリックデータを含むようにさらに前記空間パラメトリック表現が前記マルチチャネル信号の第２の部分に対して空間パラメトリックデータを含まないかまたは第２の空間パラメトリックデータを含むように、前記空間パラメトリック表現を生成するように適応され、前記第２の空間パラメトリックデータは、前記マルチチャネル信号の同一の部分を表現する場合に、前記第１の空間パラメトリックデータよりも少ない情報ユニットを必要とし、
    前記マルチチャネル信号の前記第１の部分は第１の時間部分でありさらに前記マルチチャネル信号の前記第２の部分は異なる第２の時間部分であり、または、前記マルチチャネル信号の前記第１の部分は第１の周波数部分でありさらに前記マルチチャネル信号の前記第２の部分は異なる第２の周波数部分である、方法。
13. コンピュータ上で実行される場合に、請求項１１または請求項１２に記載の方法を実行するためのプログラムコードを有するコンピュータプログラム。

Images