JP7703452B2 - アフィン線形重み付けイントラ予測における予測信号フィルタ処理 - Google Patents
アフィン線形重み付けイントラ予測における予測信号フィルタ処理 Download PDFInfo
- Publication number
- JP7703452B2 JP7703452B2 JP2021564812A JP2021564812A JP7703452B2 JP 7703452 B2 JP7703452 B2 JP 7703452B2 JP 2021564812 A JP2021564812 A JP 2021564812A JP 2021564812 A JP2021564812 A JP 2021564812A JP 7703452 B2 JP7703452 B2 JP 7703452B2
- Authority
- JP
- Japan
- Prior art keywords
- samples
- block
- downsampled
- current block
- edge
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
- H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
- H04N19/11—Selection of coding mode or of prediction mode among a plurality of spatial predictive coding modes
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/117—Filters, e.g. for pre-processing or post-processing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/132—Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
- H04N19/159—Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/59—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial sub-sampling or interpolation, e.g. alteration of picture size or resolution
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/593—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Description
[0001]本出願は、各々の内容全体が参照により本明細書に組み込まれる、２０１９年５月９日に出願された米国仮特許出願第６２／８４５，８３９号の利益を主張する、２０２０年５月７日に出願された米国特許出願第１６／８６８，９８２号の優先権を主張する。
[0002]本開示は、ビデオ符号化およびビデオ復号に関する。
[0003]デジタルビデオ能力は、デジタルテレビジョン、デジタルダイレクトブロードキャストシステム、ワイヤレスブロードキャストシステム、携帯情報端末（ＰＤＡ）、ラップトップまたはデスクトップコンピュータ、タブレットコンピュータ、電子ブックリーダー、デジタルカメラ、デジタルレコーディングデバイス、デジタルメディアプレーヤ、ビデオゲーミングデバイス、ビデオゲーム機、セルラーまたは衛星無線電話、いわゆる「スマートフォン」、ビデオ遠隔会議デバイス、ビデオストリーミングデバイスなどを含む、広範囲のデバイスの中に組み込まれ得る。デジタルビデオデバイスは、ＭＰＥＧ－２、ＭＰＥＧ－４、ＩＴＵ－Ｔ Ｈ．２６３、ＩＴＵ－Ｔ Ｈ．２６４／ＭＰＥＧ－４，Ｐａｒｔ１０，アドバンストビデオコーディング（ＡＶＣ）、高効率ビデオコーディング（ＨＥＶＣ）規格、ＩＴＵ－Ｔ Ｈ．２６５／高効率ビデオコーディング（ＨＥＶＣ）によって定義された規格、およびそのような規格の拡張に記載されているビデオコーディング技法など、ビデオコーディング技法を実装する。ビデオデバイスは、そのようなビデオコーディング技法を実施することによって、より効率的にデジタルビデオ情報を送信、受信、符号化、復号、および／または記憶し得る。
[0004]ビデオコーディング技法は、ビデオシーケンスに固有の冗長性を低減または除去するために、空間（イントラピクチャ）予測および／または時間（インターピクチャ）予測を含む。ブロックベースのビデオコーディングでは、ビデオスライス（たとえば、ビデオピクチャまたはビデオピクチャの一部分）が、コーディングツリーユニット（ＣＴＵ）、コーディングユニット（ＣＵ）および／またはコーディングノードと呼ばれることもある、ビデオブロックに区分され得る。ピクチャのイントラコード化（Ｉ）スライス中のビデオブロックは、同じピクチャ中の近隣ブロック中の参照サンプルに対する空間予測を使用して符号化される。ピクチャのインターコード化（ＰまたはＢ）スライス中のビデオブロックは、同じピクチャ中の近隣ブロック中の参照サンプルに対する空間予測、または他の参照ピクチャ中の参照サンプルに対する時間予測を使用し得る。ピクチャはフレームと呼ばれることがあり、参照ピクチャは参照フレームと呼ばれることがある。
[0005]本開示では、行列イントラ予測または行列重み付けイントラ予測またはアフィン線形重み付けイントラ予測（ＡＬＷＩＰ：affine linear weighted intra prediction）と呼ばれることもある、線形重み付けイントラ予測のためのモードの導出およびシグナリングを含む、イントラ予測を改善し得る技法について説明する。より詳細には、ＡＬＷＩＰモードで符号化されるビデオデータの現在ブロックについて、本開示では、フィルタ処理された予測ブロックを生成するために境界参照サンプルをフィルタ処理するための技法について説明する。フィルタ処理された予測ブロックは、より正確な予測ブロックを生成することによって、ＡＬＷＩＰモードでコーディングされるブロックのレートひずみトレードオフを改善し得る。
[0006]一例によれば、ビデオデータを復号する方法は、ビデオデータの現在ブロックがアフィン線形重み付けイントラ予測（ＡＬＷＩＰ）モードで符号化され（てい）ると決定することと、現在ブロックの左エッジ近隣サンプルのセットと現在ブロックの上部エッジ近隣サンプルのセットとに基づいて、左エッジサンプルのサブセットと上部エッジサンプルのサブセットとを導出すること、ここにおいて、左エッジサンプルのサブセットが、左エッジサンプルのセットよりも少数のサンプルを含み、上部エッジサンプルのサブセットが、上部エッジサンプルのセットよりも少数のサンプルを含む、と、中間サンプルの中間ブロックを生成するために、左エッジサンプルのサブセットと上部エッジサンプルのサブセットとにアフィンモデルを適用することと、最終予測ブロックを生成するために、現在ブロックの左エッジ近隣サンプルのセットと上部エッジ近隣サンプルのセットとを使用して、中間サンプルをフィルタ処理することと、最終予測ブロックに基づいてビデオデータの現在ブロックを復号することと、を含む。
[0007]別の例によれば、ビデオデータを復号するためのデバイスは、ビデオデータを記憶するように構成されたメモリと、回路中に実装された１つまたは複数のプロセッサとを含み、１つまたは複数のプロセッサは、ビデオデータの現在ブロックがアフィン線形重み付けイントラ予測（ＡＬＷＩＰ）モードで符号化されると決定することと、現在ブロックの左エッジ近隣サンプルのセットと現在ブロックの上部エッジ近隣サンプルのセットとに基づいて、左エッジサンプルのサブセットと上部エッジサンプルのサブセットとを導出すること、ここにおいて、左エッジサンプルのサブセットが、左エッジサンプルのセットよりも少数のサンプルを含み、上部エッジサンプルのサブセットが、上部エッジサンプルのセットよりも少数のサンプルを含む、と、中間サンプルの中間ブロックを生成するために、左エッジサンプルのサブセットと上部エッジサンプルのサブセットとにアフィンモデルを適用することと、最終予測ブロックを生成するために、現在ブロックの左エッジ近隣サンプルのセットと上部エッジ近隣サンプルのセットとを使用して、中間サンプルをフィルタ処理することと、最終予測ブロックに基づいてビデオデータの現在ブロックを復号することと、を行うように構成される。
[0008]別の例によれば、命令を記憶するコンピュータ可読記憶媒体であって、命令は、１つまたは複数のプロセッサによって実行されたとき、１つまたは複数のプロセッサに、ビデオデータの現在ブロックがアフィン線形重み付けイントラ予測（ＡＬＷＩＰ）モードで符号化されると決定することと、現在ブロックの左エッジ近隣サンプルのセットと現在ブロックの上部エッジ近隣サンプルのセットとに基づいて、左エッジサンプルのサブセットと上部エッジサンプルのサブセットとを導出すること、ここにおいて、左エッジサンプルのサブセットが、左エッジサンプルのセットよりも少数のサンプルを含み、上部エッジサンプルのサブセットが、上部エッジサンプルのセットよりも少数のサンプルを含む、と、中間サンプルの中間ブロックを生成するために、左エッジサンプルのサブセットと上部エッジサンプルのサブセットとにアフィンモデルを適用することと、最終予測ブロックを生成するために、現在ブロックの左エッジ近隣サンプルのセットと上部エッジ近隣サンプルのセットとを使用して、中間サンプルをフィルタ処理することと、最終予測ブロックに基づいてビデオデータの現在ブロックを復号することとを行わせる、コンピュータ可読記憶媒体。
[0009]別の例によれば、ビデオデータを復号するための装置は、ビデオデータの現在ブロックがアフィン線形重み付けイントラ予測（ＡＬＷＩＰ）モードで符号化されると決定するための手段と、現在ブロックの左エッジ近隣サンプルのセットと現在ブロックの上部エッジ近隣サンプルのセットとに基づいて、左エッジサンプルのサブセットと上部エッジサンプルのサブセットとを導出するための手段、ここにおいて、左エッジサンプルのサブセットが、左エッジサンプルのセットよりも少数のサンプルを含み、上部エッジサンプルのサブセットが、上部エッジサンプルのセットよりも少数のサンプルを含む、と、中間サンプルの中間ブロックを生成するために、左エッジサンプルのサブセットと上部エッジサンプルのサブセットとにアフィンモデルを適用するための手段と、最終予測ブロックを生成するために、現在ブロックの左エッジ近隣サンプルのセットと上部エッジ近隣サンプルのセットとを使用して、中間サンプルをフィルタ処理するための手段と、最終予測ブロックに基づいてビデオデータの現在ブロックを復号するための手段とを含む。
[0010]１つまたは複数の例の詳細が添付の図面および以下の説明に記載される。他の特徴、目的、および利点は、説明、図面、および特許請求の範囲から明らかになろう。
[0037]ビデオコーディング（たとえば、ビデオ符号化および／またはビデオ復号）は、一般に、同じピクチャ中のビデオデータのすでにコーディングされたブロックからビデオデータのブロックを予測すること（たとえば、イントラ予測）または異なるピクチャ中のビデオデータのすでにコーディングされたブロックからビデオデータのブロックを予測すること（たとえば、インター予測）のいずれかを伴う。いくつかの事例では、ビデオエンコーダはまた、予測ブロックとも呼ばれる予測的ブロックを、元のブロックと比較することによって残差データを計算する。したがって、残差データは、予測ブロックに残差データを加算することがビデオの元のブロックを生じるような、ビデオデータの予測ブロックと元のブロックとの間の差分を表す。いくつかのコーディングシナリオでは、残差データをシグナリングするために必要とされるビット数を低減するために、ビデオエンコーダは、残差データを変換および量子化し、変換および量子化された残差データを符号化ビットストリーム中でシグナリングする。変換および量子化プロセスによって達成される圧縮は、変換および量子化プロセスが復号ビデオデータにひずみを導入し得ることを意味する、ロッシー（lossy）であり得る。
[0038]ビデオデコーダは、予測ブロック単独でよりもぴったり元のビデオブロックに一致する再構築ビデオブロックを生成するために、残差データを復号し、予測ブロックに加算する。残差データの変換および量子化によって導入されるロスにより、再構築ブロックは、ひずみまたはアーティファクトを有し得る。アーティファクトまたはひずみの１つの通例のタイプはブロッキネスと呼ばれ、ここで、ビデオデータをコーディングするために使用されるブロックの境界が視認できる。
[0039]復号ビデオの品質をさらに改善するために、ビデオデコーダは、再構築ビデオブロックに対して１つまたは複数のフィルタ処理演算を実施し得る。１つまたは複数のフィルタ処理演算を実施する一部として、ビデオデコーダは、たとえば、デブロッキングフィルタ処理と、サンプル適応オフセット（ＳＡＯ）フィルタ処理と、適応ループフィルタ処理（ＡＬＦ）とのうちの１つまたは複数を実施し得る。これらのフィルタ処理演算のためのパラメータは、ビデオエンコーダによって決定され、符号化ビデオビットストリーム中で明示的にシグナリングされるか、またはパラメータが符号化ビデオビットストリーム中で明示的にシグナリングされる必要なしにビデオデコーダによって暗黙的に決定されるかのいずれかであり得る。
[0040]本開示では、行列イントラ予測または行列重み付けイントラ予測またはアフィン線形重み付けイントラ予測（ＡＬＷＩＰ）と呼ばれることもある、線形重み付けイントラ予測のためのモードの導出およびシグナリングを含む、イントラ予測を改善し得る技法について説明する。より詳細には、ＡＬＷＩＰモードで符号化されるビデオデータの現在ブロックについて、本開示では、フィルタ処理された予測ブロックを生成するために境界参照サンプルをフィルタ処理するための技法について説明する。フィルタ処理された予測ブロックは、より正確な予測ブロックを生成することによって、ＡＬＷＩＰモードでコーディングされるブロックのレートひずみトレードオフを改善し得る。
[0041]以下でより詳細に説明されるように、ビデオコーダがＡＬＷＩＰモードでブロックをコーディングするとき、ビデオコーダは、低減された数の境界サンプルに行列とバイアスベクトルとを乗算することによって、「中間」予測サンプルのセットを生成する。ビデオコーダは、次いで、予測ブロックを生成するために、線形補間を使用して中間サンプルをアップサンプリングする。このプロセスは、予測ブロックのエッジにおいて結局、より大きくなり得る予測誤差を生じ得、それにより、ビデオデータを圧縮するためにより多くのビットを必要とするより大きい残差値が生じる。本開示では、予測ブロックの予測誤差を低減し得る方式で、最終予測ブロックを生成するために中間サンプルをフィルタ処理するための技法について説明する。たとえば、本開示の本技法に従って構成されたビデオコーダは、中間サンプルの中間ブロックを生成するために、左エッジサンプルのサブセットと上部エッジサンプルのサブセットとにアフィンモデルを適用し、次いで、左エッジサンプルのフルセットと上部エッジサンプルのフルセットとを使用して垂直方向に１つまたは複数のフィルタを適用することによって、中間サンプルをフィルタ処理し得る。
[0042]すなわち、本開示の技法は、ＡＬＷＩＰモードを使用するとき、ビデオデータの元のブロックによりぴったり一致する予測ブロックを生成するビデオコーダを生じ得、したがって、小さい残差値、したがって、圧縮すべきより少数の合計ビットを必要とする。ＡＬＷＩＰモードでコーディングされたビデオデータのより少数の合計ビット圧縮ブロックを使用することによって、本開示の技法は、より良いレートひずみトレードオフを達成するビデオコーダを生じ得る。
[0043]図１は、本開示の技法を実施し得る例示的なビデオ符号化および復号システム１００を示すブロック図である。本開示の技法は、概して、ビデオデータをコーディング（符号化および／または復号）することを対象とする。概して、ビデオデータは、ビデオを処理するための何らかのデータを含む。したがって、ビデオデータは、生の符号化されていないビデオ、符号化されたビデオ、復号された（たとえば、再構築された）ビデオ、およびシグナリングデータなどのビデオメタデータを含み得る。
[0044]図１に示されているように、システム１００は、この例では、宛先デバイス１１６によって復号および表示されるべき符号化ビデオデータを提供するソースデバイス１０２を含む。詳細には、ソースデバイス１０２は、コンピュータ可読媒体１１０を介してビデオデータを宛先デバイス１１６に提供する。ソースデバイス１０２と宛先デバイス１１６との各々は、デスクトップコンピュータ、ノートブック（すなわち、ラップトップ）コンピュータ、モバイルデバイス、タブレットコンピュータ、セットトップボックス、スマートフォンなどの電話ハンドセット、テレビジョン、カメラ、ディスプレイデバイス、デジタルメディアプレーヤ、ビデオゲーミングコンソール、ビデオストリーミングデバイス、ブロードキャスト受信機デバイス、などを含む、広範囲のデバイスのいずれかを備え得る。いくつかの場合には、ソースデバイス１０２と宛先デバイス１１６とは、ワイヤレス通信のために装備され得、したがって、ワイヤレス通信デバイスと呼ばれることがある。
[0045]図１の例では、ソースデバイス１０２は、ビデオソース１０４と、メモリ１０６と、ビデオエンコーダ２００と、出力インターフェース１０８とを含む。宛先デバイス１１６は、入力インターフェース１２２と、ビデオデコーダ３００と、メモリ１２０と、ディスプレイデバイス１１８とを含む。本開示によれば、ソースデバイス１０２のビデオエンコーダ２００と、宛先デバイス１１６のビデオデコーダ３００とは、ブロック、本明細書で説明されるＡＬＷＩＰモードをコーディングするための技法を適用するように構成され得る。したがって、ソースデバイス１０２はビデオ符号化デバイスの一例を表し、宛先デバイス１１６はビデオ復号デバイスの一例を表す。他の例では、ソースデバイスと宛先デバイスとは、他の構成要素または配置を含み得る。たとえば、ソースデバイス１０２は、外部カメラなどの外部ビデオソースからビデオデータを受信し得る。同様に、宛先デバイス１１６は、一体型ディスプレイデバイスを含むのではなく、外部ディスプレイデバイスとインターフェースし得る。
[0046]図１に示されているシステム１００は一例にすぎない。概して、どんなデジタルビデオ符号化および／または復号デバイスも、ブロック、本明細書で説明されるＡＬＷＩＰモードをコーディングするための技法を実施し得る。ソースデバイス１０２と宛先デバイス１１６とは、ソースデバイス１０２が宛先デバイス１１６への送信のためにコード化ビデオデータを生成するようなコーディングデバイスの例にすぎない。本開示は、「コーディング」デバイスを、データのコーディング（符号化および／または復号）を実施するデバイスとして参照する。したがって、ビデオエンコーダ２００とビデオデコーダ３００とは、コーディングデバイス、特に、それぞれビデオエンコーダとビデオデコーダとの例を表す。いくつかの例では、ソースデバイス１０２と宛先デバイス１１６とは、ソースデバイス１０２と宛先デバイス１１６との各々がビデオ符号化および復号構成要素を含むように、実質的に対称的に動作し得る。したがって、システム１００は、たとえば、ビデオストリーミング、ビデオ再生、ビデオブロードキャスティング、またはビデオテレフォニーのための、ソースデバイス１０２と宛先デバイス１１６との間の一方向または双方向ビデオ送信をサポートし得る。
[0047]概して、ビデオソース１０４は、ビデオデータ（すなわち、生の符号化されていないビデオデータ）のソースを表し、ビデオデータの連続的な一連のピクチャ（「フレーム」とも呼ばれる）をビデオエンコーダ２００に提供し、ビデオエンコーダ２００は、ピクチャのためにデータを符号化する。ソースデバイス１０２のビデオソース１０４は、ビデオカメラ、以前にキャプチャされた生のビデオを含んでいるビデオアーカイブ、および／またはビデオコンテンツプロバイダからビデオを受信するためのビデオフィードインターフェースなど、ビデオキャプチャデバイスを含み得る。さらなる代替として、ビデオソース１０４は、ソースビデオとして、コンピュータグラフィックスベースのデータ、またはライブビデオとアーカイブビデオとコンピュータ生成ビデオとの組合せを生成し得る。各場合において、ビデオエンコーダ２００は、キャプチャされたビデオ、プリキャプチャされたビデオ、またはコンピュータ生成されたビデオデータを符号化する。ビデオエンコーダ２００は、ピクチャを、（「表示順序」と呼ばれることがある）受信順序から、コーディングのためのコーディング順序に並べ替え得る。ビデオエンコーダ２００は、符号化ビデオデータを含むビットストリームを生成し得る。ソースデバイス１０２は、次いで、たとえば、宛先デバイス１１６の入力インターフェース１２２による受信および／または取出しのために、出力インターフェース１０８を介して符号化ビデオデータをコンピュータ可読媒体１１０上に出力し得る。
[0048]ソースデバイス１０２のメモリ１０６と、宛先デバイス１１６のメモリ１２０とは、汎用メモリを表す。いくつかの例では、メモリ１０６、１２０は、生のビデオデータ、たとえば、ビデオソース１０４からの生のビデオ、およびビデオデコーダ３００からの生の復号ビデオデータを記憶し得る。追加または代替として、メモリ１０６、１２０は、たとえば、それぞれ、ビデオエンコーダ２００とビデオデコーダ３００とによって実行可能なソフトウェア命令を記憶し得る。メモリ１０６とメモリ１２０とは、この例ではビデオエンコーダ２００とビデオデコーダ３００とは別個に示されているが、ビデオエンコーダ２００とビデオデコーダ３００とは、機能的に同様または等価な目的で内部メモリをも含み得ることを理解されたい。さらに、メモリ１０６、１２０は、たとえば、ビデオエンコーダ２００から出力され、ビデオデコーダ３００へ入力される、符号化ビデオデータを記憶し得る。いくつかの例では、メモリ１０６、１２０の部分は、たとえば、生の復号および／または符号化ビデオデータを記憶するために、１つまたは複数のビデオバッファとして割り振られ得る。
[0049]コンピュータ可読媒体１１０は、ソースデバイス１０２から宛先デバイス１１６に符号化ビデオデータを移送することが可能な任意のタイプの媒体またはデバイスを表し得る。一例では、コンピュータ可読媒体１１０は、ソースデバイス１０２が、たとえば、無線周波数ネットワークまたはコンピュータベースのネットワークを介して、符号化ビデオデータを宛先デバイス１１６にリアルタイムで直接送信することを可能にするための通信媒体を表す。出力インターフェース１０８は、符号化ビデオデータを含む送信信号を変調し得、入力インターフェース１２２は、ワイヤレス通信規格またはプロトコルなどの通信規格に従って、受信された送信信号を復調し得る。通信媒体は、無線周波数（ＲＦ）スペクトルあるいは１つまたは複数の物理伝送線路など、任意のワイヤレスまたはワイヤード通信媒体を備え得る。通信媒体は、ローカルエリアネットワーク、ワイドエリアネットワーク、またはインターネットなどのグローバルネットワークなどの、パケットベースネットワークの一部を形成し得る。通信媒体は、ルータ、スイッチ、基地局、またはソースデバイス１０２から宛先デバイス１１６への通信を容易にするために有用であり得る任意の他の機器を含み得る。
[0050]いくつかの例では、ソースデバイス１０２は、出力インターフェース１０８から記憶デバイス１１２に符号化データを出力し得る。同様に、宛先デバイス１１６は、入力インターフェース１２２を介して記憶デバイス１１２から符号化データにアクセスし得る。記憶デバイス１１２は、ハードドライブ、Ｂｌｕ－ｒａｙ（登録商標）ディスク、ＤＶＤ、ＣＤ－ＲＯＭ、フラッシュメモリ、揮発性または不揮発性メモリ、あるいは符号化ビデオデータを記憶するための任意の他の好適なデジタル記憶媒体など、様々な分散されたまたはローカルにアクセスされるデータ記憶媒体のいずれかを含み得る。
[0051]いくつかの例では、ソースデバイス１０２は、ソースデバイス１０２によって生成された符号化ビデオデータを記憶し得るファイルサーバ１１４または別の中間記憶デバイスに符号化ビデオデータを出力し得る。宛先デバイス１１６は、ストリーミングまたはダウンロードを介して、ファイルサーバ１１４から、記憶されたビデオデータにアクセスし得る。ファイルサーバ１１４は、符号化ビデオデータを記憶し、符号化ビデオデータを宛先デバイス１１６に送信することができる任意のタイプのサーバデバイスであり得る。ファイルサーバ１１４は、（たとえば、ウェブサイト用の）ウェブサーバ、ファイル転送プロトコル（ＦＴＰ）サーバ、コンテンツ配信ネットワークデバイス、またはネットワーク接続ストレージ（ＮＡＳ）デバイスを表し得る。宛先デバイス１１６は、インターネット接続を含む任意の標準的なデータ接続を通してファイルサーバ１１４から符号化ビデオデータにアクセスし得る。これは、ファイルサーバ１１４に記憶された符号化ビデオデータにアクセスするのに好適であるワイヤレスチャネル（たとえば、Ｗｉ－Ｆｉ（登録商標）接続）、ワイヤード接続（たとえば、デジタル加入者線（ＤＳＬ）、ケーブルモデムなど）、またはその両方の組合せを含み得る。ファイルサーバ１１４と入力インターフェース１２２とは、ストリーミング送信プロトコル、ダウンロード送信プロトコル、またはそれらの組合せに従って動作するように構成され得る。
[0052]出力インターフェース１０８と入力インターフェース１２２とは、ワイヤレス送信機／受信機、モデム、ワイヤードネットワーキング構成要素（たとえば、イーサネット（登録商標）カード）、様々なＩＥＥＥ８０２．１１規格のいずれかに従って動作するワイヤレス通信構成要素、または他の物理的構成要素を表し得る。出力インターフェース１０８と入力インターフェース１２２とがワイヤレス構成要素を備える例では、出力インターフェース１０８と入力インターフェース１２２とは、４Ｇ、４Ｇ－ＬＴＥ（登録商標）（ロングタームエボリューション）、ＬＴＥアドバンスト、５Ｇなど、セルラー通信規格に従って、符号化ビデオデータなどのデータを転送するように構成され得る。出力インターフェース１０８がワイヤレス送信機を備えるいくつかの例では、出力インターフェース１０８と入力インターフェース１２２とは、ＩＥＥＥ８０２．１１仕様、ＩＥＥＥ８０２．１５仕様（たとえば、ＺｉｇＢｅｅ（登録商標））、Ｂｌｕｅｔｏｏｔｈ（登録商標）規格など、他のワイヤレス規格に従って、符号化ビデオデータなどのデータを転送するように構成され得る。いくつかの例では、ソースデバイス１０２および／または宛先デバイス１１６は、それぞれのシステムオンチップ（ＳｏＣ）デバイスを含み得る。たとえば、ソースデバイス１０２は、ビデオエンコーダ２００および／または出力インターフェース１０８に帰属する機能を実施するためのＳｏＣデバイスを含み得、宛先デバイス１１６は、ビデオデコーダ３００および／または入力インターフェース１２２に帰属する機能を実施するためのＳｏＣデバイスを含み得る。
[0053]本開示の技法は、オーバージエアテレビジョン放送、ケーブルテレビジョン送信、衛星テレビジョン送信、動的適応ストリーミングオーバーＨＴＴＰ（ＤＡＳＨ）などのインターネットストリーミングビデオ送信、データ記憶媒体上に符号化されたデジタルビデオ、データ記憶媒体に記憶されたデジタルビデオの復号、または他の適用例など、様々なマルチメディア適用例のいずれかをサポートするビデオコーディングに適用され得る。
[0054]宛先デバイス１１６の入力インターフェース１２２は、コンピュータ可読媒体１１０（たとえば、通信媒体、記憶デバイス１１２、ファイルサーバ１１４など）から符号化ビデオビットストリームを受信する。符号化ビデオビットストリームは、ビデオブロックまたは他のコード化ユニット（たとえば、スライス、ピクチャ、ピクチャのグループ、シーケンスなど）の特性および／または処理を記述する値を有するシンタックス要素など、ビデオデコーダ３００によっても使用される、ビデオエンコーダ２００によって定義されるシグナリング情報を含み得る。ディスプレイデバイス１１８は、復号ビデオデータの復号ピクチャをユーザに表示する。ディスプレイデバイス１１８は、液晶ディスプレイ（ＬＣＤ）、プラズマディスプレイ、有機発光ダイオード（ＯＬＥＤ）ディスプレイ、または別のタイプのディスプレイデバイスなど、様々なディスプレイデバイスのいずれかを表し得る。
[0055]図１には示されていないが、いくつかの例では、ビデオエンコーダ２００とビデオデコーダ３００とは各々、オーディオエンコーダおよび／またはオーディオデコーダと統合され得、共通のデータストリーム中にオーディオとビデオの両方を含む多重化ストリームをハンドリングするために、適切なＭＵＸ－ＤＥＭＵＸユニット、あるいは他のハードウェアおよび／またはソフトウェアを含み得る。適用可能な場合、ＭＵＸ－ＤＥＭＵＸユニットは、ＩＴＵ Ｈ．２２３マルチプレクサプロトコル、またはユーザデータグラムプロトコル（ＵＤＰ）などの他のプロトコルに準拠し得る。
[0056]ビデオエンコーダ２００とビデオデコーダ３００とは各々、１つまたは複数のマイクロプロセッサ、デジタル信号プロセッサ（ＤＳＰ）、特定用途向け集積回路（ＡＳＩＣ）、フィールドプログラマブルゲートアレイ（ＦＰＧＡ）、ディスクリート論理、ソフトウェア、ハードウェア、ファームウェアなど、様々な好適なエンコーダおよび／またはデコーダ回路のいずれか、あるいはそれらの任意の組合せとして実装され得る。本技法が部分的にソフトウェアで実装されるとき、デバイスは、好適な非一時的コンピュータ可読媒体にソフトウェアの命令を記憶し、本開示の技法を実施するために１つまたは複数のプロセッサを使用してその命令をハードウェアで実行し得る。ビデオエンコーダ２００とビデオデコーダ３００との各々は、１つもしくは複数のエンコーダまたはデコーダに含まれ得、それらのいずれかが、それぞれのデバイス中の複合エンコーダ／デコーダ（ＣＯＤＥＣ）の一部として統合され得る。ビデオエンコーダ２００および／またはビデオデコーダ３００を含むデバイスは、集積回路、マイクロプロセッサ、および／またはセルラー電話機などのワイヤレス通信デバイスを備え得る。
[0057]ビデオエンコーダ２００とビデオデコーダ３００とは、高効率ビデオコーディング（ＨＥＶＣ）とも呼ばれるＩＴＵ－Ｔ Ｈ．２６５、またはマルチビューおよび／もしくはスケーラブルビデオコーディング拡張などのそれらの拡張など、ビデオコーディング規格に従って動作し得る。代替として、ビデオエンコーダ２００とビデオデコーダ３００とは、汎用ビデオコーディング（ＶＶＣ:Versatile Video Coding）とも呼ばれるＩＴＵ－Ｔ Ｈ．２６６など、他のプロプライエタリ規格または業界規格に従って動作し得る。ＶＶＣ規格の最近のドラフトは、Ｂｒｏｓｓら、「Ｖｅｒｓａｔｉｌｅ Ｖｉｄｅｏ Ｃｏｄｉｎｇ （Ｄｒａｆｔ ８）」、ＩＴＵ－Ｔ ＳＧ １６ ＷＰ ３とＩＳＯ／ＩＥＣ ＪＴＣ １／ＳＣ ２９／ＷＧ １１とのジョイントビデオエキスパーツチーム（ＪＶＥＴ）、第１７回会合、ブリュッセル、ＢＥ、２０２０年１月７～１７日、ＪＶＥＴ－Ｑ２００１－ｖ１５（以下では「ＶＶＣドラフト８」）に記載されている。ただし、本開示の技法は、いかなる特定のコーディング規格にも限定されない。
[0058]概して、ビデオエンコーダ２００とビデオデコーダ３００とは、ピクチャのブロックベースのコーディングを実施し得る。「ブロック」という用語は、処理されるべき（たとえば、符号化されるべき、復号されるべき、あるいは符号化および／または復号プロセスにおいて他の方法で使用されるべき）データを含む構造を一般に意味する。たとえば、ブロックは、ルミナンスおよび／またはクロミナンスデータのサンプルの２次元行列を含み得る。概して、ビデオエンコーダ２００とビデオデコーダ３００とは、ＹＵＶ（たとえば、Ｙ、Ｃｂ、Ｃｒ）フォーマットで表されるビデオデータをコーディングし得る。すなわち、ピクチャのサンプルのために赤色、緑色、および青色（ＲＧＢ）データをコーディングするのではなく、ビデオエンコーダ２００とビデオデコーダ３００とは、ルミナンス成分とクロミナンス成分とをコーディングし得、ここで、クロミナンス成分は、赤色相と青色相の両方のクロミナンス成分を含み得る。いくつかの例では、ビデオエンコーダ２００は、符号化より前に、受信されたＲＧＢフォーマット付きデータをＹＵＶ表現にコンバートし、ビデオデコーダ３００は、ＹＵＶ表現をＲＧＢフォーマットにコンバートする。代替として、前処理および後処理ユニット（図示されず）が、これらのコンバージョンを実施し得る。
[0059]本開示では、概して、ピクチャのコーディング（たとえば、符号化および復号）を、ピクチャのデータを符号化または復号するプロセスを含むように言及し得る。同様に、本開示では、ピクチャのブロックのコーディングを、ブロックのデータを符号化または復号するプロセス、たとえば、予測および／または残差コーディングを含むように言及し得る。符号化ビデオビットストリームは、概して、コーディング決定（たとえば、コーディングモード）とブロックへのピクチャの区分とを表すシンタックス要素の一連の値を含む。したがって、ピクチャまたはブロックをコーディングすることへの言及は、概して、ピクチャまたはブロックを形成しているシンタックス要素の値をコーディングすることとして理解されたい。
[0060]ＨＥＶＣは、コーディングユニット（ＣＵ）、予測ユニット（ＰＵ）、および変換ユニット（ＴＵ）を含む、様々なブロックを定義する。ＨＥＶＣに従って、（ビデオエンコーダ２００などの）ビデオコーダは、クワッドツリー構造に従ってコーディングツリーユニット（ＣＴＵ）をＣＵに区分する。すなわち、ビデオコーダは、ＣＴＵとＣＵとを４つの等しい重複しない正方形に区分し、クワッドツリーの各ノードは、０個または４個のいずれかの子ノードを有する。子ノードなしのノードは「リーフノード」と呼ばれることがあり、そのようなリーフノードのＣＵは、１つまたは複数のＰＵならびに／あるいは１つまたは複数のＴＵを含み得る。ビデオコーダは、ＰＵとＴＵとをさらに区分し得る。たとえば、ＨＥＶＣでは、残差クワッドツリー（ＲＱＴ）は、ＴＵの区分を表す。ＨＥＶＣでは、ＰＵはインター予測データを表すが、ＴＵは残差データを表す。イントラ予測されるＣＵは、イントラモードインジケーションなどのイントラ予測情報を含む。
[0061]別の例として、ビデオエンコーダ２００とビデオデコーダ３００とは、ＶＶＣに従って動作するように構成され得る。ＶＶＣに従って、（ビデオエンコーダ２００などの）ビデオコーダは、ピクチャを複数のコーディングツリーユニット（ＣＴＵ）に区分する。ビデオエンコーダ２００は、クワッドツリーバイナリツリー（ＱＴＢＴ）構造またはマルチタイプツリー（ＭＴＴ）構造など、ツリー構造に従ってＣＴＵを区分し得る。ＱＴＢＴ構造は、ＨＥＶＣのＣＵとＰＵとＴＵとの間の分離など、複数の区分タイプの概念を除去する。ＱＴＢＴ構造は、クワッドツリー区分に従って区分される第１のレベル、およびバイナリツリー区分に従って区分される第２のレベルという、２つのレベルを含む。ＱＴＢＴ構造のルートノードはＣＴＵに対応する。バイナリツリーのリーフノードはコーディングユニット（ＣＵ）に対応する。
[0062]ＭＴＴ区分構造では、ブロックは、クワッドツリー（ＱＴ）区分と、バイナリツリー（ＢＴ）区分と、１つまたは複数のタイプのトリプルツリー（ＴＴ）（ターナリツリー（ＴＴ:ternary tree）とも呼ばれる）区分とを使用して区分され得る。トリプルまたはターナリツリー区分は、ブロックが３つのサブブロックにスプリットされる区分である。いくつかの例では、トリプルまたはターナリツリー区分は、中心を通して元のブロックを分割することなしにブロックを３つのサブブロックに分割する。ＭＴＴにおける区分タイプ（たとえば、ＱＴ、ＢＴ、およびＴＴ）は、対称的または非対称的であり得る。
[0063]いくつかの例では、ビデオエンコーダ２００とビデオデコーダ３００とは、ルミナンス成分とクロミナンス成分との各々を表すために単一のＱＴＢＴまたはＭＴＴ構造を使用し得、他の例では、ビデオエンコーダ２００とビデオデコーダ３００とは、ルミナンス成分のための１つのＱＴＢＴ／ＭＴＴ構造、および両方のクロミナンス成分のための別のＱＴＢＴ／ＭＴＴ構造（またはそれぞれのクロミナンス成分のための２つのＱＴＢＴ／ＭＴＴ構造）など、２つ以上のＱＴＢＴまたはＭＴＴ構造を使用し得る。
[0064]ビデオエンコーダ２００とビデオデコーダ３００とは、ＨＥＶＣに従うクワッドツリー区分、ＱＴＢＴ区分、ＭＴＴ区分、または他の区分構造を使用するように構成され得る。説明の目的で、本開示の技法の説明はＱＴＢＴ区分に関して提示される。しかしながら、本開示の技法は、クワッドツリー区分、または同様に他のタイプの区分を使用するように構成されたビデオコーダにも適用され得ることを理解されたい。
[0065]いくつかの例では、ＣＴＵは、ルーマサンプルのコーディングツリーブロック（ＣＴＢ）、３つのサンプルアレイを有するピクチャのクロマサンプルの２つの対応するＣＴＢ、あるいはモノクロームピクチャ、またはサンプルをコーディングするために使用される３つの別個の色平面とシンタックス構造とを使用してコーディングされるピクチャのサンプルのＣＴＢを含む。ＣＴＢは、ＣＴＢへの成分の分割が区分になるように、何らかの値のＮに対して、サンプルのＮ×Ｎブロックであり得る。成分は、ピクチャを４：２：０、４：２：２、または４：４：４色フォーマットに構成する３つのアレイ（ルーマおよび２つのクロマ）のうちの１つからのアレイまたは単一のサンプル、あるいはピクチャをモノクロームフォーマットに構成するアレイまたはアレイの単一のサンプルである。いくつかの例では、コーディングブロックは、コーディングブロックへのＣＴＢの分割が区分になるように、何らかの値のＭとＮとに対して、サンプルのＭ×Ｎブロックである。
[0066]ブロック（たとえば、ＣＴＵまたはＣＵ）は、ピクチャ中で様々な仕方でグループ化され得る。一例として、ブリックは、ピクチャ中の特定のタイル内のＣＴＵ行の矩形領域を参照し得る。タイルは、ピクチャ中の特定のタイル列と特定のタイル行との内のＣＴＵの矩形領域であり得る。タイル列は、ピクチャの高さに等しい高さと、（たとえば、ピクチャパラメータセット中などの）シンタックス要素によって指定された幅とを有するＣＴＵの矩形領域を参照する。タイル行は、（たとえば、ピクチャパラメータセット中などの）シンタックス要素によって指定された高さと、ピクチャの幅に等しい幅とを有するＣＴＵの矩形領域を参照する。
[0067]いくつかの例では、タイルは複数のブリック（bricks）に区分され得、それらの各々は、タイル内に１つまたは複数のＣＴＵ行を含み得る。複数のブリックに区分されないタイルもブリックと呼ばれることがある。しかしながら、タイルの真のサブセットであるブリックは、タイルと呼ばれないことがある。
[0068]ピクチャ中のブリックはまた、スライス中に配置され得る。スライスは、もっぱら単一のネットワークアブストラクションレイヤ（ＮＡＬ）ユニット中に含まれていることがあるピクチャの整数個のブリックであり得る。いくつかの例では、スライスは、いくつかの完全なタイル、または１つのタイルの完全なブリックの連続シーケンスのみのいずれかを含む。
[0069]本開示では、たとえば、１６×１６サンプルまたは１６個ずつの１６個のサンプルなど、垂直寸法と水平寸法とに関して、（ＣＵまたは他のビデオブロックなどの）ブロックのサンプル寸法を参照するために「Ｎ×Ｎ」と「Ｎ個ずつのＮ個の」とを互換的に使用し得る。一般に、１６×１６ＣＵは、垂直方向に１６個のサンプルを有し（ｙ＝１６）、水平方向に１６個のサンプルを有する（ｘ＝１６）。同様に、Ｎ×Ｎ ＣＵは、一般に、垂直方向にＮ個のサンプルを有し、水平方向にＮ個のサンプルを有し、ここで、Ｎは非負整数値を表す。ＣＵ中のサンプルは、行と列とに配置され得る。さらに、ＣＵは、必ずしも、水平方向において垂直方向と同じ数のサンプルを有する必要があるとは限らない。たとえば、ＣＵはＮ×Ｍサンプルを備え得、ここで、Ｍは必ずしもＮに等しいとは限らない。
[0070]ビデオエンコーダ２００は、予測および／または残差情報、ならびに他の情報を表すＣＵのためにビデオデータを符号化する。予測情報は、ＣＵについて予測ブロックを形成するためにＣＵがどのように予測されるべきかを示す。残差情報は、概して、符号化より前のＣＵのサンプルと予測ブロックとの間のサンプルごとの差分を表す。
[0071]ＣＵを予測するために、ビデオエンコーダ２００は、概して、インター予測またはイントラ予測を通してＣＵについて予測ブロックを形成し得る。インター予測は、概して、以前にコーディングされたピクチャのデータからＣＵを予測することを指し、一方、イントラ予測は、概して、同じピクチャの以前にコーディングされたデータからＣＵを予測することを指す。インター予測を実施するために、ビデオエンコーダ２００は、１つまたは複数の動きベクトルを使用して予測ブロックを生成し得る。ビデオエンコーダ２００は、概して、たとえば、ＣＵと参照ブロックとの間の差分に関して、ＣＵにぴったり一致する参照ブロックを識別するために動き探索を実施し得る。ビデオエンコーダ２００は、参照ブロックが現在ＣＵにぴったり一致するかどうかを決定するために、絶対差分和（ＳＡＤ）、２乗差分和（ＳＳＤ）、平均絶対差（ＭＡＤ）、平均２乗差（ＭＳＤ）、または他のそのような差分計算を使用して差分メトリックを計算し得る。いくつかの例では、ビデオエンコーダ２００は、単方向予測または双方向予測を使用して現在ＣＵを予測し得る。
[0072]ＶＶＣのいくつかの例はまた、インター予測モードと考えられ得る、アフィン動き補償モードを提供する。アフィン動き補償モードでは、ビデオエンコーダ２００は、ズームインまたはアウト、回転、パースペクティブの動き(perspective motion)、あるいは他の変則の動きタイプなど、非並進の動きを表す２つ以上の動きベクトルを決定し得る。
[0073]イントラ予測を実施するために、ビデオエンコーダ２００は、予測ブロックを生成するようにイントラ予測モードを選択し得る。ＶＶＣのいくつかの例は、様々な方向性モード、ならびに平面モードおよびＤＣモードを含む、６７個のイントラ予測モードを提供する。概して、ビデオエンコーダ２００は、現在ブロック（たとえば、ＣＵのブロック）のサンプルをそれから予測すべき、現在ブロックに対する近隣サンプルを記述するイントラ予測モードを選択する。そのようなサンプルは、ビデオエンコーダ２００がラスタ走査順序で（左から右に、上から下に）ＣＴＵとＣＵとをコーディングすると仮定すると、概して、現在ブロックと同じピクチャ中の現在ブロックの上方、上方および左側、または左側にあり得る。
[0074]ビデオエンコーダ２００は、現在ブロックについて予測モードを表すデータを符号化する。たとえば、インター予測モードでは、ビデオエンコーダ２００は、様々な利用可能なインター予測モードのうちのどれが使用されるか、ならびに対応するモードの動き情報を表すデータを符号化し得る。たとえば、単方向または双方向インター予測では、ビデオエンコーダ２００は、高度動きベクトル予測（ＡＭＶＰ）またはマージモードを使用して動きベクトルを符号化し得る。ビデオエンコーダ２００は、アフィン動き補償モードの動きベクトルを符号化するために同様のモードを使用し得る。
[0075]ブロックのイントラ予測またはインター予測などの予測に続いて、ビデオエンコーダ２００は、ブロックについて残差データを計算し得る。残差ブロックなどの残差データは、ブロックと、対応する予測モードを使用して形成された、ブロックについての予測ブロックとの間の、サンプルごとの差分を表す。ビデオエンコーダ２００は、サンプル領域ではなく変換領域中に変換データを生成するために、残差ブロックに１つまたは複数の変換を適用し得る。たとえば、ビデオエンコーダ２００は、離散コサイン変換（ＤＣＴ）、整数変換、ウェーブレット変換、または概念的に同様の変換を残差ビデオデータに適用し得る。さらに、ビデオエンコーダ２００は、モード依存非分離可能２次変換（ＭＤＮＳＳＴ）、信号依存変換、カルーネンレーベ変換（ＫＬＴ）など、第１の変換に続いて２次変換を適用し得る。ビデオエンコーダ２００は、１つまたは複数の変換の適用に続いて変換係数を生成する。
[0076]上述のように、変換係数を生成するための任意の変換に続いて、ビデオエンコーダ２００は、変換係数の量子化を実施し得る。量子化は、一般に、変換係数を表すために使用されるデータの量をできるだけ低減させるために変換係数が量子化され、さらなる圧縮を実現するプロセスを指す。量子化プロセスを実施することによって、ビデオエンコーダ２００は、変換係数の一部または全部に関連するビット深度を低減し得る。たとえば、ビデオエンコーダ２００は、量子化中にｎビット値をｍビット値に丸めることがあり、ここで、ｎはｍよりも大きい。いくつかの例では、量子化を実施するために、ビデオエンコーダ２００は、量子化されるべき値のビット単位右シフトを実施し得る。
[0077]量子化に続いて、ビデオエンコーダ２００は、変換係数を走査して、量子化された変換係数を含む２次元行列から１次元ベクトルを生成し得る。走査は、より高いエネルギー（したがって、より低い頻度）の変換係数をベクトルの前方に配置し、より低いエネルギー（したがって、より高い頻度）の変換係数をベクトルの後方に配置するように設計され得る。いくつかの例では、ビデオエンコーダ２００は、あらかじめ定義された走査順序を利用して、量子化された変換係数を走査してシリアル化ベクトルを生成し、次いで、ベクトルの量子化された変換係数をエントロピー符号化し得る。他の例では、ビデオエンコーダ２００は適応型走査を実施し得る。量子化された変換係数を走査して１次元ベクトルを形成した後に、ビデオエンコーダ２００は、たとえば、コンテキスト適応型バイナリ算術コーディング（ＣＡＢＡＣ）に従って、１次元ベクトルをエントロピー符号化し得る。ビデオエンコーダ２００はまた、ビデオデータを復号する際のビデオデコーダ３００による使用のために、符号化ビデオデータに関連付けられたメタデータを記述するシンタックス要素の値をエントロピー符号化し得る。
[0078]ＣＡＢＡＣを実施するために、ビデオエンコーダ２００は、コンテキストモデル内のコンテキストを、送信されるべきシンボルに割り当て得る。コンテキストは、たとえば、シンボルの近隣値が０値であるか否かに関係し得る。確率決定は、シンボルに割り当てられたコンテキストに基づき得る。
[0079]ビデオエンコーダ２００は、さらに、ブロックベースのシンタックスデータ、ピクチャベースのシンタックスデータ、およびシーケンスベースのシンタックスデータなどのシンタックスデータを、たとえば、ピクチャヘッダ、ブロックヘッダ、スライスヘッダ、あるいはシーケンスパラメータセット（ＳＰＳ）、ピクチャパラメータセット（ＰＰＳ）、またはビデオパラメータセット（ＶＰＳ）などの他のシンタックスデータ中で、ビデオデコーダ３００に対して生成し得る。ビデオデコーダ３００は、対応するビデオデータをどのように復号すべきかを決定するために、そのようなシンタックスデータを同様に復号し得る。
[0080]このようにして、ビデオエンコーダ２００は、符号化ビデオデータ、たとえば、ブロック（たとえば、ＣＵ）へのピクチャの区分ならびにブロックの予測および／または残差情報を記述するシンタックス要素を含むビットストリームを生成し得る。最終的に、ビデオデコーダ３００は、ビットストリームを受信し、符号化ビデオデータを復号し得る。
[0081]概して、ビデオデコーダ３００は、ビットストリームの符号化ビデオデータを復号するために、ビデオエンコーダ２００によって実施されたものの逆プロセスを実施する。たとえば、ビデオデコーダ３００は、ビデオエンコーダ２００のＣＡＢＡＣ符号化プロセスと逆ではあるが、それと実質的に同様の様式でＣＡＢＡＣを使用してビットストリームのシンタックス要素の値を復号し得る。シンタックス要素は、ＣＴＵのＣＵを定義するために、ピクチャをＣＴＵに区分するための区分情報と、ＱＴＢＴ構造などの対応する区分構造に従う、各ＣＴＵの区分とを定義し得る。シンタックス要素は、ビデオデータのブロック（たとえば、ＣＵ）についての予測および残差情報をさらに定義し得る。
[0082]残差情報は、たとえば、量子化された変換係数によって表され得る。ビデオデコーダ３００は、ブロックの残差ブロックを再生するために、ブロックの量子化された変換係数を逆量子化し、逆変換し得る。ビデオデコーダ３００は、ブロックの予測ブロックを形成するために、シグナリングされた予測モード（イントラまたはインター予測）と、関係する予測情報（たとえば、インター予測のための動き情報）とを使用する。ビデオデコーダ３００は、次いで、（サンプルごとに）予測ブロックと残差ブロックとを組み合わせて、元のブロックを再生し得る。ビデオデコーダ３００は、ブロックの境界に沿って視覚的アーティファクトを低減するためにデブロッキングプロセスを実施することなど、追加の処理を実施し得る。
[0083]本開示の技法によれば、ビデオデコーダ３００は、ビデオデータの現在ブロックがＡＬＷＩＰモードで符号化されると決定することと、現在ブロックの左エッジ近隣サンプルのセットと現在ブロックの上部エッジ近隣サンプルのセットとに基づいて、左エッジサンプルのサブセットと上部エッジサンプルのサブセットとを導出することと、中間サンプルの中間ブロックを生成するために、左エッジサンプルのサブセットと上部エッジサンプルのサブセットとにアフィンモデルを適用することと、最終予測ブロックを生成するために、現在ブロックの左エッジ近隣サンプルのセットと上部エッジ近隣サンプルのセットとを使用して、中間サンプルをフィルタ処理することと、最終予測ブロックに基づいてビデオデータの現在ブロックを復号することと、を行うように構成され得る。ビデオエンコーダ２００は、ビデオ符号化プロセスの復号ループの一部として、ビデオデータの現在ブロックがＡＬＷＩＰモードで符号化されると決定することと、現在ブロックの左エッジ近隣サンプルのセットと現在ブロックの上部エッジ近隣サンプルのセットとに基づいて、左エッジサンプルのサブセットと上部エッジサンプルのサブセットとを導出することと、中間サンプルの中間ブロックを生成するために、左エッジサンプルのサブセットと上部エッジサンプルのサブセットとにアフィンモデルを適用することと、最終予測ブロックを生成するために、現在ブロックの左エッジ近隣サンプルのセットと上部エッジ近隣サンプルのセットとを使用して、中間サンプルをフィルタ処理することと、最終予測ブロックに基づいてビデオデータの現在ブロックを復号することと、を行うように同様に構成され得る。
[0084]本開示では、概して、シンタックス要素などのある情報を「シグナリング」することに言及することがある。「シグナリング」という用語は、概して、符号化ビデオデータを復号するために使用されるシンタックス要素および／または他のデータの値の通信を指し得る。すなわち、ビデオエンコーダ２００は、ビットストリーム中でシンタックス要素の値をシグナリングし得る。概して、シグナリングは、ビットストリーム中に値を生成することを指す。上述されたように、ソースデバイス１０２は、実質的にリアルタイムでビットストリームを宛先デバイス１１６に移送するか、または、宛先デバイス１１６による後の取出しのためにシンタックス要素を記憶デバイス１１２に記憶するときに行われ得るように、非リアルタイムでビットストリームを宛先デバイス１１６に移送し得る。
[0085]図２Ａと図２Ｂとは、例示的なＱＴＢＴ構造１３０と、対応するＣＴＵ１３２とを示す概念図である。実線はクワッドツリースプリッティングを表し、点線はバイナリツリースプリッティングを示す。バイナリツリーの各スプリット（すなわち、非リーフ）ノードでは、どのスプリッティングタイプ（すなわち、水平または垂直）が使用されるかを示すために１つのフラグがシグナリングされ、ここで、この例では、０は水平スプリッティングを示し、１は垂直スプリッティングを示す。クワッドツリースプリッティングでは、クワッドツリーノードが、ブロックを、等しいサイズをもつ４つのサブブロックに水平および垂直にスプリットするので、スプリッティングタイプを示す必要がない。したがって、ＱＴＢＴ構造１３０の領域ツリーレベル（すなわち、実線）についての（スプリッティング情報などの）シンタックス要素と、ＱＴＢＴ構造１３０の予測ツリーレベル（すなわち、破線）についての（スプリッティング情報などの）シンタックス要素とを、ビデオエンコーダ２００は符号化し得、ビデオデコーダ３００は復号し得る。ＱＴＢＴ構造１３０の端末リーフノードによって表されるＣＵについての、予測および変換データなどのビデオデータを、ビデオエンコーダ２００は符号化し得、ビデオデコーダ３００は復号し得る。
[0086]概して、図２ＢのＣＴＵ１３２は、第１および第２のレベルにおいてＱＴＢＴ構造１３０のノードに対応するブロックのサイズを定義するパラメータに関連付けられ得る。これらのパラメータは、（サンプル中のＣＴＵ１３２のサイズを表す）ＣＴＵサイズと、（最小許容クワッドツリーリーフノードサイズを表すＭｉｎＱＴＳｉｚｅ）最小クワッドツリーサイズと、（最大許容バイナリツリールートノードサイズを表すＭａｘＢＴＳｉｚｅ）最大バイナリツリーサイズと、（最大許容バイナリツリー深度を表すＭａｘＢＴＤｅｐｔｈ）最大バイナリツリー深度と、（最小許容バイナリツリーリーフノードサイズを表すＭｉｎＢＴＳｉｚｅ）最小バイナリツリーサイズとを含み得る。
[0087]ＣＴＵに対応するＱＴＢＴ構造のルートノードは、ＱＴＢＴ構造の第１のレベルにおいて４つの子ノードを有し得、それらの各々は、クワッドツリー区分に従って区分され得る。すなわち、第１のレベルのノードは、（子ノードを有しない）リーフノードであるか、あるいは４つの子ノードを有するかのいずれかである。ＱＴＢＴ構造１３０の例は、ブランチのために実線を有する親ノードと子ノードとを含むようなノードを表す。第１のレベルのノードが最大許容バイナリツリールートノードサイズ（ＭａｘＢＴＳｉｚｅ）よりも大きくない場合、ノードは、それぞれのバイナリツリーによってさらに区分され得る。１つのノードのバイナリツリースプリッティングは、スプリットから生じるノードが最小許容バイナリツリーリーフノードサイズ（ＭｉｎＢＴＳｉｚｅ）または最大許容バイナリツリー深度（ＭａｘＢＴＤｅｐｔｈ）に達するまで反復され得る。ＱＴＢＴ構造１３０の例は、ブランチのために破線を有するようなノードを表す。バイナリツリーリーフノードはコーディングユニット（ＣＵ）と呼ばれ、ＣＵは、どんなさらなる区分もない、予測（たとえば、ピクチャ内またはピクチャ間予測）ならびに変換のために使用される。上記で論じられたように、ＣＵは「ビデオブロック」または「ブロック」と呼ばれることもある。
[0088]ＱＴＢＴ区分構造の一例では、ＣＴＵサイズは、１２８×１２８（ルーマサンプルおよび２つの対応する６４×６４クロマサンプル）として設定され、ＭｉｎＱＴＳｉｚｅは１６×１６として設定され、ＭａｘＢＴＳｉｚｅは６４×６４として設定され、（幅と高さの両方について）ＭｉｎＢＴＳｉｚｅは４として設定され、ＭａｘＢＴＤｅｐｔｈは４として設定される。クワッドツリー区分は、クワッドツリーリーフノードを生成するために、最初にＣＴＵに適用される。クワッドツリーリーフノードは、１６×１６（すなわち、ＭｉｎＱＴＳｉｚｅ）から１２８×１２８（すなわち、ＣＴＵサイズ）のサイズを有し得る。リーフクワッドツリーノードが１２８×１２８である場合、このノードは、サイズがＭａｘＢＴＳｉｚｅ（すなわち、この例では、６４×６４）を超えるので、バイナリツリーによってさらにスプリットされないである。他の場合、リーフクワッドツリーノードは、バイナリツリーによってさらに区分される。したがって、クワッドツリーリーフノードはまた、バイナリツリーのルートノードであり、０としてバイナリツリー深度を有する。バイナリツリー深度がＭａｘＢＴＤｅｐｔｈ（この例では４）に達したとき、さらなるスプリッティングは許可されない。ＭｉｎＢＴＳｉｚｅ（この例では４）に等しい幅を有するバイナリツリーノードは、さらなる水平スプリッティングが許可されないことを暗示する。同様に、ＭｉｎＢＴＳｉｚｅに等しい高さを有するバイナリツリーノードは、さらなる垂直スプリッティングがそのバイナリツリーノードのために許可されないことを暗示する。上述されたように、バイナリツリーのリーフノードは、ＣＵと呼ばれ、さらなる区分なしに予測および変換に従ってさらに処理される。
[0089]図３は、矢印が参照サンプルのほうを向いている、イントラ予測の方向の例を示す。ビデオエンコーダ２００とビデオデコーダ３００とは、広角と非広角の両方を使用して、イントラ予測を実施するように構成され得る。イントラ予測モードは、ＤＣ予測モードと、平面予測モードと、方向性（または角度）予測モードとを含む。正方形ブロックのための方向性予測は、図３に示されているように、ＶＶＣテストモデル２（ＶＴＭ２）、Ｊ．Ｃｈｅｎ、Ｙ．Ｙｅ、Ｓ．Ｋｉｍ、「Ａｌｇｏｒｉｔｈｍ ｄｅｓｃｒｉｐｔｉｏｎ ｆｏｒ Ｖｅｒｓａｔｉｌｅ Ｖｉｄｅｏ Ｃｏｄｉｎｇ ａｎｄ Ｔｅｓｔ Ｍｏｄｅｌ ２ （ＶＴＭ２）」、第１１回ＪＶＥＴ会合、リュブリャナ、ＳＩ、２０１８年７月（ＪＶＥＴ－Ｋ１００２）において、現在ブロックの－１３５度と４５度との間の方向を使用する。
[0090]ＶＴＭ２では、イントラ予測のための予測ブロックを指定するために使用されるブロック構造は、正方形square（幅ｗ＝高さｈ）であることに制限されない。矩形または非正方形の予測ブロック（ｗ＞ｈまたはｗ＜ｈ）は、コンテンツの特性に基づいてコーディング効率を増加させることができる。
[0091]そのような矩形ブロックでは、イントラ予測の方向を－１３５度から４５度以内になるように制限することにより、イントラ予測のために、より近い参照サンプルではなくより遠い参照サンプルが使用される状況が生じ得る。そのような設計は、コーディング効率に影響を及ぼす可能性がある。（－１３５度から４５度の角度を超える）より近い参照サンプルが予測のために使用され得るように、制限の範囲を緩和させることがより有益であり得る。そのような場合の一例が図４に与えられている。
[0092]図４は、現在ブロック４００をイントラ予測するために「より近い」参照サンプル（円４０４）が使用されない、８×４矩形ブロック（現在ブロック４００）の一例を示す。代わりに、イントラ予測方向が－１３５度から４５度の範囲内になければならないという制限により、より遠い参照サンプル（円４０２）が使用され得る。
[0093]第１２回ＪＶＥＴ会合中に、広角イントラ予測の修正が、Ｌ．Ｚｈａｏ、Ｘ．Ｚｈａｏ、Ｓ．Ｌｉｕ、Ｘ．Ｌｉ、「ＣＥ３－ｒｅｌａｔｅｄ： Ｕｎｉｆｉｃａｔｉｏｎ ｏｆ ａｎｇｕｌａｒ ｉｎｔｒａ ｐｒｅｄｉｃｔｉｏｎ ｆｏｒ ｓｑｕａｒｅ ａｎｄ ｎｏｎ－ｓｑｕａｒｅ ｂｌｏｃｋｓ」、第１２回ＪＶＥＴ会合、マカオ特別行政区、ＣＮ、２０１８年１０月、ＪＶＥＴ－Ｌ０２７９において提案され、ＶＴＭ３に採用された。ＶＴＭ３は、Ｊ．Ｃｈｅｎ、Ｙ．Ｙｅ、Ｓ．Ｋｉｍ、「Ａｌｇｏｒｉｔｈｍ ｄｅｓｃｒｉｐｔｉｏｎ ｆｏｒ Ｖｅｒｓａｔｉｌｅ Ｖｉｄｅｏ Ｃｏｄｉｎｇ ａｎｄ Ｔｅｓｔ Ｍｏｄｅｌ ３ （ＶＴＭ３）」、第１２回ＪＶＥＴ会合、マカオ特別行政区、ＣＮ、２０１８年１０月、ＪＶＥＴ－Ｌ１００２に記載されている。
[0094]この提案は、正方形ブロックと非正方形ブロックのために角度イントラ予測を統一するための２つの修正を含んだ。第１に、角度予測方向は、すべてのブロック形状の対角方向をカバーするように修正された。第２に、すべての角度方向は、図５Ａ～図５Ｃに示されているように、すべてのブロックアスペクト比（正方形および非正方形）について左下対角方向と右上対角方向との間の範囲内に保持された。加えて、上部参照行と左参照列との中の参照サンプルの数は、すべてのブロック形状について２＊幅＋１と２＊高さ＋１とに制限され得る。
[0095]図５Ａ～図５Ｃは、異なる形状をもつコーディングユニットのためのモードマッピングを示す概念図である。ビデオエンコーダ２００とビデオデコーダ３００とは、様々な形状のための、およびＣＵのサイズ決定された利用可能なイントラ予測モードを決定するためのモードマッピングプロセスを実装し得る。図５Ａは、角度モード再マッピングを必要としない正方形ブロックを示している。図５Ｂは、水平非正方形ブロックの角度モード再マッピングを示している。図５Ｃは、垂直非正方形ブロックの角度モード再マッピングを示している。図５Ｂと図５Ｃとにおいて、依然として６５個の利用可能な角度モードのみがあるが、それらの６５個の利用可能なモードが図５Ａ、図５Ｂ、および図５Ｃの間で異なるように、モードＡおよびＢは、マッピングモード（mapped mode）ＡおよびＢに交換される。
[0096]図５Ａの例では、ＣＵ５０２は正方形ブロックである（すなわち、ｗ＝ｈ）。対角方向５０４は４５度予測角度に対応し、対角方向５０６は－１３５度予測角度に対応する。ＣＵ５０２のためのすべての利用可能な予測モードは、対角方向５０４と対角方向５０６との間にあり、したがって、モード再マッピングは不要である。
[0097]図５Ｂの例では、ＣＵ５１２は、非正方形、矩形ブロックであり、ここで、ｗはｈよりも大きい。対角方向５１４は、ＣＵ５１２の左下コーナーからＣＵ５１２の右上コーナーに走っている対角方向を表し、対角方向５１６は、ＣＵ５１２の右上コーナーからＣＵ５１２の左下コーナーに走っている対角方向を表す。モードＡおよびＢが対角方向５１４と対角方向５１６との間にないとき、モードＡおよびＢは、ＣＵ５１２のためのすべての利用可能な予測モードが対角方向５１４と対角方向５１６との間にあるように、マッピングモードＡおよびＢに交換される。
[0098]図５Ｃの例では、ＣＵ５２２は、非正方形、矩形ブロックであり、ここで、ｈはｗよりも大きい。対角方向５２４は、ＣＵ５２２の左下コーナーからＣＵ５２２の右上コーナーに走っている対角方向を表し、対角方向５２６は、ＣＵ５２２の右上コーナーからＣＵ５２２の左下コーナーに走っている対角方向を表す。モードＡおよびＢが対角方向５２４と対角方向５２６との間にないとき、モードＡおよびＢは、ＣＵ５２２のためのすべての利用可能な予測モードが対角方向６２４と対角方向５２６との間にあるように、マッピングモードＡおよびＢに交換される。
[0099]図６は、ＶＴＭ２において採用された広角の図である。図７Ａは、６５個の角度モードに加えて示されている（図６では－１から－１０および６７から７６とラベリングされた）広角モードを示す。図７Ａの例では、モード５０は－９０度の予測角度に対応する。モード６６は－１３５度の予測角度に対応し、モード２は４５度の予測角度に対応する。
[0100]図７Ａは、合計９３個の角度モードのためのモード２および６６以外のＶＴＭ３における（図７Ａでは－１から－１４および６７から８０とラベリングされた）広角の一例を示す。図８の例では、モード５０は－９０度の予測角度に対応する。モード６６は－１３５度の予測角度に対応し、モード２は４５度の予測角度に対応する。ＶＴＭ３は９５個のモードを定義しているが、どんなブロックサイズでも６７個のモードのみが許容される。許容される正確なモードは、ブロックの幅と高さの比に依存する。これは、ブロックサイズに基づいてモード範囲を制限することによって達成される。
[0101]図７Ｂは、イントラ予測モードとイントラ予測角度との間の関係を示す表である。特に、図７Ｂの表１は、ＶＴＭ３におけるイントラ予測モードｐｒｅｄＭｏｄｅＩｎｔｒａと角度パラメータｉｎｔｒａＰｒｅｄＡｎｇｌｅとの間のマッピングテーブルを指定している。ＶＴＭ３は、Ｂ．Ｂｒｏｓｓ、Ｊ．Ｃｈｅｎ、Ｓ．Ｌｉｕ、「Ｖｅｒｓａｔｉｌｅ Ｖｉｄｅｏ Ｃｏｄｉｎｇ （Ｄｒａｆｔ ３）」、第１２回ＪＶＥＴ会合、マカオ特別行政区、ＣＮ、２０１８年１０月、ＪＶＥＴ－Ｌ１００に記載されている。
[0102]表１では、非正方形ブロック対角と対応する角度モード（angular mode）は、キャレット記号（＾）で示されている。垂直および水平モードは、参照のためにナンバー記号（＃）で示されている。正方形ブロック対角モードは、表１にアスタリスク（＊）で示されている。以下では、正のｉｎｔｒａＰｒｅｄＡｎｇｌｅ値をもつ角度モードは、正の角度モードと呼ばれ（モードインデックス＜１８または＞５０）、一方、負のｉｎｔｒａＰｒｅｄＡｎｇｌｅ値をもつ角度モードは、負の角度モードと呼ばれる（モードインデックス＞１８および＜５０）。
[0103]逆角度パラメータｉｎｖＡｎｇｌｅは、次のようにｉｎｔｒａＰｒｅｄＡｎｇｌｅに基づいて導出される。
[0104]常に３２の倍数（０、３２、６４、１２８、２５６、５１２）であるｉｎｔｒａＰｒｅｄＡｎｇｌｅ値は、ＶＴＭ３仕様における場合のように、非分数参照アレイサンプルからの予測と対応することに留意されたい。
[0105]ビデオエンコーダ２００とビデオデコーダ３００とは、イントラサブパーティションコーディング（ＩＳＰ：intra sub-partition）を実施するように構成され得る。イントラサブパーティション（ＩＳＰ）コーディングモードは、Ｓ．Ｄｅ Ｌｕｘａｎ Ｈｅｒｎａｎｄｅｚ、Ｈ．Ｓｃｈｗａｒｚ、Ｄ．Ｍａｒｐｅ、Ｔ．Ｗｉｅｇａｎｄ（ＨＨＩ）「ＣＥ３： Ｌｉｎｅ－ｂａｓｅｄ ｉｎｔｒａ ｃｏｄｉｎｇ ｍｏｄｅ」（以下では、「ＪＶＥＴ－Ｌ００７６」）において提案された。ＩＳＰコーディングモードを使用してビデオデータをコーディングするとき、ビデオエンコーダ２００とビデオデコーダ３００とは、ブロックサイズ寸法に応じて、ルーマイントラ予測されたブロックを垂直方向または水平方向に２つまたは４つのサブパーティションに分割（たとえば、スプリットまたは区分）するように構成され得る。ＩＳＰコーディングモードにおけるブロックスプリッティングの例が、図８と図９とに関して以下で説明される。
[0106]図８は、ブロックの例示的な垂直および水平分割を示す概念図である。図８に示されているように、現在ブロック８００はＩＳＰブロックである。すなわち、ブロック８００は、サブパーティション（sub-partitions）にスプリットされるべきであるブロックであり、サブパーティションの各々は、イントラ予測を使用してコーディングされることになる。現在ブロック８００は、高さ（Ｈ）と幅とを有する。ＩＳＰコーディングモードでは、ビデオエンコーダ２００および／またはビデオデコーダ３００は、水平方向または垂直方向のいずれかに現在ブロック８００をスプリットするように構成され得る。図８の例では、ビデオエンコーダ２００および／またはビデオデコーダ３００は、現在ブロック８００を２つのサブパーティションにスプリットするように構成され得る。水平スプリットタイプを使用するとき、ビデオエンコーダ２００および／またはビデオデコーダ３００は、現在ブロック８００をサブパーティション８０２とサブパーティション８０４とにスプリットし得る。サブパーティション８０２とサブパーティション８０４との各々は、Ｈ／２に等しい高さと、Ｗに等しい幅とを有する。垂直スプリットタイプを使用するとき、ビデオエンコーダ２００および／またはビデオデコーダ３００は、現在ブロック８００をサブパーティション８０６とサブパーティション８０８とにスプリットし得る。サブパーティション８０６とサブパーティション８０８との各々は、Ｈに等しい高さと、Ｗ／２に等しい幅とを有する。
[0107]図９は、ブロックの垂直および水平分割の他の例を示す概念図である。図９は、ＩＳＰブロックである、現在ブロック９００を再び示している。この例では、ビデオエンコーダ２００および／またはビデオデコーダ３００は、現在ブロック９００を４つのサブパーティションにスプリットし得る。水平スプリットタイプを使用するとき、ビデオエンコーダ２００および／またはビデオデコーダ３００は、現在ブロック９００を、サブパーティション９１０と、サブパーティション９１２と、サブパーティション９１４と、サブパーティション９１６とにスプリットし得る。サブパーティション９１０と、サブパーティション９１２と、サブパーティション９１４と、サブパーティション９１６との各々は、Ｈ／４に等しい高さと、Ｗに等しい幅とを有する。垂直スプリットタイプを使用するとき、ビデオエンコーダ２００および／またはビデオデコーダ３００は、現在ブロック９００を、サブパーティション９２０と、サブパーティション９２２と、サブパーティション９２４と、サブパーティション９２６とにスプリットし得る。サブパーティション９２０と、サブパーティション９２２と、サブパーティション９２４と、サブパーティション９２６との各々は、Ｈに等しい高さと、Ｗ／４に等しい幅とを有する。
[0108]図８と図９とは、例示的なスプリットタイプにすぎない。ＩＳＰの他の例では、現在ブロックは、任意の数（たとえば、３、５、６など）の区分（パーティション）にスプリットされ得る。加えて、いくつかの例では、サブパーティションのサイズは、対称的である必要はない。すなわち、サブパーティションは、異なるサイズを有し得る。
[0109]一例では、利用されるイントラコーディングモードとスプリットタイプとに基づいて、「通常（normal）」順序および「逆(reversed)」順序と呼ばれる、処理順序の２つの異なるクラスが使用され得る。通常順序では、処理されるべき第１のサブパーティションは、ＣＵの左上（top-left）サンプルを含んでおり、次いで、下方（水平スプリット）または右方（垂直スプリット）に進む、サブパーティションである。ビデオエンコーダ２００は、ＣＵのスプリッティングタイプ（たとえば、水平または垂直スプリット）を示すビットをビデオデコーダ３００にシグナリングし得る。別の例では、逆処理順序は、ＣＵの左下（bottom-left）サンプルを含んでいるサブパーティションで開始し、上方に進むか、あるいはＣＵの右上（top-right）サンプルを含んでいるサブパーティションで開始し、左方に進むかのいずれかである。
[0110]ＪＶＥＴ ＷＤ４では、通常処理順序のみを使用するＩＳＰの変形形態が使用される。サブブロックおよびサブパーティションという用語は、本明細書では互換的に使用され、両方とも、ＩＳＰを使用してコーディングブロックを区分することによって取得されたブロックを指すことに留意されたい。
[0111]ＪＶＥＴ ＷＤ４におけるＩＳＰに関連するいくつかのシンタックスおよびセマンティクスが以下に示され、記号＜＜＊＊＞＞および＜＜／＊＊＞は、関係するシンタックスを示す。
コーディングユニットのセマンティクス
＜＜＊＊＞＞１に等しいｉｎｔｒａ＿ｓｕｂｐａｒｔｉｔｉｏｎｓ＿ｍｏｄｅ＿ｆｌａｇ［ｘ０］［ｙ０］は、現在イントラコーディングユニットが、ＮｕｍＩｎｔｒａＳｕｂＰａｒｔｉｔｉｏｎｓ［ｘ０］［ｙ０］個の矩形変換ブロックサブパーティションに区分されることを指定する。０に等しいｉｎｔｒａ＿ｓｕｂｐａｒｔｉｔｉｏｎｓ＿ｍｏｄｅ＿ｆｌａｇ［ｘ０］［ｙ０］は、現在イントラコーディングユニットが矩形変換ブロックサブパーティションに区分されないことを指定する。
＜＜＊＊＞＞１に等しいｉｎｔｒａ＿ｓｕｂｐａｒｔｉｔｉｏｎｓ＿ｍｏｄｅ＿ｆｌａｇ［ｘ０］［ｙ０］は、現在イントラコーディングユニットが、ＮｕｍＩｎｔｒａＳｕｂＰａｒｔｉｔｉｏｎｓ［ｘ０］［ｙ０］個の矩形変換ブロックサブパーティションに区分されることを指定する。０に等しいｉｎｔｒａ＿ｓｕｂｐａｒｔｉｔｉｏｎｓ＿ｍｏｄｅ＿ｆｌａｇ［ｘ０］［ｙ０］は、現在イントラコーディングユニットが矩形変換ブロックサブパーティションに区分されないことを指定する。
ｉｎｔｒａ＿ｓｕｂｐａｒｔｉｔｉｏｎｓ＿ｍｏｄｅ＿ｆｌａｇ［ｘ０］［ｙ０］が存在しないとき、それは０に等しいと推論される。
ｉｎｔｒａ＿ｓｕｂｐａｒｔｉｔｉｏｎｓ＿ｓｐｌｉｔ＿ｆｌａｇ［ｘ０］［ｙ０］は、イントラサブパーティションスプリットタイプが水平方向であるか垂直方向であるかを指定する。ｉｎｔｒａ＿ｓｕｂｐａｒｔｉｔｉｏｎｓ＿ｍｏｄｅ＿ｆｌａｇ［ｘ０］［ｙ０］が存在しないとき、それは０に等しいと推論される。
変数ＩｎｔｒａＳｕｂＰａｒｔｉｔｉｏｎｓＳｐｌｉｔＴｙｐｅは、表２－３に示されているように現在ルーマコーディングブロックのために使用されるスプリットのタイプを指定する。ＩｎｔｒａＳｕｂＰａｒｔｉｔｉｏｎｓＳｐｌｉｔＴｙｐｅは次のように導出される。
－ ｉｎｔｒａ＿ｓｕｂｐａｒｔｉｔｉｏｎｓ＿ｍｏｄｅ＿ｆｌａｇ［ｘ０］［ｙ０］が０に等しい場合、ＩｎｔｒａＳｕｂＰａｒｔｉｔｉｏｎｓＳｐｌｉｔＴｙｐｅは０に等しく設定される。
－ 他の場合、ＩｎｔｒａＳｕｂＰａｒｔｉｔｉｏｎｓＳｐｌｉｔＴｙｐｅは、１＋ｉｎｔｒａ＿ｓｕｂｐａｒｔｉｔｉｏｎｓ＿ｓｐｌｉｔ＿ｆｌａｇ［ｘ０］［ｙ０］に等しく設定される。
変数ＮｕｍＩｎｔｒａＳｕｂＰａｒｔｉｔｉｏｎｓは、イントラルーマコーディングブロックがそれに分割される変換ブロックサブパーティションの数を指定する。ＮｕｍＩｎｔｒａＳｕｂＰａｒｔｉｔｉｏｎｓは次のように導出される。
－ ＩｎｔｒａＳｕｂＰａｒｔｉｔｉｏｎｓＳｐｌｉｔＴｙｐｅがＩＳＰ＿ＮＯ＿ＳＰＬＩＴに等しい場合、ＮｕｍＩｎｔｒａＳｕｂＰａｒｔｉｔｉｏｎｓは１に等しく設定される。
－ そうでない場合、次の条件のうちの１つが真である場合、ＮｕｍＩｎｔｒａＳｕｂＰａｒｔｉｔｉｏｎｓは２に等しく設定される。
－ ｃｂＷｉｄｔｈが４に等しく、ｃｂＨｅｉｇｈｔが８に等しい、
－ ｃｂＷｉｄｔｈが８に等しく、ｃｂＨｅｉｇｈｔが４に等しい
－ 他の場合、ＮｕｍＩｎｔｒａＳｕｂＰａｒｔｉｔｉｏｎｓは４に等しく設定される。＜＜／＊＊＞＞
[0112]図１０は、コーディングブロックのイントラ予測のために使用され得る複数の参照ラインからの参照サンプルの図を示す。ビデオエンコーダ２００とビデオデコーダ３００とは、複数の参照ライン予測を実施するように構成され得る。コーディングブロックの近隣にある（in the neighborhood）サンプルは、ブロックのイントラ予測のために使用される。典型的には、コーディングブロックの左境界と上部境界とに最も近い再構築された参照サンプルラインが、イントラ予測のための参照サンプルとして使用される。しかしながら、ＶＶＣ ＷＤ４は、コーディングブロックの近隣にある他のサンプルが参照サンプルとして使用されることをも可能にする。図１０は、イントラ予測のために使用され得る参照サンプルラインを示している。コーディングブロックごとに、使用される参照ラインを示すインデックスがシグナリングされる。
－ ｃｂＷｉｄｔｈが８に等しく、ｃｂＨｅｉｇｈｔが４に等しい
－ 他の場合、ＮｕｍＩｎｔｒａＳｕｂＰａｒｔｉｔｉｏｎｓは４に等しく設定される。＜＜／＊＊＞＞
[0112]図１０は、コーディングブロックのイントラ予測のために使用され得る複数の参照ラインからの参照サンプルの図を示す。ビデオエンコーダ２００とビデオデコーダ３００とは、複数の参照ライン予測を実施するように構成され得る。コーディングブロックの近隣にある（in the neighborhood）サンプルは、ブロックのイントラ予測のために使用される。典型的には、コーディングブロックの左境界と上部境界とに最も近い再構築された参照サンプルラインが、イントラ予測のための参照サンプルとして使用される。しかしながら、ＶＶＣ ＷＤ４は、コーディングブロックの近隣にある他のサンプルが参照サンプルとして使用されることをも可能にする。図１０は、イントラ予測のために使用され得る参照サンプルラインを示している。コーディングブロックごとに、使用される参照ラインを示すインデックスがシグナリングされる。
[0113]ＶＶＣ ＷＤ４では、０、１および３に等しいＭＲＬＩｄｘをもつ参照ラインのみが使用され得る。ブロックをコーディングするために使用される参照ラインへのインデックス（値０、１および２は、それぞれ、ＭＲＬＩｄｘ０、１および３をもつラインを示す）は、短縮単項コードワード（truncated unary codeword）を用いてコーディングされる。使用される参照ラインはＭＲＬＩｄｘ＞０を有するので、平面（planar）およびＤＣモードは使用されない。
[0114]ビデオエンコーダ２００とビデオデコーダ３００とは、位置依存のイントラ予測組合せ（position dependent intra prediction combination）を実施するように構成され得る。ブロックベースのイントラ予測は、ビデオ規格のそのようなＡＶＣ、ＨＥＶＣ、ＶＶＣなどの一部である。典型的には、隣接する再構築ブロックからの参照サンプルのラインが、現在ブロック内のサンプルを予測するために使用される。サンプルの１つまたは複数のラインが、予測のために使用され得る。参照サンプルは、ＤＣ、平面、および角度／方向性モードなど、典型的なイントラ予測モードによって採用される。
[0115]位置依存のイントラ予測組合せ（ＰＤＰＣ：Position Dependent Intra Prediction Combination）は、Ｊ．Ｐｆａｆｆ、Ｂ．Ｓｔａｌｌｅｎｂｅｒｇｅｒ、Ｍ．Ｓｃｈａｆｅｒ、Ｐ．Ｍｅｒｋｌｅ、Ｐ．Ｈｅｌｌｅ、Ｔ．Ｈｉｎｚ、Ｈ．Ｓｃｈｗａｒｚ、Ｄ．Ｍａｒｐｅ、Ｔ．Ｗｉｅｇａｎｄ（ＨＨＩ）「ＣＥ３： Ａｆｆｉｎｅ ｌｉｎｅａｒ ｗｅｉｇｈｔｅｄ ｉｎｔｒａ ｐｒｅｄｉｃｔｉｏｎ （ＣＥ３－４．１， ＣＥ３－４．２）」（ＪＶＥＴ－Ｎ０２１７）において提案され、ＪＶＥＴ－Ｍ０１０２においてさらに簡略化された。提案のためにＪＶＥＴの呼出しに対して提出された、Ｊ．Ｃｈｅｎ、Ｙ．Ｙｅ、Ｓ．Ｈ．Ｋｉｍ、「Ａｌｇｏｒｉｔｈｍ ｄｅｓｃｒｉｐｔｉｏｎ ｆｏｒ Ｖｅｒｓａｔｉｌｅ Ｖｉｄｅｏ Ｃｏｄｉｎｇ ａｎｄ Ｔｅｓｔ Ｍｏｄｅｌ ３ （ＶＴＭ３）」（ＪＶＥＴ－Ｌ１００２）、マカオ、ＣＮ、２０１８年１０月では、ＰＤＰＣは、以下に要約されるシグナリングなしに、平面、ＤＣ、水平および垂直モードに適用される。Ｆ．Ｂｏｓｓｅｎ、Ｋ．Ｍｉｓｒａ、「Ｎｏｎ－ＣＥ３： Ａ ｕｎｉｆｉｅｄ ｌｕｍａ ｉｎｔｒａ ｍｏｄｅ ｌｉｓｔ ｃｏｎｓｔｒｕｃｔｉｏｎ ｐｒｏｃｅｓｓ」（ＪＶＥＴ－Ｍ０５２８）では、ＰＤＰＣは、対角方向性モードと、対角方向性モードに隣接するモードとにさらに拡張された。
[0116]（ｘ，ｙ）に位置する予測サンプルｐｒｅｄ（ｘ，ｙ）は、イントラ予測モード（ＤＣ、平面、角度）で予測され、それの値は、次のように、単一の参照サンプルラインのためのＰＤＰＣ式を使用して修正される。
ここで、Ｒx,-1、Ｒ-1,yは、それぞれ、現在サンプル（ｘ，ｙ）の上部および左に位置する参照サンプルを表し、Ｒ-1,-1は、現在ブロックの左上コーナーに位置する参照サンプルを表す。ＤＣモードでは、重みは、寸法、幅および高さをもつブロックについて次のように計算される。
ただし、シフト＝（ｌｏｇ2（幅）＋ｌｏｇ2（高さ）＋２）＞＞２、一方、平面モードではｗＴＬ＝０であり、水平モードではｗＴＬ＝ｗＴであり、垂直モードではｗＴＬ＝ｗＬである。ＰＤＰＣ重みは、加算およびシフトのみを用いて計算され得る。ｐｒｅｄ（ｘ，ｙ）の値は、式１を使用して単一のステップで計算され得る。
[0117]図１１Ａは、１つの４×４ブロック内の（０，０）位置のためのＤＣモードＰＤＰＣ重み（ｗＬ，ｗＴ，ｗＴＬ）を示す。図１１Ｂは、１つの４×４ブロック内の（１，０）位置のためのＤＣモードＰＤＰＣ重み（ｗＬ，ｗＴ，ｗＴＬ）を示す。ＰＤＰＣがＤＣ、平面、水平、および垂直イントラモードに適用された場合、ＤＣモード境界フィルタまたは水平／垂直モードエッジフィルタなど、追加の境界フィルタは適用されない。式１は、追加の参照サンプルラインを含むように一般化され得る（たとえば、現在ブロックの１行上または１左行のサンプルに限定されない）。この場合、複数の参照サンプルが、Ｒx,-1、Ｒ-1,y、Ｒ-1,-1の近隣において利用可能であり、各々は、たとえば、トレーニングによって最適化され得る、割り当てられた重みを有し得る。
[0118]２０１９年４月１日に出願された米国特許出願第１６／３７１，６３８号に記載された技法は、ＰＤＰＣを、対角イントラモードに、および対角モードに隣接する角度モードに拡張する。意図された対角イントラモードは、左下および右上方向に従って予測するモードであり、ならびにいくつかの隣接角度モード、たとえば、左下対角モードと垂直モードとの間のＮ個の隣接モード、および右上対角モードと水平モードとの間のＮまたはＭ個の隣接モードである。図１２は、角度モードの識別を示す。概して、隣接モードは、利用可能な角度モードの選択されたサブセットであり得る。角度モード間の間隔は不均一であり得、いくつかの角度モードはスキップされ得る。
[0119]図１３Ａ～図１３Ｄは、対角および隣接角度イントラモードへのＰＤＰＣ拡張によって使用されるサンプルの定義を示す。図１３Ａは、右上対角モードへのＰＤＰＣの拡張のための参照サンプルＲx,-1、Ｒ-1,yおよびＲ-1,-1の定義を示している。予測サンプルｐｒｅｄ（ｘ’，ｙ’）は、予測ブロック内の（ｘ’，ｙ’）に位置する。参照サンプルＲx,-1の座標ｘは、ｘ＝ｘ’＋ｙ’＋１によって与えられ、参照サンプルＲ-1,yの座標ｙは、ｙ＝ｘ’＋ｙ’＋１によって同様に与えられる。右上対角モードのＰＤＰＣ重みは、たとえば、ｗＴ＝１６＞＞（（ｙ’＜＜１）＞＞シフト）、ｗＬ＝１６＞＞（（ｘ’＜＜１）＞＞シフト）、ｗＴＬ＝０である。
[0120]同様に、図１３Ｂは、左下対角モードへのＰＤＰＣの拡張のための参照サンプルＲx,-1、Ｒ-1,yおよびＲ-1,-1の定義を示している。参照サンプルＲx,-1の座標ｘは、ｘ＝ｘ’＋ｙ’＋１によって与えられ、参照サンプルＲ-1,yの座標ｙは、ｙ＝ｘ’＋ｙ’＋１である。右上対角モードのＰＤＰＣ重みは、たとえば、ｗＴ＝１６＞＞（（ｙ’＜＜１）＞＞シフト）、ｗＬ＝１６＞＞（（ｘ’＜＜１）＞＞シフト）、ｗＴＬ＝０である。
[0121]図１３Ａと図１３Ｂとでは、ビデオエンコーダ２００とビデオデコーダ３００とはそれぞれ、現在ブロックの上にある（たとえば、すぐ上にある、ただし、本技法はそのように限定されない）行を決定し、決定された行におけるｘ座標を決定し得る。決定された行におけるｘ座標は、予測サンプルのｘ座標＋予測サンプルのｙ座標＋１に等しい。ビデオエンコーダ２００とビデオデコーダ３００とは、決定された行と、決定されたｘ座標とに基づいて、１つまたは複数の参照サンプルのうちの１つの参照サンプルを決定し得る。
[0122]同様に、図１３Ａと図１３Ｂとでは、ビデオエンコーダ２００とビデオデコーダ３００とは、現在ブロックの左にある（たとえば、すぐ左にある、ただし、本技法はそのように限定されない）列を決定し、決定された列におけるｙ座標を決定し得る。決定された列におけるｙ座標は、予測サンプルのｘ座標＋予測サンプルのｙ座標＋１に等しい。ビデオエンコーダ２００とビデオデコーダ３００とは、決定された列と、決定されたｙ座標とに基づいて、１つまたは複数の参照サンプルのうちの１つの参照サンプルを決定し得る。
[0123]決定されたｘおよびｙ座標に基づいて、ビデオエンコーダ２００とビデオデコーダ３００とは、参照サンプル（たとえば、決定された行および決定されたｘ座標に基づく第１の参照サンプルと、決定された列および決定されたｙ座標に基づく第２の参照サンプルと）を決定し得る。また、ビデオエンコーダ２００とビデオデコーダ３００とは、対角モード（たとえば、２つの例として、右上対角モードおよび左下対角モード）のための上記の例示的な技法に従って、重みを決定し得る。次いで、（１つの非限定的な例として）式１に基づいて、ビデオエンコーダ２００とビデオデコーダ３００とは、修正された予測サンプル（たとえば、ｐｒｅｄ（ｘ，ｙ））を決定し得る。
[0124]隣接する右上対角モードの場合が図１３Ｃに示されている。概して、図３において定義された角度αについて、参照サンプルＲ-1,yのｙ座標は、ｙ＝ｙ’＋ｔａｎ（α）×（ｘ’＋１）のように決定され、Ｒx,-1のｘ座標は、ｘ＝ｘ’＋ｃｏｔａｎ（α）×（ｙ’＋１）によって与えられ、ｔａｎ（α）およびｃｏｔａｎ（α）は、角度αのタンジェントおよびコタンジェントである。隣接する右上対角モードのＰＤＰＣ重みは、たとえば、ｗＴ＝３２＞＞（（ｙ’＜＜１）＞＞シフト）、ｗＬ＝３２＞＞（（ｘ’＜＜１）＞＞シフト）、ｗＴＬ＝０またはｗＴ＝３２＞＞（（ｙ’＜＜１）＞＞シフト）、ｗＬ＝０、ｗＴＬ＝０である。
[0125]同様に、隣接する左下対角モードの場合が図１３Ｄに示されている。概して、図３において定義された角度βについて、参照サンプルＲx,-1のｘ座標は、ｘ＝ｘ’＋ｔａｎ（β）×（ｙ’＋１）のように決定され、Ｒ-1,yのｙ座標は、ｙ＝ｙ’＋ｃｏｔａｎ（β）×（ｘ’＋１）によって与えられ、ｔａｎ（β）およびｃｏｔａｎ（β）は、角度βのタンジェントおよびコタンジェントである。隣接する左下対角モードのＰＤＰＣ重みは、たとえば、ｗＬ＝３２＞＞（（ｘ’＜＜１）＞＞シフト）、ｗＴ＝３２＞＞（（ｙ’＜＜１）＞＞シフト）、ｗＴＬ＝０またはｗＬ＝３２＞＞（（ｘ’＜＜１）＞＞シフト）、ｗＴ＝０、ｗＴＬ＝０である。
[0126]図１３Ｃと図１３Ｄとでは、ビデオエンコーダ２００とビデオデコーダ３００とはそれぞれ、現在ブロックの上にある（たとえば、すぐ上にある、ただし、本技法はそのように限定されない）行を決定し、決定された行におけるｘ座標を決定し得る。決定された行におけるｘ座標は、角度イントラ予測モードの角度に基づく。ビデオエンコーダ２００とビデオデコーダ３００とは、決定された行と、決定されたｘ座標とに基づいて、１つまたは複数の参照サンプルのうちの１つの参照サンプルを決定し得る。
[0127]決定された行におけるｘ座標を決定するために、ビデオエンコーダ２００とビデオデコーダ３００とは、角度イントラ予測モードの角度の（たとえば、隣接する右上対角モードの）コタンジェントまたは（たとえば、隣接する左下対角モードの）タンジェントのうちの１つを決定し得る。ビデオエンコーダ２００とビデオデコーダ３００とは、角度イントラ予測モードの角度のコタンジェントまたはタンジェントのうちの１つと、予測サンプルのｘ座標と、予測サンプルのｙ座標とに基づいて、決定された行におけるｘ座標を決定し得る。たとえば、隣接する右上対角角度イントラ予測モードでは、決定された行におけるｘ座標は、ｘ’＋ｃｏｔａｎ（α）×（ｙ’＋１）に等しく、隣接する左下対角モードでは、決定された行におけるｘ座標は、ｘ’＋ｔａｎ（β）×（ｙ’＋１）に等しく、ここで、ｘ’およびｙ’は、修正されている予測サンプルのｘおよびｙ座標である。
[0128]同様に、図１３Ｃと図１３Ｄとでは、ビデオエンコーダ２００とビデオデコーダ３００とはそれぞれ、現在ブロックの左にある（たとえば、すぐ左にある、ただし、本技法はそのように限定されない）列を決定し、決定された列におけるｙ座標を決定し得る。決定された列におけるｙ座標は、角度イントラ予測モードの角度に基づく。ビデオエンコーダ２００とビデオデコーダ３００とは、決定された列と、決定されたｙ座標とに基づいて、１つまたは複数の参照サンプルのうちの１つの参照サンプルを決定し得る。
[0129]決定された列におけるｙ座標を決定するために、ビデオエンコーダ２００とビデオデコーダ３００とは、角度イントラ予測モードの角度の（たとえば、隣接する左下対角モードの）コタンジェントまたは（たとえば、隣接する右上対角モードの）タンジェントのうちの１つを決定し得る。ビデオエンコーダ２００とビデオデコーダ３００とは、角度イントラ予測モードの角度のコタンジェントまたはタンジェントのうちの１つと、予測サンプルのｘ座標と、予測サンプルのｙ座標とに基づいて、決定された列におけるｙ座標を決定し得る。たとえば、隣接する右上対角角度イントラ予測モードでは、決定された列におけるｙ座標は、ｙ’＋ｔａｎ（α）×（ｘ’＋１）に等しく、隣接する左下対角モードでは、決定された列におけるｙ座標は、ｙ’＋ｃｏｔａｎ（β）×（ｘ’＋１）に等しく、ここで、ｘ’およびｙ’は、修正されている予測サンプルのｘおよびｙ座標である。
[0130]決定されたｘおよびｙ座標に基づいて、ビデオエンコーダ２００とビデオデコーダ３００とは、参照サンプル（たとえば、決定された行および決定されたｘ座標に基づく第１の参照サンプルと、決定された列および決定されたｙ座標に基づく第２の参照サンプルと）を決定し得る。また、ビデオエンコーダ２００とビデオデコーダ３００とは、隣接対角モード（たとえば、２つの例として、隣接する右上対角モードおよび隣接する左下対角モード）のための上記の例示的な技法に従って、重みを決定し得る。次いで、（１つの非限定的な例として）式１に基づいて、ビデオエンコーダ２００とビデオデコーダ３００とは、修正された予測サンプル（たとえば、ｐｒｅｄ（ｘ，ｙ））を決定し得る。
[0131]上記では、右上および左下対角モードと、隣接する右上対角モードおよび隣接する左下対角モードとのための例示的な技法について、ＰＤＰＣが適用され得る例示的な角度モードとして説明している。例示的な技法は、他の角度モードに同様に拡張され得る。また、いくつかの例では、１つまたは複数の参照サンプルは、予測ブロック中の予測サンプルのｘ座標とｙ座標の両方とは異なるｘ座標とｙ座標の両方を有する。たとえば、上記の例示的な式は、参照サンプルを決定するために、それぞれの行および列におけるｘ座標およびｙ座標を決定するために、ｘ座標は、修正されている予測サンプルのｘ座標とは異なり、ｙ座標は、修正されている予測サンプルのｙ座標とは異なる。すなわち、参照サンプルは、修正されている予測サンプルと同じ行または同じ列中になくてよい。
[0132]ＤＣ、平面、水平および垂直モードＰＤＰＣの場合のように、対角および隣接対角モードのために、ＰＤＰＣがこれらの角度モードに拡張されたとき、たとえば‘Ｊ．Ｃｈｅｎ、Ｅ．Ａｌｓｈｉｎａ、Ｇ．Ｊ．Ｓｕｌｌｉｖａｎ、Ｊ．－Ｒ．Ｏｈｍ、Ｊ．Ｂｏｙｃｅ、「Ａｌｇｏｒｉｔｈｍ ｄｅｓｃｒｉｐｔｉｏｎ ｏｆ Ｊｏｉｎｔ Ｅｘｐｌｏｒａｔｉｏｎ Ｔｅｓｔ Ｍｏｄｅｌ ７」、第７回ＪＶＥＴ会合、トリノ、イタリア、２０１７年７月、ＪＶＥＴ－Ｇ１００１に指定されているように、追加の境界フィルタ処理ない。
[0133]ビデオエンコーダ２００とビデオデコーダ３００とは、ＡＬＷＩＰを実施するように構成され得る。すなわち、ビデオエンコーダ２００とビデオデコーダ３００とは、ＡＬＷＩＰモードでビデオデータのおよび復号ブロックを符号化するように構成され得る。ＪＶＥＴ－Ｎ０２１７に記載されているＡＬＷＩＰは、アフィン線形重み付け予測モデルを使用して、近隣参照サンプルからブロックの予測を生成する。最初に近隣サンプルが処理される。いくつかの場合には、近隣サンプルは、ダウンサンプリングされ、次いで、予測サンプルの中間ダウンサンプリングバージョンに似ている低減されたサンプルのセットを（アフィンモデルを使用して）導出するために使用される。最終予測は、中間値を（必要に応じて）アップサンプリングすることによって取得される。
[0134]ＡＬＷＩＰプロセスの説明が図１４に与えられている。図１４は、８×８ブロックのための例示的なＡＬＷＩＰプロセスを示す。境界サンプル１４０２は、８×８ブロックの境界上の近隣サンプルを表し、８×８ブロックの上方にある上部境界サンプル（ｂｄｒｙtop）と、８×８ブロックの左方にある左境界サンプル（ｂｄｒｙleft）の両方を含む。ビデオエンコーダ２００またはビデオデコーダ３００は、上部低減境界サンプル（ｂｄｒｙred
top）と左低減境界サンプル（ｂｄｒｙred
left）の両方を含む低減された境界サンプル１４０４を取得するために、境界サンプル１４０２をダウンサンプリングする。ビデオエンコーダ２００またはビデオデコーダ３００は、境界サンプルのベクトル表現ｂｄｒｙredに行列Ａkを乗算し、オフセット／バイアス項ｂkを加算して、ブロック１４０６内のグレーサンプルによって表される予測ブロックのダウンサンプリングバージョンｐｒｅｄredを取得する。ビデオエンコーダ２００またはビデオデコーダ３００は、境界サンプルとともに予測サンプルｐｒｅｄredをアップサンプリングして、ブロック１４０６中の他のサンプル、すなわち、白いサンプルの値を決定することによって、最終予測ブロック１４０８を取得する。行列Ａkおよびオフセット、またはバイアス、ベクトルｂkは、ブロックのために示されるモード値に基づいて選定される。
[0135]ＡＬＷＩＰプロセスの説明が図１１に与えられている。図１１のＡＬＷＩＰプロセスは、ビデオエンコーダ２００とビデオデコーダ３００とによって実施され得る。（境界サンプルとも呼ばれる）ブロックの参照サンプルは、低減された境界サンプルを取得するためにダウンサンプリングされる。境界サンプルのベクトル表現ｂｄｒｙredが行列Ａkで乗算され、オフセット／バイアス項ｂkが加算されて、予測ブロックのダウンサンプリングバージョンｐｒｅｄredが取得される。最終予測は、境界サンプルとともにこれらの予測サンプルｐｒｅｄredをアップサンプリングすることによって取得される。行列Ａkおよびオフセット／バイアスベクトルｂkは、ブロックのために示されるモード値に基づいて選定される。行列Ａkとオフセット／バイアスベクトルｂkとの組合せは、本明細書では「ＡＬＷＩＰモード」と呼ばれることがある。
[0136]中間予測サンプルを導出するために、ビデオエンコーダ２００とビデオデコーダ３００とは、アフィン線形重み付け予測モデルを使用する。３つのタイプが定義される。導出される中間サンプルの数は、次のようにタイプごとに異なる。
１） 幅と高さの両方が４に等しいブロックサイズのための４×４
２） 幅と高さの両方が４に等しいときを除き、幅と高さの両方が８以下であるブロックサイズ（すなわち、４×８、８×４および８×８ブロック）のための８×８
３） 幅と高さとのうちの少なくとも１つが８よりも大きいブロックのための１６×１６
これら３つの場合の各々において、それぞれ、３５、１９、および１１という、ＡＬＷＩＰモードの異なる数が使用される。
２） 幅と高さの両方が４に等しいときを除き、幅と高さの両方が８以下であるブロックサイズ（すなわち、４×８、８×４および８×８ブロック）のための８×８
３） 幅と高さとのうちの少なくとも１つが８よりも大きいブロックのための１６×１６
これら３つの場合の各々において、それぞれ、３５、１９、および１１という、ＡＬＷＩＰモードの異なる数が使用される。
[0137]ビデオエンコーダ２００とビデオデコーダ３００とは、次のようにＡＬＷＩＰをシグナリングするように構成され得る。
ａ） その現在ブロックがＡＬＷＩＰでコーディングされることを示すためのフラグ（ａｌｗｉｐ＿ｆｌａｇ）がシグナリングされる。
ｂ） ブロックがＡＬＷＩＰでコーディングされるとき、現在ブロックがＡＬＷＩＰ－ＭＰＭモードでコーディングされるか否かを示すための別のフラグがシグナリングされる。
ａ． 現在ブロックがＡＬＷＩＰ ＭＰＭでコーディングされる場合、ＭＰＭインデックスがシグナリングされる。
ｂ． 他の場合、残りのモード値へのインデックスがシグナリングされる。
ａｌｗｉｐ＿ｆｌａｇは、次のように、許容される４つのコンテキストでコンテキストコーディングされ得る。
ａｌｗｉｐ＿ｆｌａｇは、次のように、許容される４つのコンテキストでコンテキストコーディングされ得る。
－ ブロック幅＞２＊高さまたは高さ＞２＊幅の場合、コンテキスト３が使用される。
－ 他の場合、コンテキストｃｔｘＩｄが使用され、ここで、ｃｔｘＩｄは次のように導出される。
〇 ｃｔｘＩｄを０に初期化した
〇 左方の近隣ブロックがＡＬＷＩＰでコーディングされた場合、ｃｔｘＩｄ＋＋
〇 上方の近隣ブロックがＡＬＷＩＰでコーディングされた場合、ｃｔｘＩｄ＋＋
[0138]ビデオエンコーダ２００とビデオデコーダ３００とは、次のようにＡＬＷＩＰ ＭＰＭについて導出するように構成され得る。
〇 左方の近隣ブロックがＡＬＷＩＰでコーディングされた場合、ｃｔｘＩｄ＋＋
〇 上方の近隣ブロックがＡＬＷＩＰでコーディングされた場合、ｃｔｘＩｄ＋＋
[0138]ビデオエンコーダ２００とビデオデコーダ３００とは、次のようにＡＬＷＩＰ ＭＰＭについて導出するように構成され得る。
１） ＬｅｆｔＩｎｔｒａＭｏｄｅとＡｂｏｖｅＩｎｔｒａＭｏｄｅとが－１に初期化される
２） 左方の近隣ブロックがイントラコーディングされる場合、
ａ． 左方の近隣ブロックがＡＬＷＩＰモードＬでコーディングされる場合、
ｉ． Ｌが、現在ブロックと同じＡＬＷＩＰタイプである場合、ＬｅｆｔＩｎｔｒａＭｏｄｅがＬに等しく設定される。
２） 左方の近隣ブロックがイントラコーディングされる場合、
ａ． 左方の近隣ブロックがＡＬＷＩＰモードＬでコーディングされる場合、
ｉ． Ｌが、現在ブロックと同じＡＬＷＩＰタイプである場合、ＬｅｆｔＩｎｔｒａＭｏｄｅがＬに等しく設定される。
ｂ． 左方の近隣ブロックのイントラモードが、現在ブロックと同じタイプのＡＬＷＩＰモードにマッピングされ、ＬｅｆｔＩｎｔｒａＭｏｄｅに割り当てられる。
３） 上方の近隣ブロックがイントラコーディングされる場合、：
ａ． 上方の近隣ブロックがＡＬＷＩＰモードＡでコーディングされる場合、
ｉ． Ａが、現在ブロックと同じＡＬＷＩＰタイプである場合、ＡｂｏｖｅＩｎｔｒａＭｏｄｅがＡに等しく設定される。
ａ． 上方の近隣ブロックがＡＬＷＩＰモードＡでコーディングされる場合、
ｉ． Ａが、現在ブロックと同じＡＬＷＩＰタイプである場合、ＡｂｏｖｅＩｎｔｒａＭｏｄｅがＡに等しく設定される。
ｂ． 上方の近隣ブロックのイントラモードが、現在ブロックと同じタイプのＡＬＷＩＰモードにマッピングされ、ＡｂｏｖｅＩｎｔｒａＭｏｄｅに割り当てられる。
４） ＭＰＭが、次いで、ＬｅｆｔＩｎｔｒａＭｏｄｅとＡｂｏｖｅＩｎｔｒａＭｏｄｅとに基づいて導出される。
[0139]本開示では、ＡＬＷＩＰでコーディングされるブロックは、ＡＬＷＩＰコード化ブロックまたはＡＬＷＩＰブロックと呼ばれることがあり、（正規イントラ予測、イントラサブパーティション、または複数の参照ラインでコーディングされる）他のブロックは、非ＡＬＷＩＰブロックと呼ばれることがある。
[0140]ビデオエンコーダ２００とビデオデコーダ３００とは、単一ステップ線形補間を実施するように構成され得る。ｍａｘ（Ｗ，Ｈ）≧８であるＷ×Ｈブロックについて、予測信号は、線形補間によるＷred×Ｈred上の低減された予測信号ｐｒｅｄredから発生する。ブロック形状に応じて、ビデオエンコーダ２００とビデオデコーダ３００とは、垂直方向、水平方向または両方向に線形補間を実施する。いくつかの例では、線形補間が両方向に適用されるべきである場合、ビデオエンコーダ２００とビデオデコーダ３００とは、Ｗ＜Ｈの場合、最初に水平方向に線形補間を適用するか、または他の場合、最初に垂直方向に線形補間を適用する。
[0141]一般性の喪失なしに、ｍａｘ（Ｗ，Ｈ）≧８およびＷ≧ＨであるＷ×Ｈブロックを考察する。その場合、ビデオエンコーダ２００とビデオデコーダ３００とは、次のように１次元線形補間を実施し得る。説明の目的で、線形補間は、垂直方向に関して説明される。最初に、低減された予測信号が、境界信号によって上部に拡張される。垂直アップサンプリングファクタＵver＝Ｈ／Ｈredを定義し、
を書く。次いで、次式によって、拡張された、低減された予測信号を定義する。
[0142]次いで、この拡張された、低減された予測信号から、垂直方向線形補間予測信号が、次式によって生成される。
[0143]上記で説明された技法は、いくつかの潜在的な問題を含む。ＡＬＷＩＰは、低減された境界サンプルに行列とバイアスベクトルとを乗算することによって「中間」予測サンプルのセットを生成する。中間サンプルは、次いで、予測ブロックを生成するために、必要に応じて線形補間を使用してアップサンプリングされる。
ＡＬＷＩＰのために使用される行列は、いくつかの行列のセットから選定されるが、行列のどんな有限セットも、ビデオコンテンツ中に生じるほぼ無数のブロックを効率的に予測し得ない（いくつかの場合には、不可能であり得る）。予測誤差は、予測ブロックのエッジにおいてより大きくなり、圧縮される必要があるより多くのビットを生じ得る。サンプルの線形補間は、残りのサンプルを生成するために中間予測ブロックと境界サンプルとを使用するが、すべての境界サンプルが、補間関数のために使用されるとは限らない。図１４に示されているように、最終予測ブロックｐｒｅｄは、中間予測サンプルから生成され、１つの境界はダウンサンプリングされ（図１４の例では上部）、１つの境界はいかなる修正もない。これは、予測精度に影響を及ぼす。
ＡＬＷＩＰのために使用される行列は、いくつかの行列のセットから選定されるが、行列のどんな有限セットも、ビデオコンテンツ中に生じるほぼ無数のブロックを効率的に予測し得ない（いくつかの場合には、不可能であり得る）。予測誤差は、予測ブロックのエッジにおいてより大きくなり、圧縮される必要があるより多くのビットを生じ得る。サンプルの線形補間は、残りのサンプルを生成するために中間予測ブロックと境界サンプルとを使用するが、すべての境界サンプルが、補間関数のために使用されるとは限らない。図１４に示されているように、最終予測ブロックｐｒｅｄは、中間予測サンプルから生成され、１つの境界はダウンサンプリングされ（図１４の例では上部）、１つの境界はいかなる修正もない。これは、予測精度に影響を及ぼす。
[0144]本開示で使用されるとき、「ブロックのエッジサンプル」は、ブロックの最初および最後の行中のサンプル、ならびにブロックの最初および最後の列中のサンプルなど、ブロックの４つの境界のうちの１つに隣接するブロック中のサンプルを概して指す。本開示で使用されるとき、ブロックの上部、左、下部および右エッジサンプルは、それぞれ、ブロックの上部、左、下部、および右境界に隣接するブロック中のサンプルを概して指す。ブロックの左上コーナーサンプルは、上部エッジサンプルならびに左エッジサンプルの両方と見なされ得ることに留意されたい。いくつかの例では、左上コーナーサンプルは、上部エッジサンプルではあるが左エッジサンプルではないと見なされることがあり、他の例では、左上コーナーサンプルは、左エッジサンプルではあるが上部エッジサンプルではないと見なされることがあることを理解されたい。同様の考慮事項が、ブロックの右上、右下および左下コーナーサンプルに適用され得る。
[0145]本開示で使用されるとき、ブロックのサンプルのエッジバンドは、ブロックの４つの境界のいずれかの近隣にあるブロック中のサンプル、たとえば、ブロックの最初もしくは最後のいくつかの行、またはブロックの最初もしくは最後のいくつかの列中のサンプルを概して指す。同様の定義は、ブロックのサンプルの上部（top）、左、右および下部(bottom)エッジバンドについても定義され得る。本開示で使用されるとき、ブロックのサンプルのｎ上部エッジバンドは、ブロックの上部ｎ個の行に属するサンプルを概して指し、ブロックのサンプルのｎ下部エッジバンドは、ブロックの下部ｎ個の行に属するサンプルとして定義される。ブロックのサンプルのｎ左エッジバンドは、ブロックの左ｎ個の列に属するサンプルとして定義され、ブロックのサンプルのｎ右エッジバンドは、ブロックの右ｎ個の列に属するサンプルとして定義される。これらの例では、ｎは整数になる。
[0146]図１５は、上記で定義された境界バンドのいくつかの例を示す。たとえば、（ボールドの黒線によって示されている）ブロック１５０２は、グレーで示されている左エッジサンプル１５０４を含む。（ボールドの黒線によって示されている）ブロック１５０６は、サンプルの３上部エッジバンド１５１２と、サンプルの２下部エッジバンド１５１４とを含む。
[0147]本開示では、ＡＬＷＩＰの効率を改善し得る技法について説明する。以下の説明される技法は、別々にまたは組合せで使用され得る。
[0148]いくつかの例では、上記で説明されたアップサンプリングプロセスは、サンプルの予測誤差が低減され得るように修正され得る。たとえば、ビデオエンコーダ２００とビデオデコーダ３００とは、予測誤差を低減するための追加のフィルタ処理段（filtering stage）を実施するように構成され得る。いくつかの例では、この追加のフィルタ処理段は、追加のフィルタ処理が補間またはアップサンプリング段とは別個ではなくそれの一部になるように、補間またはアップサンプリング段に効果的に組み込まれ得る。他の例では、追加のフィルタ処理は、補間またはアップサンプリング段代わりに実施され得る、
[0149]いくつかの例では、ビデオエンコーダ２００とビデオデコーダ３００とは、線形補間が一方向または両方向に適用されて予測サンプルが生成された後に、上部および左エッジサンプルに対してさらなるフィルタ処理を実施するように構成され得る。たとえば、フィルタＦ１は、垂直方向に上部エッジサンプルに適用され得、フィルタＦ２は、水平方向に左エッジサンプルに適用され得る。ビデオエンコーダ２００とビデオデコーダ３００とは、追加のフィルタ段においてすべての境界参照サンプルを使用するように構成され得る。いくつかの例では、ビデオエンコーダ２００とビデオデコーダ３００とは、追加のフィルタ段のための低減された境界参照サンプルのセットを生成するために、異なるダウンサンプリングフィルタを境界サンプルに適用するように構成され得る。
[0149]いくつかの例では、ビデオエンコーダ２００とビデオデコーダ３００とは、線形補間が一方向または両方向に適用されて予測サンプルが生成された後に、上部および左エッジサンプルに対してさらなるフィルタ処理を実施するように構成され得る。たとえば、フィルタＦ１は、垂直方向に上部エッジサンプルに適用され得、フィルタＦ２は、水平方向に左エッジサンプルに適用され得る。ビデオエンコーダ２００とビデオデコーダ３００とは、追加のフィルタ段においてすべての境界参照サンプルを使用するように構成され得る。いくつかの例では、ビデオエンコーダ２００とビデオデコーダ３００とは、追加のフィルタ段のための低減された境界参照サンプルのセットを生成するために、異なるダウンサンプリングフィルタを境界サンプルに適用するように構成され得る。
[0150]ビデオエンコーダ２００とビデオデコーダ３００とは、シグナリングまたは事前決定され得るフィルタのセットからフィルタＦ１およびＦ２を選択するように構成され得る。そのようなフィルタの係数の非網羅的なセットは次の通りである。
１． ［１ ２ １］
２． ［１］
３． ［１ ２ ２ ２ １］
４． ［１ ４ ６ ４ １］
５． ［１ ３］
[0151]上記の例では、［１］のフィルタは、効果的には、平均化なしに、フィルタがそれに適用されるサンプル値をコピーする「コピー」フィルタであり得る。対照的に、［１ １ １ １］フィルタは、平均化フィルタ処理を表し得る。他の値をもつフィルタは、加重平均化フィルタを表し得る。上記のフィルタ１～４は、フィルタ処理されているサンプルに中間係数（たとえば、フィルタ１中の２、フィルタ４中の６など）が適用されるように、対称的フィルタである。
２． ［１］
３． ［１ ２ ２ ２ １］
４． ［１ ４ ６ ４ １］
５． ［１ ３］
[0151]上記の例では、［１］のフィルタは、効果的には、平均化なしに、フィルタがそれに適用されるサンプル値をコピーする「コピー」フィルタであり得る。対照的に、［１ １ １ １］フィルタは、平均化フィルタ処理を表し得る。他の値をもつフィルタは、加重平均化フィルタを表し得る。上記のフィルタ１～４は、フィルタ処理されているサンプルに中間係数（たとえば、フィルタ１中の２、フィルタ４中の６など）が適用されるように、対称的フィルタである。
[0152]いくつかの例では、フィルタＦ１とフィルタＦ２とは同じでないことがある。他の例では、ビデオエンコーダ２００とビデオデコーダ３００とは、ＡＬＷＩＰのアップサンプリングプロセスにおいて使用されるアップサンプリングファクタに基づいてフィルタを選択し得る。いくつかの例では、ビデオエンコーダ２００とビデオデコーダ３００とは、アップサンプリングファクタが水平方向において１よりも大きいときのみ、ブロックの上部エッジサンプルに追加のフィルタ段を適用し得る。いくつかの例では、ビデオエンコーダ２００とビデオデコーダ３００とは、アップサンプリングファクタが垂直方向において１よりも大きいときのみ、ブロックの左エッジサンプルに追加のフィルタ段を適用し得る。
[0153]いくつかの例では、追加のフィルタ段は、ＰＤＰＣ動作と同様に実施され得、ここで、予測サンプルは、予測および境界サンプルの加重平均を用いて更新される。
[0154]図１６は、境界参照サンプルがダウンサンプリングなしに使用され、右下に１つの中間予測サンプル値がある一例を示す。ＵｐＶとＵｐＨとは、垂直方向と水平方向とにおけるアップサンプリングファクタを示す。
[0155]この例では、ｐｒｅｄ（ｘ，ｙ）を、ＡＬＷＩＰ線形補間の結果として取得される予測であるとする。追加の段は、次のようにｐｒｅｄ（ｘ，ｙ）を修正する。
[0156]上記の３２と６４との値は、値ｗＬとｗＴとの精度に基づいて選定され、ｗＴとｗＬとの異なる精度では異なってよいことに留意されたい。この例では、ｗＴとｗＬとの値は０から６４の範囲内にあると仮定され、いくつかの場合には、ｗＴと、ｗＬと、６４－ｗＴ－ｗＴとは、非負であるように制約される。重みは次のように導出され得る。
ここで、シフトの値は、固定であり得るか、またはブロックの幅と高さとを使用して、たとえば、シフト＝（ｌｏｇ2（幅）＋ｌｏｇ2（高さ）＋２）＞＞２として導出され得る、
[0157]いくつかの場合には、中間予測位置に対応する予測サンプルの値（たとえば、図１６のＰ）は修正されない。
[0157]いくつかの場合には、中間予測位置に対応する予測サンプルの値（たとえば、図１６のＰ）は修正されない。
[0158]ブロックの他の部分中のサンプルを修正するとき、左または上部境界サンプルのみが、追加のフィルタ段のために使用され得る。たとえば、ブロックの左上サンプルに関してサンプル（ｘ，ｙ）について、ｘの値がしきい値（たとえばＵｐＨ）以上であるとき、ｗＬの値は０に等しく設定され得、同様に、ｙの値がしきい値（たとえば、ＵｐＶ）以上であるとき、ｗＴの値は０に等しく設定され得る。
[0159]いくつかの例では、追加のフィルタ段は、ブロックのｎ１上部エッジサンプルとｎ２左エッジサンプルとにおけるサンプル位置の値を修正するためにのみ適用され、ここで、ｎ１およびｎ２の値は、ブロック中のＡＬＷＩＰのためのアップサンプリングファクタによって決定され得る（たとえば、ｎ１はＵｐＶ－１に等しくなり得、ｎ２はＵｐＨ－１に等しくなり得、ここで、ＵｐＶとＵｐＨとは、それぞれ、垂直方向と水平方向とにおけるアップサンプリングファクタである。
[0160]いくつかの例では、アップサンプリングプロセスは、位置依存の重みを使用してサンプルが予測されるように、または言い換えれば、線形補間と追加の段動作とが１ステップにおいて組み合わされるように修正される。
[0161]ブロック中のすべてのサンプルの予測は、次のように一般化され得る、従う。
（ｘ，ｙ）が中間予測サンプルに属しないとき、値ｐｒｅｄ（ｘ，ｙ）は次のように決定される（ｘとｙとは、Ｐ３の右下のサンプルに関してである）。
ここで、オフセットとシフトとの値は、予測サンプル値を正規化するように選定され、値は、ｗ１＝ｘ＊ｙ、ｗ２＝（ＵｐＨ－１－ｘ）＊ｙ、ｗ３＝（ＵｐＨ－１－ｘ）＊（ＵｐＶ－１－ｙ）、ｗ４＝ｘ＊（ＵｐＨ－１－ｙ）のように設定され、ｗＬとｗＴとは、ＰＤＰＣと同様の式に基づいて決定され、ただし、以下の例外がある。
－ ＬとＴとが境界参照に属するとき、ｗ２と、ｗ３と、ｗ４とは、０に等しく設定される。
－ そうでないとき、Ｌが境界に属せず、Ｔが境界に属する場合、ｗＬと、ｗ３と、ｗ４とは、０に等しく設定される。
－ そうでない場合、Ｌが境界に属するが、Ｔが境界に属しない場合、ｗＴと、ｗ３と、ｗ２とは、０に等しく設定される。
－ 他の場合、ｗＬとｗＴとは、０に等しく設定される。
[0162]いくつかの例では、予測サンプルの値は、平面予測の導出と同様に導出され、たとえば、図１７において、ｘ，ｙにおけるサンプル値は、Ｌ（またはＰ２およびＰ３）とＰ４とＰ１とから水平予測を導出し、Ｔ（またはＰ３およびＰ４）とＰ１とＰ２とから垂直予測を導出することによって、平面予測と同様の導出を使用して導出される。
[0163]ｗ１と、ｗ２と、ｗ３と、ｗ４と、ｗＬと、ｗＴとの値は、例として示されているにすぎず、これらの重みの他の値が選定され得ることに留意されたい。
[0164]いくつかの例では、アップサンプリングプロセスを修正するために位置依存の重みが使用されるとき、重みの選定は、ＡＬＷＩＰとともに使用される特定のモード／行列に基づき得る。いくつかの場合には、特定の行列に対応するイントラ予測モードを解釈するためにマッピングテーブルが使用され得る。位置依存の重みは、解釈されたイントラ予測モードに基づいて選定され得、１つまたは複数の境界参照サンプルは、予測値を計算するために使用され得る。いくつかの場合には、使用される行列に依存しない位置依存の重みのために、重みのデフォルトセットが使用され得る。いくつかの例では、位置依存の重みはまた、ブロック形状（幅、高さ）、アスペクト比などを含むがそれらに限定されない、他の特性に依存し得る。
[0165]図１８は、本開示の技法を実施し得る例示的なビデオエンコーダ２００を示すブロック図である。図１８は、説明の目的で提供されており、本開示において広く例示され、説明される技法を限定するものと見なされるべきではない。説明の目的で、本開示では、ＨＥＶＣビデオコーディング規格および開発中のＨ．２６６ビデオコーディング規格などのビデオコーディング規格のコンテキストにおいて、ビデオエンコーダ２００について説明する。しかしながら、本開示の技法は、これらのビデオコーディング規格に限定されず、概して、ビデオ符号化および復号に適用可能である。
[0166]図１８の例では、ビデオエンコーダ２００は、ビデオデータメモリ２３０と、モード選択ユニット２０２と、残差生成ユニット２０４と、変換処理ユニット２０６と、量子化ユニット２０８と、逆量子化ユニット２１０と、逆変換処理ユニット２１２と、再構築ユニット２１４と、フィルタユニット２１６と、復号ピクチャバッファ（ＤＰＢ）２１８と、エントロピー符号化ユニット２２０とを含む。
[0167]ビデオデータメモリ２３０は、ビデオエンコーダ２００の構成要素によって符号化されるべきビデオデータを記憶し得る。ビデオエンコーダ２００は、たとえば、ビデオソース１０４（図１）から、ビデオデータメモリ２３０に記憶されたビデオデータを受信し得る。ＤＰＢ２１８は、ビデオエンコーダ２００による後続のビデオデータの予測において使用する参照ビデオデータを記憶する参照ピクチャメモリとして働き得る。ビデオデータメモリ２３０とＤＰＢ２１８とは、同期ダイナミックランダムアクセスメモリ（ＤＲＡＭ）（ＳＤＲＡＭ）を含むＤＲＡＭ、磁気抵抗ＲＡＭ（ＭＲＡＭ）、抵抗性ＲＡＭ（ＲＲＡＭ（登録商標））、または他のタイプのメモリデバイスなど、様々なメモリデバイスのいずれかによって形成され得る。ビデオデータメモリ２３０とＤＰＢ２１８とは、同じメモリデバイスまたは別個のメモリデバイスによって提供され得る。様々な例では、ビデオデータメモリ２３０は、図示のように、ビデオエンコーダ２００の他の構成要素とともにオンチップであるか、またはそれらの構成要素に対してオフチップであり得る。
[0168]本開示では、ビデオデータメモリ２３０への言及は、特にそのように説明されない限り、ビデオエンコーダ２００の内部のメモリに限定されるものとして解釈されるべきではなく、または特にそのように説明されない限り、ビデオエンコーダ２００の外部のメモリに限定されるものとして解釈されるべきではない。そうではなく、ビデオデータメモリ２３０への言及は、ビデオエンコーダ２００が符号化のために受信するビデオデータ（たとえば、符号化されるべきである現在ブロックのビデオデータ）を記憶する参照メモリとして理解されたい。図１のメモリ１０６はまた、ビデオエンコーダ２００の様々なユニットからの出力の一時的記憶を提供し得る。
[0169]図１８の様々なユニットは、ビデオエンコーダ２００によって実施される動作を理解するのを支援するために示されている。ユニットは、固定機能回路、プログラマブル回路、またはそれらの組合せとして実装され得る。固定機能回路は、特定の機能を提供する回路を指し、実施され得る動作にプリセットされる。プログラマブル回路は、様々なタスクを実施するように、および実施され得る動作においてフレキシブルな機能を提供するようにプログラムされたできる回路を指す。たとえば、プログラマブル回路は、ソフトウェアまたはファームウェアの命令によって定義される様式でプログラマブル回路を動作させるソフトウェアまたはファームウェアを実行し得る。固定機能回路は、（たとえば、パラメータを受信するかまたはパラメータを出力するための）ソフトウェア命令を実行し得るが、固定機能回路が実施する動作のタイプは、概して不変である。いくつかの例では、ユニットのうちの１つまたは複数は、別個の回路ブロック（固定機能またはプログラマブル）であり得、いくつかの例では、１つまたは複数のユニットは、集積回路であり得る。
[0170]ビデオエンコーダ２００は、算術論理ユニット（ＡＬＵ）、基本機能ユニット（ＥＦＵ）、デジタル回路、アナログ回路、および／またはプログラマブル回路から形成されるプログラマブルコアを含み得る。ビデオエンコーダ２００の動作が、プログラマブル回路によって実行されるソフトウェアを使用して実施される例では、メモリ１０６（図１）は、ビデオエンコーダ２００が受信し実行するソフトウェアのオブジェクトコードを記憶し得るか、またはビデオエンコーダ２００内の別のメモリ（図示されず）が、そのような命令を記憶し得る。
[0171]ビデオデータメモリ２３０は、受信されたビデオデータを記憶するように構成される。ビデオエンコーダ２００は、ビデオデータメモリ２３０からビデオデータのピクチャを取り出し、残差生成ユニット２０４とモード選択ユニット２０２とにビデオデータを提供し得る。ビデオデータメモリ２３０中のビデオデータは、符号化されるべきである生のビデオデータであり得る。
[0172]モード選択ユニット２０２は、動き推定ユニット２２２と、動き補償ユニット２２４と、イントラ予測ユニット２２６とを含む。モード選択ユニット２０２は、他の予測モードに従ってビデオ予測を実施するための追加の機能ユニットを含み得る。例として、モード選択ユニット２０２は、パレットユニット、（動き推定ユニット２２２および／または動き補償ユニット２２４の一部であり得る）イントラブロックコピーユニット、アフィンユニット、線形モデル（ＬＭ）ユニットなどを含み得る。
[0173]モード選択ユニット２０２は、概して、符号化パラメータの組合せと、そのような組合せについての得られたレートひずみ値とをテストするために、複数の符号化パスを協調させる。符号化パラメータは、ＣＵへのＣＴＵの区分、ＣＵの予測モード、ＣＵの残差データのための変換タイプ、ＣＵの残差データのための量子化パラメータなどを含み得る。モード選択ユニット２０２は、最終的に、他のテストされた組合せよりも良好であるレートひずみ値を有する符号化パラメータの組合せを選択し得る。
[0174]ビデオエンコーダ２００は、ビデオデータメモリ２３０から取り出されたピクチャを一連のＣＴＵに区分し、１つまたは複数のＣＴＵをスライス内にカプセル化し得る。モード選択ユニット２０２は、上記で説明されたＨＥＶＣのＱＴＢＴ構造またはクワッドツリー構造など、ツリー構造に従ってピクチャのＣＴＵを区分し得る。上記で説明されたように、ビデオエンコーダ２００は、ツリー構造に従ってＣＴＵを区分することから１つまたは複数のＣＵを形成し得る。そのようなＣＵは、一般に「ビデオブロック」または「ブロック」と呼ばれることもある。
[0175]概して、モード選択ユニット２０２はまた、現在ブロック（たとえば、現在ＣＵ、またはＨＥＶＣでは、ＰＵとＴＵとの重複する部分）についての予測ブロックを生成するように、それの構成要素（たとえば、動き推定ユニット２２２、動き補償ユニット２２４、およびイントラ予測ユニット２２６）を制御する。現在ブロックのインター予測のために、動き推定ユニット２２２は、１つまたは複数の参照ピクチャ（たとえば、ＤＰＢ２１８に記憶されている１つまたは複数の以前にコーディングされたピクチャ）中で１つまたは複数のぴったり一致する参照ブロックを識別するために動き探索を実施し得る。特に、動き推定ユニット２２２は、たとえば、絶対差分和（ＳＡＤ）、２乗差分和（ＳＳＤ）、平均絶対差（ＭＡＤ）、平均２乗差（ＭＳＤ）などに従って、現在ブロックに対して潜在的参照ブロックがどのくらい類似しているかを表す値を計算し得る。動き推定ユニット２２２は、概して、現在ブロックと考慮されている参照ブロックとの間のサンプルごとの差分を使用してこれらの計算を実施し得る。動き推定ユニット２２２は、現在ブロックに最もぴったり一致する参照ブロックを示す、これらの計算から得られた最も低い値を有する参照ブロックを識別し得る。
[0176]動き推定ユニット２２２は、現在ピクチャ中の現在ブロックの位置に対して参照ピクチャ中の参照ブロックの位置を定義する１つまたは複数の動きベクトル（ＭＶ）を形成し得る。動き推定ユニット２２２は、次いで、動きベクトルを動き補償ユニット２２４に提供し得る。たとえば、単方向インター予測では、動き推定ユニット２２２は、単一の動きベクトルを提供し得るが、双方向インター予測では、動き推定ユニット２２２は、２つの動きベクトルを提供し得る。動き補償ユニット２２４は、次いで、動きベクトルを使用して予測ブロックを生成し得る。たとえば、動き補償ユニット２２４は、動きベクトルを使用して参照ブロックのデータを取り出し得る。別の例として、動きベクトルが分数サンプル精度を有する場合、動き補償ユニット２２４は、１つまたは複数の補間フィルタに従って予測ブロックの値を補間し得る。その上、双方向インター予測では、動き補償ユニット２２４は、それぞれの動きベクトルによって識別された２つの参照ブロックについてデータを取り出し、たとえば、サンプルごとの平均化または加重平均化を通して、取り出されたデータを組み合わせ得る。
[0177]別の例として、イントラ予測、またはイントラ予測コーディングのために、イントラ予測ユニット２２６は、現在ブロックに近接しているサンプルから予測ブロックを生成し得る。たとえば、方向性モードでは、イントラ予測ユニット２２６は、近隣サンプルの値を概して数学的に組み合わせ、現在ブロックにわたって規定の方向にこれらの計算された値をポピュレートして、予測ブロックを生成し得る。別の例として、ＤＣモードでは、イントラ予測ユニット２２６は、現在ブロックに対する近隣サンプルの平均を計算し、予測ブロックのサンプルごとにこの得られた平均を含むように予測ブロックを生成し得る。別の例として、ＡＬＷＩＰモードでは、イントラ予測ユニット２２６は、現在ブロックの左エッジ近隣サンプルのセットと現在ブロックの上部エッジ近隣サンプルのセットとに基づいて、左エッジサンプルのサブセットと上部エッジサンプルのサブセットとを導出することと、中間サンプルの中間ブロックを生成するために、左エッジサンプルのサブセットと上部エッジサンプルのサブセットとに、アフィンモデルを適用することと、最終予測ブロックを生成するために、現在ブロックの左エッジ近隣サンプルのセットと上部エッジ近隣サンプルのセットとを使用して、中間サンプルをフィルタ処理することと、を行い得る。
[0178]モード選択ユニット２０２は、予測ブロックを残差生成ユニット２０４に提供する。残差生成ユニット２０４は、ビデオデータメモリ２３０から現在ブロックの生の非コード化バージョンを受信し、モード選択ユニット２０２から予測ブロックを受信する。残差生成ユニット２０４は、現在ブロックと予測ブロックとの間のサンプルごとの差分を計算する。得られたサンプルごとの差分は、現在ブロックについての残差ブロックを定義する。いくつかの例では、残差生成ユニット２０４はまた、残差差分パルスコード変調（ＲＤＰＣＭ）を使用して残差ブロックを生成するために、残差ブロック中のサンプル値の間の差分を決定し得る。いくつかの例では、残差生成ユニット２０４は、バイナリ減算を実施する１つまたは複数の減算器回路を使用して形成され得る。
[0179]モード選択ユニット２０２がＣＵをＰＵに区分する例では、各ＰＵは、ルーマ予測ユニットと、対応するクロマ予測ユニットとに関連付けられ得る。ビデオエンコーダ２００とビデオデコーダ３００とは、様々なサイズを有するＰＵをサポートし得る。上記のように、ＣＵのサイズは、ＣＵのルーマコーディングブロックのサイズを指すことがあり、ＰＵのサイズは、ＰＵのルーマ予測ユニットのサイズを指すことがある。特定のＣＵのサイズが２Ｎ×２Ｎであると仮定すると、ビデオエンコーダ２００は、イントラ予測のための２Ｎ×２ＮまたはＮ×ＮのＰＵサイズと、インター予測のための２Ｎ×２Ｎ、２Ｎ×Ｎ、Ｎ×２Ｎ、Ｎ×Ｎ、または同様のものの対称ＰＵサイズとをサポートし得る。ビデオエンコーダ２００とビデオデコーダ３００とはまた、インター予測のための２Ｎ×ｎＵ、２Ｎ×ｎＤ、ｎＬ×２Ｎ、およびｎＲ×２ＮのＰＵサイズの非対称区分をサポートし得る。
[0180]モード選択ユニットがＣＵをＰＵにさらに区分しない例では、各ＣＵは、ルーマコーディングブロックと、対応するクロマコーディングブロックとに関連付けられ得る。上記のように、ＣＵのサイズは、ＣＵのルーマコーディングブロックのサイズを指し得る。ビデオエンコーダ２００とビデオデコーダ３００とは、２Ｎ×２Ｎ、２Ｎ×Ｎ、またはＮ×２ＮのＣＵサイズをサポートし得る。
[0181]いくつかの例として、イントラブロックコピーモードコーディング、アフィンモードコーディング、および線形モデル（ＬＭ）モードコーディングなど、他のビデオコーディング技法では、モード選択ユニット２０２は、コーディング技法に関連付けられたそれぞれのユニットを介して、符号化されている現在ブロックについて予測ブロックを生成する。パレットモードコーディングなど、いくつかの例では、モード選択ユニット２０２は、予測ブロックを生成せず、代わりに、選択されたパレットに基づいてブロックを再構築すべき様式を示すシンタックス要素を生成し得る。そのようなモードでは、モード選択ユニット２０２は、符号化されるためにこれらのシンタックス要素をエントロピー符号化ユニット２２０に提供し得る。
[0182]上記で説明されたように、残差生成ユニット２０４は、現在ブロックと、対応する予測ブロックとについて、ビデオデータを受信する。残差生成ユニット２０４は、次いで、現在ブロックについての残差ブロックを生成する。残差ブロックを生成するために、残差生成ユニット２０４は、予測ブロックと現在ブロックとの間のサンプルごとの差分を計算する。
[0183]変換処理ユニット２０６は、変換係数のブロック（本明細書では「変換係数ブロック」と呼ばれる）を生成するために、残差ブロックに１つまたは複数の変換を適用する。変換処理ユニット２０６は、変換係数ブロックを形成するために、残差ブロックに様々な変換を適用し得る。たとえば、変換処理ユニット２０６は、離散コサイン変換（ＤＣＴ）、方向変換、カルーネンレーベ変換（ＫＬＴ）、または概念的に同様の変換を残差ブロックに適用し得る。いくつかの例では、変換処理ユニット２０６は、複数の変換、たとえば、１次変換および２次変換、たとえば回転変換を残差ブロックに実施し得る。いくつかの例では、変換処理ユニット２０６は、残差ブロックに変換を適用しない。
[0184]量子化ユニット２０８は、量子化された変換係数ブロックを生成するために、変換係数ブロック中の変換係数を量子化し得る。量子化ユニット２０８は、現在ブロックに関連付けられた量子化パラメータ（ＱＰ）値に従って変換係数ブロックの変換係数を量子化し得る。ビデオエンコーダ２００は（たとえば、モード選択ユニット２０２を介して）、ＣＵに関連付けられたＱＰ値を調整することによって、現在ブロックに関連付けられた係数ブロックに適用される量子化の程度を調整し得る。量子化は、情報の損失をもたらすことがあり、したがって、量子化された変換係数は、変換処理ユニット２０６によって生成された元の変換係数よりも低い精度を有し得る。
[0185]逆量子化ユニット２１０と逆変換処理ユニット２１２とは、変換係数ブロックから残差ブロックを再構築するために、それぞれ、量子化された変換係数ブロックに逆量子化と逆変換とを適用し得る。再構築ユニット２１４は、再構築された残差ブロックと、モード選択ユニット２０２によって生成された予測ブロックとに基づいて、（潜在的にある程度のひずみを伴うが）現在ブロックに対応する再構築ブロックを生成し得る。たとえば、再構築ユニット２１４は、再構築ブロックを生成するために、モード選択ユニット２０２によって生成された予測ブロックからの対応するサンプルに、再構築された残差ブロックのサンプルを加算し得る。
[0186]フィルタユニット２１６は、再構築ブロックに対して１つまたは複数のフィルタ演算を実施し得る。たとえば、フィルタユニット２１６は、ＣＵのエッジに沿ってブロッキネスアーティファクトを低減するためのデブロッキング動作を実施し得る。いくつかの例では、フィルタユニット２１６の動作はスキップされてよい。
[0187]ビデオエンコーダ２００は、再構築ブロックをＤＰＢ２１８に記憶する。たとえば、フィルタユニット２１６の動作が実施されない例において、再構築ユニット２１４は、再構築ブロックをＤＰＢ２１８に記憶し得る。フィルタユニット２１６の動作が実施される例では、フィルタユニット２１６は、フィルタ処理された再構築ブロックをＤＰＢ２１８に記憶し得る。動き推定ユニット２２２と動き補償ユニット２２４とは、後で符号化されるピクチャのブロックをインター予測するために、再構築（および潜在的にフィルタ処理）されたブロックから形成された参照ピクチャをＤＰＢ２１８から取り出し得る。加えて、イントラ予測ユニット２２６は、現在ピクチャ中の他のブロックをイントラ予測するために、現在ピクチャのＤＰＢ２１８中の再構築ブロックを使用し得る。
[0188]概して、エントロピー符号化ユニット２２０は、ビデオエンコーダ２００の他の機能構成要素から受信されたシンタックス要素をエントロピー符号化し得る。たとえば、エントロピー符号化ユニット２２０は、量子化ユニット２０８からの量子化された変換係数ブロックをエントロピー符号化し得る。別の例として、エントロピー符号化ユニット２２０は、モード選択ユニット２０２からの予測シンタックス要素（たとえば、インター予測のための動き情報、またはイントラ予測のためのイントラモード情報）をエントロピー符号化し得る。エントロピー符号化ユニット２２０は、エントロピー符号化データを生成するために、ビデオデータの別の例であるシンタックス要素に対して１つまたは複数のエントロピー符号化演算を実施し得る。たとえば、エントロピー符号化ユニット２２０は、コンテキスト適応型可変長コーディング（ＣＡＶＬＣ）動作、ＣＡＢＡＣ動作、可変対可変（Ｖ２Ｖ）長コーディング動作、シンタックスベースコンテキスト適応型バイナリ算術コーディング（ＳＢＡＣ）動作、確率間隔区分エントロピー（ＰＩＰＥ）コーディング動作、指数ゴロム符号化動作、または別のタイプのエントロピー符号化動作をデータに対して実施し得る。いくつかの例では、エントロピー符号化ユニット２２０は、シンタックス要素がエントロピー符号化されないバイパスモードで動作し得る。
[0189]ビデオエンコーダ２００は、スライスまたはピクチャのブロックを再構築するために必要とされるエントロピー符号化されたシンタックス要素を含むビットストリームを出力し得る。特に、エントロピー符号化ユニット２２０がビットストリームを出力し得る。
[0190]上記で説明された動作は、ブロックに関して説明されている。そのような説明は、ルーマコーディングブロックおよび／またはクロマコーディングブロックのための動作であるものとして理解されたい。上記で説明されたように、いくつかの例では、ルーマコーディングブロックとクロマコーディングブロックとは、ＣＵのルーマ成分とクロマ成分とである。いくつかの例では、ルーマコーディングブロックとクロマコーディングブロックとは、ＰＵのルーマ成分とクロマ成分とである。
[0191]いくつかの例では、ルーマコーディングブロックに関して実施される動作は、クロマコーディングブロックのために繰り返される必要はない。一例として、ルーマコーディングブロックのための動きベクトル（ＭＶ）と参照ピクチャとを識別するための動作は、クロマブロックのためのＭＶと参照ピクチャとを識別するために繰り返される必要はない。そうではなく、ルーマコーディングブロックのためのＭＶは、クロマブロックのためのＭＶを決定するためにスケーリングされてよく、参照ピクチャは同じであってよい。別の例として、イントラ予測プロセスは、ルーマコーディングブロックとクロマコーディングブロックについて同じであってよい。
[0192]ビデオエンコーダ２００は、ビデオデータを記憶するように構成されたメモリと、回路中に実装された１つまたは複数の処理ユニットとを含む、ビデオデータを符号化するように構成されたデバイスの一例を表し、１つまたは複数の処理ユニットは、アフィン線形重み付けイントラ予測におけるアップサンプリングのための技法を含む、本開示の技法を実施するように構成される。
[0193]図１９は、本開示の技法を実施し得る例示的なビデオデコーダ３００を示すブロック図である。図１９は、説明の目的で提供されており、本開示において広く例示され、説明される技法に対する限定ではない。説明の目的で、本開示は、ビデオデコーダ３００についてＪＥＭとＨＥＶＣとの技法に従って説明されることを記載する。しかしながら、本開示の技法は、他のビデオコーディング規格に構成されたビデオコーディングデバイスによって実施され得る。
[0194]図１９の例では、ビデオデコーダ３００は、コード化ピクチャバッファ（ＣＰＢ）メモリ３２０と、エントロピー復号ユニット３０２と、予測処理ユニット３０４と、逆量子化ユニット３０６と、逆変換処理ユニット３０８と、再構築ユニット３１０と、フィルタユニット３１２と、復号ピクチャバッファ（ＤＰＢ）３１４とを含む。予測処理ユニット３０４は、動き補償ユニット３１６と、イントラ予測ユニット３１８とを含む。予測処理ユニット３０４は、他の予測モードに従って予測を実施するための追加ユニットを含み得る。例として、予測処理ユニット３０４は、パレットユニット、（動き補償ユニット３１６の一部を形成し得る）イントラブロックコピーユニット、アフィンユニット、線形モデル（ＬＭ）ユニットなどを含み得る。他の例では、ビデオデコーダ３００は、より多数の、より少数の、または異なる機能構成要素を含み得る。
[0195]ＣＰＢメモリ３２０は、ビデオデコーダ３００の構成要素によって復号されるべき、符号化ビデオビットストリームなどのビデオデータを記憶し得る。ＣＰＢメモリ３２０に記憶されるビデオデータは、たとえば、コンピュータ可読媒体１１０（図１）から取得され得る。ＣＰＢメモリ３２０は、符号化ビデオビットストリームからの符号化ビデオデータ（たとえば、シンタックス要素）を記憶するＣＰＢを含み得る。また、ＣＰＢメモリ３２０は、ビデオデコーダ３００の様々なユニットからの出力を表す一時データなど、コード化ピクチャのシンタックス要素以外のビデオデータを記憶し得る。ＤＰＢ３１４は、概して、ビデオデコーダ３００が符号化ビデオビットストリームの後続のデータまたはピクチャを復号するときに出力しおよび／または参照ビデオデータとして使用し得る復号ピクチャを記憶する。ＣＰＢメモリ３２０とＤＰＢ３１４とは、同期ダイナミックランダムアクセスメモリ（ＤＲＡＭ）（ＳＤＲＡＭ）を含むＤＲＡＭ、磁気抵抗ＲＡＭ（ＭＲＡＭ）、抵抗性ＲＡＭ（ＲＲＡＭ）、または他のタイプのメモリデバイスなど、様々なメモリデバイスのいずれかによって形成され得る。ＣＰＢメモリ３２０とＤＰＢ３１４とは、同じメモリデバイスまたは別個のメモリデバイスによって提供され得る。様々な例では、ＣＰＢメモリ３２０は、ビデオデコーダ３００の他の構成要素とともにオンチップであり得るか、またはそれらの構成要素に対してオフチップであり得る。
[0196]追加または代替として、いくつかの例では、ビデオデコーダ３００は、メモリ１２０（図１）からコード化ビデオデータを取り出し得る。すなわち、メモリ１２０は、ＣＰＢメモリ３２０を用いて上記で論じられたデータを記憶し得る。同様に、メモリ１２０は、ビデオデコーダ３００の機能の一部または全部が、ビデオデコーダ３００の処理回路によって実行されたソフトウェアにおいて実装されたとき、ビデオデコーダ３００によって実行されるべき命令を記憶し得る。
[0197]図１９に示されている様々なユニットは、ビデオデコーダ３００によって実施される動作を理解するのを支援するために示されている。ユニットは、固定機能回路、プログラマブル回路、またはそれらの組合せとして実装され得る。図１８と同様に、固定機能回路は、特定の機能を提供する回路を指し、実施され得る動作にプリセットされる。プログラマブル回路は、様々なタスクを実施するように、および実施され得る動作においてフレキシブルな機能を提供するようにプログラムされたできる回路を指す。たとえば、プログラマブル回路は、ソフトウェアまたはファームウェアの命令によって定義される様式でプログラマブル回路を動作させるソフトウェアまたはファームウェアを実行し得る。固定機能回路は、（たとえば、パラメータを受信するかまたはパラメータを出力するための）ソフトウェア命令を実行し得るが、固定機能回路が実施する動作のタイプは、概して不変である。いくつかの例では、ユニットのうちの１つまたは複数は、別個の回路ブロック（固定機能またはプログラマブル）であり得、いくつかの例では、１つまたは複数のユニットは、集積回路であり得る。
[0198]ビデオデコーダ３００は、ＡＬＵ、ＥＦＵ、デジタル回路、アナログ回路、および／またはプログラマブル回路から形成されるプログラマブルコアを含み得る。ビデオデコーダ３００の動作が、プログラマブル回路上で実行されるソフトウェアによって実施される例では、オンチップまたはオフチップメモリは、ビデオデコーダ３００が受信し実行するソフトウェアの命令（たとえば、オブジェクトコード）を記憶し得る。
[0199]エントロピー復号ユニット３０２は、ＣＰＢから符号化ビデオデータを受信し、ビデオデータをエントロピー復号してシンタックス要素を再生し得る。予測処理ユニット３０４と、逆量子化ユニット３０６と、逆変換処理ユニット３０８と、再構築ユニット３１０と、フィルタユニット３１２とは、ビットストリームから抽出されたシンタックス要素に基づいて復号ビデオデータを生成し得る。
[0200]概して、ビデオデコーダ３００は、ブロックごとにピクチャを再構築する。ビデオデコーダ３００は、各ブロックに対して個々に再構築演算を実施し得る（ここで、現在再構築されているブロック、すなわち、現在復号されているブロックは、「現在ブロック」と呼ばれることがある）。
[0201]エントロピー復号ユニット３０２は、量子化された変換係数ブロックの量子化された変換係数を定義するシンタックス要素、ならびに量子化パラメータ（ＱＰ）および／または変換モードインジケーションなどの変換情報をエントロピー復号し得る。逆量子化ユニット３０６は、量子化の程度と、同様に、逆量子化ユニット３０６が適用すべき逆量子化の程度とを決定するために、量子化された変換係数ブロックに関連付けられたＱＰを使用し得る。逆量子化ユニット３０６は、量子化された変換係数を逆量子化するために、たとえば、ビット単位の左シフト演算を実施し得る。逆量子化ユニット３０６は、それにより、変換係数を含む変換係数ブロックを形成し得る。
[0202]逆量子化ユニット３０６が変換係数ブロックを形成した後、逆変換処理ユニット３０８は、現在ブロックに関連する残差ブロックを生成するために、変換係数ブロックに１つまたは複数の逆変換を適用し得る。たとえば、逆変換処理ユニット３０８は、逆ＤＣＴ、逆整数変換、逆カルーネンレーベ変換（ＫＬＴ）、逆回転変換、逆方向変換、または別の逆変換を係数ブロックに適用し得る。
[0203]さらに、予測処理ユニット３０４は、エントロピー復号ユニット３０２によってエントロピー復号された予測情報シンタックス要素に従って予測ブロックを生成する。たとえば、予測情報シンタックス要素が、現在ブロックがインター予測されることを示す場合、動き補償ユニット３１６は、予測ブロックを生成し得る。この場合、予測情報シンタックス要素は、参照ブロックをそれから取り出すべきＤＰＢ３１４中の参照ピクチャ、ならびに現在ピクチャ中の現在ブロックのロケーションに対して参照ピクチャ中の参照ブロックのロケーションを識別する動きベクトルを示し得る。動き補償ユニット３１６は、概して、動き補償ユニット２２４（図１８）に関して説明されたのと実質的に同様である様式でインター予測プロセスを実施し得る。
[0204]別の例として、予測情報シンタックス要素が、現在ブロックがイントラ予測されることを示す場合、イントラ予測ユニット３１８は、予測情報シンタックス要素によって示されるイントラ予測モードに従って予測ブロックを生成し得る。別の例として、予測情報シンタックス要素が、現在ブロックがＡＬＷＩＰモードでイントラ予測されることを示す場合、イントラ予測ユニット３１８は、現在ブロックの左エッジ近隣サンプルのセットと現在ブロックの上部エッジ近隣サンプルのセットとに基づいて、左エッジサンプルのサブセットと上部エッジサンプルのサブセットとを導出することと、中間サンプルの中間ブロックを生成するために、左エッジサンプルのサブセットと上部エッジサンプルのサブセットとにアフィンモデルを適用することと、最終予測ブロックを生成するために、現在ブロックの左エッジ近隣サンプルのセットと上部エッジ近隣サンプルのセットとを使用して、中間サンプルをフィルタ処理することとを行い得る。この場合も、イントラ予測ユニット３１８は、概して、イントラ予測ユニット２２６（図１８）に関して説明されたのと実質的に同様である様式でイントラ予測プロセスを実施し得る。イントラ予測ユニット３１８は、ＤＰＢ３１４から、現在ブロックに対する近隣サンプルのデータを取り出し得る。
[0205]再構築ユニット３１０は、予測ブロックと残差ブロックとを使用して現在ブロックを再構築し得る。たとえば、再構築ユニット３１０は、現在ブロックを再構築するために、予測ブロックの対応するサンプルに残差ブロックのサンプルを加算し得る。
[0206]フィルタユニット３１２は、再構築ブロックに対して１つまたは複数のフィルタ演算を実施し得る。たとえば、フィルタユニット３１２は、再構築ブロックのエッジに沿ってブロッキネスアーティファクトを低減するためのデブロッキング動作を実施し得る。フィルタユニット３１２の動作は、すべての例において必ずしも実施されるとは限らない。
[0207]ビデオデコーダ３００は、再構築ブロックをＤＰＢ３１４に記憶し得る。上記で論じられたように、ＤＰＢ３１４は、イントラ予測のための現在ピクチャのサンプルおよび後続の動き補償のための以前に復号されたピクチャなど、参照情報を予測処理ユニット３０４に提供し得る。その上、ビデオデコーダ３００は、ＤＰＢからの復号ピクチャを、後続のプレゼンテーションのために、図１のディスプレイデバイス１１８などのディスプレイデバイス上に出力し得る。
[0208]このようにして、ビデオデコーダ３００は、ビデオデータを記憶するように構成されたメモリと、回路中に実装された１つまたは複数の処理ユニットとを含む、ビデオ復号デバイスの一例を表し、１つまたは複数の処理ユニットは、アフィン線形重み付けイントラ予測におけるアップサンプリングのための技法を含む、本開示の技法を実施するように構成される。
[0209]図２０は、現在ブロックを符号化するための例示的なプロセスを示すフローチャートである。現在ブロックは現在ＣＵを含み得る。ビデオエンコーダ２００（図１および図１８）に関して説明されるが、他のデバイスが図２０の方法と同様の方法を実施するように構成され得ることを理解されたい。
[0210]この例では、ビデオエンコーダ２００は、最初に、現在ブロックを予測する（３５０）。たとえば、ビデオエンコーダ２００は、本開示で説明されるイントラ予測技法のいずれかを使用して現在ブロックのための予測ブロックを形成し得る。ビデオエンコーダ２００は、次いで、現在ブロックのための残差ブロックを計算し得る（３５２）。残差ブロックを計算するために、ビデオエンコーダ２００は、元のコーディングされていないブロックと、現在ブロックのための予測ブロックとの間の差分を計算し得る。ビデオエンコーダ２００は、次いで、残差ブロックの係数を変換し、量子化し得る（３５４）。次に、ビデオエンコーダ２００は、残差ブロックの量子化された変換係数を走査し得る（３５６）。走査中に、または走査に続いて、ビデオエンコーダ２００は、係数をエントロピー符号化し得る（３５８）。たとえば、ビデオエンコーダ２００は、ＣＡＶＬＣまたはＣＡＢＡＣを使用して係数を符号化し得る。次いで、ビデオエンコーダ２００は、ブロックのエントロピーコード化データを出力し得る（３６０）。
[0211]図２１は、ビデオデータの現在ブロックを復号するための例示的なプロセスを示すフローチャートである。現在ブロックは現在ＣＵを含み得る。ビデオデコーダ３００（図１および図１９）に関して説明されるが、他のデバイスが図２１の方法と同様の方法を実施するように構成され得ることを理解されたい。
[0212]ビデオデコーダ３００は、エントロピーコード化予測情報、および現在ブロックに対応する残差ブロックの係数に対するエントロピーコード化データなど、現在ブロックのエントロピーコード化データを受信し得る（３７０）。ビデオデコーダ３００は、現在ブロックについての予測情報を決定し残差ブロックの係数を再生するために、エントロピーコード化データをエントロピー復号し得る（３７２）。ビデオデコーダ３００は、現在ブロックのための予測ブロックを計算するために、たとえば、現在ブロックについての予測情報によって示されるイントラ予測またはインター予測モードを使用して、現在ブロックを予測し得る（３７４）。ビデオデコーダ３００は、たとえば、本開示で説明されるイントラ予測技法のいずれかを使用して現在ブロックを予測し得る。ビデオデコーダ３００は、次いで、量子化された変換係数のブロックを作成するために、再生された係数を逆走査し得る（３７６）。ビデオデコーダ３００は、次いで、残差ブロックを生成するために、係数を逆量子化し逆変換し得る（３７８）。ビデオデコーダ３００は、予測ブロックと残差ブロックとを組み合わせることによって、最終的に現在ブロックを復号し得る（３８０）。
[0213]図２２は、ビデオデータの現在ブロックを復号するための例示的なプロセスを示すフローチャートである。現在ブロックは現在ＣＵを含み得る。ビデオデコーダ３００（図１および図１９）に関して説明されるが、他のデバイスが図２２の方法と同様の方法を実施するように構成され得ることを理解されたい。たとえば、ビデオエンコーダ２００（図１および１８）の復号ループも、図２２の技法を実施し得る。
[0214]図２２の例では、ビデオデコーダ３００は、ビデオデータの現在ブロックがＡＬＷＩＰモードで符号化されると決定する（３８２）。ビデオデコーダ３００は、現在ブロックの左エッジ近隣サンプルのセットと現在ブロックの上部エッジ近隣サンプルのセットとに基づいて、左エッジサンプルのサブセットと上部エッジサンプルのサブセットとを導出する（３８４）。ビデオデコーダ３００は、たとえば、平均化を使用して、左エッジ近隣サンプルのセットをダウンサンプリングすることによって左エッジサンプルのサブセットを導出し、平均化を使用して、上部エッジ近隣サンプルのセットをダウンサンプリングすることによって上部エッジサンプルのサブセットを導出し得る。
[0215]上部エッジ近隣サンプルのセットは、たとえば、Ｎ個の合計サンプルを有し得、上部エッジサンプルのサブセットは、合計Ｎ／２個のサンプルを有し得、ここで、Ｎは、現在ブロック中に含まれる列の数を表す整数である。左エッジ近隣サンプルのセットは、たとえば、Ｎ個の合計サンプルを有し得、左エッジサンプルのサブセットは、合計Ｎ／２個のサンプルを有し得、ここで、Ｎは、現在ブロック中に含まれる行の数を表す整数である。一例では、現在ブロックは、サンプルのＮ×Ｍブロックであり得、ここで、Ｎは、現在ブロック中の列の数と上部エッジサンプルのセット中のサンプルの数とを表す整数値であり、Ｍは、現在ブロック中の行の数と左エッジサンプルのセット中のサンプルの数とを表す整数値である。ＮとＭは、等しくても等しくなくてもよい。左エッジサンプルのセットは、Ｍ／２個のサンプルを有し得、上部エッジサンプルのセットは、Ｎ／２個のサンプルを有し得る。
[0216]ビデオデコーダ３００は、中間サンプルの中間ブロックを生成するために、左エッジサンプルのサブセットと上部エッジサンプルのサブセットとにアフィンモデルを適用する（３８６）。中間サンプルの中間ブロックを生成するために、左エッジサンプルのサブセットと上部エッジサンプルのサブセットとにアフィンモデルを適用するために、ビデオデコーダ３００は、たとえば、左エッジサンプルのサブセットと上部エッジサンプルのサブセットとに行列とバイアスベクトルとを乗算し得る。
[0217]ビデオデコーダ３００は、最終予測ブロックを生成するために、現在ブロックの左エッジ近隣サンプルのセットと上部エッジ近隣サンプルのセットとを使用して、中間サンプルをフィルタ処理する（３８８）。最終予測ブロックを生成するために中間サンプルをフィルタ処理するために、ビデオデコーダ３００は、たとえば、左エッジサンプルのサブセットとは異なる左エッジサンプルの第２のサブセットと、上部エッジサンプルのサブセットとは異なる上部エッジサンプルの第２のサブセットとを使用して、中間サンプルをアップサンプリングし得る。ビデオデコーダ３００は、たとえば、上部エッジサンプルのサブセットまたは左エッジサンプルのサブセットからのサンプル値とは対照的に、上部エッジサンプルのセットまたは左エッジサンプルのセット中の実際のサンプル値に基づいて中間サンプルをアップサンプリングし得、ここで、サブセットは、平均化によって取得され、セットとは異なる。最終予測ブロックを生成するために中間サンプルをフィルタ処理するために、ビデオデコーダ３００は、垂直方向に１つまたは複数のフィルタを適用し、水平方向に１つまたは複数のフィルタを適用し得る。垂直方向に１つまたは複数のフィルタを適用するために、ビデオデコーダ３００は、垂直方向に線形補間を実施するために上部エッジサンプルのセットのうちのサンプルを使用し得る。すなわち、上部エッジサンプルのサブセットがＭ／２個のサンプルを含む場合、ビデオデコーダ３００は、垂直方向に１つまたは複数のフィルタを適用するとき、Ｍ個の上部エッジサンプルのうちの異なるサブセットを使用し得る。補間のために使用されるサンプルは、平均化から決定されたサンプルの代わりに、Ｍ個の上部エッジサンプルの実際のサンプルであり得る。垂直方向に１つまたは複数のフィルタを適用することの一部として、ビデオデコーダ３００は、上部エッジサンプルのセットのうちのＭ個のサンプルのうちの少なくともいくつかに位置依存の重みを適用することを備え得る。
[0218]ビデオデコーダ３００は、最終予測ブロックに基づいてビデオデータの現在ブロックを復号する（３９０）。最終予測ブロックに基づいてビデオデータの現在ブロックを復号するために、ビデオデコーダ３００は、ビデオデータの現在ブロックの残差値を決定することと、ビデオデータの現在ブロックのための再構築ブロックを決定するために、フィルタ処理された予測ブロックに残差値を加算することと、ビデオデータの復号ブロックを生成するために、再構築ブロックに１つまたは複数のフィルタを適用することとを行い得る。ビデオデコーダ３００は、次いで、ディスプレイおよび／またはストレージに、ビデオデータの復号ブロックを含むピクチャを出力し得る。ビデオデコーダ３００は、たとえば、ビデオデータの他のピクチャを復号する際に使用するためのピクチャのコピーを記憶し得る。
[0219]上記例に応じて、本明細書で説明された技法のいずれかのいくつかの行為またはイベントは、異なるシーケンスで実施され得、追加、マージ、または完全に除外され得る（たとえば、すべての説明された行為またはイベントが本技法の実践のために必要であるとは限らない）ことを認識されたい。その上、いくつかの例では、行為またはイベントは、連続的にではなく、たとえば、マルチスレッド処理、割込み処理、または複数のプロセッサを通して同時に実施され得る。
[0220]１つまたは複数の例では、説明された機能は、ハードウェア、ソフトウェア、ファームウェア、またはそれらの任意の組合せにおいて実装され得る。ソフトウェアで実装される場合、機能は、１つまたは複数の命令またはコードとして、コンピュータ可読媒体上に記憶され得るか、あるいはコンピュータ可読媒体を介して送信され、ハードウェアベースの処理ユニットによって実行され得る。コンピュータ可読媒体は、データ記憶媒体などの有形媒体に対応する、コンピュータ可読記憶媒体を含み得るか、または、たとえば、通信プロトコルに従って、ある場所から別の場所へのコンピュータプログラムの転送を促進する任意の媒体を含む通信媒体を含み得る。このようにして、コンピュータ可読媒体は、概して、（１）非一時的な有形コンピュータ可読記憶媒体、あるいは（２）信号または搬送波などの通信媒体に対応し得る。データ記憶媒体は、本開示において説明された技法の実装のための命令、コードおよび／またはデータ構造を取り出すために、１つまたは複数のコンピュータあるいは１つまたは複数のプロセッサによってアクセスされ得る、任意の利用可能な媒体であり得る。コンピュータプログラム製品はコンピュータ可読媒体を含み得る。
[0221]限定ではなく例として、そのようなコンピュータ可読記憶媒体は、ＲＡＭ、ＲＯＭ、ＥＥＰＲＯＭ（登録商標）、ＣＤ－ＲＯＭまたは他の光ディスクストレージ、磁気ディスクストレージ、または他の磁気ストレージデバイス、フラッシュメモリ、あるいは命令またはデータ構造の形態の所望のプログラムコードを記憶するために使用され得、コンピュータによってアクセスされ得る任意の他の媒体のうちの１つまたは複数を含むことができる。また、いかなる接続もコンピュータ可読媒体と適切に呼ばれる。たとえば、命令が、同軸ケーブル、光ファイバーケーブル、ツイストペア、デジタル加入者回線（ＤＳＬ）、または赤外線、無線、およびマイクロ波などのワイヤレス技術を使用して、ウェブサイト、サーバ、または他のリモートソースから送信される場合、同軸ケーブル、光ファイバーケーブル、ツイストペア、ＤＳＬ、または赤外線、無線、およびマイクロ波などのワイヤレス技術は媒体の定義に含まれる。しかしながら、コンピュータ可読記憶媒体およびデータ記憶媒体は、接続、搬送波、信号、または他の一時的媒体を含むのではなく、代わりに、非一時的な有形の記憶媒体を対象とすることを理解されたい。本明細書で使用されるディスク（disk）およびディスク（disc）は、コンパクトディスク（disc）（ＣＤ）と、レーザーディスク（登録商標）（disc）と、光ディスク（disc）と、デジタル多用途ディスク（disc）（ＤＶＤ）と、フロッピー（登録商標）ディスク（disk）と、Ｂｌｕ－ｒａｙディスク（disc）とを含み、ここで、ディスク（disk）は通常、データを磁気的に再生し、ディスク（disc）は、データをレーザーで光学的に再生する。上記の組合せもコンピュータ可読媒体の範囲に含まれるべきである。
[0222]命令は、１つまたは複数のＤＳＰ、汎用マイクロプロセッサ、ＡＳＩＣ、ＦＰＧＡ、あるいは他の等価な集積回路またはディスクリート論理回路など、１つまたは複数のプロセッサによって実行され得る。したがって、本明細書で使用される「プロセッサ」という用語は、前述の構造、または本明細書で説明された技法の実装に好適な任意の他の構造のいずれかを指すことがある。さらに、いくつかの態様では、本明細書で説明された機能は、符号化および復号のために構成された専用ハードウェアおよび／またはソフトウェアモジュール内に提供され得るか、あるいは複合コーデックに組み込まれ得る。また、本技法は、１つもしくは複数の回路または論理要素において完全に実装され得る。
[0223]本開示の技法は、ワイヤレスハンドセット、集積回路（ＩＣ）またはＩＣのセット（たとえば、チップセット）を含む、多種多様なデバイスまたは装置において実装され得る。本開示では、開示される技法を実施するように構成されたデバイスの機能的態様を強調するために様々な構成要素、モジュール、またはユニットについて説明されたが、それらの構成要素、モジュール、またはユニットを、必ずしも異なるハードウェアユニットによって実現する必要があるとは限らない。むしろ、上記で説明されたように、様々なユニットが、好適なソフトウェアおよび／またはファームウェアとともに、上記で説明された１つまたは複数のプロセッサを含めて、コーデックハードウェアユニットにおいて組み合わされ得るか、または相互動作可能なハードウェアユニットの集合によって提供され得る。
[0224]様々な例について説明された。これらおよび他の例は、以下の特許請求の範囲の範囲内に入る。
以下に本願の出願当初の特許請求の範囲に記載された発明を付記する。
［１］ ビデオデータを復号する方法であって、
ビデオデータの現在ブロックがアフィン線形重み付けイントラ予測（ＡＬＷＩＰ）モードで符号化されていると決定することと、
前記現在ブロックの左エッジ近隣サンプルのセットと前記現在ブロックの上部エッジ近隣サンプルのセットとに基づいて、左エッジサンプルのサブセットと上部エッジサンプルのサブセットとを導出することと、ここにおいて、左エッジサンプルの前記サブセットは、左エッジサンプルの前記セットよりも少数のサンプルを含み、上部エッジサンプルの前記サブセットは、上部エッジサンプルの前記セットよりも少数のサンプルを含み、
中間サンプルの中間ブロックを生成するために、左エッジサンプルの前記サブセットと上部エッジサンプルの前記サブセットとにアフィンモデルを適用することと、
最終予測ブロックを生成するために、前記現在ブロックの左エッジ近隣サンプルの前記セットと上部エッジ近隣サンプルの前記セットとを使用して、前記中間サンプルをフィルタ処理することと、
前記最終予測ブロックに基づいてビデオデータの前記現在ブロックを復号することと、
を備える、方法。
［２］ 左エッジサンプルの前記サブセットを導出することは、左エッジ近隣サンプルの前記セットをダウンサンプリングすることを備え、ここにおいて、左エッジサンプルの前記サブセットの各サンプルは、左エッジサンプルの前記セットのうちの２つ以上のサンプルの平均を備え、
上部エッジサンプルの前記サブセットを導出することは、上部エッジ近隣サンプルの前記セットをダウンサンプリングすることを備え、ここにおいて、上部エッジサンプルの前記サブセットの各サンプルは、上部エッジサンプルの前記セットのうちの２つ以上のサンプルの平均を備える、［１］に記載の方法。
［３］ 中間サンプルの前記中間ブロックを生成するために、左エッジサンプルの前記サブセットと上部エッジサンプルの前記サブセットとに前記アフィンモデルを適用することは、左エッジサンプルの前記サブセットと上部エッジサンプルの前記サブセットとに、行列とバイアスベクトルとを乗算することを備える、［１］に記載の方法。
［４］ 上部エッジ近隣サンプルの前記セットは、Ｎ個の合計サンプルを有し、上部エッジサンプルの前記サブセットは、合計Ｎ／２個のサンプルを有し、ここにおいて、Ｎは、前記現在ブロック中に含まれる列の数を表す整数である、［１］に記載の方法。
［５］ 左エッジ近隣サンプルの前記セットは、Ｎ個の合計サンプルを有し、左エッジサンプルの前記サブセットは、合計Ｎ／２個のサンプルを有し、ここにおいて、Ｎは、前記現在ブロック中に含まれる行の数を表す整数である、［１］に記載の方法。
［６］ 前記最終予測ブロックを生成するために前記中間サンプルをフィルタ処理することは、左エッジサンプルの前記サブセットとは異なる左エッジサンプルの第２のサブセットと、上部エッジサンプルの前記サブセットとは異なる上部エッジサンプルの第２のサブセットとを使用して、前記中間サンプルをアップサンプリングすることを備える、［１］に記載の方法。
［７］ 前記現在ブロックは、サンプルのＮ×Ｍブロックであり、Ｎは、前記現在ブロック中の列の数と上部エッジサンプルの前記セット中のサンプルの数とを表す整数値であり、Ｍは、前記現在ブロック中の行の数と左エッジサンプルの前記セット中のサンプルの数とを表す整数値であり、
左エッジサンプルの前記サブセットは、Ｍ／２個のサンプルを有し、上部エッジサンプルの前記サブセットは、Ｎ／２個のサンプルを有する、［１］に記載の方法。
［８］ 最終予測ブロックを生成するために前記中間サンプルをフィルタ処理することは、垂直方向に１つまたは複数のフィルタを適用することを備える、［７］に記載の方法。
［９］ 前記垂直方向に前記１つまたは複数のフィルタを適用することは、前記垂直方向に線形補間を実施するために上部エッジサンプルの前記セットのうちのサンプルを使用することを含む、［８］に記載の方法。
［１０］ 前記垂直方向に前記１つまたは複数のフィルタを適用することは、上部エッジサンプルの前記セットの前記Ｎ個のサンプルのうちの少なくともいくつかに位置依存の重みを適用することを備える、［８］に記載の方法。
［１１］ 前記最終予測ブロックに基づいてビデオデータの前記現在ブロックを復号することは、
ビデオデータの前記現在ブロックの残差値を決定することと、
ビデオデータの前記現在ブロックのための再構築ブロックを決定するために、前記フィルタ処理された予測ブロックに前記残差値を加算することと、
ビデオデータの復号ブロックを生成するために、前記再構築ブロックに１つまたは複数のフィルタを適用することと、
を備える、［１］に記載の方法。
［１２］ 前記方法は、ビデオ符号化プロセスの一部として実施される、［１］に記載の方法。
［１３］ ビデオデータを復号するためのデバイスであって、
ビデオデータを記憶するように構成されたメモリと、
回路中に実装された１つまたは複数のプロセッサと、を備え、前記１つまたは複数のプロセッサは、
ビデオデータの現在ブロックがアフィン線形重み付けイントラ予測（ＡＬＷＩＰ）モードで符号化されていると決定することと、
前記現在ブロックの左エッジ近隣サンプルのセットと前記現在ブロックの上部エッジ近隣サンプルのセットとに基づいて、左エッジサンプルのサブセットと上部エッジサンプルのサブセットとを導出することと、ここにおいて、左エッジサンプルの前記サブセットは、左エッジサンプルの前記セットよりも少数のサンプルを含み、上部エッジサンプルの前記サブセットは、上部エッジサンプルの前記セットよりも少数のサンプルを含み、
中間サンプルの中間ブロックを生成するために、左エッジサンプルの前記サブセットと上部エッジサンプルの前記サブセットとにアフィンモデルを適用することと、
最終予測ブロックを生成するために、前記現在ブロックの左エッジ近隣サンプルの前記セットと上部エッジ近隣サンプルの前記セットとを使用して、前記中間サンプルをフィルタ処理することと、
前記最終予測ブロックに基づいてビデオデータの前記現在ブロックを復号することと、を行うように構成される、デバイス。
［１４］ 左エッジサンプルの前記サブセットを導出するために、前記１つまたは複数のプロセッサは、左エッジ近隣サンプルの前記セットをダウンサンプリングするようにさらに構成され、ここにおいて、左エッジサンプルの前記サブセットの各サンプルは、左エッジサンプルの前記セットのうちの２つ以上のサンプルの平均を備え、
上部エッジサンプルの前記サブセットを導出するために、前記１つまたは複数のプロセッサは、上部エッジ近隣サンプルの前記セットをダウンサンプリングするようにさらに構成され、ここにおいて、上部エッジサンプルの前記サブセットの各サンプルは、上部エッジサンプルの前記セットのうちの２つ以上のサンプルの平均を備える、
［１３］に記載のデバイス。
［１５］ 中間サンプルの前記中間ブロックを生成するために、左エッジサンプルの前記サブセットと上部エッジサンプルの前記サブセットとに前記アフィンモデルを適用するために、前記１つまたは複数のプロセッサは、左エッジサンプルの前記サブセットと上部エッジサンプルの前記サブセットとに、行列とバイアスベクトルとを乗算するようにさらに構成された、［１３］に記載のデバイス。
［１６］ 上部エッジ近隣サンプルの前記セットは、Ｎ個の合計サンプルを有し、上部エッジサンプルの前記サブセットは、合計Ｎ／２個のサンプルを有し、ここにおいて、Ｎは、前記現在ブロック中に含まれる列の数を表す整数である、［１３］に記載のデバイス。
［１７］ 左エッジ近隣サンプルの前記セットは、Ｎ個の合計サンプルを有し、左エッジサンプルの前記サブセットは、合計Ｎ／２個のサンプルを有し、ここにおいて、Ｎは、前記現在ブロック中に含まれる行の数を表す整数である、［１３］に記載のデバイス。
［１８］ 前記最終予測ブロックを生成するために前記中間サンプルをフィルタ処理するために、前記１つまたは複数のプロセッサは、左エッジサンプルの前記サブセットとは異なる左エッジサンプルの第２のサブセットと、上部エッジサンプルの前記サブセットとは異なる上部エッジサンプルの第２のサブセットとを使用して、前記中間サンプルをアップサンプリングするようにさらに構成された、［１３］に記載のデバイス。
［１９］ 前記現在ブロックは、サンプルのＮ×Ｍブロックであり、Ｎは、前記現在ブロック中の列の数と上部エッジサンプルの前記セット中のサンプルの数とを表す整数値であり、Ｍは、前記現在ブロック中の行の数と左エッジサンプルの前記セット中のサンプルの数とを表す整数値であり、
左エッジサンプルの前記サブセットは、Ｍ／２個のサンプルを有し、上部エッジサンプルの前記サブセットは、Ｎ／２個のサンプルを有する、［１３］に記載のデバイス。
［２０］ 最終予測ブロックを生成するために前記中間サンプルをフィルタ処理するために、前記１つまたは複数のプロセッサは、垂直方向に１つまたは複数のフィルタを適用するようにさらに構成された、［１９］に記載のデバイス。
［２１］ 前記垂直方向に前記１つまたは複数のフィルタを適用するために、前記１つまたは複数のプロセッサは、前記垂直方向に線形補間を実施するために上部エッジサンプルの前記セットのうちのサンプルを使用するようにさらに構成された、［２０］に記載のデバイス。
［２２］ 前記垂直方向に前記１つまたは複数のフィルタを適用するために、前記１つまたは複数のプロセッサは、上部エッジサンプルの前記セットの前記Ｎ個のサンプルのうちの少なくともいくつかに位置依存の重みを適用するようにさらに構成された、［２０］に記載のデバイス。
［２３］ 前記最終予測ブロックに基づいてビデオデータの前記現在ブロックを復号するために、前記１つまたは複数のプロセッサは、
ビデオデータの前記現在ブロックの残差値を決定することと、
ビデオデータの前記現在ブロックのための再構築ブロックを決定するために、前記フィルタ処理された予測ブロックに前記残差値を加算することと、
ビデオデータの復号ブロックを生成するために、前記再構築ブロックに１つまたは複数のフィルタを適用することと、
を行うようにさらに構成された、［１３］に記載のデバイス。
［２４］ 前記デバイスは、符号化ビデオデータを受信するように構成された受信機をさらに備えるワイヤレス通信デバイスを備える、［１３］に記載のデバイス。
［２５］ 前記ワイヤレス通信デバイスは、電話ハンドセットを備え、前記受信機は、ワイヤレス通信規格に従って、前記符号化ビデオデータを備える信号を復調するように構成された、［２４］に記載のデバイス。
［２６］ 前記デバイスは、符号化ビデオデータを送信するように構成された送信機をさらに備えるワイヤレス通信デバイスを備える、［１３］に記載のデバイス。
［２７］ 前記ワイヤレス通信デバイスは、電話ハンドセットを備え、前記送信機は、ワイヤレス通信規格に従って、前記符号化ビデオデータを備える信号を変調するように構成された、［２６］に記載のデバイス。
［２８］ 命令を記憶するコンピュータ可読記憶媒体であって、前記命令は、１つまたは複数のプロセッサによって実行されたとき、前記１つまたは複数のプロセッサに、
ビデオデータの現在ブロックがアフィン線形重み付けイントラ予測（ＡＬＷＩＰ）モードで符号化されていると決定することと、
前記現在ブロックの左エッジ近隣サンプルのセットと前記現在ブロックの上部エッジ近隣サンプルのセットとに基づいて、左エッジサンプルのサブセットと上部エッジサンプルのサブセットとを導出することと、ここにおいて、左エッジサンプルの前記サブセットは、左エッジサンプルの前記セットよりも少数のサンプルを含み、上部エッジサンプルの前記サブセットは、上部エッジサンプルの前記セットよりも少数のサンプルを含み、
中間サンプルの中間ブロックを生成するために、左エッジサンプルの前記サブセットと上部エッジサンプルの前記サブセットとにアフィンモデルを適用することと、
最終予測ブロックを生成するために、前記現在ブロックの左エッジ近隣サンプルの前記セットと上部エッジ近隣サンプルの前記セットとを使用して、前記中間サンプルをフィルタ処理することと、
前記最終予測ブロックに基づいてビデオデータの前記現在ブロックを復号することと、を行わせる、コンピュータ可読記憶媒体。
［２９］ 左エッジサンプルの前記サブセットを導出するために、前記命令は、前記１つまたは複数のプロセッサに、左エッジ近隣サンプルの前記セットをダウンサンプリングさせ、ここにおいて、左エッジサンプルの前記サブセットの各サンプルは、左エッジサンプルの前記セットのうちの２つ以上のサンプルの平均を備える、
上部エッジサンプルの前記サブセットを導出するために、前記命令は、前記１つまたは複数のプロセッサに、上部エッジ近隣サンプルの前記セットをダウンサンプリングさせ、ここにおいて、上部エッジサンプルの前記サブセットの各サンプルは、上部エッジサンプルの前記セットのうちの２つ以上のサンプルの平均を備える、
［２８］に記載のコンピュータ可読記憶媒体。
［３０］ 中間サンプルの前記中間ブロックを生成するために、左エッジサンプルの前記サブセットと上部エッジサンプルの前記サブセットとに前記アフィンモデルを適用するために、前記命令は、前記１つまたは複数のプロセッサに、左エッジサンプルの前記サブセットと上部エッジサンプルの前記サブセットとに、行列とバイアスベクトルとを乗算させる、［２８］に記載のコンピュータ可読記憶媒体。
［３１］ 上部エッジ近隣サンプルの前記セットは、Ｎ個の合計サンプルを有し、上部エッジサンプルの前記サブセットは、合計Ｎ／２個のサンプルを有し、ここにおいて、Ｎは、前記現在ブロック中に含まれる列の数を表す整数である、［２８］に記載のコンピュータ可読記憶媒体。
［３２］ 左エッジ近隣サンプルの前記セットは、Ｎ個の合計サンプルを有し、左エッジサンプルの前記サブセットは、合計Ｎ／２個のサンプルを有し、ここにおいて、Ｎは、前記現在ブロック中に含まれる行の数を表す整数である、［２８］に記載のコンピュータ可読記憶媒体。
［３３］ 前記最終予測ブロックを生成するために前記中間サンプルをフィルタ処理するために、前記命令は、前記１つまたは複数のプロセッサに、左エッジサンプルの前記サブセットとは異なる左エッジサンプルの第２のサブセットと、上部エッジサンプルの前記サブセットとは異なる上部エッジサンプルの第２のサブセットとを使用して、前記中間サンプルをアップサンプリングさせる、［２８］に記載のコンピュータ可読記憶媒体。
［３４］ 前記現在ブロックは、サンプルのＮ×Ｍブロックであり、Ｎは、前記現在ブロック中の列の数と上部エッジサンプルの前記セット中のサンプルの数とを表す整数値であり、Ｍは、前記現在ブロック中の行の数と左エッジサンプルの前記セット中のサンプルの数とを表す整数値であり、
左エッジサンプルの前記サブセットは、Ｍ／２個のサンプルを有し、上部エッジサンプルの前記サブセットは、Ｎ／２個のサンプルを有する、
［２８］に記載のコンピュータ可読記憶媒体。
［３５］ 最終予測ブロックを生成するために前記中間サンプルをフィルタ処理するために、前記命令は、前記１つまたは複数のプロセッサに、垂直方向に１つまたは複数のフィルタを適用させる、［３４］に記載のコンピュータ可読記憶媒体。
［３６］ 前記垂直方向に前記１つまたは複数のフィルタを適用するために、前記命令は、前記１つまたは複数のプロセッサに、前記垂直方向に線形補間を実施するために上部エッジサンプルの前記セットのうちのサンプルを使用させる、［３５］に記載のコンピュータ可読記憶媒体。
［３７］ 前記垂直方向に前記１つまたは複数のフィルタを適用するために、前記命令は、前記１つまたは複数のプロセッサに、上部エッジサンプルの前記セットの前記Ｎ個のサンプルのうちの少なくともいくつかに位置依存の重みを適用させる、［３５］に記載のコンピュータ可読記憶媒体。
［３８］ 前記最終予測ブロックに基づいてビデオデータの前記現在ブロックを復号するために、前記命令は、前記１つまたは複数のプロセッサに、
ビデオデータの前記現在ブロックの残差値を決定することと、
ビデオデータの前記現在ブロックのための再構築ブロックを決定するために、前記フィルタ処理された予測ブロックに前記残差値を加算することと、
ビデオデータの復号ブロックを生成するために、前記再構築ブロックに１つまたは複数のフィルタを適用することと、
を行わせる、［２８］に記載のコンピュータ可読記憶媒体。
［３９］ ビデオデータを復号するための装置であって、
ビデオデータの現在ブロックがアフィン線形重み付けイントラ予測（ＡＬＷＩＰ）モードで符号化されると決定するための手段と、
前記現在ブロックの左エッジ近隣サンプルのセットと前記現在ブロックの上部エッジ近隣サンプルのセットとに基づいて、左エッジサンプルのサブセットと上部エッジサンプルのサブセットとを導出するための手段と、ここにおいて、左エッジサンプルの前記サブセットは、左エッジサンプルの前記セットよりも少数のサンプルを含み、上部エッジサンプルの前記サブセットは、上部エッジサンプルの前記セットよりも少数のサンプルを含み、
中間サンプルの中間ブロックを生成するために、左エッジサンプルの前記サブセットと上部エッジサンプルの前記サブセットとにアフィンモデルを適用するための手段と、
最終予測ブロックを生成するために、前記現在ブロックの左エッジ近隣サンプルの前記セットと上部エッジ近隣サンプルの前記セットとを使用して、前記中間サンプルをフィルタ処理するための手段と、
前記最終予測ブロックに基づいてビデオデータの前記現在ブロックを復号するための手段と、
を備える、装置。
［４０］ 左エッジサンプルの前記サブセットを導出することは、左エッジ近隣サンプルの前記セットをダウンサンプリングすることを備え、ここにおいて、左エッジサンプルの前記サブセットの各サンプルは、左エッジサンプルの前記セットのうちの２つ以上のサンプルの平均を備え、
上部エッジサンプルの前記サブセットを導出することは、上部エッジ近隣サンプルの前記セットをダウンサンプリングすることを備える、ここにおいて、上部エッジサンプルの前記サブセットの各サンプルは、上部エッジサンプルの前記セットのうちの２つ以上のサンプルの平均を備える、
［３９］に記載の装置。
［４１］ 中間サンプルの前記中間ブロックを生成するために、左エッジサンプルの前記サブセットと上部エッジサンプルの前記サブセットとに前記アフィンモデルを適用することは、左エッジサンプルの前記サブセットと上部エッジサンプルの前記サブセットとに、行列とバイアスベクトルとを乗算することを備える、［３９］に記載の装置。
［４２］ 上部エッジ近隣サンプルの前記セットは、Ｎ個の合計サンプルを有し、上部エッジサンプルの前記サブセットは、合計Ｎ／２個のサンプルを有し、ここにおいて、Ｎは、前記現在ブロック中に含まれる列の数を表す整数である、［３９］に記載の装置。
［４３］ 左エッジ近隣サンプルの前記セットは、Ｎ個の合計サンプルを有し、左エッジサンプルの前記サブセットは、合計Ｎ／２個のサンプルを有し、ここにおいて、Ｎは、前記現在ブロック中に含まれる行の数を表す整数である、［３９］に記載の装置。
［４４］ 前記最終予測ブロックを生成するために前記中間サンプルをフィルタ処理することは、左エッジサンプルの前記サブセットとは異なる左エッジサンプルの第２のサブセットと、上部エッジサンプルの前記サブセットとは異なる上部エッジサンプルの第２のサブセットとを使用して、前記中間サンプルをアップサンプリングすることを備える、［３９］に記載の装置。
［４５］ 前記現在ブロックは、サンプルのＮ×Ｍブロックであり、Ｎは、前記現在ブロック中の列の数と上部エッジサンプルの前記セット中のサンプルの数とを表す整数値であり、Ｍは、前記現在ブロック中の行の数と左エッジサンプルの前記セット中のサンプルの数とを表す整数値であり、
左エッジサンプルの前記サブセットは、Ｍ／２個のサンプルを有し、上部エッジサンプルの前記サブセットは、Ｎ／２個のサンプルを有する、
［３９］に記載の装置。
［４６］ 最終予測ブロックを生成するために前記中間サンプルをフィルタ処理することは、垂直方向に１つまたは複数のフィルタを適用することを備える、［４５］に記載の装置。
［４７］ 前記垂直方向に前記１つまたは複数のフィルタを適用することは、前記垂直方向に線形補間を実施するために上部エッジサンプルの前記セットのうちのサンプルを使用することを含む、［４６］に記載の装置。
［４８］ 前記垂直方向に前記１つまたは複数のフィルタを適用することは、上部エッジサンプルの前記セットの前記Ｎ個のサンプルのうちの少なくともいくつかに位置依存の重みを適用することを備える、［４６］に記載の装置。
［４９］ 前記最終予測ブロックに基づいてビデオデータの前記現在ブロックを復号することは、
ビデオデータの前記現在ブロックの残差値を決定することと、
ビデオデータの前記現在ブロックのための再構築ブロックを決定するために、前記フィルタ処理された予測ブロックに前記残差値を加算することと、
ビデオデータの復号ブロックを生成するために、前記再構築ブロックに１つまたは複数のフィルタを適用することと、
を備える、［３９］に記載の装置。
以下に本願の出願当初の特許請求の範囲に記載された発明を付記する。
［１］ ビデオデータを復号する方法であって、
ビデオデータの現在ブロックがアフィン線形重み付けイントラ予測（ＡＬＷＩＰ）モードで符号化されていると決定することと、
前記現在ブロックの左エッジ近隣サンプルのセットと前記現在ブロックの上部エッジ近隣サンプルのセットとに基づいて、左エッジサンプルのサブセットと上部エッジサンプルのサブセットとを導出することと、ここにおいて、左エッジサンプルの前記サブセットは、左エッジサンプルの前記セットよりも少数のサンプルを含み、上部エッジサンプルの前記サブセットは、上部エッジサンプルの前記セットよりも少数のサンプルを含み、
中間サンプルの中間ブロックを生成するために、左エッジサンプルの前記サブセットと上部エッジサンプルの前記サブセットとにアフィンモデルを適用することと、
最終予測ブロックを生成するために、前記現在ブロックの左エッジ近隣サンプルの前記セットと上部エッジ近隣サンプルの前記セットとを使用して、前記中間サンプルをフィルタ処理することと、
前記最終予測ブロックに基づいてビデオデータの前記現在ブロックを復号することと、
を備える、方法。
［２］ 左エッジサンプルの前記サブセットを導出することは、左エッジ近隣サンプルの前記セットをダウンサンプリングすることを備え、ここにおいて、左エッジサンプルの前記サブセットの各サンプルは、左エッジサンプルの前記セットのうちの２つ以上のサンプルの平均を備え、
上部エッジサンプルの前記サブセットを導出することは、上部エッジ近隣サンプルの前記セットをダウンサンプリングすることを備え、ここにおいて、上部エッジサンプルの前記サブセットの各サンプルは、上部エッジサンプルの前記セットのうちの２つ以上のサンプルの平均を備える、［１］に記載の方法。
［３］ 中間サンプルの前記中間ブロックを生成するために、左エッジサンプルの前記サブセットと上部エッジサンプルの前記サブセットとに前記アフィンモデルを適用することは、左エッジサンプルの前記サブセットと上部エッジサンプルの前記サブセットとに、行列とバイアスベクトルとを乗算することを備える、［１］に記載の方法。
［４］ 上部エッジ近隣サンプルの前記セットは、Ｎ個の合計サンプルを有し、上部エッジサンプルの前記サブセットは、合計Ｎ／２個のサンプルを有し、ここにおいて、Ｎは、前記現在ブロック中に含まれる列の数を表す整数である、［１］に記載の方法。
［５］ 左エッジ近隣サンプルの前記セットは、Ｎ個の合計サンプルを有し、左エッジサンプルの前記サブセットは、合計Ｎ／２個のサンプルを有し、ここにおいて、Ｎは、前記現在ブロック中に含まれる行の数を表す整数である、［１］に記載の方法。
［６］ 前記最終予測ブロックを生成するために前記中間サンプルをフィルタ処理することは、左エッジサンプルの前記サブセットとは異なる左エッジサンプルの第２のサブセットと、上部エッジサンプルの前記サブセットとは異なる上部エッジサンプルの第２のサブセットとを使用して、前記中間サンプルをアップサンプリングすることを備える、［１］に記載の方法。
［７］ 前記現在ブロックは、サンプルのＮ×Ｍブロックであり、Ｎは、前記現在ブロック中の列の数と上部エッジサンプルの前記セット中のサンプルの数とを表す整数値であり、Ｍは、前記現在ブロック中の行の数と左エッジサンプルの前記セット中のサンプルの数とを表す整数値であり、
左エッジサンプルの前記サブセットは、Ｍ／２個のサンプルを有し、上部エッジサンプルの前記サブセットは、Ｎ／２個のサンプルを有する、［１］に記載の方法。
［８］ 最終予測ブロックを生成するために前記中間サンプルをフィルタ処理することは、垂直方向に１つまたは複数のフィルタを適用することを備える、［７］に記載の方法。
［９］ 前記垂直方向に前記１つまたは複数のフィルタを適用することは、前記垂直方向に線形補間を実施するために上部エッジサンプルの前記セットのうちのサンプルを使用することを含む、［８］に記載の方法。
［１０］ 前記垂直方向に前記１つまたは複数のフィルタを適用することは、上部エッジサンプルの前記セットの前記Ｎ個のサンプルのうちの少なくともいくつかに位置依存の重みを適用することを備える、［８］に記載の方法。
［１１］ 前記最終予測ブロックに基づいてビデオデータの前記現在ブロックを復号することは、
ビデオデータの前記現在ブロックの残差値を決定することと、
ビデオデータの前記現在ブロックのための再構築ブロックを決定するために、前記フィルタ処理された予測ブロックに前記残差値を加算することと、
ビデオデータの復号ブロックを生成するために、前記再構築ブロックに１つまたは複数のフィルタを適用することと、
を備える、［１］に記載の方法。
［１２］ 前記方法は、ビデオ符号化プロセスの一部として実施される、［１］に記載の方法。
［１３］ ビデオデータを復号するためのデバイスであって、
ビデオデータを記憶するように構成されたメモリと、
回路中に実装された１つまたは複数のプロセッサと、を備え、前記１つまたは複数のプロセッサは、
ビデオデータの現在ブロックがアフィン線形重み付けイントラ予測（ＡＬＷＩＰ）モードで符号化されていると決定することと、
前記現在ブロックの左エッジ近隣サンプルのセットと前記現在ブロックの上部エッジ近隣サンプルのセットとに基づいて、左エッジサンプルのサブセットと上部エッジサンプルのサブセットとを導出することと、ここにおいて、左エッジサンプルの前記サブセットは、左エッジサンプルの前記セットよりも少数のサンプルを含み、上部エッジサンプルの前記サブセットは、上部エッジサンプルの前記セットよりも少数のサンプルを含み、
中間サンプルの中間ブロックを生成するために、左エッジサンプルの前記サブセットと上部エッジサンプルの前記サブセットとにアフィンモデルを適用することと、
最終予測ブロックを生成するために、前記現在ブロックの左エッジ近隣サンプルの前記セットと上部エッジ近隣サンプルの前記セットとを使用して、前記中間サンプルをフィルタ処理することと、
前記最終予測ブロックに基づいてビデオデータの前記現在ブロックを復号することと、を行うように構成される、デバイス。
［１４］ 左エッジサンプルの前記サブセットを導出するために、前記１つまたは複数のプロセッサは、左エッジ近隣サンプルの前記セットをダウンサンプリングするようにさらに構成され、ここにおいて、左エッジサンプルの前記サブセットの各サンプルは、左エッジサンプルの前記セットのうちの２つ以上のサンプルの平均を備え、
上部エッジサンプルの前記サブセットを導出するために、前記１つまたは複数のプロセッサは、上部エッジ近隣サンプルの前記セットをダウンサンプリングするようにさらに構成され、ここにおいて、上部エッジサンプルの前記サブセットの各サンプルは、上部エッジサンプルの前記セットのうちの２つ以上のサンプルの平均を備える、
［１３］に記載のデバイス。
［１５］ 中間サンプルの前記中間ブロックを生成するために、左エッジサンプルの前記サブセットと上部エッジサンプルの前記サブセットとに前記アフィンモデルを適用するために、前記１つまたは複数のプロセッサは、左エッジサンプルの前記サブセットと上部エッジサンプルの前記サブセットとに、行列とバイアスベクトルとを乗算するようにさらに構成された、［１３］に記載のデバイス。
［１６］ 上部エッジ近隣サンプルの前記セットは、Ｎ個の合計サンプルを有し、上部エッジサンプルの前記サブセットは、合計Ｎ／２個のサンプルを有し、ここにおいて、Ｎは、前記現在ブロック中に含まれる列の数を表す整数である、［１３］に記載のデバイス。
［１７］ 左エッジ近隣サンプルの前記セットは、Ｎ個の合計サンプルを有し、左エッジサンプルの前記サブセットは、合計Ｎ／２個のサンプルを有し、ここにおいて、Ｎは、前記現在ブロック中に含まれる行の数を表す整数である、［１３］に記載のデバイス。
［１８］ 前記最終予測ブロックを生成するために前記中間サンプルをフィルタ処理するために、前記１つまたは複数のプロセッサは、左エッジサンプルの前記サブセットとは異なる左エッジサンプルの第２のサブセットと、上部エッジサンプルの前記サブセットとは異なる上部エッジサンプルの第２のサブセットとを使用して、前記中間サンプルをアップサンプリングするようにさらに構成された、［１３］に記載のデバイス。
［１９］ 前記現在ブロックは、サンプルのＮ×Ｍブロックであり、Ｎは、前記現在ブロック中の列の数と上部エッジサンプルの前記セット中のサンプルの数とを表す整数値であり、Ｍは、前記現在ブロック中の行の数と左エッジサンプルの前記セット中のサンプルの数とを表す整数値であり、
左エッジサンプルの前記サブセットは、Ｍ／２個のサンプルを有し、上部エッジサンプルの前記サブセットは、Ｎ／２個のサンプルを有する、［１３］に記載のデバイス。
［２０］ 最終予測ブロックを生成するために前記中間サンプルをフィルタ処理するために、前記１つまたは複数のプロセッサは、垂直方向に１つまたは複数のフィルタを適用するようにさらに構成された、［１９］に記載のデバイス。
［２１］ 前記垂直方向に前記１つまたは複数のフィルタを適用するために、前記１つまたは複数のプロセッサは、前記垂直方向に線形補間を実施するために上部エッジサンプルの前記セットのうちのサンプルを使用するようにさらに構成された、［２０］に記載のデバイス。
［２２］ 前記垂直方向に前記１つまたは複数のフィルタを適用するために、前記１つまたは複数のプロセッサは、上部エッジサンプルの前記セットの前記Ｎ個のサンプルのうちの少なくともいくつかに位置依存の重みを適用するようにさらに構成された、［２０］に記載のデバイス。
［２３］ 前記最終予測ブロックに基づいてビデオデータの前記現在ブロックを復号するために、前記１つまたは複数のプロセッサは、
ビデオデータの前記現在ブロックの残差値を決定することと、
ビデオデータの前記現在ブロックのための再構築ブロックを決定するために、前記フィルタ処理された予測ブロックに前記残差値を加算することと、
ビデオデータの復号ブロックを生成するために、前記再構築ブロックに１つまたは複数のフィルタを適用することと、
を行うようにさらに構成された、［１３］に記載のデバイス。
［２４］ 前記デバイスは、符号化ビデオデータを受信するように構成された受信機をさらに備えるワイヤレス通信デバイスを備える、［１３］に記載のデバイス。
［２５］ 前記ワイヤレス通信デバイスは、電話ハンドセットを備え、前記受信機は、ワイヤレス通信規格に従って、前記符号化ビデオデータを備える信号を復調するように構成された、［２４］に記載のデバイス。
［２６］ 前記デバイスは、符号化ビデオデータを送信するように構成された送信機をさらに備えるワイヤレス通信デバイスを備える、［１３］に記載のデバイス。
［２７］ 前記ワイヤレス通信デバイスは、電話ハンドセットを備え、前記送信機は、ワイヤレス通信規格に従って、前記符号化ビデオデータを備える信号を変調するように構成された、［２６］に記載のデバイス。
［２８］ 命令を記憶するコンピュータ可読記憶媒体であって、前記命令は、１つまたは複数のプロセッサによって実行されたとき、前記１つまたは複数のプロセッサに、
ビデオデータの現在ブロックがアフィン線形重み付けイントラ予測（ＡＬＷＩＰ）モードで符号化されていると決定することと、
前記現在ブロックの左エッジ近隣サンプルのセットと前記現在ブロックの上部エッジ近隣サンプルのセットとに基づいて、左エッジサンプルのサブセットと上部エッジサンプルのサブセットとを導出することと、ここにおいて、左エッジサンプルの前記サブセットは、左エッジサンプルの前記セットよりも少数のサンプルを含み、上部エッジサンプルの前記サブセットは、上部エッジサンプルの前記セットよりも少数のサンプルを含み、
中間サンプルの中間ブロックを生成するために、左エッジサンプルの前記サブセットと上部エッジサンプルの前記サブセットとにアフィンモデルを適用することと、
最終予測ブロックを生成するために、前記現在ブロックの左エッジ近隣サンプルの前記セットと上部エッジ近隣サンプルの前記セットとを使用して、前記中間サンプルをフィルタ処理することと、
前記最終予測ブロックに基づいてビデオデータの前記現在ブロックを復号することと、を行わせる、コンピュータ可読記憶媒体。
［２９］ 左エッジサンプルの前記サブセットを導出するために、前記命令は、前記１つまたは複数のプロセッサに、左エッジ近隣サンプルの前記セットをダウンサンプリングさせ、ここにおいて、左エッジサンプルの前記サブセットの各サンプルは、左エッジサンプルの前記セットのうちの２つ以上のサンプルの平均を備える、
上部エッジサンプルの前記サブセットを導出するために、前記命令は、前記１つまたは複数のプロセッサに、上部エッジ近隣サンプルの前記セットをダウンサンプリングさせ、ここにおいて、上部エッジサンプルの前記サブセットの各サンプルは、上部エッジサンプルの前記セットのうちの２つ以上のサンプルの平均を備える、
［２８］に記載のコンピュータ可読記憶媒体。
［３０］ 中間サンプルの前記中間ブロックを生成するために、左エッジサンプルの前記サブセットと上部エッジサンプルの前記サブセットとに前記アフィンモデルを適用するために、前記命令は、前記１つまたは複数のプロセッサに、左エッジサンプルの前記サブセットと上部エッジサンプルの前記サブセットとに、行列とバイアスベクトルとを乗算させる、［２８］に記載のコンピュータ可読記憶媒体。
［３１］ 上部エッジ近隣サンプルの前記セットは、Ｎ個の合計サンプルを有し、上部エッジサンプルの前記サブセットは、合計Ｎ／２個のサンプルを有し、ここにおいて、Ｎは、前記現在ブロック中に含まれる列の数を表す整数である、［２８］に記載のコンピュータ可読記憶媒体。
［３２］ 左エッジ近隣サンプルの前記セットは、Ｎ個の合計サンプルを有し、左エッジサンプルの前記サブセットは、合計Ｎ／２個のサンプルを有し、ここにおいて、Ｎは、前記現在ブロック中に含まれる行の数を表す整数である、［２８］に記載のコンピュータ可読記憶媒体。
［３３］ 前記最終予測ブロックを生成するために前記中間サンプルをフィルタ処理するために、前記命令は、前記１つまたは複数のプロセッサに、左エッジサンプルの前記サブセットとは異なる左エッジサンプルの第２のサブセットと、上部エッジサンプルの前記サブセットとは異なる上部エッジサンプルの第２のサブセットとを使用して、前記中間サンプルをアップサンプリングさせる、［２８］に記載のコンピュータ可読記憶媒体。
［３４］ 前記現在ブロックは、サンプルのＮ×Ｍブロックであり、Ｎは、前記現在ブロック中の列の数と上部エッジサンプルの前記セット中のサンプルの数とを表す整数値であり、Ｍは、前記現在ブロック中の行の数と左エッジサンプルの前記セット中のサンプルの数とを表す整数値であり、
左エッジサンプルの前記サブセットは、Ｍ／２個のサンプルを有し、上部エッジサンプルの前記サブセットは、Ｎ／２個のサンプルを有する、
［２８］に記載のコンピュータ可読記憶媒体。
［３５］ 最終予測ブロックを生成するために前記中間サンプルをフィルタ処理するために、前記命令は、前記１つまたは複数のプロセッサに、垂直方向に１つまたは複数のフィルタを適用させる、［３４］に記載のコンピュータ可読記憶媒体。
［３６］ 前記垂直方向に前記１つまたは複数のフィルタを適用するために、前記命令は、前記１つまたは複数のプロセッサに、前記垂直方向に線形補間を実施するために上部エッジサンプルの前記セットのうちのサンプルを使用させる、［３５］に記載のコンピュータ可読記憶媒体。
［３７］ 前記垂直方向に前記１つまたは複数のフィルタを適用するために、前記命令は、前記１つまたは複数のプロセッサに、上部エッジサンプルの前記セットの前記Ｎ個のサンプルのうちの少なくともいくつかに位置依存の重みを適用させる、［３５］に記載のコンピュータ可読記憶媒体。
［３８］ 前記最終予測ブロックに基づいてビデオデータの前記現在ブロックを復号するために、前記命令は、前記１つまたは複数のプロセッサに、
ビデオデータの前記現在ブロックの残差値を決定することと、
ビデオデータの前記現在ブロックのための再構築ブロックを決定するために、前記フィルタ処理された予測ブロックに前記残差値を加算することと、
ビデオデータの復号ブロックを生成するために、前記再構築ブロックに１つまたは複数のフィルタを適用することと、
を行わせる、［２８］に記載のコンピュータ可読記憶媒体。
［３９］ ビデオデータを復号するための装置であって、
ビデオデータの現在ブロックがアフィン線形重み付けイントラ予測（ＡＬＷＩＰ）モードで符号化されると決定するための手段と、
前記現在ブロックの左エッジ近隣サンプルのセットと前記現在ブロックの上部エッジ近隣サンプルのセットとに基づいて、左エッジサンプルのサブセットと上部エッジサンプルのサブセットとを導出するための手段と、ここにおいて、左エッジサンプルの前記サブセットは、左エッジサンプルの前記セットよりも少数のサンプルを含み、上部エッジサンプルの前記サブセットは、上部エッジサンプルの前記セットよりも少数のサンプルを含み、
中間サンプルの中間ブロックを生成するために、左エッジサンプルの前記サブセットと上部エッジサンプルの前記サブセットとにアフィンモデルを適用するための手段と、
最終予測ブロックを生成するために、前記現在ブロックの左エッジ近隣サンプルの前記セットと上部エッジ近隣サンプルの前記セットとを使用して、前記中間サンプルをフィルタ処理するための手段と、
前記最終予測ブロックに基づいてビデオデータの前記現在ブロックを復号するための手段と、
を備える、装置。
［４０］ 左エッジサンプルの前記サブセットを導出することは、左エッジ近隣サンプルの前記セットをダウンサンプリングすることを備え、ここにおいて、左エッジサンプルの前記サブセットの各サンプルは、左エッジサンプルの前記セットのうちの２つ以上のサンプルの平均を備え、
上部エッジサンプルの前記サブセットを導出することは、上部エッジ近隣サンプルの前記セットをダウンサンプリングすることを備える、ここにおいて、上部エッジサンプルの前記サブセットの各サンプルは、上部エッジサンプルの前記セットのうちの２つ以上のサンプルの平均を備える、
［３９］に記載の装置。
［４１］ 中間サンプルの前記中間ブロックを生成するために、左エッジサンプルの前記サブセットと上部エッジサンプルの前記サブセットとに前記アフィンモデルを適用することは、左エッジサンプルの前記サブセットと上部エッジサンプルの前記サブセットとに、行列とバイアスベクトルとを乗算することを備える、［３９］に記載の装置。
［４２］ 上部エッジ近隣サンプルの前記セットは、Ｎ個の合計サンプルを有し、上部エッジサンプルの前記サブセットは、合計Ｎ／２個のサンプルを有し、ここにおいて、Ｎは、前記現在ブロック中に含まれる列の数を表す整数である、［３９］に記載の装置。
［４３］ 左エッジ近隣サンプルの前記セットは、Ｎ個の合計サンプルを有し、左エッジサンプルの前記サブセットは、合計Ｎ／２個のサンプルを有し、ここにおいて、Ｎは、前記現在ブロック中に含まれる行の数を表す整数である、［３９］に記載の装置。
［４４］ 前記最終予測ブロックを生成するために前記中間サンプルをフィルタ処理することは、左エッジサンプルの前記サブセットとは異なる左エッジサンプルの第２のサブセットと、上部エッジサンプルの前記サブセットとは異なる上部エッジサンプルの第２のサブセットとを使用して、前記中間サンプルをアップサンプリングすることを備える、［３９］に記載の装置。
［４５］ 前記現在ブロックは、サンプルのＮ×Ｍブロックであり、Ｎは、前記現在ブロック中の列の数と上部エッジサンプルの前記セット中のサンプルの数とを表す整数値であり、Ｍは、前記現在ブロック中の行の数と左エッジサンプルの前記セット中のサンプルの数とを表す整数値であり、
左エッジサンプルの前記サブセットは、Ｍ／２個のサンプルを有し、上部エッジサンプルの前記サブセットは、Ｎ／２個のサンプルを有する、
［３９］に記載の装置。
［４６］ 最終予測ブロックを生成するために前記中間サンプルをフィルタ処理することは、垂直方向に１つまたは複数のフィルタを適用することを備える、［４５］に記載の装置。
［４７］ 前記垂直方向に前記１つまたは複数のフィルタを適用することは、前記垂直方向に線形補間を実施するために上部エッジサンプルの前記セットのうちのサンプルを使用することを含む、［４６］に記載の装置。
［４８］ 前記垂直方向に前記１つまたは複数のフィルタを適用することは、上部エッジサンプルの前記セットの前記Ｎ個のサンプルのうちの少なくともいくつかに位置依存の重みを適用することを備える、［４６］に記載の装置。
［４９］ 前記最終予測ブロックに基づいてビデオデータの前記現在ブロックを復号することは、
ビデオデータの前記現在ブロックの残差値を決定することと、
ビデオデータの前記現在ブロックのための再構築ブロックを決定するために、前記フィルタ処理された予測ブロックに前記残差値を加算することと、
ビデオデータの復号ブロックを生成するために、前記再構築ブロックに１つまたは複数のフィルタを適用することと、
を備える、［３９］に記載の装置。
Claims (37)
- ビデオデータを復号する方法であって、
ビデオデータの現在ブロックが行列イントラ予測モードで符号化されていると決定することと、
前記現在ブロックの左エッジ近隣サンプルのセットと前記現在ブロックの上部エッジ近隣サンプルのセットとに基づいて、ダウンサンプリングされた左エッジサンプルのセットとダウンサンプリングされた上部エッジサンプルのセットとを導出することと、ここにおいて、ダウンサンプリングされた左エッジサンプルの前記セットは、左エッジ近隣サンプルの前記セットよりも少数のサンプルを含み、ダウンサンプリングされた上部エッジサンプルの前記セットは、上部エッジ近隣サンプルの前記セットよりも少数のサンプルを含み、
予測サンプルの第１のセットを生成するために、ダウンサンプリングされた左エッジサンプルの前記セットとダウンサンプリングされた上部エッジサンプルの前記セットとにアフィンモデルを適用することと、
予測サンプルの前記第１のセットと、左エッジ近隣サンプルの前記セットと、上部エッジ近隣サンプルの前記セットと、に基づき、予測サンプルの第２のセットを決定することと、左エッジ近隣サンプルの前記セットは、ダウンサンプリングされた左エッジサンプルの前記セットとは異なるサンプルを含み、上部エッジ近隣サンプルの前記セットは、ダウンサンプリングされた上部エッジサンプルの前記セットとは異なるサンプルを含み、
最終予測ブロックを生成することと、前記最終予測ブロックは、予測サンプルの前記第１のセットと、予測サンプルの前記第２のセットとを備え、
前記最終予測ブロックに基づいてビデオデータの前記現在ブロックを復号することと、
を備え、
予測サンプルの前記第２のセットのうちの予測サンプルの値を決定するために、上部エッジ近隣サンプルの前記セットのうち、前記予測サンプルと同じ列中にある上部エッジ近隣サンプル（Ｔ）と、左エッジ近隣サンプルの前記セットのうち、前記予測サンプルと同じ行中にある左エッジ近隣サンプル（Ｌ）と、が使用される、方法。 - ダウンサンプリングされた左エッジサンプルの前記セットの各サンプルは、左エッジ近隣サンプルの前記セットのうちの２つ以上のサンプルの平均を備え、
ダウンサンプリングされた上部エッジサンプルの前記セットの各サンプルは、上部エッジ近隣サンプルの前記セットのうちの２つ以上のサンプルの平均を備える、
請求項１に記載の方法。 - 予測サンプルの前記第１のセットを生成するために、ダウンサンプリングされた左エッジサンプルの前記セットとダウンサンプリングされた上部エッジサンプルの前記セットとに前記アフィンモデルを適用することは、ダウンサンプリングされた左エッジサンプルの前記セットとダウンサンプリングされた上部エッジサンプルの前記セットとに、行列を乗算することを備える、請求項１に記載の方法。
- 上部エッジ近隣サンプルの前記セットは、Ｎ個の合計サンプルを有し、ダウンサンプリングされた上部エッジサンプルの前記セットは、合計Ｎ／２個のサンプルを有し、ここにおいて、Ｎは、前記現在ブロック中に含まれる列の数を表す整数である、請求項１に記載の方法。
- 左エッジ近隣サンプルの前記セットは、Ｎ個の合計サンプルを有し、ダウンサンプリングされた左エッジサンプルの前記セットは、合計Ｎ／２個のサンプルを有し、ここにおいて、Ｎは、前記現在ブロック中に含まれる行の数を表す整数である、請求項１に記載の方法。
- 前記現在ブロックは、サンプルのＮ×Ｍブロックであり、Ｎは、前記現在ブロック中の列の数と上部エッジ近隣サンプルの前記セット中のサンプルの数とを表す整数値であり、Ｍは、前記現在ブロック中の行の数と左エッジ近隣サンプルの前記セット中のサンプルの数とを表す整数値であり、
ダウンサンプリングされた左エッジサンプルの前記セットは、Ｍ／２個のサンプルを有し、ダウンサンプリングされた上部エッジサンプルの前記セットは、Ｎ／２個のサンプルを有し、左エッジ近隣サンプルの前記セットはＭ個のサンプルを有し、上部エッジ近隣サンプルの前記セットはＮ個のサンプルを有する、
請求項１に記載の方法。 - 予測サンプルの前記第２のセットを決定することは、上部エッジ近隣サンプルの前記セットの前記Ｎ個のサンプルのうちの少なくともいくつかに位置依存の重みを適用することを備える、請求項６に記載の方法。
- 前記最終予測ブロックに基づいてビデオデータの前記現在ブロックを復号することは、
ビデオデータの前記現在ブロックの残差値を決定することと、
ビデオデータの前記現在ブロックのための再構築ブロックを決定するために、前記最終予測ブロックに前記残差値を加算することと、
ビデオデータの復号ブロックを生成するために、前記再構築ブロックに１つまたは複数のフィルタを適用することと、
を備える、請求項１に記載の方法。 - 前記方法は、ビデオ符号化プロセスの一部として実施される、請求項１に記載の方法。
- ビデオデータを復号するためのデバイスであって、
ビデオデータを記憶するように構成されたメモリと、
回路中に実装された１つまたは複数のプロセッサと、を備え、前記１つまたは複数のプロセッサは、
ビデオデータの現在ブロックが行列イントラ予測モードで符号化されていると決定することと、
前記現在ブロックの左エッジ近隣サンプルのセットと前記現在ブロックの上部エッジ近隣サンプルのセットとに基づいて、ダウンサンプリングされた左エッジサンプルのセットとダウンサンプリングされた上部エッジサンプルのセットとを導出することと、ここにおいて、ダウンサンプリングされた左エッジサンプルの前記セットは、左エッジ近隣サンプルの前記セットよりも少数のサンプルを含み、ダウンサンプリングされた上部エッジサンプルの前記セットは、上部エッジ近隣サンプルの前記セットよりも少数のサンプルを含み、
予測サンプルの第１のセットを生成するために、ダウンサンプリングされた左エッジサンプルの前記セットとダウンサンプリングされた上部エッジサンプルの前記セットとにアフィンモデルを適用することと、
予測サンプルの前記第１のセットと、左エッジ近隣サンプルの前記セットと、上部エッジ近隣サンプルの前記セットと、に基づき、予測サンプルの第２のセットを決定することと、左エッジ近隣サンプルの前記セットは、ダウンサンプリングされた左エッジサンプルの前記セットとは異なるサンプルを含み、上部エッジ近隣サンプルの前記セットは、ダウンサンプリングされた上部エッジサンプルの前記セットとは異なるサンプルを含み、
最終予測ブロックを生成することと、前記最終予測ブロックは、予測サンプルの前記第１のセットと、予測サンプルの前記第２のセットとを備え、
前記最終予測ブロックに基づいてビデオデータの前記現在ブロックを復号することと、
を行うように構成され、
予測サンプルの前記第２のセットのうちの予測サンプルの値を決定するために、上部エッジ近隣サンプルの前記セットのうち、前記予測サンプルと同じ列中にある上部エッジ近隣サンプル（Ｔ）と、左エッジ近隣サンプルの前記セットのうち、前記予測サンプルと同じ行中にある左エッジ近隣サンプル（Ｌ）と、が使用される、デバイス。 - ダウンサンプリングされた左エッジサンプルの前記セットの各サンプルは、左エッジ近隣サンプルの前記セットのうちの２つ以上のサンプルの平均を備え、
ダウンサンプリングされた上部エッジサンプルの前記セットの各サンプルは、上部エッジ近隣サンプルの前記セットのうちの２つ以上のサンプルの平均を備える、
請求項１０に記載のデバイス。 - 予測サンプルの前記第１のセットを生成するために、ダウンサンプリングされた左エッジサンプルの前記セットとダウンサンプリングされた上部エッジサンプルの前記セットとに前記アフィンモデルを適用するために、前記１つまたは複数のプロセッサは、ダウンサンプリングされた左エッジサンプルの前記セットとダウンサンプリングされた上部エッジサンプルの前記セットとに、行列を乗算するようにさらに構成された、請求項１０に記載のデバイス。
- 上部エッジ近隣サンプルの前記セットは、Ｎ個の合計サンプルを有し、ダウンサンプリングされた上部エッジサンプルの前記セットは、合計Ｎ／２個のサンプルを有し、ここにおいて、Ｎは、前記現在ブロック中に含まれる列の数を表す整数である、請求項１０に記載のデバイス。
- 左エッジ近隣サンプルの前記セットは、Ｎ個の合計サンプルを有し、ダウンサンプリングされた左エッジサンプルの前記セットは、合計Ｎ／２個のサンプルを有し、ここにおいて、Ｎは、前記現在ブロック中に含まれる行の数を表す整数である、請求項１０に記載のデバイス。
- 前記現在ブロックは、サンプルのＮ×Ｍブロックであり、Ｎは、前記現在ブロック中の列の数と上部エッジ近隣サンプルの前記セット中のサンプルの数とを表す整数値であり、Ｍは、前記現在ブロック中の行の数と左エッジ近隣サンプルの前記セット中のサンプルの数とを表す整数値であり、
ダウンサンプリングされた左エッジサンプルの前記セットは、Ｍ／２個のサンプルを有し、ダウンサンプリングされた上部エッジサンプルの前記セットは、Ｎ／２個のサンプルを有し、左エッジ近隣サンプルの前記セットはＭ個のサンプルを有し、上部エッジ近隣サンプルの前記セットはＮ個のサンプルを有する、
請求項１０に記載のデバイス。 - 予測サンプルの前記第２のセットを決定するために、前記１つまたは複数のプロセッサは、上部エッジ近隣サンプルの前記セットの前記Ｎ個のサンプルのうちの少なくともいくつかに位置依存の重みを適用するようにさらに構成された、請求項１５に記載のデバイス。
- 前記最終予測ブロックに基づいてビデオデータの前記現在ブロックを復号するために、前記１つまたは複数のプロセッサは、
ビデオデータの前記現在ブロックの残差値を決定することと、
ビデオデータの前記現在ブロックのための再構築ブロックを決定するために、前記最終予測ブロックに前記残差値を加算することと、
ビデオデータの復号ブロックを生成するために、前記再構築ブロックに１つまたは複数のフィルタを適用することと、
を行うようにさらに構成された、請求項１０に記載のデバイス。 - 前記デバイスは、符号化ビデオデータを受信するように構成された受信機をさらに備えるワイヤレス通信デバイスを備える、請求項１０に記載のデバイス。
- 前記ワイヤレス通信デバイスは、電話ハンドセットを備え、前記受信機は、ワイヤレス通信規格に従って、前記符号化ビデオデータを備える信号を復調するように構成された、請求項１８に記載のデバイス。
- 前記デバイスは、符号化ビデオデータを送信するように構成された送信機をさらに備えるワイヤレス通信デバイスを備える、請求項１０に記載のデバイス。
- 前記ワイヤレス通信デバイスは、電話ハンドセットを備え、前記送信機は、ワイヤレス通信規格に従って、前記符号化ビデオデータを備える信号を変調するように構成された、請求項２０に記載のデバイス。
- 命令を記憶するコンピュータ可読記憶媒体であって、前記命令は、１つまたは複数のプロセッサによって実行されたとき、前記１つまたは複数のプロセッサに、
ビデオデータの現在ブロックが行列イントラ予測モードで符号化されていると決定することと、
前記現在ブロックの左エッジ近隣サンプルのセットと前記現在ブロックの上部エッジ近隣サンプルのセットとに基づいて、ダウンサンプリングされた左エッジサンプルのセットとダウンサンプリングされた上部エッジサンプルのセットとを導出することと、ここにおいて、ダウンサンプリングされた左エッジサンプルの前記セットは、左エッジ近隣サンプルの前記セットよりも少数のサンプルを含み、ダウンサンプリングされた上部エッジサンプルの前記セットは、上部エッジ近隣サンプルの前記セットよりも少数のサンプルを含み、
予測サンプルの第１のセットを生成するために、ダウンサンプリングされた左エッジサンプルの前記セットとダウンサンプリングされた上部エッジサンプルの前記セットとにアフィンモデルを適用することと、
予測サンプルの前記第１のセットと、左エッジ近隣サンプルの前記セットと、上部エッジ近隣サンプルの前記セットと、に基づき、予測サンプルの第２のセットを決定することと、左エッジ近隣サンプルの前記セットは、ダウンサンプリングされた左エッジサンプルの前記セットとは異なるサンプルを含み、上部エッジ近隣サンプルの前記セットは、ダウンサンプリングされた上部エッジサンプルの前記セットとは異なるサンプルを含み、
最終予測ブロックを生成することと、前記最終予測ブロックは、予測サンプルの前記第１のセットと、予測サンプルの前記第２のセットとを備え、
前記最終予測ブロックに基づいてビデオデータの前記現在ブロックを復号することと、
を行わせる、
予測サンプルの前記第２のセットのうちの予測サンプルの値を決定するために、上部エッジ近隣サンプルの前記セットのうち、前記予測サンプルと同じ列中にある上部エッジ近隣サンプル（Ｔ）と、左エッジ近隣サンプルの前記セットのうち、前記予測サンプルと同じ行中にある左エッジ近隣サンプル（Ｌ）と、が使用される、コンピュータ可読記憶媒体。 - ダウンサンプリングされた左エッジサンプルの前記セットの各サンプルは、左エッジ近隣サンプルの前記セットのうちの２つ以上のサンプルの平均を備える、
ダウンサンプリングされた上部エッジサンプルの前記セットの各サンプルは、上部エッジ近隣サンプルの前記セットのうちの２つ以上のサンプルの平均を備える、
請求項２２に記載のコンピュータ可読記憶媒体。 - 予測サンプルの前記第１のセットを生成するために、ダウンサンプリングされた左エッジサンプルの前記セットとダウンサンプリングされた上部エッジサンプルの前記セットとに前記アフィンモデルを適用するために、前記命令は、前記１つまたは複数のプロセッサに、ダウンサンプリングされた左エッジサンプルの前記セットとダウンサンプリングされた上部エッジサンプルの前記セットとに、行列を乗算させる、請求項２２に記載のコンピュータ可読記憶媒体。
- 上部エッジ近隣サンプルの前記セットは、Ｎ個の合計サンプルを有し、ダウンサンプリングされた上部エッジサンプルの前記セットは、合計Ｎ／２個のサンプルを有し、ここにおいて、Ｎは、前記現在ブロック中に含まれる列の数を表す整数である、請求項２２に記載のコンピュータ可読記憶媒体。
- 左エッジ近隣サンプルの前記セットは、Ｎ個の合計サンプルを有し、ダウンサンプリングされた左エッジサンプルの前記セットは、合計Ｎ／２個のサンプルを有し、ここにおいて、Ｎは、前記現在ブロック中に含まれる行の数を表す整数である、請求項２２に記載のコンピュータ可読記憶媒体。
- 前記現在ブロックは、サンプルのＮ×Ｍブロックであり、Ｎは、前記現在ブロック中の列の数と上部エッジ近隣サンプルの前記セット中のサンプルの数とを表す整数値であり、Ｍは、前記現在ブロック中の行の数と左エッジ近隣サンプルの前記セット中のサンプルの数とを表す整数値であり、
ダウンサンプリングされた左エッジサンプルの前記セットは、Ｍ／２個のサンプルを有し、ダウンサンプリングされた上部エッジサンプルの前記セットは、Ｎ／２個のサンプルを有し、左エッジ近隣サンプルの前記セットはＭ個のサンプルを有し、上部エッジ近隣サンプルの前記セットはＮ個のサンプルを有する、
請求項２２に記載のコンピュータ可読記憶媒体。 - 予測サンプルの前記第２のセットを決定するために、前記命令は、前記１つまたは複数のプロセッサに、上部エッジ近隣サンプルの前記セットの前記Ｎ個のサンプルのうちの少なくともいくつかに位置依存の重みを適用させる、請求項２７に記載のコンピュータ可読記憶媒体。
- 前記最終予測ブロックに基づいてビデオデータの前記現在ブロックを復号するために、前記命令は、前記１つまたは複数のプロセッサに、
ビデオデータの前記現在ブロックの残差値を決定することと、
ビデオデータの前記現在ブロックのための再構築ブロックを決定するために、前記最終予測ブロックに前記残差値を加算することと、
ビデオデータの復号ブロックを生成するために、前記再構築ブロックに１つまたは複数のフィルタを適用することと、
を行わせる、請求項２２に記載のコンピュータ可読記憶媒体。 - ビデオデータを復号するための装置であって、
ビデオデータの現在ブロックが行列イントラ予測モードで符号化されると決定するための手段と、
前記現在ブロックの左エッジ近隣サンプルのセットと前記現在ブロックの上部エッジ近隣サンプルのセットとに基づいて、ダウンサンプリングされた左エッジサンプルのセットとダウンサンプリングされた上部エッジサンプルのセットとを導出するための手段と、ここにおいて、ダウンサンプリングされた左エッジサンプルの前記セットは、左エッジ近隣サンプルの前記セットよりも少数のサンプルを含み、ダウンサンプリングされた上部エッジサンプルの前記セットは、上部エッジ近隣サンプルの前記セットよりも少数のサンプルを含み、
予測サンプルの第１のセットを生成するために、ダウンサンプリングされた左エッジサンプルの前記セットとダウンサンプリングされた上部エッジサンプルの前記セットとにアフィンモデルを適用するための手段と、
予測サンプルの前記第１のセットと、左エッジ近隣サンプルの前記セットと、上部エッジ近隣サンプルの前記セットと、に基づき、予測サンプルの第２のセットを決定するための手段と、左エッジ近隣サンプルの前記セットは、ダウンサンプリングされた左エッジサンプルの前記セットとは異なるサンプルを含み、上部エッジ近隣サンプルの前記セットは、ダウンサンプリングされた上部エッジサンプルの前記セットとは異なるサンプルを含み、
最終予測ブロックを生成するための手段と、前記最終予測ブロックは、予測サンプルの前記第１のセットと、予測サンプルの前記第２のセットとを備え、
前記最終予測ブロックに基づいてビデオデータの前記現在ブロックを復号するための手段と、
を備え、
予測サンプルの前記第２のセットのうちの予測サンプルの値を決定するために、上部エッジ近隣サンプルの前記セットのうち、前記予測サンプルと同じ列中にある上部エッジ近隣サンプル（Ｔ）と、左エッジ近隣サンプルの前記セットのうち、前記予測サンプルと同じ行中にある左エッジ近隣サンプル（Ｌ）と、が使用される、装置。 - ダウンサンプリングされた左エッジサンプルの前記セットを導出するための前記手段は、左エッジ近隣サンプルの前記セットをダウンサンプリングするための手段を備え、ここにおいて、ダウンサンプリングされた左エッジサンプルの前記セットの各サンプルは、左エッジ近隣サンプルの前記セットのうちの２つ以上のサンプルの平均を備え、
ダウンサンプリングされた上部エッジサンプルの前記セットを導出するための前記手段は、上部エッジ近隣サンプルの前記セットをダウンサンプリングするための手段を備え、ここにおいて、ダウンサンプリングされた上部エッジサンプルの前記セットの各サンプルは、上部エッジ近隣サンプルの前記セットのうちの２つ以上のサンプルの平均を備える、
請求項３０に記載の装置。 - 予測サンプルの前記第１のセットを生成するために、ダウンサンプリングされた左エッジサンプルの前記セットとダウンサンプリングされた上部エッジサンプルの前記セットとに前記アフィンモデルを適用するための前記手段は、ダウンサンプリングされた左エッジサンプルの前記セットとダウンサンプリングされた上部エッジサンプルの前記セットとに、行列を乗算するための手段を備える、請求項３０に記載の装置。
- 上部エッジ近隣サンプルの前記セットは、Ｎ個の合計サンプルを有し、ダウンサンプリングされた上部エッジサンプルの前記セットは、合計Ｎ／２個のサンプルを有し、ここにおいて、Ｎは、前記現在ブロック中に含まれる列の数を表す整数である、請求項３０に記載の装置。
- 左エッジ近隣サンプルの前記セットは、Ｎ個の合計サンプルを有し、ダウンサンプリングされた左エッジサンプルの前記セットは、合計Ｎ／２個のサンプルを有し、ここにおいて、Ｎは、前記現在ブロック中に含まれる行の数を表す整数である、請求項３０に記載の装置。
- 前記現在ブロックは、サンプルのＮ×Ｍブロックであり、Ｎは、前記現在ブロック中の列の数と上部エッジ近隣サンプルの前記セット中のサンプルの数とを表す整数値であり、Ｍは、前記現在ブロック中の行の数と左エッジ近隣サンプルの前記セット中のサンプルの数とを表す整数値であり、
ダウンサンプリングされた左エッジサンプルの前記セットは、Ｍ／２個のサンプルを有し、ダウンサンプリングされた上部エッジサンプルの前記セットは、Ｎ／２個のサンプルを有し、左エッジ近隣サンプルの前記セットはＭ個のサンプルを有し、上部エッジ近隣サンプルの前記セットはＮ個のサンプルを有する、
請求項３０に記載の装置。 - 予測サンプルの前記第２のセットを決定するための前記手段は、上部エッジ近隣サンプルの前記セットの前記Ｎ個のサンプルのうちの少なくともいくつかに位置依存の重みを適用するための手段を備える、請求項３５に記載の装置。
- 前記最終予測ブロックに基づいてビデオデータの前記現在ブロックを復号するための前記手段は、
ビデオデータの前記現在ブロックの残差値を決定するための手段と、
ビデオデータの前記現在ブロックのための再構築ブロックを決定するために、前記最終予測ブロックに前記残差値を加算するための手段と、
ビデオデータの復号ブロックを生成するために、前記再構築ブロックに１つまたは複数のフィルタを適用するための手段と、
を備える、請求項３０に記載の装置。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2025044660A JP2025106301A (ja) | 2019-05-09 | 2025-03-19 | アフィン線形重み付けイントラ予測における予測信号フィルタ処理 |
Applications Claiming Priority (5)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| US201962845839P | 2019-05-09 | 2019-05-09 | |
| US62/845,839 | 2019-05-09 | ||
| US16/868,982 US11363284B2 (en) | 2019-05-09 | 2020-05-07 | Upsampling in affine linear weighted intra prediction |
| US16/868,982 | 2020-05-07 | ||
| PCT/US2020/032048 WO2020227612A1 (en) | 2019-05-09 | 2020-05-08 | Prediction signal filtering in affine linear weighted intra prediction |
Related Child Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2025044660A Division JP2025106301A (ja) | 2019-05-09 | 2025-03-19 | アフィン線形重み付けイントラ予測における予測信号フィルタ処理 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2022531334A JP2022531334A (ja) | 2022-07-06 |
| JP7703452B2 true JP7703452B2 (ja) | 2025-07-07 |
Family
ID=73046740
Family Applications (2)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2021564812A Active JP7703452B2 (ja) | 2019-05-09 | 2020-05-08 | アフィン線形重み付けイントラ予測における予測信号フィルタ処理 |
| JP2025044660A Withdrawn JP2025106301A (ja) | 2019-05-09 | 2025-03-19 | アフィン線形重み付けイントラ予測における予測信号フィルタ処理 |
Family Applications After (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2025044660A Withdrawn JP2025106301A (ja) | 2019-05-09 | 2025-03-19 | アフィン線形重み付けイントラ予測における予測信号フィルタ処理 |
Country Status (17)
| Country | Link |
|---|---|
| US (1) | US11363284B2 (ja) |
| EP (1) | EP3967042A1 (ja) |
| JP (2) | JP7703452B2 (ja) |
| KR (1) | KR20220006060A (ja) |
| CN (1) | CN113785589B (ja) |
| AR (1) | AR119740A1 (ja) |
| AU (1) | AU2020270130B2 (ja) |
| BR (1) | BR112021021397A2 (ja) |
| CA (1) | CA3138001A1 (ja) |
| CL (1) | CL2021002913A1 (ja) |
| CO (1) | CO2021014980A2 (ja) |
| IL (1) | IL287231B2 (ja) |
| MX (1) | MX2021013606A (ja) |
| PH (1) | PH12021552657A1 (ja) |
| SG (1) | SG11202111406QA (ja) |
| WO (1) | WO2020227612A1 (ja) |
| ZA (1) | ZA202108783B (ja) |
Families Citing this family (20)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US10609423B2 (en) * | 2016-09-07 | 2020-03-31 | Qualcomm Incorporated | Tree-type coding for video coding |
| EP4307673A3 (en) * | 2018-12-21 | 2024-02-14 | Huawei Technologies Co., Ltd. | Method and apparatus of mode- and size-dependent block-level restrictions |
| CN113647106B (zh) * | 2019-03-05 | 2024-08-13 | 弗劳恩霍夫应用研究促进协会 | 混合视频编码工具的用例驱动上下文模型选择 |
| KR20210145754A (ko) | 2019-04-12 | 2021-12-02 | 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 | 행렬 기반 인트라 예측에서의 산출 |
| CN113748676B (zh) | 2019-04-16 | 2024-05-10 | 北京字节跳动网络技术有限公司 | 帧内编解码模式下的矩阵推导 |
| EP3949391A4 (en) * | 2019-05-01 | 2022-05-25 | Beijing Bytedance Network Technology Co., Ltd. | MATRIX-BASED INTRAPREDICTION USING FILTRATION |
| CN113728647B (zh) | 2019-05-01 | 2023-09-05 | 北京字节跳动网络技术有限公司 | 基于矩阵的帧内预测的上下文编码 |
| SG11202112517QA (en) | 2019-05-22 | 2021-12-30 | Beijing Bytedance Network Technology Co Ltd | Matrix-based intra prediction using upsampling |
| CN114051735B (zh) | 2019-05-31 | 2024-07-05 | 北京字节跳动网络技术有限公司 | 基于矩阵的帧内预测中的一步下采样过程 |
| JP2022534320A (ja) * | 2019-06-05 | 2022-07-28 | 北京字節跳動網絡技術有限公司 | マトリクスベースイントラ予測のためのコンテキスト決定 |
| CN119402667B (zh) * | 2019-07-07 | 2026-02-03 | Oppo广东移动通信有限公司 | 图像预测方法、编码器、解码器以及存储介质 |
| WO2021006612A1 (ko) | 2019-07-08 | 2021-01-14 | 현대자동차주식회사 | 동영상 데이터의 인트라 예측 코딩을 위한 방법 및 장치 |
| EP3991416A4 (en) * | 2019-08-30 | 2022-09-07 | Alibaba Group Holding Limited | MATRIX WEIGHTED INTRA PREDICTION OF VIDEO SIGNALS |
| KR20260003392A (ko) | 2019-10-28 | 2026-01-06 | 두인 비전 컴퍼니 리미티드 | 색상 성분에 기초한 신택스 시그널링 및 파싱 |
| US11563977B2 (en) * | 2020-09-24 | 2023-01-24 | Tencent America LLC | Method and apparatus for video coding |
| JP2024505322A (ja) * | 2020-11-18 | 2024-02-06 | インターディジタル・シーイー・パテント・ホールディングス・ソシエテ・パ・アクシオンス・シンプリフィエ | 幾何学的パーティションを伴うイントラ予測 |
| WO2023106599A1 (ko) * | 2021-12-06 | 2023-06-15 | 현대자동차주식회사 | 참조샘플라인의 유도 기반 인트라 예측을 이용하는 비디오 코딩을 위한 방법 및 장치 |
| EP4436167A4 (en) * | 2021-12-23 | 2025-10-08 | Hyundai Motor Co Ltd | VIDEO CODING METHOD AND DEVICE USING ADAPTIVE MULTI-REFERENCE LINES |
| WO2025108465A1 (en) * | 2023-11-23 | 2025-05-30 | Douyin Vision Co., Ltd. | Method, apparatus, and medium for video processing |
| US20250254293A1 (en) * | 2024-02-07 | 2025-08-07 | Samsung Electronics Co., Ltd. | Position dependent prediction combination for video coding |
Citations (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2020221373A1 (en) | 2019-05-01 | 2020-11-05 | Beijing Bytedance Network Technology Co., Ltd. | Matrix-based intra prediction using filtering |
Family Cites Families (21)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR102086145B1 (ko) * | 2010-12-13 | 2020-03-09 | 한국전자통신연구원 | 인트라 예측 방법 및 그 장치 |
| MY173195A (en) * | 2011-06-28 | 2020-01-03 | Samsung Electronics Co Ltd | Method and apparatus for image encoding and decoding using intra prediction |
| JP6210375B2 (ja) * | 2012-12-28 | 2017-10-11 | サン パテント トラスト | 画像符号化方法、画像復号方法、画像符号化装置、画像復号装置及び画像符号化復号装置 |
| US20190158870A1 (en) * | 2016-01-07 | 2019-05-23 | Mediatek Inc. | Method and apparatus for affine merge mode prediction for video coding system |
| EP3414900B1 (en) | 2016-03-15 | 2025-08-06 | HFI Innovation Inc. | Method and apparatus of video coding with affine motion compensation |
| US10721479B2 (en) * | 2016-09-30 | 2020-07-21 | Lg Electronics Inc. | Intra prediction method and apparatus in image coding system |
| US10694181B2 (en) * | 2017-01-27 | 2020-06-23 | Qualcomm Incorporated | Bilateral filters in video coding with reduced complexity |
| US10638126B2 (en) * | 2017-05-05 | 2020-04-28 | Qualcomm Incorporated | Intra reference filter for video coding |
| US11082716B2 (en) * | 2017-10-10 | 2021-08-03 | Electronics And Telecommunications Research Institute | Method and device using inter prediction information |
| US20190116376A1 (en) * | 2017-10-12 | 2019-04-18 | Qualcomm Incorporated | Motion vector predictors using affine motion model in video coding |
| CN116405674A (zh) * | 2017-12-22 | 2023-07-07 | 数码士有限公司 | 视频信号处理方法和设备 |
| US11611757B2 (en) | 2018-04-02 | 2023-03-21 | Qualcomm Incorproated | Position dependent intra prediction combination extended with angular modes |
| JP7601639B2 (ja) * | 2018-06-29 | 2024-12-17 | フラウンホーファー－ゲゼルシャフト・ツール・フェルデルング・デル・アンゲヴァンテン・フォルシュング・アインゲトラーゲネル・フェライン | 拡張参照画像内予測 |
| SG11202101331RA (en) | 2018-08-09 | 2021-03-30 | Guangdong Oppo Mobile Telecommunications Corp Ltd | Video image component prediction method and device, and computer storage medium |
| US20200068223A1 (en) | 2018-08-27 | 2020-02-27 | Qualcomm Incorporated | Deblocking filter for video coding and processing |
| US11616966B2 (en) * | 2019-04-03 | 2023-03-28 | Mediatek Inc. | Interaction between core transform and secondary transform |
| US11134257B2 (en) * | 2019-04-04 | 2021-09-28 | Tencent America LLC | Simplified signaling method for affine linear weighted intra prediction mode |
| US11381808B2 (en) * | 2019-04-25 | 2022-07-05 | Hfi Innovation Inc. | Method and apparatus of matrix based intra prediction in image and video processing |
| US11128868B2 (en) * | 2019-06-11 | 2021-09-21 | Mediatek Inc. | Method and apparatus of matrix-based intra prediction for video coding |
| US11272187B2 (en) * | 2019-08-13 | 2022-03-08 | Tencent America LLC | Method and apparatus for video coding |
| US11184622B2 (en) * | 2019-09-18 | 2021-11-23 | Sharp Kabushiki Kaisha | Video decoding apparatus and video coding apparatus |
-
2020
- 2020-05-07 US US16/868,982 patent/US11363284B2/en active Active
- 2020-05-08 KR KR1020217035819A patent/KR20220006060A/ko active Pending
- 2020-05-08 PH PH1/2021/552657A patent/PH12021552657A1/en unknown
- 2020-05-08 AR ARP200101342A patent/AR119740A1/es active IP Right Grant
- 2020-05-08 JP JP2021564812A patent/JP7703452B2/ja active Active
- 2020-05-08 CN CN202080033085.7A patent/CN113785589B/zh active Active
- 2020-05-08 AU AU2020270130A patent/AU2020270130B2/en active Active
- 2020-05-08 MX MX2021013606A patent/MX2021013606A/es unknown
- 2020-05-08 EP EP20729902.5A patent/EP3967042A1/en not_active Withdrawn
- 2020-05-08 BR BR112021021397A patent/BR112021021397A2/pt unknown
- 2020-05-08 CA CA3138001A patent/CA3138001A1/en active Pending
- 2020-05-08 WO PCT/US2020/032048 patent/WO2020227612A1/en not_active Ceased
- 2020-05-08 IL IL287231A patent/IL287231B2/en unknown
- 2020-05-08 SG SG11202111406QA patent/SG11202111406QA/en unknown
-
2021
- 2021-11-05 CO CONC2021/0014980A patent/CO2021014980A2/es unknown
- 2021-11-05 CL CL2021002913A patent/CL2021002913A1/es unknown
- 2021-11-08 ZA ZA2021/08783A patent/ZA202108783B/en unknown
-
2025
- 2025-03-19 JP JP2025044660A patent/JP2025106301A/ja not_active Withdrawn
Patent Citations (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2020221373A1 (en) | 2019-05-01 | 2020-11-05 | Beijing Bytedance Network Technology Co., Ltd. | Matrix-based intra prediction using filtering |
Non-Patent Citations (3)
Also Published As
| Publication number | Publication date |
|---|---|
| KR20220006060A (ko) | 2022-01-14 |
| EP3967042A1 (en) | 2022-03-16 |
| CL2021002913A1 (es) | 2022-08-05 |
| AU2020270130B2 (en) | 2025-12-18 |
| IL287231A (en) | 2021-12-01 |
| JP2025106301A (ja) | 2025-07-15 |
| BR112021021397A2 (pt) | 2021-12-21 |
| AR119740A1 (es) | 2022-01-05 |
| US20200359037A1 (en) | 2020-11-12 |
| CA3138001A1 (en) | 2020-11-12 |
| WO2020227612A1 (en) | 2020-11-12 |
| IL287231B2 (en) | 2025-07-01 |
| CN113785589B (zh) | 2024-09-27 |
| IL287231B1 (en) | 2025-03-01 |
| PH12021552657A1 (en) | 2022-07-04 |
| MX2021013606A (es) | 2021-12-10 |
| AU2020270130A1 (en) | 2021-11-18 |
| SG11202111406QA (en) | 2021-11-29 |
| US11363284B2 (en) | 2022-06-14 |
| CN113785589A (zh) | 2021-12-10 |
| ZA202108783B (en) | 2025-01-29 |
| JP2022531334A (ja) | 2022-07-06 |
| CO2021014980A2 (es) | 2021-11-19 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP7703452B2 (ja) | アフィン線形重み付けイントラ予測における予測信号フィルタ処理 | |
| JP7548939B2 (ja) | ビデオコーディングにおけるアフィン線形重み付けイントラ予測 | |
| EP3987781B1 (en) | Signaling of matrix intra prediction parameters in video coding | |
| CN113812157B (zh) | 用于视频译码的基于置零模式的低频不可分离变换信号通知 | |
| US11445203B2 (en) | Sub-partition intra prediction in video coding | |
| CN114208199B (zh) | 用于视频译码的色度帧内预测单元 | |
| JP7566014B2 (ja) | ビデオコーディングのためのクロスコンポーネント適応ループフィルタリングのためのビットシフティング | |
| WO2020186050A1 (en) | Coefficient domain block differential pulse-code modulation in video coding | |
| WO2021003241A1 (en) | Minimum allowed quantization parameter for transform skip mode and palette mode in video coding | |
| CN113632466A (zh) | 视频数据的帧间-帧内预测模式 | |
| KR20220115974A (ko) | 비디오 코딩을 위한 다중 변환 세트 시그널링 | |
| CN114175643B (zh) | 调色板和预测模式信令 | |
| US11659197B2 (en) | Signaling number of subblock merge candidates in video coding | |
| JP7662540B2 (ja) | ビデオコーディングにおけるｄｃイントラモード予測 | |
| JP2025508699A (ja) | コンテキストベース算術コーディング用の時間初期化点 | |
| HK40060236B (zh) | 仿射线性加权帧内预测中的预测信号滤波 | |
| HK40060236A (en) | Prediction signal filtering in affine linear weighted intra prediction | |
| HK40063826A (en) | Inter-intra prediction mode for video data |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20230104 |
|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20230411 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20240227 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20240515 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20240723 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20240905 |
|
| A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20241126 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20250319 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20250527 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20250625 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 7703452 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |