Deprecated: The each() function is deprecated. This message will be suppressed on further calls in /home/zhenxiangba/zhenxiangba.com/public_html/phproxy-improved-master/index.php on line 456
JP7590433B2 - パレットモードを使用するための映像処理方法及び機器 - Google Patents
[go: Go Back, main page]

JP7590433B2 - パレットモードを使用するための映像処理方法及び機器 - Google Patents

パレットモードを使用するための映像処理方法及び機器 Download PDF

Info

Publication number
JP7590433B2
JP7590433B2 JP2022531026A JP2022531026A JP7590433B2 JP 7590433 B2 JP7590433 B2 JP 7590433B2 JP 2022531026 A JP2022531026 A JP 2022531026A JP 2022531026 A JP2022531026 A JP 2022531026A JP 7590433 B2 JP7590433 B2 JP 7590433B2
Authority
JP
Japan
Prior art keywords
target
palette
slice
component
tree
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2022531026A
Other languages
English (en)
Other versions
JP2023504407A (ja
Inventor
サーヴァー，モハメッド，ゴラム
リャオ，ルーリン
イエ，ヤン
ルオ，ジャンコン
チェン，ジエ
Original Assignee
アリババ グループ ホウルディング リミテッド
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by アリババ グループ ホウルディング リミテッド filed Critical アリババ グループ ホウルディング リミテッド
Publication of JP2023504407A publication Critical patent/JP2023504407A/ja
Priority to JP2024199299A priority Critical patent/JP7808169B2/ja
Application granted granted Critical
Publication of JP7590433B2 publication Critical patent/JP7590433B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/11—Selection of coding mode or of prediction mode among a plurality of spatial predictive coding modes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159—Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/174—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a slice, e.g. a line of blocks or a group of blocks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/182—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a pixel
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/96—Tree coding, e.g. quad-tree coding

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Description

関連出願の相互参照
[001] 本開示は、参照によりその全体を本明細書に援用する、２０１９年１２月３日に出願された米国仮特許出願第６２／９４３，０８３号、及び２０１９年１２月２２日に出願された米国仮特許出願第６２／９５２，４２６号に対する優先権を主張する。
技術分野
[002] 本開示は一般に映像処理に関し、より詳細にはパレットモードをシグナリングし使用するための方法及び機器に関する。
背景
[003] 映像は、視覚情報を捕捉する一連の静止ピクチャ（又は「フレーム」）である。記憶メモリ及び伝送帯域幅を減少させるために、映像は、記憶又は伝送前に圧縮され、表示前に復元され得る。圧縮プロセスは、通常、エンコーディングと呼ばれ、復元プロセスは、通常、デコーディングと呼ばれる。最も一般的には、予測、変換、量子化、エントロピー符号化、及びインループフィルタリングに基づく、標準化映像符号化技術を用いる様々な映像符号化フォーマットが存在する。特定の映像符号化フォーマットを指定する、ＨＥＶＣ（High Efficiency Video Coding）／H.265標準規格、ＶＶＣ（Versatile Video Coding）／H.266標準規格ＡＶＳ標準規格などの映像符号化標準規格が、標準化機関によって開発されている。ますます高度な映像符号化技術が、映像標準規格に採用されるにつれて、新しい映像符号化標準規格の符号化効率は、ますます高くなる。
本開示の概要
[004] 本開示の実施形態は、パレットモードをシグナリングし使用するための方法及び装置を提供する。幾つかの例示的実施形態では、映像処理方法が、標的符号化ユニット（ＣＵ）をパレット符号化するための第１のパレットエントリを受け取ること、標的ＣＵがシングルツリースライスの一部かどうかを判定すること、標的ＣＵが別々のルマ及びクロマツリーによって符号化されているかどうかを判定すること、及び標的ＣＵがシングルツリースライスの一部であり別々のルマ及びクロマツリーによって符号化されていると判定されることに応答し、第１のパレットエントリに基づいて標的ＣＵの第１の成分をデコードし、デフォルトのパレットエントリに基づいて標的ＣＵの第２の成分をデコードすることを含む。
[005] 幾つかの実施形態では、例示的な映像処理機器が、命令を記憶するための少なくとも１つのメモリ及び少なくとも１つのプロセッサを含む。少なくとも１つのプロセッサは、標的符号化ユニット（ＣＵ）をパレット符号化するための第１のパレットエントリを受け取ること、標的ＣＵがシングルツリースライスの一部かどうかを判定すること、標的ＣＵが別々のルマ及びクロマツリーによって符号化されているかどうかを判定すること、及び標的ＣＵがシングルツリースライスの一部であり別々のルマ及びクロマツリーによって符号化されていると判定されることに応答し、第１のパレットエントリに基づいて標的ＣＵの第１の成分をデコードし、デフォルトのパレットエントリに基づいて標的ＣＵの第２の成分をデコードすること、を機器に行わせるために命令を実行するように構成される。
[006] 幾つかの実施形態では、例示的な非一時的コンピュータ可読記憶媒体が命令セットを記憶する。命令セットは、標的符号化ユニット（ＣＵ）をパレット符号化するための第１のパレットエントリを受け取ること、標的ＣＵがシングルツリースライスの一部かどうかを判定すること、標的ＣＵが別々のルマ及びクロマツリーによって符号化されているかどうかを判定すること、及び標的ＣＵがシングルツリースライスの一部であり別々のルマ及びクロマツリーによって符号化されていると判定されることに応答し、第１のパレットエントリに基づいて標的ＣＵの第１の成分をデコードし、デフォルトのパレットエントリに基づいて標的ＣＵの第２の成分をデコードすること、を映像処理機器に行わせるために１つ又は複数の処理装置によって実行可能である。
図面の簡単な説明
[007] 本開示の実施形態及び様々な局面は、以下の詳細な説明及び添付の図面に示される。図面に示される様々な特徴は、実際の寸法に比例して描かれてはいない。
[008]本開示の幾つかの実施形態による、映像シーケンス例の構造を示す模式図である。 [009]本開示の幾つかの実施形態による、ハイブリッド映像符号化システム内の例示的エンコーダの模式図を示す。 [010]本開示の幾つかの実施形態による、ハイブリッド映像符号化システム内の例示的デコーダの模式図を示す。 [011]本開示の幾つかの実施形態による、映像をエンコード又はデコードするための例示的機器のブロック図を示す。 [012]本開示の幾つかの実施形態による、パレットモードで符号化される例示的画像ブロックの模式図を示す。 [013]本開示の幾つかの実施形態による、符号化ユニットをエンコードした後にパレット予測子を更新するための例示的プロセスの模式図を示す。 [014]本開示の幾つかの実施形態による、シーケンスパラメータセット（ＳＰＳ）シンタックステーブルの一部を示す例示的な表１を示す。 [015]本開示の幾つかの実施形態による、符号化ユニットシンタックステーブルの一部を示す例示的な表２を示す。 [016]本開示の幾つかの実施形態による、パレット符号化シンタックステーブルの一部を示す例示的な表３を示す。 [016]本開示の幾つかの実施形態による、パレット符号化シンタックステーブルの一部を示す例示的な表３を示す。 [017]本開示の幾つかの実施形態による、パレットモードのための例示的デコーディングプロセスを示す。 [017]本開示の幾つかの実施形態による、パレットモードのための例示的デコーディングプロセスを示す。 [018]本開示の幾つかの実施形態による、パレット符号化シンタックステーブルの一部を示す例示的な表４を示す。 [019]本開示の幾つかの実施形態による、パレットモードのための例示的なパレット符号化セマンティクス及びデコーディングプロセスを示す。 [019]本開示の幾つかの実施形態による、パレットモードのための例示的なパレット符号化セマンティクス及びデコーディングプロセスを示す。 [020]本開示の幾つかの実施形態による、パレット符号化シンタックステーブルの一部を示す例示的な表５を示す。 [021]本開示の幾つかの実施形態による、パレットモードのための例示的デコーディングプロセスを示す。 [022]本開示の幾つかの実施形態による、符号化ユニットシンタックステーブルの一部を示す例示的な表６を示す。 [023]本開示の幾つかの実施形態による、パレット符号化シンタックステーブルの一部を示す例示的な表７を示す。 [024]本開示の幾つかの実施形態による、パレットモードのための別の例示的なパレット符号化セマンティクス及びデコーディングプロセスを示す。 [024]本開示の幾つかの実施形態による、パレットモードのための別の例示的なパレット符号化セマンティクス及びデコーディングプロセスを示す。 [025]本開示の幾つかの実施形態による、例示的な映像処理方法のフローチャートを示す。 [026]本開示の幾つかの実施形態による、別の例示的な映像処理方法のフローチャートを示す。 [027]本開示の幾つかの実施形態による、別の例示的な映像処理方法のフローチャートを示す。 [028]本開示の幾つかの実施形態による、別の例示的な映像処理方法のフローチャートを示す。 [029]本開示の幾つかの実施形態による、別の例示的な映像処理方法のフローチャートを示す。 [030]本開示の幾つかの実施形態による、別の例示的な映像処理方法のフローチャートを示す。
詳細な説明
[031] これより、例が添付の図面に示される例示的実施形態に詳細に言及する。以下の説明は、別段の説明のない限り、異なる図面の同じ番号が、同じ又は類似の要素を表す、添付の図面を参照する。例示的実施形態の以下の説明に記載する実施態様は、本発明と一致した全ての実施態様を表すわけではない。代わりに、それらは、添付の特許請求の範囲に記載される本発明に関連する側面と一致した装置及び方法の例に過ぎない。以下に、本開示の特定の側面をより詳細に記載する。援用された用語及び／又は定義と矛盾する場合は、本明細書に提供される用語及び定義が優先する。
[032] ＩＴＵ－Ｔ ＶＣＥＧ（ITU-T Video Coding Expert Group）及びＩＳＯ／ＩＥＣ ＭＰＥＧ（ISO/IEC Moving Picture Expert Group）のＪＶＥＴ（Joint Video Experts Team）は、現在、ＶＶＣ（Versatile Video Coding）／H.266標準規格を開発中である。ＶＶＣ標準規格は、その先行バージョンであるＨＥＶＣ（High Efficiency Video Coding）／H.265標準規格の圧縮効率を倍にすることを目的とする。つまり、ＶＶＣの目標は、ＨＥＶＣ／H.265と同じ主観的品質を半分の帯域幅で達成することである。
[033] 半分の帯域幅でＨＥＶＣ／H.265と同じ主観的品質を達成するために、ＪＶＥＴは、ＪＥＭ（joint exploration model）参照ソフトウェアを使用して、ＨＥＶＣを超える技術を開発してきた。符号化技術がＪＥＭに組み込まれたため、ＪＥＭは、ＨＥＶＣよりも大幅に高い符号化性能を実現した。ＶＣＥＧ及びＭＰＥＧは、ＨＥＶＣを上回る次世代の映像圧縮標準規格の策定を公式に開始した。
[034] ＶＶＣ標準規格は、最近開発されたものであり、より良い圧縮性能を提供するさらに多くの符号化技術を加え続けている。ＶＶＣは、ＨＥＶＣ、H.264／ＡＶＣ、MPEG2、H.263などの近代の映像圧縮標準規格で使用されてきたものと同じハイブリッド映像符号化システムに基づく。
[035] 映像は、視覚情報を記憶するために時系列で配列された静的ピクチャ（又は「フレーム」）のセットである。映像取り込みデバイス（例えば、カメラ）を、それらのピクチャを時系列で取り込んで記憶するために用いることができ、映像再生デバイス（例えば、テレビ、コンピュータ、スマートフォン、タブレットコンピュータ、ビデオプレーヤ、又は表示機能を有する任意のエンドユーザ端末）を、このようなピクチャを時系列で表示するために用いることができる。また、いくつかの用途では、映像取り込みデバイスが、取り込まれた映像を、監督、会議開催、又は生放送などのために、映像再生デバイス（例えば、モニタを有するコンピュータ）へリアルタイムに伝送することができる。
[036] このような用途で必要とされる記憶空間及び伝送帯域幅を減少させるために、映像は、記憶及び伝送前に圧縮され、表示前に復元され得る。圧縮及び復元は、プロセッサ（例えば、汎用コンピュータのプロセッサ）又は専用ハードウェアによって実行されるソフトウェアによって実施され得る。圧縮用のモジュールは、一般に「エンコーダ」と呼ばれ、復元用のモジュールは、一般に「デコーダ」と呼ばれる。エンコーダ及びデコーダは、まとめて「コーデック」と呼ばれることがある。エンコーダ及びデコーダは、様々な適切なハードウェア、ソフトウェア、又はこれらの組み合わせの何れかとして実装され得る。例えば、エンコーダ及びデコーダのハードウェア実装は、１つ又は複数のマイクロプロセッサ、デジタル信号プロセッサ（ＤＳＰ）、特定用途向け集積回路（ＡＳＩＣ）、フィールドプログラマブルゲートアレイ（ＦＰＧＡ）、離散論理、又はこれらの任意の組み合わせなどの回路網を含み得る。エンコーダ及びデコーダのソフトウェア実装は、プログラムコード、コンピュータ実行可能命令、ファームウェア、又はコンピュータ可読媒体に固定された、任意の適切なコンピュータ実施アルゴリズム若しくはプロセスを含み得る。映像圧縮及び復元は、MPEG-1、MPEG-2、MPEG-4、H.26x系などの様々なアルゴリズム又は標準規格によって実施され得る。用途によっては、コーデックが、第１の符号化標準規格から映像を復元し、第２の符号化標準規格を用いて復元映像を再圧縮することができ、この場合、コーデックは、「トランスコーダ」と呼ばれることがある。
[037] 映像エンコーディングプロセスは、ピクチャの再構成のために使用することができる有用な情報を識別及び保持し、再構成にとって重要ではない情報を無視することができる。無視された重要ではない情報を完全に再構成することができない場合、このようなエンコーディングプロセスは、「不可逆」と呼ばれることがある。そうでなければ、それは、「可逆」と呼ばれることがある。ほとんどのエンコーディングプロセスは、不可逆であり、これは、必要とされる記憶空間及び伝送帯域幅を減少させるためのトレードオフである。
[038] （「現在のピクチャ」と呼ばれる）エンコードされているピクチャの有用な情報は、参照ピクチャ（例えば、前にエンコードされた、及び再構成されたピクチャ）に対する変化を含む。このような変化は、ピクセルの位置変化、輝度変化、又は色変化を含む場合があり、中でも、位置変化は、最も重要である。物体を表すピクセル群の位置変化は、参照ピクチャ及び現在のピクチャ間の物体の動きを反映し得る。
[039] 別のピクチャを参照することなく符号化されたピクチャ（すなわち、それがそれ自体の参照ピクチャである）は、「Ｉピクチャ」と呼ばれる。以前のピクチャを参照ピクチャとして使用して符号化されたピクチャは、「Ｐピクチャ」と呼ばれる。以前のピクチャ及び未来のピクチャの両方を参照ピクチャとして使用して（すなわち、参照が「双方向」である）符号化されたピクチャは、「Ｂピクチャ」と呼ばれる。
[040] 図１は、本開示の幾つかの実施形態による、映像シーケンス例１００の構造を示す。映像シーケンス１００は、ライブ映像、又は捕捉及びアーカイブされた映像でもよい。映像１００は、実際の映像、コンピュータ生成された映像（例えば、コンピュータゲーム映像）、又はそれらの組み合わせ（例えば、拡張現実効果を伴う現実の映像）でもよい。映像シーケンス１００は、映像キャプチャデバイス（例えば、カメラ）、前に捕捉された映像を包含する映像アーカイブ（例えば、記憶デバイスに保存された映像ファイル）、又は映像コンテンツプロバイダから映像を受信するための映像フィードインタフェース（例えば、映像ブロードキャストトランシーバ）から入力され得る。
[041] 図１に示されるように、映像シーケンス１００は、ピクチャ１０２、１０４、１０６、及び１０８を含むタイムラインに沿って時間的に配置された一連のピクチャを含み得る。ピクチャ１０２～１０６は連続しており、ピクチャ１０６と１０８との間には、さらに多くのピクチャが存在する。図１では、ピクチャ１０２は、Ｉピクチャであり、その参照ピクチャは、ピクチャ１０２自体である。ピクチャ１０４は、Ｐピクチャであり、その参照ピクチャは、矢印によって示されるように、ピクチャ１０２である。ピクチャ１０６は、Ｂピクチャであり、その参照ピクチャは、矢印によって示されるように、ピクチャ１０４及び１０８である。幾つかの実施形態では、あるピクチャ（例えば、ピクチャ１０４）の参照ピクチャは、当該ピクチャの直前又は直後に存在しなくてもよい。例えば、ピクチャ１０４の参照ピクチャは、ピクチャ１０２に先行するピクチャでもよい。ピクチャ１０２～１０６の参照ピクチャは単なる例であり、本開示は、参照ピクチャの実施形態を図１に示される例のように限定しないことに留意されたい。
[042] 一般的に、映像コーデックは、ピクチャ全体のエンコーディング又はデコーディングを、そのようなタスクの計算の複雑さゆえに、一度に行わない。より正確に言えば、それらはピクチャを基本セグメントに分割し、セグメントごとにピクチャをエンコード又はデコードし得る。このような基本セグメントは、本開示では、基本処理ユニット（「ＢＰＵ（basic processing unit）」）と呼ばれる。例えば、図１の構造１１０は、映像シーケンス１００のあるピクチャ（例えば、ピクチャ１０２～１０８の何れか）の構造例を示す。構造１１０では、ピクチャは、４×４の基本処理ユニットに分割され、それらの境界は、破線で示されている。幾つかの実施形態では、基本処理ユニットは、一部の映像符号化標準規格（例えば、ＭＰＥＧ系統、H.261、H.263、若しくはH.264／ＡＶＣ）では「マクロブロック」と呼ばれることがあり、又は一部の他の映像符号化標準規格（例えば、H.265／ＨＥＶＣ若しくはH.266／ＶＶＣ）では、「符号化ツリーユニット」（「ＣＴＵ（coding tree unit）」）と呼ばれることがある。基本処理ユニットは、１２８×１２８、６４×６４、３２×３２、１６×１６、４×８、１６×３２、又はピクセルの任意の形状及びサイズなどのピクチャの可変サイズを有し得る。基本処理ユニットのサイズ及び形状は、符号化効率と、基本処理ユニットにおいて維持されるべき詳細さのレベルとのバランスに基づいて、ピクチャごとに選択することができる。
[043] 基本処理ユニットは、コンピュータメモリに（例えば、映像フレームバッファに）保存された異なる複数のタイプの映像データの一群を含み得る論理ユニットでもよい。例えば、カラーピクチャの基本処理ユニットは、無彩色の明度情報を表すルマ成分（Ｙ）、色情報を表す１つ又は複数のクロマ成分（例えば、Ｃｂ及びＣｒ）、並びに関連のシンタックス要素を含み得る（ここでは、ルマ成分及びクロマ成分は、同じサイズの基本処理ユニットを有し得る）。ルマ成分及びクロマ成分は、一部の映像符号化標準規格（例えば、H.265／ＨＥＶＣ又はH.266／ＶＶＣ）では、「符号化ツリーブロック」（「ＣＴＢ（coding tree block）」）と呼ばれることがある。基本処理ユニットに対して行われる任意の演算は、そのルマ成分及びクロマ成分のそれぞれに対して繰り返し行うことができる。
[044] 映像符号化は、複数の演算ステージを有し、これらの例を図２及び図３に示す。各ステージで、基本処理ユニットのサイズが、処理するにはまだ大き過ぎる場合があり、したがって、本開示では「基本処理サブユニット」と呼ばれるセグメントへとさらに分割され得る。幾つかの実施形態では、基本処理サブユニットは、一部の映像符号化標準規格（例えば、ＭＰＥＧ系統、H.261、H.263、若しくはH.264／ＡＶＣ）では「ブロック」と呼ばれることがあり、又は一部の他の映像符号化標準規格（例えば、H.265／ＨＥＶＣ若しくはH.266／ＶＶＣ）では、「符号化ユニット」（「ＣＵ（coding unit）」）と呼ばれることがある。基本処理サブユニットは、基本処理ユニットと同じ又はより小さいサイズを有してもよい。基本処理ユニットと同様に、基本処理サブユニットも、コンピュータメモリに（例えば、映像フレームバッファに）保存された異なる複数のタイプの映像データ（例えば、Ｙ、Ｃｂ、Ｃｒ、及び関連のシンタックス要素）の一群を含み得る論理ユニットである。基本処理サブユニットに対して行われる任意の演算は、そのルマ成分及びクロマ成分のそれぞれに対して繰り返し行うことができる。このような分割は、処理のニーズに応じてさらなるレベルに対して行われ得ることに留意されたい。異なるステージが異なるスキームを用いて基本処理ユニットを分割し得ることにも留意されたい。
[045] 例えば、モード決定ステージ（それの一例を図２に示す）において、エンコーダは、基本処理ユニットに対してどの予測モード（例えば、イントラピクチャ予測又はインターピクチャ予測）を使用すべきかを決定することができ、基本処理ユニットは、このような決定を下すには大き過ぎる場合がある。エンコーダは、基本処理ユニットを複数の基本処理サブユニット（例えば、H.265／ＨＥＶＣ又はH.266／ＶＶＣの場合のＣＵ）に分割し、及び個々の基本処理サブユニットごとに予測タイプを決定することができる。
[046] 別の例として、予測ステージ（それの一例を図２に示す）において、エンコーダは、基本処理サブユニット（例えば、ＣＵ）のレベルで予測演算を行うことができる。しかしながら、場合によっては、基本処理サブユニットは、処理するにはまだ大き過ぎる場合がある。エンコーダは、基本処理サブユニットを（例えば、H.265／ＨＥＶＣ又はH.266／ＶＶＣにおいては「予測ブロック」又は「ＰＢ（prediction block）」と呼ばれる）より小さなセグメントにさらに分割することができ、このセグメントのレベルで、予測演算を行うことができる。
[047] 別の例として、変換ステージ（それの一例を図２に示す）では、エンコーダは、残差基本処理サブユニット（例えば、ＣＵ）に対して変換演算を行うことができる。しかしながら、場合によっては、基本処理サブユニットは、処理するにはまだ大き過ぎる場合がある。エンコーダは、基本処理サブユニットを（例えば、H.265／ＨＥＶＣ又はH.266／ＶＶＣにおいては「変換ブロック」又は「ＴＢ（transform block）」と呼ばれる）より小さなセグメントにさらに分割することができ、このセグメントのレベルで、変換演算を行うことができる。同じ基本処理サブユニットの分割スキームが予測ステージ及び変換ステージで異なり得ることに留意されたい。例えば、H.265／ＨＥＶＣ又はH.266／ＶＶＣでは、同じＣＵの予測ブロック及び変換ブロックが異なるサイズ及び数を有し得る。
[048] 図１の構造１１０では、基本処理ユニット１１２は、３×３の基本処理サブユニットにさらに分割され、それらの境界は、点線で示される。同じピクチャの異なる基本処理ユニットが、異なるスキームで基本処理サブユニットに分割されてもよい。
[049] 幾つかの実施態様では、並列処理能力、並びに映像エンコーディング及びデコーディングに対する誤り耐性を提供するために、ピクチャの領域ごとに、エンコーディング又はデコーディングプロセスがピクチャの他のどの領域からの情報にも依存しないことが可能であるように、ピクチャは、処理のために複数の領域に分割され得る。つまり、ピクチャの各領域は、独立して処理することができる。そうすることで、コーデックは、ピクチャの異なる複数の領域を並行して処理することができ、したがって、符号化効率が向上される。また、ある領域のデータが処理時に壊れた場合、又はネットワーク伝送時に失われた場合、コーデックは、壊れたデータ又は失われたデータに依存することなく、同じピクチャの他の領域を正確にエンコード又はデコードすることができ、したがって、誤り耐性能力が提供される。一部の映像符号化標準規格では、ピクチャは、異なる複数のタイプの領域に分割することができる。例えば、H.265／ＨＥＶＣ及びH.266／ＶＶＣは、２つの領域タイプ：「スライス」及び「タイル」を提供する。映像シーケンス１００の異なる複数のピクチャが、ピクチャを領域に分割するための異なる区分スキームを有し得ることにも留意されたい。
[050] 例えば、図１において、構造１１０は、３つの領域１１４、１１６、及び１１８に分割され、それらの境界は、構造１１０内の実線として示されている。領域１１４は、４つの基本処理ユニットを含む。領域１１６及び１１８のそれぞれは、６つの基本処理ユニットを含む。図１の構造１１０の基本処理ユニット、基本処理サブユニット、及び領域は、単なる例であり、本開示はその実施形態を限定しないことに留意されたい。
[051] 図２は、本開示の幾つかの実施形態による、ハイブリッド映像符号化システム内の例示的エンコーダ２００の模式図を示す。映像エンコーダ２００は、映像ブロック又は映像ブロックのパーティション若しくはサブパーティションを含む、映像フレーム内のブロックのイントラ符号化又はインター符号化を行うことができる。イントラ符号化は、所与の映像フレーム内の映像内の空間冗長性を低減し又は除去するために空間予測を利用することができる。インター符号化は、映像シーケンスの隣接フレーム内の映像の時間冗長性を低減し又は除去するために時間予測を利用することができる。イントラモードは幾つかの空間ベースの圧縮モードを指し得る。インターモード（単方向予測又は双方向予測など）は幾つかの時間ベースの圧縮方法を指し得る。
[052] 図２を参照し、入力映像信号２０２がブロックごとに処理され得る。例えば映像ブロックユニットは１６×１６ピクセルブロック（例えばマクロブロック（ＭＢ））であり得る。映像ブロックユニットのサイズは使用される符号化技術並びに所要の精度及び効率に応じて異なり得る。ＨＥＶＣでは、例えば１０８０ｐ以上の解像度の映像信号を圧縮するために、拡張されたブロックサイズ（例えば符号化ツリーユニット（ＣＴＵ））が使用され得る。ＨＥＶＣでは、ＣＴＵが最大６４×６４のルマサンプル、対応するクロマサンプル、及び関連するシンタックス要素を含み得る。ＶＶＣでは、１２８×１２８のルマサンプル、対応するクロマサンプル、及び関連するシンタックス要素を含むようにＣＴＵのサイズがさらに増やされ得る。ＣＴＵは、例えばクワッドツリー、バイナリツリー、又はターナリツリーを使用して符号化ユニット（ＣＵ）にさらに分割することができる。ＣＵは、別々の予測方法を適用することができる予測ユニット（ＰＵ）へとさらに分割することができる。各入力映像ブロックは、空間予測ユニット２６０又は時間予測ユニット２６２を使用することによって処理することができる。
[053] 空間予測ユニット２６０は、現在のブロックを含む同じピクチャ／スライスに関する情報を使用して現在のブロック／ＣＵに対して空間予測（例えばイントラ予測）を行う。空間予測は、現在の映像ブロックを予測するために同じ映像ピクチャフレーム／スライス内の既に符号化された隣接ブロックのピクセルを使用することができる。空間予測は映像信号に固有の空間冗長性を低減することができる。
[054] 時間予測ユニット２６２は、現在のブロックを含むピクチャ／スライスと異なるピクチャ／スライスからの情報を使用して現在のブロックに対して時間予測（例えばインター予測）を行う。映像ブロックのための時間予測は１つ又は複数の動きベクトルによってシグナリングすることができる。単方向時間予測では、現在のブロックのための予測信号を生成するために１つの参照ピクチャを示す１つの動きベクトルだけが使用される。他方で双方向時間予測では、現在のブロックのための予測信号を生成するために個々の参照ピクチャをそれぞれ示す２つの動きベクトルが使用され得る。動きベクトルは、現在のブロックと参照フレーム内の１つ又は複数の関連するブロックとの間の動きの量及び方向を示すことができる。複数の参照ピクチャがサポートされる場合、１つ又は複数の参照ピクチャインデックスが映像ブロックに関して送信され得る。１つ又は複数の参照インデックスは、参照ピクチャストア又はデコードピクチャバッファ（ＤＰＢ）２６４内のどの参照ピクチャから時間予測信号が来得るのかを識別するために使用され得る。
[055] エンコーダ内のモード決定及びエンコーダ制御ユニット２８０は、例えばレート歪み最適化に基づいて予測モードを選択することができる。決定された予測モードに基づいて予測ブロックを得ることができる。予測ブロックは、加算器２１６において現在の映像ブロックから減じることができる。予測残差が変換ユニット２０４によって変換され、量子化ユニット２０６によって量子化され得る。再構成残差を形成するために、量子化残差係数は逆量子化ユニット２１０において逆量子化し、逆変換ユニット２１２において逆変換することができる。再構成映像ブロックを形成するために、再構成残差は加算器２２６において予測ブロックに加えることができる。イントラ予測のための参照サンプルを与えるために、ループフィルタリング前の再構成映像ブロックを使用することができる。
[056] 再構成映像ブロックは、ループフィルタ２６６においてループフィルタリングにかけることができる。例えばデブロッキングフィルタ、サンプル適応オフセット（ＳＡＯ）、及び適応ループフィルタ（ＡＬＦ）などのループフィルタリングを適用することができる。ループフィルタリング後の再構成ブロックは参照ピクチャストア２６４内に記憶することができ、他の映像ブロックを符号化するためのインター予測参照サンプルを提供するために使用することができる。出力映像ビットストリーム２２０を形成するために、（例えばインター又はイントラ）符号化モード、予測モード情報、動き情報、及び量子化残差係数をエントロピー符号化ユニット２０８に送信してビットレートをさらに低減してから、ビットストリーム２２０を形成するためにデータを圧縮しパックすることができる。
[057] 図３は、本開示の幾つかの実施形態による、ハイブリッド映像符号化システム内の例示的デコーダ３００の模式図を示す。図３を参照し、映像ビットストリーム３０２がエントロピーデコーディングユニット３０８においてアンパックされ又はエントロピーデコードされ得る。空間予測ユニット３６０を選択すべきか時間予測ユニット３６２を選択すべきかを決定するために符号化モード情報を使用することができる。予測モード情報は、予測ブロックを生成するために対応する予測ユニットに送信することができる。例えば時間予測ブロックを形成するために、動き補償予測が時間予測ユニット３６２によって適用され得る。
[058] 再構成残差を得るために、残差係数が逆量子化ユニット３１０及び逆変換ユニット３１２に送信され得る。ループフィルタリングの前に再構成ブロックを形成するために、予測ブロックと再構成残差とを３２６で合計することができる。その後、再構成ブロックはループフィルタ３６６においてループフィルタリングにかけることができる。例えばデブロッキングフィルタ、ＳＡＯ、及びＡＬＦなどのループフィルタリングを適用することができる。ループフィルタリング後の再構成ブロックは参照ピクチャストア３６４内に記憶することができる。参照ピクチャストア３６４内の再構成データは、デコードされた映像３２０を得るために使用することができ、又は将来の映像ブロックを予測するために使用することができる。デコードされた映像３２０は、エンドユーザが見るためにＴＶ、ＰＣ、スマートフォン、又はタブレットなどの表示装置上で表示することができる。
[059] 図４は、本開示のいくつかの実施形態による、映像をエンコード又はデコードするための例示的装置４００のブロック図である。図４に示されるように、装置４００は、プロセッサ４０２を含み得る。プロセッサ４０２が本明細書に記載される命令を実行すると、装置４００は、映像エンコーディング又はデコーディング用の専用マシンになることができる。プロセッサ４０２は、情報の操作又は処理を行うことが可能な任意のタイプの回路網でもよい。例えば、プロセッサ４０２は、幾つかの中央処理装置（すなわち「ＣＰＵ」）、グラフィック処理ユニット（すなわち「ＧＰＵ」）、ニューラル処理ユニット（「ＮＰＵ」）、マイクロコントローラユニット（「ＭＣＵ」）、光プロセッサ、プログラマブル論理コントローラ、マイクロコントローラ、マイクロプロセッサ、デジタル信号プロセッサ、ＩＰ（intellectual property）コア、プログラマブル論理アレイ（ＰＬＡ）、プログラマブルアレイロジック（ＰＡＬ）、汎用アレイロジック（ＧＡＬ）、複合プログラマブル論理デバイス（ＣＰＬＤ）、フィールドプログラマブルゲートアレイ（ＦＰＧＡ）、システムオンチップ（ＳｏＣ）、又は特定用途向け集積回路（ＡＳＩＣ）などの任意の組み合わせを含んでもよい。幾つかの実施形態では、プロセッサ４０２は、単一の論理コンポーネントとしてグループ化されたプロセッサのセットでもよい。例えば、図４に示されるように、プロセッサ４０２は、プロセッサ４０２ａ、プロセッサ４０２ｂ、及びプロセッサ４０２ｎを含む複数のプロセッサを含んでもよい。
[060] 装置４００は、データ（例えば、命令セット、コンピュータコード、又は中間データなど）を保存するように構成されたメモリ４０４も含み得る。例えば、図４に示されるように、保存されたデータは、プログラム命令（例えば、図２又は図３のステージを実装するためのプログラム命令）及び処理用データを含み得る。プロセッサ４０２は、（例えば、バス４１０を介して）プログラム命令及び処理用データにアクセスし、処理用データに対して演算又は操作を行うために、プログラム命令を実行することができる。メモリ４０４は、高速ランダムアクセス記憶デバイス又は不揮発性記憶デバイスを含んでもよい。幾つかの実施形態では、メモリ４０４は、幾つかのランダムアクセスメモリ（ＲＡＭ）、読出し専用メモリ（ＲＯＭ）、光ディスク、磁気ディスク、ハードドライブ、ソリッドステートドライブ、フラッシュドライブ、ＳＤ（security digital）カード、メモリスティック、又はコンパクトフラッシュ（登録商標）（ＣＦ）カードなどの任意の組み合わせを含み得る。メモリ４０４もまた、単一の論理コンポーネントとしてグループ化されたメモリの一群（図４では図示せず）でもよい。
[061] バス４１０は、内部バス（例えば、ＣＰＵメモリバス）、又は外部バス（例えば、ユニバーサルシリアルバスポート、周辺コンポーネント相互接続エクスプレスポート）などの装置４００内のコンポーネント間でデータを転送する通信デバイスでもよい。
[062] 曖昧さを生じさせずに説明を簡単にするために、本開示においては、プロセッサ４０２及び他のデータ処理回路はまとめて「データ処理回路」と呼ばれる。データ処理回路は、完全にハードウェアとして、又はソフトウェア、ハードウェア、若しくはファームウェアの組み合わせとして実装されてもよい。さらに、データ処理回路は、単一の独立したモジュールでもよく、又は装置４００の任意の他のコンポーネントと完全に若しくは部分的に統合されてもよい。
[063] 装置４００は、ネットワーク（例えば、インターネット、イントラネット、ローカルエリアネットワーク、又はモバイル通信ネットワークなど）との有線又は無線通信を提供するために、ネットワークインタフェース４０６をさらに含み得る。幾つかの実施形態では、ネットワークインタフェース４０６は、幾つかのネットワークインタフェースコントローラ（ＮＩＣ）、無線周波数（ＲＦ）モジュール、トランスポンダ、トランシーバ、モデム、ルータ、ゲートウェイ、有線ネットワークアダプタ、無線ネットワークアダプタ、ブルートゥース（登録商標）アダプタ、赤外線アダプタ、近距離無線通信（「ＮＦＣ」）アダプタ、又はセルラーネットワークチップなどの任意の組み合わせを含んでもよい。
[064] 幾つかの実施形態では、任意選択的に、装置４００は、１つ又は複数の周辺デバイスに対する接続を提供するために、周辺インタフェース４０８をさらに含んでもよい。図４に示されるように、周辺デバイスは、カーソル制御デバイス（例えば、マウス、タッチパッド、若しくはタッチスクリーン）、キーボード、ディスプレイ（例えば、陰極線管ディスプレイ、液晶ディスプレイ、若しくは発光ダイオードディスプレイ）、又は映像入力デバイス（例えば、カメラ、若しくは映像アーカイブに結合された入力インタフェース）などを含み得る（ただし、これらに限定されない）。
[065] 映像コーデックは、装置４００内の任意のソフトウェア又はハードウェアモジュールの任意の組み合わせとして実装され得ることに留意されたい。例えば、図２のエンコーダ２００又は図３のデコーダ３００の一部又は全てのステージが、メモリ４０４にロードされ得るプログラム命令などの、装置４００の１つ又は複数のソフトウェアモジュールとして実装され得る。別の例として、図２のエンコーダ２００又は図３のデコーダ３００の一部又は全てのステージは、専用データ処理回路など（例えば、ＦＰＧＡ、ＡＳＩＣ、又はＮＰＵなど）の、装置４００の１つ又は複数のハードウェアモジュールとして実装され得る。
[066] 量子化及び逆量子化機能ブロック（例えば図２の量子化ユニット２０６及び逆量子化ユニット２１０、図３の逆量子化ユニット３１０）では、予測残差に適用される量子化（及び逆量子化）の量を決定するために量子化パラメータ（ＱＰ）が使用される。ピクチャ又はスライスの符号化に使用される初期ＱＰ値は、例えばピクチャパラメータセット（ＰＰＳ）内のinit_qp_minus26シンタックス要素を使用して、及びスライスヘッダ内のslice_qp_deltaシンタックス要素を使用して、ハイレベルでシグナリングされ得る。さらに、ＱＰ値は、量子化グループの粒度で送られたデルタＱＰ値を使用してＣＵごとにローカルレベルで適応させることができる。
[067] ＶＶＣ（例えばＶＶＣドラフト７）では、パレットモードが４：４：４カラーフォーマットで使用される。パレットモードが有効にされるとき、ＣＵのサイズが６４×６４以下である場合、パレットモードが使用されるかどうかを示すフラグがＣＵレベルにおいて伝送される。
[068] 図５は、本開示の幾つかの実施形態による、パレットモードで符号化される例示的画像ブロック５００の模式図を示す。図５に示すように、現在のＣＵを符号化するためにパレットモードが利用される場合、ＣＵ内の各位置におけるサンプル値が代表的なカラー値の小セットによって表される。そのセットをパレット（例えばパレット５１０）と呼ぶ。パレットの色に近い値を有するサンプル位置（例えば位置５０１、５０２、又は５０３）に関して、対応するパレットインデックス（例えばインデックス０、インデックス１、インデックス２、又はインデックス３）がシグナリングされる。開示する幾つかの実施形態によれば、エスケープインデックス（又はエスケープカラーインデックス）をシグナリングすることによってパレット外の色値が指定され得る。その後、エスケープ色インデックス（例えばインデックス４）を使用するＣＵ内の全ての位置（例えば位置５０４）で、（量子化）カラー成分値がそれらの位置のそれぞれについてシグナリングされる。
[069] パレットを符号化するために、パレット予測子が保たれる。予測子は非ウェーブフロントの場合は各スライスの初めにおいて、及びウェーブフロントの場合は各ＣＴＵ行の初めにおいて、０（例えば空）に初期設定される。図６は、本開示の幾つかの実施形態による、符号化ユニットをエンコードした後にパレット予測子を更新するための例示的プロセス６００の模式図を示す。図６に示すように、パレット予測子内のエントリごとに、現在のＣＵの現在のパレット内にエントリが含まれるかどうかを示すための再利用フラグがシグナリングされる。再利用フラグはゼロのランレングス符号化を使用して送信され、その後、新たなパレットエントリの数及び新たなパレットエントリの成分値がシグナリングされる。パレット符号化ＣＵをエンコードした後、パレット予測子が現在のパレットを使用して更新され、現在のパレット内で再利用されない過去のパレット予測子からのエントリが、許容される最大サイズに達するまで新たなパレット予測子の末尾に追加される。
[070] 幾つかの実施形態では、現在のＣＵ内にエスケープシンボルが存在するかどうかを示すためにエスケープフラグがＣＵごとにシグナリングされる。エスケープシンボルが存在する場合、パレットテーブルが１増加され、最後のインデックス（例えば図５に示すインデックス４）がエスケープシンボルであるように割り当てられる。
[071] 再び図５を参照し、ＣＵ内のサンプルのパレットインデックス（例えばインデックス０、インデックス１、インデックス２、インデックス３、及びインデックス４）がパレットインデックスマップを形成する。インデックスマップは水平又は垂直トラバーススキャンを使用して符号化される。スキャン順序は、palette_transpose_flagシンタックス要素を使用してビットストリーム内で明示的にシグナリングされる。パレットインデックスマップは、インデックス実行モード（index-run mode）又はインデックスコピーモードを使用して符号化される。
[072] 幾つかの実施形態では、パレットモードが４：４：４カラーフォーマットについてのみ許可される。しかし大量の映像コンテンツが他のカラーフォーマット、例えば４：２：０クロマサブサンプリングフォーマットで符号化されている可能性がある。本開示は、モノクローム、４：２：０、４：２：２などの他のクロマフォーマットにパレットモードを拡張するための方法を提供する。
[073] さらに、デュアルルマ／クロマツリーを有するスライスでは、パレットがルマ（Ｙ成分）及びクロマ（Ｃｂ及びＣｒ成分）に対して別々に適用される。シングルツリーのスライスでは、パレットがＹ、Ｃｂ、Ｃｒ成分に一緒に適用される（例えばパレット内の各エントリがＹ、Ｃｂ、Ｃｒ値を含む）。しかしＶＶＣでは、４：２：０及び４：２：２カラーフォーマットに関して、許容可能な最小クロマ符号化ブロックサイズに対する制約により、シングルツリースライスの符号化ユニット（ＣＵ）が別々のルマ及びクロマツリーを有し得る。したがって、（ＣＵがシングルツリースライスに属していても）デュアルツリーＣＵのルマ及びクロマが別々に処理されるので、デュアルツリーＣＵにジョイントパレットを適用することができない。したがって本開示の幾つかの実施形態では、４：２：０及び４：２：２などの他のクロマフォーマットにパレットモードを拡張しながら、ローカルデュアルツリー構造を有するシングルツリースライス（例えばスライスレベルでシングルツリーである一方、ＣＵレベルではデュアルツリーである）の可能性に対処することができる。
[074] 本開示の幾つかの実施形態は、４：４：４カラーフォーマット以外のカラーフォーマット（又は非４：４：４カラーフォーマット）及びローカルデュアルツリー構造を有するシングルツリースライスにパレットモードを適用するための方法及び機器を提供する。
[075] 本開示の幾つかの実施形態は、モノクローム、４：２：０、４：２：２、４：４：４などの全てのクロマフォーマットに関してパレットモードを許可し得る。図７は、本開示の幾つかの実施形態による、ＳＰＳシンタックステーブルの一部を示す例示的な表１を示す。表１内に示すように、ボックス７０１内で取消線が引かれているシンタックス要素は現在のＶＶＣドラフト７から削除されることが提案されており、ボックス７０２内にイタリック体で示されているシンタックス要素は現在のＶＶＣドラフト７に追加されることが提案されている。ＳＰＳフラグsps_palette_enabled_flagは、chroma_format_idcシンタックス要素の値に関係なくシグナリングすることができる。
[076] 上記で説明したように、現在の映像符号化標準規格（例えばＶＶＣドラフト７）では、シングルツリーを有するスライスではパレットモードがＹ、Ｃｂ、Ｃｒ成分に一緒に適用される。Ｐ及びＢスライスは常にシングルツリースライスとして符号化される。Ｉスライスのツリー構造はＳＰＳシンタックス、例えばqtbtt_dual_tree_intra_flagシンタックス要素によってシグナリングされる。１に等しいqtbtt_dual_tree_intra_flagシンタックス要素は、Ｉスライスに関してルマ及びクロマ用の２つの別個のcoding_treeシンタックス構造が使用されることを指定する。０に等しいqtbtt_dual_tree_intra_flagシンタックス要素は、Ｉスライスに関して別個のcoding_treeシンタックス構造が使用されないことを指定する。
[077] 非インターの最小クロマイントラ予測ユニット（ＳＣＩＰＵ：smallest chroma intra prediction unit）の場合、クロマをさらに分割することは認められないがルマをさらに分割することは認められるので、シングルツリースライスの符号化ユニットは別々のルマ及びクロマツリーを有することができる。シングルツリー符号化では、ＳＣＩＰＵは、そのクロマブロックサイズが１６クロマサンプル以上であり、６４ルマサンプル未満の少なくとも１つの子ルマブロックを有する符号化ツリーノードとして定義される。したがって、（デュアルツリーＣＵがシングルツリースライスに属していても）デュアルツリーＣＵのルマ及びクロマが別々に処理されるので、デュアルツリーＣＵにジョイントパレットを適用することができない。このことはデュアルツリーＣＵを有するシングルツリースライスにパレットモードを適用することに関して問題を提起する。本開示はこの問題に対処するための幾つかの実施形態を提供する。
[078] 幾つかの実施形態によれば、ＣＵがローカルデュアルツリーを含む場合はパレットモードがＣＵに関して許可されない。したがって以下の条件、つまり（１）ＣＵが別々のツリーによって符号化されていること、及び（２）ＣＵがシングルツリーを有するスライスに属することの両方が満たされる場合、パレットモードがＣＵに関して許可されない。図８は、本開示の幾つかの実施形態による、符号化ユニットシンタックステーブルの一部を示す例示的な表２を示す。表２の符号化ユニットシンタックステーブルは、ＣＵのためのパレットモードを許可しないことができる。表２に示すように、本開示と合致するシンタックスの変更をボックス８０１内にイタリック体で示す。表２の符号化ユニットシンタックステーブルに基づき、以下の２つの条件が満たされる場合はパレットモードが許可されない：
(treeType ! = SINGLE_TREE) &&
(slice_type ! = I || qtbtt_dual_tree_intra_flag == 0)
[079] 幾つかの実施形態によれば、パレットモードの符号化効率を改善するために、ローカルデュアルツリーを含むＣＵにパレットモードが適用される。ローカルデュアルツリーブロックでは、新たなパレットエントリ（例えばnew_palette_entries[ cIdx ][ i ]シンタックス要素）を追加することなしに再利用フラグ（例えばpalette_predictor_runシンタックス要素）がシグナリングされる。ローカルデュアルツリーブロックはルマ（又はクロマ）成分しか含むことができないので、新たなパレットエントリのクロマ（又はルマ）値は空であり得る。したがって、ローカルデュアルツリーブロックに関して新たなパレットエントリを送信することが制限される。図９は、本開示の幾つかの実施形態による、パレット符号化シンタックステーブルの一部を示す例示的な表３を示す。表３のパレット符号化シンタックステーブルは、ローカルデュアルツリーを含むＣＵにパレットモードを適用することができる。表３に示すように、本発明の実施形態と合致するシンタックスの変更をボックス９０１～９０４内にイタリック体で示す。
[080] さらに、非４：４：４カラーフォーマットでは、ルマ成分だけを含むピクセルがある。したがって幾つかの実施形態では、エスケープモードを使用して符号化される場合、これらのピクセルについてルマ値だけがシグナリングされる（ボックス９０３内の太字及び影付き両方の図９の表３内のシンタックスを参照されたい）。
[081] 図１０は、本開示の幾つかの実施形態による、パレットモードのための例示的デコーディングプロセスを示す。デコーディングプロセスは、ＶＶＣドラフト７内のセクション８．４．５．３を含む。デコーディングプロセスは、ピクセルを再構成するための１つのプロセス、及びパレット予測子を更新するためのもう１つのプロセスという２つのプロセスを含み得る。
[082] 図１０に示すように、デコーディングプロセスはＶＶＣドラフト７内のセクション８．４．５．３と同様であり得る。デコーディングプロセスは、ボックス１００１～１００３内にイタリック体で示す幾つかのシンタックスの変更を含み得る。現在のパレットを使用してパレット予測子を更新するとき、現在のパレットのためのエントリが新たなパレット予測子の前に置かれる。次いで、現在のパレット内で再利用されない過去のパレット予測子からのエントリが新たなパレット予測子の末尾に追加される。ローカルデュアルツリーブロックでは、各パレットエントリがルマ成分及びクロマ成分の両方を含む。したがって、パレット予測子の更新プロセスには３つの成分の全てが関与する。PredictorPaletteSize[ startComp ]の値が０から６３までの範囲内にあることがビットストリーム適合の要件である。
[083] 幾つかの実施形態によれば、シングルツリーブロックに適用されるパレットモードと同じやり方でパレットモードをローカルデュアルツリーブロックに適用することができる。ローカルデュアルツリーブロックはルマ（又はクロマ）成分しか含むことができないので、ルマ（又はクロマ）成分の値がシグナリングされ、新たなパレットエントリについてクロマ（又はルマ）成分にデフォルト値を設定することができる。一例として、デフォルト値は映像シーケンスのビット深度に関係し得る。別の例として、デフォルト値はゼロであり得る。
[084] さらに、非４：４：４カラーフォーマットでは、エスケープモードを使用して符号化される場合、ルマ成分だけを含むピクセルに関してルマ値だけがシグナリングされる。図１１は、本開示の幾つかの実施形態による、パレット符号化シンタックステーブルの一部を示す例示的な表４を示す。表４のパレット符号化シンタックステーブルは、ローカルデュアルツリーを含むＣＵにパレットモードを適用することができる。表４に示すように、本発明の実施形態と合致するシンタックスの変更をボックス１１０１及びボックス１１０２内にイタリック体で示す。
[085] 本開示の幾つかの実施形態では、ローカルデュアルツリーのためのシンタックスパースが、シングルツリーのためのシンタックスパースとアラインされ得る。さらに、より少ないビットがシグナリングされるのでパレットモードの符号化効率を改善することができる。
[086] 図１２は、本開示の幾つかの実施形態による、パレットモードのための例示的なパレット符号化セマンティクス及びデコーディングプロセスを示す。図１２に示すように、ＶＶＣドラフト７内のセクション７．４．１２．６及びセクション８．４．５．３に対する提案するシンタックスの変更をボックス１２０１～１２０５内にイタリック体で示す。ローカルデュアルツリーブロックでは、パレット予測子の更新を行うとき、現在のパレット内にデフォルト値が最初に埋められる（図１２内の太字のセマンティクス参照）。次に、３つの成分の全てがパレット予測子の更新プロセスに関与する。PredictorPaletteSize[ startComp ]の値が０から６３までの範囲内にあることがビットストリーム適合の要件である。
[087] 幾つかの実施形態によれば、シングルツリーブロックに適用されるパレットモードと同じやり方でパレットモードをローカルデュアルツリーブロックに適用することができ、これは図１１の表４に示す実施形態と同様である。しかし幾つかの実施形態では、パレット予測子を更新するために、ローカルデュアルツリーブロックのためのパレットが使用されない。したがって、パレット予測子の並べ替えプロセスがスキップされるので、デコーディングプロセスを単純化することができる。
[088] さらに、非４：４：４カラーフォーマットでは、エスケープモードを使用して符号化される場合、ルマ成分だけを含むピクセルに関してルマ値だけがシグナリングされる。図１３は、本開示の幾つかの実施形態による、パレット符号化シンタックステーブルの一部を示す例示的な表５を示す。表５のパレット符号化シンタックステーブルは、ローカルデュアルツリーを含むＣＵにパレットモードを適用することができる。表５に示すように、本発明の実施形態と合致するシンタックスの変更をボックス１３０１及びボックス１３０２内にイタリック体で示す。
[089] 図１４は、本開示の幾つかの実施形態による、パレットモードのための例示的デコーディングプロセスを示す。図１４に示すように、ＶＶＣドラフト７内のセクション８．４．５．３に対する提案するシンタックスの変更をボックス１４０１及びボックス１４０２内にイタリック体で示す。ローカルデュアルツリーブロックではパレット予測子が更新されない。PredictorPaletteSize[ startComp ]の値が０から６３までの範囲内にあることがビットストリーム適合の要件である。
[090] 幾つかの実施形態によれば、シングルツリーブロックに適用されるパレットモードと同じやり方でパレットモードをローカルデュアルツリールマブロックに適用することができる。ローカルデュアルツリークロマブロックではパレットモードが無効にされる。ローカルデュアルツリールマブロックはルマ成分しか含むことができないので、ルマ成分の値がシグナリングされ、新たなパレットエントリについてクロマ成分にデフォルト値を設定することができる。一例として、デフォルト値は映像シーケンスのビット深度に関係し得る。別の例として、デフォルト値はゼロであり得る。
[091] さらに、非４：４：４カラーフォーマットでは、エスケープモードを使用して符号化される場合、ルマ成分だけを含むピクセルに関してルマ値だけがシグナリングされる。図１５は、本開示の幾つかの実施形態による、符号化ユニットシンタックステーブルの一部を示す例示的な表６を示す。図１６は、本開示の幾つかの実施形態による、パレット符号化シンタックステーブルの一部を示す例示的な表７を示す。パレット符号化シンタックステーブルは、ルマローカルデュアルツリーを含むＣＵにパレットモードを適用することができる。本発明の実施形態と合致する表６及び表７のシンタックスの変更をボックス１５０１及びボックス１６０１～１６０２それぞれの中にイタリック体で示す。
[092] 本開示の幾つかの実施形態では、クロマローカルデュアルツリーに関してパレットを無効にすることで、パレットの設計を単純化することができる。
[093] 図１７は、本開示の幾つかの実施形態による、パレットモードのための例示的なパレット符号化セマンティクス及びデコーディングプロセスを示す。図１７に示すように、ＶＶＣドラフト７内のセクション７．４．１２．６及びセクション８．４．５．３に対する提案するシンタックスの変更をボックス１７０１～１７０５内にイタリック体で示す。ローカルデュアルツリーブロックでは、パレット予測子の更新を行うとき、現在のパレット内にデフォルト値が最初に埋められる。次に、３つの成分の全てがパレット予測子の更新プロセスに関与する。PredictorPaletteSize[ startComp ]の値が０から６３までの範囲内にあることがビットストリーム適合の要件である。
[094] 図１８は、本開示の幾つかの実施形態による、例示的な映像処理方法１８００のフローチャートを示す。幾つかの実施形態では、方法１８００は、デコーダ（例えば図３のデコーダ３００）又は機器（例えば図４の機器４００）の１つ若しくは複数のソフトウェア若しくはハードウェアコンポーネントによって実行され得る。例えばプロセッサ（例えば図４のプロセッサ４０２）が方法１８００を行うことができる。幾つかの実施形態では、コンピュータ（例えば図４の機器４００）によって実行されるプログラムコードなどのコンピュータ実行可能命令を含むコンピュータ可読媒体によって具体化されるコンピュータプログラム製品によって、方法１８００が実装され得る。
[095] ステップ１８０１で、標的ＣＵをパレット符号化するためのパレットエントリを受け取ることができる。例えばデコーダ（例えば図３のデコーダ３００）が、標的ＣＵをパレット符号化するための１つ又は複数のパレットエントリ（例えば図９の表３内のnew_palette_entries[ cIdx ][ i ]）を含むビットストリームを受け取ることができる。
[096] ステップ１８０３で、標的ＣＵが別々のルマ及びクロマツリーによって符号化されているかどうかを判定することができる。例えばこの判定は条件（treeType ! = SINGLE_TREE）が満たされるかどうかに基づいて行うことができる。treeType ! = SINGLE_TREEである場合、標的ＣＵは別々のルマ及びクロマツリーによって符号化されていると判定され得る。
[097] ステップ１８０５で、標的ＣＵがシングルツリースライスの一部かどうかを判定することができる。幾つかの実施形態では、方法１８００は、標的ＣＵがＰスライス又はＢスライスの一部かどうか（例えばslice_type ! = I）を判定すること、又は標的ＣＵがシングルツリーＩスライスの一部かどうか（例えばqtbtt_dual_tree_intra_flag == 0）を判定することを含み得る。
[098] ステップ１８０７で、標的ＣＵが（ａ）別々のルマ及びクロマツリーによって符号化されており、（ｂ）シングルツリースライスの一部であると判定されることに応答し、標的ＣＵの第１の成分を、受け取ったパレットエントリに基づいてデコードすることができ、標的ＣＵの第２の成分を、デフォルトのパレットエントリに基づいてデコードすることができる。幾つかの実施形態では、方法１８００は、標的ＣＵがＰスライス若しくはＢスライスの一部である、又はシングルツリーＩスライスの一部であると判定されることに応答し、標的ＣＵの第１の成分及び第２の成分を、受け取ったパレットエントリに基づいてデコードすることを含み得る。第１の成分はルマ成分であり、第２の成分はクロマ成分である、又は第１の成分はクロマ成分であり、第２の成分はルマ成分である。
[099] 幾つかの実施形態では、方法１８００が、標的ＣＵをパレット符号化するためにパレットエントリを再利用するための再利用フラグを受け取ること、並びに受け取ったパレットエントリ及び受け取った再利用フラグに基づいて標的ＣＵのパレット予測子を更新することを含み得る。幾つかの実施形態では、標的ＣＵのパレット予測子のサイズが０から６３までの範囲内にある。幾つかの実施形態では、方法１８００が、標的ＣＵのパレット予測子を、受け取ったパレットエントリに基づいて更新することを含み得る。幾つかの実施形態では、第１の成分及び第２の成分のデコード後に標的ＣＵのパレット予測子が更新されない。
[0100] 図１９は、本開示の幾つかの実施形態による、例示的な映像処理方法１９００のフローチャートを示す。幾つかの実施形態では、方法１９００は、エンコーダ（例えば図２のエンコーダ２００）、デコーダ（例えば図３のデコーダ３００）、又は機器（例えば図４の機器４００）の１つ若しくは複数のソフトウェア若しくはハードウェアコンポーネントによって実行され得る。例えばプロセッサ（例えば図４のプロセッサ４０２）が方法１９００を行うことができる。幾つかの実施形態では、コンピュータ（例えば図４の機器４００）によって実行されるプログラムコードなどのコンピュータ実行可能命令を含むコンピュータ可読媒体によって具体化されるコンピュータプログラム製品によって、方法１９００が実装され得る。
[0101] ステップ１９０１で、方法１９００は、標的ＣＵに関してパレットモードが有効にされていることを示すフラグをシグナリングすることを含み得る。フラグは、標的ＣＵにクロマサンプリングフォーマットが使用されるかどうかに関係なくシグナリングされ得る。幾つかの実施形態では、フラグがＳＰＳ内でシグナリングされる。クロマサンプリングフォーマットは、４：４：４フォーマット、４：２：２フォーマット、又は４：２：０フォーマットの１つ又は複数を含み得る。
[0102] ステップ１９０３で、方法１９００は、標的ＣＵに使用されるクロマサンプリングフォーマット（例えば４：４：４フォーマット、４：２：２フォーマット、又は４：２：０フォーマット）を決定することも含み得る。幾つかの実施形態では、方法１９００は、決定したクロマサンプリングフォーマット（例えば４：４：４フォーマット）に基づいて対応するシンタックス要素（例えば図７の表１内のsps_act_enabled_flagシンタックス要素）をシグナリングすることを含み得る。
[0103] 図２０は、本開示の幾つかの実施形態による、例示的な映像処理方法２０００のフローチャートを示す。幾つかの実施形態では、方法２０００は、エンコーダ（例えば図２のエンコーダ２００）、デコーダ（例えば図３のデコーダ３００）、又は機器（例えば図４の機器４００）の１つ若しくは複数のソフトウェア若しくはハードウェアコンポーネントによって実行され得る。例えばプロセッサ（例えば図４のプロセッサ４０２）が方法２０００を行うことができる。幾つかの実施形態では、コンピュータ（例えば図４の機器４００）によって実行されるプログラムコードなどのコンピュータ実行可能命令を含むコンピュータ可読媒体によって具体化されるコンピュータプログラム製品によって、方法２０００が実装され得る。
[0104] ステップ２００１で、標的ＣＵが別々のルマ及びクロマツリーによって符号化されているかどうかを判定することができる。例えばこの判定は条件（treeType ! = SINGLE_TREE）が満たされるかどうかに基づいて行うことができる。treeType ! = SINGLE_TREEである場合、標的ＣＵは別々のルマ及びクロマツリーによって符号化されていると判定され得る。
[0105] ステップ２００３で、標的ＣＵがシングルツリースライスの一部かどうかを判定することができる。幾つかの実施形態では、方法２０００は、標的ＣＵがＰスライス又はＢスライスの一部かどうか（例えばslice_type ! = I）を判定すること、又は標的ＣＵがシングルツリーＩスライスの一部かどうか（例えばqtbtt_dual_tree_intra_flag == 0）を判定することを含み得る。
[0106] ステップ２００５で、標的ＣＵが（ａ）別々のルマ及びクロマツリーによって符号化されており、（ｂ）シングルツリースライスの一部であると判定されることに応答し、標的ＣＵに関してパレットモードが許可されないと判定することができる（例えば図８の表２）。
[0107] 図２１は、本開示の幾つかの実施形態による、例示的な映像処理方法２１００のフローチャートを示す。幾つかの実施形態では、方法２１００は、エンコーダ（例えば図２のエンコーダ２００）、デコーダ（例えば図３のデコーダ３００）、又は機器（例えば図４の機器４００）の１つ若しくは複数のソフトウェア若しくはハードウェアコンポーネントによって実行され得る。例えばプロセッサ（例えば図４のプロセッサ４０２）が方法２１００を行うことができる。幾つかの実施形態では、コンピュータ（例えば図４の機器４００）によって実行されるプログラムコードなどのコンピュータ実行可能命令を含むコンピュータ可読媒体によって具体化されるコンピュータプログラム製品によって、方法２１００が実装され得る。
[0108] ステップ２１０１で、標的ＣＵが別々のルマ及びクロマツリーによって符号化されているかどうかを判定することができる。例えばこの判定は条件（treeType ! = SINGLE_TREE）が満たされるかどうかに基づいて行うことができる。treeType ! = SINGLE_TREEである場合、標的ＣＵは別々のルマ及びクロマツリーによって符号化されていると判定され得る。
[0109] ステップ２１０３で、標的ＣＵがシングルツリースライスの一部かどうかを判定することができる。幾つかの実施形態では、方法２１００は、標的ＣＵがＰスライス又はＢスライスの一部かどうか（例えばslice_type ! = I）を判定すること、又は標的ＣＵがシングルツリーＩスライスの一部かどうか（例えばqtbtt_dual_tree_intra_flag == 0）を判定することを含み得る。
[0110] ステップ２１０５で、標的ＣＵが（ａ）別々のルマ及びクロマツリーによって符号化されており、（ｂ）シングルツリースライスの一部であると判定されることに応答し、標的ＣＵをパレット符号化するためにパレットエントリを再利用するための再利用フラグをシグナリングすることができる。標的ＣＵをパレット符号化するために新たなパレットエントリはシグナリングされない（例えば図９の表３）。
[0111] 幾つかの実施形態では、方法２１００は、標的ＣＵが（ａ）別々のルマ及びクロマツリーによって符号化されていない、又は（ｂ）シングルツリースライスの一部ではないと判定されることに応答し、標的ＣＵをパレット符号化するためにパレットエントリをシグナリングすることを含み得る（例えば図９の表３）。
[0112] 幾つかの実施形態では、方法２１００は、標的ＣＵ内のピクセルがルマ成分だけを含むかどうかを判定すること、及びピクセルがルマ成分だけを含むと判定することに応答し、ピクセルがエスケープモードＣＵを使用して符号化される場合、ピクセルに関するルマパレットエスケープ値だけをシグナリングすることを含み得る（例えば図９の表３）。
[0113] 図２２は、本開示の幾つかの実施形態による、例示的な映像処理方法２２００のフローチャートを示す。幾つかの実施形態では、方法２２００は、エンコーダ（例えば図２のエンコーダ２００）、デコーダ（例えば図３のデコーダ３００）、又は機器（例えば図４の機器４００）の１つ若しくは複数のソフトウェア若しくはハードウェアコンポーネントによって実行され得る。例えばプロセッサ（例えば図４のプロセッサ４０２）が方法２２００を行うことができる。幾つかの実施形態では、コンピュータ（例えば図４の機器４００）によって実行されるプログラムコードなどのコンピュータ実行可能命令を含むコンピュータ可読媒体によって具体化されるコンピュータプログラム製品によって、方法２２００が実装され得る。
[0114] ステップ２２０１で、標的符号化ユニット（ＣＵ）内のピクセルがルマ成分だけを含むかどうかを判定することができる。ステップ２２０３で、ピクセルがルマ成分だけを含むと判定することに応答し、ピクセルがエスケープモードを使用して符号化される場合、ピクセルに関するルマパレットエスケープ値だけをシグナリングすることができる（例えば図１１の表４）。
[0115] 図２３は、本開示の幾つかの実施形態による、例示的な映像処理方法２３００のフローチャートを示す。幾つかの実施形態では、方法２３００は、デコーダ（例えば図３のデコーダ３００）又は機器（例えば図４の機器４００）の１つ若しくは複数のソフトウェア若しくはハードウェアコンポーネントによって実行され得る。例えばプロセッサ（例えば図４のプロセッサ４０２）が方法２３００を行うことができる。幾つかの実施形態では、コンピュータ（例えば図４の機器４００）によって実行されるプログラムコードなどのコンピュータ実行可能命令を含むコンピュータ可読媒体によって具体化されるコンピュータプログラム製品によって、方法２３００が実装され得る。
[0116] ステップ２３０１で、ビットストリームを受け取ることができる。ビットストリームは、標的ＣＵをパレット符号化するためにパレットエントリを再利用するための再利用フラグを含み得る。例えば、標的ＣＵをパレット符号化するためにパレットエントリを再利用するための１つ又は複数の再利用フラグ（例えば図９の表３内のpalette_predictor_run）を含むビットストリームをデコーダ（例えば図３のデコーダ３００）が受け取ることができる。
[0117] ステップ２３０３で、標的ＣＵが別々のルマ及びクロマツリーによって符号化されているかどうかを判定することができる。例えばこの判定は条件（treeType ! = SINGLE_TREE）が満たされるかどうかに基づいて行うことができる。treeType ! = SINGLE_TREEである場合、標的ＣＵは別々のルマ及びクロマツリーによって符号化されていると判定され得る。
[0118] ステップ２３０５で、標的ＣＵがシングルツリースライスの一部かどうかを判定することができる。幾つかの実施形態では、方法２３００は、標的ＣＵがＰスライス又はＢスライスの一部かどうか（例えばslice_type ! = I）を判定すること、又は標的ＣＵがシングルツリーＩスライスの一部かどうか（例えばqtbtt_dual_tree_intra_flag == 0）を判定することを含み得る。
[0119] ステップ２３０７で、標的ＣＵが（ａ）別々のルマ及びクロマツリーによって符号化されており、（ｂ）シングルツリースライスの一部であると判定されることに応答し、受け取った再利用フラグに基づいて標的ＣＵのルマ成分及びクロマ成分をデコードすることができる。受け取られるビットストリームは標的ＣＵをパレット符号化するためのパレットエントリを含まない。幾つかの実施形態では、方法２３００は、標的ＣＵがＰスライス又はＢスライスの一部である、又はシングルツリーＩスライスの一部であると判定されることに応答し、ビットストリーム内の、受け取った再利用フラグと、標的ＣＵをパレット符号化するためのパレットエントリとに基づいて、標的ＣＵのルマ成分及びクロマ成分をデコードすることを含み得る。
[0120] 幾つかの実施形態では、方法２３００は、受け取った再利用フラグに基づいて標的ＣＵのパレット予測子を更新することを含み得る。方法２３０は、標的ＣＵがＰスライス又はＢスライスの一部である、又はシングルツリーＩスライスの一部であると判定されることに応答し、ビットストリーム内の、受け取った再利用フラグと、標的ＣＵをパレット符号化するためのパレットエントリとに基づいて、標的ＣＵのパレット予測子を更新することも含み得る。幾つかの実施形態では、標的ＣＵのパレット予測子のサイズが０から６３までの範囲内にある。
[0121] 幾つかの実施形態では、命令を含む非一時的コンピュータ可読記憶媒体も提供され、命令は、上記の方法を行うために、デバイス（開示のエンコーダ及びデコーダなど）によって実行され得る。非一時的媒体の一般的な形態には、例えば、フロッピー（登録商標）ディスク、フレキシブルディスク、ハードディスク、ソリッドステートドライブ、磁気テープ、又はその他の磁気データ記憶媒体、ＣＤ－ＲＯＭ、その他の光学データ記憶媒体、孔のパターンを有する任意の物理媒体、ＲＡＭ、ＰＲＯＭ、及びＥＰＲＯＭ、ＦＬＡＳＨ（登録商標）－ＥＰＲＯＭ又はその他のフラッシュメモリ、ＮＶＲＡＭ、キャッシュ、レジスタ、その他のメモリチップ又はカートリッジ、並びに上記のネットワーク化バージョンが含まれる。デバイスは、１つ若しくは複数のプロセッサ（ＣＰＵ）、入出力インタフェース、ネットワークインタフェース、及び／又はメモリを含み得る。
[0122] 実施形態は、以下の条項を用いてさらに説明することができる。
１．標的符号化ユニット（ＣＵ）をパレット符号化するための第１のパレットエントリを受け取ること、
標的ＣＵがシングルツリースライスの一部かどうかを判定すること、
標的ＣＵが別々のルマ及びクロマツリーによって符号化されているかどうかを判定すること、及び
標的ＣＵがシングルツリースライスの一部であり別々のルマ及びクロマツリーによって符号化されていると判定されることに応答し、
第１のパレットエントリに基づいて標的ＣＵの第１の成分をデコードし、
デフォルトのパレットエントリに基づいて標的ＣＵの第２の成分をデコードすること
を含む、映像処理方法。
２．標的ＣＵをパレット符号化するための第１のパレットエントリを受け取ることが、
第２のパレットエントリに関連するフラグを受け取ること、及び
受け取ったフラグに基づき、第２のパレットエントリを標的ＣＵのパレット予測子に含めること
を含む、条項１に記載の方法。
３．標的ＣＵのパレット予測子のサイズが０から６３までの範囲内にある、条項２に記載の方法。
４．標的ＣＵをパレット符号化するための第１のパレットエントリを受け取ることが、
第１のパレットエントリに基づいて標的ＣＵのパレット予測子を更新すること
を含む、条項１乃至３の何れか一項に記載の方法。
５．標的ＣＵがシングルツリースライスの一部かどうかを判定することが、
標的ＣＵがＰスライス又はＢスライスの一部かどうかを判定すること、又は
標的ＣＵがシングルツリーＩスライスの一部かどうかを判定すること
を含む、条項１乃至４の何れか一項に記載の方法。
６．標的ＣＵがＰスライス又はＢスライスの一部である、又はシングルツリーＩスライスの一部であると判定されることに応答し、第１のパレットエントリに基づいて標的ＣＵの第１の成分及び第２の成分をデコードすること
をさらに含む、条項５に記載の方法。
７．第１の成分がルマ成分であり、第２の成分がクロマ成分である、又は
第１の成分がクロマ成分であり、第２の成分がルマ成分である、
条項１乃至６の何れか一項に記載の方法。
８．第１の成分及び第２の成分のデコード後に標的ＣＵのパレット予測子が更新されない、条項１に記載の方法。
９．命令を記憶するための少なくとも１つのメモリと、
少なくとも１つのプロセッサとを含み、少なくとも１つのプロセッサが、
標的符号化ユニット（ＣＵ）をパレット符号化するための第１のパレットエントリを受け取ること、
標的ＣＵがシングルツリースライスの一部かどうかを判定すること、
標的ＣＵが別々のルマ及びクロマツリーによって符号化されているかどうかを判定すること、及び
標的ＣＵがシングルツリースライスの一部であり別々のルマ及びクロマツリーによって符号化されていると判定されることに応答し、
第１のパレットエントリに基づいて標的ＣＵの第１の成分をデコードし、
デフォルトのパレットエントリに基づいて標的ＣＵの第２の成分をデコードすること
を機器に行わせるために命令を実行するように構成される、映像処理機器。
１０．少なくとも１つのプロセッサが、
第２のパレットエントリに関連するフラグを受け取ること、及び
受け取ったフラグに基づき、第２のパレットエントリを標的ＣＵのパレット予測子に含めること
を機器に行わせるために命令を実行するように構成される、条項９に記載の機器。
１１．標的ＣＵのパレット予測子のサイズが０から６３までの範囲内にある、条項１０に記載の機器。
１２．少なくとも１つのプロセッサが、
第１のパレットエントリに基づいて標的ＣＵのパレット予測子を更新すること
を機器に行わせるために命令を実行するように構成される、条項９乃至１１の何れか一項に記載の機器。
１３．少なくとも１つのプロセッサが、
標的ＣＵがＰスライス又はＢスライスの一部かどうかを判定すること、又は
標的ＣＵがシングルツリーＩスライスの一部かどうかを判定すること
を機器に行わせるために命令を実行するように構成される、条項９乃至１２の何れか一項に記載の機器。
１４．少なくとも１つのプロセッサが、
標的ＣＵがＰスライス又はＢスライスの一部である、又はシングルツリーＩスライスの一部であると判定されることに応答し、第１のパレットエントリに基づいて標的ＣＵの第１の成分及び第２の成分をデコードすること
を機器に行わせるために命令を実行するように構成される、条項１３に記載の機器。
１５．第１の成分がルマ成分であり、第２の成分がクロマ成分である、又は
第１の成分がクロマ成分であり、第２の成分がルマ成分である、
条項９乃至１４の何れか一項に記載の機器。
１６．第１の成分及び第２の成分のデコード後に標的ＣＵのパレット予測子が更新されない、条項９に記載の機器。
１７．命令セットを記憶する非一時的コンピュータ可読記憶媒体であって、前記命令セットは、
標的符号化ユニット（ＣＵ）をパレット符号化するための第１のパレットエントリを受け取ること、
標的ＣＵがシングルツリースライスの一部かどうかを判定すること、
標的ＣＵが別々のルマ及びクロマツリーによって符号化されているかどうかを判定すること、及び
標的ＣＵがシングルツリースライスの一部であり別々のルマ及びクロマツリーによって符号化されていると判定されることに応答し、
第１のパレットエントリに基づいて標的ＣＵの第１の成分をデコードし、
デフォルトのパレットエントリに基づいて標的ＣＵの第２の成分をデコードすること
を映像処理機器に行わせるために１つ又は複数の処理装置によって実行可能である、非一時的コンピュータ可読記憶媒体。
１８．前記命令セットが、
第２のパレットエントリに関連するフラグを受け取ること、及び
受け取ったフラグに基づき、第２のパレットエントリを標的ＣＵのパレット予測子に含めること
を映像処理機器に行わせるために１つ又は複数の処理装置によって実行可能である、条項１７に記載の非一時的コンピュータ可読記憶媒体。
１９．標的ＣＵのパレット予測子のサイズが０から６３までの範囲内にある、条項１８に記載の非一時的コンピュータ可読記憶媒体。
２０．前記命令セットが、
第１のパレットエントリに基づいて標的ＣＵのパレット予測子を更新すること
を映像処理機器に行わせるために１つ又は複数の処理装置によって実行可能である、条項１７乃至１９の何れか一項に記載の非一時的コンピュータ可読記憶媒体。
２１．前記命令セットが、
標的ＣＵがＰスライス又はＢスライスの一部かどうかを判定すること、又は
標的ＣＵがシングルツリーＩスライスの一部かどうかを判定すること
を映像処理機器に行わせるために１つ又は複数の処理装置によって実行可能である、条項１７乃至２０の何れか一項に記載の非一時的コンピュータ可読記憶媒体。
２２．前記命令セットが、
標的ＣＵがＰスライス又はＢスライスの一部である、又はシングルツリーＩスライスの一部であると判定されることに応答し、第１のパレットエントリに基づいて標的ＣＵの第１の成分及び第２の成分をデコードすること
を映像処理機器に行わせるために１つ又は複数の処理装置によって実行可能である、条項２１に記載の非一時的コンピュータ可読記憶媒体。
２３．第１の成分がルマ成分であり、第２の成分がクロマ成分である、又は
第１の成分がクロマ成分であり、第２の成分がルマ成分である、
条項１７乃至２２の何れか一項に記載の非一時的コンピュータ可読記憶媒体。
２４．第１の成分及び第２の成分のデコード後に標的ＣＵのパレット予測子が更新されない、条項１７に記載の非一時的コンピュータ可読記憶媒体。
２５．標的符号化ユニット（ＣＵ）に関してパレットモードが有効にされていることを示すフラグをシグナリングすることを含み、
フラグは標的ＣＵにクロマサンプリングフォーマットが使用されるかどうかに関係なくシグナリングされる、映像処理方法。
２６．フラグがシーケンスパラメータセット（ＳＰＳ）内でシグナリングされる、条項２５に記載の方法。
２７．クロマサンプリングフォーマットが、
４：４：４フォーマット、
４：２：２フォーマット、又は
４：２：０フォーマット
の１つ又は複数を含む、条項２５又は２６の何れか一項に記載の方法。
２８．標的ＣＵがシングルツリースライスの一部かどうかを判定すること、
標的符号化ユニット（ＣＵ）が別々のルマ及びクロマツリーによって符号化されているかどうかを判定すること、及び
標的ＣＵがシングルツリースライスの一部であり別々のルマ及びクロマツリーによって符号化されていると判定されることに応答し、標的ＣＵに関してパレットモードが許可されないと判定すること
を含む、映像処理方法。
２９．標的ＣＵがシングルツリースライスの一部かどうかを判定することが、
標的ＣＵがＰスライス又はＢスライスの一部かどうかを判定すること、又は
標的ＣＵがシングルツリーＩスライスの一部かどうかを判定すること
を含む、条項２８に記載の方法。
３０．標的ＣＵがＰスライス又はＢスライスの一部である、又はシングルツリーＩスライスの一部であると判定されることに応答し、標的ＣＵに関してパレットモードが許可されると判定すること
をさらに含む、条項２９に記載の方法。
３１．標的ＣＵがシングルツリースライスの一部かどうかを判定すること、
標的符号化ユニット（ＣＵ）が別々のルマ及びクロマツリーによって符号化されているかどうかを判定すること、及び
標的ＣＵがシングルツリースライスの一部であり別々のルマ及びクロマツリーによって符号化されていると判定されることに応答し、標的ＣＵをパレット符号化するためにパレットエントリを再利用するための再利用フラグをシグナリングすることを含み、
標的ＣＵをパレット符号化するために新たなパレットエントリはシグナリングされない、映像処理方法。
３２．標的ＣＵがシングルツリースライスの一部かどうかを判定することが、
標的ＣＵがＰスライス又はＢスライスの一部かどうかを判定すること、又は
標的ＣＵがシングルツリーＩスライスの一部かどうかを判定すること
を含む、条項３１に記載の方法。
３３．標的ＣＵがシングルツリースライスの一部ではない又は別々のルマ及びクロマツリーによって符号化されていないことに応答し、標的ＣＵをパレット符号化するためのパレットエントリをシグナリングすること
をさらに含む、条項３１又は３２に記載の方法。
３４．標的ＣＵ内のピクセルがクロマ成分を含むかどうか判定することであって、ピクセルはエスケープモードを使用して符号化されること、及び
ピクセルがクロマ成分を含まないことに応答し、ピクセルに関するルマパレットエスケープ値をシグナリングすることをさらに含み、
ピクセルに関するクロマパレットエスケープ値はシグナリングされない、条項３１乃至３３の何れか一項に記載の方法。
３５．標的符号化ユニット（ＣＵ）内のピクセルがクロマ成分を含むかどうか判定することであって、ピクセルはエスケープモードを使用して符号化されている、判定すること、及び
ピクセルがクロマ成分を含まないことに応答し、ルマパレットエスケープ値をシグナリングすることを含み、
ピクセルに関するクロマパレットエスケープ値はシグナリングされない、映像処理方法。
３６．標的符号化ユニット（ＣＵ）をパレット符号化するためにパレットエントリを再利用するための再利用フラグを含むビットストリームを受け取ること、
標的ＣＵがシングルツリースライスの一部かどうかを判定すること、
標的ＣＵが別々のルマ及びクロマツリーによって符号化されているかどうかを判定すること、及び
標的ＣＵがシングルツリースライスの一部であり別々のルマ及びクロマツリーによって符号化されていると判定されることに応答し、受け取った再利用フラグに基づいて標的ＣＵのルマ成分及びクロマ成分をデコードすることを含み、
ビットストリームは、シングルツリースライスの一部であり別々のルマ及びクロマツリーによって符号化される標的ＣＵをパレット符号化するためのパレットエントリを含まない、映像処理方法。
３７．受け取った再利用フラグに基づいて標的ＣＵのパレット予測子を更新すること
をさらに含む、条項３６に記載の方法。
３８．標的ＣＵがシングルツリースライスの一部かどうかを判定することが、
標的ＣＵがＰスライス又はＢスライスの一部かどうかを判定すること、又は
標的ＣＵがシングルツリーＩスライスの一部かどうかを判定すること
を含む、条項３６又は３７に記載の方法。
３９．標的ＣＵがＰスライス又はＢスライスの一部である、又はシングルツリーＩスライスの一部であると判定されることに応答し、ビットストリーム内の、受け取った再利用フラグと、標的ＣＵをパレット符号化するためのパレットエントリとに基づいて、標的ＣＵのルマ成分及びクロマ成分をデコードすること
をさらに含む、条項３８に記載の方法。
４０．標的ＣＵがＰスライス又はＢスライスの一部である、又はシングルツリーＩスライスの一部であると判定されることに応答し、ビットストリーム内の、受け取った再利用フラグと、標的ＣＵをパレット符号化するためのパレットエントリとに基づいて、標的ＣＵのパレット予測子を更新すること
をさらに含む、条項３８又は３９に記載の方法。
４１．標的ＣＵのパレット予測子のサイズが０から６３までの範囲内にある、条項３７乃至４０の何れか一項に記載の方法。
４２．命令を記憶するための少なくとも１つのメモリと、
少なくとも１つのプロセッサとを含み、少なくとも１つのプロセッサは、
標的符号化ユニット（ＣＵ）に関してパレットモードが有効にされていることを示すフラグをシグナリングすること
を機器に行わせるための命令を実行するように構成され、
フラグは、標的ＣＵにクロマサンプリングフォーマットが使用されるかどうかに関係なくシグナリングされる、映像処理機器。
４３．フラグがシーケンスパラメータセット（ＳＰＳ）内でシグナリングされる、条項４２に記載の機器。
４４．クロマサンプリングフォーマットが、
４：４：４フォーマット、
４：２：２フォーマット、又は
４：２：０フォーマット
の１つ又は複数を含む、条項４２又は４３に記載の機器。
４５．命令を記憶するための少なくとも１つのメモリと、
少なくとも１つのプロセッサとを含み、少なくとも１つのプロセッサは、
標的ＣＵがシングルツリースライスの一部かどうかを判定すること、
標的符号化ユニット（ＣＵ）が別々のルマ及びクロマツリーによって符号化されているかどうかを判定すること、及び
標的ＣＵがシングルツリースライスの一部であり別々のルマ及びクロマツリーによって符号化されていると判定されることに応答し、標的ＣＵに関してパレットモードが許可されないと判定すること
を機器に行わせるための命令を実行するように構成される、映像処理機器。
４６．少なくとも１つのプロセッサが、
標的ＣＵがＰスライス又はＢスライスの一部かどうかを判定すること、又は
標的ＣＵがシングルツリーＩスライスの一部かどうかを判定すること
を機器に行わせるために命令を実行するように構成される、条項４５に記載の機器。
４７．少なくとも１つのプロセッサが、
標的ＣＵがＰスライス又はＢスライスの一部である、又はシングルツリーＩスライスの一部であると判定されることに応答し、標的ＣＵに関してパレットモードが許可されると判定すること
を機器に行わせるために命令を実行するように構成される、条項４６に記載の機器。
４８．命令を記憶するための少なくとも１つのメモリと、
少なくとも１つのプロセッサとを含み、少なくとも１つのプロセッサは、
標的ＣＵがシングルツリースライスの一部かどうかを判定すること、
標的符号化ユニット（ＣＵ）が別々のルマ及びクロマツリーによって符号化されているかどうかを判定すること、及び
標的ＣＵがシングルツリースライスの一部であり別々のルマ及びクロマツリーによって符号化されていると判定されることに応答し、標的ＣＵをパレット符号化するためにパレットエントリを再利用するための再利用フラグをシグナリングすること
を機器に行わせるために命令を実行するように構成され、
標的ＣＵをパレット符号化するために新たなパレットエントリはシグナリングされない、映像処理機器。
４９．少なくとも１つのプロセッサが、
標的ＣＵがＰスライス又はＢスライスの一部かどうかを判定すること、又は
標的ＣＵがシングルツリーＩスライスの一部かどうかを判定すること
を機器に行わせるために命令を実行するように構成される、条項４８に記載の機器。
５０．少なくとも１つのプロセッサが、
標的ＣＵがシングルツリースライスの一部ではない又は別々のルマ及びクロマツリーによって符号化されていないことに応答し、標的ＣＵをパレット符号化するためのパレットエントリをシグナリングすること
を機器に行わせるために命令を実行するように構成される、条項４８又は４９に記載の機器。
５１．標的ＣＵ内のピクセルがクロマ成分を含むかどうか判定することであって、ピクセルはエスケープモードを使用して符号化される、判定すること、及び
ピクセルがクロマ成分を含まないことに応答し、ピクセルに関するルマパレットエスケープ値をシグナリングすることであって、ピクセルに関するクロマパレットエスケープ値はシグナリングされない、シグナリングすること
を機器に行わせるための命令を実行するように少なくとも１つのプロセッサが構成される、条項４８乃至５０の何れか一項に記載の機器。
５２．命令を記憶するための少なくとも１つのメモリと、
少なくとも１つのプロセッサとを含み、少なくとも１つのプロセッサは、
標的符号化ユニット（ＣＵ）内のピクセルがクロマ成分を含むかどうか判定することであって、ピクセルはエスケープモードを使用して符号化されること、及び
ピクセルがクロマ成分を含まないことに応答し、ルマパレットエスケープ値をシグナリングすること
を機器に行わせるために命令を実行するように構成され、
ピクセルに関するクロマパレットエスケープ値はシグナリングされない、映像処理機器。
５３．命令を記憶するための少なくとも１つのメモリと、
少なくとも１つのプロセッサとを含み、少なくとも１つのプロセッサは、
標的符号化ユニット（ＣＵ）をパレット符号化するためにパレットエントリを再利用するための再利用フラグを含むビットストリームを受け取ること、
標的ＣＵがシングルツリースライスの一部かどうかを判定すること、
標的ＣＵが別々のルマ及びクロマツリーによって符号化されているかどうかを判定すること、及び
標的ＣＵがシングルツリースライスの一部であり別々のルマ及びクロマツリーによって符号化されていると判定されることに応答し、受け取った再利用フラグに基づいて標的ＣＵのルマ成分及びクロマ成分をデコードすること
を機器に行わせるために命令を実行するように構成され、
ビットストリームは、シングルツリースライスの一部であり別々のルマ及びクロマツリーによって符号化される標的ＣＵをパレット符号化するためのパレットエントリを含まない、映像処理機器。
５４．少なくとも１つのプロセッサが、
受け取った再利用フラグに基づいて標的ＣＵのパレット予測子を更新すること
を機器に行わせるために命令を実行するように構成される、条項５３に記載の機器。
５５．少なくとも１つのプロセッサが、
標的ＣＵがＰスライス又はＢスライスの一部かどうかを判定すること、又は
標的ＣＵがシングルツリーＩスライスの一部かどうかを判定すること
を機器に行わせるために命令を実行するように構成される、条項５３又は５４に記載の機器。
５６．少なくとも１つのプロセッサが、
標的ＣＵがＰスライス又はＢスライスの一部である、又はシングルツリーＩスライスの一部であると判定されることに応答し、ビットストリーム内の、受け取った再利用フラグと、標的ＣＵをパレット符号化するためのパレットエントリとに基づいて、標的ＣＵのルマ成分及びクロマ成分をデコードすること
を機器に行わせるために命令を実行するように構成される、条項５５に記載の機器。
５７．少なくとも１つのプロセッサが、
標的ＣＵがＰスライス又はＢスライスの一部である、又はシングルツリーＩスライスの一部であると判定されることに応答し、ビットストリーム内の、受け取った再利用フラグと、標的ＣＵをパレット符号化するためのパレットエントリとに基づいて、標的ＣＵのパレット予測子を更新すること
を機器に行わせるために命令を実行するように構成される、条項５５又は５６に記載の機器。
５８．標的ＣＵのパレット予測子のサイズが０から６３までの範囲内にある、条項５４又は５７に記載の機器。
５９．命令セットを記憶する非一時的コンピュータ可読記憶媒体であって、前記命令セットは、
標的符号化ユニット（ＣＵ）に関してパレットモードが有効にされていることを示すフラグをシグナリングすること
を映像処理機器に行わせるために１つ又は複数の処理装置によって実行可能あり、
フラグは、標的ＣＵにクロマサンプリングフォーマットが使用されるかどうかに関係なくシグナリングされる、非一時的コンピュータ可読記憶媒体。
６０．フラグがシーケンスパラメータセット（ＳＰＳ）内でシグナリングされる、条項５９に記載の非一時的コンピュータ可読記憶媒体。
６１．クロマサンプリングフォーマットが、
４：４：４フォーマット、
４：２：２フォーマット、又は
４：２：０フォーマット
の１つ又は複数を含む、条項５９又は６０に記載の非一時的コンピュータ可読記憶媒体。
６２．前記命令セットが、
標的ＣＵがシングルツリースライスの一部かどうかを判定すること、
標的符号化ユニット（ＣＵ）が別々のルマ及びクロマツリーによって符号化されているかどうかを判定すること、及び
標的ＣＵがシングルツリースライスの一部であり別々のルマ及びクロマツリーによって符号化されていると判定されることに応答し、標的ＣＵに関してパレットモードが許可されないと判定すること
を映像処理機器に行わせるために１つ又は複数の処理装置によって実行可能である、非一時的コンピュータ可読記憶媒体。
６３．前記命令セットが、
標的ＣＵがＰスライス又はＢスライスの一部かどうかを判定すること、又は
標的ＣＵがシングルツリーＩスライスの一部かどうかを判定すること
を映像処理機器に行わせるために１つ又は複数の処理装置によって実行可能である、条項６２に記載の非一時的コンピュータ可読記憶媒体。
６４．前記命令セットが、
標的ＣＵがＰスライス又はＢスライスの一部である、又はシングルツリーＩスライスの一部であると判定されることに応答し、標的ＣＵに関してパレットモードが許可されると判定すること
を映像処理機器に行わせるために１つ又は複数の処理装置によって実行可能である、条項６３に記載の非一時的コンピュータ可読記憶媒体。
６５．命令セットを記憶する非一時的コンピュータ可読記憶媒体であって、前記命令セットは、
標的ＣＵがシングルツリースライスの一部かどうかを判定すること、
標的符号化ユニット（ＣＵ）が別々のルマ及びクロマツリーによって符号化されているかどうかを判定すること、及び
標的ＣＵがシングルツリースライスの一部であり別々のルマ及びクロマツリーによって符号化されていると判定されることに応答し、標的ＣＵをパレット符号化するためにパレットエントリを再利用するための再利用フラグをシグナリングすること
を映像処理機器に行わせるために１つ又は複数の処理装置によって実行可能であり、
標的ＣＵをパレット符号化するために新たなパレットエントリはシグナリングされない、非一時的コンピュータ可読記憶媒体。
６６．前記命令セットが、
標的ＣＵがＰスライス又はＢスライスの一部かどうかを判定すること、又は
標的ＣＵがシングルツリーＩスライスの一部かどうかを判定すること
を映像処理機器に行わせるために１つ又は複数の処理装置によって実行可能である、条項６５に記載の非一時的コンピュータ可読記憶媒体。
６７．前記命令セットが、
標的ＣＵがシングルツリースライスの一部ではない又は別々のルマ及びクロマツリーによって符号化されていないことに応答し、標的ＣＵをパレット符号化するためのパレットエントリをシグナリングすること
を映像処理機器に行わせるために１つ又は複数の処理装置によって実行可能である、条項６５又は６６に記載の非一時的コンピュータ可読記憶媒体。
６８．前記命令セットが、
標的ＣＵ内のピクセルがクロマ成分を含むかどうか判定することであって、ピクセルはエスケープモードを使用して符号化されていること、及び
ピクセルがクロマ成分を含まないことに応答し、ピクセルに関するルマパレットエスケープ値をシグナリングすることであって、ピクセルに関するクロマパレットエスケープ値はシグナリングされないこと
を映像処理機器に行わせるために１つ又は複数の処理装置によって実行可能である、条項６５乃至６７の何れか一項に記載の非一時的コンピュータ可読記憶媒体。
６９．命令セットを記憶する非一時的コンピュータ可読記憶媒体であって、前記命令セットは、
標的符号化ユニット（ＣＵ）内のピクセルがクロマ成分を含むかどうか判定することであって、ピクセルはエスケープモードを使用して符号化されること、及び
ピクセルがクロマ成分を含まないことに応答し、ルマパレットエスケープ値をシグナリングすること
を映像処理機器に行わせるために１つ又は複数の処理装置によって実行可能であり、
ピクセルに関するクロマパレットエスケープ値はシグナリングされない、非一時的コンピュータ可読記憶媒体。
７０．命令セットを記憶する非一時的コンピュータ可読記憶媒体であって、前記命令セットは、
標的符号化ユニット（ＣＵ）をパレット符号化するためにパレットエントリを再利用するための再利用フラグを含むビットストリームを受け取ること、
標的ＣＵがシングルツリースライスの一部かどうかを判定すること、
標的ＣＵが別々のルマ及びクロマツリーによって符号化されているかどうかを判定すること、及び
標的ＣＵがシングルツリースライスの一部であり別々のルマ及びクロマツリーによって符号化されていると判定することに応答し、受け取った再利用フラグに基づいて標的ＣＵのルマ成分及びクロマ成分をデコードすること
を映像処理機器に行わせるために１つ又は複数の処理装置によって実行可能であり、
ビットストリームは、シングルツリースライスの一部であり別々のルマ及びクロマツリーによって符号化される標的ＣＵをパレット符号化するためのパレットエントリを含まない、非一時的コンピュータ可読記憶媒体。
７１．前記命令セットが、
受け取った再利用フラグに基づいて標的ＣＵのパレット予測子を更新すること
を映像処理機器に行わせるために１つ又は複数の処理装置によって実行可能である、条項７０に記載の非一時的コンピュータ可読記憶媒体。
７２．前記命令セットが、
標的ＣＵがＰスライス又はＢスライスの一部かどうかを判定すること、又は
標的ＣＵがシングルツリーＩスライスの一部かどうかを判定すること
を映像処理機器に行わせるために１つ又は複数の処理装置によって実行可能である、条項７０又は７１に記載の非一時的コンピュータ可読記憶媒体。
７３．前記命令セットが、
標的ＣＵがＰスライス又はＢスライスの一部である、又はシングルツリーＩスライスの一部であると判定されることに応答し、ビットストリーム内の、受け取った再利用フラグと、標的ＣＵをパレット符号化するためのパレットエントリとに基づいて、標的ＣＵのルマ成分及びクロマ成分をデコードすること
を映像処理機器に行わせるために１つ又は複数の処理装置によって実行可能である、条項７２に記載の非一時的コンピュータ可読記憶媒体。
７４．前記命令セットが、
標的ＣＵがＰスライス又はＢスライスの一部である、又はシングルツリーＩスライスの一部であると判定されることに応答し、ビットストリーム内、受け取った再利用フラグと、標的ＣＵをパレット符号化するためのパレットエントリとに基づいて、標的ＣＵのパレット予測子を更新すること
を映像処理機器に行わせるために１つ又は複数の処理装置によって実行可能である、条項７２又は７３に記載の非一時的コンピュータ可読記憶媒体。
７５．標的ＣＵのパレット予測子のサイズが０から６３までの範囲内にある、条項７２又は７４に記載の非一時的コンピュータ可読記憶媒体。
[0123] 「第１の」及び「第２の」などの本明細書の関係語は、あるエンティティ又は動作を別のエンティティ又は動作と区別するためだけに使用されるものであり、これらのエンティティ又は動作間の実際の関係又は順序を必要とするもの、又は暗示するものではないことに留意されたい。また、「含む（comprising）」、「有する（having）」、「包含する（containing）」、及び「含む（including）」という語、並びに他の類似の形態は、意味が同等であること、及びこれらの語の何れか１つに続く１つ又は複数の項が、そのような１つ若しくは複数の項の網羅的列挙ではない点で、又は列挙された１つ若しくは複数の項のみに限定されない点で、オープンエンド形式であることが意図される。
[0124] 本明細書では、特に別段の記載のない限り、「又は」という用語は、実行不可能でない限り、全ての可能な組み合わせを網羅する。例えば、データベースがＡ又はＢを含み得ると記述される場合、別段の具体的な記述のない限り、又は実行不可能でない限り、データベースは、Ａ、又はＢ、又はＡ及びＢを含み得る。第２の例として、データベースがＡ、Ｂ、又はＣを含み得ると記載される場合、特に別段の記載のない限り、又は実行不可能でない限り、データベースは、Ａ、又はＢ、又はＣ、又はＡ及びＢ、又はＡ及びＣ、又はＢ及びＣ、又はＡ及びＢ及びＣを含み得る。
[0125] 上記の実施形態は、ハードウェア、又はソフトウェア（プログラムコード）、又はハードウェア及びソフトウェアの組み合わせによって実施され得ることが理解される。ソフトウェアによって実施される場合、それは、上記のコンピュータ可読媒体に保存され得る。ソフトウェアは、プロセッサによる実行時に、開示の方法を行うことができる。本開示に記載したコンピューティングユニット及び他の機能ユニットは、ハードウェア、又はソフトウェア、又はハードウェア及びソフトウェアの組み合わせによって実装され得る。当業者は、上記のモジュール／ユニットの内の複数が、１つのモジュール／ユニットとして統合され得ること、及び上記のモジュール／ユニットのそれぞれが、複数のサブモジュール／サブユニットにさらに分割され得ることも理解するだろう。
[0126] 上述の明細書では、実施態様によって異なり得る多数の具体的詳細に関して、実施形態を説明した。記載した実施形態の特定の適応及び変更が行われ得る。ここに開示した発明の明細書及び実施を考慮して、他の実施形態が当業者には明らかとなり得る。上記明細書及び例は、単なる例示と見なされることが意図され、本発明の真の範囲及び精神は、以下の特許請求の範囲によって示される。また、図面に示されるステップの順序は、単に、説明のためのものであることが意図され、ステップの何れの特定の順序にも限定されることは意図されない。そのため、同じ方法を実施しながら、これらのステップが異なる順序で行われ得ることを当業者は理解できる。
[0127] 図面及び明細書では、例示的な実施形態を開示した。しかしながら、これらの実施形態に対して多くの変形形態及び変更形態を作ることができる。したがって、特定の用語が使用されるが、それらは、単に一般的及び説明的な意味で使用されるものであり、限定を意図したものではない。

Claims (20)

  1. 標的符号化ユニット（ＣＵ）をパレット符号化するための第１のパレットエントリを受け取ること、
    前記標的ＣＵがシングルツリースライスの一部かどうかを判定すること、
    前記標的ＣＵが別々のルマ及びクロマツリーによって符号化されているかどうかを判定すること、及び
    前記標的ＣＵがシングルツリースライスの一部であり別々のルマ及びクロマツリーによって符号化されていると判定されることに応答し、
    前記第１のパレットエントリに基づいて前記標的ＣＵの第１の成分をデコードし、
    デフォルトのパレットエントリに基づいて前記標的ＣＵの第２の成分をデコードすること
    を含む、映像処理方法。
  2. 第２のパレットエントリに関連するフラグを受け取ること、及び
    前記受け取ったフラグに基づき、前記第２のパレットエントリを前記標的ＣＵのパレット予測子に含めること
    をさらに含む、請求項１に記載の方法。
  3. 前記標的ＣＵの前記パレット予測子のサイズが０から６３までの範囲内（両端を含む）にある、請求項２に記載の方法。
  4. 前記標的ＣＵをパレット符号化するための前記第１のパレットエントリを受け取ることが、
    前記第１のパレットエントリに基づいて前記標的ＣＵのパレット予測子を更新すること
    を含む、請求項１に記載の方法。
  5. 前記標的ＣＵがシングルツリースライスの一部かどうかを判定することが、
    前記標的ＣＵがＰスライス又はＢスライスの一部かどうかを判定すること、又は
    前記標的ＣＵがシングルツリーＩスライスの一部かどうかを判定すること
    を含む、請求項１に記載の方法。
  6. 前記デフォルトのパレットエントリは第１のパレットエントリであり、
    前記標的ＣＵがＰスライス又はＢスライスの一部である、又はシングルツリーＩスライスの一部であると判定されることに応答し、前記第１のパレットエントリに基づいて前記標的ＣＵの前記第１の成分及び前記第２の成分をデコードすること
    をさらに含む、請求項５に記載の方法。
  7. 前記第１の成分がルマ成分であり、前記第２の成分がクロマ成分である、又は
    前記第１の成分がクロマ成分であり、前記第２の成分がルマ成分である、
    請求項１に記載の方法。
  8. 前記第１の成分及び前記第２の成分のデコード後に前記標的ＣＵのパレット予測子が更新されない、請求項１に記載の方法。
  9. 命令を記憶するための少なくとも１つのメモリと、
    少なくとも１つのプロセッサとを含み、前記少なくとも１つのプロセッサは、
    標的符号化ユニット（ＣＵ）をパレット符号化するための第１のパレットエントリを受け取ること、
    前記標的ＣＵがシングルツリースライスの一部かどうかを判定すること、
    前記標的ＣＵが別々のルマ及びクロマツリーによって符号化されているかどうかを判定すること、及び
    前記標的ＣＵがシングルツリースライスの一部であり別々のルマ及びクロマツリーによって符号化されていると判定されることに応答し、
    前記第１のパレットエントリに基づいて前記標的ＣＵの第１の成分をデコードし、
    デフォルトのパレットエントリに基づいて前記標的ＣＵの第２の成分をデコードすること
    を機器に行わせるために前記命令を実行するように構成される、映像処理機器。
  10. 前記少なくとも１つのプロセッサが、
    第２のパレットエントリに関連するフラグを受け取ること、及び
    前記受け取ったフラグに基づき、前記第２のパレットエントリを前記標的ＣＵのパレット予測子に含めること
    を前記機器に行わせるために前記命令を実行するように構成される、請求項９に記載の機器。
  11. 前記少なくとも１つのプロセッサが、
    前記標的ＣＵがＰスライス又はＢスライスの一部かどうかを判定すること、又は
    前記標的ＣＵがシングルツリーＩスライスの一部かどうかを判定すること
    を前記機器に行わせるために前記命令を実行するように構成される、請求項９に記載の機器。
  12. 前記デフォルトのパレットエントリは第１のパレットエントリであり、
    前記少なくとも１つのプロセッサが、
    前記標的ＣＵがＰスライス又はＢスライスの一部である、又はシングルツリーＩスライスの一部であると判定されることに応答し、前記第１のパレットエントリに基づいて前記標的ＣＵの前記第１の成分及び前記第２の成分をデコードすること
    を前記機器に行わせるために前記命令を実行するように構成される、請求項１１に記載の機器。
  13. 前記第１の成分及び前記第２の成分のデコード後に前記標的ＣＵのパレット予測子が更新されない、請求項９に記載の機器。
  14. 命令セットを記憶する非一時的コンピュータ可読記憶媒体であって、前記命令セットは、
    標的符号化ユニット（ＣＵ）をパレット符号化するための第１のパレットエントリを受け取ること、
    前記標的ＣＵがシングルツリースライスの一部かどうかを判定すること、
    前記標的ＣＵが別々のルマ及びクロマツリーによって符号化されているかどうかを判定すること、及び
    前記標的ＣＵがシングルツリースライスの一部であり別々のルマ及びクロマツリーによって符号化されていると判定されることに応答し、
    前記第１のパレットエントリに基づいて前記標的ＣＵの第１の成分をデコードし、
    デフォルトのパレットエントリに基づいて前記標的ＣＵの第２の成分をデコードすること
    を映像処理機器に行わせるために１つ又は複数の処理装置によって実行可能である、非一時的コンピュータ可読記憶媒体。
  15. 前記命令セットが、
    第２のパレットエントリに関連するフラグを受け取ること、及び
    前記受け取ったフラグに基づき、前記第２のパレットエントリを前記標的ＣＵのパレット予測子に含めること
    を前記映像処理機器に行わせるために前記１つ又は複数の処理装置によって実行可能である、請求項１４に記載の非一時的コンピュータ可読記憶媒体。
  16. 前記命令セットが、
    前記第１のパレットエントリに基づいて前記標的ＣＵのパレット予測子を更新すること
    を前記映像処理機器に行わせるために前記１つ又は複数の処理装置によって実行可能である、請求項１４に記載の非一時的コンピュータ可読記憶媒体。
  17. 前記命令セットが、
    前記標的ＣＵがＰスライス又はＢスライスの一部かどうかを判定すること、又は
    前記標的ＣＵがシングルツリーＩスライスの一部かどうかを判定すること
    を前記映像処理機器に行わせるために前記１つ又は複数の処理装置によって実行可能である、請求項１４に記載の非一時的コンピュータ可読記憶媒体。
  18. 前記デフォルトのパレットエントリは第１のパレットエントリであり、
    前記命令セットが、
    前記標的ＣＵがＰスライス又はＢスライスの一部である、又はシングルツリーＩスライスの一部であると判定されることに応答し、前記第１のパレットエントリに基づいて前記標的ＣＵの前記第１の成分及び前記第２の成分をデコードすること
    を前記映像処理機器に行わせるために前記１つ又は複数の処理装置によって実行可能である、請求項１７に記載の非一時的コンピュータ可読記憶媒体。
  19. 前記第１の成分がルマ成分であり、前記第２の成分がクロマ成分である、又は
    前記第１の成分がクロマ成分であり、前記第２の成分がルマ成分である、
    請求項１４に記載の非一時的コンピュータ可読記憶媒体。
  20. 前記第１の成分及び前記第２の成分のデコード後に前記標的ＣＵのパレット予測子が更新されない、請求項１４に記載の非一時的コンピュータ可読記憶媒体。
JP2022531026A 2019-12-03 2020-10-02 パレットモードを使用するための映像処理方法及び機器 Active JP7590433B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2024199299A JP7808169B2 (ja) 2019-12-03 2024-11-14 パレットモードを使用するための映像処理方法及び機器

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201962943083P 2019-12-03 2019-12-03
US62/943,083 2019-12-03
US201962952426P 2019-12-22 2019-12-22
US62/952,426 2019-12-22
PCT/US2020/054023 WO2021112949A1 (en) 2019-12-03 2020-10-02 Video processing method and apparatus for using palette mode

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2024199299A Division JP7808169B2 (ja) 2019-12-03 2024-11-14 パレットモードを使用するための映像処理方法及び機器

Publications (2)

Publication Number Publication Date
JP2023504407A JP2023504407A (ja) 2023-02-03
JP7590433B2 true JP7590433B2 (ja) 2024-11-26

Family

ID=76091399

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2022531026A Active JP7590433B2 (ja) 2019-12-03 2020-10-02 パレットモードを使用するための映像処理方法及び機器
JP2024199299A Active JP7808169B2 (ja) 2019-12-03 2024-11-14 パレットモードを使用するための映像処理方法及び機器

Family Applications After (1)

Application Number Title Priority Date Filing Date
JP2024199299A Active JP7808169B2 (ja) 2019-12-03 2024-11-14 パレットモードを使用するための映像処理方法及び機器

Country Status (6)

Country Link
US (3) US11451796B2 (ja)
EP (1) EP4070557A4 (ja)
JP (2) JP7590433B2 (ja)
KR (1) KR20220101729A (ja)
CN (5) CN118984379A (ja)
WO (1) WO2021112949A1 (ja)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2578769B (en) 2018-11-07 2022-07-20 Advanced Risc Mach Ltd Data processing systems
GB2583061B (en) * 2019-02-12 2023-03-15 Advanced Risc Mach Ltd Data processing systems
US11683489B2 (en) * 2019-12-26 2023-06-20 Qualcomm Incorporated Monochrome palette mode for video coding

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20170078683A1 (en) 2015-09-14 2017-03-16 Qualcomm Incorporated Palette predictor initialization and merge for video coding

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9558567B2 (en) * 2013-07-12 2017-01-31 Qualcomm Incorporated Palette prediction in palette-based video coding
US9872040B2 (en) * 2014-01-02 2018-01-16 Qualcomm Incorporated Color index coding for palette-based video coding
US9860560B2 (en) * 2014-07-02 2018-01-02 Qualcomm Incorporated Method for palette mode coding
US11330297B2 (en) * 2014-08-19 2022-05-10 Qualcomm Incorporated Methods incorporating extensions to copy-above mode for palette mode coding
KR20160037111A (ko) * 2014-09-26 2016-04-05 주식회사 케이티 비디오 신호 처리 방법 및 장치
CN110460845B (zh) * 2014-11-06 2021-08-27 联发科技股份有限公司 调色板编码的方法
WO2016074147A1 (en) * 2014-11-11 2016-05-19 Mediatek Singapore Pte. Ltd. Separated coding tree for luma and chroma
CN107211147A (zh) 2015-01-14 2017-09-26 Vid拓展公司 用于非4：4：4屏幕内容视频的调色板编码
US10212434B2 (en) * 2015-01-30 2019-02-19 Qualcomm Incorporated Palette entries coding in video coding
US10448058B2 (en) * 2015-05-21 2019-10-15 Qualcomm Incorporated Grouping palette index at the end and index coding using palette size and run value
PL3731527T3 (pl) 2016-05-28 2023-01-09 Hfi Innovation Inc. Sposób i urządzenie do kodowania w trybie palety dla danych kolorowego wideo
US20190246122A1 (en) * 2018-02-08 2019-08-08 Qualcomm Incorporated Palette coding for video coding
US10694195B2 (en) * 2018-03-07 2020-06-23 Tencent America LLC Methods and apparatus for palette coding
PL3797517T3 (pl) 2018-08-30 2024-03-18 Huawei Technologies Co., Ltd. Koder, dekoder oraz odpowiednie sposoby wykorzystujące kodowanie palety
US11025905B2 (en) 2018-09-14 2021-06-01 Tencent America LLC Method and device for decoding with palette mode
US11206413B2 (en) 2019-08-13 2021-12-21 Qualcomm Incorporated Palette predictor updates for local dual trees

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20170078683A1 (en) 2015-09-14 2017-03-16 Qualcomm Incorporated Palette predictor initialization and merge for video coding

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
Benjamin Bross, et al.，"Versatile Video Coding (Draft 7) "，Joint Video Experts Team (JVET) of ITU-T SG 16 WP 3 and ISO/IEC JTC 1/SC 29/WG 11，JVET-P2001-vE，2020年01月12日，pp.207-209
Jianle Chen,et al.，"Algorithm description for Versatile Video Coding and Test Model 9 (VTM 9)"，Joint Video Experts Team (JVET) of ITU-T SG 16 WP 3 and ISO/IEC JTC 1/SC 29/WG 11，JVET-R2002-v2，2020年06月15日，pp.90-92
Ru-Ling Liao, et al.，"CE2-related: Palette mode for non 4:4:4 color format"，Joint Video Experts Team (JVET) of ITU-T SG 16 WP 3 and ISO/IEC JTC 1/SC 29/WG 11，JVET-Q0504-v1，2020年01月01日，pp.1,2,4

Also Published As

Publication number Publication date
US11451796B2 (en) 2022-09-20
CN119172531A (zh) 2024-12-20
JP7808169B2 (ja) 2026-01-28
US12015788B2 (en) 2024-06-18
CN118972555A (zh) 2024-11-15
CN114788289B (zh) 2024-07-30
US20230011928A1 (en) 2023-01-12
CN118984379A (zh) 2024-11-19
US12063372B2 (en) 2024-08-13
JP2023504407A (ja) 2023-02-03
US20210168377A1 (en) 2021-06-03
CN119155443A (zh) 2024-12-17
JP2025026466A (ja) 2025-02-21
EP4070557A1 (en) 2022-10-12
US20230023977A1 (en) 2023-01-26
KR20220101729A (ko) 2022-07-19
CN114788289A (zh) 2022-07-22
WO2021112949A1 (en) 2021-06-10
EP4070557A4 (en) 2023-01-18

Similar Documents

Publication Publication Date Title
CN116260982B (zh) 用于色度采样的方法和装置
JP7808169B2 (ja) パレットモードを使用するための映像処理方法及び機器
JP7853533B2 (ja) サブブロック変換情報を信号化するための方法及び装置
JP2025169949A (ja) パレットモードで映像データを符号化するための方法及び装置
JP2025184883A (ja) 最大変換サイズ及び残差符号化方法のシグナリング
JP2026074009A (ja) パレットモードを使用するための映像処理方法及び機器

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20230724

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20240719

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20240726

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20240927

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20241016

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20241114

R150 Certificate of patent or registration of utility model

Ref document number: 7590433

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350