(19)【発行国】日本国特許庁(JP)
(12)【公報種別】公開特許公報(A)
(11)【公開番号】P2024069597
(43)【公開日】2024-05-21
(54)【発明の名称】統合変換タイプ通知および変換タイプ依存変換係数レベルコーディング
(51)【国際特許分類】
H04N 19/12 20140101AFI20240514BHJP
H04N 19/13 20140101ALI20240514BHJP
H04N 19/176 20140101ALI20240514BHJP
H04N 19/70 20140101ALI20240514BHJP
【FI】
H04N19/12
H04N19/13
H04N19/176
H04N19/70
【審査請求】有
【請求項の数】1
【出願形態】OL
(21)【出願番号】P 2024043735
(22)【出願日】2024-03-19
(62)【分割の表示】P 2023002370の分割
【原出願日】2019-12-30
(31)【優先権主張番号】19150112.1
(32)【優先日】2019-01-02
(33)【優先権主張国・地域又は機関】EP
(31)【優先権主張番号】19162406.3
(32)【優先日】2019-03-12
(33)【優先権主張国・地域又は機関】EP
(71)【出願人】
【識別番号】500341779
【氏名又は名称】フラウンホーファー-ゲゼルシャフト・ツール・フェルデルング・デル・アンゲヴァンテン・フォルシュング・アインゲトラーゲネル・フェライン
(74)【代理人】
【識別番号】110002952
【氏名又は名称】弁理士法人鷲田国際特許事務所
(72)【発明者】
【氏名】ブロス・ベンジャミン
(72)【発明者】
【氏名】グエン・ファンホアントン
(72)【発明者】
【氏名】カイデル・パウル
(72)【発明者】
【氏名】シュヴァルツ・ハイコー
(72)【発明者】
【氏名】マルペ・デトレフ
(72)【発明者】
【氏名】ヴィーガンド・トーマス
(72)【発明者】
【氏名】ヘルムリッヒ・クリスチャン
(57)【要約】 (修正有)
【課題】選択された変換タイプの通知を統合することにより圧縮効率を高める復号装置を提供する。
【解決手段】ピクチャ12aを復号する装置100は、所定の変換ブロック84cについて所定の変換ブロックのサイズが所定の閾値サイズを超えるかどうかをチェックすることによって選択された変換112を選択する手段と、所定の変換ブロックのサイズが所定の閾値サイズを超える場合、選択された変換を選択するためのデフォルトの方法114を使用する手段と、所定の変換ブロックのサイズが所定の閾値サイズを超えない場合、所定の変換ブロックについてデータストリーム14内で送信されたインデックスによって変換の所定のリスト116から指される変換を、選択された変換として使用する手段と、を含み、変換の所定のリストは、恒等変換117及び非恒等変換118を備える。
【選択図】
図4
【特許請求の範囲】
【請求項1】
予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する装置(100)であって、
プロセッサと、
命令を有するメモリと、
を有し、
前記命令は、前記プロセッサによって実行されると、
所定の変換ブロックについて、変換の所定のリストから変換(112)を選択し(110)、前記選択された変換が、恒等変換および少なくとも1つの非恒等変換を備え、
前記所定の変換ブロックについて、現在の係数に対して前記現在の係数がゼロであるか、又はコンテキスト(300)を使用していないかを示す重要度フラグを復号することによって、データストリームから係数のブロックを復号し(120)、前記選択された変換が前記恒等変換であるとき、前記コンテキストは、前記現在の係数に直接隣接する係数の第1のセットのうちの非ゼロである係数(310)の数に依存し、前記選択された変換が前記少なくとも1つの非恒等変換のうちの1つであるとき、前記コンテキストは、係数の第2のセットの値と前記現在の係数の位置とに依存し、前記係数の第2のセットは、前記現在の係数に直接隣接する少なくとも1つの係数と、前記現在の係数に直接隣接する前記係数の何れよりも前記現在の係数から遠くに離れて位置する少なくとも1つの係数とを含み、
前記係数のブロックが前記選択された変換にしたがって残差サンプル配列に関連付けられるように、前記係数のブロックから前記所定の変換ブロックの残差サンプル配列を導出し(130)、
前記残差サンプル配列を使用して前記所定の変換ブロックの予測を修正し(140)、前記所定の変換ブロックを再構成する、
よう前記装置に実行させる、装置(100)。
【発明の詳細な説明】
【技術分野】
【0001】
本発明にかかる実施形態は、統合変換タイプ通知および変換タイプ依存変換係数レベルコーディングに関する。
【0002】
序論
AVCおよびHEVCなどのハイブリッドビデオ圧縮方式は、ブロックベースの予測、それに続く予測残差の変換、変換係数の量子化、および量子化インデックスのエントロピー符号化に依存する。後者はまた、変換係数レベルコーディング、またはこの文書の残りの部分では略してレベルコーディングとも呼ばれる。以下の説明では、実際のハイブリッドビデオ圧縮方式で実施される変換の整数近似に対しても変換という用語を使用する。
【0003】
従来、ビデオコーディング規格では、潜在的なブロックサイズN×Nごとに固定変換が規定されている。例えば、HEVC規格は、DST-VIが使用されるピクチャ内予測4×4ブロックを除いて、DCT-IIの使用を規定する。複数の定義ごとの変換タイプの間の選択を可能にすることによって、より高い圧縮効率が達成されることができる。多用途ビデオコーディング(VVC)の現在のドラフトは、5つの異なる変換タイプ(DCT-IIを含む)のセットを規定している。変換が恒等変換に等しい変換スキップモード(TSM)と共に、合計6つの変換タイプがサポートされる。ビットストリーム構文は、符号化器によって選択された変換タイプが復号器に通知される構文を含む。コーディングは、選択された変換タイプに依存しない変換係数レベルである。
【0004】
本発明は、a)選択された変換タイプの通知を統合し、b)選択された変換タイプに応じて専用のレベルコーディング技術を提供することによって圧縮効率を高めるための方法を記載する。
【背景技術】
【0005】
VVC開発を含む現在の最先端のビデオコーディング技術は、TSMによる(すなわち、恒等変換を使用する)変換をスキップする可能性を含む、複数の予め定義された変換タイプのうちの1つを通知する手段を指定する。変換係数レベル(すなわち、変換係数の量子化インデックス)のエントロピー符号化は、選択された変換とは無関係である。
変換タイプ通知
【0006】
現在のVVC開発は、N≦64およびM≦64を有するN×M個の変換ブロックを指定し、NおよびMは、双方とも2の整数乗である。HEVCとは対照的に、矩形(非正方形)変換ブロックが可能であることに留意されたい。N≦32およびM≦32の場合、DCT-II以外の追加の変換タイプが利用可能であり、この技術は、複数変換選択(MTS)と呼ばれる。HEVCと同様に、4×4変換ブロックの場合、変換スキップモード(TSM)は、恒等変換を使用するものとして解釈されることができる追加のコーディングオプションである。変換スキップモード(TSM)では、予測残差は、変換段階をスキップして量子化段階によって直接処理される。HEVCの範囲拡張プロファイルは、全ての変換ブロックサイズ(すなわち、4×4ブロックだけでなく)のためのTSMの使用を可能にする、TSMのための拡張を指定する。
【0007】
(シーケンスパラメータセットで符号化された)高レベル構文要素は、ピクチャ内予測ブロックおよび/またはピクチャ間予測ブロックに対してMTSが有効にされるかどうかを示す。MTSが使用可能である場合、コーディングユニット(CU)レベルフラグは、MTSがCUについて有効であるかどうかを通知するが、選択された変換タイプは、変換ユニット(TU)レベルのインデックスによって指定される。VVCの現在の設計では、MTSの使用は、輝度変換ブロックのみに制限されている。CU MTSフラグの場合、使用されるコンテキストモデルは、コーディング四分木深さに依存する。固定二値化は、TU MTSインデックス、すなわち、選択された変換タイプのために使用される。各ビンインデックスを有する2ビン固定長コードをもたらす4つの可能な変換タイプは、2つの専用コンテキストモデルを採用し、1つはピクチャ内予測CU用であり、1つはピクチャ間予測CU用である。TU MTSインデックスと、その二値化と、水平および垂直変換方向の異なる変換タイプとの間のマッピングが、以下の表(表1)に示される。
【0008】
【0009】
TSMの場合、(ピクチャパラメータセットに符号化された)高レベルフラグは、TSMが有効にされるか否かを示す。TSMが有効とされ、MSTが無効にされると、変換ブロックごとに1つのフラグが、対応する色成分(Y、CbまたはCr)のブロックについて変換段がスキップされることを通知する。
レベルコーディング
【0010】
HEVCおよび現在のVVC開発におけるレベルコーディングは、選択された変換タイプから独立している。VVC(ドラフト3)では、レベルコーディングは、HEVCのレベルコーディングと同様である。第1に、ビットストリームは、変換ブロック(符号化ブロックフラグ、CBF)の重要度、すなわち、0に等しくない量子化インデックス(レベル)の存在を通知するフラグを含む。第2に、ブロックが重要である(すなわち、それは0に等しくない任意の量子化インデックスを含む)場合、最後の重要走査位置は、x座標およびy座標におけるルートからのオフセットとして指定され、ルートは、変換ブロックの左上隅に位置する。
図25に示すように、4×4よりも大きい変換ブロック84は、不連続の4×4サブブロック84’に分割される。現在のVVC設計では、サブブロック84’およびサブブロック84’内のレベルを走査するために対角走査パターン85が使用される。
【0011】
図25は、16個の4×4サブブロック84’に分割された変換ブロック84と、サブブロック84’内のレベルおよび変換ブロック84内のサブブロック84’を走査するために使用される逆対角走査パターン85との例を示している。
【0012】
変換ブロックの走査は、最初にサブブロック方式で行われる。特に、最後の重要走査位置を含むサブブロックが最初に処理され、各サブブロックは、通常の4×4ブロックと同様に扱われる。最後の重要走査位置のサブブロックに続くサブブロックごとにCBFが送信される(coded_sub_block_flag)。このサブブロックCBFは、DC周波数位置(変換ブロック内の左上)を含むサブブロックを除いて、対応するサブブロックの重要度を通知する。したがって、左上サブブロックによってカバーされる周波数位置におけるレベルは、常に符号化される。
【0013】
各サブブロック内のレベルのコーディングは、以下のとおりである。第1の走査パスでは、現在の絶対レベルが0よりも大きいかどうかを示す重要度フラグ(sig_coeff_flag)が符号化され、その後に1よりも大きい情報(abs_level_gt1_flag)およびパリティ情報(par_level_flag)が続く。3つの構文要素は、第1の走査パスを形成する現在のサブブロックによってカバーされる走査位置ごとに符号化される。絶対レベルが0に等しい場合、sig_coeff_flagは、0に等しく符号化され、後続の構文は符号化されず、代わりに0に等しいと推測される。同様に、絶対レベルが1に等しいとき、sig_coeff_flagは1に等しく、abs_level_gt1_flagは0に等しく符号化され、後続の構文は符号化されず、代わりに0に等しいと推測される。第1のパスの後の走査位置nにおける絶対レベルは、以下のように計算される:
【0014】
AbsLevelPass1(n)=sig_coeff_flag(n)+par_level_flag(n)+abs_level_gt1_flag(n)
【0015】
次の走査パスでは、3よりも大きいフラグ(abs_level_gt3_flag)が送信され、続いて余りの情報(abs_remainder)を有する第3の走査パスが送信される。走査位置nにおける絶対レベルは、以下のように計算される:
AbsLevel(n)=AbsLevelPass1(n)+2*(abs_level_gt3_flag(n)+abs_remainder(n))
最後の走査パスは、重要走査位置に対する符号(coeff_sign_flag)を送信し、走査位置nにおけるレベルは、以下のように計算される:
レベル(n)=(2*AbsLevel(n)+(QState>1 ?1:0))*(1-2 * coeff_sign_flag(n))
【0016】
ここで、QStateは、以下のように以前の状態および以前に符号化されたレベルのパリティに依存する、依存量子化のための現在の量子化状態QStateである:
QState=QStateTransTable(QState)(par_level_flag)
【0017】
依存量子化は、表2に示されているような状態遷移表QStateTransTable()()を用いてVVC開発中に追加され、QStateは、各変換ブロックの開始時に0にリセットされる。例えばスライスまたはタイルヘッダレベルにおいて、依存量子化が高レベルフラグによって無効化される場合、QStateは、常に0に等しい(全てのエントリが0に等しい状態遷移表を使用することによって達成されることができる)。
【0018】
【0019】
現在のVVC開発は、以下のテキストにおいてコンテキストコーディングされたビン(CCB)として示される、コンテキストモデルを使用して符号化されるビンの数に対する制限を含む。変換ブロック内の全てのサブブロックの全ての絶対レベルが≧4である場合、4つのフラグsig_coeff_flag、abs_level_gt1_flag、par_level_flag、およびabs_level_gt3_flagに関連する各ビンは、コンテキスト(すなわち、適応確率モデル)を使用しているため、レベルあたりのCCB数は、4に等しい。エントロピー復号の最悪の場合の複雑さ、例えば1レベルあたり4から2CCBを制限するために、CCBの数が第1の走査パス(sig_coeff_flag、abs_level_gt1_flag、par_level_flag)において追跡される。例えば、これは、abs_level_gt3_flagが解析されるときに、第1のパスの余りのビンを28(remBinsPass1)からカウントダウンし、第2のパス(remBinsPass2)について4つのビンを残すことによって行うことができる。特定の数のCCBに到達した場合、レベルコーディングプロセスは、以下のCCB情報(例えば、remBinsPass1が0に等しいときは、sig_coeff_flag、abs_level_gt1_flag、およびpar_level_flag、ならびにremBinsPass2が0に等しいときは、abs_level_gt 3_flagである)をスキップし、代わりに算術コーディングエンジンのバイパスモードで絶対レベルをコーディングし、適応型二値化方式をもたらす。CCBの最大数に到達し、まだ符号化すべきレベルが残っている走査位置がある場合、余りの絶対レベルは、全て、異なる残差二値化(dec_abs_level)を使用してバイパスモードで符号化される。
【0020】
表3は、remBinsPass1およびremBinsPass2を使用するCCBの制限を伴う前述の最先端レベルコーディングの構文テーブルを示している。
【0021】
【0022】
sig_coeff_flag、abs_level_gt1_flag、par_level_flag、およびabs_level_gt3_flag構文のコンテキストモデル選択では、ローカルテンプレートが現在の走査位置n周辺のアクティビティを評価する。5つの既に処理された近傍が以下のように考慮される:右(NB
0)、下(NB
1)、右プラス1(NB
2)、下プラス1(NB
3)、および右下(NB
4)。
【表6】
【0023】
xCおよびyCが現在の変換ブロックの左上隅に対する水平および垂直オフセットである(xC,yC)における現在の走査位置nの場合、以下の3つの値が使用される:変換ブロックd内の現在の対角、重要な近傍の数locNumSig、および第1のパスlocSumAbsPass1の後の絶対値の合計。後者は、全体の絶対レベル情報が余りの情報の走査パスの後にのみ知られるため、部分情報のみを含むことができることに留意されたい。値は、以下のように計算されることができる:
【表7】
【0024】
sig_coeff_flag、abs_level_gt1_flag、par_level_flag、およびabs_level_gt3_flag構文のコンテキストモデルは、対角dから導出され、sig_coeff_flagに加えて量子化状態QStateからも導出されるコンテキストセットへのインデックスまたはオフセットによって選択される。sig_coeff_flag構文の場合、コンテキストセット内のコンテキストオフセットは、絶対合計locSumAbsPass1によって導出される。abs_level_gt1_flag、par_level_flag、およびabs_level_gt3_flagのコンテキストオフセット導出は、以下のように同じである:絶対合計locSumAbsPass1から重要位置の数locNumSigが減算される。特別な特徴として、最後の重要走査位置の構文要素に専用のコンテキストモデルが使用される。
【0025】
余りは、ゴロム-ライス(Rm)符号および指数-ゴロム(EGk)符号の組み合わせを使用してエントロピーコーダのバイパスモードで符号化される。(HEVCと同様に)サブブロック内の既に符号化された余り値に基づいて、ライスの次数mおよびEGコードの次数kが導出される。
【0026】
CCBの数の制限により、2つの追加の余りの走査パスが存在する。通常の余りの走査パスの後の第1の追加走査パスでは、sig_coeff_flag、abs_level_gt1_flag、およびpar_level_flag構文要素のみを有する走査位置の余りが送信される、すなわち、abs_level_gt3_flag構文は、これらの位置についてはスキップされている。第2の追加走査パスでは、構文要素のない走査位置の余りが符号化される。なお、走査パスは、絶対レベルが完全にバイパスモードで符号化されることも意味することに留意されたい。この最後の余りのパスについて、二値化パラメータmおよびkは、sig_coeff_flag構文に使用されたものと同じ形状を有する別のローカルテンプレートを使用して導出される。テンプレート内の絶対和が取得され、関係k=m+1を有するEGコードの順序に直接つながるライスパラメータnにマッピングされる。
【発明の概要】
【0027】
本発明にかかる実施形態は、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する装置であって、ピクチャを異なるサイズの変換ブロックに分割するように構成されている、装置である。装置は、所定の変換ブロックについて、所定の変換ブロックのサイズが、所定の閾値サイズを超えるかどうかをチェックすることによって、選択された変換を選択するように構成されている。所定の変換ブロックのサイズが所定の閾値サイズを超える場合、装置は、選択された変換を選択するためのデフォルトの方法を使用するように構成されている。所定の変換ブロックのサイズが所定の閾値サイズを超えない場合、装置は、所定の変換ブロックについてデータストリーム内で送信されたインデックスによって変換の所定のリストから指される変換を選択された変換として使用するように構成され、変換の所定のリストは、恒等変換および非恒等変換を備える。さらにまた、装置は、所定の変換ブロックについて、データストリームから係数のブロックを復号し、選択された変換が恒等変換である場合、係数のブロックを所定の変換ブロックの残差サンプル配列として使用し、選択された変換が恒等変換でない場合、係数のブロックを選択された変換に対応する逆変換にかけ、所定の変換ブロックの残差サンプル配列を取得するように構成されている。さらに、装置は、残差サンプル配列を使用して所定の変換ブロックの予測を修正し、所定の変換ブロックを再構成するように構成されている(これは、空間的または時間的予測であってもよく、これは後続の全ての発生に対して有効ではない)。
【0028】
本発明にかかる実施形態は、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する装置であって、所定の変換ブロックについて、所定の変換ブロックのデータストリームからインデックスを復号し、選択された変換として、インデックスが指す変換の所定のリストのうちの1つの変換を使用することによって選択された変換を選択するように構成されている、装置である。さらにまた、装置は、所定の変換ブロックについて、データストリームから係数のブロックを復号し、係数のブロックが選択された変換にしたがって残差サンプル配列に関連付けられるように、係数のブロックから、所定の変換ブロックの残差サンプル配列を導出し、残差サンプル配列を使用して所定の変換ブロックの予測を修正し、所定の変換ブロックを再構成するように構成されている。さらに、装置は、所定の変換ブロックについて、データストリームからの係数のブロックの復号において、所定のブロックの選択された変換が1つ以上の変換の所定のセットに含まれるかどうかに応じて、所定のブロックの選択された変換が1つ以上の変換の所定のセットに含まれる場合、係数のブロックが少なくとも1つの非ゼロ係数を有するかどうかを通知する符号化ブロックフラグをデータストリームから復号し、所定のブロックの選択された変換が1つ以上の変換の所定のセットに含まれていない場合、係数のブロックが少なくとも1つの非ゼロ係数を有すると推論する、ように構成されている(換言すれば、その後、所定のブロックの選択された変換が1つ以上の変換の所定のセットに含まれる場合、データストリームからCBFを復号しない、またはさらに換言すれば、CBFが復号されるデータストリームの現在の部分とは異なる構文要素を復号する)。
【0029】
本発明にかかる実施形態は、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する装置であって、所定の変換ブロックについて、係数のブロックが少なくとも1つの非ゼロ係数を有するかどうかを通知するデータストリームからの符号化ブロックフラグを復号することを含み、データストリームから係数のブロックを復号するように構成されている、装置である。装置は、符号化ブロックフラグが、係数のブロックが少なくとも1つの非ゼロ係数を有することを通知する場合、所定の変換ブロックについて、所定の変換ブロックのデータストリームからインデックスを復号することによって選択された変換を選択し、選択された変換として、インデックスが指す変換の所定のリストからの1つの変換を使用し、係数のブロックが選択された変換にしたがって残差サンプル配列に関連するように、係数のブロックから所定の変換ブロックの残差サンプル配列を導出し、残差サンプル配列を使用して所定の変換ブロックの予測を修正し、所定の変換ブロックを再構成するように構成されている。符号化ブロックフラグが、係数のブロックが少なくとも1つの非ゼロ係数を有していないことを通知する場合、装置は、予測修正なしで所定の変換ブロックを再構成するように構成されている(換言すれば、その後、符号化ブロックフラグが、係数のブロックが少なくとも1つの非ゼロ係数を有しないことを通知する場合、インデックスが復号されるデータストリームの現在の部分からのインデックスとは異なる構文要素を復号することなどによって、データストリームからインデックスを復号しない)。
【0030】
本発明にかかる実施形態は、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する装置であって、データストリームに応じて変換の所定のリストをポピュレートまたはポピュレートおよびソートするように構成されている、装置である。装置は、変換の所定のリスト内の各変換が、可変長コードの1つのコードワードを割り当てられ、可変長コードのコードワードのコードワード長が、コードワードが割り当てられた変換の所定のリスト内の変換のランクとともに単調増加するように、可変長コードを使用してデータストリームからインデックスを復号し、選択された変換として、インデックスが指す変換の所定のリストのうちの1つの変換を使用することによって、所定の変換ブロックについて、選択された変換を選択するように構成されている。さらにまた、装置は、所定の変換ブロックについて、データストリームから係数のブロックを復号し、係数のブロックが選択された変換にしたがって残差サンプル配列に関連付けられるように、係数のブロックから、所定の変換ブロックの残差サンプル配列を導出し、残差サンプル配列を使用して所定の変換ブロックの予測を修正し、所定の変換ブロックを再構成するように構成されている。
【0031】
本発明にかかる実施形態は、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する装置であって、所定の変換ブロックについて、可変長コードの第1のコードワードから構成される合成可変長コードワードと、第1のコードワードが可変長コードの最長コードワードである場合、それに続く固定長コードの第2のコードワードとを使用して、データストリームからの変換の所定のリストにインデックスを復号することによって選択された変換を選択するように構成されている、装置である。可変長コードの2つの非最長コードワードのうちの1つのみから構成される合成可変長コードのコードワードは、変換の所定のリストに含まれる恒等変換および所定の非恒等変換に割り当てられ、恒等変換および所定の非恒等変換を識別し、合成可変長コードのさらなるコードワードは、変換の所定のリストのさらなる非恒等変換に割り当てられ、さらなる非恒等変換を識別する。装置は、所定の変換ブロックについて、インデックスが指す変換の所定のリストの中の1つの変換を選択された変換として使用することによって選択された変換を選択するように構成されている。さらにまた、装置は、所定の変換ブロックについて、データストリームから係数のブロックを復号し、係数のブロックが選択された変換にしたがって残差サンプル配列に関連付けられるように、係数のブロックから、所定の変換ブロックの残差サンプル配列を導出し、残差サンプル配列を使用して所定の変換ブロックの予測を修正し、所定の変換ブロックを再構成するように構成されている。
【0032】
本発明にかかる実施形態は、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する装置であって、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択するように構成されており、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備える、装置である。装置は、所定の変換ブロックについて、選択された変換が非恒等変換であるかどうかをチェックすることによって、データストリームから係数のブロックを復号するように構成されている。選択された変換が非恒等変換である場合、装置は、所定の変換ブロックについて、所定の係数位置を取得するために、係数のブロックの全ての係数をトラバースする走査順序に沿って、非ゼロ係数が最初に遭遇した場合、または係数のブロックの全ての係数をトラバースする走査順序に沿って、非ゼロ係数が最後に遭遇した場合に、データストリームから位置情報を復号し(以下に留意されたい。上記実施形態では、この位置は、左上から右下に向かう走査順序に沿って測定される最後の位置と呼ばれるが、コーディングを開始した実際の走査は、これらの実施形態にしたがってそこで開始した。すなわち、実際のコーディングは、右下から左上隅に向かう逆の走査順序で行われた。ここで、走査順序はコーディング順である)、係数のブロックの全ての非ゼロ係数を含み且つ所定の係数位置から始めてまたはそれまで走査順序によってトラバースされる、データストリームから係数のブロックの第1の係数を復号し、第1の係数とは異なる係数のブロックの第2の係数をゼロであると推論するように構成されている。選択された変換が恒等変換である場合、装置は、所定の変換ブロックについて、データストリームから係数のブロックの全ての係数を復号することによって、データストリームから係数のブロックを復号するように構成されている。さらにまた、装置は、係数のブロックが選択された変換にしたがって残差サンプル配列に関連付けられるように、係数のブロックから、所定の変換ブロックの残差サンプル配列を導出し、残差サンプル配列を使用して所定の変換ブロックの予測を修正し、所定の変換ブロックを再構成するように構成されている。
【0033】
本発明にかかる実施形態は、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する装置であって、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択するように構成されており、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備える、装置である。装置は、所定の変換ブロックについて、係数のブロックが分割されているサブブロック内のデータストリームから係数のブロックの係数を復号し、データストリーム内のサブブロックフラグがゼロであることを通知するサブブロック内の係数がゼロであると推論し、データストリーム内のサブブロックフラグがデータストリームから非ゼロであることを通知するサブブロック内の係数を復号することによって、データストリームから係数のブロックを復号するように構成されている。選択された変換が少なくとも1つの非恒等変換のうちの1つである場合、装置は、所定の変換ブロックについて、第1のサブブロックフラグ、および最後のサブブロックフラグのうちの少なくとも1つを除いて、データストリームからサブブロックフラグを順次復号し、非ゼロであることを通知するために第1および最後のサブブロックフラグのうちの少なくとも1つを推論することによって、データストリームから係数のブロックを復号するように構成されている。選択された変換が恒等変換である場合、装置は、所定の変換ブロックについて、全てのサブブロックのデータストリームからサブブロックフラグを復号することによって、データストリームから係数のブロックを復号するように構成されている。さらにまた、装置は、係数のブロックが選択された変換にしたがって残差サンプル配列に関連付けられるように、係数のブロックから、所定の変換ブロックの残差サンプル配列を導出し、残差サンプル配列を使用して所定の変換ブロックの予測を修正し、所定の変換ブロックを再構成するように構成されている。
【0034】
本発明にかかる実施形態は、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する装置であって、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択するように構成されており、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備える、装置である。装置は、所定の変換ブロックについて、係数のブロックが分割されているサブブロック内のデータストリームから係数のブロックを復号し、データストリーム内のサブブロックフラグがゼロであることを通知するサブブロック内の係数がゼロであると推論し、データストリーム内のサブブロックフラグがデータストリームから非ゼロであることを通知するサブブロック内の係数を復号するとともに、コンテキスト適応エントロピー復号によっておよびコンテキストを使用してデータストリームから現在復号されているサブブロックフラグを復号することによって、データストリームから係数のブロックを復号するように構成されている。コンテキストは、選択された変換が少なくとも1つの非恒等変換のうちの1つである場合、現在復号されているサブブロックフラグに隣接するサブブロックに関連するサブブロックフラグの論理和に依存し、選択された変換が恒等変換である場合、コンテキストは、現在復号されているサブブロックフラグに隣接するサブブロックに関連するサブブロックフラグの算術和に依存する。さらにまた、装置は、係数のブロックが選択された変換にしたがって残差サンプル配列に関連付けられるように、係数のブロックから、所定の変換ブロックの残差サンプル配列を導出し、残差サンプル配列を使用して所定の変換ブロックの予測を修正し、所定の変換ブロックを再構成するように構成されている。
【0035】
本発明にかかる実施形態は、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する装置であって、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択するように構成されており、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備える、装置である。装置は、所定の変換ブロックについて、現在の係数について、コンテキストを使用して現在の係数がゼロであるか否かを示す重要度フラグを復号することによってデータストリームから係数のブロックを復号するように構成されている。コンテキストは、選択された変換が恒等変換である場合、現在の係数に直接隣接する係数の第1のセットのうちの非ゼロである係数の数に依存し、コンテキストは、選択された変換が少なくとも1つの非恒等変換のうちの1つである場合、係数の第1のセット、係数の第1のセットよりも現在の係数から遠くに位置する係数、係数の第2のセットの値、および現在の係数の位置を含む係数の第2のセットのうちの非ゼロである係数の数に依存する。さらにまた、装置は、係数のブロックが選択された変換にしたがって残差サンプル配列に関連付けられるように、係数のブロックから、所定の変換ブロックの残差サンプル配列を導出し、残差サンプル配列を使用して所定の変換ブロックの予測を修正し、所定の変換ブロックを再構成するように構成されている。
【0036】
本発明にかかる実施形態は、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する装置であって、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択するように構成されており、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備える、装置である。装置は、所定の係数の絶対値がXよりも大きいか否かを示すN個の大なりXフラグをコンテキスト適応エントロピー復号し、所定の係数の絶対値がNに依存する絶対閾値を超える量を示す余りを、可変長コードを使用して復号する、ことによって所定の係数を復号することによって、所定の変換ブロックについて、データストリームから係数のブロックを復号するように構成され、Nは、選択された変換が恒等変換である場合、選択された変換が少なくとも1つの非恒等変換のうちの1つである場合と比較して大きい。さらにまた、装置は、係数のブロックが選択された変換にしたがって残差サンプル配列に関連付けられるように、係数のブロックから、所定の変換ブロックの残差サンプル配列を導出し、残差サンプル配列を使用して所定の変換ブロックの予測を修正し、所定の変換ブロックを再構成するように構成されている。
【0037】
本発明にかかる実施形態は、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する装置であって、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択するように構成されており、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備える、装置である。装置は、所定のコンテキストを使用して(例えば、所定の係数の近傍の係数のブロックの係数の符号に応じてコンテキストを選択する)コンテキスト適応エントロピー復号によって所定の係数の符号を復号し、選択された変換が恒等変換である場合、所定のコンテキストに関連付けられた確率を更新することによって、所定の変換ブロックについて、データストリームから係数のブロックを復号するように構成され、装置は、選択された変換が少なくとも1つの非恒等変換のうちの1つである場合、バイパス復号(例えば、固定等確率を用いたコンテキスト適応エントロピー復号)によって所定の係数の符号を復号することによって、所定の変換ブロックについて、データストリームから係数のブロックを復号するように構成されている。さらにまた、装置は、係数のブロックが選択された変換にしたがって残差サンプル配列に関連付けられるように、係数のブロックから、所定の変換ブロックの残差サンプル配列を導出し、残差サンプル配列を使用して所定の変換ブロックの予測を修正し、所定の変換ブロックを再構成するように構成されている。
【0038】
本発明にかかる実施形態は、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する装置であって、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択するように構成されており、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備える、装置である。装置は、所定の係数の絶対値がXよりも大きいか否かを示すN個の大なりXフラグをコンテキスト適応エントロピー復号し、所定の係数の絶対値がNに依存する絶対閾値を超える量を示す余りを、可変長コードを使用して復号する、ことによって所定の係数を復号することによって、所定の変換ブロックについて、データストリームから係数のブロックを復号するように構成されている。選択された変換が少なくとも1つの非恒等変換のうちの1つである場合、装置は、パスごとにN個の大なりXフラグのうちの1つ以上によってXを増加させながら順次N個の大なりXフラグをコンテキスト適応エントロピー復号することによって一連のパス内のN個の大なりXフラグのコンテキスト適応エントロピー復号を実行し、一連のパスの間にコンテキスト適応エントロピー復号を使用して符号化されたフラグの数を記録し、数が所定のフラグ閾値を超える場合、N個の大なりXフラグのコンテキスト適応エントロピー復号を停止するように構成されている。選択された変換が恒等変換である場合、装置は、順次N個の大なりXフラグのコンテキスト適応エントロピー復号を実行し、N個の大なりXフラグの中の重要度フラグ(X=0)を復号した後、N個の大なりXフラグの中のさらなるN個の大なりXフラグの前に、所定の係数が絶対閾値よりも大きいかどうかを示す大なりXフラグ-バイパスフラグを復号し、所定の係数が絶対閾値よりも大きいことを示す大なりXフラグ-バイパスフラグの場合、N個の大なりXフラグのコンテキスト適応エントロピー復号を停止するように構成されている(例えば、所定の係数が絶対閾値よりも大きくないことを示す大なりXフラグの場合、N個の大なりXフラグのうちの最後の1つを除くさらなる大なりXフラグに対するN個の大なりXフラグのコンテキスト適応エントロピー復号を再開する)。さらにまた、装置は、係数のブロックが選択された変換にしたがって残差サンプル配列に関連付けられるように、係数のブロックから、所定の変換ブロックの残差サンプル配列を導出し、残差サンプル配列を使用して所定の変換ブロックの予測を修正し、所定の変換ブロックを再構成するように構成されている。
【0039】
本発明にかかる実施形態は、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する装置であって、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択するように構成されており、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備える、装置である。装置は、所定の係数の絶対値がXよりも大きいか否かを示すN個の大なりXフラグをコンテキスト適応エントロピー復号し、可変長コードを使用して、所定の係数の絶対値がNに依存する絶対閾値を超える量を示す余りを復号し、所定の係数の符号を復号することによって、所定の係数について、所定の走査順序で係数のブロックの係数をトラバースする一連のパスにおいて、所定の変換ブロックについて、データストリームから係数のブロックを復号するように構成されている。装置は、選択された変換が恒等変換であるかまたは少なくとも1つの非恒等変換のうちの1つであるかに応じて、一連のパスにわたるN個の大なりXフラグ、余りおよび符号の復号を異なって分配するように構成されている。さらにまた、装置は、係数のブロックが選択された変換にしたがって残差サンプル配列に関連付けられるように、係数のブロックから、所定の変換ブロックの残差サンプル配列を導出し、残差サンプル配列を使用して所定の変換ブロックの予測を修正し、所定の変換ブロックを再構成するように構成されている。
【0040】
本発明にかかる実施形態は、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する装置であって、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択するように構成されており、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備える、装置である。装置は、所定の変換ブロックについて、ブロックの係数をトラバースする一連のパスにおいて、コンテキスト適応バイナリエントロピー復号を使用してデータストリームからの各係数についての1つ以上の所定のフラグ(例えば、パリティフラグおよび/または大なりXフラグ、sigフラグ)を復号し、各所定のフラグが、それぞれの係数の絶対値が配置された(例えば、絶対値ドメインは、1つ以上のパスの先頭において始まる、例えば、Xビット表現の場合、係数0・・・2X-1の一般的な絶対値ドメインから始まる)それぞれの係数の絶対値ドメインを低減する(例えば、パリティビットは、全ての偶数のまたは偶数でない絶対値を除外することによって絶対値ドメインを半分に低減させ、大なりXフラグは、可能な絶対値の1つを除外するか、または可能な絶対値のこの1つのみを残し、他の全てを除外することによって可能な絶対値のドメインを低減させる)ことによって、データストリームから係数のブロックを復号するように構成されている。装置は、所定の変換ブロックについて、ブロックの係数をトラバースする一連のパスにおいて、絶対値ドメインのカーディナリティが、それぞれの係数について復号された1つ以上の所定のフラグによって1つに低減されない各係数について、それぞれの係数の絶対値ドメイン内のそれぞれの係数の絶対値を示す可変長コードのコードワード(例えば、ライス/Exp-ゴロムコード)を復号することによって、データストリームから係数のブロックを復号するように構成されている(例えば、可変長コードの符号長は、絶対値が増加するにつれて単調増加してもよい)。さらにまた、装置は、係数のブロックが選択された変換にしたがって残差サンプル配列に関連付けられるように、係数のブロックから、所定の変換ブロックの残差サンプル配列を導出し、残差サンプル配列を使用して所定の変換ブロックの予測を修正し、所定の変換ブロックを再構成するように構成されている。装置は、一連のパスにおいて、1つ以上の所定のフラグを復号する際に、ポインタが絶対値を指す絶対値ドメインのカーディナリティが非ゼロ係数の第2のセットと比較して非ゼロ係数の第1のセットの方が小さい(すなわち、最後のパス内で限界に到達する前の係数については、限界に到達した後の係数と比較してより小さい)ように、所定数の所定のフラグに到達する(すなわち、全ての係数についてこれまでに復号された所定のフラグの総数が限界に到達する)とすぐに1つ以上の所定のフラグの復号を停止するように構成されており、装置は、一連のパスにおいて、1つ以上の所定のフラグを復号する際に、非ゼロ係数の第1および第2のセットの可変長コードのコードワードに異なる可変長コードを使用するように構成されている。
【0041】
本発明にかかる実施形態は、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する装置であって、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択するように構成されており、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備える、装置である。装置は、選択された変換が非恒等変換である場合、非恒等変換のDC係数に向かう(例えば、最も高い周波数係数からそれ以降、場合によっては「最後の」重要係数位置から開始する)第1の走査順序に沿って(場合によっては、数回のパスにおいてこの順序に数回続く)データストリームから係数のブロックの係数を復号することによって、所定の変換ブロックについて、データストリームから係数のブロックを復号するように構成されている。装置は、選択された変換が恒等変換である場合に、左上サンプル位置から右下サンプル位置に至る第2の走査順序に沿ってデータストリームから係数のブロックの係数を復号することによって、所定の変換ブロックについて、データストリームから係数のブロックを復号するように構成されている。さらにまた、装置は、係数のブロックが選択された変換にしたがって残差サンプル配列に関連するように、係数のブロックから所定の変換ブロックの残差サンプル配列を導出し(このステップは、恒等変換の場合、DPCM反転を実行するように、水平DPCMの場合は左側、垂直DPCMの場合はそれぞれの係数の上部などの所定の側のブロックに存在する係数を各係数に追加することを含んでもよい)、残差サンプル配列を使用して所定の変換ブロックの予測を修正し、所定の変換ブロックを再構成するように構成されている。
【0042】
本発明にかかる実施形態は、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する装置であって、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択するように構成されており、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備える、装置である。装置は、所定の変換ブロックについて、選択された変換が少なくとも1つの非恒等変換のうちの1つである場合、データストリームから構文要素を復号し、そこから、非ゼロ係数の所定のグループ内の非ゼロ係数の符号が互いに等しいかまたは等しくないかを導出し、そうである場合、非ゼロ係数の所定のグループ内の非ゼロ係数の符号を導出し、非ゼロ係数の所定のグループ内の非ゼロ係数の符号が互いに等しくない場合、非ゼロ係数ベースごとに符号ビットを復号することによって非ゼロ係数の所定のグループ内の非ゼロ係数の符号を復号することによって、データストリームから係数のブロックを復号するように構成されている。装置は、所定の変換ブロックについて、選択された変換が恒等変換である場合、非ゼロ係数の所定のグループ内の非ゼロ係数の符号が互いに等しいかどうかにかかわらず非ゼロ係数ベースごとに符号ビットを復号することにより、非ゼロ係数の所定のグループ内の非ゼロ係数の符号を復号することによって、データストリームから係数のブロックを復号するように構成されている。さらにまた、装置は、係数のブロックが選択された変換にしたがって残差サンプル配列に関連付けられるように、係数のブロックから、所定の変換ブロックの残差サンプル配列を導出し、残差サンプル配列を使用して所定の変換ブロックの予測を修正し、所定の変換ブロックを再構成するように構成されている。
【0043】
本発明にかかる実施形態は、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する装置であって、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択するように構成されており、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備える、装置である。装置は、係数の所定のブロックの非ゼロ係数の符号を復号し、データストリームから符号確率傾向インデックスを導出し、選択された変換が恒等変換である場合、符号確率傾向インデックスに関連付けられたコンテキストモデル(正となる確率などの特定の符号確率を定義するコンテキストモデル)を使用して、所定の非ゼロ係数の符号(復号順序の1番目またはインデックスが適用される係数ブロックの特定のサブブロック内のものなど)をエントロピー復号することによって、所定の変換ブロックについて、データストリームから係数のブロックを復号するように構成されている。さらに、装置は、選択された変換が少なくとも1つの非恒等変換のうちの1つである場合、所定の非ゼロ係数の符号をバイパス復号する(例えば、固定等確率を用いたコンテキスト適応エントロピー復号)ことによって所定の係数のブロックの非ゼロ係数の符号を復号することによって、所定の変換ブロックについて、データストリームから係数ブロックを復号するように構成されている。さらにまた、装置は、係数のブロックが選択された変換にしたがって残差サンプル配列に関連付けられるように、係数のブロックから、所定の変換ブロックの残差サンプル配列を導出し、残差サンプル配列を使用して所定の変換ブロックの予測を修正し、所定の変換ブロックを再構成するように構成されている。
【0044】
本発明にかかる実施形態は、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する装置であって、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択するように構成されており、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備える、装置である。装置は、複数のコンテキストモデルの中から所定のコンテキストモデルを使用して所定の非ゼロ係数の符号を復号し、選択された変換が恒等変換である場合、以前に復号された係数の符号の統計量に応じて複数のコンテキストモデルの中から所定のコンテキストモデルを選択することによって、所定の係数ブロックの非ゼロ係数の符号を復号することによって、所定の変換ブロックについて、データストリームから係数ブロックを復号するように構成されている。さらに、装置は、選択された変換が少なくとも1つの非恒等変換のうちの1つである場合、所定の非ゼロ係数の符号をバイパス復号する(例えば、固定等確率を用いたコンテキスト適応エントロピー復号)ことによって所定の係数のブロックの非ゼロ係数の符号を復号することによって、所定の変換ブロックについて、データストリームから係数ブロックを復号するように構成されている。さらにまた、装置は、係数のブロックが選択された変換にしたがって残差サンプル配列に関連付けられるように、係数のブロックから、所定の変換ブロックの残差サンプル配列を導出し、残差サンプル配列を使用して所定の変換ブロックの予測を修正し、所定の変換ブロックを再構成するように構成されている。
【0045】
本発明にかかる実施形態は、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する装置であって、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択するように構成されており、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備える、装置である。装置は、所定の変換ブロックについて、ブロックの係数をトラバースする一連のパスにおいて、コンテキスト適応バイナリエントロピー復号を使用してデータストリームからの各係数についての1つ以上の所定のフラグ(例えば、パリティフラグおよび/または大なりXフラグ、sigフラグ)を復号し、各所定のフラグが、それぞれの係数の絶対値が配置された(例えば、絶対値ドメインは、1つ以上のパスの先頭において始まる、例えば、Xビット表現の場合、係数0・・・2X-1の一般的な絶対値ドメインから始まる)それぞれの係数の絶対値ドメインを低減する(例えば、パリティビットは、全ての偶数のまたは偶数でない絶対値を除外することによって絶対値ドメインを半分に低減させ、大なりXフラグは、可能な絶対値の1つを除外するか、または可能な絶対値のこの1つのみを残し、他の全てを除外することによって可能な絶対値のドメインを低減させる)ことによって、データストリームから係数のブロックを復号するように構成されている。さらに、装置は、所定の変換ブロックについて、ブロックの係数をトラバースする一連のパスにおいて、絶対値ドメインのカーディナリティが、それぞれの係数について復号された1つ以上の所定のフラグによって1つに低減されない各係数について、それぞれの係数の絶対値ドメイン内のそれぞれの係数の絶対値を特定するための可変長コードのコードワード(例えば、ライス/Exp-ゴロムコード)を復号することによって、データストリームから係数のブロックを復号するように構成されている(例えば、可変長コードの符号長は、絶対値が増加するにつれて単調増加してもよい。ここで、コードワードは、低減された絶対値ドメイン、または必然的に低減された絶対値ドメインの適切なスーパーセットである一般的なものもしくはいくつかの他のもののみを自由に指す)。さらにまた、装置は、係数のブロックが選択された変換にしたがって残差サンプル配列に関連付けられるように、係数のブロックから、所定の変換ブロックの残差サンプル配列を導出し、残差サンプル配列を使用して所定の変換ブロックの予測を修正し、所定の変換ブロックを再構成するように構成されている。装置は、一連のパスにおいて、1つ以上の所定のフラグを復号する際に、復号される係数がゼロか否かを示す、(したがって、必然的にコンテキスト適応二値エントロピー復号を使用して復号される)1つ以上の所定のフラグのうちの重要度フラグに関するものを除いて、絶対値ドメインのカーディナリティが非ゼロ係数の第2のセットと比較して非ゼロ係数の第1のセットの方が小さい(すなわち、最後のパス内で限界に到達する前の係数の方が、限界に到達した後の係数と比較して小さい)ように、所定数の所定のフラグに到達する(すなわち、全ての係数についてこれまでに復号された所定のフラグの総数が限界に到達する)とすぐに1つ以上の所定のフラグの復号を停止するように構成されており、所定数は、上限から重要度フラグがまだ復号されていない係数の数を差し引いたものに対応する。
【0046】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを符号化する装置は、ピクチャを異なるサイズの変換ブロックに分割するように構成されている。さらにまた、装置は、所定の変換ブロックについて、所定の変換ブロックのサイズが所定の閾値サイズを超えるかどうかをチェックすることによって選択された変換を選択するように構成されている。所定の変換ブロックのサイズが所定の閾値サイズを超える場合、装置は、選択された変換を選択するためのデフォルトの方法を選択された変換の選択に使用するように構成されている。所定の変換ブロックのサイズが所定の閾値サイズを超えない場合、装置は、選択された変換の選択のために、変換の所定のリストの中から変換を選択し、選択された変換として所定の変換ブロックに使用されるように、変換の所定のリストの中から選択された変換を指すインデックスをデータストリーム内で送信するように構成され、変換の所定のリストは、恒等変換および非恒等変換を備える。さらに、装置は、所定の変換ブロックを予測し、所定の変換ブロックについて、係数のブロックをデータストリームに符号化し、その結果、選択された変換が恒等変換である場合、係数のブロックが、所定の変換ブロックを再構成するために、予測を修正するための残差サンプル配列として使用され、選択された変換が恒等変換でない場合、係数のブロックが、選択された変換に対応する逆変換にかけられ、所定の変換ブロックの残差サンプル配列を取得するように構成されている。
【0047】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを符号化する装置は、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択し、選択された変換を指す所定の変換ブロックのデータストリームにインデックスを符号化するように構成されている。さらにまた、装置は、所定の変換ブロックを予測し、所定の変換ブロックについて、係数のブロックをデータストリームに符号化し、その結果、係数のブロックから、所定の変換ブロックの残差サンプル配列が、係数のブロックが選択された変換にしたがって残差サンプル配列に関連するように導出可能であり、所定の変換ブロックの予測が、所定の変換ブロックを再構成するために残差サンプル配列を使用して修正可能であるように構成されている。装置は、所定の変換ブロックについて、所定のブロックの選択された変換が1つ以上の変換の所定のセットに含まれるかどうかに応じて係数のブロックをデータストリームに符号化する際に、所定のブロックの選択された変換が1つ以上の変換の所定のセットに含まれる場合、係数のブロックが少なくとも1つの非ゼロ係数を有するかどうかを通知する符号化ブロックフラグをデータストリームに符号化するように構成されている。さらに、装置は、所定の変換ブロックについて、所定のブロックの選択された変換が1つ以上の変換の所定のセットに含まれるかどうかに応じて係数のブロックをデータストリームに符号化する際に、所定のブロックの選択された変換が1つ以上の変換の所定のセットに含まれていない場合(換言すれば、次いで、CBFをデータストリームに符号化しない、またはさらに換言すれば、所定のブロックの選択された変換が1つ以上の変換の所定のセットに含まれる場合、CBFが符号化されるデータストリームの現在の部分とは異なる構文要素を符号化する)、係数のブロックが少なくとも1つの非ゼロ係数を有することの通知として、符号化ブロックフラグが符号化器側で推論される必要がある符号化ブロックフラグをデータストリームに符号化するのを控えるように構成されている。
【0048】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを符号化する装置は、所定の変換ブロックを予測し、所定の変換ブロックについて、係数のブロックが少なくとも1つの非ゼロ係数を有するかどうかを通知する符号化ブロックフラグをデータストリームに符号化することを含み、係数のブロックをデータストリームに符号化するように構成されている。装置は、符号化ブロックフラグが、係数のブロックが少なくとも1つの非ゼロ係数を有することを通知する場合、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択し、変換の所定のリスト内の選択された変換を指す所定の変換ブロックのデータストリームにインデックスを符号化するように構成されている。係数のブロックから、所定の変換ブロックの残差サンプル配列が導出可能であり、その結果、係数のブロックは、選択された変換にしたがって残差サンプル配列に関連し、所定の変換ブロックの予測は、所定の変換ブロックを再構成するために残差サンプル配列を使用して修正可能である。装置は、符号化ブロックフラグが、係数のブロックが少なくとも1つの非ゼロ係数を有していないことを通知する場合、予測修正なしで所定の変換ブロックを再構成するように構成されている(換言すれば、その後、符号化ブロックフラグが、係数のブロックが少なくとも1つの非ゼロ係数を有しないことを通知する場合、インデックスが符号化されるデータストリームの現在の部分からのインデックスとは異なる構文要素を符号化することなどによって、データストリームにインデックスを符号化しない)。
【0049】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを符号化する装置は、データストリームに応じて変換の所定のリストをポピュレートまたはポピュレートおよびソートし、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択するように構成されている。さらにまた、装置は、可変長コードを使用して変換の所定のリスト内の選択された変換を指すインデックスをデータストリームに符号化し、その結果、変換の所定のリスト内の各変換が、可変長コードの1つのコードワードを割り当てられ、可変長コードのコードワードのコードワード長が、コードワードが割り当てられた変換の所定のリスト内の変換のランクとともに単調増加するように構成されている。さらに、装置は、所定の変換ブロックの予測を導出し、所定の変換ブロックについて、係数のブロックをデータストリームに符号化し、その結果、係数のブロックから、所定の変換ブロックの残差サンプル配列が導出可能であり、その結果、係数のブロックが、選択された変換にしたがって残差サンプル配列に関連し、所定の変換ブロックが、所定の変換ブロックを再構成するために残差サンプル配列を使用して所定の変換ブロックの予測によって再構成可能であるように構成されている。
【0050】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを符号化する装置は、所定の変換ブロックの予測を導出するように構成されている。さらにまた、装置は、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択し、第1のコードワードが可変長コードの最長コードワードである場合、固定長コードの第2のコードワードが続く可変長コードの第1のコードワードから構成される合成可変長コードコードワードを使用して、選択された変換を指すデータストリームへの変換の所定のリストにインデックスを符号化するように構成されている。可変長コードの2つの非最長コードワードのうちの1つのみから構成される合成可変長コードのコードワードは、変換の所定のリストに含まれる恒等変換および所定の非恒等変換に割り当てられ、恒等変換および所定の非恒等変換を識別し、合成可変長コードのさらなるコードワードは、変換の所定のリストのさらなる非恒等変換に割り当てられ、さらなる非恒等変換を識別する。さらに、装置は、所定の変換ブロックについて、係数のブロックをデータストリームに符号化し、その結果、係数のブロックが、選択された変換にしたがって残差サンプル配列に関連し、所定の変換ブロックが、残差サンプル配列を使用して所定の変換ブロックの予測を修正することによって再構成可能であるように構成されている。
【0051】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する装置は、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択するように構成されており、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備える。さらにまた、装置は、所定の変換ブロックについての予測を導出し、所定の変換ブロックについて、選択された変換が非恒等変換であるか否かをチェックすることによって、係数のブロックをデータストリームに符号化するように構成されている。選択された変換が非恒等変換である場合、装置は、所定の変換ブロックについて、係数のブロックをデータストリームに符号化するための所定の係数位置を取得するために、係数のブロックの全ての係数をトラバースする走査順序に沿って、非ゼロ係数が最初に遭遇した場合、または係数のブロックの全ての係数をトラバースする走査順序に沿って、非ゼロ係数が最後に遭遇した場合に、位置情報をデータストリームに符号化し(以下に留意されたい。上記実施形態では、この位置は、左上から右下に向かう走査順序に沿って測定される最後の位置と呼ばれるが、コーディングを開始した実際の走査は、これらの実施形態にしたがってそこで開始した。すなわち、実際のコーディングは、右下から左上隅に向かう逆の走査順序で行われた。ここで、走査順序はコーディング順である)、係数のブロックの全ての非ゼロ係数を含み且つ所定の係数位置から始めてまたはそれまで走査順序によってトラバースされる、係数のブロックの第1の係数をデータストリームに符号化し、第1の係数とは異なる係数のブロックの第2の係数をゼロであると推論し、所定の変換ブロックについて、係数のブロックをデータストリームに符号化するように構成されている。選択された変換が恒等変換である場合、装置は、所定の変換ブロックについて、係数のブロックをデータストリームに符号化するために、係数のブロックの全ての係数をデータストリームに符号化するように構成されている。係数のブロックは、選択された変換にしたがって残差サンプル配列に関連し、所定の変換ブロックは、残差サンプル配列を使用してその予測を修正することによって再構成可能である。
【0052】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する装置は、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択し、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備え、所定の変換ブロックの予測を導出するように構成されている。さらにまた、装置は、所定の変換ブロックについて、係数のブロックが分割されるサブブロック内のデータストリームに係数のブロックの係数を符号化することによって、係数のブロックをデータストリームに符号化するように構成され、データストリーム内のサブブロックフラグがゼロであることを通知するサブブロック内の係数がゼロであると推論され、データストリーム内のサブブロックフラグが非ゼロであることを通知するサブブロック内の係数がデータストリームに符号化される。ゼロであるとの係数の推論および非ゼロ係数の符号化は、選択された変換が少なくとも1つの非恒等変換のうちの1つである場合、第1のサブブロックフラグおよび最後のサブブロックフラグのうちの少なくとも1つを除いて、サブブロックフラグをデータストリームに順次符号化することによって実行され、第1のサブブロックフラグおよび最後のサブブロックフラグのうちの少なくとも1つが非ゼロであることを通知するように推論され、選択された変換が恒等変換である場合、全てのサブブロックについてサブブロックフラグをデータストリームに符号化する。係数のブロックは、選択された変換にしたがって残差サンプル配列に関連し、所定の変換ブロックは、残差サンプル配列を使用して所定の変換ブロックの予測を修正することによって再構成可能である。
【0053】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する装置は、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択し、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備え、所定の変換ブロックの予測を導出するように構成されている。さらにまた、装置は、所定の変換ブロックについて、係数のブロックが分割されているサブブロック内のデータストリームに係数のブロックを符号化し、データストリーム内のサブブロックフラグがゼロであることを通知するサブブロック内の係数がゼロであると推論し、データストリーム内のサブブロックフラグがデータストリームから非ゼロであることを通知するサブブロック内の係数を符号化するとともに、コンテキスト適応エントロピー符号化によっておよびコンテキストを使用してデータストリームに現在符号化されているサブブロックフラグを符号化することによって、データストリームに係数のブロックを符号化するように構成されている。コンテキストは、選択された変換が少なくとも1つの非恒等変換のうちの1つである場合、現在符号化されているサブブロックフラグに隣接するサブブロックに関連するサブブロックフラグの論理和に依存し、選択された変換が恒等変換である場合、現在符号化されているサブブロックフラグに隣接するサブブロックに関連するサブブロックフラグの算術和に依存する。係数のブロックは、選択された変換にしたがって残差サンプル配列に関連し、所定の変換ブロックは、残差サンプル配列を使用して所定の変換ブロックについての予測を修正することによって再構成可能である。
【0054】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する装置は、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択し、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備え、所定の変換ブロックの予測を導出するように構成されている。さらにまた、装置は、所定の変換ブロックについて、現在の係数について、コンテキストを使用して現在の係数がゼロであるか否かを示す重要度フラグを符号化することによってデータストリームに係数のブロックを符号化するように構成されている。コンテキストは、選択された変換が恒等変換である場合、現在の係数に直接隣接する係数の第1のセットのうちの非ゼロである係数の数に依存し、選択された変換が少なくとも1つの非恒等変換のうちの1つである場合、係数の第1のセット、係数の第1のセットよりも現在の係数から遠くに位置する係数、係数の第2のセットの値、および現在の係数の位置を含む係数の第2のセットのうちの非ゼロである係数の数に依存する。係数のブロックは、選択された変換にしたがって残差サンプル配列に関連し、所定の変換ブロックは、残差サンプル配列を使用して所定の変換ブロックの予測を修正することによって再構成可能である。
【0055】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する装置は、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択し、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備え、所定の変換ブロックの予測を導出するように構成されている。さらにまた、装置は、所定の係数の絶対値がXよりも大きいか否かを示すN個の大なりXフラグをコンテキスト適応エントロピー符号化し、所定の係数の絶対値がNに依存する絶対閾値を超える量を示す余りを、可変長コードを使用して符号化する、ことによって所定の係数を符号化することによって、所定の変換ブロックについて、データストリームに係数のブロックを符号化するように構成され、Nは、選択された変換が恒等変換である場合、選択された変換が少なくとも1つの非恒等変換のうちの1つである場合と比較して大きい。係数のブロックは、選択された変換にしたがって残差サンプル配列に関連し、所定の変換ブロックは、残差サンプル配列を使用して所定の変換ブロックの予測を修正することによって再構成可能である。
【0056】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する装置は、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択し、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備え、所定の変換ブロックの予測を導出するように構成されている。さらにまた、装置は、所定のコンテキストを使用してコンテキスト適応エントロピー符号化を行い、選択された変換が恒等変換である場合、所定のコンテキストに関連付けられた確率を更新し、選択された変換が少なくとも1つの非恒等変換のうちの1つである場合、バイパス符号化(例えば、固定等確率を用いたコンテキスト適応エントロピー符号化)することによって、所定の係数の符号を符号化することによって、所定の変換ブロックについて、データストリームに係数のブロックを符号化するように構成されている。係数のブロックは、選択された変換にしたがって残差サンプル配列に関連し、所定の変換ブロックは、残差サンプル配列を使用して所定の変換ブロックの予測を修正することによって再構成可能である。
【0057】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する装置は、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択し、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備え、所定の変換ブロックの予測を導出するように構成されている。さらにまた、装置は、所定の係数の絶対値がXよりも大きいか否かを示すN個の大なりXフラグをコンテキスト適応エントロピー符号化し、所定の係数の絶対値がNに依存する絶対閾値を超える量を示す余りを、可変長コードを使用して符号化する、ことによって所定の係数を符号化することによって、所定の変換ブロックについて、データストリームに係数のブロックを符号化するように構成されている。装置は、選択された変換が少なくとも1つの非恒等変換のうちの1つである場合、パスごとにN個の大なりXフラグのうちの1つ以上によってXを増加させながら順次N個の大なりXフラグをコンテキスト適応エントロピー符号化することによって一連のパス内のN個の大なりXフラグのコンテキスト適応エントロピー符号化を実行し、一連のパスの間にコンテキスト適応エントロピー符号化を使用して符号化されたフラグの数を記録し、数が所定のフラグ閾値を超える場合、N個の大なりXフラグのコンテキスト適応エントロピー符号化を停止するように構成されている。さらに、装置は、選択された変換が恒等変換である場合、順次N個の大なりXフラグのコンテキスト適応エントロピー符号化を実行し、N個の大なりXフラグの中の重要度フラグ(X=0)を符号化した後、N個の大なりXフラグの中のさらなるN個の大なりXフラグの前に、所定の係数が絶対閾値よりも大きいかどうかを示す大なりXフラグ-バイパスフラグを符号化し、所定の係数が絶対閾値よりも大きいことを示す大なりXフラグ-バイパスフラグの場合、N個の大なりXフラグのコンテキスト適応エントロピー符号化を停止するように構成されている(例えば、所定の係数が絶対閾値よりも大きくないことを示す大なりXフラグの場合、N個の大なりXフラグのうちの最後の1つを除くさらなる大なりXフラグに対するN個の大なりXフラグのコンテキスト適応エントロピー符号化を再開する)。係数のブロックは、選択された変換にしたがって残差サンプル配列に関連し、所定の変換ブロックは、残差サンプル配列を使用して所定の変換ブロックの予測を修正することによって再構成可能である。
【0058】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する装置は、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択し、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備え、所定の変換ブロックの予測を導出するように構成されている。さらにまた、装置は、所定の係数の絶対値がXよりも大きいか否かを示すN個の大なりXフラグをコンテキスト適応エントロピー符号化し、可変長コードを使用して、所定の係数の絶対値がNに依存する絶対閾値を超える量を示す余りを符号化し、所定の係数の符号を符号化することによって、所定の係数について、所定の走査順序で係数のブロックの係数をトラバースする一連のパスにおいて、所定の変換ブロックについて、データストリームに係数のブロックを符号化するように構成されている。装置は、選択された変換が恒等変換であるかまたは少なくとも1つの非恒等変換のうちの1つであるかに応じて、一連のパスにわたるN個の大なりXフラグ、余りおよび符号の符号化を異なって分配するように構成されている。係数のブロックは、選択された変換にしたがって残差サンプル配列に関連し、所定の変換ブロックは、残差サンプル配列を使用して所定の変換ブロックの予測を修正することによって再構成可能である。
【0059】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する装置は、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択するように構成されており、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備える。さらにまた、装置は、所定の変換ブロックについて、ブロックの係数をトラバースする一連のパスにおいて、コンテキスト適応バイナリエントロピー符号化を使用してデータストリームに各係数についての1つ以上の所定のフラグ(例えば、パリティフラグおよび/または大なりXフラグ、sigフラグ)を符号化し、各所定のフラグが、それぞれの係数の絶対値が配置された(例えば、絶対値ドメインは、1つ以上のパスの先頭において始まる、例えば、Xビット表現の場合、係数0・・・2X-1の一般的な絶対値ドメインから始まる)それぞれの係数の絶対値ドメインを低減する(例えば、パリティビットは、全ての偶数のまたは偶数でない絶対値を除外することによって絶対値ドメインを半分に低減させ、大なりXフラグは、可能な絶対値の1つを除外するか、または可能な絶対値のこの1つのみを残し、他の全てを除外することによって可能な絶対値のドメインを低減させる)ことによって、データストリームに係数のブロックを符号化するように構成されている。さらにまた、装置は、所定の変換ブロックについて、ブロックの係数をトラバースする一連のパスにおいて、絶対値ドメインのカーディナリティが、それぞれの係数について符号化された1つ以上の所定のフラグによって1つに低減されない各係数について、それぞれの係数の絶対値ドメイン内のそれぞれの係数の絶対値を示す可変長コードのコードワード(例えば、ライス/Exp-ゴロムコード)を符号化することによって、データストリームに係数のブロックを符号化するように構成されている(例えば、可変長コードの符号長は、絶対値が増加するにつれて単調増加してもよい)。装置は、所定の変換ブロックについて、係数のブロックが選択された変換にしたがって所定の変換ブロックの残差サンプル配列に関連するように、データストリームに係数のブロックを符号化するように構成され、残差サンプル配列は、所定の変換ブロックの予測を修正し、所定の変換ブロックを再構成することを可能にする。装置は、一連のパスにおいて、1つ以上の所定のフラグを符号化する際に、ポインタが絶対値を指す絶対値ドメインのカーディナリティが非ゼロ係数の第2のセットと比較して非ゼロ係数の第1のセットの方が小さい(すなわち、最後のパス内で限界に到達する前の係数については、限界に到達した後の係数と比較してより小さい)ように、所定数の所定のフラグに到達する(すなわち、全ての係数についてこれまでに符号化された所定のフラグの総数が限界に到達する)とすぐに1つ以上の所定のフラグの符号化を停止し、非ゼロ係数の第1および第2のセットの可変長コードのコードワードに異なる可変長コードを使用するように構成されている。
【0060】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する装置は、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択するように構成されており、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備える。さらにまた、装置は、選択された変換が非恒等変換である場合、非恒等変換のDC係数に向かう(例えば、最も高い周波数係数からそれ以降、場合によっては「最後の」重要係数位置から開始する)第1の走査順序に沿って(場合によっては、数回のパスにおいてこの順序に数回続く)データストリームに係数のブロックの係数を符号化することによって、所定の変換ブロックについて、データストリームに係数のブロックを符号化するように構成されている。さらにまた、装置は、選択された変換が恒等変換である場合に、左上サンプル位置から右下サンプル位置に至る第2の走査順序に沿ってデータストリームに係数のブロックの係数を符号化することによって、所定の変換ブロックについて、データストリームに係数のブロックを符号化するように構成されている。さらにまた、装置は、所定の変換ブロックを再構成するために所定の変換ブロックの予測を修正することを可能にする、選択された変換にしたがって所定の変換ブロックの残差サンプル配列に係数のブロックが関連するように(このステップは、恒等変換の場合、DPCM反転を実行するように、水平DPCMの場合は左側、垂直DPCMの場合はそれぞれの係数の上部などの所定の側のブロックに存在する係数を各係数に追加することを含んでもよい)、所定の変換ブロックについて、データストリームに係数のブロックを符号化するように構成されている。
【0061】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する装置は、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択するように構成されており、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備える。さらにまた、装置は、所定の変換ブロックについて、選択された変換が少なくとも1つの非恒等変換のうちの1つである場合、データストリームに構文要素を符号化し、そこから、非ゼロ係数の所定のグループ内の非ゼロ係数の符号が互いに等しいかまたは等しくないかを導出し、そうである場合、非ゼロ係数の所定のグループ内の非ゼロ係数の符号を導出し、非ゼロ係数の所定のグループ内の非ゼロ係数の符号が互いに等しくない場合、非ゼロ係数ベースごとに符号ビットを符号化することによって非ゼロ係数の所定のグループ内の非ゼロ係数の符号を符号化することによって、データストリームに係数のブロックを符号化するように構成されている。さらにまた、装置は、所定の変換ブロックについて、選択された変換が恒等変換である場合、非ゼロ係数の所定のグループ内の非ゼロ係数の符号が互いに等しいかどうかにかかわらず非ゼロ係数ベースごとに符号ビットを符号化することにより、非ゼロ係数の所定のグループ内の非ゼロ係数の符号を符号化することによって、データストリームに係数のブロックを符号化するように構成されている。さらに、装置は、所定の変換ブロックについて、係数のブロックが選択された変換にしたがって所定の変換ブロックの残差サンプル配列に関連するように、データストリームに係数のブロックを符号化するように構成され、残差サンプル配列は、所定の変換ブロックの予測を修正し、所定の変換ブロックを再構成することを可能にする。
【0062】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する装置は、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択するように構成されており、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備える。さらにまた、装置は、係数の所定のブロックの非ゼロ係数の符号を符号化し、データストリームに符号確率傾向インデックスを符号化し、選択された変換が恒等変換である場合、符号確率傾向インデックスに関連付けられたコンテキストモデル(正となる確率などの特定の符号確率を定義するコンテキストモデル)を使用して、所定の非ゼロ係数の符号(符号化順序の1番目またはインデックスが適用される係数ブロックの特定のサブブロック内のものなど)をエントロピー符号化することによって、所定の変換ブロックについて、データストリームに係数のブロックを符号化するように構成されている。さらにまた、装置は、選択された変換が少なくとも1つの非恒等変換のうちの1つである場合、所定の非ゼロ係数の符号をバイパス符号化(例えば、固定等確率を用いたコンテキスト適応エントロピー符号化)することにより、所定の係数のブロックの非ゼロ係数の符号を符号化することによって、所定の変換ブロックについて、データストリームに係数のブロックを符号化するように構成されている。さらに、装置は、係数のブロックが選択された変換にしたがって所定の変換ブロックの残差サンプル配列に関連するように、係数の所定のブロックの非ゼロ係数の符号を符号化することにより、所定の変換ブロックについて、データストリームに係数のブロックを符号化するように構成され、所定の変換ブロックの予測は、所定の変換ブロックを再構成するために残差サンプル配列を使用して修正可能である。
【0063】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する装置は、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択するように構成されており、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備える。さらにまた、装置は、複数のコンテキストモデルの中から所定のコンテキストモデルを使用して所定の非ゼロ係数の符号を符号化し、選択された変換が恒等変換である場合、以前に符号化された係数の符号の統計量に応じて複数のコンテキストモデルの中から所定のコンテキストモデルを選択し、選択された変換が少なくとも1つの非恒等変換のうちの1つである場合、所定の非ゼロ係数の符号をバイパス符号化(例えば、固定等確率を用いたコンテキスト適応エントロピー符号化)することによって、所定の係数ブロックの非ゼロ係数の符号を符号化することによって、所定の変換ブロックについて、データストリームに係数ブロックを符号化するように構成されている。さらに、装置は、所定の変換ブロックについて、係数のブロックが選択された変換にしたがって所定の変換ブロックの残差サンプル配列に関連するように、データストリームに係数のブロックを符号化するように構成されており、その結果、所定の変換ブロックの予測が、所定の変換ブロックを再構成するために残差サンプル配列を使用して修正可能である。
【0064】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する装置は、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択するように構成されており、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備える。さらにまた、装置は、所定の変換ブロックについて、ブロックの係数をトラバースする一連のパスにおいて、コンテキスト適応バイナリエントロピー符号化を使用してデータストリームから各係数についての1つ以上の所定のフラグ(例えば、パリティフラグおよび/または大なりXフラグ、sigフラグ)を符号化し、各所定のフラグが、それぞれの係数の絶対値が配置された(例えば、絶対値ドメインは、1つ以上のパスの先頭において始まる、例えば、Xビット表現の場合、係数0・・・2X-1の一般的な絶対値ドメインから始まる)それぞれの係数の絶対値ドメインを低減する(例えば、パリティビットは、全ての偶数のまたは偶数でない絶対値を除外することによって絶対値ドメインを半分に低減させ、大なりXフラグは、可能な絶対値の1つを除外するか、または可能な絶対値のこの1つのみを残し、他の全てを除外することによって可能な絶対値のドメインを低減させる)ことによって、データストリームに係数のブロックを符号化するように構成されている。さらにまた、装置は、所定の変換ブロックについて、ブロックの係数をトラバースする一連のパスにおいて、絶対値ドメインのカーディナリティが、それぞれの係数について符号化された1つ以上の所定のフラグによって1つに低減されない各係数について、それぞれの係数の絶対値ドメイン内のそれぞれの係数の絶対値を特定するための可変長コードのコードワード(例えば、ライス/Exp-ゴロムコード)を符号化することによって、データストリームに係数のブロックを符号化するように構成されている(例えば、可変長コードの符号長は、絶対値が増加するにつれて単調増加してもよい。ここで、コードワードは、低減された絶対値ドメイン、または必然的に低減された絶対値ドメインの適切なスーパーセットである一般的なものもしくはいくつかの他のもののみを自由に指す)。さらに、装置は、所定の変換ブロックについて、係数のブロックが選択された変換にしたがって所定の変換ブロックの残差サンプル配列に関連するように、データストリームに係数のブロックを符号化するように構成されており、その結果、所定の変換ブロックの予測が、所定の変換ブロックを再構成するために残差サンプル配列を使用して修正可能である。装置は、一連のパスにおいて、1つ以上の所定のフラグを符号化する際に、符号化される係数がゼロか否かを示す、(したがって、必然的にコンテキスト適応二値エントロピー符号化を使用して符号化される)1つ以上の所定のフラグのうちの重要度フラグに関するものを除いて、絶対値ドメインのカーディナリティが非ゼロ係数の第2のセットと比較して非ゼロ係数の第1のセットの方が小さい(すなわち、最後のパス内で限界に到達する前の係数の方が、限界に到達した後の係数と比較して小さい)ように、所定数の所定のフラグに到達する(すなわち、全ての係数についてこれまでに符号化された所定のフラグの総数が限界に到達する)とすぐに1つ以上の所定のフラグの符号化を停止するように構成されており、所定数は、上限から重要度フラグがまだ符号化されていない係数の数を差し引いたものに対応する。
【0065】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する方法は、ピクチャを異なるサイズの変換ブロックに分割することを備える。さらにまた、方法は、所定の変換ブロックについて、所定の変換ブロックのサイズが、所定の閾値サイズを超えるかどうかをチェックすることによって、選択された変換を選択することを備える。所定の変換ブロックのサイズが所定の閾値サイズを超える場合、選択された変換を選択するためのデフォルトの方法が使用される。所定の変換ブロックのサイズが所定の閾値サイズを超えない場合、所定の変換ブロックについてデータストリーム内で送信されたインデックスによって変換の所定のリストから指される変換を選択された変換として使用され、変換の所定のリストは、恒等変換および非恒等変換を備える。さらに、方法は、所定の変換ブロックについて、データストリームから係数のブロックを復号することと、選択された変換が恒等変換である場合、係数のブロックを所定の変換ブロックの残差サンプル配列として使用することと、選択された変換が恒等変換でない場合、係数のブロックを選択された変換に対応する逆変換にかけ、所定の変換ブロックの残差サンプル配列を取得することと、を備える。さらにまた、方法は、残差サンプル配列を使用して所定の変換ブロックの予測を修正し、所定の変換ブロックを再構成することを備える。
【0066】
実施形態によれば、実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する方法は、所定の変換ブロックについて、所定の変換ブロックのデータストリームからインデックスを復号し、選択された変換として、インデックスが指す変換の所定のリストのうちの1つの変換を使用することによって選択された変換を選択することを備える。さらにまた、方法は、所定の変換ブロックについて、データストリームから係数のブロックを復号することと、係数のブロックが選択された変換にしたがって残差サンプル配列に関連付けられるように、係数のブロックから、所定の変換ブロックの残差サンプル配列を導出することと、残差サンプル配列を使用して所定の変換ブロックの予測を修正し、所定の変換ブロックを再構成することと、を備える。方法は、所定の変換ブロックについて、所定のブロックの選択された変換が1つ以上の変換の所定のセットに含まれるかどうかに応じて、データストリームから係数のブロックを復号することを備える。方法は、所定の変換ブロックについて、データストリームからの係数のブロックの復号において、所定のブロックの選択された変換が1つ以上の変換の所定のセットに含まれる場合、係数のブロックが少なくとも1つの非ゼロ係数を有するかどうかを通知する符号化ブロックフラグをデータストリームから復号することと、所定のブロックの選択された変換が1つ以上の変換の所定のセットに含まれていない場合、係数のブロックが少なくとも1つの非ゼロ係数を有すると推論することと、を備える(換言すれば、その後、所定のブロックの選択された変換が1つ以上の変換の所定のセットに含まれる場合、データストリームからCBFを復号しない、またはさらに換言すれば、CBFが復号されるデータストリームの現在の部分とは異なる構文要素を復号する)。
【0067】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する方法は、所定の変換ブロックについて、係数のブロックが少なくとも1つの非ゼロ係数を有するかどうかを通知するデータストリームからの符号化ブロックフラグを復号することを含み、データストリームから係数のブロックを復号することを備える。方法は、符号化ブロックフラグが、係数のブロックが少なくとも1つの非ゼロ係数を有することを通知する場合、所定の変換ブロックについて、所定の変換ブロックのデータストリームからインデックスを復号することによって選択された変換を選択することと、選択された変換として、インデックスが指す変換の所定のリストからの1つの変換を使用し、係数のブロックが選択された変換にしたがって残差サンプル配列に関連するように、係数のブロックから所定の変換ブロックの残差サンプル配列を導出することと、残差サンプル配列を使用して所定の変換ブロックの予測を修正し、所定の変換ブロックを再構成することと、を備える。さらにまた、方法は、符号化ブロックフラグが、係数のブロックが少なくとも1つの非ゼロ係数を有していないことを通知する場合、予測修正なしで所定の変換ブロックを再構成することを備える(換言すれば、その後、符号化ブロックフラグが、係数のブロックが少なくとも1つの非ゼロ係数を有しないことを通知する場合、インデックスが復号されるデータストリームの現在の部分からのインデックスとは異なる構文要素を復号することなどによって、データストリームからインデックスを復号しない)。
【0068】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する方法は、データストリームに応じて変換の所定のリストをポピュレートすること、またはポピュレートおよびソートすることを備える。方法は、変換の所定のリスト内の各変換が、可変長コードの1つのコードワードを割り当てられ、可変長コードのコードワードのコードワード長が、コードワードが割り当てられた変換の所定のリスト内の変換のランクとともに単調増加するように、可変長コードを使用してデータストリームからインデックスを復号し、選択された変換として、インデックスが指す変換の所定のリストのうちの1つの変換を使用することによって、所定の変換ブロックについて、選択された変換を選択することを備える。さらにまた、方法は、所定の変換ブロックについて、データストリームから係数のブロックを復号することと、係数のブロックが選択された変換にしたがって残差サンプル配列に関連付けられるように、係数のブロックから、所定の変換ブロックの残差サンプル配列を導出することと、残差サンプル配列を使用して所定の変換ブロックの予測を修正し、所定の変換ブロックを再構成することと、を備える。
【0069】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する方法は、所定の変換ブロックについて、可変長コードの第1のコードワードから構成される合成可変長コードワードと、第1のコードワードが可変長コードの最長コードワードである場合、それに続く固定長コードの第2のコードワードとを使用して、データストリームからの変換の所定のリストにインデックスを復号することによって選択された変換を選択することを備える。可変長コードの2つの非最長コードワードのうちの1つのみから構成される合成可変長コードのコードワードは、変換の所定のリストに含まれる恒等変換および所定の非恒等変換に割り当てられ、恒等変換および所定の非恒等変換を識別し、合成可変長コードのさらなるコードワードは、変換の所定のリストのさらなる非恒等変換に割り当てられ、さらなる非恒等変換を識別する。方法は、所定の変換ブロックについて、インデックスが指す変換の所定のリストの中の1つの変換を選択された変換として使用することによって選択された変換を選択することを備える。さらにまた、方法は、所定の変換ブロックについて、データストリームから係数のブロックを復号することと、係数のブロックが選択された変換にしたがって残差サンプル配列に関連付けられるように、係数のブロックから、所定の変換ブロックの残差サンプル配列を導出することと、残差サンプル配列を使用して所定の変換ブロックの予測を修正し、所定の変換ブロックを再構成することと、を備える。
【0070】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する方法は、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択することを備え、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備える。方法は、所定の変換ブロックについて、選択された変換が非恒等変換であるかどうかをチェックすることによって、データストリームから係数のブロックを復号することを備える。選択された変換が非恒等変換である場合、方法は、所定の係数位置を取得するために、係数のブロックの全ての係数をトラバースする走査順序に沿って、非ゼロ係数が最初に遭遇した場合、または係数のブロックの全ての係数をトラバースする走査順序に沿って、非ゼロ係数が最後に遭遇した場合に、データストリームから位置情報を復号することを備え(以下に留意されたい。上記実施形態では、この位置は、左上から右下に向かう走査順序に沿って測定される最後の位置と呼ばれるが、コーディングを開始した実際の走査は、これらの実施形態にしたがってそこで開始した。すなわち、実際のコーディングは、右下から左上隅に向かう逆の走査順序で行われた。ここで、走査順序はコーディング順である。双方の走査方向が予測される実施形態を参照されたい)、方法は、係数のブロックの全ての非ゼロ係数を含み且つ所定の係数位置から始めてまたはそれまで走査順序によってトラバースされる、データストリームから係数のブロックの第1の係数を復号することと、第1の係数とは異なる係数のブロックの第2の係数をゼロであると推論することと、を備える。選択された変換が恒等変換である場合、方法は、データストリームから係数ブロックの全ての係数を復号することを備える。さらにまた、方法は、係数のブロックが選択された変換にしたがって残差サンプル配列に関連付けられるように、係数のブロックから、所定の変換ブロックの残差サンプル配列を導出することと、残差サンプル配列を使用して所定の変換ブロックの予測を修正し、所定の変換ブロックを再構成することと、を備える。
【0071】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する方法は、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択することを備え、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備える。方法は、所定の変換ブロックについて、係数のブロックが分割されているサブブロック内のデータストリームから係数のブロックの係数を復号し、データストリーム内のサブブロックフラグがゼロであることを通知するサブブロック内の係数がゼロであると推論し、データストリーム内のサブブロックフラグがデータストリームから非ゼロであることを通知するサブブロック内の係数を復号することによって、データストリームから係数のブロックを復号することを備える。選択された変換が少なくとも1つの非恒等変換のうちの1つである場合、第1のサブブロックフラグ、および最後のサブブロックフラグのうちの少なくとも1つを除いて、データストリームからサブブロックフラグを順次復号することと、第1および最後のサブブロックフラグのうちの少なくとも1つが非ゼロであることを通知すると推論することと、選択された変換が恒等変換である場合、全てのサブブロックについてデータストリームからサブブロックフラグを復号することと、を備える。さらにまた、方法は、係数のブロックが選択された変換にしたがって残差サンプル配列に関連付けられるように、係数のブロックから、所定の変換ブロックの残差サンプル配列を導出することと、残差サンプル配列を使用して所定の変換ブロックの予測を修正し、所定の変換ブロックを再構成することと、を備える。
【0072】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する方法は、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択することを備え、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備える。方法は、所定の変換ブロックについて、係数のブロックが分割されているサブブロック内のデータストリームから係数のブロックを復号し、データストリーム内のサブブロックフラグがゼロであることを通知するサブブロック内の係数がゼロであると推論し、データストリーム内のサブブロックフラグがデータストリームから非ゼロであることを通知するサブブロック内の係数を復号するとともに、コンテキスト適応エントロピー復号によっておよびコンテキストを使用してデータストリームから現在復号されているサブブロックフラグを復号することによって、データストリームから係数のブロックを復号することを備える。コンテキストは、選択された変換が少なくとも1つの非恒等変換のうちの1つである場合、現在復号されているサブブロックフラグに隣接するサブブロックに関連するサブブロックフラグの論理和に依存し、選択された変換が恒等変換である場合、コンテキストは、現在復号されているサブブロックフラグに隣接するサブブロックに関連するサブブロックフラグの算術和に依存する。さらにまた、方法は、係数のブロックが選択された変換にしたがって残差サンプル配列に関連付けられるように、係数のブロックから、所定の変換ブロックの残差サンプル配列を導出することと、残差サンプル配列を使用して所定の変換ブロックの予測を修正し、所定の変換ブロックを再構成することと、を備える。
【0073】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する方法は、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択することを備え、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備える。方法は、所定の変換ブロックについて、現在の係数について、コンテキストを使用して現在の係数がゼロであるか否かを示す重要度フラグを復号することによってデータストリームから係数のブロックを復号することを備える。コンテキストは、選択された変換が恒等変換である場合、現在の係数に直接隣接する係数の第1のセットのうちの非ゼロである係数の数に依存し、コンテキストは、選択された変換が少なくとも1つの非恒等変換のうちの1つである場合、係数の第1のセット、係数の第1のセットよりも現在の係数から遠くに位置する係数、係数の第2のセットの値、および現在の係数の位置を含む係数の第2のセットのうちの非ゼロである係数の数に依存する。さらにまた、方法は、係数のブロックが選択された変換にしたがって残差サンプル配列に関連付けられるように、係数のブロックから、所定の変換ブロックの残差サンプル配列を導出することと、残差サンプル配列を使用して所定の変換ブロックの予測を修正し、所定の変換ブロックを再構成することと、を備える。
【0074】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する方法は、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択することを備え、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備える。方法は、所定の係数の絶対値がXよりも大きいか否かを示すN個の大なりXフラグをコンテキスト適応エントロピー復号することによって所定の係数を復号することによって、所定の変換ブロックについて、データストリームから係数のブロックを復号することを備える。さらにまた、方法は、所定の係数の絶対値がNに依存する絶対閾値を超える量を示す余りを、可変長コードを使用して復号する、ことによって所定の係数を復号することによって、所定の変換ブロックについて、データストリームから係数のブロックを復号することを備え、Nは、選択された変換が恒等変換である場合、選択された変換が少なくとも1つの非恒等変換のうちの1つである場合と比較して大きい。さらに、方法は、係数のブロックが選択された変換にしたがって残差サンプル配列に関連付けられるように、係数のブロックから、所定の変換ブロックの残差サンプル配列を導出することと、残差サンプル配列を使用して所定の変換ブロックの予測を修正し、所定の変換ブロックを再構成することと、を備える。
【0075】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する方法は、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択することを備え、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備える。方法は、所定のコンテキストを使用してコンテキスト適応エントロピー復号を行い、選択された変換が恒等変換である場合、所定のコンテキストに関連付けられた確率を更新し、選択された変換が少なくとも1つの非恒等変換のうちの1つである場合、バイパス復号(例えば、固定等確率を用いたコンテキスト適応エントロピー復号)することによって、所定の係数の符号を復号することによって、所定の変換ブロックについて、データストリームから係数のブロックを復号するように構成されている。さらにまた、方法は、係数のブロックが選択された変換にしたがって残差サンプル配列に関連付けられるように、係数のブロックから、所定の変換ブロックの残差サンプル配列を導出することと、残差サンプル配列を使用して所定の変換ブロックの予測を修正し、所定の変換ブロックを再構成することと、を備える。
【0076】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する方法は、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択することを備え、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備える。方法は、所定の係数の絶対値がXよりも大きいか否かを示すN個の大なりXフラグをコンテキスト適応エントロピー復号することによって所定の係数を復号することによって、所定の変換ブロックについて、データストリームから係数のブロックを復号することを備える。さらに、方法は、所定の係数の絶対値がNに依存する絶対閾値を超える量を示す余りを、可変長コードを使用して復号する、ことによって所定の係数を復号することによって、所定の変換ブロックについて、データストリームから係数のブロックを復号することを備える。選択された変換が少なくとも1つの非恒等変換のうちの1つである場合、パスごとにN個の大なりXフラグのうちの1つ以上によってXを増加させながら順次N個の大なりXフラグをコンテキスト適応エントロピー復号することによって一連のパス内のN個の大なりXフラグのコンテキスト適応エントロピー復号を実行することと、一連のパスの間にコンテキスト適応エントロピー復号を使用して符号化されたフラグの数を記録することと、数が所定のフラグ閾値を超える場合、N個の大なりXフラグのコンテキスト適応エントロピー復号を停止することと、を備える。選択された変換が恒等変換である場合、順次N個の大なりXフラグのコンテキスト適応エントロピー復号を実行することと、N個の大なりXフラグの中の重要度フラグ(X=0)を復号した後、N個の大なりXフラグの中のさらなるN個の大なりXフラグの前に、所定の係数が絶対閾値よりも大きいかどうかを示す大なりXフラグ-バイパスフラグを復号することと、所定の係数が絶対閾値よりも大きいことを示す大なりXフラグ-バイパスフラグの場合、N個の大なりXフラグのコンテキスト適応エントロピー復号を停止することと、を備える(例えば、所定の係数が絶対閾値よりも大きくないことを示す大なりXフラグの場合、N個の大なりXフラグのうちの最後の1つを除くさらなる大なりXフラグに対するN個の大なりXフラグのコンテキスト適応エントロピー復号を再開する)。さらにまた、方法は、係数のブロックが選択された変換にしたがって残差サンプル配列に関連付けられるように、係数のブロックから、所定の変換ブロックの残差サンプル配列を導出することと、残差サンプル配列を使用して所定の変換ブロックの予測を修正し、所定の変換ブロックを再構成することと、を備える。
【0077】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する方法は、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択することを備え、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備える。方法は、所定の係数の絶対値がXよりも大きいか否かを示すN個の大なりXフラグをコンテキスト適応エントロピー復号し、可変長コードを使用して、所定の係数の絶対値がNに依存する絶対閾値を超える量を示す余りを復号し、所定の係数の符号を復号することによって、所定の係数について、所定の走査順序で係数のブロックの係数をトラバースする一連のパスにおいて、所定の変換ブロックについて、データストリームから係数のブロックを復号することを備え、方法は、選択された変換が恒等変換であるかまたは少なくとも1つの非恒等変換のうちの1つであるかに応じて、一連のパスにわたるN個の大なりXフラグ、余りおよび符号の復号を異なって分配することを備える。さらにまた、方法は、係数のブロックが選択された変換にしたがって残差サンプル配列に関連付けられるように、係数のブロックから、所定の変換ブロックの残差サンプル配列を導出することと、残差サンプル配列を使用して所定の変換ブロックの予測を修正し、所定の変換ブロックを再構成することと、を備える。
【0078】
上述したようなピクチャを符号化する装置および方法は、上述したピクチャを復号する装置と同じ考慮事項に基づいている。ところで、ピクチャを符号化する装置および方法は、ピクチャを復号する装置に関しても説明されている全ての特徴および/または機能を有して完了されることができる。
【0079】
図面は必ずしも縮尺どおりではなく、代わりに、一般に本発明の原理を説明することに重点が置かれている。以下の説明では、本発明の様々な実施形態が、以下の図面を参照して説明される。
【図面の簡単な説明】
【0080】
【
図1】本発明の実施形態にかかる、ピクチャをデータストリームに予測コーディングするビデオ符号化器の概略図を示している。
【
図2】本発明の実施形態にかかる、データストリームからピクチャを予測復号するように構成されたビデオ復号器の概略図を示している。
【
図3】本発明の実施形態にかかる、一方では再構成信号と、他方ではデータストリーム内で通知される予測残差信号と予測信号との組み合わせとの間の関係の概略図を示している。
【
図4】本発明の実施形態にかかる、所定の変換ブロックのサイズに応じて選択された変換を選択するように構成された、ピクチャを復号する装置の概略図を示している。
【
図5】本発明の実施形態にかかる、選択された変換に依存する係数のブロックを復号するように構成された、ピクチャを復号する装置の概略図を示している。
【
図6】本発明の実施形態にかかる、ピクチャを復号する装置の概略図を示している。
【
図7】本発明の実施形態にかかる、符号化ブロックフラグに依存する所定の変換ブロックを再構成するように構成された、ピクチャを復号する装置の概略図を示している。
【
図8】本発明の実施形態にかかる、変換の所定のリストをポピュレートまたはポピュレートおよびソートするように構成された、ピクチャを復号する装置の概略図を示している。
【
図9】本発明の実施形態にかかる、合成可変長コードの概略図を示している。
【
図10】本発明の実施形態にかかる、選択された変換に依存する位置情報を復号するように構成された、ピクチャを復号する装置の概略図を示している。
【
図11】本発明の実施形態にかかる、係数のブロックの全ての係数をサブブロック単位で復号するように構成された、ピクチャを復号する装置の概略図を示している。
【
図12】本発明の実施形態にかかる、選択された変換に依存するサブブロックフラグを復号するように構成された、ピクチャを復号する装置の概略図を示している。
【
図13a】本発明の実施形態にかかる、少なくとも1つの先行するサブブロックフラグが非ゼロであることを通知する場合のサブブロックフラグを復号する概略図を示している。
【
図13b】本発明の実施形態にかかる、全ての先行するサブブロックフラグがゼロであることを通知する場合のサブブロックフラグを復号する概略図を示している。
【
図14】本発明の実施形態にかかる、コンテキスト適応エントロピー復号によってサブブロックフラグを復号するように構成された、ピクチャを復号する装置の概略図を示している。
【
図15】本発明の実施形態にかかる、コンテキストを使用してsigフラグを復号するように構成された、ピクチャを復号する装置の概略図を示している。
【
図16】本発明の実施形態にかかる、N個の大なりXフラグをコンテキスト適応エントロピー復号し、可変長コードを使用して余りを復号することによって係数のブロックを復号するように構成された、ピクチャを復号する装置の概略図を示している。
【
図17】本発明の実施形態にかかる、選択された変換に依存する係数の符号を復号するように構成された、ピクチャを復号する装置の概略図を示している。
【
図18】本発明の実施形態にかかる、選択された変換に依存する複数のパスにおける係数のブロックを復号するように構成された、ピクチャを復号する装置の概略図を示している。
【
図19】本発明の実施形態にかかる、N個の大なりXフラグ、余り、および符号の復号を選択された変換に応じて一連のパスにわたって異なって分配することによって、複数のパスにおいて係数のブロックを復号するように構成された、ピクチャを復号する装置の概略図を示している。
【
図20】本発明の実施形態にかかる、各フラグが絶対値ドメインを低減する、1つ以上のフラグを復号することによって複数のパスにおいて係数のブロックを復号するように構成された、ピクチャを復号する装置の概略図を示している。
【
図21】本発明の実施形態にかかる、選択された変換に依存する走査順序を有する係数のブロックを復号するように構成されたピクチャを復号する装置の概略図を示している。
【
図22】本発明の実施形態にかかる、選択された変換が非恒等変換である場合に符号確率傾向インデックスに依存する係数の符号を復号するように構成された、ピクチャを復号する装置の概略図を示している。
【
図23】本発明の実施形態にかかる、選択された変換が恒等変換である場合に構文要素に依存する係数の符号を復号するように構成された、ピクチャを復号する装置の概略図を示している。
【
図24】本発明の実施形態にかかる、選択された変換が恒等変換である場合に以前に復号された係数の符号の統計量に依存する係数の符号を復号するように構成された、ピクチャを復号する装置の概略図を示している。
【
図25】変換ブロックおよび変換ブロックのサブブロックの概略図を示している。
【発明を実施するための形態】
【0081】
等しいまたは同等の要素または同等または同等の機能を有する要素は、異なる図で発生する場合であっても、同等または同等の参照符号によって以下の説明で示されている。
【0082】
以下の説明では、本発明の実施形態のより完全な説明を提供するために、複数の詳細が示されている。しかしながら、本発明の実施形態がこれらの特定の詳細なしで実施されることができることは当業者にとって明らかであろう。他の例では、本発明の実施形態を曖昧にすることを回避するために、周知の構造および装置が詳細ではなくブロック図の形態で示されている。さらに、以下に説明する異なる実施形態の特徴は、特に明記しない限り、互いに組み合わせることができる。
【0083】
以下の図面の説明は、本発明の実施形態が組み込まれることができるコーディングフレームワークの例を形成するために、ビデオのピクチャをコーディングするためのブロックベースの予測コーデックの符号化器および復号器の説明の提示から始まる。それぞれの符号化器および復号器は、
図1から
図3に関して説明される。以下では、本発明の概念の実施形態の説明が、そのような概念が
図1および
図2の符号化器および復号器にそれぞれどのように組み込まれることができるかに関する説明とともに提示されるが、後続の
図4以降で説明される実施形態は、
図1および
図2の符号化器および復号器の基礎となるコーディングフレームワークにしたがって動作しない符号化器および復号器を形成するためにも使用されることができる。
【0084】
図1は、変換ベースの残差コーディングを例示的に使用してピクチャ12をデータストリーム14に予測コーディングする装置(例えば、ビデオ符号化器)を示している。装置または符号化器は、参照符号10を使用して示されている。
図2は、対応する復号器20、すなわち、やはり変換ベースの残差復号を使用してデータストリーム14からピクチャ12’を予測復号するように構成された装置20を示し、アポストロフィは、復号器20によって再構成されたピクチャ12’が、予測残差信号の量子化によって導入される符号化損失に関して、装置10によって最初に符号化されたピクチャ12から逸脱していることを示すために使用されている。
図1および
図2は、例示的に、変換ベースの予測残差コーディングを使用するが、本特許出願の実施形態は、この種の予測残差コーディングに限定されるものではない。これは、以下に概説されるように、
図1および
図2に関して説明される他の詳細にもあてはまる。
【0085】
符号化器10は、予測残差信号を空間スペクトル変換し、このようにして得られた予測残差信号をデータストリーム14に符号化するように構成されている。同様に、復号器20は、データストリーム14からの予測残差信号を復号し、このようにして得られた予測残差信号をスペクトル空間変換するように構成されている。空間スペクトル変換の変換タイプは、後続の
図4以降で説明する実施形態にかかる符号化器10によってデータストリーム14内で通知されることができる。同様に、スペクトル空間変換の変換タイプは、後続の
図4以降で説明する実施形態にかかる復号器20によってデータストリーム14から読み取られることができる。
【0086】
内部的に、符号化器10は、本発明の実施形態によれば、元の信号、すなわちピクチャ12からの予測信号26の偏差を測定するために予測残差24を生成する予測残差信号形成器22を備えることができ、予測信号26は、1つ以上の予測ブロックのセットの線形結合として解釈されることができる。予測残差信号形成器22は、例えば、元の信号から、すなわちピクチャ12から予測信号を減算する減算器であってもよい。次いで、符号化器10は、同じく符号化器10に含まれる量子化器32によって量子化されるスペクトル領域予測残差信号24’を取得するために、予測残差信号24を空間スペクトル変換する変換器28をさらに備える。このように量子化された予測残差信号24’’は、ビットストリーム14に符号化される。これは、後続の
図4以降で説明する実施形態にかかる変換タイプ依存変換係数レベルコーディングによって実行されることができる。この目的のために、符号化器10は、必要に応じて、データストリーム14に変換および量子化される予測残差信号をエントロピー符号化するエントロピーコーダ34を備えることができる。
【0087】
予測信号26は、データストリーム14に符号化され、そこから復号可能な予測残差信号24’’に基づいて、符号化器10の予測段36によって生成される。この目的のために、予測段36は、
図1に示すように、量子化損失以外の信号24’に対応するスペクトル領域予測残差信号24’’を得るように予測残差信号24’’を逆量子化する逆量子化器38と、量子化損失以外の元の予測残差信号24に対応する予測残差信号24’’’を取得するために、後者の予測残差信号24’’を逆変換、すなわちスペクトル空間変換する逆変換器40とを内部に備えることができる。次いで、予測段36の結合器42は、再構成信号46、すなわち元の信号12の再構成を取得するために、加算などによって予測信号26および予測残差信号24’’’’を再結合する。再構成された信号46は、信号12’に対応することができる。次いで、予測段36の予測モジュール44は、例えば、空間予測、すなわちピクチャ内予測、および/または時間予測、すなわちピクチャ間予測を使用して、信号46に基づいて予測信号26を生成する。
【0088】
同様に、復号器20は、
図2に示すように、予測段36に対応する構成要素から内部的に構成され、予測段に対応する方法で相互接続されることができる。特に、復号器20のエントロピー復号器50は、データストリームから量子化されたスペクトル領域予測残差信号24’’をエントロピー復号することができ、その際、逆量子化器52、逆変換器54、結合器56、および予測モジュール58は、予測段36のモジュールに関して上述した方法で相互接続されて協働し、予測残差信号24’’に基づいて再構成された信号を回復し、その結果、
図2に示すように、結合器56の出力は再構成された信号、すなわちピクチャ12’をもたらす。復号器20によって実行される復号は、後続の
図4以降で説明する実施形態にかかる変換タイプ依存変換係数レベル復号とすることができる。
【0089】
上記では具体的に説明されていないが、符号化器10は、例えば、いくつかのレートおよび歪み関連基準、すなわち符号化コストを最適化する方法などのいくつかの最適化方式にしたがって、例えば、予測モード、動きパラメータなどを含むいくつかの符号化パラメータを設定することができることは容易に明らかである。例えば、符号化器10および復号器20ならびに対応するモジュール44、58は、それぞれ、イントラ符号化モードおよびインター符号化モードなどの異なる予測モードをサポートすることができる。符号化器および復号器がこれらの予測モードタイプを切り替える粒度は、それぞれ、ピクチャ12および12’のコーディングセグメントまたは符号化ブロックへの分割に対応することができる。これらのコーディングセグメントの単位で、例えば、ピクチャは、イントラ符号化されているブロックとインター符号化されているブロックとに分割されることができる。
【0090】
イントラ符号化ブロックは、以下により詳細に概説されるように、それぞれのブロック(例えば、現在ブロック)の空間的な、既に符号化/復号された近傍(例えば、現在のテンプレート)に基づいて予測される。指向性イントラ符号化モードまたは角度イントラ符号化モードを含むいくつかのイントラ符号化モードが存在することができ、それらのモードにしたがって、それぞれの指向性イントラ符号化モードに固有の特定の方向に沿った近傍のサンプル値をそれぞれのイントラ符号化セグメントに外挿することによってそれぞれのセグメントが満たされる、それぞれのイントラ符号化セグメントに対して選択されることができる。イントラ符号化モードは、例えば、それぞれのイントラ符号化されたブロックの予測がそれぞれのイントラ符号化されたセグメント内の全てのサンプルにDC値を割り当てるDC符号化モード、および/またはそれぞれのブロックの予測が、隣接するサンプルに基づいて2次元線形関数によって定義された平面の駆動傾斜およびオフセットを有するそれぞれのイントラ符号化されたブロックのサンプル位置にわたる2次元線形関数によって記述されたサンプル値の空間分布であると近似または決定される平面イントラ符号化モードなどの1つ以上のさらなるモードも含むことができる。
【0091】
これと比較して、インター符号化されたブロックは、例えば時間的に予測されることができる。インター符号化されたブロックの場合、それぞれのインター符号化されたブロックの予測信号を取得するために、以前に符号化/復号されたピクチャがサンプリングされる、ピクチャ12が属するビデオの以前に符号化されたピクチャ(例えば、参照ピクチャ)の部分の空間変位を示す動きベクトルが、データストリーム14内で通知されることができる。これは、量子化スペクトル領域予測残差信号24’’を表すエントロピー符号化された変換係数レベルなど、データストリーム14に含まれる残差信号符号化に加えて、データストリーム14は、符号化モードを様々なブロックに割り当てるための符号化モードパラメータ、インター符号化されたセグメントの動きパラメータなど、ブロックのいくつかの予測パラメータ、およびピクチャ12および12’のそれぞれのセグメントへの分割を制御および通知するためのパラメータなどの任意選択のさらなるパラメータをそこに符号化することができることを意味する。復号器20は、これらのパラメータを使用して、符号化器が行ったのと同じ方法でピクチャを分割し、セグメントに同じ予測モードを割り当て、同じ予測を実行して同じ予測信号をもたらす。
【0092】
図3は、一方では再構成信号、すなわち再構成ピクチャ12’と、他方ではデータストリーム14で通知される予測残差信号24’’’と予測信号26との組み合わせとの間の関係を示している。既に上述したように、組み合わせは、加算であってもよい。予測信号26は、
図3では、ピクチャ領域を、ハッチングを使用して例示的に示されるイントラ符号化ブロックと、ハッチングを使用せずに例示的に示されるインター符号化ブロックとに分割したものとして示されている。分割は、正方形ブロックまたは非正方形ブロックの行および列へのピクチャ領域の規則的な分割、または四分木分割などのような、木ルートブロックから様々なサイズの複数の葉ブロックへのピクチャ12の多重木分割などの任意の分割とすることができ、それらの混合が
図3に示されており、そこでは、ピクチャ領域は、木ルートブロックの行および列に最初に分割され、次いで、再帰的多重木分割にしたがって1つ以上の葉ブロックにさらに分割される。
【0093】
ここでも、データストリーム14は、イントラ符号化されたブロック80のために符号化されたイントラ符号化モードを有することができ、これは、サポートされているいくつかのイントラ符号化モードのうちの1つを、それぞれのイントラ符号化されたブロック80へ割り当てる。インター符号化されたブロック82の場合、データストリーム14は、そこに符号化された1つ以上の動きパラメータを有することができる。一般的に言えば、インター符号化されたブロック82は、時間的に符号化されることに限定されるものではない。あるいは、インター符号化されたブロック82は、ピクチャ12が属するビデオの以前に符号化されたピクチャ、または符号化器および復号器がそれぞれスケーラブルな符号化器および復号器である場合には、別のビューまたは階層的に下位のレイヤのピクチャなど、現在のピクチャ12自体を超える以前に符号化された部分から予測された任意のブロックであってもよい。
【0094】
図3の予測残差信号24’’’’もまた、ピクチャ領域のブロック84への分割として示されている。これらのブロックは、符号化ブロック80および82と区別するために、変換ブロックと呼ばれる場合がある。実際には、
図3は、符号化器10および復号器20が、ピクチャ12およびピクチャ12’のブロックへの2つの異なる分割、すなわち、符号化ブロック80および82への一方の分割、および変換ブロック84への他方の分割を使用することができることを示している。双方の分割は、同じであってもよく、すなわち、各符号化ブロック80および82は、同時に変換ブロック84を形成してもよいが、
図3は、例えば、ブロック80および82の2つのブロック間の任意の境界が2つのブロック84間の境界を覆うように、変換ブロック84への分割が符号化ブロック80、82への分割の拡張を形成する場合を示し、代替的に言えば、各ブロック80、82は、変換ブロック84のうちの1つと一致するか、または変換ブロック84のクラスタと一致する。しかしながら、変換ブロック84が代替的にブロック80、82間のブロック境界を横切ることができるように、これらの区画はまた、互いに独立して判定または選択されてもよい。したがって、変換ブロック84への分割に関する限り、ブロック80、82への分割に関して提示されたものと同様の記述が真であり、すなわち、ブロック84は、(行および列への配置の有無にかかわらず)ブロックへのピクチャ領域の規則的な分割の結果、ピクチャ領域の再帰的複数木分割の結果、またはそれらの組み合わせ、または任意の他の種類のブロック化とすることができる。単なる余談であるが、ブロック80、82、および84は、二次、長方形、または任意の他の形状に限定されないことに留意されたい。
【0095】
図3は、さらに、予測信号26と予測残差信号24’’’’との組み合わせが再構成信号12’を直接もたらすことを示している。しかしながら、代替実施形態によれば、複数の予測信号26を予測残差信号24’’’と組み合わせてピクチャ12’にすることができることに留意されたい。
【0096】
図3では、変換ブロック84は、以下の重要度を有するものとする。変換器28および逆変換器54は、これらの変換ブロック84単位で変換を行う。例えば、多くのコーデックは、全ての変換ブロック84に対して何らかの種類のDST(離散サイン変換)またはDCT(離散コサイン変換)を使用する。いくつかのコーデックは、変換ブロック84のいくつかについて、予測残差信号が空間領域において直接符号化されるように、変換をスキップすることを可能にする。しかしながら、後述する実施形態によれば、符号化器10および復号器20は、それらがいくつかの変換をサポートするように構成されている。例えば、符号化器10および復号器20によってサポートされる変換は、以下を備えることができる:
・DCT-II(またはDCT-III)、ここで、DCTは離散コサイン変換を表す
・DST-IV、ここで、DSTは離散サイン変換を表す
・DCT-IV
・DST-VII
・恒等変換(IT)
【0097】
当然ながら、変換器28は、これらの変換の順変換バージョンの全てをサポートするが、復号器20または逆変換器54は、その対応する逆方向または逆方向バージョンをサポートする:
・逆DCT-II(または逆DCT-III)
・逆DST-IV
・逆DCT-IV
・逆DST-VII
・恒等変換(IT)
【0098】
後続の
図4およびその後に記載される実施形態によれば、変換タイプ依存変換係数レベルコーディングまたは復号は、符号化器または復号器によって使用されることができる。
【0099】
以下の説明は、どの変換が符号化器10および復号器20によってサポートされることができるのかについてのさらなる詳細を提供する。いずれの場合でも、サポートされる変換のセットは、1つのスペクトルから空間への変換または空間からスペクトルへの変換のようなただ1つの変換を含むことができるが、変換が符号化器または復号器によって全くまたは単一のブロック80、82、84に対して使用されないことも可能であることに留意されたい。
【0100】
既に上で概説したように、
図1から
図3は、本特許出願にかかる符号化器および復号器の特定の例を形成するために、以下にさらに説明する本発明の概念を実施することができる例として提示されている。その限りにおいて、
図1および
図2の符号化器および復号器は、それぞれ、本明細書で後述する符号化器および復号器の可能な実装形態を表すことができる。しかしながら、
図1および
図2は単なる例である。しかしながら、本特許出願の実施形態にかかる符号化器は、例えば、ブロック80への分割が
図3に例示された方法とは異なる方法で実行されること、および/または変換が全くまたは単一のブロックに対して使用されないことなど、異なる概念を使用し、
図1の符号化器とは異なるブロックベースのピクチャ12の符号化を実行することができる。同様に、本特許出願の実施形態にかかる復号器は、以下にさらに概説される符号化概念を使用してデータストリーム14からピクチャ12’のブロックベースの復号を実行することができるが、例えば、
図2の復号器20とは、同じピクチャ12’を
図3に関して説明したものとは異なる方法でブロックにサブ分割する点、および/または同じものが変換領域ではデータストリーム14から予測残差を導出しないが、空間領域では、例えば、および/または同じものが全くまたは単一のブロックに対して変換を使用しない点で異なることができる。
【0101】
提示された発明は、複数の変換タイプを選択するための統合された通知概念を、選択された変換タイプのための専用の変換係数レベルコーディング段階とともに説明する。そのような設計は、ハイブリッドビデオ圧縮用途のための入力信号特性に応じて圧縮効率の改善をもたらす。
本発明は、通知とともに異なる変換タイプ構成を統合する。さらにまた、より高い圧縮効率を可能にする変換タイプ依存レベルコーディングが提示される。
変換タイプ通知の統合
態様の概要(有益な注記):
1.以下を有するDCT-IIおよびTSMを含む合成MTS構文:
・単一の値を使用した最大許容TSMサイズとMTSサイズとの組み合わせ
・TSMおよびMTSに適用可能な色成分の組み合わせ
・信号レベル
2.統合されたMTS構文とCBFとの相互作用
・成分ごとの各重要変換ブロックについての、例えば、輝度に制限されている場合にのみ輝度についての信号MTSモード
・前ではなくMTSモード後のCBF
3.統合されたMTS構文のセマンティクス
・通常のMTSモード内のTS/DCT-IIの位置
・MPMリスト、イントラモードと同様の、インデックスの適応順序
4.統合されたMTS構文の二値化およびコンテキストモデリング
・モードについての単項または固定長コード
・専用コンテキストモデルまたは別個のコンテキストモデル
・TS/DCT-2モードについての他のコンテキストモデリング
【0102】
1.異なる手法としてのTSMおよびMTSを考慮する代わりに、提示された発明は、2つの要素を統合されたMTS構文に組み合わせる。1つの態様は、MTSおよびTSMの双方について、同じ最大許容サイズを使用することからなる(
図4を比較されたい)。この最大サイズは、固定されてもよく、またはビットストリーム内の高レベルの構文構造で、例えばシーケンス、ピクチャ、スライスまたはタイルレベルで通知されてもよい。
【0103】
図4は、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャ12aを復号する装置100を示している。装置は、ピクチャ12aを異なるサイズの変換ブロック84に分割し、所定の変換ブロック84cについて、所定の変換ブロックのサイズが所定の閾値サイズ111を超えるかどうかをチェックすることによって選択された変換112を選択する110ように構成されている。所定の変換ブロック84cのサイズが所定の閾値サイズ110を超える場合、選択された変換112を選択するためにデフォルトの方法114が使用される。所定の変換ブロック84cのサイズが所定の閾値サイズ111を超えない場合、所定の変換ブロック84cについてデータストリーム14内で送信されたインデックスが変換の所定のリスト116から指す変換が、選択された変換112として使用される。変換の所定のリスト116は、恒等変換117および非恒等変換118を備える。さらにまた、装置100は、所定の変換ブロック84cについて、データストリーム14からの係数のブロック(cブロック)を復号する120ように構成されている。cブロックおよび選択された変換112に基づいて、装置は、例えば、残差サンプル配列132を判定または識別する130ように構成されている。選択された変換112が恒等変換117である場合、装置は、係数のブロックを所定の変換ブロック84cの残差サンプル配列132として使用するように構成され、選択された変換112が恒等変換117でない場合、装置は、係数のブロックを選択された変換112に対応する逆変換131にかけ、所定の変換ブロック84cの残差サンプル配列132を取得するように構成されている。例えば、これは空間的または時間的予測である可能性があり、これは後続の全ての発生に対して有効ではない可能性がある所定の変換ブロックの予測84’cは、残差サンプル配列132を使用して装置によって修正され、所定の変換ブロック84cを再構成する84’’c。
【0104】
実施形態によれば、変換を選択する110デフォルトの方法114は、所定のリスト116内の変換を指すデータストリームからデフォルトインデックスを復号すること、またはデータストリームからデフォルト変換を復号することを備えることができる。あるいは、装置100によって知られているデフォルト変換は、デフォルト方法114として選択されることができる110。
【0105】
実施形態によれば、装置100は、所定の変換ブロック84cのサイズが所定の閾値サイズ111を超える場合、選択された変換にデフォルトの非恒等変換を使用するように構成されている。デフォルトの非恒等変換は、例えば、変換の所定のリスト116、例えば、非恒等変換118のうちの1つに含まれる。
実施形態によれば、装置100は、データストリーム14から所定の閾値サイズ111を導出するように構成されている。
【0106】
実施形態によれば、装置100は、所定の変換ブロック84cのサイズが所定の閾値サイズ111を超えない場合、所定の変換ブロック84cについてデータストリーム14内の現在位置からインデックスを復号し115、所定の変換ブロックのサイズが所定の閾値サイズを超える場合、データストリーム14の現在位置からインデックス以外の構文要素を復号するように構成されている。インデックス以外の構文要素は、例えば、スキップおよび読み出しではないという意味ではなく、データストリーム内のその位置までは構文が同じとすることができるが、データストリーム14は、実際にはインデックスを含まないという点で、インデックスの代わりに、データストリーム14から読み出される別の要素である。
【0107】
本発明の好ましい実施形態では、TSMおよびMTSは、同じ色成分に適用される。1つの好ましいバージョンでは、TSMおよびMTSの双方が輝度成分(すなわち、彩度ブロックについて、標準的なDCT-II変換が使用される)にのみ適用される。換言すれば、変換ブロック84は、輝度変換ブロックであり、装置100は、彩度変換ブロックに固定デフォルト変換を使用するように構成されている。
【0108】
別の好ましいバージョンでは、TSMおよびMTSの双方がブロックの全ての色成分に適用される。換言すれば、装置100は、例えば、選択された変換112を、所定の変換ブロック84c内のピクチャの輝度および彩度成分に適用するように構成されている。追加的にまたは代替的に、装置100は、ピクチャ12aの輝度成分および彩度成分の成分ごとに、所定の変換ブロックについてのデータストリーム14からのインデックスを復号する115ように構成されている。使用されるバージョン(輝度成分のみまたは全ての成分)もまた、ビットストリームにおいて通知されることができる。換言すれば、装置100は、例えば、データストリーム14内の信号から、変換ブロック84が輝度変換ブロックであり、固定デフォルト変換が彩度変換ブロックに使用されるべきかどうか、選択された変換112が所定の変換ブロック内のピクチャの輝度成分および彩度成分に適用されるべきかどうか、またはデータストリームからのインデックスがピクチャの輝度成分および彩度成分の成分ごとに所定の変換ブロックについて復号されるべきかどうか115を導出するように構成されている。全ての変換タイプについて同じ条件を有するため、各変換ブロックに使用される変換タイプを指定する単一の構文がビットストリームにおいて送信されることができる。TU MTSインデックスを使用するそのような統合構文の一例が以下の表に示されている。
【0109】
【0110】
前述の例では、統合されたMTS構文は、TUレベルで通知される。しかしながら、CUが複数のTUに分割されている場合、統合されたMTS構文はまた、CUレベル、すなわちCU MTSインデックスにおいて通知されることもできる。換言すれば、装置100は、例えば、所定の変換ブロックを含む複数の変換ブロックに分割されたピクチャの符号化ブロックのデータストリーム14からインデックスを復号する115ように構成されている。場合によっては、統合されたMTS構文は、より高いレベルにおけるCUの分離したセットとして通知される可能性があり、すなわち、インデックスは、符号化ブロックのセットについて有効である可能性があることに留意されたい。別の変形は、例えば、「符号化ブロック」が不連続セットのうちの1つである、より高いレベルにおけるCUの不連続セットの統合されたMTS構文を通知することである。
【0111】
実施形態によれば、装置100は、
図5で説明したように係数のブロックの復号120を実行することができる。換言すれば、
図5は、所定の変換ブロック84cについて、データストリーム14からの係数のブロック122の復号120を示している。所定のブロック84cについての選択された変換112が1つ以上の変換の所定のセット125に含まれるかどうかに応じて、装置は、所定のブロックについての選択された変換112が1つ以上の変換の所定のセット125に含まれる場合、係数のブロック122が少なくとも1つの非ゼロ係数を有するかどうかを通知するデータストリーム14からの符号化ブロックフラグ126’を復号する126ように構成されている(127を参照)。あるいは、所定のブロック84cについての選択された変換112が1つ以上の変換の所定のセット125に含まれない場合、係数のブロック122が少なくとも1つの非ゼロ係数を有すると推論する(127’を参照)。換言すれば、次いで、データストリームからCBFを復号しない、またはさらに換言すれば、所定のブロックの選択された変換が1つ以上の変換の所定のセットに含まれる場合、CBFが復号されるデータストリームの現在の部分とは異なる構文要素を復号する。
【0112】
実施形態によれば、1つ以上の変換の所定のセット125は、選択された変換を選択するためのデフォルトの方法にしたがってデフォルトで選択された恒等変換125aおよびデフォルトの非恒等変換125bを備える。
【0113】
2.一般に、変換ブロックの全てのレベルが0に等しい場合(すなわち、CBF=0の場合)、全ての変換タイプは、同じ再構成信号を生成する。最新技術では、例えば、輝度についてのMTS変換構文は、輝度変換ブロックについてのCBFが0に等しくない場合、すなわち、任意の重要レベルが存在する場合にのみ通知される。同様に、CBFが1に等しい場合にのみ、TSMが選択されることができる。
【0114】
本発明の好ましい実施形態では、MTSおよびTSM情報を含むブロックの統合されたMTS構文は、ブロックのCBFの前に通知される。この構成では、選択された変換タイプが1つの特定の変換(例えば、DCT-IIまたは変換スキップ)に等しくない場合、CBFの値は、1に等しいと推論されることができる(
図6を比較されたい)。あるいは、換言すれば、変換タイプを指定する構文要素が所定の値に等しい場合、それは、所定の値によって表されてCBFが符号化される変換を指定する。しかしながら、変換タイプを指定する構文要素が所定の値に等しくない場合、それは、構文要素の値によって表される変換を指定し、CBFが1に等しいことをさらに指定する(変換タイプの構文要素のこれらの値についてCBFは送信されない)。
【0115】
図6は、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャ12aを復号する装置100を示している。装置100は、所定の変換ブロック84cについて、所定の変換ブロック84cのデータストリーム14からインデックスを復号する115ことによって、および選択された変換112として、インデックスが指す変換の所定のリスト116のうちの1つの変換を使用することによって、選択された変換112を選択する110ように構成されている。さらにまた、装置100は、所定の変換ブロック84cについて、データストリーム14からの係数のブロック122を復号する120ように構成されている。装置は、係数のブロック122が選択された変換112にしたがって残差サンプル配列132に関連するように、係数のブロック122から所定の変換ブロック84cの残差サンプル配列132を導出する130ように構成されている。装置100はまた、所定の変換ブロックを再構成するために残差サンプル配列132を使用して所定の変換ブロック84cの予測84’cを修正する140ように構成されている。さらに、装置100は、
図5に示すように、所定の変換ブロック84cについて、所定のブロックの選択された変換が1つ以上の変換の所定のセットに含まれるかどうかに応じて、データストリーム14から係数のブロック122を復号する120ように構成されている。したがって、装置は、所定のブロックについての選択された変換が1つ以上の変換の所定のセットに含まれる場合、係数のブロック122が少なくとも1つの非ゼロ係数を有するかどうかを通知するデータストリーム14から符号化ブロックフラグ126’を復号するように構成され、装置は、所定のブロックについての選択された変換が1つ以上の変換の所定のセットに含まれない場合、係数のブロック122が少なくとも1つの非ゼロ係数を有すると推論するように構成されている。換言すれば、次いで、データストリームからCBFを復号しない、またはさらに換言すれば、所定のブロックの選択された変換が1つ以上の変換の所定のセットに含まれる場合、CBFが復号されるデータストリームの現在の部分とは異なる構文要素を復号する。
【0116】
実施形態によれば、1つ以上の変換の所定のセット125は、恒等変換を備える。追加的にまたは代替的に、1つ以上の変換の所定のリスト116は、恒等変換を備える。実施形態によれば、1つ以上の変換の所定のセット125および1つ以上の変換の所定のリスト116は、同一とすることができる。換言すれば、変換の一方のリストは、例えば、変換の選択116ならびにcブロックの復号120に使用されることができる。1つ以上の変換の所定のセット125および1つ以上の変換の所定のリスト116という表現は、ここではおよび他の全ての実施形態では交換可能とすることができる。
【0117】
実施形態によれば、装置100は、データストリーム14に応じて変換の所定のリストをポピュレートするか、またはポピュレートおよびソートし、変換の所定のリスト内の各変換に可変長コードの1つのコードワードが割り当てられ、コードワードが割り当てられた変換の所定のリスト内の変換のランクとともに可変長コードのコードワードのコードワード長が単調増加するように、可変長コードを使用してデータストリームからインデックスを復号する、ように構成されている。この特徴は、例えば、
図8の変換選択110として示されている。
【0118】
本発明の別の好ましい実施形態では、CBFは、変換タイプの前に通知される。また、CBFが0に等しい場合、変換タイプは通知されない(実際に使用される変換は、復号結果にいかなる影響も及ぼさない;それは、DCT-IIまたは変換スキップまたは任意の他の変換に等しいと推論されることができる)。CBFが1に等しい場合にのみ、変換タイプの構文要素が送信される(
図7を比較されたい)。
【0119】
図7は、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する装置100であって、所定の変換ブロックについて、係数のブロック122が少なくとも1つの非ゼロ係数を有するかどうかを通知するデータストリーム14からの符号化ブロックフラグ126’を復号する120’ことを含み、データストリーム14から係数のブロック122を復号する120ように構成されている、装置を示している。装置100は、符号化ブロックフラグが、係数のブロック122が少なくとも1つの非ゼロ係数を有することを通知する127
1場合、所定の変換ブロックについて、所定の変換ブロックのデータストリーム14からのインデックスを復号する115ことによって選択された変換112を選択し110、選択された変換112として、インデックスが指す変換の所定のリスト116のうちの1つの変換を使用するように構成されている。係数のブロック122から、係数のブロック122が選択された変換112にしたがって残差サンプル配列132に関連するように、所定の変換ブロックの残差サンプル配列132が導出される130。さらに、所定の変換ブロックの予測84’cは、残差サンプル配列132を使用して修正され140、所定の変換ブロックを再構成する。あるいは、符号化ブロックフラグ126’が、係数のブロック122が少なくとも1つの非ゼロ係数を有しないことを通知する127
2場合、装置100は、予測修正なしで所定の変換ブロックを再構成する150ように構成されている。換言すれば、その後、符号化ブロックフラグが、係数のブロックが少なくとも1つの非ゼロ係数を有しないことを通知する場合、インデックスが復号されるデータストリームの現在の部分からのインデックスとは異なる構文要素を復号することなどによって、データストリームからインデックスを復号しない。
【0120】
3.考慮すべき別の態様は、許可された変換タイプへの統合されたMTSインデックスの割り当ておよび/または順序である。例えば、TSMは、DCT-IIタイプの前に通知されることができ、可変長コーディングの場合、より短いコードワードを有することができ、逆もまた同様である。スクリーンまたはコンピュータ生成コンテンツの場合、高周波エッジ構造が大抵の場合に発生し、それらはDCT/DST状変換によって実行されるエネルギー圧縮にあまり適していないため、TSMが大抵の場合に好ましい。そのような場合、任意の他の変換タイプの前にTSMを通知することが有益である(
図8を比較されたい)。そのような信号適応手法は、イントラ予測モードコーディングに使用されるものと同様の最も可能性の高い変換モード(MPM)リストを使用して実現されることができる。変換タイプを直接通知する代わりに、MPMリストは、より低いインデックスを有する最も可能性の高い変換タイプによって構成され、リスト内のインデックスは、ビットストリームにおいて送信される。
【0121】
図8は、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する装置100であって、データストリーム14に応じて変換の所定のリスト116をポピュレート160またはポピュレートおよびソート160’するように構成されている、装置を示している。装置100は、変換の所定のリスト116内の各変換が、可変長コードの1つのコードワードを割り当てられ、可変長コードのコードワードのコードワード長が、コードワードが割り当てられた変換の所定のリスト内の変換のランクとともに単調増加するように、可変長コード115’を使用してデータストリーム14からインデックスを復号し115、選択された変換として、インデックスが指す変換の所定のリストのうちの1つの変換を使用することによって、所定の変換ブロックについて、選択された変換112を選択する110ように構成されている。さらにまた、装置100は、所定の変換ブロックについて、データストリーム14から係数のブロック122を復号する120ように構成され、装置100は、係数のブロック122が選択された変換112にしたがって残差サンプル配列132に関連するように、係数のブロック122から所定の変換ブロックの残差サンプル配列132を導出する130ように構成されている。さらに、装置は、残差サンプル配列132を使用して所定の変換ブロックの予測84’cを修正し、所定の変換ブロックを再構成する140ように構成されている。
【0122】
実施形態によれば、装置は、少なくともピクチャについてグローバルに有効なデータストリーム14内の構文要素に応じて変換の所定のリスト116をソートする160’ように構成されている。追加的にまたは代替的に、装置100は、所定の変換ブロックの空間的近傍におけるサンプル統計の評価に応じて変換の所定のリスト116をソートする160’ように構成されている。追加的にまたは代替的に、装置100は、所定の変換ブロックの空間的近傍のブロックについてデータストリーム14内で通知された構文要素に応じて、変換の所定のリスト116をソートする160’ように構成されている。追加的にまたは代替的に、装置100は、データストリーム14の少なくとも1つの状態が存在するように変換の所定のリスト116をソートする160’ように構成され、その結果、変換の所定のリスト116をソートする160’ことは、恒等変換を、可変長コードの最短コードワード、例えばコードワード0がそれに割り当てられた、例えばインデックス0を有する先頭ランクに配置する。
【0123】
実施形態によれば、装置100は、可変長コードの第1のコードワードと、第1のコードワードが可変長コードの最長コードワードである場合にそれに続く固定長コードの第2のコードワードとから構成される合成可変長コードのコードワードを使用してデータストリーム14からインデックスを復号する115ように構成されている。可変長コードの2つの非最長コードワードのうちの1つのみから構成される合成可変長コードのコードワードが、恒等変換および所定の非恒等変換に割り当てられ、恒等変換および所定の非恒等変換を識別し、合成可変長コードのさらなるコードワードが、変換の所定のリストのさらなる非恒等変換に割り当てられ、さらなる非恒等変換を識別する。合成可変長コードは、
図9の合成可変長コード115’と同様または正確にすることができる。
【0124】
4.統合されたMTS構文の二値化は、固定長もしくは可変長のいずれか、または双方の組み合わせとすることができる。例えば、DCT-IIおよびTSMの使用は、可変長であってもよく、固定長は、残りの4つの非DCT-II変換タイプに使用される。
【0125】
換言すれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する装置100は、実施形態によれば、例えば
図9に示すように、可変長コードの第1のコードワード115’a
1と、第1のコードワード115’a
1が可変長コードの最長コードワード115’bである場合、それに続く固定長コードの第2のコードワード115’a
2とから構成される合成可変長コード115’のコードワード115’aを使用して、データストリームからの変換の所定のリストにインデックスを復号することによって、所定の変換ブロックについて、選択された変換を選択するように構成されている。可変長コードの2つの非最長コードワード115’c
1および115’c
2のうちの1つのみから構成される合成可変長コード115’のコードワード115’aは、変換の所定のリスト116に含まれる恒等変換117および所定の非恒等変換118
1に割り当てられ、これらを識別する。合成可変長コードのさらなるコードワードは、変換の所定のリスト116のさらなる非恒等変換118
2から118
5に割り当てられ、これらを識別する。装置は、所定の変換ブロックについて、インデックスが指す変換の所定のリスト116の中の1つの変換を選択された変換として使用することによって選択された変換を選択するように構成されている。さらにまた、装置は、所定の変換ブロックについて、データストリームから係数のブロックを復号し、係数のブロックが選択された変換にしたがって残差サンプル配列に関連付けられるように、係数のブロックから、所定の変換ブロックの残差サンプル配列を導出し、残差サンプル配列を使用して所定の変換ブロックの予測を修正し、所定の変換ブロックを再構成するように構成されている。
変換スキップモードについてのレベルコーディング
【0126】
変換係数レベル、またはこの文書の残りの部分では略してレベルのコーディングは、変換コーディングアーキテクチャのエントロピー符号化段階に組み込まれたプロセスであり、後者は、ハイブリッドビデオコーデックの一部とすることができる。後者のアーキテクチャでは、予測は、元の信号のエネルギーを最小化し、変換コーディングプロセスを受ける残差信号をもたらす。典型的には、変換および量子化段階は、残差信号を修正し、その結果をエントロピー符号化段階に提供し、変換および量子化された係数は、変換係数レベルと呼ばれる。そのようなハイブリッド設計は、カメラで取り込まれたコンテンツに適している。しかしながら、現実の用途では、ビデオ信号は、常にカメラで取り込まれるとは限らない。したがって、変換コーディングの手法は、レート歪みの意味で常に最適であるとは限らない。変換コーディングアーキテクチャを維持する回避策は、いわゆる変換スキップモード(TSM)である。名称が示すように、変換段階は、バイパスされ、空間残差信号の量子化およびエントロピー符号化をもたらす。TSMについてのエントロピー符号化段階に対する調整は、圧縮効率の改善をもたらす。
態様の概要(有益な注記):
1.最終位置通知なし
2.各サブブロックについてのサブブロックCBF(coded_sub_block_flag)
3.以下を含むsig_coeff_flagコンテキストモデリング
・sigフラグについての縮小テンプレート、左右のみ
・絶対和ではなく重要位置の数
4.abs_level_gt1_flagおよびpar_level_flagコンテキストモデリング:
5.abs_remainderコーディング:
・ライスパラメータの縮小テンプレートによるabs_remainder二値化
・各ビンインデックスの専用コンテキストモデルを有するabs_remainder
・ctx符号化されたビンインデックスの増加数
・ctx符号化されたビンインデックスの適応数
・サンプルあたりのコンテキストコーディングされたビンの最大数
6.coeff_sign_flagコンテキストモデリング
・コンテキストモデリングについての異なる方法
・構文解析プロセスを修正することができる追加の構文要素
7.CCBの低減、さらにはカウンターベース
8.異なるサブブロックの形状およびサイズ
9.予測器に依存する適応走査パターン
【0127】
正規レベルコーディングモードに対する変更を可能な限り低く保つために、同様の設計が使用されることができる。特に、正規モードとは対照的に、TSMについての専用レベルコーディングモードは、最後の重要位置情報(
図10を参照)を使用しない。結果として、サブブロックレベル符号化ブロックフラグ(CBF)が変換ブロック内の各サブブロックについて送信される(
図12を比較されたい)。さらにまた、二値化における切り捨てられた単項コードとライス/Exp-ゴロムコードとの間の遷移のカットオフ値は固定され、正規モードに対して増加し、コンテキスト適応モデルを使用するエントロピーコーダの正規モードで符号化されるビンの数がより多くなる(請求項38および
図16を比較されたい)。
【0128】
シンボルソース統計は、その他の変換候補(典型的には、DCT/DST変換)とは完全に異なるため、専用のレベルコーディング手法が、TSMについて特に有益である。しかしながら、既存の正規レベルコーディングモードからの逸脱は、実装オーバーヘッドを低く保つために可能な限り低く保たれるべきである。さらにまた、専用のTSM設計は、正規モードよりも著しく複雑になるべきではない。正規レベルコーディングとの相違が以下に説明される:
【0129】
1.最後の重要走査位置:残差信号は、予測後の空間残差を反映し、TSMについて変換によるエネルギー圧縮が実行されないため、変換ブロックの右下隅の後続ゼロまたは重要でないレベルのより高い確率はもはや与えられない。したがって、この場合、最後の重要走査位置通知は省略される。代わりに、処理される第1のサブブロックは、変換ブロック内の最右下のサブブロックである(
図10を比較されたい)。
【0130】
図10は、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する装置100であって、所定の変換ブロックについて、変換の所定のリスト116から選択された変換112を選択する110ように構成されており、選択された変換112が、恒等変換117および少なくとも1つの非恒等変換118を備える、装置を示している。さらにまた、装置100は、所定の変換ブロックについて、選択された変換112が非恒等変換118であるかどうかをチェックする123ことによって、データストリーム14から係数のブロック122を復号する120ように構成されている。選択された変換112が非恒等変換118である場合、装置100は、所定の係数位置を取得するために、係数のブロックの全ての係数をトラバースする走査順序に沿って、非ゼロ係数121aが最初に遭遇した場合、または係数のブロックの全ての係数をトラバースする走査順序に沿って、非ゼロ係数121aが最後に遭遇した場合に、データストリームから位置情報を復号する124ことによって係数のブロック122を復号する120ように構成されている。なお、以下のとおりである:上記実施形態では、この位置は、左上から右下に向かう走査順序に沿って測定される最後の位置と呼ばれるが、実際の走査/コーディングは、これらの実施形態にしたがってそこで開始した。すなわち、実際のコーディングは、右下から左上隅に向かう逆の走査順序85で行われた。ここで、走査順序はコーディング順である。双方の走査方向が予想される次の実施形態を参照されたい。選択された変換112が非恒等変換118である場合、装置100はまた、係数ブロックの全ての非ゼロ係数を含み且つ所定の係数位置121a
1からまたはそれまでの走査順序によってトラバースされる、データストリームから係数ブロックの第1の係数121aを復号し121、第1の係数121aとは異なる係数ブロックの第2の係数121bをゼロであると推論することによって、係数ブロックを復号するように構成されている。選択された変換112が恒等変換117である場合、装置100は、データストリーム14から係数のブロックの全ての係数を復号する121’ことによって係数のブロックを復号する120ように構成されている。さらにまた、装置100は、係数のブロックが選択された変換112にしたがって残差サンプル配列132に関連するように、係数のブロック122から、所定の変換ブロックの残差サンプル配列132を導出し130、残差サンプル配列132を使用して所定の変換ブロックの予測84’cを修正し140、所定の変換ブロックを再構成するように構成されている。
【0131】
実施形態によれば、装置100は、データストリーム14からの係数のブロック122の第1の係数121aの復号121において、走査順序85を使用し、所定の係数位置121a
1において第1の係数121aの復号を開始し、その結果、(
図10の走査順序85によって示されるように)第1の係数121aが所定の係数位置121a
1から始まる走査順序85によってトラバースされるか、または所定の係数位置121a
1において第1の係数121aの復号121を終了し、その結果、第1の係数121aが所定の係数位置121a
1まで走査順序85によってトラバースされる(逆走査順序;
図10に示される走査順序85とは反対の方向に)ように構成されている。さらにまた、装置100は、データストリーム14からの係数のブロック122の全ての係数の復号121において、走査順序によって最後にトラバースされる係数のブロックの係数において開始または終了する全ての係数を順次復号するように構成されている。
図10に示される走査順序85は、一例にすぎない。異なる走査順序も可能である。
【0132】
実施形態によれば、装置100は、データストリーム14からの係数のブロック122の全ての係数の復号121において、走査順序85を使用し、走査順序によって最後にトラバースされた係数のブロックの係数における全ての係数の復号を終了するか、または逆走査順序を使用し、走査順序によって最後にトラバースされた係数のブロックの係数における全ての係数の復号を開始するように構成されている。これは、例えば、係数位置121a
2が、
図10に示すように走査順序の終了位置または開始位置のいずれかを表すことができることを意味する。ここで、走査順序は、非恒等変換118の場合のコーディング順序を定義するように定義されることに留意されたい。
【0133】
実施形態によれば、装置100は、データストリーム14から所定の係数位置121a1の座標、例えば(x,y)を復号することによって、またはデータストリーム14から走査順序85内の所定の係数位置121a1のランク、例えば走査順序におけるランクを示すランクを復号することによって、位置情報を復号する124ように構成されている。
【0134】
実施形態によれば、装置100は、係数のブロックが分割されているサブブロック122
1~122
4において、係数のブロック122の第1の係数121aの復号121を実行するように構成され、その結果、走査順序85は、異なるサブブロック内の第1の係数121aをトラバースする前に、且つデータストリーム14内のサブブロックフラグ、例えば、上記実施形態において使用されたような符号化サブブロックフラグがゼロであることを通知するサブブロック内の第1の係数121aがゼロであると推論し、データストリーム内のサブブロックフラグがデータストリーム14から非ゼロであることを通知するサブブロック内の第1の係数121aを復号するとともに、所定の係数位置を含むサブブロックに関連する第1のサブブロックフラグと、その間に係数のブロックの第1の係数を含むサブブロックに関連する第2のサブブロックフラグとのうちの少なくとも1つを除いて、データストリームからサブブロックフラグおよび第1の係数が配置される所定の係数位置を復号し、非ゼロであることを通知するように第1および第2のサブブロックフラグのうちの少なくとも1つを推論することによって、1つのサブブロック内の全ての第1の係数121aをトラバースする。さらにまた、装置は、係数のブロックが分割されているサブブロック122
1~122
4内のデータストリーム14からの係数のブロック122の全ての係数の復号121を実行するように構成され、その結果、走査順序は、異なるサブブロック内の第1の係数をトラバースする前に、且つデータストリーム内のサブブロックフラグがゼロであることを通知するサブブロック内の係数がゼロであると推論し、データストリーム内のサブブロックフラグがデータストリームから非ゼロであることを通知するサブブロック内の係数を復号するとともに、全てのサブブロックについてデータストリームからサブブロックフラグを復号することによって、1つのサブブロック内の全ての係数をトラバースする。この復号121の例が
図11に示されている。
図11によれば、例えば、サブブロック122
1、122
2、122
3、および122
4がこの順序で復号され、それによって第1の係数のみが復号され、全ての第2の係数は復号されない。走査順序85は、全ての第1の係数を通る連続線として、および全ての第2の係数を通る破線リングとして示されている。サブブロック122
1~122
4の逆走査および/または逆走査順序85も可能である。
【0135】
実施形態によれば、装置100は、全てのサブブロックについてのデータストリームからのサブブロックフラグの復号において、全てのサブブロックについてのデータストリームからのサブブロックフラグをサブブロック順序で順次復号し、サブブロック順序で先行する全ての先行するサブブロックフラグがゼロであることを通知する場合、サブブロック順序で最後であるサブブロックフラグが非ゼロであることを通知するように推論するように構成されている。2.b.において上記実施形態を比較すると、以下が述べられる:「これはまた、他の全てのcoded_sub_block_flag構文要素が既に0に等しい場合を除いて、DCサブブロックのcoded_sub_block_flagも含む。この場合、DC coded_sub_block_flagは、1に等しいと推論される」(
図13aおよび
図13bを比較されたい)。
【0136】
実施形態によれば、装置100は、全てのサブブロックについてのデータストリームからのサブブロックフラグの復号において、全てのサブブロックについてのデータストリームからのサブブロックフラグをサブブロック順序で順次復号し、サブブロック順序で先行する全ての先行するサブブロックフラグがゼロであることを通知する場合、サブブロック順序で最後であるサブブロックフラグが係数順序で連続して非ゼロであることを通知するために推論される所定のサブブロック内の係数を復号し、最後の係数、それぞれの係数が非ゼロであるかどうかを示す重要度フラグを除いて、所定のサブブロック内の各係数について復号し、所定のサブブロック内の他の係数がゼロである場合、最後の係数を非ゼロであると推論し、所定のサブブロック内の他の係数のうちの少なくとも1つが非ゼロである場合、最後の係数の重要度フラグを復号する。さらにまた、装置100は、第1のサブブロックフラグおよび第2のサブブロックフラグの少なくとも一方を除くデータストリームからのサブブロックフラグの復号において、第1のサブブロックフラグおよび第2のサブブロックフラグの少なくとも一方を除くデータストリームからのサブブロックフラグを復号し、それが非ゼロであること通知するように推論し、第2のサブブロックフラグが関連するサブブロック内の全ての第1の係数について、それぞれの係数が非ゼロであるかどうかを示す重要度フラグを必然的に復号するように構成されている。このサブブロックの他の全てのSIGフラグが0に等しい場合に(0,0)におけるSIGフラグの推論が行われた上記実施形態を比較すると、以下の記述の2.bを参照されたい:「この場合、DC coded_sub_block_flagは、1に等しいと推論される(inferDcSbCbf=1)。このDCサブブロックには少なくとも1つの重要度レベルがなければならないため、(0,0)における第1の位置のsig_coeff_flag構文要素は通知されず、このDCサブブロック内の全ての他のsig_coeff_flag構文要素が0に等しい場合には代わりに1に等しくなるように導出される(inferSbDcSigCoeffFlag=1)」。
【0137】
2.サブブロックCBF:最後の重要走査位置通知が存在しないことは、TSMについてのcoded_sub_block_flagを有するサブブロックCBF通知が以下のように修正されることを必要とする:
【0138】
a.量子化に起因して、前述の重要でないシーケンスは、変換ブロック内で依然として局所的に発生することができる。したがって、最後の重要走査位置が前述のように除去され、coded_sub_block_flagが全てのサブブロックについて符号化される(
図12を比較されたい)。
【0139】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する装置100は、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択するように構成されており、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備える。さらにまた、装置100は、係数のブロックが分割されるサブブロック内のデータストリームから係数のブロックの係数を復号し121、データストリーム内のサブブロックフラグがゼロであることを通知するサブブロック内の係数がゼロであると推論し、データストリーム内のサブブロックフラグがデータストリームから非ゼロであることを通知するサブブロック内の係数を復号するとともに、選択された変換112が少なくとも1つの非恒等変換のうちの1つである場合(
図12の123
1を参照)、走査順序で、例えば第1のサブブロックに関連するサブブロックフラグなどの、非ゼロであることを示す位置情報に関連する第1のサブブロックフラグ210
1、および最後のサブブロックフラグ210
nの少なくとも1つを除いて、データストリーム14からサブブロックフラグを順次復号200
1し、第1のサブブロックフラグ210
1および最後のサブブロックフラグ210
nの少なくとも1つが非ゼロであることを通知するように推論することによって、所定の変換ブロックについて、データストリームから係数のブロックを復号する120ように構成されている。非恒等変換の場合、左上サブブロック内の非ゼロ係数の確率は高い。走査順序に応じて、このサブブロックは、第1のサブブロック210
1または最後のサブブロック210
nのいずれかである。さらにまた、装置100は、所定の変換ブロックについて、係数のブロックが分割されているサブブロック内のデータストリームから係数のブロックを復号し、データストリーム内のサブブロックフラグがゼロであることを通知するサブブロック内の係数がゼロであると推論し、データストリーム内のサブブロックフラグがデータストリームから非ゼロであることを通知するサブブロック内の係数を復号するとともに、選択された変換112が恒等変換である場合(
図12の123
2を参照)、全てのサブブロックについてデータストリームからサブブロックフラグを復号する200
2ことによって、データストリームから係数のブロックを復号するように構成されている。恒等変換の場合、非ゼロ係数の確率が高いサブブロックは知られておらず、そのため、全てのサブブロックフラグが復号される必要がある。さらに、装置は、係数のブロックが選択された変換にしたがって残差サンプル配列に関連付けられるように、係数のブロックから、所定の変換ブロックの残差サンプル配列を導出し、残差サンプル配列を使用して所定の変換ブロックの予測を修正し、所定の変換ブロックを再構成するように構成されている。この装置は、
図10に示す装置と同様とすることができるが、異なる点は、cブロックの復号120が
図12に示すように実行されることである。
【0140】
b.DC周波数位置をカバーするサブブロック(左上サブブロック)についてのcoded_sub_block_flagは、特別なケースを提示する。最先端のレベルコーディングでは、このサブブロックのcoded_sub_block_flagは、決して通知されず、常に1に等しいと推論される。最後の重要走査位置が別のサブブロック内に位置するとき、それは、DCサブブロックの外側に少なくとも1つの重要度レベルがあることを意味する。その結果、DCサブブロックは、このサブブロックのcoded_sub_block_flagが1に等しいと推論されるが、全てゼロ/非重要度レベルを含むことができる。TSMに最後の走査位置情報が存在しない場合、各サブブロックのcoded_sub_block_flagが通知される。これはまた、他の全てのcoded_sub_block_flag構文要素が既に0に等しい場合(
図13aおよび
図13bを比較されたい)を除いて、DCサブブロックのcoded_sub_block_flagを含む(
図12を比較されたい)。この場合、DC coded_sub_block_flagは1に等しい(inferDcSbCbf=1)と推論される。このDCサブブロックには少なくとも1つの重要度レベルがなければならないため、(0,0)における第1の位置のsig_coeff_flag構文要素は通知されず、このDCサブブロック内の全ての他のsig_coeff_flag構文要素が0に等しい場合には代わりに1に等しくなるように導出される(inferSbDcSigCoeffFlag=1)(請求項30および請求項33を比較されたい)。これは、最先端のレベルコーディングにはあてはまらない。
【0141】
実施形態によれば、装置100は、
図10に示す装置と同様に、cブロックの復号120が
図12に示すように実行されるという相違を有して、全てのサブブロック122
1~122
36のデータストリームからのサブブロックフラグの復号において、全てのサブブロック122
1~122
36のデータストリームからサブブロックフラグをサブブロック順序85で順次復号し、サブブロック順序で先行する先行サブブロックフラグのうちの少なくとも1つが非ゼロであることを通知する(例えば、サブブロック122
32のサブブロックフラグおよびサブブロック122
18のサブブロックフラグは、
図13aにおいて非ゼロであることを示す)である場合、サブブロック順序で最後であるサブブロックフラグ、例えばサブブロック122
36のサブブロックフラグを復号し、全ての先行サブブロックフラグ、例えばサブブロック順序で先行する全ての先行サブブロック122
1から122
35のフラグがゼロであることを通知する場合(
図13bを比較されたい)、サブブロック順序で最後であるサブブロックフラグ、例えばサブブロック122
36のサブブロックフラグが非ゼロであることを通知するように推論するように構成されている。
【0142】
実施形態によれば、装置100は、非ゼロであることを通知するためにサブブロック順で最後である前記サブブロックフラグを推論するときに、前記サブブロック内の全ての先行する係数がゼロである場合に、非ゼロであることを示すように非ゼロであることを通知するために前記最後のサブブロックフラグが推論される前記サブブロック内の最後の係数を推論するように構成されている。
【0143】
実施形態によれば、装置100は、コンテキスト適応エントロピー復号によって、および選択された変換が少なくとも1つの非恒等変換のうちの1つである場合、現在復号されているサブブロックフラグに隣接するサブブロックに関連するサブブロックフラグの論理和に依存し、および選択された変換が恒等変換である場合、現在復号されているサブブロックフラグに隣接するサブブロックに関連するサブブロックフラグの算術和に依存するコンテキストを使用して、データストリームから現在復号されているサブブロックフラグを復号するように構成されている。
【0144】
c.変換ブロック内にサブブロックが1つしかない場合、coded_sub_block_flagは、最先端のレベルコーディング(1に等しいCBFを有するサブブロックが現在の変換ブロックについて送信されなかったため、これは前のケースに含まれる)として決して通知されることはない。
【0145】
d.さらに、coded_sub_block_flagのコンテキストモデリングが変更される。コンテキストモデルインデックスは、その双方の論理和、すなわちcoded_sub_block_flag(R)|coded_sub_block_flag(R)の代わりに、右サブブロックcoded_sub_block_flag(R)のCBFと、coded_sub_block_flag(B)の下のサブブロックのCBFとの和として計算される(
図14を比較されたい)。
【0146】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する装置100は、所定の変換ブロックについて、変換の所定のリストから選択された変換112を選択するように構成されており、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備える。さらにまた、装置100は、係数のブロックが分割されているサブブロック内のデータストリームから係数のブロックの係数を復号し121、データストリーム内のサブブロックフラグがゼロであることを通知するサブブロック内の係数がゼロであると推論し、データストリーム14内のサブブロックフラグがデータストリームから非ゼロであることを通知するサブブロック内の係数を復号するとともに、選択された変換が少なくとも1つの非恒等変換のうちの1つである場合、コンテキスト適応エントロピー復号によってデータストリームから現在復号されているサブブロックフラグを復号200し、現在復号されているサブブロックフラグに隣接するサブブロックに関連するサブブロックフラグの論理和310に依存し、選択された変換が恒等変換である場合、現在復号されているサブブロックフラグに隣接するサブブロックに関連するサブブロックフラグの算術和320にするコンテキスト300を使用することによって、所定の変換ブロックについて、データストリーム14から係数のブロック122を復号する120ように構成されている。さらに、装置100は、係数のブロックが選択された変換にしたがって残差サンプル配列に関連付けられるように、係数のブロックから、所定の変換ブロックの残差サンプル配列を導出し、残差サンプル配列を使用して所定の変換ブロックの予測を修正し、所定の変換ブロックを再構成するように構成されている。この装置は、
図10に示す装置と同様とすることができるが、異なる点は、cブロックの復号120が
図14に示すように実行されることである。
【0147】
実施形態によれば、装置100は、選択された変換が恒等変換である場合、現在の係数に直接隣接する係数の第1のセットのうちの非ゼロである係数の数310に依存し、選択された変換が少なくとも1つの非恒等変換のうちの1つである場合、係数の第1のセット、係数の第1のセットよりも現在の係数から遠くに位置する係数、係数の第2のセットの値、および現在の係数の位置を含む係数の第2のセットのうちの非ゼロである係数の数320に依存するコンテキストを使用して、データストリーム内のサブブロックフラグが非ゼロであることを通知するサブブロック内の現在の係数について、現在の係数がゼロであるか否かを示す重要度フラグをデータストリームから復号するように構成されている。
【0148】
3.sig_coeff_flagコンテキストモデリング:sig_coeff_flagのコンテキストモデリングは、上述した最先端のレベルコーディングモードと同様のローカルテンプレートを使用する。しかしながら、現在の走査位置の右隣(NB
0)および下隣(NB
1)のみを考慮する。コンテキストモデルオフセットは、重要な隣接位置の数sig_coeff_flag(NB
0)+sig_coeff_flag(NB
1)のみである。したがって、現在の変換ブロック内の対角dに応じて異なるコンテキストセットの選択が除去される。これは、sig_coeff_flagフラグを符号化するために設定された3つのコンテキストモデルおよび単一のコンテキストモデルをもたらす(
図15を比較されたい)。
【0149】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する装置100は、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択するように構成されており、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備える。さらにまた、装置100は、選択された変換112が恒等変換である場合、現在の係数に直接隣接する係数の第1のセットのうちの非ゼロである係数の数310に依存し、選択された変換112が少なくとも1つの非恒等変換のうちの1つである場合、係数の第1のセット、係数の第1のセットよりも現在の係数から遠くに位置する係数、係数の第2のセットの値、および現在の係数の位置を含む係数の第2のセットのうちの非ゼロである係数の数320に依存するコンテキスト300を使用して、現在の係数について現在の係数がゼロであるか否かを示す重要度フラグをデータストリームから復号する400ことによって、所定の変換ブロックについて、データストリーム14から係数のブロック122を復号する120ように構成されている。さらに、装置100は、係数のブロックが選択された変換にしたがって残差サンプル配列に関連付けられるように、係数のブロック122から、所定の変換ブロックの残差サンプル配列を導出し、残差サンプル配列を使用して所定の変換ブロックの予測を修正し、所定の変換ブロックを再構成するように構成されている。この装置は、
図10に示す装置と同様とすることができるが、異なる点は、cブロックの復号120が
図15に示すように実行されることである。
【0150】
実施形態によれば、装置100は、所定の係数の絶対値がXよりも大きいか否かを示すN個の大なりXフラグをコンテキスト適応エントロピー復号し、所定の係数の絶対値がNに依存する絶対閾値を超える量を示す余りを、可変長コードを使用して復号する、ことによって所定の係数を復号するように構成されており、Nは、選択された変換が恒等変換である場合、選択された変換が少なくとも1つの非恒等変換のうちの1つである場合と比較して大きい。
【0151】
4.abs_level_gt1_flagおよびpar_level_flagコンテキストモデリング:フラグabs_level_gt1_flagおよびpar_level_flagについて単一のコンテキストモデルが使用される。
【0152】
5.abs_remainderコーディング:絶対レベルの経験的分布は、典型的には、依然としてラプラシアン分布または幾何学的分布に適合するが、変換係数よりも大きなインスタンス性が存在する。特に、連続実現のウィンドウ内の分散は、通常の場合よりも高い。これは、abs_remainder構文二値化およびコンテキストモデリングの以下の変更を促す:
【0153】
a.二値化においてより高いカットオフ値、すなわち、sig_coeff_flag、abs_level_gt1_flag、par_level_flag、およびabs_level_gt3_flagを用いたコーディングからabs_remainderについてのライス符号への遷移点、および各ビン位置の専用コンテキストモデルを使用すると、より高い圧縮効率が得られる(
図16を比較されたい)。カットオフを増加させることは、例えば、カットオフに到達するまでabs_level_gt 5_flag、abs_level_gt 7_flagなどを導入することによって、より多くの「大なりX」フラグをもたらす(numGtXFlag)。カットオフ自体は、全ての変換ブロックサイズについて固定されてもよく、または変換ブロックサイズに応じて固定されてもよく、または既に符号化された変換ブロックに応じて適応的に選択されてもよく、またはビットストリーム内の高レベル構文構造、例えば、シーケンス、ピクチャ、スライスまたはタイルレベルで通知されてもよい。
【0154】
b.絶対レベルが閾値より大きいかどうかを指定するコンテキストコーディングされたビンの数は、固定または適応のいずれかである。各ビンインデックスは、専用コンテキストモデルを使用する。
【0155】
c.ライスパラメータ導出のためのテンプレートは修正され、すなわち、現在の走査位置の左近傍および下近傍のみがsig_coeff_flagコンテキストモデリングのためのローカルテンプレートと同様であると見なされる。
【0156】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する装置100は、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択するように構成されており、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備える。さらにまた、装置100は、所定の係数の絶対値がXよりも大きいか否かを示すN個の大なりXフラグをコンテキスト適応エントロピー復号し500、所定の係数の絶対値がNに依存する絶対閾値を超える量を示す余りを、可変長コードを使用して復号する600、ことによって所定の係数を復号することによって、所定の変換ブロックについて、データストリーム14から係数のブロック122を復号する120ように構成され、Nは、選択された変換が恒等変換である場合、選択された変換が少なくとも1つの非恒等変換のうちの1つである場合と比較して大きい。さらに、装置は、係数のブロックが選択された変換にしたがって残差サンプル配列に関連付けられるように、係数のブロックから、所定の変換ブロックの残差サンプル配列を導出し、残差サンプル配列を使用して所定の変換ブロックの予測を修正し、所定の変換ブロックを再構成するように構成されている。この装置は、
図10に示す装置と同様とすることができるが、異なる点は、cブロックの復号120が
図16に示すように実行されることである。
【0157】
実施形態によれば、装置100は、パスごとにN個の大なりXフラグのうちの1つ以上によってXを増加させながら順次N個の大なりXフラグをコンテキスト適応エントロピー復号することによって一連のパス内のN個の大なりXフラグのコンテキスト適応エントロピー復号を実行するように構成され、装置が、一連のパスの間にコンテキスト適応エントロピー復号を使用して符号化されたフラグの数を記録し、数が所定のフラグ閾値を超える場合、N個の大なりXフラグのコンテキスト適応エントロピー復号を停止するように構成されている。
【0158】
実施形態によれば、可変長コードはライスコードであり、装置100は、選択された変換が恒等変換である場合、所定の係数に直接隣接する係数の第1のセットに応じて、および選択された変換が少なくとも1つの非恒等変換のうちの1つである場合、第1の係数のセットよりも所定の係数から遠くに位置する係数および係数の第1のセットを含む係数の第2のセットに応じて、ライスコードのライスパラメータを判定するように構成されている。
【0159】
実施形態によれば、装置100は、所定のコンテキストを使用してコンテキスト適応エントロピー復号を行い、選択された変換が恒等変換である場合、所定のコンテキストに関連付けられた確率を更新し、および選択された変換が少なくとも1つの非恒等変換のうちの1つである場合、バイパス符号化(例えば、固定等確率を用いたコンテキスト適応エントロピー符号化)することによって、所定の係数の符号を復号するように構成されている。
【0160】
6.coeff_sign_flagコンテキストモデリング:符号のシーケンス内のインスタンス性、およびイントラの予測がバイアスされることが多いという事実により、グローバルな経験的分布がほぼ均一に分布している場合であっても、コンテキストモデルを使用して符号が符号化されることができる。符号の符号化には、単一の専用コンテキストモデルが使用されることができる。あるいは、コンテキストモデルは、ローカルテンプレートを使用して評価された近傍の符号に依存することができる。さらなる代替案は、隣接するサブブロックおよびそれらの符号シンボルを使用して導出されるコンテキストオフセットを有する現在のサブブロックの固定コンテキストモデルの使用である。符号は、代わりにエントロピーコーダのバイパスモードを使用してコンテキストモデルによって符号化される(
図17を比較されたい)。
【0161】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する装置100は、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択するように構成されており、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備える。さらにまた、装置100は、所定の係数の符号を復号する700ことによって、所定の変換ブロックについて、データストリーム14からの係数のブロック122を復号する120ように構成されている。装置100は、所定の係数の符号の復号において、選択された変換112が恒等変換である場合、所定のコンテキスト710を使用し(例えば、所定の係数の近傍の係数のブロックの係数の符号に応じてコンテキストを選択する)、所定のコンテキスト710に関連付けられた確率を更新するコンテキスト適応エントロピー復号を使用し、選択された変換112が少なくとも1つの非恒等変換のうちの1つである場合、バイパス復号(例えば、固定等確率を用いたコンテキスト適応エントロピー復号)を使用するように構成されている。さらに、装置は、係数のブロックが選択された変換にしたがって残差サンプル配列に関連付けられるように、係数のブロックから、所定の変換ブロックの残差サンプル配列を導出し、残差サンプル配列を使用して所定の変換ブロックの予測を修正し、所定の変換ブロックを再構成するように構成されている。この装置は、
図10に示す装置と同様とすることができるが、異なる点は、cブロックの復号120が
図17に示すように実行されることである。
【0162】
実施形態によれば、装置100は、選択された変換が恒等変換である場合、以前に復号された係数の符号の統計量に応じて複数のコンテキストの中から所定のコンテキスト710を選択するように構成されている。
【0163】
実施形態によれば、装置100は、選択された変換が恒等変換である場合、以前に復号された係数内の非ゼロ係数の中の正または負の符号の相対頻度に応じて所定のコンテキスト710を選択するように構成されている。
実施形態によれば、装置100は、複数のコンテキストモデルの数コンテキストモデルをデフォルト数に設定するように構成されている。
実施形態によれば、装置100は、データストリームから複数のコンテキストモデルの数コンテキストモデルを導出するように構成されている。
【0164】
実施形態によれば、装置100は、コンテキストモデルを、正または負の符号の相対頻度について互いに隣接し且つ重なり合わない相対頻度間隔と関連付け、以前に復号された係数の非ゼロ係数の中の正または負の符号の相対頻度の中で、所定のコンテキストモデルに関連付けられた相対頻度間隔に含まれるように選択を実行するように構成されている。
【0165】
実施形態によれば、装置100は、以前に復号された係数が所定の変換ブロックよりも大きいピクチャまたはビデオ部分にわたって拡散するように、以前に復号された係数の符号にわたる統計量を判定するように構成されている。
【0166】
実施形態によれば、装置100は、選択された変換が恒等変換である場合、所定のコンテキストモデルを使用して所定の変換ブロックの全ての非ゼロ係数の符号をエントロピー復号するように構成されている。
【0167】
実施形態によれば、装置100は、所定のコンテキストモデルを使用して係数のブロックのサブブロック内に位置し且つ非ゼロの所定の係数を含む所定の変換ブロックの非ゼロ係数のサブセットの符号をエントロピー復号し、更新された統計量を取得するために、所定の変換ブロックの非ゼロ係数のサブセットの符号を使用して統計量を更新し、更新された統計量に応じて、複数のコンテキストモデルの中からさらなる所定のコンテキストモデルを選択し、選択された変換が恒等変換である場合、さらなる所定のコンテキストモデルを使用して、係数のブロックのさらなるサブブロック内に位置する所定の変換ブロックの非ゼロ係数のさらなるサブセットの符号をエントロピー復号するように構成されている。
【0168】
実施形態によれば、装置100は、選択された変換が恒等変換である場合、所定の非ゼロ係数の符号に基づいて、所定のコンテキストモデルに関連付けられた符号確率を更新するように構成されている。
【0169】
実施形態によれば、装置100は、複数のコンテキストモデルがコンテキストモデルのセットに分割され、装置は、以前に復号された係数の符号の統計量に基づいてコンテキストモデルの所定のセットを選択することによって選択を実行し、選択された変換が恒等変換である場合、それぞれの符号に位置し且つそれらを囲むテンプレートの位置に位置するものなどの、1つ以上の隣接する非ゼロ係数の符号に応じて、選択されたコンテキストモデルのセットの中から所定のコンテキストモデルを選択することによって選択を実行するように構成されている。
【0170】
実施形態によれば、装置は、選択された変換が少なくとも1つの非恒等変換のうちの1つである場合、パスごとにN個の大なりXフラグのうちの1つ以上によってXを増加させながら順次N個の大なりXフラグをコンテキスト適応エントロピー復号することによって一連のパス内のN個の大なりXフラグのコンテキスト適応エントロピー復号を実行し、一連のパスの間にコンテキスト適応エントロピー復号を使用して符号化されたフラグの数を記録し、数が所定のフラグ閾値を超える場合、N個の大なりXフラグのコンテキスト適応エントロピー復号を停止するように構成されている。さらに、装置100は、選択された変換が恒等変換である場合、順次N個の大なりXフラグのコンテキスト適応エントロピー復号を実行し、N個の大なりXフラグの中の重要度フラグ(X=0)を復号した後、N個の大なりXフラグの中のさらなるN個の大なりXフラグの前に、所定の係数が絶対閾値よりも大きいかどうかを示す大なりXフラグ-バイパスフラグを復号し、所定の係数が絶対閾値よりも大きいことを示す大なりXフラグ-バイパスフラグの場合、N個の大なりXフラグのコンテキスト適応エントロピー復号を停止するように構成されている(例えば、所定の係数が絶対閾値よりも大きくないことを示す大なりXフラグの場合、N個の大なりXフラグのうちの最後の1つを除くさらなる大なりXフラグに対するN個の大なりXフラグのコンテキスト適応エントロピー復号を再開する)。
【0171】
7.CCBの削減:第1の走査パス、すなわち、sig_coeff_flag、abs_level_gt1_flag、およびpar_level_flag構文要素の送信は変更されない。しかしながら、コンテキストコーディングされたビン(CCB)の数の制限は除去され、以下のように異なって処理される:
【0172】
a.CCB>kを無効とし、kを正の整数とするモードを指定することによって、CCBの削減が保証されることができる。現在のVVC開発の正規レベルコーディングモードの場合、k=2であることに留意されたい。そのような制限は、量子化空間の削減に等しい。
【0173】
b.そのような制限を回避するために、絶対レベルがCCBによって達成可能な閾値よりも大きいかどうかを指定するsig_coeff_flag構文の後に追加のフラグが通知されることができる。例えば、追加のより大きいフラグの数は4に等しく設定され(numGtXFlags=5)、8つのCCB(sig_coeff_flag、abs_level_gt1_flag/abs_level_gtX_flag(0)、par_level_flag、abs_level_gt3_flag/abs_level_gtX_flag(1)、abs_level_g5_flag/abs_level_gtX_flag(2)、abs_level_g7_flag/abs_level_gtX_flag(3)、abs_level_g9_flag/abs_level_gtX_flag(4)、coeff_sign_flag)をもたらす。そのような構成では、CCBによって通知されることができる絶対レベルは9に等しい。そして、レベル制限フラグは、現在の絶対レベルが9よりも大きいことを示し、したがって、変換ブロックについてCCBの数が削減されることができる。そのような概念は、通常の変換および量子化された変換ブロックではなく、TSMについてのみ可能でありうることに留意されたい(
図18を比較されたい)。
【0174】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する装置100は、所定の変換ブロックについて、変換の所定のリストから選択された変換112を選択するように構成されており、選択された変換112は、恒等変換および少なくとも1つの非恒等変換を備える。さらにまた、装置100は、所定の係数を復号することによって、所定の変換ブロックについて、データストリームからの係数のブロック122を復号する120ように構成されている。装置100は、所定の係数を復号する際に、所定の係数の絶対値がXよりも大きいか否かを示すN個の大なりXフラグ(例えば、
図18のgt1_flag、gt2_flagなどのようなN個のgtX_flags)のコンテキスト適応エントロピー復号800を使用し、所定の係数の絶対値がNに依存する絶対閾値を超える量を示す余り810を復号するために可変長コードを使用するように構成されている。装置100は、所定の係数を復号する際に、選択された変換が少なくとも1つの非恒等変換のうちの1つである場合、パスあたりN個の大なりXフラグのうちの1つ以上によってXを増加させながら、順次830N個の大なりXフラグをコンテキスト適応エントロピー復号する800ことによって一連のパス820
1から820
3内のN個の大なりXフラグのコンテキスト適応エントロピー復号800を実行し、一連のパス830中にコンテキスト適応エントロピー復号を使用して符号化されたフラグの数832を記録し、数832が所定のフラグ閾値834を超える場合、N個の大なりXフラグのコンテキスト適応エントロピー復号800を停止し、選択された変換112が恒等変換である場合(例えば、TSM=変換スキップモード)、順次830N個の大なりXフラグのコンテキスト適応エントロピー復号800を実行し、N個の大なりXフラグの中の重要度フラグ840(X=0)を復号した後、N個の大なりXフラグの中のgt1_flagのようなさらなるN個の大なりXフラグの前に、所定の係数が絶対閾値よりも大きいかどうかを示す大なりXフラグ-バイパスフラグ850を復号し、所定の係数が絶対閾値よりも大きいことを示す大なりXフラグ-バイパスフラグの場合852に、さらなる大なりXフラグに対するN個の大なりXフラグのコンテキスト適応エントロピー復号を停止する(例えば、所定の係数が絶対閾値よりも大きくないことを示す大なりXフラグ-バイパスフラグの場合854に、N個の大なりXフラグの最後の1つを除いて、さらなる大なりXフラグに対するN個の大なりXフラグのコンテキスト適応エントロピー復号を再開する)ように構成されている。さらに、装置100は、係数のブロックが選択された変換にしたがって残差サンプル配列に関連付けられるように、係数のブロックから、所定の変換ブロックの残差サンプル配列を導出し、残差サンプル配列を使用して所定の変換ブロックの予測を修正し、所定の変換ブロックを再構成するように構成されている。
図18は、複数(少なくとも2つ)のパスまたは走査における係数のブロックを復号する例を示している。
図18に示す実施形態によれば、選択された変換112が非恒等変換である場合、第1の走査においてsig_flagのみが復号され、parity_flagおよびgt1_flagが復号され、第2から第Nの走査において残りの全てのgtX_flagが復号される。あるいは、選択された変換が恒等変換である場合、gtX_bypass_flag850は、gtX_flagsが復号される必要があるかどうか、またはgtX_flagsの復号がスキップされることができ、余りのみが復号される必要があるかどうかを示す。
【0175】
c.エントロピーコーダの通常モードを使用する多数のビンは、ハードウェアアーキテクチャの実装における課題を表すため、その数の制限は有益である。アプローチは、ビットストリーム制限であり、すなわち、特定の閾値よりも大きいいくつかのコンテキストコーディングされたビンをもたらすコーディング決定は無効であり、したがって、適合復号器は、適合するビットストリームが与えられた場合にコンテキストコーディングされたビンの最大数を予想することができる。あるいは、コンテキストコーディングされたビンの数は、変換ブロックごとに追跡される。変換ブロックの処理内で、制限に到達したとき、残りの全てのレベル情報は、二値化を変更せずに、または二値化を変更して、バイパスモードを使用して送信される(
図20を比較されたい)。後者の構成では、各絶対レベルは、ライス/Exp-ゴロムコードの組み合わせを使用して二値化される、すなわち、切り捨てられた単項部分は、もはや二値化プロセスに関与しない。
【0176】
実施形態によれば、装置100は、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号するために、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択するように構成されており、変換の所定のリストは、恒等変換および少なくとも1つの非恒等変換を備える。さらにまた、装置100は、ブロックの係数をトラバースする一連のパスにおいて、コンテキスト適応バイナリエントロピー復号を使用してデータストリームからの各係数について、1つ以上の所定のフラグ、例えば、
図20に示すようなsig_flag92、par_flag96(parity_flag)、gt 1_flag98(X=1の場合は大なりXフラグ)および/もしくはgt2_flag104(X=2の場合は大なりXフラグ)、および/またはパリティフラグおよび/またはさらなる大なりXフラグを復号することによって、所定の変換ブロックについて、データストリームから係数のブロックを復号するように構成されており、各所定のフラグは、それぞれの係数の絶対値が配置された(例えば、絶対値ドメインは、1つ以上のパスの先頭において始まる、例えば、Xビット表現の場合、係数0・・・2
X-1の一般的な絶対値ドメインから始まる)それぞれの係数の絶対値ドメイン90を低減し(例えば、パリティビット96は、偶数または偶数でない絶対値を除外することによって絶対値ドメイン90を半分に低減させ、大なりXフラグ、例えば、gt1_flag98およびgt2_flag104は、可能な絶対値の1つを除外するかまたは可能な絶対値のこの1つのみを残して他の全てを除外することによって可能な絶対値のドメイン90を低減させる)。さらに、装置100は、所定の変換ブロックについて、ブロックの係数をトラバースする一連のパスにおいて、絶対値ドメイン90のカーディナリティが、それぞれの係数について復号された1つ以上の所定のフラグ92、96、98、104によって1つに低減されない各係数について、それぞれの係数の絶対値ドメイン90内のそれぞれの係数の絶対値を示す可変長コードのコードワード(例えば、ライス/Exp-ゴロムコード)を復号することによって、データストリームから係数のブロックを復号するように構成されている(例えば、可変長コードの符号長は、絶対値が増加するにつれて単調増加してもよい、870
1から870
5を参照)。装置100は、係数のブロックが選択された変換にしたがって残差サンプル配列に関連付けられるように、係数のブロックから、所定の変換ブロックの残差サンプル配列を導出し、残差サンプル配列を使用して所定の変換ブロックの予測を修正し、所定の変換ブロックを再構成するように構成されている。さらにまた、装置は、一連のパスにおいて、1つ以上の所定のフラグ92、96、98、104を復号する際に、ポインタが絶対値を指す絶対値ドメインのカーディナリティが非ゼロ係数の第2のセットと比較して非ゼロ係数の第1のセットの方が小さい(すなわち、最後のパス内で限界に到達する前の係数については、限界に到達した後の係数と比較してより小さい)ように、所定数の所定のフラグ92、96、98、104に到達する(すなわち、全ての係数についてこれまでに復号された所定のフラグの総数が限界に到達する)とすぐに1つ以上の所定のフラグの復号を停止するように構成されており、装置は、非ゼロ係数の第1および第2のセットの可変長コードのコードワードに異なる可変長コードを使用するように構成されている(
図20を参照)。
【0177】
コンテキスト適応符号化/復号されたフラグの数を制限するための概説した概念を示すために、
図20を参照する。
図20は、90における変換係数の量子化インデックスの絶対値ドメインの初期値ドメインを示している。この初期値ドメインは、ゼロと何らかの最大値との間の全ての整数値を包含することができる。初期値ドメインはまた、より大きな数に向かって開く間隔であってもよい。初期値ドメイン90内の整数値の数は、必ずしも2の累乗である必要はない。さらに、
図20は、個々の量子化インデックスの表現に関与する、すなわち、その絶対値の表示に関与する様々なフラグタイプを示している。ある量子化インデックスの絶対値がゼロであるか否かを示すsig_flagタイプが存在する。すなわち、sig_flag92は、初期値ドメイン90を2つの下位部分、すなわち、一方は単にゼロを含むものであり、他方は他の全ての可能な値を含むものに二分割する。すなわち、sig_flagは、
図14の下部に示されるように、量子化インデックスが偶然にゼロになる場合、量子化インデックスの絶対値を既に一意に示す。初期値ドメイン90の非ゼロ値は、フラグタイプpar_flagによって、すなわち、一方では奇数値に、他方では偶数値にさらに二分割される値ドメイン94を形成する。par_flag96は、後者が非ゼロである場合にのみ、特定の量子化インデックスに対して存在する必要がある。par_flag96は、同じ値ドメイン94を二分割する半分のうちの一方に関して一意性をもたらさない。それは、次の結果として得られる(再帰的に定義される)値ドメインとして半分を示し、したがって、次のフラグ、すなわち、gt1_flag98は、par_flagの後にこの結果の値ドメイン、すなわち、量子化インデックス値が奇数値である場合は奇数非ゼロ値100、量子化インデックスが偶数非ゼロ値である場合は偶数非ゼロ値102をさらに二分割する。特に、gt1_flag98による二分割は、1つの部分がそれぞれ値ドメイン100の最小奇数値またはドメイン102の最小非ゼロ偶数値を単に含むように行われる。他の部分は、それぞれのドメイン100/102の他の全ての値を含む。後者の余りの値ドメインは、フラグgt2_flag104によって同様にさらに二分割され、すなわち、最小値は、一方の部分を表し、他の値は、他方の部分を表す。
図20の下部に示すように、これは、特定の変換係数が偶然にゼロである場合、特定の変換係数の量子化インデックスについてsig_flag92のみが符号化され、特定の変換係数が偶然に絶対値1および2を含む値区間106に入る場合、sig_flag、par_flag、およびgt1_flag92、96、および98が特定の変換係数の特定の量子化インデックスを表すように符号化され、特定の変換係数が値3および4を含む直後の値区間108に入る場合、特定の変換係数の量子化インデックスの絶対値を表すように全てのフラグ92、96、98、および104が符号化され、さらに、変換係数の絶対値が初期値ドメイン90の残りの区間110にある変換係数の量子化インデックスについて残りが符号化されることを意味する。フラグタイプ92、96、および98のフラグは、例えば、第1のパスにおいて符号化される。フラグ104は、例えば、第2のパスにおいて符号化される。これらのフラグは、コンテキスト適応算術符号化を使用して符号化される。しかしながら、パス内で符号化されるフラグの数は制限されてもよく、例えば、
図18に関して説明したように所定のフラグ閾値によって制限される。フラグタイプ92、96、および98のフラグは、パス60
1内の符号化フラグの総数がパス60
1内で符号化/復号されるフラグの最大許容数を超えることなく、3つのフラグタイプ全てがパス820
1内で依然として符号化されることができる場合にのみ、順序85に沿った第1のパス内の現在訪問されている変換係数位置について符号化される。同様に、フラグタイプ104のフラグは、例えば、パス60
2内の符号化フラグ834の総数がパス820
2内で符号化/復号されるフラグの最大許容数834を超えることなく、パス820
2内で依然として符号化されることができる場合にのみ、順序85に沿って第2のパス820
2内の現在訪問されている変換係数位置について符号化される。
【0178】
実施形態によれば、第1および第2の非ゼロ係数セットの可変長コードのコードワードについての異なる可変長コードは、単項部分からライス-およびExp-ゴロム部分への遷移間の二値化境界(カットオフ値)および/または共通の二値化方式の二値化パラメータにおいて異なる。
【0179】
実施形態によれば、第1および第2の非ゼロ係数セットの可変長コードのコードワードについての異なる可変長コードは、単項部分からライス-およびExp-ゴロム部分への遷移間の二値化境界(カットオフ値)および/または以前に復号された係数に対する共通の二値化方式の二値化パラメータの異なる依存性において異なる。
【0180】
8.走査パス:構文要素の送信順序は変更されることができる。サブブロックの全てのバイパス符号化されたビンを連続的に符号化することは一般に有益である。1つ以上の走査パスで通常符号化されたビンを編成する複数の可能性がある。本発明の1つのバージョンでは、全ての通常符号化されたビン(coeff_sign_flagフラグを含む)が1つの走査パスにおいて符号化され、全てのバイパス符号化ビンが第2の走査パスにおいて符号化される。別のバージョンでは、通常符号化されたビンは、複数の走査パスにおいて送信される。例えば、ビンsig_coeff_flag、abs_level_gt1_flag/abs_level_gtX_flag(0)、およびpar_level_flagは、第1の走査パスにおいて符号化される。abs_level_gt3_flag/abs_level_gtX_flag(1)、abs_level_g5_flag/abs_level_gtX_flag(2)、abs_level_g7_flag/abs_level_gtX_flag(3)、abs_level_g9_flag/abs_level_gtX_flag(4)は、第2の走査パスにおいて符号化され、coeff_sign_flagフラグは、第3の走査パスにおいて符号化される(さらに、全てのバイパス符号化されたabs_remainder構文要素は、別々のパスにおいて符号化される)。別の例では、sig_coeff_flag、coeff_sign_flag、sig_coeff_flag、abs_level_gt1_flag-/abs_level_gtX_flag(0)、およびpar_level_flagは、1つの走査パスにおいて符号化され、abs_level_gt3_flag/abs_level_gtX_flag(1)、abs_level_g5_flag/abs_level_gtX_flag(2)、abs_level_g7_flag/abs_level_gtX_flag(3)、abs_level_g9_flag/abs_level_gtX_flag(4)は、第2の走査パスにおいて符号化される(ここでも、全てのバイパス符号化されたabs_remainder構文要素は、別のパスにおいて符号化される)。別の例では、sig_coeff_flag、abs_level_gt1_flag/abs_level_gtX_flag(0)、およびpar_level_flagは、第1の走査パスにおいて符号化される。追加のgtXフラグabs_level_gt3_flag/abs_level_gtX_flag(1)、abs_level_g5_flag/abs_level_gtX_flag(2)、abs_level_g7_flag/abs_level_gtX_flag(3)、abs_level_g9_flag/abs_level_gtX_flag(4)は、別個の走査パスにおいて符号化され、coeff_sign_flagフラグは、別の別個の走査パスにおいて符号化される(ここでも、全てのバイパス符号化されたabs_remainder構文要素は、別々のパスにおいて符号化される)(
図19を比較されたい)。
【0181】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する装置100は、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択するように構成されており、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備える。さらにまた、装置100は、所定の係数の絶対値がXよりも大きいか否かを示すN個の大なりXフラグをコンテキスト適応エントロピー復号し、可変長コードを使用して、所定の係数の絶対値がNに依存する絶対閾値を超える量を示す余りを復号し、所定の係数の符号を復号することによって、所定の係数について、所定の走査順序で係数のブロックの係数をトラバースする一連のパスにおいて、所定の変換ブロックについて、データストリーム14から係数のブロック122を復号する120ように構成され、装置は、選択された変換が恒等変換であるかまたは少なくとも1つの非恒等変換のうちの1つであるかに応じて、一連のパスにわたるN個の大なりXフラグ、余りおよび符号の復号を異なって分配するように構成されている(例えば、
図19を参照)。さらに、装置100は、係数のブロックが選択された変換にしたがって残差サンプル配列に関連付けられるように、係数のブロックから、所定の変換ブロックの残差サンプル配列を導出し、残差サンプル配列を使用して所定の変換ブロックの予測を修正し、所定の変換ブロックを再構成するように構成されている。
【0182】
9.さらに、変換ブロック内のサンプル位置が、正規モードにおいて逆順ではなく順方向に処理されるように、走査は、正規モードに対して反転されてもよい。順方向走査の使用は、各サンプルが独立して量子化および再構成されるブロックDPCMまたは残差DPCMなどの差動パルス符号変調(DPCM)手法とレベルコーディングとを組み合わせるときに有益である。
【0183】
換言すれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する装置100は、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択するように構成されており、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備える。さらにまた、装置は、選択された変換が非恒等変換である場合、非恒等変換のDC係数に向かう(例えば、最も高い周波数係数からそれ以降、場合によっては「最後の」重要係数位置から開始する)第1の走査順序(例えば、
図13bに示されるような走査順序85)に沿って(場合によっては、数回のパスにおいてこの順序に数回続く)データストリームから係数のブロックの係数を復号することによって、所定の変換ブロックについて、データストリームから係数のブロックを復号するように構成されている。さらにまた、装置は、選択された変換が恒等変換である場合に、左上サンプル位置から右下サンプル位置に至る第2の走査順序(例えば、
図13aに示されるような走査順序85)に沿ってデータストリームから係数のブロックの係数を復号することによって、所定の変換ブロックについて、データストリームから係数のブロックを復号するように構成されている。さらに、装置100は、係数のブロックが選択された変換にしたがって残差サンプル配列に関連するように、係数のブロックから所定の変換ブロックの残差サンプル配列を導出し(このステップは、恒等変換の場合、DPCM反転を実行するように、水平DPCMの場合は左側、垂直DPCMの場合はそれぞれの係数の上部などの所定の側のブロックに存在する係数を各係数に追加することを含んでもよい)、残差サンプル配列を使用して所定の変換ブロックの予測を修正し、所定の変換ブロックを再構成するように構成されている。
【0184】
実施形態によれば、装置100は、所定の変換ブロックが符号化されるのに使用するDPCM方向に応じて第2の走査順序、例えば、水平DPCMの場合は水平ラスタ走査、垂直DPCMの場合は垂直ラスタ走査を選択するように構成されている。
TSMにおける符号構文要素の符号化
【0185】
規則的に変換された残差信号の場合、レベルの予想値は、主にゼロであり、すなわち、絶対レベルは、ゼロに等しい値の周りに統計的に分布する。その結果、符号値は、確率が等しく分散されるため、適応コンテキストモデルを使用するエントロピーコーダのバイパスモードで送信される。カメラ取り込みコンテンツについて観察されるものとは対照的に、TSMにおけるレベルは、所与の領域に対して同じバイアスを有する傾向があり、すなわち、それらは局所的にバイアスされるが、予想値は、カメラ取り込みコンテンツの場合と同様に値ゼロに等しくてもよい。結果として、適応コンテキストモデリングを使用するエントロピー符号化エンジンのためのコンテキストモデルを使用した符号情報の符号化は有益である。符号値の符号化のためのコンテキストモデル選択は、例えば、隣接する空間位置を評価するローカルテンプレートを使用して、ローカルに設計されることができる。本発明は、変換特性が適切でない1つ以上のTSMモードにおける符号値の既存のコンテキストモデリングと組み合わせることができるさらなる段階を説明する。
順方向適応構成
【0186】
コンテキストモデルを使用して符号値を符号化するとき、エントロピー符号化エンジンの実際の設計に起因して下限が存在するか、または換言すれば、エントロピー符号化エンジンの実装に起因して最小コードワード長が制限されるが、理論上の最小コードワード長はより短くてもよい。解決策は、領域内の全ての符号が同じ値を有するかどうかを示すビットストリーム内の追加の構文要素の送信である(
図22を比較されたい)。いくつかの構成が可能であり、ブロックサイズおよび/または動作点などのさらなるデータに応じて組み合わせることができる。領域の構成は、各サブブロック(請求項56を比較されたい)、または各変換ブロック(請求項60を比較されたい)、または双方の組み合わせ(請求項61を比較されたい)とすることができる。3つ全ての場合において、領域は固定されてもよい。あるいは、領域構成は適応的であり(請求項59を比較されたい)、例えば、変換ブロック内の連続する走査位置の数、ならびに適応領域内、および/または同じサブブロック、変換ブロック、および/またはコーディングユニット内の現在の領域に対する先行領域内で生じる統計量に依存する。
【0187】
実施形態によれば、装置100は、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号するために、所定の変換ブロックについて、変換の所定のリストから選択された変換112を選択するように構成されており、変換の所定のリストは、恒等変換および少なくとも1つの非恒等変換を備える。さらにまた、装置100は、所定の変換ブロックについて、選択された変換が少なくとも1つの非恒等変換123
1のうちの1つである場合、データストリーム14から構文要素を復号し900、そこから、非ゼロ係数の所定のグループ内の非ゼロ係数の符号が互いに等しい910かまたは等しくない920かを導出し、そうである場合910、非ゼロ係数930の所定のグループ内の非ゼロ係数の符号を導出し、非ゼロ係数の所定のグループ内の非ゼロ係数の符号が互いに等しくない場合920、非ゼロ係数ベースごとに符号ビットを復号する940ことによって非ゼロ係数の所定のグループ内の非ゼロ係数の符号を復号することによって、データストリームから係数のブロックを復号する120ように構成されている。さらにまた、装置100は、所定の変換ブロックについて、選択された変換が恒等変換123
2である場合、非ゼロ係数の所定のグループ内の非ゼロ係数の符号が互いに等しいかどうかにかかわらず非ゼロ係数ベースごとに符号ビットを復号することにより、非ゼロ係数の所定のグループ内の非ゼロ係数の符号を復号する940ことによって、データストリームから係数のブロックを復号するように構成されている。さらに、装置100は、係数のブロックが選択された変換にしたがって残差サンプル配列に関連付けられるように、係数のブロックから、所定の変換ブロックの残差サンプル配列を導出し、残差サンプル配列を使用して所定の変換ブロックの予測を修正し、所定の変換ブロックを再構成するように構成されている(
図22を参照)。
【0188】
実施形態によれば、装置100は、非ゼロ係数の所定のグループを、係数のブロックの所定のサブブロック内に位置する係数のブロック内の非ゼロ係数として判定するように構成されている。
【0189】
実施形態によれば、装置100は、選択された変換が少なくとも1つの非恒等変換のうちの1つである場合、データストリームからさらなる構文要素を復号し、そこから、非ゼロ係数のさらなる所定のグループ内の非ゼロ係数の符号が互いに等しいかまたは等しくないかを導出し、そうである場合、非ゼロ係数のさらなる所定のグループ内の非ゼロ係数の符号を導出し、非ゼロ係数の所定のグループ内の非ゼロ係数の符号が互いに等しくない場合、非ゼロ係数ベースごとにさらなる符号ビットを復号することによって非ゼロ係数のさらなる所定のグループ内の非ゼロ係数の符号を復号するように構成されている。さらに、装置100は、係数のブロックの非ゼロ係数を、非ゼロ係数のグループおよび非ゼロ係数のさらなるグループを含む非ゼロ係数の複数のグループにグループ化するように構成されている。
【0190】
実施形態によれば、装置100は、非ゼロ係数の各グループがサブブロックのうちの1つに位置する非ゼロ係数のみを備えるように、サブブロックに係数のブロックを分割するように構成されている。
【0191】
実施形態によれば、装置100は、サブブロック復号順序で所定のサブブロックに先行するサブブロックのうちの1つ以上における1つ以上の非ゼロ係数の符号に基づく所定のサブブロックのサイズに関して、分割を適合させるように構成されている。追加的にまたは代替的に、装置100は、以前に復号された非ゼロ係数の符号に基づいて分割を適合させるように構成されている。
実施形態によれば、装置100は、係数のブロック内の全ての非ゼロ係数を含むように、非ゼロ係数の所定のグループを判定するように構成されている。
【0192】
実施形態によれば、装置100は、選択された変換が少なくとも1つの非恒等変換のうちの1つである場合、データストリームからブロックグローバル構文要素を復号し、そこから、所定の変換ブロック内の全ての非ゼロ係数の符号が互いに等しいか否かを導出し、そうである場合、所定の変換ブロック内の全ての非ゼロ係数の符号、および、所定の変換ブロック内の全ての非ゼロ係数の符号が互いに等しくない場合、データストリームからの構文要素の復号を実行するように構成されている。
【0193】
追加の構文要素は、条件が満たされない場合、すなわち、符号情報が同じ値を有しない場合のオーバーヘッドを導入する。符号値のセットの1つの値のみが余りの値と異なると仮定すると、追加の構文要素を使用する構成は非効率になる。代替的な順方向適応通知は傾向インデックスである。傾向インデックスを通知するとき、復号器は、ビットストリームから解析された傾向インデックスに応じて設定された特定のコンテキストモデルを使用する(
図23を比較されたい)。スケール、すなわち、傾向インデックスの数は、固定であっても適応的であってもよく、スケールは、スライスヘッダまたはシーケンスパラメータセットなどのビットストリームヘッダ内、および/またはピクチャパラメータセット内で通知されてもよい(請求項68および請求項69を比較されたい)。例示的な構成は、3つの傾向インデックスを指定することができ、第1の傾向インデックスは、正符号値の高い確率を示し、第2の傾向インデックスは、負符号値の高い確率を示し、最後の傾向インデックスは、不確実性事例を示す。ここでも、傾向インデックスは、各サブブロック、または各変換ブロック、または双方の組み合わせについて通知されることができる。領域内の全ての符号が同じ値を有することを示す構文要素とは対照的に、傾向インデックスは、コーディングユニット、および/またはスライスヘッダ、および/またはピクチャパラメータセット、および/またはシーケンスパラメータセットなどのさらに高いレベルで通知されることができる(請求項67を比較されたい)。
【0194】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する装置100は、所定の変換ブロックについて、変換の所定のリストから選択された変換112を選択するように構成されており、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備える。さらにまた、装置100は、係数の所定のブロックの非ゼロ係数の符号を復号し1000、データストリーム14から符号確率傾向インデックスを導出し1100、選択された変換112が恒等変換123
2である場合、符号確率傾向インデックス1110に関連付けられたコンテキストモデル(正となる確率などの特定の符号確率を定義するコンテキストモデル)を使用して、所定の非ゼロ係数の符号(復号順序の1番目またはインデックスが適用される係数ブロックの特定のサブブロック内のものなど)をエントロピー復号することによって、および選択された変換が少なくとも1つの非恒等変換123
1のうちの1つである場合、所定の非ゼロ係数の符号をバイパス復号する1200こと(例えば、固定等確率を用いたコンテキスト適応エントロピー復号)によって、所定の変換ブロックについて、データストリーム14から係数のブロックを復号する120ように構成されている。さらに、装置100は、係数のブロックが選択された変換にしたがって残差サンプル配列に関連付けられるように、係数のブロックから、所定の変換ブロックの残差サンプル配列を導出し、残差サンプル配列を使用して所定の変換ブロックの予測を修正し、所定の変換ブロックを再構成するように構成されている(
図23を参照)。
【0195】
実施形態によれば、装置100は、選択された変換が恒等変換である場合、符号確率傾向インデックスに関連付けられたコンテキストモデルを使用して全ての非ゼロ係数の符号をエントロピー復号し、選択された変換が少なくとも1つの非恒等変換のうちの1つである場合、全ての所定の非ゼロ係数の符号をバイパス復号(例えば、固定等確率を用いたコンテキスト適応エントロピー復号)するように構成されている。
【0196】
実施形態によれば、装置100は、選択された変換が恒等変換である場合、所定の非ゼロ係数の符号に基づいて、符号確率傾向インデックスに関連付けられたコンテキストモデルに関連付けられた符号確率を更新するように構成されている。
【0197】
実施形態によれば、複数のコンテキストモデルが符号確率傾向インデックスと関連付けられ、装置は、符号確率傾向インデックスに関連付けられた複数のコンテキストモデルの中の所定のコンテキストモデルを使用して非ゼロ係数の符号のそれぞれをエントロピー復号し、選択された変換が恒等変換である場合、1つ以上の隣接する非ゼロ係数の符号(それぞれの符号におよびその周囲に位置するテンプレートの位置に位置するものなど)に応じて符号確率傾向インデックスに関連付けられた複数のコンテキストモデルの中の所定のコンテキストモデルを選択し、選択された変換が少なくとも1つの非恒等変換のうちの1つである場合、全ての所定の非ゼロ係数の符号をバイパス復号(例えば、固定等確率を用いたコンテキスト適応エントロピー復号)するように構成されている。
【0198】
実施形態によれば、装置100は、選択された変換が恒等変換である場合、1つ以上の隣接する非ゼロ係数のうちの正または負の符号の頻度に応じて、符号確率傾向インデックスに関連付けられた複数のコンテキストモデルの中から所定のコンテキストモデルを選択するように構成されている。
【0199】
実施形態によれば、符号確率傾向インデックスは、データストリームにおいて、具体的には、所定の非ゼロ係数が位置する係数のブロックのサブブロック、所定の変換ブロック、所定の変換ブロックを含む符号化ブロック、ピクチャの所定の変換ブロックを含むピクチャスライス、またはピクチャを含むピクチャシーケンスについて通知される。
【0200】
実施形態によれば、装置100は、データストリームから、異なるカーディナリティを有するコンテキストモデルの異なるセット(説明で与えられた例の場合は3つ)のどれが符号確率傾向インデックスに適用されるかに関する情報を読み取り、コンテキストモデルと関連付けられた符号確率が、コンテキストモデルの第1のセットのカーディナリティよりも低いカーディナリティを有するコンテキストモデルの第2のセット内よりも、コンテキストモデルの第1のセット内の方が高密度に分布され、符号確率傾向インデックスに適用するコンテキストモデルのセットへのポインタとして符号確率傾向インデックスを使用することによってコンテキストモデルを選択するように構成されている。
【0201】
実施形態によれば、符号確率傾向インデックスは、データストリームにおいて、具体的には、所定の変換ブロックを含むピクチャスライス、ピクチャ、またはピクチャを含むピクチャシーケンスについて通知される。
逆適応構成
【0202】
順方向適応構成とは対照的に、逆方向適応手法は、ビットストリーム内に追加の構文要素を必要としない。TSM内の符号値は、局所的にバイアスされているため、コンテキストモデリングは、局所的な統計量、例えば、符号構文要素の総数に対する正または負の符号値の数を考慮することができる(
図24を比較されたい)。具体的には、関係の相対的な数を導出することができ、特定の閾値が満たされたときに異なるコンテキストモデルセットが選択されることができる(請求項71を比較されたい)。そのような閾値構成は、対称または非対称とすることができる。例えば、構成は、3つのコンテキストモデルセットを使用することができ、第1のコンテキストモデルセットは、正符号の確率が高い事例に適しており、第2のコンテキストモデルセットは、負符号の確率が高い事例に適しており、最終コンテキストモデルセットは、不確実性事例を表す。対称構成の場合、第1または第2のコンテキストモデルセットは、比が値b0=xよりも小さいか、または値b1=(1-x)よりも大きい場合に選択され、xは比である。非対称構成の場合、値b0およびb1は、対称構成について与えられた別の変数を介して関係しない。さらにまた、閾値bの数およびそれらの値は、固定または適応的であってもよい(請求項73を比較されたい)。その情報の特定の構成は、コーディングユニットレベル、スライスレベルなどにおいて通知されることができる。
【0203】
実施形態によれば、装置100は、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号するために、所定の変換ブロックについて、変換の所定のリストから選択された変換112を選択するように構成されており、変換の所定のリストは、恒等変換および少なくとも1つの非恒等変換を備える。さらにまた、装置100は、複数のコンテキストモデルの中から所定のコンテキストモデル1300を使用して所定の非ゼロ係数の符号を復号し、選択された変換が恒等変換123
2である場合、以前に復号された係数の符号の統計量1400に応じて複数のコンテキストモデルの中から所定のコンテキストモデル1300を選択する1310ことによって、所定の係数ブロックの非ゼロ係数の符号を復号する1000
1ことによって、所定の変換ブロックについて、データストリーム14から係数ブロックを復号する120ように構成されている。さらにまた、装置100は、選択された変換が少なくとも1つの非恒等変換123
1のうちの1つである場合、所定の非ゼロ係数の符号をバイパス復号する(例えば、固定等確率を用いたコンテキスト適応エントロピー復号)ことによって所定の係数のブロックの非ゼロ係数の符号を復号する1000
2ことによって、所定の変換ブロックについて、データストリームから係数ブロックを復号する120ように構成されている。さらに、装置は、係数のブロックが選択された変換にしたがって残差サンプル配列に関連付けられるように、係数のブロックから、所定の変換ブロックの残差サンプル配列を導出し、残差サンプル配列を使用して所定の変換ブロックの予測を修正し、所定の変換ブロックを再構成するように構成されている(
図24を参照)。
【0204】
実施形態によれば、装置100は、選択された変換が恒等変換である場合、以前に復号された係数内の非ゼロ係数の中の正または負の符号の相対頻度に応じて所定のコンテキストモデルを選択するように構成されている。
実施形態によれば、装置100は、複数のコンテキストモデルの数コンテキストモデルをデフォルト数に設定するように構成されている。
実施形態によれば、装置100は、データストリームから複数のコンテキストモデルの数コンテキストモデルを導出するように構成されている。
【0205】
実施形態によれば、装置100は、コンテキストモデルを、正または負の符号の相対頻度について互いに隣接し且つ重なり合わない相対頻度間隔と関連付け、以前に復号された係数の非ゼロ係数の中の正または負の符号の相対頻度の中で、所定のコンテキストモデルに関連付けられた相対頻度間隔に含まれるように選択を実行するように構成されている。
【0206】
実施形態によれば、装置100は、以前に復号された係数が所定の変換ブロックよりも大きいピクチャまたはビデオ部分にわたって拡散するように、以前に復号された係数の符号にわたる統計量を判定するように構成されている。
【0207】
実施形態によれば、装置100は、選択された変換が恒等変換である場合、所定のコンテキストモデルを使用して所定の変換ブロックの全ての非ゼロ係数の符号をエントロピー復号するように構成されている。
【0208】
実施形態によれば、装置100は、所定のコンテキストモデルを使用して係数のブロックのサブブロック内に位置し且つ非ゼロの所定の係数を含む所定の変換ブロックの非ゼロ係数のサブセットの符号をエントロピー復号し、更新された統計量を取得するために、所定の変換ブロックの非ゼロ係数のサブセットの符号を使用して統計量を更新し、更新された統計量に応じて、複数のコンテキストモデルの中からさらなる所定のコンテキストモデルを選択し、選択された変換が恒等変換である場合、さらなる所定のコンテキストモデルを使用して、係数のブロックのさらなるサブブロック内に位置する所定の変換ブロックの非ゼロ係数のさらなるサブセットの符号をエントロピー復号するように構成されている。
【0209】
実施形態によれば、装置100は、選択された変換が恒等変換である場合、所定の非ゼロ係数の符号に基づいて、所定のコンテキストモデルに関連付けられた符号確率を更新するように構成されている。
【0210】
実施形態によれば、複数のコンテキストモデルは、コンテキストモデルのセットに分割され、装置は、以前に復号された係数の符号の統計量に基づいてコンテキストモデルの所定のセットを選択することによって、および選択された変換が恒等変換である場合、(それぞれの符号に位置し且つそれらを囲むテンプレートの位置に位置するものなどの)1つ以上の隣接する非ゼロ係数の符号に応じて、選択されたコンテキストモデルのセットの中から所定のコンテキストモデルを選択することによって選択を実行するように構成されている。
順方向適応構成と逆方向適応構成との組み合わせ
【0211】
本発明で説明した任意の順方向および逆方向適応構成の組み合わせは、それらが重複しないため、すなわち、コンテキストモデルセット選択規則に競合がないため可能である。例えば、傾向インデックスと逆適応手法との組み合わせは、初期コンテキストモデルセットが傾向インデックスを使用して導出され、逆適応手法に応じて更新されるような構成をもたらす(請求項64および請求項65を比較されたい)。
好ましい実施形態
【0212】
本発明の好ましい実施形態では、コンテキストコーディングされたビンの数に対する制限は、既存の二値化方式を維持しながらエントロピーコーディングエンジンのバイパスモードに切り替えることによって実現される。
【0213】
本発明のさらに好ましい実施形態では、コンテキストコーディングされたビンの数に対する制限は、エントロピーコーディングのバイパスモードに切り替え、第1の二値化境界をゼロに設定することによって実現され、すなわち、結果として得られる二値化は、ライスおよびExp-ゴロムコードのみの組み合わせである(
図20または請求項51を比較されたい)。
【0214】
本発明のさらに好ましい実施形態では、コンテキストコーディングされたビンの数の制限は、エントロピーコーディングのバイパスモードに切り替え、ライスコードのみなどの専用の二値化方式を使用することによって実現される(
図20を比較されたい)。
【0215】
本発明のさらに好ましい実施形態では、バイパスモードに切り替えるとき、全てのライスコードの中の特定のライスコード、または全てのExp-ゴロムコードの中のExp-ゴロムコードを選択するパラメータ導出が変更される。
【0216】
本発明のさらに好ましい実施形態では、コンテキストコーディングされたビンの数に対する制限は、エントロピーコーディングのバイパスモードに切り替えることによって実現され、重要度情報は、依然としてコンテキストモデルを使用してコーディングされる。この構成では、走査位置の残数も考慮して切り替え点が決定される必要がある。
【0217】
換言すれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する装置100は、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択するように構成されることができ、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備える。さらにまた、装置100は、ブロックの係数をトラバースする一連のパスにおいて、コンテキスト適応バイナリエントロピー復号を使用してデータストリームからの各係数についての1つ以上の所定のフラグ(例えば、パリティフラグおよび/または大なりXフラグ、sigフラグ;例えば、
図20に示すようなsig_flag92、par_flag96、gt1_flag98および/またはgt2_flag104)を復号することによって、所定の変換ブロックについて、データストリームから係数のブロックを復号するように構成されており、各所定のフラグは、それぞれの係数の絶対値が配置された(例えば、絶対値ドメインは、1つ以上のパスの先頭において始まる、例えば、Xビット表現の場合、係数0・・・2
X-1の一般的な絶対値ドメインから始まる)それぞれの係数の絶対値ドメイン90を低減し(例えば、パリティビット96は、偶数または偶数でない絶対値を除外することによって絶対値ドメイン90を半分に低減させ、大なりXフラグ、例えば、gt1_flag98およびgt2_flag104は、可能な絶対値の1つを除外するかまたは可能な絶対値のこの1つのみを残して他の全てを除外することによって可能な絶対値のドメインを低減させる)。さらにまた、装置100は、所定の変換ブロックについて、ブロックの係数をトラバースする一連のパスにおいて、絶対値ドメインのカーディナリティ90が、それぞれの係数について復号された1つ以上の所定のフラグによって1つに低減されない各係数について、それぞれの係数の絶対値ドメイン内のそれぞれの係数の絶対値を特定するための可変長コードのコードワード(例えば、ライス/Exp-ゴロムコード)を復号することによって、データストリームから係数のブロックを復号するように構成されている(例えば、可変長コードの符号長は、絶対値が増加するにつれて単調増加してもよい。ここで、コードワードは、低減された絶対値ドメイン、または必然的に低減された絶対値ドメインの適切なスーパーセットである一般的なものもしくはいくつかの他のもののみを自由に指す)。さらに、装置100は、係数のブロックが選択された変換にしたがって残差サンプル配列に関連付けられるように、係数のブロックから、所定の変換ブロックの残差サンプル配列を導出し、残差サンプル配列を使用して所定の変換ブロックの予測を修正し、所定の変換ブロックを再構成するように構成されている。装置は、一連のパスにおいて、1つ以上の所定のフラグを復号する際に、復号される係数がゼロか否かを示す、(したがって、必然的にコンテキスト適応二値エントロピー復号を使用して復号される)1つ以上の所定のフラグのうちの重要度フラグに関するものを除いて、絶対値ドメインのカーディナリティが非ゼロ係数の第2のセットと比較して非ゼロ係数の第1のセットの方が小さい(すなわち、最後のパス内で限界に到達する前の係数の方が、限界に到達した後の係数と比較して小さい)ように、所定数の所定のフラグに到達する(すなわち、全ての係数についてこれまでに復号された所定のフラグの総数が限界に到達する)とすぐに1つ以上の所定のフラグの復号を停止するように構成されており、所定数は、上限から重要度フラグがまだ復号されていない係数の数を差し引いたものに対応する(
図20と比較されたい)。
【0218】
本発明の好ましい実施形態では、TSMを符号化するレベルの処理順序は順方向であり、すなわち、走査は、DC周波数位置で開始し、最高AC周波数位置で終了する(
図21を比較されたい)。
【0219】
換言すれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する装置100は、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択するように構成されており、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備える。装置は、選択された変換が非恒等変換123
1である場合、非恒等変換のDC係数に向かう(例えば、最も高い周波数係数からそれ以降、場合によっては「最後の」重要係数位置から開始する)第1の走査順序85
1に沿って(場合によっては、数回のパスにおいてこの順序に数回続く)データストリームから係数のブロックの係数を復号することによって、所定の変換ブロックについて、データストリームから係数のブロックを復号する120ように構成されている。装置は、選択された変換が恒等変換123
2である場合に、左上サンプル位置から右下サンプル位置に至る第2の走査順序85
2に沿ってデータストリームから係数のブロックの係数を復号することによって、所定の変換ブロックについて、データストリームから係数のブロックを復号する120ように構成されている。この走査順序決定は、
図21に示されている。さらにまた、装置は、係数のブロックが選択された変換にしたがって残差サンプル配列に関連するように、係数のブロックから所定の変換ブロックの残差サンプル配列を導出し(このステップは、恒等変換の場合、DPCM反転を実行するように、水平DPCMの場合は左側、垂直DPCMの場合はそれぞれの係数の上部などの所定の側のブロックに存在する係数を各係数に追加することを含んでもよい)、残差サンプル配列を使用して所定の変換ブロックの予測を修正し、所定の変換ブロックを再構成するように構成されている。
【0220】
本発明のさらに好ましい実施形態では、走査パターンは、水平または垂直であってもよく、BDPCMおよび/またはRBDPCM(
図21を参照)などの使用される予測モードに結合される。
【0221】
換言すれば、装置100は、所定の変換ブロックが符号化されるのに使用するDPCM方向に応じて第2の走査順序852、例えば、水平DPCMの場合は水平ラスタ走査、垂直DPCMの場合は垂直ラスタ走査を選択するように構成されている。
【0222】
本発明の好ましい実施形態では、全てのコンテキストコーディングされたビンは、分離されたループではなく単一のループにおいてコーディングされ、バイパスモードにおいてコーディングされた最終レベル情報は、別の処理ループを形成する。
本発明のさらに好ましい実施形態では、各レベルは、次の走査位置を処理する前に完全にコーディングされる。
【0223】
本発明の好ましい実施形態では、正または負の値の数は、符号値の総数と共に追跡される。xの対称閾値を超えると、異なるコンテキストモデルセットが使用され、3つのコンテキストモデルセットをもたらす。統計量のレベルは変換ブロックである。
本発明のさらに好ましい実施形態では、統計量のレベルはサブブロックである。
本発明のさらに好ましい実施形態では、統計量のレベルはスライスである。
本発明のさらに好ましい実施形態では、閾値xは固定される。
本発明のさらに好ましい実施形態では、閾値xは可変である。
本発明のさらに好ましい実施形態では、コンテキストモデルセット内のインデックスのコンテキストモデリングは固定されており、1に等しい。
本発明の好ましい実施形態では、コンテキストモデルセットの数はまた3に等しく、閾値は非対称である。
本発明の好ましい実施形態では、閾値は、スライスヘッダまたはビットストリーム内のピクチャパラメータセットなどのヘッダ内で送信される。
本発明の好ましい実施形態では、符号構文要素のコーディングは、絶対レベルのコーディングから分離される。
本発明の好ましい実施形態では、符号値が特定の領域について同じであるかどうかを示す構文要素がビットストリームで送信される。
【0224】
本発明のさらに好ましい実施形態では、領域が変換ブロックとして定義されている特定の領域について符号値が同じであるかどうかを示す構文要素がビットストリームで送信される。
【0225】
本発明のさらに好ましい実施形態では、領域がサブブロックとして定義されている特定の領域について符号値が同じであるかどうかを示す構文要素がビットストリームで送信される。
【0226】
本発明のさらに好ましい実施形態では、領域がコーディングユニットとして定義されている特定の領域について符号値が同じであるかどうかを示す構文要素がビットストリームで送信される。
【0227】
本発明のさらに好ましい実施形態では、追加の構文要素のコンテキストモデリングは、領域がサブブロックとして定義されるときに隣接するサブブロックを評価することによって導出される。
【0228】
本発明のさらに好ましい実施形態では、追加の構文要素のコンテキストモデリングは、領域が変換ブロックとして定義されるときに隣接する変換ブロックを評価することによって導出される。
【0229】
表5は、numGtXFlags-1個のさらなる「大なりX」フラグを有する変換スキップモードについてのレベルコーディングの一実施形態のための構文表を示している。
【0230】
【表9】
【表10】
【表11】
以下の符号化のための装置は、復号のための上述した装置と同様または同等の特徴を備えることができる。
【0231】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを符号化する装置は、ピクチャを異なるサイズの変換ブロックに分割するように構成されている。さらにまた、装置は、所定の変換ブロックについて、所定の変換ブロックのサイズが所定の閾値サイズを超えるかどうかをチェックすることによって選択された変換を選択するように構成されている。所定の変換ブロックのサイズが所定の閾値サイズを超える場合、装置は、選択された変換を選択するためのデフォルトの方法を選択された変換の選択に使用するように構成されている。所定の変換ブロックのサイズが所定の閾値サイズを超えない場合、装置は、選択された変換の選択のために、変換の所定のリストの中から変換を選択し、選択された変換として所定の変換ブロックに使用されるように、変換の所定のリストの中から選択された変換を指すインデックスをデータストリーム内で送信するように構成され、変換の所定のリストは、恒等変換および非恒等変換を備える。さらに、装置は、所定の変換ブロックを予測し、所定の変換ブロックについて、係数のブロックをデータストリームに符号化し、その結果、選択された変換が恒等変換である場合、係数のブロックが、所定の変換ブロックを再構成するために、予測を修正するための残差サンプル配列として使用され、選択された変換が恒等変換でない場合、係数のブロックが、選択された変換に対応する逆変換にかけられ、所定の変換ブロックの残差サンプル配列を取得するように構成されている。
【0232】
実施形態によれば、装置は、所定の変換ブロックのサイズが所定の閾値サイズを超える場合、選択された変換にデフォルトの非恒等変換を使用するように構成されている。
実施形態によれば、デフォルトの非恒等変換は、変換の所定のリストに含まれる。
実施形態によれば、装置は、データストリームから所定の閾値サイズを導出するように構成されている。
【0233】
実施形態によれば、装置は、所定の変換ブロックのサイズが所定の閾値サイズを超えない場合、所定の変換ブロックのデータストリーム内の現在位置にインデックスを符号化し、所定の変換ブロックのサイズが所定の閾値サイズを超える場合、インデックス以外の(例えば、インデックスの代わりに別の要素が読み出されるが、スキップおよび読み出しではないという意味ではなく、データストリーム内のその位置までは構文が同じとすることができるが、データストリームは、実際にはインデックスを含まないという点で)構文要素をデータストリームの現在の位置に符号化するように構成されている。
【0234】
実施形態によれば、装置は、所定の変換ブロックを含む複数の変換ボックに分割されたピクチャのコーディングブロックについてのデータストリームにインデックスを符号化するように構成されている。(場合によっては、統合されたMTS構文は、より高いレベルにおけるCUの分離したセットとして通知される可能性があることに留意されたい)、すなわち、インデックスは、符号化ブロックのセットについて有効である可能性がある。
実施形態によれば、変換ブロックは、輝度変換ブロックであり、装置は、彩度変換ブロックに固定デフォルト変換を使用するように構成されている。
実施形態によれば、装置は、選択された変換を、所定の変換ブロック内のピクチャの輝度および彩度成分に適用するように構成されている。
【0235】
実施形態によれば、装置は、ピクチャの輝度および彩度成分の成分ごとに所定の変換ブロックのデータストリームにインデックスを符号化するように構成されている。
【0236】
実施形態によれば、装置は、変換ブロックが輝度変換ブロックであり、彩度変換ブロックに固定デフォルト変換が使用されるべきかどうか、選択された変換が、所定の変換ブロック内のピクチャの輝度および彩度成分に適用されるべきかどうか、またはデータストリームからのインデックスが、ピクチャの輝度および彩度成分の成分ごとに所定の変換ブロックについて復号されるべきかどうか、をデータストリーム内で通知するように構成されている。
【0237】
実施形態によれば、装置は、所定の変換ブロックについて、所定のブロックの選択された変換が1つ以上の変換の所定のセットに含まれるかどうかに応じて、データストリームに係数のブロックを符号化するように構成されている。さらにまた、装置は、所定の変換ブロックについて、データストリームに係数のブロックを符号化する際に、所定のブロックについて選択された変換が1つ以上の変換の所定のセットに含まれる場合、係数のブロックが少なくとも1つの非ゼロ係数を有するかどうかを通知する符号化ブロックフラグをデータストリームに符号化するように構成され、装置は、所定の変換ブロックについて、データストリームに係数のブロックを符号化する際に、所定のブロックについて選択された変換が1つ以上の変換の所定のセットに含まれない場合、係数のブロックが少なくとも1つの非ゼロ係数を有すると推論するように構成されている(換言すれば、次いで、データストリームにCBFを符号化しない、またはさらに換言すれば、所定のブロックについて選択された変換が1つ以上の変換の所定のセットに含まれる場合、CBFが符号化されるデータストリームの現在の部分とは異なる構文要素を符号化する)。
【0238】
実施形態によれば、1つ以上の変換の所定のセットは、選択された変換を選択するためのデフォルトの方法にしたがってデフォルトで選択された恒等変換およびデフォルトの非恒等変換を備える。
【0239】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを符号化する装置は、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択し、選択された変換を指す所定の変換ブロックのデータストリームにインデックスを符号化するように構成されている。さらにまた、装置は、所定の変換ブロックを予測し、所定の変換ブロックについて、係数のブロックをデータストリームに符号化し、その結果、係数のブロックから、所定の変換ブロックの残差サンプル配列が、係数のブロックが選択された変換にしたがって残差サンプル配列に関連するように導出可能であり、所定の変換ブロックの予測が、所定の変換ブロックを再構成するために残差サンプル配列を使用して修正可能であるように構成されている。装置は、所定の変換ブロックについて、所定のブロックの選択された変換が1つ以上の変換の所定のセットに含まれるかどうかに応じて係数のブロックをデータストリームに符号化する際に、所定のブロックの選択された変換が1つ以上の変換の所定のセットに含まれる場合、係数のブロックが少なくとも1つの非ゼロ係数を有するかどうかを通知する符号化ブロックフラグをデータストリームに符号化するように構成されている。さらに、装置は、所定の変換ブロックについて、所定のブロックの選択された変換が1つ以上の変換の所定のセットに含まれるかどうかに応じて係数のブロックをデータストリームに符号化する際に、所定のブロックの選択された変換が1つ以上の変換の所定のセットに含まれていない場合(換言すれば、次いで、CBFをデータストリームに符号化しない、またはさらに換言すれば、所定のブロックの選択された変換が1つ以上の変換の所定のセットに含まれる場合、CBFが符号化されるデータストリームの現在の部分とは異なる構文要素を符号化する)、係数のブロックが少なくとも1つの非ゼロ係数を有することの通知として、符号化ブロックフラグが符号化器側で推論される必要がある符号化ブロックフラグをデータストリームに符号化するのを控えるように構成されている。
実施形態によれば、1つ以上の変換の所定のセットは、恒等変換を備える。
【0240】
実施形態によれば、装置は、データストリームに応じて変換の所定のリストをポピュレートするか、またはポピュレートおよびソートし、変換の所定のリスト内の各変換に可変長コードの1つのコードワードが割り当てられ、コードワードが割り当てられた変換の所定のリスト内の変換のランクとともに可変長コードのコードワードのコードワード長が単調増加するように、可変長コードを使用してデータストリームにインデックスを符号化するように構成されている。
【0241】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを符号化する装置は、所定の変換ブロックを予測し、所定の変換ブロックについて、係数のブロックが少なくとも1つの非ゼロ係数を有するかどうかを通知する符号化ブロックフラグをデータストリームに符号化することを含み、係数のブロックをデータストリームに符号化するように構成されている。装置は、符号化ブロックフラグが、係数のブロックが少なくとも1つの非ゼロ係数を有することを通知する場合、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択し、変換の所定のリスト内の選択された変換を指す所定の変換ブロックのデータストリームにインデックスを符号化するように構成されている。係数のブロックから、所定の変換ブロックの残差サンプル配列が導出可能であり、その結果、係数のブロックは、選択された変換にしたがって残差サンプル配列に関連し、所定の変換ブロックの予測は、所定の変換ブロックを再構成するために残差サンプル配列を使用して修正可能である。装置は、符号化ブロックフラグが、係数のブロックが少なくとも1つの非ゼロ係数を有していないことを通知する場合、予測修正なしで所定の変換ブロックを再構成するように構成されている(換言すれば、その後、符号化ブロックフラグが、係数のブロックが少なくとも1つの非ゼロ係数を有しないことを通知する場合、インデックスが符号化されるデータストリームの現在の部分からのインデックスとは異なる構文要素を符号化することなどによって、データストリームにインデックスを符号化しない)。
【0242】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを符号化する装置は、データストリームに応じて変換の所定のリストをポピュレートまたはポピュレートおよびソートし、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択するように構成されている。さらにまた、装置は、可変長コードを使用して変換の所定のリスト内の選択された変換を指すインデックスをデータストリームに符号化し、その結果、変換の所定のリスト内の各変換が、可変長コードの1つのコードワードを割り当てられ、可変長コードのコードワードのコードワード長が、コードワードが割り当てられた変換の所定のリスト内の変換のランクとともに単調増加するように構成されている。さらに、装置は、所定の変換ブロックの予測を導出し、所定の変換ブロックについて、係数のブロックをデータストリームに符号化し、その結果、係数のブロックから、所定の変換ブロックの残差サンプル配列が導出可能であり、その結果、係数のブロックが、選択された変換にしたがって残差サンプル配列に関連し、所定の変換ブロックが、所定の変換ブロックを再構成するために残差サンプル配列を使用して所定の変換ブロックの予測によって再構成可能であるように構成されている。
【0243】
実施形態によれば、装置は、少なくともピクチャについてグローバルに有効なデータストリーム内の構文要素に応じて変換の所定のリストをソートするように構成されている。
実施形態によれば、装置は、所定の変換ブロックの空間的近傍におけるサンプル統計の評価に応じて変換の所定のリストをソートするように構成されている。
【0244】
実施形態によれば、装置は、所定の変換ブロックの空間的近傍内のブロックについてデータストリーム内で通知された構文要素に応じて変換の所定のリストをソートするように構成されている。
【0245】
実施形態によれば、装置は、データストリームの少なくとも1つの状態が存在するように変換の所定のリストをソートするように構成されており、その結果、変換の所定のリストをソートすることが、それに割り当てられた可変長コードの最短コードワードを有する先頭ランクに恒等変換を配置する。
【0246】
実施形態によれば、装置は、可変長コードの第1のコードワードと、第1のコードワードが可変長コードの最長コードワードである場合にそれに続く固定長コードの第2のコードワードとから構成される合成可変長コードのコードワードを使用してデータストリームにインデックスを符号化するように構成されている。可変長コードの2つの非最長コードワードのうちの1つのみから構成される合成可変長コードのコードワードが、恒等変換および所定の非恒等変換に割り当てられ、恒等変換および所定の非恒等変換を識別し、合成可変長コードのさらなるコードワードが、変換の所定のリストのさらなる非恒等変換に割り当てられ、さらなる非恒等変換を識別する。
【0247】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを符号化する装置は、所定の変換ブロックの予測を導出するように構成されている。さらにまた、装置は、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択し、第1のコードワードが可変長コードの最長コードワードである場合、固定長コードの第2のコードワードが続く可変長コードの第1のコードワードから構成される合成可変長コードコードワードを使用して、選択された変換を指すデータストリームへの変換の所定のリストにインデックスを符号化するように構成されている。可変長コードの2つの非最長コードワードのうちの1つのみから構成される合成可変長コードのコードワードは、変換の所定のリストに含まれる恒等変換および所定の非恒等変換に割り当てられ、恒等変換および所定の非恒等変換を識別し、合成可変長コードのさらなるコードワードは、変換の所定のリストのさらなる非恒等変換に割り当てられ、さらなる非恒等変換を識別する。さらに、装置は、所定の変換ブロックについて、係数のブロックをデータストリームに符号化し、その結果、係数のブロックが、選択された変換にしたがって残差サンプル配列に関連し、所定の変換ブロックが、残差サンプル配列を使用して所定の変換ブロックの予測を修正することによって再構成可能であるように構成されている。
【0248】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する装置は、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択するように構成されており、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備える。さらにまた、装置は、所定の変換ブロックについての予測を導出し、所定の変換ブロックについて、選択された変換が非恒等変換であるか否かをチェックすることによって、係数のブロックをデータストリームに符号化するように構成されている。選択された変換が非恒等変換である場合、装置は、所定の変換ブロックについて、係数のブロックをデータストリームに符号化するための所定の係数位置を取得するために、係数のブロックの全ての係数をトラバースする走査順序に沿って、非ゼロ係数が最初に遭遇した場合、または係数のブロックの全ての係数をトラバースする走査順序に沿って、非ゼロ係数が最後に遭遇した場合に、位置情報をデータストリームに符号化し(以下に留意されたい。上記実施形態では、この位置は、左上から右下に向かう走査順序に沿って測定される最後の位置と呼ばれるが、コーディングを開始した実際の走査は、これらの実施形態にしたがってそこで開始した。すなわち、実際のコーディングは、右下から左上隅に向かう逆の走査順序で行われた。ここで、走査順序はコーディング順である。双方の走査方向が予想される次の実施形態を参照されたい)、係数のブロックの全ての非ゼロ係数を含み且つ所定の係数位置から始めてまたはそれまで走査順序によってトラバースされる、係数のブロックの第1の係数をデータストリームに符号化し、第1の係数とは異なる係数のブロックの第2の係数をゼロであると推論し、所定の変換ブロックについて、係数のブロックをデータストリームに符号化するように構成されている。選択された変換が恒等変換である場合、装置は、所定の変換ブロックについて、係数のブロックをデータストリームに符号化するために、係数のブロックの全ての係数をデータストリームに符号化するように構成されている。係数のブロックは、選択された変換にしたがって残差サンプル配列に関連し、所定の変換ブロックは、残差サンプル配列を使用してその予測を修正することによって再構成可能である。
【0249】
実施形態によれば、装置は、データストリームへの係数のブロックの第1の係数の符号化において、走査順序を使用し、第1の係数が所定の係数位置から始まる走査順序によってトラバースされるように、所定の係数位置において第1の係数の符号化を開始し、または第1の係数が所定の係数位置まで走査順序によってトラバースされるように、走査順序を使用し、所定の係数位置において第1の係数の符号化を終了させるように構成されている。装置は、データストリームへの係数のブロックの全ての係数の復号において、走査順序によって最後にトラバースされる係数のブロックの係数において開始または終了する全ての係数を順次符号化するように構成されている。
【0250】
実施形態によれば、装置は、データストリームへの係数のブロックの全ての係数の符号化において、走査順序を使用し、走査順序によって最後にトラバースされた係数のブロックの係数における全ての係数の符号化を終了するか、または逆走査順序を使用し、走査順序によって最後にトラバースされた係数のブロックの係数における全ての係数の符号化を開始するように構成されている。(ここで、走査順序は、非恒等変換の場合のコーディング順序を定義するように定義されることに留意されたい)
【0251】
実施形態によれば、装置は、データストリームに所定の係数位置の座標を符号化する、またはデータストリームに走査順内の所定の係数位置のランクを符号化することによって位置情報を符号化するように構成されている。
【0252】
実施形態によれば、装置は、係数のブロックが分割されているサブブロックにおいて、係数のブロックの第1の係数の復号を実行するように構成され、その結果、走査順序は、異なるサブブロック内の第1の係数をトラバースする前に、1つのサブブロック内の全ての第1の係数をトラバースし、データストリーム内のサブブロックフラグ(「符号化サブブロックフラグ」は、上記実施形態において使用された)がゼロであることを通知するサブブロック内の第1の係数がゼロであると推論され、データストリーム内のサブブロックフラグが非ゼロであることを通知するサブブロック内の第1の係数がデータストリームに符号化されるとともに、所定の係数位置を含むサブブロックに関連する第1のサブブロックフラグと、その間に係数のブロックの第1の係数を含むサブブロックに関連する第2のサブブロックフラグとのうちの少なくとも1つを除いて、データストリームにサブブロックフラグおよび第1の係数が配置される所定の係数位置を符号化し、第1および第2の所定のサブブロックフラグのうちの少なくとも1つは、非ゼロであることを通知するように推論されるべきである。装置は、係数のブロックが分割されているサブブロック内のデータストリームへの係数のブロックの全ての係数の符号化を実行するように構成され、その結果、走査順序は、異なるサブブロック内の第1の係数をトラバースする前に1つのサブブロック内の全ての係数をトラバースし、データストリーム内のサブブロックフラグがゼロであることを通知するサブブロック内の係数がゼロであると推論され、データストリーム内のサブブロックフラグが非ゼロであることを通知するサブブロック内の係数がデータストリームに符号化されるとともに、全てのサブブロックについてデータストリームにサブブロックフラグを符号化する。
【0253】
実施形態によれば、装置は、全てのサブブロックについてのデータストリームへのサブブロックフラグの符号化において、サブブロック順序で順次に全てのサブブロックについてデータストリームにサブブロックフラグを符号化し、サブブロック順序で先行する全ての先行サブブロックフラグがゼロであることと通知する場合、非ゼロを通知するためにこれが推論されるように、サブブロック順序で最後であるサブブロックフラグを符号化しないように構成されている。(2.b.において上記実施形態を比較すると、以下が述べられる:「これはまた、他の全てのcoded_sub_block_flag構文要素が既に0に等しい場合を除いて、DCサブブロックのcoded_sub_block_flagも含む。この場合、DC coded_sub_block_flagは1に等しいと推論される」)
【0254】
実施形態によれば、装置は、全てのサブブロックについてデータストリームへのサブブロックフラグの符号化において、サブブロック順で全てのサブブロックについて順次データストリームにサブブロックフラグを符号化し、サブブロック順序で先行する全ての先行するサブブロックフラグがゼロであることを通知する場合、サブブロック順序で最後であるサブブロックフラグが係数順序で連続して非ゼロであることを通知するために推論される所定のサブブロック内の係数を符号化し、最後の係数、それぞれの係数が非ゼロであるかどうかを示す重要度フラグを除いて、所定のサブブロック内の各係数について符号化し、所定のサブブロック内の他の係数がゼロである場合、最後の係数を非ゼロであると推論し、所定のサブブロック内の他の係数のうちの少なくとも1つが非ゼロである場合、最後の係数の重要度フラグを符号化する。さらにまた、装置は、第1のサブブロックフラグおよび第2のサブブロックフラグの少なくとも一方を除くデータストリームへのサブブロックフラグの符号化において、非ゼロであること通知するように推論されるべき、第1のサブブロックフラグおよび第2のサブブロックフラグの少なくとも一方を除いてデータストリームにサブブロックフラグを符号化し、第2のサブブロックフラグが関連するサブブロック内の全ての第1の係数について、それぞれの係数が非ゼロであるかどうかを示す重要度フラグを必然的に符号化するように構成されている。(このサブブロックの他の全てのSIGフラグが0に等しい場合に(0,0)におけるSIGフラグの推論が行われた上記実施形態を比較すると、以下の記述の2.bを参照されたい:「この場合、DC coded_sub_block_flagは、1に等しいと推論される(inferDcSbCbf=1)。このDCサブブロックには少なくとも1つの重要度レベルがなければならないため、(0,0)における第1の位置のsig_coeff_flag構文要素は通知されず、このDCサブブロック内の全ての他のsig_coeff_flag構文要素が0に等しい場合には代わりに1に等しくなるように導出される(inferSbDcSigCoeffFlag=1)」)。
【0255】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する装置は、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択し、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備え、所定の変換ブロックの予測を導出するように構成されている。さらにまた、装置は、所定の変換ブロックについて、係数のブロックが分割されるサブブロック内のデータストリームに係数のブロックの係数を符号化することによって、係数のブロックをデータストリームに符号化するように構成され、データストリーム内のサブブロックフラグがゼロであることを通知するサブブロック内の係数がゼロであると推論され、データストリーム内のサブブロックフラグが非ゼロであることを通知するサブブロック内の係数がデータストリームに符号化される。ゼロであるとの係数の推論および非ゼロ係数の符号化は、選択された変換が少なくとも1つの非恒等変換のうちの1つである場合、第1のサブブロックフラグおよび最後のサブブロックフラグのうちの少なくとも1つを除いて、サブブロックフラグをデータストリームに順次符号化することによって実行され、第1のサブブロックフラグおよび最後のサブブロックフラグのうちの少なくとも1つが非ゼロであることを通知するように推論され、選択された変換が恒等変換である場合、全てのサブブロックについてサブブロックフラグをデータストリームに符号化する。係数のブロックは、選択された変換にしたがって残差サンプル配列に関連し、所定の変換ブロックは、残差サンプル配列を使用して所定の変換ブロックの予測を修正することによって再構成可能である。
【0256】
実施形態によれば、装置は、全てのサブブロックについてのデータストリームへのサブブロックフラグの符号化において、サブブロック順序で順次に全てのサブブロックについてデータストリームにサブブロックフラグを符号化し、サブブロック順序で先行する先行するサブブロックフラグのうちの少なくとも1つが非ゼロであることを通知する場合、サブブロック順序で最後であるサブブロックフラグを符号化し、サブブロック順序で先行する全ての先行するサブブロックフラグがゼロであることを通知する場合、サブブロック順序で最後であるサブブロックフラグが、非ゼロであることを通知するように推論されるように構成されている。
【0257】
実施形態によれば、装置は、非ゼロであることを通知するためにサブブロック順で最後であるサブブロックフラグを推論するときに、サブブロック内の全ての先行する係数がゼロである場合に、非ゼロであることを示すように非ゼロであることを通知するために最後のサブブロックフラグが推論されるサブブロック内の最後の係数を推論するように構成されている。
【0258】
実施形態によれば、装置は、コンテキスト適応エントロピー符号化およびコンテキストの使用によって、現在符号化されているサブブロックフラグをデータストリームに符号化するように構成されている。コンテキストは、選択された変換が少なくとも1つの非恒等変換のうちの1つである場合、現在符号化されているサブブロックフラグに隣接するサブブロックに関連するサブブロックフラグの論理和に依存し、選択された変換が恒等変換である場合、現在符号化されているサブブロックフラグに隣接するサブブロックに関連するサブブロックフラグの算術和に依存する。
【0259】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する装置は、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択し、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備え、所定の変換ブロックの予測を導出するように構成されている。さらにまた、装置は、所定の変換ブロックについて、係数のブロックが分割されているサブブロック内のデータストリームに係数のブロックを符号化し、データストリーム内のサブブロックフラグがゼロであることを通知するサブブロック内の係数がゼロであると推論し、データストリーム内のサブブロックフラグがデータストリームから非ゼロであることを通知するサブブロック内の係数を符号化するとともに、コンテキスト適応エントロピー符号化によっておよびコンテキストを使用してデータストリームに現在符号化されているサブブロックフラグを符号化することによって、データストリームに係数のブロックを符号化するように構成されている。コンテキストは、選択された変換が少なくとも1つの非恒等変換のうちの1つである場合、現在符号化されているサブブロックフラグに隣接するサブブロックに関連するサブブロックフラグの論理和に依存し、選択された変換が恒等変換である場合、現在符号化されているサブブロックフラグに隣接するサブブロックに関連するサブブロックフラグの算術和に依存する。係数のブロックは、選択された変換にしたがって残差サンプル配列に関連し、所定の変換ブロックは、残差サンプル配列を使用して所定の変換ブロックについての予測を修正することによって再構成可能である。
【0260】
実施形態によれば、装置は、データストリーム内のサブブロックフラグがデータストリームに非ゼロであることを通知するサブブロック内の現在の係数について、コンテキストを使用して現在の係数がゼロであるか否かを示す重要度フラグを符号化するように構成されている。コンテキストは、選択された変換が恒等変換である場合、現在の係数に直接隣接する係数の第1のセットのうちの非ゼロである係数の数に依存し、選択された変換が少なくとも1つの非恒等変換のうちの1つである場合、係数の第1のセット、係数の第1のセットよりも現在の係数から遠くに位置する係数、係数の第2のセットの値、および現在の係数の位置を含む係数の第2のセットのうちの非ゼロである係数の数に依存する。
【0261】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する装置は、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択し、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備え、所定の変換ブロックの予測を導出するように構成されている。さらにまた、装置は、所定の変換ブロックについて、現在の係数について、コンテキストを使用して現在の係数がゼロであるか否かを示す重要度フラグを符号化することによってデータストリームに係数のブロックを符号化するように構成されている。コンテキストは、選択された変換が恒等変換である場合、現在の係数に直接隣接する係数の第1のセットのうちの非ゼロである係数の数に依存し、選択された変換が少なくとも1つの非恒等変換のうちの1つである場合、係数の第1のセット、係数の第1のセットよりも現在の係数から遠くに位置する係数、係数の第2のセットの値、および現在の係数の位置を含む係数の第2のセットのうちの非ゼロである係数の数に依存する。係数のブロックは、選択された変換にしたがって残差サンプル配列に関連し、所定の変換ブロックは、残差サンプル配列を使用して所定の変換ブロックの予測を修正することによって再構成可能である。
【0262】
実施形態によれば、装置は、所定の係数の絶対値がXよりも大きいか否かを示すN個の大なりXフラグをコンテキスト適応エントロピー符号化し、所定の係数の絶対値がNに依存する絶対閾値を超える量を示す余りを、可変長コードを使用して符号化する、ことによって所定の係数を符号化するように構成されており、Nは、選択された変換が恒等変換である場合、選択された変換が少なくとも1つの非恒等変換のうちの1つである場合と比較して大きい。
【0263】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する装置は、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択し、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備え、所定の変換ブロックの予測を導出するように構成されている。さらにまた、装置は、所定の係数の絶対値がXよりも大きいか否かを示すN個の大なりXフラグをコンテキスト適応エントロピー符号化し、所定の係数の絶対値がNに依存する絶対閾値を超える量を示す余りを、可変長コードを使用して符号化する、ことによって所定の係数を符号化することによって、所定の変換ブロックについて、データストリームに係数のブロックを符号化するように構成され、Nは、選択された変換が恒等変換である場合、選択された変換が少なくとも1つの非恒等変換のうちの1つである場合と比較して大きい。係数のブロックは、選択された変換にしたがって残差サンプル配列に関連し、所定の変換ブロックは、残差サンプル配列を使用して所定の変換ブロックの予測を修正することによって再構成可能である。
【0264】
実施形態によれば、装置は、パスごとにN個の大なりXフラグのうちの1つ以上によってXを増加させながら順次N個の大なりXフラグをコンテキスト適応エントロピー符号化することによって一連のパス内のN個の大なりXフラグのコンテキスト適応エントロピー符号化を実行するように構成され、装置は、一連のパスの間にコンテキスト適応エントロピー符号化を使用して符号化されたフラグの数を記録し、数が所定のフラグ閾値を超える場合、N個の大なりXフラグのコンテキスト適応エントロピー符号化を停止するように構成されている。
【0265】
実施形態によれば、可変長コードはライスコードであり、装置は、選択された変換が恒等変換である場合、所定の係数に直接隣接する係数の第1のセットに応じて、および選択された変換が少なくとも1つの非恒等変換のうちの1つである場合、第1の係数のセットよりも所定の係数から遠くに位置する係数および係数の第1のセットを含む係数の第2のセットに応じて、ライスコードのライスパラメータを判定するように構成されている。
【0266】
実施形態によれば、装置は、所定のコンテキストを使用してコンテキスト適応エントロピー符号化を行い、選択された変換が恒等変換である場合、所定のコンテキストに関連付けられた確率を更新し、および選択された変換が少なくとも1つの非恒等変換のうちの1つである場合、バイパス符号化(例えば、固定等確率を用いたコンテキスト適応エントロピー符号化)することによって、所定の係数の符号を符号化するように構成されている。
【0267】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する装置は、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択し、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備え、所定の変換ブロックの予測を導出するように構成されている。さらにまた、装置は、所定のコンテキストを使用してコンテキスト適応エントロピー符号化を行い、選択された変換が恒等変換である場合、所定のコンテキストに関連付けられた確率を更新し、選択された変換が少なくとも1つの非恒等変換のうちの1つである場合、バイパス符号化(例えば、固定等確率を用いたコンテキスト適応エントロピー符号化)することによって、所定の係数の符号を符号化することによって、所定の変換ブロックについて、データストリームに係数のブロックを符号化するように構成されている。係数のブロックは、選択された変換にしたがって残差サンプル配列に関連し、所定の変換ブロックは、残差サンプル配列を使用して所定の変換ブロックの予測を修正することによって再構成可能である。
【0268】
実施形態によれば、装置は、選択された変換が少なくとも1つの非恒等変換のうちの1つである場合、パスごとにN個の大なりXフラグのうちの1つ以上によってXを増加させながら順次N個の大なりXフラグをコンテキスト適応エントロピー符号化することによって一連のパス内のN個の大なりXフラグのコンテキスト適応エントロピー符号化を実行し、一連のパスの間にコンテキスト適応エントロピー符号化を使用して符号化されたフラグの数を記録し、数が所定のフラグ閾値を超える場合、N個の大なりXフラグのコンテキスト適応エントロピー符号化を停止するように構成されている。さらに、装置は、選択された変換が恒等変換である場合、順次N個の大なりXフラグのコンテキスト適応エントロピー符号化を実行し、N個の大なりXフラグの中の重要度フラグ(X=0)を符号化した後、N個の大なりXフラグの中のさらなるN個の大なりXフラグの前に、所定の係数が絶対閾値よりも大きいかどうかを示す大なりXフラグ-バイパスフラグを符号化し、所定の係数が絶対閾値よりも大きいことを示す大なりXフラグ-バイパスフラグの場合、N個の大なりXフラグのコンテキスト適応エントロピー符号化を停止するように構成されている(例えば、所定の係数が絶対閾値よりも大きくないことを示す大なりXフラグの場合、N個の大なりXフラグのうちの最後の1つを除くさらなる大なりXフラグに対するN個の大なりXフラグのコンテキスト適応エントロピー符号化を再開する)。
【0269】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する装置は、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択し、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備え、所定の変換ブロックの予測を導出するように構成されている。さらにまた、装置は、所定の係数の絶対値がXよりも大きいか否かを示すN個の大なりXフラグをコンテキスト適応エントロピー符号化し、所定の係数の絶対値がNに依存する絶対閾値を超える量を示す余りを、可変長コードを使用して符号化する、ことによって所定の係数を符号化することによって、所定の変換ブロックについて、データストリームに係数のブロックを符号化するように構成されている。装置は、選択された変換が少なくとも1つの非恒等変換のうちの1つである場合、パスごとにN個の大なりXフラグのうちの1つ以上によってXを増加させながら順次N個の大なりXフラグをコンテキスト適応エントロピー符号化することによって一連のパス内のN個の大なりXフラグのコンテキスト適応エントロピー符号化を実行し、一連のパスの間にコンテキスト適応エントロピー符号化を使用して符号化されたフラグの数を記録し、数が所定のフラグ閾値を超える場合、N個の大なりXフラグのコンテキスト適応エントロピー符号化を停止するように構成されている。さらに、装置は、選択された変換が恒等変換である場合、順次N個の大なりXフラグのコンテキスト適応エントロピー符号化を実行し、N個の大なりXフラグの中の重要度フラグ(X=0)を符号化した後、N個の大なりXフラグの中のさらなるN個の大なりXフラグの前に、所定の係数が絶対閾値よりも大きいかどうかを示す大なりXフラグ-バイパスフラグを符号化し、所定の係数が絶対閾値よりも大きいことを示す大なりXフラグ-バイパスフラグの場合、N個の大なりXフラグのコンテキスト適応エントロピー符号化を停止するように構成されている(例えば、所定の係数が絶対閾値よりも大きくないことを示す大なりXフラグの場合、N個の大なりXフラグのうちの最後の1つを除くさらなる大なりXフラグに対するN個の大なりXフラグのコンテキスト適応エントロピー符号化を再開する)。係数のブロックは、選択された変換にしたがって残差サンプル配列に関連し、所定の変換ブロックは、残差サンプル配列を使用して所定の変換ブロックの予測を修正することによって再構成可能である。
【0270】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する装置は、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択し、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備え、所定の変換ブロックの予測を導出するように構成されている。さらにまた、装置は、所定の係数の絶対値がXよりも大きいか否かを示すN個の大なりXフラグをコンテキスト適応エントロピー符号化し、可変長コードを使用して、所定の係数の絶対値がNに依存する絶対閾値を超える量を示す余りを符号化し、所定の係数の符号を符号化することによって、所定の係数について、所定の走査順序で係数のブロックの係数をトラバースする一連のパスにおいて、所定の変換ブロックについて、データストリームに係数のブロックを符号化するように構成されている。装置は、選択された変換が恒等変換であるかまたは少なくとも1つの非恒等変換のうちの1つであるかに応じて、一連のパスにわたるN個の大なりXフラグ、余りおよび符号の符号化を異なって分配するように構成されている。係数のブロックは、選択された変換にしたがって残差サンプル配列に関連し、所定の変換ブロックは、残差サンプル配列を使用して所定の変換ブロックの予測を修正することによって再構成可能である。
【0271】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する装置は、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択するように構成されており、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備える。さらにまた、装置は、所定の変換ブロックについて、ブロックの係数をトラバースする一連のパスにおいて、コンテキスト適応バイナリエントロピー符号化を使用してデータストリームに各係数についての1つ以上の所定のフラグ(例えば、パリティフラグおよび/または大なりXフラグ、sigフラグ)を符号化し、各所定のフラグが、それぞれの係数の絶対値が配置された(例えば、絶対値ドメインは、1つ以上のパスの先頭において始まる、例えば、Xビット表現の場合、係数0・・・2X-1の一般的な絶対値ドメインから始まる)それぞれの係数の絶対値ドメインを低減する(例えば、パリティビットは、全ての偶数のまたは偶数でない絶対値を除外することによって絶対値ドメインを半分に低減させ、大なりXフラグは、可能な絶対値の1つを除外するか、または可能な絶対値のこの1つのみを残し、他の全てを除外することによって可能な絶対値のドメインを低減させる)ことによって、データストリームに係数のブロックを符号化するように構成されている。さらにまた、装置は、所定の変換ブロックについて、ブロックの係数をトラバースする一連のパスにおいて、絶対値ドメインのカーディナリティが、それぞれの係数について符号化された1つ以上の所定のフラグによって1つに低減されない各係数について、それぞれの係数の絶対値ドメイン内のそれぞれの係数の絶対値を示す可変長コードのコードワード(例えば、ライス/Exp-ゴロムコード)を符号化することによって、データストリームに係数のブロックを符号化するように構成されている(例えば、可変長コードの符号長は、絶対値が増加するにつれて単調増加してもよい)。装置は、所定の変換ブロックについて、係数のブロックが選択された変換にしたがって所定の変換ブロックの残差サンプル配列に関連するように、データストリームに係数のブロックを符号化するように構成され、残差サンプル配列は、所定の変換ブロックの予測を修正し、所定の変換ブロックを再構成することを可能にする。装置は、一連のパスにおいて、1つ以上の所定のフラグを符号化する際に、ポインタが絶対値を指す絶対値ドメインのカーディナリティが非ゼロ係数の第2のセットと比較して非ゼロ係数の第1のセットの方が小さい(すなわち、最後のパス内で限界に到達する前の係数については、限界に到達した後の係数と比較してより小さい)ように、所定数の所定のフラグに到達する(すなわち、全ての係数についてこれまでに符号化された所定のフラグの総数が限界に到達する)とすぐに1つ以上の所定のフラグの符号化を停止し、非ゼロ係数の第1および第2のセットの可変長コードのコードワードに異なる可変長コードを使用するように構成されている。
【0272】
実施形態によれば、第1および第2の非ゼロ係数セットの可変長コードのコードワードについての異なる可変長コードは、単項部分からライス-およびExp-ゴロム部分への遷移間の二値化境界(カットオフ値)および/または共通の二値化方式の二値化パラメータにおいて異なる。
【0273】
実施形態によれば、第1および第2の非ゼロ係数セットの可変長コードのコードワードについての異なる可変長コードは、単項部分からライス-およびExp-ゴロム部分への遷移間の二値化境界(カットオフ値)および/または以前に符号化された係数に対する共通の二値化方式の二値化パラメータの異なる依存性において異なる。
【0274】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する装置は、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択するように構成されており、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備える。さらにまた、装置は、選択された変換が非恒等変換である場合、非恒等変換のDC係数に向かう(例えば、最も高い周波数係数からそれ以降、場合によっては「最後の」重要係数位置から開始する)第1の走査順序に沿って(場合によっては、数回のパスにおいてこの順序に数回続く)データストリームに係数のブロックの係数を符号化することによって、所定の変換ブロックについて、データストリームに係数のブロックを符号化するように構成されている。さらにまた、装置は、選択された変換が恒等変換である場合に、左上サンプル位置から右下サンプル位置に至る第2の走査順序に沿ってデータストリームに係数のブロックの係数を符号化することによって、所定の変換ブロックについて、データストリームに係数のブロックを符号化するように構成されている。さらにまた、装置は、所定の変換ブロックを再構成するために所定の変換ブロックの予測を修正することを可能にする、選択された変換にしたがって所定の変換ブロックの残差サンプル配列に係数のブロックが関連するように(このステップは、恒等変換の場合、DPCM反転を実行するように、水平DPCMの場合は左側、垂直DPCMの場合はそれぞれの係数の上部などの所定の側のブロックに存在する係数を各係数に追加することを含んでもよい)、所定の変換ブロックについて、データストリームに係数のブロックを符号化するように構成されている。
【0275】
実施形態によれば、装置は、所定の変換ブロックが符号化されるのに使用するDPCM方向に応じて第2の走査順序を選択するように構成されている(例えば、水平DPCMの場合は水平ラスタ走査、垂直DPCMの場合は垂直ラスタ走査)。
【0276】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する装置は、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択するように構成されており、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備える。さらにまた、装置は、所定の変換ブロックについて、選択された変換が少なくとも1つの非恒等変換のうちの1つである場合、データストリームに構文要素を符号化し、そこから、非ゼロ係数の所定のグループ内の非ゼロ係数の符号が互いに等しいかまたは等しくないかを導出し、そうである場合、非ゼロ係数の所定のグループ内の非ゼロ係数の符号を導出し、非ゼロ係数の所定のグループ内の非ゼロ係数の符号が互いに等しくない場合、非ゼロ係数ベースごとに符号ビットを符号化することによって非ゼロ係数の所定のグループ内の非ゼロ係数の符号を符号化することによって、データストリームに係数のブロックを符号化するように構成されている。さらにまた、装置は、所定の変換ブロックについて、選択された変換が恒等変換である場合、非ゼロ係数の所定のグループ内の非ゼロ係数の符号が互いに等しいかどうかにかかわらず非ゼロ係数ベースごとに符号ビットを符号化することにより、非ゼロ係数の所定のグループ内の非ゼロ係数の符号を符号化することによって、データストリームに係数のブロックを符号化するように構成されている。さらに、装置は、所定の変換ブロックについて、係数のブロックが選択された変換にしたがって所定の変換ブロックの残差サンプル配列に関連するように、データストリームに係数のブロックを符号化するように構成され、残差サンプル配列は、所定の変換ブロックの予測を修正し、所定の変換ブロックを再構成することを可能にする。
【0277】
実施形態によれば、装置は、非ゼロ係数の所定のグループを、係数のブロックの所定のサブブロック内に位置する係数のブロック内の非ゼロ係数として判定するように構成されている。
【0278】
実施形態によれば、装置は、選択された変換が少なくとも1つの非恒等変換のうちの1つである場合、非ゼロ係数のさらなる所定のグループ内の非ゼロ係数の符号が互いに等しいか否かを通知する、さらなる構文要素をデータストリームに符号化し、そうである場合、非ゼロ係数のさらなる所定のグループ内の非ゼロ係数の符号を符号化し、非ゼロ係数のさらなる所定のグループ内の非ゼロ係数の符号が互いに等しくない場合、非ゼロ係数ベースごとにさらなる符号ビットを符号化することによって非ゼロ係数のさらなる所定のグループ内の非ゼロ係数の符号を符号化し、係数のブロックの非ゼロ係数を、非ゼロ係数のグループおよび非ゼロ係数のさらなるグループを含む非ゼロ係数の複数のグループにグループ化するように構成されている。
【0279】
実施形態によれば、装置は、非ゼロ係数の各グループがサブブロックのうちの1つに位置する非ゼロ係数のみを備えるように、サブブロックに係数のブロックを分割に基づいて、グループ化を実行するように構成されている。
【0280】
実施形態によれば、装置は、サブブロック符号化順序で所定のサブブロックに先行するサブブロックのうちの1つ以上における1つ以上の非ゼロ係数の符号に基づく所定のサブブロックのサイズに関して、および/または以前に符号化された非ゼロ係数の符号に基づいて、分割を適合させるように構成されている。
実施形態によれば、装置は、係数のブロック内の全ての非ゼロ係数を含むように、非ゼロ係数の所定のグループを判定するように構成されている。
【0281】
実施形態によれば、装置は、選択された変換が少なくとも1つの非恒等変換のうちの1つである場合、データストリームにブロックグローバル構文要素を符号化し、そこから、所定の変換ブロック内の全ての非ゼロ係数の符号が互いに等しいか否かを導出し、そうである場合、所定の変換ブロック内の全ての非ゼロ係数の符号、および、所定の変換ブロック内の全ての非ゼロ係数の符号が互いに等しくない場合、データストリームへの構文要素の符号化を実行するように構成されている。
【0282】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する装置は、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択するように構成されており、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備える。さらにまた、装置は、係数の所定のブロックの非ゼロ係数の符号を符号化し、データストリームに符号確率傾向インデックスを符号化し、選択された変換が恒等変換である場合、符号確率傾向インデックスに関連付けられたコンテキストモデル(正となる確率などの特定の符号確率を定義するコンテキストモデル)を使用して、所定の非ゼロ係数の符号(符号化順序の1番目またはインデックスが適用される係数ブロックの特定のサブブロック内のものなど)をエントロピー符号化することによって、所定の変換ブロックについて、データストリームに係数のブロックを符号化するように構成されている。さらにまた、装置は、選択された変換が少なくとも1つの非恒等変換のうちの1つである場合、所定の非ゼロ係数の符号をバイパス符号化(例えば、固定等確率を用いたコンテキスト適応エントロピー符号化)することにより、所定の係数のブロックの非ゼロ係数の符号を符号化することによって、所定の変換ブロックについて、データストリームに係数のブロックを符号化するように構成されている。さらに、装置は、係数のブロックが選択された変換にしたがって所定の変換ブロックの残差サンプル配列に関連するように、係数の所定のブロックの非ゼロ係数の符号を符号化することにより、所定の変換ブロックについて、データストリームに係数のブロックを符号化するように構成され、所定の変換ブロックの予測は、所定の変換ブロックを再構成するために残差サンプル配列を使用して修正可能である。
【0283】
実施形態によれば、装置は、選択された変換が恒等変換である場合、符号確率傾向インデックスに関連付けられたコンテキストモデルを使用して全ての非ゼロ係数の符号をエントロピー符号化し、選択された変換が少なくとも1つの非恒等変換のうちの1つである場合、全ての所定の非ゼロ係数の符号をバイパス符号化(例えば、固定等確率を用いたコンテキスト適応エントロピー符号化)するように構成されている。
【0284】
実施形態によれば、装置は、選択された変換が恒等変換である場合、所定の非ゼロ係数の符号に基づいて、符号確率傾向インデックスに関連付けられたコンテキストモデルに関連付けられた符号確率を更新する、ように構成されている。
【0285】
実施形態によれば、複数のコンテキストモデルが符号確率傾向インデックスと関連付けられ、装置は、符号確率傾向インデックスに関連付けられた複数のコンテキストモデルの中の所定のコンテキストモデルを使用して非ゼロ係数の符号のそれぞれをエントロピー符号化し、選択された変換が恒等変換である場合、1つ以上の隣接する非ゼロ係数の符号(それぞれの符号におよびその周囲に位置するテンプレートの位置に位置するものなど)に応じて符号確率傾向インデックスに関連付けられた複数のコンテキストモデルの中の所定のコンテキストモデルを選択し、選択された変換が少なくとも1つの非恒等変換のうちの1つである場合、全ての所定の非ゼロ係数の符号をバイパス符号化(例えば、固定等確率を用いたコンテキスト適応エントロピー符号化)するように構成されている。
【0286】
実施形態によれば、装置は、選択された変換が恒等変換である場合、1つ以上の隣接する非ゼロ係数のうちの正または負の符号の頻度に応じて、符号確率傾向インデックスに関連付けられた複数のコンテキストモデルの中から所定のコンテキストモデルを選択するように構成されている。
【0287】
実施形態によれば、符号確率傾向インデックスは、データストリームにおいて、具体的には、所定の非ゼロ係数が位置する係数のブロックのサブブロック、所定の変換ブロック、所定の変換ブロックを含む符号化ブロック、ピクチャの所定の変換ブロックを含むピクチャスライス、またはピクチャを含むピクチャシーケンスについて通知される。
【0288】
実施形態によれば、装置は、データストリームに、異なるカーディナリティを有するコンテキストモデルの異なるセット(説明で与えられた例の場合は3つ)のどれが符号確率傾向インデックスに適用されるかに関する情報を挿入し、コンテキストモデルと関連付けられた符号確率が、コンテキストモデルの第1のセットのカーディナリティよりも低いカーディナリティを有するコンテキストモデルの第2のセット内よりも、コンテキストモデルの第1のセット内の方が高密度に分布されるように構成されている。符号確率傾向インデックスは、符号確率傾向インデックスに適用するコンテキストモデルのセットへのポインタとしてコンテキストモデルを選択する。
【0289】
実施形態によれば、符号確率傾向インデックスは、データストリームにおいて、具体的には、所定の変換ブロックを含むピクチャスライス、ピクチャ、またはピクチャを含むピクチャシーケンスについて通知される。
【0290】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する装置は、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択するように構成されており、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備える。さらにまた、装置は、複数のコンテキストモデルの中から所定のコンテキストモデルを使用して所定の非ゼロ係数の符号を符号化し、選択された変換が恒等変換である場合、以前に符号化された係数の符号の統計量に応じて複数のコンテキストモデルの中から所定のコンテキストモデルを選択し、選択された変換が少なくとも1つの非恒等変換のうちの1つである場合、所定の非ゼロ係数の符号をバイパス符号化(例えば、固定等確率を用いたコンテキスト適応エントロピー符号化)することによって、所定の係数ブロックの非ゼロ係数の符号を符号化することによって、所定の変換ブロックについて、データストリームに係数ブロックを符号化するように構成されている。さらに、装置は、所定の変換ブロックについて、係数のブロックが選択された変換にしたがって所定の変換ブロックの残差サンプル配列に関連するように、データストリームに係数のブロックを符号化するように構成されており、その結果、所定の変換ブロックの予測が、所定の変換ブロックを再構成するために残差サンプル配列を使用して修正可能である。
【0291】
実施形態によれば、装置は、選択された変換が恒等変換である場合、以前に符号化された係数内の非ゼロ係数の中の正または負の符号の相対頻度に応じて所定のコンテキストモデルを選択するように構成されている。
実施形態によれば、装置は、複数のコンテキストモデルの数コンテキストモデルをデフォルト数に設定するように構成されている。
実施形態によれば、装置は、データストリームに複数のコンテキストモデルの数コンテキストモデルに関する情報を挿入するように構成されている。
【0292】
実施形態によれば、装置は、コンテキストモデルを、正または負の符号の相対頻度について互いに隣接し且つ重なり合わない相対頻度間隔と関連付け、以前に符号化された係数の非ゼロ係数の中の正または負の符号の相対頻度の中で、所定のコンテキストモデルに関連付けられた相対頻度間隔に含まれるように選択を実行するように構成されている。
【0293】
実施形態によれば、装置は、以前に符号化された係数が所定の変換ブロックよりも大きいピクチャまたはビデオ部分にわたって拡散するように、以前に符号化された係数の符号にわたる統計量を判定するように構成されている。
【0294】
実施形態によれば、装置は、選択された変換が恒等変換である場合、所定のコンテキストモデルを使用して所定の変換ブロックの全ての非ゼロ係数の符号をエントロピー符号化するように構成されている。
【0295】
実施形態によれば、装置は、所定のコンテキストモデルを使用して係数のブロックのサブブロック内に位置し且つ非ゼロの所定の係数を含む所定の変換ブロックの非ゼロ係数のサブセットの符号をエントロピー符号化し、更新された統計量を取得するために、所定の変換ブロックの非ゼロ係数のサブセットの符号を使用して統計量を更新し、更新された統計量に応じて、複数のコンテキストモデルの中からさらなる所定のコンテキストモデルを選択し、選択された変換が恒等変換である場合、さらなる所定のコンテキストモデルを使用して、係数のブロックのさらなるサブブロック内に位置する所定の変換ブロックの非ゼロ係数のさらなるサブセットの符号をエントロピー符号化するように構成されている。
【0296】
実施形態によれば、装置は、選択された変換が恒等変換である場合、所定の非ゼロ係数の符号に基づいて、所定のコンテキストモデルに関連付けられた符号確率を更新するように構成されている。
【0297】
実施形態によれば、複数のコンテキストモデルは、コンテキストモデルのセットに分割され、装置は、以前に符号化された係数の符号の統計量に基づいてコンテキストモデルの所定のセットを選択することによって、および選択された変換が恒等変換である場合、(それぞれの符号に位置し且つそれらを囲むテンプレートの位置に位置するものなどの)1つ以上の隣接する非ゼロ係数の符号に応じて、選択されたコンテキストモデルのセットの中から所定のコンテキストモデルを選択することによって選択を実行するように構成されている。
【0298】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する装置は、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択するように構成されており、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備える。さらにまた、装置は、所定の変換ブロックについて、ブロックの係数をトラバースする一連のパスにおいて、コンテキスト適応バイナリエントロピー符号化を使用してデータストリームから各係数についての1つ以上の所定のフラグ(例えば、パリティフラグおよび/または大なりXフラグ、sigフラグ)を符号化し、各所定のフラグが、それぞれの係数の絶対値が配置された(例えば、絶対値ドメインは、1つ以上のパスの先頭において始まる、例えば、Xビット表現の場合、係数0・・・2X-1の一般的な絶対値ドメインから始まる)それぞれの係数の絶対値ドメインを低減する(例えば、パリティビットは、全ての偶数のまたは偶数でない絶対値を除外することによって絶対値ドメインを半分に低減させ、大なりXフラグは、可能な絶対値の1つを除外するか、または可能な絶対値のこの1つのみを残し、他の全てを除外することによって可能な絶対値のドメインを低減させる)ことによって、データストリームに係数のブロックを符号化するように構成されている。さらにまた、装置は、所定の変換ブロックについて、ブロックの係数をトラバースする一連のパスにおいて、絶対値ドメインのカーディナリティが、それぞれの係数について符号化された1つ以上の所定のフラグによって1つに低減されない各係数について、それぞれの係数の絶対値ドメイン内のそれぞれの係数の絶対値を特定するための可変長コードのコードワード(例えば、ライス/Exp-ゴロムコード)を符号化することによって、データストリームに係数のブロックを符号化するように構成されている(例えば、可変長コードの符号長は、絶対値が増加するにつれて単調増加してもよい。ここで、コードワードは、低減された絶対値ドメイン、または必然的に低減された絶対値ドメインの適切なスーパーセットである一般的なものもしくはいくつかの他のもののみを自由に指す)。さらに、装置は、所定の変換ブロックについて、係数のブロックが選択された変換にしたがって所定の変換ブロックの残差サンプル配列に関連するように、データストリームに係数のブロックを符号化するように構成されており、その結果、所定の変換ブロックの予測が、所定の変換ブロックを再構成するために残差サンプル配列を使用して修正可能である。装置は、一連のパスにおいて、1つ以上の所定のフラグを符号化する際に、符号化される係数がゼロか否かを示す、(したがって、必然的にコンテキスト適応二値エントロピー符号化を使用して符号化される)1つ以上の所定のフラグのうちの重要度フラグに関するものを除いて、絶対値ドメインのカーディナリティが非ゼロ係数の第2のセットと比較して非ゼロ係数の第1のセットの方が小さい(すなわち、最後のパス内で限界に到達する前の係数の方が、限界に到達した後の係数と比較して小さい)ように、所定数の所定のフラグに到達する(すなわち、全ての係数についてこれまでに符号化された所定のフラグの総数が限界に到達する)とすぐに1つ以上の所定のフラグの符号化を停止するように構成されており、所定数は、上限から重要度フラグがまだ符号化されていない係数の数を差し引いたものに対応する。
【0299】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する方法は、ピクチャを異なるサイズの変換ブロックに分割することを備える。さらにまた、方法は、所定の変換ブロックについて、所定の変換ブロックのサイズが、所定の閾値サイズを超えるかどうかをチェックすることによって、選択された変換を選択することを備える。所定の変換ブロックのサイズが所定の閾値サイズを超える場合、選択された変換を選択するためのデフォルトの方法が使用される。所定の変換ブロックのサイズが所定の閾値サイズを超えない場合、所定の変換ブロックについてデータストリーム内で送信されたインデックスによって変換の所定のリストから指される変換を選択された変換として使用され、変換の所定のリストは、恒等変換および非恒等変換を備える。さらに、方法は、所定の変換ブロックについて、データストリームから係数のブロックを復号することと、選択された変換が恒等変換である場合、係数のブロックを所定の変換ブロックの残差サンプル配列として使用することと、選択された変換が恒等変換でない場合、係数のブロックを選択された変換に対応する逆変換にかけ、所定の変換ブロックの残差サンプル配列を取得することと、を備える。さらにまた、方法は、残差サンプル配列を使用して所定の変換ブロックの予測を修正し、所定の変換ブロックを再構成することを備える。
【0300】
実施形態によれば、実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する方法は、所定の変換ブロックについて、所定の変換ブロックのデータストリームからインデックスを復号し、選択された変換として、インデックスが指す変換の所定のリストのうちの1つの変換を使用することによって選択された変換を選択することを備える。さらにまた、方法は、所定の変換ブロックについて、データストリームから係数のブロックを復号することと、係数のブロックが選択された変換にしたがって残差サンプル配列に関連付けられるように、係数のブロックから、所定の変換ブロックの残差サンプル配列を導出することと、残差サンプル配列を使用して所定の変換ブロックの予測を修正し、所定の変換ブロックを再構成することと、を備える。方法は、所定の変換ブロックについて、所定のブロックの選択された変換が1つ以上の変換の所定のセットに含まれるかどうかに応じて、データストリームから係数のブロックを復号することを備える。方法は、所定の変換ブロックについて、データストリームからの係数のブロックの復号において、所定のブロックの選択された変換が1つ以上の変換の所定のセットに含まれる場合、係数のブロックが少なくとも1つの非ゼロ係数を有するかどうかを通知する符号化ブロックフラグをデータストリームから復号することと、所定のブロックの選択された変換が1つ以上の変換の所定のセットに含まれていない場合、係数のブロックが少なくとも1つの非ゼロ係数を有すると推論することと、を備える(換言すれば、その後、所定のブロックの選択された変換が1つ以上の変換の所定のセットに含まれる場合、データストリームからCBFを復号しない、またはさらに換言すれば、CBFが復号されるデータストリームの現在の部分とは異なる構文要素を復号する)。
【0301】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する方法は、所定の変換ブロックについて、係数のブロックが少なくとも1つの非ゼロ係数を有するかどうかを通知するデータストリームからの符号化ブロックフラグを復号することを含み、データストリームから係数のブロックを復号することを備える。方法は、符号化ブロックフラグが、係数のブロックが少なくとも1つの非ゼロ係数を有することを通知する場合、所定の変換ブロックについて、所定の変換ブロックのデータストリームからインデックスを復号することによって選択された変換を選択することと、選択された変換として、インデックスが指す変換の所定のリストからの1つの変換を使用し、係数のブロックが選択された変換にしたがって残差サンプル配列に関連するように、係数のブロックから所定の変換ブロックの残差サンプル配列を導出することと、残差サンプル配列を使用して所定の変換ブロックの予測を修正し、所定の変換ブロックを再構成することと、を備える。さらにまた、方法は、符号化ブロックフラグが、係数のブロックが少なくとも1つの非ゼロ係数を有していないことを通知する場合、予測修正なしで所定の変換ブロックを再構成することを備える(換言すれば、その後、符号化ブロックフラグが、係数のブロックが少なくとも1つの非ゼロ係数を有しないことを通知する場合、インデックスが復号されるデータストリームの現在の部分からのインデックスとは異なる構文要素を復号することなどによって、データストリームからインデックスを復号しない)。
【0302】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する方法は、データストリームに応じて変換の所定のリストをポピュレートすること、またはポピュレートおよびソートすることを備える。方法は、変換の所定のリスト内の各変換が、可変長コードの1つのコードワードを割り当てられ、可変長コードのコードワードのコードワード長が、コードワードが割り当てられた変換の所定のリスト内の変換のランクとともに単調増加するように、可変長コードを使用してデータストリームからインデックスを復号し、選択された変換として、インデックスが指す変換の所定のリストのうちの1つの変換を使用することによって、所定の変換ブロックについて、選択された変換を選択することを備える。さらにまた、方法は、所定の変換ブロックについて、データストリームから係数のブロックを復号することと、係数のブロックが選択された変換にしたがって残差サンプル配列に関連付けられるように、係数のブロックから、所定の変換ブロックの残差サンプル配列を導出することと、残差サンプル配列を使用して所定の変換ブロックの予測を修正し、所定の変換ブロックを再構成することと、を備える。
【0303】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する方法は、所定の変換ブロックについて、可変長コードの第1のコードワードから構成される合成可変長コードワードと、第1のコードワードが可変長コードの最長コードワードである場合、それに続く固定長コードの第2のコードワードとを使用して、データストリームからの変換の所定のリストにインデックスを復号することによって選択された変換を選択することを備える。可変長コードの2つの非最長コードワードのうちの1つのみから構成される合成可変長コードのコードワードは、変換の所定のリストに含まれる恒等変換および所定の非恒等変換に割り当てられ、恒等変換および所定の非恒等変換を識別し、合成可変長コードのさらなるコードワードは、変換の所定のリストのさらなる非恒等変換に割り当てられ、さらなる非恒等変換を識別する。方法は、所定の変換ブロックについて、インデックスが指す変換の所定のリストの中の1つの変換を選択された変換として使用することによって選択された変換を選択することを備える。さらにまた、方法は、所定の変換ブロックについて、データストリームから係数のブロックを復号することと、係数のブロックが選択された変換にしたがって残差サンプル配列に関連付けられるように、係数のブロックから、所定の変換ブロックの残差サンプル配列を導出することと、残差サンプル配列を使用して所定の変換ブロックの予測を修正し、所定の変換ブロックを再構成することと、を備える。
【0304】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する方法は、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択することを備え、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備える。方法は、所定の変換ブロックについて、選択された変換が非恒等変換であるかどうかをチェックすることによって、データストリームから係数のブロックを復号することを備える。選択された変換が非恒等変換である場合、方法は、所定の係数位置を取得するために、係数のブロックの全ての係数をトラバースする走査順序に沿って、非ゼロ係数が最初に遭遇した場合、または係数のブロックの全ての係数をトラバースする走査順序に沿って、非ゼロ係数が最後に遭遇した場合に、データストリームから位置情報を復号することを備え(以下に留意されたい。上記実施形態では、この位置は、左上から右下に向かう走査順序に沿って測定される最後の位置と呼ばれるが、コーディングを開始した実際の走査は、これらの実施形態にしたがってそこで開始した。すなわち、実際のコーディングは、右下から左上隅に向かう逆の走査順序で行われた。ここで、走査順序はコーディング順である)、方法は、係数のブロックの全ての非ゼロ係数を含み且つ所定の係数位置から始めてまたはそれまで走査順序によってトラバースされる、データストリームから係数のブロックの第1の係数を復号することと、第1の係数とは異なる係数のブロックの第2の係数をゼロであると推論することと、を備える。選択された変換が恒等変換である場合、方法は、データストリームから係数ブロックの全ての係数を復号することを備える。さらにまた、方法は、係数のブロックが選択された変換にしたがって残差サンプル配列に関連付けられるように、係数のブロックから、所定の変換ブロックの残差サンプル配列を導出することと、残差サンプル配列を使用して所定の変換ブロックの予測を修正し、所定の変換ブロックを再構成することと、を備える。
【0305】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する方法は、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択することを備え、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備える。方法は、所定の変換ブロックについて、係数のブロックが分割されているサブブロック内のデータストリームから係数のブロックの係数を復号し、データストリーム内のサブブロックフラグがゼロであることを通知するサブブロック内の係数がゼロであると推論し、データストリーム内のサブブロックフラグがデータストリームから非ゼロであることを通知するサブブロック内の係数を復号することによって、データストリームから係数のブロックを復号することを備える。選択された変換が少なくとも1つの非恒等変換のうちの1つである場合、第1のサブブロックフラグ、および最後のサブブロックフラグのうちの少なくとも1つを除いて、データストリームからサブブロックフラグを順次復号することと、第1および最後のサブブロックフラグのうちの少なくとも1つが非ゼロであることを通知すると推論することと、選択された変換が恒等変換である場合、全てのサブブロックについてデータストリームからサブブロックフラグを復号することと、を備える。さらにまた、方法は、係数のブロックが選択された変換にしたがって残差サンプル配列に関連付けられるように、係数のブロックから、所定の変換ブロックの残差サンプル配列を導出することと、残差サンプル配列を使用して所定の変換ブロックの予測を修正し、所定の変換ブロックを再構成することと、を備える。
【0306】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する方法は、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択することを備え、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備える。方法は、所定の変換ブロックについて、係数のブロックが分割されているサブブロック内のデータストリームから係数のブロックを復号し、データストリーム内のサブブロックフラグがゼロであることを通知するサブブロック内の係数がゼロであると推論し、データストリーム内のサブブロックフラグがデータストリームから非ゼロであることを通知するサブブロック内の係数を復号するとともに、コンテキスト適応エントロピー復号によっておよびコンテキストを使用してデータストリームから現在復号されているサブブロックフラグを復号することによって、データストリームから係数のブロックを復号することを備える。コンテキストは、選択された変換が少なくとも1つの非恒等変換のうちの1つである場合、現在復号されているサブブロックフラグに隣接するサブブロックに関連するサブブロックフラグの論理和に依存し、選択された変換が恒等変換である場合、コンテキストは、現在復号されているサブブロックフラグに隣接するサブブロックに関連するサブブロックフラグの算術和に依存する。さらにまた、方法は、係数のブロックが選択された変換にしたがって残差サンプル配列に関連付けられるように、係数のブロックから、所定の変換ブロックの残差サンプル配列を導出することと、残差サンプル配列を使用して所定の変換ブロックの予測を修正し、所定の変換ブロックを再構成することと、を備える。
【0307】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する方法は、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択することを備え、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備える。方法は、所定の変換ブロックについて、現在の係数について、コンテキストを使用して現在の係数がゼロであるか否かを示す重要度フラグを復号することによってデータストリームから係数のブロックを復号することを備える。コンテキストは、選択された変換が恒等変換である場合、現在の係数に直接隣接する係数の第1のセットのうちの非ゼロである係数の数に依存し、コンテキストは、選択された変換が少なくとも1つの非恒等変換のうちの1つである場合、係数の第1のセット、係数の第1のセットよりも現在の係数から遠くに位置する係数、係数の第2のセットの値、および現在の係数の位置を含む係数の第2のセットのうちの非ゼロである係数の数に依存する。さらにまた、方法は、係数のブロックが選択された変換にしたがって残差サンプル配列に関連付けられるように、係数のブロックから、所定の変換ブロックの残差サンプル配列を導出することと、残差サンプル配列を使用して所定の変換ブロックの予測を修正し、所定の変換ブロックを再構成することと、を備える。
【0308】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する方法は、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択することを備え、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備える。方法は、所定の係数の絶対値がXよりも大きいか否かを示すN個の大なりXフラグをコンテキスト適応エントロピー復号することによって所定の係数を復号することによって、所定の変換ブロックについて、データストリームから係数のブロックを復号することを備える。さらにまた、方法は、所定の係数の絶対値がNに依存する絶対閾値を超える量を示す余りを、可変長コードを使用して復号する、ことによって所定の係数を復号することによって、所定の変換ブロックについて、データストリームから係数のブロックを復号することを備え、Nは、選択された変換が恒等変換である場合、選択された変換が少なくとも1つの非恒等変換のうちの1つである場合と比較して大きい。さらに、方法は、係数のブロックが選択された変換にしたがって残差サンプル配列に関連付けられるように、係数のブロックから、所定の変換ブロックの残差サンプル配列を導出することと、残差サンプル配列を使用して所定の変換ブロックの予測を修正し、所定の変換ブロックを再構成することと、を備える。
【0309】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する方法は、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択することを備え、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備える。方法は、所定のコンテキストを使用してコンテキスト適応エントロピー復号を行い、選択された変換が恒等変換である場合、所定のコンテキストに関連付けられた確率を更新し、選択された変換が少なくとも1つの非恒等変換のうちの1つである場合、バイパス復号(例えば、固定等確率を用いたコンテキスト適応エントロピー復号)することによって、所定の係数の符号を復号することによって、所定の変換ブロックについて、データストリームから係数のブロックを復号するように構成されている。さらにまた、方法は、係数のブロックが選択された変換にしたがって残差サンプル配列に関連付けられるように、係数のブロックから、所定の変換ブロックの残差サンプル配列を導出することと、残差サンプル配列を使用して所定の変換ブロックの予測を修正し、所定の変換ブロックを再構成することと、を備える。
【0310】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する方法は、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択することを備え、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備える。方法は、所定の係数の絶対値がXよりも大きいか否かを示すN個の大なりXフラグをコンテキスト適応エントロピー復号することによって所定の係数を復号することによって、所定の変換ブロックについて、データストリームから係数のブロックを復号することを備える。さらに、方法は、所定の係数の絶対値がNに依存する絶対閾値を超える量を示す余りを、可変長コードを使用して復号する、ことによって所定の係数を復号することによって、所定の変換ブロックについて、データストリームから係数のブロックを復号することを備える。選択された変換が少なくとも1つの非恒等変換のうちの1つである場合、パスごとにN個の大なりXフラグのうちの1つ以上によってXを増加させながら順次N個の大なりXフラグをコンテキスト適応エントロピー復号することによって一連のパス内のN個の大なりXフラグのコンテキスト適応エントロピー復号を実行することと、一連のパスの間にコンテキスト適応エントロピー復号を使用して符号化されたフラグの数を記録することと、数が所定のフラグ閾値を超える場合、N個の大なりXフラグのコンテキスト適応エントロピー復号を停止することと、を備える。選択された変換が恒等変換である場合、順次N個の大なりXフラグのコンテキスト適応エントロピー復号を実行することと、N個の大なりXフラグの中の重要度フラグ(X=0)を復号した後、N個の大なりXフラグの中のさらなるN個の大なりXフラグの前に、所定の係数が絶対閾値よりも大きいかどうかを示す大なりXフラグ-バイパスフラグを復号することと、所定の係数が絶対閾値よりも大きいことを示す大なりXフラグ-バイパスフラグの場合、N個の大なりXフラグのコンテキスト適応エントロピー復号を停止することと、を備える(例えば、所定の係数が絶対閾値よりも大きくないことを示す大なりXフラグの場合、N個の大なりXフラグのうちの最後の1つを除くさらなる大なりXフラグに対するN個の大なりXフラグのコンテキスト適応エントロピー復号を再開する)。さらにまた、方法は、係数のブロックが選択された変換にしたがって残差サンプル配列に関連付けられるように、係数のブロックから、所定の変換ブロックの残差サンプル配列を導出することと、残差サンプル配列を使用して所定の変換ブロックの予測を修正し、所定の変換ブロックを再構成することと、を備える。
【0311】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する方法は、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択することを備え、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備える。方法は、所定の係数の絶対値がXよりも大きいか否かを示すN個の大なりXフラグをコンテキスト適応エントロピー復号し、可変長コードを使用して、所定の係数の絶対値がNに依存する絶対閾値を超える量を示す余りを復号し、所定の係数の符号を復号することによって、所定の係数について、所定の走査順序で係数のブロックの係数をトラバースする一連のパスにおいて、所定の変換ブロックについて、データストリームから係数のブロックを復号することを備え、方法は、選択された変換が恒等変換であるかまたは少なくとも1つの非恒等変換のうちの1つであるかに応じて、一連のパスにわたるN個の大なりXフラグ、余りおよび符号の復号を異なって分配することを備える。さらにまた、方法は、係数のブロックが選択された変換にしたがって残差サンプル配列に関連付けられるように、係数のブロックから、所定の変換ブロックの残差サンプル配列を導出することと、残差サンプル配列を使用して所定の変換ブロックの予測を修正し、所定の変換ブロックを再構成することと、を備える。
【0312】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する方法は、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択することを備え、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備える。方法は、ブロックの係数をトラバースする一連のパスにおいて、コンテキスト適応バイナリエントロピー復号を使用して、データストリームからの各係数の1つ以上の所定のフラグを復号することによって、所定の変換ブロックについて、データストリームから係数のブロックを復号することを備え、各所定のフラグは、それぞれの係数の絶対値が配置されるそれぞれの係数の絶対値ドメインを低減する。さらにまた、方法は、所定の変換ブロックについて、ブロックの係数をトラバースする一連のパスにおいて、絶対値ドメインのカーディナリティが、それぞれの係数について復号された1つ以上の所定のフラグによって1つに低減されない各係数について、それぞれの係数の絶対値ドメイン内のそれぞれの係数の絶対値を示す可変長コードのコードワードを復号することによって、データストリームから係数のブロックを復号することを備える。さらに、方法は、係数のブロックが選択された変換にしたがって残差サンプル配列に関連付けられるように、係数のブロックから、所定の変換ブロックの残差サンプル配列を導出することと、残差サンプル配列を使用して所定の変換ブロックの予測を修正し、所定の変換ブロックを再構成することと、を備える。方法は、一連のパスにおいて、1つ以上の所定のフラグを復号する際に、ポインタが絶対値を指す絶対値ドメインのカーディナリティが、非ゼロ係数の第2のセットと比較して非ゼロ係数の第1のセットについてより小さくなるように、所定数の所定のフラグに到達するとすぐに1つ以上の所定のフラグの復号を停止することと、非ゼロ係数の第1および第2のセットの可変長コードのコードワードについて異なる可変長コードを使用することと、を備える。
【0313】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する方法は、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択することを備え、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備える。方法は、選択された変換が非恒等変換である場合、非恒等変換のDC係数に向かう第1の走査順序に沿ってデータストリームから係数のブロックの係数を復号し、選択された変換が恒等変換である場合、左上サンプル位置から右下サンプル位置に向かう第2の走査順序に沿ってデータストリームから係数のブロックの係数を復号することによって、所定の変換ブロックについて、データストリームから係数のブロックを復号することを備える。さらにまた、方法は、係数のブロックが選択された変換にしたがって残差サンプル配列に関連付けられるように、係数のブロックから、所定の変換ブロックの残差サンプル配列を導出することと、残差サンプル配列を使用して所定の変換ブロックの予測を修正し、所定の変換ブロックを再構成することと、を備える。
【0314】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する方法は、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択することを備え、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備える。方法は、所定の変換ブロックについて、選択された変換が少なくとも1つの非恒等変換のうちの1つである場合、データストリームから構文要素を復号し、そこから、非ゼロ係数の所定のグループ内の非ゼロ係数の符号が互いに等しいかまたは等しくないかを導出し、そうである場合、非ゼロ係数の所定のグループ内の非ゼロ係数の符号を導出し、非ゼロ係数の所定のグループ内の非ゼロ係数の符号が互いに等しくない場合、非ゼロ係数ベースごとに符号ビットを復号することによって非ゼロ係数の所定のグループ内の非ゼロ係数の符号を復号することによって、データストリームから係数のブロックを復号することを備える。さらにまた、方法は、所定の変換ブロックについて、選択された変換が恒等変換である場合、非ゼロ係数の所定のグループ内の非ゼロ係数の符号が互いに等しいかどうかにかかわらず非ゼロ係数ベースごとに符号ビットを復号することにより、非ゼロ係数の所定のグループ内の非ゼロ係数の符号を復号することによって、データストリームから係数のブロックを復号することを備える。さらに、方法は、係数のブロックが選択された変換にしたがって残差サンプル配列に関連付けられるように、係数のブロックから、所定の変換ブロックの残差サンプル配列を導出することと、残差サンプル配列を使用して所定の変換ブロックの予測を修正し、所定の変換ブロックを再構成することと、を備える。
【0315】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する方法は、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択することを備え、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備える。方法は、データストリームから符号確率傾向インデックスを導出し、選択された変換が恒等変換である場合、符号確率傾向インデックスに関連付けられたコンテキストモデルを使用して所定の非ゼロ係数の符号をエントロピー復号することによって、および選択された変換が少なくとも1つの非恒等変換のうちの1つである場合、所定の非ゼロ係数の符号をバイパス復号することによって、係数の所定のブロックの非ゼロ係数の符号を復号することによって、所定の変換ブロックについて、データストリームから係数のブロックを復号することを備える。さらにまた、方法は、係数のブロックが選択された変換にしたがって残差サンプル配列に関連付けられるように、係数のブロックから、所定の変換ブロックの残差サンプル配列を導出することと、残差サンプル配列を使用して所定の変換ブロックの予測を修正し、所定の変換ブロックを再構成することと、を備える。
【0316】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する方法は、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択することを備え、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備える。方法は、複数のコンテキストモデルの中の所定のコンテキストモデルを使用して所定の非ゼロ係数の符号を復号することによって所定の係数のブロックの非ゼロ係数の符号を復号し、選択された変換が恒等変換である場合、以前に復号された係数の符号の統計量に応じて複数のコンテキストモデルの中の所定のコンテキストモデルを選択することによって、および選択された変換が少なくとも1つの非恒等変換のうちの1つである場合、所定の非ゼロ係数の符号をバイパス復号することによって、所定の変換ブロックについて、データストリームから係数ブロックを復号することを備える。さらにまた、方法は、係数のブロックが選択された変換にしたがって残差サンプル配列に関連付けられるように、係数のブロックから、所定の変換ブロックの残差サンプル配列を導出することと、残差サンプル配列を使用して所定の変換ブロックの予測を修正し、所定の変換ブロックを再構成することと、を備える。
【0317】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する方法は、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択することを備え、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備える。方法は、ブロックの係数をトラバースする一連のパスにおいて、コンテキスト適応バイナリエントロピー復号を使用して、データストリームからの各係数の1つ以上の所定のフラグを復号することによって、所定の変換ブロックについて、データストリームから係数のブロックを復号することを備え、各所定のフラグは、それぞれの係数の絶対値が配置されるそれぞれの係数の絶対値ドメインを低減する。さらに、方法は、所定の変換ブロックについて、ブロックの係数をトラバースする一連のパスにおいて、絶対値ドメインのカーディナリティが、それぞれの係数について復号された1つ以上の所定のフラグによって1つに低減されない各係数について、それぞれの係数の絶対値ドメインからそれぞれの係数の絶対値を識別するための可変長コードのコードワードを復号することによって、データストリームから係数のブロックを復号することを備える。さらにまた、方法は、係数のブロックが選択された変換にしたがって残差サンプル配列に関連付けられるように、係数のブロックから、所定の変換ブロックの残差サンプル配列を導出することと、残差サンプル配列を使用して所定の変換ブロックの予測を修正し、所定の変換ブロックを再構成することと、を備える。方法は、一連のパスにおいて、1つ以上の所定のフラグを復号する際に、復号される係数がゼロか否かを示す、1つ以上の所定のフラグの中から重要度フラグに関するものを除いて、絶対値ドメインのカーディナリティが非ゼロ係数の第2のセットと比較して非ゼロ係数の第1のセットの方が小さいように、所定数の所定のフラグに到達するとすぐに1つ以上の所定のフラグの復号を停止することを備え、所定数は、上限から重要度フラグがまだ復号されていない係数の数を差し引いたものに対応する。
【0318】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを符号化する方法は、ピクチャを異なるサイズの変換ブロックに分割することと、所定の変換ブロックについて、所定の変換ブロックのサイズが所定の閾値サイズを超えるかどうかをチェックすることによって選択された変換を選択することと、を備える。所定の変換ブロックのサイズが所定の閾値サイズを超える場合、方法は、選択された変換を選択するためにデフォルトの方法を使用することを備え、所定の変換ブロックのサイズが所定の閾値サイズを超えない場合、方法は、変換の所定のリストの中から変換を選択し、選択された変換として所定の変換ブロックに使用されるように、変換の所定のリストの中から選択された変換を指すインデックスをデータストリーム内で送信することを備え、変換の所定のリストは、恒等変換および非恒等変換を備える。さらにまた、方法は、所定の変換ブロックを予測し、所定の変換ブロックについて、係数のブロックをデータストリームに符号化し、その結果、選択された変換が恒等変換である場合、係数のブロックが、所定の変換ブロックを再構成するために、予測を修正するための残差サンプル配列として使用され、選択された変換が恒等変換でない場合、係数のブロックが、選択された変換に対応する逆変換にかけられ、所定の変換ブロックの残差サンプル配列を取得することを備える。
【0319】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを符号化する方法は、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択し、選択された変換を指す所定の変換ブロックのデータストリームにインデックスを符号化することを備える。方法は、所定の変換ブロックを予測することと、所定の変換ブロックについて、係数のブロックをデータストリームに符号化することと、を備え、その結果、係数のブロックから、所定の変換ブロックの残差サンプル配列が、係数のブロックが選択された変換にしたがって残差サンプル配列に関連するように導出可能であり、所定の変換ブロックの予測が、所定の変換ブロックを再構成するために残差サンプル配列を使用して修正可能である。方法は、所定の変換ブロックについて、所定のブロックの選択された変換が1つ以上の変換の所定のセットに含まれるかどうかに応じて、データストリームに係数のブロックを符号化することを備える。したがって、方法は、所定のブロックについての選択された変換が1つ以上の変換の所定のセットに含まれる場合、係数のブロックが少なくとも1つの非ゼロ係数を有するかどうかを通知するデータストリームに符号化ブロックフラグを符号化することを備え、方法は、所定のブロックについての選択された変換が1つ以上の変換の所定のセットに含まれない場合、係数のブロックが少なくとも1つの非ゼロ係数を有することを通知するときに符号化器側において推論される必要がある符号化ブロックフラグを有するデータストリームに符号化ブロックフラグを符号化するのを控えることを備える。
【0320】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを符号化する方法は、所定の変換ブロックを予測することと、所定の変換ブロックについて、係数のブロックが少なくとも1つの非ゼロ係数を有するかどうかを通知する符号化ブロックフラグをデータストリームに符号化することを含み、係数のブロックをデータストリームに符号化することと、を備える。方法は、符号化ブロックフラグが、係数のブロックが少なくとも1つの非ゼロ係数を有することを通知する場合、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択し、変換の所定のリスト内の選択された変換を指す所定の変換ブロックのデータストリームにインデックスを符号化することを備える。係数のブロックから、所定の変換ブロックの残差サンプル配列が導出可能であり、その結果、係数のブロックは、選択された変換にしたがって残差サンプル配列に関連し、所定の変換ブロックの予測は、所定の変換ブロックを再構成するために残差サンプル配列を使用して修正可能である。さらに、方法は、符号化ブロックフラグが、係数のブロックが少なくとも1つの非ゼロ係数を有しないことを通知する場合、所定の変換ブロックが予測修正なしで再構成されることを備える。
【0321】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを符号化する方法は、データストリームに応じて変換の所定のリストをポピュレートすることまたはポピュレートおよびソートすることと、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択することと、を備える。さらにまた、方法は、可変長コードを使用して変換の所定のリスト内の選択された変換を指すインデックスをデータストリームに符号化することを備え、その結果、変換の所定のリスト内の各変換が、可変長コードの1つのコードワードを割り当てられ、可変長コードのコードワードのコードワード長が、コードワードが割り当てられた変換の所定のリスト内の変換のランクとともに単調増加する。さらに、方法は、所定の変換ブロックの予測を導出することと、所定の変換ブロックについて、係数のブロックをデータストリームに符号化することと、を備え、その結果、係数のブロックから、所定の変換ブロックの残差サンプル配列が導出可能であり、その結果、係数のブロックが、選択された変換にしたがって残差サンプル配列に関連し、所定の変換ブロックが、所定の変換ブロックを再構成するために残差サンプル配列を使用して所定の変換ブロックの予測によって再構成可能である。
【0322】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを符号化する方法は、所定の変換ブロックの予測を導出することと、所定の変換ブロックについて、所定のリストから選択された変換を選択することと、を備える。方法は、第1のコードワードが可変長コードの最長コードワードである場合、固定長コードの第2のコードワードが続く可変長コードの第1のコードワードから構成される合成可変長コードコードワードを使用して、選択された変換を指すデータストリームへの変換の所定のリストにインデックスを符号化することを備える。可変長コードの2つの非最長コードワードのうちの1つのみから構成される合成可変長コードのコードワードは、変換の所定のリストに含まれる恒等変換および所定の非恒等変換に割り当てられ、恒等変換および所定の非恒等変換を識別し、合成可変長コードのさらなるコードワードは、変換の所定のリストのさらなる非恒等変換に割り当てられ、さらなる非恒等変換を識別する。さらにまた、方法は、所定の変換ブロックについて、係数のブロックをデータストリームに符号化することを備え、その結果、係数のブロックが、選択された変換にしたがって残差サンプル配列に関連し、所定の変換ブロックが、残差サンプル配列を使用して所定の変換ブロックの予測を修正することによって再構成可能である。
【0323】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを符号化する方法は、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択することを備え、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備える。方法は、所定の変換ブロックについての予測を導出し、所定の変換ブロックについて、選択された変換が非恒等変換であるか否かをチェックすることによって、係数のブロックをデータストリームに符号化することを備える。選択された変換が非恒等変換である場合、方法は、所定の係数位置を取得するために、係数のブロックの全ての係数をトラバースする走査順序に沿って、非ゼロ係数が最初に遭遇した場合、または係数のブロックの全ての係数をトラバースする走査順序に沿って、非ゼロ係数が最後に遭遇した場合に関する位置情報をデータストリームに符号化することを備え、方法は、係数のブロックの全ての非ゼロ係数を含み且つ所定の係数位置から始めてまたはそれまで走査順序によってトラバースされる、係数のブロックの第1の係数をデータストリームに符号化することと、第1の係数とは異なる係数のブロックの第2の係数をゼロであると推論することと、を備える。選択された変換が恒等変換である場合、方法は、データストリームに係数ブロックの全ての係数を符号化することを備える。係数のブロックは、選択された変換にしたがって残差サンプル配列に関連し、所定の変換ブロックは、残差サンプル配列を使用してその予測を修正することによって再構成可能である。
【0324】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する方法は、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択することであって、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備えることと、所定の変換ブロックの予測を導出することと、を備える。方法は、所定の変換ブロックについて、係数のブロックが分割されるサブブロック内のデータストリームに係数のブロックの係数を符号化することによって、係数のブロックをデータストリームに符号化することを備え、データストリーム内のサブブロックフラグがゼロであることを通知するサブブロック内の係数がゼロであると推論され、データストリーム内のサブブロックフラグが非ゼロであることを通知するサブブロック内の係数がデータストリームに符号化される。選択された変換が少なくとも1つの非恒等変換のうちの1つである場合、方法は、第1のサブブロックフラグおよび最後のサブブロックフラグのうちの少なくとも1つを除いて、サブブロックフラグをデータストリームに順次符号化することによって、データストリームに係数のブロックの係数を符号化することを備え、第1のサブブロックフラグおよび最後のサブブロックフラグのうちの少なくとも1つが非ゼロであることを通知するように推論され、選択された変換が恒等変換である場合、方法は、全てのサブブロックについてサブブロックフラグをデータストリームに符号化することによってデータストリームに係数のブロックの係数を符号化することを備える。係数のブロックは、選択された変換にしたがって残差サンプル配列に関連し、所定の変換ブロックは、残差サンプル配列を使用して所定の変換ブロックの予測を修正することによって再構成可能である。
【0325】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する方法は、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択することであって、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備えることと、所定の変換ブロックの予測を導出することと、を備える。方法は、所定の変換ブロックについて、係数のブロックが分割されているサブブロック内のデータストリームに係数のブロックを符号化し、データストリーム内のサブブロックフラグがゼロであることを通知するサブブロック内の係数がゼロであると推論し、データストリーム内のサブブロックフラグがデータストリームから非ゼロであることを通知するサブブロック内の係数を符号化するとともに、コンテキスト適応エントロピー符号化によっておよびコンテキストを使用してデータストリームに現在符号化されているサブブロックフラグを符号化することによって、データストリームに係数のブロックを符号化することを備える。コンテキストは、選択された変換が少なくとも1つの非恒等変換のうちの1つである場合、現在符号化されているサブブロックフラグに隣接するサブブロックに関連するサブブロックフラグの論理和に依存し、選択された変換が恒等変換である場合、コンテキストは、現在符号化されているサブブロックフラグに隣接するサブブロックに関連するサブブロックフラグの算術和に依存する。係数のブロックは、選択された変換にしたがって残差サンプル配列に関連し、所定の変換ブロックは、残差サンプル配列を使用して所定の変換ブロックについての予測を修正することによって再構成可能である。
【0326】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する方法は、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択することであって、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備えることと、所定の変換ブロックの予測を導出することと、を備える。方法は、所定の変換ブロックについて、現在の係数について、コンテキストを使用して現在の係数がゼロであるか否かを示す重要度フラグを符号化することによってデータストリームに係数のブロックを符号化することを備える。コンテキストは、選択された変換が恒等変換である場合、現在の係数に直接隣接する係数の第1のセットのうちの非ゼロである係数の数に依存し、コンテキストは、選択された変換が少なくとも1つの非恒等変換のうちの1つである場合、係数の第1のセット、係数の第1のセットよりも現在の係数から遠くに位置する係数、係数の第2のセットの値、および現在の係数の位置を含む係数の第2のセットのうちの非ゼロである係数の数に依存する。係数のブロックは、選択された変換にしたがって残差サンプル配列に関連し、所定の変換ブロックは、残差サンプル配列を使用して所定の変換ブロックの予測を修正することによって再構成可能である。
【0327】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する方法は、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択することであって、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備えることと、所定の変換ブロックの予測を導出することと、を備える。方法は、所定の係数の絶対値がXよりも大きいか否かを示すN個の大なりXフラグをコンテキスト適応エントロピー符号化することによって所定の係数を符号化することによって、所定の変換ブロックについて、データストリームに係数のブロックを符号化することを備える。さらにまた、方法は、所定の係数の絶対値がNに依存する絶対閾値を超える量を示す余りを、可変長コードを使用して符号化する、ことによって所定の係数を符号化することによって、所定の変換ブロックについて、データストリームに係数のブロックを符号化することを備え、Nは、選択された変換が恒等変換である場合、選択された変換が少なくとも1つの非恒等変換のうちの1つである場合と比較して大きい。係数のブロックは、選択された変換にしたがって残差サンプル配列に関連し、所定の変換ブロックは、残差サンプル配列を使用して所定の変換ブロックの予測を修正することによって再構成可能である。
【0328】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する方法は、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択することであって、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備えることと、所定の変換ブロックの予測を導出することと、を備える。方法は、所定のコンテキストを使用してコンテキスト適応エントロピー符号化を行い、選択された変換が恒等変換である場合、所定のコンテキストに関連付けられた確率を更新することよって、所定の係数の符号を符号化することによって、所定の変換ブロックについて、データストリームに係数のブロックを符号化することを備え、方法は、選択された変換が少なくとも1つの非恒等変換のうちの1つである場合、バイパス符号化することによって、所定の係数の符号を符号化することによって、所定の変換ブロックについて、データストリームに係数のブロックを符号化するように構成されている。係数のブロックは、選択された変換にしたがって残差サンプル配列に関連し、所定の変換ブロックは、残差サンプル配列を使用して所定の変換ブロックの予測を修正することによって再構成可能である。
【0329】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する方法は、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択することであって、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備えることと、所定の変換ブロックの予測を導出することと、を備える。方法は、所定の係数の絶対値がXよりも大きいか否かを示すN個の大なりXフラグをコンテキスト適応エントロピー符号化することによって所定の係数を符号化することによって、所定の変換ブロックについて、データストリームに係数のブロックを符号化することを備える。さらに、方法は、可変長コードを使用して、所定の係数の絶対値がNに依存する絶対閾値を超える量を示す余りを符号化することによって、所定の係数を符号化することによって、所定の変換ブロックについて、データストリームに係数のブロックを符号化することを備える。選択された変換が少なくとも1つの非恒等変換のうちの1つである場合、方法は、パスごとにN個の大なりXフラグの1つ以上によってXを増加させながらN個の大なりXフラグを順次コンテキスト適応エントロピー符号化することによって一連のパスにおいてN個の大なりXフラグのコンテキスト適応エントロピー符号化を実行し、一連のパス中にコンテキスト適応エントロピー符号化を使用して符号化されたフラグの数をログに記録し、数が所定のフラグ閾値を超える場合、N個の大なりXフラグをコンテキスト適応エントロピー符号化するのを停止することを備え、選択された変換が恒等変換である場合、方法は、順次N個の大なりXフラグのコンテキスト適応エントロピー符号化を実行し、N個の大なりXフラグの中の重要度フラグ(X=0)を符号化した後、N個の大なりXフラグの中のさらなるN個の大なりXフラグの前に、所定の係数が絶対閾値よりも大きいかどうかを示す大なりXフラグ-バイパスフラグを符号化し、所定の係数が絶対閾値よりも大きいことを示す大なりXフラグ-バイパスフラグの場合、N個の大なりXフラグのコンテキスト適応エントロピー符号化を停止することを備える。係数のブロックは、選択された変換にしたがって残差サンプル配列に関連し、所定の変換ブロックは、残差サンプル配列を使用して所定の変換ブロックの予測を修正することによって再構成可能である。
【0330】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを復号する方法は、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択することであって、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備えることと、所定の変換ブロックの予測を導出することと、を備える。方法は、所定の係数について、所定の係数の絶対値がXよりも大きいか否かを示すN個の大なりXフラグをコンテキスト適応エントロピー符号化することによって、所定の走査順序において係数のブロックの係数をトラバースする一連のパスにおいて、所定の変換ブロックについて、データストリームに係数のブロックを符号化することを備える。さらに、方法は、所定の係数について、可変長コードを使用して、所定の係数の絶対値がNに依存する絶対閾値を超える量を示す余りを符号化することによって、所定の走査順序で係数のブロックの係数をトラバースする一連のパスにおいて、所定の変換ブロックについて、データストリームに係数のブロックを符号化することを備え、方法は、所定の係数について、所定の係数の符号を符号化することによって、所定の走査順序で係数のブロックの係数をトラバースする一連のパスにおいて、所定の変換ブロックについて、データストリームに係数のブロックを符号化することを備える。さらにまた、方法は、選択された変換が恒等変換であるかまたは少なくとも1つの非恒等変換のうちの1つであるかに応じて、一連のパスにわたるN個の大なりXフラグ、余りおよび符号の符号化を異なって分配することを備える。係数のブロックは、選択された変換にしたがって残差サンプル配列に関連し、所定の変換ブロックは、残差サンプル配列を使用して所定の変換ブロックの予測を修正することによって再構成可能である。
【0331】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを符号化する方法は、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択することを備え、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備える。方法は、ブロックの係数をトラバースする一連のパスにおいて、コンテキスト適応バイナリエントロピー符号化を使用して、各係数の1つ以上の所定のフラグであって、各所定のフラグがそれぞれの係数の絶対値が配置されるそれぞれの係数の絶対値ドメインを低減する所定のフラグをデータストリームに符号化し、ブロックの係数をトラバースする一連のパスにおいて、絶対値ドメインのカーディナリティが、それぞれの係数について符号化された1つ以上の所定のフラグによって1つに低減されない各係数について、それぞれの係数の絶対値ドメイン内のそれぞれの係数の絶対値を示す可変長コードのコードワードを符号化することによって、所定の変換ブロックについて、データストリームに係数のブロックを符号化することを備える。さらにまた、方法は、所定の変換ブロックについて、係数のブロックが選択された変換にしたがって所定の変換ブロックの残差サンプル配列に関連するように、データストリームに係数のブロックを符号化することを備え、残差サンプル配列は、所定の変換ブロックの予測を修正し、所定の変換ブロックを再構成することを可能にする。方法は、一連のパスにおいて、1つ以上の所定のフラグを符号化する際に、ポインタが絶対値を指す絶対値ドメインのカーディナリティが、非ゼロ係数の第2のセットと比較して非ゼロ係数の第1のセットについてより小さくなるように、所定数の所定のフラグに到達するとすぐに1つ以上の所定のフラグの符号化を停止することと、非ゼロ係数の第1および第2のセットの可変長コードのコードワードについて異なる可変長コードを使用することと、を備える。
【0332】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを符号化する方法は、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択することを備え、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備える。方法は、選択された変換が非恒等変換である場合に、非恒等変換のDC係数に向かう第1の走査順序に沿ってデータストリームに係数のブロックの係数を符号化することによって、所定の変換ブロックについて、データストリームに係数のブロックを符号化することを備える。さらに、方法は、選択された変換が恒等変換である場合に、左上サンプル位置から右下サンプル位置に至る第2の走査順序に沿ってデータストリームに係数のブロックの係数を符号化することによって、所定の変換ブロックについて、データストリームに係数のブロックを符号化することを備える。方法は、所定の変換ブロックについて、係数のブロックが選択された変換にしたがって所定の変換ブロックの残差サンプル配列に関連するように、データストリームに係数のブロックを符号化することを備え、所定の変換ブロックの予測を修正し、所定の変換ブロックを再構成することを可能にする。
【0333】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを符号化する方法は、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択することを備え、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備える。方法は、所定の変換ブロックについて、選択された変換が少なくとも1つの非恒等変換のうちの1つである場合、データストリームに構文要素を符号化し、そこから、非ゼロ係数の所定のグループ内の非ゼロ係数の符号が互いに等しいかまたは等しくないかを導出し、そうである場合、非ゼロ係数の所定のグループ内の非ゼロ係数の符号を導出し、非ゼロ係数の所定のグループ内の非ゼロ係数の符号が互いに等しくない場合、非ゼロ係数ベースごとに符号ビットを符号化することによって非ゼロ係数の所定のグループ内の非ゼロ係数の符号を符号化することによって、データストリームに係数のブロックを符号化することを備える。さらにまた、方法は、所定の変換ブロックについて、選択された変換が恒等変換である場合、非ゼロ係数の所定のグループ内の非ゼロ係数の符号が互いに等しいかどうかにかかわらず非ゼロ係数ベースごとに符号ビットを符号化することにより、非ゼロ係数の所定のグループ内の非ゼロ係数の符号を符号化することによって、データストリームに係数のブロックを符号化することを備える。さらに、方法は、所定の変換ブロックについて、係数のブロックが選択された変換にしたがって所定の変換ブロックの残差サンプル配列に関連するように、データストリームに係数のブロックを符号化することを備え、残差サンプル配列は、所定の変換ブロックの予測を修正し、所定の変換ブロックを再構成することを可能にする。
【0334】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを符号化する方法は、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択することを備え、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備える。方法は、データストリームに符号確率傾向インデックスを符号化し、選択された変換が恒等変換である場合、符号確率傾向インデックスに関連付けられたコンテキストモデルを使用して所定の非ゼロ係数の符号をエントロピー符号化することによって、係数の所定のブロックの非ゼロ係数の符号を符号化することによって、所定の変換ブロックについて、データストリームに係数のブロックを符号化することを備え、方法は、選択された変換が少なくとも1つの非恒等変換のうちの1つである場合、所定の非ゼロ係数の符号をバイパス符号化することによって、所定の係数のブロックの非ゼロ係数の符号を符号化することによって、所定の変換ブロックについて、データストリームに係数のブロックを符号化することを備える。さらにまた、方法は、係数のブロックが選択された変換にしたがって所定の変換ブロックの残差サンプル配列に関連するように、所定の係数のブロックの非ゼロ係数の符号を符号化することによって、所定の変換ブロックについて、データストリームに係数のブロックを符号化することを備え、所定の変換ブロックの予測は、所定の変換ブロックを再構成するために残差サンプル配列を使用して修正可能である。
【0335】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを符号化する方法は、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択することを備え、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備える。方法は、選択された変換が恒等変換である場合、複数のコンテキストモデルの中から所定のコンテキストモデルを使用して所定の非ゼロ係数の符号を符号化し、以前に符号化された係数の符号の統計量に応じて複数のコンテキストモデルの中から所定のコンテキストモデルを選択することによって、所定の係数のブロックの非ゼロ係数の符号を符号化することによって、所定の変換ブロックについて、データストリームに係数のブロックを符号化することを備え、方法は、選択された変換が少なくとも1つの非恒等変換のうちの1つである場合、所定の非ゼロ係数の符号をバイパス符号化することによって、所定の係数のブロックの非ゼロ係数の符号を符号化することによって、所定の変換ブロックについて、データストリームに係数のブロックを符号化することを備える。さらにまた、方法は、係数のブロックが選択された変換にしたがって所定の変換ブロックの残差サンプル配列に関連するように、所定の係数のブロックの非ゼロ係数の符号を符号化することによって、所定の変換ブロックについて、データストリームに係数のブロックを符号化することを備え、その結果、所定の変換ブロックの予測は、所定の変換ブロックを再構成するために残差サンプル配列を使用して修正可能である。
【0336】
実施形態によれば、予測コーディングおよびブロックベースの変換残差コーディングを使用してピクチャを符号化する方法は、所定の変換ブロックについて、変換の所定のリストから選択された変換を選択することを備え、選択された変換が、恒等変換および少なくとも1つの非恒等変換を備える。方法は、ブロックの係数をトラバースする一連のパスにおいて、コンテキスト適応バイナリエントロピー符号化を使用して、各係数の1つ以上の所定のフラグであって、各所定のフラグがそれぞれの係数の絶対値が配置されるそれぞれの係数の絶対値ドメインを低減する所定のフラグをデータストリームから符号化ことによって、所定の変換ブロックについて、データストリームに係数のブロックを符号化することを備え、方法は、ブロックの係数をトラバースする一連のパスにおいて、絶対値ドメインのカーディナリティが、それぞれの係数について符号化された1つ以上の所定のフラグによって1つに低減されない各係数について、それぞれの係数の絶対値ドメインからのそれぞれの係数の絶対値を識別するための可変長コードのコードワードを符号化することによって、所定の変換ブロックについて、データストリームに係数のブロックを符号化することを備える。方法は、所定の変換ブロックについて、係数のブロックが選択された変換にしたがって所定の変換ブロックの残差サンプル配列に関連するように、データストリームに係数のブロックを符号化することを備え、その結果、所定の変換ブロックの予測は、所定の変換ブロックを再構成するために残差サンプル配列を使用して修正可能である。さらにまた、方法は、一連のパスにおいて、1つ以上の所定のフラグを符号化する際に、復号される係数がゼロか否かを示す、1つ以上の所定のフラグの中から重要度フラグに関するものを除いて、絶対値ドメインのカーディナリティが非ゼロ係数の第2のセットと比較して非ゼロ係数の第1のセットの方が小さいように、所定数の所定のフラグに到達するとすぐに1つ以上の所定のフラグの復号を停止することを備え、所定数は、上限から重要度フラグがまだ復号されていない係数の数を差し引いたものに対応する。
実施形態によれば、データストリームは、上述した実施形態のいずれか1つにかかる方法によって符号化される。
【0337】
実施形態は、プログラムが1つ以上のコンピュータ上で実行されるときに、上述した実施形態のいずれか1つにかかる方法を実行するためのプログラムコードを有するコンピュータプログラムに関する。
【0338】
いくつかの態様が装置の文脈で説明されたが、これらの態様は、対応する方法の説明も表すことは明らかであり、ブロックまたは装置は、方法ステップまたは方法ステップの特徴に対応する。同様に、方法ステップの文脈で説明された態様は、対応する装置の対応するブロックまたは項目または機能の説明も表す。
【0339】
本発明の符号化された信号は、デジタル記憶媒体に記憶されることができるか、または無線伝送媒体などの伝送媒体またはインターネットなどの有線伝送媒体上で送信されることができる。
【0340】
特定の実装要件に応じて、本発明の実施形態は、ハードウェアまたはソフトウェアで実装されることができる。実装は、電子的に読み取り可能な制御信号が記憶され、それぞれの方法が実行されるようにプログラム可能なコンピュータシステムと協働する(または協働することができる)、例えば、フロッピーディスク、DVD、CD、ROM、PROM、EPROM、EEPROMまたはフラッシュメモリなどのデジタル記憶媒体を使用して行うことができる。
【0341】
本発明にかかるいくつかの実施形態は、本明細書に記載の方法の1つが実行されるように、プログラム可能なコンピュータシステムと協調することができる電子的に読み取り可能な制御信号を有するデータキャリアを備える。
【0342】
一般に、本発明の実施形態は、プログラムコードを備えたコンピュータプログラム製品として実装されることができ、プログラムコードは、コンピュータプログラム製品がコンピュータ上で実行されるときに方法の1つを実行するために動作する。プログラムコードは、例えば、機械可読キャリアに記憶されてもよい。
他の実施形態は、機械可読キャリアに記憶された、本明細書に記載の方法の1つを実行するためのコンピュータプログラムを備える。
【0343】
換言すれば、本発明の方法の実施形態は、したがって、コンピュータプログラムがコンピュータ上で実行されるときに、本明細書に記載の方法の1つを実行するためのプログラムコードを有するコンピュータプログラムである。
【0344】
したがって、本発明の方法のさらなる実施形態は、本明細書に記載の方法の1つを実行するためのコンピュータプログラムをその上に記録したデータキャリア(またはデジタル記憶媒体、またはコンピュータ可読媒体)である。
【0345】
したがって、本発明の方法のさらなる実施形態は、本明細書に記載の方法の1つを実行するためのコンピュータプログラムを表すデータストリームまたは信号のシーケンスである。データストリームまたは信号のシーケンスは、例えば、インターネットなどのデータ通信接続を介して転送されるように構成されてもよい。
【0346】
さらなる実施形態は、本明細書に記載の方法の1つを実行するように構成または適合された処理手段、例えば、コンピュータ、またはプログラマブルロジックデバイスを含む。
さらなる実施形態は、本明細書に記載の方法のうちの1つを実行するためのコンピュータプログラムをその上にインストールしたコンピュータを備える。
【0347】
いくつかの実施形態では、プログラマブルロジックデバイス(例えば、フィールドプログラマブルゲートアレイ)を使用して、本明細書に記載の方法の機能のいくつかまたは全てを実行することができる。いくつかの実施形態では、フィールドプログラマブルゲートアレイは、本明細書に記載の方法の1つを実行するためにマイクロプロセッサと協調することができる。一般に、方法は、好ましくは、任意のハードウェア装置によって実行される。
【0348】
上述した実施形態は、本発明の原理を単に例示するものである。本明細書に記載された構成および詳細の変更および変形は、当業者にとって明らかであろうことが理解される。したがって、本明細書の実施形態の説明および説明として提示された特定の詳細によってではなく、差し迫った特許請求の範囲によってのみ限定されることが意図されている。