特表 2023-534098 映像コンテンツを処理するための方法及び機器

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公表特許公報(A)

(11)【公表番号】

(43)【公表日】2023-08-08

(54)【発明の名称】映像コンテンツを処理するための方法及び機器

(51)【国際特許分類】

   H04N 19/70 20140101AFI20230801BHJP

   H04N 19/80 20140101ALI20230801BHJP

【ＦＩ】

H04N19/70

H04N19/80

【審査請求】有

【予備審査請求】未請求

(21)【出願番号】P 2022570492

(86)(22)【出願日】2021-05-24

(85)【翻訳文提出日】2023-01-11

(86)【国際出願番号】 US2021033941

(87)【国際公開番号】W WO2021237220

(87)【国際公開日】2021-11-25

(31)【優先権主張番号】63/028,615

(32)【優先日】2020-05-22

(33)【優先権主張国・地域又は機関】US

(81)【指定国・地域】

(71)【出願人】

【識別番号】511050697

【氏名又は名称】アリババ グループ ホウルディング リミテッド

(74)【代理人】

【識別番号】100079108

【弁理士】

【氏名又は名称】稲葉 良幸

(74)【代理人】

【識別番号】100109346

【弁理士】

【氏名又は名称】大貫 敏史

(74)【代理人】

【識別番号】100117189

【弁理士】

【氏名又は名称】江口 昭彦

(74)【代理人】

【識別番号】100134120

【弁理士】

【氏名又は名称】内藤 和彦

(72)【発明者】

【氏名】サーヴァー，モハメッド，ゴラム

(72)【発明者】

【氏名】イエ，ヤン

【テーマコード（参考）】

5C159

【Ｆターム（参考）】

5C159PP16

5C159RB09

5C159RB16

5C159RC11

5C159UA02

5C159UA05

5C159UA11

(57)【要約】

本開示は映像コンテンツを処理するためのシステム及び方法を提供する。この方法は、映像コンテンツを含むビットストリームを受信すること、映像コンテンツに関連する第１の信号が所与の条件を満たすかどうかを判定すること、及び第１の信号が所与の条件を満たすと判定することに応答し、クロスコンポーネント適応ループフィルタ（ＣＣＡＬＦ）プロセス及びクロマ適応ループフィルタ（ＡＬＦ）プロセスの両方を無効化することを含み得る。

【特許請求の範囲】

【請求項1】

映像コンテンツを処理するためのコンピュータ実施方法であって、
映像コンテンツを含むビットストリームを受信すること、
前記映像コンテンツに関連する第１の信号が所与の条件を満たすかどうかを判定すること、及び
前記第１の信号が前記所与の条件を満たすと前記判定することに応答し、クロスコンポーネント適応ループフィルタ（ＣＣＡＬＦ）プロセス及びクロマ適応ループフィルタ（ＡＬＦ）プロセスの両方を無効化すること
を含む、方法。

【請求項2】

前記第１の信号が前記所与の条件を満たすかどうかを判定することが、
適応パラメータセット（ＡＰＳ）ネットワーク抽象化層（ＮＡＬ）ユニットが前記受信ビットストリーム内にあることを前記第１の信号が示すかどうかを判定すること
を含む、請求項１に記載の方法。

【請求項3】

ピクチャパラメータセットレベル、シーケンスパラメータセットレベル、ピクチャヘッダレベル、又はスライスヘッダレベルにおいて前記クロマＡＬＦプロセスを制御するための第２の信号を提供すること
を更に含む、請求項１に記載の方法。

【請求項4】

前記第２の信号は、前記映像コンテンツに関連するコード化層映像シーケンス（ＣＬＶＳ）内のピクチャのクロマ成分を復号する際に前記ＡＬＦプロセスが有効化されるかどうかを示す、
請求項３に記載の方法。

【請求項5】

前記第２の信号は、前記映像コンテンツに関連するピクチャパラメータセット（ＰＰＳ）を参照するピクチャのクロマ成分を復号する際に前記ＡＬＦプロセスが有効化されるかどうかを示す、
請求項３に記載の方法。

【請求項6】

映像コンテンツを処理するためのコンピュータ実施方法であって、
映像コンテンツを含むビットストリームを受信すること、
前記映像コンテンツに関連する第１の信号が所与の条件を満たすかどうかを判定すること、及び
前記第１の信号が前記所与の条件を満たすと前記判定することに応答し、依存量子化（ＤＱ）及びサインデータハイディング（ＳＤＨ）を少なくとも１つのスライスについて無効化すること
を含む、方法。

【請求項7】

前記第１の信号が前記所与の条件を満たすと前記判定することに応答し、変換スキップ残差コード化（ＴＳＲＣ）を少なくとも１つのスライスについて無効化すること
を更に含む、請求項６に記載の方法。

【請求項8】

前記ＤＱ及び前記ＳＤＨが前記少なくとも１つのスライスについて無効化されていることに応答し、前記少なくとも１つのスライスについて前記ＴＳＲＣを無効化する、
請求項６に記載の方法。

【請求項9】

前記第１の信号が前記所与の条件を満たすと前記判定することに応答し、前記ＤＱ及び前記ＳＤＨを前記少なくとも１つのスライスについて無効化することが、
前記第１の信号が前記所与の条件を満たすと前記判定することに応答し、スライスヘッダレベル、ピクチャヘッダレベル、又はシーケンスパラメータセットレベルにおいて前記ＤＱ及び前記ＳＤＨを前記少なくとも１つのスライスについて無効化すること
を含む、請求項６に記載の方法。

【請求項10】

前記第１の信号が前記所与の条件を満たすと前記判定することに応答し、前記ＤＱ及び前記ＳＤＨを前記少なくとも１つのスライスについて無効化することが、
前記第１の信号が前記所与の条件を満たすと前記判定することに応答し、前記ＤＱが前記少なくとも１つのスライスについて無効化されているかどうかを判定すること、
前記ＤＱが無効化されていることに応答し、前記少なくとも１つのスライスについて前記ＳＤＨを無効化すること
を含む、請求項６に記載の方法。

【請求項11】

映像コンテンツを処理するための機器であって、
１組の命令を記憶するメモリと、
１つ又は複数のプロセッサとを含み、前記１つ又は複数のプロセッサは、
映像コンテンツを含むビットストリームを受信すること、
前記映像コンテンツに関連する第１の信号が所与の条件を満たすかどうかを判定すること、及び
前記第１の信号が前記所与の条件を満たすと前記判定することに応答し、クロスコンポーネント適応ループフィルタ（ＣＣＡＬＦ）プロセス及びクロマ適応ループフィルタ（ＡＬＦ）プロセスの両方を無効化すること
を前記機器に行わせるために前記１組の命令を実行するように構成される、機器。

【請求項12】

前記第１の信号が前記所与の条件を満たすかどうかを判定することが、
適応パラメータセット（ＡＰＳ）ネットワーク抽象化層（ＮＡＬ）ユニットが前記受信ビットストリーム内にあることを前記第１の信号が示すかどうかを判定すること
を含む、請求項１１に記載の機器。

【請求項13】

前記１つ又は複数のプロセッサは、
ピクチャパラメータセットレベル、シーケンスパラメータセットレベル、ピクチャヘッダレベル、又はスライスヘッダレベルにおいて前記クロマＡＬＦプロセスを制御するための第２の信号を提供すること
を前記機器に更に行わせるために前記１組の命令を実行するように構成される、請求項１１に記載の機器。

【請求項14】

前記第２の信号は、前記映像コンテンツに関連するコード化層映像シーケンス（ＣＬＶＳ）内のピクチャのクロマ成分を復号する際に前記ＡＬＦプロセスが有効化されるかどうかを示す、
請求項１３に記載の機器。

【請求項15】

前記第２の信号は、前記映像コンテンツに関連するピクチャパラメータセット（ＰＰＳ）を参照するピクチャのクロマ成分を復号する際に前記ＡＬＦプロセスが有効化されるかどうかを示す、
請求項１３に記載の機器。

【請求項16】

１組の命令を記憶する非一時的コンピュータ可読媒体であって、前記１組の命令は、映像コンテンツを処理するための方法をコンピュータに行わせるために、前記コンピュータの少なくとも１つのプロセッサによって実行可能であり、前記方法は、
映像コンテンツを含むビットストリームを受信すること、
前記映像コンテンツに関連する第１の信号が所与の条件を満たすかどうかを判定すること、及び
前記第１の信号が前記所与の条件を満たすと前記判定することに応答し、依存量子化（ＤＱ）及びサインデータハイディング（ＳＤＨ）を少なくとも１つのスライスについて無効化すること
を含む、非一時的コンピュータ可読媒体。

【請求項17】

前記少なくとも１つのプロセッサは、
前記第１の信号が前記所与の条件を満たすと前記判定することに応答し、変換スキップ残差コード化（ＴＳＲＣ）を少なくとも１つのスライスについて無効化すること
を前記コンピュータに更に行わせるために前記１組の命令を実行するように構成される、請求項１６に記載の非一時的コンピュータ可読媒体。

【請求項18】

前記ＤＱ及び前記ＳＤＨが前記少なくとも１つのスライスについて無効化されていることに応答し、前記少なくとも１つのスライスについて前記ＴＳＲＣを無効化する、
請求項１６に記載の非一時的コンピュータ可読媒体。

【請求項19】

前記第１の信号が前記所与の条件を満たすと前記判定することに応答し、前記ＤＱ及び前記ＳＤＨを前記少なくとも１つのスライスについて無効化することが、
前記第１の信号が前記所与の条件を満たすと前記判定することに応答し、スライスヘッダレベル、ピクチャヘッダレベル、又はシーケンスパラメータセットレベルにおいて前記ＤＱ及び前記ＳＤＨを前記少なくとも１つのスライスについて無効化すること
を含む、請求項１６に記載の非一時的コンピュータ可読媒体。

【請求項20】

前記第１の信号が前記所与の条件を満たすと前記判定することに応答し、前記ＤＱ及び前記ＳＤＨを前記少なくとも１つのスライスについて無効化することが、
前記第１の信号が前記所与の条件を満たすと前記判定することに応答し、前記ＤＱが前記少なくとも１つのスライスについて無効化されているかどうかを判定すること、
前記ＤＱが無効化されていることに応答し、前記少なくとも１つのスライスについて前記ＳＤＨを無効化すること
を含む、請求項１６に記載の非一時的コンピュータ可読媒体。

【発明の詳細な説明】

【技術分野】

【0001】

関連出願の相互参照
[0001] 本開示は、参照により本明細書にその全体が組み込まれる、２０２０年５月２２日に出願された米国仮特許出願第６３／０２８，６１５号に対する優先権を主張する。

【0002】

技術分野
[0002] 本開示は一般に映像処理に関し、より具体的にはＶＶＣの高レベルシンタックスクリーンアップを用いて映像コンテンツを処理するための方法及び機器に関する。

【背景技術】

【0003】

背景
[0003] 映像は、視覚情報を捕捉する静的ピクチャ（又は「フレーム」）の組である。記憶メモリ及び伝送帯域幅を減らすために、映像は、記憶又は伝送前に圧縮し、表示前に解凍することができる。圧縮プロセスは、通常、符号化と呼ばれ、解凍プロセスは、通常、復号と呼ばれる。最も一般的には、予測、変換、量子化、エントロピーコード化及びインループフィルタリングに基づく規格化された映像コード化技術を使用する様々な映像コード化形式がある。特定の映像コード化形式を指定するHigh Efficiency Video Coding（例えばＨＥＶＣ／Ｈ．２６５）規格、Versatile Video Coding（例えばＶＶＣ／Ｈ．２６６）規格、及びＡＶＳ規格等の映像コード化規格が規格化組織によって策定されている。一層進化した映像コード化技術が映像規格に採用されるにつれて、新たな映像コード化規格のコード化効率が一層高くなる。

【発明の概要】

【課題を解決するための手段】

【0004】

概要
[0004] 本開示の実施形態は、映像コンテンツを処理するための方法及び機器を提供する。この方法は、映像コンテンツを含むビットストリームを受信すること、映像コンテンツに関連する第１の信号が所与の条件を満たすかどうかを判定すること、及び第１の信号が所与の条件を満たすと判定することに応答し、クロスコンポーネント適応ループフィルタ（ＣＣＡＬＦ）プロセス及びクロマ適応ループフィルタ（ＡＬＦ）プロセスの両方を無効化することを含み得る。

【0005】

[0005] 機器は、１組の命令を記憶するメモリと、１つ又は複数のプロセッサとを含み得、１つ又は複数のプロセッサは、映像コンテンツを含むビットストリームを受信すること、映像コンテンツに関連する第１の信号が所与の条件を満たすかどうかを判定すること、及び第１の信号が所与の条件を満たすと判定することに応答し、クロスコンポーネント適応ループフィルタ（ＣＣＡＬＦ）プロセス及びクロマ適応ループフィルタ（ＡＬＦ）プロセスの両方を無効化すること、を機器に行わせるために１組の命令を実行するように構成される。

【0006】

[0006] 本開示の実施形態は、１組の命令を記憶する非一時的コンピュータ可読媒体を更に提供し、１組の命令は、映像コンテンツを処理するための方法をコンピュータに行わせるためにコンピュータの少なくとも１つのプロセッサによって実行可能であり、当該方法は、映像コンテンツを含むビットストリームを受信すること、映像コンテンツに関連する第１の信号が所与の条件を満たすかどうかを判定すること、及び第１の信号が所与の条件を満たすと判定することに応答し、クロスコンポーネント適応ループフィルタ（ＣＣＡＬＦ）プロセス及びクロマ適応ループフィルタ（ＡＬＦ）プロセスの両方を無効化することを含む。

【0007】

[0007] 本開示の実施形態は、映像コンテンツを処理するための方法及び機器も提供する。方法は、映像コンテンツを含むビットストリームを受信すること、映像コンテンツに関連する第１の信号が所与の条件を満たすかどうかを判定すること、及び第１の信号が所与の条件を満たすと判定することに応答し、依存量子化（ＤＱ）及びサインデータハイディング（ＳＤＨ）を少なくとも１つのスライスについて無効化することを含み得る。

【0008】

[0008] 機器は、１組の命令を記憶するメモリと、１つ又は複数のプロセッサとを含み得、１つ又は複数のプロセッサは、映像コンテンツを含むビットストリームを受信すること、映像コンテンツに関連する第１の信号が所与の条件を満たすかどうかを判定すること、及び第１の信号が所与の条件を満たすと判定することに応答し、依存量子化（ＤＱ）及びサインデータハイディング（ＳＤＨ）を少なくとも１つのスライスについて無効化すること、を機器に行わせるために１組の命令を実行するように構成される。

【0009】

[0009] 本開示の実施形態は、１組の命令を記憶する非一時的コンピュータ可読媒体を更に提供し、１組の命令は、映像コンテンツを処理するための方法をコンピュータに行わせるためにコンピュータの少なくとも１つのプロセッサによって実行可能であり、当該方法は、映像コンテンツを含むビットストリームを受信すること、映像コンテンツに関連する第１の信号が所与の条件を満たすかどうかを判定すること、及び第１の信号が所与の条件を満たすと判定することに応答し、依存量子化（ＤＱ）及びサインデータハイディング（ＳＤＨ）を少なくとも１つのスライスについて無効化することを含む。

【0010】

図面の簡単な説明
[0010] 本開示の実施形態及び様々な態様を以下の詳細な説明及び添付図面に示す。図中に示す様々な特徴は、縮尺通りに描かれていない。

【図面の簡単な説明】

【0011】

【図1】[0011]本開示のいくつかの実施形態と合致する、映像シーケンスの構造例を示す概略図を示す。

【図2A】[0012]本開示のいくつかの実施形態と合致する、ハイブリッド映像コード化システムの例示的な符号化プロセスを示す概略図を示す。

【図2B】[0013]本開示のいくつかの実施形態と合致する、ハイブリッド映像コード化システムの別の例示的な符号化プロセスを示す概略図を示す。

【図3A】[0014]本開示のいくつかの実施形態と合致する、ハイブリッド映像コード化システムの例示的な復号プロセスを示す概略図を示す。

【図3B】[0015]本開示のいくつかの実施形態と合致する、ハイブリッド映像コード化システムの別の例示的な復号プロセスを示す概略図を示す。

【図4】[0016]本開示のいくつかの実施形態と合致する、映像を符号化又は復号するための例示的な機器のブロック図を示す。

【図5】[0017]本開示のいくつかの実施形態と合致する、映像コンテンツを処理するための例示的なコンピュータ実施方法のフローチャートを示す。

【図6】[0018]本開示のいくつかの実施形態と合致する、例示的なシーケンスパラメータセットシンタックス構造を示す。

【図7】[0019]本開示のいくつかの実施形態と合致する、例示的なピクチャヘッダシンタックス構造を示す。

【図8】[0020]本開示のいくつかの実施形態と合致する、例示的なスライスヘッダシンタックス構造を示す。

【図9】[0021]本開示のいくつかの実施形態と合致する、例示的なピクチャパラメータセットシンタックス構造を示す。

【図10】[0022]本開示のいくつかの実施形態と合致する、例示的なピクチャヘッダシンタックス構造を示す。

【図11】[0023]本開示のいくつかの実施形態と合致する、例示的なスライスヘッダシンタックス構造を示す。

【図12】[0024]本開示のいくつかの実施形態と合致する、映像コンテンツを処理するための例示的なコンピュータ実施方法のフローチャートを示す。

【図13】[0025]本開示のいくつかの実施形態と合致する、例示的なシーケンスパラメータセットシンタックス構造を示す。

【図14】[0026]本開示のいくつかの実施形態と合致する、例示的なスライスヘッダシンタックス構造を示す。

【図15】[0027]本開示のいくつかの実施形態と合致する、例示的な一般制約シンタックス構造を示す。

【図16A】[0028]本開示のいくつかの実施形態と合致する、例示的なシーケンスパラメータセットシンタックス構造を示す。

【図16B】[0028]本開示のいくつかの実施形態と合致する、例示的なシーケンスパラメータセットシンタックス構造を示す。

【図16C】[0028]本開示のいくつかの実施形態と合致する、例示的なシーケンスパラメータセットシンタックス構造を示す。

【図16D】[0028]本開示のいくつかの実施形態と合致する、例示的なシーケンスパラメータセットシンタックス構造を示す。

【図16E】[0028]本開示のいくつかの実施形態と合致する、例示的なシーケンスパラメータセットシンタックス構造を示す。

【図16F】[0028]本開示のいくつかの実施形態と合致する、例示的なシーケンスパラメータセットシンタックス構造を示す。

【図16G】[0028]本開示のいくつかの実施形態と合致する、例示的なシーケンスパラメータセットシンタックス構造を示す。

【図16H】[0028]本開示のいくつかの実施形態と合致する、例示的なシーケンスパラメータセットシンタックス構造を示す。

【図17A】[0029]本開示のいくつかの実施形態と合致する、例示的なピクチャヘッダシンタックス構造を示す。

【図17B】[0029]本開示のいくつかの実施形態と合致する、例示的なピクチャヘッダシンタックス構造を示す。

【図17C】[0029]本開示のいくつかの実施形態と合致する、例示的なピクチャヘッダシンタックス構造を示す。

【図17D】[0029]本開示のいくつかの実施形態と合致する、例示的なピクチャヘッダシンタックス構造を示す。

【図17E】[0029]本開示のいくつかの実施形態と合致する、例示的なピクチャヘッダシンタックス構造を示す。

【図17F】[0029]本開示のいくつかの実施形態と合致する、例示的なピクチャヘッダシンタックス構造を示す。

【図18A】[0030]本開示のいくつかの実施形態と合致する、例示的なスライスヘッダシンタックス構造を示す。

【図18B】[0030]本開示のいくつかの実施形態と合致する、例示的なスライスヘッダシンタックス構造を示す。

【図18C】[0030]本開示のいくつかの実施形態と合致する、例示的なスライスヘッダシンタックス構造を示す。

【図18D】[0030]本開示のいくつかの実施形態と合致する、例示的なスライスヘッダシンタックス構造を示す。

【図18E】[0030]本開示のいくつかの実施形態と合致する、例示的なスライスヘッダシンタックス構造を示す。

【発明を実施するための形態】

【0012】

詳細な説明
[0031] ここで、その例が添付図面に示される例示的実施形態を詳細に参照する。以下の説明は、添付図面を参照し、添付図面では、他に指示がない限り、異なる図中の同じ数字が同じ又は同様の要素を表す。例示的実施形態についての以下の説明に記載される実装形態は、本発明と合致する全ての実装形態を表すわけではない。むしろ、それらは、添付の特許請求の範囲で列挙する本発明に関係する態様と合致する機器及び方法の例に過ぎない。本開示の特定の態様を以下でより詳細に説明する。参照により援用される用語及び／又は定義と矛盾する場合、本明細書で与えられる用語及び定義が優先する。

【0013】

[0032] ＩＴＵ－Ｔビデオコーディングエキスパートグループ（ＩＴＵ－Ｔ ＶＣＥＧ（ITU-T Video Coding Expert Group））及びＩＳＯ／ＩＥＣムービングピクチャエキスパートグループ（ＩＳＯ／ＩＥＣ ＭＰＥＧ（ISO/IEC Moving Picture Expert Group））のジョイントビデオエキスパートチーム（ＪＶＥＴ（Joint Video Experts Team））は、現在、多用途ビデオコード化（ＶＶＣ／Ｈ．２６６）規格を開発している。ＶＶＣ規格は、その前身、高効率ビデオコード化（ＨＥＶＣ／Ｈ．２６５）規格の圧縮効率を２倍にすることを目指している。換言すれば、ＶＶＣの目標は、半分の帯域幅を用いてＨＥＶＣ／Ｈ．２６５と同じ主観的品質を達成することである。

【0014】

[0033] 半分の帯域幅を用いてＨＥＶＣ／Ｈ．２６５と同じ主観的品質を達成するために、ＪＶＥＴは、共同探索モデル（ＪＥＭ（joint exploration model））参照ソフトウェアを用いてＨＥＶＣを超える技術を開発している。コード化技術がＪＥＭに組み込まれたため、ＪＥＭはＨＥＶＣよりも実質的に高いコード化性能を達成した。

【0015】

[0034] ＶＶＣ規格は最近開発されたものであり、より優れた圧縮性能をもたらすより多くのコード化技術を含み続けている。ＶＶＣは、ＨＥＶＣ、Ｈ．２６４／ＡＶＣ、ＭＰＥＧ２、Ｈ．２６３などの最新の映像圧縮規格において用いられてきた同じハイブリッド映像コード化システムに基づいている。

【0016】

[0035] 映像とは、視覚的情報を記憶するために時系列順に配置される静止ピクチャ（又は「フレーム」）の組である。それらのピクチャを時系列順に捕捉し、記憶するために、映像捕捉装置（例えば、カメラ）を使用することができ、かかるピクチャを時系列順に表示するために、映像再生装置（例えば、テレビ、コンピュータ、スマートフォン、タブレットコンピュータ、ビデオプレーヤ又は表示機能を有する任意のエンドユーザ端末）を使用することができる。更に、一部の応用では、監視、会議又は生放送等のために、映像捕捉装置が捕捉映像を映像再生装置（例えば、モニタを有するコンピュータ）にリアルタイムで伝送することができる。

【0017】

[0036] かかる応用が必要とする記憶空間及び伝送帯域幅を減らすために、映像を記憶及び伝送前に圧縮し、表示前に解凍することができる。この圧縮及び解凍は、プロセッサ（例えば、汎用コンピュータのプロセッサ）又は専用ハードウェアによって実行されるソフトウェアによって実装され得る。圧縮のためのモジュールを一般に「符号器」と呼び、解凍のためのモジュールを一般に「復号器」と呼ぶ。符号器及び復号器は、まとめて「コーデック」と呼ぶことができる。符号器及び復号器は、様々な適切なハードウェア、ソフトウェア、又はその組み合わせとして実装することができる。例えば、符号器及び復号器のハードウェア実装は、１つ又は複数のマイクロプロセッサ、デジタル信号プロセッサ（ＤＳＰ）、特定用途向け集積回路（ＡＳＩＣ）、書換可能ゲートアレイ（ＦＰＧＡ）、ディスクリートロジック、又はその任意の組み合わせ等の回路を含み得る。符号器及び復号器のソフトウェア実装は、プログラムコード、コンピュータ実行可能命令、ファームウェア、又はコンピュータ可読媒体内に固定される任意の適切なコンピュータによって実装されるアルゴリズム若しくはプロセスを含み得る。映像の圧縮及び解凍は、ＭＰＥＧ－１、ＭＰＥＧ－２、ＭＰＥＧ－４、Ｈ．２６ｘシリーズ等の様々なアルゴリズム又は規格によって実装され得る。一部の応用では、コーデックが第１のコード化規格から映像を解凍し、第２のコード化規格を使用して、解凍された映像を再圧縮することができ、その場合、コーデックを「トランスコーダ」と呼ぶことができる。

【0018】

[0037] 映像符号化プロセスは、ピクチャを再構築するために使用可能な有用な情報を識別し、保つことができ、再構築に重要でない情報を無視することができる。無視された重要でない情報を完全に再構築できない場合、かかる符号化プロセスは、「非可逆」と呼ぶことができる。さもなければ、かかる符号化プロセスは、「可逆」と呼ぶことができる。殆どの符号化プロセスは、非可逆であり、これは、必要な記憶空間及び伝送帯域幅を減らすためのトレードオフである。

【0019】

[0038] 符号化されているピクチャ（「現ピクチャ」と呼ぶ）の有用な情報は、参照ピクチャ（例えば、過去に符号化され、再構築されたピクチャ）に対する変化を含む。かかる変化は、ピクセルの位置変化、光度変化、又は色変化を含むことができ、そのうちの位置変化が最も重要である。オブジェクトを表すピクセル群の位置変化は、参照ピクチャと現ピクチャとの間のオブジェクトの動きを反映し得る。

【0020】

[0039] 別のピクチャを参照することなしにコード化される（即ちそのピクチャが自らの参照ピクチャである）ピクチャは「Ｉピクチャ」と呼ばれる。ピクチャは、ピクチャ内の一部又は全てのブロック（例えば映像ピクチャの一部を概して指すブロック）が１つの参照ピクチャを用いてイントラ予測又はインター予測を使用して予測される場合（例えば単方向予測）は「Ｐピクチャ」と呼ばれる。ピクチャは、ピクチャ内の少なくとも１つのブロックが２つの参照ピクチャを用いて予測される場合（例えば双方向予測）は「Ｂピクチャ」と呼ばれる。

【0021】

[0040] 本開示は、上述した映像コード化規格に合致する映像コンテンツを処理する方法及び装置を目的とする。

【0022】

[0041] 図１は、本開示のいくつかの実施形態による、映像シーケンス１００の一例の構造を示す。映像シーケンス１００は、生中継映像又は捕捉され、アーカイブされている映像であり得る。映像１００は、現実の映像、コンピュータによって生成される映像（例えば、コンピュータゲーム映像）、又はその組み合わせ（例えば、拡張現実効果を有する現実の映像）であり得る。映像シーケンス１００は、映像捕捉装置（例えば、カメラ）、過去に捕捉された映像を含む映像アーカイブ（例えば、記憶装置内に記憶される映像ファイル）、又は映像コンテンツプロバイダから映像を受信するための映像フィードインタフェース（例えば、映像ブロードキャストトランシーバ）から入力され得る。

【0023】

[0042] 図１に示すように、映像シーケンス１００は、ピクチャ１０２、１０４、１０６及び１０８を含むタイムラインに沿って時間的に配置される一連のピクチャを含み得る。ピクチャ１０２～１０６は、連続的であり、ピクチャ１０６とピクチャ１０８との間に更に多くのピクチャがある。図１では、ピクチャ１０２は、Ｉピクチャであり、その参照ピクチャは、ピクチャ１０２自体である。ピクチャ１０４は、Ｐピクチャであり、矢印によって示すように、その参照ピクチャは、ピクチャ１０２である。ピクチャ１０６は、Ｂピクチャであり、矢印によって示すように、その参照ピクチャは、ピクチャ１０４及び１０８である。一部の実施形態では、ピクチャ（例えば、ピクチャ１０４）の参照ピクチャは、そのピクチャの直前又は直後になくてもよい。例えば、ピクチャ１０４の参照ピクチャは、ピクチャ１０２に先行するピクチャであり得る。ピクチャ１０２～１０６の参照ピクチャは、例に過ぎず、本開示は、参照ピクチャの実施形態を、図１に示す例として限定しないことに留意すべきである。

【0024】

[0043] 典型的には、映像コーデックは、全ピクチャを一度に符号化又は復号せず、それは、かかるタスクが計算的に複雑であるためである。むしろ、映像コーデックは、ピクチャを基本セグメントに分割し、ピクチャをセグメントごとに符号化又は復号することができる。本開示では、そのような基本セグメントを基本処理単位（「ＢＰＵ」）と呼ぶ。例えば、図１の構造１１０は、映像シーケンス１００のピクチャ（例えば、ピクチャ１０２～１０８の何れか）の構造の一例を示す。構造１１０では、ピクチャが４×４の基本処理単位に分けられており、その境界が破線で示されている。一部の実施形態では、基本処理単位は、一部の映像コード化規格（例えば、ＭＰＥＧファミリ、Ｈ．２６１、Ｈ．２６３又はＨ．２６４／ＡＶＣ）内の「マクロブロック」と呼ぶことができ、他の一部の映像コード化規格（例えば、Ｈ．２６５／ＨＥＶＣ又はＨ．２６６／ＶＶＣ）内の「コード化ツリー単位」（「ＣＴＵ」）と呼ぶことができる。１２８×１２８、６４×６４、３２×３２、１６×１６、４×８、１６×３２、又はピクセルのあらゆる任意の形状及びサイズ等、基本処理単位は、ピクチャ内で可変サイズを有することができる。基本処理単位のサイズ及び形状は、コード化の効率と基本処理単位内で保とうとする詳細度とのバランスに基づいてピクチャについて選択することができる。ＣＴＵは、最大ブロックユニットであり、１２８×１２８ものルマサンプル（に加えてクロマフォーマットに応じた対応するクロマサンプル）を含み得る。ＣＴＵは、４分木、２分木、３分木、又はそれらの組み合わせを用いてコード化ユニット（ＣＵ）に更に区画され得る。

【0025】

[0044] 基本処理単位は、コンピュータメモリ内（例えば、映像フレームバッファ内）に記憶される様々な種類の映像データ群を含み得る論理単位であり得る。例えば、カラーピクチャの基本処理単位は、無彩色の輝度情報を表すルマ成分（Ｙ）、色情報を表す１つ又は複数のクロマ成分（例えば、Ｃｂ及びＣｒ）、ルマ成分及びクロマ成分が同じサイズを有し得る基本処理単位の関連シンタックス要素を含むことができる。一部の映像コード化規格（例えば、Ｈ．２６５／ＨＥＶＣ又はＨ．２６６／ＶＶＣ）では、ルマ成分及びクロマ成分が「コード化ツリーブロック」（「ＣＴＢ」）と呼ばれ得る。基本処理単位に対して行われるいかなる操作も、そのルマ成分及びクロマ成分のそれぞれに対して繰り返し行うことができる。

【0026】

[0045] 映像のコード化は複数の操作段階を有し、その例を図２Ａ～図２Ｂ及び図３Ａ～図３Ｂに示す。それぞれの段階について、基本処理単位のサイズは、依然として処理するのに大き過ぎる場合があり、従って本開示で「基本処理副単位」と呼ぶセグメントに更に分けることができる。一部の実施形態では、基本処理副単位は、一部の映像コード化規格（例えば、ＭＰＥＧファミリ、Ｈ．２６１、Ｈ．２６３又はＨ．２６４／ＡＶＣ）内の「ブロック」と呼ぶことができるか、又は他の一部の映像コード化規格（例えば、Ｈ．２６５／ＨＥＶＣ又はＨ．２６６／ＶＶＣ）内の「コード化単位」（「ＣＵ」）と呼ぶことができる。基本処理副単位は、基本処理単位と同じ又はそれよりも小さいサイズを有し得る。基本処理単位と同様に、基本処理副単位もコンピュータメモリ内（例えば、映像フレームバッファ内）に記憶される様々な種類の映像データ群（例えば、Ｙ、Ｃｂ、Ｃｒ、及び関連シンタックス要素）を含み得る論理単位である。基本処理副単位に対して行われるいかなる操作も、そのルマ成分及びクロマ成分のそれぞれに対して繰り返し行うことができる。処理の必要性に応じて、かかる分割は、更なるレベルに対して行われ得ることに留意すべきである。様々な段階が様々な方式を使用して基本処理単位を分割できることにも留意すべきである。

【0027】

[0046] 例えば、（その一例を図２Ｂに示す）モード決定段階において、基本処理単位に対して何れの予測モード（例えば、イントラピクチャ予測又はインターピクチャ予測）を使用するかを符号器が決定することができ、基本処理単位は、かかる決定を下すには大き過ぎる場合がある。符号器は、基本処理単位を複数の基本処理副単位（例えば、Ｈ．２６５／ＨＥＶＣ又はＨ．２６６／ＶＶＣにあるＣＵ）に分け、個々の基本処理副単位ごとに予測の種類を決定することができる。

【0028】

[0047] 別の例では、（その一例を図２Ａ－２Ｂに示す）予測段階において、符号器は、基本処理副単位（例えば、ＣＵ）のレベルにおいて予測操作を行うことができる。しかし、一部の事例では、処理するのに基本処理副単位が依然として大き過ぎる場合がある。符号器は、基本処理副単位をより小さいセグメント（例えば、Ｈ．２６５／ＨＥＶＣ又はＨ．２６６／ＶＶＣ内で「予測ブロック」又は「ＰＢ」と呼ばれる）に更に分けることができ、そのレベルにおいて予測操作を行うことができる。

【0029】

[0048] 別の例では、（その一例を図２Ａ－２Ｂに示す）変換段階において、符号器は、残差基本処理副単位（例えば、ＣＵ）に対する変換操作を行うことができる。しかし、一部の事例では、処理するのに基本処理副単位が依然として大き過ぎる場合がある。符号器は、基本処理副単位をより小さいセグメント（例えば、Ｈ．２６５／ＨＥＶＣ又はＨ．２６６／ＶＶＣ内で「変換ブロック」又は「ＴＢ」と呼ばれる）に更に分けることができ、そのレベルにおいて変換操作を行うことができる。同じ基本処理副単位の分割方式は、予測段階と変換段階とで異なり得ることに留意すべきである。例えば、Ｈ．２６５／ＨＥＶＣ又はＨ．２６６／ＶＶＣでは、同じＣＵの予測ブロック及び変換ブロックは、異なるサイズ及び数を有し得る。

【0030】

[0049] 図１の構造１１０では、基本処理単位１１２が３×３の基本処理副単位に更に分けられており、その境界が点線で示されている。同じピクチャの異なる基本処理単位を異なる方式で基本処理副単位に分けることができる。

【0031】

[0050] 一部の実装形態では、映像の符号化及び復号に並列処理及び誤り耐性の能力を与えるために、ピクチャを処理のための領域に分けることができ、それにより、ピクチャの領域について、符号化又は復号プロセスがピクチャの他の任意の領域の情報に依存しないようにすることができる。換言すれば、ピクチャの各領域を独立に処理することができる。そうすることで、コーデックは、ピクチャの異なる領域を並列に処理し、従ってコード化の効率を高めることができる。更に、領域のデータが処理内で破損するか又はネットワーク伝送内で失われる場合、コーデックは、破損するか又は失われたデータに依存することなく、同じピクチャの他の領域を正しく符号化又は復号することができ、従って誤り耐性の能力を提供する。一部の映像コード化規格では、ピクチャを異なる種類の領域に分割することができる。例えば、Ｈ．２６５／ＨＥＶＣ及びＨ．２６６／ＶＶＣは、「スライス」及び「タイル」という２種類の領域を提供する。映像シーケンス１００の様々なピクチャは、ピクチャを領域に分けるための様々な分割方式を有し得ることにも留意すべきである。

【0032】

[0051] 例えば、図１では、構造１１０が３つの領域１１４、１１６、及び１１８に分けられており、その境界が構造１１０内の実線として示されている。領域１１４は、４個の基本処理単位を含む。領域１１６及び１１８のそれぞれは、６個の基本処理単位を含む。図１の構造１１０の基本処理単位、基本処理副単位、及び領域は、例に過ぎず、本開示は、その実施形態を限定しないことに留意すべきである。

【0033】

[0052] 図２Ａは、本開示の実施形態と合致する、符号化プロセス２００Ａの一例の概略図を示す。例えば、符号化プロセス２００Ａは、符号器によって実行され得る。図２Ａに示すように、符号器は、プロセス２００Ａに従って映像シーケンス２０２を映像ビットストリーム２２８に符号化することができる。図１の映像シーケンス１００と同様に、映像シーケンス２０２は、時系列順に配置されるピクチャ（「元のピクチャ」と呼ぶ）の組を含み得る。図１の構造１１０と同様に、映像シーケンス２０２のそれぞれの元のピクチャは、符号器によって基本処理単位、基本処理副単位、又は処理のための領域に分けられ得る。一部の実施形態では、符号器は、映像シーケンス２０２のそれぞれの元のピクチャに関する基本処理単位のレベルにおいてプロセス２００Ａを実行することができる。例えば、符号器は、プロセス２００Ａを反復的な方法で実行することができ、その場合、符号器は、プロセス２００Ａの１回の反復において基本処理単位を符号化することができる。一部の実施形態では、符号器は、映像シーケンス２０２のそれぞれの元のピクチャの領域（例えば、領域１１４～１１８）についてプロセス２００Ａを並列に実行することができる。

【0034】

[0053] 図２Ａでは、符号器は、映像シーケンス２０２の元のピクチャの基本処理単位（「元のＢＰＵ」と呼ぶ）を予測段階２０４にフィードして、予測データ２０６及び予測されたＢＰＵ２０８を生成することができる。符号器は、元のＢＰＵから、予測されたＢＰＵ２０８を減算して、残差ＢＰＵ２１０を生成することができる。符号器は、残差ＢＰＵ２１０を変換段階２１２及び量子化段階２１４にフィードして、量子化された変換係数２１６を生成することができる。符号器は、予測データ２０６及び量子化された変換係数２１６をバイナリコード化段階２２６にフィードして、映像ビットストリーム２２８を生成することができる。構成要素２０２、２０４、２０６、２０８、２１０、２１２、２１４、２１６、２２６、及び２２８は、「順方向経路」と呼ぶことができる。プロセス２００Ａ中、符号器は、量子化段階２１４後、量子化された変換係数２１６を逆量子化段階２１８及び逆変換段階２２０にフィードして、再構築された残差ＢＰＵ２２２を生成することができる。符号器は、再構築された残差ＢＰＵ２２２を、予測されたＢＰＵ２０８に加えて、プロセス２００Ａの次の反復の予測段階２０４に使用される予測基準２２４を生成することができる。プロセス２００Ａの構成要素２１８、２２０、２２２、及び２２４は、「再構築経路」と呼ぶことができる。再構築経路は、符号器及び復号器の両方が予測に同じ参照データを使用することを確実にするために使用され得る。

【0035】

[0054] 符号器は、プロセス２００Ａを反復的に実行して、（順方向経路内で）元のピクチャのそれぞれの元のＢＰＵを符号化し、（再構築経路内で）元のピクチャの次の元のＢＰＵを符号化するための予測基準２２４を生成することができる。元のピクチャの全ての元のＢＰＵを符号化した後、符号器は、映像シーケンス２０２内の次のピクチャの符号化に進むことができる。

【0036】

[0055] プロセス２００Ａを参照すると、符号器は、映像捕捉装置（例えば、カメラ）によって生成される映像シーケンス２０２を受信することができる。本明細書で使用する「受信（する）」という用語は、データを入力するために受信すること、入力すること、取得すること、取り出すこと、得ること、読み出すこと、アクセスすること又は任意の方法の任意のアクションを指すことができる。

【0037】

[0056] 予測段階２０４では、現在の反復において、符号器が元のＢＰＵ及び予測基準２２４を受信し、予測操作を行って予測データ２０６及び予測されたＢＰＵ２０８を生成することができる。予測基準２２４は、プロセス２００Ａ前の反復の再構築経路から生成され得る。予測段階２０４の目的は、予測データ２０６を抽出することにより、情報の冗長性を減らすことであり、予測データ２０６は、予測データ２０６及び予測基準２２４から予測されたＢＰＵ２０８として元のＢＰＵを再構築するために使用され得る。

【0038】

[0057] 理想的には、予測されたＢＰＵ２０８は、元のＢＰＵと同一であり得る。しかし、理想的でない予測及び再構築操作により、予測されたＢＰＵ２０８は、概して、元のＢＰＵと僅かに異なる。そのような差を記録するために、符号器は、予測されたＢＰＵ２０８を生成した後、それを元のＢＰＵから減算して残差ＢＰＵ２１０を生成することができる。例えば、符号器は、予測されたＢＰＵ２０８のピクセルの値（例えば、グレースケール値又はＲＧＢ値）を元のＢＰＵの対応するピクセルの値から減算することができる。元のＢＰＵと、予測されたＢＰＵ２０８との対応するピクセル間のかかる減算の結果、残差ＢＰＵ２１０の各ピクセルは、残差値を有し得る。元のＢＰＵと比較して、予測データ２０６及び残差ＢＰＵ２１０は、より少ないビットを有し得るが、品質を著しく損なうことなく、元のＢＰＵを再構築するためにそれらを使用することができる。従って、元のＢＰＵは圧縮される。

【0039】

[0058] 残差ＢＰＵ２１０を更に圧縮するために、変換段階２１２において、符号器は、残差ＢＰＵ２１０を２次元「基底パターン」の組に分解することにより、残差ＢＰＵ２１０の空間的冗長性を低減することができ、各基底パターンは、「変換係数」に関連する。基底パターンは、同じサイズ（例えば、残差ＢＰＵ２１０のサイズ）を有することができる。それぞれの基底パターンは、残差ＢＰＵ２１０の変動周波数（例えば、輝度変動周波数）成分を表すことができる。基底パターンの何れも、他の任意の基底パターンの任意の組み合わせ（例えば、線形結合）から再現することができない。換言すれば、分解は、残差ＢＰＵ２１０の変動を周波数領域内に分解することができる。かかる分解は、関数の離散フーリエ変換に類似し、基底パターンは、離散フーリエ変換の基底関数（例えば、三角関数）に類似し、変換係数は、基底関数に関連する係数に類似する。

【0040】

[0059] 様々な変換アルゴリズムが様々な基底パターンを使用することができる。例えば、離散コサイン変換、離散サイン変換等、変換段階２１２では、様々な変換アルゴリズムを使用することができる。変換段階２１２における変換は、可逆的である。即ち、符号器は、変換の逆操作（「逆変換」と呼ぶ）によって残差ＢＰＵ２１０を復元することができる。例えば、残差ＢＰＵ２１０のピクセルを復元するために、逆変換は、基底パターンの対応するピクセルの値を、関連するそれぞれの係数で乗算し、積を加算して加重和をもたらすことであり得る。映像コード化規格では、符号器及び復号器の両方が同じ変換アルゴリズム（従って同じ基底パターン）を使用することができる。従って、符号器は、変換係数のみを記録することができ、復号器は、符号器から基底パターンを受信することなく、変換係数から残差ＢＰＵ２１０を再構築することができる。残差ＢＰＵ２１０と比較して、変換係数の方が少ないビットを有し得るが、それらの変換係数は、品質を著しく損なうことなく残差ＢＰＵ２１０を再構築するために使用され得る。従って、残差ＢＰＵ２１０が更に圧縮される。

【0041】

[0060] 符号器は、量子化段階２１４において変換係数を更に圧縮することができる。変換プロセスでは、様々な基底パターンが様々な変動周波数（例えば、輝度変動周波数）を表すことができる。人間の目は、概して、低周波変動を認識することが得意であるため、符号器は、復号の際の著しい品質劣化を引き起こすことなく高周波変動の情報を無視することができる。例えば、量子化段階２１４において、符号器は、各変換係数を整数値（「量子化スケール因子」と呼ぶ）で除算し、商をその最近隣数に丸めることにより、量子化された変換係数２１６を生成することができる。かかる操作後、高周波基底パターンの一部の変換係数をゼロに変換することができ、低周波基底パターンの変換係数をより小さい整数に変換することができる。符号器は、ゼロ値の量子化された変換係数２１６を無視することができ、それにより変換係数が更に圧縮される。量子化プロセスも可逆的であり、量子化された変換係数２１６は、量子化の逆操作（「逆量子化」と呼ぶ）内で変換係数に再構築することができる。

【0042】

[0061] 符号器は、丸め操作内でかかる除算の剰余を無視するため、量子化段階２１４は、非可逆であり得る。典型的には、量子化段階２１４は、プロセス２００Ａ内で最大の情報損失に寄与し得る。情報損失が大きいほど、量子化された変換係数２１６が必要とし得るビットが少なくなる。情報損失の様々なレベルを得るために、符号器は、量子化パラメータの様々な値又は量子化プロセスの他の任意のパラメータを使用することができる。

【0043】

[0062] バイナリコード化段階２２６において、符号器は、例えば、エントロピーコード化、可変長コード化、算術コード化、ハフマンコード化、コンテキスト適応バイナリ算術コード化、又は他の任意の可逆若しくは非可逆圧縮アルゴリズム等のバイナリコード化技法を使用し、予測データ２０６及び量子化された変換係数２１６を符号化することができる。一部の実施形態では、予測データ２０６及び量子化された変換係数２１６に加えて、符号器は、例えば、予測段階２０４で使用される予測モード、予測操作のパラメータ、変換段階２１２の変換の種類、量子化プロセスのパラメータ（例えば、量子化パラメータ）、符号器制御パラメータ（例えば、ビットレート制御パラメータ）等の他の情報をバイナリコード化段階２２６において符号化することができる。符号器は、バイナリコード化段階２２６の出力データを使用して映像ビットストリーム２２８を生成することができる。一部の実施形態では、映像ビットストリーム２２８をネットワーク伝送のために更にパケット化することができる。

【0044】

[0063] プロセス２００Ａの再構築経路を参照すると、逆量子化段階２１８では、符号器は、量子化された変換係数２１６に対して逆量子化を行って、再構築された変換係数を生成することができる。逆変換段階２２０では、符号器は、再構築された変換係数に基づいて、再構築された残差ＢＰＵ２２２を生成することができる。符号器は、再構築された残差ＢＰＵ２２２を、予測されたＢＰＵ２０８に加えて、プロセス２００Ａの次の反復内で使用される予測基準２２４を生成することができる。

【0045】

[0064] 映像シーケンス２０２を符号化するためにプロセス２００Ａの他のバリエーションを使用できることに留意すべきである。一部の実施形態では、符号器がプロセス２００Ａの段階を異なる順序で実行することができる。一部の実施形態では、プロセス２００Ａの１つ又は複数の段階を単一の段階に組み合わせることができる。一部の実施形態では、プロセス２００Ａの単一の段階を複数の段階に分けることができる。例えば、変換段階２１２と量子化段階２１４とを単一の段階に組み合わせることができる。一部の実施形態では、プロセス２００Ａは、追加の段階を含み得る。一部の実施形態では、プロセス２００Ａは、図２Ａ内の１つ又は複数の段階を省くことができる。

【0046】

[0065] 図２Ｂは、本開示の実施形態に合致する、符号化プロセスの別の例２００Ｂの概略図を示す。プロセス２００Ｂは、プロセス２００Ａから修正され得る。例えば、プロセス２００Ｂは、ハイブリッド映像コード化規格（例えば、Ｈ．２６ｘシリーズ）に準拠する符号器によって使用され得る。プロセス２００Ａと比較して、プロセス２００Ｂの順方向経路は、モード決定段階２３０を更に含み、予測段階２０４を空間的予測段階２０４２及び時間的予測段階２０４４に分ける。プロセス２００Ｂの再構築経路は、ループフィルタ段階２３２及びバッファ２３４を追加で含む。

【0047】

[0066] 概して、予測技法は、空間的予測及び時間的予測の２つの種類に分類することができる。空間的予測（例えば、イントラピクチャ予測又は「イントラ予測」）は、現ＢＰＵを予測するために、同じピクチャ内の既にコード化された１つ又は複数の隣接ＢＰＵのピクセルを使用することができる。即ち、空間的予測における予測基準２２４は、隣接ＢＰＵを含み得る。空間的予測は、ピクチャの固有の空間的冗長性を減らすことができる。時間的予測（例えば、インターピクチャ予測又は「インター予測」）は、現ＢＰＵを予測するために、既にコード化された１つ又は複数のピクチャの領域を使用することができる。即ち、時間的予測における予測基準２２４は、コード化されたピクチャを含み得る。時間的予測は、ピクチャの固有の時間的冗長性を減らすことができる。

【0048】

[0067] プロセス２００Ｂを参照すると、順方向経路において、符号器は、空間的予測段階２０４２及び時間的予測段階２０４４で予測操作を行う。例えば、空間的予測段階２０４２では、符号器は、イントラ予測を行うことができる。符号化されているピクチャの元のＢＰＵに関して、予測基準２２４は、同じピクチャ内の（順方向経路内で）符号化され、（再構築経路内で）再構築されている１つ又は複数の隣接ＢＰＵを含み得る。符号器は、隣接ＢＰＵを外挿することにより、予測されたＢＰＵ２０８を生成することができる。外挿技法は、例えば、線形外挿又は線形補間、多項式外挿又は多項式補間等を含み得る。一部の実施形態では、予測されたＢＰＵ２０８のピクセルごとに対応するピクセルの値を外挿することによって等、符号器がピクセルレベルで外挿を行うことができる。外挿に使用される隣接ＢＰＵは、垂直方向（例えば、元のＢＰＵの上）、水平方向（例えば、元のＢＰＵの左）、対角線方向（例えば、元のＢＰＵの左下、右下、左上又は右上）、又は使用される映像コード化規格内で規定される任意の方向等、様々な方向から元のＢＰＵに対して位置し得る。イントラ予測では、予測データ２０６は、例えば、使用される隣接ＢＰＵの位置（例えば、座標）、使用される隣接ＢＰＵのサイズ、外挿のパラメータ、元のＢＰＵに対する使用される隣接ＢＰＵの方向等を含み得る。

【0049】

[0068] 別の例では、時間的予測段階２０４４では、符号器は、インター予測を行うことができる。現ピクチャの元のＢＰＵに関して、予測基準２２４は、（順方向経路内で）符号化され、（再構築経路内で）再構築されている１つ又は複数のピクチャ（「参照ピクチャ」と呼ぶ）を含み得る。一部の実施形態では、参照ピクチャがＢＰＵごとに符号化され再構築され得る。例えば、符号器は、再構築された残差ＢＰＵ２２２を、予測されたＢＰＵ２０８に加えて、再構築されたＢＰＵを生成することができる。同じピクチャの全ての再構築されたＢＰＵが生成されると、符号器は、参照ピクチャとして再構築されたピクチャを生成することができる。符号器は、参照ピクチャの範囲（「探索窓」と呼ぶ）内の一致領域を探すために「動き推定」の操作を行うことができる。参照ピクチャ内の探索窓の位置は、現ピクチャ内の元のＢＰＵの位置に基づいて判定することができる。例えば、探索窓は、参照ピクチャの、現ピクチャ内の元のＢＰＵと同じ座標を有する位置に中心を置くことができ、所定の距離にわたって広げることができる。符号器が探索窓内で元のＢＰＵと同様の領域を（例えば、pel再帰アルゴリズム、ブロックマッチングアルゴリズム等を使用することによって）識別すると、符号器は、その領域を一致領域として判定することができる。一致領域は、元のＢＰＵと異なる（例えば、それよりも小さい、等しい、大きい又は異なる形状の）寸法を有し得る。参照ピクチャ及び現ピクチャは、（例えば、図１に示すように）タイムライン内で時間的に隔てられているため、時間が経つにつれて一致領域が元のＢＰＵの位置に「移動する」と見なすことができる。符号器は、かかる動きの方向及び距離を「動きベクトル」として記録することができる。（例えば、図１のピクチャ１０６のような）複数の参照ピクチャが使用される場合、符号器は、参照ピクチャごとに一致領域を探し、その関連する動きベクトルを求めることができる。一部の実施形態では、符号器は、個々の一致する参照ピクチャの一致領域のピクセル値に重みを割り当てることができる。

【0050】

[0069] 動き推定は、例えば、平行移動、回転、拡大縮小等の様々な種類の動きを識別するために使用することができる。インター予測では、予測データ２０６は、例えば、一致領域の位置（例えば、座標）、一致領域に関連する動きベクトル、参照ピクチャの数、参照ピクチャに関連する重み等を含み得る。

【0051】

[0070] 予測されたＢＰＵ２０８を生成するために、符号器は、「動き補償」の操作を行うことができる。動き補償は、予測データ２０６（例えば、動きベクトル）及び予測基準２２４に基づいて、予測されたＢＰＵ２０８を再構築するために使用することができる。例えば、符号器は、動きベクトルに従って参照ピクチャの一致領域を動かすことができ、その中では、符号器は、現ピクチャの元のＢＰＵを予測することができる。（例えば、図１のピクチャ１０６のような）複数の参照ピクチャが使用される場合、符号器は、個々の動きベクトルに従って参照ピクチャの一致領域を動かし、一致領域のピクセル値を平均することができる。一部の実施形態では、符号器が、個々の一致する参照ピクチャの一致領域のピクセル値に重みを割り当てた場合、符号器は、動かした一致領域のピクセル値の加重和を加えることができる。

【0052】

[0071] 一部の実施形態では、インター予測は、単方向又は双方向であり得る。単方向のインター予測は、現ピクチャに対して同じ時間的方向にある１つ又は複数の参照ピクチャを使用することができる。例えば、図１のピクチャ１０４は、参照ピクチャ（例えば、ピクチャ１０２）がピクチャ１０４に先行する単方向のインター予測ピクチャである。双方向のインター予測は、現ピクチャに対して両方の時間的方向にある１つ又は複数の参照ピクチャを使用することができる。例えば、図１のピクチャ１０６は、参照ピクチャ（例えば、ピクチャ１０４及び１０８）がピクチャ１０４に対して両方の時間的方向にある双方向のインター予測ピクチャである。

【0053】

[0072] プロセス２００Ｂの順方向経路を引き続き参照すると、空間的予測段階２０４２及び時間的予測段階２０４４の後、モード決定段階２３０において、符号器は、プロセス２００Ｂの現在の反復のための予測モード（例えば、イントラ予測又はインター予測の１つ）を選択することができる。例えば、符号器は、レート歪み最適化技法を実行することができ、かかる技法では、符号器は、候補予測モードのビットレート及び候補予測モード下の再構築された参照ピクチャの歪みに応じて、コスト関数の値を最小化するための予測モードを選択することができる。選択される予測モードに応じて、符号器は、対応する予測されたＢＰＵ２０８及び予測されたデータ２０６を生成することができる。

【0054】

[0073] プロセス２００Ｂの再構築経路において、順方向経路内でイントラ予測モードが選択されている場合、予測基準２２４（例えば、現ピクチャ内で符号化され再構築されている現ＢＰＵ）を生成した後、符号器は、後に使用するために（例えば、現ピクチャの次のＢＰＵを外挿するために）空間的予測段階２０４２に予測基準２２４を直接フィードすることができる。符号器は、ループフィルタ段階２３２に予測基準２２４をフィードすることができ、ループフィルタ段階２３２では、符号器は、予測基準２２４にループフィルタを適用して、予測基準２２４の符号化中に引き起こされる歪み（例えば、ブロッキングアーティファクト）を減らすか又はなくすことができる。例えば、デブロッキング、サンプル適応オフセット、適応ループフィルタ等、符号器は、ループフィルタ段階２３２で様々なループフィルタ技法を適用することができる。ループフィルタされた参照ピクチャは、後に使用するために（例えば、映像シーケンス２０２の将来のピクチャのためのインター予測参照ピクチャとして使用するために）バッファ２３４（又は「復号されたピクチャバッファ」）内に記憶することができる。符号器は、時間的予測段階２０４４で使用するために１つ又は複数の参照ピクチャをバッファ２３４内に記憶することができる。一部の実施形態では、符号器は、量子化された変換係数２１６、予測データ２０６、及び他の情報と共にループフィルタのパラメータ（例えば、ループフィルタの強度）をバイナリコード化段階２２６で符号化することができる。

【0055】

[0074] 図３Ａは、本開示の実施形態に合致する、復号プロセス３００Ａの一例の概略図を示す。プロセス３００Ａは、図２Ａの圧縮プロセス２００Ａに対応する解凍プロセスであり得る。一部の実施形態では、プロセス３００Ａは、プロセス２００Ａの再構築経路と同様であり得る。復号器は、プロセス３００Ａに従って映像ビットストリーム２２８を映像ストリーム３０４に復号することができる。映像ストリーム３０４は、映像シーケンス２０２と非常に類似し得る。しかし、圧縮及び解凍プロセス（例えば、図２Ａ～図２Ｂの量子化段階２１４）における情報損失により、概して、映像ストリーム３０４は、映像シーケンス２０２と同一ではない。図２Ａ～図２Ｂのプロセス２００Ａ及び２００Ｂと同様に、復号器は、映像ビットストリーム２２８内に符号化される各ピクチャについて、基本処理単位（ＢＰＵ）のレベルにおいてプロセス３００Ａを実行することができる。例えば、復号器は、プロセス３００Ａを反復的な方法で実行することができ、その場合、復号器は、プロセス３００Ａの１回の反復において基本処理単位を復号することができる。一部の実施形態では、復号器は、映像ビットストリーム２２８内に符号化される各ピクチャの領域（例えば、領域１１４～１１８）についてプロセス３００Ａを並列に実行することができる。

【0056】

[0075] 図３Ａでは、復号器は、符号化されたピクチャの基本処理単位（「符号化されたＢＰＵ」と呼ぶ）に関連する映像ビットストリーム２２８の一部をバイナリ復号段階３０２にフィードすることができる。バイナリ復号段階３０２では、復号器は、当該一部を予測データ２０６及び量子化された変換係数２１６に復号することができる。復号器は、量子化された変換係数２１６を逆量子化段階２１８及び逆変換段階２２０にフィードして、再構築された残差ＢＰＵ２２２を生成することができる。復号器は、予測データ２０６を予測段階２０４にフィードして、予測されたＢＰＵ２０８を生成することができる。復号器は、再構築された残差ＢＰＵ２２２を、予測されたＢＰＵ２０８に加えて、予測された基準２２４を生成することができる。一部の実施形態では、予測基準２２４がバッファ（例えば、コンピュータメモリ内の復号されたピクチャバッファ）内に記憶され得る。復号器は、プロセス３００Ａの次の反復内で予測操作を行うための予測基準２２４を予測段階２０４にフィードすることができる。

【0057】

[0076] 復号器は、プロセス３００Ａを反復的に実行して、符号化されたピクチャの各符号化されたＢＰＵを復号し、符号化されたピクチャの次の符号化されたＢＰＵを符号化するための予測基準２２４を生成することができる。符号化されたピクチャの全ての符号化されたＢＰＵを復号した後、復号器は、表示するためにピクチャを映像ストリーム３０４に出力し、映像ビットストリーム２２８内の次の符号化されたピクチャの復号に進むことができる。

【0058】

[0077] バイナリ復号段階３０２では、復号器は、符号器が使用したバイナリコード化技法（例えば、エントロピーコード化、可変長コード化、算術コード化、ハフマンコード化、コンテキスト適応バイナリ算術コード化、又は他の任意の可逆圧縮アルゴリズム）の逆操作を行うことができる。一部の実施形態では、予測データ２０６及び量子化された変換係数２１６に加えて、復号器は、例えば、予測モード、予測操作のパラメータ、変換の種類、量子化プロセスのパラメータ（例えば、量子化パラメータ）、符号器制御パラメータ（例えば、ビットレート制御パラメータ）等の他の情報をバイナリ復号段階３０２において復号することができる。一部の実施形態では、映像ビットストリーム２２８がネットワーク上においてパケット単位で伝送される場合、復号器は、映像ビットストリーム２２８をデパケット化してからそれをバイナリ復号段階３０２にフィードすることができる。

【0059】

[0078] 図３Ｂは、本開示の実施形態に合致する、復号プロセスの別の例３００Ｂの概略図を示す。プロセス３００Ｂは、プロセス３００Ａから修正され得る。例えば、プロセス３００Ｂは、ハイブリッド映像コード化規格（例えば、Ｈ．２６ｘシリーズ）に準拠する復号器によって使用され得る。プロセス３００Ａと比較して、プロセス３００Ｂは、予測段階２０４を空間的予測段階２０４２及び時間的予測段階２０４４に更に分け、ループフィルタ段階２３２及びバッファ２３４を追加で含む。

【0060】

[0079] プロセス３００Ｂでは、復号されている符号化されたピクチャ（「現ピクチャ」と呼ぶ）の符号化された基本処理単位（「現ＢＰＵ」と呼ぶ）に関して、復号器によってバイナリ復号段階３０２から復号される予測データ２０６は、現ＢＰＵを符号化するために何れの予測モードが符号器によって使用されたかに応じて様々な種類のデータを含み得る。例えば、現ＢＰＵを符号化するためにイントラ予測が符号器によって使用された場合、予測データ２０６は、イントラ予測、イントラ予測操作のパラメータ等を示す予測モードインジケータ（例えば、フラグ値）を含み得る。イントラ予測操作のパラメータは、例えば、基準として使用される１つ又は複数の隣接ＢＰＵの位置（例えば、座標）、隣接ＢＰＵのサイズ、外挿のパラメータ、元のＢＰＵに対する隣接ＢＰＵの方向等を含み得る。別の例では、現ＢＰＵを符号化するためにインター予測が符号器によって使用された場合、予測データ２０６は、インター予測、インター予測操作のパラメータ等を示す予測モードインジケータ（例えば、フラグ値）を含み得る。インター予測操作のパラメータは、例えば、現ＢＰＵに関連する参照ピクチャの数、参照ピクチャにそれぞれ関連する重み、それぞれの参照ピクチャ内の１つ又は複数の一致領域の位置（例えば、座標）、一致領域にそれぞれ関連する１つ又は複数の動きベクトル等を含み得る。

【0061】

[0080] 予測モードインジケータに基づき、復号器は、空間的予測段階２０４２で空間的予測（例えば、イントラ予測）を行うか、又は時間的予測段階２０４４で時間的予測（例えば、インター予測）を行うかを決めることができる。かかる空間的予測又は時間的予測の実行の詳細は、図２Ｂに示されており、以下で繰り返さない。かかる空間的予測又は時間的予測を行った後、復号器は、予測されたＢＰＵ２０８を生成することができる。図３Ａに記載したように、復号器は、予測されたＢＰＵ２０８と、再構築された残差ＢＰＵ２２２とを加えて、予測基準２２４を生成することができる。

【0062】

[0081] プロセス３００Ｂでは、復号器は、プロセス３００Ｂの次の反復内で予測操作を行うための予測基準２２４を空間的予測段階２０４２又は時間的予測段階２０４４にフィードすることができる。例えば、現ＢＰＵが空間的予測段階２０４２においてイントラ予測を使用して復号される場合、予測基準２２４（例えば、復号された現ＢＰＵ）を生成した後、復号器は、後に使用するために（例えば、現ピクチャの次のＢＰＵを外挿するために）空間的予測段階２０４２に予測基準２２４を直接フィードすることができる。現ＢＰＵが時間的予測段階２０４４においてインター予測を使用して復号される場合、予測基準２２４（例えば、全てのＢＰＵが復号されている参照ピクチャ）を生成した後、復号器は、ループフィルタ段階２３２に予測基準２２４をフィードして歪み（例えば、ブロッキングアーティファクト）を減らすか又はなくすことができる。復号器は、図２Ｂに記載した方法で予測基準２２４にループフィルタを適用することができる。ループフィルタされた参照ピクチャは、後に使用するために（例えば、映像ビットストリーム２２８の将来の符号化ピクチャのためのインター予測参照ピクチャとして使用するために）バッファ２３４（例えば、コンピュータメモリ内の復号されたピクチャバッファ）内に記憶することができる。復号器は、時間的予測段階２０４４で使用するために１つ又は複数の参照ピクチャをバッファ２３４内に記憶することができる。一部の実施形態では、予測データはループフィルタのパラメータ（例えばループフィルタ強度）を更に含み得る。一部の実施形態では、現ＢＰＵを符号化するためにインター予測が使用されたことを予測データ２０６の予測モードインジケータが示す場合、予測データはループフィルタのパラメータを含む。

【0063】

[0082] 図４は、本開示の実施形態に合致する、映像を符号化又は復号するための機器４００の一例のブロック図である。図４に示すように、機器４００は、プロセッサ４０２を含み得る。プロセッサ４０２が本明細書に記載の命令を実行するとき、機器４００は、映像を符号化又は復号するための専用マシンになり得る。プロセッサ４０２は、情報を操作又は処理することができる任意の種類の回路であり得る。例えば、プロセッサ４０２は、任意の数の中央処理装置（「ＣＰＵ」）、グラフィックス処理装置（「ＧＰＵ」）、ニューラル処理ユニット（「ＮＰＵ」）、マイクロコントローラユニット（「ＭＣＵ」）、光プロセッサ、プログラム可能論理コントローラ、マイクロコントローラ、マイクロプロセッサ、デジタル信号プロセッサ、知的財産（ＩＰ）コア、プログラム可能論理アレイ（ＰＬＡ）、プログラム可能アレイ論理（ＰＡＬ）、汎用アレイ論理（ＧＡＬ）、複合プログラム可能論理装置（ＣＰＬＤ）、書換可能ゲートアレイ（ＦＰＧＡ）、システムオンチップ（ＳｏＣ）、特定用途向け集積回路（ＡＳＩＣ）等の任意の組み合わせを含み得る。一部の実施形態では、プロセッサ４０２は、単一の論理構成要素としてグループ化されるプロセッサの組であり得る。例えば、図４に示すように、プロセッサ４０２は、プロセッサ４０２ａ、プロセッサ４０２ｂ及びプロセッサ４０２ｎを含む複数のプロセッサを含み得る。

【0064】

[0083] 機器４００は、データ（例えば、命令、コンピュータコード、中間データ等の組）を記憶するように構成されるメモリ４０４も含み得る。例えば、図４に示すように、記憶データは、プログラム命令（例えば、プロセス２００Ａ、２００Ｂ、３００Ａ又は３００Ｂ内の段階を実装するためのプログラム命令）、及び処理用データ（例えば、映像シーケンス２０２、映像ビットストリーム２２８又は映像ストリーム３０４）を含み得る。プロセッサ４０２は、プログラム命令及び処理用データに（例えば、バス４１０を介して）アクセスし、プログラム命令を実行して処理用データに対する操作又は処理を行うことができる。メモリ４０４は、高速ランダムアクセス記憶装置又は不揮発性記憶装置を含み得る。一部の実施形態では、メモリ４０４は、任意の数のランダムアクセスメモリ（ＲＡＭ）、読取専用メモリ（ＲＯＭ）、光学ディスク、磁気ディスク、ハードドライブ、ソリッドステートドライブ、フラッシュドライブ、セキュリティデジタル（ＳＤ）カード、メモリスティック、コンパクトフラッシュ（登録商標）（ＣＦ）カード等の任意の組み合わせを含み得る。メモリ４０４は、単一の論理構成要素としてグループ化される（図４には不図示の）メモリ群でもあり得る。

【0065】

[0084] 内蔵バス（例えば、ＣＰＵメモリバス）、外部バス（例えば、ユニバーサルシリアルバスポート、周辺機器コンポーネント相互接続エクスプレスポート）等のバス４１０は、機器４００内の構成要素間でデータを転送する通信装置であり得る。

【0066】

[0085] 曖昧さを招くことなく説明を簡単にするために、本開示では、プロセッサ４０２及び他のデータ処理回路をまとめて「データ処理回路」と呼ぶ。データ処理回路は、完全にハードウェアとして、又はソフトウェア、ハードウェア若しくはファームウェアの組み合わせとして実装することができる。加えて、データ処理回路は、単一の独立したモジュールであり得るか、又は機器４００の他の任意の構成要素内に完全に若しくは部分的に組み合わされ得る。

【0067】

[0086] 機器４００は、ネットワーク（例えば、インターネット、イントラネット、ローカルエリアネットワーク、モバイル通信ネットワーク等）との有線通信又は無線通信を提供するためのネットワークインタフェース４０６を更に含み得る。一部の実施形態では、ネットワークインタフェース４０６は、任意の数のネットワークインタフェースコントローラ（ＮＩＣ）、無線周波数（ＲＦ）モジュール、トランスポンダ、トランシーバ、モデム、ルータ、ゲートウェイ、有線ネットワークアダプタ、無線ネットワークアダプタ、Bluetooth（登録商標）アダプタ、赤外線アダプタ、近距離無線通信（「ＮＦＣ」）アダプタ、セルラネットワークチップ等の任意の組み合わせを含み得る。

【0068】

[0087] 一部の実施形態では、１つ又は複数の周辺装置への接続を提供するための周辺装置インタフェース４０８を任意選択的に機器４００が更に含み得る。図４に示すように、周辺装置は、これのみに限定されないが、カーソル制御装置（例えば、マウス、タッチパッド又はタッチスクリーン）、キーボード、ディスプレイ（例えば、ブラウン管ディスプレイ、液晶ディスプレイ又は発光ダイオードディスプレイ）、映像入力装置（例えば、映像アーカイブに結合されるカメラ又は入力インタフェース）等を含み得る。

【0069】

[0088] 映像コーデック（例えば、プロセス２００Ａ、２００Ｂ、３００Ａ又は３００Ｂを実行するコーデック）は、機器４００内の任意のソフトウェア又はハードウェアモジュールの任意の組み合わせとして実装できることに留意すべきである。例えば、プロセス２００Ａ、２００Ｂ、３００Ａ、又は３００Ｂの一部の又は全ての段階は、メモリ４０４内にロード可能なプログラム命令等の機器４００の１つ又は複数のソフトウェアモジュールとして実装され得る。別の例では、プロセス２００Ａ、２００Ｂ、３００Ａ、又は３００Ｂの一部の又は全ての段階は、専用データ処理回路（例えば、ＦＰＧＡ、ＡＳＩＣ、ＮＰＵ等）等の機器４００の１つ又は複数のハードウェアモジュールとして実装され得る。

【0070】

[0089] ＶＶＣでは、ブロックベースフィルタ適応を伴う適応ループフィルタ（ＡＬＦ）が適用される。ルマ成分では、局所勾配の方向及び活動に基づいて２５個のフィルタのうちの１つが４×４ブロックごとに選択される。ＡＬＦに加え、ＶＶＣドラフト９ではクロスコンポーネント適応ループフィルタ（ＣＣＡＬＦ）も使用される。ＣＣＡＬＦフィルタはルマＡＬＦと並列に動作するように設計される。

【0071】

[0090] ＡＬＦ＿ＡＰＳ、ＬＭＣＳ＿ＡＰＳ、及びＳＣＡＬＩＮＧ＿ＡＰＳ等、ＶＶＣは３種類の適応パラメータセット（ＡＰＳ）ネットワーク抽象化層（ＮＡＬ）ユニットをサポートする。ＡＬＦプロセス及びＣＣＡＬＦプロセスのフィルタ係数はＡＬＦ＿ＡＰＳ内でシグナリングされる。１つのＡＬＦ ＡＰＳ内で、２５組までのルマＡＬＦフィルタ係数及びクリッピング値インデックス、並びに８組までのクロマＡＬＦフィルタ係数及びクリッピング値インデックスがシグナリングされ得る。加えて、Ｃｂ成分のための４組までのＣＣＡＬＦフィルタ係数及びＣｒ成分のための４組までのＣＣＡＬＦフィルタ係数がシグナリングされる。

【0072】

[0091] ＶＶＣドラフト９では、（ａ）レギュラー残差コード化（ＲＲＣ）方法、及び（ｂ）変換スキップ残差コード化（ＴＳＲＣ）方法を含む２つの残差コード化方法がある。本明細書では、これらの残差コード化方法を「ｒｅｓｉｄｕａｌ＿ｃｏｄｉｎｇ」及び「ｒｅｓｉｄｕａｌ＿ｔｓ＿ｃｏｄｉｎｇ」として指定する。ＶＶＣドラフト９では、変換スキップ（ＴＳ）及びブロック差分パルスコード変調（ＢＤＰＣＭ）ブロックの両方が一定の条件下でＲＲＣ方法又はＴＳＲＣ方法を選択することを許可される。スライスのスライスレベルフラグｓｌｉｃｅ＿ｔｓ＿ｒｅｓｉｄｕａｌ＿ｃｏｄｉｎｇ＿ｄｉｓａｂｌｅｄ＿ｆｌａｇの値が０に等しい場合、そのスライスのＴＳ及びＢＤＰＣＭモードでコード化されるブロックはＴＳＲＣを選択する。スライスのスライスレベルフラグｓｌｉｃｅ＿ｔｓ＿ｒｅｓｉｄｕａｌ＿ｃｏｄｉｎｇ＿ｄｉｓａｂｌｅｄ＿ｆｌａｇの値が１に等しい場合、そのスライスのＴＳ及びＢＤＰＣＭコード化ブロックはＲＲＣを選択する。

【0073】

[0092] ＶＶＣの現在の設計には、ｎｏ＿ａｐｓ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇシンタックス要素、ｎｏ＿ｔｓｒｃ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇシンタックス要素、及びシンタックスの順序を対象とした欠点がある。本開示は、これらの欠点に対処するためにシンタックス要素の定義を更新すること及びシンタックステーブルを更新すること等の提案方法を提供する。

【0074】

[0093] 第１の欠点は、ｎｏ＿ａｐｓ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇシンタックス要素を対象とする。ＶＶＣの現在の設計は、ＳＰＳ内でシグナリングされる幾つかの制約フラグを有する。一定のコード化ツールが非活性化されるプロファイルを定めるために、それらの制約フラグ（例えばｎｏ＿ａｐｓ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇシンタックス要素）を使用することができる。ｎｏ＿ａｐｓ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇシンタックス要素は、ビットストリーム内にＡＰＳ ＮＡＬユニットがあるかどうかを指定する。以下はｎｏ＿ａｐｓ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇのセマンティックである。

【0075】

[0094] １に等しいｎｏ＿ａｐｓ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇシンタックス要素は、ＯｌｓＩｎＳｃｏｐｅ内にＰＲＥＦＩＸ＿ＡＰＳ＿ＮＵＴ又はＳＵＦＦＩＸ＿ＡＰＳ＿ＮＵＴに等しいｎｕｈ＿ｕｎｉｔ＿ｔｙｐｅを有するＮＡＬユニットがあり得ないこと、並びにｓｐｓ＿ｌｍｃｓ＿ｅｎａｂｌｅｄ＿ｆｌａｇ及びｓｐｓ＿ｓｃａｌｉｎｇ＿ｌｉｓｔ＿ｅｎａｂｌｅｄ＿ｆｌａｇがどちらも０に等しくなり得ることを指定する。０に等しいｎｏ＿ａｐｓ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇシンタックス要素はかかる制約を課さない。

【0076】

[0095] 上記で述べたように、ＶＶＣは、ＡＬＦ＿ＡＰＳ、ＬＭＣＳ＿ＡＰＳ、及びＳＣＡＬＩＮＧ＿ＡＰＳ等の３種類のＡＰＳ ＮＡＬユニットをサポートする。ｎｏ＿ａｐｓ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇの上記の意味論的定義から、ｎｏ＿ａｐｓ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇシンタックス要素が１に等しい場合はｓｐｓ＿ｌｍｃｓ＿ｅｎａｂｌｅｄ＿ｆｌａｇ及びｓｐｓ＿ｓｃａｌｉｎｇ＿ｌｉｓｔ＿ｅｎａｂｌｅｄ＿ｆｌａｇを０に等しく設定することによってコード化ツールＬＭＣＳ及びスケーリングリストが無効化されることが示される。しかし現在のＶＶＣの設計では、たとえシグナリングされるＡＰＳがなくても（即ちｎｏ＿ａｐｓ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇが１に等しくても）ＡＬＦ及びＣＣＡＬＦが依然として有効化され得る。

【0077】

[0096] ＶＶＣはルマＡＬＦのための固定された／デフォルトの１組のフィルタセットを可能にするので、現在のＶＶＣの設計ではＡＰＳを送信することなしにルマ成分のＡＬＦプロセスを有効化することができる。しかし、クロマＡＬＦプロセス及びＣＣＡＬＦプロセスに関してそのような固定された／デフォルトのフィルタの組はない。従って、ＡＰＳによってフィルタセットをシグナリングすることなしにクロマＡＬＦプロセス及びＣＣＡＬＦプロセスを実行することはできないと断言される。

【0078】

[0097] 提案する方法では、ＡＰＳがシグナリングされない（即ちｎｏ＿ａｐｓ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇが１に等しい）場合にクロマＡＬＦプロセス及びＣＣＡＬＦプロセスの両方が無効化される。クロマＡＬＦプロセス及びＣＣＡＬＦプロセスを無効化するための方法はｎｏ＿ａｐｓ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇシンタックス要素の定義を更新すること及び新たなフラグを導入することを含む。本方法は上記の欠点に対処し、より優れたコード効率を提供する。

【0079】

[0098] 図５は、本開示のいくつかの実施形態と合致する、映像コンテンツを処理するための例示的なコンピュータ実施方法のフローチャートを示す。この方法は、復号器によって（例えば図３Ａのプロセス３００Ａ又は図３Ｂのプロセス３００Ｂによって）実行されてもよく、又は機器（例えば図４の機器４００）の１つ又は複数のソフトウェア又はハードウェアコンポーネントによって実行されてもよい。例えばプロセッサ（例えば図４のプロセッサ４０２）が図５の方法を実行し得る。一部の実施形態では、この方法は、コンピュータ（例えば図４の機器４００）によって実行される、プログラムコード等のコンピュータ実行可能命令を含むコンピュータ可読媒体内に具体化されるコンピュータプログラム製品によって、実装され得る。

【0080】

[0099] 図５の方法は以下のステップを含み得る。

【0081】

[0100] ステップ５０１で、映像コンテンツを含むビットストリームを復号器によって（例えば図３Ａのプロセス３００Ａ又は図３Ｂのプロセス３００Ｂによって）受信する。

【0082】

[0101] ステップ５０２で、映像コンテンツに関連する第１の信号が所与の条件を満たすかどうかを判定する。一部の実施形態では、この判定は、適応パラメータセット（ＡＰＳ）ネットワーク抽象化層（ＮＡＬ）ユニットが受信ビットストリーム内にあることを第１の信号が示すかどうかを判定することを含む。例えば１に等しいｎｏ＿ａｐｓ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇシンタックス要素はＡＰＳ ＮＡＬユニットがないことを示すので、ｎｏ＿ａｐｓ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇシンタックス要素が１に等しいかどうかを判定する。

【0083】

[0102] ステップ５０３で、第１の信号が所与の条件を満たすと判定することに応答し、クロスコンポーネント適応ループフィルタ（ＣＣＡＬＦ）プロセス及びクロマ適応ループフィルタ（ＡＬＦ）プロセスの両方を無効化する。上記で説明したように、ｎｏ＿ａｐｓ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇシンタックス要素が１に等しい場合は、ＣＣＡＬＦプロセス及びクロマＡＬＦプロセスの両方が無効化される。

【0084】

[0103] 一部の実施形態では、ＣＣＡＬＦプロセスをシーケンスレベルで無効化することができる。ｎｏ＿ａｐｓ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇシンタックス要素の定義は、ｓｐｓ＿ｃｃａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇを含めることによって更新することができる。１に等しいｎｏ＿ａｐｓ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇシンタックス要素は、ｓｐｓ＿ｃｃａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇが０に等しくなり得ることを指定する。０に等しいｓｐｓ＿ｃｃａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇシンタックス要素は、受信ビットストリーム内の映像コンテンツと関連があるＣＬＶＳ内のピクチャを復号する際にＣＣＡＬＦプロセスが無効化され適用されないことを指定する。一部の実施形態では、ｎｏ＿ａｐｓ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇシンタックス要素が１に等しい場合、ｓｐｓ＿ｃｃａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇの値が０に等しくなり得る。ｎｏ＿ａｐｓ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇシンタックス要素が０に等しい場合、かかる制約を課すことはできない。

【0085】

[0104] 一部の実施形態では、クロマＡＬＦプロセスをスライスレベルで無効化することは、ｎｏ＿ａｐｓ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇシンタックス要素の定義を更新することによって実装され得る。ｎｏ＿ａｐｓ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇシンタックス要素の定義は、ｓｈ＿ａｌｆ＿ｃｂ＿ｆｌａｇ、ｓｈ＿ａｌｆ＿ｃｒ＿ｆｌａｇ、及びｓｈ＿ｎｕｍ＿ａｌｆ＿ａｐｓ＿ｉｄｓ＿ｌｕｍａを含めることによって更新することができる。例えば１に等しいｎｏ＿ａｐｓ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇシンタックス要素は、ＯｌｓＩｎＳｃｏｐｅ内の全てのスライスのｓｈ＿ａｌｆ＿ｃｂ＿ｆｌａｇ、ｓｈ＿ａｌｆ＿ｃｒ＿ｆｌａｇ、及びｓｈ＿ｎｕｍ＿ａｌｆ＿ａｐｓ＿ｉｄｓ＿ｌｕｍａの値が０に等しくなり得ることを指定する。ルマＡＬＦプロセスのための固定された／デフォルトの１組のフィルタを使用するために、ｓｈ＿ｎｕｍ＿ａｌｆ＿ａｐｓ＿ｉｄｓ＿ｌｕｍａの値は０に設定される。一部の実施形態では、ｎｏ＿ａｐｓ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇシンタックス要素が１に等しい場合、ｓｈ＿ａｌｆ＿ｃｂ＿ｆｌａｇシンタックス要素、ｓｈ＿ａｌｆ＿ｃｒ＿ｆｌａｇシンタックス要素、及びｓｈ＿ｎｕｍ＿ａｌｆ＿ａｐｓ＿ｉｄｓ＿ｌｕｍａシンタックス要素が０に等しい。ｎｏ＿ａｐｓ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇシンタックス要素が０に等しい場合、かかる制約を課すことはできない。

【0086】

[0105] 一部の実施形態では、クロマＡＬＦプロセスを無効化することをスライスレベルではなくピクチャレベルで行うことができる。ｎｏ＿ａｐｓ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇシンタックス要素の定義は、ｐｈ＿ａｌｆ＿ｃｂ＿ｆｌａｇ、ｐｈ＿ａｌｆ＿ｃｒ＿ｆｌａｇ、及びｐｈ＿ｎｕｍ＿ａｌｆ＿ａｐｓ＿ｉｄｓ＿ｌｕｍａを含めることによって更新することができる。例えば１に等しいｎｏ＿ａｐｓ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇシンタックス要素は、ＯｌｓＩｎＳｃｏｐｅ内の全てのスライスのｐｈ＿ａｌｆ＿ｃｂ＿ｆｌａｇ、ｐｈ＿ａｌｆ＿ｃｒ＿ｆｌａｇ、及びｐｈ＿ｎｕｍ＿ａｌｆ＿ａｐｓ＿ｉｄｓ＿ｌｕｍａの値が０に等しくなり得ることを指定し得る。ルマＡＬＦプロセスのための固定された／デフォルトの１組のフィルタを使用するために、ｐｈ＿ｎｕｍ＿ａｌｆ＿ａｐｓ＿ｉｄｓ＿ｌｕｍａの値が０に設定される。一部の実施形態では、ｎｏ＿ａｐｓ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇシンタックス要素が１に等しい場合、ｐｈ＿ａｌｆ＿ｃｂ＿ｆｌａｇシンタックス要素、ｐｈ＿ａｌｆ＿ｃｒ＿ｆｌａｇシンタックス要素、及びｐｈ＿ｎｕｍ＿ａｌｆ＿ａｐｓ＿ｉｄｓ＿ｌｕｍａシンタックス要素が０に等しい。ｎｏ＿ａｐｓ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇシンタックス要素が０に等しい場合、かかる制約を課すことはできない。

【0087】

[0106] 上記で説明したように、ｎｏ＿ａｐｓ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇシンタックス要素の定義を更新することにより、クロマＡＬＦプロセスをスライスヘッダレベルで無効化することができる。一部の実施形態では、ビットストリーム内の信号を提供することによって、クロマＡＬＦプロセスを制御することができる。

【0088】

[0107] 一部の実施形態では、この方法は、ピクチャパラメータセット（ＰＰＳ）レベル、シーケンスパラメータセット（ＳＰＳ）レベル、ピクチャヘッダ（ＰＨ）レベル、又はスライスヘッダ（ＳＨ）レベルにおいて、クロマＡＬＦプロセスを制御するための第２の信号を提供することを更に含み得る。第２の信号はＳＰＳレベルフラグ又はＰＰＳレベルフラグであり得る。

【0089】

[0108] ピクチャヘッダは特定のピクチャに関する情報を運び、同じピクチャに属する全てのスライスに共通の情報を含む。ＳＰＳは、全コード化層映像シーケンス（ＣＬＶＳ）内の全てのピクチャによって共有されるシーケンスレベル情報を含み、ビットストリームが何を含むのか及びビットストリーム内の情報をどのように使用できるのかについての全体像を提供することができる。ＳＰＳはＰＨ及びＳＨよりも高レベルにあり、ＳＰＳレベルフラグは、ＳＰＳレベル、ＰＨレベル、又はＳＨレベルにおいてクロマＡＬＦプロセスを制御するために使用することができる。

【0090】

[0109] 同様に、ＰＰＳはＣＬＶＳに関するシンタックス要素を含み、ＰＰＳはＰＨ及びＳＨよりも高レベルにあり、ＰＰＳレベルフラグは、ＰＰＳレベル、ＰＨレベル、又はＳＨレベルにおいてクロマＡＬＦプロセスを制御するために使用することができる。

【0091】

[0110] 一部の実施形態では、クロマ成分のＡＬＦプロセスを制御するためにＳＰＳレベルフラグ（例えばｓｐｓ＿ｃｈｒｏｍａ＿ａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）が使用される。例えば０に等しいｓｐｓ＿ｃｈｒｏｍａ＿ａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇシンタックス要素は、ＣＬＶＳ内のピクチャのクロマ成分を復号する際に適応ループフィルタが無効化され適用されないことを指定し得る。１に等しいｓｐｓ＿ｃｈｒｏｍａ＿ａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇシンタックス要素は、ＣＬＶＳ内のピクチャのクロマ成分を復号する際に適応ループフィルタが有効化され適用され得ることを指定し得る。ない場合、ｓｐｓ＿ｃｈｒｏｍａ＿ａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇの値は０に等しいと推論される。この例は要素が０又は１であることに基づいて様々な結果を与えることが理解されるが、０及び１の指示は設計上の選択であり、このシンタックス要素及び他のシンタックス要素に関して結果を逆にできることが理解されよう（例えば０に等しいｓｐｓ＿ｃｈｒｏｍａ＿ａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇシンタックス要素は適応ループフィルタが有効化されることを指定し得る）。

【0092】

[0111] 図６～図８は、提案する方法のシーケンスパラメータセット（ＳＰＳ）、ピクチャヘッダ（ＰＨ）、スライスヘッダ（ＳＨ）シンタックステーブルの例をそれぞれ示す。以下で提案する変更はＶＶＣ規格に加えることができ、又は他の映像コード化技術内で実装され得る。

【0093】

[0112] 図６に示すように、提案するフラグｓｐｓ＿ｃｈｒｏｍａ＿ａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇ（例えば要素６０１）はｓｐｓ＿ａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇが１に等しくＣｈｒｏｍａＡｒｒａｙＴｙｐｅ！＝０である場合に条件付きでシグナリングされる。加えて、フラグｓｐｓ＿ｃｃａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇ（例えば要素６０２）もｓｐｓ＿ａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇが１に等しくＣｈｒｏｍａＡｒｒａｙＴｙｐｅ！＝０である場合に条件付きでシグナリングされる。

【0094】

[0113] 図７は、ＰＨに関連するスライスのルマ成分が参照するｉ番目のＡＬＦ ＡＰＳのａｐｓ＿ａｄａｐｔａｔｉｏｎ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄを指定するｐｈ＿ａｌｆ＿ａｐｓ＿ｉｄ＿ｌｕｍａ［ｉ］シンタックス要素を示す。ｐｈ＿ａｌｆ＿ａｐｓ＿ｉｄ＿ｌｕｍａ［ｉ］シンタックス要素がある場合は以下が適用される：
－ ＡＬＦ＿ＡＰＳに等しいａｐｓ＿ｐａｒａｍｓ＿ｔｙｐｅ及びｐｈ＿ａｌｆ＿ａｐｓ＿ｉｄ＿ｌｕｍａ［ｉ］に等しいａｐｓ＿ａｄａｐｔａｔｉｏｎ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄを有するＡＰＳ ＮＡＬユニットのａｌｆ＿ｌｕｍａ＿ｆｉｌｔｅｒ＿ｓｉｇｎａｌ＿ｆｌａｇの値は１に等しくなり得る。
－ ＡＬＦ＿ＡＰＳに等しいａｐｓ＿ｐａｒａｍｓ＿ｔｙｐｅ及びｐｈ＿ａｌｆ＿ａｐｓ＿ｉｄ＿ｌｕｍａ［ｉ］に等しいａｐｓ＿ａｄａｐｔａｔｉｏｎ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄを有するＡＰＳ ＮＡＬユニットのＴｅｍｐｏｒａｌＩｄは、ＰＨに関連するピクチャのＴｅｍｐｏｒａｌＩｄ以下であり得る。
－ ＣｈｒｏｍａＡｒｒａｙＴｙｐｅが０に等しい場合、ＡＬＦ＿ＡＰＳに等しいａｐｓ＿ｐａｒａｍｓ＿ｔｙｐｅ及びｐｈ＿ａｌｆ＿ａｐｓ＿ｉｄ＿ｌｕｍａ［ｉ］に等しいａｐｓ＿ａｄａｐｔａｔｉｏｎ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄを有するＡＰＳ ＮＡＬユニットのａｐｓ＿ｃｈｒｏｍａ＿ｐｒｅｓｅｎｔ＿ｆｌａｇの値は０に等しくなり得る。
－ ｓｐｓ＿ｃｃａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇが０に等しい場合、ＡＬＦ＿ＡＰＳに等しいａｐｓ＿ｐａｒａｍｓ＿ｔｙｐｅ及びｐｈ＿ａｌｆ＿ａｐｓ＿ｉｄ＿ｌｕｍａ［ｉ］に等しいａｐｓ＿ａｄａｐｔａｔｉｏｎ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄを有するＡＰＳ ＮＡＬユニットのａｌｆ＿ｃｃ＿ｃｂ＿ｆｉｌｔｅｒ＿ｓｉｇｎａｌ＿ｆｌａｇ及びａｌｆ＿ｃｃ＿ｃｒ＿ｆｉｌｔｅｒ＿ｓｉｇｎａｌ＿ｆｌａｇの値は０に等しくなり得る。
－ 更に本開示の一部の実施形態では、図７の要素７０１に示すように、ｓｐｓ＿ｃｈｒｏｍａ＿ａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇが０に等しい場合、ＡＬＦ＿ＡＰＳに等しいａｐｓ＿ｐａｒａｍｓ＿ｔｙｐｅ及びｐｈ＿ａｌｆ＿ａｐｓ＿ｉｄ＿ｌｕｍａ［ｉ］に等しいａｐｓ＿ａｄａｐｔａｔｉｏｎ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄを有するＡＰＳ ＮＡＬユニットのａｌｆ＿ｃｈｒｏｍａ＿ｆｉｌｔｅｒ＿ｓｉｇｎａｌ＿ｆｌａｇの値は０に等しくなり得る。

【0095】

[0114] 図８はｓｈ＿ａｌｆ＿ａｐｓ＿ｉｄ＿ｌｕｍａ［ｉ］シンタックス要素を示し、ｓｈ＿ａｌｆ＿ａｐｓ＿ｉｄ＿ｌｕｍａ［ｉ］シンタックス要素、スライスのルマ成分が参照するｉ番目のＡＬＦ ＡＰＳのａｐｓ＿ａｄａｐｔａｔｉｏｎ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄを指定する。ｓｈ＿ａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇが１に等しくｓｈ＿ａｌｆ＿ａｐｓ＿ｉｄ＿ｌｕｍａ［ｉ］がない場合、ｓｈ＿ａｌｆ＿ａｐｓ＿ｉｄ＿ｌｕｍａ［ｉ］の値はｐｈ＿ａｌｆ＿ａｐｓ＿ｉｄ＿ｌｕｍａ［ｉ］の値に等しいと推論される。ｓｈ＿ａｌｆ＿ａｐｓ＿ｉｄ＿ｌｕｍａ［ｉ］がある場合は以下が適用される：
－ ＡＬＦ＿ＡＰＳに等しいａｐｓ＿ｐａｒａｍｓ＿ｔｙｐｅ及びｓｈ＿ａｌｆ＿ａｐｓ＿ｉｄ＿ｌｕｍａ［ｉ］に等しいａｐｓ＿ａｄａｐｔａｔｉｏｎ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄを有するＡＰＳ ＮＡＬユニットのＴｅｍｐｏｒａｌＩｄは、コード化スライスＮＡＬユニットのＴｅｍｐｏｒａｌＩｄ以下であり得る。
－ ＡＬＦ＿ＡＰＳに等しいａｐｓ＿ｐａｒａｍｓ＿ｔｙｐｅ及びｓｈ＿ａｌｆ＿ａｐｓ＿ｉｄ＿ｌｕｍａ［ｉ］に等しいａｐｓ＿ａｄａｐｔａｔｉｏｎ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄを有するＡＰＳ ＮＡＬユニットのａｌｆ＿ｌｕｍａ＿ｆｉｌｔｅｒ＿ｓｉｇｎａｌ＿ｆｌａｇの値は１に等しくなり得る。
－ ＣｈｒｏｍａＡｒｒａｙＴｙｐｅが０に等しい場合、ＡＬＦ＿ＡＰＳに等しいａｐｓ＿ｐａｒａｍｓ＿ｔｙｐｅ及びｓｈ＿ａｌｆ＿ａｐｓ＿ｉｄ＿ｌｕｍａ［ｉ］に等しいａｐｓ＿ａｄａｐｔａｔｉｏｎ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄを有するＡＰＳ ＮＡＬユニットのａｐｓ＿ｃｈｒｏｍａ＿ｐｒｅｓｅｎｔ＿ｆｌａｇの値は０に等しくなり得る。
－ ｓｐｓ＿ｃｃａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇが０に等しい場合、ＡＬＦ＿ＡＰＳに等しいａｐｓ＿ｐａｒａｍｓ＿ｔｙｐｅ及びｓｈ＿ａｌｆ＿ａｐｓ＿ｉｄ＿ｌｕｍａ［ｉ］に等しいａｐｓ＿ａｄａｐｔａｔｉｏｎ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄを有するＡＰＳ ＮＡＬユニットのａｌｆ＿ｃｃ＿ｃｂ＿ｆｉｌｔｅｒ＿ｓｉｇｎａｌ＿ｆｌａｇ及びａｌｆ＿ｃｃ＿ｃｒ＿ｆｉｌｔｅｒ＿ｓｉｇｎａｌ＿ｆｌａｇの値は０に等しくなり得る。
－ 更に本開示の一部の実施形態では、図８の要素８０１に示すように、ｓｐｓ＿ｃｈｒｏｍａ＿ａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇが０に等しい場合、ＡＬＦ＿ＡＰＳに等しいａｐｓ＿ｐａｒａｍｓ＿ｔｙｐｅ及びｓｈ＿ａｌｆ＿ａｐｓ＿ｉｄ＿ｌｕｍａ［ｉ］に等しいａｐｓ＿ａｄａｐｔａｔｉｏｎ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄを有するＡＰＳ ＮＡＬユニットのａｌｆ＿ｃｈｒｏｍａ＿ｆｉｌｔｅｒ＿ｓｉｇｎａｌ＿ｆｌａｇの値は０に等しくなり得る。

【0096】

[0115] 一部の実施形態では、図６～図８の新たなＳＰＳレベルフラグｓｐｓ＿ｃｈｒｏｍａ＿ａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇシンタックス要素を導入することにより、ｎｏ＿ａｐｓ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇの定義を更新することができる。例えば１に等しいｎｏ＿ａｐｓ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇシンタックス要素は、ＯｌｓＩｎＳｃｏｐｅ内にＰＲＥＦＩＸ＿ＡＰＳ＿ＮＵＴ又はＳＵＦＦＩＸ＿ＡＰＳ＿ＮＵＴに等しいｎｕｈ＿ｕｎｉｔ＿ｔｙｐｅを有するＮＡＬユニットがあり得ないこと、及び（図６～図８の要素６０１、７０１、及び８０１で導入される）ｓｐｓ＿ｃｈｒｏｍａ＿ａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇ、（図６～図８の要素６０２、７０２、及び８０２で導入される）ｓｐｓ＿ｃｃａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇ、ｓｐｓ＿ｌｍｃｓ＿ｅｎａｂｌｅｄ＿ｆｌａｇ、及びｓｐｓ＿ｓｃａｌｉｎｇ＿ｌｉｓｔ＿ｅｎａｂｌｅｄ＿ｆｌａｇが全て０に等しくなり得ることを指定する。一部の実施形態では、ｎｏ＿ａｐｓ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇシンタックス要素が１に等しい場合、ＯｌｓＩｎＳｃｏｐｅ内の全てのスライスのｓｈ＿ｎｕｍ＿ａｌｆ＿ａｐｓ＿ｉｄｓ＿ｌｕｍａの値は０に等しくなり得る。ｎｏ＿ａｐｓ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇシンタックス要素が０に等しい場合、かかる制約を課すことはできない。

【0097】

[0116] 一部の実施形態では、ＰＰＳレベル、ＰＨレベル、又はＳＨレベルにおいてクロマＡＬＦプロセスを制御するために第２の信号（例えばＰＰＳレベルフラグ）も導入することができる。例えばＰＰＳレベルフラグ（例えばｐｐｓ＿ｃｈｒｏｍａ＿ａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）は、クロマ成分のＡＬＦプロセスを制御するために使用することができる。０に等しいｐｐｓ＿ｃｈｒｏｍａ＿ａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇシンタックス要素は、ＰＰＳを参照してピクチャのクロマ成分を復号する場合において、適応ループフィルタが無効化され適用されないことを指定し得る。１に等しいｐｐｓ＿ｃｈｒｏｍａ＿ａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇシンタックス要素は、ＰＰＳを参照してピクチャのクロマ成分を復号する場合において、適応ループフィルタが有効化され適用され得ることを指定し得る。ない場合、ｐｐｓ＿ｃｈｒｏｍａ＿ａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇシンタックス要素の値は０に等しいと推論される。この例は要素が０又は１であることに基づいて様々な結果を与えることが理解されるが、０及び１の指示は設計上の選択であり、このシンタックス要素及び他のシンタックス要素に関して結果を逆にできることが理解されよう（例えば０に等しいｐｐｓ＿ｃｈｒｏｍａ＿ａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇシンタックス要素は適応ループフィルタが有効化されることを指定し得る）。

【0098】

[0117] 図９～図１１は、提案する方法のピクチャパラメータセット（ＰＰＳ）、ピクチャヘッダ（ＰＨ）、スライスヘッダ（ＳＨ）シンタックステーブルの例をそれぞれ示す。以下で提案する変更はＶＶＣ規格に加えることができ、又は他の映像コード化技術内で実装され得る。

【0099】

[0118] 図９の要素９０１に示すように、提案するフラグｐｐｓ＿ｃｈｒｏｍａ＿ａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇは、ｐｐｓ＿ｃｈｒｏｍａ＿ｔｏｏｌ＿ｏｆｆｓｅｔｓ＿ｐｒｅｓｅｎｔ＿ｆｌａｇが１に等しい場合に条件付きでシグナリングされる。

【0100】

[0119] 図１０は、ＰＨに関連するスライスのルマ成分が参照するｉ番目のＡＬＦ ＡＰＳのａｐｓ＿ａｄａｐｔａｔｉｏｎ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄを指定するｐｈ＿ａｌｆ＿ａｐｓ＿ｉｄ＿ｌｕｍａ［ｉ］シンタックス要素を示す。ｐｈ＿ａｌｆ＿ａｐｓ＿ｉｄ＿ｌｕｍａ［ｉ］がある場合は以下が適用される：
－ ＡＬＦ＿ＡＰＳに等しいａｐｓ＿ｐａｒａｍｓ＿ｔｙｐｅ及びｐｈ＿ａｌｆ＿ａｐｓ＿ｉｄ＿ｌｕｍａ［ｉ］に等しいａｐｓ＿ａｄａｐｔａｔｉｏｎ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄを有するＡＰＳ ＮＡＬユニットのａｌｆ＿ｌｕｍａ＿ｆｉｌｔｅｒ＿ｓｉｇｎａｌ＿ｆｌａｇの値は１に等しくなり得る。
－ ＡＬＦ＿ＡＰＳに等しいａｐｓ＿ｐａｒａｍｓ＿ｔｙｐｅ及びｐｈ＿ａｌｆ＿ａｐｓ＿ｉｄ＿ｌｕｍａ［ｉ］に等しいａｐｓ＿ａｄａｐｔａｔｉｏｎ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄを有するＡＰＳ ＮＡＬユニットのＴｅｍｐｏｒａｌＩｄは、ＰＨに関連するピクチャのＴｅｍｐｏｒａｌＩｄ以下であり得る。
－ ＣｈｒｏｍａＡｒｒａｙＴｙｐｅが０に等しい場合、ＡＬＦ＿ＡＰＳに等しいａｐｓ＿ｐａｒａｍｓ＿ｔｙｐｅ及びｐｈ＿ａｌｆ＿ａｐｓ＿ｉｄ＿ｌｕｍａ［ｉ］に等しいａｐｓ＿ａｄａｐｔａｔｉｏｎ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄを有するＡＰＳ ＮＡＬユニットのａｐｓ＿ｃｈｒｏｍａ＿ｐｒｅｓｅｎｔ＿ｆｌａｇの値は０に等しくなり得る。
－ ｓｐｓ＿ｃｃａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇが０に等しい場合、ＡＬＦ＿ＡＰＳに等しいａｐｓ＿ｐａｒａｍｓ＿ｔｙｐｅ及びｐｈ＿ａｌｆ＿ａｐｓ＿ｉｄ＿ｌｕｍａ［ｉ］に等しいａｐｓ＿ａｄａｐｔａｔｉｏｎ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄを有するＡＰＳ ＮＡＬユニットのａｌｆ＿ｃｃ＿ｃｂ＿ｆｉｌｔｅｒ＿ｓｉｇｎａｌ＿ｆｌａｇ及びａｌｆ＿ｃｃ＿ｃｒ＿ｆｉｌｔｅｒ＿ｓｉｇｎａｌ＿ｆｌａｇの値は０に等しくなり得る。
－ 更に本開示の一部の実施形態では、図１０の要素１００１に示すように、ｐｐｓ＿ｃｈｒｏｍａ＿ａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇが０に等しい場合、ＡＬＦ＿ＡＰＳに等しいａｐｓ＿ｐａｒａｍｓ＿ｔｙｐｅ及びｐｈ＿ａｌｆ＿ａｐｓ＿ｉｄ＿ｌｕｍａ［ｉ］に等しいａｐｓ＿ａｄａｐｔａｔｉｏｎ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄを有するＡＰＳ ＮＡＬユニットのａｌｆ＿ｃｈｒｏｍａ＿ｆｉｌｔｅｒ＿ｓｉｇｎａｌ＿ｆｌａｇの値は０に等しくなり得る。

【0101】

[0120] 図１１は、ＰＨに関連するスライスのルマ成分が参照するｉ番目のＡＬＦ ＡＰＳのａｐｓ＿ａｄａｐｔａｔｉｏｎ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄを指定するｐｈ＿ａｌｆ＿ａｐｓ＿ｉｄ＿ｌｕｍａ［ｉ］シンタックス要素を示す。ｐｈ＿ａｌｆ＿ａｐｓ＿ｉｄ＿ｌｕｍａ［ｉ］がある場合は以下が適用される：スライスのルマ成分が参照するｉ番目のＡＬＦ ＡＰＳのａｐｓ＿ａｄａｐｔａｔｉｏｎ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄを指定するｓｈ＿ａｌｆ＿ａｐｓ＿ｉｄ＿ｌｕｍａ［ｉ］シンタックス要素。ｓｈ＿ａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇが１に等しくｓｈ＿ａｌｆ＿ａｐｓ＿ｉｄ＿ｌｕｍａ［ｉ］がない場合、ｓｈ＿ａｌｆ＿ａｐｓ＿ｉｄ＿ｌｕｍａ［ｉ］の値はｐｈ＿ａｌｆ＿ａｐｓ＿ｉｄ＿ｌｕｍａ［ｉ］の値に等しいと推論される。ｓｈ＿ａｌｆ＿ａｐｓ＿ｉｄ＿ｌｕｍａ［ｉ］がある場合は以下が適用される：
－ ＡＬＦ＿ＡＰＳに等しいａｐｓ＿ｐａｒａｍｓ＿ｔｙｐｅ及びｓｈ＿ａｌｆ＿ａｐｓ＿ｉｄ＿ｌｕｍａ［ｉ］に等しいａｐｓ＿ａｄａｐｔａｔｉｏｎ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄを有するＡＰＳ ＮＡＬユニットのＴｅｍｐｏｒａｌＩｄは、コード化スライスＮＡＬユニットのＴｅｍｐｏｒａｌＩｄ以下であり得る。
－ ＡＬＦ＿ＡＰＳに等しいａｐｓ＿ｐａｒａｍｓ＿ｔｙｐｅ及びｓｈ＿ａｌｆ＿ａｐｓ＿ｉｄ＿ｌｕｍａ［ｉ］に等しいａｐｓ＿ａｄａｐｔａｔｉｏｎ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄを有するＡＰＳ ＮＡＬユニットのａｌｆ＿ｌｕｍａ＿ｆｉｌｔｅｒ＿ｓｉｇｎａｌ＿ｆｌａｇの値は１に等しくなり得る。
－ ＣｈｒｏｍａＡｒｒａｙＴｙｐｅが０に等しい場合、ＡＬＦ＿ＡＰＳに等しいａｐｓ＿ｐａｒａｍｓ＿ｔｙｐｅ及びｓｈ＿ａｌｆ＿ａｐｓ＿ｉｄ＿ｌｕｍａ［ｉ］に等しいａｐｓ＿ａｄａｐｔａｔｉｏｎ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄを有するＡＰＳ ＮＡＬユニットのａｐｓ＿ｃｈｒｏｍａ＿ｐｒｅｓｅｎｔ＿ｆｌａｇの値は０に等しくなり得る。
－ ｓｐｓ＿ｃｃａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇが０に等しい場合、ＡＬＦ＿ＡＰＳに等しいａｐｓ＿ｐａｒａｍｓ＿ｔｙｐｅ及びｓｈ＿ａｌｆ＿ａｐｓ＿ｉｄ＿ｌｕｍａ［ｉ］に等しいａｐｓ＿ａｄａｐｔａｔｉｏｎ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄを有するＡＰＳ ＮＡＬユニットのａｌｆ＿ｃｃ＿ｃｂ＿ｆｉｌｔｅｒ＿ｓｉｇｎａｌ＿ｆｌａｇ及びａｌｆ＿ｃｃ＿ｃｒ＿ｆｉｌｔｅｒ＿ｓｉｇｎａｌ＿ｆｌａｇの値は０に等しくなり得る。
－ 更に本開示の一部の実施形態では、図１１の要素１１０１に示すように、ｐｐｓ＿ｃｈｒｏｍａ＿ａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇが０に等しい場合、ＡＬＦ＿ＡＰＳに等しいａｐｓ＿ｐａｒａｍｓ＿ｔｙｐｅ及びｓｈ＿ａｌｆ＿ａｐｓ＿ｉｄ＿ｌｕｍａ［ｉ］に等しいａｐｓ＿ａｄａｐｔａｔｉｏｎ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄを有するＡＰＳ ＮＡＬユニットのａｌｆ＿ｃｈｒｏｍａ＿ｆｉｌｔｅｒ＿ｓｉｇｎａｌ＿ｆｌａｇの値は０に等しくなり得る。

【0102】

[0121] 一部の実施形態では、図９～図１１の新たなＰＰＳレベルフラグｐｐｓ＿ｃｈｒｏｍａ＿ａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇシンタックス要素を導入することにより、ｎｏ＿ａｐｓ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇの定義を更新することができる。例えば１に等しいｎｏ＿ａｐｓ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇシンタックス要素は、ＯｌｓＩｎＳｃｏｐｅ内にＰＲＥＦＩＸ＿ＡＰＳ＿ＮＵＴ又はＳＵＦＦＩＸ＿ＡＰＳ＿ＮＵＴに等しいｎｕｈ＿ｕｎｉｔ＿ｔｙｐｅを有するＮＡＬユニットがあり得ないこと、及び（図９～図１１の要素９０１、１００１、及び１１０１で導入される）ｐｐｓ＿ｃｈｒｏｍａ＿ａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇ、（図９～図１１の要素９０２、１００２、及び１１０２で導入される）ｓｐｓ＿ｃｃａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇ、ｓｐｓ＿ｌｍｃｓ＿ｅｎａｂｌｅｄ＿ｆｌａｇ、及びｓｐｓ＿ｓｃａｌｉｎｇ＿ｌｉｓｔ＿ｅｎａｂｌｅｄ＿ｆｌａｇが全て０に等しくなり得ることを指定する。一部の実施形態では、ｎｏ＿ａｐｓ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇシンタックス要素が１に等しい場合、ＯｌｓＩｎＳｃｏｐｅ内の全てのスライスのｓｈ＿ｎｕｍ＿ａｌｆ＿ａｐｓ＿ｉｄｓ＿ｌｕｍａの値は０に等しくなり得る。ｎｏ＿ａｐｓ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇシンタックス要素が０に等しい場合、かかる制約を課すことはできない。

【0103】

[0122] 一部の実施形態では、ＡＬＦ及びＣＣＡＬＦの両方を無効化するためにｎｏ＿ａｐｓ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇにセマンティック制約を適用する。例えば１に等しいｎｏ＿ａｐｓ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇシンタックス要素は、ＯｌｓＩｎＳｃｏｐｅ内にＰＲＥＦＩＸ＿ＡＰＳ＿ＮＵＴ又はＳＵＦＦＩＸ＿ＡＰＳ＿ＮＵＴに等しいｎｕｈ＿ｕｎｉｔ＿ｔｙｐｅを有するＮＡＬユニットがあり得ないこと、並びにｓｐｓ＿ａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇ、ｓｐｓ＿ｃｃａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇ、ｓｐｓ＿ｌｍｃｓ＿ｅｎａｂｌｅｄ＿ｆｌａｇ、及びｓｐｓ＿ｓｃａｌｉｎｇ＿ｌｉｓｔ＿ｅｎａｂｌｅｄ＿ｆｌａｇが全て０に等しくなり得ることを指定し得る。一部の実施形態では、ｎｏ＿ａｐｓ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇシンタックス要素が１に等しい場合、ｓｐｓ＿ａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇ、ｓｐｓ＿ｃｃａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇ、ｓｐｓ＿ｌｍｃｓ＿ｅｎａｂｌｅｄ＿ｆｌａｇ、及びｓｐｓ＿ｓｃａｌｉｎｇ＿ｌｉｓｔ＿ｅｎａｂｌｅｄ＿ｆｌａｇの値が全て０になり得る。ｎｏ＿ａｐｓ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇシンタックス要素が０に等しい場合、かかる制約を課すことはできない。

【0104】

[0123] ＶＶＣの現在の設計の第２の欠点は、変換スキップ残差コード化（ＴＳＲＣ）を無効化することに関する。ＴＳＲＣを無効化することは、以下の２つのシナリオの何れかの下で妨げられる。

【0105】

[0124] 第１のシナリオでは、スライスの依存量子化（ＤＱ）又はサインデータハイディング（ＳＤＨ）を有効化することが、ＴＳＲＣの無効化が妨げられることを引き起こし得る。

【0106】

[0125] 第２のシナリオでは、ＴＳＲＣの無効化を妨げるためにＴＳＲＣの制約に関係するフラグが使用され得る。

【0107】

[0126] 必要に応じてＴＳＲＣを無効化できるように、上記のシナリオの両方に対処すべきである。

【0108】

[0127] 第１のシナリオでは、スライスのＤＱ又はＳＤＨを有効化することがＴＳＲＣの無効化を妨げ得る。とりわけ現在のＶＶＣの設計のスライスヘッダシンタックスによれば、スライスレベルＤＱフラグ（即ちｓｈ＿ｄｅｐ＿ｑｕａｎｔ＿ｕｓｅｄ＿ｆｌａｇ）又はスライスレベルＳＤＨフラグ（即ちｓｈ＿ｓｉｇｎ＿ｄａｔａ＿ｈｉｄｉｎｇ＿ｕｓｅｄ＿ｆｌａｇ）が１に等しいとき、ＴＳＲＣ無効化フラグ（即ちｓｈ＿ｔｓ＿ｒｅｓｉｄｕａｌ＿ｃｏｄｉｎｇ＿ｄｉｓａｂｌｅｄ＿ｆｌａｇ）が０に設定される。

【0109】

[0128] ｓｈ＿ｄｅｐ＿ｑｕａｎｔ＿ｕｓｅｄ＿ｆｌａｇシンタックス要素を０に設定することはＴＳＲＣを無効化し得る。ｓｈ＿ｄｅｐ＿ｑｕａｎｔ＿ｕｓｅｄ＿ｆｌａｇシンタックス要素の定義によれば、０に等しいｓｈ＿ｔｓ＿ｒｅｓｉｄｕａｌ＿ｃｏｄｉｎｇ＿ｄｉｓａｂｌｅｄ＿ｆｌａｇシンタックス要素は、現在のスライスの変換スキップブロックの残差サンプルをシンタックス解析するためにｒｅｓｉｄｕａｌ＿ｔｓ＿ｃｏｄｉｎｇ（）シンタックス構造が使用されることを指定する。加えて、１に等しいｓｈ＿ｄｅｐ＿ｑｕａｎｔ＿ｕｓｅｄ＿ｆｌａｇシンタックス要素は、依存量子化が現在のスライスに使用されることを指定する。１に等しいｓｈ＿ｓｉｇｎ＿ｄａｔａ＿ｈｉｄｉｎｇ＿ｕｓｅｄ＿ｆｌａｇシンタックス要素は、サインビットハイディングが現在のスライスに使用されることを指定する。ＴＳＲＣが無効化されるには、ｓｈ＿ｄｅｐ＿ｑｕａｎｔ＿ｕｓｅｄ＿ｆｌａｇシンタックス要素及びｓｈ＿ｓｉｇｎ＿ｄａｔａ＿ｈｉｄｉｎｇ＿ｕｓｅｄ＿ｆｌａｇシンタックス要素の両方が０に等しいことが要求される。スライスのＤＱ又はＳＤＨを有効化することは、ＴＳＲＣの無効化を妨げることを引き起こし得る。

【0110】

[0129] 第２のシナリオでは、ＴＳＲＣ無効化フラグを０に設定することによって、ＴＳＲＣの無効化を許可しないためにｎｏ＿ｔｓｒｃ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇシンタックス要素を使用することができる。とりわけ１に等しいｎｏ＿ｔｓｒｃ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇシンタックス要素は、ｓｈ＿ｔｓ＿ｒｅｓｉｄｕａｌ＿ｃｏｄｉｎｇ＿ｄｉｓａｂｌｅｄ＿ｆｌａｇが０に等しくなり得ることを指定する。０に等しいｎｏ＿ｔｓｒｃ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇシンタックス要素はかかる制約を課さない。記載したように、０に等しいｓｈ＿ｔｓ＿ｒｅｓｉｄｕａｌ＿ｃｏｄｉｎｇ＿ｄｉｓａｂｌｅｄ＿ｆｌａｇシンタックス要素は、現在のスライスの変換スキップブロックの残差サンプルをシンタックス解析するためにｒｅｓｉｄｕａｌ＿ｔｓ＿ｃｏｄｉｎｇ（）シンタックス構造が使用されることを指定する。ｓｈ＿ｔｓ＿ｒｅｓｉｄｕａｌ＿ｃｏｄｉｎｇ＿ｄｉｓａｂｌｅｄ＿ｆｌａｇシンタックス要素が０に設定される場合、ＴＳＲＣは有効化される。

【0111】

[0130] 従来のＶＶＣの映像コード化設計では、以下の条件の全てが満たされる場合はＴＳＲＣが所与のスライスについて無効化され得る（例えばｓｈ＿ｔｓ＿ｒｅｓｉｄｕａｌ＿ｃｏｄｉｎｇ＿ｄｉｓａｂｌｅｄ＿ｆｌａｇが１である）：
－ 依存量子化（ＤＱ）が無効化される（ｓｈ＿ｄｅｐ＿ｑｕａｎｔ＿ｕｓｅｄ＿ｆｌａｇ ＝＝ ０）ＡＮＤ
－ サインデータハイディング（ＳＤＨ）が無効化される（ｓｈ＿ｓｉｇｎ＿ｄａｔａ＿ｈｉｄｉｎｇ＿ｕｓｅｄ＿ｆｌａｇ ＝＝ ０）
ＤＱ及びＳＤＨの両方を無効化することはＴＳＲＣを無効化し得る一方、ＤＱ又はＳＤＨの何れかを有効化することはＴＳＲＣの無効化を妨げ得る。

【0112】

[0131] 本開示の一部の実施形態では、ＴＳＲＣ等の一定の特徴を無効化するためにｎｏ＿ｔｓｒｃ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇシンタックス要素に制約を適用する。例えば以下の２つの組み合わせを許可しないために、以下の実施形態を提案する。
－ ｎｏ＿ｔｓｒｃ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇが１に等しく、ＤＱが有効化される
－ ｎｏ＿ｔｓｒｃ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇが１に等しく、ＳＤＨが有効化される

【0113】

[0132] これらの提案方法は、ＴＳＲＣの無効化が妨げられる状況に対処するために提供する。本開示の一部の実施形態では、ＴＳＲＣを無効化するためにｎｏ＿ｔｓｒｃ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇシンタックス要素並びにＤＱ及びＳＤＨに関係するシンタックス要素に制約を適用する。より優れたコード効率を有するＴＳＲＣの無効化の特徴を提供するために、現在のシンタックス要素を更新する。

【0114】

[0133] 例えば図１２は、本開示のいくつかの実施形態と合致する、映像コンテンツを処理するための例示的なコンピュータ実施方法のフローチャートを示す。この方法は、復号器によって（例えば図３Ａのプロセス３００Ａ又は図３Ｂのプロセス３００Ｂによって）実行されてもよく、又は機器（例えば図４の機器４００）の１つ又は複数のソフトウェア又はハードウェアコンポーネントによって実行されてもよい。例えばプロセッサ（例えば図４のプロセッサ４０２）がこの方法を実行し得る。一部の実施形態では、この方法は、コンピュータ（例えば図４の機器４００）によって実行される、プログラムコード等のコンピュータ実行可能命令を含むコンピュータ可読媒体内に具体化されるコンピュータプログラム製品によって、実装され得る。この方法は以下のステップを含み得る。

【0115】

[0134] ステップ１２０１で、映像コンテンツを含むビットストリームを例えば復号器によって受信する。

【0116】

[0135] ステップ１２０２で、映像コンテンツに関連する第１の信号が所与の条件を満たすかどうかを判定する。第１の信号はｎｏ＿ｔｓｒｃ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇシンタックス要素であり得る。一部の実施形態では、ｎｏ＿ｔｓｒｃ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇシンタックス要素が１に等しいかどうかを判定する。

【0117】

[0136] ステップ１２０３で、第１の信号が所与の条件を満たすと判定することに応答し、依存量子化（ＤＱ）及びサインデータハイディング（ＳＤＨ）を少なくとも１つのスライスについて無効化する。例えばｎｏ＿ｔｓｒｃ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇシンタックス要素が１に等しいと判定される場合、ＤＱ及びＳＤＨが少なくとも１つのスライスについて無効化される。

【0118】

[0137] 一部の実施形態では、この方法は、第１の信号が所与の条件を満たすと判定することに応答し、変換スキップ残差コード化（ＴＳＲＣ）を少なくとも１つのスライスについて無効化することを更に含み得る。例えばｎｏ＿ｔｓｒｃ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇシンタックス要素が１に等しいと判定される場合、ＴＳＲＣ無効化フラグは１に設定される。

【0119】

[0138] 一部の実施形態では、ＤＱ及びＳＤＨをＳＰＳレベル又はＳＨレベルで無効化することができる。一部の実施形態では、ＤＱ及びＳＤＨを全てのスライスについて無効化することができる。

【0120】

[0139] ＳＰＳレベルにおいて、ＤＱ及びＳＤＨの無効化が全てのスライスに適用される。一部の実施形態では、ＳＰＳレベルＤＱ及びＳＤＨシンタックス要素に関係する制約を用いて、ｎｏ＿ｔｓｒｃ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇシンタックス要素の定義を更新することができる。一部の実施形態では、ｎｏ＿ｔｓｒｃ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇシンタックス要素に関係する制約を用いて、ＳＰＳレベルＤＱ及びＳＤＨシンタックス要素の両方の定義を更新することができる。一部の実施形態では、ｎｏ＿ｔｓｒｃ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇシンタックス要素とＳＰＳレベルＤＱ及びＳＤＨシンタックス要素との間の条件付きシグナリングを用いて、ＳＰＳシンタックスを更新することができる。

【0121】

[0140] ＳＨレベルにおいて、全てのスライスのＳＨレベルＤＱ及びＳＤＨシンタックス要素に関係する制約を用いて、ｎｏ＿ｔｓｒｃ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇシンタックス要素の定義を更新することができる。一部の実施形態では、ｎｏ＿ｔｓｒｃ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇシンタックス要素に関係する制約を用いて、スライスのＳＨレベルＤＱ及びＳＤＨシンタックス要素の両方の定義を更新することができ、ＤＱ及びＳＤＨの無効化はスライスに適用される。一部の実施形態では、ｎｏ＿ｔｓｒｃ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇシンタックス要素とスライスのＳＨレベルＤＱ及びＳＤＨシンタックス要素との間の条件付きシグナリングを用いて、ＳＨシンタックスを更新することができ、ＤＱ及びＳＤＨの無効化はスライスに適用される。ＳＨレベルにおいて、上記で説明したようにＤＱ及びＳＤＨの無効化は全てのスライス又は所与のスライスに適用することができる。

【0122】

[0141] 以下で提案する変更はＶＶＣ規格に加えることができ、又は他の映像コード化技術内で実装され得る。

【0123】

[0142] 一部の実施形態では、ＳＰＳレベルにおいてＤＱ及びＳＤＨを無効化するためにｎｏ＿ｔｓｒｃ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇにセマンティック制約を適用する。従って、ｎｏ＿ｔｓｒｃ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇのセマンティックについての以下で提案する変更をＶＶＣ規格に加えることができ、又は他の映像コード化技術内で実装し得る。例えば１に等しいｎｏ＿ｔｓｒｃ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇシンタックス要素は、ｓｈ＿ｔｓ＿ｒｅｓｉｄｕａｌ＿ｃｏｄｉｎｇ＿ｄｉｓａｂｌｅｄ＿ｆｌａｇが１に等しくなり得ること、並びにｓｐｓ＿ｄｅｐ＿ｑｕａｎｔ＿ｅｎａｂｌｅｄ＿ｆｌａｇ及びｓｐｓ＿ｓｉｇｎ＿ｄａｔａ＿ｈｉｄｉｎｇ＿ｅｎａｂｌｅｄ＿ｆｌａｇがどちらも０に等しくなり得ることを指定し得る。一部の実施形態では、ｎｏ＿ｔｓｒｃ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇシンタックス要素が１に等しい場合、ｓｈ＿ｔｓ＿ｒｅｓｉｄｕａｌ＿ｃｏｄｉｎｇ＿ｄｉｓａｂｌｅｄ＿ｆｌａｇシンタックス要素、ｓｐｓ＿ｄｅｐ＿ｑｕａｎｔ＿ｅｎａｂｌｅｄ＿ｆｌａｇシンタックス要素、及びｓｐｓ＿ｓｉｇｎ＿ｄａｔａ＿ｈｉｄｉｎｇ＿ｅｎａｂｌｅｄ＿ｆｌａｇシンタックス要素が０に等しい。ｎｏ＿ｔｓｒｃ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇシンタックス要素が０に等しい場合、かかる制約を課すことはできない。ＳＰＳレベルにおいて、ＤＱ及びＳＤＨの無効化は全てのスライスに適用される。

【0124】

[0143] 一部の実施形態では、ＣＬＶＳのスライスの全てにおいてＤＱ及びＳＤＨを無効化するためにｎｏ＿ｔｓｒｃ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇにセマンティック制約を適用する。従って、ｎｏ＿ｔｓｒｃ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇのセマンティックについての以下で提案する変更をＶＶＣ規格に加えることができ、又は他の映像コード化技術内で実装し得る。例えば１に等しいｎｏ＿ｔｓｒｃ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇシンタックス要素は、全てのスライスについてｓｈ＿ｔｓ＿ｒｅｓｉｄｕａｌ＿ｃｏｄｉｎｇ＿ｄｉｓａｂｌｅｄ＿ｆｌａｇが１に等しくなり得ること、ｓｈ＿ｄｅｐ＿ｑｕａｎｔ＿ｕｓｅｄ＿ｆｌａｇ及びｓｈ＿ｓｉｇｎ＿ｄａｔａ＿ｈｉｄｉｎｇ＿ｕｓｅｄ＿ｆｌａｇがどちらも０に等しくなり得ることを指定し得る。一部の実施形態では、ｎｏ＿ｔｓｒｃ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇシンタックス要素が１に等しい場合、ｓｈ＿ｔｓ＿ｒｅｓｉｄｕａｌ＿ｃｏｄｉｎｇ＿ｄｉｓａｂｌｅｄ＿ｆｌａｇシンタックス要素、ｓｈ＿ｄｅｐ＿ｑｕａｎｔ＿ｕｓｅｄ＿ｆｌａｇシンタックス要素、及びｓｈ＿ｓｉｇｎ＿ｄａｔａ＿ｈｉｄｉｎｇ＿ｕｓｅｄ＿ｆｌａｇシンタックス要素が０に等しい。ｎｏ＿ｔｓｒｃ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇシンタックス要素が０に等しい場合、かかる制約を課すことはできない。

【0125】

[0144] 一部の実施形態では、ＳＰＳレベルにおいてＤＱ及びＳＤＨを無効化するためにｓｐｓ＿ｄｅｐ＿ｑｕａｎｔ＿ｅｎａｂｌｅｄ＿ｆｌａｇ及びｓｐｓ＿ｓｉｇｎ＿ｄａｔａ＿ｈｉｄｉｎｇ＿ｅｎａｂｌｅｄ＿ｆｌａｇの両方にセマンティック制約を適用する。ｓｐｓ＿ｄｅｐ＿ｑｕａｎｔ＿ｅｎａｂｌｅｄ＿ｆｌａｇ及びｓｐｓ＿ｓｉｇｎ＿ｄａｔａ＿ｈｉｄｉｎｇ＿ｅｎａｂｌｅｄ＿ｆｌａｇのセマンティックについての以下で提案する変更をＶＶＣ規格に加えることができ、又は他の映像コード化技術内で実装し得る。例えば０に等しいｓｐｓ＿ｄｅｐ＿ｑｕａｎｔ＿ｅｎａｂｌｅｄ＿ｆｌａｇシンタックス要素は、ＳＰＳを参照するピクチャに対して依存量子化が無効化され使用されないことを指定し得る。１に等しいｓｐｓ＿ｄｅｐ＿ｑｕａｎｔ＿ｅｎａｂｌｅｄ＿ｆｌａｇシンタックス要素は、ＳＰＳを参照するピクチャに対して依存量子化が有効化され使用され得ることを指定し得る。一部の実施形態では、ｎｏ＿ｔｓｒｃ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇの値が１に等しい場合、ｓｐｓ＿ｄｅｐ＿ｑｕａｎｔ＿ｅｎａｂｌｅｄ＿ｆｌａｇの値は０に等しくなり得る。例えば０に等しいｓｐｓ＿ｓｉｇｎ＿ｄａｔａ＿ｈｉｄｉｎｇ＿ｅｎａｂｌｅｄ＿ｆｌａｇシンタックス要素は、ＳＰＳを参照するピクチャに対してサインビットハイディングが無効化され使用されないことを指定する。１に等しいｓｐｓ＿ｓｉｇｎ＿ｄａｔａ＿ｈｉｄｉｎｇ＿ｅｎａｂｌｅｄ＿ｆｌａｇシンタックス要素は、ＳＰＳを参照するピクチャに対してサインビットハイディングが有効化され使用され得ることを指定する。ｓｐｓ＿ｓｉｇｎ＿ｄａｔａ＿ｈｉｄｉｎｇ＿ｅｎａｂｌｅｄ＿ｆｌａｇがない場合、ｓｐｓ＿ｓｉｇｎ＿ｄａｔａ＿ｈｉｄｉｎｇ＿ｅｎａｂｌｅｄ＿ｆｌａｇは０に等しいと推論される。一部の実施形態では、ｎｏ＿ｔｓｒｃ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇの値が１に等しい場合、ｓｐｓ＿ｓｉｇｎ＿ｄａｔａ＿ｈｉｄｉｎｇ＿ｅｎａｂｌｅｄ＿ｆｌａｇの値は０に等しくなり得る。ｓｐｓ＿ｄｅｐ＿ｑｕａｎｔ＿ｅｎａｂｌｅｄ＿ｆｌａｇシンタックス要素及びｓｐｓ＿ｓｉｇｎ＿ｄａｔａ＿ｈｉｄｉｎｇ＿ｅｎａｂｌｅｄ＿ｆｌａｇシンタックス要素の更新された定義に従い、全てのスライスについてＤＱ及びＳＤＨをＳＰＳレベルにおいて無効化することができる。

【0126】

[0145] 一部の実施形態では、スライスレベルＤＱフラグ（例えばｓｈ＿ｄｅｐ＿ｑｕａｎｔ＿ｕｓｅｄ＿ｆｌａｇ）及びＳＤＨフラグ（例えばｓｈ＿ｓｉｇｎ＿ｄａｔａ＿ｈｉｄｉｎｇ＿ｕｓｅｄ＿ｆｌａｇ）に対してセマンティック制約を適用する。例えば０に等しいｓｈ＿ｄｅｐ＿ｑｕａｎｔ＿ｕｓｅｄ＿ｆｌａｇシンタックス要素は、現在のスライスに依存量子化が使用されないことを指定し得る。１に等しいｓｈ＿ｄｅｐ＿ｑｕａｎｔ＿ｕｓｅｄ＿ｆｌａｇシンタックス要素は、現在のスライスに依存量子化が使用されることを指定し得る。ｓｈ＿ｄｅｐ＿ｑｕａｎｔ＿ｕｓｅｄ＿ｆｌａｇがない場合、ｓｈ＿ｄｅｐ＿ｑｕａｎｔ＿ｕｓｅｄ＿ｆｌａｇは０に等しいと推論される。一部の実施形態では、ｎｏ＿ｔｓｒｃ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇの値が１に等しい場合、ｓｈ＿ｄｅｐ＿ｑｕａｎｔ＿ｕｓｅｄ＿ｆｌａｇの値は０に等しくなり得る。例えば０に等しいｓｈ＿ｓｉｇｎ＿ｄａｔａ＿ｈｉｄｉｎｇ＿ｕｓｅｄ＿ｆｌａｇシンタックス要素は、現在のスライスにサインビットハイディングが使用されないことを指定し得る。１に等しいｓｈ＿ｓｉｇｎ＿ｄａｔａ＿ｈｉｄｉｎｇ＿ｕｓｅｄ＿ｆｌａｇシンタックス要素は、現在のスライスにサインビットハイディングが使用されることを指定し得る。ｓｈ＿ｓｉｇｎ＿ｄａｔａ＿ｈｉｄｉｎｇ＿ｕｓｅｄ＿ｆｌａｇがない場合、ｓｈ＿ｓｉｇｎ＿ｄａｔａ＿ｈｉｄｉｎｇ＿ｕｓｅｄ＿ｆｌａｇは０に等しいと推論される。一部の実施形態では、ｎｏ＿ｔｓｒｃ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇの値が１に等しい場合、ｓｈ＿ｓｉｇｎ＿ｄａｔａ＿ｈｉｄｉｎｇ＿ｕｓｅｄ＿ｆｌａｇの値は０に等しくなり得る。現在のスライスについて、ＤＱ及びＳＤＨをＳＨレベルにおいて無効化することができる。

【0127】

[0146] 本開示の以下の実施形態では、ＴＳＲＣを無効化するために条件付きシグナリングを用いて、ＳＰＳシンタックステーブルを更新することができる。一部の実施形態では、ＴＳＲＣを無効化するために条件付きシグナリングを用いて、ＳＨシンタックステーブルを更新することができる。

【0128】

[0147] ＳＰＳレベル又はＳＨレベルにおいて、ＳＰＳシンタックステーブル及びＳＨシンタックステーブルに従い、ＤＱが無効化されるときＳＤＨが有効化され得る。無効化されたＤＱについてＤＱ有効化を防ぐために、第１の信号を使用してＤＱの無効化後にＳＤＨを無効化する。一部の実施形態では、第１の信号が所与の条件を満たすと判定することに応答して、少なくとも１つのスライスについてＤＱが無効化されているかどうかを判定し、ＤＱが無効化されていることに応答して、少なくとも１つのスライスについてＳＤＨを無効化する。例えばｎｏ＿ｔｓｒｃ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇシンタックス要素が１に等しいと判定される場合、ＤＱが無効化されているかどうかを判定する。ＤＱが無効化されていると判定される場合、ＳＤＨは無効化される。

【0129】

[0148] 一部の実施形態では、全てのスライスについてＴＳＲＣを無効化するためにＳＰＳシンタックステーブルを更新する。図１３は、提案する方法のＳＰＳシンタックステーブルを示す。例えばｎｏ＿ｔｓｒｃ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇが０に等しい場合、ｓｐｓ＿ｄｅｐ＿ｑｕａｎｔ＿ｅｎａｂｌｅｄ＿ｆｌａｇ及びｓｐｓ＿ｓｉｇｎ＿ｄａｔａ＿ｈｉｄｉｎｇ＿ｅｎａｂｌｅｄ＿ｆｌａｇが条件付きでシグナリングされる。以下で提案するＳＰＳシンタックステーブルの変更はＶＶＣ規格に加えることができ、又は他の映像コード化技術内で実装され得る。例えば図１３の要素１３０１及び要素１３０２内で示すように、「！ｎｏ＿ｔｓｒｃ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇ」のシンタックスが追加される。ｎｏ＿ｔｓｒｃ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇシンタックス要素が１に等しい場合、「！ｎｏ＿ｔｓｒｃ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇ」の値は０に等しく、ｓｐｓ＿ｄｅｐ＿ｑｕａｎｔ＿ｅｎａｂｌｅｄ＿ｆｌａｇの値は０に設定される。０に等しいｓｐｓ＿ｄｅｐ＿ｑｕａｎｔ＿ｅｎａｂｌｅｄ＿ｆｌａｇシンタックス要素は、全てのスライスについて依存量子化がＳＰＳレベルで無効化されることを指定する。要素１３０２内で、ｎｏ＿ｔｓｒｃ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇシンタックス要素が１に等しい場合、「！ｎｏ＿ｔｓｒｃ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇ」の値は０に等しく、たとえ「！ｓｐｓ＿ｄｅｐ＿ｑｕａｎｔ＿ｅｎａｂｌｅｄ＿ｆｌａｇ」が１に等しくてもｓｐｓ＿ｓｉｇｎ＿ｄａｔａ＿ｈｉｄｉｎｇ＿ｅｎａｂｌｅｄ＿ｆｌａｇの値は依然として０に設定される。０に等しいｓｐｓ＿ｓｉｇｎ＿ｄａｔａ＿ｈｉｄｉｎｇ＿ｅｎａｂｌｅｄ＿ｆｌａｇシンタックス要素は、全てのスライスについてサインデータハイディングがＳＰＳレベルで無効化されることを指定する。

【0130】

[0149] 記載したように、スライスに関してＤＱ及びＳＤＨの両方が無効化される場合、スライスのＴＳＲＣが無効化され得る。ＤＱ及びＳＤＨの両方が全てのスライスについて無効化されるので、ＴＳＲＣは全てのスライスについて無効化される。一部の実施形態では、スライスのＴＳＲＣを無効化するためにＳＨシンタックステーブルを更新する。図１４は、提案する方法のＳＨシンタックステーブルを示す。例えばｎｏ＿ｔｓｒｃ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇが０に等しい場合、スライスレベルＤＱ ｓｈ＿ｄｅｐ＿ｑｕａｎｔ＿ｕｓｅｄ＿ｆｌａｇ、及びＳＤＨ ｓｈ＿ｓｉｇｎ＿ｄａｔａ＿ｈｉｄｉｎｇ＿ｕｓｅｄ＿ｆｌａｇが条件付きでシグナリングされる。図１４の要素１４０１及び要素１４０２内で示すように、「！ｎｏ＿ｔｓｒｃ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇ」がシンタックス内に追加される。ｎｏ＿ｔｓｒｃ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇシンタックス要素が１に等しい場合、ｓｈ＿ｄｅｐ＿ｑｕａｎｔ＿ｕｓｅｄ＿ｆｌａｇシンタックス要素は０に設定される。要素１４０２内で示すように、ｎｏ＿ｔｓｒｃ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇシンタックス要素が１に等しい場合、たとえ「！ｓｈ＿ｓｉｇｎ＿ｄａｔａ＿ｈｉｄｉｎｇ＿ｕｓｅｄ＿ｆｌａｇ」の値が１でもｓｈ＿ｓｉｇｎ＿ｄａｔａ＿ｈｉｄｉｎｇ＿ｕｓｅｄ＿ｆｌａｇシンタックス要素は依然として０に設定される。ｓｈ＿ｄｅｐ＿ｑｕａｎｔ＿ｕｓｅｄ＿ｆｌａｇシンタックス要素及びｓｈ＿ｓｉｇｎ＿ｄａｔａ＿ｈｉｄｉｎｇ＿ｕｓｅｄ＿ｆｌａｇシンタックス要素の両方が０に等しいときｓｈ＿ｔｓ＿ｒｅｓｉｄｕａｌ＿ｃｏｄｉｎｇ＿ｄｉｓａｂｌｅｄ＿ｆｌａｇが条件付きでシグナリングされるので、ｓｈ＿ｔｓ＿ｒｅｓｉｄｕａｌ＿ｃｏｄｉｎｇ＿ｄｉｓａｂｌｅｄ＿ｆｌａｇシンタックス要素は１に設定される。

【0131】

[0150] 一部の実施形態では、変換スキップモードを無効化するためにｎｏ＿ｔｓｒｃ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇにセマンティック制約を適用する。例えば１に等しいｎｏ＿ｔｓｒｃ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇシンタックス要素は、ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ及びｓｈ＿ｔｓ＿ｒｅｓｉｄｕａｌ＿ｃｏｄｉｎｇ＿ｄｉｓａｂｌｅｄ＿ｆｌａｇが０に等しくなり得ることを指定し得る。一部の実施形態では、ｎｏ＿ｔｓｒｃ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇシンタックス要素が１に等しい場合、ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇシンタックス要素は０に等しい。ｎｏ＿ｔｓｒｃ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇシンタックス要素が０に等しい場合、かかる制約を課すことはできない。

【0132】

[0151] 一部の実施形態では、ｎｏ＿ｔｓｒｃ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇシンタックス要素を除去することによって一般制約シンタックスを更新する。ＤＱ又はＳＤＨを無効化することはコード化効率に影響を及ぼし得ることを指摘しておく。変換スキップがＳＰＳレベルにおいて無効化される場合、ＴＳＲＣは無効化され得る。変換スキップモードを無効化するために制約フラグ「ｎｏ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇ」を使用することができる。１に等しいｎｏ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇシンタックス要素は、変換スキップモードが無効化されることを指定し得る。ｎｏ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇシンタックス要素が１に等しい場合、変換スキップモードはないのでＴＳＲＣは暗黙的に無効化される。従って、ｎｏ＿ｔｓｒｃ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇの機能がｎｏ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇの機能と重複する。ＴＳＲＣを無効化するために、図１５に示す一般制約シンタックスの例からｎｏ＿ｔｓｒｃ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇシンタックス要素を除去することができ、ＤＱ及びＳＤＨを無効化する必要なしにｎｏ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｃｏｎｓｔｒａｉｎｔ＿ｆｌａｇシンタックス要素を使用することができる。

【0133】

[0152] 現在のＶＶＣの設計の第３の欠点はシンタックスの順序を対象とする。例えばＶＶＣドラフト９では、シンタックスの順序がモジュール形式となっていない。ＳＰＳシンタックステーブルでは、変換に関係するシンタックスがシンタックステーブルの様々な場所に散乱している。ピクチャヘッダ（ＰＨ）及びスライスヘッダ（ＳＨ）では、インループフィルタのシンタックス要素の一部がシンタックステーブルの上部にあるのに対し、他の一部のものはシンタックステーブルの下部にある。

【0134】

[0153] 一部の実施形態では、図１６Ａ～Ｈに示すように、変換に関係する全てのシンタックス要素が一緒に配置されるようにＳＰＳシンタックステーブルのシンタックス要素が順序付けされる。最大変換サイズに関係するシンタックス要素（例えば図１６Ｃの要素１６０１）、変換スキップに関係するシンタックス要素（例えば図１６Ｄの要素１６０２）、及び複数変換セット（ＭＴＳ）に関係するシンタックス要素（例えば図１６Ｄの要素１６０３）、及び低周波数非分離変換（ＬＦＮＳＴ）に関係するシンタックス要素（例えば図１６Ｄの要素１６０４）が、ＳＰＳシンタックステーブルの例の中で連続してシグナリングされる。同様に、ｓｐｓ＿ｃｃａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇのシグナリングの直後にｓｐｓ＿ｌｍｃｓ＿ｅｎａｂｌｅｄ＿ｆｌａｇ（例えば図１６Ｄの要素１６０５）がシグナリングされる。取り消し線で印付けされているシンタックス要素は、並べ替える前にシンタックス要素があった場所である。

【0135】

[0154] 一部の実施形態では、図１７Ａ～Ｆに示すようにピクチャヘッダ（ＰＨ）シンタックスを並べ替える。例えば図１７Ｂ～Ｃの要素１７０１１及び１７０１２に示すように、ＳＡＯ及びデブロッキングプロセスに関係するピクチャヘッダ（ＰＨ）シンタックス要素が、ＡＬＦ及びＬＭＣＳに関係するシンタックスのシグナリングの直後にシグナリングされる。取り消し線で印付けされているシンタックス要素は、並べ替える前にシンタックス要素があった場所である。

【0136】

[0155] 一部の実施形態では、図１８Ａ～Ｅに示すようにスライスヘッダ（ＳＨ）シンタックスを並べ替える。例えばＳＡＯ及びデブロッキングプロセスに関係するスライスヘッダシンタックス要素（例えば図１８Ｂの要素１８０１）は、ＡＬＦ及びＬＭＣＳに関係するシンタックスの直後にシグナリングされる。取り消し線で印付けされているシンタックス要素は、並べ替える前にシンタックス要素があった場所である。上記の実施形態は実装中に組み合わせることができることが理解されよう。

【0137】

[0156] 一部の実施形態では、命令を含む非一時的コンピュータ可読記憶媒体も提供され、命令は、上記の方法を実行するための装置（開示する符号器及び復号器等）によって実行され得る。一般的な非一時的媒体は、例えば、フロッピー（登録商標）ディスク、フレキシブルディスク、ハードディスク、ソリッドステートドライブ、磁気テープ若しくは他の任意の磁気データ記憶媒体、ＣＤ－ＲＯＭ、他の任意の光学データ記憶媒体、孔のパターンを有する任意の物理媒体、ＲＡＭ、ＰＲＯＭ及びＥＰＲＯＭ、ＦＬＡＳＨ（登録商標）－ＥＰＲＯＭ若しくは他の任意のフラッシュメモリ、ＮＶＲＡＭ、キャッシュ、レジスタ、他の任意のメモリチップ若しくはカートリッジ及びそれらのもののネットワーク化されたバージョンを含む。装置は、１つ又は複数のプロセッサ（ＣＰＵ）、入力／出力インタフェース、ネットワークインタフェース及び／又はメモリを含み得る。

【0138】

[0157] 本明細書の「第１の」及び「第２の」等の関係語は、あるエンティティ又は操作を別のエンティティ又は操作と区別するために使用されるに過ぎず、それらのエンティティ又は操作間のいかなる実際の関係又は順序も必要としないか又は含意しないことに留意すべきである。更に、「含む」、「有する」、「含有する」及び「包含する」並びに他の同様の形式の用語は、意味の点で均等であることを意図し、これらの用語の何れか１つの後に続くアイテムがかかるアイテムの網羅的列挙であることを意図していないか、又は列挙するアイテムのみに限定されることを意図していない点で非限定的であることを意図する。

【0139】

[0158] 本明細書で使用するとき、別段の定めがない限り、「又は」という語は、実行不可能な場合を除いて、あり得る全ての組み合わせを包含する。例えば、あるデータベースがＡ又はＢを含み得ると述べた場合、別段の定めがない限り又は実行不可能でない限り、そのデータベースは、Ａ、Ｂ、Ａ及びＢを含むことができる。第２の例として、あるデータベースがＡ、Ｂ又はＣを含み得ると述べた場合、別段の定めがない限り又は実行不可能でない限り、そのデータベースは、Ａ、Ｂ、Ｃ、Ａ及びＢ、Ａ及びＣ、Ｂ及びＣ、Ａ及びＢ及びＣを含むことができる。

【0140】

[0159] 上記で説明した実施形態は、ハードウェア、ソフトウェア（プログラムコード）、又はハードウェアとソフトウェアとの組み合わせによって実装できることが理解されるであろう。ソフトウェアによって実装される場合、ソフトウェアは、上記のコンピュータ可読媒体に記憶することができる。ソフトウェアは、プロセッサによって実行されるとき、開示する方法を実行することができる。本開示で説明した計算ユニット及び他の機能ユニットは、ハードウェア、ソフトウェア、又はハードウェアとソフトウェアとの組み合わせによって実装することができる。上記のモジュール／ユニットの複数を１つのモジュール／ユニットとして組み合わせることができ、上記のモジュール／ユニットのそれぞれを複数のサブモジュール／サブユニットに更に分割できることも当業者であれば理解するであろう。

【0141】

[0160] 上記の本明細書では、実装形態ごとに変わり得る多数の具体的な詳細に関して実施形態を説明してきた。記載した実施形態に対する一定の適応形態及び修正形態がなされ得る。本明細書を検討し、本明細書で開示する本発明を実践することで他の実施形態が当業者に明らかになり得る。本明細書及び例は、専ら例示として検討され、本開示の真の範囲及び趣旨は、添付の特許請求の範囲によって示されることを意図する。図中に示すステップの順序は、例示目的に過ぎず、特定のステップの順序に限定されることを意図しない。そのため、それらのステップは、同じ方法を実装しながら異なる順序で実行できることを当業者であれば理解することができる。

【0142】

[0161] 図面及び本明細書で例示的実施形態を開示してきた。しかし、それらの実施形態に対する多くの改変形態及び修正形態がなされ得る。従って、特定の用語を使用したが、それらの用語は、限定目的ではなく、全般的及び説明的な意味で使用されたものに過ぎない。

【図1】

【図2A】

【図2B】

【図3A】

【図3B】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】

【図15】

【図16A】

【図16B】

【図16C】

【図16D】

【図16E】

【図16F】

【図16G】

【図16H】

【図17A】

【図17B】

【図17C】

【図17D】

【図17E】

【図17F】

【図18A】

【図18B】

【図18C】

【図18D】

【図18E】

【手続補正書】

【提出日】2023-05-15

【手続補正1】

【補正対象書類名】特許請求の範囲

【補正対象項目名】全文

【補正方法】変更

【補正の内容】

【特許請求の範囲】

【請求項1】

ビットストリームを復号して映像ストリームの１つまたは複数のピクチャを出力するコンピュータ実施方法であって、
適応パラメータセット（ＡＰＳ）ネットワーク抽象化層（ＮＡＬ）ユニットを含まない、映像コンテンツに関連するビットストリームを受信することと、
前記ビットストリームのコード化された情報を使用して１つ又は複数のピクチャを復号することであって、前記復号することが、
前記ビットストリーム内に前記ＡＰＳ ＮＡＬユニットがあるかどうかを判定すること、及び
前記ビットストリーム内に前記ＡＰＳ ＮＡＬユニットがないと前記判定することに応答して、クロスコンポーネント適応ループフィルタ（ＣＣＡＬＦ）プロセス及びクロマ適応ループフィルタ（ＡＬＦ）プロセスの両方を無効化すること
を含む、前記復号することと、
所定の１組のフィルタに関連するスライスレベルフラグに基づいてルマＡＬＦプロセスを実行することと
を含む、方法。

【請求項2】

前記ビットストリーム内に前記ＡＰＳ ＮＡＬユニットがあるかどうかを前記判定することが、前記ビットストリーム内の第１の信号に基づく、請求項１に記載の方法。

【請求項3】

前記第１の信号がフラグであり、前記方法が、
前記フラグが１に等しい値を有することに応答して、前記受信されたビットストリーム内に前記ＡＰＳ ＮＡＬユニットがないと判定すること
を更に含む、請求項２に記載の方法。

【請求項4】

ピクチャパラメータセットレベル、シーケンスパラメータセットレベル、ピクチャヘッダレベル、又はスライスヘッダレベルにおいて前記クロマＡＬＦプロセスを制御するための第２の信号を受信すること
を更に含む、請求項１に記載の方法。

【請求項5】

前記第２の信号が、前記映像コンテンツに関連するコード化層映像シーケンス（ＣＬＶＳ）内のピクチャのクロマ成分を復号する際に前記ＡＬＦプロセスが有効化されるかどうかを示す、
請求項４に記載の方法。

【請求項6】

前記第２の信号が、前記映像コンテンツに関連するピクチャパラメータセット（ＰＰＳ）を参照するピクチャのクロマ成分を復号する際に前記ＡＬＦプロセスが有効化されるかどうかを示す、
請求項４に記載の方法。

【請求項7】

前記ＣＣＡＬＦプロセス及び前記クロマＡＬＦプロセスの両方を無効化することが、
第１のシーケンスレベルフラグを受信することであって、前記第１のシーケンスレベルフラグが、当該シーケンスレベルフラグに関連する映像シーケンスについて前記ＣＣＡＬＦプロセスが無効化されることを示すこと、及び
１つ又は複数のスライスレベルフラグを受信することであって、前記１つ又は複数のスライスレベルフラグが、当該１つ又は複数のスライスレベルフラグに関連する映像スライスについて前記クロマＡＬＦプロセスが無効化されることを示すこと
を更に含む、請求項１に記載の方法。

【請求項8】

前記第１のシーケンスレベルフラグが、シーケンスパラメータセット（ＳＰＳ）の一部であり、前記第１のシーケンスレベルフラグが、クロマスケーリングによるルママッピング（ＬＭＣＳ）が有効化されるかどうかを示す第２のシーケンスレベルフラグの直前にシグナリングされる、請求項７に記載の方法。

【請求項9】

映像シーケンスをビットストリームに符号化する方法であって、
映像シーケンスを受信すること、
前記映像シーケンスの１つ又は複数のピクチャを符号化すること、及び
ビットストリームを生成すること、
を含み、
前記符号化することが、
前記ビットストリーム内に適応パラメータセット（ＡＰＳ）ネットワーク抽象化層（ＮＡＬ）ユニットがあるかどうかを示す第１のフラグを符号化すること、
前記第１のフラグが前記ビットストリーム内に前記ＡＰＳ ＮＡＬユニットがないことを示すことに応答して、クロスコンポーネント適応ループフィルタ（ＣＣＡＬＦ）プロセス及びクロマ適応ループフィルタ（ＡＬＦ）プロセスの両方を無効化する１組のフラグを符号化すること、及び
ルマＡＬＦプロセスを実行するために使用される所定の１組のフィルタに関連するスライスレベルフラグを符号化すること
を含む、方法。

【請求項10】

前記第１の信号が第１の値を有することに応答して、前記ＣＣＡＬＦプロセス及び前記ＡＬＦプロセスの両方を無効化する前記１組のフラグを符号化すること
を更に含む、請求項９に記載の方法。

【請求項11】

前記第１の値が１に等しい、請求項１０に記載の方法。

【請求項12】

前記１組のフラグが第２のフラグを含み、前記方法が、
ピクチャパラメータセットレベル、シーケンスパラメータセットレベル、ピクチャヘッダレベル、又はスライスヘッダレベルにおいて前記クロマＡＬＦプロセスを無効化するように前記第２のフラグの値を設定すること
を更に含む、請求項９に記載の方法。

【請求項13】

前記第２のフラグが、前記映像コンテンツに関連するコード化層映像シーケンス（ＣＬＶＳ）内のピクチャのクロマ成分について前記ＡＬＦプロセスが有効化されるかどうかを示す、
請求項９に記載の方法。

【請求項14】

前記第２のフラグが、前記映像コンテンツに関連するピクチャパラメータセット（ＰＰＳ）を参照するピクチャのクロマ成分について前記ＡＬＦプロセスが有効化されるかどうかを示す、
請求項９に記載の方法。

【請求項15】

前記１組のフラグが、
第１のシーケンスレベルフラグであって、前記第１のシーケンスレベルフラグに関連する映像シーケンスについて前記ＣＣＡＬＦプロセスが無効化されることを示す、第１のシーケンスレベルフラグ、及び
１つ又は複数のスライスレベルフラグであって、前記１つ又は複数のスライスレベルフラグに関連する映像スライスについて前記クロマＡＬＦプロセスが無効化されることを示す、１つ又は複数のスライスレベルフラグ
を含む、請求項９に記載の方法。

【請求項16】

前記第１のシーケンスレベルフラグが、シーケンスパラメータセット（ＳＰＳ）の一部であり、前記第１のシーケンスレベルフラグが、クロマスケーリングによるルママッピング（ＬＭＣＳ）が有効化されるかどうかを示す第２のシーケンスレベルフラグの直前にシグナリングされる、請求項１５に記載の方法。

【請求項17】

映像コンテンツに関連するビットストリームを記憶する非一時的コンピュータ可読媒体であって、前記ビットストリームが、
前記ビットストリーム内に、適応パラメータセット（ＡＰＳ）ネットワーク抽象化層（ＮＡＬ）ユニットがないことを示すフラグ、
クロスコンポーネント適応ループフィルタ（ＣＣＡＬＦ）プロセスが無効化されることを示す第１のシーケンスレベルフラグ、
クロマ適応ループフィルタ（ＡＬＦ）プロセスが無効化されることを示す１つ又は複数のスライスレベルフラグ、
ルマＡＬＦプロセスが有効化されることを示すスライスレベルフラグ、及び
所定の１組のフィルタが前記ルマＡＬＦプロセスに使用されることを示すスライスレベルフラグ
を含む、非一時的コンピュータ可読媒体。

【請求項18】

前記ビットストリームが、
シーケンスパラメータセット（ＳＰＳ）を更に含み、
前記ＳＰＳが、前記第１のシーケンスレベルフラグ及び第２のシーケンスレベルフラグを含み、前記第２のシーケンスレベルフラグが、クロマスケーリングによるルママッピング（ＬＭＣＳ）が有効化されるかどうかを示し、前記第２のシーケンスレベルフラグが、前記第１のシーケンスレベルフラグの直後にシグナリングされる、請求項１７に記載の非一時的コンピュータ可読媒体。

【国際調査報告】