特許7392144 | 知財ポータル「IP Force」

知財求人 - 知財ポータルサイト「IP Force」

青山学院大学 (神奈川県相模原市中央区淵野辺)

▶ エルジー　エレクトロニクス　インコーポレイティドの特許一覧

特許7392144ループフィルタリングを制御するための画像コーディング装置および方法

書誌要約請求の範囲詳細な説明課題実施例実施するための形態図面の説明

目に優しい文字サイズ小中大 PDF Top

< >

1
2
3
4
5(a)
5(b)
6
7
8
9
10
11
12

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2023-11-27

(45)【発行日】2023-12-05

(54)【発明の名称】ループフィルタリングを制御するための画像コーディング装置および方法

(51)【国際特許分類】

H04N 19/70 20140101AFI20231128BHJP

H04N 19/82 20140101ALI20231128BHJP

【ＦＩ】

H04N19/70

H04N19/82

【請求項の数】 3

(21)【出願番号】P 2022529044

(86)(22)【出願日】2020-11-17

(65)【公表番号】

(43)【公表日】2023-01-20

(86)【国際出願番号】 KR2020016137

(87)【国際公開番号】W WO2021101200

(87)【国際公開日】2021-05-27

【審査請求日】2022-07-19

(31)【優先権主張番号】62/937,234

(32)【優先日】2019-11-18

(33)【優先権主張国・地域又は機関】US

(73)【特許権者】

【識別番号】502032105

【氏名又は名称】エルジーエレクトロニクスインコーポレイティド

【氏名又は名称原語表記】ＬＧＥＬＥＣＴＲＯＮＩＣＳＩＮＣ．

【住所又は居所原語表記】１２８，Ｙｅｏｕｉ－ｄａｅｒｏ，Ｙｅｏｎｇｄｅｕｎｇｐｏ－ｇｕ，０７３３６Ｓｅｏｕｌ，ＲｅｐｕｂｌｉｃｏｆＫｏｒｅａ

(74)【代理人】

【識別番号】100099759

【弁理士】

【氏名又は名称】青木篤

(74)【代理人】

【識別番号】100123582

【弁理士】

【氏名又は名称】三橋真二

(74)【代理人】

【識別番号】100165191

【弁理士】

【氏名又は名称】河合章

(74)【代理人】

【識別番号】100114018

【弁理士】

【氏名又は名称】南山知広

(74)【代理人】

【識別番号】100159259

【弁理士】

【氏名又は名称】竹本実

(72)【発明者】

【氏名】ヘンドリーヘンドリー

(72)【発明者】

【氏名】シータルパルリ

(72)【発明者】

【氏名】キムスンファン

【審査官】岩井健二

(56)【参考文献】

【文献】国際公開第２０２０／２６３７６９（ＷＯ，Ａ１）

【文献】国際公開第２０２０／２４９１２３（ＷＯ，Ａ１）

【文献】国際公開第２０２０／０１１７９６（ＷＯ，Ａ１）

【文献】Benjamin Bross, Jianle Chen, Shan Liu, and Ye-Kui Wang，Versatile Video Coding (Draft 7)，Joint Video Experts Team (JVET) of ITU-T SG 16 WP 3 and ISO/IEC JTC 1/SC 29/WG 11，JVET-P2001 (version 14)，16th Meeting: Geneva, CH，2019年11月14日，pp.38-42,45-48,96-106,113-120

【文献】Sheng-Yen Lin, et al.，AHG12: Loop filter disabled across virtual boundaries，Joint Video Experts Team (JVET) of ITU-T SG 16 WP 3 and ISO/IEC JTC 1/SC 29/WG 11，JVET-N0438-v3，14th Meeting: Geneva, CH，2019年03月，pp.1-8

【文献】Chih-Yao Chiu, et al.，AHG9: On signalling of virtual boundary，Joint Video Experts Team (JVET) of ITU-T SG 16 WP 3 and ISO/IEC JTC 1/SC 29/WG 11，JVET-Q0181-v2，17th Meeting: Brussels, BE，2020年01月，pp.1-6

【文献】Seethal Paluri, Hendry, and Seung Hwan Kim，[AHG9]: On virtual boundary signalling，Joint Video Experts Team (JVET) of ITU-T SG 16 WP 3 and ISO/IEC JTC 1/SC 29/WG 11，JVET-Q0246-v3，17th Meeting: Brussels, BE，2020年01月，pp.1-4

【文献】Jonatan Samuelsson, Sachin Deshpande, and Andrew Segall，On virtual boundary signalling，Joint Video Experts Team (JVET) of ITU-T SG 16 WP 3 and ISO/IEC JTC 1/SC 29/WG 11，JVET-Q0258，17th Meeting: Brussels, BE，2019年12月，pp.1-2

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｈ０４Ｎ１９／００－１９／９８

(57)【特許請求の範囲】

【請求項1】

デコード装置により実行される画像デコード方法であって、
ビットストリームを介して、残差情報、仮想境界に関連する情報及び予測関連情報を含む画像情報を取得するステップと、
前記残差情報に基づいて、残差サンプルを生成するステップと、
前記予測関連情報に基づいて、予測サンプルを導出するステップと、
前記予測サンプル及び前記残差サンプルに基づいて、現ピクチャの復元サンプルを生成するステップと、
前記復元サンプルに対するインループフィルタリング手順に基づいて、修正された復元サンプルを生成するステップと、を含み、
前記画像情報は、ＳＰＳ（Sequence Parameter Set）と前記ＳＰＳを参照するピクチャヘッダ情報とを含み、
前記仮想境界に関連する前記情報は、仮想境界イネーブルフラグを含み、
前記ＳＰＳは、前記仮想境界イネーブルフラグに基づいてＳＰＳ仮想境界存在フラグを含み、
前記仮想境界イネーブルフラグに基づいて、前記仮想境界に関連する前記情報のシグナリングが前記ＳＰＳ又は前記ピクチャヘッダ情報に存在するかどうかが決定され、
前記仮想境界イネーブルフラグに基づいて、前記インループフィルタリング手順が前記仮想境界を横切って実行されるかどうかが決定される、方法。

【請求項2】

エンコード装置により実行される画像エンコード方法であって、
現ブロックに対する予測関連情報を導出するステップと、
前記予測関連情報に基づいて、前記現ブロックに対する予測サンプルを生成するステップと、
前記予測サンプルに基づいて、前記現ブロックに対する残差サンプルを導出するステップと、
前記現ブロックに対する前記残差サンプルに基づいて、残差情報を生成するステップと、
前記予測サンプル及び前記残差サンプルに基づいて、現ピクチャに対する復元サンプルを生成するステップと、
仮想境界を横切ってインループフィルタリング手順が実行されるかどうかを決定するステップと、
前記決定に基づいて、前記仮想境界に関連する情報を生成するステップと、
前記予測関連情報、前記残差情報及び前記仮想境界に関連する前記情報を含む画像情報をエンコードするステップと、を含み、
前記画像情報は、ＳＰＳ（Sequence Parameter Set）と前記ＳＰＳを参照するピクチャヘッダ情報とを含み、
前記仮想境界に関連する前記情報は、仮想境界イネーブルフラグを含み、
前記ＳＰＳは、前記仮想境界イネーブルフラグに基づいてＳＰＳ仮想境界存在フラグを含み、
前記仮想境界イネーブルフラグに基づいて、前記仮想境界に関連する前記情報のシグナリングが前記ＳＰＳ又は前記ピクチャヘッダ情報に存在するかどうかが決定され、
前記仮想境界イネーブルフラグに基づいて、前記インループフィルタリング手順が前記仮想境界を横切って実行されるかどうかが決定される、方法。

【請求項3】

画像に関するデータの送信方法であって、
前記画像に関するビットストリームを取得するステップであって、前記ビットストリームは、
現ブロックに対する予測関連情報を導出するステップと、
前記予測関連情報に基づいて、前記現ブロックに対する予測サンプルを生成するステップと、
前記予測サンプルに基づいて、前記現ブロックに対する残差サンプルを導出するステップと、
前記現ブロックに対する前記残差サンプルに基づいて、残差情報を生成するステップと、
前記予測サンプル及び前記残差サンプルに基づいて、現ピクチャに対する復元サンプルを生成するステップと、
仮想境界を横切ってインループフィルタリング手順が実行されるかどうかを決定するステップと、
前記決定に基づいて、前記仮想境界に関連する情報を生成するステップと、
前記予測関連情報、前記残差情報及び前記仮想境界に関連する前記情報を含む画像情報をエンコードするステップと、に基づいて生成されるステップと、
前記ビットストリームを含む前記データを送信するステップと、を含み、
前記画像情報は、ＳＰＳ（Sequence Parameter Set）と前記ＳＰＳを参照するピクチャヘッダ情報とを含み、
前記仮想境界に関連する前記情報は、仮想境界イネーブルフラグを含み、
前記ＳＰＳは、前記仮想境界イネーブルフラグに基づいてＳＰＳ仮想境界存在フラグを含み、
前記仮想境界イネーブルフラグに基づいて、前記仮想境界に関連する前記情報のシグナリングが前記ＳＰＳ又は前記ピクチャヘッダ情報に存在するかどうかが決定され、
前記仮想境界イネーブルフラグに基づいて、前記インループフィルタリング手順が前記仮想境界を横切って実行されるかどうかが決定される、方法。

【発明の詳細な説明】

【技術分野】

【0001】

本文書は、ループフィルタリングを制御するための画像コーディング（符号化、coding）装置および方法に関する。

【背景技術】

【0002】

近年、４Ｋまたは８Ｋ以上のＵＨＤ（Ultra High Definition）画像／ビデオのような高解像度、高品質の画像／ビデオに対する需要が様々な分野で増加している。画像／ビデオデータが高解像度、高品質になるほど、既存の画像／ビデオデータに比べて相対的に送信される情報量またはビット量が増加するので、既存の有無線広帯域回線のような媒体を利用して画像データを送信するか、既存の記憶（格納）媒体を利用して画像／ビデオデータを記憶する場合、送信コスト（費用）および記憶コストが増加する。

【0003】

また、近年、ＶＲ（Virtual Reality）、ＡＲ（Artificial Reality）コンテンツやホログラムなどの没入型（実感）メディア（Immersive Media）に対する関心および需要が増加しており、ゲーム画像のように、現実画像と異なる画像特性を有する画像／ビデオに関する放送が増加している。

【0004】

これにより、上記のような様々な特性を有する高解像度・高品質の画像／ビデオの情報を効果的に圧縮して送信するか、記憶し、再生するために高効率の画像／ビデオ圧縮技術が求められる。

【0005】

具体的には、仮想境界を横切って実行されるループフィルタリングを効率的に制御するための案に対する議論がある。

【発明の概要】

【課題を解決するための手段】

【0006】

本文書の一実施形態によると、画像／ビデオコーディングの効率を高める方法および装置を提供する。

【0007】

本文書の一実施形態によると、効率的なフィルタリング適用方法および装置を提供する。

【0008】

本文書の一実施形態によると、デブロックキング、ＳＡＯ（Sample Adaptive Loop）、ＡＬＦ（Adaptive Loop Filtering）を効率的に適用する方法および装置を提供する。

【0009】

本文書の一実施形態によると、仮想境界に基づいてインループフィルタリングを実行することができる。

【0010】

本文書の一実施形態によると、ＳＰＳ（Sequence Parameter Set）は、仮想境界を横切ってインループフィルタリングが実行されるかどうかを示すＳＰＳの仮想境界イネーブル（可用、有効化、enabled）フラグを有することができる。

【0011】

本文書の一実施形態によると、ＳＰＳの仮想境界イネーブルフラグに基づいて、仮想境界を横切ってインループフィルタリングを実行することができる。

【0012】

本文書の一実施形態によると、ビデオ／画像エンコード（符号化、encoding）を行うエンコード装置を提供する。

【0013】

本文書の一実施形態によると、本文書の実施形態の少なくとも１つに開示されたビデオ／画像エンコード方法によって生成されたエンコードされたビデオ／画像情報が記憶されたコンピュータ読み取り可能なデジタル記憶媒体を提供する。

【0014】

本文書の一実施形態によると、デコード（復号、decoding）装置により本文書の実施形態の少なくとも１つに開示されたビデオ／画像デコード方法を行うようにするエンコードされた情報またはエンコードされたビデオ／画像情報が記憶されたコンピュータ読み取り可能なデジタル記憶媒体を提供する。

【発明の効果】

【0015】

本文書の一実施形態によると、全般的な画像／ビデオ圧縮効率を上げることができる。

【0016】

本文書の一実施形態によると、効率的なフィルタリングを介して主観的／客観的ビジュアル品質を高めることができる。

【0017】

本文書の一実施形態による仮想境界に基づくインループフィルタリング手順（処理、プロセス、process）は、ハードウェアリソースを節約することができる。

【0018】

本文書の一実施形態によると、仮想境界に基づくインループフィルタリング手順を効率的に実行することができ、また、フィルタリング性能を改善することができる。

【0019】

本文書の一実施形態によると、仮想境界に基づくインループフィルタリングのための情報を効率的にシグナリングできる。

【図面の簡単な説明】

【0020】

【図1】本文書の実施形態に適用されることができるビデオ／画像コーディングシステムの例を概略的に示す図である。

【図2】本文書の実施形態に適用されることができるビデオ／画像エンコード装置の構成を概略的に説明する図である。

【図3】本文書の実施形態に適用されることができるビデオ／画像デコード装置の構成を概略的に説明する図である。

【図4】コーディングされた画像／ビデオに対する階層構造を例示的に示す図である。

【図5】ＡＬＦフィルタ形状の例を示す図である。

【図6】エンコード装置におけるフィルタリングに基づくエンコード方法を説明するフローチャートである。

【図7】デコード装置におけるフィルタリングに基づくデコード方法を説明するフローチャートである。

【図8】本文書の実施形態によるビデオ／画像エンコード方法および関連コンポーネントの一例を概略的に示す図である。

【図9】本文書の実施形態によるビデオ／画像エンコード方法および関連コンポーネントの一例を概略的に示す図である。

【図10】本文書の実施形態による画像／ビデオデコード方法および関連コンポーネントの一例を概略的に示す図である。

【図11】本文書の実施形態による画像／ビデオデコード方法および関連コンポーネントの一例を概略的に示す図である。

【図12】本文書で開示された実施形態が適用され得るコンテンツストリーミングシステムの例を示す図である。

【発明を実施するための形態】

【0021】

本文書は、様々な変更を加えることができ、種々の実施形態を有することができ、特定実施形態を図面に例示し、詳細に説明しようとする。しかしながら、これは、本文書を特定実施形態に限定しようとするものではない。本明細書で常用する用語は、単に特定の実施形態を説明するために使用されたものであって、本文書の技術的思想を限定しようとする意図で使用されるものではない。単数の表現は、文脈上明白に異なるように意味しない限り、複数の表現を含む。本明細書において「含む」または「有する」などの用語は、明細書上に記載された特徴、数字、ステップ、動作、構成要素、部品、またはこれらを組み合わせたものが存在することを指定しようとするものであり、１つもしくは複数の他の特徴や数字、ステップ、動作、構成要素、部品、またはこれらを組み合わせたものなどの存在または付加可能性を予め排除しないことと理解されるべきである。

【0022】

一方、本文書で説明される図面上の各構成は、互いに異なる特徴的な機能に関する説明の都合上、独立して図示されたものであって、各構成が互いに別個のハードウェアや別個のソフトウェアで実現されることを意味するものではない。例えば、各構成のうち、２つ以上の構成が結合されて１つの構成をなすこともでき、１つの構成を複数の構成に分けることもできる。各構成が統合および／または分離された実施形態も本文書の本質から外れない限り、本文書の権利範囲に含まれる。

【0023】

以下、添付の図面を参照して、本文書の好ましい実施形態をより詳細に説明する。以下、図面上の同一の構成要素に対しては同一の参照符号を使用し、同一の構成要素について重複する説明は省略する。

【0024】

この文書は、ビデオ／画像コーディングに関する。例えば、この文書において開示された方法／実施形態は、ＶＶＣ（Versatile Video Coding）標準（ＩＴＵ－ＴＲｅｃ．Ｈ．２６６）、ＶＶＣ以後の次世代ビデオ／イメージコーディング標準、またはそれ以外のビデオコーディング関連標準（例えば、ＨＥＶＣ（High Efficiency Video Coding）標準（ＩＴＵ－ＴＲｅｃ．Ｈ．２６５）、ＥＶＣ（Essential Video Coding）標準、ＡＶＳ２標準など）に関連する。

【0025】

この文書では、ビデオ／画像コーディングに関する様々な実施形態を提示し、他の言及がない限り、上記実施形態は、互いに組み合わせて実行されることもできる。

【0026】

この文書においてビデオ（video）は、時間の流れによる一連の画像（image）の集合を意味し得る。ピクチャ（picture）は、一般に特定の時間帯の１つの画像を示す単位を意味し、スライス（slice）／タイル（tile）は、コーディングにおいてピクチャの一部を構成する単位である。スライス／タイルは、１つまたは複数のＣＴＵ（Coding Tree Unit）を含んでもよい。１つのピクチャは、１つまたは複数のスライス／タイルで構成されてもよい。１つのピクチャは、１つまたは複数のタイルグループで構成されてもよい。１つのタイルグループは、１つまたは複数のタイルを含んでもよい。

【0027】

ピクセル（pixel）またはペル（pel）は、１つのピクチャ（または、画像）を構成する最小の単位を意味し得る。また、ピクセルに対応する用語として「サンプル（sample）」が使用されてもよい。サンプルは、一般的にピクセルまたはピクセルの値を示し、ルマ（luma）成分のピクセル／ピクセル値のみを示すこともでき、クロマ（chroma）成分のピクセル／ピクセル値のみを示すこともできる。あるいは、サンプルは、空間領域（ドメイン）におけるピクセル値を意味することもでき、このようなピクセル値が周波数領域に変換される場合、周波数領域における変換係数を意味することもできる。

【0028】

ユニット（unit）は、画像処理の基本単位を示す。ユニットは、ピクチャの特定領域および当該領域に関する情報のうちの少なくとも１つを含む。１つのユニットは、１つのルマブロックおよび２つのクロマ（例えば、ｃｂ、ｃｒ）ブロックを含む。ユニットは、場合によって、ブロック（block）または領域（area）などの用語と混用されてもよい。一般的な場合、Ｍ×Ｎブロックは、Ｍ個の列およびＮ個の行からなるサンプル（または、サンプルアレイ）または変換係数（transform coefficient）の集合（または、アレイ）を含む。

【0029】

本文書において、「／」と「、」は、「および／または」と解釈される。例えば、「Ａ／Ｂ」は「Ａおよび／またはＢ」と解釈され、「Ａ、Ｂ」は「Ａおよび／またはＢ」と解釈される。追加的に、「Ａ／Ｂ／Ｃ」は「Ａ、Ｂおよび／またはＣの少なくとも１つ」を意味する。また、「Ａ、Ｂ、Ｃ」も「Ａ、Ｂおよび／またはＣの少なくとも１つ」を意味する。

【0030】

追加的に、本文書において「または」は「および／または」と解釈される。例えば、「ＡまたはＢ」は、１）「Ａ」のみを意味するか、２）「Ｂ」のみを意味するか、３）「ＡおよびＢ」を意味し得る。言い換えれば、本文書の「または」は「追加的にまたは代替として（additionally or alternatively）」を意味し得る。

【0031】

本明細書において「少なくとも１つのＡおよびＢ（at least one of A and B、ＡおよびＢの少なくとも１つ）」は、「Ａのみ」、「Ｂのみ」または「ＡおよびＢの両方」を意味し得る。また、本明細書において「少なくとも１つのＡまたはＢ（at least one of A or B、ＡまたはＢの少なくとも１つ）」や「少なくとも１つのＡおよび／またはＢ（at least one of A and/or B、Ａおよび／またはＢの少なくとも１つ）」という表現は、「少なくとも１つのＡおよびＢ（at least one of A and B）」と同様に解釈され得る。

【0032】

また、本明細書において、「少なくとも１つのＡ、ＢおよびＣ（at least one of A, B and C、Ａ、ＢおよびＣの少なくとも１つ）」は、「Ａのみ」、「Ｂのみ」、「Ｃのみ」または「Ａ、ＢおよびＣの任意の全ての組み合わせ（any combination of A, B and C）」を意味し得る。また、「少なくとも１つのＡ、ＢまたはＣ（at least one of A, B or C、Ａ、ＢまたはＣの少なくとも１つ）」や「少なくとも１つのＡ、Ｂおよび／またはＣ（at least one of A, B and C、Ａ、Ｂおよび／またはＣの少なくとも１つ）」は「少なくとも１つのＡ、ＢおよびＣ（at least one of A, B and C））」を意味し得る。

【0033】

また、本明細書において用いられる括弧は「例えば（for example）」を意味し得る。具体的には、「予測（イントラ予測）」と表示されている場合、「予測」の一例として「イントラ予測」が提案されたものであり得る。言い換えると、本明細書の「予測」は「イントラ予測」に制限（limit）されることなく、「イントラ予測」が「予測」の一例として提案されるものであり得る。また、「予測（すなわち、イントラ予測）」と表示されている場合にも、「予測」の一例として「イントラ予測」が提案されたものであり得る。

【0034】

本明細書において１つの図面内において個別に説明される技術的特徴は、個別に実現されてもよく、同時に実現されてもよい。

【0035】

図１は、本文書が適用されることができるビデオ／画像コーディングシステムの例を概略的に示す。

【0036】

図１に示すように、ビデオ／画像コーディングシステムは、ソースデバイスおよび受信デバイスを備えることができる。ソースデバイスは、エンコードされたビデオ（video）／画像（image）情報またはデータをファイルまたはストリーミング形態でデジタル記憶媒体またはネットワークを介して受信デバイスに伝達することができる。

【0037】

上記ソースデバイスは、ビデオソース、エンコード装置、送信部を備えることができる。上記受信デバイスは、受信部、デコード装置、およびレンダラを備えることができる。上記エンコード装置は、ビデオ／画像エンコード装置と呼ばれることができ、上記デコード装置は、ビデオ／画像デコード装置と呼ばれることができる。送信器は、エンコード装置に備えられることができる。受信器は、デコード装置に備えられることができる。レンダラは、ディスプレイ部を備えることができ、ディスプレイ部は、別個のデバイスまたは外部コンポーネントで構成されることもできる。

【0038】

ビデオソースは、ビデオ／画像のキャプチャ、合成、または生成過程（処理、プロセス、process）などを介してビデオ／画像を取得することができる。ビデオソースは、ビデオ／画像キャプチャデバイスおよび／またはビデオ／画像生成デバイスを含むことができる。ビデオ／画像キャプチャデバイスは、例えば、１つまたは複数のカメラ、以前にキャプチャされたビデオ／画像を含むビデオ／画像アーカイブなどを含むことができる。ビデオ／画像生成デバイスは、例えば、コンピュータ、タブレット、およびスマートフォンなどを含むことができ、（電子的に）ビデオ／画像を生成することができる。例えば、コンピュータなどを介して仮想のビデオ／画像が生成され得るし、この場合、関連データが生成される過程にビデオ／画像キャプチャ過程が代替されることができる。

【0039】

エンコード装置は、入力ビデオ／画像をエンコードすることができる。エンコード装置は、圧縮およびコーディング効率のために、予測、変換、量子化など、一連の手順を行うことができる。エンコードされたデータ（エンコードされたビデオ／画像情報）は、ビットストリーム（bitstream）形態で出力されることができる。

【0040】

送信部は、ビットストリーム形態で出力されたエンコードされたビデオ／画像情報またはデータをファイルまたはストリーミング形態でデジタル記憶媒体またはネットワークを介して受信デバイスの受信部に伝達することができる。デジタル記憶媒体は、ＵＳＢ、ＳＤ、ＣＤ、ＤＶＤ、ブルーレイ、ＨＤＤ、ＳＳＤなど、様々な記憶媒体を含むことができる。送信部は、予め決められたファイルフォーマットを介してメディアファイルを生成するためのエレメントを含むことができ、放送／通信ネットワークを介しての送信のためのエレメントを含むことができる。受信部は、上記ビットストリームを受信／抽出してデコード装置に伝達することができる。

【0041】

デコード装置は、エンコード装置の動作に対応する逆量子化、逆変換、予測など、一連の手順を行ってビデオ／画像をデコードすることができる。

【0042】

レンダラは、デコードされたビデオ／画像をレンダリングすることができる。レンダリングされたビデオ／画像は、ディスプレイ部を介して表示（ディスプレイ）されることができる。

【0043】

図２は、本文書が適用されることができるビデオ／画像エンコード装置の構成を概略的に説明する図面である。以下、ビデオエンコード装置というのは、画像エンコード装置を含むことができる。

【0044】

図２に示すように、エンコード装置２００は、画像分割部（image partitioner）２１０、予測部（predictor）２２０、残差（レジデュアル）処理部（residual processor）２３０、エントロピ符号化（エンコード）部（entropy encoder）２４０、加算部（adder）２５０、フィルタリング部（filter）２６０、およびメモリ（memory）２７０を備えて構成されることができる。予測部２２０は、インター予測部２２１およびイントラ予測部２２２を備えることができる。残差処理部２３０は、変換部（transformer）２３２、量子化部（quantizer）２３３、逆量子化部（dequantizer）２３４、逆変換部（inverse transformer）２３５を備えることができる。残差処理部２３０は、減算部（subtractor、２３１）をさらに備えることができる。加算部２５０は、復元部（reconstructor）または復元ブロック生成部（reconstructed block generator）と呼ばれることができる。前述した画像分割部２１０、予測部２２０、残差処理部２３０、エントロピ符号化部２４０、加算部２５０、およびフィルタリング部２６０は、実施形態によって１つまたは複数のハードウェアコンポーネント（例えば、エンコーダチップセットまたはプロセッサ）によって構成されることができる。また、メモリ２７０は、ＤＰＢ（Decoded Picture Buffer）を備えることができ、デジタル記憶媒体によって構成されることもできる。上記ハードウェアコンポーネントは、メモリ２７０を内／外部コンポーネントとしてさらに備えることもできる。

【0045】

画像分割部２１０は、エンコード装置２００に入力された入力画像（または、ピクチャ、フレーム）を１つまたは複数の処理ユニット（processing unit）に分割することができる。一例として、上記処理ユニットは、コーディングユニット（Coding Unit、ＣＵ）と呼ばれることができる。この場合、コーディングユニットは、コーディングツリーユニット（Coding Tree Unit、ＣＴＵ）または最大コーディングユニット（Largest Coding Unit、ＬＣＵ）からＱＴＢＴＴＴ（Quad-Tree Binary-Tree Ternary-Tree）構造によって再帰的に（recursively）分割されることができる。例えば、１つのコーディングユニットは、四分木（クアッドツリー）構造、二分木（バイナリツリー）構造、および／または三分木（ターナリ）構造に基づいて下位（deeper）デプスの複数のコーディングユニットに分割されることができる。この場合、例えば、四分木構造が先に適用され、二分木構造および／または三分木構造がその後に適用されることができる。あるいは、二分木構造が先に適用されることもできる。それ以上分割されない最終コーディングユニットに基づいて本開示に係るコーディング手順が行われ得る。この場合、画像特性によるコーディング効率などに基づいて、最大コーディングユニットが最終コーディングユニットとして使用されることができ、または、必要に応じてコーディングユニットは、再帰的に（recursively）より下位デプスのコーディングユニットに分割されて最適なサイズのコーディングユニットが最終コーディングユニットとして使用されることができる。ここで、コーディング手順とは、後述する予測、変換、および復元などの手順を含むことができる。他の例として、上記処理ユニットは、予測ユニット（ＰＵ：Prediction Unit）または変換ユニット（ＴＵ：Transform Unit）をさらに備えることができる。この場合、上記予測ユニットおよび上記変換ユニットは、各々前述した最終コーディングユニットから分割またはパーティショニングされることができる。上記予測ユニットは、サンプル予測の単位であることができ、上記変換ユニットは、変換係数を導く単位および／または変換係数から残差信号（residual signal）を導く単位であることができる。

【0046】

ユニットは、場合によって、ブロック（block）または領域（area）などの用語と混用されることができる。一般的な場合、Ｍ×Ｎブロックは、Ｍ個の列およびＮ個の行からなるサンプルまたは変換係数（transform coefficient）などの集合を示すことができる。サンプルは、一般的にピクセルまたはピクセルの値を示すことができ、輝度（luma）成分のピクセル／ピクセル値のみを示すことができ、彩度（chroma）成分のピクセル／ピクセル値のみを示すこともできる。サンプルは、１つのピクチャ（または、画像）を（構成する）ピクセル（pixel）またはペル（pel）に対応する用語として使用することができる。

【0047】

減算部２３１は、入力画像信号（オリジナル（原本）ブロック、オリジナルサンプルまたはオリジナルサンプルアレイ）から、予測部２２０から出力された予測信号（予測されたブロック、予測サンプルまたは予測サンプルアレイ）を減算して残差信号（残差ブロック、残差サンプルまたは残差サンプルアレイ）を生成することができ、生成された残差信号は、変換部２３２に送信される。予測部２２０は、処理対象ブロック（以下、現（現在）ブロックという）に対する予測を行い、上記現ブロックに対する予測サンプルを含む予測されたブロック（predicted block）を生成することができる。予測部２２０は、現ブロックまたはＣＵ単位で、イントラ予測が適用されるかまたはインター予測が適用されるかを決定することができる。予測部は、各予測モードについての説明で後述するように、予測モード情報など、予測に関する様々な情報を生成してエントロピ符号化部２４０に伝達することができる。予測に関する情報は、エントロピ符号化部２４０でエンコードされてビットストリーム形態で出力されることができる。

【0048】

イントラ予測部２２２は、現ピクチャ内のサンプルを参照して現ブロックを予測できる。上記参照されるサンプルは、予測モードによって上記現ブロックの隣接（neighbor）に位置することができ、または、離れて位置することもできる。イントラ予測で予測モードは、複数の非方向性モードと複数の方向性モードとを含むことができる。非方向性モードは、例えば、ＤＣモードおよび平面（プラナー）モード（Ｐｌａｎａｒモード）を含むことができる。方向性モードは、予測方向の細かさの程度によって、例えば、３３個の方向性予測モードまたは６５個の方向性予測モードを含むことができる。ただし、これは、例示であり、設定によってそれ以上またはそれ以下の個数の方向性予測モードが使用され得る。イントラ予測部２２２は、隣接ブロックに適用された予測モードを用いて、現ブロックに適用される予測モードを決定することもできる。

【0049】

インター予測部２２１は、参照ピクチャ上で動きベクトルにより特定される参照ブロック（参照サンプルアレイ）に基づいて、現ブロックに対する予測されたブロックを導くことができる。このとき、インター予測モードで送信される動き情報の量を減らすために、隣接ブロックと現ブロックとの間の動き情報の相関性に基づいて、動き情報をブロック、サブブロック、またはサンプル単位で予測することができる。上記動き情報は、動きベクトルおよび参照ピクチャインデックスを含むことができる。上記動き情報は、インター予測方向（Ｌ０予測、Ｌ１予測、Ｂｉ予測など）情報をさらに含むことができる。インター予測の場合に、隣接ブロックは、現ピクチャ内に存在する空間隣接ブロック（spatial neighboring block）と参照ピクチャに存在する時間隣接ブロック（temporal neighboring block）とを含むことができる。上記参照ブロックを含む参照ピクチャと上記時間隣接ブロックを含む参照ピクチャとは同じであることができ、異なることもできる。上記時間隣接ブロックは、コロケート（同一位置）参照ブロック（collocated reference block）、コロケートＣＵ（col CU）などの名前で呼ばれることができ、上記時間隣接ブロックを含む参照ピクチャは、コロケートピクチャ（collocated picture、ｃｏｌＰｉｃ）と呼ばれることもできる。例えば、インター予測部２２１は、隣接ブロックに基づいて動き情報候補リストを構成し、上記現ブロックの動きベクトルおよび／または参照ピクチャインデックスを導出するために、どの候補が使用されるかを指示する情報を生成することができる。様々な予測モードに基づいてインター予測が行われ得るし、例えば、スキップモードおよびマージモードの場合に、インター予測部２２１は、隣接ブロックの動き情報を現ブロックの動き情報として利用することができる。スキップモードの場合、マージモードとは異なり、残差信号が送信されないことがある。動き情報予測（Motion Vector Prediction、ＭＶＰ）モードの場合、隣接ブロックの動きベクトルを動きベクトル予測子（motion vector predictor）として用い、動きベクトル差分（motion vector difference）をシグナリングすることにより、現ブロックの動きベクトルを指示することができる。

【0050】

予測部２２０は、後述する様々な予測方法に基づいて予測信号を生成することができる。例えば、予測部は、１つのブロックに対する予測のために、イントラ予測またはインター予測を適用することができるだけでなく、イントラ予測とインター予測とを同時に適用することができる。これは、ＣｏｍｂｉｎｅｄＩｎｔｅｒａｎｄＩｎｔｒａＰｒｅｄｉｃｔｉｏｎ（ＣＩＩＰ）と呼ばれることができる。また、予測部は、ブロックに対する予測のために、イントラブロックコピー（Intra Block Copy、ＩＢＣ）を実行することができる。上記イントラブロックコピーは、例えば、ＳＣＣ（Screen Content Coding）などのように、ゲームなどのコンテンツ画像／動画コーディングのために使用されることができる。ＩＢＣは、基本的に現ピクチャ内で予測を行うが、現ピクチャ内で参照ブロックを導出する点においてインター予測と同様に行われることができる。すなわち、ＩＢＣは、本文書において説明されるインター予測技法のうちの少なくとも１つを用いることができる。

【0051】

インター予測部２２１および／またはイントラ予測部２２２（を含む）を介して生成された予測信号は、復元信号を生成するために用いられるか、残差信号を生成するために用いられることができる。変換部２３２は、残差信号に変換技法を適用して、変換係数（transform coefficients）を生成することができる。例えば、変換技法は、ＤＣＴ（Discrete Cosine Transform）、ＤＳＴ（Discrete Sine Transform）、ＧＢＴ（Graph-Based Transform）、またはＣＮＴ（Conditionally Non-linear Transform）などを含むことができる。ここで、ＧＢＴは、ピクセル間の関係情報をグラフで表現する際に、このグラフから得られた変換を意味する。ＣＮＴは、以前に復元された全てのピクセル（all previously reconstructed pixel）を用いて予測信号を生成し、それに基づいて取得される変換を意味する。また、変換過程は、正方形の同じサイズを有するピクセルブロックに適用されてもよく、正方形ではない可変サイズのブロックに適用されてもよい。

【0052】

量子化部２３３は、変換係数を量子化してエントロピ符号化部２４０に送信され、エントロピ符号化部２４０は、量子化された信号（量子化された変換係数に関する情報）をエンコードしてビットストリームに出力することができる。上記量子化された変換係数に関する情報は、残差情報と呼ばれることができる。量子化部２３３は、係数スキャン順序（scan order）に基づいてブロック形態の量子化された変換係数を１次元ベクトル形態で再整列することができ、上記１次元ベクトル形態の量子化された変換係数に基づいて上記量子化された変換係数に関する情報を生成することもできる。エントロピ符号化部２４０は、例えば、指数ゴロム（exponential Golomb）、ＣＡＶＬＣ（Context-Adaptive Variable Length Coding）、ＣＡＢＡＣ（Context-Adaptive Binary Arithmetic Coding）などの様々なエンコード方法を行うことができる。エントロピ符号化部２４０は、量子化された変換係数の他に、ビデオ／イメージ復元に必要な情報（例えば、シンタックス要素（syntax elements）の値など）を共にまたは別にエンコードすることもできる。エンコードされた情報（例えば、エンコードされたビデオ／画像情報）は、ビットストリーム形態でＮＡＬ（Network Abstraction Layer）ユニット単位で送信または記憶されることができる。上記ビデオ／画像情報は、アダプテーションパラメータセット（ＡＰＳ）、ピクチャパラメータセット（ＰＰＳ）、シーケンスパラメータセット（ＳＰＳ）、またはビデオパラメータセット（ＶＰＳ）など、様々なパラメータセットに関する情報をさらに含むことができる。また、上記ビデオ／画像情報は、一般制限情報（general constraint information）をさらに含むことができる。本文書において、後述されるシグナリング／送信される情報および／またはシンタックス要素は、前述したエンコード手順を介してエンコードされて上記ビットストリームに含まれることができる。上記ビットストリームは、ネットワークを介して送信されることができ、またはデジタル記憶媒体に記憶されることができる。ここで、ネットワークは、放送網および／または通信網などを含むことができ、デジタル記憶媒体は、ＵＳＢ、ＳＤ、ＣＤ、ＤＶＤ、ブルーレイ、ＨＤＤ、ＳＳＤなど、様々な記憶媒体を含むことができる。エントロピ符号化部２４０から出力された信号については、送信する送信部（図示せず）および／もしくは記憶する記憶部（図示せず）がエンコード装置２００の内／外部エレメントとして構成されることができ、または送信部は、エントロピ符号化部２４０に含まれることもできる。

【0053】

量子化部２３３から出力された量子化された変換係数は、予測信号を生成するために用いられることができる。例えば、量子化された変換係数に逆量子化部２３４および逆変換部２３５を介して逆量子化および逆変換を適用することにより、残差信号（残差ブロックまたは残差サンプル）を復元できる。加算部１５５は、復元された残差信号を予測部２２０から出力された予測信号に加えることにより、復元（reconstructed）信号（復元ピクチャ、復元ブロック、復元サンプルまたは復元サンプルアレイ）を生成し得る。スキップモードが適用された場合のように、処理対象ブロックに対する残差がない場合、予測されたブロックが復元ブロックとして使用されることができる。生成された復元信号は、現ピクチャ内の次の処理対象ブロックのイントラ予測のために使用されることができ、後述するように、フィルタリングを経て次のピクチャのインター予測のために使用されることもできる。

【0054】

一方、ピクチャエンコードおよび／または復元過程でＬＭＣＳ（Luma Mapping with Chroma Scaling）が適用されることもできる。

【0055】

フィルタリング部２６０は、復元信号にフィルタリングを適用して主観的／客観的画質を向上させることができる。例えば、フィルタリング部２６０は、復元ピクチャに様々なフィルタリング方法を適用して修正された（modified）復元ピクチャを生成することができ、上記修正された復元ピクチャをメモリ２７０、具体的には、メモリ２７０のＤＰＢに記憶することができる。上記様々なフィルタリング方法は、例えば、デブロックフィルタリング、サンプル適応オフセット（Sample Adaptive Offset、ＳＡＯ）、適応ループフィルタ（adaptive loop filter）、両方向フィルタ（bilateral filter）などを含むことができる。フィルタリング部２６０は、各フィルタリング方法についての説明で後述するように、フィルタリングに関する様々な情報を生成してエントロピ符号化部２４０に伝達することができる。フィルタリングに関する情報は、エントロピ符号化部２４０でエンコードされてビットストリーム形態で出力されることができる。

【0056】

メモリ２７０に送信された修正された復元ピクチャは、インター予測部２２１で参照ピクチャとして使用されることができる。エンコード装置は、これを介してインター予測が適用される場合、エンコード装置１００とデコード装置とにおける予測ミスマッチを避けることができ、符号化効率も向上させることができる。

【0057】

メモリ２７０のＤＰＢは、修正された復元ピクチャをインター予測部２２１における参照ピクチャとして使用するために記憶することができる。メモリ２７０は、現ピクチャ内の動き情報が導出された（または、エンコードされた）ブロックの動き情報および／または既に復元されたピクチャ内のブロックの動き情報を記憶することができる。上記記憶された動き情報は、空間隣接ブロックの動き情報または時間隣接ブロックの動き情報として活用するために、インター予測部２２１に伝達することができる。メモリ２７０は、現ピクチャ内の復元されたブロックの復元サンプルを記憶することができ、イントラ予測部２２２に伝達することができる。

【0058】

図３は、本文書が適用されることができるビデオ／画像デコード装置の構成を概略的に説明する図面である。

【0059】

図３に示すように、デコード装置３００は、エントロピ復号（デコード）部（entropy decoder）３１０、残差処理部（residual processor）３２０、予測部（predictor）３３０、加算部（adder）３４０、フィルタリング部（filter）３５０、およびメモリ（memory）３６０を備えて構成されることができる。予測部３３０は、インター予測部３３１およびイントラ予測部３３２を備えることができる。残差処理部３２０は、逆量子化部（dequantizer）３２１および逆変換部（inverse transformer）３２１を備えることができる。前述したエントロピ復号部３１０、残差処理部３２０、予測部３３０、加算部３４０、およびフィルタリング部３５０は、実施形態によって１つのハードウェアコンポーネント（例えば、デコーダチップセットまたはプロセッサ）により構成されることができる。また、メモリ３６０は、ＤＰＢ（Decoded Picture Buffer）を備えることができ、デジタル記憶媒体により構成されることもできる。上記ハードウェアコンポーネントは、メモリ３６０を内／外部コンポーネントとしてさらに備えることもできる。

【0060】

ビデオ／画像情報を含むビットストリームが入力されれば、デコード装置３００は、図３のエンコード装置でビデオ／画像情報が処理されたプロセスに対応して画像を復元できる。例えば、デコード装置３００は、上記ビットストリームから取得したブロック分割関連情報に基づいてユニット／ブロックを導出できる。デコード装置３００は、エンコード装置で適用された処理ユニットを用いてデコードを行うことができる。したがって、デコードの処理ユニットは、例えば、コーディングユニットであることができ、コーディングユニットは、コーディングツリーユニットまたは最大コーディングユニットから四分木構造、二分木構造、および／または三分木ツリー構造に従って分割されることができる。コーディングユニットから１つまたは複数の変換ユニットが導出され得る。そして、デコード装置３００を介してデコードおよび出力された復元画像信号は、再生装置を介して再生されることができる。

【0061】

デコード装置３００は、図３のエンコード装置から出力された信号をビットストリーム形態で受信することができ、受信した信号は、エントロピ復号部３１０を介してデコードされることができる。例えば、エントロピ復号部３１０は、上記ビットストリームをパージングして画像復元（または、ピクチャ復元）に必要な情報（例えば、ビデオ／画像情報）を導出できる。上記ビデオ／画像情報は、アダプテーションパラメータセット（ＡＰＳ）、ピクチャパラメータセット（ＰＰＳ）、シーケンスパラメータセット（ＳＰＳ）、またはビデオパラメータセット（ＶＰＳ）など、様々なパラメータセットに関する情報をさらに含むことができる。また、上記ビデオ／画像情報は、一般制限情報（general constraint information）をさらに含むことができる。デコード装置は、上記パラメータセットに関する情報および／または上記一般制限情報に基づいてさらにピクチャをデコードすることができる。本文書において後述されるシグナリング／受信される情報および／またはシンタックス要素は、上記デコード手順を介してデコードされて、上記ビットストリームから取得されることができる。例えば、エントロピ復号部３１０は、指数ゴロム符号化、ＣＡＶＬＣ、またはＣＡＢＡＣなどのコーディング方法に基づいてビットストリーム内の情報をデコードし、画像復元に必要なシンタックス要素の値、残差に関する変換係数の量子化された値を出力できる。より具体的には、ＣＡＢＡＣエントロピ復号方法は、ビットストリームで各シンタックス要素に該当するビンを受信し、デコード対象のシンタックス要素情報ならびに隣接およびデコード対象ブロックのデコード情報、または以前のステップでデコードされたシンボル／ビンの情報を利用してコンテキスト（文脈）（context）モデルを決定し、決定されたコンテキストモデルによってビン（bin）の発生確率を予測してビンの算術デコード（arithmetic decoding）を行い、各シンタックス要素の値に該当するシンボルを生成することができる。このとき、ＣＡＢＡＣエントロピ復号方法は、コンテキストモデルの決定後、次のシンボル／ビンのコンテキストモデルのためにデコードされたシンボル／ビンの情報を利用してコンテキストモデルをアップデートすることができる。エントロピ復号部３１０でデコードされた情報のうち、予測に関する情報は、予測部３３０に提供され、エントロピ復号部３１０でエントロピ復号が行われた残差情報、すなわち、量子化された変換係数および関連パラメータ情報は、逆量子化部３２１に入力されることができる。また、エントロピ復号部３１０でデコードされた情報のうち、フィルタリングに関する情報は、フィルタリング部３５０に提供されることができる。一方、エンコード装置から出力された信号を受信する受信部（図示せず）がデコード装置３００の内／外部エレメントとしてさらに構成されることができ、または受信部は、エントロピ復号部３１０の構成要素であることもできる。一方、本文書に係るデコード装置は、ビデオ／画像／ピクチャデコード装置と呼ばれることができ、上記デコード装置は、情報デコーダ（ビデオ／画像／ピクチャ情報デコーダ）およびサンプルデコーダ（ビデオ／画像／ピクチャサンプルデコーダ）に区分することもできる。上記情報デコーダは、上記エントロピ復号部３１０を備えることができ、上記サンプルデコーダは、上記逆量子化部３２１、逆変換部３２２、予測部３３０、加算部３４０、フィルタリング部３５０、およびメモリ３６０のうちの少なくとも１つを備えることができる。

【0062】

逆量子化部３２１では、量子化された変換係数を逆量子化して変換係数を出力できる。逆量子化部３２１は、量子化された変換係数を２次元のブロック形態で再整列することができる。この場合、上記再整列は、エンコード装置で行われた係数スキャン順序に基づいて再整列を行うことができる。逆量子化部３２１は、量子化パラメータ（例えば、量子化ステップサイズ情報）を用いて量子化された変換係数に対する逆量子化を行い、変換係数（transform coefficient）を取得することができる。

【0063】

逆変換部３２２では、変換係数を逆変換して残差信号（残差ブロック、残差サンプルアレイ）を取得する。

【0064】

予測部は、現ブロックに対する予測を行い、上記現ブロックに対する予測サンプルを含む予測されたブロック（predicted block）を生成することができる。予測部は、エントロピ復号部３１０から出力された上記予測に関する情報に基づいて、上記現ブロックにイントラ予測が適用されるか、またはインター予測が適用されるかを決定することができ、具体的なイントラ／インター予測モードを決定することができる。

【0065】

予測部は、後述する様々な予測方法に基づいて予測信号を生成することができる。例えば、予測部は、１つのブロックに対する予測のために、イントラ予測またはインター予測を適用することができるだけでなく、イントラ予測とインター予測とを同時に適用することができる。これは、ＣｏｍｂｉｎｅｄＩｎｔｅｒａｎｄＩｎｔｒａＰｒｅｄｉｃｔｉｏｎ（ＣＩＩＰ）と呼ばれることができる。また、予測部は、ブロックに対する予測のために、イントラブロックコピー（Intra Block Copy、ＩＢＣ）を実行することができる。上記イントラブロックコピーは、例えば、ＳＣＣ（Screen Content Coding）などのように、ゲームなどのコンテンツ画像／動画コーディングのために使用されることができる。ＩＢＣは、基本的に現ピクチャ内で予測を行うが、現ピクチャ内で参照ブロックを導出する点においてインター予測と同様に行われることができる。すなわち、ＩＢＣは、本文書において説明されるインター予測技法のうちの少なくとも１つを利用することができる。パレットモードは、イントラコーディングまたはイントラ予測の一例と見なすことができる。

【0066】

イントラ予測部３３１は、現ピクチャ内のサンプルを参照して現ブロックを予測できる。上記参照されるサンプルは、予測モードによって上記現ブロックの隣接（neighbor）に位置することができ、または離れて位置することができる。イントラ予測において予測モードは、複数の非方向性モードと複数の方向性モードとを含むことができる。イントラ予測部３３１は、隣接ブロックに適用された予測モードを用いて、現ブロックに適用される予測モードを決定することもできる。

【0067】

インター予測部３３２は、参照ピクチャ上で動きベクトルにより特定される参照ブロック（参照サンプルアレイ）に基づいて、現ブロックに対する予測されたブロックを導くことができる。このとき、インター予測モードで送信される動き情報の量を減らすために、隣接ブロックと現ブロックとの間の動き情報の相関性に基づいて動き情報をブロック、サブブロック、またはサンプル単位で予測することができる。上記動き情報は、動きベクトルおよび参照ピクチャインデックスを含むことができる。上記動き情報は、インター予測方向（Ｌ０予測、Ｌ１予測、Ｂｉ予測など）情報をさらに含むことができる。インター予測の場合に、隣接ブロックは、現ピクチャ内に存在する空間隣接ブロック（spatial neighboring block）と参照ピクチャに存在する時間隣接ブロック（temporal neighboring block）とを備えることができる。例えば、インター予測部３３２は、隣接ブロックに基づいて動き情報候補リストを構成し、受信した候補選択情報に基づいて上記現ブロックの動きベクトルおよび／または参照ピクチャインデックスを導出できる。様々な予測モードに基づいてインター予測が行われ得るし、上記予測に関する情報は、上記現ブロックに対するインター予測のモードを指示する情報を含むことができる。

【0068】

加算部３４０は、取得された残差信号を予測部から出力された予測信号（予測されたブロック、予測サンプルアレイ）に加えることにより、復元信号（復元ピクチャ、復元ブロック、復元サンプルアレイ）を生成することができる。スキップモードが適用された場合のように、処理対象ブロックに対する残差がない場合、予測されたブロックが復元ブロックとして使用されることができる。

【0069】

加算部３４０は、復元部または復元ブロック生成部と呼ばれることができる。生成された復元信号は、現ピクチャ内の次の処理対象ブロックのイントラ予測のために使用されることができ、後述するように、フィルタリングを経て出力されることができ、または次のピクチャのインター予測のために使用されることもできる。

【0070】

一方、ピクチャデコード過程でＬＭＣＳ（Luma Mapping with Chroma Scaling）が適用されることもできる。

【0071】

フィルタリング部３５０は、復元信号にフィルタリングを適用して主観的／客観的画質を向上させることができる。例えば、フィルタリング部３５０は、復元ピクチャに様々なフィルタリング方法を適用して修正された（modified）復元ピクチャを生成することができ、上記修正された復元ピクチャをメモリ３６０、具体的には、メモリ３６０のＤＰＢに送信することができる。上記様々なフィルタリング方法は、例えば、デブロックフィルタリング、サンプル適応オフセット（sample adaptive offset）、適応ループフィルタ（adaptive loop filter）、両方向フィルタ（bilateral filter）などを含むことができる。

【0072】

メモリ３６０のＤＰＢに記憶された（修正された）復元ピクチャは、インター予測部３３２で参照ピクチャとして使用されることができる。メモリ３６０は、現ピクチャ内の動き情報が導出された（または、デコードされた）ブロックの動き情報および／または既に復元されたピクチャ内のブロックの動き情報を記憶できる。上記記憶された動き情報は、空間隣接ブロックの動き情報または時間隣接ブロックの動き情報として活用するために、インター予測部３３２に伝達することができる。メモリ３６０は、現ピクチャ内の復元されたブロックの復元サンプルを記憶でき、イントラ予測部３３１に伝達することができる。

【0073】

本明細書において、デコード装置３００の予測部３３０、逆量子化部３２１、逆変換部３２２、およびフィルタリング部３５０などで説明された実施形態は、各々、エンコード装置２００の予測部２２０、逆量子化部２３４、逆変換部２３５、およびフィルタリング部２６０などにも同一または対応するように適用されることができる。

【0074】

前述したように、ビデオコーディングを実行するにあたって、圧縮効率を上げるために予測を実行する。これを介して、コーディング対象ブロックである現ブロックに対する予測サンプルを含む予測されたブロックを生成することができる。ここで、上記予測されたブロックは、空間領域（または、ピクセル領域）における予測サンプルを含む。上記予測されたブロックは、エンコード装置とデコード装置とで同じく導出され、上記エンコード装置は、オリジナルブロックのオリジナルサンプル値自体でない上記オリジナルブロックと上記予測されたブロックとの間の残差に関する情報（残差情報）をデコード装置にシグナリングすることで画像コーディング効率を上げることができる。デコード装置は、上記残差情報に基づいて残差サンプルを含む残差ブロックを導出し、上記残差ブロックと上記予測されたブロックとを合わせて復元サンプルを含む復元ブロックを生成することができ、復元ブロックを含む復元ピクチャを生成することができる。

【0075】

上記残差情報は、変換および量子化手順を介して生成されることができる。例えば、エンコード装置は、上記オリジナルブロックと上記予測されたブロックとの間の残差ブロックを導出し、上記残差ブロックに含まれている残差サンプル（残差サンプルアレイ）に変換手順を実行して変換係数を導出し、上記変換係数に量子化手順を実行して量子化された変換係数を導出することで、関連する残差情報を（ビットストリームを介して）デコード装置にシグナリングできる。ここで、上記残差情報は、上記量子化された変換係数の値情報、位置情報、変換技法、変換カーネル、量子化パラメータなどの情報を含むことができる。デコード装置は、上記残差情報に基づいて逆量子化／逆変換の手順を実行して残差サンプル（または、残差ブロック）を導出することができる。デコード装置は、予測されたブロックおよび上記残差ブロックに基づいて復元ピクチャを生成することができる。また、エンコード装置は、以後のピクチャのインター予測のための参照のために量子化された変換係数を逆量子化／逆変換して残差ブロックを導出し、これに基づいて復元ピクチャを生成することができる。

【0076】

本文書において、量子化／逆量子化および／または変換／逆変換のうちの少なくとも１つは、省略されることができる。上記量子化／逆量子化が省略される場合、上記量子化された変換係数は、変換係数と呼ばれることができる。上記変換／逆変換が省略される場合、上記変換係数は、係数もしくは残差係数と呼ばれることもでき、または、表現の統一性のために、依然として変換係数と呼ばれることもできる。

【0077】

本文書において、量子化された変換係数および変換係数は、各々、変換係数およびスケーリングされた（scaled）変換係数と呼ばれることができる。この場合、残差情報は、変換係数（１つまたは複数（ら））に関する情報を含むことができ、上記変換係数（１つまたは複数）に関する情報は、残差コーディングシンタックスを介してシグナリングされることができる。上記残差情報（または、上記変換係数（１つまたは複数）に関する情報）に基づいて変換係数が導出されることができ、上記変換係数に対する逆変換（スケーリング）を介してスケーリングされた変換係数が導出されることができる。上記スケーリングされた変換係数に対する逆変換（変換）に基づいて、残差サンプルが導出されることができる。これは、本文書の他の部分でも同様に適用／表現されることができる。

【0078】

エンコード装置／デコード装置の予測部は、ブロック単位でインター予測を行って予測サンプルを導出することができる。インター予測は、現ピクチャ以外のピクチャのデータ要素（例えば、サンプル値、または動き情報）に依存する方法で導出される予測を示すことができる。現ブロックにインター予測が適用される場合、参照ピクチャのインデックスが指す参照ピクチャ上で動きベクトルにより特定される参照ブロック（参照サンプルアレイ）に基づいて、現ブロックに対する予測されたブロック（予測サンプルアレイ）を導出（誘導）することができる。このとき、インター予測モードで送信される動き情報の量を減らすために、隣接ブロックと現ブロックとの間の動き情報の相関性に基づいて、現ブロックの動き情報をブロック、サブブロックまたはサンプル単位で予測することができる。上記動き情報は、動きベクトルおよび参照ピクチャのインデックスを含むことができる。上記動き情報は、インター予測タイプ（Ｌ０予測、Ｌ１予測、Ｂｉ予測など）の情報をさらに含むことができる。インター予測が適用される場合、隣接ブロックは、現ピクチャ内に存在する空間隣接ブロック（spatial neighboring block）と、参照ピクチャに存在する時間隣接ブロック（temporal neighboring block）と、を含むことができる。上記参照ブロックを含む参照ピクチャと上記時間隣接ブロックを含む参照ピクチャとは、同一であってもよく、異なってもよい。上記時間隣接ブロックは、コロケート参照ブロック（collocated reference block）、コロケートＣＵ（ｃｏｌＣＵ）などの名称で呼ばれ得、上記時間隣接ブロックを含む参照ピクチャは、コロケートピクチャ（collocated picture、ｃｏｌＰｉｃ）と呼ばれることもある。例えば、現ブロックの隣接ブロックに基づいて動き情報の候補リストが構成されることができ、上記現ブロックの動きベクトルおよび／または参照ピクチャのインデックスを導出するために、どの候補が選択（使用）されるかを指示するフラグまたはインデックス情報がシグナリングされることができる。様々な予測モードに基づいてインター予測が行われ、例えば、スキップモードおよびマージモードの場合、現ブロックの動き情報は、選択された隣接ブロックの動き情報と同一であり得る。スキップモードの場合、マージモードと異なり、残差信号が送信されないことがある。動き情報予測（Motion Vector Prediction、ＭＶＰ）モードの場合、選択された隣接ブロックの動きベクトルを動きベクトル予測子（motion vector predictor）として利用し、動きベクトル差分（motion vector difference）がシグナリングされることができる。この場合、上記動きベクトル予測子と動きベクトル差分との和を用いて、上記現ブロックの動きベクトルを導出することができる。

【0079】

上記動き情報は、インター予測タイプ（Ｌ０予測、Ｌ１予測、Ｂｉ予測など）に応じて、Ｌ０動き情報および／またはＬ１動き情報を含むことができる。Ｌ０方向の動きベクトルは、Ｌ０動きベクトルまたはＭＶＬ０と呼ばれ得、Ｌ１方向の動きベクトルは、Ｌ１動きベクトルまたはＭＶＬ１と呼ばれ得る。Ｌ０動きベクトルに基づいた予測は、Ｌ０予測と呼ばれ得、Ｌ１動きベクトルに基づいた予測をＬ１予測と呼ばれ得、上記Ｌ０動きベクトルおよび上記Ｌ１動きベクトルの両方に基づいた予測を双（Ｂｉ）予測と呼ばれ得る。ここで、Ｌ０動きベクトルは、参照ピクチャリストＬ０（Ｌ０）に関連する動きベクトルを示すことができ、Ｌ１動きベクトルは、参照ピクチャリストＬ１（Ｌ１）に関連する動きベクトルを示すことができる。参照ピクチャリストＬ０は、上記現ピクチャよりも、出力順序上、以前のピクチャを参照ピクチャに含むことができ、参照ピクチャリストＬ１は、上記現ピクチャよりも、出力順序上、以後のピクチャを含むことができる。上記以前のピクチャは、順方向（参照）ピクチャと呼ばれ得、上記以後のピクチャは、逆方向（参照）ピクチャと呼ばれ得る。上記参照ピクチャリストＬ０は、上記現ピクチャよりも、出力順序上、以後のピクチャを参照ピクチャにさらに含むことができる。この場合、上記参照ピクチャリストＬ０内で上記以前のピクチャが先にインデキシングされ、上記以後のピクチャは、その後にインデキシングされ得る。上記参照ピクチャリストＬ１は、上記現ピクチャよりも、出力順序上、以前のピクチャを参照ピクチャにさらに含むことができる。この場合、上記参照ピクチャリスト１内で上記以後のピクチャが先にインデキシングされ、上記以前のピクチャは、その後にインデキシングされ得る。ここで、出力順序は、ＰＯＣ（Picture Order Count）順序（order）に対応し得る。

【0080】

図４は、コーディングされた画像／ビデオに対する階層構造を例示的に示す。

【0081】

図４に示すように、コーディングされた画像／ビデオは、画像／ビデオのデコード処理およびそれ自体を扱うＶＣＬ（Video Coding Layer、ビデオ符号化（コーディング）層）、符号化された情報を送信して記憶する下位システム、およびＶＣＬと下位システムとの間に存在してネットワーク適応機能を担当するＮＡＬ（Network Abstraction Layer、ネットワーク抽象化層）に区分されている。

【0082】

ＶＣＬでは、圧縮された画像データ（スライスデータ）を含むＶＣＬデータを生成し、または、ピクチャパラメータセット（Picture Parameter Set：ＰＰＳ）、シーケンスパラメータセット（Sequence Parameter Set：ＳＰＳ）、ビデオパラメータセット（Video Parameter Set：ＶＰＳ）などの情報を含むパラメータセットまたは画像のデコード過程に付加的に必要なＳＥＩ（Supplemental Enhancement Information）メッセージを生成することができる。

【0083】

ＮＡＬでは、ＶＣＬで生成されたＲＢＳＰ（Raw Byte Sequence Payload）にヘッダ情報（ＮＡＬユニットヘッダ）を付加してＮＡＬユニットを生成することができる。このとき、ＲＢＳＰは、ＶＣＬで生成されたスライスデータ、パラメータセット、ＳＥＩメッセージなどを意味する。ＮＡＬユニットヘッダには、該当ＮＡＬユニットに含まれるＲＢＳＰデータによって特定されるＮＡＬユニットタイプ情報を含むことができる。

【0084】

上記図面に示すように、ＮＡＬユニットは、ＶＣＬで生成されたＲＢＳＰによって、ＶＣＬＮＡＬユニットとＮｏｎ－ＶＣＬＮＡＬユニットとに区分されることができる。ＶＣＬＮＡＬユニットは、画像に関する情報（スライスデータ）を含んでいるＮＡＬユニットを意味することができ、Ｎｏｎ－ＶＣＬＮＡＬユニットは、画像をデコードするために必要な情報（パラメータセットまたはＳＥＩメッセージ）を含んでいるＮＡＬユニットを意味することができる。

【0085】

前述したＶＣＬＮＡＬユニット、Ｎｏｎ－ＶＣＬＮＡＬユニットは、下位システムのデータ規格によってヘッダ情報を付けてネットワークを介して送信されることができる。例えば、ＮＡＬユニットは、Ｈ．２６６／ＶＶＣファイルフォーマット、ＲＴＰ（Real-time Transport Protocol）、ＴＳ（Transport Stream）などの所定規格のデータ形態に変形されて多様なネットワークを介して送信されることができる。

【0086】

前述したように、ＮＡＬユニットは、該当ＮＡＬユニットに含まれるＲＢＳＰデータ構造（structure）によってＮＡＬユニットタイプが特定されることができ、このようなＮＡＬユニットタイプに関する情報は、ＮＡＬユニットヘッダに記憶されてシグナリングされることができる。

【0087】

例えば、ＮＡＬユニットが画像に関する情報（スライスデータ）を含むかどうかによって、大別して、ＶＣＬＮＡＬユニットタイプとＮｏｎ－ＶＣＬＮＡＬユニットタイプとに分類されることができる。ＶＣＬＮＡＬユニットタイプは、ＶＣＬＮＡＬユニットが含むピクチャの性質および種類などによって分類されることができ、Ｎｏｎ－ＶＣＬＮＡＬユニットタイプは、パラメータセットの種類などによって分類されることができる。

【0088】

下記は、Ｎｏｎ－ＶＣＬＮＡＬユニットタイプが含むパラメータセットの種類などによって特定されたＮＡＬユニットタイプの一例である。

【0089】

－ＡＰＳ（Adaptation Parameter Set）ＮＡＬｕｎｉｔ：ＡＰＳを含むＮＡＬユニットに対するタイプ

【0090】

－ＤＰＳ（Decoding Parameter Set）ＮＡＬｕｎｉｔ：ＤＰＳを含むＮＡＬユニットに対するタイプ

【0091】

－ＶＰＳ（Video Parameter Set）ＮＡＬｕｎｉｔ：ＶＰＳを含むＮＡＬユニットに対するタイプ

【0092】

－ＳＰＳ（Sequence Parameter Set）ＮＡＬｕｎｉｔ：ＳＰＳを含むＮＡＬユニットに対するタイプ

【0093】

－ＰＰＳ（Picture Parameter Set）ＮＡＬｕｎｉｔ：ＰＰＳを含むＮＡＬユニットに対するタイプ

【0094】

－ＰＨ（Picture Header）ＮＡＬｕｎｉｔ：ＰＨを含むＮＡＬユニットに対するタイプ

【0095】

前述したＮＡＬユニットタイプは、ＮＡＬユニットタイプのためのシンタックス情報を有し、上記シンタックス情報は、ＮＡＬユニットヘッダに記憶されてシグナリングされることができる。例えば、上記シンタックス情報は、ｎａｌ＿ｕｎｉｔ＿ｔｙｐｅであり、ＮＡＬユニットタイプは、ｎａｌ＿ｕｎｉｔ＿ｔｙｐｅ値によって特定されることができる。

【0096】

一方、前述したように、１つのピクチャは、複数のスライスを含むことができ、１つのスライスは、スライスヘッダおよびスライスデータを含むことができる。この場合、１つのピクチャ内の複数のスライス（スライスヘッダおよびスライスデータ集合）に対して１つのピクチャヘッダがさらに付加されることができる。上記ピクチャヘッダ（ピクチャヘッダシンタックス）は、上記ピクチャに共通に適用できる情報／パラメータを含むことができる。本文書において、スライスは、タイルグループと混用または代替されることができる。また、本文書において、スライスヘッダは、タイプグループヘッダと混用または代替されることができる。

【0097】

上記スライスヘッダ（スライスヘッダシンタックス、スライスヘッダ情報）は、上記スライスに共通に適用できる情報／パラメータを含むことができる。上記ＡＰＳ（ＡＰＳシンタックス）またはＰＰＳ（ＰＰＳシンタックス）は、１つまたは複数のスライスまたはピクチャに共通に適用できる情報／パラメータを含むことができる。上記ＳＰＳ（ＳＰＳシンタックス）は、１つまたは複数のシーケンスに共通に適用できる情報／パラメータを含むことができる。上記ＶＰＳ（ＶＰＳシンタックス）は、マルチレイヤに共通に適用できる情報／パラメータを含むことができる。上記ＤＰＳ（ＤＰＳシンタックス）は、ビデオ全般に共通に適用できる情報／パラメータを含むことができる。上記ＤＰＳは、ＣＶＳ（Coded Video Sequence）のコンカチネーション（接合、concatenation）に関連する情報／パラメータを含むことができる。本文書において、上位レベルシンタックス（High Level Syntax、ＨＬＳ）とは、上記ＡＰＳシンタックス、ＰＰＳシンタックス、ＳＰＳシンタックス、ＶＰＳシンタックス、ＤＰＳシンタックス、ピクチャヘッダシンタックス、スライスヘッダシンタックスのうちの少なくとも１つを含むことができる。

【0098】

本文書において、エンコード装置からデコード装置にエンコードされてビットストリーム形態でシグナリングされる画像／ビデオ情報は、ピクチャ内のパーティショニング関連情報、イントラ／インター予測情報、残差情報、インループフィルタリング情報などを含むだけでなく、上記スライスヘッダに含まれている情報、上記ピクチャヘッダに含まれている情報、上記ＡＰＳに含まれている情報、上記ＰＰＳに含まれている情報、ＳＰＳに含まれている情報、ＶＰＳに含まれている情報、および／またはＤＰＳに含まれている情報を含むことができる。また、上記画像／ビデオ情報は、ＮＡＬユニットヘッダの情報をさらに含むことができる。

【0099】

一方、量子化など、圧縮符号化過程で発生するエラーによるオリジナル（原本、original）画像と復元画像との差異を補償するために、前述したように、復元サンプルまたは復元ピクチャにインループフィルタリング手順が実行されることができる。前述したように、インループフィルタリングは、エンコード装置のフィルタ部およびデコード装置のフィルタ部で実行されることができ、デブロッキングフィルタ、ＳＡＯおよび／または適応ループフィルタ（ＡＬＦ）が適用されることができる。例えば、ＡＬＦ手順は、デブロックフィルタリング手順および／またはＳＡＯ手順が完了した後に実行されることができる。ただし、この場合も、デブロックフィルタリング手順および／またはＳＡＯ手順が省略されることもできる。

【0100】

以下、ピクチャ復元およびフィルタリングに対する具体的な説明が記述される。画像／ビデオコーディングにおいて、各ブロック単位でイントラ予測／インター予測に基づいて復元ブロックが生成されることができ、復元ブロックを含む復元ピクチャが生成されることができる。現ピクチャ／スライスがＩピクチャ／スライスである場合、上記現ピクチャ／スライスに含まれるブロックは、イントラ予測のみに基づいて復元されることができる。一方、現ピクチャ／スライスがＰまたはＢピクチャ／スライスである場合、上記現ピクチャ／スライスに含まれるブロックは、イントラ予測またはインター予測に基づいて復元されることができる。この場合、現ピクチャ／スライス内の一部のブロックに対してはイントラ予測が適用され、残りのブロックに対してはインター予測が適用されることもできる。

【0101】

イントラ予測は、現ブロックが属するピクチャ（以下、現ピクチャという）内の参照サンプルに基づいて現ブロックに対する予測サンプルを生成する予測を示すことができる。現ブロックにイントラ予測が適用される場合、現ブロックのイントラ予測に使用する隣接参照サンプルが導出されることができる。上記現ブロックの隣接参照サンプルは、ｎＷ×ｎＨの大きさの現ブロックの左側（left）境界に隣接するサンプルおよび左下側（bottom-left）に隣接する合計２×ｎＨ個のサンプル、現ブロックの上側（top）境界に隣接するサンプルおよび右上側（top-right）に隣接する合計２×ｎＷ個のサンプルおよび現ブロックの左上側（top-left）に隣接する１個のサンプルを含むことができる。あるいは、上記現ブロックの隣接参照サンプルは、複数列の上側隣接サンプルおよび複数行の左側隣接サンプルを含むこともできる。また、上記現ブロックの隣接参照サンプルは、ｎＷ×ｎＨの大きさの現ブロックの右側（right）境界に隣接する合計ｎＨ個のサンプル、現ブロックの下側（bottom）境界に隣接する合計ｎＷ個のサンプル、および現ブロックの右下側（bottom-right）に隣接する１個のサンプルを含むこともできる。

【0102】

ただし、現ブロックの隣接参照サンプルのうちの一部は、まだデコードされない、または利用可能でない場合がある。この場合、デコーダは、利用可能なサンプルとして利用可能でないサンプルを代替（substitution）して予測に使用する隣接参照サンプルを構成することができる。あるいは、利用可能なサンプルの補間（interpolation）を介して予測に使用する隣接参照サンプルを構成することができる。

【0103】

隣接参照サンプルが導出された場合、（ｉ）現ブロックの隣接（neighboring）参照サンプルの平均（average）または補間（interpolation）に基づいて予測サンプルを導出することができ、（ｉｉ）現ブロックの隣接参照サンプルのうち、予測サンプルに対して特定（予測）方向に存在する参照サンプルに基づいて上記予測サンプルを導出することもできる。（ｉ）の場合は、非方向性モードまたは非角度モードと呼ばれ、（ｉｉ）の場合は、方向性（directional）モードまたは角度（angular）モードと呼ばれることができる。また、上記隣接参照サンプルのうちの上記現ブロックの予測サンプルを基準にして、上記現ブロックのイントラ予測モードの予測方向の反対方向に位置する上記第２の隣接サンプルと上記第１の隣接サンプルとの補間を介して上記予測サンプルが生成されることもできる。前述した場合は、線形補間イントラ予測（Linear Interpolation Intra Prediction、ＬＩＰ）と呼ばれることができる。また、線形モデル（linear model）を利用してルマサンプルに基づいてクロマ予測サンプルが生成されることもできる。この場合は、ＬＭモードと呼ばれることができる。また、フィルタリングされた隣接参照サンプルに基づいて上記現ブロックの一時（臨時）予測サンプルを導出し、上記既存の隣接参照サンプル、すなわち、フィルタリングされない隣接参照サンプルのうち、上記イントラ予測モードにより導出された少なくとも１つの参照サンプルと上記一時予測サンプルとを加重和（weighted sum）して上記現ブロックの予測サンプルを導出することもできる。前述した場合は、ＰＤＰＣ（Position Dependent Intra Prediction）と呼ばれることができる。また、現ブロックの隣接多重参照サンプルラインの中から最も予測精度（正確度）が高い参照サンプルラインを選択して該当ラインで予測方向に位置する参照サンプルを利用して予測サンプルを導出し、このときに使用された参照サンプルラインをデコード装置に指示（シグナリング）する方法でイントラ予測符号化を実行することができる。前述した場合は、Ｍｕｌｔｉ－ＲｅｆｅｒｅｎｃｅＬｉｎｅ（ＭＲＬ）ｉｎｔｒａｐｒｅｄｉｃｔｉｏｎまたはＭＲＬベースのイントラ予測と呼ばれることができる。また、現ブロックを垂直または水平のサブパーティションに分けて同じイントラ予測モードに基づいてイントラ予測を実行し、上記サブパーティション単位で隣接参照サンプルを導出して利用できる。すなわち、この場合、現ブロックに対するイントラ予測モードが上記サブパーティションに同じく適用され、上記サブパーティション単位で隣接参照サンプルを導出して利用することによって、場合によって、イントラ予測性能を高めることができる。このような予測方法は、ＩｎｔｒａＳｕｂ－Ｐａｒｔｉｔｉｏｎｓ（ＩＳＰ）またはＩＳＰベースのイントラ予測と呼ばれることができる。前述したイントラ予測方法は、目次（セクション）１および２におけるイントラ予測モードと区分してイントラ予測タイプと呼ばれることができる。上記イントラ予測タイプは、イントラ予測技法または付加イントラ予測モードなど、多様な用語で呼ばれることができる。例えば、上記イントラ予測タイプ（または、付加イントラ予測モードなど）は、前述したＬＩＰ、ＰＤＰＣ、ＭＲＬ、ＩＳＰのうちの少なくとも１つを含むことができる。上記ＬＩＰ、ＰＤＰＣ、ＭＲＬ、ＩＳＰなどの特定イントラ予測タイプを除外した一般イントラ予測方法は、ノーマルイントラ予測タイプと呼ばれることができる。ノーマルイントラ予測タイプは、上記のような特定のイントラ予測タイプが適用されない場合、一般的に適用されることができ、前述したイントラ予測モードに基づいて予測が実行されることができる。一方、必要によって、導出された予測サンプルに対する後処理フィルタリングが実行されることもできる。

【0104】

具体的には、イントラ予測手順は、イントラ予測モード／タイプ決定ステップ、隣接参照サンプル導出ステップ、イントラ予測モード／タイプベースの予測サンプル導出ステップを含むことができる。また、必要によって、導出された予測サンプルに対する後処理フィルタリング（post-filtering）ステップが実行されることもできる。

【0105】

インループフィルタリング手順により修正された（modified）復元ピクチャが生成され、デコード装置から上記修正された復元ピクチャがデコードされたピクチャとして出力され、またエンコード装置／デコード装置の復号ピクチャバッファまたはメモリに記憶されて、以後にピクチャのエンコード／デコード時のインター予測手順において参照ピクチャとして使用されることができる。上記インループフィルタリング手順は、前述のようにデブロックフィルタリング手順、ＳＡＯ（Sample Adaptive Offset）手順および／またはＡＬＦ（Adaptive Loop Filter）手順などを含む。この場合、上記デブロックフィルタリング手順、ＳＡＯ（Sample Adaptive Offset）手順、ＡＬＦ（Adaptive Loop Filter）手順およびバイラテラルフィルタ（bi-lateral filter）手順のうちの１つもしくは一部が順次適用されてもよく、または全てが順次適用されてもよい。例えば、復元ピクチャに対してデブロックフィルタリング手順が適用された後、ＳＡＯ手順が行われてもよい。あるいは、例えば、復元ピクチャに対してデブロックフィルタリング手順が適用された後、ＡＬＦ手順が行われてもよい。これはエンコード装置においても同様に行われる。

【0106】

デブロックフィルタリングは、復元されたピクチャでブロック間の境界に発生する歪曲を除去するフィルタリング技法である。デブロックフィルタリング手順は、例えば、復元ピクチャでターゲット境界を導出し、上記ターゲット境界に対するｂｓ（boundary strength）を決定し、上記ｂＳに基づいて上記ターゲット境界に対するデブロックフィルタリングを実行することができる。上記ｂＳは、上記ターゲット境界を隣接する２つのブロックの予測モード、動きベクトル差、参照ピクチャが同一か否か、０でない有効係数が存在するか否かなどに基づいて決定されることができる。

【0107】

ＳＡＯは、サンプル単位で復元ピクチャとオリジナルピクチャとのオフセット差を補償する方法であって、例えば、バンドオフセット（Band Offset）、エッジオフセット（Edge Offset）などのタイプに基づいて適用されることができる。ＳＡＯによると、各ＳＡＯタイプによってサンプルを互いに異なるカテゴリに分類し、カテゴリに基づいて各サンプルにオフセット値を足すことができる。ＳＡＯのためのフィルタリング情報は、ＳＡＯ適用が可能か否かに関する情報、ＳＡＯタイプ情報、ＳＡＯオフセット値情報などを含むことができる。ＳＡＯは、上記デブロックフィルタリング適用後の復元ピクチャに対して適用されることもできる。

【0108】

ＡＬＦ（Adaptive Loop Filter）は、復元ピクチャに対してフィルタ形状によるフィルタ係数に基づいてサンプル単位でフィルタリングする技法である。エンコード装置は、復元ピクチャとオリジナルピクチャとの比較を介してＡＬＦ適用が可能か否か、ＡＬＦ形状および／またはＡＬＦフィルタリング係数などを決定することができ、デコード装置にシグナリングすることができる。すなわち、ＡＬＦのためのフィルタリング情報は、ＡＬＦ適用が可能か否かに関する情報、ＡＬＦフィルタ形状（shape）情報、ＡＬＦフィルタリング係数情報などを含むことができる。ＡＬＦは、上記デブロックフィルタリング適用後の復元ピクチャに対して適用されることもできる。

【0109】

図５は、ＡＬＦフィルタ形状の例を示す。

【0110】

図５の（ａ）は７ｘ７ダイヤモンドのフィルタ形状を示し、（ｂ）は５ｘ５ダイヤモンドのフィルタ形状を示す。図５におけるフィルタ形状内のＣｎは、フィルタ係数を示す。上記Ｃｎでｎが同じである場合、これは同じフィルタ係数が割り当てられ得ることを示す。本文書において、ＡＬＦのフィルタ形状に応じてフィルタ係数が割り当てられる位置および／または単位はフィルタタブと呼ばれ得る。このとき、各々のフィルタタブには１つのフィルタ係数が割り当てられ、フィルタタブが配列された形態はフィルタ形状に該当し得る。フィルタ形状のセンタに位置するフィルタタブは、センタフィルタタブと呼ばれ得る。センタフィルタタブを基準に互いに対応する位置に存在する同じｎ値の２つのフィルタタブには同じフィルタ係数が割り当てられ得る。例えば、７ｘ７ダイヤモンドのフィルタ形状の場合、２５個のフィルタタブを含み、Ｃ０ないしＣ１１のフィルタ係数が中央対称の形態で割り当てられるので、１３個のフィルタ係数のみで上記２５個のフィルタタブにフィルタ係数を割り当て得る。また、例えば、５ｘ５ダイヤモンドのフィルタ形状の場合、１３個のフィルタタブを含み、Ｃ０ないしＣ５のフィルタ係数が中央対称の形態で割り当てられるので、７個のフィルタ係数のみで上記１３個のフィルタタブにフィルタ係数を割り当て得る。例えば、シグナリングされるフィルタ係数に関する情報のデータ量を減らすために、７ｘ７ダイヤモンドのフィルタ形状に対する１３個のフィルタ係数のうちの１２個のフィルタ係数は（明示的に）シグナリングされ、１個のフィルタ係数は（暗黙的に）導出され得る。また、例えば、５ｘ５ダイヤモンドのフィルタ形状に対する７個のフィルタ係数のうちの６個のフィルタ係数は（明示的に）シグナリングされ、１個のフィルタ係数は（暗黙的に）導出され得る。

【0111】

図６は、エンコード装置におけるフィルタリングに基づくエンコード方法を説明するフローチャートである。図６の方法は、Ｓ６００ないしＳ６３０のステップを含むことができる。

【0112】

Ｓ６００のステップにおいて、エンコード装置は、復元ピクチャを生成することができる。Ｓ６００のステップは、前述した復元ピクチャ（または復元サンプル）の生成手順に基づいて実行されることができる。

【0113】

Ｓ６１０のステップにおいて、エンコード装置は、インループフィルタリング関連情報に基づいて（仮想境界を横切って）インループフィルタリングが適用されるかどうかを決定することができる。ここで、インループフィルタリングは、前述したデブロックフィルタリング、ＳＡＯ、またはＡＬＦの少なくとも１つを含み得る。

【0114】

Ｓ６２０のステップにおいて、エンコード装置は、Ｓ６１０のステップの上記決定に基づいて修正された復元ピクチャ（修正された復元サンプル）を生成することができる。ここで、修正された復元ピクチャ（修正された復元サンプル）は、フィルタリングされた復元ピクチャ（フィルタリングされた復元サンプル）であり得る。

【0115】

Ｓ６３０のステップにおいて、エンコード装置は、インループフィルタリング手順に基づいてインループフィルタリング関連情報を含む画像／ビデオ情報をエンコードすることができる。

【0116】

図７は、デコード装置におけるフィルタリングに基づくデコード方法を説明するフローチャートである。図７の方法は、Ｓ７００ないしＳ７３０のステップを含むことができる。

【0117】

Ｓ７００のステップにおいて、デコード装置は、ビットストリームからインループフィルタリング関連情報を含む画像／ビデオ情報を取得することができる。ここで、ビットストリームは、エンコード装置から送信されたエンコードされた画像／ビデオ情報に基づくことができる。

【0118】

Ｓ７１０のステップにおいて、デコード装置は、復元ピクチャを生成することができる。Ｓ７１０のステップは、前述した復元ピクチャ（または復元サンプル）の生成手順に基づいて実行されることができる。

【0119】

Ｓ７２０のステップにおいて、デコード装置は、インループフィルタリング関連情報に基づいて（仮想境界を横切って）インループフィルタリングが適用されるかどうかを決定することができる。ここで、インループフィルタリングは、前述したデブロックフィルタリング、ＳＡＯ、またはＡＬＦの少なくとも１つを含み得る。

【0120】

Ｓ７３０のステップにおいて、デコード装置は、Ｓ７２０のステップの上記決定に基づいて修正された復元ピクチャ（修正された復元サンプル）を生成することができる。ここで、修正された復元ピクチャ（修正された復元サンプル）は、フィルタリングされた復元ピクチャ（フィルタリングされた復元サンプル）であり得る。

【0121】

前述したように、復元ピクチャにインループフィルタリング手順が適用されることができる。この場合、復元ピクチャの主観的／客観的ビジュアルの品質をより高めるために仮想境界を定義し、上記仮想境界を横切って（across）上記インループフィルタリング手順を適用することもできる。上記仮想境界は、例えば、３６０度画像、ＶＲ画像、またはＰＩＰ（Picture In Picture）などの不連続エッジを含み得る。例えば、上記仮想境界は、予め定められた約束した位置に存在し得、その存否および／または位置がシグナリングされ得る。一例として、上記仮想境界はＣＴＵ行における上方の４番目のサンプルライン（具体的には、例えば、上記ＣＴＵ行における上方の４番目のサンプルラインの上側）に位置し得る。他の例として、上記仮想境界は、その存否および／または位置に関する情報がＨＬＳを介してシグナリングされることもある。上記ＨＬＳは、前述したように、ＳＰＳ、ＰＰＳ、ピクチャヘッダ、スライスヘッダなどを含み得る。

【0122】

以下では、本文書の実施形態に関する上位レベルシンタックスのシグナリングおよびセマンティクスについて説明する。

【0123】

本文書の一実施形態は、ループフィルタを制御する方法を含み得る。ループフィルタを制御する本方法は、復元ピクチャに対して適用され得る。インループフィルタ（ループフィルタ）は、エンコードされたビットストリームのデコードのために使用できる。ループフィルタは、前述したデブロッキング、ＳＡＯ、ＡＬＦを含み得る。ＳＰＳは、デブロッキング、ＳＡＯ、ＡＬＦの各々と関連するフラグを含み得る。上記フラグは、上記ＳＰＳを参照するＣＬＶＳ（Coded Layer Video Sequence）、ＣＶＳ（Coded Video Sequence）のコーディングのために、各ツールが使用可能であるかどうかを示すことができる。

【0124】

上記ループフィルタがＣＶＳに対して使用可能である場合、上記ループフィルタの適用は、特定の境界を横切らないように制御され得る。例えば、上記ループフィルタがサブピクチャの境界を横切るかどうかが制御され得る。また、上記ループフィルタがタイルの境界を横切るかどうかが制御され得る。これと共に、上記ループフィルタが仮想境界を横切るかどうかが制御され得る。ここで、仮想境界は、ラインバッファの使用可能性に基づいてＣＴＵ上に定義され得る。

【0125】

仮想境界を横切ってインループフィルタリング手順が実行されるかどうかと関連し、インループフィルタリング関連情報は、ＳＰＳの仮想境界イネーブルフラグ（ＳＰＳ内の仮想境界イネーブルフラグ）、ＳＰＳの仮想境界存在フラグ、ピクチャヘッダの仮想境界存在フラグ、ＳＰＳピクチャヘッダの仮想境界存在フラグ、仮想境界の位置に関する情報の少なくとも１つを含み得る。

【0126】

本文書に含まれる実施形態において、仮想境界の位置に関する情報は、垂直の仮想境界のｘ座標に関する情報および／または水平の仮想境界のｙ座標に関する情報を含み得る。具体的には、仮想境界の位置に関する情報は、ルマサンプル単位の垂直な仮想境界のｘ座標および／または水平の仮想境界のｙ座標に関する情報を含み得る。また、仮想境界の位置に関する情報は、ＳＰＳに存在する垂直の仮想境界のｘ座標に関する情報（シンタックス要素）の数に関する情報を含み得る。また、仮想境界の位置に関する情報は、ＳＰＳに存在する水平の仮想境界のｙ座標に関する情報（シンタックス要素）の数に関する情報を含み得る。あるいは、仮想境界の位置に関する情報は、ピクチャヘッダに存在する垂直の仮想境界のｘ座標に関する情報（シンタックス要素）の数に関する情報を含み得る。また、仮想境界の位置に関する情報は、ピクチャヘッダに存在する水平の仮想境界のｙ座標に関する情報（シンタックス要素）の数に関する情報を含み得る。

【0127】

次の表は、本実施形態によるＳＰＳの例示的なシンタックスおよびセマンティクスを示す。

【0128】

＜表１＞

【表1】

【0129】

＜表２＞

【表2】

【0130】

次の表は、本実施形態によるＰＰＳ（Picture Parameter Set）の例示的なシンタックスおよびセマンティクスを示す。

【0131】

＜表３＞

【表3】

【0132】

＜表４＞

【表4】

【0133】

次の表は、本実施形態によるピクチャヘッダの例示的なシンタックスおよびセマンティクスを示す。

【0134】

＜表５＞

【表5-1】

【0135】

【表5-2】

【0136】

＜表６＞

【表6-1】

【0137】

【表6-2】

【0138】

次の表は、本実施形態によるスライスヘッダの例示的なシンタックスおよびセマンティクスを示す。

【0139】

＜表７＞

【表7】

【0140】

＜表８＞

【表8】

【0141】

以下では、インループフィルタリングで使用できる仮想境界に関する情報のシグナリングに関して説明する。

【0142】

既存の設計において、仮想境界を横切るループフィルタを無効化（ディセーブル）する（disable）ために、ｉ）ＳＰＳの仮想境界存在フラグ（ｓｐｓ＿ｌｏｏｐ＿ｆｉｌｔｅｒ＿ａｃｒｏｓｓ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ＿ｄｉｓａｂｌｅｄ＿ｐｒｅｓｅｎｔ＿ｆｌａｇ）は０に設定され、また、全てのピクチャヘッダに対してＰＨの仮想境界存在フラグ（ｐｈ＿ｌｏｏｐ＿ｆｉｌｔｅｒ＿ａｃｒｏｓｓ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ＿ｄｉｓａｂｌｅｄ＿ｐｒｅｓｅｎｔ＿ｆｌａｇ）は存在し、０に設定され、またはｉｉ）ＳＰＳの仮想境界存在フラグ（ｓｐｓ＿ｌｏｏｐ＿ｆｉｌｔｅｒ＿ａｃｒｏｓｓ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ＿ｄｉｓａｂｌｅｄ＿ｐｒｅｓｅｎｔ＿ｆｌａｇ）は１に設定され、また、ＳＰＳの垂直仮想境界の数に関する情報（ｓｐｓ＿ｎｕｍ＿ｖｅｒ＿ｖｅｒｔｉｃａｌ＿ｂｏｕｄｎａｒｉｅｓ）およびＳＰＳの水平仮想境界の数に関する情報（ｓｐｓ＿ｎｕｍ＿ｈｏｒ＿ｖｅｒｔｉｃａｌ＿ｂｏｕｄｎａｒｉｅｓ）は、いずれも０に設定され得る。

【0143】

既存の設計においては、上記ｉｉ）によって、ＳＰＳの仮想境界存在フラグ（ｓｐｓ＿ｌｏｏｐ＿ｆｉｌｔｅｒ＿ａｃｒｏｓｓ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ＿ｄｉｓａｂｌｅｄ＿ｐｒｅｓｅｎｔ＿ｆｌａｇ）が１に設定され、デコーダが仮想境界の位置に対するシグナリングを予想することにより、デコード手順における問題が引き起こされることがある。

【0144】

以下の段落で記述される実施形態は、前述した問題を解決するための解決策を提案することができる。実施形態は独立して適用してもよい。あるいは、少なくとも２つ以上の実施形態を組み合わせて適用してもよい。

【0145】

本文書の一実施形態において、仮想境界を示すためのシンタックス要素がＳＰＳに含まれるかどうかは、フラグにより制御され得る。例えば、上記フラグの数は２個であり得る（例えば、ＳＰＳの仮想境界イネーブルフラグ（SPS virtual boundaries enabled flag）、ＳＰＳの仮想境界存在フラグ（SPS virtual boundaries present flag））。

【0146】

本実施形態による一例において、上記ＳＰＳの仮想境界イネーブルフラグは、ｓｐｓ＿ｌｏｏｐ＿ｆｉｌｔｅｒ＿ａｃｒｏｓｓ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ＿ｄｉｓａｂｌｅｄ＿ｆｌａｇ（またはｓｐｓ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）と称され得る。上記ＳＰＳの仮想境界イネーブルフラグは、仮想境界を横切ってループフィルタを無効化するための特徴が有効化（イネーブル）されるかどうかを示すことができる。

【0147】

本実施形態による一例において、上記ＳＰＳの仮想境界存在フラグは、ｓｐｓ＿ｌｏｏｐ＿ｆｉｌｔｅｒ＿ａｃｒｏｓｓ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ＿ｄｉｓａｂｌｅｄ＿ｐｒｅｓｅｎｔ＿ｆｌａｇ（またはｓｐｓ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ＿ｐｒｅｓｅｎｔ＿ｆｌａｇ）と称され得る。上記ＳＰＳの仮想境界存在フラグは、仮想境界のためのシグナリング情報がＳＰＳまたはピクチャヘッダ（Picture Header、ＰＨ）に含まれるかどうかを示すことができる。

【0148】

【0149】

本実施形態による一例において、仮想境界の位置に関する情報（例えば、垂直の仮想境界、水平の仮想境界）がＳＰＳに含まれる場合、垂直の仮想境界の数と水平の仮想境界の数との和が０より大きいように制限され得る。

【0150】

本実施形態による一例において、現ピクチャに対して仮想境界でフィルタが無効化されるかどうかを示す変数が導出され得る。例えば、上記変数は、ＶｉｒｔｕａｌＢｏｕｎｄａｉｒｅｓＤｉｓａｂｌｅｄＦｌａｇを含み得る。

【0151】

本例示における一つの場合として、上記ＳＰＳの仮想境界イネーブルフラグ（ｓｐｓ＿ｌｏｏｐ＿ｆｉｌｔｅｒ＿ａｃｒｏｓｓ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ＿ｄｉｓａｂｌｅｄ＿ｆｌａｇ）が１であり、上記ＳＰＳの仮想境界存在フラグ（ｓｐｓ＿ｌｏｏｐ＿ｆｉｌｔｅｒ＿ａｃｒｏｓｓ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ＿ｄｉｓａｂｌｅｄ＿ｐｒｅｓｅｎｔ＿ｆｌａｇ）が１である場合、ＶｉｒｔｕａｌＢｏｕｎｄａｉｒｅｓＤｉｓａｂｌｅｄＦｌａｇは１であり得る。

【0152】

本例示における別の場合として、上記ＳＰＳの仮想境界イネーブルフラグ（ｓｐｓ＿ｌｏｏｐ＿ｆｉｌｔｅｒ＿ａｃｒｏｓｓ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ＿ｄｉｓａｂｌｅｄ＿ｆｌａｇ）が１であり、上記ＳＰＳの仮想境界存在フラグ（ｓｐｓ＿ｌｏｏｐ＿ｆｉｌｔｅｒ＿ａｃｒｏｓｓ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ＿ｄｉｓａｂｌｅｄ＿ｐｒｅｓｅｎｔ＿ｆｌａｇ）が０であり、垂直の仮想境界の数に関する情報（例えば、ｐｈ＿ｎｕｍ＿ｖｅｒ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ）と水平の仮想境界の数に関する情報（例えば、ｐｈ＿ｎｕｍ＿ｈｏｒ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ）との和が０より大きい場合、ＶｉｒｔｕａｌＢｏｕｎｄａｉｒｅｓＤｉｓａｂｌｅｄＦｌａｇは１であり得る。

【0153】

本例示におけるその他の場合においては、ＶｉｒｔｕａｌＢｏｕｎｄａｉｒｅｓＤｉｓａｂｌｅｄＦｌａｇは０であり得る。

【0154】

次の表は、本実施形態によるＳＰＳの例示的なシンタックスを示す。

【0155】

＜表９＞

【表9】

【0156】

次の表は、上記シンタックスに含まれるシンタックス要素に関する例示的なセマンティクスを示す。

【0157】

＜表１０＞

【表10】

【0158】

次の表は、本実施形態によるヘッダ情報（ピクチャヘッダ）の例示的なシンタックスを示す。

【0159】

＜表１１＞

【表11】

【0160】

次の表は、上記シンタックスに含まれるシンタックス要素に関する例示的なセマンティクスを示す。

【0161】

＜表１２＞

【表12】

【0162】

表９ないし表１２と関連する実施形態において、エンコード装置によりエンコードされた画像情報および／またはエンコード装置からデコード装置によって受信されたビットストリームを介して取得された画像情報は、シーケンスパラメータセット（Sequence Parameter Set、ＳＰＳ）およびピクチャヘッダ（Picture Header、ＰＨ）を含み得る。上記ＳＰＳは、仮想境界イネーブルフラグ（ｓｐｓ＿ｌｏｏｐ＿ｆｉｌｔｅｒ＿ａｃｒｏｓｓ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ＿ｄｉｓａｂｌｅｄ＿ｆｌａｇ）を含み得る。上記ＳＰＳは、上記仮想境界イネーブルフラグに基づいてＳＰＳの仮想境界存在フラグ（ｓｐｓ＿ｌｏｏｐ＿ｆｉｌｔｅｒ＿ａｃｒｏｓｓ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ＿ｄｉｓａｂｌｅｄ＿ｐｒｅｓｅｎｔ＿ｆｌａｇ）を含み得る。

【0163】

例えば、上記ＳＰＳは、上記仮想境界イネーブルフラグの値が１である場合、上記ＳＰＳの仮想境界存在フラグを含み得る。上記ＳＰＳは、上記仮想境界イネーブルフラグおよび上記ＳＰＳの仮想境界存在フラグに基づいて、ＳＰＳの垂直仮想境界の数に関する情報（ｓｐｓ＿ｎｕｍ＿ｖｅｒ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ）、ＳＰＳの垂直仮想境界の位置に関する情報（ｓｐｓ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ＿ｐｏｓ＿ｘ［ｉ］）、ＳＰＳの水平仮想境界の数に関する情報（ｓｐｓ＿ｎｕｍ＿ｈｏｒ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ）、ＳＰＳの水平仮想境界の位置に関する情報（ｓｐｓ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ＿ｐｏｓ＿ｙ［ｉ］）を含み得る。例えば、上記ＳＰＳは、上記仮想境界イネーブルフラグの値が１であり、上記ＳＰＳの仮想境界存在フラグの値が１である場合、上記ＳＰＳの垂直仮想境界の数に関する情報、上記ＳＰＳの垂直仮想境界の位置に関する情報、上記ＳＰＳの水平仮想境界の数に関する情報、上記ＳＰＳの水平仮想境界の位置に関する情報を含み得る。

【0164】

一例において、上記ＳＰＳの垂直仮想境界の位置に関する情報の数は、上記ＳＰＳの垂直仮想境界の数に関する情報に基づいて決定されることができ、上記ＳＰＳの水平仮想境界の位置に関する情報の数は、上記ＳＰＳの水平仮想境界の数に関する情報に基づいて決定されることができる。上記ピクチャヘッダは、上記仮想境界イネーブルフラグおよびＳＰＳの仮想境界存在フラグに基づいて、ＰＨの垂直仮想境界の数に関する情報（ｐｈ＿ｎｕｍ＿ｖｅｒ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ）、ＰＨの垂直仮想境界の位置に関する情報（ｐｈ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ＿ｐｏｓ＿ｘ［ｉ］）、ＰＨの水平仮想境界の数に関する情報（ｐｈ＿ｎｕｍ＿ｈｏｒ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ）、ＰＨの水平仮想境界の位置に関する情報（ｐｈ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ＿ｐｏｓ＿ｙ［ｉ］）を含み得る。

【0165】

例えば、上記ピクチャヘッダは、上記仮想境界イネーブルフラグの値が１であり、上記ＳＰＳの仮想境界存在フラグの値が０である場合、上記ＰＨの垂直仮想境界の数に関する情報、上記ＰＨの垂直仮想境界の位置に関する情報、上記ＰＨの水平仮想境界の数に関する情報、上記ＰＨの水平仮想境界の位置に関する情報を含み得る。一例において、上記ＰＨの垂直仮想境界の位置に関する情報の数は、上記ＰＨの垂直仮想境界の数に関する情報に基づいて決定されることができ、上記ＰＨの水平仮想境界の位置に関する情報の数は、上記ＰＨの水平仮想境界の数に関する情報に基づいて決定されることができる。

【0166】

本文書の別の実施形態において、ＳＰＳを参照するピクチャのヘッダ情報（ピクチャヘッダ）の各々は、ＰＨの仮想境界存在フラグｐｈ＿ｌｏｏｐ＿ｆｉｌｔｅｒ＿ａｃｒｏｓｓ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ＿ｄｉｓａｂｌｅｄ＿ｐｒｅｓｅｎｔ＿ｆｌａｇ（またはｐｈ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ＿ｐｒｅｓｅｎｔ＿ｆｌａｇ）を含み得る。本実施形態も、以前の実施形態のようにＳＰＳの仮想境界イネーブルフラグ（ｓｐｓ＿ｌｏｏｐ＿ｆｉｌｔｅｒ＿ａｃｒｏｓｓ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ＿ｄｉｓａｂｌｅｄ＿ｆｌａｇ）およびＳＰＳの仮想境界存在フラグ（ｓｐｓ＿ｌｏｏｐ＿ｆｉｌｔｅｒ＿ａｃｒｏｓｓ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ＿ｄｉｓａｂｌｅｄ＿ｐｒｅｓｅｎｔ＿ｆｌａｇ）と共に説明されることができる。

【0167】

本実施形態による一例において、上記ＳＰＳの仮想境界イネーブルフラグ（ｓｐｓ＿ｌｏｏｐ＿ｆｉｌｔｅｒ＿ａｃｒｏｓｓ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ＿ｄｉｓａｂｌｅｄ＿ｆｌａｇ）が１であり、上記ＳＰＳの仮想境界存在フラグ（ｓｐｓ＿ｌｏｏｐ＿ｆｉｌｔｅｒ＿ａｃｒｏｓｓ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ＿ｄｉｓａｂｌｅｄ＿ｐｒｅｓｅｎｔ＿ｆｌａｇ）が０である場合、ＳＰＳを参照するピクチャのヘッダ情報（ピクチャヘッダ）の各々は、ＰＨの仮想境界存在フラグｐｈ＿ｌｏｏｐ＿ｆｉｌｔｅｒ＿ａｃｒｏｓｓ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ＿ｄｉｓａｌｂｅｄ＿ｐｒｅｓｅｎｔ＿ｆｌａｇ（またはｐｈ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ＿ｐｒｅｓｅｎｔ＿ｆｌａｇ）を含み得る。

【0168】

【0169】

【0170】

【0171】

本例示における別の場合として、上記ＳＰＳの仮想境界イネーブルフラグ（ｓｐｓ＿ｌｏｏｐ＿ｆｉｌｔｅｒ＿ａｃｒｏｓｓ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ＿ｄｉｓａｂｌｅｄ＿ｆｌａｇ）が１であり、上記ＰＨの仮想境界存在フラグ（ｐｈ＿ｌｏｏｐ＿ｆｉｌｔｅｒ＿ａｃｒｏｓｓ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ＿ｄｉｓａｂｌｅｄ＿ｐｒｅｓｅｎｔ＿ｆｌａｇ）が１である場合、ＶｉｒｔｕａｌＢｏｕｎｄａｉｒｅｓＤｉｓａｂｌｅｄＦｌａｇは１であり得る。

【0172】

本例示におけるその他の場合においては、ＶｉｒｔｕａｌＢｏｕｎｄａｉｒｅｓＤｉｓａｂｌｅｄＦｌａｇは０であり得る。

【0173】

次の表は、本実施形態によるＳＰＳの例示的なシンタックスを示す。

【0174】

＜表１３＞

【表13】

【0175】

次の表は、上記シンタックスに含まれるシンタックス要素に関する例示的なセマンティクスを示す。

【0176】

＜表１４＞

【表14】

【0177】

次の表は、本実施形態によるヘッダ情報（ピクチャヘッダ）の例示的なシンタックスを示す。

【0178】

＜表１５＞

【表15】

【0179】

次の表は、上記シンタックスに含まれるシンタックス要素に関する例示的なセマンティクスを示す。

【0180】

＜表１６＞

【表16-1】

【0181】

【表16-2】

【0182】

表１３ないし表１６と関連する実施形態において、エンコード装置によりエンコードされた画像情報および／またはエンコード装置からデコード装置によって受信されたビットストリームを介して取得された画像情報は、シーケンスパラメータセット（Sequence Parameter Set、ＳＰＳ）およびピクチャヘッダ（Picture Header、ＰＨ）を含み得る。上記ＳＰＳは、仮想境界イネーブルフラグ（ｓｐｓ＿ｌｏｏｐ＿ｆｉｌｔｅｒ＿ａｃｒｏｓｓ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ＿ｄｉｓａｂｌｅｄ＿ｆｌａｇ）を含み得る。上記ＳＰＳは、上記仮想境界イネーブルフラグに基づいて、ＳＰＳの仮想境界存在フラグ（ｓｐｓ＿ｌｏｏｐ＿ｆｉｌｔｅｒ＿ａｃｒｏｓｓ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ＿ｄｉｓａｂｌｅｄ＿ｐｒｅｓｅｎｔ＿ｆｌａｇ）を含み得る。例えば、上記ＳＰＳは、上記仮想境界イネーブルフラグの値が１である場合、上記ＳＰＳの仮想境界存在フラグを含み得る。上記ＳＰＳは、上記仮想境界イネーブルフラグおよび上記ＳＰＳの仮想境界存在フラグに基づいて、ＳＰＳの垂直仮想境界の数に関する情報（ｓｐｓ＿ｎｕｍ＿ｖｅｒ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ）、ＳＰＳの垂直仮想境界の位置に関する情報（ｓｐｓ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ＿ｐｏｓ＿ｘ［ｉ］）、ＳＰＳの水平仮想境界の数に関する情報（ｓｐｓ＿ｎｕｍ＿ｈｏｒ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ）、ＳＰＳの水平仮想境界の位置に関する情報（ｓｐｓ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ＿ｐｏｓ＿ｙ［ｉ］）を含み得る。

【0183】

例えば、上記ＳＰＳは、上記仮想境界イネーブルフラグの値が１であり、上記ＳＰＳの仮想境界存在フラグの値が１である場合、上記ＳＰＳの垂直仮想境界の数に関する情報、上記ＳＰＳの垂直仮想境界の位置に関する情報、上記ＳＰＳの水平仮想境界の数に関する情報、上記ＳＰＳの水平仮想境界の位置に関する情報を含み得る。一例において、上記ＳＰＳの垂直仮想境界の位置に関する情報の数は、上記ＳＰＳの垂直仮想境界の数に関する情報に基づいて決定されることができ、上記ＳＰＳの水平仮想境界の位置に関する情報の数は、上記ＳＰＳの水平仮想境界の数に関する情報に基づいて決定されることができる。上記ピクチャヘッダは、上記仮想境界イネーブルフラグおよびＳＰＳの仮想境界存在フラグに基づいて、ＰＨの仮想境界存在フラグを含み得る。

【0184】

例えば、上記ピクチャヘッダは、上記仮想境界イネーブルフラグの値が１であり、上記ＳＰＳの仮想境界存在フラグの値が０である場合、上記ピクチャヘッダは上記ＰＨの仮想境界存在フラグを含み得る。上記ピクチャヘッダは、上記ＰＨの仮想境界存在フラグに基づいてＰＨの垂直仮想境界の数に関する情報（ｐｈ＿ｎｕｍ＿ｖｅｒ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ）、ＰＨの垂直仮想境界の位置に関する情報（ｐｈ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ＿ｐｏｓ＿ｘ［ｉ］）、ＰＨの水平仮想境界の数に関する情報（ｐｈ＿ｎｕｍ＿ｈｏｒ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ）、ＰＨの水平仮想境界の位置に関する情報（ｐｈ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ＿ｐｏｓ＿ｙ［ｉ］）を含み得る。

【0185】

例えば、上記ピクチャヘッダは、上記ＰＨの仮想境界存在フラグの値が１である場合、上記ＰＨの垂直仮想境界の数に関する情報、上記ＰＨの垂直仮想境界の位置に関する情報、上記ＰＨの水平仮想境界の数に関する情報、上記ＰＨの水平仮想境界の位置に関する情報を含み得る。一例において、上記ＰＨの垂直仮想境界の位置に関する情報の数は、上記ＰＨの垂直仮想境界の数に関する情報に基づいて決定されることができ、上記ＰＨの水平仮想境界の位置に関する情報の数は、上記ＰＨの水平仮想境界の数に関する情報に基づいて決定されることができる。

【0186】

本文書の別の実施形態において、仮想境界を示すためのシンタックス要素がＳＰＳに含まれるかどうかは、フラグにより制御され得る。例えば、上記フラグの数は２個であり得る（例えば、ＳＰＳの仮想境界存在フラグ（SPS virtual boundaries present flag）、ＳＰＳＰＨの仮想境界存在フラグ（SPS PH virtual boundaries present flag））。

【0187】

本実施形態による一例において、上記ＳＰＳの仮想境界存在フラグは、ｓｐｓ＿ｌｏｏｐ＿ｆｉｌｔｅｒ＿ａｃｒｏｓｓ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ＿ｄｉｓａｂｌｅｄ＿ｐｒｅｓｅｎｔ＿ｆｌａｇ（またはｓｐｓ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ＿ｐｒｅｓｅｎｔ＿ｆｌａｇ）と称され得る。上記ＳＰＳの仮想境界存在フラグは、仮想境界の情報がＳＰＳに含まれるかどうかを示すことができる。

【0188】

本実施形態による一例において、上記ＳＰＳＰＨの仮想境界存在フラグは、ｓｐｓ＿ｐｈ＿ｌｏｏｐ＿ｆｉｌｔｅｒ＿ａｃｒｏｓｓ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ＿ｄｉｓａｂｌｅｄ＿ｐｒｅｓｅｎｔ＿ｆｌａｇと称され得る。上記ＳＰＳＰＨの仮想境界存在フラグは、仮想境界の情報がピクチャヘッダ（Picture Header、ＰＨ）に含まれるかどうかを示すことができる。

【0189】

本実施形態による一例において、上記ＳＰＳの仮想境界存在フラグ（ｓｐｓ＿ｌｏｏｐ＿ｆｉｌｔｅｒ＿ａｃｒｏｓｓ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ＿ｄｉｓａｂｌｅｄ＿ｐｒｅｓｅｎｔ＿ｆｌａｇ）が１である場合、上記ＳＰＳＰＨの仮想境界存在フラグ（ｓｐｓ＿ｐｈ＿ｌｏｏｐ＿ｆｉｌｔｅｒ＿ａｃｒｏｓｓ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ＿ｄｉｓａｂｌｅｄ＿ｐｒｅｓｅｎｔ＿ｆｌａｇ）は存在せず、また、０に推論されるように制限され得る。

【0190】

本実施形態による一例において、上記ＳＰＳＰＨの仮想境界存在フラグ（ｓｐｓ＿ｐｈ＿ｌｏｏｐ＿ｆｉｌｔｅｒ＿ａｃｒｏｓｓ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ＿ｄｉｓａｂｌｅｄ＿ｐｒｅｓｅｎｔ＿ｆｌａｇ）が１である場合、仮想境界を横切るループフィルタを無効化するシグナリング情報がピクチャヘッダに含まれ得る。

【0191】

次の表は、本実施形態によるＳＰＳの例示的なシンタックスを示す。

【0192】

＜表１７＞

【表17】

【0193】

次の表は、上記シンタックスに含まれるシンタックス要素に関する例示的なセマンティクスを示す。

【0194】

＜表１８＞

【表18】

【0195】

次の表は、本実施形態によるヘッダ情報（ピクチャヘッダ）の例示的なシンタックスを示す。

【0196】

＜表１９＞

【表19】

【0197】

次の表は、上記シンタックスに含まれるシンタックス要素に関する例示的なセマンティクスを示す。

【0198】

＜表２０＞

【表20-1】

【0199】

【表20-2】

【0200】

表１７ないし表２０と関連する実施形態において、エンコード装置によりエンコードされた画像情報および／またはエンコード装置からデコード装置によって受信されたビットストリームを介して取得された画像情報は、シーケンスパラメータセット（Sequence Parameter Set、ＳＰＳ）およびピクチャヘッダ（Picture Header、ＰＨ）を含み得る。上記ＳＰＳは、ＳＰＳの仮想境界存在フラグ（ｓｐｓ＿ｌｏｏｐ＿ｆｉｌｔｅｒ＿ａｃｒｏｓｓ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ＿ｄｉｓａｂｌｅｄ＿ｐｒｅｓｅｎｔ＿ｆｌａｇ）を含み得る。上記ＳＰＳは、上記ＳＰＳの仮想境界存在フラグに基づいて、ＳＰＳの垂直仮想境界の数に関する情報（ｓｐｓ＿ｎｕｍ＿ｖｅｒ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ）、ＳＰＳの垂直仮想境界の位置に関する情報（ｓｐｓ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ＿ｐｏｓ＿ｘ［ｉ］）、ＳＰＳの水平仮想境界の数に関する情報（ｓｐｓ＿ｎｕｍ＿ｈｏｒ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ）、ＳＰＳの水平仮想境界の位置に関する情報（ｓｐｓ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ＿ｐｏｓ＿ｙ［ｉ］）を含み得る。

【0201】

例えば、上記ＳＰＳは、上記ＳＰＳの仮想境界存在フラグの値が１である場合、上記ＳＰＳの垂直仮想境界の数に関する情報、上記ＳＰＳの垂直仮想境界の位置に関する情報、上記ＳＰＳの水平仮想境界の数に関する情報、上記ＳＰＳの水平仮想境界の位置に関する情報を含み得る。一例において、上記ＳＰＳの垂直仮想境界の位置に関する情報の数は、上記ＳＰＳの垂直仮想境界の数に関する情報に基づいて決定されることができ、上記ＳＰＳの水平仮想境界の位置に関する情報の数は、上記ＳＰＳの水平仮想境界の数に関する情報に基づいて決定されることができる。上記ＳＰＳは、上記ＳＰＳの仮想境界存在フラグに基づいてＳＰＳＰＨの仮想境界存在フラグを含み得る。

【0202】

例えば、上記ＳＰＳの仮想境界存在フラグの値が０である場合、上記ＳＰＳは、ＳＰＳＰＨの仮想境界存在フラグを含み得る。上記ピクチャヘッダは、上記ＳＰＳＰＨの仮想境界存在フラグに基づいてＰＨの仮想境界存在フラグを含み得る。例えば、上記ＳＰＳＰＨの仮想境界存在フラグの値が１である場合、上記ピクチャヘッダは、上記ＰＨの仮想境界存在フラグを含み得る。上記ピクチャヘッダは、上記ＰＨの仮想境界存在フラグに基づいて、ＰＨの垂直仮想境界の数に関する情報（ｐｈ＿ｎｕｍ＿ｖｅｒ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ）、ＰＨの垂直仮想境界の位置に関する情報（ｐｈ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ＿ｐｏｓ＿ｘ［ｉ］）、ＰＨの水平仮想境界の数に関する情報（ｐｈ＿ｎｕｍ＿ｈｏｒ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ）、ＰＨの水平仮想境界の位置に関する情報（ｐｈ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ＿ｐｏｓ＿ｙ［ｉ］）を含み得る。

【0203】

【0204】

本文書の別の実施形態において、漸進的デコードリフレッシュ（Gradual Decoding Refresh、ＧＤＲ）が使用可能である場合（すなわち、ｇｄｒ＿ｅｎａｂｌｅｄ＿ｆｌａｇの値が１である場合）、ループフィルタが仮想境界で無効化される特徴は有効化され、仮想境界の情報は、ピクチャヘッダでシグナリングされ得る（ピクチャヘッダに含まれ得る）。

【0205】

本文書の別の実施形態において、仮想境界を横切ってループフィルタを無効化する機能が有効化されると、仮想境界の位置のシグナリングに関する情報が１つまたは複数のパラメータセットに含まれ得る。例えば、仮想境界を横切ってループフィルタを無効化する機能が有効化されると、仮想境界の位置のシグナリングに関する情報がＳＰＳおよびピクチャヘッダに含まれ得る。

【0206】

本実施形態において、ＳＰＳの仮想境界イネーブルフラグ（ｓｐｓ＿ｌｏｏｐ＿ｆｉｌｔｅｒ＿ａｃｒｏｓｓ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ＿ｄｉｓａｂｌｅｄ＿ｆｌａｇ）が１であり、仮想境界の位置に関するシグナリング情報が１つまたは複数のパラメータセットに含まれる場合、次の通りである。

【0207】

ａ）仮想境界の位置に関するシグナリング情報がＳＰＳにのみ含まれるか、ピクチャヘッダにのみ含まれるか、またはＳＰＳおよびピクチャヘッダの両方に含まれ得る。

【0208】

ｂ）各ピクチャに対するＶｉｒｔｕａｌＢｏｕｎｄａｒｉｅｓＤｉｓａｂｌｅｄＦｌａｇの導出は次の通りである。

【0209】

－ｓｐｓ＿ｌｏｏｐ＿ｆｉｌｔｅｒ＿ａｃｒｏｓｓ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ＿ｄｉｓａｂｌｅｄ＿ｆｌａｇが０である場合、ＶｉｒｔｕａｌＢｏｕｎｄａｒｉｅｓＤｉｓａｂｌｅｄＦｌａｇは０に設定され得る。

【0210】

－本例示における別の場合において、仮想境界の位置に関する情報がＳＰＳまたはピクチャと関連するピクチャヘッダの全てでシグナリングされない場合、ＶｉｒｔｕａｌＢｏｕｎｄａｒｉｅｓＤｉｓａｂｌｅｄＦｌａｇは０に設定され得る。

【0211】

－本例示におけるその他の場合において（仮想境界の位置がＳＰＳでのみシグナリングされるか、ピクチャヘッダでのみシグナリングされるか、またはＳＰＳおよびピクチャヘッダの両方でシグナリングされる場合に）、ＶｉｒｔｕａｌＢｏｕｎｄａｒｉｅｓＤｉｓａｂｌｅｄＦｌａｇは１に設定され得る。

【0212】

ｃ）ピクチャに適用される仮想境界は、ピクチャが直接または間接的に参照するパラメータセットでシグナリングされる仮想境界の集合（union）を含み得る。例えば、上記仮想境界は、ＳＰＳでシグナリングされる仮想境界を含み得る（存在する場合）。例えば、上記仮想境界は、ピクチャと関連するピクチャヘッダでシグナリングされる仮想境界を含み得る（存在する場合）。

【0213】

ｄ）ピクチャあたりの仮想境界の最大数や事前に定義された（pre-defined）値を超えないような制限が適用され得る。例えば、上記事前に定義された値は８であり得る。

【0214】

ｅ）ピクチャヘッダにシグナリングされた仮想境界の位置に関する情報は（ある場合）、他のパラメータセット（例えば、ＳＰＳまたはＰＰＳ）に含まれる仮想境界の位置に関する情報と同じではないように制限され得る。

【0215】

－代案として、現ピクチャに対して適用されたある仮想境界の位置に対して、上記仮想境界の位置（例えば、ＳＰＳとピクチャと関連するピクチャヘッダとでシグナリングされる同じ仮想境界の位置）は、２つの互いに異なるパラメータセットに含まれ得る。

【0216】

ｆ）上記ＳＰＳの仮想境界存在フラグ（ｓｐｓ＿ｌｏｏｐ＿ｆｉｌｔｅｒ＿ａｃｒｏｓｓ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ＿ｄｉｓａｂｌｅｄ＿ｐｒｅｓｅｎｔ＿ｆｌａｇ）が１である場合、上記ＳＰＳＰＨの仮想境界存在フラグ（ｓｐｓ＿ｐｈ＿ｌｏｏｐ＿ｆｉｌｔｅｒ＿ａｃｒｏｓｓ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ＿ｄｉｓａｂｌｅｄ＿ｐｒｅｓｅｎｔ＿ｆｌａｇ）は存在せず、また、０に推論されるように制限され得る。

【0217】

次の表は、本実施形態によるＳＰＳの例示的なシンタックスを示す。

【0218】

＜表２１＞

【表21】

【0219】

次の表は、上記シンタックスに含まれるシンタックス要素に関する例示的なセマンティクスを示す。

【0220】

＜表２２＞

【表22】

【0221】

次の表は、本実施形態によるヘッダ情報（ピクチャヘッダ）の例示的なシンタックスを示す。

【0222】

＜表２３＞

【表23】

【0223】

次の表は、上記シンタックスに含まれるシンタックス要素に関する例示的なセマンティクスを示す。

【0224】

＜表２４＞

【表24-1】

【0225】

【表24-2】

【0226】

表２１ないし表２４と関連する実施形態において、エンコード装置によりエンコードされた画像情報および／またはエンコード装置からデコード装置によって受信されたビットストリームを介して取得された画像情報は、シーケンスパラメータセット（Sequence Parameter Set、ＳＰＳ）およびピクチャヘッダ（Picture Header、ＰＨ）を含み得る。上記ＳＰＳは、仮想境界イネーブルフラグ（ｓｐｓ＿ｌｏｏｐ＿ｆｉｌｔｅｒ＿ａｃｒｏｓｓ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ＿ｄｉｓａｂｌｅｄ＿ｆｌａｇ）を含み得る。上記ＳＰＳは、上記仮想境界イネーブルフラグに基づいて、ＳＰＳの仮想境界存在フラグ（ｓｐｓ＿ｌｏｏｐ＿ｆｉｌｔｅｒ＿ａｃｒｏｓｓ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ＿ｄｉｓａｂｌｅｄ＿ｐｒｅｓｅｎｔ＿ｆｌａｇ）を含み得る。例えば、上記ＳＰＳは、上記仮想境界イネーブルフラグの値が１である場合、上記ＳＰＳの仮想境界存在フラグを含み得る。上記ＳＰＳは、上記仮想境界イネーブルフラグおよび上記ＳＰＳの仮想境界存在フラグに基づいて、ＳＰＳの垂直仮想境界の数に関する情報（ｓｐｓ＿ｎｕｍ＿ｖｅｒ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ）、ＳＰＳの垂直仮想境界の位置に関する情報（ｓｐｓ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ＿ｐｏｓ＿ｘ［ｉ］）、ＳＰＳの水平仮想境界の数に関する情報（ｓｐｓ＿ｎｕｍ＿ｈｏｒ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ）、ＳＰＳの水平仮想境界の位置に関する情報（ｓｐｓ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ＿ｐｏｓ＿ｙ［ｉ］）を含み得る。

【0227】

例えば、上記ＳＰＳは、上記仮想境界イネーブルフラグの値が１であり、上記ＳＰＳの仮想境界存在フラグの値が１である場合、上記ＳＰＳの垂直仮想境界の数に関する情報、上記ＳＰＳの垂直仮想境界の位置に関する情報、上記ＳＰＳの水平仮想境界の数に関する情報、上記ＳＰＳの水平仮想境界の位置に関する情報を含み得る。一例において、上記ＳＰＳの垂直仮想境界の位置に関する情報の数は、上記ＳＰＳの垂直仮想境界の数に関する情報に基づいて決定されることができ、上記ＳＰＳの水平仮想境界の位置に関する情報の数は、上記ＳＰＳの水平仮想境界の数に関する情報に基づいて決定されることができる。上記ピクチャヘッダは、上記仮想境界イネーブルフラグに基づいてＰＨの仮想境界存在フラグを含み得る。

【0228】

例えば、上記仮想境界イネーブルフラグの値が１である場合、上記ピクチャヘッダは、上記ＰＨの仮想境界存在フラグを含み得る。上記ピクチャヘッダは、上記ＰＨの仮想境界存在フラグに基づいて、ＰＨの垂直仮想境界の数に関する情報（ｐｈ＿ｎｕｍ＿ｖｅｒ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ）、ＰＨの垂直仮想境界の位置に関する情報（ｐｈ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ＿ｐｏｓ＿ｘ［ｉ］）、ＰＨの水平仮想境界の数に関する情報（ｐｈ＿ｎｕｍ＿ｈｏｒ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ）、ＰＨの水平仮想境界の位置に関する情報（ｐｈ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ＿ｐｏｓ＿ｙ［ｉ］）を含み得る。例えば、上記ピクチャヘッダは、上記ＰＨの仮想境界存在フラグの値が１である場合、上記ＰＨの垂直仮想境界の数に関する情報、上記ＰＨの垂直仮想境界の位置に関する情報、上記ＰＨの水平仮想境界の数に関する情報、上記ＰＨの水平仮想境界の位置に関する情報を含み得る。一例において、上記ＰＨの垂直仮想境界の位置に関する情報の数は、上記ＰＨの垂直仮想境界の数に関する情報に基づいて決定されることができ、上記ＰＨの水平仮想境界の位置に関する情報の数は、上記ＰＨの水平仮想境界の数に関する情報に基づいて決定されることができる。

【0229】

本文書の別の実施形態においては、前述した実施形態によるが、垂直仮想境界の数と水平仮想境界の数との和が０より大きいという制限をしないことによって、ループフィルタリングが実行されることができる。

【0230】

本文書の別の実施形態において、仮想境界に関する情報ＳＰＳおよびＰＨの両方でシグナリングされ得る。本実施形態の一例において、ＳＰＳの仮想境界イネーブルフラグ（ｓｐｓ＿ｌｏｏｐ＿ｆｉｌｔｅｒ＿ａｃｒｏｓｓ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ＿ｄｉｓａｂｌｅｄ＿ｆｌａｇ）が１である場合、垂直仮想境界の数に関する情報、水平仮想境界の数に関する情報、および／または仮想境界の位置に関する情報がＳＰＳに含まれ得る。これと共に、ＳＰＳの仮想境界イネーブルフラグ（ｓｐｓ＿ｌｏｏｐ＿ｆｉｌｔｅｒ＿ａｃｒｏｓｓ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ＿ｄｉｓａｂｌｅｄ＿ｆｌａｇ）が１である場合、垂直仮想境界の数に関する情報、水平仮想境界の数に関する情報、および／または仮想境界の位置のデルタ値（仮想境界の位置のデルタ値）に関する情報がピクチャヘッダに含まれ得る。仮想境界の位置のデルタ値は、仮想境界の位置間の差を称し得る。ピクチャヘッダには、仮想境界の位置の符号に関する情報も含まれ得る。

【0231】

本実施形態に関する一例によると、各ピクチャに対する仮想境界の位置を導出するために、仮想境界の位置のデルタ値がピクチャヘッダに存在しない場合、ＳＰＳでシグナリングされた仮想境界の位置に関する情報がループフィルタリングのために使用され得る。仮想境界の位置のデルタ値がピクチャヘッダに存在する場合、ＳＰＳでシグナリングされた仮想境界の位置に関する情報とこれに関連するデルタ値との間の合算に基づいて、仮想境界の位置が導出され得る。

【0232】

次の表は、本実施形態によるＳＰＳの例示的なシンタックスを示す。

【0233】

＜表２５＞

【表25】

【0234】

次の表は、上記シンタックスに含まれるシンタックス要素に関する例示的なセマンティクスを示す。

【0235】

＜表２６＞

【表26】

【0236】

次の表は、本実施形態によるヘッダ情報（ピクチャヘッダ）の例示的なシンタックスを示す。

【0237】

＜表２７＞

【表27】

【0238】

次の表は、上記シンタックスに含まれるシンタックス要素に関する例示的なセマンティクスを示す。

【0239】

＜表２８＞

【表28-1】

【0240】

【表28-2】

【0241】

表２５ないし表２８と関連する実施形態において、エンコード装置によりエンコードされた画像情報および／またはエンコード装置からデコード装置によって受信されたビットストリームを介して取得された画像情報は、シーケンスパラメータセット（Sequence Parameter Set、ＳＰＳ）およびピクチャヘッダ（Picture Header、ＰＨ）を含み得る。上記ＳＰＳは、仮想境界イネーブルフラグ（ｓｐｓ＿ｌｏｏｐ＿ｆｉｌｔｅｒ＿ａｃｒｏｓｓ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ＿ｄｉｓａｂｌｅｄ＿ｆｌａｇ）を含み得る。上記ＳＰＳは、上記仮想境界イネーブルフラグに基づいて、ＳＰＳの垂直仮想境界の数に関する情報（ｓｐｓ＿ｎｕｍ＿ｖｅｒ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ）、ＳＰＳの垂直仮想境界の位置に関する情報（ｓｐｓ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ＿ｐｏｓ＿ｘ［ｉ］）、ＳＰＳの水平仮想境界の数に関する情報（ｓｐｓ＿ｎｕｍ＿ｈｏｒ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ）、ＳＰＳの水平仮想境界の位置に関する情報（ｓｐｓ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ＿ｐｏｓ＿ｙ［ｉ］）を含み得る。例えば、上記ＳＰＳは、上記仮想境界イネーブルフラグの値が１である場合、上記ＳＰＳの水平仮想境界の数に関する情報、上記ＳＰＳの水平仮想境界の位置に関する情報、上記ＳＰＳの垂直仮想境界の数に関する情報、上記ＳＰＳの垂直仮想境界の位置に関する情報を含み得る。

【0242】

一例において、上記ＳＰＳの水平仮想境界の位置に関する情報の数は、上記ＳＰＳの水平仮想境界の数に関する情報に基づいて決定されることができ、上記ＳＰＳの垂直仮想境界の位置に関する情報の数は、上記ＳＰＳの垂直仮想境界の数に関する情報に基づいて決定されることができる。上記ピクチャヘッダは、上記仮想境界イネーブルフラグに基づいてＰＨの仮想境界存在フラグを含み得る。例えば、上記仮想境界イネーブルフラグの値が１である場合、上記ピクチャヘッダは、上記ＰＨの仮想境界存在フラグを含み得る。上記ピクチャヘッダは、上記ＰＨの仮想境界存在フラグに基づいて、ＰＨの水平仮想境界の位置のデルタ値に関する情報（ｐｈ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ＿ｐｏｓ＿ｘ＿ｄｅｌｔａ［ｉ］）、ＰＨの水平仮想境界の位置の符号に関する情報（ｐｈ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ＿ｐｏｓ＿ｘ＿ｓｉｇｎ［ｉ］）、ＰＨの垂直仮想境界の位置のデルタ値に関する情報（ｐｈ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ＿ｐｏｓ＿ｙ＿ｄｅｌｔａ［ｉ］）、ＰＨの垂直仮想境界の位置の符号に関する情報（ｐｈ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ＿ｐｏｓ＿ｙ＿ｓｉｇｎ［ｉ］）を含み得る。

【0243】

例えば、上記ピクチャヘッダは、上記ＰＨの仮想境界存在フラグの値が１である場合、上記ＰＨの垂直仮想境界の位置のデルタ値に関する情報、上記ＰＨの垂直仮想境界の位置の符号に関する情報、上記ＰＨの水平仮想境界の位置のデルタ値に関する情報、上記ＰＨの水平仮想境界の位置の符号に関する情報を含み得る。一例において、上記ＳＰＳの垂直仮想境界の数に関する情報に基づいて、上記ＰＨの垂直仮想境界の位置のデルタ値に関する情報の数および上記ＰＨの垂直仮想境界の位置の符号に関する情報の数が決定されることができ、上記ＳＰＳの水平仮想境界の数に関する情報に基づいて、上記ＰＨの水平仮想境界の位置のデルタ値に関する情報の数および上記ＰＨの水平仮想境界の位置の符号に関する情報の数が決定されることができる。

【0244】

本文書のさらに他の実施形態においては、各ピクチャに対する仮想境界の位置に関する情報のシグナリングを説明する。一例において、仮想境界の位置に関する情報がＳＰＳに含まれ、仮想境界の位置のデルタ値に関する情報がピクチャヘッダに含まれない場合、ループフィルタリングのためにＳＰＳに含まれる仮想境界の位置に関する情報が用いられ得る。仮想境界の位置に関する情報がＳＰＳに含まれず、仮想境界の位置のデルタ値に関する情報がピクチャヘッダに含まれる場合、ループフィルタリングのためにピクチャヘッダに含まれる仮想境界の位置に関する情報が用いられ得る。仮想境界の位置に関する情報がＳＰＳに含まれ、仮想境界の位置のデルタ値に関する情報がピクチャヘッダに含まれる場合、ＳＰＳでシグナリングされた仮想境界の位置に関する情報とこれに関連するデルタ値との間の合算に基づいて、仮想境界の位置が導出され得る。仮想境界の位置に関する情報がＳＰＳに含まれず、仮想境界の位置のデルタ値に関する情報がピクチャヘッダに含まれない場合、ピクチャに対して仮想境界が適用されないことがある。

【0245】

次の表は、本実施形態によるＳＰＳの例示的なシンタックスを示す。

【0246】

＜表２９＞

【表29】

【0247】

次の表は、上記シンタックスに含まれるシンタックス要素に関する例示的なセマンティクスを示す。

【0248】

＜表３０＞

【表30】

【0249】

次の表は、本実施形態によるヘッダ情報（ピクチャヘッダ）の例示的なシンタックスを示す。

【0250】

＜表３１＞

【表31】

【0251】

次の表は、上記シンタックスに含まれるシンタックス要素に関する例示的なセマンティクスを示す。

【0252】

＜表３２＞

【表32-1】

【0253】

【表32-2】

【0254】

表２９ないし表３２と関連する実施形態において、エンコード装置によりエンコードされた画像情報および／またはエンコード装置からデコード装置によって受信されたビットストリームを介して取得された画像情報は、シーケンスパラメータセット（Sequence Parameter Set、ＳＰＳ）およびピクチャヘッダ（Picture Header、ＰＨ）を含み得る。

【0255】

上記ＳＰＳは、仮想境界イネーブルフラグ（ｓｐｓ＿ｌｏｏｐ＿ｆｉｌｔｅｒ＿ａｃｒｏｓｓ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ＿ｄｉｓａｂｌｅｄ＿ｆｌａｇ）を含み得る。上記ＳＰＳは、上記仮想境界イネーブルフラグに基づいて、ＳＰＳの仮想境界存在フラグ（ｓｐｓ＿ｌｏｏｐ＿ｆｉｌｔｅｒ＿ａｃｒｏｓｓ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ＿ｄｉｓａｂｌｅｄ＿ｐｒｅｓｅｎｔ＿ｆｌａｇ）を含み得る。例えば、上記ＳＰＳは、上記仮想境界イネーブルフラグの値が１である場合、上記ＳＰＳの仮想境界存在フラグを含み得る。上記ＳＰＳは、上記仮想境界イネーブルフラグおよび上記ＳＰＳの仮想境界存在フラグに基づいて、ＳＰＳの垂直仮想境界の数に関する情報（ｓｐｓ＿ｎｕｍ＿ｖｅｒ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ）、ＳＰＳの垂直仮想境界の位置に関する情報（ｓｐｓ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ＿ｐｏｓ＿ｘ［ｉ］）、ＳＰＳの水平仮想境界の数に関する情報（ｓｐｓ＿ｎｕｍ＿ｈｏｒ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ）、ＳＰＳの水平仮想境界の位置に関する情報（ｓｐｓ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ＿ｐｏｓ＿ｙ［ｉ］）を含み得る。

【0256】

例えば、上記ＳＰＳは、上記仮想境界イネーブルフラグの値が１であり、上記ＳＰＳの仮想境界存在フラグの値が１である場合、上記水平仮想境界の数に関する情報、上記水平仮想境界の位置に関する情報、上記垂直仮想境界の数に関する情報、上記垂直仮想境界の位置に関する情報を含み得る。一例において、上記水平仮想境界の位置に関する情報の数は、上記水平仮想境界の数に関する情報に基づいて決定されることができ、上記垂直仮想境界の位置に関する情報の数は、上記垂直仮想境界の数に関する情報に基づいて決定されることができる。上記ピクチャヘッダは、上記仮想境界イネーブルフラグに基づいてＰＨの仮想境界存在フラグを含み得る。

【0257】

例えば、上記仮想境界イネーブルフラグの値が１である場合、上記ピクチャヘッダは上記ＰＨの仮想境界存在フラグを含み得る。上記ピクチャヘッダは、上記ＰＨの仮想境界存在フラグおよび上記ＳＰＳの垂直仮想境界の数に関する情報に基づいて、ＰＨの垂直仮想境界の数に関する情報（ｐｈ＿ｎｕｍ＿ｖｅｒ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ）を含み得る。例えば、上記ＰＨの仮想境界存在フラグの値が１であり、上記ＳＰＳの垂直仮想境界の数に関する情報の値が０である場合、上記ピクチャヘッダは、上記ＰＨの垂直仮想境界の数に関する情報を含み得る。一例において、上記ピクチャヘッダは、上記ＰＨの垂直仮想境界の数に関する情報に基づいて、ＰＨの垂直仮想境界の位置のデルタ値に関する情報（ｐｈ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ＿ｐｏｓ＿ｘ＿ｄｅｌｔａ［ｉ］）、ＰＨの垂直仮想境界の位置の符号に関する情報（ｐｈ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ＿ｐｏｓ＿ｘ＿ｓｉｇｎ［ｉ］）を含み得る。一例において、上記ＰＨの垂直仮想境界の数に関する情報に基づいて、上記ＰＨの垂直仮想境界の位置のデルタ値に関する情報の数および上記ＰＨの垂直仮想境界の位置の符号に関する情報の数が決定されることができる。上記ピクチャヘッダは、上記ＰＨの仮想境界存在フラグおよび上記ＳＰＳの水平仮想境界の数に関する情報に基づいてＰＨの水平仮想境界の数（ｐｈ＿ｎｕｍ＿ｈｏｒ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ）に関する情報を含み得る。

【0258】

例えば、上記ＰＨの仮想境界存在フラグの値が１であり、上記ＳＰＳの水平仮想境界の数に関する情報の値が０である場合、上記ピクチャヘッダは、上記ＰＨの水平仮想境界の数に関する情報を含み得る。一例において、上記ピクチャヘッダは、上記ＰＨの水平仮想境界の数に関する情報に基づいて、ＰＨの水平仮想境界の位置のデルタ値に関する情報（ｐｈ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ＿ｐｏｓ＿ｙ＿ｄｅｌｔａ［ｉ］）、ＰＨの水平仮想境界の位置の符号に関する情報（ｐｈ＿ｖｉｒｔｕａｌ＿ｂｏｕｎｄａｒｉｅｓ＿ｐｏｓ＿ｙ＿ｓｉｇｎ［ｉ］）を含み得る。一例において、上記ＰＨの水平仮想境界の数に関する情報に基づいて、上記ＰＨの水平仮想境界の位置のデルタ値に関する情報の数および上記ＰＨの水平仮想境界の位置の符号に関する情報の数が決定されることができる。

【0259】

上記表と共に、本文書の実施形態によると、仮想境界を横切って実行されるインループフィルタリングを制御するのに必要な情報がコーディング装置により効率的にシグナリングできる。一例において、仮想境界を横切ってインループフィルタリングが使用可能であるかどうかと関連する情報がシグナリングされることができる。

【0260】

図８および図９は、本文書の実施形態によるビデオ／画像エンコード方法および関連コンポーネントの一例を概略的に示す。

【0261】

図８で開示された方法は、図２または図９で開示されたエンコード装置により実行されることができる。具体的には、例えば、図８のＳ８００およびＳ８１０は、図９の上記エンコード装置の残差処理部２３０により実行されることができ、図８のＳ８２０および／またはＳ８３０は、図９の上記エンコード装置のフィルタリング部２６０により実行されることができ、図８のＳ８４０は、図９の上記エンコード装置のエントロピ符号化部２４０により実行されることができる。また、図８で示していないが、図８で上記エンコード装置の予測部２２０により予測サンプルまたは予測関連情報を導出することができ、上記エンコード装置のエントロピ符号化部２４０により、残差情報または予測関連情報からビットストリームが生成されることができる。図８で開示された方法は、本文書で前述した実施形態を含み得る。

【0262】

図８を参照すると、エンコード装置は残差サンプルを導出することができる（Ｓ８００）。エンコード装置は、現ブロックに対する残差サンプルを導出することができ、上記現ブロックに対する残差サンプルは、現ブロックのオリジナルサンプルおよび予測サンプルに基づいて導出されることができる。具体的には、エンコード装置は、予測モードに基づいて上記現ブロックの予測サンプルを導出することができる。この場合、インター予測またはイントラ予測など、本文書で開示された多様な予測方法が適用されることができる。上記予測サンプルおよびオリジナルサンプルに基づいて残差サンプルを導出することができる。

【0263】

エンコード装置は、変換係数を導出することができる。エンコード装置は、上記残差サンプルに対する変換手順に基づいて変換係数を導出することができる。例えば、変換手順は、ＤＣＴ、ＤＳＴ、ＧＢＴ、またはＣＮＴの少なくとも１つを含み得る。

【0264】

エンコード装置は量子化された変換係数を導出することができる。エンコード装置は、上記変換係数に対する量子化手順に基づいて量子化された変換係数を導出することができる。量子化された変換係数は、係数スキャン順序に基づいて１次元ベクトルの形態を有し得る。

【0265】

エンコード装置は、残差情報を生成することができる（Ｓ８１０）。エンコード装置は、上記現ブロックに対する上記残差サンプルに基づいて残差情報を生成することができる。エンコード装置は、上記量子化された変換係数を示す残差情報を生成することができる。残差情報は、指数ゴロム、ＣＡＶＬＣ、ＣＡＢＡＣなどの多様なエンコード方法を通じて生成できる。

【0266】

エンコード装置は、復元サンプルを生成することができる。エンコード装置は、上記残差情報に基づいて復元サンプルを生成することができる。復元サンプルは、残差情報に基づいた残差サンプルを予測サンプルと加算して生成されることができる。具体的には、エンコード装置は、現ブロックに対する予測（イントラまたはインター予測）を実行し、オリジナルサンプルおよび予測から生成された予測サンプルに基づいて復元サンプルを生成することができる。

【0267】

復元サンプルは、復元ルマサンプルおよび復元クロマサンプルを含み得る。具体的には、残差サンプルは、残差ルマサンプルおよび残差クロマサンプルを含み得る。残差ルマサンプルは、原本ルマサンプルおよび予測ルマサンプルに基づいて生成できる。残差クロマサンプルは、原本クロマサンプルおよび予測クロマサンプルに基づいて生成できる。エンコード装置は、上記残差ルマサンプルに対する変換係数（ルマ変換係数）および／または上記残差クロマサンプルに対する変換係数（クロマ変換係数）を導出することができる。量子化された変換係数は、量子化されたルマ変換係数および／または量子化されたクロマ変換係数を含み得る。

【0268】

エンコード装置は、仮想境界を横切って上記インループフィルタリング手順が実行されるかどうかを決定することができる（Ｓ８２０）。ここで、仮想境界は、前述した仮想境界と同じであり得る。また、インループフィルタリング手順は、デブロッキング手順、ＳＡＯ手順、またはＡＬＦ手順の少なくとも１つを含み得る。

【0269】

エンコード装置は、仮想境界関連情報を生成することができる（Ｓ８３０）。エンコード装置は、上記Ｓ８２０のステップの上記決定に基づいて、仮想境界関連情報を生成することができる。仮想境界関連情報は、インループフィルタリング関連情報に含まれ得る。ここで、インループフィルタリング関連情報は、上記インループフィルタリング手順を実行するのに用いられる情報を称し得る。例えば、仮想境界関連情報は、本文書で前述した仮想境界に関する情報（ＳＰＳの仮想境界イネーブルフラグ、ピクチャヘッダの仮想境界イネーブルフラグ、ＳＰＳの仮想境界存在フラグ、ピクチャヘッダの仮想境界存在フラグ、仮想境界の位置に関する情報など）を含み得る。

【0270】

エンコード装置は、ビデオ／画像情報をエンコードすることができる（Ｓ８４０）。上記画像情報は、残差情報、予測関連情報、および／またはインループフィルタリング関連情報を含み得る。エンコードされたビデオ／画像情報は、ビットストリームの形態で出力されることができる。上記ビットストリーム、はネットワークまたは記憶媒体を介してデコード装置に送信されることができる。

【0271】

上記画像／ビデオ情報は、本文書の実施形態による多様な情報を含むことができる。例えば、上記画像／ビデオ情報は、前述した表１ないし３２の少なくとも１つに開示された情報を含み得る。

【0272】

一実施形態において、上記画像情報は、ＳＰＳ（Sequence Parameter Set）、および上記ＳＰＳを参照するピクチャヘッダ情報を含み得る。上記仮想境界関連情報は、仮想境界イネーブルフラグ（またはＳＰＳの仮想境界イネーブルフラグ）を含み得る。上記仮想境界イネーブルフラグに基づいて、上記仮想境界関連情報のシグナリングが上記ＳＰＳまたは上記ピクチャヘッダ情報に存在するかどうかが決定されることができる。上記インループフィルタリング手順は、上記仮想境界イネーブルフラグに基づいて、仮想境界を横切って実行できる（あるいは、仮想境界を横切って実行されないことがある）。例えば、上記仮想境界イネーブルフラグは、仮想境界を横切るインループフィルタリング手順の無効化が可能であるかどうかを示すことができる。

【0273】

一実施形態において、上記ＳＰＳは、上記仮想境界イネーブルフラグおよびＳＰＳの仮想境界存在フラグを含み、上記仮想境界存在フラグに基づいて、上記仮想境界の位置に関する情報および上記仮想境界の数に関する情報が上記ＳＰＳに含まれるかどうかが決定されることができる。

【0274】

一実施形態において、上記ＳＰＳの仮想境界存在フラグの値が１であることに基づいて、上記ＳＰＳは、垂直仮想境界の数に関する情報を含み得る。

【0275】

一実施形態において、上記ＳＰＳは、垂直仮想境界の位置に関する情報を含み得る。また、上記垂直仮想境界の数に関する情報に基づいて、上記垂直仮想境界の位置に関する情報の数が決定されることができる。

【0276】

一実施形態において、上記ＳＰＳの仮想境界存在フラグの値が１であることに基づいて、上記ＳＰＳは水平仮想境界の数に関する情報を含み得る。

【0277】

一実施形態において、上記ＳＰＳは、水平仮想境界の位置に関する情報を含み得る。また、上記水平仮想境界の数に関する情報に基づいて、上記水平仮想境界の位置に関する情報の数が決定されることができる。

【0278】

一実施形態において、上記仮想境界イネーブルフラグの値が１であり、上記ＳＰＳの仮想境界存在フラグの値が０であることに基づいて、上記ピクチャヘッダ情報は、ピクチャヘッダの仮想境界存在フラグを含み得る。

【0279】

一実施形態において、上記ピクチャヘッダの仮想境界存在フラグの値が１であることに基づいて、上記ピクチャヘッダ情報は、垂直仮想境界の数に関する情報を含み得る。

【0280】

一実施形態において、上記ピクチャヘッダ情報は、垂直仮想境界の位置に関する情報を含み得る。また、上記垂直仮想境界の数に関する情報に基づいて、上記垂直仮想境界の位置に関する情報の数が決定されることができる。

【0281】

一実施形態において、上記ピクチャヘッダの仮想境界存在フラグの値が１であることに基づいて、上記ピクチャヘッダ情報は、水平仮想境界の数に関する情報を含み得る。

【0282】

一実施形態において、上記ピクチャヘッダ情報は水平仮想境界の位置に関する情報を含み得る。また、上記水平仮想境界の数に関する情報に基づいて、上記水平仮想境界の位置に関する情報の数が決定されることができる。

【0283】

一実施形態において、上記ＳＰＳが垂直仮想境界の位置に関する情報と水平仮想境界の位置に関する情報とを含むことに基づいて、上記垂直仮想境界の数と上記水平仮想境界の数との和は０より大きくてもよい。

【0284】

一実施形態において、上記インループフィルタリング関連情報（および／または仮想境界関連情報）は、ＳＰＳの仮想境界存在フラグ、ピクチャヘッダの仮想境界存在フラグ、および漸進的デコードリフレッシュ（Gradual Decoding Refresh、ＧＤＲ）イネーブルフラグをさらに含み得る。例えば、上記ＧＤＲイネーブルフラグの値が１であることに基づいて、上記ＳＰＳの仮想境界イネーブルフラグ（仮想境界イネーブルフラグ）の値は１であり、上記ＳＰＳの仮想境界存在フラグの値は０であり、上記ピクチャヘッダの仮想境界存在フラグの値は１であり得る（仮想境界情報のシグナリングはピクチャヘッダに存在し得る）。

【0285】

図１０および図１１は、本文書の実施形態によるビデオ／画像デコード方法および関連コンポーネントの一例を概略的に示す。

【0286】

図１０で開示された方法は、図３または図１１で開示されたデコード装置により実行されることができる。具体的には、例えば、図１０のＳ１０００は、上記デコード装置のエントロピ復号部３１０により実行されることができ、Ｓ１０１０は、上記デコード装置の残差処理部３２０および／または加算部３４０により実行されることができ、Ｓ１０２０は、上記デコード装置のフィルタリング部３５０により実行されることができる。図１０で開示された方法は、本文書で前述した実施形態を含み得る。

【0287】

図１０を参照すると、デコード装置は、ビデオ／画像情報を受信／取得することができる（Ｓ１０００）。ビデオ／画像情報は、残差情報、予測関連情報、および／またはインループフィルタリング関連情報を含み得る。デコード装置は、ビットストリームを介して上記画像／ビデオ情報を受信／取得することができる。

【0288】

上記画像／ビデオ情報は、本文書の実施形態による多様な情報を含み得る。例えば、上記画像／ビデオ情報は、前述した表１ないし３２の少なくとも１つに開示された情報を含み得る。

【0289】

デコード装置は、量子化された変換係数を導出することができる。デコード装置は、上記残差情報に基づいて量子化された変換係数を導出することができる。量子化された変換係数は、係数スキャン順序に基づいて１次元ベクトルの形態を有し得る。量子化された変換係数は、量子化されたルマ変換係数および／または量子化されたクロマ変換係数を含み得る。

【0290】

デコード装置は、変換係数を導出することができる。デコード装置は、上記量子化された変換係数に対する逆量子化手順に基づいて変換係数を導出することができる。デコード装置は、量子化されたルマ変換係数に基づいて、逆量子化を介してルマ変換係数を導出することができる。デコード装置は、量子化されたクロマ変換係数に基づいて、逆量子化を介してクロマ変換係数を導出することができる。

【0291】

デコード装置は、残差サンプルを生成／導出することができる。デコード装置は、上記変換係数に対する逆変換手順に基づいて、残差サンプルを導出することができる。デコード装置は、ルマ変換係数に基づいて、逆変換手順を介して残差ルマサンプルを導出することができる。デコード装置は、クロマ変換係数に基づいて、逆変換手順を介して残差クロマサンプルを導出することができる。

【0292】

デコード装置は、復元サンプルを生成／導出することができる（Ｓ１０１０）。例えば、デコード装置は、復元ルマサンプルおよび／または復元クロマサンプルを生成／導出することができる。デコード装置は、上記残差情報に基づいて復元ルマサンプルおよび／または復元クロマサンプルを生成することができる。デコード装置は、上記残差情報に基づいて復元サンプルを生成することができる。復元サンプルは、復元ルマサンプルおよび／または復元クロマサンプルを含み得る。復元サンプルのルマ成分が復元ルマサンプルに対応し、復元サンプルのクロマ成分が復元クロマサンプルに対応し得る。デコード装置は、予測手順を介して予測ルマサンプルおよび／または予測クロマサンプルを生成することができる。デコード装置は、予測ルマサンプルおよび残差ルマサンプルに基づいて復元ルマサンプルを生成することができる。デコード装置は、予測クロマサンプルおよび残差クロマサンプルに基づいて復元クロマサンプルを生成することができる。

【0293】

デコード装置は、修正された（フィルタリングされた）復元サンプルを生成することができる（Ｓ１０２０）。デコード装置は、上記復元サンプルに対するインループフィルタリング手順に基づいて、修正された復元サンプルを生成することができる。デコード装置は、インループフィルタリング関連情報に基づいて、修正された復元サンプルを生成することができる。デコード装置は、修正された復元サンプルを生成するために、デブロッキング手順、ＳＡＯ手順、および／またはＡＬＦ手順を用いることができる。

【0294】

一実施形態において、上記画像情報は、ＳＰＳ、および上記ＳＰＳを参照するピクチャヘッダ情報を含み得る。上記仮想境界関連情報は、仮想境界イネーブルフラグ（またはＳＰＳの仮想境界存在フラグ）を含み得る。上記仮想境界イネーブルフラグに基づいて、上記仮想境界関連情報のシグナリングが上記ＳＰＳまたは上記ピクチャヘッダ情報に存在するかどうかが決定されることができる。上記インループフィルタリング手順は、上記仮想境界イネーブルフラグに基づいて、仮想境界を横切って実行されることができる（または横切ることなく、実行されないことがある）。例えば、上記仮想境界イネーブルフラグは、仮想境界を横切るインループフィルタリング手順の無効化が可能であるかどうかを示すことができる。

【0295】

一実施形態において、上記ＳＰＳは、仮想境界イネーブルフラグおよび／またはＳＰＳの仮想境界存在フラグを含み得る。上記ＳＰＳの仮想境界存在フラグに基づいて、上記仮想境界の位置に関する情報および上記仮想境界の数に関する情報が上記ＳＰＳに含まれるかどうかが決定されることができる。

【0296】

一実施形態において、上記ＳＰＳの仮想境界存在フラグの値が１であることに基づいて、上記ＳＰＳは垂直仮想境界の数に関する情報を含み得る。

【0297】

【0298】

一実施形態において、上記ＳＰＳの仮想境界存在フラグの値が１であることに基づいて、上記ＳＰＳは水平仮想境界の数に関する情報を含み得る。

【0299】

【0300】

【0301】

【0302】

【0303】

【0304】

一実施形態において、上記ピクチャヘッダ情報は、水平仮想境界の位置に関する情報を含み得る。また、上記水平仮想境界の数に関する情報に基づいて、上記水平仮想境界の位置に関する情報の数が決定されることができる。

【0305】

【0306】

【0307】

デコード装置は、現ブロックに対する残差サンプルが存在する場合、現ブロックに対する残差に関する情報を受信することができる。残差に関する情報は、残差サンプルに関する変換係数を含むことができる。デコード装置は、残差情報に基づいて現ブロックに対する残差サンプル（または、残差サンプルアレイ）を導出することができる。具体的には、デコード装置は、残差情報に基づいて量子化された変換係数を導出することができる。量子化された変換係数は、係数スキャン順序に基づいて１次元ベクトル形態を有することができる。デコード装置は、上記量子化された変換係数に対する逆量子化手順に基づいて変換係数を導出することができる。デコード装置は、変換係数に基づいて残差サンプルを導出することができる。

【0308】

デコード装置は、（イントラ）予測サンプルと残差サンプルとに基づいて復元サンプルを生成することができ、上記復元サンプルに基づいて復元ブロックまたは復元ピクチャを導出することができる。具体的には、デコード装置は、（イントラ）予測サンプルと残差サンプルとの和に基づいて復元サンプルを生成することができる。以後、デコード装置は、必要によって、主観的／客観的画質を向上させるために、デブロックフィルタリングおよび／またはＳＡＯ手順などのインループフィルタリング手順を上記復元ピクチャに適用できることは、前述の通りである。

【0309】

例えば、デコード装置は、ビットストリームまたはエンコードされた情報をデコードし、前述した情報（またはシンタックス要素）の全部または一部を含む画像情報を獲得することができる。また、上記ビットストリームまたはエンコードされた情報は、コンピュータ読み取り可能な記憶媒体に記憶されることができ、前述したデコード方法が行われるようにすることができる。

【0310】

前述した実施形態において、方法は、一連のステップまたはブロックとしてフローチャートに基づいて説明されているが、該当実施形態は、ステップの順序に限定されるわけではなく、あるステップは、前述したのと異なるステップと異なる順序で、または同時に発生し得る。また、当業者であれば、フローチャートに示されているステップが排他的ではなく、異なるステップが含まれるか、フローチャートの１つまたは複数のステップが本文書の実施形態の範囲に影響を与えずに削除され得ることを理解することができる。

【0311】

前述した本文書の実施形態に係る方法は、ソフトウェアの形態で実現されることができ、本文書に係るエンコード装置および／またはデコード装置は、例えば、ＴＶ、コンピュータ、スマートフォン、セットトップボックス、ディスプレイ装置などの画像処理を行う装置に含まれ得る。

【0312】

本文書で、実施形態がソフトウェアで実現される際、前述した方法は、前述した機能を行うモジュール（過程、機能など）で実現されることができる。モジュールは、メモリに記憶され、プロセッサにより実行されることができる。メモリは、プロセッサの内部または外部にあってもよく、よく知られている様々な手段でプロセッサと連結されてもよい。プロセッサは、ＡＳＩＣ（Application-Specific Integrated Circuit）、他のチップセット、論理回路および／またはデータ処理装置を含むことができる。メモリは、ＲＯＭ（Read-Only Memory）、ＲＡＭ（Random Access Memory）、フラッシュメモリ、メモリカード、記憶媒体および／または他の記憶装置を含むことができる。すなわち、本文書で説明した実施形態は、プロセッサ、マイクロプロセッサ、コントローラまたはチップ上で実現されて行われ得る。例えば、各図面で示している機能ユニットは、コンピュータ、プロセッサ、マイクロプロセッサ、コントローラまたはチップ上で実現されて行われ得る。この場合、実現のための情報（例えば、information on instructions）またはアルゴリズムがデジタル記憶媒体に記憶されることができる。

【0313】

また、本文書の実施形態が適用されるデコード装置およびエンコード装置は、マルチメディア放送送受信装置、モバイル通信端末、ホームシネマビデオ装置、デジタルシネマビデオ装置、監視用カメラ、ビデオ対話装置、ビデオ通信などのリアルタイム通信装置、モバイルストリーミング装置、記憶媒体、カムコーダ、ビデオオンデマンド（オーダーメイド型ビデオ）（ＶｏＤ）サービス提供装置、ＯＴＴビデオ（Over The Top video）装置、インターネットストリーミングサービス提供装置、３次元（３Ｄ）ビデオ装置、ＶＲ（Virtual Reality）装置、ＡＲ（Augmented Reality）装置、画像電話ビデオ装置、運送手段端末（例えば、車両（自律走行車両含む）端末、飛行機端末、船舶端末など）および医療用ビデオ装置などに含まれ得、ビデオ信号またはデータ信号を処理するために使用され得る。例えば、ＯＴＴビデオ（Over The Top video）装置としては、ゲームコンソール、ブルーレイプレーヤ、インターネットアクセスＴＶ、ホームシアターシステム、スマートフォン、タブレットＰＣ、ＤＶＲ（Digital Video Recorder）などを含み得る。

【0314】

また、本文書の実施形態が適用される処理方法は、コンピュータで実行されるプログラムの形態で生産されることができ、コンピュータが読み取ることができる記録媒体に記憶されることができる。本文書の実施形態に係るデータ構造を有するマルチメディアデータもまた、コンピュータが読み取ることができる記録媒体に記憶されることができる。上記コンピュータが読み取ることができる記録媒体は、コンピュータで読み取られるデータが記憶される全ての種類の記憶装置および分散記憶装置を含む。上記コンピュータが読み取ることができる記録媒体は、例えば、ブルーレイディスク（ＢＤ）、ユニバーサルシリアル（汎用直列）バス（ＵＳＢ）、ＲＯＭ、ＰＲＯＭ、ＥＰＲＯＭ、ＥＥＰＲＯＭ、ＲＡＭ、ＣＤ－ＲＯＭ、磁気テープ、フロッピディスク、および光学データ記憶装置を含み得る。また、上記コンピュータが読み取ることができる記録媒体は、搬送波（例えば、インターネットを介した送信）の形態で実現されたメディアを含む。また、エンコード方法で生成されたビットストリームが、コンピュータが読み取られる記録媒体に記憶されるか、有無線通信ネットワークを介して送信されることができる。

【0315】

また、本文書の実施形態は、プログラムコードによるコンピュータプログラム製品で実現されることができ、上記プログラムコードは、本文書の実施形態によってコンピュータで実行されることができる。上記プログラムコードは、コンピュータによって読み取り可能なキャリア上に記憶されることができる。

【0316】

図１２は、本文書に開示された実施形態が適用されることができるコンテンツストリーミングシステムの例を示す。

【0317】

図１2を参照すると、本文書の実施形態が適用されるコンテンツストリーミングシステムは、大まかにエンコードサーバ、ストリーミングサーバ、ウェブサーバ、メディアストレージ、ユーザ装置、およびマルチメディア入力装置を含むことができる。

【0318】

上記エンコードサーバは、スマートフォン、カメラ、カムコーダなどのマルチメディア入力装置から入力されたコンテンツをデジタルデータに圧縮してビットストリームを生成し、これを上記ストリーミングサーバに送信する役割をする。別の例として、スマートフォン、カメラ、カムコーダなどのマルチメディア入力装置がビットストリームを直接生成する場合、上記エンコードサーバは省略され得る。

【0319】

上記ビットストリームは、本文書の実施形態が適用されるエンコード方法またはビットストリームの生成方法により生成されることができ、上記ストリーミングサーバは、上記ビットストリームを送信または受信する過程で、一時的に上記ビットストリームを記憶することができる。

【0320】

上記ストリーミングサーバは、ウェブサーバを介してのユーザ要求（要請）に基づいてマルチメディアデータをユーザ装置に送信し、上記ウェブサーバは、ユーザにどのようなサービスがあるかを知らせる媒介体の役割をする。ユーザが上記ウェブサーバに所望のサービスを要求すれば、上記ウェブサーバは、これをストリーミングサーバに伝達し、上記ストリーミングサーバは、ユーザにマルチメディアデータを送信する。このとき、上記コンテンツストリーミングシステムは、別の制御サーバを含むことができ、この場合、上記制御サーバは、上記コンテンツストリーミングシステム内の各装置間の命令／応答を制御する役割をする。

【0321】

上記ストリーミングサーバは、メディア記憶装置（格納所）および／またはエンコードサーバからコンテンツを受信することができる。例えば、上記エンコードサーバからコンテンツを受信する場合、上記コンテンツをリアルタイムに受信することができる。この場合、円滑なストリーミングサービスを提供するために、上記ストリーミングサーバは、上記ビットストリームを一定時間の間、記憶することができる。

【0322】

上記ユーザ装置の例では、携帯電話、スマートフォン（smart phone）、ノートブックコンピュータ（laptop computer）、デジタル放送用端末機、ＰＤＡ（Personal Digital Assistants）、ＰＭＰ（Portable Multimedia Player）、ナビゲーション、スレートＰＣ（slate PC）、タブレットＰＣ（tablet PC）、ウルトラブック（ULTRABOOK（登録商標））、ウェアラブルデバイス（wearable device、例えば、スマートウォッチ（ウォッチ型端末機）（smartwatch）、スマートグラス（グラス型端末機）（smart glass）、ＨＭＤ（Head Mounted Display））、デジタルＴＶ、デスクトップコンピュータ、デジタル署名（サイニジ）などがありうる。

【0323】

上記コンテンツストリーミングシステム内の各サーバは、分散サーバとして運用されることができ、この場合、各サーバで受信するデータは、分散処理されることができる。

【0324】

本明細書に記載された請求項は、多様な方式で組み合わせることができる。例えば、本明細書の方法請求項の技術的特徴が組み合わせられて装置として実現されることができ、本明細書の装置請求項の技術的特徴が組み合わせられて方法として実現されることができる。また、本明細書の方法請求項の技術的特徴と装置請求項の技術的特徴とが組み合わせられて装置として実現されることができ、本明細書の方法請求項の技術的特徴と装置請求項の技術的特徴とが組み合わせられて方法として実現されることができる。

【図1】