特許 7546743 映像コーディング装置及び方法

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2024-08-29

(45)【発行日】2024-09-06

(54)【発明の名称】映像コーディング装置及び方法

(51)【国際特許分類】

   H04N 19/82 20140101AFI20240830BHJP

   H04N 19/117 20140101ALI20240830BHJP

   H04N 19/176 20140101ALI20240830BHJP

   H04N 19/186 20140101ALI20240830BHJP

   H04N 19/70 20140101ALI20240830BHJP

【ＦＩ】

H04N19/82

H04N19/117

H04N19/176

H04N19/186

H04N19/70

【請求項の数】 3

(21)【出願番号】P 2023176672

(22)【出願日】2023-10-12

(62)【分割の表示】P 2022513641の分割

【原出願日】2020-08-31

(65)【公開番号】P2023171608

(43)【公開日】2023-12-01

【審査請求日】2023-11-10

(31)【優先権主張番号】62/893,757

(32)【優先日】2019-08-29

(33)【優先権主張国・地域又は機関】US

(73)【特許権者】

【識別番号】502032105

【氏名又は名称】エルジー エレクトロニクス インコーポレイティド

【氏名又は名称原語表記】ＬＧ ＥＬＥＣＴＲＯＮＩＣＳ ＩＮＣ．

【住所又は居所原語表記】１２８， Ｙｅｏｕｉ－ｄａｅｒｏ， Ｙｅｏｎｇｄｅｕｎｇｐｏ－ｇｕ， ０７３３６ Ｓｅｏｕｌ，Ｒｅｐｕｂｌｉｃ ｏｆ Ｋｏｒｅａ

(74)【代理人】

【識別番号】100099759

【弁理士】

【氏名又は名称】青木 篤

(74)【代理人】

【識別番号】100123582

【弁理士】

【氏名又は名称】三橋 真二

(74)【代理人】

【識別番号】100165191

【弁理士】

【氏名又は名称】河合 章

(74)【代理人】

【識別番号】100114018

【弁理士】

【氏名又は名称】南山 知広

(74)【代理人】

【識別番号】100159259

【弁理士】

【氏名又は名称】竹本 実

(72)【発明者】

【氏名】チェ チャンウォン

(72)【発明者】

【氏名】ナム チョンハク

【審査官】岩井 健二

(56)【参考文献】

【文献】国際公開第２０２１／０３２７５１（ＷＯ，Ａ１）

【文献】特表２０２２－５４５８３８（ＪＰ，Ａ）

【文献】特表２０２２－５４５７４７（ＪＰ，Ａ）

【文献】特開２０２１－０３４９８０（ＪＰ，Ａ）

【文献】BROSS, Benjamin et al.，Versatile Video Coding (Draft 6)，JVET-O2001 (version 14)，ITU，2019年07月，pp.1, 37-40, 45, 46, 50-54

【文献】MISRA, Kiran et al.，Cross-Component Adaptive Loop Filter for Chroma，JVET-O0636 (version 2)，ITU，2019年07月，pp.1-9

【文献】KOTRA, Anand Meher et al.，CE5-related: High Level Syntax Modifications for CCALF (Combination of JVET-Q0253 and JVET-Q0520)，JVET-Q0782 (version 3)，ITU，2020年01月，pp.1-6

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｈ０４Ｎ １９／００ － １９／９８

(57)【特許請求の範囲】

【請求項1】

デコーディング装置により実行される映像デコーディング方法において、
ビットストリームを介して予測関連情報及びレジデュアル情報を含む映像情報を取得するステップと、
前記レジデュアル情報に基づいて変換係数を導出するステップと、
前記変換係数に基づいてレジデュアルサンプルを生成するステップと、
前記予測関連情報に基づいて予測サンプルを生成するステップと、
前記予測サンプル及び前記レジデュアルサンプルに基づいて復元サンプルを生成するステップであって、前記復元サンプルは、復元ルマサンプル及び復元クロマサンプルを含む、ステップと、
前記復元クロマサンプルの適応的ループフィルタ（ＡＬＦ）手順のためのＡＬＦフィルタ係数を導出するステップと、
前記復元クロマサンプル及び前記ＡＬＦフィルタ係数に基づいてフィルタリングされた復元クロマサンプルを生成するステップと、
クロス－コンポーネントフィルタリングのためのクロス－コンポーネントフィルタ係数を導出するステップと、
前記復元ルマサンプル、前記フィルタリングされた復元クロマサンプル、及び前記クロス－コンポーネントフィルタ係数に基づいて、修正フィルタリングされた復元クロマサンプルを生成するステップと、を含み、
前記映像情報は、シーケンスパラメータセット（ＳＰＳ）及びスライスヘッダ情報を含み、
前記ＳＰＳは、前記ＡＬＦ手順が有効であるか否かに関連するＡＬＦ可用フラグを含み、
前記ＳＰＳが、前記クロス－コンポーネントフィルタリングが有効であるか否かに関連したクロス－コンポーネントＡＬＦ（ＣＣＡＬＦ）可用フラグを含むか否かは、前記ＡＬＦ可用フラグの値に基づいて判断され、
前記ＳＰＳは、前記ＡＬＦ可用フラグの値が１であるとの判断に基づいて、前記ＣＣＡＬＦ可用フラグを含み、
前記ＳＰＳ内の前記ＡＬＦ可用フラグの値が１であるとの判断に基づいて、前記スライスヘッダ情報は、ＡＬＦが有効であるか否かに関連するＡＬＦ可用フラグを含み、
前記スライスヘッダ情報に含まれる前記ＡＬＦ可用フラグの値が１であり、前記ＳＰＳに含まれる前記ＣＣＡＬＦ可用フラグの値が１であるとの判断に基づいて、前記スライスヘッダ情報は、ＣＣＡＬＦが前記フィルタリングされた復元クロマサンプルに対して有効であるか否かに関する情報を含み、
前記ＣＣＡＬＦが前記フィルタリングされた復元クロマサンプルに対して有効であるか否かに関する情報の値が１であることに基づいて、前記スライスヘッダ情報は、前記フィルタリングされた復元クロマサンプルに対する前記ＣＣＡＬＦと関連するアダプテーションパラメータセット（ＡＰＳ）のＩＤ情報を含み、
前記ＡＰＳに含まれるＡＬＦデータは、Ｃｂカラー成分に対するクロス－コンポーネントフィルタの数に関連する情報及びＣｒカラー成分に対するクロス－コンポーネントフィルタの数に関連する情報を含み、
前記Ｃｂカラー成分に対する前記クロス－コンポーネントフィルタの数に関連する前記情報に基づいて、前記ＡＬＦデータは、前記Ｃｂカラー成分に対する前記クロス－コンポーネントフィルタ係数の絶対値に関する情報を含み、
前記Ｃｂカラー成分に対する前記クロス－コンポーネントフィルタ係数の絶対値に関する前記情報に基づいて、前記ＡＬＦデータは、前記Ｃｂカラー成分に対する前記クロス－コンポーネントフィルタ係数の符号に関する情報を含み、
前記Ｃｒカラー成分に対する前記クロス－コンポーネントフィルタの数に関連する前記情報に基づいて、前記ＡＬＦデータは、前記Ｃｒカラー成分に対する前記クロス－コンポーネントフィルタ係数の絶対値に関する情報を含み、
前記Ｃｒカラー成分に対する前記クロス－コンポーネントフィルタ係数の絶対値に関する前記情報に基づいて、前記ＡＬＦデータは、前記Ｃｒカラー成分に対する前記クロス－コンポーネントフィルタ係数の符号に関する情報を含む、映像デコーディング方法。

【請求項2】

エンコーディング装置により実行される映像エンコーディング方法において、
現在ブロックに対する予測サンプルを導出するステップと、
前記予測サンプルに基づいて予測関連情報を生成するステップと、
前記現在ブロックに対するレジデュアルサンプルを生成するステップと、
前記レジデュアルサンプルに対する変換手順に基づいて変換係数を導出するステップと、
前記変換係数に基づいてレジデュアル情報を生成するステップと、
前記レジデュアルサンプル及び前記予測サンプルに基づいて復元サンプルを生成するステップであって、前記復元サンプルは、復元ルマサンプル及び復元クロマサンプルを含む、ステップと、
前記復元サンプルに対する適応的ループフィルタ（ＡＬＦ）関連情報及びクロス－コンポーネントＡＬＦ（ＣＣＡＬＦ）関連情報を生成するステップと、
前記レジデュアル情報、前記予測関連情報、前記ＡＬＦ関連情報、及び前記ＣＣＡＬＦ関連情報を含む映像情報をエンコーディングするステップと、を含み、
前記映像情報は、シーケンスパラメータセット（ＳＰＳ）及びスライスヘッダ情報を含み、
前記ＳＰＳは、ＡＬＦ手順が有効であるか否かに関連するＡＬＦ可用フラグを含み、
前記ＳＰＳが、ＣＣＡＬＦが有効であるか否かに関連したＣＣＡＬＦ可用フラグを含むか否かは、前記ＡＬＦ可用フラグの値に基づいて判断され、
前記ＳＰＳは、前記ＡＬＦ可用フラグの値が１であるとの判断に基づいて、前記ＣＣＡＬＦ可用フラグを含み、
前記ＳＰＳ内の前記ＡＬＦ可用フラグの値が１であるとの判断に基づいて、前記スライスヘッダ情報は、ＡＬＦが有効であるか否かに関連するＡＬＦ可用フラグを含み、
前記スライスヘッダ情報に含まれる前記ＡＬＦ可用フラグの値が１であり、前記ＳＰＳに含まれる前記ＣＣＡＬＦ可用フラグの値が１であるとの判断に基づいて、前記スライスヘッダ情報は、前記ＣＣＡＬＦがフィルタリングされた復元クロマサンプルに対して有効であるか否かに関する情報を含み、
前記ＣＣＡＬＦが前記フィルタリングされた復元クロマサンプルに対して有効であるか否かに関する情報の値が１であることに基づいて、前記スライスヘッダ情報は、前記フィルタリングされた復元クロマサンプルに対する前記ＣＣＡＬＦと関連するアダプテーションパラメータセット（ＡＰＳ）のＩＤ情報を含み、
前記ＡＰＳに含まれるＡＬＦデータは、Ｃｂカラー成分に対するクロス－コンポーネントフィルタの数に関連する情報及びＣｒカラー成分に対するクロス－コンポーネントフィルタの数に関連する情報を含み、
前記Ｃｂカラー成分に対する前記クロス－コンポーネントフィルタの数に関連する前記情報に基づいて、前記ＡＬＦデータは、前記Ｃｂカラー成分に対するクロス－コンポーネントフィルタ係数の絶対値に関する情報を含み、
前記Ｃｂカラー成分に対する前記クロス－コンポーネントフィルタ係数の絶対値に関する前記情報に基づいて、前記ＡＬＦデータは、前記Ｃｂカラー成分に対する前記クロス－コンポーネントフィルタ係数の符号に関する情報を含み、
前記Ｃｒカラー成分に対する前記クロス－コンポーネントフィルタの数に関連する前記情報に基づいて、前記ＡＬＦデータは、前記Ｃｒカラー成分に対する前記クロス－コンポーネントフィルタ係数の絶対値に関する情報を含み、
前記Ｃｒカラー成分に対する前記クロス－コンポーネントフィルタ係数の絶対値に関する前記情報に基づいて、前記ＡＬＦデータは、前記Ｃｒカラー成分に対する前記クロス－コンポーネントフィルタ係数の符号に関する情報を含む、映像エンコーディング方法。

【請求項3】

映像に対するデータの送信方法において、
前記映像に対するビットストリームを生成するステップであって、前記ビットストリームは、現在ブロックに対する予測サンプルを導出し、前記予測サンプルに基づいて予測関連情報を生成し、前記現在ブロックに対するレジデュアルサンプルを生成し、前記レジデュアルサンプルに対する変換手順に基づいて変換係数を導出し、前記変換係数に基づいてレジデュアル情報を生成し、前記レジデュアルサンプル及び前記予測サンプルに基づいて復元サンプルを生成し、前記復元サンプルは、復元ルマサンプル及び復元クロマサンプルを含み、前記復元サンプルに対する適応的ループフィルタ（ＡＬＦ）関連情報及びクロス－コンポーネントＡＬＦ（ＣＣＡＬＦ）関連情報を生成し、前記レジデュアル情報、前記予測関連情報、前記ＡＬＦ関連情報、及び前記ＣＣＡＬＦ関連情報を含む映像情報をエンコーディングすることに基づいて生成される、ステップと、
前記ビットストリームを含む前記データを送信するステップと、を含み、
前記映像情報は、シーケンスパラメータセット（ＳＰＳ）及びスライスヘッダ情報を含み、
前記ＳＰＳは、ＡＬＦ手順が有効であるか否かに関連するＡＬＦ可用フラグを含み、
前記ＳＰＳが、ＣＣＡＬＦが有効であるか否かに関連したＣＣＡＬＦ可用フラグを含むか否かは、前記ＡＬＦ可用フラグの値に基づいて判断され、
前記ＳＰＳは、前記ＡＬＦ可用フラグの値が１であるとの判断に基づいて、前記ＣＣＡＬＦ可用フラグを含み、
前記ＳＰＳ内の前記ＡＬＦ可用フラグの値が１であるとの判断に基づいて、前記スライスヘッダ情報は、ＡＬＦが有効であるか否かに関連するＡＬＦ可用フラグを含み、
前記スライスヘッダ情報に含まれる前記ＡＬＦ可用フラグの値が１であり、前記ＳＰＳに含まれる前記ＣＣＡＬＦ可用フラグの値が１であるとの判断に基づいて、前記スライスヘッダ情報は、前記ＣＣＡＬＦがフィルタリングされた復元クロマサンプルに対して有効であるか否かに関する情報を含み、
前記ＣＣＡＬＦが前記フィルタリングされた復元クロマサンプルに対して有効であるか否かに関する情報の値が１であることに基づいて、前記スライスヘッダ情報は、前記フィルタリングされた復元クロマサンプルに対する前記ＣＣＡＬＦと関連するアダプテーションパラメータセット（ＡＰＳ）のＩＤ情報を含み、
前記ＡＰＳに含まれるＡＬＦデータは、Ｃｂカラー成分に対するクロス－コンポーネントフィルタの数に関連する情報及びＣｒカラー成分に対するクロス－コンポーネントフィルタの数に関連する情報を含み、
前記Ｃｂカラー成分に対する前記クロス－コンポーネントフィルタの数に関連する前記情報に基づいて、前記ＡＬＦデータは、前記Ｃｂカラー成分に対するクロス－コンポーネントフィルタ係数の絶対値に関する情報を含み、
前記Ｃｂカラー成分に対する前記クロス－コンポーネントフィルタ係数の絶対値に関する前記情報に基づいて、前記ＡＬＦデータは、前記Ｃｂカラー成分に対する前記クロス－コンポーネントフィルタ係数の符号に関する情報を含み、
前記Ｃｒカラー成分に対する前記クロス－コンポーネントフィルタの数に関連する前記情報に基づいて、前記ＡＬＦデータは、前記Ｃｒカラー成分に対する前記クロス－コンポーネントフィルタ係数の絶対値に関する情報を含み、
前記Ｃｒカラー成分に対する前記クロス－コンポーネントフィルタ係数の絶対値に関する前記情報に基づいて、前記ＡＬＦデータは、前記Ｃｒカラー成分に対する前記クロス－コンポーネントフィルタ係数の符号に関する情報を含む、データ送信方法。

【発明の詳細な説明】

【技術分野】

【0001】

本文書は、映像コーディング装置及び方法に関する。

【背景技術】

【0002】

近年、４Ｋ又は８Ｋ以上のＵＨＤ（Ｕｌｔｒａ Ｈｉｇｈ Ｄｅｆｉｎｉｔｉｏｎ）映像／ビデオのような高解像度、高品質の映像／ビデオに対する需要が様々な分野で増加している。映像／ビデオデータが高解像度、高品質になるほど、既存の映像／ビデオデータに比べて相対的に送信される情報量又はビット量が増加するので、既存の有無線広帯域回線のような媒体を利用して映像データを送信するか、既存の格納媒体を利用して映像／ビデオデータを格納する場合、送信費用と格納費用が増加される。

【0003】

また、近年、ＶＲ（Ｖｉｒｔｕａｌ Ｒｅａｌｉｔｙ）、ＡＲ（Ａｒｔｉｆｉｃｉａｌ Ｒｅａｌｔｉｙ）コンテンツやホログラムなどの実感メディア（Ｉｍｍｅｒｓｉｖｅ Ｍｅｄｉａ）に対する関心及び需要が増加しており、ゲーム映像のように、現実映像と異なる映像特性を有する映像／ビデオに対する放送が増加している。

【0004】

これにより、上記のような様々な特性を有する高解像度・高品質の映像／ビデオの情報を効果的に圧縮して送信するか、格納し、再生するために高効率の映像／ビデオ圧縮技術が求められる。

【0005】

映像／ビデオ圧縮のためのコーディング手順において、インループフィルタリング手順が実行されることができる。最近、フィルタリングの正確度を改善するための論議が進行中である。

【発明の概要】

【課題を解決するための手段】

【0006】

本文書の一実施例によると、映像／ビデオコーディングの効率を高める方法及び装置を提供する。

【0007】

本文書の一実施例によると、効率的なフィルタリング適用方法及び装置を提供する。

【0008】

本文書の一実施例によると、効率的なＡＬＦ適用方法及び装置を提供する。

【0009】

本文書の一実施例によると、復元ルマサンプルに基づいて復元クロマサンプルに対するフィルタリング手順が実行されることができる。

【0010】

本文書の一実施例によると、復元ルマサンプルに基づいてフィルタリングされた復元クロマサンプルが修正されることができる。

【0011】

本文書の一実施例によると、ＳＰＳでＣＣＡＬＦの可用可否に関する情報がシグナリングされることができる。

【0012】

本文書の一実施例によると、クロス－コンポーネントフィルタ係数の値に関する情報がＡＬＦデータ（一般ＡＬＦデータ又はＣＣＡＬＦデータ）から導出されることができる。

【0013】

本文書の一実施例によると、スライスでクロス－コンポーネントフィルタ係数の導出のためのＡＬＦデータを含むＡＰＳの識別子（ＩＤ）情報がシグナリングされることができる。

【0014】

本文書の一実施例によると、ＣＴＵ（ブロック）単位でＣＣＡＬＦのためのフィルタセットインデックスに関する情報がシグナリングされることができる。

【0015】

本文書の一実施例によると、デコーディング装置により行われるビデオ／映像デコーディング方法を提供する。

【0016】

本文書の一実施例によると、ビデオ／映像デコーディングを行うデコーディング装置を提供する。

【0017】

本文書の一実施例によると、エンコーディング装置により行われるビデオ／映像エンコーディング方法を提供する。

【0018】

本文書の一実施例によると、ビデオ／映像エンコーディングを行うエンコーディング装置を提供する。

【0019】

本文書の一実施例によると、本文書の実施例の少なくとも一つに開示されたビデオ／映像エンコーディング方法によって生成されたエンコーディングされたビデオ／映像情報が格納されたコンピュータ読み取り可能なデジタル格納媒体を提供する。

【0020】

本文書の一実施例によると、デコーディング装置により本文書の実施例の少なくとも一つに開示されたビデオ／映像デコーディング方法を行うように引き起こすエンコーディングされた情報又はエンコーディングされたビデオ／映像情報が格納されたコンピュータ読み取り可能なデジタル格納媒体を提供する。

【発明の効果】

【0021】

本文書の一実施例によると、全般的な映像／ビデオ圧縮効率を上げることができる。

【0022】

本文書の一実施例によると、効率的なフィルタリングを介して主観的／客観的ビジュアル品質を高めることができる。

【0023】

本文書の一実施例によると、ＡＬＦ手順が効率的に実行されることができ、そしてフィルタリング性能が改善されることができる。

【0024】

本文書の一実施例によると、復元ルマサンプルに基づいてフィルタリングされた復元クロマサンプルが修正されてデコーディングされたピクチャのクロマ成分に対する画質及びコーディング正確度が改善されることができる。

【0025】

本文書の一実施例によると、ＣＣＡＬＦ手順が効率的に実行されることができる。

【0026】

本文書の一実施例によると、ＡＬＦ関連情報を効率的にシグナリングできる。

【0027】

本文書の一実施例によると、ＣＣＡＬＦ関連情報を効率的にシグナリングできる。

【0028】

本文書の一実施例によると、ピクチャ、スライス、及び／又はコーディングブロック単位で適応的にＡＬＦ及び／又はＣＣＡＬＦを適用することができる。

【0029】

本文書の一実施例によると、停止映像又は動映像のためのエンコーディング及びデコーディング方法及び装置でＣＣＡＬＦが使われた時、ＣＣＡＬＦに対するフィルタ係数及びブロック又はＣＴＵ単位でオンオフ（ｏｎ／ｏｆｆ）送信方法が改善されて符号化効率が高まることができる。

【図面の簡単な説明】

【0030】

【図1】本文書の実施例に適用されることができるビデオ／映像コーディングシステムの例を概略的に示す。

【図2】本文書の実施例に適用されることができるビデオ／映像エンコーディング装置の構成を概略的に説明する図面である。

【図3】本文書の実施例に適用されることができるビデオ／映像デコーディング装置の構成を概略的に説明する図面である。

【図4】コーディングされた映像／ビデオに対する階層構造を例示的に示す。

【図5】デコーディング装置でのイントラ予測ベースのブロック復元方法を説明するための流れ図である。

【図6】エンコーディング装置でのインター予測ベースのブロック復元方法を説明するための流れ図である。

【図7】デコーディング装置でのインター予測ベースのブロック復元方法を説明するための流れ図である。

【図8】ＡＬＦフィルタ形状の例を示す。

【図9】本文書の一実施例によってフィルタリング手順に適用される仮想境界を説明するための図面である。

【図10】本文書の一実施例によって仮想境界を利用するＡＬＦ手順の一例を示す。

【図11】本文書の一実施例に係るクロス－コンポーネント適応的ループフィルタリング（ｃｒｏｓｓ－ｃｏｍｐｏｎｅｎｔ ａｄａｐｔｉｖｅ ｌｏｏｐ ｆｉｌｔｅｒｉｎｇ、ＣＣ－ＡＬＦ（ＣＣＡＬＦ））手順を説明するための図面である。

【図12】本文書の実施例（ら）に係るビデオ／映像エンコーディング方法及び関連コンポーネントの一例を概略的に示す。

【図13】本文書の実施例（ら）に係るビデオ／映像エンコーディング方法及び関連コンポーネントの一例を概略的に示す。

【図14】本文書の実施例（ら）に係る映像／ビデオデコーディング方法及び関連コンポーネントの一例を概略的に示す。

【図15】本文書の実施例（ら）に係る映像／ビデオデコーディング方法及び関連コンポーネントの一例を概略的に示す。

【図16】本文書に開示された実施例が適用されることができるコンテンツストリーミングシステムの例を示す。

【発明を実施するための形態】

【0031】

本文書の開示は、多様な変更を加えることができ、種々な実施例を有することができ、特定実施例を図面に例示し、詳細に説明しようとする。しかし、これは、本開示を特定実施例に限定しようとするものではない。本文書で使用する用語は、単に特定の実施例を説明するために使用されたものであって、本文書の実施例の技術的思想を限定しようとする意図で使用されるものではない。単数の表現は、文脈上明白に異なるように意味しない限り、複数の表現を含む。本文書において「含む」又は「有する」などの用語は、文書上に記載された特徴、数字、ステップ、動作、構成要素、部品、又はこれらを組み合わせたものが存在することを指定しようとするものであり、一つ又はそれ以上の他の特徴や数字、ステップ、動作、構成要素、部品、又はこれらを組み合わせたものの存在又は付加可能性を予め排除しないことと理解されるべきである。

【0032】

一方、本文書で説明される図面上の各構成は、互いに異なる特徴的な機能に関する説明の都合上、独立的に図示されたものであって、各構成が互いに別個のハードウェアや別個のソフトウェアで具現されるということを意味するものではない。例えば、各構成のうち、二つ以上の構成が結合されて一つの構成をなすこともでき、一つの構成を複数の構成に分けることもできる。各構成が統合及び／又は分離された実施例も本文書の開示範囲に含まれる。

【0033】

本文書は、ビデオ／映像コーディングに関する。例えば、本文書に開示された方法／実施例は、ＶＶＣ（ｖｅｒｓａｔｉｌｅ ｖｉｄｅｏ ｃｏｄｉｎｇ）標準に開示される方法に適用されることができる。また、本文書に開示された方法／実施例は、ＥＶＣ（ｅｓｓｅｎｔｉａｌ ｖｉｄｅｏ ｃｏｄｉｎｇ）標準、ＡＶ１（ＡＯＭｅｄｉａ Ｖｉｄｅｏ １）標準、ＡＶＳ２（２ｎｄ ｇｅｎｅｒａｔｉｏｎ ｏｆ ａｕｄｉｏ ｖｉｄｅｏ ｃｏｄｉｎｇ ｓｔａｎｄａｒｄ）、又は、次世代ビデオ／映像コーディング標準（例えば、Ｈ．２６７又はＨ．２６８等）に開示される方法に適用されることができる。

【0034】

本文書では、ビデオ／映像コーディングに関する多様な実施例を提示し、他の言及がない限り、前記実施例は、互いに組み合わせられて実行されることもできる。

【0035】

本文書において、ビデオ（ｖｉｄｅｏ）は、時間の流れによる一連の映像（ｉｍａｇｅ）の集合を意味することができる。ピクチャ（ｐｉｃｔｕｒｅ）は、一般的に特定時間帯の一つの映像を示す単位を意味し、スライス（ｓｌｉｃｅ）／タイル（ｔｉｌｅ）は、コーディングにおいてピクチャの一部を構成する単位である。スライス／タイルは、一つ以上のＣＴＵ（ｃｏｄｉｎｇ ｔｒｅｅ ｕｎｉｔ）を含むことができる。一つのピクチャは、一つ以上のスライス／タイルで構成されることができる。タイルは、ピクチャ内の特定タイル列及び特定タイル列以内のＣＴＵの四角領域である（Ａ ｔｉｌｅ ｉｓ ａ ｒｅｃｔａｎｇｕｌａｒ ｒｅｇｉｏｎ ｏｆ ＣＴＵｓ ｗｉｔｈｉｎ ａ ｐａｒｔｉｃｕｌａｒ ｔｉｌｅ ｃｏｌｕｍｎ ａｎｄ ａ ｐａｒｔｉｃｕｌａｒ ｔｉｌｅ ｒｏｗ ｉｎ ａ ｐｉｃｔｕｒｅ）。前記タイル列は、ＣＴＵの四角領域であり、前記四角領域は、前記ピクチャの高さと同じ高さを有し、幅は、ピクチャパラメータセット内のシンタックス要素により明示されることができる（Ｔｈｅ ｔｉｌｅ ｃｏｌｕｍｎ ｉｓ ａ ｒｅｃｔａｎｇｕｌａｒ ｒｅｇｉｏｎ ｏｆ ＣＴＵｓ ｈａｖｉｎｇ ａ ｈｅｉｇｈｔ ｅｑｕａｌ ｔｏ ｔｈｅ ｈｅｉｇｈｔ ｏｆ ｔｈｅ ｐｉｃｔｕｒｅ ａｎｄ ａ ｗｉｄｔｈ ｓｐｅｃｉｆｉｅｄ ｂｙ ｓｙｎｔａｘ ｅｌｅｍｅｎｔｓ ｉｎ ｔｈｅ ｐｉｃｔｕｒｅ ｐａｒａｍｅｔｅｒ ｓｅｔ）。前記タイル行は、ＣＴＵの四角領域であり、前記四角領域は、ピクチャパラメータセット内のシンタックス要素により明示される幅を有し、高さは、前記ピクチャの高さと同じである（Ｔｈｅ ｔｉｌｅ ｒｏｗ ｉｓ ａ ｒｅｃｔａｎｇｕｌａｒ ｒｅｇｉｏｎ ｏｆ ＣＴＵｓ ｈａｖｉｎｇ ａ ｈｅｉｇｈｔ ｓｐｅｃｉｆｉｅｄ ｂｙ ｓｙｎｔａｘ ｅｌｅｍｅｎｔｓ ｉｎ ｔｈｅ ｐｉｃｔｕｒｅ ｐａｒａｍｅｔｅｒ ｓｅｔ ａｎｄ ａ ｗｉｄｔｈ ｅｑｕａｌ ｔｏ ｔｈｅ ｗｉｄｔｈ ｏｆ ｔｈｅ ｐｉｃｔｕｒｅ）。タイルスキャンは、ピクチャをパーティショニングするＣＴＵの特定の順次的オーダリングを示すことができ、前記ＣＴＵは、タイル内のＣＴＵラスタースキャンで連続的に整列されることができ、ピクチャ内のタイルは、前記ピクチャの前記タイルのラスタースキャンで連続的に整列されることができる（Ａ ｔｉｌｅ ｓｃａｎ ｉｓ ａ ｓｐｅｃｉｆｉｃ ｓｅｑｕｅｎｔｉａｌ ｏｒｄｅｒｉｎｇ ｏｆ ＣＴＵｓ ｐａｒｔｉｔｉｏｎｉｎｇ ａ ｐｉｃｔｕｒｅ ｉｎ ｗｈｉｃｈ ｔｈｅ ＣＴＵｓ ａｒｅ ｏｒｄｅｒｅｄ ｃｏｎｓｅｃｕｔｉｖｅｌｙ ｉｎ ＣＴＵ ｒａｓｔｅｒ ｓｃａｎ ｉｎ ａ ｔｉｌｅ ｗｈｅｒｅａｓ ｔｉｌｅｓ ｉｎ ａ ｐｉｃｔｕｒｅ ａｒｅ ｏｒｄｅｒｅｄ ｃｏｎｓｅｃｕｔｉｖｅｌｙ ｉｎ ａ ｒａｓｔｅｒ ｓｃａｎ ｏｆ ｔｈｅ ｔｉｌｅｓ ｏｆ ｔｈｅ ｐｉｃｔｕｒｅ）。スライスは、単一ＮＡＬユニットに排他的に含まれることができる、整数個の完全なタイル又はピクチャのタイル内の整数個の連続的な完全なＣＴＵ行を含むことができる。（Ａ ｓｌｉｃｅ ｉｎｃｌｕｄｅｓ ａｎ ｉｎｔｅｇｅｒ ｎｕｍｂｅｒ ｏｆ ｃｏｍｐｌｅｔｅ ｔｉｌｅｓ ｏｒ ａｎ ｉｎｔｅｇｅｒ ｎｕｍｂｅｒ ｏｆ ｃｏｎｓｅｃｕｔｉｖｅ ｃｏｍｐｌｅｔｅ ＣＴＵ ｒｏｗｓ ｗｉｔｈｉｎ ａ ｔｉｌｅ ｏｆ ａ ｐｉｃｔｕｒｅ ｔｈａｔ ｍａｙ ｂｅ ｅｘｃｌｕｓｉｖｅｌｙ ｃｏｎｔａｉｎｅｄ ｉｎ ａ ｓｉｎｇｌｅ ＮＡＬ ｕｎｉｔ）。

【0036】

一方、一つのピクチャは、二つ以上のサブピクチャに区分されることができる。サブピクチャは、ピクチャ内の一つ以上のスライスの四角領域である（ａｎ ｒｅｃｔａｎｇｕｌａｒ ｒｅｇｉｏｎ ｏｆ ｏｎｅ ｏｒ ｍｏｒｅ ｓｌｉｃｅｓ ｗｉｔｈｉｎ ａ ｐｉｃｔｕｒｅ）。

【0037】

ピクセル（ｐｉｘｅｌ）又はペル（ｐｅｌ）は、一つのピクチャ（又は、映像）を構成する最小の単位を意味することができる。また、ピクセルに対応する用語として「サンプル（ｓａｍｐｌｅ）」が使用されることができる。サンプルは、一般的にピクセル又はピクセルの値を示すことができ、ルマ（ｌｕｍａ）成分のピクセル／ピクセル値のみを示すこともでき、クロマ（ｃｈｒｏｍａ）成分のピクセル／ピクセル値のみを示すこともできる。

【0038】

ユニット（ｕｎｉｔ）は、映像処理の基本単位を示すことができる。ユニットは、ピクチャの特定領域及び当該領域に関連した情報のうち少なくとも一つを含むことができる。一つのユニットは、一つのルマブロック及び二つのクロマ（例えば、ｃｂ、ｃｒ）ブロックを含むことができる。ユニットは、場合によって、ブロック（ｂｌｏｃｋ）又は領域（ａｒｅａ）などの用語と混用して使用されることができる。一般的な場合、Ｍ×Ｎブロックは、Ｍ個の列とＮ個の行からなるサンプル（又は、サンプルアレイ）、又は変換係数（ｔｒａｎｓｆｏｒｍ ｃｏｅｆｆｉｃｉｅｎｔ）の集合（又は、アレイ）を含むことができる。

【0039】

本文書において、「Ａ又はＢ（Ａ ｏｒ Ｂ）」は、「ただＡ」、「ただＢ」、又は「ＡとＢの両方とも」を意味することができる。他の表現としては、本文書において、「Ａ又はＢ（Ａ ｏｒ Ｂ）」は、「Ａ及び／又はＢ（Ａ ａｎｄ／ｏｒ Ｂ）」と解釈されることができる。例えば、本文書において、「Ａ、Ｂ又はＣ（Ａ，Ｂ ｏｒ Ｃ）」は、「ただＡ」、「ただＢ」、「ただＣ」、又は「Ａ、Ｂ及びＣの任意の全ての組み合わせ（ａｎｙ ｃｏｍｂｉｎａｔｉｏｎ ｏｆ Ａ，Ｂ ａｎｄ Ｃ）」を意味することができる。

【0040】

本文書で使用されるスラッシュ（／）や休止符（ｃｏｍｍａ）は、「及び／又は（ａｎｄ／ｏｒ）」を意味することができる。例えば、「Ａ／Ｂ」は、「Ａ及び／又はＢ」を意味することができる。これによって、「Ａ／Ｂ」は、「ただＡ」、「ただＢ」、又は「ＡとＢの両方とも」を意味することができる。例えば、「Ａ，Ｂ，Ｃ」は、「Ａ、Ｂ又はＣ」を意味することができる。

【0041】

本文書において、「少なくとも一つのＡ及びＢ（ａｔ ｌｅａｓｔ ｏｎｅ ｏｆ Ａ ａｎｄ Ｂ）」は、「ただＡ」、「ただＢ」又は「ＡとＢの両方とも」を意味することができる。また、本文書において、「少なくとも一つのＡ又はＢ（ａｔ ｌｅａｓｔ ｏｎｅ ｏｆ Ａ ｏｒ Ｂ）」や「少なくとも一つのＡ及び／又はＢ（ａｔ ｌｅａｓｔ ｏｎｅ ｏｆ Ａ ａｎｄ／ｏｒ Ｂ）」という表現は、「少なくとも一つのＡ及びＢ（ａｔ ｌｅａｓｔ ｏｎｅ ｏｆ Ａ ａｎｄ Ｂ）」と同じく解釈されることができる。

【0042】

また、本文書において、「少なくとも一つのＡ、Ｂ及びＣ（ａｔ ｌｅａｓｔ ｏｎｅ ｏｆ Ａ，Ｂ ａｎｄ Ｃ）」は、「ただＡ」、「ただＢ」、「ただＣ」、又は「Ａ、Ｂ及びＣの任意の全ての組み合わせ（ａｎｙ ｃｏｍｂｉｎａｔｉｏｎ ｏｆ Ａ，Ｂ ａｎｄ Ｃ）」を意味することができる。また、「少なくとも一つのＡ、Ｂ又はＣ（ａｔ ｌｅａｓｔ ｏｎｅ ｏｆ Ａ，Ｂ ｏｒ Ｃ）」や「少なくとも一つのＡ、Ｂ及び／又はＣ（ａｔ ｌｅａｓｔ ｏｎｅ ｏｆ Ａ，Ｂ ａｎｄ／ｏｒ Ｃ）」は、「少なくとも一つのＡ、Ｂ及びＣ（ａｔ ｌｅａｓｔ ｏｎｅ ｏｆ Ａ，Ｂ ａｎｄ Ｃ）」を意味することができる。

【0043】

また、本文書で使われる括弧は、「例えば（ｆｏｒ ｅｘａｍｐｌｅ）」を意味することができる。具体的に、「予測（イントラ予測）」で表示された場合、「予測」の一例として「イントラ予測」が提案されたものである。他の表現としては、本文書の「予測」は、「イントラ予測」に制限（ｌｉｍｉｔ）されるものではなく、「イントラ予測」が「予測」の一例として提案されたものである。また、「予測（即ち、イントラ予測）」で表示された場合にも、「予測」の一例として「イントラ予測」が提案されたものである。

【0044】

本文書において、一つの図面内で個別的に説明される技術的特徴は、個別的に具現されてもよく、同時に具現されてもよい。

【0045】

以下、添付図面を参照して、本文書の実施例を説明しようとする。以下、図面上の同じ構成要素に対しては、同じ参照符号を使用し、同じ構成要素に対して重複した説明は省略する。

【0046】

図１は、本文書が適用されることができるビデオ／映像コーディングシステムの例を概略的に示す。

【0047】

図１に示すように、ビデオ／映像コーディングシステムはソースデバイス及び第受信デバイスを備えることができる。ソースデバイスは、エンコーディングされたビデオ（ｖｉｄｅｏ）／映像（ｉｍａｇｅ）情報又はデータをファイル又はストリーミング形態でデジタル格納媒体又はネットワークを介して受信デバイスに伝達することができる。

【0048】

前記ソースデバイスは、ビデオソース、エンコーディング装置、送信部を備えることができる。前記受信デバイスは、受信部、デコーディング装置、及びレンダラを備えることができる。前記エンコーディング装置は、ビデオ／映像エンコーディング装置と呼ばれることができ、前記デコーディング装置は、ビデオ／映像デコーディング装置と呼ばれることができる。送信機は、エンコーディング装置に備えられることができる。受信機は、デコーディング装置に備えられることができる。レンダラは、ディスプレイ部を備えることができ、ディスプレイ部は、別個のデバイス又は外部コンポーネントで構成されることもできる。

【0049】

ビデオソースは、ビデオ／映像のキャプチャ、合成、又は生成過程などを介してビデオ／映像を取得することができる。ビデオソースは、ビデオ／映像キャプチャデバイス及び／又はビデオ／映像生成デバイスを含むことができる。ビデオ／映像キャプチャデバイスは、例えば、一つ以上のカメラ、以前にキャプチャされたビデオ／映像を含むビデオ／映像アーカイブなどを含むことができる。ビデオ／映像生成デバイスは、例えば、コンピュータ、タブレット、及びスマートフォンなどを含むことができ、（電子的に）ビデオ／映像を生成することができる。例えば、コンピュータなどを介して仮想のビデオ／映像が生成され得るし、この場合、関連データが生成される過程にビデオ／映像キャプチャ過程が代替されることができる。

【0050】

エンコーディング装置は、入力ビデオ／映像をエンコーディングすることができる。エンコーディング装置は、圧縮及びコーディング効率のために、予測、変換、量子化など、一連の手順を行うことができる。エンコーディングされたデータ（エンコーディングされたビデオ／映像情報）は、ビットストリーム（ｂｉｔｓｔｒｅａｍ）形態で出力されることができる。

【0051】

送信部は、ビットストリーム形態で出力されたエンコーディングされたビデオ／映像情報又はデータをファイル又はストリーミング形態でデジタル格納媒体又はネットワークを介して受信デバイスの受信部に伝達することができる。デジタル格納媒体は、ＵＳＢ、ＳＤ、ＣＤ、ＤＶＤ、ブルーレイ、ＨＤＤ、ＳＳＤなど、様々な格納媒体を含むことができる。送信部は、予め決められたファイルフォーマットを介してメディアファイルを生成するためのエレメントを含むことができ、放送／通信ネットワークを介しての送信のためのエレメントを含むことができる。受信部は、前記ビットストリームを受信／抽出してデコーディング装置に伝達することができる。

【0052】

デコーディング装置は、エンコーディング装置の動作に対応する逆量子化、逆変換、予測など、一連の手順を行ってビデオ／映像をデコーディングすることができる。

【0053】

レンダラは、デコーディングされたビデオ／映像をレンダリングすることができる。レンダリングされたビデオ／映像は、ディスプレイ部を介してディスプレイされることができる。

【0054】

図２は、本文書が適用されることができるビデオ／映像エンコーディング装置の構成を概略的に説明する図面である。以下、ビデオエンコーディング装置というのは、映像エンコーディング装置を含むことができる。

【0055】

図２に示すように、エンコーディング装置２００は、映像分割部（ｉｍａｇｅ ｐａｒｔｉｔｉｏｎｅｒ）２１０、予測部（ｐｒｅｄｉｃｔｏｒ）２２０、レジデュアル処理部（ｒｅｓｉｄｕａｌ ｐｒｏｃｅｓｓｏｒ）２３０、エントロピーエンコーディング部（ｅｎｔｒｏｐｙ ｅｎｃｏｄｅｒ）２４０、加算部（ａｄｄｅｒ）２５０、フィルタリング部（ｆｉｌｔｅｒ）２６０、及びメモリ（ｍｅｍｏｒｙ）２７０を備えて構成されることができる。予測部２２０は、インター予測部２２１及びイントラ予測部２２２を備えることができる。レジデュアル処理部２３０は、変換部（ｔｒａｎｓｆｏｒｍｅｒ）２３２、量子化部（ｑｕａｎｔｉｚｅｒ）２３３、逆量子化部（ｄｅｑｕａｎｔｉｚｅｒ）２３４、逆変換部（ｉｎｖｅｒｓｅ ｔｒａｎｓｆｏｒｍｅｒ）２３５を備えることができる。レジデュアル処理部２３０は、減算部（ｓｕｂｔｒａｃｔｏｒ、２３１）をさらに備えることができる。加算部２５０は、復元部（ｒｅｃｏｎｓｔｒｕｃｔｏｒ）又は復元ブロック生成部（ｒｅｃｏｎｔｒｕｃｔｇｅｄ ｂｌｏｃｋ ｇｅｎｅｒａｔｏｒ）と呼ばれることができる。上述した映像分割部２１０、予測部２２０、レジデュアル処理部２３０、エントロピーエンコーディング部２４０、加算部２５０、及びフィルタリング部２６０は、実施形態によって一つ以上のハードウェアコンポーネント（例えば、エンコーダチップセット又はプロセッサ）によって構成されることができる。また、メモリ２７０は、ＤＰＢ（ｄｅｃｏｄｅｄ ｐｉｃｔｕｒｅ ｂｕｆｆｅｒ）を備えることができ、デジタル格納媒体によって構成されることもできる。前記ハードウェアコンポーネントは、メモリ２７０を内／外部コンポーネントとしてさらに備えることもできる。

【0056】

映像分割部２１０は、エンコーディング装置２００に入力された入力映像（又は、ピクチャ、フレーム）を一つ以上の処理ユニット（ｐｒｏｃｅｓｓｉｎｇ ｕｎｉｔ）に分割することができる。一例として、前記処理ユニットは、コーディングユニット（ｃｏｄｉｎｇ ｕｎｉｔ、ＣＵ）と呼ばれることができる。この場合、コーディングユニットは、コーディングツリーユニット（ｃｏｄｉｎｇ ｔｒｅｅ ｕｎｉｔ、ＣＴＵ）又は最大コーディングユニット（ｌａｒｇｅｓｔ ｃｏｄｉｎｇ ｕｎｉｔ、ＬＣＵ）からＱＴＢＴＴＴ（Ｑｕａｄ－ｔｒｅｅ ｂｉｎａｒｙ－ｔｒｅｅ ｔｅｒｎａｒｙ－ｔｒｅｅ）構造によって再帰的に（ｒｅｃｕｒｓｉｖｅｌｙ）分割されることができる。例えば、一つのコーディングユニットは、クアッドツリー構造、バイナリツリー構造、及び／又はターナリ構造に基づいて下位（ｄｅｅｐｅｒ）デプスの複数のコーディングユニットに分割されることができる。この場合、例えば、クアッドツリー構造が先に適用され、バイナリツリー構造及び／又はターナリ構造がその後に適用されることができる。又は、バイナリツリー構造が先に適用されることもできる。それ以上分割されない最終コーディングユニットに基づいて本開示に係るコーディング手順が行われ得る。この場合、映像特性によるコーディング効率などに基づいて、最大コーディングユニットが最終コーディングユニットとして使用されることができ、又は、必要に応じてコーディングユニットは、再帰的に（ｒｅｃｕｒｓｉｖｅｌｙ）もっと下位デプスのコーディングユニットに分割されて最適のサイズのコーディングユニットが最終コーディングユニットとして使用されることができる。ここで、コーディング手順とは、後述する予測、変換、及び復元などの手順を含むことができる。他の例として、前記処理ユニットは、予測ユニット（ＰＵ：Ｐｒｅｄｉｃｔｉｏｎ Ｕｎｉｔ）又は変換ユニット（ＴＵ：Ｔｒａｎｓｆｏｒｍ Ｕｎｉｔ）をさらに備えることができる。この場合、前記予測ユニット及び前記変換ユニットは、各々上述した最終コーディングユニットから分割又はパーティショニングされることができる。前記予測ユニットは、サンプル予測の単位であることができ、前記変換ユニットは、変換係数を導く単位及び／又は変換係数からレジデュアル信号（ｒｅｓｉｄｕａｌ ｓｉｇｎａｌ）を導く単位であることができる。

【0057】

ユニットは、場合によって、ブロック（ｂｌｏｃｋ）又は領域（ａｒｅａ）などの用語と混用して使用されることができる。一般的な場合、Ｍ×Ｎブロックは、Ｍ個の列とＮ個の行からなるサンプル又は変換係数（ｔｒａｎｓｆｏｒｍ ｃｏｅｆｆｉｃｉｅｎｔ）等の集合を示すことができる。サンプルは、一般的にピクセル又はピクセルの値を示すことができ、輝度（ｌｕｍａ）成分のピクセル／ピクセル値のみを示すことができ、彩度（ｃｈｒｏｍａ）成分のピクセル／ピクセル値のみを示すこともできる。サンプルは、一つのピクチャ（又は、映像）をピクセル（ｐｉｘｅｌ）又はペル（ｐｅｌ）に対応する用語として使用することができる。

【0058】

減算部２３１は、入力映像信号（原本ブロック、原本サンプル又は原本サンプルアレイ）で予測部２２０から出力された予測信号（予測されたブロック、予測サンプル又は予測サンプルアレイ）を減算してレジデュアル信号（レジデュアルブロック、レジデュアルサンプル又はレジデュアルサンプルアレイ）を生成することができ、生成されたレジデュアル信号は、変換部２３２に送信される。予測部２２０は、処理対象ブロック（以下、現在ブロックという）に対する予測を行い、前記現在ブロックに対する予測サンプルを含む予測されたブロック（ｐｒｅｄｉｃｔｅｄ ｂｌｏｃｋ）を生成することができる。予測部２２０は、現在ブロック又はＣＵ単位でイントラ予測が適用されるか、又はインター予測が適用されるか決定することができる。予測部は、各予測モードについての説明で後述するように、予測モード情報など、予測に関する様々な情報を生成してエントロピーエンコーディング部２４０に伝達することができる。予測に関する情報は、エントロピーエンコーディング部２４０でエンコーディングされてビットストリーム形態で出力されることができる。

【0059】

イントラ予測部２２２は、現在ピクチャ内のサンプルを参照して現在ブロックを予測できる。前記参照されるサンプルは、予測モードによって前記現在ブロックの隣接（ｎｅｉｇｈｂｏｒ）に位置することができ、又は、離れて位置することもできる。イントラ予測で予測モードは、複数の非方向性モードと複数の方向性モードとを含むことができる。非方向性モードは、例えば、ＤＣモード及びプラナーモード（Ｐｌａｎａｒモード）を含むことができる。方向性モードは、予測方向の細かい程度によって、例えば、３３個の方向性予測モード又は６５個の方向性予測モードを含むことができる。ただし、これは、例示であり、設定によってそれ以上又はそれ以下の個数の方向性予測モードが使用され得る。イントラ予測部２２２は、隣接ブロックに適用された予測モードを用いて、現在ブロックに適用される予測モードを決定することもできる。

【0060】

インター予測部２２１は、参照ピクチャ上で動きベクトルにより特定される参照ブロック（参照サンプルアレイ）に基づいて、現在ブロックに対する予測されたブロックを導くことができる。このとき、インター予測モードで送信される動き情報の量を減らすために、隣接ブロックと現在ブロックとの間の動き情報の相関性に基づいて、動き情報をブロック、サブブロック、又はサンプル単位で予測することができる。前記動き情報は、動きベクトル及び参照ピクチャインデックスを含むことができる。前記動き情報は、インター予測方向（Ｌ０予測、Ｌ１予測、Ｂｉ予測等）情報をさらに含むことができる。インター予測の場合に、隣接ブロックは、現在ピクチャ内に存在する空間的隣接ブロック（ｓｐａｔｉａｌ ｎｅｉｇｈｂｏｒｉｎｇ ｂｌｏｃｋ）と参照ピクチャに存在する時間的隣接ブロック（ｔｅｍｐｏｒａｌ ｎｅｉｇｈｂｏｒｉｎｇ ｂｌｏｃｋ）とを含むことができる。前記参照ブロックを含む参照ピクチャと前記時間的隣接ブロックを含む参照ピクチャとは同じであることができ、異なることもできる。前記時間的隣接ブロックは、同一位置参照ブロック（ｃｏｌｌｏｃａｔｅｄ ｒｅｆｅｒｅｎｃｅ ｂｌｏｃｋ）、同一位置ＣＵ（ｃｏｌ ＣＵ）などの名前で呼ばれることができ、前記時間的隣接ブロックを含む参照ピクチャは、同一位置ピクチャ（ｃｏｌｌｏｃａｔｅｄ ｐｉｃｔｕｒｅ、ｃｏｌＰｉｃ）と呼ばれることもできる。例えば、インター予測部２２１は、隣接ブロックに基づいて動き情報候補リストを構成し、前記現在ブロックの動きベクトル及び／又は参照ピクチャインデックスを導出するために、どの候補が使用されるかを指示する情報を生成することができる。様々な予測モードに基づいてインター予測が行われ得るし、例えば、スキップモードとマージモードとの場合に、インター予測部２２１は、隣接ブロックの動き情報を現在ブロックの動き情報として利用することができる。スキップモードの場合、マージモードとは異なり、レジデュアル信号が送信されないことがある。動き情報予測（ｍｏｔｉｏｎ ｖｅｃｔｏｒ ｐｒｅｄｉｃｔｉｏｎ、ＭＶＰ）モードの場合、隣接ブロックの動きベクトルを動きベクトル予測子（ｍｏｔｉｏｎ ｖｅｃｔｏｒ ｐｒｅｄｉｃｔｏｒ）として用い、動きベクトル差分（ｍｏｔｉｏｎ ｖｅｃｔｏｒ ｄｉｆｆｅｒｅｎｃｅ）をシグナリングすることにより、現在ブロックの動きベクトルを指示することができる。

【0061】

予測部２２０は、後述する様々な予測方法に基づいて予測信号を生成することができる。例えば、予測部は、一つのブロックに対する予測のために、イントラ予測又はインター予測を適用することができるだけでなく、イントラ予測とインター予測とを同時に適用することができる。これは、ｃｏｍｂｉｎｅｄ ｉｎｔｅｒ ａｎｄ ｉｎｔｒａ ｐｒｅｄｉｃｔｉｏｎ（ＣＩＩＰ）と呼ばれることができる。また、予測部は、ブロックに対する予測のために、イントラブロックコピー（ｉｎｔｒａ ｂｌｏｃｋ ｃｏｐｙ、ＩＢＣ）を実行することができる。前記イントラブロックコピーは、例えば、ＳＣＣ（ｓｃｒｅｅｎ ｃｏｎｔｅｎｔ ｃｏｄｉｎｇ）などのように、ゲームなどのコンテンツ映像／動画コーディングのために使用されることができる。ＩＢＣは、基本的に現在ピクチャ内で予測を行うが、現在ピクチャ内で参照ブロックを導出する点においてインター予測と同様に行われることができる。すなわち、ＩＢＣは、本文書において説明されるインター予測技法のうち、少なくとも一つを用いることができる。

【0062】

インター予測部２２１及び／又はイントラ予測部２２２により生成された予測信号は、復元信号を生成するために用いられるか、レジデュアル信号を生成するために用いられることができる。変換部２３２は、レジデュアル信号に変換技法を適用して、変換係数（ｔｒａｎｓｆｏｒｍ ｃｏｅｆｆｉｃｉｅｎｔｓ）を生成することができる。例えば、変換技法は、ＤＣＴ（Ｄｉｓｃｒｅｔｅ Ｃｏｓｉｎｅ Ｔｒａｎｓｆｏｒｍ）、ＤＳＴ（Ｄｉｓｃｒｅｔｅ Ｓｉｎｅ Ｔｒａｎｓｆｏｒｍ）、ＧＢＴ（Ｇｒａｐｈ－Ｂａｓｅｄ Ｔｒａｎｓｆｏｒｍ）、又はＣＮＴ（Ｃｏｎｄｉｔｉｏｎａｌｌｙ Ｎｏｎ－ｌｉｎｅａｒ Ｔｒａｎｓｆｏｒｍ） などを含むことができる。ここで、ＧＢＴは、ピクセル間の関係情報をグラフで表現するという際に、このグラフから得られた変換を意味する。ＣＮＴは、以前に復元された全てのピクセル（ａｌｌ ｐｒｅｖｉｏｕｓｌｙ ｒｅｃｏｎｓｔｒｕｃｔｅｄ ｐｉｘｅｌ）を用いて予測信号を生成し、それに基づいて取得される変換を意味する。また、変換過程は正方形の同じサイズを有するピクセルブロックに適用されてもよく、正方形ではない可変サイズのブロックに適用されてもよい。

【0063】

量子化部２３３は、変換係数を量子化してエントロピーエンコーディング部２４０に送信され、エントロピーエンコーディング部２４０は、量子化された信号（量子化された変換係数に関する情報）をエンコーディングしてビットストリームに出力することができる。前記量子化された変換係数に関する情報は、レジデュアル情報と呼ばれることができる。量子化部２３３は、係数スキャン順序（ｓｃａｎ ｏｒｄｅｒ）に基づいてブロック形態の量子化された変換係数を１次元ベクトル形態で再整列することができ、前記１次元ベクトル形態の量子化された変換係数に基づいて前記量子化された変換係数に関する情報を生成することもできる。エントロピーエンコーディング部２４０は、例えば、指数ゴロム（ｅｘｐｏｎｅｎｔｉａｌ Ｇｏｌｏｍｂ）、ＣＡＶＬＣ（ｃｏｎｔｅｘｔ－ａｄａｐｔｉｖｅ ｖａｒｉａｂｌｅ ｌｅｎｇｔｈ ｃｏｄｉｎｇ）、ＣＡＢＡＣ（ｃｏｎｔｅｘｔ－ａｄａｐｔｉｖｅ ｂｉｎａｒｙ ａｒｉｔｈｍｅｔｉｃ ｃｏｄｉｎｇ）などのような様々なエンコーディング方法を行うことができる。エントロピーエンコーディング部２４０は、量子化された変換係数の他に、ビデオ／イメージ復元に必要な情報（例えば、シンタックス要素（ｓｙｎｔａｘ ｅｌｅｍｅｎｔｓ）の値等）を共に又は別にエンコーディングすることもできる。エンコーディングされた情報（例えば、エンコーディングされたビデオ／映像情報）は、ビットストリーム形態でＮＡＬ（ｎｅｔｗｏｒｋ ａｂｓｔｒａｃｔｉｏｎ ｌａｙｅｒ）ユニット単位で送信又は格納されることができる。前記ビデオ／映像情報は、アダプテーションパラメータセット（ＡＰＳ）、ピクチャパラメータセット（ＰＰＳ）、シーケンスパラメータセット（ＳＰＳ）、又はビデオパラメータセット（ＶＰＳ）等、様々なパラメータセットに関する情報をさらに含むことができる。また、前記ビデオ／映像情報は、一般制限情報（ｇｅｎｅｒａｌ ｃｏｎｓｔｒａｉｎｔ ｉｎｆｏｒｍａｔｉｏｎ）をさらに含むことができる。本文書において、後述されるシグナリング／送信される情報及び／又はシンタックス要素は、上述したエンコーディング手順を介してエンコーディングされて前記ビットストリームに含まれることができる。前記ビットストリームは、ネットワークを介して送信されることができ、又はデジタル格納媒体に格納されることができる。ここで、ネットワークは、放送網及び／又は通信網などを含むことができ、デジタル格納媒体は、ＵＳＢ、ＳＤ、ＣＤ、ＤＶＤ、ブルーレイ、ＨＤＤ、ＳＳＤなど、様々な格納媒体を含むことができる。エントロピーエンコーディング部２４０から出力された信号は、送信する送信部（図示せず）及び／又は格納する格納部（図示せず）がエンコーディング装置２００の内／外部エレメントとして構成されることができ、又は送信部は、エントロピーエンコーディング部２４０に含まれることもできる。

【0064】

量子化部２３３から出力された量子化された変換係数は、予測信号を生成するために用いられることができる。例えば、量子化された変換係数に逆量子化部２３４及び逆変換部２３５を介して逆量子化及び逆変換を適用することにより、レジデュアル信号（レジデュアルブロック又はレジデュアルサンプル）を復元できる。加算部１５５は、復元されたレジデュアル信号を予測部２２０から出力された予測信号に加えることにより、復元（ｒｅｃｏｎｓｔｒｕｃｔｅｄ）信号（復元ピクチャ、復元ブロック、復元サンプル又は復元サンプルアレイ）が生成され得る。スキップモードが適用された場合のように、処理対象ブロックに対するレジデュアルがない場合、予測されたブロックが復元ブロックとして使用されることができる。生成された復元信号は、現在ピクチャ内の次の処理対象ブロックのイントラ予測のために使用されることができ、後述するように、フィルタリングを経て次のピクチャのインター予測のために使用されることもできる。

【0065】

一方、ピクチャエンコーディング及び／又は復元過程でＬＭＣＳ（ｌｕｍａ ｍａｐｐｉｎｇ ｗｉｔｈ ｃｈｒｏｍａ ｓｃａｌｉｎｇ）が適用されることもできる。

【0066】

フィルタリング部２６０は、復元信号にフィルタリングを適用して主観的／客観的画質を向上させることができる。例えば、フィルタリング部２６０は、復元ピクチャに様々なフィルタリング方法を適用して修正された（ｍｏｄｉｆｉｅｄ）復元ピクチャを生成することができ、前記修正された復元ピクチャをメモリ２７０、具体的に、メモリ２７０のＤＰＢに格納することができる。前記様々なフィルタリング方法は、例えば、デブロッキングフィルタリング、サンプル適応的オフセット（ｓａｍｐｌｅ ａｄａｐｔｉｖｅ ｏｆｆｓｅｔ、ＳＡＯ）、適応的ループフィルタ（ａｄａｐｔｉｖｅ ｌｏｏｐ ｆｉｌｔｅｒ）、両方向フィルタ（ｂｉｌａｔｅｒａｌ ｆｉｌｔｅｒ）などを含むことができる。フィルタリング部２６０は、各フィルタリング方法についての説明で後述するように、フィルタリングに関する様々な情報を生成してエントロピーエンコーディング部２４０に伝達することができる。フィルタリングに関する情報は、エントロピーエンコーディング部２４０でエンコーディングされてビットストリーム形態で出力されることができる。

【0067】

メモリ２７０に送信された修正された復元ピクチャは、インター予測部２２１で参照ピクチャとして使用されることができる。エンコーディング装置は、これを介してインター予測が適用される場合、エンコーディング装置１００とデコーディング装置における予測ミスマッチを避けることができ、符号化効率も向上させることができる。

【0068】

メモリ２７０のＤＰＢは、修正された復元ピクチャをインター予測部２２１における参照ピクチャとして使用するために格納することができる。メモリ２７０は、現在ピクチャ内の動き情報が導出された（又は、エンコーディングされた）ブロックの動き情報及び／又は既に復元されたピクチャ内のブロックの動き情報を格納することができる。前記格納された動き情報は、空間的隣接ブロックの動き情報又は時間的隣接ブロックの動き情報として活用するために、インター予測部２２１に伝達することができる。メモリ２７０は、現在ピクチャ内の復元されたブロックの復元サンプルを格納することができ、イントラ予測部２２２に伝達することができる。

【0069】

図３は、本文書が適用されることができるビデオ／映像デコーディング装置の構成を概略的に説明する図面である。

【0070】

図３に示すように、デコーディング装置３００は、エントロピーデコーディング部（ｅｎｔｒｏｐｙ ｄｅｃｏｄｅｒ）３１０、レジデュアル処理部（ｒｅｓｉｄｕａｌ ｐｒｏｃｅｓｓｏｒ）３２０、予測部（ｐｒｅｄｉｃｔｏｒ）３３０、加算部（ａｄｄｅｒ）３４０、フィルタリング部（ｆｉｌｔｅｒ）３５０、及びメモリ（ｍｅｍｏｅｒｙ）３６０を備えて構成されることができる。予測部３３０は、インター予測部３３１及びイントラ予測部３３２を備えることができる。レジデュアル処理部３２０は、逆量子化部（ｄｅｑｕａｎｔｉｚｅｒ）３２１及び逆変換部（ｉｎｖｅｒｓｅ ｔｒａｎｓｆｏｒｍｅｒ）３２１を備えることができる。上述したエントロピーデコーディング部３１０、レジデュアル処理部３２０、予測部３３０、加算部３４０、及びフィルタリング部３５０は、実施形態によって一つのハードウェアコンポーネント（例えば、デコーダチップセット又はプロセッサ）により構成されることができる。また、メモリ３６０は、ＤＰＢ（ｄｅｃｏｄｅｄ ｐｉｃｔｕｒｅ ｂｕｆｆｅｒ）を備えることができ、デジタル格納媒体により構成されることもできる。前記ハードウェアコンポーネントは、メモリ３６０を内／外部コンポーネントとしてさらに備えることもできる。

【0071】

ビデオ／映像情報を含むビットストリームが入力されれば、デコーディング装置３００は、図３のエンコーディング装置でビデオ／映像情報が処理されたプロセスに対応して映像を復元できる。例えば、デコーディング装置３００は、前記ビットストリームから取得したブロック分割関連情報に基づいてユニット／ブロックを導出できる。デコーディング装置３００は、エンコーディング装置で適用された処理ユニットを用いてデコーディングを行うことができる。したがって、デコーディングの処理ユニットは、例えば、コーディングユニットであることができ、コーディングユニットは、コーディングツリーユニット又は最大コーディングユニットからクアッドツリー構造、バイナリツリー構造、及び／又はターナリツリー構造にしたがって分割されることができる。コーディングユニットから一つ以上の変換ユニットが導出され得る。そして、デコーディング装置３００を介してデコーディング及び出力された復元映像信号は、再生装置を介して再生されることができる。

【0072】

デコーディング装置３００は、図３のエンコーディング装置から出力された信号をビットストリーム形態で受信することができ、受信された信号は、エントロピーデコーディング部３１０を介してデコーディングされることができる。例えば、エントロピーデコーディング部３１０は、前記ビットストリームをパーシングして映像復元（又は、ピクチャ復元）に必要な情報（例えば、ビデオ／映像情報）を導出できる。前記ビデオ／映像情報は、アダプテーションパラメータセット（ＡＰＳ）、ピクチャパラメータセット（ＰＰＳ）、シーケンスパラメータセット（ＳＰＳ）、又はビデオパラメータセット（ＶＰＳ）など、様々なパラメータセットに関する情報をさらに含むことができる。また、前記ビデオ／映像情報は、一般制限情報（ｇｅｎｅｒａｌ ｃｏｎｓｔｒａｉｎｔ ｉｎｆｏｒｍａｔｉｏｎ）をさらに含むことができる。デコーディング装置は、前記パラメータセットに関する情報及び／又は前記一般制限情報に基づいてさらにピクチャをデコーディングすることができる。本文書において後述されるシグナリング／受信される情報及び／又はシンタックス要素は、前記デコーディング手順を介してデコーディングされて、前記ビットストリームから取得されることができる。例えば、エントロピーデコーディング部３１０は、指数ゴロム符号化、ＣＡＶＬＣ、又はＣＡＢＡＣなどのコーディング方法を基にビットストリーム内の情報をデコーディングし、映像復元に必要なシンタックス要素の値、レジデュアルに関する変換係数の量子化された値を出力できる。より具体的に、ＣＡＢＡＣエントロピーデコーディング方法は、ビットストリームで各シンタックス要素に該当するビンを受信し、デコーディング対象のシンタックス要素情報と隣接及びデコーディング対象ブロックのデコーディング情報又は以前ステップでデコーディングされたシンボル／ビンの情報を利用して文脈（ｃｏｎｔｅｘｔ）モデルを決定し、決定された文脈モデルによってビン（ｂｉｎ）の発生確率を予測してビンの算術デコーディング（ａｒｉｔｈｍｅｔｉｃ ｄｅｃｏｄｉｎｇ）を行い、各シンタックス要素の値に該当するシンボルを生成することができる。このとき、ＣＡＢＡＣエントロピーデコーディング方法は、文脈モデル決定後、次のシンボル／ビンの文脈モデルのためにデコーディングされたシンボル／ビンの情報を利用して文脈モデルをアップデートすることができる。エントロピーデコーディング部３１０でデコーディングされた情報のうち、予測に関する情報は、予測部３３０に提供され、エントロピーデコーディング部３１０でエントロピーデコーディングが行われたレジデュアル情報、すなわち、量子化された変換係数及び関連パラメータ情報は、逆量子化部３２１に入力されることができる。また、エントロピーデコーディング部３１０でデコーディングされた情報のうち、フィルタリングに関する情報は、フィルタリング部３５０に提供されることができる。一方、エンコーディング装置から出力された信号を受信する受信部（図示せず）がデコーディング装置３００の内／外部エレメントとしてさらに構成されることができ、又は受信部は、エントロピーデコーディング部３１０の構成要素であることもできる。一方、本文書に係るデコーディング装置は、ビデオ／映像／ピクチャデコーディング装置と呼ばれることができ、前記デコーディング装置は、情報デコーダ（ビデオ／映像／ピクチャ情報デコーダ）及びサンプルデコーダ（ビデオ／映像／ピクチャサンプルデコーダ）に区分することもできる。前記情報デコーダは、前記エントロピーデコーディング部３１０を備えることができ、前記サンプルデコーダは、前記逆量子化部３２１、逆変換部３２２、予測部３３０、加算部３４０、フィルタリング部３５０、及びメモリ３６０のうち、少なくとも一つを備えることができる。

【0073】

逆量子化部３２１では、量子化された変換係数を逆量子化して変換係数を出力できる。逆量子化部３２１は、量子化された変換係数を２次元のブロック形態で再整列することができる。この場合、前記再整列は、エンコーディング装置で行われた係数スキャン順序に基づいて再整列を行うことができる。逆量子化部３２１は、量子化パラメータ（例えば、量子化ステップサイズ情報）を用いて量子化された変換係数に対する逆量子化を行い、変換係数（ｔｒａｎｓｆｏｒｍ ｃｏｅｆｆｉｃｉｅｎｔ）を取得することができる。

【0074】

逆変換部３２２では、変換係数を逆変換してレジデュアル信号（レジデュアルブロック、レジデュアルサンプルアレイ）を取得するようになる。

【0075】

予測部は、現在ブロックに対する予測を行い、前記現在ブロックに対する予測サンプルを含む予測されたブロック（ｐｒｅｄｉｃｔｅｄ ｂｌｏｃｋ）を生成することができる。予測部は、エントロピーデコーディング部３１０から出力された前記予測に関する情報に基づいて、前記現在ブロックにイントラ予測が適用されるか、又はインター予測が適用されるか決定することができ、具体的なイントラ／インター予測モードを決定することができる。

【0076】

予測部は、後述する様々な予測方法に基づいて予測信号を生成することができる。例えば、予測部は、一つのブロックに対する予測のために、イントラ予測又はインター予測を適用することができるだけでなく、イントラ予測とインター予測とを同時に適用することができる。これは、ｃｏｍｂｉｎｅｄ ｉｎｔｅｒ ａｎｄ ｉｎｔｒａ ｐｒｅｄｉｃｔｉｏｎ（ＣＩＩＰ）と呼ばれることができる。また、予測部は、ブロックに対する予測のために、イントラブロックコピー（ｉｎｔｒａ ｂｌｏｃｋ ｃｏｐｙ、ＩＢＣ）を実行することができる。 前記イントラブロックコピーは、例えば、ＳＣＣ（ｓｃｒｅｅｎ ｃｏｎｔｅｎｔ ｃｏｄｉｎｇ）などのように、ゲームなどのコンテンツ映像／動画コーディングのために使用されることができる。ＩＢＣは、基本的に現在ピクチャ内で予測を行うが、現在ピクチャ内で参照ブロックを導出する点においてインター予測と同様に行われることができる。すなわち、ＩＢＣは、本文書において説明されるインター予測技法のうち、少なくとも一つを利用することができる。パレットモードは、イントラコーディング又はイントラ予測の一例と見なすことができる。

【0077】

イントラ予測部３３１は、現在ピクチャ内のサンプルを参照して現在ブロックを予測できる。前記参照されるサンプルは、予測モードによって前記現在ブロックの隣接（ｎｅｉｇｈｂｏｒ）に位置することができ、又は離れて位置することができる。イントラ予測において予測モードは、複数の非方向性モードと複数の方向性モードとを含むことができる。イントラ予測部３３１は、隣接ブロックに適用された予測モードを用いて、現在ブロックに適用される予測モードを決定することもできる。

【0078】

インター予測部３３２は、参照ピクチャ上で動きベクトルにより特定される参照ブロック（参照サンプルアレイ）に基づいて、現在ブロックに対する予測されたブロックを導くことができる。このとき、インター予測モードで送信される動き情報の量を減らすために、隣接ブロックと現在ブロックとの間の動き情報の相関性に基づいて動き情報をブロック、サブブロック、又はサンプル単位で予測することができる。前記動き情報は、動きベクトル及び参照ピクチャインデックスを含むことができる。前記動き情報は、インター予測方向（Ｌ０予測、Ｌ１予測、Ｂｉ予測等）情報をさらに含むことができる。インター予測の場合に、隣接ブロックは、現在ピクチャ内に存在する空間的隣接ブロック（ｓｐａｔｉａｌ ｎｅｉｇｈｂｏｒｉｎｇ ｂｌｏｃｋ）と参照ピクチャに存在する時間的隣接ブロック（ｔｅｍｐｏｒａｌ ｎｅｉｇｈｂｏｒｉｎｇ ｂｌｏｃｋ）とを備えることができる。例えば、インター予測部３３２は、隣接ブロックに基づいて動き情報候補リストを構成し、受信した候補選択情報に基づいて前記現在ブロックの動きベクトル及び／又は参照ピクチャインデックスを導出できる。様々な予測モードに基づいてインター予測が行われ得るし、前記予測に関する情報は、前記現在ブロックに対するインター予測のモードを指示する情報を含むことができる。

【0079】

加算部３４０は、取得されたレジデュアル信号を予測部から出力された予測信号（予測されたブロック、予測サンプルアレイ）に加えることにより、復元信号（復元ピクチャ、復元ブロック、復元サンプルアレイ）を生成することができる。スキップモードが適用された場合のように、処理対象ブロックに対するレジデュアルがない場合、予測されたブロックが復元ブロックとして使用されることができる。

【0080】

加算部３４０は、復元部又は復元ブロック生成部と呼ばれることができる。生成された復元信号は、現在ピクチャ内の次の処理対象ブロックのイントラ予測のために使用されることができ、後述するように、フィルタリングを経て出力されることができ、又は次のピクチャのインター予測のために使用されることもできる。

【0081】

一方、ピクチャデコーディング過程でＬＭＣＳ（ｌｕｍａ ｍａｐｐｉｎｇ ｗｉｔｈ ｃｈｒｏｍａ ｓｃａｌｉｎｇ）が適用されることもできる。

【0082】

フィルタリング部３５０は、復元信号にフィルタリングを適用して主観的／客観的画質を向上させることができる。例えば、フィルタリング部３５０は、復元ピクチャに様々なフィルタリング方法を適用して修正された（ｍｏｄｉｆｉｅｄ）復元ピクチャを生成することができ、前記修正された復元ピクチャをメモリ３６０、具体的に、メモリ３６０のＤＰＢに送信することができる。前記様々なフィルタリング方法は、例えば、デブロッキングフィルタリング、サンプル適応的オフセット（ｓａｍｐｌｅ ａｄａｐｔｉｖｅ ｏｆｆｓｅｔ）、適応的ループフィルタ（ａｄａｐｔｉｖｅ ｌｏｏｐ ｆｉｌｔｅｒ）、両方向フィルタ（ｂｉｌａｔｅｒａｌ ｆｉｌｔｅｒ）などを含むことができる。

【0083】

メモリ３６０のＤＰＢに格納された（修正された）復元ピクチャは、インター予測部３３２で参照ピクチャとして使用されることができる。メモリ３６０は、現在ピクチャ内の動き情報が導出された（又は、デコーディングされた）ブロックの動き情報及び／又は既に復元されたピクチャ内のブロックの動き情報を格納できる。前記格納された動き情報は、空間的隣接ブロックの動き情報又は時間的隣接ブロックの動き情報として活用するために、インター予測部３３２に伝達することができる。メモリ３６０は、現在ピクチャ内の復元されたブロックの復元サンプルを格納でき、イントラ予測部３３１に伝達することができる。

【0084】

本文書において、デコーディング装置３００の予測部３３０、逆量子化部３２１、逆変換部３２２、及びフィルタリング部３５０などで説明された実施例は、各々、エンコーディング装置２００の予測部２２０、逆量子化部２３４、逆変換部２３５、及びフィルタリング部２６０などにも同一又は対応されるように適用されることができる。

【0085】

前述したように、ビデオコーディングを実行するにあたって、圧縮効率を上げるために予測を実行する。これを介してコーディング対象ブロックである現在ブロックに対する予測サンプルを含む予測されたブロックを生成することができる。ここで、前記予測されたブロックは、空間ドメイン（又は、ピクセルドメイン）での予測サンプルを含む。前記予測されたブロックは、エンコーディング装置及びデコーディング装置で同じく導出され、前記エンコーディング装置は、原本ブロックの原本サンプル値自体でない前記原本ブロックと前記予測されたブロックとの間のレジデュアルに対する情報（レジデュアル情報）をデコーディング装置にシグナリングすることで映像コーディング効率を上げることができる。デコーディング装置は、前記レジデュアル情報に基づいてレジデュアルサンプルを含むレジデュアルブロックを導出し、前記レジデュアルブロックと前記予測されたブロックとを合わせて復元サンプルを含む復元ブロックを生成することができ、復元ブロックを含む復元ピクチャを生成することができる。

【0086】

前記レジデュアル情報は、変換及び量子化手順を介して生成されることができる。例えば、エンコーディング装置は、前記原本ブロックと前記予測されたブロックとの間のレジデュアルブロックを導出し、前記レジデュアルブロックに含まれているレジデュアルサンプル（レジデュアルサンプルアレイ）に変換手順を実行して変換係数を導出し、前記変換係数に量子化手順を実行して量子化された変換係数を導出することで、関連したレジデュアル情報を（ビットストリームを介して）デコーディング装置にシグナリングできる。ここで、前記レジデュアル情報は、前記量子化された変換係数の値情報、位置情報、変換技法、変換カーネル、量子化パラメータなどの情報を含むことができる。デコーディング装置は、前記レジデュアル情報に基づいて逆量子化／逆変換の手順を実行してレジデュアルサンプル（又は、レジデュアルブロック）を導出することができる。デコーディング装置は、予測されたブロックと前記レジデュアルブロックに基づいて復元ピクチャを生成することができる。また、エンコーディング装置は、以後ピクチャのインター予測のための参照のために量子化された変換係数を逆量子化／逆変換してレジデュアルブロックを導出し、これに基づいて復元ピクチャを生成することができる。

【0087】

本文書において、量子化／逆量子化及び／又は変換／逆変換のうち少なくとも一つは、省略されることができる。前記量子化／逆量子化が省略される場合、前記量子化された変換係数は、変換係数と呼ばれることができる。前記変換／逆変換が省略される場合、前記変換係数は、係数又はレジデュアル係数と呼ばれることもでき、又は、表現の統一性のために、依然として変換係数と呼ばれることもできる。

【0088】

本文書において、量子化された変換係数及び変換係数は、各々、変換係数及びスケーリングされた（ｓｃａｌｅｄ）変換係数と呼ばれることができる。この場合、レジデュアル情報は、変換係数（ら）に関する情報を含むことができ、前記変換係数（ら）に関する情報は、レジデュアルコーディングシンタックスを介してシグナリングされることができる。前記レジデュアル情報（又は、前記変換係数（ら）に関する情報）に基づいて変換係数が導出されることができ、前記変換係数に対する逆変換（スケーリング）を介してスケーリングされた変換係数が導出されることができる。前記スケーリングされた変換係数に対する逆変換（変換）に基づいてレジデュアルサンプルが導出されることができる。これは本文書の他の部分でも同様に適用／表現されることができる。

【0089】

エンコーディング装置／デコーディング装置の予測部は、ブロック単位でインター予測を行って予測サンプルを導出することができる。インター予測は、現在ピクチャ以外のピクチャのデータ要素（ｅｘ．サンプル値、又は動き情報）に依存的な方法で導出される予測を示すことができる。現在ブロックにインター予測が適用される場合、参照ピクチャのインデックスの指す参照ピクチャ上で動きベクトルにより特定される参照ブロック（参照サンプルアレイ）に基づいて、現在ブロックに対する予測されたブロック（予測サンプルアレイ）を誘導することができる。このとき、インター予測モードで送信される動き情報の量を減らすために、隣接ブロックと現在ブロックとの間の動き情報の相関性に基づいて、現在ブロックの動き情報をブロック、サブブロック又はサンプル単位で予測することができる。前記動き情報は、動きベクトル及び参照ピクチャのインデックスを含むことができる。前記動き情報は、インター予測タイプ（Ｌ０予測、Ｌ１予測、Ｂｉ予測等）の情報を更に含むことができる。インター予測が適用される場合、隣接ブロックは、現在ピクチャ内に存在する空間的隣接ブロック（ｓｐａｔｉａｌ ｎｅｉｇｈｂｏｒｉｎｇ ｂｌｏｃｋ）と、参照ピクチャに存在する時間的隣接ブロック（ｔｅｍｐｏｒａｌ ｎｅｉｇｈｂｏｒｉｎｇ ｂｌｏｃｋ）とを含むことができる。前記参照ブロックを含む参照ピクチャと、前記時間的隣接ブロックを含む参照ピクチャとは同一であってもよく、異なってもよい。前記時間的隣接ブロックは、同じ位置参照ブロック（ｃｏｌｌｏｃａｔｅｄ ｒｅｆｅｒｅｎｃｅ ｂｌｏｃｋ）、同じ位置ＣＵ（ｃｏｌＣＵ）等の名称で呼ばれ得、前記時間的隣接ブロックを含む参照ピクチャは、同じ位置ピクチャ（ｃｏｌｌｏｃａｔｅｄ ｐｉｃｔｕｒｅ、ｃｏｌＰｉｃ）と呼ばれることもある。例えば、現在ブロックの隣接ブロックに基づいて動き情報の候補リストが構成されることができ、前記現在ブロックの動きベクトル及び／又は参照ピクチャのインデックスを導出するために、どの候補が選択（使用）されるかを指示するフラグ又はインデックス情報がシグナリングされることができる。様々な予測モードに基づいてインター予測が行われ、例えば、スキップモードとマージモードの場合、現在ブロックの動き情報は、選択された隣接ブロックの動き情報を同一であり得る。スキップモードの場合、マージモードと異なり、レジデュアル信号が送信されないことがある。動き情報予測（ｍｏｔｉｏｎ ｖｅｃｔｏｒ ｐｒｅｄｉｃｔｉｏｎ、ＭＶＰ）モードの場合、選択された隣接ブロックの動きベクトルを動きベクトル予測子（ｍｏｔｉｏｎ ｖｅｃｔｏｒ ｐｒｅｄｉｃｔｏｒ）として利用し、動きベクトル差分（ｍｏｔｉｏｎ ｖｅｃｔｏｒ ｄｉｆｆｅｒｅｎｃｅ）はシグナリングされることができる。この場合、前記動きベクトル予測子及び動きベクトル差分の和を用いて、前記現在ブロックの動きベクトルを導出することができる。

【0090】

前記動き情報は、インター予測タイプ（Ｌ０予測、Ｌ１予測、Ｂｉ予測等）に応じて、Ｌ０動き情報及び／又はＬ１動き情報を含むことができる。Ｌ０方向の動きベクトルは、Ｌ０動きベクトル又はＭＶＬ０と呼ばれ得、Ｌ１方向の動きベクトルは、Ｌ１動きベクトル又はＭＶＬ１と呼ばれ得る。Ｌ０動きベクトルに基づいた予測は、Ｌ０予測と呼ばれ得、Ｌ１動きベクトルに基づいた予測をＬ１予測と呼ばれ得、前記Ｌ０動きベクトル及び前記Ｌ１動きベクトルの両方に基づいた予測を双（Ｂｉ）予測と呼ばれ得る。ここで、Ｌ０動きベクトルは、参照ピクチャリストＬ０（Ｌ０）に関連した動きベクトルを示すことができ、Ｌ１動きベクトルは、参照ピクチャリストＬ１（Ｌ１）に関連した動きベクトルを示すことができる。参照ピクチャリストＬ０は、前記現在ピクチャよりも、出力順序上、以前のピクチャを参照ピクチャに含むことができ、参照ピクチャリストＬ１は、前記現在ピクチャよりも、出力順序上、以後のピクチャを含むことができる。前記以前のピクチャは、順方向（参照）ピクチャと呼ばれ得、前記以後のピクチャは、逆方向（参照）ピクチャと呼ばれ得る。前記参照ピクチャリストＬ０は、前記現在ピクチャよりも、出力順序上、以後のピクチャを参照ピクチャにさらに含むことができる。この場合、前記参照ピクチャリストＬ０内で前記以前のピクチャが先にインデキシングされ、前記以後のピクチャは、その後にインデキシングされ得る。前記参照ピクチャリストＬ１は、前記現在ピクチャよりも、出力順序上、以前のピクチャを参照ピクチャにさらに含むことができる。この場合、前記参照ピクチャリスト１内で前記以後のピクチャが先にインデキシングされ、前記以前のピクチャは、その後にインデキシングされ得る。ここで、出力順序は、ＰＯＣ（ｐｉｃｔｕｒｅ ｏｒｄｅｒ ｃｏｕｎｔ）順序（ｏｒｄｅｒ）に対応し得る。

【0091】

図４は、コーディングされた映像／ビデオに対する階層構造を例示的に示す。

【0092】

図４を参照すると、コーディングされた映像／ビデオは、映像／ビデオのデコーディング処理及びその自体を扱うＶＣＬ（ｖｉｄｅｏ ｃｏｄｉｎｇ ｌａｙｅｒ、ビデオコーディング階層）、符号化された情報を送信して格納する下位システム、及びＶＣＬと下位システムとの間に存在してネットワーク適応機能を担当するＮＡＬ（ｎｅｔｗｏｒｋ ａｂｓｔｒａｃｔｉｏｎ ｌａｙｅｒ、ネットワーク抽象階層）に区分されている。

【0093】

ＶＣＬでは、圧縮された映像データ（スライスデータ）を含むＶＣＬデータを生成し、又は、ピクチャパラメータセット（Ｐｉｃｔｕｒｅ Ｐａｒａｍｅｔｅｒ Ｓｅｔ：ＰＰＳ）、シーケンスパラメータセット（Ｓｅｑｕｅｎｃｅ Ｐａｒａｍｅｔｅｒ Ｓｅｔ：ＳＰＳ）、ビデオパラメータセット（Ｖｉｄｅｏ Ｐａｒａｍｅｔｅｒ Ｓｅｔ：ＶＰＳ）などの情報を含むパラメータセット又は映像のデコーディング過程に付加的に必要なＳＥＩ（Ｓｕｐｐｌｅｍｅｎｔａｌ Ｅｎｈａｎｃｅｍｅｎｔ Ｉｎｆｏｒｍａｔｉｏｎ）メッセージを生成することができる。

【0094】

ＮＡＬでは、ＶＣＬで生成されたＲＢＳＰ（Ｒａｗ Ｂｙｔｅ Ｓｅｑｕｅｎｃｅ Ｐａｙｌｏａｄ）にヘッダ情報（ＮＡＬユニットヘッダ）を付加してＮＡＬユニットを生成することができる。このとき、ＲＢＳＰは、ＶＣＬで生成されたスライスデータ、パラメータセット、ＳＥＩメッセージなどを意味する。ＮＡＬユニットヘッダには該当ＮＡＬユニットに含まれるＲＢＳＰデータによって特定されるＮＡＬユニットタイプ情報を含むことができる。

【0095】

前記図面に示すように、ＮＡＬユニットは、ＶＣＬで生成されたＲＢＳＰによって、ＶＣＬ ＮＡＬユニットとＮｏｎ－ＶＣＬ ＮＡＬユニットとに区分されることができる。ＶＣＬ ＮＡＬユニットは、映像に対する情報（スライスデータ）を含んでいるＮＡＬユニットを意味することができ、Ｎｏｎ－ＶＣＬ ＮＡＬユニットは、映像をデコーディングするために必要な情報（パラメータセット又はＳＥＩメッセージ）を含んでいるＮＡＬユニットを意味することができる。

【0096】

前述したＶＣＬ ＮＡＬユニット、Ｎｏｎ－ＶＣＬ ＮＡＬユニットは、下位システムのデータ規格によってヘッダ情報を付けてネットワークを介して送信されることができる。例えば、ＮＡＬユニットは、Ｈ．２６６／ＶＶＣファイルフォーマット、ＲＴＰ（Ｒｅａｌ－ｔｉｍｅ Ｔｒａｎｓｐｏｒｔ Ｐｒｏｔｏｃｏｌ）、ＴＳ（Ｔｒａｎｓｐｏｒｔ Ｓｔｒｅａｍ）などのような所定規格のデータ形態に変形されて多様なネットワークを介して送信されることができる。

【0097】

前述したように、ＮＡＬユニットは、該当ＮＡＬユニットに含まれるＲＢＳＰデータ構造（ｓｔｒｕｃｔｕｒｅ）によってＮＡＬユニットタイプが特定されることができ、このようなＮＡＬユニットタイプに対する情報は、ＮＡＬユニットヘッダに格納されてシグナリングされることができる。

【0098】

例えば、ＮＡＬユニットが映像に対する情報（スライスデータ）を含むかどうかによって、大別して、ＶＣＬ ＮＡＬユニットタイプとＮｏｎ－ＶＣＬ ＮＡＬユニットタイプとに分類されることができる。ＶＣＬ ＮＡＬユニットタイプは、ＶＣＬ ＮＡＬユニットが含むピクチャの性質及び種類などによって分類されることができ、Ｎｏｎ－ＶＣＬ ＮＡＬユニットタイプは、パラメータセットの種類などによって分類されることができる。

【0099】

下記は、Ｎｏｎ－ＶＣＬ ＮＡＬユニットタイプが含むパラメータセットの種類などによって特定されたＮＡＬユニットタイプの一例である。

【0100】

－ＡＰＳ（Ａｄａｐｔａｔｉｏｎ Ｐａｒａｍｅｔｅｒ Ｓｅｔ）ＮＡＬ ｕｎｉｔ：ＡＰＳを含むＮＡＬユニットに対するタイプ

【0101】

－ＤＰＳ（Ｄｅｃｏｄｉｎｇ Ｐａｒａｍｅｔｅｒ Ｓｅｔ）ＮＡＬ ｕｎｉｔ：ＤＰＳを含むＮＡＬユニットに対するタイプ

【0102】

－ＶＰＳ（Ｖｉｄｅｏ Ｐａｒａｍｅｔｅｒ Ｓｅｔ）ＮＡＬ ｕｎｉｔ：ＶＰＳを含むＮＡＬユニットに対するタイプ

【0103】

－ＳＰＳ（Ｓｅｑｕｅｎｃｅ Ｐａｒａｍｅｔｅｒ Ｓｅｔ）ＮＡＬ ｕｎｉｔ：ＳＰＳを含むＮＡＬユニットに対するタイプ

【0104】

－ＰＰＳ（Ｐｉｃｔｕｒｅ Ｐａｒａｍｅｔｅｒ Ｓｅｔ）ＮＡＬ ｕｎｉｔ：ＰＰＳを含むＮＡＬユニットに対するタイプ

【0105】

－ＰＨ（Ｐｉｃｔｕｒｅ ｈｅａｄｅｒ）ＮＡＬ ｕｎｉｔ：ＰＨを含むＮＡＬユニットに対するタイプ

【0106】

前述したＮＡＬユニットタイプは、ＮＡＬユニットタイプのためのシンタックス情報を有し、前記シンタックス情報は、ＮＡＬユニットヘッダに格納されてシグナリングされることができる。例えば、前記シンタックス情報は、ｎａｌ＿ｕｎｉｔ＿ｔｙｐｅであり、ＮＡＬユニットタイプは、ｎａｌ＿ｕｎｉｔ＿ｔｙｐｅ値に特定されることができる。

【0107】

一方、前述したように、一つのピクチャは、複数のスライスを含むことができ、一つのスライスは、スライスヘッダ及びスライスデータを含むことができる。この場合、一つのピクチャ内の複数のスライス（スライスヘッダ及びスライスデータ集合）に対して一つのピクチャヘッダがさらに付加されることができる。前記ピクチャヘッダ（ピクチャヘッダシンタックス）は、前記ピクチャに共通的に適用できる情報／パラメータを含むことができる。本文書において、スライスは、タイルグループに混用又は代替されることができる。また、本文書において、スライスヘッダは、タイプグループヘッダに混用又は代替されることができる。

【0108】

前記スライスヘッダ（スライスヘッダシンタックス、スライスヘッダ情報）は、前記スライスに共通的に適用できる情報／パラメータを含むことができる。前記ＡＰＳ（ＡＰＳシンタックス）又はＰＰＳ（ＰＰＳシンタックス）は、一つ以上のスライス又はピクチャに共通的に適用できる情報／パラメータを含むことができる。前記ＳＰＳ（ＳＰＳシンタックス）は、一つ以上のシーケンスに共通的に適用できる情報／パラメータを含むことができる。前記ＶＰＳ（ＶＰＳシンタックス）は、多重レイヤに共通的に適用できる情報／パラメータを含むことができる。前記ＤＰＳ（ＤＰＳシンタックス）は、ビデオ全般に共通的に適用できる情報／パラメータを含むことができる。前記ＤＰＳは、ＣＶＳ（ｃｏｄｅｄ ｖｉｄｅｏ ｓｅｑｕｅｎｃｅ）の接合（ｃｏｎｃａｔｅｎａｔｉｏｎ）に関連した情報／パラメータを含むことができる。本文書において、上位レベルシンタックス（Ｈｉｇｈ ｌｅｖｅｌ ｓｙｎｔａｘ、ＨＬＳ）とは、前記ＡＰＳシンタックス、ＰＰＳシンタックス、ＳＰＳシンタックス、ＶＰＳシンタックス、ＤＰＳシンタックス、ピクチャヘッダシンタックス、スライスヘッダシンタックスのうち少なくとも一つを含むことができる。

【0109】

本文書において、エンコーディング装置からデコーディング装置にエンコーディングされてビットストリーム形態でシグナリングされる映像／ビデオ情報は、ピクチャ内のパーティショニング関連情報、イントラ／インター予測情報、レジデュアル情報、インループフィルタリング情報などを含むだけでなく、前記スライスヘッダに含まれている情報、前記ピクチャヘッダに含まれている情報、前記ＡＰＳに含まれている情報、前記ＰＰＳに含まれている情報、ＳＰＳに含まれている情報、ＶＰＳに含まれている情報、及び／又はＤＰＳに含まれている情報を含むことができる。また、前記映像／ビデオ情報は、ＮＡＬユニットヘッダの情報をさらに含むことができる。

【0110】

一方、量子化など、圧縮符号化過程で発生するエラーによる原本（ｏｒｉｇｉｎａｌ）映像と復元映像の差異を補償するために、前述したように、復元サンプル又は復元ピクチャにインループフィルタリング手順が実行されることができる。前述したように、インループフィルタリングは、エンコーディング装置のフィルタ部及びデコーディング装置のフィルタ部で実行されることができ、デブロッキングフィルタ、ＳＡＯ及び／又は適応的ループフィルタ（ＡＬＦ）が適用されることができる。例えば、ＡＬＦ手順は、デブロッキングフィルタリング手順及び／又はＳＡＯ手順が完了した後に実行されることができる。ただし、この場合も、デブロッキングフィルタリング手順及び／又はＳＡＯ手順が省略されることもできる。

【0111】

以下、ピクチャ復元及びフィルタリングに対する具体的な説明が記述される。映像／ビデオコーディングにおいて、各ブロック単位でイントラ予測／インター予測に基づいて復元ブロックが生成されることができ、復元ブロックを含む復元ピクチャが生成されることができる。現在ピクチャ／スライスがＩピクチャ／スライスである場合、前記現在ピクチャ／スライスに含まれるブロックは、イントラ予測のみに基づいて復元されることができる。一方、現在ピクチャ／スライスがＰ又はＢピクチャ／スライスである場合、前記現在ピクチャ／スライスに含まれるブロックは、イントラ予測又はインター予測に基づいて復元されることができる。この場合、現在ピクチャ／スライス内の一部ブロックに対してはイントラ予測が適用され、残りのブロックに対してはインター予測が適用されることもできる。

【0112】

イントラ予測は、現在ブロックが属するピクチャ（以下、現在ピクチャという）内の参照サンプルに基づいて現在ブロックに対する予測サンプルを生成する予測を示すことができる。現在ブロックにイントラ予測が適用される場合、現在ブロックのイントラ予測に使用する隣接参照サンプルが導出されることができる。前記現在ブロックの隣接参照サンプルは、ｎＷ×ｎＨ大きさの現在ブロックの左側（ｌｅｆｔ）境界に隣接したサンプル及び左下側（ｂｏｔｔｏｍ－ｌｅｆｔ）に隣接した総２×ｎＨ個のサンプル、現在ブロックの上側（ｔｏｐ）境界に隣接したサンプル及び右上側（ｔｏｐ－ｒｉｇｈｔ）に隣接した総２×ｎＷ個のサンプル及び現在ブロックの左上側（ｔｏｐ－ｌｅｆｔ）に隣接した１個のサンプルを含むことができる。又は、前記現在ブロックの隣接参照サンプルは、複数列の上側隣接サンプル及び複数行の左側隣接サンプルを含むこともできる。また、前記現在ブロックの隣接参照サンプルは、ｎＷ×ｎＨ大きさの現在ブロックの右側（ｒｉｇｈｔ）境界に隣接した総ｎＨ個のサンプル、現在ブロックの下側（ｂｏｔｔｏｍ）境界に隣接した総ｎＷ個のサンプル、及び現在ブロックの右下側（ｂｏｔｔｏｍ－ｒｉｇｈｔ）に隣接した１個のサンプルを含むこともできる。

【0113】

ただし、現在ブロックの隣接参照サンプルのうち一部は、まだデコーディングされない、又は利用可能でない場合がある。この場合、デコーダは、利用可能なサンプルとして利用可能でないサンプルを代替（ｓｕｂｓｔｉｔｕｔｉｏｎ）して予測に使用する隣接参照サンプルを構成することができる。又は、利用可能なサンプルの補間（ｉｎｔｅｒｐｏｌａｔｉｏｎ）を介して予測に使用する隣接参照サンプルを構成することができる。

【0114】

隣接参照サンプルが導出された場合、（ｉ）現在ブロックの隣接（ｎｅｉｇｈｂｏｒｉｎｇ）参照サンプルの平均（ａｖｅｒａｇｅ）又は補間（ｉｎｔｅｒｐｏｌａｔｉｏｎ）に基づいて予測サンプルを誘導することができ、（ｉｉ）現在ブロックの隣接参照サンプルのうち、予測サンプルに対して特定（予測）方向に存在する参照サンプルに基づいて前記予測サンプルを誘導することもできる。（ｉ）の場合は、非方向性モード又は非角度モードと呼ばれ、（ｉｉ）の場合は、方向性（ｄｉｒｅｃｔｉｏｎａｌ）モード又は角度（ａｎｇｕｌａｒ）モードと呼ばれることができる。また、前記隣接参照サンプルのうち前記現在ブロックの予測サンプルを基準にして、前記現在ブロックのイントラ予測モードの予測方向の反対方向に位置する前記第２の隣接サンプルと前記第１の隣接サンプルとの補間を介して前記予測サンプルが生成されることもできる。前述した場合は、線形補間イントラ予測（Ｌｉｎｅａｒ ｉｎｔｅｒｐｏｌａｔｉｏｎ ｉｎｔｒａ ｐｒｅｄｉｃｔｉｏｎ、ＬＩＰ）と呼ばれることができる。また、線形モデル（ｌｉｎｅａｒ ｍｏｄｅｌ）を利用してルマサンプルに基づいてクロマ予測サンプルが生成されることもできる。この場合は、ＬＭモードと呼ばれることができる。また、フィルタリングされた隣接参照サンプルに基づいて前記現在ブロックの臨時予測サンプルを導出し、前記既存の隣接参照サンプル、即ち、フィルタリングされない隣接参照サンプルのうち、前記イントラ予測モードにより導出された少なくとも一つの参照サンプルと前記臨時予測サンプルとを加重和（ｗｅｉｇｈｔｅｄ ｓｕｍ）して前記現在ブロックの予測サンプルを導出することもできる。前述した場合は、ＰＤＰＣ（Ｐｏｓｉｔｉｏｎ ｄｅｐｅｎｄｅｎｔ ｉｎｔｒａ ｐｒｅｄｉｃｔｉｏｎ）と呼ばれることができる。また、現在ブロックの隣接多重参照サンプルラインの中から最も予測正確度が高い参照サンプルラインを選択して該当ラインで予測方向に位置する参照サンプルを利用して予測サンプルを導出し、この時に使われた参照サンプルラインをデコーディング装置に指示（シグナリング）する方法でイントラ予測符号化を実行することができる。前述した場合は、ｍｕｌｔｉ－ｒｅｆｅｒｅｎｃｅ ｌｉｎｅ（ＭＲＬ）ｉｎｔｒａ ｐｒｅｄｉｃｔｉｏｎ又はＭＲＬベースのイントラ予測と呼ばれることができる。また、現在ブロックを垂直又は水平のサブパーティションに分けて同じイントラ予測モードに基づいてイントラ予測を実行し、前記サブパーティション単位で隣接参照サンプルを導出して利用できる。即ち、この場合、現在ブロックに対するイントラ予測モードが前記サブパーティションに同じく適用され、前記サブパーティション単位で隣接参照サンプルを導出して利用することによって、場合によって、イントラ予測性能を高めることができる。このような予測方法は、ｉｎｔｒａ ｓｕｂ－ｐａｒｔｉｔｉｏｎｓ（ＩＳＰ）又はＩＳＰベースのイントラ予測と呼ばれることができる。前述したイントラ予測方法は、目次１及び２でのイントラ予測モードと区分してイントラ予測タイプと呼ばれることができる。前記イントラ予測タイプは、イントラ予測技法又は付加イントラ予測モードなど、多様な用語で呼ばれることができる。例えば、前記イントラ予測タイプ（又は、付加イントラ予測モードなど）は、前述したＬＩＰ、ＰＤＰＣ、ＭＲＬ、ＩＳＰのうち少なくとも一つを含むことができる。前記ＬＩＰ、ＰＤＰＣ、ＭＲＬ、ＩＳＰなどの特定イントラ予測タイプを除外した一般イントラ予測方法は、ノーマルイントラ予測タイプと呼ばれることができる。ノーマルイントラ予測タイプは、前記のような特定イントラ予測タイプが適用されない場合、一般的に適用されることができ、前述したイントラ予測モードに基づいて予測が実行されることができる。一方、必要によって、導出された予測サンプルに対する後処理フィルタリングが実行されることもできる。

【0115】

具体的に、イントラ予測手順は、イントラ予測モード／タイプ決定ステップ、隣接参照サンプル導出ステップ、イントラ予測モード／タイプベースの予測サンプル導出ステップを含むことができる。また、必要によって、導出された予測サンプルに対する後処理フィルタリング（ｐｏｓｔ－ｆｉｌｔｅｒｉｎｇ）ステップが実行されることもできる。

【0116】

以下ではエンコーディング装置でのイントラ予測が説明される。エンコーディング装置は、現在ブロックに対するイントラ予測を実行する。エンコーディング装置は、現在ブロックに対するイントラ予測モードを導出し、現在ブロックの隣接参照サンプルを導出することができ、前記イントラ予測モード及び前記隣接参照サンプルに基づいて前記現在ブロック内の予測サンプルを生成する。ここで、イントラ予測モード決定、隣接参照サンプル導出、及び予測サンプル生成手順は、同時に実行されてもよく、一手順が他の手順より先に実行されてもよい。例えば、エンコーディング装置のイントラ予測部２２２は、予測モード／タイプ決定部、参照サンプル導出部、予測サンプル導出部を含むことができ、予測モード／タイプ決定部で前記現在ブロックに対するイントラ予測モード／タイプを決定し、参照サンプル導出部で前記現在ブロックの隣接参照サンプルを導出し、予測サンプル導出部で前記現在ブロックの動きサンプルを導出することができる。一方、図示されてはいないが、後述する予測サンプルフィルタリング手順が実行される場合、イントラ予測部２２２は、予測サンプルフィルタ部（図示せず）をさらに含むこともできる。エンコーディング装置は、複数のイントラ予測モードのうち前記現在ブロックに対して適用されるモードを決定することができる。エンコーディング装置は、前記イントラ予測モードに対するＲＤ ｃｏｓｔを比較して前記現在ブロックに対する最適のイントラ予測モードを決定することができる。

【0117】

一方、エンコーディング装置は、予測サンプルフィルタリング手順を実行することもできる。予測サンプルフィルタリングは、ポストフィルタリングと呼ばれることができる。前記予測サンプルフィルタリング手順により前記予測サンプルのうち一部又は全部がフィルタリングされることができる。場合によって、前記予測サンプルフィルタリング手順は、省略されることができる。

【0118】

エンコーディング装置は、予測サンプルに基づいて前記現在ブロックに対するレジデュアルサンプルを導出する。エンコーディング装置は、現在ブロックの原本サンプルで前記予測サンプルを位相に基づいて比較し、前記レジデュアルサンプルを導出することができる。

【0119】

エンコーディング装置は、前記レジデュアルサンプルを変換／量子化し、量子化された変換係数を導出し、以後、前記量子化された変換係数を再び逆量子化／逆変換処理して（修正された）レジデュアルサンプルを導出することができる。このように変換／量子化後に再び逆量子化／逆変換を実行する理由は、前述したように、デコーディング装置で導出されるレジデュアルサンプルと同じレジデュアルサンプルを導出するためである。

【0120】

エンコーディング装置は、前記予測サンプルと前記（修正された）レジデュアルサンプルに基づいて前記現在ブロックに対する復元サンプルを含む復元ブロックを生成することができる。前記復元ブロックに基づいて前記現在ピクチャに対する復元ピクチャが生成されることができる。

【0121】

エンコーディング装置は、前記イントラ予測に関する予測情報（例えば、予測モードを示す予測モード情報）、並びに前記イントラ及び前記レジデュアルサンプルに関するレジデュアル情報を含む映像情報をエンコーディングし、エンコーディングされた映像情報をビットストリーム形態で出力できることは、前述の通りである。前記レジデュアル情報は、レジデュアルコーディングシンタックスを含むことができる。エンコーディング装置は、前記レジデュアルサンプルを変換／量子化し、量子化された変換係数を導出することができる。前記レジデュアル情報は、前記量子化された変換係数に対する情報を含むことができる。

【0122】

図５は、デコーディング装置でのイントラ予測ベースのブロック復元方法を説明するための流れ図である。図５の方法は、Ｓ５００、Ｓ５１０、Ｓ５２０、Ｓ５３０、及びＳ５４０ステップを含むことができる。デコーディング装置は、前記エンコーディング装置で実行された動作と対応される動作を実行することができる。

【0123】

Ｓ５００乃至Ｓ５２０は、デコーディング装置のイントラ予測部３３１により実行されることができ、Ｓ５００の予測情報及びＳ５３０のレジデュアル情報は、デコーディング装置のエントロピーデコーディング部３１０によりビットストリームから取得されることができる。デコーディング装置のレジデュアル処理部３２０は、前記レジデュアル情報に基づいて現在ブロックに対するレジデュアルサンプルを導出することができる。具体的に、前記レジデュアル処理部３２０の逆量子化部３２１は、前記レジデュアル情報に基づいて導出された量子化された変換係数に基づいて、逆量子化を実行して変換係数を導出し、前記レジデュアル処理部の逆変換部３２２は、前記変換係数に対する逆変換を実行して前記現在ブロックに対するレジデュアルサンプルを導出することができる。Ｓ５４０は、デコーディング装置の加算部３４０又は復元部により実行されることができる。

【0124】

具体的に、デコーディング装置は、受信された予測モード情報に基づいて現在ブロックに対するイントラ予測モードを導出することができる（Ｓ５００）。デコーディング装置は、前記現在ブロックの隣接参照サンプルを導出することができる（Ｓ５１０）。デコーディング装置は、前記イントラ予測モード及び前記隣接参照サンプルに基づいて前記現在ブロック内の予測サンプルを生成する（Ｓ５２０）。この場合、デコーディング装置は、予測サンプルフィルタリング手順を実行することができる。予測サンプルフィルタリングは、ポストフィルタリングと呼ばれることができる。前記予測サンプルフィルタリング手順により前記予測サンプルのうち一部又は全部がフィルタリングされることができる。場合によって、予測サンプルフィルタリング手順は、省略されることができる。

【0125】

デコーディング装置は、受信されたレジデュアル情報に基づいて前記現在ブロックに対するレジデュアルサンプルを生成する（Ｓ５３０）。デコーディング装置は、前記予測サンプル及び前記レジデュアルサンプルに基づいて前記現在ブロックに対する復元サンプルを生成し、前記復元サンプルを含む復元ブロックを導出することができる（Ｓ５４０）。前記復元ブロックに基づいて前記現在ピクチャに対する復元ピクチャが生成されることができる。

【0126】

ここで、デコーディング装置のイントラ予測部３３１は、予測モード／タイプ決定部、参照サンプル導出部、予測サンプル導出部を含むことができ、予測モード／タイプ決定部は、デコーディング装置のエントロピーデコーディング部３１０で取得した予測モード情報に基づいて前記現在ブロックに対するイントラ予測モードを決定し、参照サンプル導出部は、前記現在ブロックの隣接参照サンプルを導出し、予測サンプル導出部は、前記現在ブロックの予測サンプルを導出することができる。一方、図示してはいないが、前述した予測サンプルフィルタリング手順が実行される場合、イントラ予測部３３１は、予測サンプルフィルタ部（図示せず）をさらに含むこともできる。

【0127】

前記予測情報は、イントラ予測モード情報及び／又はイントラ予測タイプ情報を含むことができる。前記イントラ予測モード情報は、例えば、ＭＰＭ（ｍｏｓｔ ｐｒｏｂａｂｌｅ ｍｏｄｅ）が前記現在ブロックに適用されるか、又は、リメイニングモード（ｒｅｍａｉｎｉｎｇ ｍｏｄｅ）が適用されるかを示すフラグ情報（例えば、ｉｎｔｒａ＿ｌｕｍａ＿ｍｐｍ＿ｆｌａｇ）を含むことができ、前記ＭＰＭが前記現在ブロックに適用される場合、前記予測モード情報は、前記イントラ予測モード候補（ＭＰＭ候補）のうち一つを指すインデックス情報（例えば、ｉｎｔｒａ＿ｌｕｍａ＿ｍｐｍ＿ｉｄｘ）をさらに含むことができる。前記イントラ予測モード候補（ＭＰＭ候補）は、ＭＰＭ候補リスト又はＭＰＭリストで構成されることができる。また、前記ＭＰＭが前記現在ブロックに適用されない場合、前記イントラ予測モード情報は、前記イントラ予測モード候補（ＭＰＭ候補）を除外した残りのイントラ予測モードのうち一つを指すリメイニングモード情報（例えば、ｉｎｔｒａ＿ｌｕｍａ＿ｍｐｍ＿ｒｅｍａｉｎｄｅｒ）をさらに含むことができる。デコーディング装置は、前記イントラ予測モード情報に基づいて前記現在ブロックのイントラ予測モードを決定することができる。前述したＭＩＰのために別途のＭＰＭリストが構成されることができる。

【0128】

また、前記イントラ予測タイプ情報は、多様な形態で具現されることができる。一例として、前記イントラ予測タイプ情報は、前記イントラ予測タイプのうち一つを指示するイントラ予測タイプインデックス情報を含むことができる。他の例として、前記イントラ予測タイプ情報は、前記ＭＲＬが前記現在ブロックに適用されるか、及び適用される場合には何番目の参照サンプルラインが利用されるかを示す参照サンプルライン情報（例えば、ｉｎｔｒａ＿ｌｕｍａ＿ｒｅｆ＿ｉｄｘ）、前記ＩＳＰが前記現在ブロックに適用されるかを示すＩＳＰフラグ情報（例えば、ｉｎｔｒａ＿ｓｕｂｐａｒｔｉｔｉｏｎｓ＿ｍｏｄｅ＿ｆｌａｇ）、前記ＩＳＰが適用される場合にはサブパーティションが分割タイプを指示するＩＳＰタイプ情報（例えば、ｉｎｔｒａ＿ｓｕｂｐａｒｔｉｔｉｏｎｓ＿ｓｐｌｉｔ＿ｆｌａｇ）、ＰＤＣＰの適用可否を示すフラグ情報又はＬＩＰの適用可否を示すフラグ情報のうち少なくとも一つを含むことができる。また、前記イントラ予測タイプ情報は、前記現在ブロックにＭＩＰが適用されるかどうかを示すＭＩＰフラグを含むことができる。

【0129】

前記イントラ予測モード情報及び／又は前記イントラ予測タイプ情報は、本文書で説明したコーディング方法を介してエンコーディング／デコーディングされることができる。例えば、前記イントラ予測モード情報及び／又は前記イントラ予測タイプ情報は、ｔｒｕｎｃａｔｅｄ （ｒｉｃｅ） ｂｉｎａｒｙ ｃｏｄｅに基づいてエントロピーコーディング（例えば、ＣＡＢＡＣ、ＣＡＶＬＣコーディング）を介してエンコーディング／デコーディングされることができる。

【0130】

エンコーディング装置／デコーディング装置の予測部は、ブロック単位でインター予測を実行して予測サンプルを導出することができる。インター予測は、現在ピクチャ以外のピクチャ（ら）のデータ要素（例えば、サンプル値、又は動き情報等）に依存した方法で導出される予測を示すことができる（Ｉｎｔｅｒ ｐｒｅｄｉｃｔｉｏｎ ｃａｎ ｂｅ ａ ｐｒｅｄｉｃｔｉｏｎ ｄｅｒｉｖｅｄ ｉｎ ａ ｍａｎｎｅｒ ｔｈａｔ ｉｓ ｄｅｐｅｎｄｅｎｔ ｏｎ ｄａｔａ ｅｌｅｍｅｎｔｓ（例えば、ｓａｍｐｌｅ ｖａｌｕｅｓ ｏｒ ｍｏｔｉｏｎ ｉｎｆｏｒｍａｔｉｏｎ） ｏｆ ｐｉｃｔｕｒｅ（ｓ） ｏｔｈｅｒ ｔｈａｎ ｔｈｅ ｃｕｒｒｅｎｔ ｐｉｃｔｕｒｅ）。現在ブロックにインター予測が適用される場合、参照ピクチャインデックスが指す参照ピクチャ上で動きベクトルにより特定される参照ブロック（参照サンプルアレイ）に基づいて、現在ブロックに対する予測されたブロック（予測サンプルアレイ）を誘導することができる。この時、インター予測モードで送信される動き情報の量を減らすために、隣接ブロックと現在ブロックとの間の動き情報の相関性に基づいて、現在ブロックの動き情報をブロック、サブブロック又はサンプル単位で予測できる。前記動き情報は、動きベクトル及び参照ピクチャインデックスを含むことができる。前記動き情報は、インター予測タイプ（Ｌ０予測、Ｌ１予測、Ｂｉ予測等）情報をさらに含むことができる。インター予測が適用される場合、隣接ブロックは、現在ピクチャ内に存在する空間的隣接ブロック（ｓｐａｔｉａｌ ｎｅｉｇｈｂｏｒｉｎｇ ｂｌｏｃｋ）と参照ピクチャに存在する時間的隣接ブロック（ｔｅｍｐｏｒａｌ ｎｅｉｇｈｂｏｒｉｎｇ ｂｌｏｃｋ）とを含むことができる。前記参照ブロックを含む参照ピクチャと前記時間的隣接ブロックを含む参照ピクチャは、同じであってもよく、異なってもよい。前記時間的隣接ブロックは、同一位置参照ブロック（ｃｏｌｌｏｃａｔｅｄ ｒｅｆｅｒｅｎｃｅ ｂｌｏｃｋ）、同一位置ＣＵ（ｃｏｌＣＵ）などの名称で呼ばれることができ、前記時間的隣接ブロックを含む参照ピクチャは、同一位置ピクチャ（ｃｏｌｌｏｃａｔｅｄ ｐｉｃｔｕｒｅ、ｃｏｌＰｉｃ）と呼ばれることもできる。例えば、現在ブロックの隣接ブロックに基づいて動き情報候補リストが構成されることができ、前記現在ブロックの動きベクトル及び／又は参照ピクチャインデックスを導出するためにどんな候補が選択（使用）されるかを指示するフラグ又はインデックス情報がシグナリングされることができる。多様な予測モードに基づいてインター予測が実行されることができ、例えば、スキップモードとマージモードの場合、現在ブロックの動き情報は、選択された隣接ブロックの動き情報と同じである。スキップモードの場合、マージモードとは違って、レジデュアル信号が送信されない。動き情報予測（ｍｏｔｉｏｎ ｖｅｃｔｏｒ ｐｒｅｄｉｃｔｉｏｎ、ＭＶＰ）モードの場合、選択された隣接ブロックの動きベクトルを動きベクトル予測子（ｍｏｔｉｏｎ ｖｅｃｔｏｒ ｐｒｅｄｉｃｔｏｒ）として利用し、動きベクトル差分（ｍｏｔｉｏｎ ｖｅｃｔｏｒ ｄｉｆｆｅｒｅｎｃｅ）は、シグナリングされることができる。この場合、前記動きベクトル予測子及び動きベクトル差分の和を利用して前記現在ブロックの動きベクトルを導出することができる。

【0131】

図６は、エンコーディング装置でのインター予測ベースのブロック復元方法を説明するための流れ図である。図６の方法は、Ｓ６００、Ｓ６１０、Ｓ６２０、Ｓ６３０、及びＳ６４０ステップを含むことができる。

【0132】

Ｓ６００は、エンコーディング装置のインター予測部２２１により実行されることができ、Ｓ６１０乃至Ｓ６３０は、エンコーディング装置のレジデュアル処理部２３０により実行されることができる。具体的に、Ｓ６１０は、エンコーディング装置の減算部２３１により実行されることができ、Ｓ６２０は、エンコーディング装置の変換部２３２及び量子化部２３３により実行されることができ、Ｓ６３０は、エンコーディング装置の逆量子化部２３４及び逆変換部２３５により実行されることができる。Ｓ６００において、予測情報がインター予測部２２１により導出され、エントロピーエンコーディング部２４０によりエンコーディングされることができる。Ｓ６１０及びＳ６２０を介してレジデュアル情報が導出され、エントロピーエンコーディング部２４０によりエンコーディングされることができる。前記レジデュアル情報は、前記レジデュアルサンプルに関する情報である。前記レジデュアル情報は、前記レジデュアルサンプルに対する量子化された変換係数に関する情報を含むことができる。前述したように、前記レジデュアルサンプルは、エンコーディング装置の変換部２３２を介して変換係数として導出され、前記変換係数は、量子化部２３３を介して量子化された変換係数として導出されることができる。前記量子化された変換係数に関する情報がレジデュアルコーディング手順を介してエントロピーエンコーディング部２４０でエンコーディングされることができる。

【0133】

エンコーディング装置は、現在ブロックに対するインター予測を実行する（Ｓ６００）。エンコーディング装置は、現在ブロックのインター予測モード及び動き情報を導出し、前記現在ブロックの予測サンプルを生成することができる。ここで、インター予測モード決定、動き情報導出、及び予測サンプル生成手順は、同時に実行されることもでき、一手順が他の手順より先に実行されることもできる。例えば、エンコーディング装置のインター予測部２２１は、予測モード決定部、動き情報導出部、予測サンプル導出部を含むことができ、予測モード決定部で前記現在ブロックに対する予測モードを決定し、動き情報導出部で前記現在ブロックの動き情報を導出し、予測サンプル導出部で前記現在ブロックの動きサンプルを導出することができる。例えば、エンコーディング装置のインター予測部２２１は、動き推定（ｍｏｔｉｏｎ ｅｓｔｉｍａｔｉｏｎ）を介して参照ピクチャの一定領域（サーチ領域）内で前記現在ブロックと類似するブロックをサーチし、前記現在ブロックとの差異が最小又は一定基準以下である参照ブロックを導出することができる。これに基づいて前記参照ブロックが位置する参照ピクチャを指す参照ピクチャインデックスを導出し、前記参照ブロックと前記現在ブロックの位置差異に基づいて動きベクトルを導出することができる。エンコーディング装置は、多様な予測モードのうち前記現在ブロックに対して適用されるモードを決定することができる。エンコーディング装置は、前記多様な予測モードに対するＲＤ ｃｏｓｔを比較して前記現在ブロックに対する最適の予測モードを決定することができる。

【0134】

例えば、エンコーディング装置は、前記現在ブロックにスキップモード又はマージモードが適用される場合、後述するマージ候補リストを構成し、前記マージ候補リストに含まれているマージ候補が指す参照ブロックのうち前記現在ブロックとの差異が最小又は一定基準以下である参照ブロックを導出することができる。この場合、前記導出された参照ブロックと関連したマージ候補が選択され、前記選択されたマージ候補を指すマージインデックス情報が生成されてデコーディング装置にシグナリングされることができる。前記選択されたマージ候補の動き情報を利用して前記現在ブロックの動き情報が導出されることができる。

【0135】

他の例として、エンコーディング装置は、前記現在ブロックに（Ａ）ＭＶＰモードが適用される場合、後述する（Ａ）ＭＶＰ候補リストを構成し、前記（Ａ）ＭＶＰ候補リストに含まれているｍｖｐ（ｍｏｔｉｏｎ ｖｅｃｔｏｒ ｐｒｅｄｉｃｔｏｒ）候補の中から選択されたｍｖｐ候補の動きベクトルを前記現在ブロックのｍｖｐとして利用できる。この場合、例えば、前述した動き推定により導出された参照ブロックを指す動きベクトルが前記現在ブロックの動きベクトルとして利用されることができ、前記ｍｖｐ候補のうち前記現在ブロックの動きベクトルとの差が最も小さい動きベクトルを有するｍｖｐ候補が、前記選択されたｍｖｐ候補になることができる。前記現在ブロックの動きベクトルから前記ｍｖｐを引いた差分であるＭＶＤ（ｍｏｔｉｏｎ ｖｅｃｔｏｒ ｄｉｆｆｅｒｅｎｃｅ）が導出されることができる。この場合、前記ＭＶＤに関する情報がデコーディング装置にシグナリングされることができる。また、（Ａ）ＭＶＰモードが適用される場合、前記参照ピクチャインデックスの値は、参照ピクチャインデックス情報で構成されて別途に前記デコーディング装置にシグナリングされることができる。

【0136】

エンコーディング装置は、前記予測サンプルに基づいてレジデュアルサンプルを導出することができる（Ｓ６１０）。エンコーディング装置は、前記現在ブロックの原本サンプルと前記予測サンプルの比較を介して前記レジデュアルサンプルを導出することができる。

【0137】

エンコーディング装置は、前記レジデュアルサンプルを変換／量子化し、量子化された変換係数を導出し（Ｓ６２０）、以後、前記量子化された変換係数を再び逆量子化／逆変換処理して（修正された）レジデュアルサンプルを導出することができる（Ｓ６３０）。このように変換／量子化後に再び逆量子化／逆変換を実行する理由は、前述したように、デコーディング装置で導出されるレジデュアルサンプルと同じレジデュアルサンプルを導出するためである。

【0138】

エンコーディング装置は、前記予測サンプルと前記（修正された）レジデュアルサンプルに基づいて前記現在ブロックに対する復元サンプルを含む復元ブロックを生成することができる（Ｓ６４０）。前記復元ブロックに基づいて前記現在ピクチャに対する復元ピクチャが生成されることができる。

【0139】

図示してはいないが、前述したように、エンコーディング装置は、予測情報及びレジデュアル情報を含む映像情報をエンコーディングすることができる。エンコーディング装置は、エンコーディングされた映像情報をビットストリーム形態で出力できる。前記予測情報は、前記予測手順に関連した情報であって、予測モード情報（例えば、ｓｋｉｐ ｆｌａｇ、ｍｅｒｇｅ ｆｌａｇ ｏｒ ｍｏｄｅ ｉｎｄｅｘ等）及び動き情報に関する情報を含むことができる。前記動き情報に関する情報は、動きベクトルを導出するための情報である候補選択情報（例えば、ｍｅｒｇｅ ｉｎｄｅｘ、ｍｖｐ ｆｌａｇ ｏｒ ｍｖｐ ｉｎｄｅｘ）を含むことができる。また、前記動き情報に関する情報は、前述したＭＶＤに関する情報及び／又は参照ピクチャインデックス情報を含むことができる。また、前記動き情報に関する情報は、Ｌ０予測、Ｌ１予測、又は対（ｂｉ）予測が適用されるかどうかを示す情報を含むことができる。前記レジデュアル情報は、前記レジデュアルサンプルに関する情報である。前記レジデュアル情報は、前記レジデュアルサンプルに対する量子化された変換係数に関する情報を含むことができる。

【0140】

出力されたビットストリームは、（デジタル）格納媒体に格納されてデコーディング装置に伝達されることができ、又はネットワークを介してデコーディング装置に伝達されることもできる。

【0141】

図７は、デコーディング装置でのインター予測ベースのブロック復元方法を説明するための流れ図である。図７の方法は、Ｓ７００、Ｓ７１０、Ｓ７２０、Ｓ７３０、及びＳ７４０ステップを含むことができる。デコーディング装置は、前記エンコーディング装置で実行された動作と対応される動作を実行することができる。

【0142】

Ｓ７００乃至Ｓ７２０は、デコーディング装置のインター予測部３３２により実行されることができ、Ｓ７００の予測情報及びＳ７３０のレジデュアル情報は、デコーディング装置のエントロピーデコーディング部３１０によりビットストリームから取得されることができる。デコーディング装置のレジデュアル処理部３２０は、前記レジデュアル情報に基づいて現在ブロックに対するレジデュアルサンプルを導出することができる。具体的に、前記レジデュアル処理部３２０の逆量子化部３２１は、前記レジデュアル情報に基づいて導出された量子化された変換係数に基づいて、逆量子化を実行して変換係数を導出し、前記レジデュアル処理部の逆変換部３２２は、前記変換係数に対する逆変換を実行して前記現在ブロックに対するレジデュアルサンプルを導出することができる。Ｓ７４０は、デコーディング装置の加算部３４０又は復元部により実行されることができる。

【0143】

具体的に、デコーディング装置は、受信された予測情報に基づいて前記現在ブロックに対する予測モードを決定することができる（Ｓ７００）。デコーディング装置は、前記予測情報内の予測モード情報に基づいて前記現在ブロックにどんなインター予測モードが適用されるかを決定することができる。

【0144】

例えば、前記ｍｅｒｇｅ ｆｌａｇに基づいて前記現在ブロックに前記マージモードが適用されるが、又は、（Ａ）ＭＶＰモードが決定されるかを決定することができる。又は、前記ｍｏｄｅ ｉｎｄｅｘに基づいて多様なインター予測モード候補の中から一つを選択することができる。前記インター予測モード候補は、スキップモード、マージモード、及び／又は（Ａ）ＭＶＰモードを含むことができ、又は後述する多様なインター予測モードを含むことができる。

【0145】

デコーディング装置は、前記決定されたインター予測モードに基づいて前記現在ブロックの動き情報を導出する（Ｓ７１０）。例えば、デコーディング装置は、前記現在ブロックにスキップモード又はマージモードが適用される場合、後述するマージ候補リストを構成し、前記マージ候補リストに含まれているマージ候補の中から一つのマージ候補を選択することができる。前記選択は、前述した選択情報（ｍｅｒｇｅ ｉｎｄｅｘ）に基づいて実行されることができる。前記選択されたマージ候補の動き情報を利用して前記現在ブロックの動き情報が導出されることができる。前記選択されたマージ候補の動き情報が前記現在ブロックの動き情報として利用されることができる。

【0146】

他の例として、デコーディング装置は、前記現在ブロックに（Ａ）ＭＶＰモードが適用される場合、後述する（Ａ）ＭＶＰ候補リストを構成し、前記（Ａ）ＭＶＰ候補リストに含まれているｍｖｐ（ｍｏｔｉｏｎ ｖｅｃｔｏｒ ｐｒｅｄｉｃｔｏｒ）候補の中から選択されたｍｖｐ候補の動きベクトルを前記現在ブロックのｍｖｐとして利用できる。前記選択は、前述した選択情報（ｍｖｐ ｆｌａｇ ｏｒ ｍｖｐ ｉｎｄｅｘ）に基づいて実行されることができる。この場合、前記ＭＶＤに関する情報に基づいて前記現在ブロックのＭＶＤを導出することができ、前記現在ブロックのｍｖｐと前記ＭＶＤに基づいて前記現在ブロックの動きベクトルを導出することができる。また、前記参照ピクチャインデックス情報に基づいて前記現在ブロックの参照ピクチャインデックスを導出することができる。前記現在ブロックに関する参照ピクチャリスト内で前記参照ピクチャインデックスが指すピクチャが、前記現在ブロックのインター予測のために参照される参照ピクチャとして導出されることができる。

【0147】

一方、後述するように、候補リスト構成なしで前記現在ブロックの動き情報が導出されることができ、この場合、後述する予測モードで開示された手順によって、前記現在ブロックの動き情報が導出されることができる。この場合、前述したような候補リスト構成は、省略されることができる。

【0148】

デコーディング装置は、前記現在ブロックの動き情報に基づいて前記現在ブロックに対する予測サンプルを生成することができる（Ｓ７２０）。この場合、前記現在ブロックの参照ピクチャインデックスに基づいて前記参照ピクチャを導出し、前記現在ブロックの動きベクトルが前記参照ピクチャ上で指す参照ブロックのサンプルを利用して前記現在ブロックの予測サンプルを導出することができる。この場合、後述するように、場合によって、前記現在ブロックの予測サンプルのうち全部又は一部に対する予測サンプルフィルタリング手順がさらに実行されることができる。

【0149】

例えば、デコーディング装置のインター予測部３３２は、予測モード決定部、動き情報導出部、予測サンプル導出部を含むことができ、予測モード決定部で受信された予測モード情報に基づいて前記現在ブロックに対する予測モードを決定し、動き情報導出部で受信された動き情報に関する情報に基づいて前記現在ブロックの動き情報（動きベクトル及び／又は参照ピクチャインデックス等）を導出し、予測サンプル導出部で前記現在ブロックの予測サンプルを導出することができる。

【0150】

デコーディング装置は、受信されたレジデュアル情報に基づいて前記現在ブロックに対するレジデュアルサンプルを生成する（Ｓ７３０）。デコーディング装置は、前記予測サンプル及び前記レジデュアルサンプルに基づいて前記現在ブロックに対する復元サンプルを生成し、前記復元サンプルを含む復元ブロックを導出することができる（Ｓ７４０）。前記復元ブロックに基づいて前記現在ピクチャに対する復元ピクチャが生成されることができる。

【0151】

ピクチャ内の現在ブロックの予測のために多様なインター予測モードが使用できる。例えば、マージモード、スキップモード、ＭＶＰ（ｍｏｔｉｏｎ ｖｅｃｔｏｒ ｐｒｅｄｉｃｔｉｏｎ）モード、アフィン（Ａｆｆｉｎｅ）モード、サブブロックマージモード、ＭＭＶＤ（ｍｅｒｇｅ ｗｉｔｈ ＭＶＤ）モード等の多様なモードが使用できる。ＤＭＶＲ（Ｄｅｃｏｄｅｒ ｓｉｄｅ ｍｏｔｉｏｎ ｖｅｃｔｏｒ ｒｅｆｉｎｅｍｅｎｔ）モード、ＡＭＶＲ（ａｄａｐｔｉｖｅ ｍｏｔｉｏｎ ｖｅｃｔｏｒ ｒｅｓｏｌｕｔｉｏｎ）モード、Ｂｉ－ｐｒｅｄｉｃｔｉｏｎ ｗｉｔｈ ＣＵ－ｌｅｖｅｌ ｗｅｉｇｈｔ（ＢＣＷ）、Ｂｉ－ｄｉｒｅｃｔｉｏｎａｌ ｏｐｔｉｃａｌ ｆｌｏｗ（ＢＤＯＦ）等が付随的モードとしてさらに、又は代わりに使用できる。アフィンモードは、アフィン動き予測（ａｆｆｉｎｅ ｍｏｔｉｏｎ ｐｒｅｄｉｃｔｉｏｎ）モードと呼ばれることもある。ＭＶＰモードは、ＡＭＶＰ（ａｄｖａｎｃｅｄ ｍｏｔｉｏｎ ｖｅｃｔｏｒ ｐｒｅｄｉｃｔｉｏｎ）モードと呼ばれることもある。本文書で、一部のモード及び／又は一部のモードにより導出された動き情報の候補は、他のモードの動き情報に関する候補の一つに含まれることもある。例えば、ＨＭＶＰ候補は、前記マージ／スキップモードのマージ候補として追加されることがあり、又は前記ＭＶＰモードのｍｖｐ候補として追加されることもある。

【0152】

現在ブロックのインター予測モードを指す予測モード情報がエンコーディング装置からデコーディング装置にシグナリングされることができる。前記予測モード情報は、ビットストリームに含まれ、デコーディング装置に受信されることができる。前記予測モード情報は、多数の候補モードのうちの一つを指示するインデックス情報を含むことができる。或いは、フラグ情報の階層的シグナリングを通じて、インター予測モードを指示することもある。この場合、前記予測モード情報は、一つ以上のフラグを含むことができる。例えば、スキップフラグをシグナリングしてスキップモードの適用可否を指示し、スキップモードが適用されない場合に、マージフラグをシグナリングしてマージモードの適用可否を指示し、マージモードが適用されない場合に、ＭＶＰモードが適用されるものと指示するか、追加的な区分のためのフラグをさらにシグナリングすることもある。アフィンモードは、独立したモードとしてシグナリングされることもあり、又はマージモード又はＭＶＰモード等に従属的なモードとしてシグナリングされることもある。例えば、アフィンモードは、アフィンマージモード及びアフィンＭＶＰモードを含むことができる。

【0153】

一方、現在ブロックに、前述したｌｉｓｔ０（Ｌ０）予測、ｌｉｓｔ１（Ｌ１）予測、又は双（ｂｉ－ｐｒｅｄｉｃｔｉｏｎ）予測が現在ブロック（現在コーディングユニット）に使用されるか否かを示す情報がシグナリングされることができる。前記情報は、動き予測方向情報、インター予測方向情報又はインター予測指示情報と呼ばれ得、例えば、ｉｎｔｅｒ＿ｐｒｅｄ＿ｉｄｃのシンタックス要素の形態で構成／エンコーディング／シグナリングされることができる。すなわち、ｉｎｔｅｒ＿ｐｒｅｄ＿ｉｄｃのシンタックス要素は、前述したｌｉｓｔ０（Ｌ０）予測、ｌｉｓｔ１（Ｌ１）予測、又は双予測（ｂｉ－ｐｒｅｄｉｃｔｉｏｎ）が現在ブロック（現在コーディングユニット）に使用されるか否かを示すことができる。本文書では、説明の便宜のために、ｉｎｔｅｒ＿ｐｒｅｄ＿ｉｄｃのシンタックス要素が指すインター予測タイプ（Ｌ０予測、Ｌ１予測、又はＢＩ予測）は、動き予測方向と表示されることができる。 Ｌ０予測はｐｒｅｄ＿Ｌ０、Ｌ１予測はｐｒｅｄ＿Ｌ１、双予測はｐｒｅｄ＿ＢＩで表されることもある。例えば、ｉｎｔｅｒ＿ｐｒｅｄ＿ｉｄｃのシンタックス要素の値に応じて、次の表のような予測タイプが決定されることができる。

【0154】

【表1】

【0155】

前述したように、一つのピクチャは、一つ以上のスライス（ｓｌｉｃｅ）を含むことができる。スライスは、Ｉスライス（ｉｎｔｒａ ｓｌｉｃｅ）、Ｐスライス（ｐｒｅｄｉｃｔｉｖｅ ｓｌｉｃｅ）及びＢスライス（ｂｉ－ｐｒｅｄｉｃｔｉｖｅ ｓｌｉｃｅ）を含むスライスタイプのうちの一つのタイプを有することができる。前記スライスタイプは、スライスタイプ情報に基づいて指示されることができる。Ｉスライス内のブロックに対しては、予測のためにインター予測は使用されず、イントラ予測のみ使用されることができる。もちろん、この場合にも、予測なしで原本サンプル値をコーディングしてシグナリングすることもある。Ｐスライス内のブロックに対しては、イントラ予測又はインター予測が使用でき、インター予測が使用される場合には、単（ｕｎｉ）予測のみ使用できる。一方、Ｂスライス内のブロックに対しては、イントラ予測又はインター予測が使用でき、インター予測が使用される場合には、最大の双（ｂｉ）予測まで使用できる。

【0156】

Ｌ０及びＬ１は、現在ピクチャよりも以前にエンコーディング／デコーディングされた参照ピクチャを含むことができる。例えば、Ｌ０は、ＰＯＣ順序上、現在ピクチャよりも以前及び／又は以後の参照ピクチャを含むことができ、Ｌ１は、ＰＯＣ順序上、現在ピクチャよりも以後及び／又は以前の参照ピクチャを含むことができる。この場合、Ｌ０にはＰＯＣ順序上、現在ピクチャよりも以前の参照ピクチャに相対的にさらに低い参照ピクチャのインデックスが割り当てられることがあり、Ｌ１にはＰＯＣ順序上、現在ピクチャよりも以後の参照ピクチャに相対的にさらに低い参照ピクチャのインデックスが割り当てられることがある。Ｂスライスの場合、双予測が適用でき、この場合にも、単方向の双予測が適用でき、又は両方向の双予測が適用できる。両方向の双予測は、真（ｔｒｕｅ）の双予測と呼ばれ得る。

【0157】

前述したように、エンコーディング段で予測を介して導出された予測されたブロック（予測サンプル）に基づいてレジデュアルブロック（レジデュアルサンプル）が導出されることができ、前記レジデュアルサンプルに変換／量子化を経てレジデュアル情報が生成されることができる。前記レジデュアル情報は、量子化された変換係数に対する情報を含むことができる。前記レジデュアル情報は、ビデオ／映像情報に含まれることができ、前記ビデオ／映像情報は、エンコーディングされてビットストリーム形態でデコーディング装置に伝達されることができる。デコーディング装置は、前記ビットストリームから前記レジデュアル情報を取得することができ、前記レジデュアル情報に基づいてレジデュアルサンプルを導出することができる。具体的に、前記デコーディング装置は、前記レジデュアル情報に基づいて量子化された変換係数を導出し、逆量子化／逆変換手順を介してレジデュアルブロック（レジデュアルサンプル）を導出することができる。

【0158】

一方、前記（逆）変換及び／又は（逆）量子化のうち少なくとも一つの手順は、省略されることができる。

【0159】

以下、復元ピクチャのために実行されるインループフィルタリング手順が説明される。インループフィルタリング手順を介して修正された（ｍｏｄｉｆｉｅｄ）復元サンプル、ブロック、ピクチャ（又は、修正フィルタリングされた（ｍｏｄｉｆｉｅｄ ｆｉｌｔｅｒｅｄ）サンプル、ブロック、ピクチャ）が生成されることができ、デコーディング装置で前記修正された（修正フィルタリングされた）復元ピクチャがデコーディングされたピクチャとして出力されることができ、また、エンコーディング装置／デコーディング装置の復号ピクチャバッファ又はメモリに格納されて以後ピクチャのエンコーディング／デコーディング時にインター予測手順で参照ピクチャとして使われることができる。前記インループフィルタリング手順は、前述したように、デブロッキングフィルタリング手順、ＳＡＯ（ｓａｍｐｌｅ ａｄａｐｔｉｖｅ ｏｆｆｓｅｔ）手順及び／又はＡＬＦ（ａｄａｐｔｉｖｅ ｌｏｏｐ ｆｉｌｔｅｒ）手順などを含むことができる。この場合、前記デブロッキングフィルタリング手順、ＳＡＯ（ｓａｍｐｌｅ ａｄａｐｔｉｖｅ ｏｆｆｓｅｔ）手順、ＡＬＦ（ａｄａｐｔｉｖｅ ｌｏｏｐ ｆｉｌｔｅｒ）手順、及びバイラテラルフィルタ（ｂｉ－ｌａｔｅｒａｌ ｆｉｌｔｅｒ）手順のうち一つ又は一部が順次に適用されることができ、又は全部が順次に適用されることもできる。例えば、復元ピクチャに対してデブロッキングフィルタリング手順が適用された後、ＳＡＯ手順が実行されることができる。又は、例えば、復元ピクチャに対してデブロッキングフィルタリング手順が適用された後、ＡＬＦ手順が実行されることができる。これはエンコーディング装置でも同様に実行されることができる。

【0160】

デブロッキングフィルタリングは、復元されたピクチャでブロック間の境界に発生する歪曲を除去するフィルタリング技法である。デブロッキングフィルタリング手順は、例えば、復元ピクチャでターゲット境界を導出し、前記ターゲット境界に対するｂＳ（ｂｏｕｎｄａｒｙ ｓｔｒｅｎｇｔｈ）を決定し、前記ｂＳに基づいて前記ターゲット境界に対するデブロッキングフィルタリングを実行することができる。前記ｂＳは、前記ターゲット境界を隣接する二つのブロックの予測モード、動きベクトル差、参照ピクチャ同一可否、０でない有効係数の存在可否などに基づいて決定されることができる。

【0161】

ＳＡＯは、サンプル単位で復元ピクチャと原本ピクチャとのオフセット差を補償する方法であって、例えば、バンドオフセット（Ｂａｎｄ Ｏｆｆｓｅｔ）、エッジオフセット（Ｅｄｇｅ Ｏｆｆｓｅｔ）などのタイプに基づいて適用されることができる。ＳＡＯによると、各ＳＡＯタイプによってサンプルを互いに異なるカテゴリに分類し、カテゴリに基づいて各サンプルにオフセット値を足すことができる。ＳＡＯのためのフィルタリング情報は、ＳＡＯ適用可否に関する情報、ＳＡＯタイプ情報、ＳＡＯオフセット値情報などを含むことができる。ＳＡＯは、前記デブロッキングフィルタリング適用後の復元ピクチャに対して適用されることもできる。

【0162】

ＡＬＦ（Ａｄａｐｔｉｖｅ Ｌｏｏｐ Ｆｉｌｔｅｒ）は、復元ピクチャに対してフィルタ形状によるフィルタ係数に基づいてサンプル単位でフィルタリングする技法である。エンコーディング装置は、復元ピクチャと原本ピクチャの比較を介してＡＬＦ適用可否、ＡＬＦ形状及び／又はＡＬＦフィルタリング係数などを決定することができ、デコーディング装置にシグナリングすることができる。即ち、ＡＬＦのためのフィルタリング情報は、ＡＬＦ適用可否に関する情報、ＡＬＦフィルタ形状（ｓｈａｐｅ）情報、ＡＬＦフィルタリング係数情報などを含むことができる。ＡＬＦは、前記デブロッキングフィルタリング適用後の復元ピクチャに対して適用されることもできる。

【0163】

図８は、ＡＬＦフィルタ形状の例を示す。

【0164】

図８の（ａ）は、７×７ダイアモンドフィルタ形状を示し、（ｂ）は、５×５ダイアモンドフィルタ形状を示す。図８において、フィルタ形状内のＣｎは、フィルタ係数を示す。前記Ｃｎにおいて、ｎが同じ場合、これは同じフィルタ係数が割り当てられることができることを示す。本文書において、ＡＬＦのフィルタ形状によってフィルタ係数が割り当てられる位置及び／又は単位は、フィルタタブと呼ばれることができる。この時、各々のフィルタタブには一つのフィルタ係数が割り当てられることができ、フィルタタブが配列された形態は、フィルタ形状に該当することができる。フィルタ形状のセンターに位置したフィルタタブは、センターフィルタタブと呼ばれることができる。センターフィルタタブを基準にして互いに対応される位置に存在する同じｎ値の二つのフィルタタブには同じフィルタ係数が割り当てられることができる。例えば、７×７ダイアモンドフィルタ形状の場合、２５個のフィルタタブを含み、Ｃ０乃至Ｃ１１のフィルタ係数が中央対称形態で割り当てられるため、１３個のフィルタ係数のみで前記２５個のフィルタタブにフィルタ係数を割り当てることができる。また、例えば、５×５ダイアモンドフィルタ形状の場合、１３個のフィルタタブを含み、Ｃ０乃至Ｃ５のフィルタ係数が中央対称形態で割り当てられるため、７個のフィルタ係数のみで前記１３個のフィルタタブにフィルタ係数を割り当てることができる。例えば、シグナリングされるフィルタ係数に関する情報のデータ量を減らすために、７×７ダイアモンドフィルタ形状に対する１３個のフィルタ係数のうち、１２個のフィルタ係数は、（明示的に）シグナリングされ、１個のフィルタ係数は、（暗黙的に）導出されることができる。また、例えば、５×５ダイアモンドフィルタ形状に対する７個のフィルタ係数のうち、６個のフィルタ係数は、（明示的に）シグナリングされて、１個のフィルタ係数は、（暗黙的に）導出されることができる。

【0165】

本文書の一実施例によると、前記ＡＬＦ手順のために使われるＡＬＦパラメータがＡＰＳ（ａｄａｐｔａｔｉｏｎ ｐａｒａｍｅｔｅｒ ｓｅｔ）を介してシグナリングされることができる。前記ＡＬＦパラメータは、前記ＡＬＦのためのフィルタ情報又はＡＬＦデータから導出されることができる。

【0166】

ＡＬＦは、前述したように、ビデオ／映像コーディングで適用されることができるインループフィルタリング技術（ｔｅｃｈｎｉｑｕｅ）のタイプである。ＡＬＦは、ウィーナーベースの（Ｗｉｅｎｅｒ－ｂａｓｅｄ）適応的フィルタを使用して実行されることができる。これは原本サンプルとデコーディングされたサンプル（又は、復元サンプル）との間のＭＳＥ（ｍｅａｎ ｓｑｕａｒｅ ｅｒｒｏｒ）を最小化するためである。ＡＬＦツール（ｔｏｏｌ）のための上位レベルデザイン（ｈｉｇｈ ｌｅｖｅｌ ｄｅｓｉｇｎ）は、ＳＰＳ及び／又はスライスヘッダ（又は、タイルグループヘッダ）で接近できるシンタックス要素を含有（ｉｎｃｏｒｐｏｒａｔｅ）することができる。

【0167】

一例において、４×４ルマブロックの各々に対するフィルタリング前に、回転又は対角及び垂直フリピング（ｆｌｉｐｐｉｎｇ）のような幾何的変換が、前記ブロックのために算出された傾き値に依存するフィルタ係数ｆ（ｋ、ｌ）及び該当フィルタクリッピング値ｃ（ｋ、ｌ）に適用されることができる。これは、フィルタ支援領域内のサンプルにこれらの変換が適用されることと同じである。ＡＬＦが適用される他のブロックを生成すること、これらのブロックをそれらの方向性によって整列することと類似する。

【0168】

例えば、三つの変換、対角、垂直フリップ（ｆｌｉｐ）、及び回転は、以下の数式に基づいて実行されることができる。

【0169】

【数1】

【0170】

【数2】

【0171】

【数3】

【0172】

前記数式１乃至数式３において、Ｋは、フィルタの大きさである。０≦ｋ、１≦Ｋ－１は、係数座標（ｃｏｅｆｆｉｃｉｅｎｔｓ ｃｏｏｒｄｉｎａｔｅｓ）である。例えば、（０、０）は、左上側コーナー座標であり、及び／又は（Ｋ－１、Ｋ－１）は、右下側コーナー座標である。変換と四方向の四つの傾きとの間の関係は、以下の表のように要約されることができる。

【0173】

【表2】

【0174】

ＡＬＦフィルタパラメータは、ＡＰＳとスライスヘッダでシグナリングされることができる。一つのＡＰＳで、最大２５個までのルマフィルタ係数とクリッピング値インデックスがシグナリングされることができる。一つのＡＰＳで、最大８個のクロマフィルタ係数とクリッピング値インデックスがシグナリングされることができる。ビットオーバーヘッドを減らすために、ルマ成分に対する互いに異なる分類のフィルタ係数が併合されることができる。スライスヘッダで、現在スライスのために使われるＡＰＳ（現在スライスが参照する）のインデックスがシグナリングされることができる。

【0175】

ＡＰＳからデコーディングされるクリッピング値インデックスは、クリッピング値のルマテーブルとクリッピング値のクロマテーブルとを利用してクリッピング値を決定することが可能なようにすることができる。これらのクリッピング値は、インターナルビット深度（ｉｎｔｅｒｎａｌ ｂｉｔｄｅｐｔｈ）に依存的である。より具体的に、クリッピング値のルマテーブルとクリッピング値のクロマテーブルは、以下の数式に基づいて導出されることができる。

【0176】

【数4】

【0177】

【数5】

【0178】

前記数式において、Ｂは、インターナルビット深度（ｉｎｔｅｒｎａｌ ｂｉｔｄｅｐｔｈ）であり、Ｎは、許容されたクリッピング値の数（事前に決定された数）である。例えば、Ｎは、４である。

【0179】

スライスヘッダで、最大７個のＡＰＳインデックスが現在スライスのために使われるルマフィルタセットを示すためにシグナリングされることができる。フィルタリング手順は、ＣＴＢレベルでさらに制御されることができる。例えば、ＡＬＦがルマＣＴＢに適用されるかどうかを指示するフラグが、シグナリングされることができる。ルマＣＴＢは、１６個の固定されたフィルタセット及びＡＰＳからのフィルタセットのうち一つのフィルタセットを選択することができる。フィルタセットインデックスは、どのフィルタセットが適用されるかを指示するようにルマＣＴＢのためにシグナリングされることができる。１６個の固定されたフィルタセットは、事前に定義されることができ、エンコーダとデコーダの両方ともにハードコーディング（ｈａｒｄ－ｃｏｄｅｄ）されることができる。

【0180】

クロマ成分のために、ＡＰＳインデックスは、現在スライスのために使われるクロマフィルタセットを指示するためスライスヘッダでシグナリングされることができる。ＣＴＢレベルで、ＡＰＳに二つ以上のクロマフィルタセットがある場合、フィルタインデックスは、各クロマＣＴＢのためにシグナリングされることができる。

【0181】

フィルタ係数は、１２８を基準にして（ｎｏｒｍ）量子化されることができる。掛け算複雑度を制限するために、ビットストリームカンフォーマンス（ｂｉｔｓｔｒｅａｍ ｃｏｎｆｏｒｍａｎｃｅ）が適用されることができ、したがって、中心位置にない（ｏｆ ｎｏｎ－ｃｅｎｔｒａｌ ｐｏｓｉｔｉｏｎ）係数値は、０から２８までの範囲内にあり、及び／又は他の位置の係数値は、－２７から２７－１までの範囲内にある。中心位置係数は、ビットストリームでシグナリングされずに、１２８に事前に決定（考慮）されることができる。

【0182】

現在ブロックに対してＡＬＦが可用な場合、各サンプルＲ（ｉ、ｊ）は、フィルタリングされることができ、そしてフィルタリングされた結果であるＲ′（ｉ、ｊ）は、以下の数式のように表現されることができる。

【0183】

【数6】

【0184】

前記数式において、ｆ（ｋ、ｌ）は、デコーディングされたフィルタ係数であり、Ｋ（ｘ、ｙ）は、クリッピング関数であり、ｃ（ｋ、ｌ）は、デコーディングされたクリッピングパラメータである。例えば、前記変数ｋ及び／又はｌは、－Ｌ／２からＬ／２まで変わることができる。ここで、Ｌは、フィルタ長さを示すことができる。クリッピング関数Ｋ（ｘ、ｙ）＝ｍｉｎ（ｙ、ｍａｘ（－ｙ、ｘ））は、関数Ｃｌｉｐ３（－ｙ、ｙ、ｘ）に対応できる。

【0185】

一例において、ＡＬＦのラインバッファ要求事項を減少させるために、修正されたブロック分類とフィルタリングが水平ＣＴＵ境界に隣接したサンプルのために適用されることができる。このために、仮想境界が定義されることができる。

【0186】

図９は、本文書の一実施例によってフィルタリング手順に適用される仮想境界（ｖｉｒｔｕａｌ ｂｏｕｎｄａｒｙ）を説明するための図面である。図１０は、本文書の一実施例によって仮想境界を利用するＡＬＦ手順の一例を示す。図１０は、図９と共に説明される。

【0187】

図９を参照すると、仮想境界は、Ｎ個のサンプルほど水平ＣＴＵ境界をシフティングすることによって定義されたラインである。一例において、Ｎは、ルマ成分に対しては４であり、及び／又は、Ｎは、クロマ成分に対しては２である。

【0188】

図９において、修正されたブロック分類がルマ成分に対して適用されることができる。仮想境界上の４×４ブロックの１Ｄラプラシアン傾き計算のために、ただ仮想境界上のサンプルのみが使われることができる。同様に、仮想境界下の４×４ブロックの１Ｄラプラシアン傾き計算のために、ただ仮想境界下のサンプルのみが使われることができる。活動性値Ａの量子化は、１Ｄラプラシアン傾き計算で使われるサンプルの縮小された個数を考慮し、それによってスケーリングされることができる。

【0189】

フィルタリング手順のために、仮想境界での対称的なパディング演算がルマとクロマ成分のために使われることができる。図９を参照すると、仮想境界下にフィルタリングされたサンプルが位置する場合、仮想境界上に位置する隣接サンプルがパディングされることができる。一方、他側の該当サンプルも対称的にパディングされることができる。

【0190】

図１０によって説明された手順は、境界を横切ってフィルタが可用しない場合、スライス、ブリック、及び／又はタイルの境界のためにも使われることができる。ＡＬＦブロック分類のために、ただ同じスライス、ブリック、及び／又はタイルに含まれているサンプルのみが使われることができ、そして、活動性値は、それによってスケーリングされることができる。ＡＬＦフィルタリングのために、水平及び／又は垂直境界に対する水平及び／又は垂直方向の各々に対して対称的なパディングが適用されることができる。

【0191】

図１１は、本文書の一実施例によるクロス－コンポーネント適応的ループフィルタリング（ｃｒｏｓｓ ｃｏｍｐｏｎｅｎｔ ａｄａｐｔｉｖｅ ｌｏｏｐ ｆｉｌｔｅｒｉｎｇ、ＣＣＡＬＦ（ＣＣ－ＡＬＦ））手順を説明するための図面である。ＣＣＡＬＦ手順は、クロス－コンポーネントフィルタリング手順と呼ばれることもできる。

【0192】

一観点で、ＡＬＦ手順は、一般ＡＬＦ手順とＣＣＡＬＦ手順を含むことができる。即ち、ＣＣＡＬＦ手順は、ＡＬＦ手順の一部手順を指すことができる。他の観点で、フィルタリング手順は、デブロッキング手順、ＳＡＯ手順、ＡＬＦ手順、及び／又はＣＣＡＬＦ手順を含むことができる。

【0193】

ＣＣ－ＡＬＦは、ルマサンプル値を使用して各クロマ成分を改善（ｒｅｆｉｎｅ）することができる。ＣＣ－ＡＬＦは、ビットストリームの（映像）情報により制御され、前記映像情報は、（ａ）各クロマ成分に対するフィルタ係数に関する情報と、（ｂ）サンプルのブロックに対するフィルタ適用を制御するマスクに関する情報と、を含むことができる。フィルタ係数は、ＡＰＳでシグナリングされることができ、ブロック大きさとマスクは、スライスレベルでシグナリングされることができる。

【0194】

図１１を参照すると、ＣＣ－ＡＬＦは、各クロマ成分のためにルマチャネルに線形ダイアモンド形状のフィルタ（図１１の（ｂ））を適用することによって動作できる。フィルタ係数は、ＡＰＳに送信され、２１０のファクタによりスケーリングされ、そして固定小数点表現のために四捨五入される。フィルタの適用は、可変ブロック大きさで制御され、各サンプルのブロックに対して受信されたコンテキストコーディングフラグによりシグナリングされることができる。ＣＣ－ＡＬＦ可用フラグと共にブロック大きさは、各クロマ成分のためにスライスレベルで受信されることができる。ブロック大きさ（クロマサンプルに対する）は、１６×１６、３２×３２、６４×６４、又は１２８×１２８である。

【0195】

以下の実施例では復元ルマサンプルに基づいて、ＡＬＦによりフィルタリングされた復元クロマサンプルを再フィルタリング（ｒｅ－ｆｉｌｔｅｒｉｎｇ）又は修正（ｍｏｄｉｆｙｉｎｇ）する方法が提案される。

【0196】

本文書の一実施例は、ＣＣ－ＡＬＦのうちフィルタオンオフ（ｏｎ／ｏｆｆ）送信及びフィルタ係数送信と関連したものである。前述したように、本文書に開示されるシンタックステーブル内の情報（シンタックス要素）は、映像／ビデオ情報に含まれることができ、エンコーディング装置で構成／エンコーディングされてビットストリーム形態でデコーディング装置に伝達されることができる。デコーディング装置は、該当シンタックステーブル内の情報（シンタックス要素）をパーシング／デコーディングすることができる。デコーディング装置は、デコーディングされた情報に基づいてピクチャ／イメージ／ビデオデコーディング手順（具体的に、例えば、前記ＣＣ－ＡＬＦ手順）を実行することができる。以下、他の実施例でも同様である。

【0197】

以下の表は、本文書の実施例によるスライスヘッダ情報の一部シンタックスを示す。

【0198】

【表3】

【0199】

以下の表は、前記表に含まれているシンタックス要素に関する例示的なセマンティクスを示す。

【0200】

【表4】

【0201】

前記二つの表を参照すると、ｓｌｉｃｅ ｈｅａｄｅｒでｓｐｓ＿ｃｒｏｓｓ＿ｃｏｍｐｏｎｅｎｔ＿ａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇが１である場合、該当ｓｌｉｃｅ内にＣｂ ＣＣ－ＡＬＦ適用有無判断のためにｓｌｉｃｅ＿ｃｒｏｓｓ＿ｃｏｍｐｏｎｅｎｔ＿ａｌｆ＿ｃｂ＿ｅｎａｂｌｅｄ＿ｆｌａｇのパーシング（ｐａｒｓｉｎｇ）が実行されることができる。ｓｌｉｃｅ＿ｃｒｏｓｓ＿ｃｏｍｐｏｎｅｎｔ＿ａｌｆ＿ｃｂ＿ｅｎａｂｌｅｄ＿ｆｌａｇが１である場合、該当Ｃｂ ｓｌｉｃｅにＣＣ－ＡＬＦを適用し、ｓｌｉｃｅ＿ｃｒｏｓｓ＿ｃｏｍｐｏｎｅｎｔ＿ａｌｆ＿ｃｂ＿ｒｅｕｓｅ＿ｔｅｍｐｏｒａｌ＿ｌａｙｅｒ＿ｆｉｌｔｅｒが１である場合、既存同じｔｅｍｐｏｒａｌ ｌａｙｅｒのｆｉｌｔｅｒが再使用されることができる。ｓｌｉｃｅ＿ｃｒｏｓｓ＿ｃｏｍｐｏｎｅｎｔ＿ａｌｆ＿ｃｂ＿ｅｎａｂｌｅｄ＿ｆｌａｇが０である場合、ｓｌｉｃｅ＿ｃｒｏｓｓ＿ｃｏｍｐｏｎｅｎｔ＿ａｌｆ＿ｃｂ＿ａｐｓ＿ｉｄｐａｒｓｉｎｇを介して該当ＡＰＳ（ａｄａｐｔａｔｉｏｎ ｐａｒａｍｅｔｅｒ ｓｅｔ）ｉｄにあるｆｉｌｔｅｒを使用してＣＣ－ＡＬＦが適用されることができる。ｓｌｉｃｅ＿ｃｒｏｓｓ＿ｃｏｍｐｏｎｅｎｔ＿ａｌｆ＿ｃｂ＿ｌｏｇ２＿ｃｏｎｔｒｏｌ＿ｓｉｚｅ＿ｍｉｎｕｓ４は、Ｃｂ ｓｌｉｃｅでＣＣ－ＡＬＦ適用ブロック単位を意味することができる。

【0202】

例えば、前記ｓｌｉｃｅ＿ｃｒｏｓｓ＿ｃｏｍｐｏｎｅｎｔ＿ａｌｆ＿ｃｂ＿ｌｏｇ２＿ｃｏｎｔｒｏｌ＿ｓｉｚｅ＿ｍｉｎｕｓ４の値が０である場合、１６×１６単位でＣＣ－ＡＬＦ適用有無が判断される。ｓｌｉｃｅ＿ｃｒｏｓｓ＿ｃｏｍｐｏｎｅｎｔ＿ａｌｆ＿ｃｂ＿ｌｏｇ２＿ｃｏｎｔｒｏｌ＿ｓｉｚｅ＿ｍｉｎｕｓ４の値が１である場合、３２×３２単位でＣＣ－ＡＬＦ適用有無が判断される。ｓｌｉｃｅ＿ｃｒｏｓｓ＿ｃｏｍｐｏｎｅｎｔ＿ａｌｆ＿ｃｂ＿ｌｏｇ２＿ｃｏｎｔｒｏｌ＿ｓｉｚｅ＿ｍｉｎｕｓ４の値が２である場合、６４×６４単位でＣＣ－ＡＬＦ適用有無が判断される。ｓｌｉｃｅ＿ｃｒｏｓｓ＿ｃｏｍｐｏｎｅｎｔ＿ａｌｆ＿ｃｂ＿ｌｏｇ２＿ｃｏｎｔｒｏｌ＿ｓｉｚｅ＿ｍｉｎｕｓ４の値が３である場合、１２８×１２８単位でＣＣ－ＡＬＦ適用有無が判断される。また、Ｃｒ ＣＣ－ＡＬＦのために、前記と同じ構造のｓｙｎｔａｘを使用する。

【0203】

以下の表は、ＡＬＦデータに関する例示的なシンタックスを示す。

【0204】

【表5】

【0205】

以下の表は、前記表に含まれているシンタックス要素に関する例示的なセマンティクスを示す。

【0206】

【表6-1】

【0207】

【表6-2】

【0208】

前記二つの表を参照すると、ＣＣ－ＡＬＦシンタックス要素は、既存（一般）ＡＬＦシンタックス構造によらずに独立的に送信され、独立的に適用されることができるように構成されている。即ち、ＳＰＳ上のＡＬＦ ｔｏｏｌがオフ（ｏｆｆ）されている場合にも、ＣＣ－ＡＬＦが適用されることができる。既存ＡＬＦ構造とは独立的にＣＣ－ＡＬＦが作動可能でなければならないため、新しいハードウェアパイプラインデザインが要求される。これはハードウェア具現時の費用増加及びハードウェアディレイ増加の原因となる。

【0209】

また、ＡＬＦは、ルマとクロマ映像の両方ともＣＴＵ単位で適用有無を判断し、前記判断の結果は、シグナリングを介して復号器に送信する。しかし、１６×１６から１２８×１２８単位の可変的ＣＣ－ＡＬＦ適用有無が判断され、これを適用するため、既存ＡＬＦ構造とＣＣ－ＡＬＦとの間に衝突が発生できる。これはハードウェア具現時の問題点を発生させる同時に多様な可変的ＣＣ－ＡＬＦ適用のためのラインバッファ増加原因となる。

【0210】

本発明ではＣＣ－ＡＬＦシンタックス構造をＡＬＦシンタックス構造に統合的に適用することによって、前記提起したＣＣ－ＡＬＦのハードウェア具現上の問題点を解決しようとする。

【0211】

本文書の一実施例によると、ＣＣ－ＡＬＦが使用（適用）されるかどうかを決定するために、シーケンスパラメータセット（ｓｅｑｕｅｎｃｅ ｐａｒａｍｅｔｅｒ ｓｅｔ、ＳＰＳ）は、ＣＣ－ＡＬＦ可用フラグ（ｓｐｓ＿ｃｃａｌｆ＿ｅｎａｂｌｅ＿ｆｌａｇ）を含むことができる。前記ＣＣ－ＡＬＦ可用フラグは、ＡＬＦが使用（適用）されるかどうかを決定するためのＡＬＦ可用フラグ（ｓｐｓ＿ａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）と独立的に送信されることができる。

【0212】

以下の表は、本実施例によるＳＰＳの例示的なシンタックスの一部を示す。

【0213】

【表7】

【0214】

前記表を参照すると、ＣＣ－ＡＬＦは、常にＡＬＦが作動する場合にのみ適用されることができる。即ち、ＡＬＦ可用フラグ（ｓｐｓ＿ａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）が１である場合にのみ、ＣＣ－ＡＬＦ可用フラグ（ｓｐｓ＿ｃｃａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）がパーシングされることができる。前記表によって、ＣＣ－ＡＬＦとＡＬＦが組み合わせられることができる。ＣＣ－ＡＬＦ可用フラグは、ＣＣ－ＡＬＦが可用であるかどうか（と関連することができる）を示すことができる。

【0215】

以下の表は、スライスヘッダに関する例示的なシンタックスの一部を示す。

【0216】

【表8】

【0217】

前記表を参照すると、ｓｐｓ＿ａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇが１である場合にのみ、ｓｐｓ＿ｃｃａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇのパーシングが実行されることができる。前記表に含まれているシンタックス要素は、表４に基づいて説明されることができる。一例において、エンコーディング装置によりエンコーディングされる又はデコーディング装置により取得（受信）される映像情報は、スライスヘッダ情報（ｓｌｉｃｅ＿ｈｅａｄｅｒ（））を含むことができる。前記ＣＣＡＬＦ可用フラグ（ｓｐｓ＿ｃｃａｌｆ＿ｆｌａｇ）の値が１であるという判断に基づいて、前記スライスヘッダ情報は、前記フィルタリングされた復元クロマサンプルのＣｂカラー成分に対してＣＣ－ＡＬＦが可用であるかどうかと関連した第１のフラグ（ｓｌｉｃｅ＿ｃｒｏｓｓ＿ｃｏｍｐｏｎｅｎｔ＿ａｌｆ＿ｃｂ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）、及び前記フィルタリングされた復元クロマサンプルのＣｒカラー成分に対してＣＣ－ＡＬＦが可用であるかどうかと関連した第２のフラグ（ｓｌｉｃｅ＿ｃｒｏｓｓ＿ｃｏｍｐｏｎｅｎｔ＿ａｌｆ＿ｃｒ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）を含むことができる。

【0218】

一例において、前記第１のフラグ（ｓｌｉｃｅ＿ｃｒｏｓｓ＿ｃｏｍｐｏｎｅｎｔ＿ａｌｆ＿ｃｂ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値が１であるという判断に基づいて、前記スライスヘッダ情報は、前記Ｃｂカラー成分のためのクロス－コンポーネントフィルタ係数の導出のための第１のＡＰＳのＩＤ情報（ｓｌｉｃｅ＿ｃｒｏｓｓ＿ｃｏｍｐｏｎｅｎｔ＿ａｌｆ＿ｃｂ＿ａｐｓ＿ｉｄ）を含むことができる。前記第２のフラグ（ｓｌｉｃｅ＿ｃｒｏｓｓ＿ｃｏｍｐｏｎｅｎｔ＿ａｌｆ＿ｃｒ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値が１であるという判断に基づいて、前記スライスヘッダ情報は、前記Ｃｒカラー成分のためのクロス－コンポーネントフィルタ係数の導出のための第２のＡＰＳのＩＤ情報（ｓｌｉｃｅ＿ｃｒｏｓｓ＿ｃｏｍｐｏｎｅｎｔ＿ａｌｆ＿ｃｒ＿ａｐｓ＿ｉｄ）を含むことができる。

【0219】

以下の表は、本実施例の他の例によるＳＰＳシンタックスの一部を示す。

【0220】

【表9】

【0221】

以下の表は、スライスヘッダシンタックスの一部を例示的に示す。

【0222】

【表10】

【0223】

前記表９を参照すると、ＣｈｒｏｍａＡｒｒａｙＴｙｐｅが０でない、かつＡＬＦ可用フラグ（ｓｐｓ＿ａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）が１である場合、ＳＰＳは、ＣＣＡＬＦ可用フラグ（ｓｐｓ＿ｃｃａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）を含むことができる。例えば、ＣｈｒｏｍａＡｒｒａｙＴｙｐｅが０でない場合は、クロマフォーマットがモノクロームでない、クロマフォーマットがモノクロームでない場合に基づいてＣＣＡＬＦ可用フラグがＳＰＳを介して送信されることができる。

【0224】

前記表９を参照すると、ＣｈｒｏｍａＡｒｒａｙＴｙｐｅが０でない場合に基づいて、ＣＣＡＬＦに関する情報（ｓｌｉｃｅ＿ｃｒｏｓｓ＿ｃｏｍｐｏｎｅｎｔ＿ａｌｆ＿ｃｂ＿ｅｎａｂｌｅｄ＿ｆｌａｇ、ｓｌｉｃｅ＿ｃｒｏｓｓ＿ｃｏｍｐｏｎｅｎｔ＿ａｌｆ＿ｃｂ＿ａｐｓ＿ｉｄ、ｓｌｉｃｅ＿ｃｒｏｓｓ＿ｃｏｍｐｏｎｅｎｔ＿ａｌｆ＿ｃｒ＿ｅｎａｂｌｅｄ＿ｆｌａｇ、ｓｌｉｃｅ＿ｃｒｏｓｓ＿ｃｏｍｐｏｎｅｎｔ＿ａｌｆ＿ｃｒ＿ａｐｓ＿ｉｄ）がスライスヘッダ情報に含まれることができる。

【0225】

一例において、エンコーディング装置によりエンコーディングされる又はデコーディング装置により取得される映像情報は、前記ＳＰＳを含むことができる。前記ＳＰＳは、ＡＬＦが可用であるかどうかと関連した第１のＡＬＦ可用フラグ（ｓｐｓ＿ａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）を含むことができる。例えば、前記第１のＡＬＦ可用フラグの値が１であるという判断に基づいて、前記ＳＰＳは、前記クロス－コンポーネントフィルタリングが可用であるかどうかと関連したＣＣＡＬＦ可用フラグを含むことができる。他の例において、ｓｐｓ＿ｃｃａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇを使用せずに、ｓｐｓ＿ａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇが１である場合、常にＣＣＡＬＦを適用（ｓｐｓ＿ｃｃａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇ＝＝１）することもできる。

【0226】

以下の表は、本実施例の他の例によるスライスヘッダシンタックスの一部を示す。

【0227】

【表11】

【0228】

前記表を参照すると、ＡＬＦ可用フラグ（ｓｐｓ＿ａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）が１である場合にのみ、ＣＣＡＬＦ可用フラグ（ｓｐｓ＿ｃｃａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）パーシングが実行されることができる。

【0229】

以下の表は、前記表に含まれているシンタックス要素に関する例示的なセマンティクスを示す。

【0230】

【表12】

【0231】

前記表のｓｌｉｃｅ＿ｃｃａｌｆ＿ｃｈｒｏｍａ＿ｉｄｃは、以下の表のセマンティクスにより説明されることもできる。

【0232】

【表13】

【0233】

以下の表は、本実施例の他の例によるスライスヘッダシンタックスの一部を示す。

【0234】

【表14】

【0235】

前記表に含まれているシンタックス要素は、表１２又は表１３によって説明されることができる。また、クロマフォーマットがモノクロームでない場合、スライスヘッダにＣＣＡＬＦ関連情報が含まれることができる。

【0236】

以下の表は、本実施例の他の例によるスライスヘッダシンタックスの一部を示す。

【0237】

【表15】

【0238】

以下の表は、前記表に含まれているシンタックス要素に関する例示的なセマンティクスを示す。

【0239】

【表16】

【0240】

以下の表は、本実施例の他の例によるスライスヘッダシンタックスの一部を示す。以下の表に含まれているシンタックス要素は、表１２又は表１３によって説明されることができる。

【0241】

【表17】

【0242】

前記表を参照すると、ｓｌｉｃｅ＿ａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇを介してｓｌｉｃｅ単位ＡＬＦ及びＣＣ－ＡＬＦ適用有無が一度に判断されることができる。ｓｌｉｃｅ＿ａｌｆ＿ｃｈｒｏｍａ＿ｉｄｃパーシング後に、第１のＡＬＦ可用フラグ（ｓｐｓ＿ａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）が１である場合、ｓｌｉｃｅ＿ｃｃａｌｆ＿ｃｈｒｏｍａ＿ｉｄｃがパーシングされることができる。

【0243】

前記表を参照すると、ｓｌｉｃｅ＿ａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇが１である場合にのみ、スライスヘッダ情報でｓｐｓ＿ｃｃａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇが１であるかどうかが判断されることができる。前記スライスヘッダ情報は、ＡＬＦが可用であるかどうかと関連した第２のＡＬＦ可用フラグ（ｓｌｉｃｅ＿ａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）を含むことができる。前記第２のＡＬＦ可用フラグ（ｓｌｉｃｅ＿ａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値が１であるという判断に基づいて、前記ＣＣＡＬＦが前記スライスに可用できる。

【0244】

以下の表は、ＡＰＳシンタックスの一部を例示的に示す。シンタックス要素ａｄａｐｔａｔｉｏｎ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄは、ＡＰＳの識別子情報（ＩＤ情報）を示すことができる。

【0245】

【表18】

【0246】

以下の表は、ＡＬＦデータに関する例示的なシンタックスを示す。

【0247】

【表19】

【0248】

前記二つの表を参照すると、ＡＰＳは、ＡＬＦデータ（ａｌｆ＿ｄａｔａ（））を含むことができる。ＡＬＦデータを含むＡＰＳは、ＡＬＦ ＡＰＳ（ＡＬＦタイプＡＰＳ）と呼ばれることができる。即ち、ＡＬＦデータを含むＡＰＳのタイプは、ＡＬＦタイプである。ＡＰＳのタイプは、ＡＰＳタイプに関する情報又はシンタックス要素（ａｐｓ＿ｐａｒａｍｓ＿ｔｙｐｅ）により決定されることができる。ＡＬＦデータは、Ｃｂカラー成分のためのクロス－コンポーネントフィルタがシグナリングされたかどうかと関連したＣｂフィルタシグナルフラグ（ａｌｆ＿ｃｒｏｓｓ＿ｃｏｍｐｏｎｅｎｔ＿ｃｂ＿ｆｉｌｔｅｒ＿ｓｉｇｎａｌ＿ｆｌａｇ又はａｌｆ＿ｃｃ＿ｃｂ＿ｆｉｌｔｅｒ＿ｓｉｇｎａｌ＿ｆｌａｇ）を含むことができる。ＡＬＦデータは、Ｃｒカラー成分のためのクロス－コンポーネントフィルタがシグナリングされたかどうかと関連したＣｒフィルタシグナルフラグ（ａｌｆ＿ｃｒｏｓｓ＿ｃｏｍｐｏｎｅｎｔ＿ｃｒ＿ｆｉｌｔｅｒ＿ｓｉｇｎａｌ＿ｆｌａｇ又はａｌｆ＿ｃｃ＿ｃｒ＿ｆｉｌｔｅｒ＿ｓｉｇｎａｌ＿ｆｌａｇ）を含むことができる。

【0249】

一例において、前記Ｃｒフィルタシグナルフラグに基づいて、前記ＡＬＦデータは、前記Ｃｒカラー成分のためのクロス－コンポーネントフィルタ係数の絶対値に関する情報（ａｌｆ＿ｃｒｏｓｓ＿ｃｏｍｐｏｎｅｎｔ＿ｃｒ＿ｃｏｅｆｆ＿ａｂｓ）及び前記Ｃｒカラー成分のためのクロス－コンポーネントフィルタ係数の符号に関する情報（ａｌｆ＿ｃｒｏｓｓ＿ｃｏｍｐｏｎｅｎｔ＿ｃｒ＿ｃｏｅｆｆ＿ｓｉｇｎ）を含むことができる。前記Ｃｒカラー成分のためのクロス－コンポーネントフィルタ係数の絶対値に関する情報及び前記Ｃｒカラー成分のためのクロス－コンポーネントフィルタ係数の符号に関する情報に基づいて、前記Ｃｒカラー成分のためのクロス－コンポーネントフィルタ係数が導出されることができる。

【0250】

一例において、前記ＡＬＦデータは、前記Ｃｂカラー成分のためのクロス－コンポーネントフィルタ係数の絶対値に関する情報ａｌｆ＿ｃｒｏｓｓ＿ｃｏｍｐｏｎｅｎｔ＿ｃｂ＿ｃｏｅｆｆ＿ａｂｓ）及び前記Ｃｂカラー成分のためのクロス－コンポーネントフィルタ係数の符号に関する情報（ａｌｆ＿ｃｒｏｓｓ＿ｃｏｍｐｏｎｅｎｔ＿ｃｂ＿ｃｏｅｆｆ＿ｓｉｇｎ）を含むことができる。前記Ｃｂカラー成分のためのクロス－コンポーネントフィルタ係数の絶対値に関する情報及び前記Ｃｂカラー成分のためのクロス－コンポーネントフィルタ係数の符号に関する情報に基づいて、前記Ｃｂカラー成分のためのクロス－コンポーネントフィルタ係数が導出されることができる。

【0251】

以下の表は、他の例によるＡＬＦデータに関するシンタックスを示す。

【0252】

【表20】

【0253】

前記表を参照すると、ａｌｆ＿ｃｒｏｓｓ＿ｃｏｍｐｏｎｅｎｔ＿ｆｉｌｔｅｒ＿ｓｉｇｎａｌ＿ｆｌａｇを先に送信後、ａｌｆ＿ｃｒｏｓｓ＿ｃｏｍｐｏｎｅｎｔ＿ｆｉｌｔｅｒ＿ｓｉｇｎａｌ＿ｆｌａｇが１である場合、Ｃｂ／Ｃｒ ｆｉｌｔｅｒ ｓｉｇｎａｌ ｆｌａｇを送信することができる。即ち、ａｌｆ＿ｃｒｏｓｓ＿ｃｏｍｐｏｎｅｎｔ＿ｆｉｌｔｅｒ＿ｓｉｇｎａｌ＿ｆｌａｇは、Ｃｂ／Ｃｒを統合してＣＣ－ＡＬＦフィルタ係数送信有無を決定する。

【0254】

以下の表は、他の例によるＡＬＦデータに関するシンタックスを示す。

【0255】

【表21】

【0256】

以下の表は、前記表に含まれているシンタックス要素に関する例示的なセマンティクスを示す。

【0257】

【表22-1】

【0258】

【表22-2】

【0259】

以下の表は、他の例によるＡＬＦデータに関するシンタックスを示す。

【0260】

【表23】

【0261】

以下の表は、前記表に含まれているシンタックス要素に関する例示的なセマンティクスを示す。

【0262】

【表24-1】

【0263】

【表24-2】

【0264】

前記二つの表において、ａｌｆ＿ｃｒｏｓｓ＿ｃｏｍｐｏｎｅｎｔ＿ｃｂ＿ｃｏｅｆｆ＿ａｂｓ[ｊ]及びａｌｆ＿ｃｒｏｓｓ＿ｃｏｍｐｏｎｅｎｔ＿ｃｒ＿ｃｏｅｆｆ＿ａｂｓ[ｊ]シンタックスをパーシングするためのｅｘｐ－Ｇｏｌｏｍｂｂｉｎａｒｉｚａｔｉｏｎの次数は、０乃至９の値のうち一つに定義されることができる。

【0265】

前記二つの表を参照すると、ＡＬＦデータは、Ｃｂカラー成分のためのクロス－コンポーネントフィルタがシグナリングされたかどうかと関連したＣｂフィルタシグナルフラグ（ａｌｆ＿ｃｒｏｓｓ＿ｃｏｍｐｏｎｅｎｔ＿ｃｂ＿ｆｉｌｔｅｒ＿ｓｉｇｎａｌ＿ｆｌａｇ又はａｌｆ＿ｃｃ＿ｃｂ＿ｆｉｌｔｅｒ＿ｓｉｇｎａｌ＿ｆｌａｇ）を含むことができる。前記Ｃｂフィルタシグナルフラグ（ａｌｆ＿ｃｒｏｓｓ＿ｃｏｍｐｏｎｅｎｔ＿ｃｂ＿ｆｉｌｔｅｒ＿ｓｉｇｎａｌ＿ｆｌａｇ）に基づいて、前記ＡＬＦデータは、前記Ｃｂカラー成分のためのクロス－コンポーネントフィルタの個数と関連した情報（ｃｃａｌｆ＿ｃｂ＿ｎｕｍ＿ａｌｔ＿ｆｉｌｔｅｒｓ＿ｍｉｎｕｓ１）を含むことができる。前記Ｃｂカラー成分のためのクロス－コンポーネントフィルタの個数と関連した情報に基づいて、前記ＡＬＦデータは、前記Ｃｂカラー成分のためのクロス－コンポーネントフィルタ係数の絶対値に関する情報ａｌｆ＿ｃｒｏｓｓ＿ｃｏｍｐｏｎｅｎｔ＿ｃｂ＿ｃｏｅｆｆ＿ａｂｓ）及び前記Ｃｂカラー成分のためのクロス－コンポーネントフィルタ係数の符号に関する情報（ａｌｆ＿ｃｒｏｓｓ＿ｃｏｍｐｏｎｅｎｔ＿ｃｒ＿ｃｏｅｆｆ＿ｓｉｇｎ）を含むことができる。前記Ｃｂカラー成分のためのクロス－コンポーネントフィルタ係数の絶対値に関する情報及び前記Ｃｂカラー成分のためのクロス－コンポーネントフィルタ係数の符号に関する情報に基づいて、前記Ｃｂカラー成分のためのクロス－コンポーネントフィルタ係数が導出されることができる。

【0266】

一例において、ＡＬＦデータは、Ｃｒカラー成分のためのクロス－コンポーネントフィルタがシグナリングされたかどうかと関連したＣｒフィルタシグナルフラグ（ａｌｆ＿ｃｒｏｓｓ＿ｃｏｍｐｏｎｅｎｔ＿ｃｒ＿ｆｉｌｔｅｒ＿ｓｉｇｎａｌ＿ｆｌａｇ又はａｌｆ＿ｃｃ＿ｃｒ＿ｆｉｌｔｅｒ＿ｓｉｇｎａｌ＿ｆｌａｇ）を含むことができる。前記Ｃｒフィルタシグナルフラグ（ａｌｆ＿ｃｒｏｓｓ＿ｃｏｍｐｏｎｅｎｔ＿ｃｒ＿ｆｉｌｔｅｒ＿ｓｉｇｎａｌ＿ｆｌａｇ）に基づいて、前記ＡＬＦデータは、前記Ｃｒカラー成分のためのクロス－コンポーネントフィルタの個数と関連した情報（ｃｃａｌｆ＿ｃｒ＿ｎｕｍ＿ａｌｔ＿ｆｉｌｔｅｒｓ＿ｍｉｎｕｓ１）を含むことができる。前記Ｃｒカラー成分のためのクロス－コンポーネントフィルタの個数と関連した情報に基づいて、前記ＡＬＦデータは、前記Ｃｒカラー成分のためのクロス－コンポーネントフィルタ係数の絶対値に関する情報（ａｌｆ＿ｃｒｏｓｓ＿ｃｏｍｐｏｎｅｎｔ＿ｃｒ＿ｃｏｅｆｆ＿ａｂｓ）及び前記Ｃｒカラー成分のためのクロス－コンポーネントフィルタ係数の符号に関する情報（ａｌｆ＿ｃｒｏｓｓ＿ｃｏｍｐｏｎｅｎｔ＿ｃｒ＿ｃｏｅｆｆ＿ｓｉｇｎ）を含むことができる。前記Ｃｒカラー成分のためのクロス－コンポーネントフィルタ係数の絶対値に関する情報及び前記Ｃｒカラー成分のためのクロス－コンポーネントフィルタ係数の符号に関する情報に基づいて、前記Ｃｒカラー成分のためのクロス－コンポーネントフィルタ係数が導出されることができる。

【0267】

以下の表は、本文書の一実施例によるコーディングツリーユニットに関するシンタックスを示す。

【0268】

【表25】

【0269】

以下の表は、前記表に含まれているシンタックス要素に関する例示的なセマンティクスを示す。

【0270】

【表26】

【0271】

以下の表は、本実施例の他の例によるコーディングツリーユニットシンタックスを示す。

【0272】

【表27】

【0273】

前記表を参照すると、ＣＴＵ単位でＣＣＡＬＦが適用されることができる。一例において、前記映像情報は、コーディングツリーユニットに関する情報（ｃｏｄｉｎｇ＿ｔｒｅｅ＿ｕｎｉｔ（））を含むことができる。前記コーディングツリーユニットに関する情報は、Ｃｂカラー成分の前記現在ブロックにクロス－コンポーネントフィルタが適用されるかどうかに関する情報（ｃｃａｌｆ＿ｃｔｂ＿ｆｌａｇ[０]）、及び／又はＣｒカラー成分の前記現在ブロックにクロス－コンポーネントフィルタが適用されるかどうかに関する情報（ｃｃａｌｆ＿ｃｔｂ＿ｆｌａｇ[１]）を含むことができる。また、前記コーディングツリーユニットに関する情報は、Ｃｂカラー成分の前記現在ブロックに適用されるクロス－コンポーネントフィルタのフィルタセットインデックスに関する情報（ｃｃａｌｆ＿ｃｔｂ＿ｆｉｌｔｅｒ＿ａｌｔ＿ｉｄｘ[０]）、及び／又はＣｒカラー成分の前記現在ブロックに適用されるクロス－コンポーネントフィルタのフィルタセットインデックスに関する情報（ｃｃａｌｆ＿ｃｔｂ＿ｆｉｌｔｅｒ＿ａｌｔ＿ｉｄｘ[１]）を含むことができる。前記シンタックスは、ｓｌｉｃｅ＿ｃｃａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇ及びｓｌｉｃｅ＿ｃｃａｌｆ＿ｃｈｒｏｍａ＿ｉｄｃシンタックスによって適応的に送信されることができる。

【0274】

以下の表は、本実施例の他の例によるコーディングツリーユニットシンタックスを示す。

【0275】

【表28】

【0276】

以下の表は、前記表に含まれているシンタックス要素に関する例示的なセマンティクスを示す。

【0277】

【表29】

【0278】

以下の表は、本実施例の他の例によるコーディングツリーユニットシンタックスを示す。以下の表に含まれているシンタックス要素は、表２９によって説明されることができる。

【0279】

【表30】

【0280】

一例において、前記映像情報は、コーディングツリーユニットに関する情報（ｃｏｄｉｎｇ＿ｔｒｅｅ＿ｕｎｉｔ（））を含むことができる。前記コーディングツリーユニットに関する情報は、Ｃｂカラー成分の前記現在ブロックにクロス－コンポーネントフィルタが適用されるかどうかに関する情報（ｃｃａｌｆ＿ｃｔｂ＿ｆｌａｇ[０]）、及び／又はＣｒカラー成分の前記現在ブロックにクロス－コンポーネントフィルタが適用されるかどうかに関する情報（ｃｃａｌｆ＿ｃｔｂ＿ｆｌａｇ[１]）を含むことができる。また、前記コーディングツリーユニットに関する情報は、Ｃｂカラー成分の前記現在ブロックに適用されるクロス－コンポーネントフィルタのフィルタセットインデックスに関する情報（ｃｃａｌｆ＿ｃｔｂ＿ｆｉｌｔｅｒ＿ａｌｔ＿ｉｄｘ[０]）、及び／又はＣｒカラー成分の前記現在ブロックに適用されるクロス－コンポーネントフィルタのフィルタセットインデックスに関する情報（ｃｃａｌｆ＿ｃｔｂ＿ｆｉｌｔｅｒ＿ａｌｔ＿ｉｄｘ[１]）を含むことができる。

【0281】

図１２及び図１３は、本文書の実施例（ら）に係るビデオ／映像エンコーディング方法及び関連コンポーネントの一例を概略的に示す。図１２に開示された方法は、図２又は図１３に開示されたエンコーディング装置により実行されることができる。具体的に、例えば、図１２のＳ１２００及びＳ１２１０は、前記エンコーディング装置の予測部２２０により実行されることができ、図１２のＳ１２２０乃至Ｓ１２４０は、前記エンコーディング装置のレジデュアル処理部２３０により実行されることができ、Ｓ１２５０は、前記エンコーディング装置の加算部２５０により実行されることができ、Ｓ１２６０は、前記エンコーディング装置のフィルタリング部２６０により実行されることができ、Ｓ１２７０は、前記エンコーディング装置のエントロピーエンコーディング部２４０により実行されることができる。図１２に開示された方法は、本文書で詳述した実施例を含むことができる。

【0282】

図１２を参照すると、エンコーディング装置は、予測サンプルを導出することができる（Ｓ１２００）。予測サンプルは、予測ルマサンプル及び予測クロマサンプルを含むことができる。エンコーディング装置は、予測モードに基づいて前記現在ブロックの予測サンプルを導出することができる。この場合、インター予測又はイントラ予測など、本文書に開示された多様な予測方法が適用されることができる。

【0283】

エンコーディング装置は、予測関連情報を生成することができる（Ｓ１２１０）。エンコーディング装置は、予測サンプル及び／又はそれらに適用されたモードに基づいて予測関連情報を生成することができる。前記予測関連情報は、多様な予測モード（例えば、マージモード、ＭＶＰモード等）に対する情報、ＭＶＤ情報などを含むことができる。

【0284】

エンコーディング装置は、レジデュアルサンプルを生成することができる（Ｓ１２２０）。レジデュアルサンプルは、レジデュアルルマサンプル及びレジデュアルクロマサンプルを含むことができる。エンコーディング装置は、現在ブロックに対するレジデュアルサンプルを導出することができ、前記現在ブロックに対するレジデュアルサンプルは、現在ブロックの原本サンプル及び予測サンプルに基づいて導出されることができる。

【0285】

エンコーディング装置は、（量子化された）変換係数を導出することができる（Ｓ１２３０）。エンコーディング装置は、前記レジデュアルサンプルに対する変換手順に基づいて変換係数を導出することができる。変換係数は、ルマ変換係数及びクロマ変換係数を含むことができる。例えば、レジデュアルルマサンプルに基づいてルマ変換係数が導出されることができ、レジデュアルクロマサンプルに基づいてクロマ変換係数が導出されることができる。例えば、変換手順は、ＤＣＴ、ＤＳＴ、ＧＢＴ、又はＣＮＴのうち少なくとも一つを含むことができる。エンコーディング装置は、量子化された変換係数を導出することができる。エンコーディング装置は、前記変換係数に対する量子化手順に基づいて量子化された変換係数を導出することができる。量子化された変換係数は、係数スキャン順序に基づいて１次元ベクトル形態を有することができる。

【0286】

エンコーディング装置は、レジデュアル情報を生成することができる（Ｓ１２４０）。エンコーディング装置は、前記量子化された変換係数を示すレジデュアル情報を生成することができる。レジデュアル情報は、指数ゴロム、ＣＡＶＬＣ、ＣＡＢＡＣなどのような多様なエンコーディング方法を介して生成されることができる。

【0287】

エンコーディング装置は、復元サンプルを生成することができる（Ｓ１２５０）。前記復元サンプルは、復元ルマサンプル（復元サンプルのルマ成分）及び／又は復元クロマサンプル（復元サンプルのクロマ成分）を含むことができる。エンコーディング装置は、前記レジデュアル情報に基づいて復元サンプルを生成することができる。復元サンプルは、レジデュアル情報に基づくレジデュアルサンプルを予測サンプルと加算して生成されることができる。

【0288】

エンコーディング装置は、ＡＬＦ関連情報及び／又はＣＣＡＬＦ関連情報を生成することができる（Ｓ１２６０）。エンコーディング装置は、前記復元サンプルに対するＡＬＦ関連情報及び／又はＣＣＡＬＦ関連情報を生成することができる。エンコーディング装置は、前記復元サンプルに対するフィルタリングのために適用されることができる、ＡＬＦに関連したパラメータを導出し、ＡＬＦ関連情報を生成する。例えば、ＡＬＦ関連情報は、本文書で詳述したＡＬＦ関連した情報を含むことができる。エンコーディング装置は、前記復元サンプルのうち復元クロマサンプルのためのＣＣＡＬＦ関連情報を生成することができる。

【0289】

エンコーディング装置は、ビデオ／映像情報をエンコーディングすることができる（Ｓ１２７０）。前記映像情報は、レジデュアル情報及び／又はＡＬＦ関連情報を含むことができる。エンコーディングされたビデオ／映像情報は、ビットストリーム形態で出力されることができる。前記ビットストリームは、ネットワーク又は格納媒体を介してデコーディング装置に送信されることができる。

【0290】

一例において、ＣＣＡＬＦ関連情報は、ＣＣＡＬＦ可用フラグ、Ｃｂ（又は、Ｃｒ）カラー成分に対してＣＣＡＬＦが可用であるかどうかと関連したフラグ、Ｃｂ（又は、Ｃｒ）カラー成分のためのクロス－コンポーネントフィルタがシグナリングされたかどうかと関連したＣｂ（又は、Ｃｒ）フィルタシグナルフラグ、Ｃｂ（又は、Ｃｒ）カラー成分のためのクロス－コンポーネントフィルタの個数と関連した情報、Ｃｂ（又は、Ｃｒ）カラー成分のためのクロス－コンポーネントフィルタ係数の値に関する情報、Ｃｂ（又は、Ｃｒ）カラー成分のためのクロス－コンポーネントフィルタ係数の絶対値に関する情報、Ｃｂ（又は、Ｃｒ）カラー成分のためのクロス－コンポーネントフィルタ係数の符号に関する情報、及び／又はコーディングツリーユニットに関する情報（コーディングツリーユニットシンタックス）内のＣｂ（又は、Ｃｒ）カラー成分の現在ブロックにクロス－コンポーネントフィルタが適用されるかどうかに関する情報を含むことができる。

【0291】

前記映像／ビデオ情報は、本文書の実施例による多様な情報を含むことができる。例えば、前記映像／ビデオ情報は、前述した表１乃至表３０のうち少なくとも一つに開示された情報を含むことができる。

【0292】

一実施例において、前記映像情報は、シーケンスパラメータセット（ｓｅｑｕｅｎｃｅ ｐａｒａｍｅｔｅｒ ｓｅｔ、ＳＰＳ）を含むことができる。前記ＳＰＳは、前記クロス－コンポーネントフィルタリングが可用であるかどうかと関連したＣＣＡＬＦ可用フラグを含むことができる。前記ＣＣＡＬＦ可用フラグに基づいて、ＣＣＡＬＦのためのクロス－コンポーネントフィルタ係数の導出のために使われるＡＬＦデータを含むアダプテーションパラメータセット（ａｄａｐｔａｔｉｏｎ ｐａｒａｍｅｔｅｒ ｓｅｔｓ、ＡＰＳｓ）のＩＤ情報（識別子情報）が導出されることができる。

【0293】

一実施例において、前記ＳＰＳは、ＡＬＦが可用であるかどうかと関連したＡＬＦ可用フラグ（ｓｐｓ＿ａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）を含むことができる。前記ＡＬＦ可用フラグ（ｓｐｓ＿ａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値が１であるという判断に基づいて、前記ＳＰＳは、前記クロス－コンポーネントフィルタリングが可用であるかどうかと関連したＣＣＡＬＦ可用フラグを含むことができる。

【0294】

一実施例において、前記映像情報は、スライスヘッダ情報及びアダプテーションパラメータセット（ＡＰＳ）を含むことができる。前記ヘッダ情報は、ＡＬＦデータを含むＡＰＳの識別子と関連した情報を含むことができる。例えば、前記クロス－コンポーネントフィルタ係数は、前記ＡＬＦデータに基づいて導出されることができる。

【0295】

一実施例において、前記スライスヘッダ情報は、ＡＬＦが可用であるかどうかと関連したＡＬＦ可用フラグ（ｓｌｉｃｅ＿ａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）を含むことができる。ｓｐｓ＿ａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇ及びｓｌｉｃｅ＿ａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇは、各々、第１のＡＬＦ可用フラグ及び第２のＡＬＦ可用フラグと呼ばれることができる。前記第２のＡＬＦ可用フラグ（ｓｌｉｃｅ＿ａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値が１であるという判断に基づいて、前記ＣＣＡＬＦ可用フラグの値が１であるかどうかが判断されることができる。一例において、前記第２のＡＬＦ可用フラグの値が１であるという判断に基づいて、前記ＣＣＡＬＦが前記スライスに可用できる。

【0296】

一実施例において、前記ヘッダ情報（スライスヘッダ情報）は、前記フィルタリングされた復元クロマサンプルのＣｂカラー成分に対してＣＣＡＬＦが可用であるかどうかと関連した第１のフラグ、及び前記フィルタリングされた復元クロマサンプルのＣｒカラー成分に対してＣＣＡＬＦが可用であるかどうかと関連した第２のフラグを含むことができる。他の例において、前記ＡＬＦ可用フラグ（ｓｌｉｃｅ＿ａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値が１であるという判断に基づいて、前記ヘッダ情報（スライスヘッダ情報）は、前記フィルタリングされた復元クロマサンプルのＣｂカラー成分に対してＣＣＡＬＦが可用であるかどうかと関連した第１のフラグ、及び前記フィルタリングされた復元クロマサンプルのＣｒカラー成分に対してＣＣＡＬＦが可用であるかどうかと関連した第２のフラグを含むことができる。

【0297】

一実施例において、前記第１のフラグの値が１であるという判断に基づいて、前記スライスヘッダ情報は、前記Ｃｂカラー成分のためのクロス－コンポーネントフィルタ係数の導出のための第１のＡＰＳのＩＤ情報（第２のＡＰＳの識別子と関連した情報）を含むことができる。前記第２のフラグの値が１であるという判断に基づいて、前記スライスヘッダ情報は、前記Ｃｒカラー成分のためのクロス－コンポーネントフィルタ係数の導出のための第２のＡＰＳのＩＤ情報（第２のＡＰＳの識別子と関連した情報）を含むことができる。

【0298】

一実施例において、前記第１のＡＰＳに含まれている第１のＡＬＦデータは、前記Ｃｂカラー成分のためのクロス－コンポーネントフィルタがシグナリングされたかどうかと関連したＣｂフィルタシグナルフラグを含むことができる。前記Ｃｂフィルタシグナルフラグに基づいて、前記第１のＡＬＦデータは、前記Ｃｂカラー成分のためのクロス－コンポーネントフィルタの個数と関連した情報を含むことができる。前記Ｃｂカラー成分のためのクロス－コンポーネントフィルタの個数と関連した情報に基づいて、前記第１のＡＬＦデータは、前記Ｃｂカラー成分のためのクロス－コンポーネントフィルタ係数の絶対値に関する情報及び前記Ｃｂカラー成分のためのクロス－コンポーネントフィルタ係数の符号に関する情報を含むことができる。前記Ｃｂカラー成分のためのクロス－コンポーネントフィルタ係数の絶対値に関する情報及び前記Ｃｂカラー成分のためのクロス－コンポーネントフィルタ係数の符号に関する情報に基づいて、前記Ｃｂカラー成分のためのクロス－コンポーネントフィルタ係数が導出されることができる。

【0299】

一実施例において、前記Ｃｂカラー成分のためのクロス－コンポーネントフィルタの個数と関連した情報は、０次指数ゴロム（０^ｔｈＥＧ）コーディングされることができる。

【0300】

一実施例において、前記第２のＡＰＳに含まれている第２のＡＬＦデータは、前記Ｃｒカラー成分のためのクロス－コンポーネントフィルタがシグナリングされたかどうかと関連したＣｒフィルタシグナルフラグを含むことができる。前記Ｃｒフィルタシグナルフラグに基づいて、前記第２のＡＬＦデータは、前記Ｃｒカラー成分のためのクロス－コンポーネントフィルタの個数と関連した情報を含むことができる。前記Ｃｒカラー成分のためのクロス－コンポーネントフィルタの個数と関連した情報に基づいて、前記第２のＡＬＦデータは、前記Ｃｒカラー成分のためのクロス－コンポーネントフィルタ係数の絶対値に関する情報及び前記Ｃｒカラー成分のためのクロス－コンポーネントフィルタ係数の符号に関する情報を含むことができる。前記Ｃｒカラー成分のためのクロス－コンポーネントフィルタ係数の絶対値に関する情報及び前記Ｃｒカラー成分のためのクロス－コンポーネントフィルタ係数の符号に関する情報に基づいて、前記Ｃｒカラー成分のためのクロス－コンポーネントフィルタ係数が導出されることができる。

【0301】

一実施例において、前記Ｃｒカラー成分のためのクロス－コンポーネントフィルタの個数と関連した情報は、０次指数ゴロム（０^ｔｈＥＧ）コーディングされることができる。

【0302】

一実施例において、前記映像情報は、コーディングツリーユニットに関する情報を含むことができる。前記コーディングツリーユニットに関する情報は、Ｃｂカラー成分の前記現在ブロックにクロス－コンポーネントフィルタが適用されるかどうかに関する情報、及び／又はＣｒカラー成分の前記現在ブロックにクロス－コンポーネントフィルタが適用されるかどうかに関する情報を含むことができる。

【0303】

一実施例において、前記コーディングツリーユニットに関する情報は、Ｃｂカラー成分の前記現在ブロックに適用されるクロス－コンポーネントフィルタのフィルタセットインデックスに関する情報、及び／又はＣｒカラー成分の前記現在ブロックに適用されるクロス－コンポーネントフィルタのフィルタセットインデックスに関する情報を含むことができる。

【0304】

図１４及び図１５は、本文書の実施例（ら）に係るビデオ／映像デコーディング方法及び関連コンポーネントの一例を概略的に示す。

【0305】

図１４に開示された方法は、図３又は図１５に開示されたデコーディング装置により実行されることができる。具体的に、例えば、図１４のＳ１４００は、前記デコーディング装置のエントロピーデコーディング部３１０により実行されることができ、Ｓ１４１０及びＳ１４２０は、前記デコーディング装置のレジデュアル処理部３２０により実行されることができ、Ｓ１４３０は、前記デコーディング装置の予測部３３０により実行されることができ、Ｓ１４４０は、前記デコーディング装置の加算部３４０により実行されることができ、Ｓ１４５０乃至Ｓ１４８０は、前記デコーディング装置のフィルタリング部３５０により実行されることができる。図１４に開示された方法は、本文書で詳述した実施例を含むことができる。

【0306】

図１４を参照すると、デコーディング装置は、ビデオ／映像情報を受信／取得することができる（Ｓ１４００）。ビデオ／映像情報は、予測関連情報及び／又はレジデュアル情報を含むことができる。デコーディング装置は、ビットストリームを介して前記映像／ビデオ情報を受信／取得することができる。一例において、ビデオ／映像情報は、ＣＣＡＬ関連情報をさらに含むことができる。例えば、ＣＣＡＬＦ関連情報は、ＣＣＡＬＦ可用フラグ、Ｃｂ（又は、Ｃｒ）カラー成分に対してＣＣＡＬＦが可用であるかどうかと関連したフラグ、Ｃｂ（又は、Ｃｒ）カラー成分のためのクロス－コンポーネントフィルタがシグナリングされたかどうかと関連したＣｂ（又は、Ｃｒ）フィルタシグナルフラグ、Ｃｂ（又は、Ｃｒ）カラー成分のためのクロス－コンポーネントフィルタの個数と関連した情報、Ｃｂ（又は、Ｃｒ）カラー成分のためのクロス－コンポーネントフィルタ係数の絶対値に関する情報、Ｃｂ（又は、Ｃｒ）カラー成分のためのクロス－コンポーネントフィルタ係数の符号に関する情報、及び／又はコーディングツリーユニットに関する情報（コーディングツリーユニットシンタックス）内のＣｂ（又は、Ｃｒ）カラー成分の現在ブロックにクロス－コンポーネントフィルタが適用されるかどうかに関する情報を含むことができる。

【0307】

前記映像／ビデオ情報は、本文書の実施例に係る多様な情報を含むことができる。例えば、前記映像／ビデオ情報は、前述した表１乃至表３０のうち少なくとも一つに開示された情報を含むことができる。

【0308】

デコーディング装置は、変換係数を導出することができる（Ｓ１４１０）。具体的に、デコーディング装置は、レジデュアル情報に基づいて量子化された変換係数を導出することができる。変換係数は、ルマ変換係数及びクロマ変換係数を含むことができる。量子化された変換係数は、係数スキャン順序に基づいて１次元ベクトル形態を有することができる。デコーディング装置は、前記量子化された変換係数に対する逆量子化手順に基づいて変換係数を導出することができる。

【0309】

デコーディング装置は、レジデュアルサンプルを導出することができる（Ｓ１４２０）。デコーディング装置は、変換係数に基づいてレジデュアルサンプルを導出することができる。レジデュアルサンプルは、レジデュアルルマサンプル及びレジデュアルクロマサンプルを含むことができる。例えば、ルマ変換係数に基づいてレジデュアルルマサンプルが導出されることができ、クロマ変換係数に基づいてレジデュアルクロマサンプルが導出されることができる。また、前記現在ブロックに対するレジデュアルサンプルは、現在ブロックの原本サンプル及び予測サンプルに基づいて導出されることができる。

【0310】

デコーディング装置は、前記映像／ビデオ情報に基づいて予測を実行して現在ブロックの予測サンプルを導出することができる（Ｓ１４３０）。デコーディング装置は、予測関連情報に基づいて現在ブロックの前記予測サンプルを導出することができる。予測関連情報は、予測モード情報を含むことができる。デコーディング装置は、前記予測モード情報に基づいて前記現在ブロックにインター予測が適用されるか、又は、イントラ予測が適用されるかを判断することができ、これに基づいて予測を実行することができる。予測サンプルは、予測ルマサンプル及び／又は予測クロマサンプルを含むことができる。

【0311】

デコーディング装置は、復元サンプルを生成／導出することができる（Ｓ１４４０）。復元サンプルは、復元ルマサンプル及び／又は復元クロマサンプルを含むことができる。デコーディング装置は、前記レジデュアルサンプルに基づいて復元ルマ（又は、クロマ）サンプルを生成することができる。復元サンプルのルマ成分が復元ルマサンプルに対応し、復元サンプルのクロマ成分が復元クロマサンプルに対応できる。

【0312】

デコーディング装置は、前記復元クロマサンプルのＡＬＦ手順のためのＡＬＦフィルタ係数を導出することができる（Ｓ１４５０）。併せて、デコーディング装置は、前記復元ルマサンプルのＡＬＦ手順のためのＡＬＦフィルタ係数を導出することができる。前記ＡＬＦフィルタ係数は、ＡＰＳ内のＡＬＦデータに含まれているＡＬＦパラメータに基づいて導出されることができる。

【0313】

デコーディング装置は、フィルタリングされた復元クロマサンプルを生成することができる（Ｓ１４６０）。デコーディング装置は、前記復元クロマサンプル及び前記ＡＬＦフィルタ係数に基づいてフィルタリングされた復元サンプルを生成することができる。

【0314】

デコーディング装置は、前記クロス－コンポーネントフィルタリングのためのクロス－コンポーネントフィルタ係数を導出することができる（Ｓ１４７０）。クロス－コンポーネントフィルタ係数は、前述されたＡＰＳに含まれているＡＬＦデータ内のＣＣＡＬＦ関連情報に基づいて導出されることができ、該当ＡＰＳの識別子（ＩＤ）情報は、スライスヘッダに含まれることができる（を介してシグナリングされることができる）。

【0315】

デコーディング装置は、修正フィルタリングされた復元クロマサンプル（ｍｏｄｉｆｉｅｄ ｆｉｌｔｅｒｅｄ ｒｅｃｏｎｓｔｒｕｃｔｅｄ ｃｈｒｏｍａ ｓａｍｐｌｅｓ）を生成することができる（Ｓ１４８０）。デコーディング装置は、前記復元ルマサンプル、前記フィルタリングされた復元クロマサンプル、及び前記クロス－コンポーネントフィルタ係数に基づいて、修正フィルタリングされた復元クロマサンプルを生成することができる。一例において、デコーディング装置は、前記復元ルマサンプルのうち二つのサンプル間の差を導出することができ、前記差を前記クロス－コンポーネントフィルタ係数のうち一つのフィルタ係数と掛けることができる。前記掛け算の結果と前記フィルタリングされた復元クロマサンプルとに基づいて、デコーディング装置は、前記修正フィルタリングされた復元クロマサンプルを生成することができる。例えば、デコーディング装置は、前記積と前記フィルタリングされた復元クロマサンプルのうち一つのサンプルとの間の和に基づいて前記修正フィルタリングされた復元クロマサンプルを生成することができる。

【0316】

一実施例において、前記映像情報は、シーケンスパラメータセット（ｓｅｑｕｅｎｃｅ ｐａｒａｍｅｔｅｒ ｓｅｔ、ＳＰＳ）を含むことができる。前記ＳＰＳは、前記クロス－コンポーネントフィルタリングが可用であるかどうかと関連したＣＣＡＬＦ可用フラグを含むことができる。前記ＣＣＡＬＦ可用フラグに基づいて、ＣＣＡＬＦのためのクロス－コンポーネントフィルタ係数の導出のために使われるＡＬＦデータを含むアダプテーションパラメータセット（ＡＰＳｓ）のＩＤ情報（識別子情報）が導出されることができる。

【0317】

一実施例において、前記ＳＰＳは、ＡＬＦが可用であるかどうかと関連したＡＬＦ可用フラグ（ｓｐｓ＿ａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）を含むことができる。前記ＡＬＦ可用フラグ（ｓｐｓ＿ａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値が１であるという判断に基づいて、前記ＳＰＳは、前記クロス－コンポーネントフィルタリングが可用であるかどうかと関連したＣＣＡＬＦ可用フラグを含むことができる。

【0318】

一実施例において、前記映像情報は、スライスヘッダ情報及びアダプテーションパラメータセット（ＡＰＳ）を含むことができる。前記ヘッダ情報は、ＡＬＦデータを含むＡＰＳの識別子と関連した情報を含むことができる。例えば、前記クロス－コンポーネントフィルタ係数は、前記ＡＬＦデータに基づいて導出されることができる。

【0319】

一実施例において、前記スライスヘッダ情報は、ＡＬＦが可用であるかどうかと関連したＡＬＦ可用フラグ（ｓｌｉｃｅ＿ａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）を含むことができる。ｓｐｓ＿ａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇ及びｓｌｉｃｅ＿ａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇは、各々、第１のＡＬＦ可用フラグ及び第２のＡＬＦ可用フラグと呼ばれることができる。前記第２のＡＬＦ可用フラグ（ｓｌｉｃｅ＿ａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値が１であるという判断に基づいて、前記ＣＣＡＬＦ可用フラグの値が１であるかどうかが判断されることができる。一例において、前記第２のＡＬＦ可用フラグの値が１であるという判断に基づいて、前記ＣＣＡＬＦが前記スライスに可用できる。

【0320】

一実施例において、前記ヘッダ情報（スライスヘッダ情報）は、前記フィルタリングされた復元クロマサンプルのＣｂカラー成分に対してＣＣＡＬＦが可用であるかどうかと関連した第１のフラグ、及び前記フィルタリングされた復元クロマサンプルのＣｒカラー成分に対してＣＣＡＬＦが可用であるかどうかと関連した第２のフラグを含むことができる。他の例において、前記ＡＬＦ可用フラグ（ｓｌｉｃｅ＿ａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値が１であるという判断に基づいて、前記ヘッダ情報（スライスヘッダ情報）は、前記フィルタリングされた復元クロマサンプルのＣｂカラー成分に対してＣＣＡＬＦが可用であるかどうかと関連した第１のフラグ、及び前記フィルタリングされた復元クロマサンプルのＣｒカラー成分に対してＣＣＡＬＦが可用であるかどうかと関連した第２のフラグを含むことができる。

【0321】

一実施例において、前記第１のフラグの値が１であるという判断に基づいて、前記スライスヘッダ情報は、前記Ｃｂカラー成分のためのクロス－コンポーネントフィルタ係数の導出のための第１のＡＰＳのＩＤ情報（第２のＡＰＳの識別子と関連した情報）を含むことができる。前記第２のフラグの値が１であるという判断に基づいて、前記スライスヘッダ情報は、前記Ｃｒカラー成分のためのクロス－コンポーネントフィルタ係数の導出のための第２のＡＰＳのＩＤ情報（第２のＡＰＳの識別子と関連した情報）を含むことができる。

【0322】

一実施例において、前記第１のＡＰＳに含まれている第１のＡＬＦデータは、前記Ｃｂカラー成分のためのクロス－コンポーネントフィルタがシグナリングされたかどうかと関連したＣｂフィルタシグナルフラグを含むことができる。前記Ｃｂフィルタシグナルフラグに基づいて、前記第１のＡＬＦデータは、前記Ｃｂカラー成分のためのクロス－コンポーネントフィルタの個数と関連した情報を含むことができる。前記Ｃｂカラー成分のためのクロス－コンポーネントフィルタの個数と関連した情報に基づいて、前記第１のＡＬＦデータは、前記Ｃｂカラー成分のためのクロス－コンポーネントフィルタ係数の絶対値に関する情報及び前記Ｃｂカラー成分のためのクロス－コンポーネントフィルタ係数の符号に関する情報を含むことができる。前記Ｃｂカラー成分のためのクロス－コンポーネントフィルタ係数の絶対値に関する情報及び前記Ｃｂカラー成分のためのクロス－コンポーネントフィルタ係数の符号に関する情報に基づいて、前記Ｃｂカラー成分のためのクロス－コンポーネントフィルタ係数が導出されることができる。

【0323】

一実施例において、前記Ｃｂカラー成分のためのクロス－コンポーネントフィルタの個数と関連した情報は、０次指数ゴロム（０^ｔｈＥＧ）コーディングされることができる。

【0324】

一実施例において、前記第２のＡＰＳに含まれている第２のＡＬＦデータは、前記Ｃｒカラー成分のためのクロス－コンポーネントフィルタがシグナリングされたかどうかと関連したＣｒフィルタシグナルフラグを含むことができる。前記Ｃｒフィルタシグナルフラグに基づいて、前記第２のＡＬＦデータは、前記Ｃｒカラー成分のためのクロス－コンポーネントフィルタの個数と関連した情報を含むことができる。前記Ｃｒカラー成分のためのクロス－コンポーネントフィルタの個数と関連した情報に基づいて、前記第２のＡＬＦデータは、前記Ｃｒカラー成分のためのクロス－コンポーネントフィルタ係数の絶対値に関する情報及び前記Ｃｒカラー成分のためのクロス－コンポーネントフィルタ係数の符号に関する情報を含むことができる。前記Ｃｒカラー成分のためのクロス－コンポーネントフィルタ係数の絶対値に関する情報及び前記Ｃｒカラー成分のためのクロス－コンポーネントフィルタ係数の符号に関する情報に基づいて、前記Ｃｒカラー成分のためのクロス－コンポーネントフィルタ係数が導出されることができる。

【0325】

一実施例において、前記Ｃｒカラー成分のためのクロス－コンポーネントフィルタの個数と関連した情報は、０次指数ゴロム（０^ｔｈＥＧ）コーディングされることができる。

【0326】

一実施例において、前記映像情報は、コーディングツリーユニットに関する情報を含むことができる。前記コーディングツリーユニットに関する情報は、Ｃｂカラー成分の前記現在ブロックにクロス－コンポーネントフィルタが適用されるかどうかに関する情報、及び／又はＣｒカラー成分の前記現在ブロックにクロス－コンポーネントフィルタが適用されるかどうかに関する情報を含むことができる。

【0327】

一実施例において、前記コーディングツリーユニットに関する情報は、Ｃｂカラー成分の前記現在ブロックに適用されるクロス－コンポーネントフィルタのフィルタセットインデックスに関する情報、及び／又はＣｒカラー成分の前記現在ブロックに適用されるクロス－コンポーネントフィルタのフィルタセットインデックスに関する情報を含むことができる。

【0328】

デコーディング装置は、現在ブロックに対するレジデュアルサンプルが存在する場合、現在ブロックに対するレジデュアルに関する情報を受信することができる。レジデュアルに関する情報は、レジデュアルサンプルに関する変換係数を含むことができる。デコーディング装置は、レジデュアル情報に基づいて現在ブロックに対するレジデュアルサンプル（又は、レジデュアルサンプルアレイ）を導出することができる。具体的に、デコーディング装置は、レジデュアル情報に基づいて量子化された変換係数を導出することができる。量子化された変換係数は、係数スキャン順序に基づいて１次元ベクトル形態を有することができる。デコーディング装置は、前記量子化された変換係数に対する逆量子化手順に基づいて変換係数を導出することができる。デコーディング装置は、変換係数に基づいてレジデュアルサンプルを導出することができる。

【0329】

デコーディング装置は、（イントラ）予測サンプルとレジデュアルサンプルとに基づいて復元サンプルを生成することができ、前記復元サンプルに基づいて復元ブロック又は復元ピクチャを導出することができる。具体的に、デコーディング装置は、（イントラ）予測サンプルとレジデュアルサンプルとの和に基づいて復元サンプルを生成することができる。以後、デコーディング装置は、必要によって、主観的／客観的画質を向上させるために、デブロッキングフィルタリング及び／又はＳＡＯ手順のようなインループフィルタリング手順を前記復元ピクチャに適用できることは、前述の通りである。

【0330】

例えば、デコーディング装置は、ビットストリーム又はエンコーディングされた情報をデコーディングし、前述した情報（又はシンタックス要素）の全部又は一部を含む映像情報を取得することができる。また、前記ビットストリーム又はエンコーディングされた情報は、コンピュータ読み取り可能な格納媒体に格納されることができ、前述したデコーディング方法が行われるように引き起こすことができる。

【0331】

前述した実施例において、方法は、一連のステップ又はブロックとしてフローチャートに基づいて説明されているが、該当実施例は、ステップの順序に限定されるわけではなく、あるステップは、前述したところと異なるステップと異なる順序で、又は同時に発生し得る。また、当業者であれば、フローチャートに示されているステップが排他的ではなく、異なるステップが含まれるか、フローチャートの一つ又はそれ以上のステップが本文書の実施例の範囲に影響を与えずに削除され得ることを理解することができる。

【0332】

前述した本文書の実施例に係る方法は、ソフトウェアの形態で具現されることができ、本文書に係るエンコーディング装置及び／又はデコーディング装置は、例えば、ＴＶ、コンピュータ、スマートフォン、セットトップボックス、ディスプレイ装置等の映像処理を行う装置に含まれ得る。

【0333】

本文書で、実施例がソフトウェアで具現される際、前述した方法は、前述した機能を行うモジュール（過程、機能等）で具現されることができる。モジュールはメモリに格納され、プロセッサにより実行されることができる。メモリは、プロセッサの内部又は外部にあってもよく、よく知られている様々な手段でプロセッサと連結されてもよい。プロセッサは、ＡＳＩＣ（ａｐｐｌｉｃａｔｉｏｎ－ｓｐｅｃｉｆｉｃ ｉｎｔｅｇｒａｔｅｄ ｃｉｒｃｕｉｔ）、他のチップセット、論理回路及び／又はデータ処理装置を含むことができる。メモリは、ＲＯＭ（ｒｅａｄ－ｏｎｌｙ ｍｅｍｏｒｙ）、ＲＡＭ（ｒａｎｄｏｍ ａｃｃｅｓｓ ｍｅｍｏｒｙ）、フラッシュメモリ、メモリカード、格納媒体及び／又は他の格納装置を含むことができる。即ち、本文書で説明した実施例は、プロセッサ、マイクロプロセッサ、コントローラ又はチップ上で具現されて行われ得る。例えば、各図面で示している機能ユニットは、コンピュータ、プロセッサ、マイクロプロセッサ、コントローラ又はチップ上で具現されて行われ得る。この場合、具現のための情報（ｅｘ．ｉｎｆｏｒｍａｔｉｏｎ ｏｎ ｉｎｓｔｒｕｃｔｉｏｎｓ）又はアルゴリズムがデジタル格納媒体に格納されることができる。

【0334】

また、本文書の実施例が適用されるデコーディング装置及びエンコーディング装置は、マルチメディア放送送受信装置、モバイル通信端末、ホームシネマビデオ装置、デジタルシネマビデオ装置、監視用カメラ、ビデオ対話装置、ビデオ通信のようなリアルタイム通信装置、モバイルストリーミング装置、格納媒体、カムコーダ、オーダーメイド型ビデオ（ＶｏＤ）サービス提供装置、ＯＴＴビデオ（Ｏｖｅｒ ｔｈｅ ｔｏｐ ｖｉｄｅｏ）装置、インターネットストリーミングサービス提供装置、３次元（３Ｄ）ビデオ装置、ＶＲ（ｖｉｒｔｕａｌ ｒｅａｌｉｔｙ）装置、ＡＲ（ａｒｇｕｍｅｎｔｅ ｒｅａｌｉｔｙ）装置、映像電話ビデオ装置、運送手段端末（ｅｘ．車両（自律走行車両含む）端末、飛行機端末、船舶端末など）及び医療用ビデオ装置等に含まれ得、ビデオ信号又はデータ信号を処理するために使用され得る。例えば、ＯＴＴビデオ（Ｏｖｅｒ ｔｈｅ ｔｏｐ ｖｉｄｅｏ）装置としては、ゲームコンソール、ブルーレイプレーヤー、インターネットアクセスＴＶ、ホームシアターシステム、スマートフォン、タブレットＰＣ、ＤＶＲ（Ｄｉｇｉｔａｌ Ｖｉｄｅｏ Ｒｅｃｏｄｅｒ）等を含み得る。

【0335】

また、本文書の実施例が適用される処理方法は、コンピュータで実行されるプログラムの形態で生産されることができ、コンピュータが読み取ることができる記録媒体に格納されることができる。本文書の実施例に係るデータ構造を有するマルチメディアデータもまた、コンピュータが読み取ることができる記録媒体に格納されることができる。前記コンピュータが読み取ることができる記録媒体は、コンピュータで読み取られるデータが格納される全ての種類の格納装置及び分散格納装置を含む。前記コンピュータが読み取ることができる記録媒体は、例えば、ブルーレイディスク（ＢＤ）、汎用直列バス（ＵＳＢ）、ＲＯＭ、ＰＲＯＭ、ＥＰＲＯＭ、ＥＥＰＲＯＭ、ＲＡＭ、ＣＤ－ＲＯＭ、磁気テープ、フロッピディスク、及び光学的データ格納装置を含み得る。また、前記コンピュータが読み取ることができる記録媒体は、搬送波（例えば、インターネットを介した送信）の形態で具現されたメディアを含む。また、エンコーディング方法で生成されたビットストリームが、コンピュータが読み取られる記録媒体に格納されるか、有無線通信ネットワークを介して送信されることができる。

【0336】

また、本文書の実施例は、プログラムコードによるコンピュータプログラム製品で具現されることができ、前記プログラムコードは、本文書の実施例によってコンピュータで実行されることができる。前記プログラムコードは、コンピュータによって読み取り可能なキャリア上に格納されることができる。

【0337】

図１６は、本文書に開示された実施例が適用されることができるコンテンツストリーミングシステムの例を示す。

【0338】

図１６を参照すると、本文書の実施例が適用されるコンテンツストリーミングシステムは、大きくエンコーディングサーバ、ストリーミングサーバ、ウェブサーバ、メディアストレージ、ユーザ装置、及びマルチメディア入力装置を含むことができる。

【0339】

前記エンコーディングサーバは、スマートフォン、カメラ、カムコーダ等のようなマルチメディア入力装置から入力されたコンテンツをデジタルデータに圧縮してビットストリームを生成し、これを前記ストリーミングサーバに送信する役割をする。別の例として、スマートフォン、カメラ、カムコーダなどのようなマルチメディア入力装置がビットストリームを直接生成する場合、前記エンコーディングサーバは省略され得る。

【0340】

前記ビットストリームは、本文書の実施例が適用されるエンコーディング方法又はビットストリームの生成方法により生成されることができ、前記ストリーミングサーバは、前記ビットストリームを送信又は受信する過程で、一時的に前記ビットストリームを格納することができる。

【0341】

前記ストリーミングサーバは、ウェブサーバを介してのユーザ要請に基づいてマルチメディアデータをユーザ装置に送信し、前記ウェブサーバは、ユーザにどのようなサービスがあるかを知らせる媒介体役割をする。ユーザが前記ウェブサーバに所望のサービスを要請すれば、前記ウェブサーバは、これをストリーミングサーバに伝達し、前記ストリーミングサーバは、ユーザにマルチメディアデータを送信する。このとき、前記コンテンツストリーミングシステムは、別の制御サーバを含むことができ、この場合、前記制御サーバは、前記コンテンツストリーミングシステム内の各装置間の命令／応答を制御する役割をする。

【0342】

前記ストリーミングサーバは、メディア格納所及び／又はエンコーディングサーバからコンテンツを受信することができる。例えば、前記エンコーディングサーバからコンテンツを受信するようになる場合、前記コンテンツをリアルタイムに受信することができる。この場合、円滑なストリーミングサービスを提供するために、前記ストリーミングサーバは、前記ビットストリームを一定時間の間、格納することができる。

【0343】

前記ユーザ装置の例では、携帯電話、スマートフォン（ｓｍａｒｔ ｐｈｏｎｅ）、ノートブックコンピュータ（ｌａｐｔｏｐ ｃｏｍｐｕｔｅｒ）、デジタル放送用端末機、ＰＤＡ（ｐｅｒｓｏｎａｌ ｄｉｇｉｔａｌ ａｓｓｉｓｔａｎｔｓ）、ＰＭＰ（ｐｏｒｔａｂｌｅ ｍｕｌｔｉｍｅｄｉａ ｐｌａｙｅｒ）、ナビゲーション、スレートＰＣ（ｓｌａｔｅ ＰＣ）、タブレットＰＣ（ｔａｂｌｅｔ ＰＣ）、ウルトラブック（ｕｌｔｒａｂｏｏｋ）、ウェアラブルデバイス（ｗｅａｒａｂｌｅ ｄｅｖｉｃｅ、例えば、ウォッチ型端末機（ｓｍａｒｔｗａｔｃｈ）、グラス型端末機（ｓｍａｒｔ ｇｌａｓｓ）、ＨＭＤ（ｈｅａｄ ｍｏｕｎｔｅｄ ｄｉｓｐｌａｙ））、デジタルＴＶ、デスクトップコンピュータ、デジタルサイニジなどがありうる。

【0344】

前記コンテンツストリーミングシステム内の各サーバは、分散サーバとして運営されることができ、この場合、各サーバで受信するデータは、分散処理されることができる。

【0345】

本明細書に記載された請求項は、多様な方式で組み合わせることができる。例えば、本明細書の方法請求項の技術的特徴が組み合わせられて装置として具現されることができ、本明細書の装置請求項の技術的特徴が組み合わせられて方法として具現されることができる。また、本明細書の方法請求項の技術的特徴と装置請求項の技術的特徴とが組み合わせられて装置として具現されることができ、本明細書の方法請求項の技術的特徴と装置請求項の技術的特徴とが組み合わせられて方法として具現されることができる。

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】

【図15】

【図16】