特表 2023-506876 仮想参照デコーダ及び出力レイヤセットのためのビデオデータストリーム、ビデオエンコーダ、装置及び方法

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公表特許公報(A)

(11)【公表番号】

(43)【公表日】2023-02-20

(54)【発明の名称】仮想参照デコーダ及び出力レイヤセットのためのビデオデータストリーム、ビデオエンコーダ、装置及び方法

(51)【国際特許分類】

   H04N 19/70 20140101AFI20230213BHJP

【ＦＩ】

H04N19/70

【審査請求】未請求

【予備審査請求】未請求

(21)【出願番号】P 2022536871

(86)(22)【出願日】2020-12-18

(85)【翻訳文提出日】2022-08-15

(86)【国際出願番号】 EP2020087023

(87)【国際公開番号】W WO2021123166

(87)【国際公開日】2021-06-24

(31)【優先権主張番号】19219037.9

(32)【優先日】2019-12-20

(33)【優先権主張国・地域又は機関】EP

(81)【指定国・地域】

【公序良俗違反の表示】

（特許庁注：以下のものは登録商標）

１．Ｂｌｕ－ｒａｙ

(71)【出願人】

【識別番号】591037214

【氏名又は名称】フラウンホッファー－ゲゼルシャフト ツァ フェルダールング デァ アンゲヴァンテン フォアシュンク エー．ファオ

(74)【代理人】

【識別番号】110002952

【氏名又は名称】弁理士法人鷲田国際特許事務所

(72)【発明者】

【氏名】サンチェス デ ラ フエンテ ヤゴ

(72)【発明者】

【氏名】ズーリング カルステン

(72)【発明者】

【氏名】ヘルゲ コーネリアス

(72)【発明者】

【氏名】ツェル トーマス

(72)【発明者】

【氏名】スクピン ロベルト

(72)【発明者】

【氏名】ウィーガンド トーマス

【テーマコード（参考）】

5C159

【Ｆターム（参考）】

5C159MA04

5C159MA05

5C159MA23

5C159MC11

5C159ME01

5C159PP04

5C159RB09

5C159RC12

5C159UA02

5C159UA05

(57)【要約】

ビデオデータストリームを入力ビットストリームとして受信するための装置が提供される。ビデオデータストリームは、その中に符号化されるビデオを有し、再生速度変更係数（Ｎｘ）の場合、装置は、復号能力要件制限に応じて復号能力要件を決定し、再生速度変更係数（Ｎｘ）は、順方向再生速度変更係数である、または逆方向再生速度変更係数である。

【特許請求の範囲】

【請求項1】

ビデオデータストリームを入力ビットストリームとして受信するための装置であって、
前記ビデオデータストリームはその中に符号化されるビデオを有し、
再生速度変更係数（Ｎｘ）の場合、前記装置は復号能力要件制限に応じて復号能力要件を決定し、
前記再生速度変更係数（Ｎｘ）は順方向再生速度変更係数である、または逆方向再生速度変更係数である、前記装置。

【請求項2】

前記復号能力要件は、変更されたサンプルレートであり、
前記復号能力要件制限は、サンプルレート制限である、請求項１に記載の装置。

【請求項3】

前記ビデオデータストリームは、前記サンプルレート制限に関する情報を含む、請求項２に記載の装置。

【請求項4】

前記装置は、前記ビデオのピクチャのピクチャサイズに応じて前記変更されたサンプルレートを決定する、請求項２または３に記載の装置。

【請求項5】

前記装置は、さらに、フレームレートに応じて、また前記再生速度変更係数（Ｎｘ）に応じて前記変更されたサンプルレートを決定し、
前記ビデオデータストリームは、前記フレームレートに関する情報を含む、請求項４に記載の装置。

【請求項6】

前記フレームレートは、１つ以上のサブレイヤのうちの１つのサブレイヤに依存し、
前記ビデオデータストリームは、前記１つ以上のサブレイヤのそれぞれについてのサブレイヤ固有フレームレート情報を含み、
前記装置は、前記１つ以上のサブレイヤのうちの１つについての前記サブレイヤ固有フレームレート情報から前記フレームレートを取得する、請求項５に記載の装置。

【請求項7】

前記装置は、前記ビデオの複数のピクチャの中で最大ピクチャサイズである、前記ビデオの前記ピクチャの前記ピクチャサイズに応じて、前記変更されたサンプルレートを決定する、請求項４から６の１項に記載の装置。

【請求項8】

前記ビデオデータストリームは、アプリケーション係数を含み、
前記装置は、前記最大レイヤピクチャサイズ及び前記アプリケーション係数を使用して前記変更されたサンプルレートを計算する、請求項７に記載の装置。

【請求項9】

前記最大ピクチャサイズは、１つ以上のサブレイヤのうちの１つのサブレイヤに依存し、
前記ビデオデータストリームは、前記１つ以上のサブレイヤのそれぞれについてのサブレイヤ固有最大限ピクチャサイズ情報を含み、
前記装置は、前記１つ以上のサブレイヤのうちの１つについての前記サブレイヤ固有最大限ピクチャサイズ情報から前記最大ピクチャサイズを取得する、請求項７または８に記載の装置。

【請求項10】

前記ビデオデータストリームは、アプリケーション係数を含み、
前記装置は、前記ビデオのサンプルレートを使用して、また前記アプリケーション係数を使用して前記変更されたサンプルレートを決定する、請求項４から６の１項に記載の装置。

【請求項11】

前記復号能力要件は、変更されたビットレートであり、
前記復号能力要件制限は、ビットレート制限である、請求項１に記載の装置。

【請求項12】

前記ビデオデータストリームは、前記ビットレート制限に関する情報を含む、請求項１１に記載の装置。

【請求項13】

前記装置は、前記ビデオデータストリームの初期ビットレートに応じて、また前記再生速度変更係数（Ｎｘ）に応じて前記変更されたビットレートを決定する、請求項１１または１２に記載の装置。

【請求項14】

前記初期ビットレートは、１つ以上のサブレイヤのうちの１つのサブレイヤに依存し、
前記ビデオデータストリームは、前記１つ以上のサブレイヤのそれぞれについてのサブレイヤ固有初期ビットレート情報を含み、
前記装置は、前記１つ以上のサブレイヤのうちの１つについての前記サブレイヤ固有フレームレート情報から前記初期ビットレートを取得する、請求項１３に記載の装置。

【請求項15】

前記ビデオデータストリームは、初期再生速度が増加するときにＩＲＡＰピクチャのみの復号が行われ得るかどうかを示すＩＲＡＰ専用フラグを含み、
前記ＩＲＡＰ専用フラグに応じて、前記装置は、前記ビデオデータストリームから復号能力要件を読み出す、請求項１から１４の１項に記載の装置。

【請求項16】

前記ビデオデータストリームは、初期再生速度が増加するときに参照ピクチャのみの復号が行われ得るかどうかを示す参照ピクチャ専用フラグを含み、
前記参照ピクチャ専用フラグに応じて、前記装置は、前記ビデオデータストリームから復号能力要件を読み出す、請求項１から１５の１項に記載の装置。

【請求項17】

その中に符号化されたビデオを有するビデオデータストリームであって、
前記ビデオデータストリームは、サンプルレート制限に関する情報を含む、及び／または
前記ビデオデータストリームは、ビットレート制限に関する情報を含む、前記ビデオデータストリーム。

【請求項18】

前記ビデオデータストリームは、フレームレートに関する情報を含む、請求項１７に記載のビデオデータストリーム。

【請求項19】

前記ビデオデータストリームは、１つ以上のサブレイヤのそれぞれについてのサブレイヤ固有フレームレート情報を含む、請求項１７または１８に記載のビデオデータストリーム。

【請求項20】

前記ビデオデータストリームは、変更されたサンプルレートを決定するためのアプリケーション係数を含む、請求項１７から１９の１項に記載のビデオデータストリーム。

【請求項21】

前記ビデオデータストリームは、１つ以上のサブレイヤのそれぞれについてのサブレイヤ固有最大限ピクチャサイズ情報を含む、請求項１７から２０の１項に記載のビデオデータストリーム。

【請求項22】

前記ビデオデータストリームは、１つ以上のサブレイヤのそれぞれについてのサブレイヤ固有初期ビットレート情報を含む、請求項１７から２１の１項に記載のビデオデータストリーム。

【請求項23】

前記ビデオデータストリームは、初期再生速度が増加するときにＩＲＡＰピクチャのみの復号が行われ得るかどうかを示すＩＲＡＰ専用フラグを含む、請求項１７から２２の１項に記載のビデオデータストリーム。

【請求項24】

前記ビデオデータストリームは、初期再生速度が増加するときに参照ピクチャのみの復号が行われ得るかどうかを示す参照ピクチャ専用フラグを含む、請求項１７から２３の１項に記載のビデオデータストリーム。

【請求項25】

前記ＩＲＡＰ専用フラグに応じて、前記ビデオデータストリームはレベル情報を含む、及び／または
前記参照ピクチャ専用フラグに応じて、前記ビデオデータストリームはレベル情報を含む、請求項２３または２４に記載のビデオデータストリーム。

【請求項26】

ビデオデータストリームがその中に符号化されたビデオを有するように、前記ビデオを前記ビデオデータストリーム中に符号化するためのビデオエンコーダであって、
前記ビデオエンコーダは、前記ビデオデータストリームがサンプルレート制限に関する情報を含むように、前記ビデオデータストリームを生成する、及び／または
前記ビデオエンコーダは、前記ビデオデータストリームがビットレート制限に関する情報を含むように、前記ビデオデータストリームを生成する、前記ビデオエンコーダ。

【請求項27】

前記ビデオエンコーダは、前記ビデオデータストリームがフレームレートに関する情報を含むように、前記ビデオデータストリームを生成する、請求項２６に記載のビデオエンコーダ。

【請求項28】

前記ビデオエンコーダは、前記ビデオデータストリームが１つ以上のサブレイヤのそれぞれについてのサブレイヤ固有フレームレート情報を含むように、前記ビデオデータストリームを生成する、請求項２６または２７に記載のビデオエンコーダ。

【請求項29】

前記ビデオエンコーダは、前記ビデオデータストリームが変更されたサンプルレートを決定するためのアプリケーション係数を含むように、前記ビデオデータストリームを生成する、請求項２６から２８の１項に記載のビデオエンコーダ。

【請求項30】

前記ビデオエンコーダは、前記ビデオデータストリームが１つ以上のサブレイヤのそれぞれについてのサブレイヤ固有最大限ピクチャサイズ情報を含むように、前記ビデオデータストリームを生成する、請求項２６から２９の１項に記載のビデオエンコーダ。

【請求項31】

前記ビデオエンコーダは、前記ビデオデータストリームが１つ以上のサブレイヤのそれぞれについてのサブレイヤ固有初期ビットレート情報を含むように、前記ビデオデータストリームを生成する、請求項２６から３０の１項に記載のビデオエンコーダ。

【請求項32】

前記ビデオエンコーダは、初期再生速度が増加するときにＩＲＡＰピクチャのみの復号が行われ得るかどうかを示すＩＲＡＰ専用フラグを前記ビデオデータストリームが含むように、前記ビデオデータストリームを生成する、請求項２６から３１の１項に記載のビデオエンコーダ。

【請求項33】

前記ビデオエンコーダは、初期再生速度が増加するときに参照ピクチャのみの復号が行われ得るかどうかを示す参照ピクチャ専用フラグを前記ビデオデータストリームが含むように、前記ビデオデータストリームを生成する、請求項２６から３２の１項に記載のビデオエンコーダ。

【請求項34】

前記ビデオエンコーダは、前記ＩＲＡＰ専用フラグに応じて、前記ビデオデータストリームがレベル情報を含むように、前記ビデオデータストリームを生成する、及び／または
前記ビデオエンコーダは、前記参照ピクチャ専用フラグに応じて、前記ビデオデータストリームがレベル情報を含むように、前記ビデオデータストリームを生成する、請求項３２または３３に記載のビデオエンコーダ。

【請求項35】

前記装置は、前記入力ビットストリームを復号して、前記ビデオを復号する、請求項１から１６の１項に記載の装置。

【請求項36】

ビデオをビデオデータストリーム中に符号化するための、そして前記ビデオを復号するためのシステムであって、
請求項２６から３４の１項に記載のビデオエンコーダと、
請求項３５に記載の装置と、
を含み、
前記ビデオエンコーダは、前記ビデオデータストリームがその中に符号化された前記ビデオを有するように、前記ビデオを前記ビデオデータストリーム中に符号化し、
前記装置は、前記ビデオデータストリームを入力ビットストリームとして受信し、
前記装置は、前記入力ビットストリームを復号して、前記ビデオを復号する、前記システム。

【請求項37】

ビデオデータストリームを入力ビットストリームとして受信するための方法であって、
前記ビデオデータストリームはその中に符号化されるビデオを有し、
再生速度変更係数（Ｎｘ）の場合、前記方法は復号能力要件制限に応じて復号能力要件を決定することを含み、
前記再生速度変更係数（Ｎｘ）は順方向再生速度変更係数である、または逆方向再生速度変更係数である、前記方法。

【請求項38】

ビデオデータストリームがその中に符号化されたビデオを有するように、前記ビデオを前記ビデオデータストリーム中に符号化するための方法であって、
前記方法は、前記ビデオデータストリームがサンプルレート制限に関する情報を含むように、前記ビデオデータストリームを生成することを含む、及び／または
前記方法は、前記ビデオデータストリームがビットレート制限に関する情報を含むように、前記ビデオデータストリームを生成することを含む、前記方法。

【請求項39】

コンピュータまたはシグナルプロセッサ上で実行されるときに請求項３７または３８の前記方法を実装するためのコンピュータプログラム。

【請求項40】

その中に符号化されたビデオを有するビデオデータストリームであって、
前記ビデオデータストリームは複数のアクセスユニットを含み、前記ビデオデータストリームのアクセスユニット群は、前記複数のアクセスユニットを含み、
前記ビデオデータストリームは、１サブセットのアクセスユニットのアクセスユニットごとに、前記アクセスユニットの後にシームレスなスプライシング点が存在することを示すインジケーションを含み、
前記１サブセットのアクセスユニットは、前記ビデオデータストリームの前記アクセスユニット群の適切な１サブセットである、前記ビデオデータストリーム。

【請求項41】

前記ビデオデータストリームは、複数のテンポラルサブレイヤを含み、
前記アクセスユニットの後に前記シームレスなスプライシング点が存在するという前記インジケーションは、前記複数のテンポラルサブレイヤの第一テンポラルサブレイヤ群のアクセスユニットにのみ存在し、
ただし、前記アクセスユニットの後に前記シームレスなスプライシング点が存在するという前記インジケーションは、前記複数のテンポラルサブレイヤの第二テンポラルサブレイヤ群のアクセスユニットに存在しない、請求項４０に記載のビデオデータストリーム。

【請求項42】

前記ビデオデータストリームは、バッファリング期間の付加拡張情報を含み、
前記バッファリング期間の付加拡張情報は、前記アクセスユニットの後に前記シームレスなスプライシング点が存在する前記複数のアクセスユニットの１サブセットのアクセスユニットを示す、請求項４０または４１に記載のビデオデータストリーム。

【請求項43】

前記ビデオデータストリームは除数を含み、
遅延値は、前記ビデオデータストリームの前記複数のアクセスユニットの各アクセスユニットに割り当てられ、
前記アクセスユニットの後に前記シームレスなスプライシング点が存在することを示す前記インジケーションは、割り当てられた遅延値を有する前記ビデオデータストリームの前記複数のアクセスユニットのそれらのアクセスユニットにのみ存在し、前記割り当てられた遅延値は、前記除数によって除算されると、剰余値に等しい、請求項４０から４２の１項に記載のビデオデータストリーム。

【請求項44】

前記剰余値は０である、請求項４３に記載のビデオデータストリーム。

【請求項45】

前記ビデオデータストリームは、前記剰余値を含む、請求項４３に記載のビデオデータストリーム。

【請求項46】

前記１サブセットのアクセスユニットのアクセスユニットごとに、前記アクセスユニットの後に前記シームレスなスプライシング点が存在することを示す前記インジケーションは、フラグである、請求項４０から４５の１項に記載のビデオデータストリーム。

【請求項47】

前記フラグは、ｄｅｌａｙ＿ｆｏｒ＿ｃｏｎｃａｔｅｎａｔｉｏｎ＿ｅｎｓｕｒｅｄ＿ｆｌａｇである、請求項４６に記載のビデオデータストリーム。

【請求項48】

前記ビデオデータストリームを復号することに起因する出力ピクチャに一定のフレームレートが確保されない場合、前記フラグは第一値を示し、
前記ビデオデータストリームを復号することに起因する出力ピクチャに一定のフレームレートが確保される場合、前記フラグは、前記第一値とは異なる第二値を示す、請求項４６または４７に記載のビデオデータストリーム。

【請求項49】

前記ビデオデータストリームを復号することに起因する前記出力ピクチャが等距離の出力時間を有する場合、前記フラグは前記第二値を示す、請求項４８に記載のビデオデータストリーム。

【請求項50】

ビデオデータストリームがその中に符号化されたビデオを有するように、前記ビデオを前記ビデオデータストリーム中に符号化するためのビデオエンコーダであって、
前記ビデオエンコーダは、前記ビデオデータストリームが複数のアクセスユニットを含むように前記ビデオデータストリームを生成し、前記ビデオデータストリームのアクセスユニット群は、前記複数のアクセスユニットを含み、
前記ビデオエンコーダは、前記ビデオデータストリームが１サブセットのアクセスユニットのアクセスユニットごとに、前記アクセスユニットの後にシームレスなスプライシング点が存在することを示すインジケーションを含むように、前記ビデオデータストリームを生成し、
前記ビデオエンコーダは、前記１サブセットのアクセスユニットが前記ビデオデータストリームの前記アクセスユニット群の適切な１サブセットであるように、前記ビデオデータストリームを生成する、前記ビデオエンコーダ。

【請求項51】

前記ビデオエンコーダは、前記ビデオデータストリームが複数のテンポラルサブレイヤを含むように、前記ビデオデータストリームを生成し、
前記ビデオエンコーダは、前記アクセスユニットの後に前記シームレスなスプライシング点が存在するという前記インジケーションが、前記複数のテンポラルサブレイヤの第一テンポラルサブレイヤ群のアクセスユニットにのみ存在するように、前記ビデオデータストリームを生成し、
ただし、前記ビデオエンコーダは、前記アクセスユニットの後に前記シームレスなスプライシング点が存在するという前記インジケーションが、前記複数のテンポラルサブレイヤの第二テンポラルサブレイヤ群のアクセスユニットに存在しないように、前記ビデオデータストリームを生成する、請求項５０に記載のビデオエンコーダ。

【請求項52】

前記ビデオエンコーダは、前記ビデオデータストリームがバッファリング期間の付加拡張情報を含むように、前記ビデオデータストリームを生成し、
前記ビデオエンコーダは、前記バッファリング期間の付加拡張情報が、前記アクセスユニットの後に前記シームレスなスプライシング点が存在する前記複数のアクセスユニットの１サブセットのアクセスユニットを示すように、前記ビデオデータストリームを生成する、請求項５０または５１に記載のビデオエンコーダ。

【請求項53】

前記ビデオエンコーダは、前記ビデオデータストリームが除数を含むように、前記ビデオデータストリームを生成し、
前記ビデオエンコーダは、遅延値が前記ビデオデータストリームの前記複数のアクセスユニットの各アクセスユニットに割り当てられるように、前記ビデオデータストリームを生成し、
前記ビデオエンコーダは、前記アクセスユニットの後に前記シームレスなスプライシング点が存在することを示す前記インジケーションが、割り当てられた遅延値を有する前記ビデオデータストリームの前記複数のアクセスユニットのそれらのアクセスユニットにのみ存在し、前記割り当てられた遅延値が、前記除数によって除算されると、剰余値に等しいように、前記ビデオデータストリームを生成する、請求項５０から５２の１項に記載のビデオエンコーダ。

【請求項54】

前記ビデオエンコーダは、前記剰余値が０であるように、前記ビデオデータストリームを生成する、請求項５３に記載のビデオエンコーダ。

【請求項55】

前記ビデオエンコーダは、前記ビデオデータストリームが前記剰余値を含むように、前記ビデオデータストリームを生成する、請求項５３に記載のビデオエンコーダ。

【請求項56】

前記ビデオエンコーダは、前記１サブセットのアクセスユニットのアクセスユニットごとに、前記アクセスユニットの後に前記シームレスなスプライシング点が存在することを示す前記インジケーションがフラグであるように、前記ビデオデータストリームを生成する、請求項５０から５５の１項に記載のビデオエンコーダ。

【請求項57】

前記ビデオエンコーダは、前記フラグがｄｅｌａｙ＿ｆｏｒ＿ｃｏｎｃａｔｅｎａｔｉｏｎ＿ｅｎｓｕｒｅｄ＿ｆｌａｇであるように、前記ビデオデータストリームを生成する、請求項５６に記載のビデオエンコーダ。

【請求項58】

前記ビデオエンコーダは、前記ビデオデータストリームを復号することに起因する出力ピクチャに一定のフレームレートが確保されない場合、前記フラグが第一値を示すように、前記ビデオデータストリームを生成し、
前記ビデオエンコーダは、前記ビデオデータストリームを復号することに起因する出力ピクチャに一定のフレームレートが確保される場合、前記フラグが前記第一値とは異なる第二値を示すように、前記ビデオデータストリームを生成する、請求項５６または５７に記載のビデオエンコーダ。

【請求項59】

前記ビデオエンコーダは、前記ビデオデータストリームを復号することに起因する前記出力ピクチャが等距離の出力時間を有する場合、前記フラグが前記第二値を示すように、前記ビデオデータストリームを生成する、請求項５８に記載のビデオエンコーダ。

【請求項60】

ビデオデータストリームを入力ビットストリームとして受信するための装置であって、
前記ビデオデータストリームはその中に符号化されるビデオを有し、
前記装置は、前記ビデオデータストリームを処理し、
前記ビデオデータストリームは複数のアクセスユニットを含み、前記ビデオデータストリームのアクセスユニット群は、前記複数のアクセスユニットを含み、
前記ビデオデータストリームは、１サブセットのアクセスユニットのアクセスユニットごとに、前記アクセスユニットの後にシームレスなスプライシング点が存在することを示すインジケーションを含み、
前記１サブセットのアクセスユニットは、前記ビデオデータストリームの前記アクセスユニット群の適切な１サブセットであり、
前記装置は前記インジケーションを処理する、前記装置。

【請求項61】

前記ビデオデータストリームは、複数のテンポラルサブレイヤを含み、
前記アクセスユニットの後に前記シームレスなスプライシング点が存在するという前記インジケーションは、前記複数のテンポラルサブレイヤの第一テンポラルサブレイヤ群のアクセスユニットにのみ存在し、
ただし、前記アクセスユニットの後に前記シームレスなスプライシング点が存在するという前記インジケーションは、前記複数のテンポラルサブレイヤの第二テンポラルサブレイヤ群のアクセスユニットに存在しない、請求項６０に記載の装置。

【請求項62】

前記ビデオデータストリームは、バッファリング期間の付加拡張情報を含み、
前記バッファリング期間の付加拡張情報は、前記アクセスユニットの後に前記シームレスなスプライシング点が存在する前記複数のアクセスユニットの１サブセットのアクセスユニットを示し、
前記装置は、前記バッファリング期間の付加拡張情報を処理する、請求項６０または６１に記載の装置。

【請求項63】

前記ビデオデータストリームは除数を含み、
前記装置は前記除数を受信し、
遅延値は、前記ビデオデータストリームの前記複数のアクセスユニットの各アクセスユニットに割り当てられ、
前記アクセスユニットの後に前記シームレスなスプライシング点が存在することを示す前記インジケーションは、割り当てられた遅延値を有する前記ビデオデータストリームの前記複数のアクセスユニットのそれらのアクセスユニットにのみ存在し、前記割り当てられた遅延値は、前記除数によって除算されると、剰余値に等しい、請求項６０から６２の１項に記載の装置。

【請求項64】

前記剰余値は０である、請求項６３に記載の装置。

【請求項65】

前記ビデオデータストリームは、前記剰余値を含み、
前記装置は前記剰余値を受信する、請求項６３に記載の装置。

【請求項66】

前記１サブセットのアクセスユニットのアクセスユニットごとに、前記アクセスユニットの後に前記シームレスなスプライシング点が存在することを示す前記インジケーションは、フラグであり、
前記装置は前記フラグを処理する、請求項６０から６５の１項に記載の装置。

【請求項67】

前記フラグは、ｄｅｌａｙ＿ｆｏｒ＿ｃｏｎｃａｔｅｎａｔｉｏｎ＿ｅｎｓｕｒｅｄ＿ｆｌａｇである、請求項６６に記載の装置。

【請求項68】

前記ビデオデータストリームを復号することに起因する出力ピクチャに一定のフレームレートが確保されない場合、前記フラグは第一値を示し、
前記ビデオデータストリームを復号することに起因する出力ピクチャに一定のフレームレートが確保される場合、前記フラグは、前記第一値とは異なる第二値を示す、請求項６６または６７に記載の装置。

【請求項69】

前記ビデオデータストリームを復号することに起因する前記出力ピクチャが等距離の出力時間を有する場合、前記フラグは前記第二値を示す、請求項６８に記載の装置。

【請求項70】

前記装置は、前記入力ビットストリームを復号して、前記ビデオを復号する、請求項６０から６９の１項に記載の装置。

【請求項71】

ビデオをビデオデータストリーム中に符号化するための、そして前記ビデオを復号するためのシステムであって、
請求項５０から５９の１項に記載のビデオエンコーダと、
請求項７０に記載の装置と、
を含み、
前記ビデオデータストリームがその中に符号化された前記ビデオを有するように、前記ビデオエンコーダは前記ビデオを前記ビデオデータストリーム中に符号化し、
前記装置は、前記ビデオデータストリームを入力ビットストリームとして受信し、
前記装置は、前記入力ビットストリームを復号して、前記ビデオを復号する、前記システム。

【請求項72】

ビデオデータストリームがその中に符号化されたビデオを有するように、前記ビデオを前記ビデオデータストリーム中に符号化するための方法であって、
前記方法は、前記ビデオデータストリームが複数のアクセスユニットを含むように、前記ビデオデータストリームを生成することを含み、前記ビデオデータストリームのアクセスユニット群は、前記複数のアクセスユニットを含み、
前記方法は、前記ビデオデータストリームが１サブセットのアクセスユニットのアクセスユニットごとに、前記アクセスユニットの後にシームレスなスプライシング点が存在することを示すインジケーションを含むように、前記ビデオデータストリームを生成することを含み、
前記方法は、前記１サブセットのアクセスユニットが前記ビデオデータストリームの前記アクセスユニット群の適切な１サブセットであるように、前記ビデオデータストリームを生成することを含む、前記方法。

【請求項73】

ビデオデータストリームを入力ビットストリームとして受信するための方法であって、
前記ビデオデータストリームはその中に符号化されるビデオを有し、
前記方法は、前記ビデオデータストリームを処理することを含み、
前記ビデオデータストリームは複数のアクセスユニットを含み、前記ビデオデータストリームのアクセスユニット群は、前記複数のアクセスユニットを含み、
前記ビデオデータストリームは、１サブセットのアクセスユニットのアクセスユニットごとに、前記アクセスユニットの後にシームレスなスプライシング点が存在することを示すインジケーションを含み、
前記１サブセットのアクセスユニットは、前記ビデオデータストリームの前記アクセスユニット群の適切な１サブセットであり、
前記方法は、前記インジケーションを処理することを含む、前記方法。

【請求項74】

コンピュータまたはシグナルプロセッサ上で実行されるときに請求項７２または７３の前記方法を実装するためのコンピュータプログラム。

【請求項75】

ビデオデータストリームを入力ビットストリームとして受信するための装置であって、
前記ビデオデータストリームはその中に符号化されるビデオを有し、
前記装置は、サブビットストリームを取得するために出力レイヤセットに応じて、前記入力ビットストリームを処理し、
前記出力レイヤセットが前記ビデオデータストリーム内に存在する複数のレイヤの所定のレイヤ（ｖｐｓ＿ｌａｙｅｒ＿ｉｄ［０］）を含まない場合、前記装置は、前記所定のレイヤ（ｖｐｓ＿ｌａｙｅｒ＿ｉｄ［０］）を割り当てられる、少なくとも１つの非スケーラブルネステッド付加拡張情報メッセージを除去し、
前記出力レイヤセットが前記所定のレイヤ（ｖｐｓ＿ｌａｙｅｒ＿ｉｄ［０］）を含む場合、前記装置は、前記所定のレイヤ（ｖｐｓ＿ｌａｙｅｒ＿ｉｄ［０］）を割り当てられるいかなる非スケーラブルネステッド付加拡張情報メッセージも除去しないように構成される、前記装置。

【請求項76】

前記ビデオデータストリームの現在符号化されているビデオシーケンス内に前記複数のレイヤのすべてのレイヤからなる出力レイヤセットがない場合、バッファリング期間ペイロード及びピクチャタイミングペイロード及び復号ユニット情報ペイロードのうちの少なくとも１つに関する非スケーラブルネステッド付加拡張情報メッセージがない、請求項７５に記載の装置。

【請求項77】

前記ビデオデータストリームの前記現在符号化されているビデオシーケンス内に前記複数のレイヤのすべてのレイヤからなる出力レイヤセットがない場合、前記バッファリング期間ペイロード及び前記ピクチャタイミングペイロード及び前記復号ユニット情報ペイロード及びサブピクチャレベル情報ペイロードのうちの少なくとも１つに関する非スケーラブルネステッド付加拡張情報メッセージがない、請求項７６に記載の装置。

【請求項78】

前記ビデオデータストリームの前記現在符号化されているビデオシーケンス内に前記複数のレイヤのすべてのレイヤからなる出力レイヤセットがない場合、前記バッファリング期間ペイロードを示す第一値に等しい、または前記ピクチャタイミングペイロードを示す第二値に等しい、または前記復号ユニット情報ペイロードを示す第三値に等しい、または前記サブピクチャレベル情報ペイロードを示す第四値に等しい、ペイロードタイプに関する非スケーラブルネステッド付加拡張情報メッセージがない、請求項７７に記載の装置。

【請求項79】

前記第一値に等しい、または前記第二値に等しい、または前記第三値に等しい、または前記第四値に等しい前記ペイロードタイプを有する非スケーラブルネステッド付加拡張情報メッセージの場合、前記非スケーラブルネステッド付加拡張情報メッセージは、ビットストリーム全体内の前記現在符号化されているビデオシーケンス内のすべてのレイヤからなるすべての前記出力レイヤセットに、存在する場合、適用される、請求項７８に記載の装置。

【請求項80】

前記ビデオデータストリームの前記現在符号化されているビデオシーケンス内に前記複数のレイヤのすべてのレイヤからなる出力レイヤセットがない場合、前記バッファリング期間ペイロードを示す０に等しい、または前記ピクチャタイミングペイロードを示す１に等しい、または前記復号ユニットペイロードを示す１３０に等しい、または前記サブピクチャレベル情報ペイロードを示す２０３に等しい、前記ペイロードタイプに関する非スケーラブルネステッド付加拡張情報メッセージがない、請求項７８または７９に記載の装置。

【請求項81】

０に等しい、または１に等しい、または１３０に等しい、または２０３に等しい前記ペイロードタイプを有する非スケーラブルネステッド付加拡張情報メッセージの場合、前記非スケーラブルネステッド付加拡張情報メッセージは、ビットストリーム全体内の前記現在符号化されているビデオシーケンス内のすべてのレイヤからなるすべての前記出力レイヤセットに、存在する場合、適用される、請求項８０に記載の装置。

【請求項82】

前記出力レイヤセットが前記所定のレイヤ（ｖｐｓ＿ｌａｙｅｒ＿ｉｄ［０］）を含まない場合、前記装置は、前記所定のレイヤ（ｖｐｓ＿ｌａｙｅｒ＿ｉｄ［０］）を割り当てられるすべてのネステッド付加拡張情報メッセージを除去する、請求項７５から８１の１項に記載の装置。

【請求項83】

その中に符号化されたビデオを有するビデオデータストリームであって、
前記ビデオデータストリームは、ビデオパラメータセットを含み、
前記ビデオパラメータセットは、複数の出力レイヤセットを含み、
いずれの前記複数の出力レイヤセットも前記ビデオデータストリーム内に存在する複数のレイヤのすべてのレイヤを含まない場合、前記ビデオデータストリームは、仮想参照デコーダについてのいかなる非スケーラブルネステッド付加拡張情報メッセージも含まない、前記ビデオデータストリーム。

【請求項84】

前記ビデオデータストリームの現在符号化されているビデオシーケンス内に前記複数のレイヤのすべてのレイヤからなる出力レイヤセットがない場合、バッファリング期間ペイロード及びピクチャタイミングペイロード及び復号ユニット情報ペイロードのうちの少なくとも１つに関する非スケーラブルネステッド付加拡張情報メッセージがない、請求項８３に記載のビデオデータストリーム。

【請求項85】

前記ビデオデータストリームの前記現在符号化されているビデオシーケンス内に前記複数のレイヤのすべてのレイヤからなる出力レイヤセットがない場合、前記バッファリング期間ペイロード及び前記ピクチャタイミングペイロード及び前記復号ユニット情報ペイロード及びサブピクチャレベル情報ペイロードのうちの少なくとも１つに関する非スケーラブルネステッド付加拡張情報メッセージがない、請求項８４に記載のビデオデータストリーム。

【請求項86】

前記ビデオデータストリームの前記現在符号化されているビデオシーケンス内に前記複数のレイヤのすべてのレイヤからなる出力レイヤセットがない場合、前記バッファリング期間ペイロードを示す第一値に等しい、または前記ピクチャタイミングペイロードを示す第二値に等しい、または前記復号ユニット情報ペイロードを示す第三値に等しい、または前記サブピクチャレベル情報ペイロードを示す第四値に等しい、ペイロードタイプに関する非スケーラブルネステッド付加拡張情報メッセージがない、請求項８５に記載のビデオデータストリーム。

【請求項87】

前記第一値に等しい、または前記第二値に等しい、または前記第三値に等しい、または前記第四値に等しい前記ペイロードタイプを有する非スケーラブルネステッド付加拡張情報メッセージの場合、前記非スケーラブルネステッド付加拡張情報メッセージは、ビットストリーム全体内の前記現在符号化されているビデオシーケンス内のすべてのレイヤからなるすべての前記出力レイヤセットに、存在する場合、適用される、請求項８６に記載のビデオデータストリーム。

【請求項88】

前記ビデオデータストリームの前記現在符号化されているビデオシーケンス内に前記複数のレイヤのすべてのレイヤからなる出力レイヤセットがない場合、前記バッファリング期間ペイロードを示す０に等しい、または前記ピクチャタイミングペイロードを示す１に等しい、または前記復号ユニットペイロードを示す１３０に等しい、または前記サブピクチャレベル情報ペイロードを示す２０３に等しい、前記ペイロードタイプに関する非スケーラブルネステッド付加拡張情報メッセージがない、請求項８６または８７に記載のビデオデータストリーム。

【請求項89】

０に等しい、または１に等しい、または１３０に等しい、または２０３に等しい前記ペイロードタイプを有する非スケーラブルネステッド付加拡張情報メッセージの場合、前記非スケーラブルネステッド付加拡張情報メッセージは、ビットストリーム全体内の前記現在符号化されているビデオシーケンス内のすべてのレイヤからなるすべての前記出力レイヤセットに、存在する場合、適用される、請求項８８に記載のビデオデータストリーム。

【請求項90】

前記ビデオデータストリームが前記仮想参照デコーダの少なくとも１つの非スケーラブルネステッド付加拡張情報メッセージを含む場合、前記複数の出力レイヤセットのうちの少なくとも１つは、前記ビデオデータストリーム内に存在する前記複数のレイヤのすべてのレイヤを含む、請求項８３から８９の１項に記載のビデオデータストリーム。

【請求項91】

前記仮想参照デコーダのすべての付加拡張情報メッセージは、前記ビデオデータストリーム内に存在する前記複数のレイヤのすべてのレイヤを含む前記複数の出力レイヤセットのうちの１つの出力レイヤセットに関連付けられていないので、スケーラブルネスティング付加拡張情報メッセージである、請求項８３から９０の１項に記載のビデオデータストリーム。

【請求項92】

前記仮想参照デコーダのすべての非スケーラブルネステッド付加拡張情報メッセージは、前記ビデオデータストリーム内に存在する前記複数のレイヤのすべてのレイヤを含む前記複数の出力レイヤセットのうちの１つの出力レイヤセットに関連付けられる、請求項８３から９１の１項に記載のビデオデータストリーム。

【請求項93】

ビデオデータストリームがその中に符号化されたビデオを有するように、前記ビデオを前記ビデオデータストリーム中に符号化するためのビデオエンコーダであって、
前記ビデオエンコーダは、前記ビデオデータストリームがビデオパラメータセットを含むように、前記ビデオデータストリームを生成し、
前記ビデオエンコーダは、前記ビデオパラメータセットが複数の出力レイヤセットを含むように、前記ビデオデータストリームを生成し、
いずれの前記複数の出力レイヤセットも前記ビデオデータストリーム内に存在する複数のレイヤのすべてのレイヤを含まない場合、前記ビデオエンコーダは、前記ビデオデータストリームが仮想参照デコーダについてのいかなる非スケーラブルネステッド付加拡張情報メッセージも含まないように、前記ビデオデータストリームを生成する、前記ビデオエンコーダ。

【請求項94】

前記ビデオデータストリームの現在符号化されているビデオシーケンス内に前記複数のレイヤのすべてのレイヤからなる出力レイヤセットがない場合、バッファリング期間ペイロード及びピクチャタイミングペイロード及び復号ユニット情報ペイロードのうちの少なくとも１つに関する非スケーラブルネステッド付加拡張情報メッセージがない、請求項９３に記載のビデオエンコーダ。

【請求項95】

前記ビデオデータストリームの前記現在符号化されているビデオシーケンス内に前記複数のレイヤのすべてのレイヤからなる出力レイヤセットがない場合、前記バッファリング期間ペイロード及び前記ピクチャタイミングペイロード及び前記復号ユニット情報ペイロード及びサブピクチャレベル情報ペイロードのうちの少なくとも１つに関する非スケーラブルネステッド付加拡張情報メッセージがない、請求項９４に記載のビデオエンコーダ。

【請求項96】

前記ビデオデータストリームの前記現在符号化されているビデオシーケンス内に前記複数のレイヤのすべてのレイヤからなる出力レイヤセットがない場合、前記バッファリング期間ペイロードを示す第一値に等しい、または前記ピクチャタイミングペイロードを示す第二値に等しい、または前記復号ユニット情報ペイロードを示す第三値に等しい、または前記サブピクチャレベル情報ペイロードを示す第四値に等しい、ペイロードタイプに関する非スケーラブルネステッド付加拡張情報メッセージがない、請求項９５に記載のビデオエンコーダ。

【請求項97】

前記第一値に等しい、または前記第二値に等しい、または前記第三値に等しい、または前記第四値に等しい前記ペイロードタイプを有する非スケーラブルネステッド付加拡張情報メッセージの場合、前記非スケーラブルネステッド付加拡張情報メッセージは、ビットストリーム全体内の前記現在符号化されているビデオシーケンス内のすべてのレイヤからなるすべての前記出力レイヤセットに、存在する場合、適用される、請求項９６に記載のビデオエンコーダ。

【請求項98】

前記ビデオデータストリームの前記現在符号化されているビデオシーケンス内に前記複数のレイヤのすべてのレイヤからなる出力レイヤセットがない場合、前記バッファリング期間ペイロードを示す０に等しい、または前記ピクチャタイミングペイロードを示す１に等しい、または前記復号ユニットペイロードを示す１３０に等しい、または前記サブピクチャレベル情報ペイロードを示す２０３に等しい、前記ペイロードタイプに関する非スケーラブルネステッド付加拡張情報メッセージがない、請求項９６または９７に記載のビデオエンコーダ。

【請求項99】

０に等しい、または１に等しい、または１３０に等しい、または２０３に等しい前記ペイロードタイプを有する非スケーラブルネステッド付加拡張情報メッセージの場合、前記非スケーラブルネステッド付加拡張情報メッセージは、ビットストリーム全体内の前記現在符号化されているビデオシーケンス内のすべてのレイヤからなるすべての前記出力レイヤセットに、存在する場合、適用される、請求項９８に記載のビデオエンコーダ。

【請求項100】

前記ビデオデータストリームが前記仮想参照デコーダの少なくとも１つの非スケーラブルネステッド付加拡張情報メッセージを含む場合、前記ビデオエンコーダは、前記複数の出力レイヤセットのうちの少なくとも１つが前記ビデオデータストリーム内に存在する前記複数のレイヤのすべてのレイヤを含むように、前記ビデオデータストリームを生成する、請求項９３から９９の１項に記載のビデオエンコーダ。

【請求項101】

前記ビデオエンコーダは、前記仮想参照デコーダのすべての付加拡張情報メッセージが、前記ビデオデータストリーム内に存在する前記複数のレイヤのすべてのレイヤを含む前記複数の出力レイヤセットのうちの１つの出力レイヤセットに関連付けられていないので、スケーラブルネスティング付加拡張情報メッセージであるように、前記ビデオデータストリームを生成する、請求項９３から１００の１項に記載のビデオエンコーダ。

【請求項102】

前記ビデオエンコーダは、前記仮想参照デコーダのすべての非スケーラブルネステッド付加拡張情報メッセージが、前記ビデオデータストリーム内に存在する前記複数のレイヤのすべてのレイヤを含む前記複数の出力レイヤセットのうちの１つの出力レイヤセットに関連付けられるように、前記ビデオデータストリームを生成する、請求項９３から１０１の１項に記載のビデオエンコーダ。

【請求項103】

前記装置は、前記入力ビットストリームを復号して、前記ビデオを復号する、請求項７５から８２の１項に記載の装置。

【請求項104】

ビデオデータストリームを入力ビットストリームとして受信するための方法であって、
前記ビデオデータストリームはその中に符号化されるビデオを有し、
前記方法は、サブビットストリームを取得するために出力レイヤセットに応じて、前記入力ビットストリームを処理することを含み、
前記出力レイヤセットが前記ビデオデータストリーム内に存在する複数のレイヤの所定のレイヤ（ｖｐｓ＿ｌａｙｅｒ＿ｉｄ［０］）を含まない場合、前記方法は、前記所定のレイヤ（ｖｐｓ＿ｌａｙｅｒ＿ｉｄ［０］）を割り当てられる、少なくとも１つの非スケーラブルネステッド付加拡張情報メッセージを除去することを含み、
前記出力レイヤセットが前記所定のレイヤ（ｖｐｓ＿ｌａｙｅｒ＿ｉｄ［０］）を含む場合、前記方法は、前記所定のレイヤ（ｖｐｓ＿ｌａｙｅｒ＿ｉｄ［０］）を割り当てられるいかなる非スケーラブルネステッド付加拡張情報メッセージも除去しないことを含む、前記方法。

【請求項105】

ビデオデータストリームがその中に符号化されたビデオを有するように、前記ビデオを前記ビデオデータストリーム中に符号化するための方法であって、
前記方法は、前記ビデオデータストリームがビデオパラメータセットを含むように、前記ビデオデータストリームを生成することを含み、
前記方法は、前記ビデオパラメータセットが複数の出力レイヤセットを含むように、前記ビデオデータストリームを生成することを含み、
いずれの前記複数の出力レイヤセットも前記ビデオデータストリーム内に存在する複数のレイヤのすべてのレイヤを含まない場合、前記方法は、前記ビデオデータストリームが仮想参照デコーダについてのいかなる非スケーラブルネステッド付加拡張情報メッセージも含まないように、前記ビデオデータストリームを生成することを含む、前記方法。

【請求項106】

コンピュータまたはシグナルプロセッサ上で実行されるときに請求項１０４または１０５の前記方法を実装するためのコンピュータプログラム。

【請求項107】

ビデオデータストリームを入力ビットストリームとして受信するための装置であって、
前記ビデオデータストリームはその中に符号化されるビデオを有し、
前記ビデオデータストリームは、初期プロファイルティアレベル情報を含み、
前記ビデオデータストリームは、２つ以上のレイヤの第一群を含み、
前記装置は、複数の出力レイヤセットのうちの１つの出力レイヤセットに応じて前記入力ビットストリームを処理し、前記２つ以上のレイヤの第一群から少なくとも１つのレイヤを除去して１つ以上のレイヤの第二群を取得することによって出力ビットストリームを生成することで、前記出力ビットストリームは、前記１つ以上のレイヤの第二群を含むが、前記第一群から除去された前記少なくとも１つのレイヤを含まず、
前記装置は、前記１つ以上のレイヤの第二群のうちの少なくとも１つのレイヤに関連付けられていない、前記初期プロファイルティアレベル情報のそれらの部分を前記初期プロファイルティアレベル情報から除去する、前記装置。

【請求項108】

前記ビデオデータストリームは、初期復号パラメータセットのプロファイルティアレベル情報を前記初期プロファイルティアレベル情報として含み、
前記装置は、前記１つ以上のレイヤの第二群のうちの前記少なくとも１つのレイヤに関連付けられていない、前記初期復号パラメータセットのプロファイルティアレベル情報のそれらの部分を前記初期復号パラメータセットのプロファイルティアレベル情報から除去する、請求項１０７に記載の装置。

【請求項109】

ビデオデータストリームを入力ビットストリームとして受信するための装置であって、
前記ビデオデータストリームはその中に符号化されるビデオを有し、
前記ビデオデータストリームは、複数の出力レイヤセットの出力レイヤセットごとに復号パラメータセット情報を有するスケーラブルネスティング付加拡張情報を含み、
前記装置は、前記複数の出力レイヤセットのうちの１つの出力レイヤセットに応じて前記入力ビットストリームを処理して出力ビットストリームを取得することで、前記出力ビットストリームは、前記出力レイヤセットの前記復号パラメータセット情報を含み、前記出力ビットストリームは、前記複数の出力レイヤセットの任意の他の出力レイヤセットの前記復号パラメータセット情報を含まない、前記装置。

【請求項110】

前記ビデオデータストリームは、未加工のバイトシーケンスペイロードを含み、
前記未加工のバイトシーケンスペイロードは、前記複数の出力レイヤセットの出力レイヤセットごとに前記復号パラメータセット情報を含む、請求項１０９に記載の装置。

【請求項111】

前記ビデオデータストリームは、前記複数の出力レイヤセットの出力レイヤセットごとに前記復号パラメータセット情報を有する、前記スケーラブルネスティング付加拡張情報を含む、スケーラブルネスティング付加拡張メッセージを含む、請求項１０９または１１０に記載の装置。

【請求項112】

前記ビデオデータストリームは、１ビット以上を有するネスティングタイプフラグ（ｎｅｓｔｉｎｇ＿ｔｙｐｅ）を含む、請求項１１１に記載の装置。

【請求項113】

前記ネスティングタイプフラグ（ｎｅｓｔｉｎｇ＿ｔｙｐｅ）が第一値を示す場合、これは、前記スケーラブルネスティング付加拡張メッセージが前記復号パラメータセット情報を有する１つ以上の復号パラメータセットを含むこと、及びそれ以上付加拡張メッセージが前記スケーラブルネスティング付加拡張メッセージ内にネストされないことを示す、請求項１１２に記載の装置。

【請求項114】

前記ネスティングタイプフラグ（ｎｅｓｔｉｎｇ＿ｔｙｐｅ）が第二値を示す場合、これは、前記スケーラブルネスティング付加拡張メッセージ内にネストされる１つ以上の付加拡張メッセージが出力レイヤセットに適用されることを示す、請求項１１２または１１３に記載の装置。

【請求項115】

前記ネスティングタイプフラグ（ｎｅｓｔｉｎｇ＿ｔｙｐｅ）が第三値を示す場合、これは、前記スケーラブルネスティング付加拡張メッセージ内にネストされる１つ以上の付加拡張メッセージが１サブセットの出力レイヤセットに適用されることを示す、請求項１１２から１１４の１項に記載の装置。

【請求項116】

前記ネスティングタイプフラグ（ｎｅｓｔｉｎｇ＿ｔｙｐｅ）が第四値を示す場合、これは、前記スケーラブルネスティング付加拡張メッセージが前記復号パラメータセット情報を有する１つ以上の復号パラメータセットを含むことを示す、請求項１１２から１１５の１項に記載の装置。

【請求項117】

その中に符号化されたビデオを有するビデオデータストリームであって、
前記ビデオデータストリームは、複数の出力レイヤセットの出力レイヤセットごとに復号パラメータセット情報を有するスケーラブルネスティング付加拡張情報を含む、前記ビデオデータストリーム。

【請求項118】

前記ビデオデータストリームは、未加工のバイトシーケンスペイロードを含み、
前記未加工のバイトシーケンスペイロードは、前記複数の出力レイヤセットの出力レイヤセットごとに前記復号パラメータセット情報を含む、請求項１１７に記載のビデオデータストリーム。

【請求項119】

前記ビデオデータストリームは、前記複数の出力レイヤセットの出力レイヤセットごとに前記復号パラメータセット情報を有する、前記スケーラブルネスティング付加拡張情報を有する、スケーラブルネスティング付加拡張メッセージを含む、請求項１１７または１１８に記載のビデオデータストリーム。

【請求項120】

前記ビデオデータストリームは、１ビット以上を有するネスティングタイプフラグ（ｎｅｓｔｉｎｇ＿ｔｙｐｅ）を含む、請求項１１９に記載のビデオデータストリーム。

【請求項121】

前記ネスティングタイプフラグ（ｎｅｓｔｉｎｇ＿ｔｙｐｅ）が第一値を示す場合、これは、前記スケーラブルネスティング付加拡張メッセージが前記復号パラメータセット情報を有する１つ以上の復号パラメータセットを含むこと、及びそれ以上付加拡張メッセージが前記スケーラブルネスティング付加拡張メッセージ内にネストされないことを示す、請求項１２０に記載のビデオデータストリーム。

【請求項122】

前記ネスティングタイプフラグ（ｎｅｓｔｉｎｇ＿ｔｙｐｅ）が第二値を示す場合、これは、前記スケーラブルネスティング付加拡張メッセージ内にネストされる１つ以上の付加拡張メッセージが出力レイヤセットに適用されることを示す、請求項１２０または１２１に記載のビデオデータストリーム。

【請求項123】

前記ネスティングタイプフラグ（ｎｅｓｔｉｎｇ＿ｔｙｐｅ）が第三値を示す場合、これは、前記スケーラブルネスティング付加拡張メッセージ内にネストされる１つ以上の付加拡張メッセージが１サブセットの出力レイヤセットに適用されることを示し、例えば、１つ以上のサブピクチャは前記サブセットに割り当てられる、請求項１２０から１２２の１項に記載のビデオデータストリーム。

【請求項124】

前記ネスティングタイプフラグ（ｎｅｓｔｉｎｇ＿ｔｙｐｅ）が第四値を示す場合、これは、前記スケーラブルネスティング付加拡張メッセージが前記復号パラメータセット情報を有する１つ以上の復号パラメータセットを含むことを示す、請求項１２０から１２３の１項に記載のビデオデータストリーム。

【請求項125】

ビデオデータストリームがその中に符号化されたビデオを有するように、前記ビデオを前記ビデオデータストリーム中に符号化するためのビデオエンコーダであって、
前記ビデオエンコーダは、前記ビデオデータストリームが、複数の出力レイヤセットの出力レイヤセットごとに復号パラメータセット情報を有するスケーラブルネスティング付加拡張情報を含むように、前記ビデオデータストリームを生成する、前記ビデオエンコーダ。

【請求項126】

前記ビデオエンコーダは、前記ビデオデータストリームが未加工のバイトシーケンスペイロードを含むように、前記ビデオデータストリームを生成し、
前記ビデオエンコーダは、前記未加工のバイトシーケンスペイロードが、前記複数の出力レイヤセットの出力レイヤセットごとに前記復号パラメータセット情報を含むように、前記ビデオデータストリームを生成する、請求項１２５に記載のビデオエンコーダ。

【請求項127】

前記ビデオエンコーダは、前記ビデオデータストリームが、前記複数の出力レイヤセットの出力レイヤセットごとに前記復号パラメータセット情報を有する、前記スケーラブルネスティング付加拡張情報を有する、スケーラブルネスティング付加拡張メッセージを含むように、前記ビデオデータストリームを生成する、請求項１２５または１２６に記載のビデオエンコーダ。

【請求項128】

前記ビデオエンコーダは、前記ビデオデータストリームが１ビット以上を有するネスティングタイプフラグ（ｎｅｓｔｉｎｇ＿ｔｙｐｅ）を含むように、前記ビデオデータストリームを生成する、請求項１２７に記載のビデオエンコーダ。

【請求項129】

前記ビデオエンコーダは、前記ネスティングタイプフラグ（ｎｅｓｔｉｎｇ＿ｔｙｐｅ）が第一値を示す場合、これが、前記スケーラブルネスティング付加拡張メッセージが前記復号パラメータセット情報を有する１つ以上の復号パラメータセットを含むこと、及びそれ以上付加拡張メッセージが前記スケーラブルネスティング付加拡張メッセージ内にネストされないことを示すように、前記ビデオデータストリームを生成する、請求項１２８に記載のビデオエンコーダ。

【請求項130】

前記ビデオエンコーダは、前記ネスティングタイプフラグ（ｎｅｓｔｉｎｇ＿ｔｙｐｅ）が第二値を示す場合、これが、前記スケーラブルネスティング付加拡張メッセージ内にネストされる１つ以上の付加拡張メッセージが出力レイヤセットに適用されることを示すように、前記ビデオデータストリームを生成する、請求項１２８または１２９に記載のビデオエンコーダ。

【請求項131】

前記ビデオエンコーダは、前記ネスティングタイプフラグ（ｎｅｓｔｉｎｇ＿ｔｙｐｅ）が第三値を示す場合、これが、前記スケーラブルネスティング付加拡張メッセージ内にネストされる１つ以上の付加拡張メッセージが１サブセットの出力レイヤセットに適用されることを示すように前記ビデオデータストリームを生成し、例えば、１つ以上のサブピクチャは前記サブセットに割り当てられる、請求項１２８から１３０の１項に記載のビデオエンコーダ。

【請求項132】

前記ビデオエンコーダは、前記ネスティングタイプフラグ（ｎｅｓｔｉｎｇ＿ｔｙｐｅ）が第四値を示す場合、これが、前記スケーラブルネスティング付加拡張メッセージが前記復号パラメータセット情報を有する１つ以上の復号パラメータセットを含むことを示すように、前記ビデオデータストリームを生成する、請求項１２８から１３１の１項に記載のビデオエンコーダ。

【請求項133】

その中に符号化されたビデオを有するビデオデータストリームであって、
前記ビデオデータストリームは、複数の操作点のインジケーションを含み、
前記ビデオデータストリームは、前記複数の操作点の操作点ごとの第一マッピングを含み、前記第一マッピングは、複数のプロファイルティアレベルの１つ以上のプロファイルティアレベルを前記操作点に割り当て、
前記ビデオデータストリームは、複数の第二マッピングを含み、前記複数のマッピングのそれぞれは、前記複数の操作点のうちの１つを複数の出力レベルセットのうちの１つの出力レベルセットに割り当てる、前記ビデオデータストリーム。

【請求項134】

前記ビデオデータストリームは、復号パラメータセットを含み、
前記復号パラメータセットは、前記複数の操作点の前記インジケーションを含む、請求項１３３に記載のビデオデータストリーム。

【請求項135】

前記ビデオデータストリームは、前記ビデオデータストリームのレイヤの数を示すレイヤ数インジケーションを含む、及び／または
前記ビデオデータストリームは、前記ビデオデータストリームのサブレイヤの数を示すサブレイヤ数インジケーションを含む、請求項１３３または１３４に記載のビデオデータストリーム。

【請求項136】

前記ビデオデータストリームのレイヤ数は定数である、及び／または
前記ビデオデータストリームのサブレイヤ数は定数である、請求項１３３または１３４に記載のビデオデータストリーム。

【請求項137】

前記ビデオデータストリームは、複数の出力レイヤセットの出力レイヤセットごとに復号パラメータセット情報を有するスケーラブルネスティング付加拡張情報を含む、請求項１３３から１３６の１項に記載のビデオデータストリーム。

【請求項138】

ビデオデータストリームがその中に符号化されたビデオを有するように、前記ビデオを前記ビデオデータストリーム中に符号化するためのビデオエンコーダであって、
前記ビデオエンコーダは、前記ビデオデータストリームが複数の操作点のインジケーションを含むように、前記ビデオデータストリームを生成し、
前記ビデオエンコーダは、前記ビデオデータストリームが前記複数の操作点の操作点ごとの第一マッピングを含むように前記ビデオデータストリームを生成し、前記第一マッピングは複数のプロファイルティアレベルの１つ以上のプロファイルティアレベルを前記操作点に割り当て、
前記ビデオエンコーダは、前記ビデオデータストリームが複数の第二マッピングを含むように前記ビデオデータストリームを生成し、前記複数のマッピングのそれぞれは、前記複数の操作点のうちの１つを複数の出力レベルセットのうちの１つの出力レベルセットに割り当てる、前記ビデオエンコーダ。

【請求項139】

前記ビデオエンコーダは、前記ビデオデータストリームが復号パラメータセットを含むように、前記ビデオデータストリームを生成し、
前記ビデオエンコーダは、前記復号パラメータセットが前記複数の操作点の前記インジケーションを含むように、前記ビデオデータストリームを生成する、請求項１３８に記載のビデオエンコーダ。

【請求項140】

前記ビデオエンコーダは、前記ビデオデータストリームが前記ビデオデータストリームのレイヤの数を示すレイヤ数インジケーションを含むように、前記ビデオデータストリームを生成する、及び／または
前記ビデオエンコーダは、前記ビデオデータストリームが前記ビデオデータストリームのサブレイヤの数を示すサブレイヤ数インジケーションを含むように、前記ビデオデータストリームを生成する、請求項１３８または１３９に記載のビデオエンコーダ。

【請求項141】

前記ビデオエンコーダは、前記ビデオデータストリームのレイヤの数が定数であるように前記ビデオデータストリームを生成する、及び／または
前記ビデオエンコーダは、前記ビデオデータストリームのサブレイヤの数が定数であるように前記ビデオデータストリームを生成する、請求項１３８または１３９に記載のビデオエンコーダ。

【請求項142】

前記ビデオエンコーダは、前記ビデオデータストリームが、複数の出力レイヤセットの出力レイヤセットごとに復号パラメータセット情報を有するスケーラブルネスティング付加拡張情報を含むように、前記ビデオデータストリームを生成する、請求項１３８から１４１の１項に記載のビデオエンコーダ。

【請求項143】

ビデオデータストリームを入力ビットストリームとして受信するための装置であって、
前記ビデオデータストリームはその中に符号化されるビデオを有し、
前記ビデオデータストリームは、複数の操作点のインジケーションを含み、
前記ビデオデータストリームは、前記複数の操作点の操作点ごとの第一マッピングを含み、前記第一マッピングは、複数のプロファイルティアレベルの１つ以上のプロファイルティアレベルを前記操作点にマッピングし、
前記ビデオデータストリームは、複数の第二マッピングを含み、前記複数のマッピングのそれぞれは、前記複数の操作点のうちの１つを複数の出力レベルセットのうちの１つの出力レベルセットにマッピングし、
前記装置は、複数の出力レイヤセットのうちの１つの出力レイヤセットに応じて、また前記第二マッピングのうちの少なくとも１つに応じて前記入力ビットストリームを処理し、前記複数の操作点のうちの１つを前記出力レベルセットにマッピングし、出力ビットストリームを生成する、前記装置。

【請求項144】

前記ビデオデータストリームは、復号パラメータセットを含み、
前記復号パラメータセットは、前記複数の操作点の前記インジケーションを含み、
前記装置は前記復号パラメータセットを処理する、請求項１４３に記載の装置。

【請求項145】

前記ビデオデータストリームは、前記ビデオデータストリームのレイヤの数を示すレイヤ数インジケーションを含む、及び／または
前記ビデオデータストリームは、前記ビデオデータストリームのサブレイヤの数を示すサブレイヤ数インジケーションを含む、請求項１４３または１４４に記載の装置。

【請求項146】

前記ビデオデータストリームのレイヤ数は定数である、及び／または
前記ビデオデータストリームのサブレイヤ数は定数である、請求項１４３または１４４に記載の装置。

【請求項147】

前記ビデオデータストリームは、複数の出力レイヤセットの出力レイヤセットごとに復号パラメータセット情報を有するスケーラブルネスティング付加拡張情報を含み、
前記装置は、前記スケーラブルネスティング付加拡張情報を処理する、請求項１４３から１４６の１項に記載の装置。

【請求項148】

前記装置は、前記入力ビットストリームを復号して、前記ビデオを復号する、請求項１０７から１１６の１項に記載の、または請求項１４３から１４７の１項に記載の装置。

【請求項149】

ビデオをビデオデータストリーム中に符号化するための、そして前記ビデオを復号するためのシステムであって、
請求項１２５から１３２の１項に記載の、または請求項１３８から１４２の１項に記載のビデオエンコーダ、及び
請求項１４８に記載の装置、
を含み、
前記ビデオエンコーダは、前記ビデオデータストリームがその中に符号化された前記ビデオを有するように、前記ビデオを前記ビデオデータストリーム中に符号化し、
前記装置は、前記ビデオデータストリームを入力ビットストリームとして受信し、
前記装置は、前記入力ビットストリームを復号して、前記ビデオを復号する、前記システム。

【請求項150】

ビデオデータストリームを入力ビットストリームとして受信するための方法であって、
前記ビデオデータストリームはその中に符号化されるビデオを有し、
前記ビデオデータストリームは、初期プロファイルティアレベル情報を含み、
前記ビデオデータストリームは、２つ以上のレイヤの第一群を含み、
前記方法は、複数の出力レイヤセットのうちの１つの出力レイヤセットに応じて前記入力ビットストリームを処理し、前記２つ以上のレイヤの第一群から少なくとも１つのレイヤを除去して１つ以上のレイヤの第二群を取得することによって出力ビットストリームを生成することを含むことで、前記出力ビットストリームは、前記１つ以上のレイヤの第二群を含むが、前記第一群から除去された前記少なくとも１つのレイヤを含まず、
前記方法は、前記１つ以上のレイヤの第二群のうちの少なくとも１つのレイヤに関連付けられていない、前記初期プロファイルティアレベル情報のそれらの部分を前記初期プロファイルティアレベル情報から除去することを含む、前記方法。

【請求項151】

ビデオデータストリームを入力ビットストリームとして受信するための方法であって、
前記ビデオデータストリームはその中に符号化されるビデオを有し、
前記ビデオデータストリームは、複数の出力レイヤセットの出力レイヤセットごとに復号パラメータセット情報を有するスケーラブルネスティング付加拡張情報を含み、
前記方法は、前記複数の出力レイヤセットのうちの１つの出力レイヤセットに応じて前記入力ビットストリームを処理して出力ビットストリームを取得することを含むことで、前記出力ビットストリームは、前記出力レイヤセットの前記復号パラメータセット情報を含み、前記出力ビットストリームは、前記複数の出力レイヤセットの任意の他の出力レイヤセットの前記復号パラメータセット情報を含まない、前記方法。

【請求項152】

ビデオデータストリームがその中に符号化されたビデオを有するように、前記ビデオを前記ビデオデータストリーム中に符号化するための方法であって、
前記方法は、前記ビデオデータストリームが複数の出力レイヤセットの出力レイヤセットごとに復号パラメータセット情報を有するスケーラブルネスティング付加拡張情報を含むように、前記ビデオデータストリームを生成することを含む、前記方法。

【請求項153】

ビデオデータストリームがその中に符号化されたビデオを有するように、前記ビデオを前記ビデオデータストリーム中に符号化するための方法であって、
前記方法は、前記ビデオデータストリームが複数の操作点のインジケーションを含むように前記ビデオデータストリームを生成することを含み、
前記方法は、前記ビデオデータストリームが前記複数の操作点の操作点ごとの第一マッピングを含むように前記ビデオデータストリームを生成することを含み、前記第一マッピングは複数のプロファイルティアレベルの１つ以上のプロファイルティアレベルを前記操作点に割り当て、
前記方法は、前記ビデオデータストリームが複数の第二マッピングを含むように前記ビデオデータストリームを生成することを含み、前記複数のマッピングのそれぞれは、前記複数の操作点のうちの１つを複数の出力レベルセットのうちの１つの出力レベルセットに割り当てる、前記方法。

【請求項154】

ビデオデータストリームを入力ビットストリームとして受信するための方法であって、
前記ビデオデータストリームはその中に符号化されるビデオを有し、
前記ビデオデータストリームは、複数の操作点のインジケーションを含み、
前記ビデオデータストリームは、前記複数の操作点の操作点ごとの第一マッピングを含み、
前記第一マッピングは、複数のプロファイルティアレベルの１つ以上のプロファイルティアレベルを前記操作点にマッピングし、
前記ビデオデータストリームは、複数の第二マッピングを含み、前記複数のマッピングのそれぞれは、前記複数の操作点のうちの１つを複数の出力レベルセットのうちの１つの出力レベルセットにマッピングし、
前記方法は、複数の出力レイヤセットのうちの１つの出力レイヤセットに応じて、また前記第二マッピングのうちの少なくとも１つに応じて前記入力ビットストリームを処理し、前記複数の操作点のうちの１つを前記出力レベルセットにマッピングし、出力ビットストリームを生成することを含む、前記方法。

【請求項155】

コンピュータまたはシグナルプロセッサ上で実行されるときに請求項１５０から１５４の１項の前記方法を実装するためのコンピュータプログラム。

【請求項156】

その中に符号化されたビデオを有するビデオデータストリームであって、
前記ビデオデータストリームは、シーケンスパラメータセット及び復号パラメータセットを含み、
前記シーケンスパラメータセットは、前記シーケンスパラメータセットに格納される前記情報に従って、サブレイヤの最大限数、または前記サブレイヤの最大限数引く定数値を示す第一インジケーション値を含み、
前記復号パラメータセットは、前記復号パラメータセットに格納される前記情報に従って、前記サブレイヤの最大限数、または前記サブレイヤの最大限数引く前記定数値を示す第二インジケーション値を含み、
前記第一インジケーション値は前記第二インジケーション値以下である、前記ビデオデータストリーム。

【請求項157】

その中に符号化されたビデオを有するビデオデータストリームであって、
前記ビデオデータストリームは、シーケンスパラメータセット及び復号パラメータセットを含み、
前記シーケンスパラメータセットは、前記シーケンスパラメータセットに格納される前記情報に従って、サブレイヤの最大限数、または前記サブレイヤの最大限数引く定数値を示す第一インジケーション値を含み、
前記復号パラメータセットは、前記復号パラメータセットに格納される前記情報に従って、前記サブレイヤの最大限数、または前記サブレイヤの最大限数引く前記定数値を示す第二インジケーション値を含み、
前記復号パラメータセットの前記第二インジケーション値は、前記シーケンスパラメータセットの前記第一インジケーション値よりも優先される上界である、前記ビデオデータストリーム。

【請求項158】

前記定数値は１である、請求項１５６または１５７に記載のビデオデータストリーム。

【請求項159】

ビデオデータストリームがその中に符号化されたビデオを有するように、前記ビデオを前記ビデオデータストリーム中に符号化するためのビデオエンコーダであって、
前記ビデオエンコーダは、前記ビデオデータストリームがシーケンスパラメータセット及び復号パラメータセットを含むように、前記ビデオデータストリームを生成し、
前記ビデオエンコーダは、前記シーケンスパラメータセットが、前記シーケンスパラメータセットに格納される前記情報に従って、サブレイヤの最大限数、または前記サブレイヤの最大限数引く定数値を示す第一インジケーション値を含むように、前記ビデオデータストリームを生成し、
前記ビデオエンコーダは、前記復号パラメータセットが、前記復号パラメータセットに格納される前記情報に従って、前記サブレイヤの最大限数、または前記サブレイヤの最大限数引く前記定数値を示す第二インジケーション値を含むように、前記ビデオデータストリームを生成し、
前記ビデオエンコーダは、前記第一インジケーション値が前記第二インジケーション値以下であるように、前記ビデオデータストリームを生成する、前記ビデオエンコーダ。

【請求項160】

ビデオデータストリームがその中に符号化されたビデオを有するように、前記ビデオを前記ビデオデータストリーム中に符号化するためのビデオエンコーダであって、
前記ビデオエンコーダは、前記ビデオデータストリームがシーケンスパラメータセット及び復号パラメータセットを含むように、前記ビデオデータストリームを生成し、
前記ビデオエンコーダは、前記シーケンスパラメータセットが、前記シーケンスパラメータセットに格納される前記情報に従って、サブレイヤの最大限数、または前記サブレイヤの最大限数引く定数値を示す第一インジケーション値を含むように、前記ビデオデータストリームを生成し、
前記ビデオエンコーダは、前記復号パラメータセットが、前記復号パラメータセットに格納される前記情報に従って、前記サブレイヤの最大限数、または前記サブレイヤの最大限数引く前記定数値を示す第二インジケーション値を含むように、前記ビデオデータストリームを生成し、
前記復号パラメータセットの前記第二インジケーション値は、前記シーケンスパラメータセットの前記第一インジケーション値よりも優先される上界である、前記ビデオエンコーダ。

【請求項161】

前記定数値は１であり、
前記ビデオエンコーダは、前記シーケンスパラメータセットが、前記シーケンスパラメータセットに格納される前記情報に従って、前記サブレイヤの最大限数、または前記サブレイヤの最大限数引く１を示す前記第一インジケーション値を含むように、前記ビデオデータストリームを生成し、
前記ビデオエンコーダは、前記復号パラメータセットが、前記復号パラメータセットに格納される前記情報に従って、前記サブレイヤの最大限数、または前記サブレイヤの最大限数引く１を示す前記第二インジケーション値を含むように、前記ビデオデータストリームを生成する、請求項１５９または１６０に記載のビデオエンコーダ。

【請求項162】

ビデオデータストリームを入力ビットストリームとして受信するための装置であって、
前記ビデオデータストリームはその中に符号化されるビデオを有し、
前記ビデオデータストリームは、シーケンスパラメータセット及び復号パラメータセットを含み、
前記シーケンスパラメータセットは、前記シーケンスパラメータセットに格納される前記情報に従って、サブレイヤの最大限数、または前記サブレイヤの最大限数引く定数値を示す第一インジケーション値を含み、
前記復号パラメータセットは、前記復号パラメータセットに格納される前記情報に従って、前記サブレイヤの最大限数、または前記サブレイヤの最大限数引く前記定数値を示す第二インジケーション値を含み、
前記第一インジケーション値が前記第二インジケーション値より大きい場合、前記装置は、出力ビットストリームが前記第二インジケーション値を、サブレイヤの最大限数に関する、または前記サブレイヤの最大限数引く前記定数値に関するインジケーションとして含むように、前記入力ビットストリームを処理して前記出力ビットストリームを生成する、前記装置。

【請求項163】

前記定数値は１であり、
前記シーケンスパラメータセットは、前記シーケンスパラメータセットに格納される前記情報に従って、前記サブレイヤの最大限数、または前記サブレイヤの最大限数引く１を示す前記第一インジケーション値を含み、
前記復号パラメータセットは、前記復号パラメータセットに格納される前記情報に従って、前記サブレイヤの最大限数、または前記サブレイヤの最大限数引く１を示す前記第二インジケーション値を含み、
前記第一インジケーション値が前記第二インジケーション値より大きい場合、前記装置は、出力ビットストリームが前記第二インジケーション値を、サブレイヤの最大限数引く１に関するインジケーションとして含むように、前記入力ビットストリームを処理して前記出力ビットストリームを生成する、請求項１６２に記載の装置。

【請求項164】

ビデオデータストリームがその中に符号化されたビデオを有するように、前記ビデオを前記ビデオデータストリーム中に符号化するための方法であって、
前記方法は、前記ビデオデータストリームがシーケンスパラメータセット及び復号パラメータセットを含むように前記ビデオデータストリームを生成することを含み、
前記方法は、前記シーケンスパラメータセットが、前記シーケンスパラメータセットに格納される前記情報に従って、サブレイヤの最大限数、または前記サブレイヤの最大限数引く定数値を示す第一インジケーション値を含むように前記ビデオデータストリームを生成することを含み、
前記方法は、前記復号パラメータセットが、前記復号パラメータセットに格納される前記情報に従って、前記サブレイヤの最大限数、または前記サブレイヤの最大限数引く前記定数値を示す第二インジケーション値を含むように前記ビデオデータストリームを生成することを含み、
前記方法は、前記第一インジケーション値が前記第二インジケーション値以下であるように前記ビデオデータストリームを生成することを含む、前記方法。

【請求項165】

ビデオデータストリームがその中に符号化されたビデオを有するように、前記ビデオを前記ビデオデータストリーム中に符号化するための方法であって、
前記方法は、前記ビデオデータストリームがシーケンスパラメータセット及び復号パラメータセットを含むように前記ビデオデータストリームを生成することを含み、
前記方法は、前記シーケンスパラメータセットが、前記シーケンスパラメータセットに格納される前記情報に従って、サブレイヤの最大限数、または前記サブレイヤの最大限数引く定数値を示す第一インジケーション値を含むように前記ビデオデータストリームを生成することを含み、
前記方法は、前記復号パラメータセットが、前記復号パラメータセットに格納される前記情報に従って、前記サブレイヤの最大限数、または前記サブレイヤの最大限数引く前記定数値を示す第二インジケーション値を含むように前記ビデオデータストリームを生成することを含み、
前記復号パラメータセットの前記第二インジケーション値は、前記シーケンスパラメータセットの前記第一インジケーション値よりも優先される上界である、前記方法。

【請求項166】

ビデオデータストリームを入力ビットストリームとして受信するための方法であって、
前記ビデオデータストリームはその中に符号化されるビデオを有し、
前記ビデオデータストリームは、シーケンスパラメータセット及び復号パラメータセットを含み、
前記シーケンスパラメータセットは、前記シーケンスパラメータセットに格納される前記情報に従って、サブレイヤの最大限数、または前記サブレイヤの最大限数引く定数値を示す第一インジケーション値を含み、
前記復号パラメータセットは、前記復号パラメータセットに格納される前記情報に従って、前記サブレイヤの最大限数、または前記サブレイヤの最大限数引く前記定数値を示す第二インジケーション値を含み、
前記第一インジケーション値が前記第二インジケーション値より大きい場合、前記方法は、出力ビットストリームが前記第二インジケーション値を、サブレイヤの最大限数に関する、または前記サブレイヤの最大限数引く前記定数値に関するインジケーションとして含むように、前記入力ビットストリームを処理して前記出力ビットストリームを生成する、前記方法。

【請求項167】

コンピュータまたはシグナルプロセッサ上で実行されるときに請求項１６４から１６６の１項の前記方法を実装するためのコンピュータプログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、ビデオ符号化及びビデオ復号に関し、特に、ビデオエンコーダ、ビデオデコーダ、符号化及び復号方法、ならびに高度ビデオ符号化概念を実現するためのビデオデータストリームに関する。

【0002】

Ｈ．２６５／ＨＥＶＣ（ＨＥＶＣ＝Ｈｉｇｈ Ｅｆｆｉｃｉｅｎｃｙ Ｖｉｄｅｏ Ｃｏｄｉｎｇ（高効率ビデオ符号化））は、エンコーダ及び／またはデコーダでの並列処理を向上させるか、さらに有効にするためのツールをすでに提供するビデオコーデックである。例えば、ＨＥＶＣは、互いから独立して符号化されるタイルアレイへのピクチャの細分化をサポートする。ＨＥＶＣによってサポートされる別の概念は、ＷＰＰに関係しており、これによれば、ピクチャのＣＴＵロウまたはＣＴＵラインは、並列に左から右に処理され得、例えば、ある最小のＣＴＵオフセットが連続したＣＴＵラインの処理中に従う場合、ストライプで処理され得る（ＣＴＵ＝ｃｏｄｉｎｇ ｔｒｅｅ ｕｎｉｔ（符号化ツリーユニット））。ただし、ビデオエンコーダ及び／またはビデオデコーダの並列処理能力をさらに効率的にサポートするビデオコーデックを有することが望ましい。

【0003】

通常、ビデオ符号化では、ピクチャサンプルの符号化プロセスは、サンプルが予測符号化または変換符号化などの結合処理のためにいくつかの矩形領域に分割される、より小さいパーティションを必要とする。したがって、ピクチャは、ビデオシーケンスの符号化中に一定である特定のサイズのブロックにパーティション化される。Ｈ．２６４／ＡＶＣ規格では、１６×１６サンプルの固定サイズのブロック、いわゆるマクロブロックが使用されている（ＡＶＣ＝Ａｄｖａｎｃｅｄ Ｖｉｄｅｏ Ｃｏｄｉｎｇ（高度ビデオ符号化））。

【0004】

最新のＨＥＶＣ規格（［１］を参照）では、６４×６４サンプルの最大サイズの符号化ツリーブロック（ＣＴＢ）または符号化ツリーユニット（ＣＴＵ）がある。ＨＥＶＣのさらなる説明では、そのような種類のブロックについて、より一般的な用語のＣＴＵが使用されている。

【0005】

ＣＴＵは、左上のＣＴＵから開始し、ピクチャライン毎に右下のＣＴＵまで下ってＣＴＵを処理するというラスタスキャン順序で処理される。

【0006】

符号化されたＣＴＵデータは、スライスと呼ばれるコンテナの一種に編成される。元来、以前のビデオ符号化規格では、スライスは、ピクチャの１つ以上の連続したＣＴＵを含むセグメントを意味する。スライスは、符号化されたデータのセグメント化に用いられる。別の視点から、完全なピクチャもまた１つの大きいセグメントとして定義され得るため、歴史的に、スライスという用語が引き続き適用されている。符号化されたピクチャのサンプルに加えて、スライスもまた、いわゆるスライスヘッダ内に置かれているスライス自体の符号化プロセスに関連する追加情報を含む。

【0007】

最先端の技術によれば、ＶＣＬ（ビデオ符号化レイヤ）は、フラグメンテーション及び空間パーティション化のための技術も含む。そのようなパーティション化は、例えば、並列化での負荷分散処理、ネットワーク伝送でのＣＴＵサイズのマッチング、エラーの軽減など、さまざまな理由でビデオ符号化に適用され得る。

【0008】

ビデオ符号化規格で指定されているビットストリームは、ＨＲＤ適合性関連情報を有する。この適合性は、バッファモデルを含む仮想参照デコーダ（Ｈｙｐｏｔｈｅｔｉｃａｌ Ｒｅｆｅｒｅｎｃｅ Ｄｅｃｏｄｅｒ：ＨＲＤ）からなり、このバッファモデルは、ＮＡＬユニットが、デコーダの前に符号化ピクチャバッファ（ＣＰＢ）に入り、そこから、ＣＰＢサイズを超えること（バッファオーバーラン）がないこと、またはＮＡＬユニットが除去される必要があるときよりも遅く到着すること（バッファアンダーラン）がないことを確保する特定の時間に除去されると想定するものである。さらに、このモデルは、復号ピクチャバッファ（ＤＰＢ）からなり、このＤＰＢから、復号されたピクチャは予測に不要になると出力され、そのサイズは、多くの実装では同様に制約される。ＨＲＤのタイミング情報は、いわゆるＳＥＩメッセージ、特に、バッファリング期間（ＢＰ）（複数のアクセスユニットまたはＡＵ）の特定のタイミング情報を定義するバッファリング期間ＳＥＩメッセージ、単一の関連したＡＵのタイミング情報を伝達するピクチャタイミング（ＰＴ）ＳＥＩメッセージ、及び関連したＡＵサブセット、すなわち復号ユニットまたはＤＵのタイミング情報を伝達する復号ユニット情報（ＤＵＩ）ＳＥＩメッセージによってビットストリームに伝達される。

【0009】

本発明の目的は、改善されたビデオ符号化及びビデオ復号概念を提供することである。

【0010】

本発明の目的は、独立項の発明の主題によって解決される。

【0011】

好ましい実施形態が、従属項に提供される。

【0012】

一実施形態によれば、ビデオデータストリームを入力ビットストリームとして受信するための装置が提供され、ビデオデータストリームがその中に符号化されるビデオを有する。再生速度変更係数（Ｎｘ）の場合、装置は、復号能力要件制限に応じて復号能力要件を決定する。再生速度変更係数（Ｎｘ）は、順方向再生速度変更係数である、または逆方向再生速度変更係数である。

【0013】

さらに、一実施形態によれば、その中に符号化されたビデオを有するビデオデータストリームが提供される。ビデオデータストリームはサンプルレート制限に関する情報を含む、及び／またはビデオデータストリームはビットレート制限に関する情報を含む。

【0014】

さらに、一実施形態によれば、ビデオデータストリームがその中に符号化されたビデオを有するように、ビデオをビデオデータストリーム中に符号化するためのビデオエンコーダが提供される。ビデオエンコーダは、ビデオデータストリームがサンプルレート制限に関する情報を含むようにビデオデータストリームを生成する、及び／またはビデオエンコーダは、ビデオデータストリームがビットレート制限に関する情報を含むようにビデオデータストリームを生成する。

【0015】

さらに、一実施形態によれば、ビデオデータストリームを入力ビットストリームとして受信するための方法が提供され、ビデオデータストリームがその中に符号化されるビデオを有する。再生速度変更係数（Ｎｘ）の場合、方法は、復号能力要件制限に応じて復号能力要件を決定することを含む。再生速度変更係数（Ｎｘ）は、順方向再生速度変更係数である、または逆方向再生速度変更係数である。

【0016】

さらに、一実施形態によれば、ビデオデータストリームがその中に符号化されたビデオを有するように、ビデオをビデオデータストリーム中に符号化するための方法が提供される。方法は、ビデオデータストリームがサンプルレート制限に関する情報を含むようにビデオデータストリームを生成することを含む、及び／または方法は、ビデオデータストリームがビットレート制限に関する情報を含むようにビデオデータストリームを生成することを含む。

【0017】

さらに、コンピュータまたはシグナルプロセッサ上で実行されるときに上記の方法のうちの１つを実装するためのコンピュータプログラムが提供される。

【0018】

さらに、一実施形態によれば、その中に符号化されたビデオを有するビデオデータストリームが提供される。ビデオデータストリームは複数のアクセスユニットを含み、ビデオデータストリームのアクセスユニット群は、複数のアクセスユニットを含む。さらに、ビデオデータストリームは、１サブセットのアクセスユニットのアクセスユニットごとに、アクセスユニットの後にシームレスなスプライシング点が存在することを示すインジケーションを含む。１サブセットのアクセスユニットは、ビデオデータストリームの適切な１サブセットのアクセスユニット群である。

【0019】

さらに、一実施形態によれば、ビデオデータストリームがその中に符号化されたビデオを有するように、ビデオをビデオデータストリーム中に符号化するためのビデオエンコーダが提供される。ビデオエンコーダは、ビデオデータストリームが複数のアクセスユニットを含むようにビデオデータストリームを生成し、ビデオデータストリームのアクセスユニット群は、複数のアクセスユニットを含む。さらに、ビデオエンコーダは、ビデオデータストリームが１サブセットのアクセスユニットのアクセスユニットごとに、アクセスユニットの後にシームレスなスプライシング点が存在することを示すインジケーションを含むようにビデオデータストリームを生成する。さらに、ビデオエンコーダは、１サブセットのアクセスユニットがビデオデータストリームの適切な１サブセットのアクセスユニット群であるようにビデオデータストリームを生成する。

【0020】

さらに、一実施形態によれば、ビデオデータストリームを入力ビットストリームとして受信するための装置が提供され、ビデオデータストリームがその中に符号化されるビデオを有する。装置は、ビデオデータストリームを処理する。ビデオデータストリームは複数のアクセスユニットを含み、ビデオデータストリームのアクセスユニット群は、複数のアクセスユニットを含む。さらに、ビデオデータストリームは、１サブセットのアクセスユニットのアクセスユニットごとに、アクセスユニットの後にシームレスなスプライシング点が存在することを示すインジケーションを含む。１サブセットのアクセスユニットは、ビデオデータストリームの適切な１サブセットのアクセスユニット群である。装置はインジケーションを処理する。

【0021】

さらに、一実施形態によれば、ビデオデータストリームがその中に符号化されたビデオを有するように、ビデオをビデオデータストリーム中に符号化するための方法が提供される。方法は、ビデオデータストリームが複数のアクセスユニットを含むようにビデオデータストリームを生成することを含み、ビデオデータストリームのアクセスユニット群は、複数のアクセスユニットを含む。さらに、方法は、ビデオデータストリームが１サブセットのアクセスユニットのアクセスユニットごとに、アクセスユニットの後にシームレスなスプライシング点が存在することを示すインジケーションを含むようにビデオデータストリームを生成することを含む。さらに、方法は、１サブセットのアクセスユニットがビデオデータストリームの適切な１サブセットのアクセスユニット群であるようにビデオデータストリームを生成することを含む。

【0022】

さらに、一実施形態によれば、ビデオデータストリームを入力ビットストリームとして受信するための方法が提供され、ビデオデータストリームがその中に符号化されるビデオを有する。方法は、ビデオデータストリームを処理することを含む。ビデオデータストリームは複数のアクセスユニットを含み、ビデオデータストリームのアクセスユニット群は、複数のアクセスユニットを含む。さらに、ビデオデータストリームは、１サブセットのアクセスユニットのアクセスユニットごとに、アクセスユニットの後にシームレスなスプライシング点が存在することを示すインジケーションを含む。１サブセットのアクセスユニットは、ビデオデータストリームの適切な１サブセットのアクセスユニット群である。方法は、インジケーションを処理することを含む。

【0023】

さらに、コンピュータまたはシグナルプロセッサ上で実行されるときに上記の方法のうちの１つを実装するためのコンピュータプログラムが提供される。

【0024】

さらに、一実施形態によれば、ビデオデータストリームを入力ビットストリームとして受信するための装置が提供され、ビデオデータストリームがその中に符号化されるビデオを有する。装置は、サブビットストリームを取得するために出力レイヤセットに応じて、入力ビットストリームを処理する。出力レイヤセットがビデオデータストリーム内に存在する複数のレイヤの所定のレイヤを含まない場合、装置は、所定のレイヤを割り当てられる、少なくとも１つの非スケーラブルネステッド付加拡張情報メッセージを除去する。出力レイヤセットが所定のレイヤを含む場合、装置は、所定のレイヤを割り当てられるいかなる非スケーラブルネステッド付加拡張情報メッセージも除去しないように構成される。

【0025】

さらに、一実施形態によれば、その中に符号化されたビデオを有するビデオデータストリームが提供される。ビデオデータストリームは、ビデオパラメータセットを含む。ビデオパラメータセットは、複数の出力レイヤセットを含む。いずれの複数の出力レイヤセットもビデオデータストリーム内に存在する複数のレイヤのすべてのレイヤを含まない場合、ビデオデータストリームは、仮想参照デコーダについてのいかなる非スケーラブルネステッド付加拡張情報メッセージも含まない。

【0026】

さらに、一実施形態によれば、ビデオデータストリームがその中に符号化されたビデオを有するように、ビデオをビデオデータストリーム中に符号化するためのビデオエンコーダが提供される。ビデオエンコーダは、ビデオデータストリームがビデオパラメータセットを含むようにビデオデータストリームを生成する。さらに、ビデオエンコーダは、ビデオパラメータセットが複数の出力レイヤセットを含むようにビデオデータストリームを生成する。いずれの複数の出力レイヤセットもビデオデータストリーム内に存在する複数のレイヤのすべてのレイヤを含まない場合、ビデオエンコーダは、ビデオデータストリームが仮想参照デコーダについてのいかなる非スケーラブルネステッド付加拡張情報メッセージも含まないようにビデオデータストリームを生成する。

【0027】

さらに、一実施形態によれば、ビデオデータストリームを入力ビットストリームとして受信するための方法が提供され、ビデオデータストリームがその中に符号化されるビデオを有する。方法は、サブビットストリームを取得するために出力レイヤセットに応じて、入力ビットストリームを処理することを含む。出力レイヤセットがビデオデータストリーム内に存在する複数のレイヤの所定のレイヤ（ｖｐｓ＿ｌａｙｅｒ＿ｉｄ［０］）を含まない場合、方法は、所定のレイヤ（ｖｐｓ＿ｌａｙｅｒ＿ｉｄ［０］）を割り当てられる、少なくとも１つの非スケーラブルネステッド付加拡張情報メッセージを除去することを含む。出力レイヤセットが所定のレイヤ（ｖｐｓ＿ｌａｙｅｒ＿ｉｄ［０］）を含む場合、方法は、所定のレイヤ（ｖｐｓ＿ｌａｙｅｒ＿ｉｄ［０］）を割り当てられるいかなる非スケーラブルネステッド付加拡張情報メッセージも除去しないことを含む。

【0028】

さらに、一実施形態によれば、ビデオデータストリームがその中に符号化されたビデオを有するように、ビデオをビデオデータストリーム中に符号化するための方法が提供される。方法は、ビデオデータストリームがビデオパラメータセットを含むようにビデオデータストリームを生成することを含む。さらに、方法は、ビデオパラメータセットが複数の出力レイヤセットを含むようにビデオデータストリームを生成することを含む。いずれの複数の出力レイヤセットもビデオデータストリーム内に存在する複数のレイヤのすべてのレイヤを含まない場合、方法は、ビデオデータストリームが仮想参照デコーダについてのいかなる非スケーラブルネステッド付加拡張情報メッセージも含まないようにビデオデータストリームを生成することを含む。

【0029】

さらに、一実施形態によれば、ビデオデータストリームを入力ビットストリームとして受信するための装置が提供され、ビデオデータストリームがその中に符号化されるビデオを有する。ビデオデータストリームは、初期プロファイルティアレベル情報を含む。さらに、ビデオデータストリームは、２つ以上のレイヤの第一群を含む。装置は、複数の出力レイヤセットのうちの１つの出力レイヤセットに応じて入力ビットストリームを処理し、２つ以上のレイヤの第一群から少なくとも１つのレイヤを除去して１つ以上のレイヤの第二群を取得することによって出力ビットストリームを生成することで、出力ビットストリームは、１つ以上のレイヤの第二群を含むが、第一群から除去された少なくとも１つのレイヤを含まない。さらに、装置は、１つ以上のレイヤの第二群のうちの少なくとも１つのレイヤに関連付けられていない初期プロファイルティアレベル情報のそれらの部分を、初期プロファイルティアレベル情報から除去する。

【0030】

さらに、一実施形態によれば、ビデオデータストリームを入力ビットストリームとして受信するための装置が提供され、ビデオデータストリームがその中に符号化されるビデオを有する。ビデオデータストリームは、複数の出力レイヤセットの出力レイヤセットごとに復号パラメータセット情報を有するスケーラブルネスティング付加拡張情報を含む。装置は、複数の出力レイヤセットのうちの１つの出力レイヤセットに応じて入力ビットストリームを処理して出力ビットストリームを取得することで、出力ビットストリームは、出力レイヤセットの復号パラメータセット情報を含み、出力ビットストリームは、複数の出力レイヤセットの任意の他の出力レイヤセットの復号パラメータセット情報を含まない。

【0031】

さらに、一実施形態によれば、その中に符号化されたビデオを有するビデオデータストリームが提供される。ビデオデータストリームは、複数の出力レイヤセットの出力レイヤセットごとに復号パラメータセット情報を有するスケーラブルネスティング付加拡張情報を含む。

【0032】

さらに、一実施形態によれば、ビデオデータストリームがその中に符号化されたビデオを有するように、ビデオをビデオデータストリーム中に符号化するためのビデオエンコーダが提供される。ビデオエンコーダは、ビデオデータストリームが、複数の出力レイヤセットの出力レイヤセットごとに復号パラメータセット情報を有するスケーラブルネスティング付加拡張情報を含むようにビデオデータストリームを生成する。

【0033】

さらに、一実施形態によれば、その中に符号化されたビデオを有するビデオデータストリームが提供される。ビデオデータストリームは、複数の操作点のインジケーションを含む。さらに、ビデオデータストリームは、複数のプロファイルティアレベルの１つ以上のプロファイルティアレベルを操作点に割り当てる、複数の操作点の操作点ごとの第一マッピングを含む。さらに、ビデオデータストリームは、複数の第二マッピングを含み、複数のマッピングのそれぞれは、複数の操作点のうちの１つを複数の出力レベルセットのうちの１つの出力レベルセットに割り当てる。

【0034】

さらに、一実施形態によれば、ビデオデータストリームがその中に符号化されたビデオを有するように、ビデオをビデオデータストリーム中に符号化するためのビデオエンコーダが提供される。ビデオエンコーダは、ビデオデータストリームが複数の操作点のインジケーションを含むようにビデオデータストリームを生成する。さらに、ビデオエンコーダは、ビデオデータストリームが、複数のプロファイルティアレベルの１つ以上のプロファイルティアレベルを操作点に割り当てる、複数の操作点の操作点ごとの第一マッピングを含むようにビデオデータストリームを生成する。さらに、ビデオエンコーダは、ビデオデータストリームが複数の第二マッピングを含むようにビデオデータストリームを生成し、複数のマッピングのそれぞれは、複数の操作点のうちの１つを複数の出力レベルセットのうちの１つの出力レベルセットに割り当てる。

【0035】

さらに、一実施形態によれば、ビデオデータストリームを入力ビットストリームとして受信するための装置が提供され、ビデオデータストリームがその中に符号化されるビデオを有する。ビデオデータストリームは、複数の操作点のインジケーションを含む。さらに、ビデオデータストリームは、複数のプロファイルティアレベルの１つ以上のプロファイルティアレベルを操作点にマッピングする、複数の操作点の操作点ごとの第一マッピングを含む。さらに、ビデオデータストリームは、複数の第二マッピングを含み、複数のマッピングのそれぞれは、複数の操作点のうちの１つを複数の出力レベルセットのうちの１つの出力レベルセットにマッピングする。装置は、複数の出力レイヤセットのうちの１つの出力レイヤセットに応じて、また第二マッピングのうちの少なくとも１つに応じて入力ビットストリームを処理し、複数の操作点のうちの１つを１つの出力レベルセットにマッピングし、出力ビットストリームを生成する。

【0036】

さらに、一実施形態によれば、ビデオデータストリームを入力ビットストリームとして受信するための方法が提供され、ビデオデータストリームがその中に符号化されるビデオを有する。ビデオデータストリームは、初期プロファイルティアレベル情報を含む。さらに、ビデオデータストリームは、２つ以上のレイヤの第一群を含む。方法は、複数の出力レイヤセットのうちの１つの出力レイヤセットに応じて入力ビットストリームを処理し、２つ以上のレイヤの第一群から少なくとも１つのレイヤを除去して１つ以上のレイヤの第二群を取得することによって出力ビットストリームを生成することを含むことで、出力ビットストリームは、１つ以上のレイヤの第二群を含むが、第一群から除去された少なくとも１つのレイヤを含まない。さらに、方法は、１つ以上のレイヤの第二群のうちの少なくとも１つのレイヤに関連付けられていない、初期プロファイルティアレベル情報のそれらの部分を初期プロファイルティアレベル情報から除去することを含む。

【0037】

さらに、一実施形態によれば、ビデオデータストリームを入力ビットストリームとして受信するための方法が提供され、ビデオデータストリームがその中に符号化されるビデオを有する。ビデオデータストリームは、複数の出力レイヤセットの出力レイヤセットごとに復号パラメータセット情報を有するスケーラブルネスティング付加拡張情報を含む。方法は、複数の出力レイヤセットのうちの１つの出力レイヤセットに応じて入力ビットストリームを処理して出力ビットストリームを取得することを含むことで、出力ビットストリームは、出力レイヤセットの復号パラメータセット情報を含み、出力ビットストリームは、複数の出力レイヤセットの任意の他の出力レイヤセットの復号パラメータセット情報を含まない。

【0038】

さらに、一実施形態によれば、ビデオデータストリームがその中に符号化されたビデオを有するように、ビデオをビデオデータストリーム中に符号化するための方法が提供される。方法は、ビデオデータストリームが、複数の出力レイヤセットの出力レイヤセットごとに復号パラメータセット情報を有するスケーラブルネスティング付加拡張情報を含むようにビデオデータストリームを生成することを含む。

【0039】

さらに、一実施形態によれば、ビデオデータストリームがその中に符号化されたビデオを有するように、ビデオをビデオデータストリーム中に符号化するための方法が提供される。方法は、ビデオデータストリームが複数の操作点のインジケーションを含むようにビデオデータストリームを生成することを含む。さらに、方法は、ビデオデータストリームが、複数のプロファイルティアレベルの１つ以上のプロファイルティアレベルを操作点に割り当てる、複数の操作点の操作点ごとの第一マッピングを含むようにビデオデータストリームを生成することを含む。さらに、方法は、ビデオデータストリームが、複数の第二マッピングを含むようにビデオデータストリームを生成することを含み、複数のマッピングのそれぞれは、複数の操作点のうちの１つを複数の出力レベルセットのうちの１つの出力レベルセットに割り当てる。

【0040】

さらに、一実施形態によれば、ビデオデータストリームを入力ビットストリームとして受信するための方法が提供され、ビデオデータストリームがその中に符号化されるビデオを有する。ビデオデータストリームは、複数の操作点のインジケーションを含む。さらに、ビデオデータストリームは、複数のプロファイルティアレベルの１つ以上のプロファイルティアレベルを操作点にマッピングする、複数の操作点の操作点ごとの第一マッピングを含む。さらに、ビデオデータストリームは、複数の第二マッピングを含み、複数のマッピングのそれぞれは、複数の操作点のうちの１つを複数の出力レベルセットのうちの１つの出力レベルセットにマッピングする。方法は、複数の出力レイヤセットのうちの１つの出力レイヤセットに応じて、また第二マッピングのうちの少なくとも１つに応じて入力ビットストリームを処理し、複数の操作点のうちの１つを１つの出力レベルセットにマッピングし、出力ビットストリームを生成することを含む。

【0041】

さらに、コンピュータまたはシグナルプロセッサ上で実行されるときに上記の方法のうちの１つを実装するためのコンピュータプログラムが提供される。

【0042】

一実施形態によれば、その中に符号化されたビデオを有するビデオデータストリームが提供される。ビデオデータストリームは、シーケンスパラメータセット及び復号パラメータセットを含む。シーケンスパラメータセットは、シーケンスパラメータセットに格納される情報に従って、サブレイヤの最大限数、またはサブレイヤの最大限数引く定数値を示す第一インジケーション値を含む。復号パラメータセットは、復号パラメータセットに格納される情報に従って、サブレイヤの最大限数、またはサブレイヤの最大限数引く定数値を示す第二インジケーション値を含む。第一インジケーション値は第二インジケーション値以下である。

【0043】

さらに、一実施形態によれば、ビデオデータストリームがその中に符号化されたビデオを有するように、ビデオをビデオデータストリーム中に符号化するためのビデオエンコーダが提供される。ビデオエンコーダは、ビデオデータストリームがシーケンスパラメータセット及び復号パラメータセットを含むようにビデオデータストリームを生成する。ビデオエンコーダは、シーケンスパラメータセットが、シーケンスパラメータセットに格納される情報に従って、サブレイヤの最大限数、またはサブレイヤの最大限数引く定数値を示す第一インジケーション値を含むようにビデオデータストリームを生成する。さらに、ビデオエンコーダは、復号パラメータセットが、復号パラメータセットに格納される情報に従って、サブレイヤの最大限数、またはサブレイヤの最大限数引く定数値を示す第二インジケーション値を含むようにビデオデータストリームを生成する。さらに、ビデオエンコーダは、第一インジケーション値が第二インジケーション値以下であるようにビデオデータストリームを生成する。

【0044】

さらに、一実施形態によれば、ビデオデータストリームがその中に符号化されたビデオを有するように、ビデオをビデオデータストリーム中に符号化するためのビデオエンコーダが提供される。ビデオエンコーダは、ビデオデータストリームがシーケンスパラメータセット及び復号パラメータセットを含むようにビデオデータストリームを生成する。さらに、ビデオエンコーダは、シーケンスパラメータセットが、シーケンスパラメータセットに格納される情報に従って、サブレイヤの最大限数、またはサブレイヤの最大限数引く定数値を示す第一インジケーション値を含むようにビデオデータストリームを生成する。さらに、ビデオエンコーダは、復号パラメータセットが、復号パラメータセットに格納される情報に従って、サブレイヤの最大限数、またはサブレイヤの最大限数引く定数値を示す第二インジケーション値を含むようにビデオデータストリームを生成する。復号パラメータセットの第二インジケーション値は、シーケンスパラメータセットの第一インジケーション値よりも優先される上界である。

【0045】

さらに、一実施形態によれば、ビデオデータストリームを入力ビットストリームとして受信するための装置が提供され、ビデオデータストリームがその中に符号化されるビデオを有する。ビデオデータストリームは、シーケンスパラメータセット及び復号パラメータセットを含む。シーケンスパラメータセットは、シーケンスパラメータセットに格納される情報に従って、サブレイヤの最大限数、またはサブレイヤの最大限数引く定数値を示す第一インジケーション値を含む。復号パラメータセットは、復号パラメータセットに格納される情報に従って、サブレイヤの最大限数、またはサブレイヤの最大限数引く定数値を示す第二インジケーション値を含む。第一インジケーション値が第二インジケーション値より大きい場合、装置は、出力ビットストリームが第二インジケーション値を、サブレイヤの最大限数に関する、またはサブレイヤの最大限数引く定数値に関するインジケーションとして含むように入力ビットストリームを処理して出力ビットストリームを生成する。

【0046】

さらに、一実施形態によれば、ビデオデータストリームがその中に符号化されたビデオを有するように、ビデオをビデオデータストリーム中に符号化するための方法が提供される。方法は、ビデオデータストリームがシーケンスパラメータセット及び復号パラメータセットを含むようにビデオデータストリームを生成することを含む。さらに、方法は、シーケンスパラメータセットが、シーケンスパラメータセットに格納される情報に従って、サブレイヤの最大限数、またはサブレイヤの最大限数引く定数値を示す第一インジケーション値を含むようにビデオデータストリームを生成することを含む。さらに、方法は、復号パラメータセットが、復号パラメータセットに格納される情報に従って、サブレイヤの最大限数、またはサブレイヤの最大限数引く定数値を示す第二インジケーション値を含むようにビデオデータストリームを生成することを含む。方法は、第一インジケーション値が第二インジケーション値以下であるようにビデオデータストリームを生成することを含む。

【0047】

さらに、一実施形態によれば、ビデオデータストリームがその中に符号化されたビデオを有するように、ビデオをビデオデータストリーム中に符号化するための方法が提供される。方法は、ビデオデータストリームがシーケンスパラメータセット及び復号パラメータセットを含むようにビデオデータストリームを生成することを含む。さらに、方法は、シーケンスパラメータセットが、シーケンスパラメータセットに格納される情報に従って、サブレイヤの最大限数、またはサブレイヤの最大限数引く定数値を示す第一インジケーション値を含むようにビデオデータストリームを生成することを含む。さらに、方法は、復号パラメータセットが、復号パラメータセットに格納される情報に従って、サブレイヤの最大限数、またはサブレイヤの最大限数引く定数値を示す第二インジケーション値を含むようにビデオデータストリームを生成することを含む。復号パラメータセットの第二インジケーション値は、シーケンスパラメータセットの第一インジケーション値よりも優先される上界である。

【0048】

さらに、一実施形態によれば、ビデオデータストリームを入力ビットストリームとして受信するための方法が提供され、ビデオデータストリームがその中に符号化されるビデオを有する。ビデオデータストリームは、シーケンスパラメータセット及び復号パラメータセットを含む。シーケンスパラメータセットは、シーケンスパラメータセットに格納される情報に従って、サブレイヤの最大限数、またはサブレイヤの最大限数引く定数値を示す第一インジケーション値を含む。復号パラメータセットは、復号パラメータセットに格納される情報に従って、サブレイヤの最大限数、またはサブレイヤの最大限数引く定数値を示す第二インジケーション値を含み、第一インジケーション値が第二インジケーション値より大きい場合、方法は、出力ビットストリームが第二インジケーション値を、サブレイヤの最大限数に関する、またはサブレイヤの最大限数引く定数値に関するインジケーションとして含むように、入力ビットストリームを処理して出力ビットストリームを生成することを含む。

【0049】

さらに、コンピュータまたはシグナルプロセッサ上で実行されるときに上記の方法のうちの１つを実装するためのコンピュータプログラムが提供される。

【図面の簡単な説明】

【0050】

【図1】一実施形態による、ビデオをビデオデータストリーム中に符号化するためのビデオエンコーダを示す。

【図2】一実施形態による、入力ビデオデータストリームを受信するための装置を示す。

【図3】一実施形態による、その中に格納されるビデオを有するビデオデータストリームを受信するためのビデオデコーダを示す。

【図4】テンポラルスケーラビリティに加えて参照ピクチャリサンプリングを使用する一例を示す。

【図5】２つのスプライシング点のオプションを示し、オプションＩ（上）は例全体を通してフレームレートを維持し、オプションＩＩ（下）はビットストリームの最後のピクチャ群内にフレームレートドロップを有する。

【図6】ビデオエンコーダを示す。

【図7】ビデオデコーダを示す。

【図8】一方では再構築された信号、例えば、再構築されたピクチャと、他方では、データストリーム内でシグナリングされた予測残差信号、及び予測信号の組み合わせとの間の関係を示す。

【発明を実施するための形態】

【0051】

以下の図面の説明は、本発明の実施形態が組み込まれ得る符号化フレームワークの一例を形成するために、ビデオのピクチャを符号化するためのブロックベースの予測コーデックのエンコーダ及びデコーダの説明の提示から開始する。それぞれのエンコーダ及びデコーダは、図６から図８に関して説明される。以下に、本発明の概念の実施形態の説明は、それらのような概念がどのように図６及び図７のそれぞれのエンコーダ及びデコーダに組み込まれ得るかに関する説明と共に提示されるが、図１から図３及びそれ以降に説明される実施形態もまた、図６及び図７のエンコーダ及びデコーダの基礎となる符号化フレームワークに従って動作しないエンコーダ及びデコーダを形成するために使用され得る。

【0052】

図６は、ビデオエンコーダ、例示的に変換ベースの残差符号化を使用して、ピクチャ１２をデータストリーム１４中に予測符号化するための装置を示す。装置、またはエンコーダは、参照記号１０を使用して示される。図７は、対応するビデオデコーダ２０、例えば、装置２０を示し、この装置もまた、変換ベースの残差復号を使用して、ピクチャ１２’をデータストリーム１４から予測復号するように構成され、アポストロフィは、デコーダ２０によって再構築されたピクチャ１２’が予測残差信号の量子化によって導入された符号化損失の観点から装置１０によって最初に符号化されたピクチャ１２から逸脱することを示すために使用されている。図６及び図７は、変換ベースの予測残差符号化を例示的に使用するが、本出願の実施形態は、この種の予測残差符号化に限定されない。これは、以降に概説されるように、図６及び図７に関して説明される他の詳細にも当てはまる。

【0053】

エンコーダ１０は、予測残差信号を空間からスペクトルへの変換にかけ、この予測残差信号をデータストリーム１４中に符号化することで、その中でこの予測残差信号が取得されるように構成される。同様に、デコーダ２０は、予測残差信号をデータストリーム１４から復号し、この予測残差信号をスペクトルから空間への変換にかけることで、この予測残差信号が取得されるように構成される。

【0054】

内部では、エンコーダ１０は、予測残差信号形成器２２を含み得、この予測残差信号形成器は、元の信号、例えばピクチャ１２から予測信号２６の偏差を測定するために予測残差２４を生成する。予測残差信号形成器２２は、例えば、減算器であってもよく、この減算器は、元の信号、例えばピクチャ１２から予測信号を減算する。つぎに、エンコーダ１０は、変換器２８をさらに含み、この変換器が予測残差信号２４を空間からスペクトルへの変換にかけることで、スペクトル領域予測残差信号２４’を取得する。つぎに、このスペクトル領域予測残差信号は、量子化器３２による量子化にかけられたうえ、エンコーダ１０によって含まれる。したがって、量子化された予測残差信号２４”は、ビットストリーム１４中に符号化される。この目的を達成するために、エンコーダ１０は、エントロピーコーダ３４を任意選択で含み得、このエントロピーコーダは、変換され量子化された予測残差信号をデータストリーム１４中にエントロピー符号化する。予測信号２６は、データストリーム１４中に符号化され、そこから復号可能である予測残差信号２４”に基づいて、エンコーダ１０の予測ステージ３６によって発生する。この目的を達成するためには、予測ステージ３６は、内部に、図６に示されるように、予測残差信号２４”を逆量子化し、量子化損失を除き信号２４’に対応するスペクトル領域予測残差信号２４’’’を得る逆量子化器３８と、その後に、後者の予測残差信号２４’’’を逆変換、例えばスペクトルから空間への変換にかけ、量子化損失を除き元の予測残差信号２４に対応する予測残差信号２４’’’’を得る逆変換器４０とを含み得る。つぎに、予測ステージ３６の合成器４２は、加算などによって、予測信号２６及び予測残差信号２４’’’’を再合成し、再構築された信号４６、例えば元の信号１２の再構築を得る。再構築された信号４６は、信号１２’に対応し得る。つぎに、予測ステージ３６の予測モジュール４４は、例えば、空間予測（イントラピクチャ予測など）及び／またはテンポラル予測（インターピクチャ予測など）を使用することによって信号４６に基づいて、予測信号２６を発生する。

【0055】

同様に、デコーダ２０は、図７に示されるように、予測ステージ３６に対応し、予測ステージに対応する方法で相互接続される、コンポーネントから内部に構成され得る。特に、デコーダ２０のエントロピーデコーダ５０は、量子化されたスペクトル領域予測残差信号２４’’をデータストリームからエントロピー復号し得、そこで逆量子化器５２、逆変換器５４、合成器５６及び予測モジュール５８は、相互接続され、予測ステージ３６のモジュールに関して上記の方法で協働することで、予測残差信号２４’’に基づいて再構築された信号を回復することで、図７に示されるように、合成器５６の出力は、再構築された信号、すなわちピクチャ１２’をもたらす。

【0056】

具体的に上述されていないが、エンコーダ１０が、例えば、符号化コストなどのいくつかのレート及び歪み関連基準を最適化する方法など、いくつかの最適化スキームに従って、例えば、予測モード、動きパラメータなどを含むいくつかの符号化パラメータを設定し得ることが容易に明らかになる。たとえば、エンコーダ１０及びデコーダ２０ならびに対応するモジュール４４、５８は、それぞれ異なる予測モード、例えばイントラ符号化モード及びインター符号化モードをサポートし得る。エンコーダ及びデコーダがそれらの予測モードタイプ間で切り替える粒度は、それぞれピクチャ１２及び１２’の符号化セグメントまたは符号化ブロックへの細分化に対応し得る。これらの符号化セグメントのユニットでは、例えば、ピクチャは、イントラ符号化されたブロック、及びインター符号化されたブロックに細分化され得る。イントラ符号化されたブロックは、以下により詳細に概説されるように、それぞれのブロックの空間の、既に符号化された／復号された近傍に基づいて予測される。いくつかのイントラ符号化モードは、それぞれのイントラ符号化されたセグメントに対して、存在し得、選択され得、指向性または角度イントラ符号化モードを含み得、これらのモードに従って、それぞれのセグメントは、それぞれの指向性イントラ符号化モードに特異的な特定の方向に沿った近傍のサンプル値を、それぞれのイントラ符号化されたセグメント中に外挿することによって埋められる。これらのイントラ符号化モードは、例えば、ＤＣ符号化モードであって、このモードに従ってそれぞれのイントラ符号化されたブロックの予測がＤＣ値を、それぞれのイントラ符号化されたセグメント内のすべてのサンプルに割り当てるＤＣ符号化モード、及び／または平面イントラ符号化モードであって、このモードに従ってそれぞれのブロックの予測が、近傍サンプルに基づいた二次元線形関数によって定義される平面の傾き及びオフセットにするにつれて、それぞれのイントラ符号化されたブロックのサンプル位置にわたる二次元線形関数によって記述されるサンプル値の空間分布であるように近似され、その空間分布であると決定される、平面イントラ符号化モードなどの１つ以上のさらなるモードも含み得る。それらと比較して、インター符号化されたブロックは、例えばテンポラルに、予測され得る。インター符号化されたブロックの場合、動きベクトルは、データストリーム内にシグナリングされ得、動きベクトルは、ピクチャ１２が属するビデオの以前に符号化されたピクチャの部分の空間変位を示し、そこでは、以前に符号化された／復号されたピクチャは、それぞれのインター符号化されたブロックの予測信号を取得するためにサンプリングされる。これは、量子化されたスペクトル領域予測残差信号２４’’を表すエントロピー符号化された変換係数レベルなど、データストリーム１４が含む残差信号の符号化に加えて、データストリーム１４が、その中に符号化された、符号化モードをさまざまなブロックに割り当てるための符号化モードパラメータと、インター符号化されたセグメントの動きパラメータなど、ブロックの一部の予測パラメータと、ピクチャ１２及び１２’のそれぞれのセグメントへの細分化を制御してシグナリングするためのパラメータなどの任意選択のさらなるパラメータとを含み得ることを意味する。デコーダ２０は、これらのパラメータを使用して、エンコーダが行ったものと同じ方法でピクチャを細分化し、同じ予測モードをセグメントに割り当て、同じ予測を実行した結果、同じ予測信号になる。

【0057】

図８は、一方では再構築された信号、例えば、再構築されたピクチャ１２’と、他方では、データストリーム１４内でシグナリングされた予測残差信号２４’’’’、及び予測信号２６の組み合わせとの間の関係を示す。既に上記に示されるように、この組み合わせは、加算であり得る。予測信号２６は、図８では、ハッチングを使用して例示的に示されるイントラ符号化されたブロック、及びハッチングされていない例示的に示されるインター符号化されたブロックへのピクチャ領域の細分化として示される。この細分化は、正方形ブロックまたは非正方形ブロックのロウ及びカラムへのピクチャ領域の通常の細分化、またはツリールートブロックからさまざまなサイズの複数のリーフブロックへのピクチャ１２のマルチツリー細分化（例えば、クワッドツリー細分化など）のような任意の細分化であり得、それらの組み合わせは、図８に示され、図中、ピクチャ領域は、ツリールートブロックのロウ及びカラムに最初に細分化されてから、再帰的マルチツリー細分化に従って１つ以上のリーフブロックにさらに細分化される。

【0058】

この場合も、データストリーム１４は、イントラ符号化されたブロック８０のためにその中に符号化されたイントラ符号化モードを有し得ることで、いくつかのサポートされたイントラ符号化モードのうちの１つは、それぞれのイントラ符号化されたブロック８０に割り当てられる。インター符号化されたブロック８２の場合、データストリーム１４は、その中に符号化された１つ以上の動きパラメータを有し得る。概して、インター符号化されたブロック８２は、テンポラルに符号化されるように制限されない。代わりに、インター符号化されたブロック８２は、現在のピクチャ１２自体を超えて以前に符号化された部分から、例えば、ピクチャ１２が属するビデオの以前に符号化されたピクチャ、またはエンコーダ及びデコーダがそれぞれスケーラブルなエンコーダ及びデコーダである場合には別のビューのピクチャもしくは階層的に下位のレイヤから、予測される任意のブロックであり得る。

【0059】

図８では、予測残差信号２４’’’’もまた、ピクチャ領域のブロック８４への細分化として示される。これらのブロックは、同じものを符号化ブロック８０及び８２から区別するために変換ブロックと称されてもよい。実際には、図８は、エンコーダ１０及びデコーダ２０がピクチャ１２及びピクチャ１２’のそれぞれのブロックへの２つの異なる細分化、すなわち１つがそれぞれの符号化ブロック８０及び８２への細分化、及びもう１つが変換ブロック８４への細分化を使用し得ることを示す。両方の細分化は、同じもの、例えばそれぞれ符号化ブロック８０及び８２でもよく、同時に変換ブロック８４を形成し得るが、図８は、例えば、変換ブロック８４への細分化が符号化ブロック８０、８２への細分化の拡張を形成する場合を示すため、ブロック８０及び８２の２つのブロック間の任意の境界が２つのブロック８４間の境界に重なる、または別の言い方をすれば、各ブロック８０、８２のいずれかが変換ブロック８４のうちの１つと合致する、もしくは変換ブロック８４のクラスタと合致する。ただし、これらの細分化もまた、変換ブロック８４がブロック８０とブロック８２との間のブロック境界を交互に交差し得るように互いから独立して決定され得る、または選択され得る。したがって、変換ブロック８４への細分化が関係する限り、ブロック８０、８２への細分化に関してあげられたものと同様のステートメントは、真であり、例えば、ブロック８４は、ピクチャ領域のブロックへの通常の細分化の結果（ロウ及びカラムへの配置の有無にかかわらず）、ピクチャ領域の再帰的マルチツリー細分化の結果、またはそれらの組み合わせもしくは任意の他の種類のブロック結果であり得る。余談であるが、ブロック８０、８２及び８４が四角形、矩形または任意の他の形状のものであることに限定されないことに留意する。

【0060】

さらに、図８は、予測信号２６及び予測残差信号２４’’’’の組み合わせが再構築された信号１２’を直接もたらすことを示す。ただし、代替の実施形態による、１つより多い予測信号２６が予測残差信号２４’’’’と組み合わせられ得ることで、ピクチャ１２’になり得ることに留意されたい。

【0061】

図８では、変換ブロック８４は、以下の有意性を有するものとする。変換器２８及び逆変換器５４は、それらの変換をそれらの変換ブロック８４の単位で実行する。例えば、多くのコーデックは、すべての変換ブロック８４のある種のＤＳＴまたはＤＣＴを使用する。いくつかのコーデックは、変換をスキップすることを可能にするため、いくつかの変換ブロック８４には、予測残差信号は、空間領域で直接符号化される。ただし、下記の実施形態によれば、エンコーダ１０及びデコーダ２０は、いくつかの変換をサポートするような方法で構成される。例えば、エンコーダ１０及びデコーダ２０によってサポートされる変換は、
・ＤＣＴ－ＩＩ（またはＤＣＴ－ＩＩＩ）（ＤＣＴは離散コサイン変換を表す）、
・ＤＳＴ－ＩＶ（ＤＳＴは離散サイン変換を表す）、
・ＤＣＴ－ＩＶ、
・ＤＳＴ－ＶＩＩ、
・恒等変換（ＩＴ）、
を含み得る。

【0062】

当然、変換器２８は、それらの変換の順方向変換バージョンのすべてをサポートするが、デコーダ２０または逆変換器５４は、それらの対応する逆方向または逆バージョン、
・逆ＤＣＴ－ＩＩ（または逆ＤＣＴ－ＩＩＩ）、
・逆ＤＳＴ－ＩＶ、
・逆ＤＣＴ－ＩＶ、
・逆ＤＳＴ－ＶＩＩ、
・恒等変換（ＩＴ）、
をサポートする。

【0063】

その後の説明では、変換がエンコーダ１０及びデコーダ２０によってサポートされ得る、さらなる詳細が提供される。いずれの場合も、１つのスペクトルから空間への、または空間からスペクトルへの変換など、１つの変換のみを、サポートされた変換セットが含み得ることに留意されたい。

【0064】

既に上記で概説されるように、図６から図８は、以下にさらに説明される本発明の概念が本出願によるエンコーダ及びデコーダの具体的な例を形成するために実装され得る、一例として提示されている。これまでのところ、図６及び図７のそれぞれのエンコーダ及びデコーダは、本明細書では下記のエンコーダ及びデコーダの可能な実装を表し得る。ただし、図６及び図７は、例に過ぎない。ただし、本出願の実施形態によるエンコーダは、以下により詳細に概説される概念を使用して、例えば、同じものがビデオエンコーダではないがそれでもピクチャエンコーダであるという点、同じものがインター予測をサポートしないという点、またはブロック８０への細分化が図８に例示されている方法とは異なる方法で実行されるという点などで、図６のエンコーダとは異なる、ピクチャ１２のブロックベースの符号化を実行し得る。同様に、本出願の実施形態によるデコーダは、データストリーム１４からのピクチャ１２’のブロックベースの復号を、以下でさらに概説される符号化概念を使用して実行し得るが、例えば、同じものがビデオデコーダではないがそれでもピクチャデコーダであるという点、同じものがイントラ予測をサポートしないという点、または図８に関して説明される方法とは異なる方法で同じものがピクチャ１２’をブロックに細分化するという点、及び／または同じものが例えば変換領域ではなく空間領域でデータストリーム１４から予測残差を導出するという点で図７のデコーダ２０とは異なり得る。

【0065】

図１は、一実施形態による、ビデオをビデオデータストリーム中に符号化するためのビデオエンコーダ１００を示す。ビデオエンコーダ１００は、ビデオデータストリームを生成するように構成される。

【0066】

図２は、一実施形態による、入力ビデオデータストリームを受信するための装置２００を示す。入力ビデオデータストリームは、その中に符号化されたビデオを有する。装置２００は、出力ビデオデータストリームを入力ビデオデータストリームから生成するように構成される。

【0067】

図３は、一実施形態による、その中に格納されるビデオを有するビデオデータストリームを受信するためのビデオデコーダ３００を示す。ビデオデコーダ３００は、ビデオをビデオデータストリームから復号するように構成される。

【0068】

さらに、一実施形態によるシステムが提供される。このシステムは、図２の装置、及び図３のビデオデコーダを含む。図３のビデオデコーダ（３００）は、図２の装置（２００）の出力ビデオデータストリームを受信するように構成される。図３のビデオデコーダ３００は、図２の装置２００の出力ビデオデータストリームからビデオを復号するように構成される。

【0069】

一実施形態では、システムは、例えば、図１のビデオエンコーダ１００をさらに含み得る。図２の装置２００は、例えば、図１のビデオエンコーダ１００からのビデオデータストリームを入力ビデオデータストリームとして受信するように構成され得る。

【0070】

装置２００の中間デバイス２１０（任意選択の）は、例えば、ビデオエンコーダ１００からのビデオデータストリームを入力ビデオデータストリームとして受信し、出力ビデオデータストリームを入力ビデオデータストリームから生成するように構成され得る。例えば、中間デバイスは、例えば、入力ビデオデータストリームの情報（ヘッダ／メタデータ情報）を変更するように構成され得る、及び／または例えば、入力ビデオデータストリームからピクチャを削除するように構成され得る、及び／または入力ビデオデータストリームを、その中に符号化された第二ビデオを有する追加の第二ビットストリームと混合する／スプライシングするように構成され得る。

【0071】

ビデオデコーダ２２１（任意選択の）は、例えば、ビデオを出力ビデオデータストリームから復号するように構成され得る。

【0072】

仮想参照デコーダ２２２（任意選択の）は、例えば、出力ビデオデータストリームに応じてビデオのタイミング情報を決定するように構成され得る、または例えば、ビデオもしくはビデオの一部分が格納されるバッファのバッファ情報を決定するように構成され得る。

【0073】

このシステムは、図１のビデオエンコーダ１０１及び図２のビデオデコーダ１５１を含む。

【0074】

ビデオエンコーダ１０１は、符号化されたビデオ信号を発生するように構成される。ビデオデコーダ１５１は、符号化されたビデオ信号を復号してビデオのピクチャを再構築するように構成される。

【0075】

下記では、トリックモード及び高速再生が説明される。

【0076】

一実施形態によれば、ビデオデータストリームを入力ビットストリームとして受信するための装置が提供され、ビデオデータストリームがその中に符号化されるビデオを有する。再生速度変更係数（Ｎｘ）の場合、装置は、復号能力要件制限に応じて復号能力要件を決定する。再生速度変更係数（Ｎｘ）は、順方向再生速度変更係数である、または逆方向再生速度変更係数である。

【0077】

一実施形態では、復号能力要件は、例えば、変更されたサンプルレートであり得る。復号能力要件制限は、例えば、サンプルレート制限であり得る。

【0078】

一実施形態によれば、ビデオデータストリームは、例えば、サンプルレート制限に関する情報を含み得る。

【0079】

一実施形態では、装置は、例えば、ビデオのピクチャのピクチャサイズに応じて、変更されたサンプルレートを決定するように構成され得る。

【0080】

一実施形態によれば、装置は、例えば、さらにフレームレートに応じて、また再生速度変更係数（Ｎｘ）に応じて、変更されたサンプルレートを決定するように構成され得る。ビデオデータストリームは、例えば、フレームレートに関する情報を含み得る。

【0081】

一実施形態では、フレームレートは、１つ以上のサブレイヤのうちの１つのサブレイヤに依存する。ビデオデータストリームは、例えば、１つ以上のサブレイヤのそれぞれについてのサブレイヤ固有フレームレート情報を含み得る。装置は、例えば、１つ以上のサブレイヤのうちの１つについてのサブレイヤ固有フレームレート情報からフレームレートを取得するように構成され得る。

【0082】

一実施形態によれば、装置は、例えば、ビデオの複数のピクチャの中で最大ピクチャサイズである、ビデオのピクチャのピクチャサイズに応じて、変更されたサンプルレートを決定するように構成され得る。

【0083】

一実施形態では、ビデオデータストリームは、例えば、アプリケーション係数を含み得る。装置は、例えば、最大レイヤピクチャサイズ及びアプリケーション係数を使用して、変更されたサンプルレートを計算するように構成され得る。

【0084】

一実施形態によれば、最大ピクチャサイズは、１つ以上のサブレイヤのうちの１つのサブレイヤに依存する。ビデオデータストリームは、例えば、１つ以上のサブレイヤのそれぞれについてのサブレイヤ固有最大限ピクチャサイズ情報を含み得る。装置は、例えば、１つ以上のサブレイヤのうちの１つについてのサブレイヤ固有最大限ピクチャサイズ情報から最大ピクチャサイズを取得するように構成され得る。

【0085】

一実施形態では、ビデオデータストリームは、例えば、アプリケーション係数を含み得る。装置は、例えば、ビデオのサンプルレートを使用して、またアプリケーション係数を使用して、変更されたサンプルレートを決定するように構成され得る。

【0086】

一実施形態によれば、復号能力要件は、例えば、変更されたビットレートであり得る。復号能力要件制限は、例えば、ビットレート制限であり得る。

【0087】

一実施形態では、ビデオデータストリームは、例えば、ビットレート制限に関する情報を含み得る。

【0088】

一実施形態によれば、装置は、例えば、ビデオデータストリームの初期ビットレートに応じて、また再生速度変更係数（Ｎｘ）に応じて、変更されたビットレートを決定するように構成され得る。

【0089】

一実施形態では、初期ビットレートは、１つ以上のサブレイヤのうちの１つのサブレイヤに依存する。ビデオデータストリームは、例えば、１つ以上のサブレイヤのそれぞれについてのサブレイヤ固有初期ビットレート情報を含み得る。装置は、例えば、１つ以上のサブレイヤのうちの１つについてのサブレイヤ固有フレームレート情報から初期ビットレートを取得するように構成され得る。

【0090】

一実施形態によれば、ビデオデータストリームは、例えば、初期再生速度が例えば増加し得るときにＩＲＡＰ（ＩＲＡＰ＝Ｉｎｔｒａ ｒａｎｄｏｍ ａｃｃｅｓｓ ｐｏｉｎｔ（イントラランダムアクセスポイント））ピクチャのみの復号が行われ得るかどうかを示すＩＲＡＰ専用フラグを含み得る。ＩＲＡＰ専用フラグに応じて、装置は、例えば、ビデオデータストリームから復号能力要件を読み出すように構成され得る。

【0091】

一実施形態では、ビデオデータストリームは、例えば、初期再生速度が例えば増加し得るときに参照ピクチャのみの復号が行われ得るかどうかを示す参照ピクチャ専用フラグを含み得る。参照ピクチャ専用フラグに応じて、装置は、例えば、ビデオデータストリームから復号能力要件を読み出すように構成され得る。

【0092】

さらに、一実施形態によれば、その中に符号化されたビデオを有するビデオデータストリームが提供される。ビデオデータストリームは、例えば、サンプルレート制限に関する情報を含み得る、及び／またはビデオデータストリームは、例えば、ビットレート制限に関する情報を含み得る。

【0093】

一実施形態によれば、ビデオデータストリームは、例えば、フレームレートに関する情報を含み得る。

【0094】

一実施形態では、ビデオデータストリームは、例えば、１つ以上のサブレイヤのそれぞれについてのサブレイヤ固有フレームレート情報を含み得る。

【0095】

一実施形態によれば、ビデオデータストリームは、例えば、変更されたサンプルレートを決定するためのアプリケーション係数を含み得る。

【0096】

一実施形態では、ビデオデータストリームは、例えば、１つ以上のサブレイヤのそれぞれについてのサブレイヤ固有最大限ピクチャサイズ情報を含み得る。

【0097】

一実施形態によれば、ビデオデータストリームは、例えば、１つ以上のサブレイヤのそれぞれについてのサブレイヤ固有初期ビットレート情報を含み得る。

【0098】

一実施形態では、ビデオデータストリームは、例えば、初期再生速度が例えば増加し得るときにＩＲＡＰピクチャのみの復号が行われ得るかどうかを示すＩＲＡＰ専用フラグを含み得る。

【0099】

一実施形態によれば、ビデオデータストリームは、例えば、初期再生速度が例えば増加し得るときに参照ピクチャのみの復号が行われ得るかどうかを示す参照ピクチャ専用フラグを含み得る。

【0100】

一実施形態では、ＩＲＡＰ専用フラグに応じて、ビデオデータストリームは、例えば、レベル情報を含み得る、及び／または参照ピクチャ専用フラグに応じて、ビデオデータストリームは、例えば、レベル情報を含み得る。

【0101】

さらに、一実施形態によれば、ビデオデータストリームがその中に符号化されたビデオを有するように、ビデオをビデオデータストリーム中に符号化するためのビデオエンコーダが提供される。ビデオエンコーダは、ビデオデータストリームがサンプルレート制限に関する情報を含むようにビデオデータストリームを生成する、及び／またはビデオエンコーダは、ビデオデータストリームがビットレート制限に関する情報を含むようにビデオデータストリームを生成する。

【0102】

一実施形態では、ビデオエンコーダは、例えば、ビデオデータストリームが例えばフレームレートに関する情報を含み得るようにビデオデータストリームを生成するように構成され得る。

【0103】

一実施形態によれば、ビデオエンコーダは、例えば、ビデオデータストリームが例えば１つ以上のサブレイヤのそれぞれについてのサブレイヤ固有フレームレート情報を含み得るようにビデオデータストリームを生成するように構成され得る。

【0104】

一実施形態では、ビデオエンコーダは、例えば、ビデオデータストリームが例えば変更されたサンプルレートを決定するためのアプリケーション係数を含み得るようにビデオデータストリームを生成するように構成され得る。

【0105】

一実施形態によれば、ビデオエンコーダは、例えば、ビデオデータストリームが例えば１つ以上のサブレイヤのそれぞれについてのサブレイヤ固有最大限ピクチャサイズ情報を含み得るようにビデオデータストリームを生成するように構成され得る。

【0106】

一実施形態では、ビデオエンコーダは、例えば、ビデオデータストリームが例えば１つ以上のサブレイヤのそれぞれについてのサブレイヤ固有初期ビットレート情報を含み得るようにビデオデータストリームを生成するように構成され得る。

【0107】

一実施形態によれば、ビデオエンコーダは、例えば、初期再生速度が例えば増加し得るときにＩＲＡＰピクチャのみの復号が行われ得るかどうかを示すＩＲＡＰ専用フラグをビデオデータストリームが例えば含み得るようにビデオデータストリームを生成するように構成され得る。

【0108】

一実施形態では、ビデオエンコーダは、例えば、初期再生速度が例えば増加し得るときに参照ピクチャのみの復号が行われ得るかどうかを示す参照ピクチャ専用フラグをビデオデータストリームが例えば含み得るようにビデオデータストリームを生成するするように構成され得る。

【0109】

一実施形態によれば、ビデオエンコーダは、例えば、ＩＲＡＰ専用フラグに応じて、ビデオデータストリームが例えばレベル情報を含み得るようにビデオデータストリームを生成するように構成され得る、及び／またはビデオエンコーダは、例えば、参照ピクチャ専用フラグに応じて、ビデオデータストリームが例えばレベル情報を含み得るようにビデオデータストリームを生成するように構成され得る。

【0110】

一実施形態では、装置は、例えば、入力ビットストリームを復号してビデオを復号するように構成され得る。

【0111】

さらに、一実施形態によれば、ビデオをビデオデータストリーム中に符号化するための、そしてビデオを復号するためのシステムが提供される。システムは、上記のようなビデオエンコーダ、上記のような装置を含む。ビデオエンコーダは、ビデオデータストリームがその中に符号化されたビデオを有するように、ビデオをビデオデータストリーム中に符号化する。装置は、ビデオデータストリームを入力ビットストリームとして受信する。さらに、装置は、入力ビットストリームを復号して、ビデオを復号する。

【0112】

高速順方向操作または逆操作（逆方向高速再生）は、ビデオアプリケーションで実行される一般的な操作である。通常、これらの操作は、１サブセットのビットストリームのみを復号することからなることで、それが復号されると、ビットストリームで示された速度、例えばフレームレートよりも高速になる。また、非トリックモード操作の場合でも、ビデオを再生する速度が高速になることは、一部のシナリオでは重要であり得る。高速順方向での大きな差異がないが、この説明で検討されている高速再生での差異は、第二標的が連続した滑らかな再生であるが（オーディオ再生及び同期を用いる可能性もある）、第一標的がそうではないこと、例えば、高速順方向がコンテンツ内に「ジャンプ」の多い不連続な再生である可能性があることであり得る。いずれの場合も、結果は、コンテンツがＮｘ速度で再生されることである。

【0113】

明らかに、コンテンツを再生する速度が高速であるほど、ビットストリームを復号する速度も高速である必要があることで、ＨＲＤパラメータで示されるようにサンプルレートが高くなりビットレートが高くなった結果、復号能力要件が高くなる、すなわち、レベルが高くなる。

【0114】

参照ピクチャリサンプリング（ＲＰＲ）が使用されない場合、すなわち、ＣＶＳまたはビットストリーム内のすべてのピクチャが同じサイズを有する場合、サンプルレートは、フレームレートで除算された、またスピードアップ係数Ｎｘで乗算された、サンプル内のピクチャサイズとして容易に計算され得る。同様に、ビットレートは、スピードアップ係数Ｎｘで乗算される。

【0115】

第一実施形態では、記載されている、上記で議論される通りに導出された２つの値は、ＶＶＣでのレベル制限に対してチェックされ、Ｎｘのスピードアップが属するレベルは、導出された値がレベル制限より小さい最小値として計算される。

【0116】

フレームレートまたはビットレートがサブレイヤ固有であることで、再生されるサブレイヤが何であれ（例えば、高速順方向がテンポラルレベル０を復号することでのみ実行される）、対応する値がサブレイヤ固有のシグナリングされたフレームレートまたはビットレートを使用して計算されるという意味があることに留意されたい。

【0117】

ただし、参照ピクチャリサンプリング（ＲＰＲ）が使用される場合、サンプルレートは、簡単に導出されることができない、すなわち、最大ピクチャサイズにワーストケースのみが使用されることができるため、ワーストケースのサンプルレートが導出される。ＲＰＲがテンポラルスケーラビリティに加えて使用され得る方法の一例は、図４に示される。

【0118】

図４は、テンポラルスケーラビリティに加えて参照ピクチャリサンプリングを使用する一例を示す。

【0119】

この例では、最下位のサブレイヤが１９２０×１０８０のピクチャサイズを有し、最上位のサブレイヤが９６０×５４０のピクチャサイズを有することができる。最大限ピクチャサイズを使用して、６０ｆｐｓのビットストリームを想定するだけで、１秒あたり約１２４^＊１０^６のサンプルのサンプルレートが導出され、実際の値は、約７８^＊１０^６である。すなわち、ワーストケースは実際の値より１．６倍高い。

【0120】

一実施形態では、ビットストリームは、ワーストケース値で導出されたサンプルレートに適用される必要がある係数についてのインジケーションを含む。シグナリングされた係数の場合、ワーストケースのサンプルレートは、導出され、シグナリングされた係数で除算され、速度復号係数で乗算され得ることで、スピードアップ復号操作によって実際のサンプルレートが計算され得る。

【0121】

別の実施形態では、最大限ピクチャサイズの値がサブレイヤごとに示されることで、ピクチャサイズがサブレイヤ内で変化しない場合、より良い近似値または正しい値さえ導出される。

【0122】

加えて、サブレイヤが完全に使用されていない場合がある。ときとして、高速順方向は、ＩＲＡＰピクチャ（例えば、ＩＤＲ）か非参照ピクチャではないピクチャかいずれかを復号して再生するだけで、実行される。ただし、Ｎｘ速度での復号時にそのようなサブビットストリームを復号するために必要なレベルは明らかではない。さらなる一実施形態では、追加のレベルシグナリングは、
・ＩＲＡＰ専用：ＩＲＡＰのみが復号される場合、
・参照ピクチャ専用：非参照ピクチャが破棄され、その残りが復号される場合、
という２つの場合のうちのいずれか１つに示される。

【0123】

そのような一実施形態のシンタックスは以下のようになり得る。
ｐｒｏｆｉｌｅ＿ｔｉｅｒ＿ｌｅｖｅｌの場合：

【表1】

【0124】

ｉｒａｐ専用の場合と同様に、参照ピクチャ専用は、シンタックスに追加され得る。

【0125】

ビットレート及びＣＰＢサイズは、同様に、次のようにシグナリングされ得る。

【表2】

【0126】

以下では、ｄｅｌａｙ＿ｆｏｒ＿ｃｏｎｃａｔｅｎａｔｉｏｎ＿ｅｎｓｕｒｅｄ＿ｆｌａｇをガードすることが説明される。

【0127】

一実施形態によれば、その中に符号化されたビデオを有するビデオデータストリームが提供される。ビデオデータストリームは複数のアクセスユニットを含み、ビデオデータストリームのアクセスユニット群は、複数のアクセスユニットを含む。さらに、ビデオデータストリームは、１サブセットのアクセスユニットのアクセスユニットごとに、アクセスユニットの後にシームレスなスプライシング点が存在することを示すインジケーションを含む。１サブセットのアクセスユニットは、ビデオデータストリームの適切な１サブセットのアクセスユニット群である。

【0128】

一実施形態では、ビデオデータストリームは、例えば、複数のテンポラルサブレイヤを含み得る。アクセスユニットの後にシームレスなスプライシング点が存在するというインジケーションは、複数のテンポラルサブレイヤの第一テンポラルサブレイヤ群のアクセスユニットにのみ存在するが、アクセスユニットの後にシームレスなスプライシング点が存在するというインジケーションは、複数のテンポラルサブレイヤの第二テンポラルサブレイヤ群のアクセスユニットに存在しない。

【0129】

一実施形態によれば、ビデオデータストリームは、例えば、バッファリング期間の付加拡張情報を含み得る。バッファリング期間の付加拡張情報は、アクセスユニットの後にシームレスなスプライシング点が存在する、複数のアクセスユニットの１サブセットのアクセスユニットを示す。

【0130】

一実施形態では、ビデオデータストリームは、例えば、除数を含み得る。遅延値は、例えば、ビデオデータストリームの複数のアクセスユニットの各アクセスユニットに割り当てられ得る。アクセスユニットの後にシームレスなスプライシング点が存在することを示すインジケーションは、割り当てられた遅延値を有するビデオデータストリームの複数のアクセスユニットのそれらのアクセスユニットにのみ存在し、割り当てられた遅延値は、除数によって除算されると、例えば、剰余値に等しくなり得る。

【0131】

一実施形態によれば、剰余値は、例えば、０であってもよい。

【0132】

一実施形態では、ビデオデータストリームは、例えば、剰余値を含み得る。

【0133】

一実施形態によれば、アクセスユニットの後にシームレスなスプライシング点が存在することを示す、１サブセットのアクセスユニットのアクセスユニットごとのインジケーションは、例えば、フラグであり得る。

【0134】

一実施形態では、フラグは、例えば、ｄｅｌａｙ＿ｆｏｒ＿ｃｏｎｃａｔｅｎａｔｉｏｎ＿ｅｎｓｕｒｅｄ＿ｆｌａｇであってもよい。

【0135】

一実施形態によれば、ビデオデータストリームを復号することに起因する出力ピクチャに一定のフレームレートが例えば確保され得ない場合、フラグは第一値を示す。ビデオデータストリームを復号することに起因する出力ピクチャに一定のフレームレートが例えば確保され得る場合、フラグは、例えば、第一値とは異なる第二値を示し得る。

【0136】

一実施形態では、ビデオデータストリームを復号することに起因する出力ピクチャが等距離の出力時間を有する場合、フラグは第二値を示す。

【0137】

さらに、一実施形態によれば、ビデオデータストリームがその中に符号化されたビデオを有するように、ビデオをビデオデータストリーム中に符号化するためのビデオエンコーダが提供される。ビデオエンコーダは、ビデオデータストリームが複数のアクセスユニットを含むようにビデオデータストリームを生成し、ビデオデータストリームのアクセスユニット群は、複数のアクセスユニットを含む。さらに、ビデオエンコーダは、ビデオデータストリームが１サブセットのアクセスユニットのアクセスユニットごとに、アクセスユニットの後にシームレスなスプライシング点が存在することを示すインジケーションを含むようにビデオデータストリームを生成する。さらに、ビデオエンコーダは、１サブセットのアクセスユニットがビデオデータストリームの適切な１サブセットのアクセスユニット群であるようにビデオデータストリームを生成する。

【0138】

一実施形態では、ビデオエンコーダは、例えば、ビデオデータストリームが例えば複数のテンポラルサブレイヤを含み得るようにビデオデータストリームを生成するように構成され得る。ビデオエンコーダは、例えば、アクセスユニットの後にシームレスなスプライシング点が存在するというインジケーションが、複数のテンポラルサブレイヤの第一テンポラルサブレイヤ群のアクセスユニットにのみ存在するようにビデオデータストリームを生成するように構成され得るが、ビデオエンコーダは、例えば、アクセスユニットの後にシームレスなスプライシング点が存在するというインジケーションが、複数のテンポラルサブレイヤの第二テンポラルサブレイヤ群のアクセスユニットに存在しないようにビデオデータストリームを生成するように構成され得る。

【0139】

一実施形態によれば、ビデオエンコーダは、例えば、ビデオデータストリームが例えばバッファリング期間の付加拡張情報を含み得るようにビデオデータストリームを生成するように構成され得る。ビデオエンコーダは、例えば、バッファリング期間の付加拡張情報が、アクセスユニットの後にシームレスなスプライシング点が存在する複数のアクセスユニットの１サブセットのアクセスユニットを示すようにビデオデータストリームを生成するように構成され得る。

【0140】

一実施形態では、ビデオエンコーダは、例えば、ビデオデータストリームが例えば除数を含み得るようにビデオデータストリームを生成するように構成され得る。ビデオエンコーダは、例えば、遅延値が例えばビデオデータストリームの複数のアクセスユニットの各アクセスユニットに割り当てられ得るようにビデオデータストリームを生成するように構成され得る。ビデオエンコーダは、例えば、アクセスユニットの後にシームレスなスプライシング点が存在することを示すインジケーションが、割り当てられた遅延値を有するビデオデータストリームの複数のアクセスユニットのそれらのアクセスユニットにのみ存在し、割り当てられた遅延値が、除数によって除算されると、例えば、剰余値に等しくなり得るようにビデオデータストリームを生成するように構成され得る。

【0141】

一実施形態によれば、ビデオエンコーダは、例えば、剰余値が例えば０であり得るようにビデオデータストリームを生成するように構成され得る。

【0142】

一実施形態では、ビデオエンコーダは、例えば、ビデオデータストリームが例えば剰余値を含み得るようにビデオデータストリームを生成するように構成され得る。

【0143】

一実施形態によれば、ビデオエンコーダは、例えば、アクセスユニットの後にシームレスなスプライシング点が存在することを示す、１サブセットのアクセスユニットのアクセスユニットごとのインジケーションが例えばフラグであり得るようにビデオデータストリームを生成するように構成され得る。

【0144】

一実施形態では、ビデオエンコーダは、例えば、フラグが例えばｄｅｌａｙ＿ｆｏｒ＿ｃｏｎｃａｔｅｎａｔｉｏｎ＿ｅｎｓｕｒｅｄ＿ｆｌａｇであり得るようにビデオデータストリームを生成するように構成され得る。

【0145】

一実施形態によれば、ビデオエンコーダは、例えば、ビデオデータストリームを復号することに起因する出力ピクチャに一定のフレームレートが例えば確保され得ない場合、フラグが第一値を示すようにビデオデータストリームを生成するように構成され得る。ビデオエンコーダは、例えば、ビデオデータストリームを復号することに起因する出力ピクチャに一定のフレームレートが例えば確保され得る場合、フラグが第一値とは異なる第二値を示すようにビデオデータストリームを生成するように構成され得る。

【0146】

一実施形態では、ビデオエンコーダは、例えば、ビデオデータストリームを復号することに起因する出力ピクチャが等距離の出力時間を有する場合、フラグが第二値を示すようにビデオデータストリームを生成するように構成され得る。

【0147】

さらに、一実施形態によれば、ビデオデータストリームを入力ビットストリームとして受信するための装置が提供され、ビデオデータストリームがその中に符号化されるビデオを有する。装置は、ビデオデータストリームを処理する。ビデオデータストリームは複数のアクセスユニットを含み、ビデオデータストリームのアクセスユニット群は、複数のアクセスユニットを含む。さらに、ビデオデータストリームは、１サブセットのアクセスユニットのアクセスユニットごとに、アクセスユニットの後にシームレスなスプライシング点が存在することを示すインジケーションを含む。１サブセットのアクセスユニットは、ビデオデータストリームの適切な１サブセットのアクセスユニット群である。装置はインジケーションを処理する。

【0148】

一実施形態では、ビデオデータストリームは、例えば、複数のテンポラルサブレイヤを含み得る。アクセスユニットの後にシームレスなスプライシング点が存在するというインジケーションは、複数のテンポラルサブレイヤの第一テンポラルサブレイヤ群のアクセスユニットにのみ存在するが、アクセスユニットの後にシームレスなスプライシング点が存在するというインジケーションは、複数のテンポラルサブレイヤの第二テンポラルサブレイヤ群のアクセスユニットに存在しない。

【0149】

一実施形態によれば、ビデオデータストリームは、例えば、バッファリング期間の付加拡張情報を含み得る。バッファリング期間の付加拡張情報は、アクセスユニットの後にシームレスなスプライシング点が存在する、複数のアクセスユニットの１サブセットのアクセスユニットを示す。装置は、例えば、バッファリング期間の付加拡張情報を処理するように構成され得る。

【0150】

一実施形態では、ビデオデータストリームは、例えば、除数を含み得る。装置は、例えば、除数を受信するように構成され得る。遅延値は、例えば、ビデオデータストリームの複数のアクセスユニットの各アクセスユニットに割り当てられ得る。アクセスユニットの後にシームレスなスプライシング点が存在することを示すインジケーションは、割り当てられた遅延値を有するビデオデータストリームの複数のアクセスユニットのそれらのアクセスユニットにのみ存在し、割り当てられた遅延値は、除数によって除算されると、例えば、剰余値に等しくなり得る。

【0151】

一実施形態によれば、剰余値は、例えば、０であってもよい。

【0152】

一実施形態では、ビデオデータストリームは、例えば、剰余値を含み得る。装置は、例えば、剰余値を受信するように構成され得る。

【0153】

一実施形態によれば、アクセスユニットの後にシームレスなスプライシング点が存在することを示す、１サブセットのアクセスユニットのアクセスユニットごとのインジケーションは、例えば、フラグであり得る。装置は、例えば、フラグを処理するように構成され得る。

【0154】

一実施形態では、フラグは、例えば、ｄｅｌａｙ＿ｆｏｒ＿ｃｏｎｃａｔｅｎａｔｉｏｎ＿ｅｎｓｕｒｅｄ＿ｆｌａｇであってもよい。

【0155】

一実施形態によれば、ビデオデータストリームを復号することに起因する出力ピクチャに一定のフレームレートが例えば確保され得ない場合、フラグは第一値を示す。ビデオデータストリームを復号することに起因する出力ピクチャに一定のフレームレートが例えば確保され得る場合、フラグは、第一値とは異なる第二値を示す。

【0156】

一実施形態では、ビデオデータストリームを復号することに起因する出力ピクチャが等距離の出力時間を有する場合、フラグは第二値を示す。

【0157】

一実施形態によれば、装置は、例えば、入力ビットストリームを復号してビデオを復号するように構成され得る。

【0158】

さらに、一実施形態によれば、ビデオをビデオデータストリーム中に符号化するための、そしてビデオを復号するためのシステムが提供される。システムは、上記のようなビデオエンコーダ、及び上記のような装置を含む。ビデオエンコーダは、ビデオデータストリームがその中に符号化されたビデオを有するように、ビデオをビデオデータストリーム中に符号化する。装置は、ビデオデータストリームを入力ビットストリームとして受信する。さらに、装置は、入力ビットストリームを復号して、ビデオを復号する。

【0159】

現在のＶＶＣドラフト仕様では、スプライシングデバイス、すなわち、ビットストリームＡ及びビットストリームＢの一部を連結するデバイスが、ＡＵをビットストリームＡ内で見いだすことを可能にすることで、ビットストリームＢのシームレスなスプライシングができるというインジケーションが存在する。シームレスなスプライシングは、ビットストリームＡの最後のＡＵとビットストリームＢの最初のＡＵとの間のＣＰＢ除去時間の距離が、ビットストリームＡの２つの連続したＡＵのＣＰＢ除去時間と同じであるという事実を指す。むしろ、シームレスでないスプライシングは、ビットストリームＢの最初のＡＵが適切な時間にデコーダのＣＰＢに送信されることができない（すなわち、ビットストリームＡの最後のＡＵが送信されることが望ましい時間よりも長い時間を必要とする）ことが原因で、ビットストリームＢの最初のＡＵの復号（ＣＰＢ除去）は遅延する必要があるため、望ましいほど早くＡＵを復号することが達成されないことを意味する。ＶＶＣドラフト仕様内の現在のピクチャタイミングＳＥＩメッセージは、ｄｅｌａｙ＿ｆｏｒ＿ｃｏｎｃａｔｅｎａｔｉｏｎ＿ｅｎｓｕｒｅｄ＿ｆｌａｇと称されるフラグを含み、このフラグは、１に設定されると、その次のＡＵ（すなわち、ビットストリームＢの先頭）が、ｃｏｎｃａｔｅｎａｔｉｏｎ＿ｆｌａｇが１に等しく、選択されたＩｎｉｔＣｐｂＲｅｍｏｖａｌＤｅｌａｙがビットストリームＡに示されるｍａｘ＿ｉｎｉｔｉａｌ＿ｒｅｍｏｖａｌ＿ｄｅｌａｙ＿ｆｏｒ＿ｃｏｎｃａｔｉｎａｔｉｏｎの値以下であるというＢＰ ＳＥＩメッセージを有する限り、このビットストリーム位置でのスプライシングがシームレスであることを特定の関連ＡＵに示す。これにより、ビットストリームＡのこれらのＡＵのすべてについて、ｄｅｌａｙ＿ｆｏｒ＿ｃｏｎｃａｔｅｎａｔｉｏｎ＿ｅｎｓｕｒｅｄ＿ｆｌａｇは、シームレスなスプライシングに実現可能なオプション表す。

【0160】

この問題は、上記の特性が与えられる、それらのアクセスユニットのすべてもまた、意味のあるスプライシング点を表すとは限らないこと、そして意味のないスプライシング点にさえもｄｅｌａｙ＿ｆｏｒ＿ｃｏｎｃａｔｅｎａｔｉｏｎ＿ｅｎｓｕｒｅｄ＿ｆｌａｇがシグナリングされることで、そのような最適でない位置であまりうまく実装されていないスプライシングデバイスがスプライシングすることになる可能性があることである。それとは別に、すべてのアクセスユニットのｄｅｌａｙ＿ｆｏｒ＿ｃｏｎｃａｔｅｎａｔｉｏｎ＿ｅｎｓｕｒｅｄ＿ｆｌａｇのインジケーションには、意味のあるスプライシング点ではないものでも、スプライシングデバイスに使用できない場合でもフラグ値を正しく設定するために、エンコーダ側でビットレートオーバーヘッド及び処理オーバーヘッドが発生する。この文脈での意味のないスプライシング点は、実際のスプライシング点でのフレームレートが維持されていても、これらのスプライシング点の一部がビットストリームＡの一部を省略することで、スプライシング点の前のビットストリームＡの不連続なプレイアウトになること、例えば、階層ＧＯＰの途中でスプライシングすることが省かれる可能性があることを意味する。一例は、図５に示され、図中、２つのビットストリーム（Ａ及びＢ）は、２つの位置（Ｉ及びＩＩ）でスプライシングされ、第一オプション（上）は、例全体を通して一定のフレームレートになるが、第二オプション（下）は、選択されたスプライシング点が誤っていたためフレームレートが低下する。

【0161】

図５は、２つのスプライシング点のオプションを示し、オプションＩ（上）は例全体を通してフレームレートを維持し、オプションＩＩ（下）はビットストリームＡの最後のＧＯＰでのフレームレートの低下を有する。

【0162】

したがって、本発明は、１サブセットのアクセスユニットにｄｅｌａｙ＿ｆｏｒ＿ｃｏｎｃａｔｅｎａｔｉｏｎ＿ｅｎｓｕｒｅｄ＿ｆｌａｇを選択的にシグナリングすることで、シグナリングオーバーヘッドを削減させ、スプライシングデバイスのミスリードを回避する。

【0163】

ｄｅｌａｙ＿ｆｏｒ＿ｃｏｎｃａｔｅｎａｔｉｏｎ＿ｅｎｓｕｒｅｄ＿ｆｌａｇが特定のテンポラルサブレイヤのＡＵにのみシグナリングされる一実施形態では、特定のテンポラルサブレイヤは、関連ＢＰ ＳＥＩメッセージに示される。

【0164】

ｄｅｌａｙ＿ｆｏｒ＿ｃｏｎｃａｔｅｎａｔｉｏｎ＿ｅｎｓｕｒｅｄ＿ｆｌａｇがバッファリング期間中に１サブセットのすべてのＡＵにのみシグナリングされる別の実施形態では、ＡＵサブセットは、関連ＢＰ ＳＥＩメッセージからの情報を用いて識別される。

【0165】

一実施形態では、ＡＵサブセットは、除数、及び任意選択では剰余値をシグナリングすることによって示される。バッファリング期間のＰＴ ＳＥＩメッセージ内のｄｅｌａｙ＿ｆｏｒ＿ｃｏｎｃａｔｅｎａｔｉｏｎ＿ｅｎｓｕｒｅｄ＿ｆｌａｇは、除数で除算される関連したＡＵの値（例えば、ＰＴ ＳＥＩメッセージ内のｃｐｂ＿ｒｅｍｏｖａｌ＿ｄｅｌａｙ＿ｍｉｎｕｓ１またはｄｐｂ＿ｏｕｔｐｕｔ＿ｄｅｌａｙ）が任意選択の剰余に等しい、またはそれが存在しない際には、ゼロに等しい場合にのみシグナリングされる。

【0166】

さらに一実施形態では、出力ピクチャが図中に示される一定のフレームレートを確保しない場合、ｄｅｌａｙ＿ｆｏｒ＿ｃｏｎｃａｔｅｎａｔｉｏｎ＿ｅｎｓｕｒｅｄ＿ｆｌａｇの値は０に設定される。現在の仕様が、復号時間にのみ現在焦点を当てていることと、最後の到達時間（ＡＵが完全にＣＰＢまで到達した）とＣＰＢ除去遅延との間の差が条件を満たす（すなわち、＞閾値）ことをフラグが１に設定されたＡＵが満たすことを確保することとに留意されたい。したがって、連続したＡＵの復号時間では、等距離が達成される。ここでの本発明は、このフラグが１に設定される場合、ビットストリームＡでの連続したＡＵの出力時間も等距離の出力時間を有することを追加する。

【0167】

以下では、出力レイヤセット固有ＨＲＤが説明される。

【0168】

一実施形態によれば、ビデオデータストリームを入力ビットストリームとして受信するための装置が提供され、ビデオデータストリームがその中に符号化されるビデオを有する。装置は、サブビットストリームを取得するために出力レイヤセットに応じて、入力ビットストリームを処理する。出力レイヤセットがビデオデータストリーム内に存在する複数のレイヤの所定のレイヤ（ｖｐｓ＿ｌａｙｅｒ＿ｉｄ［０］）を含まない場合、装置は、所定のレイヤ（ｃ］）を割り当てられる、少なくとも１つの非スケーラブルネステッド付加拡張情報メッセージを除去する。出力レイヤセットが所定のレイヤ（ｖｐｓ＿ｌａｙｅｒ＿ｉｄ［０］）を含む場合、装置は、所定のレイヤ（ｖｐｓ＿ｌａｙｅｒ＿ｉｄ［０］）を割り当てられるいかなる非スケーラブルネステッド付加拡張情報メッセージも除去しないように構成される。

【0169】

一実施形態では、ビデオデータストリームの現在符号化されているビデオシーケンス内の複数のレイヤのすべてのレイヤからなる出力レイヤセットがない場合、例えば、バッファリング期間ペイロード及びピクチャタイミングペイロード及び復号ユニット情報ペイロードのうちの少なくとも１つに関する非スケーラブルネステッド付加拡張情報メッセージがなくてよい。

【0170】

一実施形態によれば、ビデオデータストリームの現在符号化されているビデオシーケンス内の複数のレイヤのすべてのレイヤからなる出力レイヤセットがない場合、例えば、バッファリング期間ペイロード及びピクチャタイミングペイロード及び復号ユニット情報ペイロード及びサブピクチャレベル情報ペイロードのうちの少なくとも１つに関する非スケーラブルネステッド付加拡張情報メッセージがなくてよい。

【0171】

一実施形態では、ビデオデータストリームの現在符号化されているビデオシーケンス内の複数のレイヤのすべてのレイヤからなる出力レイヤセットがない場合、例えば、バッファリング期間ペイロードを示す第一値に等しい、及びまたはピクチャタイミングペイロードを示す第二値に等しい、または復号ユニット情報ペイロードを示す第三値に等しい、またはサブピクチャレベル情報ペイロードを示す第四値に等しい、ペイロードタイプに関する非スケーラブルネステッド付加拡張情報メッセージがなくてよい。

【0172】

一実施形態によれば、第一値に等しい、または第二値に等しい、または第三値に等しい、または第四値に等しいペイロードタイプを有する非スケーラブルネステッド付加拡張情報メッセージの場合、非スケーラブルネステッド付加拡張情報メッセージは、例えば、ビットストリーム全体内の現在符号化されているビデオシーケンス内のすべてのレイヤからなるすべての出力レイヤセットに、存在する場合、適用されてよい。

【0173】

一実施形態では、ビデオデータストリームの現在符号化されているビデオシーケンス内の複数のレイヤのすべてのレイヤからなる出力レイヤセットがない場合、例えば、バッファリング期間ペイロードを示す０に等しい、またはピクチャタイミングペイロードを示す１に等しい、または復号ユニットペイロードを示す１３０に等しい、またはサブピクチャレベル情報ペイロードを示す２０３に等しい、ペイロードタイプに関する非スケーラブルネステッド付加拡張情報メッセージがなくてよい。

【0174】

一実施形態によれば、０に等しい、または１に等しい、または１３０に等しい、または２０３に等しいペイロードタイプを有する非スケーラブルネステッド付加拡張情報メッセージの場合、非スケーラブルネステッド付加拡張情報メッセージは、ビットストリーム全体内の現在符号化されているビデオシーケンス内のすべてのレイヤからなるすべての出力レイヤセットに、存在する場合、適用される。

【0175】

一実施形態では、出力レイヤセットが所定のレイヤ（ｖｐｓ＿ｌａｙｅｒ＿ｉｄ［０］）を含まない場合、装置は、例えば、所定のレイヤ（ｖｐｓ＿ｌａｙｅｒ＿ｉｄ［０］）を割り当てられるすべてのネステッド付加拡張情報メッセージを除去するように構成され得る。

【0176】

さらに、一実施形態によれば、その中に符号化されたビデオを有するビデオデータストリームが提供される。ビデオデータストリームは、ビデオパラメータセットを含む。ビデオパラメータセットは、複数の出力レイヤセットを含む。いずれの複数の出力レイヤセットもビデオデータストリーム内に存在する複数のレイヤのすべてのレイヤを含まない場合、ビデオデータストリームは、仮想参照デコーダについてのいかなる非スケーラブルネステッド付加拡張情報メッセージも含まない。

【0177】

一実施形態では、ビデオデータストリームの現在符号化されているビデオシーケンス内の複数のレイヤのすべてのレイヤからなる出力レイヤセットがない場合、例えば、バッファリング期間ペイロード及びピクチャタイミングペイロード及び復号ユニット情報ペイロードのうちの少なくとも１つに関する非スケーラブルネステッド付加拡張情報メッセージがなくてよい。

【0178】

一実施形態によれば、ビデオデータストリームの現在符号化されているビデオシーケンス内の複数のレイヤのすべてのレイヤからなる出力レイヤセットがない場合、例えば、バッファリング期間ペイロード及びピクチャタイミングペイロード及び復号ユニット情報ペイロード及びサブピクチャレベル情報ペイロードのうちの少なくとも１つに関する非スケーラブルネステッド付加拡張情報メッセージがなくてよい。

【0179】

一実施形態では、ビデオデータストリームの現在符号化されているビデオシーケンス内の複数のレイヤのすべてのレイヤからなる出力レイヤセットがない場合、例えば、バッファリング期間ペイロードを示す第一値に等しい、またはピクチャタイミングペイロードを示す第二値に等しい、または復号ユニット情報ペイロードを示す第三値に等しい、またはサブピクチャレベル情報ペイロードを示す第四値に等しい、ペイロードタイプに関する非スケーラブルネステッド付加拡張情報メッセージがなくてよい。

【0180】

一実施形態によれば、第一値に等しい、または第二値に等しい、または第三値に等しい、または第四値に等しいペイロードタイプを有する非スケーラブルネステッド付加拡張情報メッセージの場合、非スケーラブルネステッド付加拡張情報メッセージは、例えば、ビットストリーム全体内の現在符号化されているビデオシーケンス内のすべてのレイヤからなるすべての出力レイヤセットに、存在する場合、適用されてよい。

【0181】

一実施形態では、ビデオデータストリームの現在符号化されているビデオシーケンス内の複数のレイヤのすべてのレイヤからなる出力レイヤセットがない場合、例えば、バッファリング期間ペイロードを示す０に等しい、またはピクチャタイミングペイロードを示す１に等しい、または復号ユニットペイロードを示す１３０に等しい、またはサブピクチャレベル情報ペイロードを示す２０３に等しい、ペイロードタイプに関する非スケーラブルネステッド付加拡張情報メッセージがなくてよい。

【0182】

一実施形態によれば、０に等しい、または１に等しい、または１３０に等しい、または２０３に等しいペイロードタイプを有する非スケーラブルネステッド付加拡張情報メッセージの場合、非スケーラブルネステッド付加拡張情報メッセージは、ビットストリーム全体内の現在符号化されているビデオシーケンス内のすべてのレイヤからなるすべての出力レイヤセットに、存在する場合、適用される。

【0183】

一実施形態では、ビデオデータストリームが仮想参照デコーダの少なくとも１つの非スケーラブルネステッド付加拡張情報メッセージを含む場合、複数の出力レイヤセットのうちの少なくとも１つは、例えば、ビデオデータストリーム内に存在する複数のレイヤのすべてのレイヤを含み得る。

【0184】

一実施形態によれば、仮想参照デコーダのすべての付加拡張情報メッセージは、例えばビデオデータストリーム内に存在する複数のレイヤのすべてのレイヤを含み得る、複数の出力レイヤセットのうちの１つの出力レイヤセットに関連付けられていないので、スケーラブルネスティング付加拡張情報メッセージである。

【0185】

一実施形態では、仮想参照デコーダのすべての非スケーラブルネステッド付加拡張情報メッセージは、例えばビデオデータストリーム内に存在する複数のレイヤのすべてのレイヤを含み得る、複数の出力レイヤセットのうちの１つの出力レイヤセットに関連付けられる。

【0186】

さらに、一実施形態によれば、ビデオデータストリームがその中に符号化されたビデオを有するように、ビデオをビデオデータストリーム中に符号化するためのビデオエンコーダが提供される。ビデオエンコーダは、ビデオデータストリームがビデオパラメータセットを含むようにビデオデータストリームを生成する。さらに、ビデオエンコーダは、ビデオパラメータセットが複数の出力レイヤセットを含むようにビデオデータストリームを生成する。いずれの複数の出力レイヤセットもビデオデータストリーム内に存在する複数のレイヤのすべてのレイヤを含まない場合、ビデオエンコーダは、ビデオデータストリームが仮想参照デコーダについてのいかなる非スケーラブルネステッド付加拡張情報メッセージも含まないようにビデオデータストリームを生成する。

【0187】

一実施形態では、例えばビデオデータストリームの現在符号化されているビデオシーケンス内の複数のレイヤのすべてのレイヤからなる出力レイヤセットがなくてよい場合、例えば、バッファリング期間ペイロード及びピクチャタイミングペイロード及び復号ユニット情報ペイロードのうちの少なくとも１つに関する非スケーラブルネステッド付加拡張情報メッセージがなくてよい。

【0188】

一実施形態によれば、例えばビデオデータストリームの現在符号化されているビデオシーケンス内の複数のレイヤのすべてのレイヤからなる出力レイヤセットがなくてよい場合、例えば、バッファリング期間ペイロード及びピクチャタイミングペイロード及び復号ユニット情報ペイロード及びサブピクチャレベル情報ペイロードのうちの少なくとも１つに関する非スケーラブルネステッド付加拡張情報メッセージがなくてよい。

【0189】

一実施形態では、ビデオデータストリームの現在符号化されているビデオシーケンス内の複数のレイヤのすべてのレイヤからなる出力レイヤセットがない場合、例えば、バッファリング期間ペイロードを示す第一値に等しい、またはピクチャタイミングペイロードを示す第二値に等しい、または復号ユニット情報ペイロードを示す第三値に等しい、またはサブピクチャレベル情報ペイロードを示す第四値に等しい、ペイロードタイプに関する非スケーラブルネステッド付加拡張情報メッセージがなくてよい。

【0190】

一実施形態によれば、第一値に等しい、または第二値に等しい、または第三値に等しい、または第四値に等しいペイロードタイプを有する非スケーラブルネステッド付加拡張情報メッセージの場合、非スケーラブルネステッド付加拡張情報メッセージは、例えば、ビットストリーム全体内の現在符号化されているビデオシーケンス内のすべてのレイヤからなるすべての出力レイヤセットに、存在する場合、適用されてよい。

【0191】

一実施形態では、ビデオデータストリームの現在符号化されているビデオシーケンス内の複数のレイヤのすべてのレイヤからなる出力レイヤセットがない場合、バッファリング期間ペイロードを示す０に等しい、またはピクチャタイミングペイロードを示す１に等しい、または復号ユニットペイロードを示す１３０に等しい、またはサブピクチャレベル情報ペイロードを示す２０３に等しい、ペイロードタイプに関する非スケーラブルネステッド付加拡張情報メッセージがない。

【0192】

一実施形態によれば、０に等しい、または１に等しい、または１３０に等しい、または２０３に等しいペイロードタイプを有する非スケーラブルネステッド付加拡張情報メッセージの場合、非スケーラブルネステッド付加拡張情報メッセージは、ビットストリーム全体内の現在符号化されているビデオシーケンス内のすべてのレイヤからなるすべての出力レイヤセットに、存在する場合、適用される。

【0193】

一実施形態では、ビデオデータストリームが例えば仮想参照デコーダの少なくとも１つの非スケーラブルネステッド付加拡張情報メッセージを含み得る場合、ビデオエンコーダは、例えば、複数の出力レイヤセットのうちの少なくとも１つが例えばビデオデータストリーム内に存在する複数のレイヤのすべてのレイヤを含み得るようにビデオデータストリームを生成するように構成され得る。

【0194】

一実施形態によれば、ビデオエンコーダは、例えば、仮想参照デコーダのすべての付加拡張情報メッセージが、例えばビデオデータストリーム内に存在する複数のレイヤのすべてのレイヤを含み得る、複数の出力レイヤセットのうちの１つの出力レイヤセットに関連付けられていないので、スケーラブルネスティング付加拡張情報メッセージであるようにビデオデータストリームを生成するように構成され得る。

【0195】

一実施形態では、ビデオエンコーダは、例えば、仮想参照デコーダのすべての非スケーラブルネステッド付加拡張情報メッセージが、例えばビデオデータストリーム内に存在する複数のレイヤのすべてのレイヤを含み得る、複数の出力レイヤセットのうちの１つの出力レイヤセットに関連付けられるようにビデオデータストリームを生成するように構成され得る。

【0196】

一実施形態によれば、装置は、例えば、入力ビットストリームを復号してビデオを復号するように構成され得る。

【0197】

現在のＶＶＣドラフト仕様は、サブビットストリーム、すなわちＯＬＳにのみ適用されるＨＲＤタイミング情報（ＢＰ ＳＥＩメッセージ、ＰＴ ＳＥＩメッセージ、ＤＵＩ ＳＥＩメッセージ）をビットストリーム内に、それぞれのＯＬＳを示したスケーラブルネスティングＳＥＩメッセージを使用するネステッド形式で搬送する手段を提供する。他のＨＲＤ ＳＥＩメッセージは、ビットストリーム内に直接搬送されるので（非スケーラブルネステッドＳＥＩメッセージとして）、シンタックス要素ｖｐｓ＿ｌａｙｅｒ＿ｉｄ［０］によってＶＰＳ内に示されるように単一レイヤサブビットストリームである第０のＯＬＳに適用される必要がある。ただし、レイヤード符号化に一般的なように、このレイヤまたは任意の他のレイヤのビットストリームからの除去は、ＶＰＳのリライトを必要としないので、ｎｕｈ＿ｌａｙｅｒ＿ｉｄがｖｐｓ＿ｌａｙｅｒ＿ｉｄ［０］に等しいレイヤでさえ存在し得ない。

【0198】

この要件は、第０のＯＬＳ以外のＯＬＳが抽出されると、ｎｕｈ＿ｌａｙｅｒ＿ｉｄがｖｐｓ＿ｌａｙｅｒ＿ｉｄ［０］に等しいレイヤを、抽出されたＯＬＳが含む場合でさえ、非スケーラブルネステッドＳＥＩメッセージが許可されないという問題をもたらす。ＶＰＳ（ｖｐｓ＿ｌａｙｅｒ＿ｉｄ［０］）及びそれぞれの値をそれぞれのレイヤのＮＡＬユニットヘッダ内にリライトした後にのみ、それらのような非スケーラブルネステッドメッセージがビットストリーム内に残ることができる。

【0199】

以下で、その問題を解決する本発明の２つの態様が次のように導入される。
１）第一解決策として、上記の複雑さはそのままにされているが、抽出プロセスは、抽出されたＯＬＳがｎｕｈ＿ｌａｙｅｒ＿ｉｄがｖｐｓ＿ｌａｙｅｒ＿ｉｄ［０］に等しいレイヤを含まない場合、ｎｕｈ＿ｌａｙｅｒ＿ｉｄがｖｐｓ＿ｌａｙｅｒ＿ｉｄ［０］に等しいレイヤに適用する非スケーラブルネステッドＳＥＩメッセージのみを除去するという方法で調整される。これにより、非スケーラブルネステッドＳＥＩメッセージは、不必要に除去されない（または換言すれば、ｎｕｈ＿ｌａｙｅｒ＿ｉｄがｖｐｓ＿ｌａｙｅｒ＿ｉｄ［０］に等しいレイヤを含むＯＬＳごとに不必要に複製されるために必要とされない）。
２）第二解決策として、完全なビットストリーム（すなわち、その中のすべてのレイヤ）に対応するＶＰＳ内に定義されたＯＬＳがない場合、非スケーラブルネステッドＳＥＩメッセージ（ＢＰ、ＰＴ、ＤＵＩ）はビットストリーム内に存在することができない。それ以外の場合、ビットストリーム内のすべての存在するレイヤに対応するＯＬＳが存在する場合、それぞれのＨＲＤ ＳＥＩメッセージは、非スケーラブルネステッド方法でビットストリーム内にあることができる。すべての他のＨＲＤ ＳＥＩメッセージ（別のＯＬＳに適用する）は、スケーラブルネスティングＳＥＩメッセージ内にある必要がある。逆に、すべての非スケーラブルネステッドＳＥＩメッセージは、存在するビットストリーム全体に対応する。

【0200】

非スケーラブルネステッド付加拡張情報メッセージの場合、ｐａｙｌｏａｄＴｙｐｅが０（バッファリング期間、ＢＰ、コンテンツを示す）、１（ピクチャタイミング、ＰＴ、コンテンツを示す）、１３０（復号ユニット情報、ＤＵＩ、コンテンツを示す）、または２０３（サブピクチャレベル情報、ＳＬＩ、コンテンツを示す）に等しい場合、非スケーラブルネステッド付加拡張情報メッセージは、ビットストリーム全体内の現在符号化されているビデオシーケンス内のすべてのレイヤからなるすべての出力レイヤセットに、存在する場合、適用される。

【0201】

ビットストリーム全体の現在符号化されているビデオシーケンス内のすべてのレイヤからなる出力レイヤセットがない場合、ｐａｙｌｏａｄＴｙｐｅが０（ＢＰ）、１（ＰＴ）、１３０（ＤＵＩ）、または２０３（ＳＬＩ）に等しい、非スケーラブルネステッド付加拡張メッセージがないものとする。

【0202】

以下では、サブレイヤＰＴＬをＤＰＳ内にリライトすることが説明される。

【0203】

一実施形態によれば、ビデオデータストリームを入力ビットストリームとして受信するための装置が提供され、ビデオデータストリームがその中に符号化されるビデオを有する。ビデオデータストリームは、初期プロファイルティアレベル情報を含む。さらに、ビデオデータストリームは、２つ以上のレイヤの第一群を含む。装置は、複数の出力レイヤセットのうちの１つの出力レイヤセットに応じて入力ビットストリームを処理し、２つ以上のレイヤの第一群から少なくとも１つのレイヤを除去して１つ以上のレイヤの第二群を取得することによって出力ビットストリームを生成することで、出力ビットストリームは、１つ以上のレイヤの第二群を含むが、第一群から除去された少なくとも１つのレイヤを含まない。さらに、装置は、１つ以上のレイヤの第二群のうちの少なくとも１つのレイヤに関連付けられていない初期プロファイルティアレベル情報のそれらの部分を、初期プロファイルティアレベル情報から除去する。

【0204】

一実施形態によれば、ビデオデータストリームは、例えば、初期復号パラメータセットのプロファイルティアレベル情報を初期プロファイルティアレベル情報として含み得る。装置は、例えば、１つ以上のレイヤの第二群のうちの少なくとも１つのレイヤに関連付けられていない初期復号パラメータセットのプロファイルティアレベル情報のそれらの部分を、初期復号パラメータセットのプロファイルティアレベル情報から除去するように構成され得る。

【0205】

さらに、一実施形態によれば、ビデオデータストリームを入力ビットストリームとして受信するための装置が提供され、ビデオデータストリームがその中に符号化されるビデオを有する。ビデオデータストリームは、複数の出力レイヤセットの出力レイヤセットごとに復号パラメータセット情報を有するスケーラブルネスティング付加拡張情報を含む。装置は、複数の出力レイヤセットのうちの１つの出力レイヤセットに応じて入力ビットストリームを処理して出力ビットストリームを取得することで、出力ビットストリームは、出力レイヤセットの復号パラメータセット情報を含み、出力ビットストリームは、複数の出力レイヤセットの任意の他の出力レイヤセットの復号パラメータセット情報を含まない。

【0206】

一実施形態では、ビデオデータストリームは、例えば、未加工のバイトシーケンスペイロードを含み得る。未加工のバイトシーケンスペイロードは、例えば、複数の出力レイヤセットの出力レイヤセットごとに復号パラメータセット情報を含み得る。

【0207】

一実施形態によれば、ビデオデータストリームは、例えば複数の出力レイヤセットの出力レイヤセットごとに復号パラメータセット情報を有し得る、例えばスケーラブルネスティング付加拡張情報を有し得る、例えばスケーラブルネスティング付加拡張メッセージを含み得る。

【0208】

一実施形態では、ビデオデータストリームは、例えば、１ビット以上を有するネスティングタイプフラグ（ｎｅｓｔｉｎｇ＿ｔｙｐｅ）を含み得る。

【0209】

一実施形態によれば、ネスティングタイプフラグ（ｎｅｓｔｉｎｇ＿ｔｙｐｅ）が第一値を示す場合、これは、スケーラブルネスティング付加拡張メッセージが例えば復号パラメータセット情報を有する１つ以上の復号パラメータセットを含み得ること、及びそれ以上付加拡張メッセージがスケーラブルネスティング付加拡張メッセージ内にネストされないことを示す。

【0210】

一実施形態では、ネスティングタイプフラグ（ｎｅｓｔｉｎｇ＿ｔｙｐｅ）が第二値を示す場合、これは、スケーラブルネスティング付加拡張メッセージ内にネストされる１つ以上の付加拡張メッセージが出力レイヤセットに適用されることを示す。

【0211】

一実施形態によれば、ネスティングタイプフラグ（ｎｅｓｔｉｎｇ＿ｔｙｐｅ）が第三値を示す場合、これは、スケーラブルネスティング付加拡張メッセージ内にネストされる１つ以上の付加拡張メッセージが１サブセットの出力レイヤセットに適用されることを示す。

【0212】

一実施形態では、ネスティングタイプフラグ（ｎｅｓｔｉｎｇ＿ｔｙｐｅ）が第四値を示す場合、これは、スケーラブルネスティング付加拡張メッセージが例えば、復号パラメータセット情報を有する１つ以上の復号パラメータセットを含み得ることを示す。

【0213】

さらに、一実施形態によれば、その中に符号化されたビデオを有するビデオデータストリームが提供される。ビデオデータストリームは、例えば、複数の出力レイヤセットの出力レイヤセットごとに復号パラメータセット情報を有するスケーラブルネスティング付加拡張情報を含み得る。

【0214】

一実施形態では、ビデオデータストリームは、例えば、未加工のバイトシーケンスペイロードを含み得る。未加工のバイトシーケンスペイロードは、例えば、複数の出力レイヤセットの出力レイヤセットごとに復号パラメータセット情報を含み得る。

【0215】

一実施形態によれば、ビデオデータストリームは、例えば複数の出力レイヤセットの出力レイヤセットごとに復号パラメータセット情報を有し得る、例えばスケーラブルネスティング付加拡張情報を有し得る、例えばスケーラブルネスティング付加拡張メッセージを含み得る。

【0216】

一実施形態では、ビデオデータストリームは、例えば、１ビット以上を有するネスティングタイプフラグ（ｎｅｓｔｉｎｇ＿ｔｙｐｅ）を含み得る。

【0217】

一実施形態によれば、ネスティングタイプフラグ（ｎｅｓｔｉｎｇ＿ｔｙｐｅ）が第一値を示す場合、これは、スケーラブルネスティング付加拡張メッセージが例えば復号パラメータセット情報を有する１つ以上の復号パラメータセットを含み得ること、及びそれ以上付加拡張メッセージがスケーラブルネスティング付加拡張メッセージ内にネストされないことを示す。

【0218】

一実施形態では、ネスティングタイプフラグ（ｎｅｓｔｉｎｇ＿ｔｙｐｅ）が第二値を示す場合、これは、スケーラブルネスティング付加拡張メッセージ内にネストされる１つ以上の付加拡張メッセージが出力レイヤセットに適用されることを示す。

【0219】

一実施形態によれば、ネスティングタイプフラグ（ｎｅｓｔｉｎｇ＿ｔｙｐｅ）が第三値を示す場合、これは、スケーラブルネスティング付加拡張メッセージ内にネストされる１つ以上の付加拡張メッセージが１サブセットの出力レイヤセットに適用されることを示し、例えば、１つ以上のサブピクチャはサブセットに割り当てられる。

【0220】

一実施形態では、ネスティングタイプフラグ（ｎｅｓｔｉｎｇ＿ｔｙｐｅ）が第四値を示す場合、これは、スケーラブルネスティング付加拡張メッセージが例えば、復号パラメータセット情報を有する１つ以上の復号パラメータセットを含み得ることを示す。

【0221】

さらに、一実施形態によれば、ビデオデータストリームがその中に符号化されたビデオを有するように、ビデオをビデオデータストリーム中に符号化するためのビデオエンコーダが提供される。ビデオエンコーダは、ビデオデータストリームが、複数の出力レイヤセットの出力レイヤセットごとに復号パラメータセット情報を有するスケーラブルネスティング付加拡張情報を含むようにビデオデータストリームを生成する。

【0222】

一実施形態では、ビデオエンコーダは、ビデオデータストリームが例えば未加工のバイトシーケンスペイロードを含み得るように、例えばビデオデータストリームを生成するように構成され得る。ビデオエンコーダは、未加工のバイトシーケンスペイロードが例えば複数の出力レイヤセットの出力レイヤセットごとに復号パラメータセット情報を含み得るように、例えばビデオデータストリームを生成するように構成され得る。

【0223】

一実施形態によれば、ビデオエンコーダは、ビデオデータストリームが例えば複数の出力レイヤセットの出力レイヤセットごとに復号パラメータセット情報を有し得る、例えばスケーラブルネスティング付加拡張情報を有し得る、例えばスケーラブルネスティング付加拡張メッセージを含み得るように、例えばビデオデータストリームを生成するように構成され得る。

【0224】

一実施形態では、ビデオエンコーダは、ビデオデータストリームが例えば１ビット以上を有するネスティングタイプフラグ（ｎｅｓｔｉｎｇ＿ｔｙｐｅ）を含み得るように、例えばビデオデータストリームを生成するように構成され得る。

【0225】

一実施形態によれば、ビデオエンコーダは、例えば、ネスティングタイプフラグ（ｎｅｓｔｉｎｇ＿ｔｙｐｅ）が第一値を示す場合、これが、スケーラブルネスティング付加拡張メッセージが例えば復号パラメータセット情報を有する１つ以上の復号パラメータセットを含み得ること、及びそれ以上付加拡張メッセージがスケーラブルネスティング付加拡張メッセージ内にネストされないことを示すようにビデオデータストリームを生成するように構成され得る。

【0226】

一実施形態では、ビデオエンコーダは、例えば、ネスティングタイプフラグ（ｎｅｓｔｉｎｇ＿ｔｙｐｅ）が第二値を示す場合、これが、スケーラブルネスティング付加拡張メッセージ内にネストされる１つ以上の付加拡張メッセージが出力レイヤセットに適用されることを示すようにビデオデータストリームを生成するように構成され得る。

【0227】

一実施形態によれば、ビデオエンコーダは、例えば、ネスティングタイプフラグ（ｎｅｓｔｉｎｇ＿ｔｙｐｅ）が第三値を示す場合、これが、スケーラブルネスティング付加拡張メッセージ内にネストされる１つ以上の付加拡張メッセージが１サブセットの出力レイヤセットに適用されることを示すようにビデオデータストリームを生成するように構成され得、例えば、１つ以上のサブピクチャはサブセットに割り当てられる。

【0228】

一実施形態では、ビデオエンコーダは、例えば、ネスティングタイプフラグ（ｎｅｓｔｉｎｇ＿ｔｙｐｅ）が第四値を示す場合、これが、スケーラブルネスティング付加拡張メッセージが例えば復号パラメータセット情報を有する１つ以上の復号パラメータセットを含み得ることを示すようにビデオデータストリームを生成するように構成され得る。

【0229】

さらに、一実施形態によれば、その中に符号化されたビデオを有するビデオデータストリームが提供される。ビデオデータストリームは、複数の操作点のインジケーションを含む。さらに、ビデオデータストリームは、複数のプロファイルティアレベルの１つ以上のプロファイルティアレベルを操作点に割り当てる、複数の操作点の操作点ごとの第一マッピングを含む。さらに、ビデオデータストリームは、複数の第二マッピングを含み、複数のマッピングのそれぞれは、複数の操作点のうちの１つを複数の出力レベルセットのうちの１つの出力レベルセットに割り当てる。

【0230】

一実施形態では、ビデオデータストリームは、例えば、復号パラメータセットを含み得る。復号パラメータセットは、例えば、複数の操作点のインジケーションを含み得る。

【0231】

一実施形態によれば、ビデオデータストリームは、例えば、ビデオデータストリームのレイヤ数を示すレイヤ数インジケーションを含み得る、及び／またはビデオデータストリームは、例えば、ビデオデータストリームのサブレイヤ数を示すサブレイヤ数インジケーションを含み得る。

【0232】

一実施形態では、ビデオデータストリームのレイヤ数は、例えば、一定であり得る、及び／またはビデオデータストリームのサブレイヤ数は、例えば、一定であり得る。

【0233】

一実施形態によれば、ビデオデータストリームは、例えば、複数の出力レイヤセットの出力レイヤセットごとに復号パラメータセット情報を有するスケーラブルネスティング付加拡張情報を含み得る。

【0234】

さらに、一実施形態によれば、ビデオデータストリームがその中に符号化されたビデオを有するように、ビデオをビデオデータストリーム中に符号化するためのビデオエンコーダが提供される。ビデオエンコーダは、ビデオデータストリームが複数の操作点のインジケーションを含むようにビデオデータストリームを生成する。さらに、ビデオエンコーダは、ビデオデータストリームが、複数のプロファイルティアレベルの１つ以上のプロファイルティアレベルを操作点に割り当てる、複数の操作点の操作点ごとの第一マッピングを含むようにビデオデータストリームを生成する。さらに、ビデオエンコーダは、ビデオデータストリームが複数の第二マッピングを含むようにビデオデータストリームを生成し、複数のマッピングのそれぞれは、複数の操作点のうちの１つを複数の出力レベルセットのうちの１つの出力レベルセットに割り当てる。

【0235】

一実施形態では、ビデオエンコーダは、例えば、ビデオデータストリームが例えば復号パラメータセットを含み得るようにビデオデータストリームを生成するように構成され得る。ビデオエンコーダは、例えば、復号パラメータセットが例えば複数の操作点のインジケーションを含み得るようにビデオデータストリームを生成するように構成され得る。

【0236】

一実施形態によれば、ビデオエンコーダは、ビデオデータストリームが例えばビデオデータストリームのレイヤ数を示すレイヤ数インジケーションを含み得るように、例えばビデオデータストリームを生成するように構成され得る、及び／またはビデオエンコーダは、ビデオデータストリームが例えばビデオデータストリームのサブレイヤ数を示すサブレイヤ数インジケーションを含み得るように、例えばビデオデータストリームを生成するように構成され得る。

【0237】

一実施形態では、ビデオエンコーダは、ビデオデータストリームのレイヤ数が例えば一定であり得るように、例えばビデオデータストリームを生成するように構成され得る、及び／またはビデオエンコーダは、ビデオデータストリームのサブレイヤ数が例えば一定であり得るように、例えばビデオデータストリームを生成するように構成され得る。

【0238】

一実施形態によれば、ビデオエンコーダは、ビデオデータストリームが例えば複数の出力レイヤセットの出力レイヤセットごとに復号パラメータセット情報を有するスケーラブルネスティング付加拡張情報を含み得るように、例えばビデオデータストリームを生成するように構成され得る。

【0239】

さらに、一実施形態によれば、ビデオデータストリームを入力ビットストリームとして受信するための装置が提供され、ビデオデータストリームがその中に符号化されるビデオを有する。ビデオデータストリームは、複数の操作点のインジケーションを含む。さらに、ビデオデータストリームは、複数のプロファイルティアレベルの１つ以上のプロファイルティアレベルを操作点にマッピングする、複数の操作点の操作点ごとの第一マッピングを含む。さらに、ビデオデータストリームは、複数の第二マッピングを含み、複数のマッピングのそれぞれは、複数の操作点のうちの１つを複数の出力レベルセットのうちの１つの出力レベルセットにマッピングする。装置は、複数の出力レイヤセットのうちの１つの出力レイヤセットに応じて、また第二マッピングのうちの少なくとも１つに応じて入力ビットストリームを処理し、複数の操作点のうちの１つを１つの出力レベルセットにマッピングし、出力ビットストリームを生成する。

【0240】

一実施形態では、ビデオデータストリームは、例えば、復号パラメータセットを含み得る。復号パラメータセットは、例えば、複数の操作点のインジケーションを含み得る。装置は、復号パラメータセットを処理する。

【0241】

一実施形態によれば、ビデオデータストリームは、例えば、ビデオデータストリームのレイヤ数を示すレイヤ数インジケーションを含み得る、及び／またはビデオデータストリームは、例えば、ビデオデータストリームのサブレイヤ数を示すサブレイヤ数インジケーションを含み得る。

【0242】

一実施形態では、ビデオデータストリームのレイヤ数は、例えば、一定であり得る、及び／またはビデオデータストリームのサブレイヤ数は、例えば、一定であり得る。

【0243】

一実施形態によれば、ビデオデータストリームは、例えば、複数の出力レイヤセットの出力レイヤセットごとに復号パラメータセット情報を有するスケーラブルネスティング付加拡張情報を含み得る。装置は、例えば、スケーラブルネスティング付加拡張情報を処理するように構成され得る。

【0244】

一実施形態によれば、装置は、例えば、入力ビットストリームを復号してビデオを復号するように構成され得る。

【0245】

さらに、一実施形態によれば、ビデオをビデオデータストリーム中に符号化するための、そしてビデオを復号するためのシステムが提供される。システムは、上記のようなビデオエンコーダ、及び上記のような請求項３７１に記載の装置を含む。ビデオエンコーダは、ビデオデータストリームがその中に符号化されたビデオを有するように、ビデオをビデオデータストリーム中に符号化する。装置は、ビデオデータストリームを入力ビットストリームとして受信する。さらに、装置は、入力ビットストリームを復号して、ビデオを復号する。

【0246】

ＶＶＣドラフト仕様は、ビットストリームの制約（ＰＴＬ）を記述する復号パラメータセット（ＤＰＳ）を含む。ＲＴＳＰ／ＳＩＰ内のＳＤＰなどの能力交換及びネゴシエーションで使用されることが、または適応的ストリーミングシナリオでのストリーム選択に使用されることがサポートされる。そのため、その目的は、所与のビットストリームに必要な最大限能力を示すことであることにより、その範囲は、符号化されたビデオシーケンス（ＣＶＳ）の範囲のみを有したそれぞれの先行するコーデック世代（ＨＥＶＣ及びＡＶＣ）に定義されるすべてのパラメータセットより大きい。ここで、ＶＶＣドラフト仕様は、ＣＶＣ、すなわち、ビットストリームの連結制約を記述する。ＤＰＳは、ビットストリーム内で使用されたすべてのＰＴＬを含むいくつかのプロファイルティアレベル情報（ＰＴＬ）を主に搬送する、すなわち、このリスト内のすべてのＰＴＬは、対応するビットストリームを正常に復号するためにサポートされる必要がある。

【表3】

【0247】

問題は、ビットストリーム抽出またはプルーニングが実行されることでいくつかのレイヤが除去されるときに起こる。そのような処理後、結果として得られるビットストリームは、レイヤのフルセットをそれ以上搬送しない。例えば、３レイヤを含むバージョン（それぞれのＯＬＳ）は６レイヤビットストリームから抽出される。したがって、それらのような場合には、ＤＰＳは、プルーニング後の結果として得られるビットストリームのコンテンツのＰＴＬを正確に記述しないため、能力ネゴシエーションのその目的をそれ以上果たすことができない。

【0248】

したがって、本発明の一部として、この問題を軽減して能力ネゴシエーションにＤＰＳを使用することを可能にする方法についての３つのオプションが説明される。

【0249】

以下では、抽出プロセス中のＤＰＳリライトが説明される。

【0250】

ＤＰＳでのＰＴＬ情報は、抽出後の残りのレイヤに対応するＰＴＬ情報のみがＤＰＳ内に残るが、その他のＰＴＬ情報が除去されるという点で抽出中に調整される。

【0251】

以下では、サブビットストリーム固有ＤＰＳネスティングが説明される。

【0252】

ＯＬＳ固有ＤＰＳ ＲＢＳＴを搬送したスケーラブルネスティングＳＥＩメッセージが定義され、ビットストリーム抽出プロセスを通じた抽出により、それぞれのＤＰＳ ＲＢＳＰが抽出され、それが出力ビットストリーム内の新しいＤＰＳ中に書き込まれる。

【0253】

一実施形態では、パラメータセットを搬送する、新しいネスティングＳＥＩメッセージが使用される。

【0254】

別の実施形態では、単一のスケーラブルネスティングＳＥＩメッセージは、パラメータセット、または他のＳＥＩメッセージを搬送するために使用される。この場合、内部で何が実行されているかを示す、シンタックス要素はスケーラブルネスティングＳＥＩメッセージに追加される。

【表4】

【0255】

上記のシンタックスでは、パラメータセットが含まれる場合（ｎｅｓｔｉｎｇ＿ｔｙｐｅ ＝＝１）、他のＳＥＩがないことが想定される。別の実施形態では、パラメータセット及び他のＳＥＩは、両方とも同時にネスティングＳＥＩメッセージに含まれることができる。

【0256】

別の実施形態では、ｎｅｓｔｉｎｇ＿ｔｙｐｅは以下のいくつかの目的に使用され得る。
・ネスティングＳＥＩ内にネストされたＳＥＩメッセージはＯＬＳに適用されること、
・ネスティングＳＥＩ内にネストされたＳＥＩメッセージはＯＬＳのサブセット、例えば、ＯＬＳ内のサブピクチャに適用されること、
・ネスティングＳＥＩ内にネストされたパラメータセットがあること、
を示す。

【0257】

以下では、ＤＰＳ内の操作点が説明される。

【0258】

抽出プロセス中のＤＰＳリライト、及びサブビットストリーム固有ＤＰＳネスティングは、制約されたビットストリームなど、ある状況下で機能してもよい。例えば、抽出プロセス中のＤＰＳリライトは、ビットストリームのすべてのＶＰＳが事前に知られており、レイヤ／サブレイヤの数がＣＶＳごとに変化しない場合にのみ機能してもよい。サブビットストリーム固有ＤＰＳネスティングの場合、原理上、ＯＬＳ（例えば、それら及びＩＤの数）がＣＶＳごとに変化する可能性があるため、似たようなことが起こる。

【0259】

さらなる実施形態では、操作点が定義される。それらは、ＤＰＳ内で定義され得、それぞれに対してＰＴＬリストが提示される。操作点インデックスが入力として、ＯＬＳインデックスに加えて復号プロセスに追加されることで、適切な操作点が記述され、選択される。次に、操作点のＯＬＳへのある関連付けは、ＶＰＳにシグナリングされる。

【0260】

ＤＰＳのシンタックス要素は、サブレイヤ数がＣＶＳごとに変化する可能性があり、操作点が含まれる場合、サブレイヤ数が除去されることで、以下のように変化する。

【表5】

【0261】

さらなる実施形態では、ｎｕｍ＿ｓｕｂ＿ｌａｙｅｒｓ及びレイヤ数はビットストリーム内で一定に保たれる。そのインジケーションがビットストリームに追加され、操作点及び１つまたは複数のサブレイヤの間のマッピングが示される。

【0262】

別の実施形態では、４．２で定義されたスケーラブルネスティングＳＥＩメッセージは、操作点に適用され、ＯＬＳへのマッピングもまた、ビットストリーム内に提供される。

【0263】

以下では、Ｐａｒａｍセット内のＭａｘＳｕｂＬａｙｅｒｓが記述される。

【0264】

一実施形態によれば、その中に符号化されたビデオを有するビデオデータストリームが提供される。ビデオデータストリームは、シーケンスパラメータセット及び復号パラメータセットを含む。シーケンスパラメータセットは、シーケンスパラメータセットに格納される情報に従って、サブレイヤの最大限数、またはサブレイヤの最大限数引く定数値を示す第一インジケーション値を含む。復号パラメータセットは、復号パラメータセットに格納される情報に従って、サブレイヤの最大限数、またはサブレイヤの最大限数引く定数値を示す第二インジケーション値を含む。第一インジケーション値は第二インジケーション値以下である。

【0265】

一実施形態では、ビデオデータストリームは、例えば、シーケンスパラメータセット及び復号パラメータセットを含み得る。シーケンスパラメータセットは、例えば、シーケンスパラメータセットに格納される情報に従って、サブレイヤの最大限数、またはサブレイヤの最大限数引く定数値を示す第一インジケーション値を含み得る。復号パラメータセットは、例えば、復号パラメータセットに格納される情報に従って、サブレイヤの最大限数、またはサブレイヤの最大限数引く定数値を示す第二インジケーション値を含み得る。復号パラメータセットの第二インジケーション値は、シーケンスパラメータセットの第一インジケーション値よりも優先される上界である。

【0266】

一実施形態によれば、定数値は、例えば、１であってもよい。

【0267】

さらに、一実施形態によれば、ビデオデータストリームがその中に符号化されたビデオを有するように、ビデオをビデオデータストリーム中に符号化するためのビデオエンコーダが提供される。ビデオエンコーダは、ビデオデータストリームがシーケンスパラメータセット及び復号パラメータセットを含むようにビデオデータストリームを生成する。ビデオエンコーダは、シーケンスパラメータセットが、シーケンスパラメータセットに格納される情報に従って、サブレイヤの最大限数、またはサブレイヤの最大限数引く定数値を示す第一インジケーション値を含むようにビデオデータストリームを生成する。さらに、ビデオエンコーダは、復号パラメータセットが、復号パラメータセットに格納される情報に従って、サブレイヤの最大限数、またはサブレイヤの最大限数引く定数値を示す第二インジケーション値を含むようにビデオデータストリームを生成する。さらに、ビデオエンコーダは、第一インジケーション値が第二インジケーション値以下であるようにビデオデータストリームを生成する。

【0268】

さらに、一実施形態によれば、ビデオデータストリームがその中に符号化されたビデオを有するように、ビデオをビデオデータストリーム中に符号化するためのビデオエンコーダが提供される。ビデオエンコーダは、ビデオデータストリームがシーケンスパラメータセット及び復号パラメータセットを含むようにビデオデータストリームを生成する。さらに、ビデオエンコーダは、シーケンスパラメータセットが、シーケンスパラメータセットに格納される情報に従って、サブレイヤの最大限数、またはサブレイヤの最大限数引く定数値を示す第一インジケーション値を含むようにビデオデータストリームを生成する。さらに、ビデオエンコーダは、復号パラメータセットが、復号パラメータセットに格納される情報に従って、サブレイヤの最大限数、またはサブレイヤの最大限数引く定数値を示す第二インジケーション値を含むようにビデオデータストリームを生成する。復号パラメータセットの第二インジケーション値は、シーケンスパラメータセットの第一インジケーション値よりも優先される上界である。

【0269】

一実施形態では、定数値は、例えば、１であり得る。ビデオエンコーダは、シーケンスパラメータセットが例えば、シーケンスパラメータセットに格納される情報に従って、サブレイヤの最大限数、またはサブレイヤの最大限数引く１を示す第一インジケーション値を含み得るように、例えばビデオデータストリームを生成するように構成され得る。ビデオエンコーダは、復号パラメータセットが例えば、復号パラメータセットに格納される情報に従って、サブレイヤの最大限数、またはサブレイヤの最大限数引く１を示す第二インジケーション値を含み得るように、例えばビデオデータストリームを生成するように構成され得る。

【0270】

さらに、一実施形態によれば、ビデオデータストリームを入力ビットストリームとして受信するための装置が提供され、ビデオデータストリームがその中に符号化されるビデオを有する。ビデオデータストリームは、シーケンスパラメータセット及び復号パラメータセットを含む。シーケンスパラメータセットは、シーケンスパラメータセットに格納される情報に従って、サブレイヤの最大限数、またはサブレイヤの最大限数引く定数値を示す第一インジケーション値を含む。復号パラメータセットは、復号パラメータセットに格納される情報に従って、サブレイヤの最大限数、またはサブレイヤの最大限数引く定数値を示す第二インジケーション値を含む。第一インジケーション値が第二インジケーション値より大きい場合、装置は、出力ビットストリームが第二インジケーション値を、サブレイヤの最大限数に関する、またはサブレイヤの最大限数引く定数値に関するインジケーションとして含むように入力ビットストリームを処理して出力ビットストリームを生成する。

【0271】

一実施形態では、定数値は、例えば、１であり得る。シーケンスパラメータセットは、例えば、シーケンスパラメータセットに格納される情報に従って、サブレイヤの最大限数、またはサブレイヤの最大限数引く１を示す第一インジケーション値を含み得る。復号パラメータセットは、例えば、復号パラメータセットに格納される情報に従って、サブレイヤの最大限数、またはサブレイヤの最大限数引く１を示す第二インジケーション値を含み得る。第一インジケーション値が例えば第二インジケーション値より大きい場合、装置は、出力ビットストリームが例えば第二インジケーション値をサブレイヤの最大限数引く１に関するインジケーションとして含み得るように、例えば入力ビットストリームを処理して出力ビットストリームを生成するように構成され得る。

【0272】

サブレイヤ抽出とも称される、ビットストリームプルーニングが実行され、ある特定のＴｅｍｐｏｒａｌ ＩＤに属するＮＡＬユニットがビットストリームからドロップされる場合、通常、パラメータセットは変更されないが、ＤＰＳなどの一部の高レベルパラメータセットはリライトされ得る。

【0273】

これは、ビットストリーム内に一貫性がないことにつながり、復号プロセスが不明瞭になる、またはより複雑になる。例えば、ＤＰＳが前節で説明されるようにリライトされ、サブレイヤの実際の数が、ｄｐｓ＿ｍａｘ＿ｓｕｂｌａｙｅｒｓ＿ｍｉｎｕｓ１（ドロップされたＴｅｍｐｏｒａｌ ＩＤを除く）として示されるが、ＳＰＳでのこれらの値が変更されない（これは想定されていない）場合、ｓｐｓ＿ｍａｘ＿ｓｕｂｌａｙｅｒｓ＿ｍｉｎｕｓ１は、ＤＰＳに関するものよりも高い値を有する。デコーダは、どの値を信頼すべきかを、実はわからない。

【0274】

一実施形態では、ビットストリーム制約は、ｓｐｓ＿ｍａｘ＿ｓｕｂｌａｙｅｒｓ＿ｍｉｎｕｓ１が＜＝ｄｐｓ＿ｍａｘ＿ｓｕｂｌａｙｅｒｓ＿ｍｉｎｕｓ１である必要があることである。したがって、ある種のエラーレジリエンスは、そのような「問題」に直面した場合に構築され得る。そのような制約の場合、この条件に違反する「ビットストリーム」をパースすると、より高い値を有するＳＰＳが新しいビットストリーム（例えば、ビットストリーム終端（ＥＯＢ）のＮＡＬユニットの損失のため見いだされない）に単純に対応することが明らかであろう。これは、ビットストリームプルーニングが実行されると、ｄｐｓ＿ｍａｘ＿ｓｕｂｌａｙｅｒｓ＿ｍｉｎｕｓ１が、ｓｐｓ＿ｍａｘ＿ｓｕｂｌａｙｅｒｓ＿ｍｉｎｕｓ１も変化するまで、変化することができないことを意味する。

【0275】

別の実施形態では、制約は必要とされず、ＤＰＳシグナリングは、デコーダに送信されるビットストリームの操作点または出力レイヤセットを設定するために使用される。すなわち、ｄｐｓ＿ｍａｘ＿ｓｕｂｌａｙｅｒｓ＿ｍｉｎｕｓ１がｓｐｓ＿ｍａｘ＿ｓｕｂｌａｙｅｒｓ＿ｍｉｎｕｓ１より小さい場合、ＤＰＳでシグナリングされた値は、デコーダに送信されたビットストリームがｄｐｓ＿ｍａｘ＿ｓｕｂｌａｙｅｒｓ＿ｍｉｎｕｓ１まで有することを示すＳＰＳでのものより優先される。

【0276】

１つより多いレイヤが存在する場合、レイヤごとにサブレイヤ数が異なり得ることから、ｄｐｓ＿ｍａｘ＿ｓｕｂｌａｙｅｒｓ＿ｍｉｎｕｓ１はすべての出力レイヤに適用され、すべての非出力レイヤは、ｄｐｓ＿ｍａｘ＿ｓｕｂｌａｙｅｒｓ＿ｍｉｎｕｓ１か、それらの対応するｓｐｓ＿ｍａｘ＿ｓｕｂｌａｙｅｒｓ＿ｍｉｎｕｓ１（後者がｄｐｓ＿ｍａｘ＿ｓｕｂｌａｙｅｒｓ＿ｍｉｎｕｓ１より小さい場合）かいずれかを有する。

【0277】

いくつかの態様が装置の観点で説明されているが、これらの態様が対応する方法の説明も表すことが明らかであり、ブロックまたはデバイスは方法ステップ、または方法ステップの特徴に対応する。同様に、方法ステップの観点で説明された態様もまた、対応するブロックもしくは項目、または対応する装置の特徴の説明を表す。いくつかの、またはすべての方法ステップは、例えば、マイクロプロセッサ、プログラマブルコンピュータまたは電子回路などのハードウェア装置によって（またはそれを使用して）実行され得る。いくつかの実施形態では、最も重要な方法ステップのうちの１つ以上はそのような装置によって実行され得る。

【0278】

ある特定の実装要件に応じて、本発明の実施形態は、ハードウェアまたはソフトウェアまたは少なくとも部分的にハードウェアまたは少なくとも部分的にソフトウェアに実装され得る。この実装は、電子的に可読な制御信号を有する、フロッピーディスク、ＤＶＤ、Ｂｌｕ－Ｒａｙ、ＣＤ、ＲＯＭ、ＰＲＯＭ、ＥＰＲＯＭ、ＥＥＰＲＯＭまたはＦＬＡＳＨ（登録商標）メモリなどのデジタル記憶媒体を使用して実行され得、これらの制御信号は、その上に格納され得、プログラム可能なコンピュータシステムと協働する（または協働することができる）ことで、それぞれの方法が実行される。したがって、デジタル記憶媒体は、コンピュータ可読であり得る。

【0279】

本発明による、いくつかの実施形態は、電子的に可読な制御信号を有するデータキャリアを含み、これらの制御信号がプログラム可能なコンピュータシステムと協働することができることで、本明細書に記載の方法のうちの１つが実行される。

【0280】

概して、本発明の実施形態は、プログラムコードを有するコンピュータプログラム製品として実装され得、このプログラムコードは、コンピュータプログラム製品がコンピュータ上で実行するときに方法のうちの１つを実行するように動作可能である。プログラムコードは、例えば、機械可読キャリアに格納され得る。

【0281】

他の実施形態は、本明細書に記載の方法のうちの１つを実行し、機械可読キャリアに格納される、コンピュータプログラムを含む。

【0282】

換言すれば、本発明の方法の一実施形態は、したがって、コンピュータプログラムがコンピュータ上で実行するときに、本明細書に記載の方法のうちの１つを実行するためのプログラムコードを有するコンピュータプログラムである。

【0283】

本発明の方法のさらなる実施形態は、したがって、データキャリア（またはデジタル記憶媒体、またはコンピュータ可読媒体）であり、このデータキャリアは、その上に記録される、本明細書に記載の方法のうちの１つを実行するためのコンピュータプログラムを含む。データキャリア、デジタル記憶媒体、または記録された媒体は、通常、有形及び／または非一時的である。

【0284】

本発明の方法のさらなる実施形態は、したがって、本明細書に記載の方法のうちの１つを実行するためのコンピュータプログラムを表す、データストリームまたは信号シーケンスである。データストリームまたは信号シーケンスは、例えば、インターネットを介してなど、データ通信接続を介して転送されるように構成され得る。

【0285】

さらなる実施形態は、例えば、本明細書に記載の方法のうちの１つを実行するように構成される、または適合されるコンピュータ、またはプログラマブルロジックデバイスなどの処理手段を含む。

【0286】

さらなる実施形態は、コンピュータを含み、その上には、本明細書に記載の方法のうちの１つを実行するためのコンピュータプログラムがインストールされている。

【0287】

本発明による、さらなる実施形態は、本明細書に記載の方法のうちの１つを実行するためのコンピュータプログラムを受信器に転送する（例えば、電子的に、または光学的に）ように構成される、装置またはシステムを含む。受信器は、例えば、コンピュータ、モバイルデバイス、メモリデバイスなどであってよい。装置またはシステムは、例えば、コンピュータプログラムを受信器に転送するためのファイルサーバを含み得る。

【0288】

いくつかの実施形態では、プログラマブルロジックデバイス（例えば、フィールドプログラマブルゲートアレイ）は、本明細書に記載の方法の機能の一部またはすべてを実行するために使用され得る。いくつかの実施形態では、フィールドプログラマブルゲートアレイは、本明細書に記載の方法のうちの１つを実行するためにマイクロプロセッサと協働し得る。概して、方法は、いずれかのハードウェア装置によって好ましくは実行される。

【0289】

本明細書に記載の装置は、ハードウェア装置を使用して、またはコンピュータを使用して、またはハードウェア装置及びコンピュータの組み合わせを使用して実装され得る。

【0290】

本明細書に記載の方法は、ハードウェア装置を使用して、またはコンピュータを使用して、またはハードウェア装置及びコンピュータの組み合わせを使用して実行され得る。

【0291】

上記の実施形態は、本発明の原理の例示に過ぎない。本明細書に記載の構成及び詳細の修正形態及び変形形態が当業者には明らかであろうことが理解される。したがって、本明細書の実施形態の記述及び説明として提示された具体的な詳細によってではなく、差し迫る特許請求の範囲によってのみ限定されることが意図される。
参考文献

【0292】

ＩＳＯ／ＩＥＣ，ＩＴＵ－Ｔ．Ｈｉｇｈ ｅｆｆｉｃｉｅｎｃｙ ｖｉｄｅｏ ｃｏｄｉｎｇ．ＩＴＵ－Ｔ Ｒｅｃｏｍｍｅｎｄａｔｉｏｎ Ｈ．２６５｜ＩＳＯ／ＩＥＣ２３００８ １０（ＨＥＶＣ），ｅｄｉｔｉｏｎ１，２０１３；ｅｄｉｔｉｏｎ２，２０１４．

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【手続補正書】

【提出日】2022-08-26

【手続補正1】

【補正対象書類名】特許請求の範囲

【補正対象項目名】全文

【補正方法】変更

【補正の内容】

【特許請求の範囲】

【請求項1】

複数のアクセスユニットを、フレームレートを有する第１のアクセスユニットのサブセットと、前記フレームレートを有する第２のアクセスユニットのサブセットとを含むビデオデータストリームに符号化し、
前記第１のアクセスユニットのサブセットの各アクセスユニットが、関連するｄｅｌａｙ＿ｆｏｒ＿ｃｏｎｃａｔｅｎａｔｉｏｎ＿ｅｎｓｕｒｅｄ＿ｆｌａｇを有するように、複数のｄｅｌａｙ＿ｆｏｒ＿ｃｏｎｃａｔｅｎａｔｉｏｎ＿ｅｎｓｕｒｅｄ＿ｆｌａｇを符号化するよう構成され、
１の値を有するｄｅｌａｙ＿ｆｏｒ＿ｃｏｎｃａｔｅｎａｔｉｏｎ＿ｅｎｓｕｒｅｄ＿ｆｌａｇは、前記ｄｅｌａｙ＿ｆｏｒ＿ｃｏｎｃａｔｅｎａｔｉｏｎ＿ｅｎｓｕｒｅｄ＿ｆｌａｇが関連付けされるアクセスユニットが、スプライシングが前記フレームレートを保持し、前記第２のアクセスユニットのサブセットのアクセスが、１に等しいｃｏｎｃａｔｅｎａｔｉｏｎ＿ｆｌａｇと、ｍａｘ＿ｉｎｉｔｉａｌ＿ｒｅｍｏｖａｌ＿ｄｅｌａｙ＿ｆｏｒ＿ｃｏｎｃａｔｅｎａｔｉｏｎの値以下の選択されたｉｎｉｔＣｐｂＲｅｍｏｖａｌＤｅｌａｙとを備えるＢＰ ＳＥＩメッセージを有するとき、前記第２のアクセスユニットのサブセットのアクセスユニットとシームレスである前記ビデオビットストリームにおけるポジションにあることを示す、ビデオエンコーダ。

【請求項2】

シームレスは、１の値を有するｄｅｌａｙ＿ｆｏｒ＿ｃｏｎｃａｔｅｎａｔｉｏｎ＿ｅｎｓｕｒｅｄ＿ｆｌａｇに関連するアクセスユニットと、第２のアクセスユニットのサブセットのアクセスユニットとの間のＣＰＢ削除時間距離が、前記第１のアクセスユニットのサブセットにおける連続するアクセスユニットと同じであることを意味する、請求項１に記載のビデオエンコーダ。

【請求項3】

時間サブレイヤを指定するＢＰ ＳＥＩメッセージを前記ビデオビットストリームに符号化するよう構成され、前記複数のｄｅｌａｙ＿ｆｏｒ＿ｃｏｎｃａｔｅｎａｔｉｏｎ＿ｅｎｓｕｒｅｄ＿ｆｌａｇの符号化は、前記時間サブレイヤに関連するアクセスユニットに対してのみ実行される、請求項１に記載のビデオエンコーダ。

【請求項4】

前記第１のアクセスユニットのサブセットを指定するＢＰ ＳＥＩメッセージを前記ビデオビットストリームに符号化するよう構成され、
前記複数のｄｅｌａｙ＿ｆｏｒ＿ｃｏｎｃａｔｅｎａｔｉｏｎ＿ｅｎｓｕｒｅｄ＿ｆｌａｇの符号化は、前記第１のアクセスユニットのサブセットにおけるアクセスユニットに対してのみ実行される、請求項１に記載のビデオエンコーダ。

【請求項5】

前記第１のアクセスユニットのサブセットを指定するＢＰ ＳＥＩメッセージは、通知された除数を含み、前記第１のアクセスユニットのサブセットは、前記通知された除数によって除算されると、ゼロの剰余を有するか、又は前記通知された除数によって除算されると、ゼロの剰余を有するｄｐｂ＿ｏｕｔｐｕｔ＿ｄｅｌａｙを有する前記アクセスユニットの全てを含む、請求項４に記載のビデオエンコーダ。

【請求項6】

前記第１のアクセスユニットのサブセットを指定するＢＰ ＳＥＩメッセージは、通知された除数と通知された剰余とを含み、前記第１のアクセスユニットのサブセットは、前記通知された除数によって除算されると、前記通知された剰余に等しい剰余を有するｃｐｂ＿ｒｅｍｏｖａｌ＿ｄｅｌａｙ＿ｍｉｎｕｓ１を有するか、又は前記除数によって除算されると、前記通知された剰余に等しい剰余を有するｄｐｂ＿ｏｕｔｐｕｔ＿ｄｅｌａｙを有する前記アクセスユニットの全てを含む、請求項４に記載のビデオエンコーダ。

【請求項7】

ビデオデータストリームから、フレームレートを有する第１のアクセスユニットのサブセットと、前記フレームレートを有する第２のアクセスユニットのサブセットとを含む複数のアクセスユニットを復号化し、
前記ビデオデータストリームから、前記第１のアクセスユニットのサブセットの各アクセスユニットが、関連するｄｅｌａｙ＿ｆｏｒ＿ｃｏｎｃａｔｅｎａｔｉｏｎ＿ｅｎｓｕｒｅｄ＿ｆｌａｇを有するように、複数のｄｅｌａｙ＿ｆｏｒ＿ｃｏｎｃａｔｅｎａｔｉｏｎ＿ｅｎｓｕｒｅｄ＿ｆｌａｇを復号化するよう構成され、
１の値を有するｄｅｌａｙ＿ｆｏｒ＿ｃｏｎｃａｔｅｎａｔｉｏｎ＿ｅｎｓｕｒｅｄ＿ｆｌａｇは、前記ｄｅｌａｙ＿ｆｏｒ＿ｃｏｎｃａｔｅｎａｔｉｏｎ＿ｅｎｓｕｒｅｄ＿ｆｌａｇが関連付けされるアクセスユニットが、スプライシングが前記フレームレートを保持し、前記第２のアクセスユニットのサブセットのアクセスが、１に等しいｃｏｎｃａｔｅｎａｔｉｏｎ＿ｆｌａｇと、ｍａｘ＿ｉｎｉｔｉａｌ＿ｒｅｍｏｖａｌ＿ｄｅｌａｙ＿ｆｏｒ＿ｃｏｎｃａｔｅｎａｔｉｏｎの値以下の選択されたｉｎｉｔＣｐｂＲｅｍｏｖａｌＤｅｌａｙとを備えるＢＰ ＳＥＩメッセージを有するとき、前記第２のアクセスユニットのサブセットのアクセスユニットとシームレスである前記ビデオビットストリームにおけるポジションにあることを示す、ビデオデコーダ。

【請求項8】

シームレスは、１の値を有するｄｅｌａｙ＿ｆｏｒ＿ｃｏｎｃａｔｅｎａｔｉｏｎ＿ｅｎｓｕｒｅｄ＿ｆｌａｇに関連するアクセスユニットと、第２のアクセスユニットのサブセットのアクセスユニットとの間のＣＰＢ削除時間距離が、前記第１のアクセスユニットのサブセットにおける連続するアクセスユニットと同じであることを意味する、請求項７に記載のビデオデコーダ。

【請求項9】

前記ビデオビットストリームから時間サブレイヤを指定するＢＰ ＳＥＩメッセージを復号化するよう構成され、前記複数のｄｅｌａｙ＿ｆｏｒ＿ｃｏｎｃａｔｅｎａｔｉｏｎ＿ｅｎｓｕｒｅｄ＿ｆｌａｇの符号化は、前記時間サブレイヤに関連するアクセスユニットに対してのみ実行される、請求項７に記載のビデオデコーダ。

【請求項10】

前記ビデオビットストリームから前記第１のアクセスユニットのサブセットを指定するＢＰ ＳＥＩメッセージを復号化するよう構成され、
前記複数のｄｅｌａｙ＿ｆｏｒ＿ｃｏｎｃａｔｅｎａｔｉｏｎ＿ｅｎｓｕｒｅｄ＿ｆｌａｇの符号化は、前記第１のアクセスユニットのサブセットにおけるアクセスユニットに対してのみ実行される、請求項７に記載のビデオデコーダ。

【請求項11】

前記第１のアクセスユニットのサブセットを指定するＢＰ ＳＥＩメッセージは、通知された除数を含み、前記第１のアクセスユニットのサブセットは、前記通知された除数によって除算されると、ゼロの剰余を有するか、又は前記通知された除数によって除算されると、ゼロの剰余を有するｄｐｂ＿ｏｕｔｐｕｔ＿ｄｅｌａｙを有する前記アクセスユニットの全てを含む、請求項１０に記載のビデオデコーダ。

【請求項12】

前記第１のアクセスユニットのサブセットを指定するＢＰ ＳＥＩメッセージは、通知された除数と通知された剰余とを含み、前記第１のアクセスユニットのサブセットは、前記通知された除数によって除算されると、前記通知された剰余に等しい剰余を有するｃｐｂ＿ｒｅｍｏｖａｌ＿ｄｅｌａｙ＿ｍｉｎｕｓ１を有するか、又は前記除数によって除算されると、前記通知された剰余に等しい剰余を有するｄｐｂ＿ｏｕｔｐｕｔ＿ｄｅｌａｙを有する前記アクセスユニットの全てを含む、請求項１０に記載のビデオデコーダ。

【請求項13】

ビデオデータストリームから、フレームレートを有する第１のアクセスユニットのサブセットと、前記フレームレートを有する第２のアクセスユニットのサブセットとを含む複数のアクセスユニットを復号化することと、
前記ビデオデータストリームから、前記第１のアクセスユニットのサブセットの各アクセスユニットが、関連するｄｅｌａｙ＿ｆｏｒ＿ｃｏｎｃａｔｅｎａｔｉｏｎ＿ｅｎｓｕｒｅｄ＿ｆｌａｇを有するように、複数のｄｅｌａｙ＿ｆｏｒ＿ｃｏｎｃａｔｅｎａｔｉｏｎ＿ｅｎｓｕｒｅｄ＿ｆｌａｇを復号化することと、
を有し、
１の値を有するｄｅｌａｙ＿ｆｏｒ＿ｃｏｎｃａｔｅｎａｔｉｏｎ＿ｅｎｓｕｒｅｄ＿ｆｌａｇは、前記ｄｅｌａｙ＿ｆｏｒ＿ｃｏｎｃａｔｅｎａｔｉｏｎ＿ｅｎｓｕｒｅｄ＿ｆｌａｇが関連付けされるアクセスユニットが、スプライシングが前記フレームレートを保持し、前記第２のアクセスユニットのサブセットのアクセスが、１に等しいｃｏｎｃａｔｅｎａｔｉｏｎ＿ｆｌａｇと、ｍａｘ＿ｉｎｉｔｉａｌ＿ｒｅｍｏｖａｌ＿ｄｅｌａｙ＿ｆｏｒ＿ｃｏｎｃａｔｅｎａｔｉｏｎの値以下の選択されたｉｎｉｔＣｐｂＲｅｍｏｖａｌＤｅｌａｙとを備えるＢＰ ＳＥＩメッセージを有するとき、前記第２のアクセスユニットのサブセットのアクセスユニットとシームレスである前記ビデオビットストリームにおけるポジションにあることを示す、ビデオ復号化方法。

【請求項14】

シームレスは、１の値を有するｄｅｌａｙ＿ｆｏｒ＿ｃｏｎｃａｔｅｎａｔｉｏｎ＿ｅｎｓｕｒｅｄ＿ｆｌａｇに関連するアクセスユニットと、第２のアクセスユニットのサブセットのアクセスユニットとの間のＣＰＢ削除時間距離が、前記第１のアクセスユニットのサブセットにおける連続するアクセスユニットと同じであることを意味する、請求項１３に記載のビデオ復号化方法。

【請求項15】

前記ビデオビットストリームから時間サブレイヤを指定するＢＰ ＳＥＩメッセージを復号化することを更に有し、前記複数のｄｅｌａｙ＿ｆｏｒ＿ｃｏｎｃａｔｅｎａｔｉｏｎ＿ｅｎｓｕｒｅｄ＿ｆｌａｇの符号化は、前記時間サブレイヤに関連するアクセスユニットに対してのみ実行される、請求項１３に記載のビデオ復号化方法。

【請求項16】

前記ビデオビットストリームから前記第１のアクセスユニットのサブセットを指定するＢＰ ＳＥＩメッセージを復号化することを更に有し、
前記複数のｄｅｌａｙ＿ｆｏｒ＿ｃｏｎｃａｔｅｎａｔｉｏｎ＿ｅｎｓｕｒｅｄ＿ｆｌａｇの符号化は、前記第１のアクセスユニットのサブセットにおけるアクセスユニットに対してのみ実行される、請求項１３に記載のビデオ復号化方法。

【請求項17】

前記第１のアクセスユニットのサブセットを指定するＢＰ ＳＥＩメッセージは、通知された除数を含み、前記第１のアクセスユニットのサブセットは、前記通知された除数によって除算されると、ゼロの剰余を有するか、又は前記通知された除数によって除算されると、ゼロの剰余を有するｄｐｂ＿ｏｕｔｐｕｔ＿ｄｅｌａｙを有する前記アクセスユニットの全てを含む、請求項１６に記載のビデオ復号化方法。

【請求項18】

前記第１のアクセスユニットのサブセットを指定するＢＰ ＳＥＩメッセージは、通知された除数と通知された剰余とを含み、前記第１のアクセスユニットのサブセットは、前記通知された除数によって除算されると、前記通知された剰余に等しい剰余を有するｃｐｂ＿ｒｅｍｏｖａｌ＿ｄｅｌａｙ＿ｍｉｎｕｓ１を有するか、又は前記除数によって除算されると、前記通知された剰余に等しい剰余を有するｄｐｂ＿ｏｕｔｐｕｔ＿ｄｅｌａｙを有する前記アクセスユニットの全てを含む、請求項１６に記載のビデオ復号化方法。

【請求項19】

複数のアクセスユニットを、フレームレートを有する第１のアクセスユニットのサブセットと、前記フレームレートを有する第２のアクセスユニットのサブセットとを含むビデオデータストリームに符号化することと、
前記第１のアクセスユニットのサブセットの各アクセスユニットが、関連するｄｅｌａｙ＿ｆｏｒ＿ｃｏｎｃａｔｅｎａｔｉｏｎ＿ｅｎｓｕｒｅｄ＿ｆｌａｇを有するように、複数のｄｅｌａｙ＿ｆｏｒ＿ｃｏｎｃａｔｅｎａｔｉｏｎ＿ｅｎｓｕｒｅｄ＿ｆｌａｇを符号化することと、
を有し、
１の値を有するｄｅｌａｙ＿ｆｏｒ＿ｃｏｎｃａｔｅｎａｔｉｏｎ＿ｅｎｓｕｒｅｄ＿ｆｌａｇは、前記ｄｅｌａｙ＿ｆｏｒ＿ｃｏｎｃａｔｅｎａｔｉｏｎ＿ｅｎｓｕｒｅｄ＿ｆｌａｇが関連付けされるアクセスユニットが、スプライシングが前記フレームレートを保持し、前記第２のアクセスユニットのサブセットのアクセスが、１に等しいｃｏｎｃａｔｅｎａｔｉｏｎ＿ｆｌａｇと、ｍａｘ＿ｉｎｉｔｉａｌ＿ｒｅｍｏｖａｌ＿ｄｅｌａｙ＿ｆｏｒ＿ｃｏｎｃａｔｅｎａｔｉｏｎの値以下の選択されたｉｎｉｔＣｐｂＲｅｍｏｖａｌＤｅｌａｙとを備えるＢＰ ＳＥＩメッセージを有するとき、前記第２のアクセスユニットのサブセットのアクセスユニットとシームレスである前記ビデオビットストリームにおけるポジションにあることを示す、ビデオ符号化方法。

【国際調査報告】