IP Force 特許公報掲載プロジェクト 2022.1.31 β版

ホーム > 特許ランキング > フラウンホッファー－ゲゼルシャフト ツァ フェルダールング デァ アンゲヴァンテン フォアシュンク エー．ファオ

このエントリーをはてなブックマークに追加

知財求人 - 知財ポータルサイト「IP Force」

▶ フラウンホッファー−ゲゼルシャフト　ツァ　フェルダールング　デァ　アンゲヴァンテン　フォアシュンク　エー．ファオの特許一覧

特表2022-549452漸進的デコーダリフレッシュ符号化及びスケーラブル符号化のためのエンコーダ、デコーダ及びデータストリーム
<>
  • 特表-漸進的デコーダリフレッシュ符号化及びスケーラブル符号化のためのエンコーダ、デコーダ及びデータストリーム 図1
  • 特表-漸進的デコーダリフレッシュ符号化及びスケーラブル符号化のためのエンコーダ、デコーダ及びデータストリーム 図2
  • 特表-漸進的デコーダリフレッシュ符号化及びスケーラブル符号化のためのエンコーダ、デコーダ及びデータストリーム 図3
  • 特表-漸進的デコーダリフレッシュ符号化及びスケーラブル符号化のためのエンコーダ、デコーダ及びデータストリーム 図4
  • 特表-漸進的デコーダリフレッシュ符号化及びスケーラブル符号化のためのエンコーダ、デコーダ及びデータストリーム 図5
  • 特表-漸進的デコーダリフレッシュ符号化及びスケーラブル符号化のためのエンコーダ、デコーダ及びデータストリーム 図6
  • 特表-漸進的デコーダリフレッシュ符号化及びスケーラブル符号化のためのエンコーダ、デコーダ及びデータストリーム 図7
< >
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】公表特許公報(A)
(11)【公表番号】
(43)【公表日】2022-11-25
(54)【発明の名称】漸進的デコーダリフレッシュ符号化及びスケーラブル符号化のためのエンコーダ、デコーダ及びデータストリーム
(51)【国際特許分類】
   H04N 19/70 20140101AFI20221117BHJP
   H04N 19/31 20140101ALI20221117BHJP
【ＦＩ】
H04N19/70
H04N19/31
【審査請求】有
【予備審査請求】未請求
(21)【出願番号】P 2022518777
(86)(22)【出願日】2020-09-23
(85)【翻訳文提出日】2022-05-20
(86)【国際出願番号】 EP2020076616
(87)【国際公開番号】W WO2021058596
(87)【国際公開日】2021-04-01
(31)【優先権主張番号】19199348.4
(32)【優先日】2019-09-24
(33)【優先権主張国・地域又は機関】EP
(81)【指定国・地域】
【公序良俗違反の表示】
（特許庁注：以下のものは登録商標）
１．Ｂｌｕ－ｒａｙ
(71)【出願人】
【識別番号】591037214
【氏名又は名称】フラウンホッファー－ゲゼルシャフト ツァ フェルダールング デァ アンゲヴァンテン フォアシュンク エー．ファオ
(74)【代理人】
【識別番号】110002952
【氏名又は名称】弁理士法人鷲田国際特許事務所
(72)【発明者】
【氏名】サンチェス デ ラ フエンテ ヤゴ
(72)【発明者】
【氏名】ズーリング カルステン
(72)【発明者】
【氏名】ヘルゲ コーネリアス
(72)【発明者】
【氏名】ツェル トーマス
(72)【発明者】
【氏名】スクピン ロベルト
(72)【発明者】
【氏名】ウィーガンド トーマス
【テーマコード（参考）】
5C159
【Ｆターム（参考）】
5C159MA04
5C159MA05
5C159MA17
5C159MA31
5C159MA33
5C159NN11
5C159NN21
5C159RC12
5C159TA23
5C159TB06
5C159TC44
5C159UA02
(57)【要約】
本発明は、ピクチャと、特にピクチャの連続的なシーケンスを符号化するための方法、エンコーダ、デコーダ及びデータストリームに関する。いくつかの実施例は、いわゆる、ピクチャを符号化する漸進的デコーダリフレッシュ（ＧＤＲ）符号化方式を利用しうる。いくつかの実施例は、スケーラブル符号化及び漸進的デコーダリフレッシュの改良を提案しうる。
【特許請求の範囲】
【請求項1】
ビデオデータストリームであって、
少なくとも１つの漸進的デコーダリフレッシュ（ＧＤＲ）符号化ピクチャ（１０３）と、リフレッシュ期間（ＲＰ）における１つ以上の以降のピクチャ（１０１２，・・・，１０１ｎ）とを含むピクチャ（１０１１，１０１２，・・・，１０１ｎ）のシーケンス（１００）と、
ピクチャエリア（１０１）を第１のサブエリア（１０１ｒ）及び第２のサブエリア（１０１ｕ）に細分する複数のピクチャ構成を規定するパラメータセットと、
を有し、
そのうちの１つは、１つ以上のリフレッシュされたピクチャ領域（１０２ｒ）を含むリフレッシュサブエリア（１０１ｒ）に対応し、
他の１つは、１つ以上のまだリフレッシュされていないピクチャ領域（１０２ｕ）を含む未リフレッシュサブエリア（１０１ｕ）に対応し、
前記ビデオデータストリームは、前記リフレッシュ期間（ＲＰ）内の各ピクチャ（１０１１，１０１２，・・・，１０１ｎ）に対して、前記複数のピクチャ構成から対応する１つのピクチャ構成を識別するピクチャ構成識別子を有する、ビデオデータストリーム。
【請求項2】
前記ピクチャ（１０１１，１０１２，・・・，１０１ｎ）のシーケンス（１００）は、
イントラ予測が前記第１のサブエリア（１０１ｒ）と前記第２のサブエリア（１０１ｕ）との間の境界を横切らず、及び／又は、
前記リフレッシュサブエリア（１０１ｒ）の時間予測が前記未リフレッシュサブエリア（１０１ｕ）を参照せず、及び／又は、
コンテクストモデル派生が前記第１のサブエリア（１０１ｒ）と前記第２のサブエリア（１０１ｕ）との間の境界を横切らない、
ように符号化される、請求項１に記載のビデオデータストリーム。
【請求項3】
前記対応する１つのピクチャ構成は、前記ピクチャのシーケンス（１００）の現在符号されるピクチャ（１０１１，１０１２，・・・，１０１ｎ）に含まれる前記リフレッシュサブエリア（１０１ｒ）と前記未リフレッシュサブエリア（１０１ｕ）とを示す、請求項１又は２に記載のビデオデータストリーム。
【請求項4】
前記複数のピクチャ構成のうちの各ピクチャ構成は、何れのピクチャ領域（１０２）がリフレッシュピクチャ領域（１０２ｒ）であり、何れのピクチャ領域（１０２）が未リフレッシュピクチャ領域（１０２ｕ）であるかを通知するための領域インデックスのセットを有する、請求項１から３の何れか一項に記載のビデオデータストリーム。
【請求項5】
前記ピクチャのシーケンス（１００）に含まれる前記ピクチャ（１０１１，１０１２，・・・，１０１ｎ）は、１つ以上のタイル（１０２）に細分され、前記複数のピクチャ構成のうちの各ピクチャ構成は、何れのピクチャタイル（１０２）がリフレッシュピクチャタイル（１０２ｒ）であり、何れのピクチャタイル（１０２）が未リフレッシュピクチャタイル（１０２ｕ）であるかを通知するためのタイルインデックスのセットを有する、請求項１から４の何れか一項に記載のビデオデータストリーム。
【請求項6】
前記ピクチャのシーケンス（１００）に含まれる前記ピクチャ（１０１１，１０１２，・・・，１０１ｎ）は、ピクチャタイルロー（１０２）に細分され、前記複数のピクチャ構成のうちの各ピクチャ構成は、何れのピクチャタイルロー（１０２）がリフレッシュピクチャタイルロー（１０２ｒ）であり、及び／又は、何れのピクチャタイルロー（１０２）が未リフレッシュピクチャタイルロー（１０２ｕ）であるかを通知するための少なくとも１つのローインデックスを有する、請求項１から５の何れか一項に記載のビデオデータストリーム。
【請求項7】
前記ピクチャのシーケンス（１００）に含まれる前記ピクチャ（１０１１，１０１２，・・・，１０１ｎ）は、ピクチャタイルカラム（１０２）に細分され、前記複数のピクチャ構成のうちの各ピクチャ構成は、何れのピクチャタイルカラム（１０２）がリフレッシュピクチャタイルカラム（１０２ｒ）であり、及び／又は、何れのピクチャタイルカラム（１０２）が未リフレッシュピクチャタイカラム（１０２ｕ）であるかを通知するための少なくとも１つのカラムインデックスを有する、請求項１から６の何れか一項に記載のビデオデータストリーム。
【請求項8】
前記ピクチャのシーケンス（１００）に含まれる前記ピクチャ（１０１１，１０１２，・・・，１０１ｎ）は、符号化ブロックのロー（１０２）に細分され、前記複数のピクチャ構成のうちの各ピクチャ構成は、何れの符号化ブロックのロー（１０２）が符号化ブロックのリフレッシュロー（１０２ｒ）であり、及び／又は、何れの符号化ブロックのロー（１０２）が符号化ブロックの未リフレッシュロー（１０２ｕ）であるかを通知するための少なくとも１つのロー符号化ブロックインデックスを有する、請求項１から７の何れか一項に記載のビデオデータストリーム。
【請求項9】
前記ピクチャのシーケンス（１００）に含まれる前記ピクチャ（１０１１，１０１２，・・・，１０１ｎ）は、符号化ブロックのカラム（１０２）に細分され、前記複数のピクチャ構成のうちの各ピクチャ構成は、何れの符号化ブロックのカラム（１０２）が符号化ブロックのリフレッシュカラム（１０２ｒ）であり、及び／又は、何れの符号化ブロックのカラム（１０２）が符号化ブロックの未リフレッシュカラム（１０２ｕ）であるかを通知するための少なくとも１つのカラム符号化ブロックインデックスを有する、請求項１から８の何れか一項に記載のビデオデータストリーム。
【請求項10】
前記ピクチャのシーケンス（１００）に含まれる前記ピクチャ（１０１１，１０１２，・・・，１０１ｎ）は、符号化ブロックの対角要素（１０２）に細分され、前記複数のピクチャ構成のうちの各ピクチャ構成は、何れの符号化ブロックの対角要素（１０２）が符号化ブロックのリフレッシュ対角要素（１０２ｒ）であり、及び／又は、何れの符号化ブロックの対角要素（１０２）が符号化ブロックの未リフレッシュ対角要素（１０２ｕ）であるかを通知するための少なくとも１つの対角要素符号化ブロックインデックスを有する、請求項１から９の何れか一項に記載のビデオデータストリーム。
【請求項11】
前記ピクチャのシーケンス（１００）に含まれる前記ピクチャ（１０１１，１０１２，・・・，１０１ｎ）は、サンプルのロー（１０２）に細分され、前記複数のピクチャ構成のうちの各ピクチャ構成は、何れのサンプルのロー（１０２）がサンプルのリフレッシュロー（１０２ｒ）であり、及び／又は、何れのサンプルのロー（１０２）がサンプルの未リフレッシュロー（１０２ｕ）であるかを通知するための少なくとも１つのサンプルローインデックスを有する、請求項１から１０の何れか一項に記載のビデオデータストリーム。
【請求項12】
前記ピクチャのシーケンス（１００）に含まれる前記ピクチャ（１０１１，１０１２，・・・，１０１ｎ）は、サンプルのカラム（１０２）に細分され、前記複数のピクチャ構成のうちの各ピクチャ構成は、何れのサンプルのカラム（１０２）がサンプルのリフレッシュカラム（１０２ｒ）であり、及び／又は、何れのサンプルのカラム（１０２）がサンプルの未リフレッシュカラム（１０２ｕ）であるかを通知するための少なくとも１つのサンプルカラムインデックスを有する、請求項１から１１の何れか一項に記載のビデオデータストリーム。
【請求項13】
前記対応する１つのピクチャ構成は、前記ビデオデータストリームのスライスヘッダ及び／又はアクセスユニットデリミッタにおいて通知される、請求項１から１２の何れか一項に記載のビデオデータストリーム。
【請求項14】
少なくとも１つの漸進的デコーダリフレッシュ（ＧＤＲ）符号化ピクチャ（１０３）と、リフレッシュ期間（ＲＰ）における１つ以上の以降のピクチャ（１０１２，・・・，１０１ｎ）とを含むピクチャ（１０１１，１０１２，・・・，１０１ｎ）のシーケンス（１００）から少なくとも１つのピクチャをデータストリームから復号化するデコーダであって、
前記デコーダは、前記データストリームから、ピクチャエリア（１０１）を第１のサブエリア（１０１ｒ）及び第２のサブエリア（１０１ｕ）に細分する複数のピクチャ構成を規定するパラメータセットを読むよう構成され、
そのうちの１つは、１つ以上のリフレッシュされたピクチャ領域（１０２ｒ）を含むリフレッシュサブエリア（１０１ｒ）に対応し、
他の１つは、１つ以上のまだリフレッシュされていないピクチャ領域（１０２ｕ）を含む未リフレッシュサブエリア（１０１ｕ）に対応し、
前記デコーダは更に、前記データストリームから、前記リフレッシュ期間（ＲＰ）内の各ピクチャ（１０１１，１０１２，・・・，１０１ｎ）に対して、前記少なくとも１つのピクチャ（１０１１，１０１２，・・・，１０１ｎ）を復号化するための前記複数のピクチャ構成から対応する１つのピクチャ構成を識別するピクチャ構成識別子を読むよう構成される、デコーダ。
【請求項15】
少なくとも１つの漸進的デコーダリフレッシュ（ＧＤＲ）符号化ピクチャ（１０３）と、リフレッシュ期間（ＲＰ）における１つ以上の以降のピクチャ（１０１２，・・・，１０１ｎ）とを含むピクチャ（１０１１，１０１２，・・・，１０１ｎ）のシーケンス（１００）から少なくとも１つのピクチャをデータストリームに符号化するエンコーダであって、
前記エンコーダは、前記データストリームに、ピクチャエリア（１０１）を第１のサブエリア（１０１ｒ）及び第２のサブエリア（１０１ｕ）に細分する複数のピクチャ構成を規定するパラメータセットを書き込むよう構成され、
そのうちの１つは、１つ以上のリフレッシュされたピクチャ領域（１０２ｒ）を含むリフレッシュサブエリア（１０１ｒ）に対応し、
他の１つは、１つ以上のまだリフレッシュされていないピクチャ領域（１０２ｕ）を含む未リフレッシュサブエリア（１０１ｕ）に対応し、
前記エンコーダは更に、前記データストリームに、前記リフレッシュ期間（ＲＰ）内の各ピクチャ（１０１１，１０１２，・・・，１０１ｎ）に対して、前記複数のピクチャ構成から対応する１つのピクチャ構成を識別するピクチャ構成識別子を設定するよう構成される、エンコーダ。
【請求項16】
少なくとも１つの漸進的デコーダリフレッシュ（ＧＤＲ）符号化ピクチャ（１０３）と、リフレッシュ期間（ＲＰ）における１つ以上の以降のピクチャ（１０１２，・・・，１０１ｎ）とを含むピクチャ（１０１１，１０１２，・・・，１０１ｎ）のシーケンス（１００）から少なくとも１つのピクチャをデータストリームから復号化する方法であって、
前記データストリームから、ピクチャエリア（１０１）を第１のサブエリア（１０１ｒ）及び第２のサブエリア（１０１ｕ）に細分する複数のピクチャ構成を規定するパラメータセットを読むステップであって、
そのうちの１つは、１つ以上のリフレッシュされたピクチャ領域（１０２ｒ）を含むリフレッシュサブエリア（１０１ｒ）に対応し、
他の１つは、１つ以上のまだリフレッシュされていないピクチャ領域（１０２ｕ）を含む未リフレッシュサブエリア（１０１ｕ）に対応する、読むステップと、
前記データストリームから、前記リフレッシュ期間（ＲＰ）内の各ピクチャ（１０１１，１０１２，・・・，１０１ｎ）に対して、前記少なくとも１つのピクチャ（１０１１，１０１２，・・・，１０１ｎ）を復号化するための前記複数のピクチャ構成から対応する１つのピクチャ構成を識別するピクチャ構成識別子を読むステップと、
を有する方法。
【請求項17】
少なくとも１つの漸進的デコーダリフレッシュ（ＧＤＲ）符号化ピクチャ（１０３）と、リフレッシュ期間（ＲＰ）における１つ以上の以降のピクチャ（１０１２，・・・，１０１ｎ）とを含むピクチャ（１０１１，１０１２，・・・，１０１ｎ）のシーケンス（１００）から少なくとも１つのピクチャをデータストリームに符号化する方法であって、
前記エンコーダは、前記データストリームに、ピクチャエリア（１０１）を第１のサブエリア（１０１ｒ）及び第２のサブエリア（１０１ｕ）に細分する複数のピクチャ構成を規定するパラメータセットを書き込むステップであって、
そのうちの１つは、１つ以上のリフレッシュされたピクチャ領域（１０２ｒ）を含むリフレッシュサブエリア（１０１ｒ）に対応し、
他の１つは、１つ以上のまだリフレッシュされていないピクチャ領域（１０２ｕ）を含む未リフレッシュサブエリア（１０１ｕ）に対応する、書き込むステップと、
前記データストリームに、前記リフレッシュ期間（ＲＰ）内の各ピクチャ（１０１１，１０１２，・・・，１０１ｎ）に対して、前記複数のピクチャ構成から対応する１つのピクチャ構成を識別するピクチャ構成識別子を設定するステップと、
を有する方法。
【請求項18】
コンピュータ又は信号プロセッサ上で実行されると、請求項１６又は１７に記載の方法を実現するコンピュータプログラム。
【請求項19】
ビデオデータストリームであって、
少なくとも１つの漸進的デコーダリフレッシュ（ＧＤＲ）符号化ピクチャ（１０３）と、リフレッシュ期間（ＲＰ）における１つ以上の以降のピクチャ（１０１２，・・・，１０１ｎ）とを含むピクチャ（１０１１，１０１２，・・・，１０１ｎ）のシーケンス（１００）を有し、
前記ピクチャ（１０１１，１０１２，・・・，１０１ｎ）のシーケンス（１００）の各ピクチャは、前記各ピクチャが細分されるブロック（１０２）の単位で前記ビデオデータストリームに順次符号化され、
前記ビデオデータストリームは、暗黙的シグナリングを有し、各ピクチャ（１０１１，１０１２，・・・，１０１ｎ）のリフレッシュサブエリア（１０１ｒ）は、ブロック符号化順に基づいて前記ビデオデータストリームにおいて暗黙的に通知されるか、又は、
前記ビデオデータストリームは、各ブロック（１０２）に対して、
ｅ）前記ブロック（１０２）は、各ピクチャの第１のサブエリア（１０１ｒ）に配置され、最後に符号化された最後のブロックであり、及び／又は、
ｆ）前記ブロック（１０２）は、各ピクチャの第１のサブエリア（１０１ｒ）に配置され、最初に符号化された最初のブロックであり、及び／又は、
ｇ）前記ブロック（１０２）は、第１のサブエリア（１０１ｒ）を制限するボーダに隣接し、及び／又は、
ｈ）前記ブロック（１０２）は、第１のサブエリア（１０１ｒ）の内部に配置される、
か否かを示すシンタックス要素を有する、ビデオデータストリーム。
【請求項20】
ピクチャエリア（１０１）は、第１のサブエリア（１０１ｒ）及び第２のサブエリア（１０１ｕ）に細分され、
そのうちの１つは、１つ以上のリフレッシュされたピクチャ領域（１０２ｒ）を含むリフレッシュサブエリア（１０１ｒ）に対応し、
他の１つは、１つ以上のまだリフレッシュされていないピクチャ領域（１０２ｕ）を含む未リフレッシュサブエリア（１０１ｕ）に対応する、請求項１９に記載のビデオデータストリーム。
【請求項21】
前記暗黙的なシグナリングは、前記ブロック符号化順での所定の位置における第１のブロック（１０２）が前記リフレッシュされたサブエリア（１０１ｒ）の一部であることを通知する、請求項１９又は２０に記載のビデオデータストリーム。
【請求項22】
前記シンタックス要素は、前記ピクチャ（１０１１，１０１２，・・・，１０１ｎ）のシーケンスからのピクチャのリフレッシュサブエリア（１０１ｒ）と未リフレッシュサブエリア（１０１ｕ）との間の境界を示すためのものであり、及び／又は、何れのサブエリアがリフレッシュサブエリア（１０１ｒ）であり、何れのサブエリアが未リフレッシュサブエリア（１０１ｕ）であるかを示すためのものである、請求項１９から２１の何れか一項に記載のビデオデータストリーム。
【請求項23】
前記シンタックス要素が、ｂ）前記ブロック（１０２）は、各ピクチャ（１０１）のリフレッシュサブエリア（１０１ｒ）に配置され、最後に符号化された最後のブロックであることを示す場合、前記ビデオデータストリームは、
ａ１）前記ブロック（１０２）は、前記リフレッシュサブエリア（１０１ｒ）のブロック（１０２）の１つ以上のローの最後に符号化されたブロックであるか、又は、
ａ２）前記ブロック（１０２）は、前記リフレッシュサブエリア（１０１ｒ）のブロック（１０２）の１つ以上のカラムの最後に符号化されたブロックであるか否かを示すための更なるシンタックス要素（例えば、ｒｅｇｉｏｎ＿ｈｏｒｉｚｏｎｔａｌ＿ｆｌａｇ）を有する、請求項１９から２２の何れか一項に記載のビデオデータストリーム。
【請求項24】
前記更なるシンタックス要素は、前記最後のブロック（１０２）が、前記各ピクチャ（１０１）がブロック（１０２）に細分される符号化分割ツリーの水平分割又は垂直分割から派生するか否かを示すためのものである、請求項２３に記載のビデオデータストリーム。
【請求項25】
前記ビデオデータストリームは、近傍のピクチャ領域（１０２ｕ）の近傍ブロック（１０２）が、例えば、前記近傍のピクチャ領域（１０２ｕ）が未リフレッシュサブエリア（１０１ｕ）に含まれる場合、予測のために利用可能でないことを示すためのイントラ予測中断指示を有する、請求項１９から２４の何れか一項に記載のビデオデータストリーム。
【請求項26】
前記リフレッシュサブエリア（１０１ｒ）は、前記各ピクチャが細分される前記ブロック（１０２）のサイズにより揃えられるグリッドに配置される１つ以上のリフレッシュピクチャ領域（１０２ｒ）を有する、請求項１９から２５の何れか一項に記載のビデオデータストリーム。
【請求項27】
前記各ピクチャ（１０１）のピクチャ領域は、１つ以上のスライスに垂直方向に細分され、前記シンタックス要素は、各スライスに対して通知される、請求項１９から２６の何れか一項に記載のビデオデータストリーム。
【請求項28】
前記各ピクチャ（１０１）のピクチャ領域は、ブロック（１０２）の１つ以上のローに水平方向に細分され、前記シンタックス要素は、ｉｉｉ）第１のローにおいてのみ、又は、ｉｖ）全てのローにおいて通知される、請求項１９から２７の何れか一項に記載のビデオデータストリーム。
【請求項29】
前記各ピクチャ（１０１）のピクチャ領域は、ブロック（１０２）の１つ以上のカラムに垂直方向に細分され、前記シンタックス要素は、ｉ）第１のカラムにおいてのみ、又は、ｉｉ）全てのカラムにおいて通知される、請求項１９から２８の何れか一項に記載のビデオデータストリーム。
【請求項30】
少なくとも１つの漸進的デコーダリフレッシュ（ＧＤＲ）符号化ピクチャ（１０３）と、リフレッシュ期間（ＲＰ）における１つ以上の以降のピクチャとを含むピクチャ（１０１１，１０１２，・・・，１０１ｎ）のシーケンス（１００）からの少なくとも１つのピクチャをデータストリームから復号化するデコーダであって、
前記ピクチャ（１０１１，１０１２，・・・，１０１ｎ）のシーケンス（１００）の各ピクチャは、前記各ピクチャが細分されるブロック（１０２）の単位で前記ビデオデータストリームから順次復号化され、
前記デコーダは、前記データストリームから、ブロック符号化順に基づいて前記少なくとも１つのピクチャのリフレッシュサブエリアを暗黙的に導出するよう構成されるか、又は、
前記デコーダは、前記データストリームから、各ブロック（１０２）に対して、
ａ）前記ブロック（１０２）は、各ピクチャの第１のサブエリア（１０１ｒ）に配置され、最後に符号化された最後のブロックであり、及び／又は、
ｂ）前記ブロック（１０２）は、各ピクチャの第１のサブエリア（１０１ｒ）に配置され、最初に符号化された最初のブロックであり、及び／又は、
ｃ）前記ブロック（１０２）は、第１のサブエリア（１０１ｒ）を制限するボーダに隣接し、及び／又は、
ｄ）前記ブロック（１０２）は、第１のサブエリア（１０１ｒ）の内部に配置される、
か否かを示すシンタックス要素を読むよう構成される、デコーダ。
【請求項31】
ピクチャエリア（１０１）は、第１のサブエリア（１０１ｒ）及び第２のサブエリア（１０１ｕ）に細分され、
そのうちの１つは、１つ以上のリフレッシュされたピクチャ領域（１０２ｒ）を含むリフレッシュサブエリア（１０１ｒ）に対応し、
他の１つは、１つ以上のまだリフレッシュされていないピクチャ領域（１０２ｕ）を含む未リフレッシュサブエリア（１０１ｕ）に対応する、請求項３０に記載のデコーダ。
【請求項32】
少なくとも１つの漸進的デコーダリフレッシュ（ＧＤＲ）符号化ピクチャ（１０３）と、リフレッシュ期間（ＲＰ）における１つ以上の以降のピクチャとを含むピクチャ（１０１１，１０１２，・・・，１０１ｎ）のシーケンス（１００）からの少なくとも１つのピクチャをデータストリームに符号化するエンコーダであって、
前記ピクチャ（１０１１，１０１２，・・・，１０１ｎ）のシーケンス（１００）の各ピクチャは、前記各ピクチャが細分されるブロック（１０２）の単位で前記ビデオデータストリームに順次符号化され、
前記エンコーダは、前記データストリームに、各ブロック（１０２）に対して、
ａ）前記ブロック（１０２）は、各ピクチャの第１のサブエリア（１０１ｒ）に配置され、最後に符号化された最後のブロックであり、及び／又は、
ｂ）前記ブロック（１０２）は、各ピクチャの第１のサブエリア（１０１ｒ）に配置され、最初に符号化された最初のブロックであり、及び／又は、
ｃ）前記ブロック（１０２）は、第１のサブエリア（１０１ｒ）を制限するボーダに隣接し、及び／又は、
ｄ）前記ブロック（１０２）は、第１のサブエリア（１０１ｒ）の内部に配置される、
か否かを示すシンタックス要素を書き込むよう構成される、エンコーダ。
【請求項33】
ピクチャエリア（１０１）は、第１のサブエリア（１０１ｒ）及び第２のサブエリア（１０１ｕ）に細分され、
そのうちの１つは、１つ以上のリフレッシュされたピクチャ領域（１０２ｒ）を含むリフレッシュサブエリア（１０１ｒ）に対応し、
他の１つは、１つ以上のまだリフレッシュされていないピクチャ領域（１０２ｕ）を含む未リフレッシュサブエリア（１０１ｕ）に対応する、請求項３２に記載のエンコーダ。
【請求項34】
少なくとも１つの漸進的デコーダリフレッシュ（ＧＤＲ）符号化ピクチャ（１０３）と、リフレッシュ期間（ＲＰ）における１つ以上の以降のピクチャとを含むピクチャ（１０１１，１０１２，・・・，１０１ｎ）のシーケンス（１００）からの少なくとも１つのピクチャをデータストリームから復号化する方法であって、
前記ピクチャ（１０１１，１０１２，・・・，１０１ｎ）のシーケンス（１００）の各ピクチャは、前記各ピクチャが細分されるブロック（１０２）の単位で前記ビデオデータストリームから順次復号化され、
前記データストリームから、ブロック符号化順に基づいて前記少なくとも１つのピクチャのリフレッシュサブエリアを暗黙的に導出するステップ、又は、
前記データストリームから、各ブロック（１０２）に対して、
ａ）前記ブロック（１０２）は、各ピクチャの第１のサブエリア（１０１ｒ）に配置され、最後に符号化された最後のブロックであり、及び／又は、
ｂ）前記ブロック（１０２）は、各ピクチャの第１のサブエリア（１０１ｒ）に配置され、最初に符号化された最初のブロックであり、及び／又は、
ｃ）前記ブロック（１０２）は、第１のサブエリア（１０１ｒ）を制限するボーダに隣接し、及び／又は、
ｄ）前記ブロック（１０２）は、第１のサブエリア（１０１ｒ）の内部に配置される、
か否かを示すシンタックス要素（例えば、フラグ）を読むステップ、
を有する方法。
【請求項35】
少なくとも１つの漸進的デコーダリフレッシュ（ＧＤＲ）符号化ピクチャ（１０３）と、リフレッシュ期間（ＲＰ）における１つ以上の以降のピクチャとを含むピクチャ（１０１１，１０１２，・・・，１０１ｎ）のシーケンス（１００）からの少なくとも１つのピクチャをデータストリームに符号化する方法であって、
前記ピクチャ（１０１１，１０１２，・・・，１０１ｎ）のシーケンス（１００）の各ピクチャは、前記各ピクチャが細分されるブロック（１０２）の単位で前記ビデオデータストリームに順次符号化され、
前記データストリームに、各ブロック（１０２）に対して、
ａ）前記ブロック（１０２）は、各ピクチャの第１のサブエリア（１０１ｒ）に配置され、最後に符号化された最後のブロックであり、及び／又は、
ｂ）前記ブロック（１０２）は、各ピクチャの第１のサブエリア（１０１ｒ）に配置され、最初に符号化された最初のブロックであり、及び／又は、
ｃ）前記ブロック（１０２）は、第１のサブエリア（１０１ｒ）を制限するボーダに隣接し、及び／又は、
ｄ）前記ブロック（１０２）は、第１のサブエリア（１０１ｒ）の内部に配置される、
か否かを示すシンタックス要素を書き込むステップ、
を有する方法。
【請求項36】
コンピュータ又は信号プロセッサ上で実行されると、請求項３４又は３５に記載の方法を実現するコンピュータプログラム。
【請求項37】
ビデオデータストリームであって、
タイル（１０２）に細分される少なくとも１つのピクチャ（１０１）と、
タイルリオーダリングフラグと、
を有し、
ａ）前記データストリームにおけるタイルリオーダリングフラグ（例えば、ｓｐｓ＿ｅｎｆｏｒｃｅ＿ｒａｓｔｅｒ＿ｓｃａｎ＿ｆｌａｇ）が第１の状態を有する場合、前記ピクチャ（１０１）のタイル（１０２）が前記ピクチャ（１０１）をタイル毎に探索する第１の符号化順を利用して符号化されることが通知され、及び／又は、
ｂ）前記データストリームにおけるタイルリオーダリングフラグが第２の状態を有する場合、前記ピクチャ（１０１）のタイル（１０２）が前記ピクチャ（１０１）をラスタスキャン順に探索する第２の符号化順を利用して符号化されることが通知される、ビデオデータストリーム。
【請求項38】
データストリームからピクチャを復号化するよう構成されるデコーダであって、
ａ）前記データストリームにおけるタイルリオーダリングフラグ（例えば、ｓｐｓ＿ｅｎｆｏｒｃｅ＿ｒａｓｔｅｒ＿ｓｃａｎ＿ｆｌａｇ）が第１の状態を有する場合、前記デコーダは、前記ピクチャ（１０１）をタイル毎に探索する第１の復号化順を利用して前記データストリームから前記ピクチャ（１０１）のタイル（１０２）を復号化するよう構成され、及び／又は、
ｂ）前記データストリームにおけるタイルリオーダリングフラグが第２の状態を有する場合、前記デコーダは、前記ピクチャ（１０１）をラスタスキャン順に探索する第２の復号化順を利用して前記データストリームから前記ピクチャ（１０１）のタイル（１０２）を復号化するよう構成される、デコーダ。
【請求項39】
前記デコーダは、漸進的復号化リフレッシュ（ＧＤＲ）アプローチを利用して前記ピクチャ（１０１）を復号化するよう構成され、前記ピクチャ（１０１）は、少なくとも１つのＧＤＲ符号化ピクチャ（１０３）と、１つ以上の以降のピクチャとを含むピクチャ（１０１１，１０１２，・・・，１０１ｎ）のシーケンス（１００）の一部であり、
前記ピクチャ（１０１）は、ブロック毎に復号化され、複数のパケット（５０１ａ，５０１ｂ，・・・，５０１ｎ）に分割され、２つ以上のパケットは、リフレッシュされた同数のブロック（１０２ｒ）、及び／又は、まだリフレッシュされていない同数のブロック（１０２ｕ）を含む、請求項３８に記載のデコーダ。
【請求項40】
ピクチャをデータストリームに符号化するよう構成されるエンコーダであって、
ｃ）前記エンコーダは、前記データストリームにおけるタイルリオーダリングフラグ（例えば、ｓｐｓ＿ｅｎｆｏｒｃｅ＿ｒａｓｔｅｒ＿ｓｃａｎ＿ｆｌａｇ）を、前記ピクチャ（１０１）のタイル（１０２）が前記ピクチャ（１０１）をタイル毎に探索する第１の符号化順を利用して符号化されることを示す第１の状態に設定するよう構成され、
ｄ）前記エンコーダは、前記データストリームにおけるタイルリオーダリングフラグを、前記ピクチャ（１０１）のタイル（１０２）が前記ピクチャ（１０１）をラスタスキャン順に探索する第２の符号化順を利用して符号化されることを示す第２の状態に設定するよう構成される、エンコーダ。
【請求項41】
マルチレイヤ化されたスケーラブルビデオデータストリーム（６００）であって、
第１のレイヤ（６０１）におけるピクチャ（２０１１，２０１２，・・・，２０１ｎ）の第１のシーケンス（２００）と、第２のレイヤ（６０２）におけるピクチャ（１０１１，１０１２，・・・，１０１ｎ）の第２のシーケンス（１００）とを有し、
前記第２のレイヤ（６０２）におけるピクチャ（１０１１，１０１２，・・・，１０１ｎ）の第２のシーケンス（１００）は、スタートピクチャとしての少なくとも１つの漸進的デコーダリフレッシュ（ＧＤＲ）ピクチャ（１０３）と、リフレッシュ期間（ＲＰ）における１つ以上の以降のピクチャ（１０１２，・・・，１０１ｎ）とを含み、
前記マルチレイヤ化されたスケーラブルビデオデータストリーム（６００）は、前記第２のレイヤ（６０２）の前記ＧＤＲピクチャ（１０３）の未リフレッシュサブエリア（１０１ｕ）が前記第１のレイヤ（６０１）のサンプル（２０２ｒ）からレイヤ間予測される確率に関する情報と、
前記リフレッシュ期間（ＲＰ）に含まれる前記１つ以上の以降のピクチャ（１０１２，・・・，１０１ｎ）の未リフレッシュサブエリア（１０１ｕ）において、動きベクトル予測が無効にされるか、又は動きベクトル予測が非時間的に実現される、又は、
前記ＧＤＲピクチャ（１０３）の未リフレッシュサブエリア（１０１ｕ）において、動きベクトル予測が無効にされるか、又は動きベクトル予測が非時間的に実現される、
という情報と、
を搬送する通知を有する、マルチレイヤ化されたスケーラブルビデオデータストリーム。
【請求項42】
以下の符号化コンセプトの少なくとも１つは、前記リフレッシュ期間（ＲＰ）に含まれる前記１つ以上の以降のピクチャ（１０１２，・・・，１０１ｎ）の未リフレッシュサブエリア（１０１ｕ）を符号化するため無効にされ、
・時間動きベクトル予測（ＴＭＶＰ）
・アドバンスト時間動きベクトル予測（ＡＴＭＶＰ）
・ＴＭＶＰ又はサブブロックＴＭＶＰによって影響されるマージリストにおける動きベクトル候補などのＴＭＶＰにより影響される候補
・デコーダサイド動きベクトル精緻化（ＤＭＶＲ）
である、請求項４１に記載のマルチレイヤ化されたスケーラブルビデオデータストリーム（６００）。
【請求項43】
以下の符号化コンセプトの少なくとも１つは、前記ＧＤＲピクチャ（１０３）の未リフレッシュサブエリア（１０１ｕ）を符号化するため無効にされ、
・時間動きベクトル予測（ＴＭＶＰ）
・アドバンスト時間動きベクトル予測（ＡＴＭＶＰ）
・ＴＭＶＰ又はサブブロックＴＭＶＰによって影響されるマージリストにおける動きベクトル候補などのＴＭＶＰにより影響される候補
・デコーダサイド動きベクトル精緻化（ＤＭＶＲ）
であり、
ＤＭＶＲは、前記リフレッシュ期間（ＲＰ）に含まれる前記１つ以上の以降のピクチャ（１０１２，・・・，１０１ｎ）の未リフレッシュサブエリア（１０１ｕ）を符号化するため無効にされる、請求項４０又は４１に記載のマルチレイヤ化されたスケーラブルビデオデータストリーム（６００）。
【請求項44】
前記第１のレイヤ（６０１）のサンプルからの前記レイヤ間予測は、前記ＧＤＲピクチャ（１０３）の未リフレッシュサブエリア（１０１ｕ）の１つ以上のサンプル（１０２ｕ）を、前記第１のレイヤ（６０１）のサンプル（２０２ｒ）のアップサンプリングされたバージョンによって置換することを含む、請求項４１から４３の何れか一項に記載のマルチレイヤ化されたスケーラブルビデオデータストリーム（６００）。
【請求項45】
前記ＧＤＲピクチャ（１０３）の前記未リフレッシュサブエリア（１０１ｕ）全体の全てのサンプル（１０２ｕ）が、前記第２のレイヤ（６０２）における符号化ピクチャの第２のシーケンス（１００）からのピクチャ（１０１１，１０１２，・・・，１０１ｎ）がユーザに瞬時に提示可能となるように、前記第１のレイヤ（６０１）のサンプル（２０２ｒ）のアップサンプリングされたバージョンと置換される、請求項４１から４４の何れか一項に記載のマルチレイヤ化されたスケーラブルビデオデータ（６００）。
【請求項46】
前記第２のレイヤ（１００）の前記１つ以上の以降のピクチャ（１０１２，・・・，１０１ｎ）の未リフレッシュサブエリア（１０１ｕ）が、前記第２のレイヤ（６０２）のリフレッシュされたサンプル（１０２ｒ）に徐々に更新される前記第１のレイヤ（６０１）からの前記アップサンプリングされた置換サンプル（２０２ｒ）を利用してレイヤ内予測によってリフレッシュされる、請求項４１から４５の何れか一項に記載のマルチレイヤ化されたスケーラブルビデオデータストリーム（６００）。
【請求項47】
前記第２のレイヤ（６０２）は、前記第１のレイヤ（６０１）又は何れかの更なるレイヤから独立に符号化され、前記ピクチャ（１０１１，１０１２，・・・，１０１ｎ）の第２のシーケンス（１００）が前記ＧＤＲピクチャ（１０３）においてランダムにアクセスされる場合、前記通知は、前記第２のレイヤ（６０２）の前記ＧＤＲピクチャ（１０３）の前記未リフレッシュサブエリア（１０１ｕ）が前記第１のレイヤ（６０１）又は適切なコンテンツを有する何れか所定の更なるレイヤのサンプル（２０２ｒ）からレイヤ間予測されることを示す、請求項４１から４６の何れか一項に記載のマルチレイヤ化されたスケーラブルビデオデータストリーム（６００）。
【請求項48】
第１のレイヤ（６０１）におけるピクチャ（２０１１，２０１２，・・・，２０１ｎ）の第１のシーケンス（２００）と、第２のレイヤ（６０２）におけるピクチャ（１０１１，１０１２，・・・，１０１ｎ）の第２のシーケンス（１００）とを有するマルチレイヤ化されたスケーラブルビデオデータストリーム（６００）から、少なくとも１つのピクチャを復号化するデコーダであって、
前記第２のレイヤ（６０２）におけるピクチャ（１０１１，１０１２，・・・，１０１ｎ）の第２のシーケンス（１００）は、スタートピクチャとしての少なくとも１つの漸進的デコーダリフレッシュ（ＧＤＲ）ピクチャ（１０３）と、リフレッシュ期間（ＲＰ）における１つ以上の以降のピクチャ（１０１２，・・・，１０１ｎ）とを含み、
前記デコーダは、前記マルチレイヤ化されたスケーラブルビデオデータストリーム（６００）から、前記第２のレイヤ（６０２）の前記ＧＤＲピクチャ（１０３）の未リフレッシュサブエリア（１０１ｕ）が前記第１のレイヤ（６０１）のサンプル（２０２ｒ）からレイヤ間予測される確率に関する情報を搬送する通知を読むよう構成され、
前記デコーダは更に、前記通知に応答して、
動きベクトル予測を無効にするか、又は、前記リフレッシュ期間（ＲＰ）に含まれる前記１つ以上の以降のピクチャ（１０１２，・・・，１０１ｎ）の未リフレッシュサブエリア（１０１ｕ）において、動きベクトル予測を非時間的に実現するよう構成されるか、又は、
動きベクトル予測を無効にするか、又は、前記ＧＤＲピクチャ（１０３）の未リフレッシュサブエリア（１０１ｕ）において、動きベクトル予測を非時間的に実現するよう構成される、デコーダ。
【請求項49】
第１のレイヤ（６０１）におけるピクチャ（２０１１，２０１２，・・・，２０１ｎ）の第１のシーケンス（２００）と、第２のレイヤ（６０２）におけるピクチャ（１０１１，１０１２，・・・，１０１ｎ）の第２のシーケンス（１００）とを有するマルチレイヤ化されたスケーラブルビデオデータストリーム（６００）に、少なくとも１つのピクチャを符号化するエンコーダであって、
前記第２のレイヤ（６０２）におけるピクチャ（１０１１，１０１２，・・・，１０１ｎ）の第２のシーケンス（１００）は、スタートピクチャとしての少なくとも１つの漸進的デコーダリフレッシュ（ＧＤＲ）ピクチャ（１０３）と、リフレッシュ期間（ＲＰ）における１つ以上の以降のピクチャ（１０１２，・・・，１０１ｎ）とを含み、
前記エンコーダは、前記マルチレイヤ化されたスケーラブルビデオデータストリーム（６００）に、前記第２のレイヤ（６０２）の前記ＧＤＲピクチャ（１０３）の未リフレッシュサブエリア（１０１ｕ）が前記第１のレイヤ（６０１）のリフレッシュサンプル（２０２ｒ）からレイヤ間予測される確率に関する情報と、
前記リフレッシュ期間（ＲＰ）に含まれる前記１つ以上の以降のピクチャ（１０１２，・・・，１０１ｎ）の未リフレッシュサブエリア（１０１ｕ）において、動きベクトル予測が無効にされるか、又は、動きベクトル予測が非時間的に実現される、又は、
前記ＧＤＲピクチャ（１０３）の未リフレッシュサブエリア（１０１ｕ）において、動きベクトル予測が無効にされるか、又は、動きベクトル予測が非時間的に実現される、
という情報と、を搬送する通知を書き込むよう構成される、エンコーダ。
【請求項50】
第１のレイヤ（６０１）におけるピクチャ（２０１１，２０１２，・・・，２０１ｎ）の第１のシーケンス（２００）と、第２のレイヤ（６０２）におけるピクチャ（１０１１，１０１２，・・・，１０１ｎ）の第２のシーケンス（１００）とを有するマルチレイヤ化されたスケーラブルビデオデータストリーム（６００）から、少なくとも１つのピクチャを復号化する方法であって、
前記第２のレイヤ（６０２）におけるピクチャ（１０１１，１０１２，・・・，１０１ｎ）の第２のシーケンス（１００）は、スタートピクチャとしての少なくとも１つの漸進的デコーダリフレッシュ（ＧＤＲ）ピクチャ（１０３）と、リフレッシュ期間（ＲＰ）における１つ以上の以降のピクチャ（１０１２，・・・，１０１ｎ）とを含み、
前記方法は、
前記マルチレイヤ化されたスケーラブルビデオデータストリーム（６００）から、前記第２のレイヤ（６０２）の前記ＧＤＲピクチャ（１０３）の未リフレッシュサブエリア（１０１ｕ）が前記第１のレイヤ（６０１）のサンプル（２０２ｒ）からレイヤ間予測される確率に関する情報を搬送する通知を読むステップと、
前記通知に応答して、
動きベクトル予測を無効にするか、又は、前記リフレッシュ期間（ＲＰ）に含まれる前記１つ以上の以降のピクチャ（１０１２，・・・，１０１ｎ）の未リフレッシュサブエリア（１０１ｕ）において、動きベクトル予測を非時間的に実現する処理、又は、
動きベクトル予測を無効にするか、又は、前記ＧＤＲピクチャ（１０３）の未リフレッシュサブエリア（１０１ｕ）において、動きベクトル予測を非時間的に実現する処理、
の少なくとも１つを実行するステップと、
を有する、方法。
【請求項51】
第１のレイヤ（６０１）におけるピクチャ（２０１１，２０１２，・・・，２０１ｎ）の第１のシーケンス（２００）と、第２のレイヤ（６０２）におけるピクチャ（１０１１，１０１２，・・・，１０１ｎ）の第２のシーケンス（１００）とを有するマルチレイヤ化されたスケーラブルビデオデータストリーム（６００）に、少なくとも１つのピクチャを符号化する方法であって、
前記第２のレイヤ（６０２）におけるピクチャ（１０１１，１０１２，・・・，１０１ｎ）の第２のシーケンス（１００）は、スタートピクチャとしての少なくとも１つの漸進的デコーダリフレッシュ（ＧＤＲ）ピクチャ（１０３）と、リフレッシュ期間（ＲＰ）における１つ以上の以降のピクチャ（１０１２，・・・，１０１ｎ）とを含み、
前記方法は、
前記マルチレイヤ化されたスケーラブルビデオデータストリーム（６００）に、前記第２のレイヤ（６０２）の前記ＧＤＲピクチャ（１０３）の未リフレッシュサブエリア（１０１ｕ）が前記第１のレイヤ（６０１）のサンプル（２０２ｒ）からレイヤ間予測される確率に関する情報と、
前記リフレッシュ期間（ＲＰ）に含まれる前記１つ以上の以降のピクチャ（１０１２，・・・，１０１ｎ）の未リフレッシュサブエリア（１０１ｕ）において、動きベクトル予測が無効にされるか、又は、動きベクトル予測が非時間的に実現される、又は、
前記ＧＤＲピクチャ（１０３）の未リフレッシュサブエリア（１０１ｕ）において、動きベクトル予測が無効にされるか、又は、動きベクトル予測が非時間的に実現される、
という情報と、を搬送する通知を書き込むステップと、
を有する、方法。
【請求項52】
コンピュータ又は信号プロセッサ上で実行されると、請求項５０又は５１に記載の方法を実現するコンピュータプログラム。
【請求項53】
マルチレイヤ化されたスケーラブルビデオデータストリーム（７００）であって、
第１のレイヤ（７０１）におけるピクチャ（２０１１，２０１２，・・・，２０１ｎ）の第１のシーケンス（２００）と、第２のレイヤ（７０２）におけるピクチャ（１０１１，１０１２，・・・，１０１ｎ）の第２のシーケンス（１００）とを有し、前記第１及び第２のレイヤ（７０１，７０２）の各々は、複数の時間サブレイヤ（７０１ａ，７０１ｂ，７０２ａ，７０２ｂ）を有し、
前記スケーラブルビデオデータストリーム（７００）は、前記第２のレイヤ（例えば、エンハンスメントレイヤ）の何れの時間サブレイヤ（７０２ａ，７０２ｂ）がレイヤ間予測によって符号化されるかを示す通知を含む、マルチレイヤ化されたスケーラブルビデオデータストリーム。
【請求項54】
前記通知は、前記第２のレイヤ（７０２）の時間サブレイヤ（７０２ａ，７０２ｂ）がレイヤ間予測なしに符号化される所定の時間識別子を含む、請求項５３に記載のマルチレイヤ化されたスケーラブルビデオデータ（７００）。
【請求項55】
前記所定の時間識別子を超える値を有する時間識別子を有する前記第２のレイヤ（７０２）の時間サブレイヤ（７０２ｂ）は、レイヤ間予測なしに符号化される、請求項５４に記載のマルチレイヤ化されたスケーラブルビデオデータ。
【請求項56】
前記所定の時間識別子以下の値を有する時間識別子を有する前記第２のレイヤ（７０２）の時間サブレイヤ（７０２ａ）は、レイヤ間予測により符号化される、請求項５４又は５５に記載のマルチレイヤ化されたスケーラブルビデオデータ。
【請求項57】
前記通知が、前記第２のレイヤ（７０２）の時間サブレイヤ（７０２ｂ）がレイヤ間予測のため下位レイヤ（７０１）の時間サブレイヤ（７０１ｂ）を利用しないことを示す場合、前記下位レイヤ（７０１）の時間サブレイヤ（７０１ｂ）は、前記マルチレイヤ化されたスケーラブルビデオデータ（７００）から破棄可能である、請求項５３から５６の何れか一項に記載のマルチレイヤ化されたスケーラブルビデオデータ（７００）。
【請求項58】
前記通知が前記マルチレイヤ化されたスケーラブルビデオデータ（７００）にｆう組まれているか、又は、前記第２のレイヤ（７０２）のデフォルト毎の全ての時間サブレイヤ（７０２ａ，７０２ｂ）が下位レイヤ（７０１）に依存しているかを示すためのシンタックス要素を更に含む、請求項５３から５７の何れか一項に記載のマルチレイヤ化されたスケーラブルビデオデータ（７００）。
【請求項59】
第１のレイヤ（７０１）におけるピクチャ（２０１１，２０１２，・・・，２０１ｎ）の第１のシーケンス（２００）と、第２のレイヤ（７０２）におけるピクチャ（１０１１，１０１２，・・・，１０１ｎ）の第２のシーケンス（１００）とを有するマルチレイヤ化されたスケーラブルビデオデータストリーム（７００）から、少なくとも１つのピクチャを復号化するデコーダであって、前記第１及び第２のレイヤ（７０１，７０２）の各々は、複数の時間サブレイヤ（７０１ａ，７０１ｂ，７０２ａ，７０２ｂ）を有し、
前記デコーダは、前記スケーラブルビデオデータストリーム（７００）から導出される通知に基づいて、レイヤ間予測を利用することによって前記時間サブレイヤ（７０１ａ，７０１ｂ，７０２ａ，７０２ｂ）の１つ以上を復号化するよう構成され、前記通知（例えば、ｖｐｓ＿ｓｕｂ＿ｌａｙｅｒ＿ｉｎｄｅｐｅｎｄｅｎｔ＿ｆｌａｇ［ｉ］［ｊ］）は、前記第２のレイヤ（例えば、エンハンスメントレイヤ）の何れの時間サブレイヤ（７０２ａ，７０２ｂ）がレイヤ間予測によって符号化されるかを示す、デコーダ。
【請求項60】
前記通知は、前記第２のレイヤ（７０２）の時間サブレイヤ（７０２ａ，７０２ｂ）がレイヤ間予測なしに符号化される所定の時間識別子を有する、請求項５９に記載のデコーダ。
【請求項61】
前記所定の時間識別子を超える値を有する時間識別子を有する前記第２のレイヤ（７０２）の時間サブレイヤ（７０２ｂ）は、レイヤ間予測なしに符号化される、請求項６０に記載のデコーダ。
【請求項62】
前記所定の時間識別子以下の値を有する時間識別子を有する前記第２のレイヤ（７０２）の時間サブレイヤ（７０２ａ）は、レイヤ間予測により符号化される、請求項６０又は６１に記載のデコーダ。
【請求項63】
前記デコーダが、前記通知から前記第２のレイヤ（７０２）の時間サブレイヤ（７０２ｂ）がレイヤ間予測のために下位レイヤ（７０１）の時間サブレイヤ（７０１ｂ）を利用しないことを導出した場合、前記デコーダは、復号化から前記下位レイヤ（７０１）の時間サブレイヤ（７０１ｂ）を破棄するよう構成される、請求項６０から６２の何れか一項に記載のデコーダ。
【請求項64】
第１のレイヤ（７０１）におけるピクチャ（２０１１，２０１２，・・・，２０１ｎ）の第１のシーケンス（２００）と、第２のレイヤ（７０２）におけるピクチャ（１０１１，１０１２，・・・，１０１ｎ）の第２のシーケンス（１００）とを有するマルチレイヤ化されたスケーラブルビデオデータストリーム（７００）に、少なくとも１つのピクチャを符号化するエンコーダであって、前記第１及び第２のレイヤ（７０１，７０２）の各々は、複数の時間サブレイヤ（７０１ａ，７０１ｂ，７０２ａ，７０２ｂ）を有し、
前記エンコーダは、レイヤ間予測を利用することによって前記時間サブレイヤ（７０１ａ，７０１ｂ，７０２ａ，７０２ｂ）の１つ以上を符号化し、前記スケーラブルビデオデータストリーム（７００）に通知を書き込むよう構成され、前記通知は、前記第２のレイヤ（７０２）の何れの時間サブレイヤ（７０２ａ，７０２ｂ）がレイヤ間予測によって符号化されるかを示す、エンコーダ。
【請求項65】
前記通知は、前記第２のレイヤ（７０２）の時間サブレイヤ（７０２ａ，７０２ｂ）がレイヤ間予測なしに符号化される所定の時間識別子を有する、請求項６４に記載のエンコーダ。
【請求項66】
前記所定の時間識別子を超える値を有する時間識別子を有する前記第２のレイヤ（７０２）の時間サブレイヤ（７０２ｂ）は、レイヤ間予測なしに符号化される、請求項６５に記載のエンコーダ。
【請求項67】
前記所定の時間識別子以下の値を有する時間識別子を有する前記第２のレイヤ（７０２）の時間サブレイヤ（７０２ａ）は、レイヤ間予測により符号化される、請求項６５又は６６に記載のエンコーダ。
【請求項68】
前記エンコーダが、前記第２のレイヤ（７０２）の時間サブレイヤ（７０２ｂ）がレイヤ間予測のために下位レイヤ（７０１）の時間サブレイヤ（７０１ｂ）を利用しないことを判定した場合、前記エンコーダは、符号化から前記下位レイヤ（７０１）の時間サブレイヤ（７０１ｂ）を破棄するよう構成される、請求項６４から６７の何れか一項に記載のエンコーダ。
【請求項69】
前記エンコーダは、前記ピクチャの第２のシーケンスの連続するピクチャの第１の所定のローを従属しているとして符号化するか、又は、前記ピクチャの第２のシーケンスの連続するピクチャの第２の所定のローをレイヤ間依存性を利用したとして符号化するよう構成される、請求項６４から６８の何れか一項に記載のエンコーダ。
【請求項70】
第１のレイヤ（７０１）におけるピクチャ（２０１１，２０１２，・・・，２０１ｎ）の第１のシーケンス（２００）と、第２のレイヤ（７０２）におけるピクチャ（１０１１，１０１２，・・・，１０１ｎ）の第２のシーケンス（１００）とを有するマルチレイヤ化されたスケーラブルビデオデータストリーム（７００）から、少なくとも１つのピクチャを復号化する方法であって、前記第１及び第２のレイヤ（７０１，７０２）の各々は、複数の時間サブレイヤ（７０１ａ，７０１ｂ，７０２ａ，７０２ｂ）を有し、
前記方法は、
前記スケーラブルビデオデータストリーム（７００）から導出される通知に基づいて、レイヤ間予測を利用することによって前記時間サブレイヤ（７０２ａ，７０２ｂ）の１つ以上を復号化するステップを有し、前記通知は、前記第２のレイヤ（７０２）の何れの時間サブレイヤ（７０２ａ，７０２ｂ）がレイヤ間予測によって符号化されるかを示す、方法。
【請求項71】
前記通知は、前記第２のレイヤ（７０２）の時間サブレイヤ（７０２ａ，７０２ｂ）がレイヤ間予測なしに符号化される所定の時間識別子を有する、請求項７０に記載の方法。
【請求項72】
前記所定の時間識別子を超える値を有する時間識別子を有する前記第２のレイヤ（７０２）の時間サブレイヤ（７０２ｂ）は、レイヤ間予測なしに符号化される、請求項７１に記載の方法。
【請求項73】
前記所定の時間識別子以下の値を有する時間識別子を有する前記第２のレイヤ（７０２）の時間サブレイヤ（７０２ａ）は、レイヤ間予測により符号化される、請求項７１又は７２に記載の方法。
【請求項74】
第１のレイヤ（７０１）におけるピクチャ（２０１１，２０１２，・・・，２０１ｎ）の第１のシーケンス（２００）と、第２のレイヤ（７０２）におけるピクチャ（１０１１，１０１２，・・・，１０１ｎ）の第２のシーケンス（１００）とを有するマルチレイヤ化されたスケーラブルビデオデータストリーム（７００）に、少なくとも１つのピクチャを符号化する方法であって、前記第１及び第２のレイヤ（７０１，７０２）の各々は、複数の時間サブレイヤ（７０１ａ，７０１ｂ，７０２ａ，７０２ｂ）を有し、
前記方法は、
レイヤ間予測を利用することによって前記時間サブレイヤ（７０２ａ，７０２ｂ）の１つ以上を符号化し、前記スケーラブルビデオデータストリーム（７００）に通知を書き込むステップを有し、前記通知は、前記第２のレイヤ（７０２）の何れの時間サブレイヤ（７０２ａ，７０２ｂ）がレイヤ間予測によって符号化されるかを示す、方法。
【請求項75】
前記通知は、前記第２のレイヤ（７０２）の時間サブレイヤ（７０２ａ，７０２ｂ）がレイヤ間予測なしに符号化される所定の時間識別子を有する、請求項７４に記載の方法。
【請求項76】
前記所定の時間識別子を超える値を有する時間識別子を有する前記第２のレイヤ（７０２）の時間サブレイヤ（７０２ｂ）は、レイヤ間予測なしに符号化される、請求項７５に記載の方法。
【請求項77】
前記所定の時間識別子以下の値を有する時間識別子を有する前記第２のレイヤ（７０２）の時間サブレイヤ（７０２ａ）は、レイヤ間予測により符号化される、請求項７５又は７６に記載の方法。
【請求項78】
コンピュータ又は信号プロセッサ上で実行されると、請求項７０から７３又は請求項７４から７７に記載の方法を実現するコンピュータプログラム。
【発明の詳細な説明】
【技術分野】
【0001】
本発明は、ピクチャの符号化に関し、特に連続するピクチャのシーケンスの符号化に関する。いくつかの実施例は、スケーラブル符号化及び／又はピクチャを符号化するための、いわゆる漸進的デコーダリフレッシュ（ＧＤＲ）符号化方式を利用しうる。いくつかの実施例は、スケーラブル符号化及び漸進的デコーダリフレッシュの改良を提案するものであってもよい。
【背景技術】
【0002】
今日のビデオ符号化において、いくつかのシナリオは、非常に低い遅延伝送を必要とする。低遅延のエンド・ツー・エンドの遅延が必要とされるときはいつでも、ピクチャからピクチャへのビットレートの変化は望ましくない。典型的には、ビデオは、符号化されたピクチャのサイズが、コンテンツの複雑さの特性だけでなく、使用される予測構造によっても変化するように符号化される。より具体的には、典型的には、ビデオは、いくつかのピクチャが（他のピクチャに依存しない）イントラスライスとして符号化され、他のピクチャが（参照として他のピクチャを使用して）Ｂ又はＰスライスとして符号化されることに基づく予測構造を利用して符号化される。明らかに、他のピクチャに対する予測なしにピクチャが符号化されることは、時間的相関が利用され、ピクチャがＢ又はＰスライスとして符号化されるときよりも大きなサイズをもたらす。
【0003】
各ピクチャがイントラ予測のみを利用するブロックのいくつかの混合と、インター予測を利用するいくつかのブロックとにより符号化される、この典型的な符号化構造のビットをドリフトさせるいくつかの技術がある。このような場合、イントラ予測のみを用いて符号化されるピクチャは存在しないため、（イントラ予測ブロックとインター予測ブロックとの比率が全てのピクチャにわたって同様に維持される場合）全てのピクチャのサイズは同様に維持される。
【0004】
これは、他の符号化構造アプローチに比べて最大のピクチャのサイズがより小さく、従って、それを送信する時間もより小さくなるに従って、より低いエンド・ツー・エンド遅延を達成するのに理想的である。
【0005】
典型的には、このような構造は、クリーンなピクチャを達成するため、いくつかのピクチャが復号化される必要があり、コンテンツが適切に表示可能になるまで、ビデオ領域が徐々に復号化及びリフレッシュされる一方、典型的な符号化構造では、特定の形式のイントラフレーム（ランダムアクセスポイント－ＲＡＰ）のみが存在することが必要とされ、より多くのアクセスユニットを復号化する必要なく、コンテンツが瞬時に表示可能になるという事実において、典型的な符号化構造とは異なるため、漸進的復号化リフレッシュ（ＧＤＲ）として識別される。
【0006】
ピクチャシーケンスにおけるフレーム又はピクチャにアクセスする際、いわゆる同調時間と符号化効率との間にトレードオフが存在しうる。符号化効率を損なうことなく、同調時間（平均的又はワーストケースの何れか）を短縮することを可能にする機構が望ましい。さらに、ピクチャは、いわゆる、リフレッシュ期間ＲＰにおいて経時的にリフレッシュされうるピクチャ領域（例えば、タイル）に再分割され得る。しかしながら、どの領域がクリーンであり（リフレッシュされ）、どの領域がリフレッシュされていないかの特定は明確ではなく、従って、イントラ予測は、未だクリーンでない（ダーティ）領域とクリーン領域との間で容易に制限することができないなど、いくつかのペナルティを伴う。
【発明の概要】
【0007】
従って、本発明の課題は、既存のＧＤＲエンコーダ、デコーダ及びデータストリームを改良することである。
【0008】
第１の態様は、少なくとも１つの漸進的デコーダリフレッシュ（ＧＤＲ）符号化ピクチャと、リフレッシュ期間（ＲＰ）における１つ以上の以降のピクチャとを含むピクチャのシーケンスを含むビデオデータストリームに関する。ビデオデータストリームは更に、ピクチャエリア（例えば、フレーム全体）を第１のサブエリア及び第２のサブエリアに細分する複数のピクチャ構成を規定するパラメータセット（ＳＰＳ）を有し、そのうちの１つは、１つ以上のリフレッシュされたピクチャ領域（例えば、タイル）を含むリフレッシュサブエリア（例えば、ピクチャ領域のセット）に対応し、他の１つは、１つ以上のまだリフレッシュされていないピクチャ領域を含む未リフレッシュサブエリアに対応する。ビデオデータストリームは更に、リフレッシュ期間内の各ピクチャに対して、複数のピクチャ構成から対応する１つのピクチャ構成を識別するピクチャ構成識別子（ｒｅｇ＿ｃｏｎｆ＿ｉｄｘ）を有する。
【0009】
さらに、少なくとも１つの漸進的デコーダリフレッシュ（ＧＤＲ）符号化ピクチャと、リフレッシュ期間（ＲＰ）における１つ以上の以降のピクチャとを含むピクチャのシーケンスから少なくとも１つのピクチャをデータストリームから復号化するデコーダを提供することが提案される。デコーダは、データストリームから、ピクチャエリア（例えば、フレーム全体）を第１のサブエリア及び第２のサブエリアに細分する複数のピクチャ構成を規定するパラメータセットを読むよう構成され、そのうちの１つは、１つ以上のリフレッシュされたピクチャ領域（例えば、タイル）を含むリフレッシュサブエリア（例えば、ピクチャ領域のセット）に対応し、他の１つは、１つ以上のまだリフレッシュされていないピクチャ領域（１０２ｕ）を含む未リフレッシュサブエリアに対応する。デコーダは更に、データストリームから、リフレッシュ期間内の各ピクチャに対して、少なくとも１つのピクチャを復号化するための複数のピクチャ構成から対応する１つのピクチャ構成を識別するピクチャ構成識別子（ｒｅｇ＿ｃｏｎｆ＿ｉｄｘ）を読むよう構成される。
【0010】
さらに、少なくとも１つの漸進的デコーダリフレッシュ（ＧＤＲ）符号化ピクチャと、リフレッシュ期間（ＲＰ）における１つ以上の以降のピクチャとを含むピクチャのシーケンスから少なくとも１つのピクチャをデータストリームに符号化するエンコーダを提供することが提案される。エンコーダは、データストリームに、ピクチャエリア（例えば、フレーム全体）を第１のサブエリア及び第２のサブエリアに細分する複数のピクチャ構成を規定するパラメータセットを書き込むよう構成され、そのうちの１つは、１つ以上のリフレッシュされたピクチャ領域（例えば、タイル）を含むリフレッシュサブエリア（例えば、ピクチャ領域のセット）に対応し、他の１つは、１つ以上のまだリフレッシュされていないピクチャ領域を含む未リフレッシュサブエリアに対応する。エンコーダは更に、データストリームに、リフレッシュ期間（ＲＰ）内の各ピクチャに対して、複数のピクチャ構成から対応する１つのピクチャ構成を識別するピクチャ構成識別子（ｒｅｇ＿ｃｏｎｆ＿ｉｄｘ）を設定するよう構成される。
【0011】
第２の態様は、少なくとも１つの漸進的デコーダリフレッシュ（ＧＤＲ）符号化ピクチャと、リフレッシュ期間（ＲＰ）における１つ以上の以降のピクチャとを含むピクチャのシーケンスを有し、ピクチャのシーケンスの各ピクチャは、各ピクチャが細分されるブロック（例えば、ＣＴＵ）の単位でビデオデータストリームに順次符号化される、ビデオデータストリームに関する。ビデオデータストリームは、暗黙的シグナリングを有し、各ピクチャのリフレッシュサブエリアは、ブロック符号化順に基づいてビデオデータストリームにおいて暗黙的に通知される。さらに又はあるいは、ビデオデータストリームは、各ブロックに対して、
ａ）ブロックは、各ピクチャの第１のサブエリアに配置され、最後に符号化された最後のブロックであり（例えば、ｆｌａｇ：ｌａｓｔ＿ｃｔｕ＿ｏｆ＿ｇｄｒ＿ｒｅｇｉｏｎ）、及び／又は、
ｂ）ブロックは、各ピクチャの第１のサブエリアに配置され、最初に符号化された最初のブロックであり（例えば、ｆｌａｇ：ｆｉｒｓｔ＿ｃｔｕ＿ｏｆ＿ｇｄｒ＿ｒｅｇｉｏｎ）、及び／又は、
ｃ）ブロックは、第１のサブエリアを制限するボーダに隣接し、及び／又は、
ｄ）ブロックは、第１のサブエリア（例えば、ｆｌａｇ：ｇｄｒ＿ｒｅｇｉｏｎ＿ｆｌａｇ）の内部に配置される、
か否かを示すシンタックス要素（例えば、フラグ）を有する。
【0012】
さらに、少なくとも１つの漸進的デコーダリフレッシュ（ＧＤＲ）符号化ピクチャと、リフレッシュ期間（ＲＰ）における１つ以上の以降のピクチャとを含むピクチャのシーケンスからの少なくとも１つのピクチャをデータストリームから復号化するデコーダであって、ピクチャのシーケンスの各ピクチャは、各ピクチャが細分されるブロック（例えば、ＣＴＵ）の単位でビデオデータストリームから順次復号化される、デコーダを提供することが提案される。デコーダは、データストリームから、ブロック符号化順に基づいて少なくとも１つのピクチャのリフレッシュサブエリアを暗黙的に導出するよう構成される。さらに又はあるいは、デコーダは、データストリームから、各ブロックに対して、
ａ）ブロックは、各ピクチャの第１のサブエリアに配置され、最後に符号化された最後のブロックであり（例えば、ｆｌａｇ：ｌａｓｔ＿ｃｔｕ＿ｏｆ＿ｇｄｒ＿ｒｅｇｉｏｎ）、及び／又は、
ｂ）ブロックは、各ピクチャの第１のサブエリアに配置され、最初に符号化された最初のブロックであり（例えば、ｆｌａｇ：ｆｉｒｓｔ＿ｃｔｕ＿ｏｆ＿ｇｄｒ＿ｒｅｇｉｏｎ）、及び／又は、
ｃ）ブロックは、第１のサブエリアを制限するボーダに隣接し、及び／又は、
ｄ）ブロックは、第１のサブエリア（例えば、ｆｌａｇ：ｇｄｒ＿ｒｅｇｉｏｎ＿ｆｌａｇ）の内部に配置される、
か否かを示すシンタックス要素（例えば、フラグ）を読むよう構成される。
【0013】
さらに、少なくとも１つの漸進的デコーダリフレッシュ（ＧＤＲ）符号化ピクチャと、リフレッシュ期間（ＲＰ）における１つ以上の以降のピクチャとを含むピクチャのシーケンスからの少なくとも１つのピクチャをデータストリームに符号化するエンコーダであって、ピクチャのシーケンスの各ピクチャは、各ピクチャが細分されるブロック（例えば、ＣＴＵ）の単位でビデオデータストリームに順次符号化される、エンコーダを提供することが提案される。エンコーダは、データストリームに、各ブロックに対して、
ａ）ブロックは、各ピクチャの第１のサブエリアに配置され、最後に符号化された最後のブロックであり（例えば、ｆｌａｇ：ｌａｓｔ＿ｃｔｕ＿ｏｆ＿ｇｄｒ＿ｒｅｇｉｏｎ）、及び／又は、
ｂ）ブロックは、各ピクチャの第１のサブエリアに配置され、最初に符号化された最初のブロックであり（例えば、ｆｌａｇ：ｆｉｒｓｔ＿ｃｔｕ＿ｏｆ＿ｇｄｒ＿ｒｅｇｉｏｎ）、及び／又は、
ｃ）ブロックは、第１のサブエリアを制限するボーダに隣接し、及び／又は、
ｄ）ブロックは、第１のサブエリア（例えば、ｆｌａｇ：ｇｄｒ＿ｒｅｇｉｏｎ＿ｆｌａｇ）の内部に配置される、
か否かを示すシンタックス要素（例えば、フラグ）を書き込むよう構成される。
【0014】
第３の態様は、第１のレイヤ（例えば、ベースレイヤ）におけるピクチャの第１のシーケンスと、第２のレイヤ（例えば、エンハンスメントレイヤ）におけるピクチャの第２のシーケンスとを有し、前記第２のレイヤにおけるピクチャの第２のシーケンスは、スタートピクチャとしての少なくとも１つの漸進的デコーダリフレッシュ（ＧＤＲ）ピクチャと、リフレッシュ期間（ＲＰ）における１つ以上の以降のピクチャとを含む、マルチレイヤ化されたスケーラブルビデオデータストリームに関する。マルチレイヤ化されたスケーラブルビデオデータストリームは、第２のレイヤのＧＤＲピクチャの未リフレッシュサブエリアが第１のレイヤのサンプルからレイヤ間予測される確率に関する情報を有する。さらに、マルチレイヤ化されたスケーラブルビデオデータは、
リフレッシュ期間に含まれる１つ以上の以降のピクチャの未リフレッシュサブエリアにおいて、動きベクトル予測が無効にされるか、又は動きベクトル予測が非時間的に実現される、又は、
ＧＤＲピクチャの未リフレッシュサブエリアにおいて、動きベクトル予測が無効にされるか、又は動きベクトル予測が非時間的に実現される、
という情報と、
を搬送する通知を有する。
【0015】
さらに、第１のレイヤ（例えば、ベースレイヤ）におけるピクチャの第１のシーケンスと、第２のレイヤ（例えば、エンハンスメントレイヤ）におけるピクチャの第２のシーケンスとを有するマルチレイヤ化されたスケーラブルビデオデータストリームから、少なくとも１つのピクチャを復号化するデコーダであって、第２のレイヤにおけるピクチャの第２のシーケンスは、スタートピクチャとしての少なくとも１つの漸進的デコーダリフレッシュ（ＧＤＲ）ピクチャと、リフレッシュ期間における１つ以上の以降のピクチャとを含む、デコーダを提供することが提案される。デコーダは、マルチレイヤ化されたスケーラブルビデオデータストリームから、第２のレイヤのＧＤＲピクチャの未リフレッシュサブエリアが第１のレイヤのサンプルからレイヤ間予測される確率に関する情報を搬送する通知を読むよう構成される。デコーダは更に、通知に応答して、動きベクトル予測を無効にするか、又は、リフレッシュ期間に含まれる１つ以上の以降のピクチャの未リフレッシュサブエリアにおいて、動きベクトル予測を非時間的に実現するよう構成されるか、又は、
動きベクトル予測を無効にするか、又は、ＧＤＲピクチャの未リフレッシュサブエリアにおいて、動きベクトル予測を非時間的に実現するよう構成される。
【0016】
さらに、第１のレイヤ（例えば、ベースレイヤ）におけるピクチャの第１のシーケンスと、第２のレイヤ（例えば、エンハンスメントレイヤ）におけるピクチャの第２のシーケンスとを有するマルチレイヤ化されたスケーラブルビデオデータストリームに、少なくとも１つのピクチャを符号化するエンコーダであって、第２のレイヤにおけるピクチャの第２のシーケンスは、スタートピクチャとしての少なくとも１つの漸進的デコーダリフレッシュ（ＧＤＲ）ピクチャと、リフレッシュ期間における１つ以上の以降のピクチャとを含む、エンコーダを提供することが提案される。エンコーダは、マルチレイヤ化されたスケーラブルビデオデータストリームに、第２のレイヤのＧＤＲピクチャの未リフレッシュサブエリアが第１のレイヤのサンプルからレイヤ間予測される確率に関する情報と、
リフレッシュ期間に含まれる１つ以上の以降のピクチャの未リフレッシュサブエリアにおいて、動きベクトル予測が無効にされるか、又は、動きベクトル予測が非時間的に実現される、又は、
ＧＤＲピクチャの未リフレッシュサブエリアにおいて、動きベクトル予測が無効にされるか、又は、動きベクトル予測が非時間的に実現される、
という情報と、を搬送する通知を書き込むよう構成される。
【0017】
第４の態様は、第１のレイヤ（例えば、ベースレイヤ）におけるピクチャの第１のシーケンスと、第２のレイヤ（例えば、エンハンスメントレイヤ）におけるピクチャの第２のシーケンスとを有し、第１及び第２のレイヤの各々は、複数の時間サブレイヤを有する、マルチレイヤ化されたスケーラブルビデオデータストリームに関する。スケーラブルビデオデータストリームは更に、第２のレイヤ（例えば、エンハンスメントレイヤ）の何れの時間サブレイヤがレイヤ間予測によって符号化されるかを示す通知（例えば、ｖｐｓ＿ｓｕｂ＿ｌａｙｅｒ＿ｉｎｄｅｐｅｎｄｅｎｔ＿ｆｌａｇ［ｉ］［ｊ］）を含む。
【0018】
さらに、第１のレイヤ（例えば、ベースレイヤ）におけるピクチャの第１のシーケンスと、第２のレイヤ（例えば、エンハンスメントレイヤ）におけるピクチャの第２のシーケンスとを有するマルチレイヤ化されたスケーラブルビデオデータストリームから、少なくとも１つのピクチャを復号化するデコーダであって、第１及び第２のレイヤの各々は、複数の時間サブレイヤを有する、デコーダを提供することが提案される。デコーダは、スケーラブルビデオデータストリームから導出される通知に基づいて、レイヤ間予測を利用することによって時間サブレイヤの１つ以上を復号化するよう構成され、通知（例えば、ｖｐｓ＿ｓｕｂ＿ｌａｙｅｒ＿ｉｎｄｅｐｅｎｄｅｎｔ＿ｆｌａｇ［ｉ］［ｊ］）は、第２のレイヤ（例えば、エンハンスメントレイヤ）の何れの時間サブレイヤがレイヤ間予測によって符号化されるかを示す。
【0019】
さらに、第１のレイヤ（例えば、ベースレイヤ）におけるピクチャの第１のシーケンスと、第２のレイヤ（例えば、エンハンスメントレイヤ）におけるピクチャの第２のシーケンスとを有するマルチレイヤ化されたスケーラブルビデオデータストリームに、少なくとも１つのピクチャを符号化するエンコーダであって、第１及び第２のレイヤの各々は、複数の時間サブレイヤを有する、エンコーダを提供することが提案される。エンコーダは、レイヤ間予測を利用することによって時間サブレイヤの１つ以上を符号化し、スケーラブルビデオデータストリームに通知を書き込むよう構成され、通知（例えば、ｖｐｓ＿ｓｕｂ＿ｌａｙｅｒ＿ｉｎｄｅｐｅｎｄｅｎｔ＿ｆｌａｇ［ｉ］［ｊ］）は、第２のレイヤ（例えば、エンハンスメントレイヤ）の何れの時間サブレイヤがレイヤ間予測によって符号化されるかを示す。
【0020】
第５の態様は、ビデオデータストリームであって、タイルに細分される少なくとも１つのピクチャと、タイルリオーダリングフラグと、を有し、
ａ）データストリームにおけるタイルリオーダリングフラグ（例えば、ｓｐｓ＿ｅｎｆｏｒｃｅ＿ｒａｓｔｅｒ＿ｓｃａｎ＿ｆｌａｇ）が第１の状態を有する場合、ピクチャのタイルがピクチャをタイル毎に探索する第１の符号化順を利用して符号化されることが通知され、及び／又は、
ｂ）データストリームにおけるタイルリオーダリングフラグが第２の状態を有する場合、ピクチャのタイルがピクチャをラスタスキャン順に探索する第２の符号化順を利用して符号化されることが通知される、ビデオデータストリームに関する。
【0021】
さらに、データストリームからピクチャを復号化するよう構成されるデコーダであって、
ａ）データストリームにおけるタイルリオーダリングフラグ（例えば、ｓｐｓ＿ｅｎｆｏｒｃｅ＿ｒａｓｔｅｒ＿ｓｃａｎ＿ｆｌａｇ）が第１の状態を有する場合、デコーダは、ピクチャをタイル毎に探索する第１の復号化順を利用してデータストリームからピクチャのタイルを復号化するよう構成され、及び／又は、
ｂ）データストリームにおけるタイルリオーダリングフラグが第２の状態を有する場合、デコーダは、ピクチャをラスタスキャン順に探索する第２の復号化順を利用してデータストリームからピクチャのタイルを復号化するよう構成される、デコーダを提供することが提案される。
【0022】
さらに、ピクチャをデータストリームに符号化するよう構成されるエンコーダであって、
ａ）エンコーダは、データストリームにおけるタイルリオーダリングフラグ（例えば、ｓｐｓ＿ｅｎｆｏｒｃｅ＿ｒａｓｔｅｒ＿ｓｃａｎ＿ｆｌａｇ）を、ピクチャのタイルがピクチャをタイル毎に探索する第１の符号化順を利用して符号化されることを示す第１の状態に設定するよう構成され、
ｂ）エンコーダは、データストリームにおけるタイルリオーダリングフラグを、ピクチャのタイルがピクチャをラスタスキャン順に探索する第２の符号化順を利用して符号化されることを示す第２の状態に設定するよう構成される、エンコーダを提供することが提案される。
【図面の簡単な説明】
【0023】
以下において、本開示の実施例が図面を参照してより詳細に説明される。
【図1】一実施例による漸進的復号化リフレッシュコンセプトの概略図を示す。
【図2】一実施例による漸進的復号化リフレッシュコンセプトの概略図を示す。
【図3】一実施例によるピクチャ領域のカラムを利用した漸進的復号化リフレッシュコンセプトの概略図を示す。
【図4】一実施例によるピクチャ領域のローを利用した漸進的復号化リフレッシュコンセプトの概略図を示す。
【図5】一実施例によるピクチャ領域のパケットを利用した漸進的復号化リフレッシュコンセプトの概略図を示す。
【図6】一実施例によるスケーラブルマルチレイヤビデオビットストリームを利用した漸進的復号化リフレッシュコンセプトの概略図を示す。
【図7】一実施例による複数の時間サブレイヤを有するスケーラブルビデオビットストリームを利用した漸進的復号化リフレッシュコンセプトの概略図を示す。
【発明を実施するための形態】
【0024】
以下の説明では、同等又は等価な機能を有する同等又は等価な要素が、同等又は等価な参照番号によって示される。
【0025】
ブロック図によって示され、ブロック図を参照して説明される方法ステップは、図示及び／又は説明される順序と異なる順序で実行されてもよい。さらに、デバイスの特定の特徴に関する方法ステップは、当該デバイスの特徴と置き換え可能であってもよく、他の方法で置き換え可能であってもよい。
【0026】
さらに、本開示において、フレーム及びピクチャという用語は、互換的に利用されてもよい。
【0027】
図１は、クリーンピクチャを実現するため、いくつかのピクチャが復号される必要があり、コンテンツが適切に表示されるまで、ビデオエリアが徐々に復号化及びリフレッシュ化されるという事実において、従来の符号化構造と異なる漸進的復号化リフレッシュ（ＧＤＲ）符号化構造の具体例を示す。対照的に、従来の符号化構造では、特定の形式のイントラフレーム（ランダムアクセスポイント－ＲＡＰ）のみが存在することが必要とされ、コンテンツは、より多くのアクセスユニットを復号化する必要なく即座に表示可能である。
【0028】
図１は、連続した順序によるピクチャ１０１１，１０１２，・・・，１０１ｎのシーケンス１００を示す。各ピクチャ１０１１，１０１２，・・・，１０１ｎは、例えば、タイルなどのピクチャ領域１０２に分割されてもよい。タイル１０２は、イントラ符号化１０２ａ又はインター符号化１０２ｂされてもよい。イントラ符号化されたピクチャ領域１０２ａは、デコーダがビットストリームへのアクセスを開始し、漸進的復号化リフレッシュ（ＧＤＲ）原理に従ってピクチャ全体のリフレッシュ処理を開始しうるアクセスを提供してもよい。従って、そのようなイントラ符号化ピクチャ領域１０２ａを含むフレーム又はピクチャはまた、アクセスユニット（ＡＵ）と呼ばれてもよい。
【0029】
イントラ符号化ピクチャ領域１０２ａを含むピクチャは、ＧＤＲピクチャ１０３と呼ばれてもよい。本例では、１つおきのピクチャが、ＧＤＲピクチャ１０３であってもよい。従って、本例では、ＧＤＲデルタは２である。イントラ符号化されたピクチャ領域（すなわち、イントラ符号化ピクチャ領域１０２ａ）はそれぞれ、リフレッシュされたピクチャ領域又はクリーンピクチャ領域と呼ばれてもよい。アクセス後にまだ符号化されていないピクチャ領域はそれぞれ、非リフレッシュピクチャ領域又はダーティピクチャ領域と呼ばれてもよい。
【0030】
変形例Ａ：フルＭＣＴＳベース
リフレッシュ期間（ＲＰ）は、全てのピクチャ領域１０２がリフレッシュされ、クリーンピクチャが表示可能になるまで待機される必要がある時間間隔である。このようなビットストリームを構成する異なる形式がある。図１では、（９つのタイル×１つおきのフレームにおける新たなリフレッシュされたタイル－１）＝１７フレームがリフレッシュ期間（ＲＰ）であり、すなわち、全てのピクチャ領域１０２がリフレッシュされるまでのフレームの数である。
【0031】
さらに、本例では、ＧＤＲピクチャ１０３は、１つおきのピクチャ、すなわち、デコーダがビットストリームへのアクセスを開始し、完全なＲＰの後に完全なピクチャを復号化することが可能なピクチャごとに存在してもよい。これは、例えば、ＨＥＶＣにおいてＭＣＴＳと呼ばれる、全てのピクチャ領域１０２を経時的に独立して符号化し、上記の例では、ピクチャ領域１０２間で２フレームの距離でイントラ符号化されたブロック１０２ａを時間的に拡散することによって実現することができる。
【0032】
変形例Ｂ：制限されたタイル間（添付された図２を参照し、また上述されたものを参照されたい）
図２は、ＧＤＲフレーム１０３を１８フレーム毎に有し、領域間の依存性（ｎｏ－ＭＣＴＳ）を許容するが、以前にリフレッシュされた領域への依存性のみを許容することによってＧＤＲ構造が実現可能な更なる構成を示す。この場合、１つの領域のみがイントラブロックによりリフレッシュされ、更なる領域は、時間的にリフレッシュされた領域を参照することができる。これは、領域が完全なＭＣＴＳによっては符号化されていないため、第１の表示された構成としてより良い効率を可能にする。
【0033】
図２に示される非限定的な例では、リフレッシュ期間（ＲＰ）は１７フレームを含む一方、１８ピクチャ毎にＧＤＲピクチャ１０３が存在する。
【0034】
変形例Ｃ：カラムベース
図３は、１７フレームがリフレッシュ期間（ＲＰ）である一方、ＧＤＲピクチャ１０３が１８ピクチャ毎に存在する更なる非限定的な例を示す。図から理解されるように、本例におけるイントラ符号化されたピクチャ領域１０２ａは、上述されたピクチャタイルの代わりにピクチャカラムを含んでもよい。
【0035】
変形例Ｄ：ローベース
図４は、１７フレームがリフレッシュ期間（ＲＰ）である一方、ＧＤＲピクチャ１０３が１８ピクチャ毎に存在する更なる非限定的な例を示す。図から理解されるように、本例におけるイントラ符号化されたピクチャ領域１０２ａは、上述されたピクチャタイルの代わりにピクチャローを含んでもよい。
【0036】
要約すると、上述されたＧＤＲの非限定的な具体例の変形の全てに対して、ＲＰは１７であってもよく、ＧＤＲ周期は、以下のテーブルに示されるように、Δ＝２又はΔ＝１８であってもよい。
【表1】
【0037】
ＧＤＲ技術を評価するための更なる重要な態様は、ピクチャを表示するために必要とされる同調時間（ｔｕｎｅ－ｉｎ ｔｉｍｅ）であり、これは、ＲＰと、ＧＤＲピクチャ１０３が検出されるまでに待機する必要がある時間とを加えたものから構成される。上のテーブルは、平均及びワーストケースの同調時間を示している。
【0038】
異なるＧＤＲシナリオの問題
１）上述したように、構成Ａは、領域がＭＣＴＳとして符号化されているため、同じＲＰに対してワーストな符号化効率を有する構成である。しかしながら、このような構成の同調時間は、何れかの構成Ｂ～Ｄよりもはるかに小さい。符号化効率を損なうことなく、同調時間（平均又はワーストケースの何れか）を短縮することを可能にする機構が望ましい。
【0039】
２）Ｂ～Ｃから分かるように、領域は静的な方法で規定されなくてもよく、従って、例えば、タイルなどのある程度独立した領域を使用することのシグナリングオーバヘッド及び効率ペナルティを低減する。しかしながら、何れの領域がクリーン（リフレッシュされた）であり、何れの領域がまだリフレッシュされていないかの識別は明確ではなく、従って、イントラ予測は、まだクリーンでない（ダーティ）領域とクリーン領域との間で容易に制限することはできないなど、いくつかのペナルティを伴う。
【0040】
１．動的なＧＤＲ領域シグナリング
ピクチャからピクチャへの領域変更の問題（すなわち、未リフレッシュピクチャ領域からリフレッシュピクチャ領域への変更）を解決するため、ピクチャ毎に更新されたＰＰＳを送信する必要があるという負担を回避するため、２つの発明的なアプローチが想定可能である。
【0041】
第１の発明的アプローチでは、例えば、タイル形式など、ピクチャ領域のいくつかの構成が、ＳＰＳ（Ｓｅｑｕｅｎｃｅ Ｐａｒａｍｅｔｅｒ Ｓｅｔ）又はＰＰＳ（Ｐｉｃｔｕｒｅ Ｐａｒａｍｅｔｅｒ Ｓｅｔ）内でシグナリングされてもよく、スライスヘッダは、何れが所与のＡＵ（Ａｃｃｅｓｓ Ｕｎｉｔ）に対して利用されるタイル構成であるかを示すためのインデックスを指示してもよい。従って、リフレッシュ及び未リフレッシュピクチャ領域の動的なシグナリングが、本発明のアプローチに提供されてもよい。
【表2】
【0042】
本開示では、ピクチャ領域は、フレーム１０１全体又はピクチャ１０１を含んでもよい。ピクチャエリアは、ピクチャサブエリアに分割されてもよい。図２の第４のフレームに例示的に示されるように、第１のピクチャサブエリア１０１ｒは、リフレッシュピクチャ領域１０２ｒのみを含んでもよい。従って、この第１のピクチャサブエリア１０１ｒは、リフレッシュピクチャサブエリア１０１ｒと呼ばれてもよい。他方、第２のピクチャサブエリア１０１ｕは、未リフレッシュピクチャ領域１０２ｕのみを含んでもよい。従って、この第２のピクチャサブエリア１０１ｕは、未リフレッシュピクチャサブエリア１０１ｕと呼ばれてもよい。ピクチャ領域１０２は、一般に、ピクチャタイル（図１及び図２）、ピクチャタイルカラム（図３）、ピクチャタイルライン（図４）、符号化ブロック（例えば、ＣＴＵ）、符号化ブロックライン、符号化ブロックロー、符号化ブロック対角要素（ｄｉａｇｏｎａｌ）、サンプル、サンプルのロー、又はサンプルのカラムの少なくとも１つを含んでもよい。リフレッシュピクチャ領域１０２ｒは、リフレッシュピクチャタイル（図１及び図２）、リフレッシュピクチャタイルカラム（図３）、リフレッシュピクチャタイルライン（図４）、リフレッシュ符号化ブロック（例えば、ＣＴＵ）、リフレッシュ符号化ブロックライン、リフレッシュ符号化ブロックロー、リフレッシュ符号化ブロック対角要素、リフレッシュサンプル、リフレッシュサンプルロー、又はリフレッシュサンプルカラムの少なくとも１つを含んでもよい。未リフレッシュピクチャ領域１０２ｕは、未リフレッシュピクチャタイル（図１及び図２）、未リフレッシュピクチャタイルカラム（図３）、未リフレッシュピクチャタイルライン（図４）、未リフレッシュ符号化ブロック（例えば、ＣＴＵ）、未リフレッシュ符号化ブロックライン、未リフレッシュ符号化ブロックロー、未リフレッシュ符号化ブロック対角要素、未リフレッシュサンプル、未リフレッシュサンプルロー、又は未リフレッシュサンプルカラムの少なくとも１つを含んでもよい。
【0043】
本発明の第１の態様の実施例によると、少なくとも１つの漸進的デコーダリフレッシュ（Ｇｒａｄｕａｌ Ｄｅｃｏｄｅｒ Ｒｅｆｒｅｓｈ（ＧＤＲ））符号化ピクチャ１０３と、リフレッシュ期間ＲＰにおける１つ以上の以降のピクチャとを含むピクチャ１０１１，１０１２，・・・，１０１ｎのシーケンス１００を有するビデオデータストリームが提供されてもよい。ビデオデータストリームは更に、ピクチャエリア１０１（例えば、フレーム全体）を第１のサブエリア１０１ｒ（例えば、タイル、ロー、カラムなどを有する第１の１つ以上のピクチャ領域１０２）及び第２のサブエリア１０１ｕ（例えば、タイル、ロー、カラムなどを有する第２の１つ以上のピクチャ領域１０２）に細分する複数のピクチャ構成を規定するパラメータセット（例えば、ＳＰＳ又はＰＰＳ）を有し、一方のサブエリアは１つ以上のリフレッシュピクチャ領域（例えば、タイル）（のセット）を有するリフレッシュサブエリア１０１ｒに対応し、他方のサブエリア１０１ｕは１つ以上の未リフレッシュピクチャ領域（のセット）を有する未リフレッシュサブエリア１０１に対応する。本発明の原理によると、ビデオデータストリームは、リフレッシュ期間ＲＰ内の各ピクチャ１０１１，１０１２，・・・，１０１ｎに対して、複数のピクチャ構成から対応する１つのピクチャ構成を識別するためのピクチャ構成識別子（例えば、ｒｅｇｉｏｎ＿ｃｏｎｆｉｇｕｒａｔｉｏｎ＿ｉｄｘ）を有する。
【0044】
更なる実施例によると、少なくとも１つの漸進的デコーダリフレッシュ（ＧＤＲ）符号化ピクチャ１０３と、リフレッシュ期間（ＲＰ）における１つ以上の以降のピクチャ１０１２，・・・，１０１ｎとを含むピクチャ１０１１，１０１２，・・・，１０１ｎのシーケンス１００からの少なくとも１つのピクチャをデータストリームから復号化する対応するデコーダであって、デコーダは、データストリームから、ピクチャエリア（例えば、フレーム全体）１０１を第１のサブエリア１０１ｒ及び第２のサブエリア１０１ｕに細分する複数のピクチャ構成を規定するパラメータセット（例えば、ＰＰＳ又はＳＰＳ）を読むよう構成され、そのうちの１つは、１つ以上のリフレッシュされたピクチャ領域（例えば、リフレッシュされたタイル）１０２ｒを含むリフレッシュサブエリア（例えば、リフレッシュされたピクチャ領域のセット）１０１ｒに対応し、他の１つは、１つ以上のまだリフレッシュされていないピクチャ領域１０２ｕを含む未リフレッシュサブエリア１０１ｕに対応する、デコーダを提供することが提案される。デコーダは更に、データストリームから、リフレッシュ期間（ＲＰ）内の各ピクチャ１０１１，１０１２，・・・，１０１ｎに対して、少なくとも１つのピクチャ１０１１，１０１２，・・・，１０１ｎを復号化するための複数のピクチャ構成から対応する１つのピクチャ構成を識別するピクチャ構成識別子（ｒｅｇｉｏｎ＿ｃｏｎｆｉｇｕｒａｔｉｏｎ＿ｉｄｘ）を読むよう構成されてもよい。
【0045】
更なる実施例によると、少なくとも１つの漸進的デコーダリフレッシュ（ＧＤＲ）符号化ピクチャ１０３と、リフレッシュ期間（ＲＰ）における１つ以上の以降のピクチャ１０１２，・・・，１０１ｎとを含むピクチャ１０１１，１０１２，・・・，１０１ｎのシーケンス１００からの少なくとも１つのピクチャをデータストリームに符号化する対応するエンコーダであって、エンコーダは、データストリームに、ピクチャエリア１０１を第１のサブエリア１０１ｒ及び第２のサブエリア１０１ｕに細分する複数のピクチャ構成を規定するパラメータセットを書き込むよう構成され、そのうちの１つは、１つ以上のリフレッシュされたピクチャ領域１０２ｒを含むリフレッシュサブエリア１０１ｒに対応し、他の１つは、１つ以上のまだリフレッシュされていないピクチャ領域１０２ｕを含む未リフレッシュサブエリア１０１ｕに対応する、エンコーダを提供することが提案される。エンコーダは更に、データストリームに、リフレッシュ期間（ＲＰ）内の各ピクチャ１０１１，１０１２，・・・，１０１ｎに対して、少なくとも１つのピクチャ１０１１，１０１２，・・・，１０１ｎを復号化するための複数のピクチャ構成から対応する１つのピクチャ構成を識別するピクチャ構成識別子を設定するよう構成される。
【0046】
更なる実施例によると、少なくとも１つの漸進的デコーダリフレッシュ（ＧＤＲ）符号化ピクチャ１０３と、リフレッシュ期間（ＲＰ）における１つ以上の以降のピクチャ１０１２，・・・，１０１ｎとを含むピクチャ１０１１，１０１２，・・・，１０１ｎのシーケンス１００からの少なくとも１つのピクチャをデータストリームから復号化する対応する方法であって、方法は、データストリームから、ピクチャエリア１０１を第１のサブエリア１０１ｒ及び第２のサブエリア１０１ｕに細分する複数のピクチャ構成を規定するパラメータセットを読むステップであって、そのうちの１つは、１つ以上のリフレッシュされたピクチャ領域１０２ｒを含むリフレッシュサブエリア１０１ｒに対応し、他の１つは、１つ以上のまだリフレッシュされていないピクチャ領域１０２ｕを含む未リフレッシュサブエリア１０１ｕに対応する、読むステップを有する方法を提供することが提案される。方法は更に、データストリームから、リフレッシュ期間（ＲＰ）内の各ピクチャ１０１１，１０１２，・・・，１０１ｎに対して、少なくとも１つのピクチャ１０１１，１０１２，・・・，１０１ｎを復号化するための複数のピクチャ構成から対応する１つのピクチャ構成を識別するピクチャ構成識別子を読むステップを有する。
【0047】
更なる実施例によると、少なくとも１つの漸進的デコーダリフレッシュ（ＧＤＲ）符号化ピクチャ１０３と、リフレッシュ期間（ＲＰ）における１つ以上の以降のピクチャ１０１２，・・・，１０１ｎとを含むピクチャ１０１１，１０１２，・・・，１０１ｎのシーケンス１００からの少なくとも１つのピクチャをデータストリームに符号化する方法であって、方法は、データストリームに、ピクチャエリア１０１を第１のサブエリア１０１ｒ及び第２のサブエリア１０１ｕに細分する複数のピクチャ構成を規定するパラメータセットを書き込むステップであって、そのうちの１つは、１つ以上のリフレッシュされたピクチャ領域１０２ｒを含むリフレッシュサブエリア１０１ｒに対応し、他の１つは、１つ以上のまだリフレッシュされていないピクチャ領域１０２ｕを含む未リフレッシュサブエリア１０１ｕに対応する、書き込むステップを有する、方法を提供することが提案される。方法は更に、データストリームに、リフレッシュ期間（ＲＰ）内の各ピクチャ１０１１，１０１２，・・・，１０１ｎに対して、複数のピクチャ構成から対応する１つのピクチャ構成を識別するピクチャ構成識別子を設定するステップを有する。
【0048】
上述したように、ピクチャ１０１１，１０１２，・・・，１０１ｎのシーケンス１００は、イントラ予測が第１のサブエリア１０１ｒと第２のサブエリア１０１ｕとの間の境界を横切らないようにして符号化されてもよい。さらに又はあるいは、ピクチャ１０１１，１０１２，・・・，１０１ｎのシーケンス１００は、リフレッシュサブエリア１０１ｒの時間予測が未リフレッシュサブエリア１０１ｕを参照しないようにして符号化されてもよい。さらに又はあるいは、ピクチャ１０１１，１０１２，・・・，１０１ｎのシーケンス１００は、コンテクストモデル導出が第１のサブエリア１０１ｒと第２のサブエリア１０１ｕとの間の境界を横切らないようにして符号化されてもよい。
【0049】
効果的な実施例によると、対応する１つのピクチャ構成は、ピクチャのシーケンス１００の現在符号化されているピクチャ１０１１，１０１２，・・・，１０１ｎに含まれるリフレッシュピクチャ領域１０２ｒ及び未リフレッシュピクチャ領域１０２ｕを示す。
【0050】
更なる効果的な実施例によると、複数のピクチャ構成からの各ピクチャ構成は、何れのピクチャ領域１０２がリフレッシュピクチャ領域１０２ｒであり、何れのピクチャ領域１０２が未リフレッシュピクチャ領域１０２ｕであるかを通知するための領域インデックスセットを有してもよい。これは、リフレッシュ及び未リフレッシュピクチャ領域１０２ｒ，１０２ｕの明示的なシグナリングを提供する。
【0051】
例えば、図１及び図２を参照して図示及び上述されたように、ピクチャのシーケンス１００に含まれるピクチャ１０１１，１０１２，・・・，１０１ｎは、１つ以上のタイル１０２に細分されてもよい。この場合、複数のピクチャ構成からの各ピクチャ構成は、何れのピクチャタイル１０２がリフレッシュピクチャタイル１０２ｒであり、何れのピクチャタイル１０２が未リフレッシュピクチャタイル１０２ｕであるかを通知するためのタイルインデックスセットを有してもよい。従って、一実施例では、領域構成は、タイルインデックスセットを含んでもよい。
【0052】
更なる実施例によると、図３を参照して例示的に説明したように、ピクチャのシーケンス１００に含まれるピクチャ１０１１，１０１２，・・・，１０１ｎは、ピクチャタイルカラムに細分されてもよく、複数のピクチャ構成からの各ピクチャ構成は、何れのピクチャカラムがリフレッシュピクチャカラム１０２ｒであり、及び／又は、何れのピクチャカラムが未リフレッシュピクチャカラム１０２ｕであるかを通知するための少なくとも１つのカラムインデックスを有する。従って、領域構成は、タイルカラムインデックスを含んでもよい。
【0053】
更なる実施例によると、図４を参照して例示的に説明したように、ピクチャのシーケンス１００に含まれるピクチャ１０１１，１０１２，・・・，１０１ｎは、ピクチャタイルローに細分されてもよく、複数のピクチャ構成からの各ピクチャ構成は、何れのピクチャローがリフレッシュピクチャロー１０２ｒであり、及び／又は、何れのピクチャローが未リフレッシュピクチャロー１０２ｕであるかを通知するための少なくとも１つのローインデックスを有する。従って、領域構成は、タイルローインデックスを含んでもよい。
【0054】
ピクチャ領域はまた、例えば、ＣＴＵ（Ｃｏｄｉｎｇ Ｔｒｅｅ Ｕｎｉｔ）などの符号化ブロックによって表現されてもよい。
【0055】
更なる実施例によると、ピクチャのシーケンス１００に含まれるピクチャ１０１１，１０１２，・・・，１０１ｎは、符号化ブロック（例えば、ＣＴＵ）のローに細分されてもよく、複数のピクチャ構成からの各ピクチャ構成は、何れの符号化ブロックのローが符号化ブロックのリフレッシュロー１０２ｒであり、及び／又は、何れの符号化ブロックのローが符号化ブロックの未リフレッシュロー１０２ｕであるかを通知するための少なくとも１つのロー符号化ブロックインデックスを有してもよい。従って、領域構成は、ＣＴＩローインデックスを含んでもよい。
【0056】
更なる実施例によると、ピクチャのシーケンス１００に含まれるピクチャ１０１１，１０１２，・・・，１０１ｎは、符号化ブロック（例えば、ＣＴＵ）のカラムに細分されてもよく、複数のピクチャ構成からの各ピクチャ構成は、何れの符号化ブロックのカラムが符号化ブロックのリフレッシュカラム１０２ｒであり、及び／又は、何れの符号化ブロックのカラムが符号化ブロックの未リフレッシュカラム１０２ｕであるかを通知するための少なくとも１つのカラム符号化ブロックインデックスを有してもよい。従って、領域構成は、ＣＴＩカラムインデックスを含んでもよい。
【0057】
更なる実施例によると、ピクチャのシーケンス１００に含まれるピクチャ１０１１，１０１２，・・・，１０１ｎは、符号化ブロック（例えば、ＣＴＵ）の対角要素に細分されてもよく、複数のピクチャ構成からの各ピクチャ構成は、何れの符号化ブロックの対角要素が符号化ブロックのリフレッシュ対角要素１０２ｒであり、及び／又は、何れの符号化ブロックの対角要素が符号化ブロックの未リフレッシュ対角要素１０２ｕであるかを通知するための少なくとも１つの対角要素符号化ブロックインデックスを有してもよい。従って、領域構成は、ＣＴＩ対角要素の１つ以上のインデックスを含んでもよい。
【0058】
ピクチャ領域はまた、サンプルによって表現されてもよい。
【0059】
更なる実施例によると、ピクチャのシーケンス１００に含まれるピクチャ１０１１，１０１２，・・・，１０１ｎは、サンプルのローに細分されてもよく、複数のピクチャ構成からの各ピクチャ構成は、何れのサンプルのローがサンプルのリフレッシュロー１０２ｒであり、及び／又は、何れのサンプルのローがサンプルの未リフレッシュロー１０２ｕであるかを通知するための少なくとも１つのサンプルローインデックスを有してもよい。従って、領域構成は、１つ以上のサンプルローインデックスを含んでもよい。
【0060】
更なる実施例によると、ピクチャのシーケンス１００に含まれるピクチャ１０１１，１０１２，・・・，１０１ｎは、サンプルのカラムに細分されてもよく、複数のピクチャ構成からの各ピクチャ構成は、何れのサンプルのカラムがサンプルのリフレッシュカラム１０２ｒであり、及び／又は、何れのサンプルのカラムがサンプルの未リフレッシュカラム１０２ｕであるかを通知するための少なくとも１つのサンプルカラムインデックスを有してもよい。従って、領域構成は、１つ以上のサンプルカラムインデックスを含んでもよい。
【0061】
また更なる実施例によると、対応する１つのピクチャ構成は、ビデオデータストリームのスライスヘッダ及び／又はアクセスユニットデリミッタにおいて通知されてもよい。
【0062】
そのとき、スライスヘッダは、何れの構成が利用されるかを示す。
【表3】
【0063】
さらに又はあるいは、利用される領域構成に関する情報は、アクセスユニットデリミッタ（ＡＵＤ）に含まれる。
【0064】
更なる実施例によると、少なくとも１つの漸進的デコーダリフレッシュ（ＧＤＲ）符号化ピクチャ１０３と、リフレッシュ期間（ＲＰ）における１つ以上の以降のピクチャ１０１２，・・・，１０１ｎとを含むピクチャ１０１１，１０１２，・・・，１０１ｎのシーケンス１００を有するビデオデータストリームを提供することが提案される。ピクチャ１０１１，１０１２，・・・，１０１ｎのシーケンス１００の各ピクチャは、各ピクチャが細分されるブロック１０２（例えば、ＣＴＵ）の単位でビデオデータストリームに順次符号化されてもよい。ビデオデータストリームは、暗黙的シグナリングを有し、各ピクチャ１０１１，１０１２，・・・，１０１ｎのリフレッシュサブエリア１０１ｒは、ブロック符号化順に基づいてビデオデータストリームにおいて暗黙的に通知される。
【0065】
また、各自のデコーダ、すなわち、少なくとも１つの漸進的デコーダリフレッシュ（ＧＤＲ）符号化ピクチャ１０３と、リフレッシュ期間（ＲＰ）における１つ以上の以降のピクチャとを含むピクチャ１０１１，１０１２，・・・，１０１ｎのシーケンス１００からの少なくとも１つのピクチャをデータストリームから復号化するデコーダが提案される。ピクチャ１０１１，１０１２，・・・，１０１ｎのシーケンス１００の各ピクチャは、各ピクチャが細分されるブロック１０２（例えば、ＣＴＵ）の単位でビデオデータストリームから順次復号化されてもよい。デコーダは、データストリームから、ブロック符号化順に基づいて少なくとも１つのピクチャのリフレッシュサブエリア１０２ｒを暗黙的に導出するよう構成されてもよい。
【0066】
また、各自のエンコーダ、すなわち、少なくとも１つの漸進的デコーダリフレッシュ（ＧＤＲ）符号化ピクチャ１０３と、リフレッシュ期間（ＲＰ）における１つ以上の以降のピクチャとを含むピクチャ１０１１，１０１２，・・・，１０１ｎのシーケンス１００からの少なくとも１つのピクチャをデータストリームに符号化するエンコーダが提案される。ピクチャ１０１１，１０１２，・・・，１０１ｎのシーケンス１００の各ピクチャは、各ピクチャが細分されるブロック１０２（例えば、ＣＴＵ）の単位でビデオデータストリームに順次符号化されてもよい。エンコーダは、ブロック符号化順に基づいて少なくとも１つのピクチャのリフレッシュサブエリア１０１ｒをデータストリームから暗黙的に導出するよう構成されてもよい。
【0067】
従って、本アプローチでは、領域境界のＣＴＵベースシグナリングが利用されてもよい。各ＣＴＵ（ピクチャ領域）１０２は、それがＧＤＲ領域１０３の最後のＣＴＵ１０２であるか否かを示すフラグ（ＣＡＢＡＣ符号化可能である）を含んでもよい。このシグナリングは、例えば、イントラ予測及び／又はＣＡＢＡＣリセットに対するサンプルの可用性に影響を与える。このようなアプローチの効果は、それがパラメータセットに規定される固定的なグリッドに限定されず、よりフレキシブルであることである。
【0068】
従って、実施例によると、シンタックス要素は、ピクチャ１０１１，１０１２，・・・，１０１ｎのシーケンス１００からのピクチャ１０１のリフレッシュサブエリア１０１ｒと未リフレッシュサブエリア１０１ｕとの間の境界を示すためのものであり、及び／又は、何れのサブエリアがリフレッシュサブエリア１０１ｒであり、何れのサブエリアが未リフレッシュサブエリア１０１ｕであるかを示すためのものである。
【表4】
【0069】
それがＧＤＲ領域１０３における最後のＣＴＵであるか否かを示す各ＣＴＵ１０２によると、領域における最後のＣＴＵ１０２がロー又はカラムに関して最後のＣＴＵ１０２を意味するか識別することが効果的である。このような指示は、例えば、ＳＰＳなどのパラメータセットにおいて実行されてもよい。
【表5】
【0070】
例えば、１に等しいフラグ“ｒｅｇｉｏｎ＿ｈｏｒｉｚｏｎｔａｌ＿ｆｌａｇ”は、ＣＴＵにおける最後のＣＴＵフラグが水平方向の分割を示し、そうでない場合、垂直方向の分割を示す。
【0071】
従って、更なる実施例によると、ビデオデータストリーム、エンコーダ及びデコーダが提案され、シンタックス要素が、
ａ）ブロック１０２は各ピクチャ１０１のリフレッシュサブエリア１０１ｒに配置され、最後に符号化された最後のブロックであることを示す場合、ビデオデータストリームは、
ａ１）ブロック１０２は、リフレッシュサブエリア１０１ｒのブロック１０２の１つ以上のローの最後に符号化されたブロックであるか、又は、
ａ２）ブロック１０２は、リフレッシュサブエリア１０１ｒのブロック１０２のブロック１０２の１つ以上のカラムの最後に符号化されたブロックである、
か否かを示すための更なるシンタックス要素（例えば、ｒｅｇｉｏｎ＿ｈｏｒｉｚｏｎｔａｌ＿ｆｌａｇ）を有する。
【0072】
更なる実施例によると、更なるシンタックス要素は、最後のブロックが、各ピクチャ１０１がブロック１０２に細分される符号化分割ツリーの水平方向の分割（例えば、ｒｅｇｉｏｎ＿ｈｏｒｉｚｏｎｔａｌ＿ｆｌａｇ＝１）又は垂直方向の分割から導出されるか否かを示してもよい。
【0073】
更なる実施例では、領域がイントラ予測分割であるか、すなわち、他の領域の近傍が予測またはＣＡＢＡＣなどに利用可能でないかが通知されてもよい。従って、ビデオデータストリームは、例えば、近傍ピクチャ領域１０２ｕが未リフレッシュサブエリア１０１ｕに含まれている場合、近傍ピクチャ領域１０２ｕの近傍ブロック１０２が予測に利用可能でないことを示すためのイントラ予測分割通知を有してもよい。
【0074】
上記で規定された双方のケースでは、利用される領域のグリッドは、ＣＴＵサイズに揃えられてもよい。すなわち、リフレッシュサブエリア１０１ｒは、各ピクチャ１０１が細分されるブロックのサイズと揃えられるグリッドに配置される１つ以上のリフレッシュピクチャ領域１０２ｒを有してもよい。
【0075】
ここまで説明された実施例では、領域の何れがリフレッシュ（クリーン）領域であるか、またリフレッシュでない（ダーティ）領域であるかは、必ずしも知られている必要はない。この場合、全ての領域は、以下の側面の全て又は一部において互いに“独立”していると考えられる。
・イントラ予測分割、すなわち、他の領域の近傍が予測に利用可能でない
・空間／時間ＭＶ予測
・ＣＡＢＡＣ
【0076】
あるいは、シグナリングは、最左領域１０１ｒがクリーン領域であり、イントラブロックの可用性が当該領域に制限される、すなわち、最左領域におけるブロック１０２が以下の側面の全て又は一部について他の（非最左）領域のブロックを利用できないことを暗黙的に通知する。
・イントラ予測分割、すなわち、他の領域の近傍が予測に利用可能でない
・空間／時間ＭＶ予測
・ＣＡＢＡＣ
【0077】
従って、実施例によると、暗黙的シグナリングは、ブロック符号化順における所定の位置にある第１のブロック１０２（例えば、左上の隅における第１のＣＴＵ）がリフレッシュサブエリア１０１ｒの一部であることを通知してもよい。
【0078】
リフレッシュ及び未リフレッシュ領域１０２ｒ，１０２ｕの上述した暗黙的な導出に対する代替として、本発明のいくつかの実施例は、明示的なシグナリングを提供してもよく、ビデオデータストリーム、各自のエンコーダ及び各自のデコーダが提案され、ビデオデータストリームは、各ブロック１０２に対して、
ａ）ブロック１０２は、各ピクチャの第１のサブエリア１０１ｒに配置され、最後に符号化された最後のブロックであり（例えば、フラグ：ｌａｓｔ＿ｃｔｕ＿ｏｆ＿ｇｄｒ＿ｒｅｇｉｏｎ）、及び／又は、
ｂ）ブロック１０２は、各ピクチャの第１のサブエリア１０１ｒに配置され、最初に符号化された最初のブロックであり（例えば、フラグ：ｆｉｒｓｔ＿ｃｔｕ＿ｏｆ＿ｇｄｒ＿ｒｅｇｉｏｎ）、及び／又は、
ｃ）ブロック１０２は、第１のサブエリア１０１ｒを制限するボーダに隣接し、及び／又は、
ｄ）ブロック１０２は、第１のサブエリア１０１ｒの内部に配置される（例えば、フラグ：ｇｄｒ＿ｒｅｇｉｏｎ＿ｆｌａｇ）、
か否かを示すシンタックス要素を有してもよい。
【0079】
すなわち、リフレッシュ及び未リフレッシュ領域１０２ｒ，１０２ｕの上述した暗黙的な導出に対する代替として、以下の実施例において説明されるように、何れの領域がクリーン領域１０２ｒであるか否かを明示的に示すことが提案される。
【0080】
実施例では、ＧＤＲ領域１０３のエンドを示すことに加えて、ＧＤＲ領域１０３のスタートは、例えば、フラグ（ＣＡＢＣ符号化された）を利用することによって、ＣＴＩレベルにおいて通知されてもよい。
【表6】
【0081】
これは、リフレッシュ領域１０１ｒが常に独立して符号化されるＭＴＣＳに類似したリフレッシュアプローチ（図１を参照）にとって有用であろう。
【0082】
他の実施例では、ＣＴＵベース領域のスタート及び／又はエンドフラグは、水平方向の領域分割が有効にされている場合、タイル１０２の第１のＣＴＵカラムのみで通知されてもよく、垂直方向の領域分割が有効にされている場合、タイル１０２の第１のＣＴＵローにおいてのみ通知されてもよい。
【0083】
従って、実施例によると、各ピクチャ１０１のピクチャ領域は、ブロック１０２の１つ以上のローに水平方向に細分されてもよく、シンタックス要素（例えば、フラグ：ｌａｓｔ＿ｃｔｕ＿ｏｆ＿ｇｄｒ＿ｒｅｇｉｏｎ／／フラグ：ｆｉｒｓｔ＿ｃｔｕ＿ｏｆ＿ｇｄｒ＿ｒｅｇｉｏｎ）が、スライス１０２に対して通知される。
【0084】
更なる実施例によると、各ピクチャ１０１のピクチャ領域は、１つ以上のスライス１０２に垂直方向に細分されてもよく、シンタックス要素（例えば、フラグ：ｌａｓｔ＿ｃｔｕ＿ｏｆ＿ｇｄｒ＿ｒｅｇｉｏｎ／／フラグ：ｆｉｒｓｔ＿ｃｔｕ＿ｏｆ＿ｇｄｒ＿ｒｅｇｉｏｎ）が、
ｉ．第１のローにおいてのみ、又は、
ｉｉ．全てのローにおいて、
通知される。
【0085】
他の実施例では、ＣＴＵ１０２がＧＤＲリフレッシュ領域１０３の一部であるか否かを示すＣＴＵベース（ＣＡＢＡＣ符号化）フラグが、通知されてもよい。
【表7】
【0086】
他の実施例では、ＧＤＲリフレッシュ領域１０３のＣＴＵスタート及び／又はエンドインデックスがスライスヘッダにおいて通知されてもよい。
【0087】
上述した実施例の効果の１つは、ピクチャ領域がタイル１０２の利用から分離されてもよく、これにより、スキャン順が影響を受けないことである。ＧＤＲを利用するアプリケーションの大部分において、低遅延伝送が所望される。低遅延伝送を実現するため、送信される全てのパケットは、全てのＡＵだけでなく同一サイズを有するべきである。典型的には、低遅延シナリオでは、各ＡＵは複数のパケットに分割されてもよく、全てのパケットが同一サイズ（又は大変類似する）を有することを実現するため、各パケットは、リフレッシュされる（クリーンエリア１０１ｒに属する）同数のブロック１０２ｒと、リフレッシュされない（ダーティエリア１０１ｕに属する）同数のブロック１０２ｕを有するべきである。
【0088】
図５は、ピクチャ１０１１，１０１２，・・・，１０１ｎのシーケンス１００の非限定的な例を示し、各ピクチャ１０１１，１０１２，・・・，１０１ｎは、複数のパケット５０１１，５０１２，・・・，５０１ｎに分割されてもよい。全てのパケットが同じサイズ（又は大変類似する）を有することを実現するため、各パケット５０１１，５０１２，・・・，５０１ｎは、リフレッシュされる（クリーンエリア１０１ｒに属する）同数のブロック１０２ｒと、リフレッシュされない（ダーティエリア１０１ｕに属する）同数のブロック１０２ｕを有してもよい。
【0089】
この目的のためタイルが利用される場合、タイルスキャン順が利用され、従って、パケット５０１１，５０１２，・・・，５０１ｎは、リフレッシュされる（クリーンエリア１０１ｒに属する）同数のブロック１０２ｒと、リフレッシュされない（ダーティエリア１０１ｕに属する）同数のブロック１０２ｕを有することができない。
【0090】
他の実施例では、タイルが利用されるが、シンタックス要素が、タイルスキャンでなくラスタスキャンに従わせるパラメータセットに追加される。例えば、ｓｐｓ＿ｅｎｆｏｒｃｅ＿ｒａｓｔｅｒ＿ｓｃａｎ＿ｆｌａｇである。この場合、ラスタスキャンが利用され、バイトアライメントは新たなタイルをスタートするＣＴＵに対してビットストリーム内では起こらない。
【0091】
従って、実施例によると、タイル１０２に細分される少なくとも１つのピクチャ１０１と、タイルリオーダリングフラグ（例えば、ｓｐｓ＿ｅｎｆｏｒｃｅ＿ｒａｓｔｅｒ＿ｓｃａｎ＿ｆｌａｇ）と、を有し、
ａ）データストリームにおけるタイルリオーダリングフラグが第１の状態を有する場合、ピクチャ１０１のタイル１０２がピクチャ１０１をタイル毎に探索する第１の符号化順を利用して符号化されることが通知され、及び／又は、
ｂ）データストリームにおけるタイルリオーダリングフラグが第２の状態を有する場合、ピクチャ１０１のタイル１０２がピクチャ１０１をラスタスキャン順に探索する第２の符号化順を利用して符号化されることが通知される、ビデオデータストリームが提案される。
【0092】
更なる実施例は、データストリームからピクチャ１０１を復号化するよう構成されうる対応するデコーダであって、
ａ）データストリームにおけるタイルリオーダリングフラグ（例えば、ｓｐｓ＿ｅｎｆｏｒｃｅ＿ｒａｓｔｅｒ＿ｓｃａｎ＿ｆｌａｇ）が第１の状態を有する場合、デコーダは、ピクチャ１０１をタイル毎に探索する第１の復号化順を利用してデータストリームからピクチャ１０１のタイル１０２を復号化するよう構成され、及び／又は、
ｂ）データストリームにおけるタイルリオーダリングフラグが第２の状態を有する場合、デコーダは、ピクチャ１０１をラスタスキャン順に探索する第２の復号化順を利用してデータストリームからピクチャ１０１のタイル１０２を復号化するよう構成される、デコーダを提案する。
【0093】
図５を参照して上述したように、デコーダは、漸進的復号化リフレッシュ（ＧＤＲ）アプローチを利用してピクチャ１０１を復号化するよう構成されてもよく、ピクチャ１０１は、少なくとも１つのＧＤＲ符号化ピクチャ１０３と、１つ以上の以降のピクチャとを含むピクチャ１０１１，１０１２，・・・，１０１ｎのシーケンス１００の一部であってもよく、ピクチャ１０１は、ブロック毎に復号化され、複数のパケット５０１ａ，５０１ｂ，・・・，５０１ｎに分割され、２つ以上のパケット（及び、好ましくは、各パケット）は、リフレッシュされた同数のブロック１０２ｒ、及び／又は、まだリフレッシュされていない同数のブロック１０２ｕを含む。
【0094】
更なる実施例は、ピクチャ１０１をデータストリームに符号化するよう構成される対応するエンコーダであって、
ａ）エンコーダは、データストリームにおけるタイルリオーダリングフラグ（例えば、ｓｐｓ＿ｅｎｆｏｒｃｅ＿ｒａｓｔｅｒ＿ｓｃａｎ＿ｆｌａｇ）を、ピクチャ１０１のタイル１０２がピクチャ１０１をタイル毎に探索する第１の符号化順を利用して符号化されることを示す第１の状態に設定するよう構成されてもよく、
ｂ）エンコーダは、データストリームにおけるタイルリオーダリングフラグを、ピクチャ１０１のタイル１０２がピクチャ１０１をラスタスキャン順に探索する第２の符号化順を利用して符号化されることを示す第２の状態に設定するよう構成される、エンコーダを提案する。
【0095】
２．スケーラブルＧＤＲ制限
ＧＤＲがスケーラブルビットストリームに対して実行される場合、最も高い品質が実現される一方、同時により小さい低品質ＲＰ（ＬＱＲＰ）が実現可能であり、最も高い品質の未リフレッシュ領域１０１ｕが下位レイヤの低品質コンテンツのサンプルと置換されうる、ここに説明されるようなＲＰを有することが可能である。
【0096】
図６は、第１のレイヤ（例えば、ベースレイヤ（ＢＬ））６０１と、第２のレイヤ（例えば、エンハンスメントレイヤ（ＥＬ））６０２とを有するスケーラブルビットストリーム６００を利用したＧＤＲアプローチの非限定的な例を示し、第２のレイヤ（例えば、エンハンスメントレイヤ（ＥＬ））６０２の未リフレッシュピクチャサブエリア１０１ｕにおける欠落したリフレッシュ領域（例えば、未リフレッシュ又は非リフレッシュピクチャ領域）１０２ｕが、第１のレイヤ（例えば、ベースレイヤ（ＢＬ））６０１のリフレッシュピクチャサブエリア２０１ｒのリフレッシュピクチャ領域２０２ｒのアップサンプリングされたサンプルと置換できる。
【0097】
一実施例では、ＥＬ６０２の復号化処理は、規定されたＧＤＲ領域（ＧＤＲ以降にリフレッシュされた又はされていない）の状態を管理し、各領域に対して、それがレイヤ毎に初期化されたか否かを示す。領域が初期化されていない場合、当該領域のリファレンスレイヤ６０１のリサンプリング処理が実行され、サンプル値が置換される。これによって、復号化がＥＬ ＧＤＲピクチャ１０３を含むアクセスユニットにおいてスタートすると、上位レイヤピクチャがユーザに即座に提示可能であり、徐々にＲＰの間にＥＬ品質に更新される。
【0098】
しかしながら、ビットストリームにおける制約は、上記の手順が機能するのに必要である。
【0099】
従って、実施例によると、第１のレイヤ（例えば、ベースレイヤ）におけるピクチャ２０１１，２０１２，・・・，２０１ｎの第１のシーケンス２００と、第２のレイヤ（例えば、エンハンスメントレイヤ）６０２におけるピクチャ１０１１，１０１２，・・・，１０１ｎの第２のシーケンス１００とを有するマルチレイヤ化されたスケーラブルビデオデータストリーム６００が提案される。第２のレイヤ６０２におけるピクチャ１０１１，１０１２，・・・，１０１ｎの第２のシーケンス１００は、スタートピクチャとしての少なくとも１つの漸進的デコーダリフレッシュ（ＧＤＲ）ピクチャ１００と、リフレッシュ期間（ＲＰ）における１つ以上の以降のピクチャとを含み、マルチレイヤ化されたスケーラブルビデオデータストリーム６００は、第２のレイヤ６０２のＧＤＲピクチャ１０３の未リフレッシュサブエリア１０１ｕが第１のレイヤ６０１のサンプル２０２ｒからレイヤ間予測される確率に関する情報を搬送する通知を有してもよい。当該通知は更に、
・リフレッシュ期間（ＲＰ）に含まれる１つ以上の以降のピクチャの未リフレッシュサブエリア１０１ｕにおいて、動きベクトル予測が無効にされるか、又は、動きベクトル予測が非時間的に実現される、又は、
・ＧＤＲピクチャ１０３の未リフレッシュサブエリア１０１ｕにおいて、動きベクトル予測が無効にされるか、又は、動きベクトル予測が非時間的に実現される、という情報を搬送してもよい。
【0100】
一実施例では、ＴＭＶＰ（Ｔｅｍｐｏｒａｌ Ｍｏｔｉｏｎ Ｖｅｃｔｏｒ Ｐｒｅｄｉｃｔｉｏｎ）又はサブブロックＴＭＶＰ（すなわち、動きベクトルのシンタックスベース予測）は、サンプル１０２ｕがアップサンプリングされたＢＬサンプル２０２ｒと置換されるとき、以降のＥＬピクチャ１０１１，・・・，１０１ｎが予測のため置換されたサンプル２０２ｒを利用可能になるように、ＧＤＲピクチャ１０３における未リフレッシュ領域１０１ｕに対して無効とされてもよく、制約なく行われる、誤った動きベクトルを利用するのと比較して、エンコーダ／デコーダのドリフトを有意に減少させる。
【0101】
従って、本体用の基本原理は、マルチレイヤ化されたスケーラブルビデオビットストリームを提供することを提案し、第１のレイヤのサンプルからのレイヤ間予測は、ＧＤＲピクチャ１０３の未リフレッシュサブエリア１０１ｕの１つ以上のサンプル１０２ｕを、第１のレイヤ６０１のサンプル２０２ｒのアップサンプリングされたバージョンによって置換することを含んでもよい。
【0102】
更なる実施例は、ＧＤＲピクチャ１０３の未リフレッシュサブエリア１０１ｕ全体の全てのサンプル１０２ｕが、第２のレイヤ６０２における符号化ピクチャの第２のシーケンス１００からのピクチャ１０１１，１０１２，・・・，１０１ｎがユーザに瞬時に提示可能となるように、第１のレイヤ６０１のサンプル２０２ｒのアップサンプリングされたバージョンと置換されてもよい。
【0103】
更なる実施例は、第２のレイヤ１００の１つ以上の以降のピクチャ１０１２，・・・，１０１ｎの未リフレッシュサブエリア１０１ｕが、第２のレイヤ６０２のリフレッシュされたサンプル１０２ｒに徐々に更新される第１のレイヤ６０１からのアップサンプリングされた置換サンプル２０２ｒを利用してレイヤ内予測（例えば、第２のレイヤ６０２の内部）によってリフレッシュされてもよい。
【0104】
他の実施例では、ＴＭＶＰ又はサブブロックＴＭＶＰ候補によって影響を受けるマージリストにおける合成された動きベクトル候補は、サンプル１０１ｕがアップサンプリングされたＢＬサンプル２０２ｒに置換されると、以降のＥＬピクチャがデコーダサイドにおいて誤った動きベクトルに依拠しないように、禁止される。
【0105】
他の実施例では、同じ制約が、ＤＭＶＲ（Ｄｅｃｏｄｅｒ－ｓｉｄｅ Ｍｏｔｉｏｎ Ｖｅｃｔｏｒ Ｒｅｆｉｎｅｍｅｎｔ）（すなわち、リファレンスサンプル値に基づく動きベクトル精緻化）に対してアクティブであり、そうでない場合、サーバアーチファクトを導きうる。
【0106】
従って、実施例によると、以下の符号化コンセプトの少なくとも１つは、リフレッシュ期間（ＲＰ）に含まれる１つ以上の以降のピクチャ１０１２，・・・，１０１ｎの未リフレッシュサブエリア１０１ｕを符号化するため無効にされ、
・時間動きベクトル予測（ＴＭＶＰ）
・アドバンスト時間動きベクトル予測（ＡＴＭＶＰ）
・ＴＭＶＰ又はサブブロックＴＭＶＰによって影響されるマージリストにおける動きベクトル候補などのＴＭＶＰにより影響される候補
・デコーダサイド動きベクトル精緻化（ＤＭＶＲ）
である
【0107】
更なる実施例によると、以下の符号化コンセプトの少なくとも１つは、ＧＤＲピクチャ１０３の未リフレッシュサブエリア１０１ｕを符号化するため無効にされ、
・時間動きベクトル予測（ＴＭＶＰ）
・アドバンスト時間動きベクトル予測（ＡＴＭＶＰ）
・ＴＭＶＰ又はサブブロックＴＭＶＰによって影響されるマージリストにおける動きベクトル候補などのＴＭＶＰにより影響される候補
・デコーダサイド動きベクトル精緻化（ＤＭＶＲ）
であり、
ＤＭＶＲは、リフレッシュ期間（ＲＰ）に含まれる１つ以上の以降のピクチャ１０１２，・・・，１０１ｎの未リフレッシュサブエリア１０１ｕを符号化するため無効にされる。
【0108】
他の実施例では、ＧＤＲにより符号化されたレイヤは、他のレイヤから独立して符号化され、サンプル置換がサンプル置換に適したコンテンツにより指示された他のレイヤを利用して実行できることが、ビットストリームにおいて表現される。従って、本実施例によると、第２のレイヤ６０２は、第１のレイヤ６０１又は何れかの更なるレイヤから独立に符号化され、ピクチャ１０１１，１０１２，・・・，１０１ｎの第２のシーケンス１００がＧＤＲピクチャ１０３においてランダムにアクセスされる場合、通知は、第２のレイヤ６０２のＧＤＲピクチャ１０３の未リフレッシュサブエリア１０１ｕが第１のレイヤ６０１又は適切なコンテンツを有する何れか所定の（指示された）更なるレイヤのサンプル２０２ｒからレイヤ間予測されることを示す。
【0109】
他の実施例では、上記の制限は、識別されたリフレッシュ及び非リフレッシュ領域に依存して、ビットストリーム要求の形式をとりうる。
【0110】
さらに、本態様によると、対応するエンコーダ、デコーダ、符号化方法及び復号化方法を提供することが、更に提案される。
【0111】
実施例によると、第１のレイヤ（例えば、ベースレイヤ）６０１におけるピクチャ２０１１，２０１２，・・・，２０１ｎの第１のシーケンス２００と、第２のレイヤ（例えば、エンハンスメントレイヤ）６０２におけるピクチャ１０１１，１０１２，・・・，１０１ｎの第２のシーケンス（１００）とを有するマルチレイヤ化されたスケーラブルビデオデータストリーム６００から、少なくとも１つのピクチャを復号化するデコーダを提供することが提案される。第２のレイヤ６０２におけるピクチャ１０１１，１０１２，・・・，１０１ｎの第２のシーケンス１００は、スタートピクチャとしての少なくとも１つの漸進的デコーダリフレッシュ（ＧＤＲ）ピクチャ１０３と、リフレッシュ期間（ＲＰ）における１つ以上の以降のピクチャ１０１２，・・・，１０１ｎとを含む。デコーダは、マルチレイヤ化されたスケーラブルビデオデータストリーム６００から、第２のレイヤ６０２のＧＤＲピクチャ１０３の未リフレッシュサブエリア１０１ｕが第１のレイヤ６０１のサンプル２０２ｒからレイヤ間予測される確率に関する情報を搬送する通知を読むよう構成されてもよく、デコーダは更に、通知に応答して、
・動きベクトル予測を無効にするか、又は、リフレッシュ期間（ＲＰ）に含まれる１つ以上の以降のピクチャ１０１２，・・・，１０１ｎの未リフレッシュサブエリア１０１ｕにおいて、動きベクトル予測を非時間的に実現するよう構成されるか、又は、
・動きベクトル予測を無効にするか、又は、ＧＤＲピクチャ１０３の未リフレッシュサブエリア１０１ｕにおいて、動きベクトル予測を非時間的に実現するよう構成される。
【0112】
更なる実施例によると、第１のレイヤ（例えば、ベースレイヤ）６０１におけるピクチャ２０１１，２０１２，・・・，２０１ｎの第１のシーケンス２００と、第２のレイヤ６０２におけるピクチャ１０１１，１０１２，・・・，１０１ｎの第２のシーケンス１００とを有するマルチレイヤ化されたスケーラブルビデオデータストリーム６００に、少なくとも１つのピクチャを符号化し、第２のレイヤ６０２におけるピクチャ１０１１，１０１２，・・・，１０１ｎの第２のシーケンス１００は、スタートピクチャとしての少なくとも１つの漸進的デコーダリフレッシュ（ＧＤＲ）ピクチャ１０３と、リフレッシュ期間（ＲＰ）における１つ以上の以降のピクチャ１０１２，・・・，１０１ｎとを含む、エンコーダを提供することが提案される。エンコーダは、マルチレイヤ化されたスケーラブルビデオデータストリーム６００に、第２のレイヤ６０２のＧＤＲピクチャ１０３の未リフレッシュサブエリア１０１ｕが第１のレイヤ６０１のリフレッシュサンプル２０２ｒからレイヤ間予測される確率に関する情報を搬送する通知を書き込むよう構成されてもよい。通知は更に、
・リフレッシュ期間（ＲＰ）に含まれる１つ以上の以降のピクチャ１０１２，・・・，１０１ｎの未リフレッシュサブエリア１０１ｕにおいて、動きベクトル予測が無効にされるか、又は、動きベクトル予測が非時間的に実現される、又は、
・ＧＤＲピクチャ１０３の未リフレッシュサブエリア１０１ｕにおいて、動きベクトル予測が無効にされるか、又は、動きベクトル予測が非時間的に実現される、
という情報を搬送してもよい。
【0113】
更なる実施例によると、第１のレイヤ（例えば、ベースレイヤ）６０１におけるピクチャ２０１１，２０１２，・・・，２０１ｎの第１のシーケンス２００と、第２のレイヤ（例えば、エンハンスメントレイヤ）６０２におけるピクチャ１０１１，１０１２，・・・，１０１ｎの第２のシーケンス１００とを有するマルチレイヤ化されたスケーラブルビデオデータストリーム６００から、少なくとも１つのピクチャを復号化する方法であって、第２のレイヤ６０２におけるピクチャ１０１１，１０１２，・・・，１０１ｎの第２のシーケンス１００は、スタートピクチャとしての少なくとも１つの漸進的デコーダリフレッシュ（ＧＤＲ）ピクチャ１０３と、リフレッシュ期間（ＲＰ）における１つ以上の以降のピクチャ１０１２，・・・，１０１ｎとを含む、方法を提供することが提案される。方法は、マルチレイヤ化されたスケーラブルビデオデータストリーム６００から、第２のレイヤ６０２のＧＤＲピクチャ１０３の未リフレッシュサブエリア１０１ｕが第１のレイヤ６０１のリフレッシュサンプル２０２ｒからレイヤ間予測される確率に関する情報を搬送する通知を読むステップを有する。方法は更に、通知に応答して、
・動きベクトル予測を無効にするか、又は、リフレッシュ期間（ＲＰ）に含まれる１つ以上の以降のピクチャ１０１２，・・・，１０１ｎの未リフレッシュサブエリア１０１ｕにおいて、動きベクトル予測を非時間的に実現する処理、又は、
・動きベクトル予測を無効にするか、又は、ＧＤＲピクチャ１０３の未リフレッシュサブエリア１０１ｕにおいて、動きベクトル予測を非時間的に実現する処理、
の少なくとも１つを実行するステップを有してもよい。
【0114】
更なる実施例によると、第１のレイヤ（例えば、ベースレイヤ）６０１におけるピクチャ２０１１，２０１２，・・・，２０１ｎの第１のシーケンス２００と、第２のレイヤ（例えば、エンハンスメントレイヤ）６０２におけるピクチャ１０１１，１０１２，・・・，１０１ｎの第２のシーケンス１００とを有するマルチレイヤ化されたスケーラブルビデオデータストリーム６００に、少なくとも１つのピクチャを符号化する方法であって、第２のレイヤ６０２におけるピクチャ１０１１，１０１２，・・・，１０１ｎの第２のシーケンス１００は、スタートピクチャとしての少なくとも１つの漸進的デコーダリフレッシュ（ＧＤＲ）ピクチャ１０３と、リフレッシュ期間（ＲＰ）における１つ以上の以降のピクチャ１０１２，・・・，１０１ｎとを含む、方法を提供することが提案される。方法は、マルチレイヤ化されたスケーラブルビデオデータストリーム６００に、第２のレイヤ６０２のＧＤＲピクチャ１０３の未リフレッシュサブエリア１０１ｕが第１のレイヤ６０１のサンプル２０２ｒからレイヤ間予測される確率に関する情報を搬送する通知を書き込むステップを有する。通知は更に、リフレッシュ期間（ＲＰ）に含まれる１つ以上の以降のピクチャ１０１２，・・・，１０１ｎの未リフレッシュサブエリア１０１ｕにおいて、動きベクトル予測が無効にされるか、又は、動きベクトル予測が非時間的に実現される、又は、ＧＤＲピクチャ１０３の未リフレッシュサブエリア１０１ｕにおいて、動きベクトル予測が無効にされるか、又は、動きベクトル予測が非時間的に実現される、という情報を含んでもよい。
【0115】
３．スケーラブルビデオにおけるレイヤ依存性に関して
スケーラブルビデオは、多数のストリーミングシステムに対して多くの効果を有する。例えば、異なるコンテンツのバージョン及び／又は異なる解像度の相関を利用することによって、異なるバージョン及び／又は異なる解像度を有するいくつかの独立したビットストリーム（サイマルキャスト）と比較した全体的な圧縮効率は、劇的に増加する。これは、サーバ及びＣＤＮにおけるストレージの大きな節約を導くことができ、ストリーミングサービスの配置コストを低下させる。
【0116】
しかしながら、エンドデバイスに送信されるスケーラブルビットストリームの符号化効率は、それが単一のレイヤビットストリームである場合、対応するものより低い。すなわち、レイヤ間予測は、シグナリングオーバヘッドにより効率性の損失を生じさせる。理想的には、単一のレイヤバージョンと比較して各バージョンのサイズを劇的に増加させないという条件によって、いくつかのバージョンの必要とされる記憶容量、すなわち、全てのバージョンの全体的なビットレートを低下させるジョイント最適化が実行されるべきである。これは、説明される最適化問題を評価し、ＡＵがレイヤ間予測を利用するか否かをＡＵ毎にマーキングすることによって実現可能である。
【0117】
以前の規格では、これは、下位レイヤにおける破棄可能なフラグによって破棄可能としてこれらのピクチャをマーキングすることによって実行された。あるいは、スライスは、レイヤ間が利用されないことをマーキングすることも可能である。
【0118】
しかしながら、これらの機構は、あまりフレキシブルでなく、例えば、ストリームにおけるいくつかのピクチャのレイヤ依存性に関して独立性を容易にすることによって、効率的なファイルフォーマットの利用を妨げ、例えば図７に示されるような例と同様にレイヤを効率的にドロップすることができ、Ｌ１ ＴｉＤ１ピクチャの何れもレイヤ間予測を利用しないため、ユーザがＬ１に興味があるとき、Ｌ０ ＴｉＤ１がドロップ可能である。
【0119】
図７は、本発明の更なる態様の非限定的な例を示す。マルチレイヤ化されたスケーラブルビットストリーム７００は、第１のレイヤ（例えば、ベースレイヤ）７０１と、第２のレイヤ（例えば、エンハンスメントレイヤ）７０２とを有してもよい。ビットストリーム７００は、例示的に示される２つのレイヤ７０１，７０２より多くを有してもよい。
【0120】
第１及び第２のレイヤ７０１，７０２の各々は、２つ以上の時間サブレイヤを有してもよい。例えば、第１のレイヤ７０１は、第１の時間サブレイヤ７０１ａ及び第２の時間サブレイヤ７０１ｂを有してもよい。第２のレイヤ７０２は、第１の時間サブレイヤ７０２ａ及び第２の時間サブレイヤ７０２ｂを有してもよい。
【0121】
レイヤ７０１，７０２に含まれるいくつかのピクチャは、矢印７１０によって例示的に示されるように、イントラ符号化されてもよい。例えば、レイヤ７０１の時間サブレイヤ７０１ｂのピクチャ２０１２は、同じレイヤ７０１の異なる時間サブレイヤ７０１ｂの１つ以上のピクチャ２０１１，２０１３を参照することによってイントラ符号化されてもよい。
【0122】
あるいは、レイヤ７０１，７０２に含まれる他のいくつかのピクチャは、矢印７１１により例示的に示されるように、インター符号化されてもよい。例えば、レイヤ７０２の時間サブレイヤ７０２ａのピクチャ１０１１は、異なるレイヤ７０１の時間サブレイヤ７０１ａのピクチャ２０１１を参照することによってインター符号化されてもよい。例えば、第２のレイヤ（例えば、エンハンスメントレイヤ）７０２の第１の時間サブレイヤ７０２ａのピクチャ１０１１は、第１のレイヤ（例えば、ベースレイヤ）７０１の第１の時間サブレイヤ７０１ａのピクチャ２０１１を参照することによってインター符号化されてもよい。
【0123】
実施例によると、レイヤの特定の時間サブレイヤに含まれるピクチャは、同一の時間サブレイヤ階層を有するが、異なるレイヤの時間サブレイヤに含まれるピクチャのみを参照してもよい。例えば、第２のレイヤ７０２の第１の時間サブレイヤ７０２ａに含まれるピクチャ２０１１は、第１のレイヤ７０１の第１の時間サブレイヤ７０１ａにまた含まれるピクチャ１０１１のみを参照してもよい。すなわち、第１の時間サブレイヤ７０１ａ，７０２ａは、同一の時間サブレイヤ階層を有する。
【0124】
図７に示される非限定的な例では、第２のレイヤ７０２の第１のサブレイヤ７０２ａに含まれるピクチャ１０１１，１０１３，１０１５，・・・，１０１ｎ（ここでは、奇数のインデックスを有する）のみが、第１のレイヤ７０１の第１のサブレイヤ７０１ａのピクチャ２０１１，２０１３，２０１５，・・・，２０１ｎ（ここでは、奇数のインデックスを有する）を参照することによって、インター符号化されてもよい。
【0125】
インター符号化に利用されない何れかの時間サブレイヤは、ドロップされてもよい。特に、インター符号化に利用される所定の時間サブレイヤより高い時間サブレイヤを有する何れかの時間サブレイヤは、ドロップされてもよい。
【0126】
従って、図７の非限定的な例に示されるように、ユーザが第２のレイヤ７０２に興味がある場合、第２のレイヤ７０２の第１の時間サブレイヤ７０２ａに含まれるピクチャのみがインター符号化されることが理解できる。すなわち、第１のレイヤ７０１の第１の時間サブレイヤ７０１ａに含まれるピクチャ２０１１，２０１３，２０１５，・・・，２０１ｎのみが参照される。従って、第１のレイヤ７０１の第１の時間サブレイヤ７０１ａのみが関心がある。次に、第１のレイヤ７０１の第２の時間サブレイヤ７０１ｂに含まれるピクチャ２０１２，２０１４，・・・，２０１ｎ－１は参照されず、従って、第１のレイヤ７０１の第２の時間サブレイヤ７０１ｂは関心がなく、ドロップされてもよい。
【0127】
［
大部分、シグナリングオーバヘッドは、ビットストリーム７００におけるより上位の時間サブレイヤにとってより有害であることが理解できる。例えば、説明された特徴を実現する効率的な方法は、例えば、１つおきのピクチャを従属しているとして符号化するか、又は４つおきのピクチャをレイヤ間依存性を利用するとして符号化することであろう。（ピクチャはレイヤ間依存性により符号化される場合、ピクチャは従属しているとして参照されてもよく、レイヤ間依存性なしで符号化される場合、独立しているとして参照されてもよいことに留意されたい。）
【0128】
従って、実施例では、レイヤ依存性は更に、従属レイヤ内の時間サブレイヤが下位レイヤに依存するか否かを示す。
【0129】
これは、例えば、以下に示されるＶＰＳ（又はＳＰＳ）において実行可能である。
【表8】
【0130】
ｖｐｓ＿ｓｕｂ＿ｌａｙｅｒ＿ｉｎｄｅｐｅｎｄｅｎｔ＿ｆｌａｇ［ｉ］［ｊ］が１に等しいことは、インデックスｉのレイヤに含まれるインデックスｊの（時間）サブレイヤがレイヤ間予測を利用しないことを指定する。ｖｐｓ＿ｓｕｂ＿ｌａｙｅｒ＿ｉｎｄｅｐｅｎｄｅｎｔ＿ｆｌａｇ［ｉ］［ｊ］が０に等しいことは、インデックスｉのレイヤに含まれるインデックスｊの（時間）サブレイヤがレイヤ間予測を利用することを指定する。
【0131】
従って、実施例によると、第１のレイヤ（例えば、ベースレイヤ）７０１におけるピクチャ２０１１，２０１２，・・・，２０１ｎの第１のシーケンス２００と、第２のレイヤ（例えば、エンハンスメントレイヤ）７０２におけるピクチャ１０１１，１０１２，・・・，１０１ｎの第２のシーケンス１００とを有し、第１及び第２のレイヤ７０１，７０２の各々は、複数の時間サブレイヤ７０１ａ，７０１ｂ，７０２ａ，７０２ｂを有する、マルチレイヤ化されたスケーラブルビデオデータストリーム７００を提供することが提案される。スケーラブルビデオデータストリーム７００は、第２のレイヤ（例えば、エンハンスメントレイヤ）７０２の何れの時間サブレイヤ７０２ａ，７０２ｂがレイヤ間予測によって符号化されるかを示す通知（例えば、ｖｐｓ＿ｓｕｂ＿ｌａｙｅｒ＿ｉｎｄｅｐｅｎｄｅｎｔ＿ｆｌａｇ［ｉ］［ｊ］）を含んでもよい。
【0132】
更なる実施例によると、第１のレイヤ（例えば、ベースレイヤ）７０１におけるピクチャ２０１１，２０１２，・・・，２０１ｎの第１のシーケンス２００と、第２のレイヤ（例えば、エンハンスメントレイヤ）７０２におけるピクチャ１０１１，１０１２，・・・，１０１ｎの第２のシーケンス１００とを有するマルチレイヤ化されたスケーラブルビデオデータストリーム７００から、少なくとも１つのピクチャを復号化する対応するデコーダであって、第１及び第２のレイヤ７０１，７０２の各々は、複数の時間サブレイヤ７０１ａ，７０１ｂ，７０２ａ，７０２ｂを有する、デコーダを提供することが提案される。デコーダは、スケーラブルビデオデータストリーム７００から導出される通知（例えば、ｖｐｓ＿ｓｕｂ＿ｌａｙｅｒ＿ｉｎｄｅｐｅｎｄｅｎｔ＿ｆｌａｇ［ｉ］［ｊ］）に基づいて、レイヤ間予測を利用することによって時間サブレイヤ７０１ａ，７０１ｂ，７０２ａ，７０２ｂの１つ以上を復号化するよう構成され、通知は、第２のレイヤ７０２の何れの時間サブレイヤ７０２ａ，７０２ｂがレイヤ間予測によって符号化されるかを示してもよい。
【0133】
更なる実施例によると、第１のレイヤ（例えば、ベースレイヤ）７０１におけるピクチャ２０１１，２０１２，・・・，２０１ｎの第１のシーケンス２００と、第２のレイヤ（例えば、エンハンスメントレイヤ）７０２におけるピクチャ１０１１，１０１２，・・・，１０１ｎの第２のシーケンス１００とを有するマルチレイヤ化されたスケーラブルビデオデータストリーム７００に、少なくとも１つのピクチャを符号化する対応するエンコーダであって、第１及び第２のレイヤ７０１，７０２の各々は、複数の時間サブレイヤ７０１ａ，７０１ｂ，７０２ａ，７０２ｂを有する、エンコーダを提供することが提案される。エンコーダは、レイヤ間予測を利用することによって時間サブレイヤ７０１ａ，７０１ｂ，７０２ａ，７０２ｂの１つ以上を符号化し、スケーラブルビデオデータストリーム７００に通知（例えば、ｖｐｓ＿ｓｕｂ＿ｌａｙｅｒ＿ｉｎｄｅｐｅｎｄｅｎｔ＿ｆｌａｇ［ｉ］［ｊ］）を書き込むよう構成され、通知は、第２のレイヤ７０２の何れの時間サブレイヤ７０２ａ，７０２ｂがレイヤ間予測によって符号化されるかを示してもよい。
【0134】
更なる実施例によると、第１のレイヤ（例えば、ベースレイヤ）７０１におけるピクチャ２０１１，２０１２，・・・，２０１ｎの第１のシーケンス２００と、第２のレイヤ（例えば、エンハンスメントレイヤ）７０２におけるピクチャ１０１１，１０１２，・・・，１０１ｎの第２のシーケンス１００とを有するマルチレイヤ化されたスケーラブルビデオデータストリーム７００から、少なくとも１つのピクチャを復号化する方法であって、第１及び第２のレイヤ７０１，７０２の各々は、複数の時間サブレイヤ７０１ａ，７０１ｂ，７０２ａ，７０２ｂを有する、方法を提供するよう提案される。方法は、スケーラブルビデオデータストリーム７００から導出される通知に基づいて、レイヤ間予測を利用することによって時間サブレイヤ７０２ａ，７０２ｂの１つ以上を復号化するステップを有し、通知（例えば、ｖｐｓ＿ｓｕｂ＿ｌａｙｅｒ＿ｉｎｄｅｐｅｎｄｅｎｔ＿ｆｌａｇ［ｉ］［ｊ］）は、第２のレイヤ７０２の何れの時間サブレイヤ７０２ａ，７０２ｂがレイヤ間予測によって符号化されるかを示す。
【0135】
更なる実施例によると、第１のレイヤ（例えば、ベースレイヤ）７０１におけるピクチャ２０１１，２０１２，・・・，２０１ｎの第１のシーケンス２００と、第２のレイヤ（例えば、エンハンスメントレイヤ）７０２におけるピクチャ１０１１，１０１２，・・・，１０１ｎの第２のシーケンス１００とを有するマルチレイヤ化されたスケーラブルビデオデータストリーム７００に、少なくとも１つのピクチャを符号化する対応する方法であって、第１及び第２のレイヤ７０１，７０２の各々は、複数の時間サブレイヤ７０１ａ，７０１ｂ，７０２ａ，７０２ｂを有する、方法を提供することが提案される。方法は、スケーラブルビデオデータストリーム７００から導出される通知に基づいて、ストリームレイヤ間予測を利用することによって時間サブレイヤ７０２ａ，７０２ｂの１つ以上を符号化するステップを有し、通知（例えば、ｖｐｓ＿ｓｕｂ＿ｌａｙｅｒ＿ｉｎｄｅｐｅｎｄｅｎｔ＿ｆｌａｇ［ｉ］［ｊ］）は、第２のレイヤ７０２の何れの時間サブレイヤ７０２ａ，７０２ｂがレイヤ間予測によって符号化されるかを示す。
【0136】
上述されたように、時間サブレイヤは、例えば、第１の時間サブレイヤ、第２の時間サブレイヤ、第３の時間サブレイヤなどの時間サブレイヤ階層を有してもよい。レイヤの時間サブレイヤ階層は、ビデオデータストリーム７００における上述された通知に含まれるシンタックス要素などの時間識別子によって通知されてもよい。
【0137】
さらに、図７を参照して、関心のない（それらはインター予測に利用されていないため）所定の時間サブレイヤ階層の上位の時間サブレイヤはドロップされてもよいことが説明された。従って、レイヤ間予測が利用される特定の時間サブレイヤ階層を示す一種の閾値があってもよい。それは、当該閾値以下の時間サブレイヤがレイヤ間予測に利用される一方、当該閾値を超える時間サブレイヤはレイヤ間予測に利用されないことを意味する。後者のものはドロップされてもよい。この閾値は、所定の１つの時間サブレイヤによって通知されてもよい。例えば、レイヤ間予測がレイヤの第２の時間サブレイヤまでのみ利用されうることが、ビデオデータストリーム７００において通知されてもよい。従って、第２の時間サブレイヤはレイヤ間予測のための閾値を形成する。従って、第１及び第２の時間サブレイヤは、レイヤ間予測される一方、所定の第２の時間サブレイヤ（閾値）を超える時間サブレイヤ階層を有する何れか更なる時間サブレイヤはドロップされてもよい。
【0138】
上述した時間識別子は、閾値、すなわち、そこまではレイヤ間予測が利用されうる時間サブレイヤ階層を示してもよい。すなわち、時間識別子は、閾値、すなわち、それからはレイヤ間予測が利用されない時間サブレイヤを示してもよい。
【0139】
従って、実施例によると、ビデオデータストリーム７００における通知は、そこから第２のレイヤ７０２の時間サブレイヤ７０２ａ，７０２ｂがレイヤ間予測なしに符号化されうる所定の時間識別子（閾値）を有してもよい。
【0140】
それは、所定の時間識別子（閾値）を超える値を有する時間識別子を有する第２のレイヤ７０２の時間サブレイヤ７０２ａ，７０２ｂがレイヤ間予測なしに符号化されることを意味する。図７に示される例では、所定の時間識別子は、第１の時間サブレイヤ７０２ａのみがレイヤ間予測によって符号化されるため、第１の時間サブレイヤ７０２ａを参照する。従って、第１の時間サブレイヤ７０２ａを超える全ての時間サブレイヤ、ここでは、第２の時間サブレイヤ７０２ｂと共に何れか上位の時間サブレイヤ（存在する場合）が、レイヤ間予測なしに符号化される。
【0141】
また、所定の時間識別子（閾値）以下の値を有する時間識別子を有する第２のレイヤ７０２の時間サブレイヤ７０２ａ，７０２ｂがレイヤ間予測により符号化される。図７に示される例では、所定の時間識別子は、第１の時間サブレイヤ７０２ａのみがレイヤ間予測によって符号化されるため、第１の時間サブレイヤ７０２ａを参照する。
【0142】
従って、通知（例えば、ｖｐｓ＿ｓｕｂ＿ｌａｙｅｒ＿ｉｎｄｅｐｅｎｄｅｎｔ＿ｆｌａｇ［ｉ］［ｊ］）は、第２のレイヤ７０２の時間サブレイヤ７０２ｂがレイヤ間予測のための下位レイヤ７０１の時間サブレイヤ７０１ｂを利用しないことを示す場合、下位レイヤ７０１の時間サブレイヤ７０１ｂは、マルチレイヤ化されたスケーラブルビデオデータストリーム７００から破棄可能、破棄又はドロップされるとしてマーキングされてもよい。
【0143】
他の実施例では、イネーブルフラグが、ｓｕｂ＿ｌａｙｅｒ＿ｉｎｄｅｐｅｎｄｅｎｔ＿ｆｌａｇがＶＰＳに含まれるか否か、又は、デフォルト毎の全てのサブレイヤが下位レイヤに依存するか否かを示すため、ＶＰＳに含まれる。
【0144】
従って、実施例では、マルチレイヤ化されたスケーラブルビデオデータストリーム７００は更に、通知（例えば、ｖｐｓ＿ｓｕｂ＿ｌａｙｅｒ＿ｉｎｄｅｐｅｎｄｅｎｔ＿ｆｌａｇ［ｉ］［ｊ］）がマルチレイヤ化されたスケーラブルビデオデータストリーム７００に含まれるか否かを示すためのシンタックス要素（例えば、ＶＰＳにおけるｅｎａｂｌｅ＿ｆｌａｇ）を有してもよい。含まれない場合、第２のレイヤ７０２の全ての時間サブレイヤ７０２ａ，７０２ｂは、デフォルト毎に下位レイヤ７０１に依存してもよい。
【0145】
上述したように、説明された特徴を実現する効率的な方法は、例えば、１つおきのピクチャを従属しているとして、例えば、４つおきのピクチャをレイヤ間依存性を利用しているとして符号化することであろう。
【0146】
従って、実施例によると、エンコーダは、第２のシーケンス１００の連続するピクチャ（例えば、１つおきのピクチャ）１０１２，１０１４，・・・，１０１ｎ－１の第１の所定のローを従属しているとして符号化するか、又は、ピクチャの第２のシーケンス１００の連続するピクチャ（例えば、４つおきのピクチャ）の第２の所定のローをレイヤ間依存性を利用するとして符号化するよう構成されてもよい。
【0147】
いくつかの態様が装置のコンテクストにおいて説明されたが、これらの態様が、ブロック又はデバイスが方法ステップ又は方法ステップの特徴に対応する対応する方法の説明を表すことは明かである。同様に、方法ステップのコンテクストにおいて説明された態様がまた、対応する装置の対応するブロック、アイテム又は特徴の説明を表す。
【0148】
方法ステップの一部又は全ては、例えば、マイクロプロセッサ、プログラマブルコンピュータ又は電子回路などのハードウェアによって（又は利用して）実行されてもよい。いくつかの実施例では、最も重要な方法ステップの１つ以上は、そのような装置によって実行されてもよい。
【0149】
特定の実現要求に依存して、本発明の実施例は、ハードウェア、ソフトウェア、少なくとも部分的にハードウェア又は少なくとも部分的にソフトウェアにより実現可能である。当該実現は、例えば、フロッピーディスク（登録商標）、ＤＶＤ、Ｂｌｕ－Ｒａｙ、ＣＤ、ＲＯＭ、ＰＲＯＭ、ＥＰＲＯＭ、ＥＥＰＲＯＭ又はＦＬＡＳＨ（登録商標）メモリなど、各方法が実行されるようにプログラマブルコンピュータシステムと連携する（又は連携可能である）電子的に可読な制御信号が格納されるデジタル記憶媒体を利用して実行可能である。従って、デジタル記憶媒体は、コンピュータ可読であってもよい。
【0150】
本発明によるいくつかの実施例は、ここに説明される方法の１つが実行されるように、プログラマブルコンピュータシステムと連携可能である電子的に可読な制御信号を有するデータキャリアを有する。
【0151】
一般に、本発明の実施例は、プログラムコードを備えたコンピュータプログラムプロダクトとして実現可能であり、プログラムコードは、コンピュータプログラムプロダクトがコンピュータ上で実行されると、方法の１つを実行するよう動作可能である。プログラムコードは、例えば、機械可読キャリア上に格納されてもよい。
【0152】
他の実施例は、機械可読キャリア上に格納される、ここに説明される方法の１つを実行するためのコンピュータプログラムを有する。
【0153】
すなわち、本発明の方法の実施例は、従って、コンピュータプログラムがコンピュータ上で実行されるとき、ここに説明される方法の１つを実行するためのプログラムコードを有するコンピュータプログラムである。
【0154】
本発明の方法の更なる実施例は、従って、ここに説明される方法の１つを実行するためのコンピュータプログラムを記録したデータキャリア（又はデジタル記憶媒体、コンピュータ可読媒体）である。データキャリア、デジタル記憶媒体又は記録媒体は、典型的には、有形であり、及び／又は、非一時的である。
【0155】
本発明の方法の更なる実施例は、従って、ここに説明される方法の１つを実行するためのコンピュータプログラムを表す信号のシーケンス又はデータストリームである。データストリーム又は信号のシーケンスは、例えば、インターネットなどのデータ通信接続を介し転送されるよう構成されてもよい。
【0156】
更なる実施例は、ここに説明される方法の１つを実行するよう構成又は適応される、コンピュータ又はプログラマブル論理デバイスなどの処理手段を有する。
【0157】
更なる実施例は、ここに説明された方法の１つを実行するためのコンピュータプログラムがインストールされたコンピュータを有する。
【0158】
本発明による更なる実施例は、ここに説明された方法の１つを実行するためのコンピュータプログラムを受信機に転送する（例えば、電気的又は光学的に）よう構成される装置又はシステムを有する。受信機は、例えば、コンピュータ、モバイルデバイス、メモリデバイスなどであってもよい。装置又はシステムは、例えば、コンピュータプログラムを受信機に転送するためのファイルサーバを有してもよい。
【0159】
いくつかの実施例では、プログラマブル論理デバイス（例えば、フィールドプログラマブルゲートアレイ）が、ここに説明された方法の機能の一部又は全てを実行するのに利用されてもよい。いくつかの実施例では、フィールドプログラマブルゲートアレイは、ここに説明された方法の１つを実行するため、マイクロプロセッサと連携してもよい。一般に、方法は何れかのハードウェア装置によって、好ましくは実行される。
【0160】
ここに説明される装置は、ハードウェア装置、コンピュータ、ハードウェア装置とコンピュータとの組み合わせを利用して実現されてもよい。
【0161】
ここに説明される方法は、ハードウェア装置、コンピュータ、ハードウェア装置とコンピュータとの組み合わせを利用して実行されてもよい。
【0162】
本開示が例示的な実施例を参照して説明されたが、本説明は、限定的な意味で解釈されることを意図していない。例示的な実施例の各種修正及び組み合わせは、本開示の他の実施例と共に、本説明を参照して当業者に明らかであろう。従って、添付した請求項はそのような何れかの修正又は実施例を包括することが意図される。
【図1】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】
【手続補正書】
【提出日】2022-05-20
【手続補正1】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項1】
第１のレイヤ（７０１）におけるピクチャ（２０１１，２０１２，・・・，２０１ｎ）の第１のシーケンス（２００）と、第２のレイヤ（７０２）におけるピクチャ（１０１１，１０１２，・・・，１０１ｎ）の第２のシーケンス（１００）とを有するマルチレイヤ化されたスケーラブルビデオデータストリーム（７００）から、少なくとも１つのピクチャを復号化するデコーダであって、前記第１のレイヤ（７０１）及び前記第２のレイヤ（７０２）の各々は、複数の時間サブレイヤ（７０１ａ，７０１ｂ，７０２ａ，７０２ｂ）を有し、
前記デコーダは、前記スケーラブルビデオデータストリーム（７００）から導出される通知に基づいて、レイヤ間予測を利用して前記第２のレイヤ（７０２）の前記複数の時間サブレイヤ（７０２ａ，７０２ｂ）の１つ以上を復号化するよう構成され、前記通知は、前記第２のレイヤ（７０２）の何れの時間サブレイヤ（７０２ａ，７０２ｂ）がレイヤ間予測を利用して復号化されるかを示す、デコーダ。
【請求項2】
前記通知は、前記第２のレイヤ（７０２）の何れの時間サブレイヤ（７０２ａ，７０２ｂ）がレイヤ間予測を利用して復号化されることを示すための所定の時間識別子を有する、請求項１に記載のデコーダ。
【請求項3】
前記所定の時間識別子を超える値を有する時間識別子を有する前記第２のレイヤ（７０２）の時間サブレイヤ（７０２ｂ）は、レイヤ間予測を利用することなく復号化される、請求項２に記載のデコーダ。
【請求項4】
前記所定の時間識別子以下の値を有する時間識別子を有する前記第２のレイヤ（７０２）の時間サブレイヤ（７０２ａ）は、レイヤ間予測を利用して復号化される、請求項２又は３に記載のデコーダ。
【請求項5】
前記デコーダが、前記通知から前記第２のレイヤ（７０２）の時間サブレイヤ（７０２ｂ）がレイヤ間予測のために前記第１のレイヤ（７０１）の時間サブレイヤ（７０１ｂ）を利用しないことを導出した場合、前記デコーダは、前記第１のレイヤ（７０１）の時間サブレイヤを破棄し、前記第２のレイヤ（７０２）の時間サブレイヤ（７０２ｂ）を復号化するとき、前記第１のレイヤ（７０１）の時間サブレイヤ（７０１ｂ）を利用しないよう構成される、請求項１から４の何れか一項に記載のデコーダ。
【請求項6】
第１のレイヤ（７０１）におけるピクチャ（２０１１，２０１２，・・・，２０１ｎ）の第１のシーケンス（２００）と、第２のレイヤ（７０２）におけるピクチャ（１０１１，１０１２，・・・，１０１ｎ）の第２のシーケンス（１００）とを有するマルチレイヤ化されたスケーラブルビデオデータストリーム（７００）に、少なくとも１つのピクチャを符号化するエンコーダであって、前記第１のレイヤ（７０１）及び前記第２のレイヤ（７０２）の各々は、複数の時間サブレイヤ（７０１ａ，７０１ｂ，７０２ａ，７０２ｂ）を有し、
前記エンコーダは、レイヤ間予測を利用して前記第２のレイヤ（７０２）の前記複数の時間サブレイヤ（７０２ａ，７０２ｂ）の１つ以上を符号化し、前記スケーラブルビデオデータストリーム（７００）に通知を符号化するよう構成され、前記通知は、前記第２のレイヤ（７０２）の何れの時間サブレイヤ（７０２ａ，７０２ｂ）がレイヤ間予測を利用して符号化されるかを示す、エンコーダ。
【請求項7】
前記通知は、前記第２のレイヤ（７０２）の何れの時間サブレイヤ（７０２ａ，７０２ｂ）がレイヤ間予測を利用して符号化されるかを示すための所定の時間識別子を有する、請求項６に記載のエンコーダ。
【請求項8】
前記所定の時間識別子を超える値を有する時間識別子を有する前記第２のレイヤ（７０２）の時間サブレイヤ（７０２ｂ）は、レイヤ間予測を利用することなく符号化される、請求項７に記載のエンコーダ。
【請求項9】
前記所定の時間識別子以下の値を有する時間識別子を有する前記第２のレイヤ（７０２）の時間サブレイヤ（７０２ａ）は、レイヤ間予測を利用して符号化される、請求項７又は８に記載のエンコーダ。
【請求項10】
前記エンコーダが、前記第２のレイヤ（７０２）の時間サブレイヤ（７０２ｂ）がレイヤ間予測のために前記第１のレイヤ（７０１）の時間サブレイヤ（７０１ｂ）を利用しないことを判定した場合、前記エンコーダは、前記第１のレイヤ（７０１）の時間サブレイヤ（７０１ｂ）を破棄し、前記第２のレイヤ（７０２）の時間サブレイヤ（７０２ｂ）を符号化するとき、前記第１のレイヤ（７０１）の時間サブレイヤ（７０１ｂ）を利用しないよう構成される、請求項６から９の何れか一項に記載のエンコーダ。
【請求項11】
第１のレイヤ（７０１）におけるピクチャ（２０１１，２０１２，・・・，２０１ｎ）の第１のシーケンス（２００）と、第２のレイヤ（７０２）におけるピクチャ（１０１１，１０１２，・・・，１０１ｎ）の第２のシーケンス（１００）とを有するマルチレイヤ化されたスケーラブルビデオデータストリーム（７００）から、少なくとも１つのピクチャを復号化する方法であって、前記第１のレイヤ（７０１）及び前記第２のレイヤ（７０２）の各々は、複数の時間サブレイヤ（７０１ａ，７０１ｂ，７０２ａ，７０２ｂ）を有し、
前記方法は、
前記スケーラブルビデオデータストリーム（７００）から導出される通知に基づいて、レイヤ間予測を利用して前記第２のレイヤ（７０２）の前記複数の時間サブレイヤ（７０２ａ，７０２ｂ）の１つ以上を復号化するステップを有し、前記通知は、前記第２のレイヤ（７０２）の何れの時間サブレイヤ（７０２ａ，７０２ｂ）がレイヤ間予測を利用して復号化されるかを示す、方法。
【請求項12】
前記通知が前記第２のレイヤ（７０２）の時間サブレイヤ（７０２ｂ）がレイヤ間予測のため前記第１のレイヤ（７０１）の時間サブレイヤ（７０１ｂ）を利用しないことを示す場合、前記方法は更に、前記第１のレイヤ（７０１）の時間サブレイヤ（７０１ｂ）を破棄し、前記第２のレイヤ（７０２）の時間サブレイヤ（７０２ｂ）を破棄するとき、前記第１のレイヤ（７０１）の時間サブレイヤ（７０１ｂ）を利用しないステップを有する、請求項１１に記載の方法。
【請求項13】
第１のレイヤ（７０１）におけるピクチャ（２０１１，２０１２，・・・，２０１ｎ）の第１のシーケンス（２００）と、第２のレイヤ（７０２）におけるピクチャ（１０１１，１０１２，・・・，１０１ｎ）の第２のシーケンス（１００）とを有するマルチレイヤ化されたスケーラブルビデオデータストリーム（７００）に、少なくとも１つのピクチャを符号化する方法であって、前記第１のレイヤ（７０１）及び前記第２のレイヤ（７０２）の各々は、複数の時間サブレイヤ（７０１ａ，７０１ｂ，７０２ａ，７０２ｂ）を有し、
前記方法は、
レイヤ間予測を利用して前記第２のレイヤ（７０２）の前記複数の時間サブレイヤ（７０２ａ，７０２ｂ）の１つ以上を符号化し、前記スケーラブルビデオデータストリーム（７００）に通知を符号化するステップを有し、前記通知は、前記第２のレイヤ（７０２）の何れの時間サブレイヤ（７０２ａ，７０２ｂ）がレイヤ間予測を利用して符号化されるかを示す、方法。
【請求項14】
前記通知が前記第２のレイヤ（７０２）の時間サブレイヤ（７０２ｂ）がレイヤ間予測のため前記第１のレイヤ（７０１）の時間サブレイヤ（７０１ｂ）を利用しないことを示す場合、前記方法は更に、前記第１のレイヤ（７０１）の時間サブレイヤ（７０１ｂ）を破棄し、前記第２のレイヤ（７０２）の時間サブレイヤ（７０２ｂ）を符号化するとき、前記第１のレイヤ（７０１）の時間サブレイヤ（７０１ｂ）を利用しないステップを有する、請求項１３に記載の方法。
【請求項15】
第１のレイヤ（７０１）におけるピクチャ（２０１ １ ，２０１ ２ ，・・・，２０１ ｎ ）の第１のシーケンス（２００）と、第２のレイヤ（７０２）におけるピクチャ（１０１ １ ，１０１ ２ ，・・・，１０１ ｎ ）の第２のシーケンス（１００）とを有するマルチレイヤ化されたスケーラブルビデオデータストリーム（７００）に、少なくとも１つのピクチャを符号化する方法であって、前記第１のレイヤ（７０１）及び前記第２のレイヤ（７０２）の各々は、複数の時間サブレイヤ（７０１ａ，７０１ｂ，７０２ａ，７０２ｂ）を有し、前記データストリームは更に、前記第２のレイヤ（７０２）の何れの時間サブレイヤ（７０２ａ，７０２ｂ）がレイヤ間予測を利用して符号化されるかを示す通知を有し、前記通知は、前記第２のレイヤ（７０２）の何れの時間サブレイヤ（７０２ａ，７０２ｂ）がレイヤ間予測を利用して符号化されるかを示すための所定の時間識別子を有する、マルチレイヤ化されたスケーラブルビデオデータストリーム。
【国際調査報告】
Copyright © 2010-2024 Science Impact Inc. All Rights Reserved.