ホーム > 特許ランキング > ＢＹＴＥＤＡＮＣＥ ＩＮＣ．
知財求人 - 知財ポータルサイト「IP Force」
特許7529807映像サブビットストリーム抽出処理におけるスケーラブルネスト化されたＳＥＩメッセージのハンドリング
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】特許公報(B2)
(11)【特許番号】
(24)【登録日】2024-07-29
(45)【発行日】2024-08-06
(54)【発明の名称】映像サブビットストリーム抽出処理におけるスケーラブルネスト化されたＳＥＩメッセージのハンドリング
(51)【国際特許分類】
H04N 19/70 20140101AFI20240730BHJP
H04N 19/30 20140101ALI20240730BHJP
【ＦＩ】
H04N19/70
H04N19/30
【請求項の数】
13
(21)【出願番号】P 2022571346
(86)(22)【出願日】2021-05-21
(65)【公表番号】
(43)【公表日】2023-06-22
(86)【国際出願番号】 US2021033717
(87)【国際公開番号】W WO2021237126
(87)【国際公開日】2021-11-25
【審査請求日】2022-12-16
(31)【優先権主張番号】63/029,308
(32)【優先日】2020-05-22
(33)【優先権主張国・地域又は機関】US
(73)【特許権者】
【識別番号】520477474
【氏名又は名称】バイトダンス インコーポレイテッド
【氏名又は名称原語表記】ＢＹＴＥＤＡＮＣＥ ＩＮＣ．
【住所又は居所原語表記】１２６５５ Ｗｅｓｔ Ｊｅｆｆｅｒｓｏｎ Ｂｏｕｌｅｖａｒｄ， Ｓｉｘｔｈ Ｆｌｏｏｒ， Ｓｕｉｔｅ Ｎｏ． １３７ Ｌｏｓ Ａｎｇｅｌｅｓ， Ｃａｌｉｆｏｒｎｉａ ９００６６ Ｕｎｉｔｅｄ Ｓｔａｔｅｓ ｏｆ Ａｍｅｒｉｃａ
(74)【代理人】
【識別番号】110002000
【氏名又は名称】弁理士法人栄光事務所
(72)【発明者】
【氏名】ワン イェクイ
【審査官】田中 純一
(56)【参考文献】
【文献】特表２０１７－５２２７７９（ＪＰ，Ａ）
【文献】米国特許出願公開第２０１５／０３５８６４０（ＵＳ，Ａ１）
【文献】特表２０１７－５１０１９８（ＪＰ，Ａ）
【文献】米国特許出願公開第２０１５／０２７１４９８（ＵＳ，Ａ１）
【文献】特表２０１７－５１０１００（ＪＰ，Ａ）
【文献】米国特許出願公開第２０１６／０３０９１５９（ＵＳ，Ａ１）
【文献】Virginie Drugeon，Specification for JVET-S0097 [online]， JVET-S JVET-S0097，ITU-T インターネット＜URL:https://jvet-experts.org/doc_end_user/documents/19_Teleconference/wg11/JVET-S0097-v1.zip＞，2020年05月22日，pp.i-v, pp.1-487
(58)【調査した分野】(Int.Cl.，ＤＢ名)
Ｈ０４Ｎ ７／１２
Ｈ０４Ｎ １９／００ － １９／９８
(57)【特許請求の範囲】
【請求項1】
映像データの処理の方法であって、規則に従って、１または複数のレイヤを含む映像と、前記映像のビットストリームとの間の変換を実行することを有し、
前記規則は、出力サブビットストリームを出力するためのサブビットストリーム抽出の処理において、スケーラブルネスティングＳＥＩ（Ｓｕｐｐｌｅｍｅｎｔａｒｙ Ｅｎｈａｎｃｅｍｅｎｔ Ｉｎｆｏｒｍａｔｉｏｎ）メッセージからスケーラブルネスト化されたＳＥＩメッセージを抽出することにより、非スケーラブルネスト化されたＳＥＩメッセージを生成するか否かは、前記スケーラブルネスティングＳＥＩメッセージが特定のＯＬＳ（Ｏｕｔｐｕｔ Ｌａｙｅｒ Ｓｅｔ）に適用されるか否かを示す第１のフラグ、および、前記スケーラブルネスティングＳＥＩメッセージがすべてのサブピクチャまたは特定のサブピクチャのみに適用されるかを示す第２のフラグに基づくことを規定する、方法。
【請求項2】
前記スケーラブルネスティングＳＥＩメッセージは、前記出力サブビットストリームに含まれる第１のＳＥＩ ＮＡＬユニットに含まれ、前記非スケーラブルネスト化されたＳＥＩメッセージが生成される場合、第２のＳＥＩ ＮＡＬユニットが生成され、前記スケーラブルネスト化されたＳＥＩメッセージが前記スケーラブルネスティングＳＥＩメッセージから抽出され、かつ、前記非スケーラブルネスト化されたＳＥＩメッセージとして前記第２のＳＥＩ ＮＡＬユニットに含まれる、請求項１に記載の方法。
【請求項3】
前記第２のＳＥＩ ＮＡＬユニットは、前記第１のＳＥＩ ＮＡＬユニットを含むＰＵにおいて、前記第１のＳＥＩ ＮＡＬユニットの直後に含まれる、請求項２に記載の方法。
【請求項4】
前記第１のＳＥＩ ＮＡＬユニットは、前記出力サブビットストリームから除去される、請求項２または３に記載の方法。
【請求項5】
前記規則は、条件のセットを満たす場合に、前記非スケーラブルネスト化されたＳＥＩメッセージを生成することを規定し、前記条件のセットは、前記第２のフラグが、前記特定のＯＬＳに適用する前記ＳＥＩメッセージを前記特定のＯＬＳのすべてのサブピクチャに適用することを規定する第２の値を有することを含む、請求項１から４のいずれか一項に記載の方法。
【請求項6】
前記条件のセットは更に、前記第１のフラグが、前記ＳＥＩメッセージを特定のＯＬＳ（Ｏｕｔｐｕｔ Ｌａｙｅｒ Ｓｅｔ）に適用することを規定する第１の値を有することを含む、請求項５に記載の方法。
【請求項7】
前記規則は、条件のセットを満たす場合に、前記非スケーラブルネスト化されたＳＥＩメッセージを生成することを規定し、前記条件のセットは、着目ＯＬＳインデックスを有するＯＬＳのＮＡＬユニットヘッダの識別子の値のリストが、サブビットストリーム抽出の前記処理へ入力されるビットストリームのすべてのＶＣＬ（Ｖｉｄｅｏ Ｃｏｄｉｎｇ Ｌａｙｅｒ） ＮＡＬユニットにおけるＮＡＬユニットヘッダの識別子のすべての値を含まないことを含む、請求項１から６のいずれか一項に記載の方法。
【請求項8】
前記規則は更に、前記ＯＬＳ（Ｏｕｔｐｕｔ Ｌａｙｅｒ Ｓｅｔ）のＮＡＬユニットヘッダの識別子の値の前記リストが、サブビットストリーム抽出の前記処理へ入力される前記ビットストリームにおけるすべてのＶＣＬ ＮＡＬユニットにおけるＮＡＬユニットヘッダの識別子のすべての値を含まないことに応答して、１）０または１３０に等しいペイロードタイプを有する非スケーラブルネスト化されたＳＥＩメッセージを含むすべてのＳＥＩ ＮＡＬユニットが、出力サブビットストリームから除去され、かつ、
２）ｇｅｎｅｒａｌ＿ｓａｍｅ＿ｐｉｃ＿ｔｉｍｉｎｇ＿ｉｎ＿ａｌｌ＿ｏｌｓ＿ｆｌａｇが０に等しい場合、１に等しいペイロードタイプを有する非スケーラブルネスト化されたＳＥＩメッセージを含むすべてのＳＥＩ ＮＡＬユニットが、前記出力サブビットストリームから除去される、
ことがさらに適用される、請求項７に記載の方法。
【請求項9】
前記変換は、前記映像を前記ビットストリームへ符号化することを含む、請求項１から８のいずれか一項に記載の方法。
【請求項10】
前記変換は、前記映像を前記ビットストリームから復号することを含む、請求項１から８のいずれか一項に記載の方法。
【請求項11】
プロセッサと、命令を有する非一時的メモリを有する、映像データを処理するための装置であって、前記命令は、前記プロセッサによって実行された際に、前記プロセッサに、
規則に従って、１または複数のレイヤを含む映像と、前記映像のビットストリームとの間の変換を実行すること、
を実行させ、
前記規則は、出力サブビットストリームを出力するためのサブビットストリーム抽出の処理において、スケーラブルネスティングＳＥＩ（Ｓｕｐｐｌｅｍｅｎｔａｒｙ Ｅｎｈａｎｃｅｍｅｎｔ Ｉｎｆｏｒｍａｔｉｏｎ）メッセージからスケーラブルネスト化されたＳＥＩメッセージを抽出することにより、非スケーラブルネスト化されたＳＥＩメッセージを生成するか否かは、前記スケーラブルネスティングＳＥＩメッセージが特定のＯＬＳ（Ｏｕｔｐｕｔ Ｌａｙｅｒ Ｓｅｔ）に適用されるか否かを示す第１のフラグ、および、前記スケーラブルネスティングＳＥＩメッセージがすべてのサブピクチャまたは特定のサブピクチャのみに適用されるかを示す第２のフラグに基づくことを規定する、装置。
【請求項12】
プロセッサに、規則に従って、１または複数のレイヤを含む映像と、前記映像のビットストリームとの間の変換を実行すること、
を実行させ、
前記規則は、出力サブビットストリームを出力するためのサブビットストリーム抽出の処理において、スケーラブルネスティングＳＥＩ（Ｓｕｐｐｌｅｍｅｎｔａｒｙ Ｅｎｈａｎｃｅｍｅｎｔ Ｉｎｆｏｒｍａｔｉｏｎ）メッセージからスケーラブルネスト化されたＳＥＩメッセージを抽出することにより、非スケーラブルネスト化されたＳＥＩメッセージを生成するか否かは、前記スケーラブルネスティングＳＥＩメッセージが特定のＯＬＳ（Ｏｕｔｐｕｔ Ｌａｙｅｒ Ｓｅｔ）に適用されるか否かを示す第１のフラグ、および、前記スケーラブルネスティングＳＥＩメッセージがすべてのサブピクチャまたは特定のサブピクチャのみに適用されるかを示す第２のフラグに基づくことを規定する、命令を格納する非一時的コンピュータ可読記憶媒体。
【請求項13】
映像のビットストリームを格納するための方法であって、
規則に従って、１または複数のレイヤを含む前記映像の前記ビットストリームを生成することと、
前記ビットストリームを非一時的コンピュータ可読記録媒体に格納することと、
を有し、
前記規則は、出力サブビットストリームを出力するためのサブビットストリーム抽出の処理において、スケーラブルネスティングＳＥＩ（Ｓｕｐｐｌｅｍｅｎｔａｒｙ Ｅｎｈａｎｃｅｍｅｎｔ Ｉｎｆｏｒｍａｔｉｏｎ）メッセージからスケーラブルネスト化されたＳＥＩメッセージを抽出することにより、非スケーラブルネスト化されたＳＥＩメッセージを生成するか否かは、前記スケーラブルネスティングＳＥＩメッセージが特定のＯＬＳ（Ｏｕｔｐｕｔ Ｌａｙｅｒ Ｓｅｔ）に適用されるか否かを示す第１のフラグ、および、前記スケーラブルネスティングＳＥＩメッセージがすべてのサブピクチャまたは特定のサブピクチャのみに適用されるかを示す第２のフラグに基づくことを規定する、方法。
【発明の詳細な説明】
【技術分野】
【0001】
関連出願の相互参照
本願は、２０２０年５月２２日出願の米国特許仮出願第６３／０２９３０８号の優先権および利益を主張する２０２１年５月２１日出願の国際特許出願第ＰＣＴ／ＵＳ２０２１／０３３７１７号に基づく。上記出願の開示全体は、参照によりここに援用される。
本願は、２０２０年５月２２日出願の米国特許仮出願第６３／０２９３０８号の優先権および利益を主張する２０２１年５月２１日出願の国際特許出願第ＰＣＴ／ＵＳ２０２１／０３３７１７号に基づく。上記出願の開示全体は、参照によりここに援用される。
【0002】
この特許明細書は、画像および映像の符号化および復号に関する。
【背景技術】
【0003】
デジタル映像は、インターネットおよび他のデジタル通信ネットワークにおいて最大の帯域幅の使用量を占めている。映像を受信および表示することが可能である接続されたユーザ機器の数が増加するにつれ、デジタル映像の使用に対する帯域幅需要は増大し続けることが予測される。
【発明の概要】
【0004】
本明細書は、映像符号化または復号を行うために、映像エンコーダおよびデコーダによって使用され得る技術を開示する。
【0005】
１つの例示的な態様において、映像処理方法が開示される。方法は、規則に従って、複数のレイヤを含む映像と映像のビットストリームとの間の変換を実行すること含み、規則は、ビットストリームから抽出されるサブビットストリームの時間的レイヤ識別子の値の最大許容値を規定する。
【0006】
別の例示的な態様において、映像処理方法が開示される。方法は、規則に従って、映像と映像のビットストリームとの間の変換を実行することを含み、規則は、サブビットストリームを出力するためのサブビットストリーム抽出プロセス中にビットストリームから抽出されるべきＮＡＬ（Ｎｅｔｗｏｒｋ Ａｂｓｔｒａｃｔｉｏｎ Ｌａｙｅｒ）ユニットを定義し、ＯＬＳ（Ｏｕｔｐｕｔ Ｌａｙｅｒ Ｓｅｔ）インデックスを有するＯＬＳ内のＮＡＬユニットヘッダ識別子の値のリストが、サブビットストリーム抽出プロセスに入力されるビットストリーム内のすべてのＶＣＬ（Ｖｏｄｅｏ Ｃｏｄｉｎｇ Ｌａｙｅｒ） ＮＡＬユニットにおけるＮＡＬユニットヘッダ識別子のすべての値を含まないかどうかに基づいて、サブビットストリームを導出することを規定する。
【0007】
別の例示的な態様において、映像処理方法が開示される。方法は、規則に従って、映像と映像のビットストリームとの間の変換を実行することを含み、規則は、サブビットストリームを出力するためのサブビットストリーム抽出プロセス中にビットストリームから抽出されるべきＮＡＬ（Ｎｅｔｗｏｒｋ Ａｂｓｔｒａｃｔｉｏｎ Ｌａｙｅｒ）ユニットを定義し、規則は、ＳＥＩ（Ｓｕｐｐｌｅｍｅｎｔａｌ Ｅｎｈａｎｃｅｍｅｎｔ Ｉｎｆｏｒｍａｔｉｏｎ） ＮＡＬ（Ｎｅｔｗｏｒｋ Ａｂｓｔｒａｃｔｉｏｎ Ｌａｙｅｒ）ユニットに含まれる第１のＳＥＩメッセージのペイロードタイプに呼応して、ＳＥＩ ＮＡＬユニットが特定のペイロードタイプを持つＳＥＩメッセージを含むことを許可しないことを規定する。
【0008】
別の例示的な態様において、映像処理方法が開示される。方法は、フォーマット規則に従って、映像と映像のビットストリームとの間の変換を実行することを含み、フォーマット規則は、ビットストリームが、１または複数の特定のペイロードタイプを有する１または複数の非スケーラブルネスト化されたＳＥＩ（Ｓｕｐｐｌｅｍｅｎｔａｌ Ｅｎｈａｎｃｅｍｅｎｔ Ｉｎｆｏｒｍａｔｉｏｎ）メッセージが、コーディングレイヤによって参照されるすべての出力レイヤセットに適用されるかどうかを規定するフラグを含むことを規定する。
【0009】
別の例示的な態様において、映像処理方法が開示される。方法は、規則に従って、映像と映像のビットストリームとの間の変換を実行することを含み、規則は、特定のタイプのＮＡＬ（Ｎｅｔｗｏｒｋ Ａｂｓｔｒａｃｔｉｏｎ Ｌａｙｅｒ）ユニットを削除せず、かつ、特定のＮＡＬユニットヘッダ識別子値を有するビットストリームから出力サブビットストリームを抽出するサブビットストリーム抽出プロセスを規定し、特定のタイプは、ＡＵＤ（Ａｃｃｅｓｓ Ｕｎｉｔ Ｄｅｌｉｍｉｔｅｒ） ＮＡＬユニットを含む。
【0010】
別の例示的な態様において、映像処理方法が開示される。方法は、規則に従って、１または複数のレイヤを含む映像と映像のビットストリームとの間の変換を行うこと含み、規則は、サブビットストリーム抽出のプロセスにおいて、ターゲットＯＬＳ（Ｏｕｔｐｕｔ Ｌａｙｅｒ Ｓｅｔ）に含まれていないレイヤに適用されるスケーラブルネスティングＳＥＩ（Ｓｕｐｐｌｅｍｅｎｔａｒｙ Ｅｎｈａｎｃｅｍｅｎｔ Ｉｎｆｏｒｍａｔｉｏｎ）メッセージを含むＮＡＬ（Ｎｅｔｗｏｒｋ Ａｂｓｔｒａｃｔｉｏｎ Ｌａｙｅｒ）ユニットを削除することを規定する。
【0011】
別の例示的な態様において、映像処理方法が開示される。方法は、規則に従って、１または複数のレイヤを含む映像と映像のビットストリームとの間の変換を実行することを含み、規則は、サブビットストリーム抽出のプロセスにおいて、ＳＥＩ（Ｓｕｐｐｌｅｍｅｎｔａｒｙ Ｅｎｈａｎｃｅｍｅｎｔ Ｉｎｆｏｒｍａｔｉｏｎ）メッセージが特定のＯＬＳ（Ｏｕｔｐｕｔ Ｌａｙｅｒ Ｓｅｔ）に適用されるかどうかを示す第１のフラグと、ＳＥＩメッセージがすべてのサブピクチャに適用されるかまたは特定のサブピクチャにのみに適用されるかどうかを示す第２のフラグに基づいて、スケーラブルネスティングＳＥＩメッセージからスケーラブルにネスト化されたＳＥＩメッセージを抽出することによって、非スケーラブルネスト化されたＳＥＩメッセージが生成される。
【0012】
別の例示的な態様において、映像処理方法が開示される。方法は、規則に従って、１または複数のレイヤを含む映像と映像のビットストリームとの間の変換を実行することを含み、規則は、サブビットストリーム抽出のプロセスにおいて、ピクチャユニットにおける第１のＳＥＩ（Ｓｕｐｐｌｅｍｅｎｔａｌ Ｅｎｈａｎｃｅｍｅｎｔ Ｉｎｆｏｒｍａｔｉｏｎ） ＮＡＬ（Ｎｅｔｗｏｒｋ Ａｂｓｔｒａｃｔｉｏｎ Ｌａｙｅｒ）ユニットから複数のスケーラブルネスト化されたＳＥＩメッセージを抽出することによって、非スケーラブルネスト化されたＳＥＩメッセージが生成されることを規定する。
【0013】
別の例示的な態様において、映像処理方法が開示される。方法は、規則に従って、１または複数のレイヤを含む映像と映像のビットストリームとの間の変換を実行することを含み、規則は、出力ビットストリームを生成するためにサブビットストリーム抽出プロセスを規定し、規則は、サブビットストリーム抽出プロセス中の１または複数のＳＥＩ（Ｓｕｐｐｌｅｍｅｎｔａｌ Ｅｎｈａｎｃｅｍｅｎｔ Ｉｎｆｏｒｍａｔｉｏｎ） ＮＡＬ（Ｎｅｔｗｏｒｋ Ａｂｓｔｒａｃｔｉｏｎ Ｌａｙｅｒ）ユニットのハンドリングを規定する。
【0014】
さらに別の例示的な態様において、映像エンコーダ装置が開示される。映像エンコーダは、上述した方法を実装するように構成されたプロセッサを備える。
【0015】
さらに別の例示的な態様において、映像デコーダ装置が開示される。映像デコーダは、上述した方法を実装するように構成されたプロセッサを備える。
【0016】
さらに別の例示的な態様では、コードが記憶されたコンピュータ可読媒体が開示される。このコードは、本明細書に記載の方法の１つをプロセッサ実行可能なコードの形式で実施する。
【0017】
これらのおよび他の特徴は、本明細書全体にわたって説明される。
【図面の簡単な説明】
【0018】
【図1】開示される技術のいくつかの実施形態による映像コーディングシステムを示すブロック図である。
【図2】映像処理に使用されるハードウェアプラットフォームの例を示すブロック図である。
【図3】映像処理方法の一例を示すフローチャートである。
【図4】例示的な映像コーディングするシステムを示すブロック図である。
【図5】開示される技術のいくつかの実施形態によるエンコーダを示すブロック図である。
【図6】開示される技術のいくつかの実施形態によるデコーダを示すブロック図である。
【図7A】開示される技術のいくつかの実装形態に基づく、映像処理の例示的な方法のフローチャートを示す。
【図7B】開示される技術のいくつかの実装形態に基づく、映像処理の例示的な方法のフローチャートを示す。
【図7C】開示される技術のいくつかの実装形態に基づく、映像処理の例示的な方法のフローチャートを示す。
【図7D】開示される技術のいくつかの実装形態に基づく、映像処理の例示的な方法のフローチャートを示す。
【図8】開示される技術のいくつかの実装形態に基づく、映像処理の例示的な方法のフローチャートを示す。
【図9】開示される技術のいくつかの実装形態に基づく、映像処理の例示的な方法のフローチャートを示す。
【図10A】開示される技術のいくつかの実装形態に基づく、映像処理の例示的な方法のフローチャートを示す。
【図10B】開示される技術のいくつかの実装形態に基づく、映像処理の例示的な方法のフローチャートを示す。
【図10C】開示される技術のいくつかの実装形態に基づく、映像処理の例示的な方法のフローチャートを示す。
【発明を実施するための形態】
【0019】
本明細書では、理解を容易にするために章の見出しを使用しており、その技術および各章に記載された実施形態の適用可能性をその章のみに限定するものではない。さらに、Ｈ．２６６という用語は、ある説明において、理解を容易にするためだけに用いられ、開示される技術の範囲を限定するために用いられたものではない。このように、本明細書で説明される技術は、他の映像コーデックプロトコルおよび設計にも適用可能である。
【0020】
１．導入
本明細書は、映像コーディング技術に関する。具体的には、一般的なサブビットストリーム抽出プロセス、ピクチャレベルのＨＲＤパラメータのシグナリング、およびＳＥＩ ＮＡＬユニットにＳＥＩメッセージを含めることについて、若干の改良がなされている。この考えは、個々にまたは様々な組み合わせで、マルチレイヤ映像コーディング、例えば、現在開発されているＶＶＣ（Ｖｅｒｓａｔｉｌｅ Ｖｉｄｅｏ Ｃｏｄｉｎｇ）をサポートする任意の映像コーディング規格または非標準映像コーデックに適用されてもよい。
本明細書は、映像コーディング技術に関する。具体的には、一般的なサブビットストリーム抽出プロセス、ピクチャレベルのＨＲＤパラメータのシグナリング、およびＳＥＩ ＮＡＬユニットにＳＥＩメッセージを含めることについて、若干の改良がなされている。この考えは、個々にまたは様々な組み合わせで、マルチレイヤ映像コーディング、例えば、現在開発されているＶＶＣ（Ｖｅｒｓａｔｉｌｅ Ｖｉｄｅｏ Ｃｏｄｉｎｇ）をサポートする任意の映像コーディング規格または非標準映像コーデックに適用されてもよい。
【0021】
２．略語
ＡＰＳ Ａｄａｐｔａｔｉｏｎ Ｐａｒａｍｅｔｅｒ Ｓｅｔ
ＡＵ Ａｃｃｅｓｓ Ｕｎｉｔ
ＡＵＤ Ａｃｃｅｓｓ Ｕｎｉｔ Ｄｅｌｉｍｉｔｅｒ
ＡＶＣ Ａｄｖａｎｃｅｄ Ｖｉｄｅｏ Ｃｏｄｉｎｇ
ＣＬＶＳ Ｃｏｄｅｄ Ｌａｙｅｒ Ｖｉｄｅｏ Ｓｅｑｕｅｎｃｅ
ＣＰＢ Ｃｏｄｅｄ Ｐｉｃｔｕｒｅ Ｂｕｆｆｅｒ
ＣＲＡ Ｃｌｅａｎ Ｒａｎｄｏｍ Ａｃｃｅｓｓ
ＣＴＵ Ｃｏｄｉｎｇ Ｔｒｅｅ Ｕｎｉｔ
ＣＶＳ Ｃｏｄｅｄ Ｖｉｄｅｏ Ｓｅｑｕｅｎｃｅ
ＤＣＩ Ｄｅｃｏｄｉｎｇ Ｃａｐａｂｉｌｉｔｙ Ｉｎｆｏｒｍａｔｉｏｎ
ＤＰＢ Ｄｅｃｏｄｅｄ Ｐｉｃｔｕｒｅ Ｂｕｆｆｅｒ
ＥＯＢ Ｅｎｄ Ｏｆ Ｂｉｔｓｔｒｅａｍ
ＥＯＳ Ｅｎｄ Ｏｆ Ｓｅｑｕｅｎｃｅ
ＧＤＲ Ｇｒａｄｕａｌ Ｄｅｃｏｄｉｎｇ Ｒｅｆｒｅｓｈ
ＨＥＶＣ Ｈｉｇｈ Ｅｆｆｉｃｉｅｎｃｙ Ｖｉｄｅｏ Ｃｏｄｉｎｇ
ＨＲＤ Ｈｙｐｏｔｈｅｔｉｃａｌ Ｒｅｆｅｒｅｎｃｅ Ｄｅｃｏｄｅｒ
ＩＤＲ Ｉｎｓｔａｎｔａｎｅｏｕｓ Ｄｅｃｏｄｉｎｇ Ｒｅｆｒｅｓｈ
ＩＬＰ Ｉｎｔｅｒ－Ｌａｙｅｒ Ｐｒｅｄｉｃｔｉｏｎ
ＩＬＲＰ Ｉｎｔｅｒ－Ｌａｙｅｒ Ｒｅｆｅｒｅｎｃｅ Ｐｉｃｔｕｒｅ
ＪＥＭ Ｊｏｉｎｔ Ｅｘｐｌｏｒａｔｉｏｎ Ｍｏｄｅｌ
ＬＴＲＰ Ｌｏｎｇ－Ｔｅｒｍ Ｒｅｆｅｒｅｎｃｅ Ｐｉｃｔｕｒｅ
ＭＣＴＳ Ｍｏｔｉｏｎ－Ｃｏｎｓｔｒａｉｎｅｄ Ｔｉｌｅ Ｓｅｔｓ
ＮＡＬ Ｎｅｔｗｏｒｋ Ａｂｓｔｒａｃｔｉｏｎ Ｌａｙｅｒ
ＯＬＳ Ｏｕｔｐｕｔ Ｌａｙｅｒ Ｓｅｔ
ＰＨ Ｐｉｃｔｕｒｅ Ｈｅａｄｅｒ
ＰＰＳ Ｐｉｃｔｕｒｅ Ｐａｒａｍｅｔｅｒ Ｓｅｔ
ＰＴＬ Ｐｒｏｆｉｌｅ，Ｔｉｅｒ ａｎｄ Ｌｅｖｅｌ
ＰＵ Ｐｉｃｔｕｒｅ Ｕｎｉｔ
ＲＡＰ Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｐｏｉｎｔ
ＲＢＳＰ Ｒａｗ Ｂｙｔｅ Ｓｅｑｕｅｎｃｅ Ｐａｙｌｏａｄ
ＳＥＩ Ｓｕｐｐｌｅｍｅｎｔａｌ Ｅｎｈａｎｃｅｍｅｎｔ Ｉｎｆｏｒｍａｔｉｏｎ
ＳＰＳ Ｓｅｑｕｅｎｃｅ Ｐａｒａｍｅｔｅｒ Ｓｅｔ
ＳＴＲＰ Ｓｈｏｒｔ－Ｔｅｒｍ Ｒｅｆｅｒｅｎｃｅ Ｐｉｃｔｕｒｅ
ＳＶＣ Ｓｃａｌａｂｌｅ Ｖｉｄｅｏ Ｃｏｄｉｎｇ
ＶＣＬ Ｖｉｄｅｏ Ｃｏｄｉｎｇ Ｌａｙｅｒ
ＶＰＳ Ｖｉｄｅｏ Ｐａｒａｍｅｔｅｒ Ｓｅｔ
ＶＴＭ ＶＶＣ Ｔｅｓｔ Ｍｏｄｅｌ
ＶＵＩ Ｖｉｄｅｏ Ｕｓａｂｉｌｉｔｙ Ｉｎｆｏｒｍａｔｉｏｎ
ＶＶＣ Ｖｅｒｓａｔｉｌｅ Ｖｉｄｅｏ Ｃｏｄｉｎｇ
ＡＰＳ Ａｄａｐｔａｔｉｏｎ Ｐａｒａｍｅｔｅｒ Ｓｅｔ
ＡＵ Ａｃｃｅｓｓ Ｕｎｉｔ
ＡＵＤ Ａｃｃｅｓｓ Ｕｎｉｔ Ｄｅｌｉｍｉｔｅｒ
ＡＶＣ Ａｄｖａｎｃｅｄ Ｖｉｄｅｏ Ｃｏｄｉｎｇ
ＣＬＶＳ Ｃｏｄｅｄ Ｌａｙｅｒ Ｖｉｄｅｏ Ｓｅｑｕｅｎｃｅ
ＣＰＢ Ｃｏｄｅｄ Ｐｉｃｔｕｒｅ Ｂｕｆｆｅｒ
ＣＲＡ Ｃｌｅａｎ Ｒａｎｄｏｍ Ａｃｃｅｓｓ
ＣＴＵ Ｃｏｄｉｎｇ Ｔｒｅｅ Ｕｎｉｔ
ＣＶＳ Ｃｏｄｅｄ Ｖｉｄｅｏ Ｓｅｑｕｅｎｃｅ
ＤＣＩ Ｄｅｃｏｄｉｎｇ Ｃａｐａｂｉｌｉｔｙ Ｉｎｆｏｒｍａｔｉｏｎ
ＤＰＢ Ｄｅｃｏｄｅｄ Ｐｉｃｔｕｒｅ Ｂｕｆｆｅｒ
ＥＯＢ Ｅｎｄ Ｏｆ Ｂｉｔｓｔｒｅａｍ
ＥＯＳ Ｅｎｄ Ｏｆ Ｓｅｑｕｅｎｃｅ
ＧＤＲ Ｇｒａｄｕａｌ Ｄｅｃｏｄｉｎｇ Ｒｅｆｒｅｓｈ
ＨＥＶＣ Ｈｉｇｈ Ｅｆｆｉｃｉｅｎｃｙ Ｖｉｄｅｏ Ｃｏｄｉｎｇ
ＨＲＤ Ｈｙｐｏｔｈｅｔｉｃａｌ Ｒｅｆｅｒｅｎｃｅ Ｄｅｃｏｄｅｒ
ＩＤＲ Ｉｎｓｔａｎｔａｎｅｏｕｓ Ｄｅｃｏｄｉｎｇ Ｒｅｆｒｅｓｈ
ＩＬＰ Ｉｎｔｅｒ－Ｌａｙｅｒ Ｐｒｅｄｉｃｔｉｏｎ
ＩＬＲＰ Ｉｎｔｅｒ－Ｌａｙｅｒ Ｒｅｆｅｒｅｎｃｅ Ｐｉｃｔｕｒｅ
ＪＥＭ Ｊｏｉｎｔ Ｅｘｐｌｏｒａｔｉｏｎ Ｍｏｄｅｌ
ＬＴＲＰ Ｌｏｎｇ－Ｔｅｒｍ Ｒｅｆｅｒｅｎｃｅ Ｐｉｃｔｕｒｅ
ＭＣＴＳ Ｍｏｔｉｏｎ－Ｃｏｎｓｔｒａｉｎｅｄ Ｔｉｌｅ Ｓｅｔｓ
ＮＡＬ Ｎｅｔｗｏｒｋ Ａｂｓｔｒａｃｔｉｏｎ Ｌａｙｅｒ
ＯＬＳ Ｏｕｔｐｕｔ Ｌａｙｅｒ Ｓｅｔ
ＰＨ Ｐｉｃｔｕｒｅ Ｈｅａｄｅｒ
ＰＰＳ Ｐｉｃｔｕｒｅ Ｐａｒａｍｅｔｅｒ Ｓｅｔ
ＰＴＬ Ｐｒｏｆｉｌｅ，Ｔｉｅｒ ａｎｄ Ｌｅｖｅｌ
ＰＵ Ｐｉｃｔｕｒｅ Ｕｎｉｔ
ＲＡＰ Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｐｏｉｎｔ
ＲＢＳＰ Ｒａｗ Ｂｙｔｅ Ｓｅｑｕｅｎｃｅ Ｐａｙｌｏａｄ
ＳＥＩ Ｓｕｐｐｌｅｍｅｎｔａｌ Ｅｎｈａｎｃｅｍｅｎｔ Ｉｎｆｏｒｍａｔｉｏｎ
ＳＰＳ Ｓｅｑｕｅｎｃｅ Ｐａｒａｍｅｔｅｒ Ｓｅｔ
ＳＴＲＰ Ｓｈｏｒｔ－Ｔｅｒｍ Ｒｅｆｅｒｅｎｃｅ Ｐｉｃｔｕｒｅ
ＳＶＣ Ｓｃａｌａｂｌｅ Ｖｉｄｅｏ Ｃｏｄｉｎｇ
ＶＣＬ Ｖｉｄｅｏ Ｃｏｄｉｎｇ Ｌａｙｅｒ
ＶＰＳ Ｖｉｄｅｏ Ｐａｒａｍｅｔｅｒ Ｓｅｔ
ＶＴＭ ＶＶＣ Ｔｅｓｔ Ｍｏｄｅｌ
ＶＵＩ Ｖｉｄｅｏ Ｕｓａｂｉｌｉｔｙ Ｉｎｆｏｒｍａｔｉｏｎ
ＶＶＣ Ｖｅｒｓａｔｉｌｅ Ｖｉｄｅｏ Ｃｏｄｉｎｇ
【0022】
３．初期の協議
映像符号化規格は、主に周知のＩＴＵ－ＴおよびＩＳＯ／ＩＥＣ規格の開発によって発展してきた。ＩＴＵ－ＴはＨ．２６１とＨ．２６３を作り、ＩＳＯ／ＩＥＣはＭＰＥＧ－１とＭＰＥＧ－４Ｖｉｓｕａｌを作り、両団体はＨ．２６２／ＭＰＥＧ－２ＶｉｄｅｏとＨ．２６４／ＭＰＥＧ－４ＡＶＣ（Ａｄｖａｎｃｅｄ Ｖｉｄｅｏ Ｃｏｄｉｎｇ）とＨ．２６５／ＨＥＶＣ規格を共同で作った。Ｈ．２６２以来、映像コーディング規格は、時間的予測と変換コーディングが利用されるハイブリッド映像コーディング構造に基づく。ＨＥＶＣを超えた将来の映像コーディング技術を探索するため、２０１５年には、ＶＣＥＧとＭＰＥＧが共同でＪＶＥＴ（Ｊｏｉｎｔ Ｖｉｄｅｏ Ｅｘｐｌｏｒａｔｉｏｎ Ｔｅａｍ）を設立した。それ以来、多くの新しい方法がＪＶＥＴによって採用され、ＪＥＭ（Ｊｏｉｎｔ Ｅｘｐｌｏｒａｔｉｏｎ Ｍｏｄｅｌ）と呼ばれる参照ソフトウェアに組み込まれてきた。ＪＶＥＴは四半期に１回開催され、新しいコーディング規格はＨＥＶＣに比べて５０％のビットレート低減を目指している。２０１８年４月のＪＶＥＴ会議において、新しい映像コーディング規格をＶＶＣ（Ｖｅｒｓａｔｉｌｅ Ｖｉｄｅｏ Ｃｏｄｉｎｇ）と正式に命名し、その時、第１版のＶＴＭ（ＶＣＣ Ｔｅｓｔ Ｍｏｄｅｌ）をリリースした。ＶＶＣの標準化に寄与する努力が続けられているので、すべてのＪＶＥＴ会議において、ＶＶＣ標準に新しいコーディング技術が採用されている。毎回の会議の後、ＶＶＣ作業草案およびテストモデルＶＴＭを更新する。ＶＶＣプロジェクトは、現在、２０２０年７月の会合における技術完成（ＦＤＩＳ）を目指している。
映像符号化規格は、主に周知のＩＴＵ－ＴおよびＩＳＯ／ＩＥＣ規格の開発によって発展してきた。ＩＴＵ－ＴはＨ．２６１とＨ．２６３を作り、ＩＳＯ／ＩＥＣはＭＰＥＧ－１とＭＰＥＧ－４Ｖｉｓｕａｌを作り、両団体はＨ．２６２／ＭＰＥＧ－２ＶｉｄｅｏとＨ．２６４／ＭＰＥＧ－４ＡＶＣ（Ａｄｖａｎｃｅｄ Ｖｉｄｅｏ Ｃｏｄｉｎｇ）とＨ．２６５／ＨＥＶＣ規格を共同で作った。Ｈ．２６２以来、映像コーディング規格は、時間的予測と変換コーディングが利用されるハイブリッド映像コーディング構造に基づく。ＨＥＶＣを超えた将来の映像コーディング技術を探索するため、２０１５年には、ＶＣＥＧとＭＰＥＧが共同でＪＶＥＴ（Ｊｏｉｎｔ Ｖｉｄｅｏ Ｅｘｐｌｏｒａｔｉｏｎ Ｔｅａｍ）を設立した。それ以来、多くの新しい方法がＪＶＥＴによって採用され、ＪＥＭ（Ｊｏｉｎｔ Ｅｘｐｌｏｒａｔｉｏｎ Ｍｏｄｅｌ）と呼ばれる参照ソフトウェアに組み込まれてきた。ＪＶＥＴは四半期に１回開催され、新しいコーディング規格はＨＥＶＣに比べて５０％のビットレート低減を目指している。２０１８年４月のＪＶＥＴ会議において、新しい映像コーディング規格をＶＶＣ（Ｖｅｒｓａｔｉｌｅ Ｖｉｄｅｏ Ｃｏｄｉｎｇ）と正式に命名し、その時、第１版のＶＴＭ（ＶＣＣ Ｔｅｓｔ Ｍｏｄｅｌ）をリリースした。ＶＶＣの標準化に寄与する努力が続けられているので、すべてのＪＶＥＴ会議において、ＶＶＣ標準に新しいコーディング技術が採用されている。毎回の会議の後、ＶＶＣ作業草案およびテストモデルＶＴＭを更新する。ＶＶＣプロジェクトは、現在、２０２０年７月の会合における技術完成（ＦＤＩＳ）を目指している。
【0023】
３．１ シーケンス内のピクチャ解像度の変更
ＡＶＣおよびＨＥＶＣにおいて、ピクチャの空間的解像度は、新しいＳＰＳを使用する新しいシーケンスがＩＲＡＰピクチャで始まらない限り、変更することができない。ＶＶＣは、常にイントラ符号化されるＩＲＡＰピクチャを符号化せずに、ある位置のシーケンス内でピクチャの解像度を変更することを可能にする。この特徴は、参照ピクチャが復号されている現在のピクチャと異なる解像度を有する場合、インター予測に使用される参照ピクチャをリサンプリングすることが必要であるため、ＲＰＲ（Ｒｅｆｅｒｅｎｃｅ Ｐｉｃｔｕｒｅ Ｒｅｓａｍｐｌｉｎｇ）と称する。
ＡＶＣおよびＨＥＶＣにおいて、ピクチャの空間的解像度は、新しいＳＰＳを使用する新しいシーケンスがＩＲＡＰピクチャで始まらない限り、変更することができない。ＶＶＣは、常にイントラ符号化されるＩＲＡＰピクチャを符号化せずに、ある位置のシーケンス内でピクチャの解像度を変更することを可能にする。この特徴は、参照ピクチャが復号されている現在のピクチャと異なる解像度を有する場合、インター予測に使用される参照ピクチャをリサンプリングすることが必要であるため、ＲＰＲ（Ｒｅｆｅｒｅｎｃｅ Ｐｉｃｔｕｒｅ Ｒｅｓａｍｐｌｉｎｇ）と称する。
【0024】
スケーリング比は、１／２（参照ピクチャから現在のピクチャへのダウンサンプリングの２倍）以上８（８倍のアップサンプリング）以下に制限される。参照ピクチャと現在のピクチャとの間の様々なスケーリング比に対処するために、周波数カットオフが異なるリサンプリングフィルタの３つのセットを規定する。リサンプリングフィルタの３つのセットは、それぞれ、１／２～１／１．７５、１／１．７５～１／１．２５、および１／１．２５～８の範囲のスケーリング比に適用される。リサンプリングフィルタの各セットは、動き補償補間フィルタの場合と同様に、輝度に対して１６個のフェーズを有し、彩度に対して３２個のフェーズを有する。実際には、通常のＭＣ補間処理は、１／１．２５～８の範囲のスケーリング比を有するリサンプリング処理の特殊な場合である。水平および垂直スケーリング比は、ピクチャの幅および高さ、並びに参照ピクチャおよび現在のピクチャに対して規定された左、右、上および下のスケーリングオフセットに基づいて導出される。
【0025】
ＨＥＶＣとは異なる、この特徴をサポートするためのＶＶＣ設計の他の態様は、ｉ）ＳＰＳの代わりにＰＰＳにおいてピクチャ解像度および対応する適合性ウィンドウを信号通知すること、ＳＰＳにおいて最大ピクチャ解像度を信号通知すること、ｉｉ）シングルレイヤビットストリームの場合、各ピクチャ記憶装置（１つの復号されたピクチャを記憶するためのＤＰＢにおける１つのスロット）は、最大ピクチャ解像度を有する復号されたピクチャを記憶するために必要なバッファサイズを占めることを含む。
【0026】
３．２． 全般およびＶＶＣにおけるＳＶＣ（Ｓｃａｌａｂｌｅ Ｖｉｄｅｏ Ｃｏｄｉｎｇ）
ＳＶＣ（Ｓｃａｌａｂｌｅ Ｖｉｄｅｏ Ｃｏｄｉｎｇ、時には、映像コーディングにおけるスケーラビリティとも呼ばれる）は、ＢＬ（Ｂａｓｅ Ｌａｙｅｒ）（時には、ＲＬ（Ｒｅｆｅｒｅｎｃｅ Ｌａｙｅｒ）と呼ばれる）、１または複数のスケーラブルＥＬ（Ｅｎｈａｎｃｅｍｅｎｔ Ｌａｙｅｒ）が使用される映像コーディングを参照する。ＳＶＣにおいて、ベースレイヤは、品質の基本レベルの映像データを担持することができる。１または複数のエンハンスメントレイヤは、例えば、より高い空間的、時間的、および／またはＳＮＲ（Ｓｉｇｎａｌ－ｔｏ－Ｎｏｉｓｅ）レベルをサポートするように、追加の映像データを担持することができる。エンハンスメントレイヤは、前の、符号化されたレイヤに対して定義されてもよい。例えば、下層がＢＬとして機能し、上層がＥＬとして機能することができる。中間レイヤは、ＥＬまたはＲＬのいずれか、またはその両方として機能することができる。例えば、中間レイヤ（例えば、最下レイヤでも最上レイヤでもないレイヤ）は、中間レイヤの下のレイヤ、例えば、ベースレイヤまたは任意の介在するエンハンスメントレイヤのためのＥＬであってもよく、同時に、中間レイヤの上の１または複数のエンハンスメントレイヤのためのＲＬとしての役割を果たす。同様に、ＨＥＶＣ規格のマルチビューまたは３Ｄ拡張では、複数のビューが存在してもよく、１つのビューの情報を利用して別のビューの情報をコーディング（例えば、符号化または復号）することができる（例えば、動き推定、動きベクトル予測および／または他の冗長性）。
ＳＶＣ（Ｓｃａｌａｂｌｅ Ｖｉｄｅｏ Ｃｏｄｉｎｇ、時には、映像コーディングにおけるスケーラビリティとも呼ばれる）は、ＢＬ（Ｂａｓｅ Ｌａｙｅｒ）（時には、ＲＬ（Ｒｅｆｅｒｅｎｃｅ Ｌａｙｅｒ）と呼ばれる）、１または複数のスケーラブルＥＬ（Ｅｎｈａｎｃｅｍｅｎｔ Ｌａｙｅｒ）が使用される映像コーディングを参照する。ＳＶＣにおいて、ベースレイヤは、品質の基本レベルの映像データを担持することができる。１または複数のエンハンスメントレイヤは、例えば、より高い空間的、時間的、および／またはＳＮＲ（Ｓｉｇｎａｌ－ｔｏ－Ｎｏｉｓｅ）レベルをサポートするように、追加の映像データを担持することができる。エンハンスメントレイヤは、前の、符号化されたレイヤに対して定義されてもよい。例えば、下層がＢＬとして機能し、上層がＥＬとして機能することができる。中間レイヤは、ＥＬまたはＲＬのいずれか、またはその両方として機能することができる。例えば、中間レイヤ（例えば、最下レイヤでも最上レイヤでもないレイヤ）は、中間レイヤの下のレイヤ、例えば、ベースレイヤまたは任意の介在するエンハンスメントレイヤのためのＥＬであってもよく、同時に、中間レイヤの上の１または複数のエンハンスメントレイヤのためのＲＬとしての役割を果たす。同様に、ＨＥＶＣ規格のマルチビューまたは３Ｄ拡張では、複数のビューが存在してもよく、１つのビューの情報を利用して別のビューの情報をコーディング（例えば、符号化または復号）することができる（例えば、動き推定、動きベクトル予測および／または他の冗長性）。
【0027】
ＳＶＣにおいて、エンコーダまたはデコーダで使用されるパラメータは、それらを利用することができるコーディングレベル（例えば、映像レベル、シーケンスレベル、ピクチャレベル、スライスレベル等）に基づいてパラメータセットにグループ分けされる。例えば、ビットストリームにおける異なるレイヤの１または複数のコーディングされた映像シーケンスによって利用できるパラメータは、ＶＰＳ（Ｖｉｄｅｏ Ｐａｒａｍｅｔｅｒ Ｓｅｔ）に含まれてもよく、コーディングされた映像シーケンスにおける１または複数のピクチャによって利用されるパラメータは、ＳＰＳ（Ｓｅｑｕｅｎｃｅ Ｐａｒａｍｅｔｅｒ Ｓｅｔ）に含まれてもよい。同様に、ピクチャの１または複数のスライスで利用されるパラメータは、ＰＰＳ（Ｐｉｃｔｕｒｅ Ｐａｒａｍｔｅｒ Ｓｅｔ）に含まれてもよく、単一のスライスに固有の他のパラメータは、スライスヘッダに含まれてもよい。同様に、特定のレイヤが所与の時間にどのパラメータセットを使用しているかの指示は、様々なコーディングレベルで提供されてもよい。
【0028】
ＶＶＣにおけるＲＰＲ（Ｒｅｆｅｒｅｎｃｅ Ｐｉｃｔｕｒｅ Ｒｅｓａｍｐｌｉｎｇ）のサポートのおかげで、空間的スケーラビリティサポートに必要なアップサンプリングはＲＰＲアップサンプリングフィルタを使用するだけでよいので、追加の信号処理レベルのコーディングツールを必要とせずに、複数のレイヤ、例えば、ＶＶＣにおけるＳＤおよびＨＤ解像度の２つのレイヤを含むビットストリームをサポートするように設計することができる。それにもかかわらず、スケーラビリティサポートのためには、高レベルの構文変更（スケーラビリティをサポートしない場合と比較して）が必要である。スケーラビリティサポートは、ＶＶＣバージョン１に規定されている。ＡＶＣおよびＨＥＶＣの拡張を含む、任意の以前の映像コーディング規格におけるスケーラビリティサポートとは異なり、ＶＶＣのスケーラビリティの設計は、シングルレイヤのデコーダの設計にできるだけ適したものにされてきた。マルチレイヤのビットストリームの復号能力は、ビットストリームにシングルレイヤしかなかったかの如く規定される。例えば、ＤＰＢサイズのような復号能力は、復号されるビットストリームのレイヤの数に依存しないように規定される。基本的に、シングルレイヤのビットストリームのために設計されたデコーダは、マルチレイヤのビットストリームを復号することができるようにするために、多くの変更を必要としない。ＡＶＣおよびＨＥＶＣのマルチレイヤ拡張の設計と比較して、ＨＬＳの態様は、ある程度の柔軟性を犠牲にして大幅に簡略化されてきた。例えば、ＩＲＡＰ ＡＵは、ＣＶＳに存在するレイヤの各々にピクチャを含むことが必要である。
【0029】
３．３ パラメータセット
ＡＶＣ、ＨＥＶＣ、ＶＶＣはパラメータ集合を規定する。パラメータセットのタイプは、ＳＰＳ、ＰＰＳ、ＡＰＳ、ＶＰＳ等である。ＳＰＳおよびＰＰＳは、ＡＶＣ、ＨＥＶＣ、ＶＶＣのすべてでサポートされている。ＶＰＳは、ＨＥＶＣから導入されたものであり、ＨＥＶＣおよびＶＶＣの両方に含まれる。ＡＰＳは、ＡＶＣまたはＨＥＶＣに含まれていなかったが、最近のＶＶＣ草案のテキストに含まれている。
ＡＶＣ、ＨＥＶＣ、ＶＶＣはパラメータ集合を規定する。パラメータセットのタイプは、ＳＰＳ、ＰＰＳ、ＡＰＳ、ＶＰＳ等である。ＳＰＳおよびＰＰＳは、ＡＶＣ、ＨＥＶＣ、ＶＶＣのすべてでサポートされている。ＶＰＳは、ＨＥＶＣから導入されたものであり、ＨＥＶＣおよびＶＶＣの両方に含まれる。ＡＰＳは、ＡＶＣまたはＨＥＶＣに含まれていなかったが、最近のＶＶＣ草案のテキストに含まれている。
【0030】
ＳＰＳは、シーケンスレベルのヘッダ情報を伝送するように設計され、ＰＰＳは、頻繁に変化しないピクチャレベルのヘッダ情報を伝送するように設計された。ＳＰＳおよびＰＰＳを用いると、シーケンスまたはピクチャごとに頻繁に変化する情報を繰り返す必要がないので、この情報の冗長な信号通知を回避することができる。さらに、ＳＰＳおよびＰＰＳを使用することは、重要なヘッダ情報の帯域外伝送を有効化し、それにより、冗長な伝送の必要性を回避するだけでなく、誤り耐性を改善する。
【0031】
ＶＰＳは、マルチレイヤのビットストリームのすべてのレイヤに共通であるシーケンスレベルのヘッダ情報を担持するために導入された。
【0032】
ＡＰＳは、コーディングするためのかなりのビットを必要とし、複数のピクチャによって共有され、そして、シーケンスにおいて非常に多くの異なる変形例が存在し得る、そのようなピクチャレベルまたはスライスレベルの情報を担持するために導入された。
【0033】
３．４． 一般的なサブビットストリーム抽出処理
最新のＶＶＣテキストのＣ．６項は、一般的なサブビットストリーム抽出処理を以下のように規定している。
最新のＶＶＣテキストのＣ．６項は、一般的なサブビットストリーム抽出処理を以下のように規定している。
【0034】
Ｃ．６ サブビットストリーム抽出処理
この処理への入力は、ビットストリームｉｎＢｉｔｓｔｒｅａｍ、ターゲットＯＬＳインデックスｔａｒｇｅｔＯｌｓＩｄｘ、およびターゲットの最も高いＴｅｍｐｏｒａｌＩｄの値ｔＩｄＴａｒｇｅｔである。
この処理の出力は、サブビットストリームｏｕｔＢｉｔｓｔｒｅａｍである。
入力ビットストリームに対するビットストリーム適合性の要件は、以下の条件のすべてを満たす任意の出力サブビットストリームが適合ビットストリームであるものとする。
－出力サブビットストリームは、ビットストリーム、ＶＰＳで規定されたＯＬＳのリストのインデックスと等しいｔａｒｇｅｔＯｌｓＩｄｘ、および０から６の範囲内の任意の値であるｔＩｄＴａｒｇｅｔを入力として、本項で規定した処理の出力である。
－出力サブビットストリームは、ＬａｙｅｒＩｄＩｎＯｌｓ［ｔａｒｇｅｔｏｌｓＩｄｘ］における各々のｎｕｈ＿ｌａｙｅｒ＿ｉｄ値に等しいｎｕｈ＿ｌａｙｅｒ＿ｉｄを有する少なくとも１つのＶＣＬ ＮＡＬユニットを含む。
－出力サブビットストリームは、ｔＩｄＴａｒｇｅｔに等しいＴｅｍｐｏｒａｌＩｄを有する少なくとも１つのＶＣＬ ＮＡＬユニットを含む。
注－適合するビットストリームは、０に等しいＴｅｍｐｏｒａｌＩｄを有する１または複数のコーディングされたスライスＮＡＬユニットを含むが、０に等しいｎｕｈ＿ｌａｙｅｒ＿ｉｄを有するコーディングされたスライスＮＡＬユニットを含む必要はない。
この処理への入力は、ビットストリームｉｎＢｉｔｓｔｒｅａｍ、ターゲットＯＬＳインデックスｔａｒｇｅｔＯｌｓＩｄｘ、およびターゲットの最も高いＴｅｍｐｏｒａｌＩｄの値ｔＩｄＴａｒｇｅｔである。
この処理の出力は、サブビットストリームｏｕｔＢｉｔｓｔｒｅａｍである。
入力ビットストリームに対するビットストリーム適合性の要件は、以下の条件のすべてを満たす任意の出力サブビットストリームが適合ビットストリームであるものとする。
－出力サブビットストリームは、ビットストリーム、ＶＰＳで規定されたＯＬＳのリストのインデックスと等しいｔａｒｇｅｔＯｌｓＩｄｘ、および０から６の範囲内の任意の値であるｔＩｄＴａｒｇｅｔを入力として、本項で規定した処理の出力である。
－出力サブビットストリームは、ＬａｙｅｒＩｄＩｎＯｌｓ［ｔａｒｇｅｔｏｌｓＩｄｘ］における各々のｎｕｈ＿ｌａｙｅｒ＿ｉｄ値に等しいｎｕｈ＿ｌａｙｅｒ＿ｉｄを有する少なくとも１つのＶＣＬ ＮＡＬユニットを含む。
－出力サブビットストリームは、ｔＩｄＴａｒｇｅｔに等しいＴｅｍｐｏｒａｌＩｄを有する少なくとも１つのＶＣＬ ＮＡＬユニットを含む。
注－適合するビットストリームは、０に等しいＴｅｍｐｏｒａｌＩｄを有する１または複数のコーディングされたスライスＮＡＬユニットを含むが、０に等しいｎｕｈ＿ｌａｙｅｒ＿ｉｄを有するコーディングされたスライスＮＡＬユニットを含む必要はない。
【0035】
出力サブビットストリームｏｕｔＢｉｔｓｔｒｅａｍは、以下のように導出される。
１． ビットストリームｏｕｔＢｉｔｓｔｒｅａｍは、ビットストリームｉｎＢｉｔｓｔｒｅａｍと同一になるように設定される。
２． ｔＩｄＴａｒｇｅｔよりも大きいＴｅｍｐｏｒａｌＩｄを有する全てのＮＡＬユニットをｏｕｔＢｉｔｓｔｒｅａｍから削除する。
３． ｎａｌ＿ｕｎｉｔ＿ｔｙｐｅがＶＰＳ＿ＮＵＴ、ＤＣＩ＿ＮＵＴ、およびＥＯＢ＿ＮＵＴのいずれとも等しくなく、ｎｕｈ＿ｌａｙｅｒ＿ｉｄがリストＬａｙｅｒＩｄＩｎＯｌｓ［ｔａｒｇｅｔＯｌｓＩｄｘ］に含まれない全てのＮＡＬユニットをｏｕｔＢｉｔｓｔｒｅａｍから削除する。
４． ｏｕｔＢｉｔｓｔｒｅａｍから、次のすべての条件が真であるすべてのＶＣＬ ＮＡＬユニットと、それらに関連づけられた、０、１、または１３０に等しくないＰａｙｌｏａｄＴｙｐｅを有するＰＨ＿ＮＵＴ、ＦＤ＿ＮＵＴ、ＳＵＦＦＩＸ＿ＳＥＩ＿ＮＵＴ、およびＰＲＥＦＩＸ＿ＳＥＩ＿ＮＵＴに等しいｎａｌ＿ｕｎｉｔ＿ｔｙｐｅを有する非ＶＣＬ ＮＡＬユニットを削除する。
－ｎａｌ＿ｕｎｉｔ＿ｔｙｐｅがＴＲＡＩＬ＿ＮＵＴ、ＳＴＳＡ＿ＮＵＴ、ＲＡＤＬ＿ＮＵＴ、またはＲＡＳＬ＿ＮＵＴに等しい場合、またはｎａｌ＿ｕｎｉｔ＿ｔｙｐｅがＧＤＲ＿ＮＵＴに等しく、かつ、関連付けされたｐｈ＿ｒｅｃｏｖｅｒｙ＿ｐｏｃ＿ｃｎｔが０に等しくない。
－ｎｕｈ＿ｌａｙｅｒ＿ｉｄが、０からＮｕｍＬａｙｅｒｓＩｎＯｌｓ［ｔａｒｇｅｔＯｌｓＩｄｘ］－１の範囲内のｊの値に対して、ＬａｙｅｒＩｄＩｎＯｌｓ［ｔａｒｇｅｔＯｌｓＩｄｘ］［ｊ］と等しい。
－ＴｅｍｐｏｒａｌＩｄが、ＮｕｍＳｕｂＬａｙｅｒｓＩｎＬａｙｅｒＩｎＯＬＳ［ｔａｒｇｅｔＯｌｓＩｄｘ］［ＧｅｎｅｒａｌＬａｙｅｒＩｄｘ［ｎｕｈ＿ｌａｙｅｒ＿ｉｄ］］以上である。
１． ビットストリームｏｕｔＢｉｔｓｔｒｅａｍは、ビットストリームｉｎＢｉｔｓｔｒｅａｍと同一になるように設定される。
２． ｔＩｄＴａｒｇｅｔよりも大きいＴｅｍｐｏｒａｌＩｄを有する全てのＮＡＬユニットをｏｕｔＢｉｔｓｔｒｅａｍから削除する。
３． ｎａｌ＿ｕｎｉｔ＿ｔｙｐｅがＶＰＳ＿ＮＵＴ、ＤＣＩ＿ＮＵＴ、およびＥＯＢ＿ＮＵＴのいずれとも等しくなく、ｎｕｈ＿ｌａｙｅｒ＿ｉｄがリストＬａｙｅｒＩｄＩｎＯｌｓ［ｔａｒｇｅｔＯｌｓＩｄｘ］に含まれない全てのＮＡＬユニットをｏｕｔＢｉｔｓｔｒｅａｍから削除する。
４． ｏｕｔＢｉｔｓｔｒｅａｍから、次のすべての条件が真であるすべてのＶＣＬ ＮＡＬユニットと、それらに関連づけられた、０、１、または１３０に等しくないＰａｙｌｏａｄＴｙｐｅを有するＰＨ＿ＮＵＴ、ＦＤ＿ＮＵＴ、ＳＵＦＦＩＸ＿ＳＥＩ＿ＮＵＴ、およびＰＲＥＦＩＸ＿ＳＥＩ＿ＮＵＴに等しいｎａｌ＿ｕｎｉｔ＿ｔｙｐｅを有する非ＶＣＬ ＮＡＬユニットを削除する。
－ｎａｌ＿ｕｎｉｔ＿ｔｙｐｅがＴＲＡＩＬ＿ＮＵＴ、ＳＴＳＡ＿ＮＵＴ、ＲＡＤＬ＿ＮＵＴ、またはＲＡＳＬ＿ＮＵＴに等しい場合、またはｎａｌ＿ｕｎｉｔ＿ｔｙｐｅがＧＤＲ＿ＮＵＴに等しく、かつ、関連付けされたｐｈ＿ｒｅｃｏｖｅｒｙ＿ｐｏｃ＿ｃｎｔが０に等しくない。
－ｎｕｈ＿ｌａｙｅｒ＿ｉｄが、０からＮｕｍＬａｙｅｒｓＩｎＯｌｓ［ｔａｒｇｅｔＯｌｓＩｄｘ］－１の範囲内のｊの値に対して、ＬａｙｅｒＩｄＩｎＯｌｓ［ｔａｒｇｅｔＯｌｓＩｄｘ］［ｊ］と等しい。
－ＴｅｍｐｏｒａｌＩｄが、ＮｕｍＳｕｂＬａｙｅｒｓＩｎＬａｙｅｒＩｎＯＬＳ［ｔａｒｇｅｔＯｌｓＩｄｘ］［ＧｅｎｅｒａｌＬａｙｅｒＩｄｘ［ｎｕｈ＿ｌａｙｅｒ＿ｉｄ］］以上である。
【0036】
５． １に等しいｓｎ＿ｏｌｓ＿ｆｌａｇを有し、ＮｅｓｔｉｎｇＯｌｓＩｄｘ［ｉ］がｔａｒｇｅｔＯｌｓＩｄｘと等しいような、ｉの値が０からｓｎ＿ｎｕｍ＿ｏｌｓｓ＿ｍｉｎｕｓ１の範囲内にないスケーラブルネスティングＳＥＩメッセージを含むすべてのＳＥＩ ＮＡＬユニットをｏｕｔＢｉｔｓｔｒｅａｍから削除する。
６． ＬａｙｅｒＩｄＩｎＯｌｓ［ｔａｒｇｅｔＯｌｓＩｄｘ］がビットストリーム内の全てのＮＡＬユニットのｎｕｈ＿ｌａｙｅｒ＿ｉｄの全ての値を含まない場合、以下が適用される。
ａ． ０（ＢＰ）または１３０（ＤＵＩ）に等しいｐａｙｌｏａｄＴｙｐｅを有する非スケーラブルネスト化されたＳＥＩメッセージを含むすべてのＳＥＩ ＮＡＬユニットをｏｕｔＢｉｔｓｔｒｅａｍから削除する。
ｂ． ｇｅｎｅｒａｌ＿ｓａｍｅ＿ｐｉｃ＿ｔｉｍｉｎｇ＿ｉｎ＿ａｌｌ＿ｏｌｓ＿ｆｌａｇが０に等しい場合、１（ＰＴ）に等しいｐａｙｌｏａｄＴｙｐｅを有する非スケーラブルネスト化されたＳＥＩメッセージを含むすべてのＳＥＩ ＮＡＬユニットをｏｕｔＢｉｔｓｔｒｅａｍから削除する。
ｃ． ｏｕｔＢｉｔｓｔｒｅａｍが、１に等しいｓｎ＿ｏｌｓ＿ｆｌａｇを有するスケーラブルネスティングＳＥＩメッセージを含み、かつ、ｏｕｔＢｉｔｓｔｒｅａｍ（ＮｅｓｔｉｎｇＯｌｓＩｄｘ［ｉ］がｔａｒｇｅｔＯｌｓＩｄｘに等しい）に適用可能なＳＥＩ ＮＡＬユニットを含む場合、以下が適用される。
－ｇｅｎｅｒａｌ＿ｓａｍｅ＿ｐｉｃ＿ｔｉｍｉｎｇ＿ｉｎ＿ａｌｌ＿ｏｌｓ＿ｆｌａｇが０に等しい場合、０（ＢＰ）、１（ＰＴ）または１３０（ＤＵＩ）に等しいｐａｙｌｏａｄＴｙｐｅを有する適切な非スケーラブルネスト化されたＳＥＩメッセージを、スケーラブルネスティングＳＥＩメッセージから抽出し、それらのＳＥＩメッセージをｏｕｔＢｉｔｓｔｒｅａｍ内に含める。
－そうでない場合（ｇｅｎｅｒａｌ＿ｓａｍｅ＿ｐｉｃ＿ｔｉｍｉｎｇ＿ｉｎ＿ａｌｌ＿ｏｌｓ＿ｆｌａｇが１に等しい場合）、０（ＢＰ）または１３０（ＤＵＩ）に等しいｐａｙｌｏａｄＴｙｐｅを有する適切な非スケーラブルネスト化されたＳＥＩメッセージを、スケーラブルネスティングＳＥＩメッセージから抽出し、それらのＳＥＩメッセージをｏｕｔＢｉｔｓｔｒｅａｍ内に含める。
６． ＬａｙｅｒＩｄＩｎＯｌｓ［ｔａｒｇｅｔＯｌｓＩｄｘ］がビットストリーム内の全てのＮＡＬユニットのｎｕｈ＿ｌａｙｅｒ＿ｉｄの全ての値を含まない場合、以下が適用される。
ａ． ０（ＢＰ）または１３０（ＤＵＩ）に等しいｐａｙｌｏａｄＴｙｐｅを有する非スケーラブルネスト化されたＳＥＩメッセージを含むすべてのＳＥＩ ＮＡＬユニットをｏｕｔＢｉｔｓｔｒｅａｍから削除する。
ｂ． ｇｅｎｅｒａｌ＿ｓａｍｅ＿ｐｉｃ＿ｔｉｍｉｎｇ＿ｉｎ＿ａｌｌ＿ｏｌｓ＿ｆｌａｇが０に等しい場合、１（ＰＴ）に等しいｐａｙｌｏａｄＴｙｐｅを有する非スケーラブルネスト化されたＳＥＩメッセージを含むすべてのＳＥＩ ＮＡＬユニットをｏｕｔＢｉｔｓｔｒｅａｍから削除する。
ｃ． ｏｕｔＢｉｔｓｔｒｅａｍが、１に等しいｓｎ＿ｏｌｓ＿ｆｌａｇを有するスケーラブルネスティングＳＥＩメッセージを含み、かつ、ｏｕｔＢｉｔｓｔｒｅａｍ（ＮｅｓｔｉｎｇＯｌｓＩｄｘ［ｉ］がｔａｒｇｅｔＯｌｓＩｄｘに等しい）に適用可能なＳＥＩ ＮＡＬユニットを含む場合、以下が適用される。
－ｇｅｎｅｒａｌ＿ｓａｍｅ＿ｐｉｃ＿ｔｉｍｉｎｇ＿ｉｎ＿ａｌｌ＿ｏｌｓ＿ｆｌａｇが０に等しい場合、０（ＢＰ）、１（ＰＴ）または１３０（ＤＵＩ）に等しいｐａｙｌｏａｄＴｙｐｅを有する適切な非スケーラブルネスト化されたＳＥＩメッセージを、スケーラブルネスティングＳＥＩメッセージから抽出し、それらのＳＥＩメッセージをｏｕｔＢｉｔｓｔｒｅａｍ内に含める。
－そうでない場合（ｇｅｎｅｒａｌ＿ｓａｍｅ＿ｐｉｃ＿ｔｉｍｉｎｇ＿ｉｎ＿ａｌｌ＿ｏｌｓ＿ｆｌａｇが１に等しい場合）、０（ＢＰ）または１３０（ＤＵＩ）に等しいｐａｙｌｏａｄＴｙｐｅを有する適切な非スケーラブルネスト化されたＳＥＩメッセージを、スケーラブルネスティングＳＥＩメッセージから抽出し、それらのＳＥＩメッセージをｏｕｔＢｉｔｓｔｒｅａｍ内に含める。
【0037】
４．開示される技術的解決策によって解決される技術課題
最新のＶＶＣテキスト（ＪＶＥＴ－Ｒ２００１－ｖＡ／ｖ１０）における一般的なサブビットストリーム抽出プロセスおよび関連する他の部分の既存の設計には、以下のような問題がある。
１） 出力サブビットストリームが適合ビットストリームであることが必要とされる条件においては、ｔＩｄＴａｒｇｅｔの値が０～６の範囲にあると言われている。しかし、多くのビットストリームにおいて、最も高いＴｅｍｐｏｒａｌＩｄ値は６未満であり、この値は構文要素ｖｐｓ＿ｍａｘ＿ｓｕｂｌａｙｅｒｓ＿ｍｉｎｕｓ１によって規定される。
２） ＡＵＤ（Ａｃｃｅｓｓ Ｕｎｉｔ Ｄｅｌｉｍｉｔｅｒ） ＮＡＬユニットは、存在する場合、任意のｎｕｈ＿ｌａｙｅｒ＿ｉｄ値を有することができる。しかしながら、サブビットストリーム抽出プロセスのステップ３は、ｎｕｈ＿ｌａｙｅｒ＿ｉｄ値がリストＬａｙｅｒＩｄＩｎＯｌｓ［ｔａｒｇｅｔＯｌｓＩｄｘ］に含まれないＡＵＤ ＮＡＬユニットを削除する。
３） いくつかのＳＥＩ ＮＡＬユニットは、０に等しいｓｎ＿ｏｌｓ＿ｆｌａｇを有するスケーラブルネスティングＳＥＩメッセージを含むが、スケーラブルネスティングＳＥＩメッセージに示される適用可能なレイヤは、ターゲットＯＬＳにおけるいずれのレイヤを含まない、すなわち、適用可能なレイヤのｎｕｈ＿ｌａｙｅｒ＿ｉｄ値は、リストＬａｙｅｒＩｄＩｎＯｌｓ［ｔａｒｇｅｔＯｌｓＩｄｘ］に含まれない。これらのＳＥＩ ＮＡＬユニットも削除されるべきである。
４） ステップ６の条件、すなわち、「ＬａｙｅｒＩｄＩｎＯｌｓ［ｔａｒｇｅｔＯｌｓＩｄｘ］が、ビットストリームにおけるすべてのＮＡＬユニットのｎｕｈ＿ｌａｙｅｒ＿ｉｄのすべての値を含まない場合」には、以下の２つの問題がある。
ａ． ＤＣＩ、ＶＰＳ、ＡＵＤ、またはＥＯＢ ＮＡＬユニットが存在し、かつ、ＶＣＬ ＮＡＬユニットのｎｕｈ＿ｌａｙｅｒ＿ｉｄ値のいずれにも等しくないｎｕｈ＿ｌａｙｅｒ＿ｉｄを有する場合、この条件は機能しない。
ｂ． 用語「ビットストリーム」は、コンテキストの中には２つのビットストリームｉｎＢｉｔｓｔｒｅａｍおよびｏｕｔＢｉｔｓｔｒｅａｍがあるため、明瞭ではない。
最新のＶＶＣテキスト（ＪＶＥＴ－Ｒ２００１－ｖＡ／ｖ１０）における一般的なサブビットストリーム抽出プロセスおよび関連する他の部分の既存の設計には、以下のような問題がある。
１） 出力サブビットストリームが適合ビットストリームであることが必要とされる条件においては、ｔＩｄＴａｒｇｅｔの値が０～６の範囲にあると言われている。しかし、多くのビットストリームにおいて、最も高いＴｅｍｐｏｒａｌＩｄ値は６未満であり、この値は構文要素ｖｐｓ＿ｍａｘ＿ｓｕｂｌａｙｅｒｓ＿ｍｉｎｕｓ１によって規定される。
２） ＡＵＤ（Ａｃｃｅｓｓ Ｕｎｉｔ Ｄｅｌｉｍｉｔｅｒ） ＮＡＬユニットは、存在する場合、任意のｎｕｈ＿ｌａｙｅｒ＿ｉｄ値を有することができる。しかしながら、サブビットストリーム抽出プロセスのステップ３は、ｎｕｈ＿ｌａｙｅｒ＿ｉｄ値がリストＬａｙｅｒＩｄＩｎＯｌｓ［ｔａｒｇｅｔＯｌｓＩｄｘ］に含まれないＡＵＤ ＮＡＬユニットを削除する。
３） いくつかのＳＥＩ ＮＡＬユニットは、０に等しいｓｎ＿ｏｌｓ＿ｆｌａｇを有するスケーラブルネスティングＳＥＩメッセージを含むが、スケーラブルネスティングＳＥＩメッセージに示される適用可能なレイヤは、ターゲットＯＬＳにおけるいずれのレイヤを含まない、すなわち、適用可能なレイヤのｎｕｈ＿ｌａｙｅｒ＿ｉｄ値は、リストＬａｙｅｒＩｄＩｎＯｌｓ［ｔａｒｇｅｔＯｌｓＩｄｘ］に含まれない。これらのＳＥＩ ＮＡＬユニットも削除されるべきである。
４） ステップ６の条件、すなわち、「ＬａｙｅｒＩｄＩｎＯｌｓ［ｔａｒｇｅｔＯｌｓＩｄｘ］が、ビットストリームにおけるすべてのＮＡＬユニットのｎｕｈ＿ｌａｙｅｒ＿ｉｄのすべての値を含まない場合」には、以下の２つの問題がある。
ａ． ＤＣＩ、ＶＰＳ、ＡＵＤ、またはＥＯＢ ＮＡＬユニットが存在し、かつ、ＶＣＬ ＮＡＬユニットのｎｕｈ＿ｌａｙｅｒ＿ｉｄ値のいずれにも等しくないｎｕｈ＿ｌａｙｅｒ＿ｉｄを有する場合、この条件は機能しない。
ｂ． 用語「ビットストリーム」は、コンテキストの中には２つのビットストリームｉｎＢｉｔｓｔｒｅａｍおよびｏｕｔＢｉｔｓｔｒｅａｍがあるため、明瞭ではない。
【0038】
５） ステップ６．ｃは、非スケーラブルネスト化されたＳＥＩメッセージを生成するために、１に等しいｓｎ＿ｏｌｓ＿ｆｌａｇを有し、かつ、１に等しいｓｎ＿ｓｕｂｐｉｃ＿ｆｌａｇを有するスケーラブルネスティングＳＥＩメッセージからスケーラブルネスト化されたＳＥＩメッセージを抽出するが、そのようなスケーラブルネスト化されたＳＥＩメッセージは特定のサブピクチャにのみ適用され、抽出されるべきではない。
６） ステップ６．ｃにおいて、１つのＳＥＩ ＮＡＬユニットｓｅｉＮａｌＵｎｉｔＡから複数のスケーラブルネスト化されたＳＥＩメッセージを抽出し、非スケーラブルネスト化されたＳＥＩメッセージとした場合、それらは１つのＳＥＩ ＮＡＬユニットｓｅｉＮａｌＵｎｉｔＢに含まれているべきであり、ＳＥＩ ＮＡＬユニットｓｅｉＮａｌＵｎｉｔＢはＳＥＩ ＮＡＬユニットｓｅｉＮａｌＵｎｉｔＡを含む同じＰＵに含まれているべきである。ただし、これは規定されていない。
７） ステップ６．ｃは、いくつかのＳＥＩメッセージが抽出され、非スケーラブルネスト化されたＳＥＩメッセージとして含まれたすべてのＳＥＩ ＮＡＬユニットをｏｕｔＢｉｔｓｔｒｅａｍから削除する。ただし、これは規定されていない。
８） ＳＥＩ ＮＡＬユニットが、０、１、または１３０に等しいｐａｙｌｏａｄＴｙｐｅを有するＳＥＩメッセージを含む場合、ＳＥＩ ＮＡＬユニットは、０（ＢＰ）、１（ＰＴ）、１３０（ＤＵＩ）、または１３３（スケーラブルネスティング）に等しくないｐａｙｌｏａｄＴｙｐｅを有するＳＥＩメッセージを含まないとする制約がない。これにより、ステップ４におけるＳＥＩメッセージの削除が、ＳＥＩ ＮＡＬユニットの単なる削除よりも多く含むことになる。
９） フラグｇｅｎｅｒａｌ＿ｓａｍｅ＿ｐｉｃ＿ｔｉｍｉｎｇ＿ｉｎ＿ａｌｌ＿ｏｌｓ＿ｆｌａｇは、非スケーラブルネスト化されたＰＴ ＳＥＩメッセージがすべてのＯＬＳに適用されるかどうかを規定するのみである。しかしながら、ＤＵＩ ＳＥＩメッセージに担持される情報は、ＰＴ ＳＥＩメッセージと同様の目的のためである。
６） ステップ６．ｃにおいて、１つのＳＥＩ ＮＡＬユニットｓｅｉＮａｌＵｎｉｔＡから複数のスケーラブルネスト化されたＳＥＩメッセージを抽出し、非スケーラブルネスト化されたＳＥＩメッセージとした場合、それらは１つのＳＥＩ ＮＡＬユニットｓｅｉＮａｌＵｎｉｔＢに含まれているべきであり、ＳＥＩ ＮＡＬユニットｓｅｉＮａｌＵｎｉｔＢはＳＥＩ ＮＡＬユニットｓｅｉＮａｌＵｎｉｔＡを含む同じＰＵに含まれているべきである。ただし、これは規定されていない。
７） ステップ６．ｃは、いくつかのＳＥＩメッセージが抽出され、非スケーラブルネスト化されたＳＥＩメッセージとして含まれたすべてのＳＥＩ ＮＡＬユニットをｏｕｔＢｉｔｓｔｒｅａｍから削除する。ただし、これは規定されていない。
８） ＳＥＩ ＮＡＬユニットが、０、１、または１３０に等しいｐａｙｌｏａｄＴｙｐｅを有するＳＥＩメッセージを含む場合、ＳＥＩ ＮＡＬユニットは、０（ＢＰ）、１（ＰＴ）、１３０（ＤＵＩ）、または１３３（スケーラブルネスティング）に等しくないｐａｙｌｏａｄＴｙｐｅを有するＳＥＩメッセージを含まないとする制約がない。これにより、ステップ４におけるＳＥＩメッセージの削除が、ＳＥＩ ＮＡＬユニットの単なる削除よりも多く含むことになる。
９） フラグｇｅｎｅｒａｌ＿ｓａｍｅ＿ｐｉｃ＿ｔｉｍｉｎｇ＿ｉｎ＿ａｌｌ＿ｏｌｓ＿ｆｌａｇは、非スケーラブルネスト化されたＰＴ ＳＥＩメッセージがすべてのＯＬＳに適用されるかどうかを規定するのみである。しかしながら、ＤＵＩ ＳＥＩメッセージに担持される情報は、ＰＴ ＳＥＩメッセージと同様の目的のためである。
【0039】
５．技術的解決策および実施形態の一覧
上記課題を解決するために、以下に示す方法が開示されている。これらの項目は、一般的な概念を説明するための例であり、狭義に解釈されるべきではない。さらに、これらの項目は、個々に適用されてもよく、または任意の方法で組み合わされてもよい。
１） 課題１を解決するために、出力サブビットストリームが適合ビットストリームであることが必要とされる条件を、ｔＩｄＴａｒｇｅｔの値が０からｖｐｓ＿ｍａｘ＿ｓｕｂｌａｙｅｒｓ＿ｍｉｎｕｓ１の範囲内にあるように規定する。
ａ． あるいは、出力サブビットストリームが適合ビットストリームであることが必要とされる条件は、入力ビットストリームに複数のレイヤがある場合にはｔＩｄＴａｒｇｅｔの値が０からｖｐｓ＿ｍａｘ＿ｓｕｂｌａｙｅｒｓ＿ｍｉｎｕｓ１の範囲内にあるように規定され、入力ビットストリームに１つのみのレイヤがある場合には０からｓｐｓ＿ｍａｘ＿ｓｕｂｌａｙｅｒｓ＿ｍｉｎｕｓ１の範囲内にあるように規定される。
２） 課題２を解決するために、ＡＵＤ ＮＡＬユニットを、ＶＰＳ＿ＮＵＴ、ＤＣＩ＿ＮＵＴまたはＥＯＢ＿ＮＵＴに等しいｎａｌ＿ｕｎｉｔ＿ｔｙｐｅを有するＮＡＬユニットと同様に扱うように、一般的なサブビットストリーム抽出プロセスを規定する。すなわち、ｎｕｈ＿ｌａｙｅｒ＿ｉｄ値に従って、出力ビットストリームｏｕｔＢｉｔｓｔｒｅａｍからＡＵＤ ＮＡＬユニットを削除しない。
上記課題を解決するために、以下に示す方法が開示されている。これらの項目は、一般的な概念を説明するための例であり、狭義に解釈されるべきではない。さらに、これらの項目は、個々に適用されてもよく、または任意の方法で組み合わされてもよい。
１） 課題１を解決するために、出力サブビットストリームが適合ビットストリームであることが必要とされる条件を、ｔＩｄＴａｒｇｅｔの値が０からｖｐｓ＿ｍａｘ＿ｓｕｂｌａｙｅｒｓ＿ｍｉｎｕｓ１の範囲内にあるように規定する。
ａ． あるいは、出力サブビットストリームが適合ビットストリームであることが必要とされる条件は、入力ビットストリームに複数のレイヤがある場合にはｔＩｄＴａｒｇｅｔの値が０からｖｐｓ＿ｍａｘ＿ｓｕｂｌａｙｅｒｓ＿ｍｉｎｕｓ１の範囲内にあるように規定され、入力ビットストリームに１つのみのレイヤがある場合には０からｓｐｓ＿ｍａｘ＿ｓｕｂｌａｙｅｒｓ＿ｍｉｎｕｓ１の範囲内にあるように規定される。
２） 課題２を解決するために、ＡＵＤ ＮＡＬユニットを、ＶＰＳ＿ＮＵＴ、ＤＣＩ＿ＮＵＴまたはＥＯＢ＿ＮＵＴに等しいｎａｌ＿ｕｎｉｔ＿ｔｙｐｅを有するＮＡＬユニットと同様に扱うように、一般的なサブビットストリーム抽出プロセスを規定する。すなわち、ｎｕｈ＿ｌａｙｅｒ＿ｉｄ値に従って、出力ビットストリームｏｕｔＢｉｔｓｔｒｅａｍからＡＵＤ ＮＡＬユニットを削除しない。
【0040】
３） 課題３を解決するために、一般的なサブビットストリーム抽出プロセスは、出力ビットストリームｏｕｔＢｉｔｓｔｒｅａｍから、０に等しいｓｎ＿ｏｌｓ＿ｆｌａｇを有するスケーラブルネスティングＳＥＩメッセージを含むＳＥＩ ＮＡＬユニットを削除する一方、スケーラブルネスティングＳＥＩメッセージに示される適用可能なレイヤは、ターゲットＯＬＳ内のいずれのレイヤも含まないように規定される。
ａ． 一例において、０に等しいｓｎ＿ｏｌｓ＿ｆｌａｇを有し、かつ、０からｎｅｓｔｉｎｇＮｕｍＬａｙｅｒｓ－１の範囲内のｉに対するリストｎｅｓｔｉｎｇＬａｙｅｒＩｄ［ｉ］に、リストＬａｙｅｒＩｄＩｎＯｌｓ［ｔａｒｇｅｔＯｌｓＩｄｘ］内に値がないスケーラブルネスティングＳＥＩメッセージを含むすべてのＳＥＩ ＮＡＬユニットをｏｕｔＢｉｔｓｔｒｅａｍから削除することが規定されている。
４） 課題４を解決するために、「ＬａｙｅｒＩｄＩｎＯｌｓ［ｔａｒｇｅｔＯｌｓＩｄｘ］が、ビットストリーム中のすべてのＮＡＬユニットのｎｕｈ＿ｌａｙｅｒ＿ｉｄのすべての値を含まない」との条件は、「リストＬａｙｅｒＩｄＩｎＯｌｓ［ｔａｒｇｅｔＯｌｓＩｄｘ］が、ビットストリームｉｎＢｉｔｓｔｒｅａｍにおけるすべてのＶＣＬ ＮＡＬユニットのｎｕｈ＿ｌａｙｅｒ＿ｉｄのすべての値を含まない」となるように変更される。
ａ． 一例において、０に等しいｓｎ＿ｏｌｓ＿ｆｌａｇを有し、かつ、０からｎｅｓｔｉｎｇＮｕｍＬａｙｅｒｓ－１の範囲内のｉに対するリストｎｅｓｔｉｎｇＬａｙｅｒＩｄ［ｉ］に、リストＬａｙｅｒＩｄＩｎＯｌｓ［ｔａｒｇｅｔＯｌｓＩｄｘ］内に値がないスケーラブルネスティングＳＥＩメッセージを含むすべてのＳＥＩ ＮＡＬユニットをｏｕｔＢｉｔｓｔｒｅａｍから削除することが規定されている。
４） 課題４を解決するために、「ＬａｙｅｒＩｄＩｎＯｌｓ［ｔａｒｇｅｔＯｌｓＩｄｘ］が、ビットストリーム中のすべてのＮＡＬユニットのｎｕｈ＿ｌａｙｅｒ＿ｉｄのすべての値を含まない」との条件は、「リストＬａｙｅｒＩｄＩｎＯｌｓ［ｔａｒｇｅｔＯｌｓＩｄｘ］が、ビットストリームｉｎＢｉｔｓｔｒｅａｍにおけるすべてのＶＣＬ ＮＡＬユニットのｎｕｈ＿ｌａｙｅｒ＿ｉｄのすべての値を含まない」となるように変更される。
【0041】
５） 課題５を解決するために、一般的なサブビットストリーム抽出プロセスは、非スケーラブルネスト化されたＳＥＩメッセージを生成するために、１に等しいｓｎ＿ｏｌｓ＿ｆｌａｇ、かつ、０に等しいｓｎ＿ｓｕｂｐｉｃ＿ｆｌａｇを有するスケーラブルネスティングＳＥＩメッセージから、スケーラブルネスト化されたＳＥＩメッセージのみを抽出するように規定される。
６） 課題６を解決するため、一般的なサブビットストリーム抽出プロセスは、複数のスケーラブルネスト化されたＳＥＩメッセージが、１つのＳＥＩ ＮＡＬユニットｓｅｉＮａｌＵｎｉｔＡから抽出されて、非スケーラブルネスト化されたＳＥＩメッセージとなる場合、それらは出力ビットストリームｏｕｔＢｉｔｓｔｒｅａｍ中の１つのＳＥＩ ＮＡＬユニットｓｅｉＮａｌＵｎｉｔＢに含まれ、ＳＥＩ ＮＡＬユニットｓｅｉＮａｌＵｎｉｔＢは、ＳＥＩ ＮＡＬユニットｓｅｉＮａｌＵｎｉｔＡが含まれていたＰＵに含まれることが規定される。
６） 課題６を解決するため、一般的なサブビットストリーム抽出プロセスは、複数のスケーラブルネスト化されたＳＥＩメッセージが、１つのＳＥＩ ＮＡＬユニットｓｅｉＮａｌＵｎｉｔＡから抽出されて、非スケーラブルネスト化されたＳＥＩメッセージとなる場合、それらは出力ビットストリームｏｕｔＢｉｔｓｔｒｅａｍ中の１つのＳＥＩ ＮＡＬユニットｓｅｉＮａｌＵｎｉｔＢに含まれ、ＳＥＩ ＮＡＬユニットｓｅｉＮａｌＵｎｉｔＢは、ＳＥＩ ＮＡＬユニットｓｅｉＮａｌＵｎｉｔＡが含まれていたＰＵに含まれることが規定される。
【0042】
７） 課題７を解決するため、一般的なサブビットストリーム抽出プロセスは、出力ビットストリームｏｕｔＢｉｔｓｔｒｅａｍから、いくつかのＳＥＩメッセージが抽出され、非スケーラブルネスト化されたＳＥＩメッセージとして含まれているすべてのＳＥＩ ＮＡＬユニットを削除するように規定される。
ａ． あるいは、このようなＳＥＩ ＮＡＬユニットにおけるスケーラブルネスト化されたＳＥＩメッセージがターゲットＯＬＳ（すなわち、ＶＰＳによって規定されたｔａｒｇｅｔＯｌｓＩｄｘ番目のＯＬＳ）のみに適用される場合、そのＳＥＩ ＮＡＬユニットをｏｕｔＢｉｔｓｔｒｅａｍから削除する。
ｂ． あるいは、このようなＳＥＩ ＮＡＬユニットにおけるスケーラブルネスト化されたＳＥＩメッセージが適用されるＯＬＳ内にターゲットＯＬＳ以外に、リストＬａｙｅｒＩｄＩｎＯｌｓ［ｔａｒｇｅｔＯｌｓＩｄｘ］にすべて含まれるレイヤを含むＯＬＳがない場合、そのＳＥＩ ＮＡＬユニットをｏｕｔＢｉｔｓｔｒｅａｍから削除する。
８） 課題８を解決するために、ＳＥＩ ＮＡＬユニットが、０、１、または１３０に等しいｐａｙｌｏａｄＴｙｐｅを有するＳＥＩメッセージを含む場合、ＳＥＩ ＮＡＬユニットは、０（ＢＰ）、１（ＰＴ）、１３０（ＤＵＩ）、または１３３（スケーラブルネスティング）に等しくないｐａｙｌｏａｄＴｙｐｅを有するＳＥＩメッセージを含んではならないような制約を加える。
ａ． あるいは、このようなＳＥＩ ＮＡＬユニットにおけるスケーラブルネスト化されたＳＥＩメッセージがターゲットＯＬＳ（すなわち、ＶＰＳによって規定されたｔａｒｇｅｔＯｌｓＩｄｘ番目のＯＬＳ）のみに適用される場合、そのＳＥＩ ＮＡＬユニットをｏｕｔＢｉｔｓｔｒｅａｍから削除する。
ｂ． あるいは、このようなＳＥＩ ＮＡＬユニットにおけるスケーラブルネスト化されたＳＥＩメッセージが適用されるＯＬＳ内にターゲットＯＬＳ以外に、リストＬａｙｅｒＩｄＩｎＯｌｓ［ｔａｒｇｅｔＯｌｓＩｄｘ］にすべて含まれるレイヤを含むＯＬＳがない場合、そのＳＥＩ ＮＡＬユニットをｏｕｔＢｉｔｓｔｒｅａｍから削除する。
８） 課題８を解決するために、ＳＥＩ ＮＡＬユニットが、０、１、または１３０に等しいｐａｙｌｏａｄＴｙｐｅを有するＳＥＩメッセージを含む場合、ＳＥＩ ＮＡＬユニットは、０（ＢＰ）、１（ＰＴ）、１３０（ＤＵＩ）、または１３３（スケーラブルネスティング）に等しくないｐａｙｌｏａｄＴｙｐｅを有するＳＥＩメッセージを含んではならないような制約を加える。
【0043】
９） 課題９を解決するために、フラグｇｅｎｅｒａｌ＿ｓａｍｅ＿ｐｉｃ＿ｔｉｍｉｎｇ＿ｉｎ＿ａｌｌ＿ｏｌｓ＿ｆｌａｇは、非スケーラブルネスト化されたＰＴおよびＤＵＩ ＳＥＩメッセージがすべてのＯＬＳに適用されるかどうかを規定する。
ａ． あるいは、フラグｇｅｎｅｒａｌ＿ｓａｍｅ＿ｐｉｃ＿ｔｉｍｉｎｇ＿ｉｎ＿ａｌｌ＿ｏｌｓ＿ｆｌａｇは、非スケーラブルネスト化されたＢＰ、ＰＴ、およびＤＵＩ ＳＥＩメッセージがすべてのＯＬＳに適用されるかどうかを規定する。
ｉ． 一例において、フラグｇｅｎｅｒａｌ＿ｓａｍｅ＿ｐｉｃ＿ｔｉｍｉｎｇ＿ｉｎ＿ａｌｌ＿ｏｌｓ＿ｆｌａｇは、フラグｇｅｎｅｒａｌ＿ｓａｍｅ＿ｐｉｃ＿ｌｅｖｅｌ＿ｈｒｄ＿ｉｎｆｏ＿ｉｎ＿ａｌｌ＿ｏｌｓ＿ｆｌａｇに改名され、非スケーラブルネスト化されたＢＰ、ＰＴ、ＤＵＩ ＳＥＩメッセージがすべてのＯＬＳに適用されるかどうかを規定する。
ｂ． あるいは、例えばｇｅｎｅｒａｌ＿ｓａｍｅ＿ｄｕｉ＿ｉｎ＿ａｌｌ＿ｏｌｓ＿ｆｌａｇという新しいフラグが追加され、非スケーラブルネスト化されたＤＵＩ ＳＥＩメッセージがすべてのＯＬＳに適用されるかどうかが規定される。
ｃ． あるいは、例えばｇｅｎｅｒａｌ＿ｓａｍｅ＿ｂｐ＿ｉｎ＿ａｌｌ＿ｏｌｓ＿ｆｌａｇという新しいフラグが追加され、非スケーラブルネスト化されたＢＰ ＳＥＩメッセージがすべてのＯＬＳに適用されるかどうかが規定される
ａ． あるいは、フラグｇｅｎｅｒａｌ＿ｓａｍｅ＿ｐｉｃ＿ｔｉｍｉｎｇ＿ｉｎ＿ａｌｌ＿ｏｌｓ＿ｆｌａｇは、非スケーラブルネスト化されたＢＰ、ＰＴ、およびＤＵＩ ＳＥＩメッセージがすべてのＯＬＳに適用されるかどうかを規定する。
ｉ． 一例において、フラグｇｅｎｅｒａｌ＿ｓａｍｅ＿ｐｉｃ＿ｔｉｍｉｎｇ＿ｉｎ＿ａｌｌ＿ｏｌｓ＿ｆｌａｇは、フラグｇｅｎｅｒａｌ＿ｓａｍｅ＿ｐｉｃ＿ｌｅｖｅｌ＿ｈｒｄ＿ｉｎｆｏ＿ｉｎ＿ａｌｌ＿ｏｌｓ＿ｆｌａｇに改名され、非スケーラブルネスト化されたＢＰ、ＰＴ、ＤＵＩ ＳＥＩメッセージがすべてのＯＬＳに適用されるかどうかを規定する。
ｂ． あるいは、例えばｇｅｎｅｒａｌ＿ｓａｍｅ＿ｄｕｉ＿ｉｎ＿ａｌｌ＿ｏｌｓ＿ｆｌａｇという新しいフラグが追加され、非スケーラブルネスト化されたＤＵＩ ＳＥＩメッセージがすべてのＯＬＳに適用されるかどうかが規定される。
ｃ． あるいは、例えばｇｅｎｅｒａｌ＿ｓａｍｅ＿ｂｐ＿ｉｎ＿ａｌｌ＿ｏｌｓ＿ｆｌａｇという新しいフラグが追加され、非スケーラブルネスト化されたＢＰ ＳＥＩメッセージがすべてのＯＬＳに適用されるかどうかが規定される
【0044】
６．実施形態
以下は、上記第５章に要約されたいくつかの発明の態様のためのいくつかの例示的な実施形態であり、ＶＶＣ仕様に適用できる。変更されたテキストは、ＪＶＥＴ－Ｒ２００１－ｖＡ／ｖ１０の最新ＶＶＣテキストに基づく。既に追加または修正された最も関連性のある部分は、太字およびイタリック文字で強調表示され、かつ削除された部分の一部は、二重括弧でマークされている（例えば、［［ａ］］は、「ａ」という文字の削除を示す）。本質的に編集可能であるため、強調されていない他の何らかの変更があってもよい。
以下は、上記第５章に要約されたいくつかの発明の態様のためのいくつかの例示的な実施形態であり、ＶＶＣ仕様に適用できる。変更されたテキストは、ＪＶＥＴ－Ｒ２００１－ｖＡ／ｖ１０の最新ＶＶＣテキストに基づく。既に追加または修正された最も関連性のある部分は、太字およびイタリック文字で強調表示され、かつ削除された部分の一部は、二重括弧でマークされている（例えば、［［ａ］］は、「ａ」という文字の削除を示す）。本質的に編集可能であるため、強調されていない他の何らかの変更があってもよい。
【0045】
６．１． 第１の実施形態
本実施形態は１、２、３、３．ａ．、４、５、６、７．ｂ、および８項に対するものである。
本実施形態は１、２、３、３．ａ．、４、５、６、７．ｂ、および８項に対するものである。
【0046】
【化1】
【0047】
【化2】
【0048】
【化3】
【0049】
【化4】
【0050】
【化5】
【0051】
【化6】
【0052】
図１は、本明細書で開示される様々な技術が実装され得る例示的な映像処理システム１９００を示すブロック図である。様々な実装形態は、システム１９００のコンポーネントの一部または全部を含んでもよい。システム１９００は、映像コンテンツを受信するための入力１９０２を含んでもよい。映像コンテンツは、未加工または非圧縮フォーマット、例えば、８または１０ビットのマルチコンポーネント画素値で受信されてもよく、または圧縮または符号化フォーマットで受信されてもよい。入力１９０２は、ネットワークインターフェース、周辺バスインターフェース、または記憶インターフェースを表してもよい。ネットワークインターフェースの例は、イーサネット（登録商標）、ＰＯＮ（Ｐａｓｓｉｖｅ Ｏｐｔｉｃａｌ Ｎｅｔｗｏｒｋ）等の有線インターフェース、およびＷｉ－Ｆｉ（登録商標）またはセルラーインターフェース等の無線インターフェースを含む。
【0053】
システム１９００は、本明細書に記載される様々なコーディングまたはエンコーディング方法を実装することができるコーディングコンポーネント１９０４を含んでもよい。コーディングコンポーネント１９０４は、入力１９０２からの映像の平均ビットレートをコーディングコンポーネント１９０４の出力に低減し、映像のコーディング表現を生成してもよい。従って、このコーディング技術は、映像圧縮または映像コード変換技術と呼ばれることがある。コーディングコンポーネント１９０４の出力は、コンポーネント１９０６によって表されるように、記憶されてもよいし、接続された通信を介して送信されてもよい。入力１９０２において受信された、記憶されたまたは通信された映像のビットストリーム（または、コーディングされた）表現は、コンポーネント１９０８によって使用されて、表示インターフェース１９１０に送信される画素値または表示可能な映像を生成してもよい。ビットストリーム表現からユーザが見ることができる映像を生成する処理は、映像展開と呼ばれることがある。さらに、特定の映像処理動作を「コーディング」動作またはツールと呼ぶが、コーディングツールまたは動作は、エンコーダおよびそれに対応する、コーディングの結果を逆にする復号ツールまたは動作が、デコーダによって行われることが理解されよう。
【0054】
周辺バスインターフェースまたは表示インターフェースの例は、ＵＳＢ（Ｕｎｉｖｅｒｓａｌ Ｓｅｒｉａｌ Ｂｕｓ）またはＨＤＭＩ（登録商標；Ｈｉｇｈ Ｄｅｆｉｎｉｔｉｏｎ Ｍｕｌｔｉｍｅｄｉａ Ｉｎｔｅｒｆａｃｅ）またはディスプレイポート等を含んでもよい。ストレージインターフェースの例は、ＳＡＴＡ（Ｓｅｒｉａｌ Ａｄｖａｎｃｅｄ Ｔｅｃｈｎｏｌｏｇｙ Ａｔｔａｃｈｍｅｎｔ）、ＰＣＩ、ＩＤＥインターフェース等を含む。本明細書に記載される技術は、携帯電話、ノートパソコン、スマートフォン、またはデジタルデータ処理および／または映像表示を実施可能な他のデバイス等の様々な電子デバイスに実施されてもよい。
【0055】
図２は、映像処理装置３６００のブロック図である。装置３６００は、本明細書に記載の１または複数の方法を実装するために使用されてもよい。装置３６００は、スマートフォン、タブレット、コンピュータ、モノのＩｏＴ（Ｉｎｔｅｒｎｅｔ ｏｆ Ｔｈｉｎｇｓ）受信機等に実施されてもよい。装置３６００は、１または複数のプロセッサ３６０２と、１または複数のメモリ３６０４と、映像処理ハードウェア３６０６と、を含んでもよい。１つまたは複数のプロセッサ３６０２は、本明細書に記載される１または複数の方法を実装するように構成されてもよい。１または複数のメモリ３６０４は、本明細書で説明される方法および技術を実装するために使用されるデータおよびコードを記憶するために使用してもよい。映像処理ハードウェア３６０６は、本明細書に記載される技術をハードウェア回路にて実装するために使用してもよい。
【0056】
図４は、本開示の技術を利用し得る例示的な映像コーディングシステム１００を示すブロック図である。
【0057】
図４に示すように、映像コーディングシステム１００は、送信元デバイス１１０と、送信先デバイス１２０と、を備えてもよい。送信元デバイス１１０は、映像エンコーディングデバイスとも称され得るエンコードされた映像データを生成する。送信先デバイス１２０は、送信元デバイス１１０によって生成された符号化映像データを復号してよく、映像復号デバイスとも呼ばれ得る。
【0058】
送信元デバイス１１０は、映像ソース１１２と、映像エンコーダ１１４と、入出力（Ｉ／Ｏ）インターフェース１１６と、を含んでよい。
【0059】
映像ソース１１２は、映像キャプチャデバイスなどのソース、映像コンテンツプロバイダからの映像データを受信するためのインターフェース、および／または映像データを生成するためのコンピュータグラフィックスシステム、またはこれらのソースの組み合わせを含んでもよい。映像データは、１または複数のピクチャを含んでもよい。映像エンコーダ１１４は、映像ソース１１２からの映像データを符号化し、ビットストリームを生成する。ビットストリームは、映像データのコーディングされた表現を形成するビットのシーケンスを含んでもよい。ビットストリームは、コーディングされたピクチャおよび関連付けられたデータを含んでもよい。コーディングされたピクチャは、ピクチャのコーディングされた表現である。関連付けられたデータは、シーケンスパラメータセット、ピクチャパラメータセット、および他の構文構造を含んでもよい。Ｉ／Ｏインターフェース１１６は、変復調器（モデム）および／または送信機を含んでもよい。符号化された映像データは、ネットワーク１３０ａを介して、Ｉ／Ｏインターフェース１１６を介して送信先デバイス１２０に直接送信されてよい。符号化された映像データは、送信先デバイス１２０がアクセスするために、記録媒体／サーバ１３０ｂに記憶してもよい。
【0060】
送信先デバイス１２０は、Ｉ／Ｏインターフェース１２６、映像デコーダ１２４、および表示デバイス１２２を含んでもよい。
【0061】
Ｉ／Ｏインターフェース１２６は、受信機および／またはモデムを含んでもよい。Ｉ／Ｏインターフェース１２６は、送信元デバイス１１０または記憶媒体／サーバ１３０ｂから符号化された映像データを取得してもよい。映像デコーダ１２４は、符号化された映像データを復号してもよい。表示デバイス１２２は、復号された映像データをユーザに表示してもよい。表示デバイス１２２は、送信先デバイス１２０と一体化されてもよく、または外部表示デバイスとインターフェースするように構成される送信先デバイス１２０の外部にあってもよい。
【0062】
映像エンコーダ１１４および映像デコーダ１２４は、ＨＥＶＣ（Ｈｉｇｈ Ｅｆｆｉｃｉｅｎｃｙ Ｖｉｄｅｏ Ｃｏｄｉｎｇ）規格、ＶＶＭ（Ｖｅｒｓａｔｉｌｅ Ｖｉｄｅｏ Ｃｏｄｉｎｇ）規格、および他の現在のおよび／または更なる規格等の映像圧縮規格に従って動作してもよい。
【0063】
【0064】
映像エンコーダ２００は、本開示の技術のいずれかまたは全部を行うように構成されてもよい。図５の例において、映像エンコーダ２００は、複数の機能コンポーネントを含む。本開示で説明される技術は、映像エンコーダ２００の様々なコンポーネント間で共有されてもよい。いくつかの例では、プロセッサは、本開示で説明される技術のいずれかまたはすべてを行うように構成してもよい。
【0065】
映像エンコーダ２００の機能コンポーネントは、分割部２０１、予測部２０２、残差生成部２０７、変換部２０８、量子化部２０９、逆量子化部２１０、逆変換部２１１、再構成部２１２、バッファ２１３、およびエントロピー符号化部２１４を含んでもよく、予測部２０２は、モード選択部２０３、動き推定部２０４、動き補償部２０５、およびイントラ予測部２０６を含む。
【0066】
他の例において、映像エンコーダ２００は、さらに多くの、さらに少ない、または異なる機能コンポーネントを含んでもよい。一例において、予測部２０２は、ＩＢＣ（Ｉｎｔｒａ Ｂｌｏｃｋ Ｃｏｐｙ）部を含んでもよい。ＩＢＣ部は、少なくとも１つの参照ピクチャが、現在の映像ブロックが位置するピクチャであるＩＢＣモードにおいて予測を実行してもよい。
【0067】
さらに、動き推定部２０４および動き補償部２０５などのいくつかのコンポーネントは、高度に統合されてもよいが、説明のために、図５の例においては別個に表現されている。
【0068】
分割部２０１は、ピクチャを１または複数の映像ブロックに分割してもよい。映像エンコーダ２００および映像デコーダ３００は、様々な映像ブロックサイズをサポートしてもよい。
【0069】
モード選択部２０３は、例えば、誤りの結果に基づいて、イントラまたはインターのコーディングモードのうちの１つを選択し、得られたイントラまたはインターコーディングされたブロックを、残差ブロックデータを生成するために残差生成部２０７に供給し、また、参照ピクチャとして使用するための符号化されたブロックを再構成するために再構成部２１２に供給してよい。いくつかの例において、モード選択部２０３は、インター予測信号およびイントラ予測信号に基づいて予測を行うＣＩＩＰ（Ｃｏｍｂｉｎａｔｉｏｎ ｏｆ Ｉｎｔｒａ ａｎｄ Ｉｎｔｅｒ Ｐｒｅｄｉｃｔｉｏｎ）モードを選択してもよい。モード選択部２０３は、インター予測の場合、ブロックのために動きベクトルの解像度（例えば、サブピクセルまたは整数ピクセル精度）を選択してもよい。
【0070】
現在の映像ブロックに対してインター予測を行うために、動き推定部２０４は、バッファ２１３からの１または複数の参照フレームと現在の映像ブロックとを比較することにより、現在の映像ブロックに対する動き情報を生成してもよい。動き補償部２０５は、動き情報および現在の映像ブロックに関連付けられたピクチャ以外のバッファ２１３からのピクチャの復号されたサンプルに基づいて、現在の映像ブロックに対する予測映像ブロックを決定してもよい。
【0071】
動き推定部２０４および動き補償部２０５は、現在の映像ブロックがＩスライスであるか、Ｐスライスであるか、またはＢスライスであるかに基づいて、例えば、現在の映像ブロックに対して異なる動作を行ってもよい。
【0072】
いくつかの例において、動き推定部２０４は、現在の映像ブロックに対して単一方向予測を行い、動き推定部２０４は、現在の映像ブロックに対して、参照映像ブロック用のリスト０またはリスト１の参照ピクチャを検索してもよい。そして、動き推定部２０４は、参照映像ブロックを含むリスト０またはリスト１における参照ピクチャを示す参照インデックスと、現在の映像ブロックと参照映像ブロックとの間の空間的変位を示す動きベクトルと、を生成する。動き推定部２０４は、参照インデックス、予測方向インジケータ、および動きベクトルを、現在の映像ブロックの動き情報として出力してもよい。動き補償部２０５は、現在の映像ブロックの動き情報が示す参照映像ブロックに基づいて、現在のブロックの予測映像ブロックを生成してもよい。
【0073】
他の例において、動き推定部２０４は、現在の映像ブロックを双方向予測してもよく、動き推定部２０４は、現在の映像ブロックに対する参照映像ブロックについて、リスト０から参照ピクチャを検索してもよく、また、現在の映像ブロックに対する別の参照映像ブロックについて、リスト１における参照ピクチャも検索してもよい。そして、動き推定部２０４は、参照映像ブロックを含むリスト０およびリスト１における参照ピクチャを示す参照インデックスと、参照映像ブロックと現在の映像ブロックとの間の空間的変位を示す動きベクトルとを生成してもよい。動き推定部２０４は、現在の映像ブロックの参照インデックスおよび動きベクトルを、現在の映像ブロックの動き情報として出力してもよい。動き補償部２０５は、現在の映像ブロックの動き情報が示す参照映像ブロックに基づいて、現在の映像ブロックの予測映像ブロックを生成してもよい。
【0074】
いくつかの例において、動き推定部２０４は、デコーダの復号処理のために、動き情報のフルセットを出力してもよい。
【0075】
いくつかの例では、動き推定部２０４は、現在の映像のための動き情報のフルセットを出力しなくてもよい。むしろ、動き推定部２０４は、別の映像ブロックの動き情報を参照して、現在の映像ブロックの動き情報を信号通知してもよい。例えば、動き推定部２０４は、現在の映像ブロックの動き情報が近傍の映像ブロックの動き情報に十分に類似していることを判定してもよい。
【0076】
一例において、動き推定部２０４は、現在の映像ブロックに関連付けられた構文構造において、現在の映像ブロックが別の映像ブロックと同一の動き情報を有することを映像デコーダ３００に示す値を示してもよい。
【0077】
他の例において、動き推定部２０４は、現在の映像ブロックに関連付けられた構文構造において、別の映像ブロックと、ＭＶＤ（Ｍｏｔｉｏｎ Ｖｅｃｔｏｒ Ｄｉｆｆｅｒｅｎｃｅ）とを識別してもよい。動きベクトルの差分は、現在の映像ブロックの動きベクトルと、指定された映像ブロックの動きベクトルとの差分を示す。映像デコーダ３００は、指定された映像ブロックの動きベクトルと動きベクトル差分とを使用して、現在の映像ブロックの動きベクトルを決定してもよい。
【0078】
上述したように、映像エンコーダ２００は、動きベクトルを予測的に信号通知してもよい。映像エンコーダ２００によって実装され得る予測信号通知技法の２つの例は、ＡＭＶＰ（Ａｄｖａｎｃｅｄ Ｍｏｔｉｏｎ Ｖｅｃｔｏｒ Ｐｒｅｄｉｃｔｉｏｎ）およびマージモード信号通知を含む。
【0079】
イントラ予測部２０６は、現在の映像ブロックに対してイントラ予測を行ってもよい。イントラ予測部２０６が現在の映像ブロックをイントラ予測する場合、イントラ予測部２０６は、同じピクチャにおける他の映像ブロックの復号されたサンプルに基づいて、現在の映像ブロックのための予測データを生成してもよい。現在の映像ブロックのための予測データは、予測された映像ブロックおよび様々な構文要素を含んでもよい。
【0080】
残差生成部２０７は、現在の映像ブロックから現在の映像ブロックの予測された映像ブロックを減算することによって（例えば、マイナス符号によって示されている）、現在の映像ブロックに対する残差データを生成してもよい。現在の映像ブロックの残差データは、現在の映像ブロックにおけるサンプルの異なるサンプル成分に対応する残差映像ブロックを含んでもよい。
【0081】
他の例において、例えば、スキップモードにおいて、現在の映像ブロックに対する残差データがなくてもよく、残差生成部２０７は、減算動作を行わなくてもよい。
【0082】
変換処理部２０８は、現在の映像ブロックに関連付けられた残差映像ブロックに１または複数の変換を適用することによって、現在の映像ブロックのための１または複数の変換係数映像ブロックを生成してもよい。
【0083】
変換処理部２０８が現在の映像ブロックに関連付けられた変換係数映像ブロックを生成した後、量子化部２０９は、現在の映像ブロックに関連付けられた１または複数の量子化パラメータ（ＱＰ：Ｑｕａｎｔｉｚａｔｉｏｎ Ｐａｒａｍｅｔｅｒ）値に基づいて、現在の映像ブロックに関連付けられた変換係数映像ブロックを量子化してもよい。
【0084】
逆量子化部２１０および逆変換部２１１は、変換係数映像ブロックに逆量子化および逆変換をそれぞれ適用し、変換係数映像ブロックから残差映像ブロックを再構成してもよい。再構成部２１２は、予測部２０２によって生成された１または複数の予測映像ブロックに対応するサンプルに再構成された残差映像ブロックを追加して、バッファ２１３に格納するための現在のブロックに関連付けられた再構成された映像ブロックを生成してもよい。
【0085】
再構成部２１２が映像ブロックを再構成した後、映像ブロックにおける映像ブロッキングアーチファクトを縮小するために、ループフィルタリング動作が行われてもよい。
【0086】
エントロピー符号化部２１４は、映像エンコーダ２００の他の機能コンポーネントからデータを受信してもよい。エントロピー符号化部２１４がデータを受信した場合、エントロピー符号化部２１４は、１または複数のエントロピー符号化動作を行い、エントロピー符号化されたデータを生成し、エントロピー符号化されたデータを含むビットストリームを出力してもよい。
【0087】
【0088】
映像デコーダ３００は、本開示の技術のいずれかまたは全てを行うように構成されてもよい。図５の例において、映像デコーダ３００は、複数の機能コンポーネントを含む。本開示で説明される技法は、映像デコーダ３００の様々なコンポーネント間で共有されてもよい。いくつかの例では、プロセッサは、本開示で説明される技術のいずれかまたはすべてを行うように構成してもよい。
【0089】
図６の例において、映像デコーダ３００は、エントロピー復号部３０１、動き補償部３０２、イントラ予測部３０３、逆量子化部３０４、逆変換部３０５、および再構成部３０６、並びにバッファ３０７を含む。映像デコーダ３００は、いくつかの例では、映像エンコーダ２００（図５）に関して説明した符号化パスとほぼ逆の復号パスを行ってもよい。
【0090】
エントロピー復号部３０１は、符号化されたビットストリームを取り出す。符号化されたビットストリームは、エントロピー符号化された映像データ（例えば、映像データの符号化されたブロック）を含んでもよい。エントロピー復号部３０１は、エントロピー符号化された映像データを復号し、エントロピー復号された映像データから、動き補償部３０２は、動きベクトル、動きベクトル精度、参照ピクチャリストインデックス、および他の動き情報を含む動き情報を決定してもよい。動き補償部３０２は、例えば、ＡＭＶＰおよびマージモードを行うことで、このような情報を決定してもよい。
【0091】
動き補償部３０２は、動き補償されたブロックを生成してもよく、場合によっては、補間フィルタに基づいて補間を行う。構文要素には、サブピクセルの精度で使用される補間フィルタのための識別子が含まれてもよい。
【0092】
動き補償部３０２は、映像ブロックの符号化中に映像エンコーダ２０によって使用されるような補間フィルタを使用して、参照ブロックのサブ整数ピクセルのための補間値を計算してもよい。動き補償部３０２は、受信した構文情報に基づいて、映像エンコーダ２００により使用される補間フィルタを決定し、予測ブロックを生成に補間フィルタを使用してもよい。
【0093】
動き補償部３０２は、符号化された映像シーケンスのフレームおよび／またはスライスを符号化するために使用されるブロックのサイズを判定するための構文情報、符号化された映像シーケンスのピクチャの各マクロブロックがどのように分割されるかを記述する分割情報、各分割がどのように符号化されるかを示すモード、各インター符号化されたブロックに対する１または複数の参照フレーム（および参照フレームリスト）、および符号化された映像シーケンスを復号するための他の情報のいくつかを使用してもよい。
【0094】
イントラ予測部３０３は、例えば、ビットストリームにおいて受信したイントラ予測モードを使用して、空間的に隣接するブロックから予測ブロックを形成してもよい。逆量子化部３０３は、ビットストリームに提供され、エントロピー復号部３０１によって復号された量子化された映像ブロック係数を逆量子化（すなわち、逆量子化）する。逆変換部３０３は、逆変換を適用する。
【0095】
再構成部３０６は、残差ブロックと、動き補償部２０２またはイントラ予測部３０３によって生成された対応する予測ブロックとを合計し、復号されたブロックを形成してもよい。所望であれば、ブロックアーチファクトを削除するために、復号されたブロックをフィルタリングするためにデブロッキングフィルタが適用されてもよい。復号された映像ブロックは、バッファ３０７に記憶され、バッファ３０７は、後続の動き補償／イントラ予測のために参照ブロックを提供し、表示装置に表示するために復号された映像を生成する。
【0096】
解決策のリストは、開示される技術のいくつかの実施例を説明する。
【0097】
第１の解決策のセットを次に提供する。以下の解決策は、前章（例えば、項目１～９）で論じた技術の例示的な実施形態を示す。
【0098】
１．映像処理方法（例えば、図３の方法６００）であって、１または複数の映像ピクチャを含む１または複数の映像レイヤを含む映像と映像のコーディングされた表現との間の変換を行うこと（６０２）を含み、コーディングされた表現はコーディングされた表現からのサブビットストリームの抽出に関連するフォーマット規則に準拠する。
【0099】
２．フォーマット規則に従って、コーディングされた表現からサブビットストリームを抽出することをさらに含む、解決策１に記載の方法。
【0100】
以下の解決策は、前章（例えば、項目１）で論じた技術の例示的な実施形態を示す。
【0101】
３．サブビットストリームを抽出する間に、抽出に使用されるターゲットｉｄは、０から、コーディングされた表現のための映像パラメータセットで指示する構文フィールドの値の間の範囲となるように許可される、解決策１から２のいずれか１つに記載の方法。
【0102】
以下の解決策は、前章（例えば、項目２）で論じた技術の例示的な実施形態を示す。
【0103】
４．レイヤｉｄに従って、出力ビットストリームからＡＵＤ ＮＡＬ（Ａｃｃｅｓｓ Ｕｎｉｔ Ｄｅｌｉｍｉｔｅｒ Ｎｅｔｗｏｒｋ Ａｂｓｔｒａｃｔｉｏｎ Ｌａｙｅｒ）を削除せずに、サブビットストリームを抽出する、解決策１から３のいずれかに記載の方法。
【0104】
以下の解決策は、前章（例えば、項目３）で論じた技術の例示的な実施形態を示す。
【0105】
５．抽出される出力レイヤに適用できないスケーラブルネスティング補足強化情報メッセージを含むネットワーク抽象レイヤユニットを選択的に削除することによって、サブビットストリームを抽出する、解決策１から４のいずれか１つに記載の方法。
【0106】
以下の解決策は、前章（例えば、項目５）で論じた技術の例示的な実施形態を示す。
【0107】
６．設定されている出力レイヤセットのためのフラグ、および、無効にされているサブピクチャのためのフラグを用いて、スケーラブルネスティングＳＥＩメッセージから非スケーラブルネスト化されたＳＥＩ（Ｓｕｐｐｌｅｍｅｎｔａｌ Ｅｎｈａｎｃｅｍｅｎｔ Ｉｎｆｏｒｍａｔｉｏｎ）を生成するために、抽出を制約することによって、サブビットストリームは抽出される、解決策１から５のいずれか１つに記載の方法。
【0108】
以下の解決策は、前章（例えば、項目６）で論じた技術の例示的な実施形態を示す。
【0109】
７．単一のＳＥＩ（Ｓｕｐｐｌｅｍｅｎｔｔａｌ Ｅｎｈａｎｃｅｍｅｎｔ Ｉｎｆｏｒｍａｉｔｏｎ）ネットワーク抽象レイヤユニットからの複数のスケーラブルネスト化されたＳＥＩメッセージの抽出を規定する規則に従って、サブビットストリームを抽出する、解決策１から６のいずれか１つに記載の方法。
【0110】
以下の解決策は、前章（例えば、項目７）で論じた技術の例示的な実施形態を示す。
【0111】
８．いくつかのＳＥＩメッセージが抽出され、非スケーラブルネスト化されたＳＥＩメッセージとして含まれるすべての補足強化情報ネットワーク抽象化レイヤＳＥＩ ＮＡＬユニットをコーディングされた表現から削除する規則に従って、サブビットストリームは抽出される、解決策１から７のいずれか１つに記載の方法。
【0112】
以下の解決策は、前章（例えば、項目８）で論じた技術の例示的な実施形態を示す。
【0113】
９．フォーマット規則は、ＳＥＩ ＮＡＬ（Ｓｕｐｐｌｅｍｅｎｔａｌ Ｅｎｈａｎｃｅｍｅｎｔ Ｉｎｆｏｒｍａｔｉｏｎ Ｎｅｔｗｏｒｋ Ａｂｓｔｒａｃｔｉｏｎ Ｌａｙｅｒ）ユニットが、０、１、または１３０に等しいｐａｙｌｏａｄＴｙｐｅを有するＳＥＩメッセージを含む場合、ＳＥＩ ＮＡＬユニットは、０（ＢＰ）、１（ＰＴ）、１３０（ＤＵＩ）、または１３３（スケーラブルネスティング）に等しくないｐａｙｌｏａｄＴｙｐｅを有するＳＥＩメッセージを含むことを許容しないように規定する、解決法１から８のいずれか１つに記載の方法。
【0114】
１０．変換を実行することは、映像をコーディングされた表現に符号化することを含む、解決策１から９のいずれか１つに記載の方法。
【0115】
１１．変換を行うことは、コーディングされた表現を構文解析し、復号して映像を生成することを含む、解決策１から９のいずれかに記載の方法。
【0116】
１２．解決策１から１１の１または複数に記載の方法を実行するように構成されたプロセッサを備える、映像復号装置。
【0117】
１３．解決策１から１１の１または複数に記載の方法を実装するように構成されたプロセッサを備える、映像符号化装置。
【0118】
１４．コンピュータコードが記憶されたコンピュータプログラム製品であって、コードは、プロセッサにより実行された際に、プロセッサに、解決策１から１１のいずれかに記載の方法を実装させるコンピュータプログラム製品。
【0119】
１５．本明細書に記載の方法、装置またはシステム。
【0120】
第２の解決策のセットは、前章（例えば、項目１、４、８、および９）で論じた技術の例示的な実施形態を示す。
【0121】
１．映像処理方法（例えば、図７Ａに示される方法７００）であって、規則に従って、複数のレイヤを含む映像と映像のビットストリームとの間の変換を実行すること（７０２）を含み、規則は、ビットストリームから抽出されるサブビットストリームの時間的レイヤ識別子値の最大許容値を規定する。
【0122】
２．規則は、ビットストリームにおけるレイヤの数に応答する、解決策１に記載の方法。
【0123】
３．レイヤの数が１よりも大きい場合、規則は、時間的レイヤ識別子の最大許容値が、０から、ビットストリームによって参照される映像パラメータセットにおける第１の構文要素に基づく値の範囲内にあることを規定する、解決策１または２に記載の方法。
【0124】
４．レイヤの数が１に等しい場合、規則は、時間的レイヤ識別子の最大許容値が、０から、ビットストリームによって参照されるシーケンスパラメータセットにおける第２の構文要素に基づく値の範囲内にあることを規定する、解決策１または２に記載の方法。
【0125】
５．第１の構文要素は、映像パラメータセットから１を減算した値で規定されるレイヤに存在することが許される時間的サブレイヤの最大数を規定する、解決策３に記載の方法。
【0126】
６．第２の構文要素は、シーケンスパラメータセットから１を減算した値で規定されるレイヤに存在することが許される時間的サブレイヤの最大数を規定する、解決策４に記載の方法。
【0127】
７．映像パラメータセットにおける第１の構文要素は、ｖｐｓ＿ｍａｘ＿ｓｕｂｌａｙｅｒｓ＿ｍｉｎｕｓ１である、解決策３に記載の方法。
【0128】
８．シーケンスパラメータセットにおける第２の構文要素は、ｓｐｓ＿ｍａｘ＿ｓｕｂｌａｙｅｒｓ＿ｍｉｎｕｓ１である、解決策４に記載の方法。
【0129】
９．値は、第１の構文要素または第２の構文要素の値に等しい、解決策３または４に記載の方法。
【0130】
１０．映像処理方法（例えば、図７Ｂに示される方法７１０）であって、規則に従って、映像と映像のビットストリームとの間の変換を実行すること（７１２）を含み、規則は、サブビットストリームを出力するためのサブビットストリーム抽出プロセス中にビットストリームから抽出されるべきＮＡＬ（Ｎｅｔｗｏｒｋ Ａｂｓｔｒａｃｔｉｏｎ Ｌａｙｅｒ）ユニットを定義し、規則は、ターゲットＯＬＳインデックスを有するＯＬＳ（Ｏｕｔｐｕｔ Ｌａｙｅｒ Ｓｅｔ）におけるＮＡＬユニットヘッダ識別子値のリストが、サブビットストリーム抽出プロセスに入力されるビットストリームにおけるすべてのＶＣＬ（Ｖｉｄｅｏ Ｃｏｄｉｎｇ Ｌａｙｅｒ） ＮＡＬユニットにおけるＮＡＬユニットヘッダ識別子のすべての値を含まないかどうかに基づいて、サブビットストリームを導出することを規定する。
【0131】
１１．規則は、出力レイヤセットにおけるＮＡＬユニットヘッダ識別子値のリストが、ビットストリームにおけるすべてのＶＣＬ ＮＡＬユニットのすべてのＮＡＬユニットヘッダ識別子の値を含まない場合、０または１３０に等しいペイロードタイプの非スケーラブルネスト化されたＳＥＩメッセージを含むすべてのＳＥＩ（Ｓｕｐｐｌｅｍｅｎｔａｌ Ｅｎｈａｎｃｅｍｅｎｔ Ｉｎｆｏｒｍａｉｔｏｎ） ＮＡＬユニットをサブビットストリームから削除することを規定する、解決策１０に記載の方法。
【0132】
１２．映像処理方法（例えば、図７Ｃに示される方法７２０）であって、規則に従って、映像と映像のビットストリームとの間の変換を実行すること（７２２）を含み、規則は、サブビットストリームを出力するためのサブビットストリーム抽出プロセス中にビットストリームから抽出されるべきＮＡＬ（Ｎｅｔｗｏｒｋ Ａｂｓｔｒａｃｔｉｏｎ Ｌａｙｅｒ）ユニットを定義し、規則は、ＳＥＩ ＮＡＬ（Ｎｅｔｗｏｒｋ Ａｂｓｔｒａｃｔｉｏｎ Ｌａｙｅｒ）ユニットに含まれる第１のＳＥＩ（Ｓｕｐｐｌｅｍｅｎｔａｌ Ｅｎｈａｎｃｅｍｅｎｔ Ｉｎｆｏｒｍａｔｉｏｎ）メッセージのペイロードタイプに応答して、特定のペイロードタイプを有するＳＥＩメッセージを含むことＳＥＩ ＮＡＬユニットに許可しないことを規定する。
【0133】
１３．第１のＳＥＩメッセージのペイロードタイプは、０、１、または１３０であり、規則は、ＳＥＩ ＮＡＬユニットが、０、１、１３０、または１３３に等しくない特定のペイロードタイプを有するＳＥＩメッセージを含むことを許可しないことを規定する、解決策１２に記載の方法。
【0134】
１４．映像処理方法（例えば、図７Ｄに示される方法７３０）であって、フォーマット規則に従って、映像と映像のビットストリームとの間の変換を実行すること（７３２）を含み、フォーマット規則は、ビットストリームが、１または複数の特定のペイロードタイプを有する１または複数の非スケーラブルネスト化されたＳＥＩ（Ｓｕｐｐｌｅｍｅｎｔａｌ Ｅｎｈａｎｃｅｍｅｎｔ Ｉｎｆｏｒｍａｔｉｏｎ）メッセージが、コーディングレイヤによって参照されるすべての出力レイヤセットに適用されるかどうかを規定するフラグを含むことを規定する。
【0135】
１５．１または複数の特定のペイロードタイプは、１および１３０に等しい、解決策１４に記載の方法。
【0136】
１６．１または複数の非スケーラブルＳＥＩメッセージは、ＰＴ（Ｐｉｃｔｕｒｅ Ｔｉｍｉｎｇ） ＳＥＩメッセージおよびＤＵＩ（Ｄｅｃｏｄｉｎｇ Ｕｎｉｔ Ｉｎｆｏｒｍａｔｉｏｎ） ＳＥＩメッセージである、解決策１４に記載の方法。
【0137】
１７．１または複数の特定のペイロードタイプは、０、１、および１３０に等しい、解決策１４に記載の方法。
【0138】
１８．１または複数の非スケーラブルＳＥＩメッセージは、ＢＰ（Ｂｕｆｆｕｒｉｎｇ Ｐｅｒｉｏｄ） ＳＥＩメッセージおよびＤＵＩ（Ｄｅｃｏｄｉｎｇ Ｕｎｉｔ Ｉｎｆｏｒｍａｔｉｏｎ） ＳＥＩメッセージである、解決策１４に記載の方法。
【0139】
１９．１または複数の特定のペイロードタイプは１３０に等しい、解決策１４に記載の方法。
【0140】
２０．１または複数の非スケーラブルＳＥＩメッセージは、ＤＵＩ（Ｄｅｃｏｄｉｎｇ Ｕｎｉｔ Ｉｎｆｏｒｍａｔｉｏｎ） ＳＥＩメッセージである、解決策１４に記載の方法。
【0141】
２１．１または複数の特定のペイロードタイプは、０に等しい、解決策１４に記載の方法。
【0142】
２２．１または複数の非スケーラブルＳＥＩメッセージは、ＢＰ（Ｂｕｆｆｅｒｉｎｇ Ｐｅｒｉｏｄ） ＳＥＩメッセージである、解決策１に記載の方法。
【0143】
２３．変換は、映像をビットストリームに符号化することを含む、解決策１から２７のいずれかに記載の方法。
【0144】
２４．変換は、ビットストリームから映像を復号することを含む、解決策１から２２のいずれかに記載の方法。
【0145】
２５．変換は、映像からビットストリームを生成することを含み、方法は、ビットストリームを非一時的なコンピュータ可読記録媒体に記憶することをさらに含む、解決策１から２２のいずれかに記載の方法。
【0146】
２６．解決策１から２５の１または複数に記載の方法を実装するように構成されたプロセッサを備える映像処理装置。
【0147】
２７．解決策１から２５のいずれか１つに記載の方法と、ビットストリームを非一時的なコンピュータ可読記録媒体に記憶することをさらに含む、映像のビットストリームを記憶する方法。
【0148】
２８．実行された際に、解決策１から２５の１または複数に記載の方法をプロセッサに実装させるプログラムコードを記憶するコンピュータ可読媒体。
【0149】
２９．上述した方法のいずれかに従って生成されたビットストリームを記憶する、コンピュータ可読媒体。
【0150】
３０．解決策１から２５のいずれかに記載の方法を実装するように構成された、ビットストリーム表現を記憶するための映像処理装置。
【0151】
第３の解決策のセットは、前章（例えば、項目２）で論じた技術の例示的な実施形態を示す。
【0152】
１．映像処理方法（例えば、図８に示される方法８００）であって、規則に従って、映像と映像のビットストリームとの間の変換を実行すること（８０２）を含み、規則は、特定のタイプのＮＡＬ（Ｎｅｔｗｏｒｋ Ａｂｓｔｒａｃｔｉｏｎ Ｌａｙｅｒ）ユニットを削除せず、かつ、特定のＮＡＬユニットヘッダ識別子値を有して、ビットストリームから出力サブビットストリームを抽出するサブビットストリーム抽出プロセスを規定し、特定のタイプは、ＡＵＤ（Ａｃｃｅｓｓ Ｕｎｉｔ Ｄｅｌｉｍｉｔｅｒ） ＮＡＬユニットを含む。
【0153】
２．特定のタイプは、ＶＰＳ（Ｖｉｄｅｏ Ｐａｒａｍｔｅｒ Ｓｅｔ） ＮＡＬユニットを含む、解決策１に記載の方法。
【0154】
３．特定のタイプは、復号能力情報ＮＡＬユニットを含む、解決策１または２に記載の方法。
【0155】
４．特定のタイプは、ビットストリーム終端ＮＡＬユニットを含む、解決策１～３のいずれか１つに記載の方法。
【0156】
５．特定のタイプは、０、１、１３０、または２０３に等しいペイロードタイプを有する非スケーラブルネスト化されたＳＥＩメッセージを含む補足強化情報ＮＡＬユニットを含む、解決策１から４のいずれか１つに記載の方法。
【0157】
６．特定のＮＡＬユニットヘッダ識別子値は、出力サブビットストリームに対するレイヤ値のリストに含まれるレイヤ識別子値を含む、解決策１から６のいずれか１つに記載の方法。
【0158】
７．規則は、特定のタイプのＮＡＬユニットに関連付けられたＮＡＬユニットヘッダ識別子値に関わらず、例外に従って、特定のタイプのＮＡＬユニットを出力ビットストリームから削除しないことを規定する、解決策１に記載の方法。
【0159】
８．変換は、映像をビットストリームに符号化することを含む、解決策１から７のいずれか１つに記載の方法。
【0160】
９．変換は、ビットストリームから映像を復号することを含む、解決策１から７のいずれかに記載の方法。
【0161】
１０．変換は、映像からビットストリームを生成することを含み、方法は、ビットストリームを非一時的なコンピュータ可読記録媒体に記憶することをさらに含む、解決策１から７のいずれかに記載の方法。
【0162】
１１．解決策１から１０の１または複数のいずれかに記載の方法を実装するように構成された処理装置を備える映像処理装置。
【0163】
１２．解決策１から１０のいずれか１つに記載の方法と、ビットストリームを非一時的なコンピュータ可読記録媒体に記憶することをさらに含む、映像のビットストリームを記憶する方法。
【0164】
１３．実行されると、解決策１から１０の１または複数のいずれかに記載の方法をプロセッサに実装させるプログラムコードを記憶するコンピュータ可読媒体。
【0165】
１４．上述した方法のいずれかに従って生成されたビットストリームを記憶する、コンピュータ可読媒体。
【0166】
１５．解決策１から１０の１または複数のいずれかに記載の方法を実装するように構成された、ビットストリーム表現を記憶するための映像処理装置。
【0167】
第４の解決策のセットは、前章（例えば、項目３）で論じた技術の例示的な実施形態を示す。
【0168】
１．映像処理方法（例えば、図９に示される方法９００）であって、規則に従って、１または複数のレイヤを含む映像と映像のビットストリームとの間の変換を実行すること（９０２）を含み、規則は、サブビットストリーム抽出プロセスにおいて、ターゲットＯＬＳ（Ｏｕｔｐｕｔ Ｌａｙｅｒ Ｓｅｔ）に含まれていないレイヤに適用されるスケーラブルネスティングＳＥＩ（Ｓｕｐｐｌｅｍｅｎｔａｒｙ Ｅｎｈａｎｃｅｍｅｎｔ Ｉｎｆｏｒｍａｔｉｏｎ）メッセージを含むＮＡＬ（Ｎｅｔｗｏｒｋ Ａｂｓｔｒａｃｔｉｏｎ Ｌａｙｅｒ）ユニットを削除することを規定する。
【0169】
２．スケーラブルネスティングＳＥＩメッセージは、レイヤに適用されるスケーラブルネスティングＳＥＩメッセージを規定する特定の値に等しい値を有するフラグに関連付けられる、解決策１に記載の方法。
【0170】
３．特定の値は０である、解決策２に記載の方法。
【0171】
４．規則は、第２のリスト（ＬａｙｅｒＩｄＩｎＯｌｓ［ｔａｒｇｅＯｌｓＩｄｘ］）内にある第１のリスト（ＮｅｓｔｉｎｇＬａｙｅｒＩＤ［ｉ］）に値を有さないＳＥＩメッセージを含むＮＡＬユニットを削除することをさらに規定し、第１のリストは、スケーラブルネスティングＳＥＩメッセージが適用されるレイヤのＮＡＬユニットヘッダ識別子値を特定し、かつ、ｉは０からＮｕｍＬａｙｅｒｓ－１の範囲内であり、ＮｕｍＬａｙｅｒはスケーラブルネスティングＳＥＩメッセージが適用されるレイヤの数を示し、第２のリストはターゲット出力レイヤインデックスで設定されたターゲット出力レイヤにおけるＮＡＬユニットヘッダ識別子の値を規定する。
【0172】
５．変換は、映像をビットストリームに符号化することを含む、解決策１から４のいずれかに記載の方法。
【0173】
６．変換は、ビットストリームから映像を復号することを含む、解決策１から４のいずれかに記載の方法。
【0174】
７．変換は、映像からビットストリームを生成することを含み、方法は、ビットストリームを非一時的なコンピュータ可読記録媒体に記憶することをさらに含む、解決策１から４のいずれかに記載の方法。
【0175】
８．解決策１から７の１または複数のいずれかに記載の方法を実装するように構成されたプロセッサを備える映像処理装置。
【0176】
９．解決策１から７のいずれか１つに記載の方法と、ビットストリームを非一時的なコンピュータ可読記録媒体に記憶することをさらに含む、映像のビットストリームを記憶する方法。
【0177】
１０．実行されると、解決策１から７の１または複数のいずれかに記載の方法をプロセッサに実装させるプログラムコードを記憶するコンピュータ可読媒体。
【0178】
１１．上述した方法のいずれかに従って生成されたビットストリームを記憶する、コンピュータ可読媒体。
【0179】
１２．解決策１から７の１または複数のいずれかに記載の方法を実装するように構成された、ビットストリーム表現を記憶するための映像処理装置。
【0180】
第５の解決策のセットは、前章（例えば、項目５～７）で論じた技術の例示的な実施形態を示す。
【0181】
１．映像処理方法（例えば、図１０Ａに示される方法１０００）であって、規則に従って、１または複数のレイヤを含む映像と映像のビットストリームとの間の変換を実行することを含み、規則は、サブビットストリーム抽出のプロセスにおいて、ＳＥＩ（Ｓｕｐｐｌｅｍｅｎｔａｒｙ Ｅｎｈａｎｃｅｍｅｎｔ Ｉｎｆｏｒｍａｔｉｏｎ）メッセージが特定のＯＬＳ（Ｏｕｔｐｕｔ Ｌａｙｅｒ Ｓｅｔ）に適用されるかどうかを示す第１のフラグと、ＳＥＩメッセージがすべてのサブピクチャに適用されるかまたは特定のサブピクチャにのみに適用されるかどうかを示す第２のフラグに基づいて、スケーラブルネスティングＳＥＩメッセージからスケーラブルにネスト化されたＳＥＩメッセージを抽出することによって、非スケーラブルネスト化されたＳＥＩメッセージが生成されることを規定する。
【0182】
２．規則は、条件ｉ）第１のフラグは、ＳＥＩメッセージが特定のＯＬＳ（Ｏｕｔｐｕｔ Ｌｙｅｒ Ｓｅｔ）に適用されることを規定する第１の値を有することと、条件ｉｉ）第２のフラグは、特定のＯＬＳに適用されるＳＥＩメッセージが、特定のＯＬＳのすべてのサブピクチャに適用されることを規定する第２の値を有することと、が満たされていることに応答して、非スケーラブルネスト化されたＳＥＩメッセージを生成するように規定する、解決策１に記載の方法。
【0183】
３．映像処理方法（例えば、図１０Ｂに示される方法１０１０）であって、規則に従って、１または複数のレイヤを含む映像と映像のビットストリームとの間の変換を実行すること（１０１２）を含み、規則は、サブビットストリーム抽出のプロセスにおいて、ピクチャユニットにおける第１のＳＥＩ（Ｓｕｐｐｌｅｍｅｎｔａｌ Ｅｎｈａｎｃｅｍｅｎｔ Ｉｎｆｏｒｍａｔｉｏｎ） ＮＡＬ（Ｎｅｔｗｏｒｋ Ａｂｓｔｒａｃｔｉｏｎ Ｌａｙｅｒ）ユニットから複数のスケーラブルネスト化されたＳＥＩメッセージを抽出することによって、非スケーラブルネスト化されたＳＥＩメッセージが生成されることを規定する。
【0184】
４．複数のスケーラブルネスト化されたＳＥＩメッセージは、ピクチャユニットに含まれる第２のＳＥＩ ＮＡＬユニットに含まれる、解決策３に記載の方法。
【0185】
５．第２のＳＥＩ ＮＡＬユニットは、第１のＳＥＩ ＮＡＬユニットの直後にある、解決策４に記載の方法。
【0186】
６．映像処理方法（例えば、図１０Ｃに示される方法１０２０）であって、規則に従って、１または複数のレイヤを含む映像と映像のビットストリームとの間の変換を実行すること（１０２２）を含み、規則は、出力ビットストリームを生成するめにサブビットストリーム抽出プロセスを規定し、規則は、サブビットストリーム抽出プロセス中の１または複数のＳＥＩ（Ｓｕｐｐｌｅｍｅｎｔａｌ Ｅｎｈａｎｃｅｍｅｎｔ Ｉｎｆｏｒｍａｔｉｏｎ） ＮＡＬ（Ｎｅｔｗｏｒｋ Ａｂｓｔｒａｃｔｉｏｎ Ｌａｙｅｒ）ユニットのハンドリングを規定する。
【0187】
７．規則は、いくつかのＳＥＩメッセージが抽出され、非スケーラブルネスト化されたＳＥＩメッセージとして含まれた１または複数のＳＥＩ ＮＡＬユニットを削除することを規定する、解決策６に記載の方法。
【0188】
８．規則は、ターゲット出力レイヤセットのみに適用されるスケーラブルネスト化されたＳＥＩメッセージを含むＳＥＩ ＮＡＬユニットを削除することを規定する、解決策６に記載の方法。
【0189】
９．規則は、ターゲットＯＬＳ以外のＯＬＳが存在しないＯＬＳ（Ｏｕｔｐｕｔ Ｌａｙｅｒ Ｓｅｔ）に適用されるスケーラブルネスト化されたＳＥＩメッセージを含むＳＥＩ ＮＡＬユニットを削除することを規定する、解決策６に記載の方法。
【0190】
１０．変換は、映像をビットストリームに符号化することを含む、解決策１から９のいずれかに記載の方法。
【0191】
１１．変換は、ビットストリームから映像を復号することを含む、解決策１から９のいずれかに記載の方法。
【0192】
１２．変換は、映像からビットストリームを生成することを含み、方法は、ビットストリームを非一時的なコンピュータ可読記録媒体に記憶することをさらに含む、解決策１から９のいずれかに記載の方法。
【0193】
１３．解決策１から１２の１または複数のいずれかに記載の方法を実装するように構成されたプロセッサを備える映像処理装置。
【0194】
１４．解決策１から１２のいずれか１つに記載の方法と、ビットストリームを非一時的なコンピュータ可読記録媒体に記憶することをさらに含む、映像のビットストリームを記憶する方法。
【0195】
１５．実行されると、解決策１から１２の１または複数のいずれかに記載の方法をプロセッサに実装させるプログラムコードを記憶したコンピュータ可読媒体。
【0196】
１６．上述した方法のいずれかに従って生成されたビットストリームを記憶する、コンピュータ可読媒体。
【0197】
１７．解決策１から１２の１または複数のいずれかに記載の方法を実装するように構成された、ビットストリーム表現を記憶するための映像処理装置。
【0198】
本明細書に記載された開示された、およびその他の解決策、実施例、実施形態、モジュール、および機能動作の実装形態は、本明細書に開示された構造およびその構造的等価物を含め、デジタル電子回路、またはコンピュータソフトウェア、ファームウェア、もしくはハードウェアで実施されてもよく、またはそれらの１つ以上の組み合わせで実施してもよい。開示された、およびその他の実施形態は、１または複数のコンピュータプログラム製品、すなわち、データ処理装置によって実装されるため、またはデータ処理装置の動作を制御するために、コンピュータ可読媒体上に符号化されたコンピュータプログラム命令の１または複数のモジュールとして実施することができる。このコンピュータ可読媒体は、機械可読記憶デバイス、機械可読記憶基板、メモリデバイス、機械可読伝播信号をもたらす物質の組成物、またはこれらの１または複数の組み合わせであってもよい。「データ処理装置」という用語は、例えば、プログラマブルプロセッサ、コンピュータ、または複数のプロセッサ、若しくはコンピュータを含む、データを処理するためのすべての装置、デバイス、および機械を含む。この装置は、ハードウェアの他に、当該コンピュータプログラムの実行環境を作るコード、例えば、プロセッサファームウェア、プロトコルスタック、データベース管理システム、オペレーティングシステム、またはこれらの１つ以上の組み合わせを構成するコードを含むことができる。伝播信号は、人工的に生成した信号、例えば、機械で生成した電気、光、または電磁信号であり、適切な受信装置に送信するための情報をエンコードするために生成される。
【0199】
コンピュータプログラム（プログラム、ソフトウェア、ソフトウェアアプリケーション、スクリプト、またはコードとも呼ばれる）は、コンパイルされた言語または解釈された言語を含む任意の形式のプログラミング言語で記述することができ、また、それは、スタンドアロンプログラムとして、またはコンピューティング環境で使用するのに適したモジュール、コンポーネント、サブルーチン、または他のユニットとして含む任意の形式で展開することができる。コンピュータプログラムは、必ずしもファイルシステムにおけるファイルに対応するとは限らない。プログラムは、他のプログラムまたはデータを保持するファイルの一部（例えば、マークアップ言語文書に格納された１または複数のスクリプト）に記録されていてもよいし、当該プログラム専用の単一のファイルに記憶されていてもよいし、複数の調整ファイル（例えば、１または複数のモジュール、サブプログラム、またはコードの一部を格納するファイル）に記憶されていてもよい。コンピュータプログラムを、１つのコンピュータで実行するように展開することができ、あるいは、１つのサイトに位置する、または複数のサイトにわたって分散され通信ネットワークによって相互接続される複数のコンピュータで実行するように展開することができる。
【0200】
本明細書に記載された処理およびロジックフローは、入力データに対して動作し、出力を生成することによって機能を行うための１または複数のコンピュータプログラムを実行する１または複数のプログラマブルプロセッサによって行うことができる。処理およびロジックフローはまた、特定用途のロジック回路、例えば、ＦＰＧＡ（Ｆｉｅｌｄ Ｐｒｏｇｒａｍｍａｂｌｅ Ｇａｔｅ Ａｒｒａｙ）またはＡＳＩＣ（Ａｐｐｌｉｃａｔｉｏｎ Ｓｐｅｃｉｆｉｃ Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ）によって行うことができ、装置はまた、特別目的のロジック回路として実装することができる。
【0201】
コンピュータプログラムの実行に適したプロセッサは、例えば、汎用および専用マイクロプロセッサの両方、並びに任意の種類のデジタルコンピュータの任意の１または複数のプロセッサを含む。一般的に、プロセッサは、リードオンリーメモリまたはランダムアクセスメモリまたはその両方から命令およびデータを受信する。コンピュータの本質的な要素は、命令を実行するためのプロセッサと、命令およびデータを記憶するための１または複数の記憶装置とである。一般的に、コンピュータは、データを記憶するための１または複数の大容量記憶デバイス、例えば、磁気、光磁気ディスク、または光ディスクを含んでもよく、またはこれらの大容量記憶デバイスからデータを受信するか、またはこれらにデータを転送するように動作可能に結合されてもよい。しかしながら、コンピュータは、このようなデバイスを有する必要はない。コンピュータプログラム命令およびデータを記憶するのに適したコンピュータ可読媒体は、あらゆる形式の不揮発性メモリ、媒体、およびメモリデバイスを含み、例えば、ＥＰＲＯＭ、ＥＥＰＲＯＭ、フラッシュ記憶装置、磁気ディスク、例えば内部ハードディスクまたはリムーバブルディスク、光磁気ディスク、およびＣＤ－ＲＯＭおよびＤＶＤ－ＲＯＭディスク等の半導体記憶装置を含む。プロセッサおよびメモリは、特定用途のロジック回路によって補完されてもよく、または特定用途のロジック回路に組み込まれてもよい。
【0202】
本特許明細書は多くの特徴を含むが、これらは、任意の主題の範囲または特許請求の範囲を限定するものと解釈されるべきではなく、むしろ、特定の技術の特定の実施形態に特有であり得る特徴の説明と解釈されるべきである。本特許文献において別個の実施形態のコンテキストで説明されている特定の特徴は、１つの例において組み合わせて実装してもよい。逆に、１つの例のコンテキストで説明された様々な特徴は、複数の実施形態において別個にまたは任意の適切なサブコンビネーションで実装してもよい。さらに、特徴は、特定の組み合わせで作用するものとして上記に記載され、最初にそのように主張されていてもよいが、主張された組み合わせからの１または複数の特徴は、場合によっては、組み合わせから抜粋されることができ、主張された組み合わせは、サブコンビネーションまたはサブコンビネーションのバリエーションに向けられてもよい。
【0203】
同様に、動作は図面において特定の順番で示されているが、これは、所望の結果を達成するために、このような動作が示された特定の順番でまたは連続した順番で行われること、または示された全ての動作が行われることを必要とするものと理解されるべきではない。また、本特許明細書に記載されている実施形態における様々なシステムの構成要素の分離は、全ての実施形態においてこのような分離を必要とするものと理解されるべきではない。
【0204】
いくつかの実装形態および実施例のみが記載されており、この特許文献に記載され図示されているコンテンツに基づいて、他の実施形態、拡張および変形が可能である。
【図1】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7A】
【図7B】
【図7C】
【図7D】
【図8】
【図9】
【図10A】
【図10B】
【図10C】