(19)【発行国】日本国特許庁(JP)
(12)【公報種別】公表特許公報(A)
(11)【公表番号】
(43)【公表日】2022-05-06
(54)【発明の名称】ビデオ符号化におけるイントラサブパーティション
(51)【国際特許分類】
H04N 19/105 20140101AFI20220425BHJP
H04N 19/176 20140101ALI20220425BHJP
H04N 19/593 20140101ALI20220425BHJP
H04N 19/136 20140101ALI20220425BHJP
【ＦＩ】
H04N19/105
H04N19/176
H04N19/593
H04N19/136
【審査請求】未請求
【予備審査請求】未請求
(21)【出願番号】P 2021553865
(86)(22)【出願日】2020-03-11
(85)【翻訳文提出日】2021-11-09
(86)【国際出願番号】 US2020022121
(87)【国際公開番号】W WO2020185910
(87)【国際公開日】2020-09-17
(31)【優先権主張番号】62/816,548
(32)【優先日】2019-03-11
(33)【優先権主張国・地域又は機関】US
(31)【優先権主張番号】62/860,122
(32)【優先日】2019-06-11
(33)【優先権主張国・地域又は機関】US
(81)【指定国・地域】
【公序良俗違反の表示】
（特許庁注：以下のものは登録商標）
１．ＷＣＤＭＡ
２．３ＧＰＰ
３．ＨＤＭＩ
(71)【出願人】
【識別番号】514041959
【氏名又は名称】ヴィド スケール インコーポレイテッド
(74)【代理人】
【識別番号】110001243
【氏名又は名称】特許業務法人 谷・阿部特許事務所
(72)【発明者】
【氏名】ヤン、フー
(72)【発明者】
【氏名】ヴァナム、ラーフル
(72)【発明者】
【氏名】フ、ユーウェン
【テーマコード（参考）】
5C159
【Ｆターム（参考）】
5C159KK14
5C159LC09
5C159MA04
5C159MA05
5C159MA21
5C159MC11
5C159ME01
5C159RC12
5C159TA12
5C159TA31
5C159TB08
5C159TC26
5C159TC42
5C159TD12
5C159UA02
5C159UA05
5C159UA16
(57)【要約】
イントラサブパーティション（ＩＳＰ）は、例えば、ＩＳＰインディケーションに基づいて、カレントブロックに対して有効にされることがある。ブロックは、複数のサブパーティションに分割されることがあり、サブパーティションは、プレディクションユニット（ＰＵ）に属することがある。カレントブロックに対するサブパーティション幅と、最小予測ブロック幅とが、取得されることがある。カレントサブパーティションに対応するＰＵは、サブパーティション幅および最小予測ブロック幅に基づいて決定されることがある。例えば、サブパーティション幅が最小予測ブロック幅未満であるとき、ＰＵは、複数のサブパーティションを含むことがある。例にて、最小予測ブロック幅は、４サンプルであり得る。参照サンプルが、決定されることがあり、ＰＵが、参照サンプルを用いて予測されることがある。
【特許請求の範囲】
【請求項1】
イントラサブパーティション（ＩＳＰ）がカレントブロックに対して有効にされることを決定し、前記カレントブロックに対してサブパーティション幅を決定し、
前記カレントブロックにおけるサブパーティションに対して、前記サブパーティション幅および最小予測ブロック幅に基づいて、対応する予測ブロックを決定し、
前記予測ブロックの参照サンプルを決定し、
前記参照サンプルを用いて前記予測ブロックを予測する
ように構成されたプロセッサー
を備えたことを特徴とする装置。
【請求項2】
前記最小予測ブロック幅は、４サンプルであることを特徴とする請求項１に記載の装置。
【請求項3】
前記予測ブロックは、カレントブロック幅が４サンプルであり、カレントブロック高が８サンプル以上であるとき、複数の変換ブロックサブパーティションを含むことを特徴とする請求項１に記載の装置。
【請求項4】
前記予測ブロックは、カレントブロック幅が８サンプルであり、カレントブロック高が８サンプル以上であるとき、複数の変換ブロックサブパーティションを含むことを特徴とする請求項１に記載の装置。
【請求項5】
前記予測ブロックは、前記カレントブロックが垂直に割られ、カレントブロック幅が４サンプルであり、カレントブロック高が８サンプル以上であるとき、前記カレントブロックに隣接するサンプルを用いて予測されることを特徴とする請求項１に記載の装置。
【請求項6】
前記予測ブロックは、前記カレントブロックに隣接するサンプルと、前記カレントブロックにおける再構成されているサブパーティションからのサンプルとを用いて予測されることを特徴とする請求項１に記載の装置。
【請求項7】
前記予測ブロックは、カレントブロック幅が８サンプルであり、カレントブロック高が８サンプル以上であるとき、前記カレントブロックに隣接するサンプルと、前記カレントブロックにおける再構成されているサブパーティションからのサンプルとを用いて予測されることを特徴とする請求項１に記載の装置。
【請求項8】
前記プロセッサーは、前記カレントブロックに対するＩＳＰインディケーションを受信するように構成され、前記ＩＳＰは、前記ＩＳＰインディケーションに基づいて、前記カレントブロックに対して有効にされると決定されることを特徴とする請求項１に記載の装置。
【請求項9】
前記プロセッサーは、ＩＳＰのタイプが垂直スプリットまたは水平スプリットであるかどうかのインディケーションを受信するように構成され、前記予測ブロックは、ＩＳＰの前記タイプに基づいて予測されることを特徴とする請求項１に記載の装置。
【請求項10】
前記カレントブロックに対する前記サブパーティション幅は、前記カレントブロックに対する前記ＩＳＰタイプが垂直スプリットまたは水平スプリットであるかどうかに少なくとも部分的に基づいて決定されることを特徴とする請求項１に記載の装置。
【請求項11】
前記予測ブロックの前記参照サンプルは、前記予測ブロックに隣接するサンプルを含むことを特徴とする請求項１に記載の装置。
【請求項12】
前記装置は、画像の一部をデコードするためのデコードデバイス、または画像の一部をエンコードするためのエンコードデバイスの少なくとも１つを備えることを特徴とする請求項１に記載の装置。
【請求項13】
イントラサブパーティション（ＩＳＰ）がカレントブロックに対して有効にされることを決定することと、前記カレントブロックに対してサブパーティション幅を決定することと、
前記カレントブロックにおけるサブパーティションに対して、前記サブパーティション幅および最小予測ブロック幅に基づいて、対応する予測ブロックを決定することと、
参照サンプルを決定することと、
前記参照サンプルを用いて前記予測ブロックを予測することと
を備えることを特徴とする方法。
【請求項14】
前記最小予測ブロック幅は、４サンプルであることを特徴とする請求項１３に記載の方法。
【請求項15】
前記予測ブロックは、カレントブロック幅が４サンプルであり、カレントブロック高が８サンプル以上であるとき、複数の変換ブロックサブパーティションを含むことを特徴とする請求項１３に記載の方法。
【請求項16】
前記予測ブロックは、前記カレントブロックが垂直に割られ、カレントブロック幅が４サンプルであり、カレントブロック高が８サンプル以上であるとき、前記カレントブロックに隣接するサンプルを用いて予測されることを特徴とする請求項１３に記載の方法。
【発明の詳細な説明】
【技術分野】
【0001】
本発明は、イントラサブパーティションに関し、より詳細には、ビデオ符号化におけるイントラサブパーティションに関する。
【背景技術】
【0002】
ビデオ符号化システムは、デジタルビデオ信号を圧縮するのに広く使用されて、例えば、上記の信号に対して必要とされるストレージおよび／または伝送帯域幅を減らすことがある。ビデオ符号化システムは、ブロックベース、ウェーブレットベース、および／またはオブジェクトベースのシステムを含むことがある。システムは、ビデオ符号化手法、例えば、ある予測手法を利用することがある。
【発明の概要】
【0003】
イントラサブパーティション（Intra sub-partitions；ＩＳＰ）は、イントラ符号化ツールであり得る。サブパーティションの予測が、以前の隣接するサブパーティションの再構成から部分的にまたは完全に独立であり得る、システム、方法、および手段が、提供されることがある。サブパーティションは、隣接するサブパーティションからの予測サンプルを用いて予測されることがある。サブパーティションは、予測されたサンプルと、以前の隣接するサブパーティションから再構成されたサンプルとを用いて、予測されることがある。
【0004】
複数のサブパーティションを基にした予測は、２つ以上のサブパーティションのイントラ予測が、関係のあるビデオブロック（例えば、参照サンプルに隣接する符号化単位（coding unit；ＣＵ））から同時に処理され得る場合に使用されることがある。複数のサブパーティションを含むプレディクションユニット（prediction unit；ＰＵ）は、ＰＵに隣接する参照サンプルを用いて予測されることがある。
【0005】
ＩＳＰは、例えば、ＩＳＰインディケーションに基づいて、カレントブロックに対して有効にされることがある。サブパーティション幅は、カレントブロックに対して決定されることがある。サブパーティション幅は、イントラ予測に対してカレントブロックをサブパーティションするために使用されることがある。サブパーティションは、ＰＵに属することがある。サブパーティションに対応するＰＵは、サブパーティション幅および最小予測ブロック幅に基づいて決定されることがある。例にて、最小予測ブロック幅は、４サンプルであり得る。予測は、ＰＵに基づいて行われることがある。例えば、参照サンプルが、決定されることがあり、ＰＵが、参照サンプルを用いて予測されることがある。参照サンプルは、ＰＵに隣接することがある。
【0006】
最小予測ブロック幅は、サブパーティションの予測に関連して使用されることがある。１つのＰＵは、垂直に割られたまたは水平に割られた２つ以上のサブパーティションを含むことがある。予測ブロック幅は、サブパーティション幅、またはサブパーティション幅の倍数であり得る。サブパーティション幅および最小予測ブロック幅は、予測ブロックを決定するのに使用されることがある。例えば、複数のサブパーティションを有する予測ブロックは、サブパーティション幅が最小予測ブロック幅未満であるとき、予測のために使用されることがある。例えば、最小予測ブロック幅が４サンプルであるのとき、４サンプルの幅がある予測ブロックは、サブパーティション幅が４サンプル未満のとき、予測のために用いられることがある。
【0007】
ＰＵは、複数の変換ブロックサブパーティションを含むことがある。例えば、４×８、４×Ｎ（例えば、Ｎ＞８）、および８×ＮのサイズがあるＣＵに対して、それぞれのＣＵにおけるＰＵは、複数の変換ブロックサブパーティションを含むことがある。
【0008】
ＣＵのＰＵは、ＣＵの隣接サンプル、および／または再構成されたサブパーティションからのサンプルを用いて予測されることがある。例えば、４×８および４×ＮのサイズがあるＣＵに対して、ビデオデコーダーまたはエンコーダーは、ＣＵの隣接サンプルを用いてＰＵを予測することがある。８×ＮのサイズがあるＣＵに対して、ビデオデコーダーまたはエンコーダーは、ＣＵの隣接サンプル、およびＣＵにおいて再構成されたサブパーティションからのサンプルを用いてＰＵを予測することがある。
【0009】
方法は、ＩＳＰがカレントブロックに対して有効にされることを決定することを含むことがある。方法は、カレントブロックに対してサブパーティション幅を決定することを含むことがある。方法は、サブパーティション幅と、カレントブロックにおけるサブパーティションに対する最小予測ブロック幅とに基づいて、対応する予測ブロックを決定することを含むことがある。方法は、参照サンプルを決定することを含むことがある。方法は、参照サンプルを用いて予測ブロックを予測することを含むことがある。本明細書における方法は、デコーダーによって行われることがある。いくつかの例にて、本明細書における方法または対応する方法は、エンコーダーによって行われることがある。
【0010】
コンピューター読み取り可能な媒体は、１つまたは複数のプロセッサーに、本明細書に説明される方法（複数可）を行わせるための命令を含むことがある。
【0011】
プログラムが１つまたは複数のプロセッサーによって実行されると、１つまたは複数のプロセッサーに本明細書に説明される方法（複数可）を実行させることがある命令を含むコンピュータープログラム製品である。
【図面の簡単な説明】
【0012】
【図1A】１つまたは複数の開示されている態様が実装されることがある例示的な通信システムのシステム図である。
【図1B】一態様に係る図１Ａに例示される通信システム内において用いられることがある例示的なワイヤレス送信／受信ユニット（wireless transmit/receive unit；ＷＴＲＵ）を例示するシステム図である。
【図1C】一態様に係る図１Ａに例示される通信システム内において用いられることがある例示的な無線アクセスネットワーク（radio access network；ＲＡＮ）および例示的なコアネットワーク（core network；ＣＮ）を例示するシステム図である。
【図2】例示的なブロックベースのビデオエンコーダーの図である。
【図3】例示的なビデオデコーダーの図である。
【図4】種々の様相および例が実装されるシステムの例についてのブロック図を例示する。
【図5】ＣＵ（例えば、４×８ピクセルのＣＵまたは８×４ピクセルのＣＵ）に対して許され得る分割またはＣＵスプリットの例を例示する。
【図6】ＣＵ（例えば、４×８ピクセルまたは８×４ピクセルよりも大きいＣＵ）に対して許され得る分割の例を例示する。
【図7】イントラサブパーティション（Intra sub-partitions；ＩＳＰ）における例示的な予測の図（ａ）、（ｂ）、および（ｃ）を例示する。
【図8】参照ラインゼロイントラ予測に対する最確モード（most probable mode；ＭＰＭ）リスト構成のための例示的なフローチャートである。
【図9】複数の参照ラインイントラ予測に対するＭＰＭリスト構成のための例示的なフローチャートである。
【図10a】ＩＳＰに対するＭＰＭリスト構成のための例示的なフローチャートを例示する。
【図10b】ＩＳＰに対するＭＰＭリスト構成のための例示的なフローチャートを例示する。
【図10c】ＩＳＰに対するＭＰＭリスト構成のための例示的なフローチャートを例示する。
【図11】一体化したＭＰＭリスト構成のための例示的なフローチャートである。
【図12】サブパーティションＡ、Ｂ、およびＣの下部の行が、ＣＵに接している上および左の参照ラインを用いて予測される場合の例示的なＣＵベース予測の図（ａ）および（ｂ）を例示する。
【図13】例示的なサブパーティションベース予測の図（ａ）および（ｂ）を例示し、（ａ）の予測されているサブパーティションＡの下部の行がＢを予測するときに使用され、（ｂ）のサブパーティションＢの下部の行がサブパーティションＣを予測するときに使用される。
【図14(a)】ＩＳＰのためのパイプラインステージについての例の図である。
【図14(b)】サブパーティションベース予測を用いたＩＳＰのためのパイプラインステージについての例の図である。
【図14(c)】複数のサブパーティションベース予測またはマルチサブパーティションベース予測を用いたＩＳＰのためのパイプラインステージについての例の図である。
【図15】サブパーティションが、隣接するサブパーティションからの再構成サンプルまたは予測サンプルを用いて予測され得る場合のハイブリッド予測の例の図である。
【図16】例示的なハイブリッド予測の図（ａ）および（ｂ）を例示する。
【図17】複数のサブパーティションベース予測またはマルチサブパーティションベースイントラ予測（multi-sub-partition based intra-prediction）の例を例示する。
【図18】水平スプリットのＣＵおよび垂直スプリットのＣＵのＩＳＰサブパーティションについての種々の例を例示する。
【図19C】ＰＵが３２サンプルを含み得る場合の例を例示する。
【図20】一体化したＭＰＭリスト生成／構成の例を例示する。
【発明を実施するための形態】
【0013】
ただちに、例示的な態様の詳細な説明が、種々の図面を参照して説明されよう。本説明が、可能性のある実装の詳細な例を与えるが、詳細が、典型的であることを意図し、本出願の範囲をまったく限定しないということは、特筆されるべきである。
【0014】
図１Ａは、１つまたは複数の開示される態様が実装されることがある例示的な通信システム５００を例示する図である。通信システム５００は、例えば、音声、データ、ビデオ、メッセージング、ブロードキャストなどのようなコンテンツを、複数のワイヤレスユーザーに提供するマルチプルアクセスのシステムであってもよい。通信システム５００は、複数のワイヤレスユーザーに、ワイヤレス帯域幅を含むシステムリソースの共有を通じて、上記のコンテンツにアクセスできるようにすることがある。例えば、通信システム５００は、例えば、ＣＤＭＡ（符号分割多元接続）、ＴＤＭＡ（時分割多元接続）、ＦＤＭＡ（周波数分割多元接続）、ＯＦＤＭＡ（直交周波数分割多元接続）、ＳＣ－ＦＤＭＡ（シングルキャリアＦＤＭＡ）、ＺＴ ＵＷ ＤＴＳ－ｓ ＯＦＤＭ（zero-tail unique-word DFT-Spread OFDM）、ＵＷ－ＯＦＤＭ（unique word OFDM）、リソースブロックフィルターされた（resource block-filtered）ＯＦＤＭ、ＦＢＭＣ（filter bank multicarrier）などのような１つまたは複数のチャネルアクセスの方法を採用することがある。
【0015】
図１Ａに示すように、通信システム５００は、ＷＴＲＵ（ワイヤレス送信／受信ユニット）５０２ａ、５０２ｂ、５０２ｃ、５０２ｄ、ＲＡＮ５０４／５１３、ＣＮ５０６／５１５、公衆交換電話網（ＰＳＴＮ）５０８、インターネット５１０、および他のネットワーク５１２を含むことがあるが、開示される態様は、いくつものＷＴＲＵ、基地局、ネットワーク、および／またはネットワークエレメントを予想すると理解されるであろう。ＷＴＲＵ５０２ａ、５０２ｂ、５０２ｃ、５０２ｄの各々は、ワイヤレス環境において動作するおよび／または通信するように構成されるどのタイプのデバイスであってもよい。例として、ＷＴＲＵ５０２ａ、５０２ｂ、５０２ｃ、５０２ｄは、いずれも、「局」および／または「ＳＴＡ」ということがあり、ワイヤレス信号を送信するおよび／または受信するように構成されることがあり、ＵＥ（ユーザー機器）、移動局、固定または移動の加入者ユニット、サブスクリプションベースのユニット、ページャー、セルラー電話、ＰＤＡ（パーソナルデジタルアシスタント）、スマートフォン、ラップトップ、ネットブック、パーソナルコンピューター、ワイヤレスセンサー、ホットスポットまたはＭｉ－Ｆｉデバイス、ＩｏＴ（モノのインターネット）デバイス、腕時計または他のウェアラブル、ＨＭＤ（ヘッドマウントディスプレイ）、車両、ドローン、医療用のデバイスおよびアプリケーション（例えば、遠隔手術）、工業用のデバイスおよびアプリケーション（例えば、工業のおよび／または自動化された処理チェーンのコンテキストにおいて動作するロボットおよび／または他のワイヤレスデバイス）、家電デバイス、商業および／または工業のワイヤレスネットワーク上に動作するデバイスなどを含むことがある。どのＷＴＲＵ５０２ａ、５０２ｂ、５０２ｃ、および５０２ｄをとっても、ＵＥと交換可能にいうことがある。
【0016】
さらに、通信システム５００は、基地局５１４ａおよび／または基地局５１４ｂを含むこともある。基地局５１４ａ、５１４ｂの各々は、１つまたは複数の通信ネットワーク、例えば、ＣＮ５０６／５１５、インターネット５１０、および／またはその他のネットワーク５１２などへのアクセスを容易にするために、ＷＴＲＵ５０２ａ、５０２ｂ、５０２ｃ、５０２ｄのうちの少なくとも１つとワイヤレスにインターフェースするように構成されるどのタイプのデバイスであってもよい。例として、基地局５１４ａ、５１４ｂは、ＢＴＳ（無線基地局装置）、Ｎｏｄｅ－Ｂ、ｅＮｏｄｅ Ｂ、ホームＮｏｄｅ Ｂ、ホームｅＮｏｄｅ Ｂ、ｇＮＢ、ＮＲ ＮｏｄｅＢ、サイトコントローラー、ＡＰ（アクセスポイント）、ワイヤレスルータなどであってもよい。基地局５１４ａ、５１４ｂは、各々、単一の要素として描かれる一方、基地局５１４ａ、５１４ｂは、相互接続された基地局および／またはネットワークエレメントをいくつでも含むことがあると理解されるであろう。
【0017】
基地局５１４ａは、さらに、他の基地局および／または、例えば、ＢＳＣ（基地局制御装置）、ＲＮＣ（無線ネットワーク制御装置）、中継ノードなどのようなネットワークエレメント（図示せず）を含むこともあるＲＡＮ５０４／５１３の一部であってもよい。基地局５１４ａおよび／または基地局５１４ｂは、１つまたは複数のキャリア周波数上にワイヤレス信号を送信するおよび／または受信するように構成されることがあり、セル（図示せず）ということがある。今述べた周波数は、許可されたスペクトル、許可されていないスペクトル、または許可されたスペクトルと、許可されていないスペクトルとの組合せであってもよい。セルは、相対的に固定されることがあり、またはやがて変化することがある特定の地理的なエリアに対して、カバレッジをワイヤレスサービスに提供することがある。さらに、セルは、セルのセクターに分割されることがある。例えば、基地局５１４ａに関連付けられたセルは、３つのセクターに分割されることがある。したがって、一態様において、基地局５１４ａは、３つのトランシーバーを、すなわち、セルの各セクターに対して１つを含むことがある。態様において、基地局５１４ａは、ＭＩＭＯ（multiple-inＰＵt multiple outＰＵt）の技術を採用することがあり、セルの各セクターに対して複数のトランシーバーを利用することがある。例えば、ビームフォーミングは、望ましい空間方向に信号を送信するおよび／または受信するために用いられることがある。
【0018】
基地局５１４ａ、５１４ｂは、適切な、どんなワイヤレス通信リンク（例えば、ＲＦ（無線周波数）、マイクロ波、センチメートル波、マイクロメートル波、ＩＲ（赤外線）、ＵＶ（紫外線）、可視光など）であってもよいエアインターフェイス５１６を介して、ＷＴＲＵ５０２ａ、５０２ｂ、５０２ｃ、５０２ｄのうちの１つまたは複数と通信することがある。エアインターフェイス５１６は、適切な、どのＲＡＴ（無線アクセス技術）を用いても確立されることがある。
【0019】
より具体的には、上に述べたように、通信システム５００は、マルチプルアクセスのシステムであってもよく、例えば、ＣＤＭＡ、ＴＤＭＡ、ＦＤＭＡ、ＯＦＤＭＡ、ＳＣ－ＦＤＭＡなどのような１つまたは複数のチャネルアクセススキームを採用することがある。例えば、ＲＡＮ５０４／５１３における基地局５１４ａ、およびＷＴＲＵ５０２ａ、５０２ｂ、５０２ｃは、例えば、ＷＣＤＭＡ（wideband CDMA）を用いて、エアインターフェイス５１５／５１６／５１７を確立することがあるＵＴＲＡ（UMTS（Universal Mobile Telecommunications System）Terrestrial Radio Access）などの無線技術を実装することがある。ＷＣＤＭＡは、例えば、ＨＳＰＡ（High-Speed Packet Access）および／またはＨＳＰＡ＋（Evolved HSPA）などの通信プロトコルを含むことがある。ＨＳＰＡは、ＨＳＤＰＡ（High-Speed DL(Downlink) Packet Access）および／またはＨＳＵＰＡ（High-Speed UL Packet Access）を含むことがある。
【0020】
態様において、基地局５１４ａおよびＷＴＲＵ５０２ａ、５０２ｂ、５０２ｃは、ＬＴＥ（Long Term Evolution）および／またはＬＴＥ－Ａ（LTE-Advanced）および／またはＬＴＥ－Ａ Ｐｒｏ（LTE-Advanced Pro）を用いて、エアインターフェイス５１６を確立することがある、例えばＥ－ＵＴＲＡ（Evolved UMTS Terrestrial Radio Access）などの無線技術を実装することがある。
【0021】
態様において、基地局５１４ａおよびＷＴＲＵ５０２ａ、５０２ｂ、５０２ｃは、ＮＲ（New Radio）を用いてエアインターフェイス５１６を確立することがある、例えばＮＲの無線アクセスなどの無線技術を実装することがある。
【0022】
態様において、基地局５１４ａおよびＷＴＲＵ５０２ａ、５０２ｂ、５０２ｃは、複数の無線アクセス技術を実装することがある。例えば、基地局５１４ａおよびＷＴＲＵ５０２ａ、５０２ｂ、５０２ｃは、例えばＤＣ（dual connectivity；デュアルコネクティビティ）の原理を用いて、ＬＴＥの無線アクセスおよびＮＲ無線のアクセスをともに実装することがある。したがって、ＷＴＲＵ５０２ａ、５０２ｂ、５０２ｃによって利用されるエアインターフェイスは、複数の種類の無線アクセス技術、および／または複数の種類の基地局（例えば、ｅＮＢおよびｇＮＢ）に／から送られる送信によって、特徴付けられることがある。
【0023】
他の態様において、基地局５１４ａおよびＷＴＲＵ５０２ａ、５０２ｂ、５０２ｃは、例えば、ＩＥＥＥ８０２．１１（すなわち、ＷｉＦｉ（Wireless Fidelity））、ＩＥＥＥ８０２．１６（すなわち、ＷｉＭＡＸ（Worldwide Interoperability for Microwave Access））、ＣＤＭＡ２０００、ＣＤＭＡ２０００ １Ｘ、ＣＤＭＡ２０００ＥＶ－ＤＯ、ＩＳ－２０００（Interim Standard 2000）、ＩＳ－９５（Interim Standard 95）、ＩＳ－８５６（Interim Standard 856）、ＧＳＭ（Global System for Mobile communications）、ＥＤＧＥ（Enhanced Data rates for GSM Evolution）、ＧＥＲＡＮ（ＧＳＭ ＥＤＧＥ）などのような無線技術を実装することがある。
【0024】
図１Ａにおける基地局５１４ｂは、例えば、ワイヤレスルータ、ホームＮｏｄｅ Ｂ、ホームｅＮｏｄｅ Ｂ、またはアクセスポイントであってもよく、例えば、事業所、家庭、車両、キャンパス、工業施設、空中回廊（例えば、ドローンによる使用のための）、車道などのような局所的なエリアにおいてワイヤレス接続を容易にするのに適したどんなＲＡＴでも利用してよい。一態様において、基地局５１４ｂおよびＷＴＲＵ５０２ｃ、５０２ｄは、ＷＬＡＮ（wireless local area network）を確立するために、例えばＩＥＥＥ８０２．１１などの無線技術を実装することがある。態様において、基地局５１４ｂおよびＷＴＲＵ５０２ｃ、５０２ｄは、ＷＰＡＮ（wireless personal area network）を確立するために、例えばＩＥＥＥ８０２．１５などの無線技術を実装することがある。さらに別の態様において、基地局５１４ｂおよびＷＴＲＵ５０２ｃ、５０２ｄは、ピコセルまたはフェムトセルを確立するために、セルラーベースのＲＡＴ（例えば、ＷＣＤＭＡ、ＣＤＭＡ２０００、ＧＳＭ、ＬＴＥ、ＬＴＥ－Ａ、ＬＴＥ－Ａ Ｐｒｏ、ＮＲなど）を利用することがある。図１Ａに示すように、基地局５１４ｂは、インターネット５１０への直接接続を有することがある。したがって、基地局５１４ｂは、ＣＮ５０６／５１５を介してインターネット５１０にアクセスすることが要求されないことがある。
【0025】
ＲＡＮ５０４／５１３は、ＣＮ５０６／５１５と通信状態であってもよく、音声、データ、アプリケーション、および／またはＶｏＩＰ（voice over internet protocol）サービスを、ＷＴＲＵ５０２ａ、５０２ｂ、５０２ｃ、５０２ｄのうちの１つまたは複数に提供するように構成されるどのタイプのネットワークであってもよい。データは、例えば、異なるスループットの要件、待ち時間の要件、エラーの許容範囲の要件、信頼性の要件、データスループットの要件、モビリティの要件などのような様々なＱｏＳ（quality of service）の要件を有することがある。ＣＮ５０６／５１５は、コール制御、料金請求サービス、モバイルロケーションベースサービス（mobile location-based service）、プリペイドコーリング、インターネット接続、ビデオ配信などを提供すること、および／または例えばユーザー認証などのハイレベルなセキュリティー機能を実行することがある。図１Ａに示さないが、ＲＡＮ５０４／５１３および／またはＣＮ５０６／５１５は、ＲＡＮ５０４／５１３と同一のＲＡＴまたは異なるＲＡＴを採用する他のＲＡＮと直接または間接の通信状態にあってもよいと理解されるであろう。例えば、ＣＮ５０６／５１５は、ＮＲの無線技術を利用していることがあるＲＡＮ５０４／５１３に接続されていることに加えて、さらに、ＧＳＭ、ＵＭＴＳ、ＣＤＭＡ２０００、ＷｉＭＡＸ、Ｅ－ＵＴＲＡ、またはＷｉＦｉの無線技術を採用する別のＲＡＮ（図示せず）と通信状態にあることもある。
【0026】
さらに、ＣＮ５０６／５１５は、ＷＴＲＵ５０２ａ、５０２ｂ、５０２ｃ、５０２ｄがＰＳＴＮ５０８、インターネット５１０、および／またはその他のネットワーク５１２にアクセスするためのゲートウェイとしての役割を果たすこともある。ＰＳＴＮ５０８は、ＰＯＴＳ（plain old telephone service）を提供する回線交換の電話網を含むことがある。インターネット５１０は、一般的な通信プロトコル、例えば、ＴＣＰ（transmission control protocol）／ＩＰ（internet protocol）のインターネットプロトコルスイートにおけるＴＣＰ、ＵＤＰ（user datagram protocol）、および／またはＩＰなどを使用する相互接続されたコンピューターネットワークおよびデバイスからなるグローバルシステムを含むことがある。ネットワーク５１２は、他のサービスプロバイダによって所有されるおよび／または運営される有線および／またはワイヤレスの通信ネットワークを含むことがある。例えば、ネットワーク５１２は、ＲＡＮ５０４／５１３と同一のＲＡＴまたは異なるＲＡＴを採用することがある１つまたは複数のＲＡＮに接続される別のＣＮを含むことがある。
【0027】
通信システム５００におけるＷＴＲＵ５０２ａ、５０２ｂ、５０２ｃ、５０２ｄのうちのいくつかまたはすべては、マルチモードの性能を含むことがある（例えば、ＷＴＲＵ５０２ａ、５０２ｂ、５０２ｃ、５０２ｄは、別個のワイヤレスリンクを介して別個のワイヤレスネットワークと通信するために複数のトランシーバーを含むことがある）。例えば、図１Ａに示すＷＴＲＵ５０２ｃは、セルラーベースの無線技術を採用することがある基地局５１４ａと、およびＩＥＥＥ８０２の無線技術を採用することがある基地局５１４ｂと通信するように構成されることがある。
【0028】
図１Ｂは、例示的なＷＴＲＵ５０２を例示するシステム図である。図１Ｂに示すように、ＷＴＲＵ５０２は、数ある中でも、プロセッサー５１８、トランシーバー５２０、送信／受信エレメント５２２、スピーカー／マイクロフォン５２４、キーパッド５２６、ディスプレイ／タッチパッド５２８、取り外しできないメモリー５３０、取り外し可能なメモリー５３２、電源５３４、ＧＰＳ（全地球測位システム）のチップセット５３６、および／または他のペリフェラル５３８を含むことがある。ＷＴＲＵ５０２は、態様に矛盾しないまま、上述の要素のどんな部分的な組合せ（sub-combination）でも含むことがあると理解されるであろう。
【0029】
プロセッサー５１８は、汎用プロセッサー、専用プロセッサー、従来型プロセッサー、ＤＳＰ（digital signal processor）、複数のマイクロプロセッサー、ＤＳＰコアとともに１つまたは複数のマイクロプロセッサー、コントローラー、マイクロコントローラー、ＡＳＩＣ（Application Specific Integrated Circuit）、ＦＰＧＡ（Field Programmable Gate Array）回路、他種類のＩＣ（集積回路）のいずれか、ステートマシンなどであってもよい。プロセッサー５１８は、信号符号化、データ処理、電力制御、入力／出力処理、および／またはＷＴＲＵ５０２にワイヤレス環境において動作できるようにする他のどんな機能でも実行することがある。プロセッサー５１８は、送信／受信エレメント５２２に結合することがあるトランシーバー５２０に結合されることがある。図１Ｂは、プロセッサー５１８およびトランシーバー５２０を別々のコンポーネントとして描く一方、プロセッサー５１８およびトランシーバー５２０は、電子パッケージまたはチップにおいてともに統合されることがあると理解されるであろう。
【0030】
送信／受信エレメント５２２は、エアインターフェイス５１６を介して、基地局（例えば、基地局５１４ａ）に対して信号を送信するまたは受信するように構成されることがある。例えば、一態様においては、送信／受信エレメント５２２は、ＲＦ信号を送信するおよび／または受信するように構成されるアンテナであってもよい。態様において、送信／受信エレメント５２２は、例えば、ＩＲ信号、ＵＶ信号もしくは可視光信号を送信する、および／または受信するように構成されるエミッター／ディテクターであってもよい。さらに別の態様において、送信／受信エレメント５２２は、ＲＦおよび光の信号の両方を送信するおよび／または受信するように構成されることがある。送信／受信エレメント５２２は、ワイヤレス信号のどんな組合せでも送信するおよび／または受信するように構成されることがあると理解されるであろう。
【0031】
送信／受信エレメント５２２は、図１Ｂにおいて単一の要素として描かれるが、ＷＴＲＵ５０２は、送信／受信エレメント５２２をいくつでも含むことがある。より具体的には、ＷＴＲＵ５０２は、ＭＩＭＯの技術を採用することがある。したがって、一態様において、ＷＴＲＵ５０２は、エアインターフェイス５１６を介して、ワイヤレス信号を送信し受信するために、２つ以上の送信／受信エレメント５２２（例えば、複数のアンテナ）を含むことがある。
【0032】
トランシーバー５２０は、送信／受信エレメント５２２によって送信されることである信号を変調するように、および送信／受信エレメント５２２によって受信される信号を復調するように構成されることがある。上に述べたように、ＷＴＲＵ５０２は、マルチモードの性能を有することがある。したがって、例えば、トランシーバー５２０は、ＷＴＲＵ５０２に、例えばＮＲおよびＩＥＥＥ８０２．１１などの複数のＲＡＴによって通信できるようにするために、複数のトランシーバーを含むことがある。
【0033】
ＷＴＲＵ５０２のプロセッサー５１８は、スピーカー／マイクロフォン５２４、キーパッド５２６、および／またはディスプレイ／タッチパッド５２８（例えば、ＬＣＤ（液晶ディスプレイ）ディスプレイユニットもしくはＯＬＥＤ（有機発光ダイオード）ディスプレイユニット）により、結合されることがあり、およびユーザー入力データを受信することがある。さらに、プロセッサー５１８は、ユーザーデータを、スピーカー／マイクロフォン５２４、キーパッド５２６、および／またはディスプレイ／タッチパッド５２８に出力することもある。加えて、プロセッサー５１８は、適切な、どんなタイプのメモリーでも、例えば、取り外しできないメモリー５３０および／または取り外し可能なメモリー５３２などに対して、情報にアクセスしデータを格納することがある。取り外しできないメモリー５３０は、ＲＡＭ（random-access memory）、ＲＯＭ（読み出し専用メモリー）、ハードディスク、または他のどんなタイプのメモリーストレージデバイスでも含むことがある。取り外し可能なメモリー５３２は、ＳＩＭ（subscriber identity module）カード、メモリースティック、ＳＤ（secure digital）メモリーカードなどを含むことがある。他の態様において、プロセッサー５１８は、ＷＴＲＵ５０２に物理的に配置されない、例えば、サーバーまたはホーコンピューター（図示せず）などのメモリーに対して、情報にアクセスしデータを格納することがある。
【0034】
プロセッサー５１８は、電源５３４から電力を受け取ることがあり、ＷＴＲＵ５０２におけるその他のコンポーネントへの電力を分配および／または制御するように構成されることがある。電源５３４は、ＷＴＲＵ５０２に電力を供給するのに適したどのデバイスでもあってもよい。例えば、電源５３４は、１つまたは複数の乾電池（例えば、ＮｉＣｄ（ニッケルカドミウム）、ＮｉＺｎ（ニッケル亜鉛）、ＮｉＭＨ（ニッケル水素）、Ｌｉ－ｉｏｎ（リチウムイオン）など）、太陽電池、燃料電池などを含むことがある。
【0035】
さらに、プロセッサー５１８は、ＷＴＲＵ５０２の現在のロケーションに関する位置情報（例えば、経度および緯度）を提供するように構成されることがあるＧＰＳチップセット５３６に結合されることもある。ＧＰＳチップセット５３６からの情報に加えてまたは代わりに、ＷＴＲＵ５０２は、基地局（例えば、基地局５１４ａ、５１４ｂ）からエアインターフェイス５１６を介して位置情報を受信する、および／または２つ以上の近隣の基地局から受信されている信号のタイミングに基づいてそのロケーションを決定することがある。ＷＴＲＵ５０２は、態様に矛盾しないまま、適切な、どんな位置決定（location-determination）の方法を通じてでも位置情報を取得することがあるということが理解されるであろう。
【0036】
さらに、プロセッサー５１８は、追加の特徴、機能性、および／または有線接続もしくはワイヤレス接続を提供する１つまたは複数のソフトウェアモジュールおよび／またはハードウェアモジュールを含むことがある他のペリフェラル５３８に結合されることがある。例えば、ペリフェラル５３８は、加速度計、ｅコンパス、衛星トランシーバー、デジタルカメラ（写真および／またはビデオ用）、ＵＳＢ（ユニバーサルシリアルバス）ポート、振動デバイス、テレビジョントランシーバー、ハンドフリーヘッドセット、Ｂｌｕｅｔｏｏｔｈ（登録商標）モジュール、ＦＭ（frequency modulated）ラジオユニット、デジタルミュージックプレーヤー、メディアプレーヤー、ビデオゲームプレーヤーモジュール、インターネットブラウザー、ＶＲ／ＡＲ（仮想現実および／または拡張現実）デバイス、アクティビティートラッカーなどを含むことがある。ペリフェラル５３８は、１つまたは複数のセンサーを含むことがあり、センサーは、ジャイロスコープ、加速度計、ホール効果センサー、磁力計、方位センサー、近接センサー、温度センサー、時間センサー、ジオロケーションセンサー（geolocation sensor）、高度計、光センサー、タッチセンサー、磁力計、気圧計、ジェスチャーセンサー、生体認証センサー、および／または湿度センサーのうちの１つまたは複数であってもよい。
【0037】
ＷＴＲＵ５０２は、（例えば、ＵＬ（例えば、送信用）およびダウンリンク（例えば、受信用）の両方に関して特定のサブフレームに関連付けられた）信号のうちのいくつかまたはすべての送信および受信が並列および／または同時であってもよい全二重無線を含むことがある。全二重無線は、ハードウェア（例えば、チョーク）か、プロセッサー（例えば、別々のプロセッサー（図示せず）、またはプロセッサー５１８による）による信号処理かのいずれかによる自己干渉を減らすおよびまたは実質的になくすための干渉管理ユニットを含むことがある。態様において、ＷＲＴＵ５０２は、（例えば、ＵＬ（例えば、送信用）かダウンリンク（例えば、受信用）かのいずれかに関して特定のサブフレームに関連付けられた）信号のうちのいくつかまたはすべての送信および受信が半二重無線を含むことがある。
【0038】
図１Ｃは、態様によるＲＡＮ５０４およびＣＮ５０６を例示するシステム図である。上に述べたように、ＲＡＮ５０４は、エアインターフェイス５１６を介してＷＴＲＵ５０２ａ、５０２ｂ、５０２ｃと通信するためにＥ－ＵＴＲＡの無線技術を採用することがある。さらに、ＲＡＮ５０４は、ＣＮ５０６と通信状態にあることもある。
【0039】
ＲＡＮ５０４は、ｅＮｏｄｅ－Ｂ５６０ａ、５６０ｂ、５６０ｃを含むことがあるが、ＲＡＮ５０４は、態様に矛盾しないまま、ｅＮｏｄｅ－Ｂをいくつでも含むことがあると理解されるであろう。ｅＮｏｄｅ－Ｂ５６０ａ、５６０ｂ、５６０ｃは、各々、エアインターフェイス５１６を介してＷＴＲＵ５０２ａ、５０２ｂ、５０２ｃと通信するために１つまたは複数のトランシーバーを含むことがある。一態様において、ｅＮｏｄｅ－Ｂ５６０ａ、５６０ｂ、５６０ｃは、ＭＩＭＯの技術を実装することがある。したがって、例えば、ｅＮｏｄｅ－Ｂ５６０ａは、ＷＴＲＵ５０２ａに対して、ワイヤレス信号を送信するおよび／またはワイヤレス信号を受信するために複数のアンテナを使用することがある。
【0040】
ｅＮｏｄｅ－Ｂ５６０ａ、５６０ｂ、５６０ｃの各々は、特定のセル（図示せず）に関連付けられることがあり、無線リソース管理の決定、ハンドオーバーの決定、ＵＬおよび／またはＤＬにおけるユーザーのスケジューリングなどを取り扱うように構成されることがある。図１Ｃに示すように、ｅＮｏｄｅ－Ｂ５６０ａ、５６０ｂ、５６０ｃは、Ｘ２インターフェースを介して互いに通信することがある。
【0041】
図１Ｃに示されるＣＮ５０６は、ＭＭＥ（mobility management entity）５６２、ＳＧＷ（サービングゲートウェイ）５６４、およびＰＤＮ（packet data network）ゲートウェイ（またはＰＧＷ）５６６を含むことがある。上述の要素の各々は、ＣＮ５０６の一部として描かれる一方、今述べた要素のうちのいずれかが、ＣＮオペレーター以外のエンティティーによって所有されるおよび／または運営されることがあるということが理解されるであろう。
【0042】
ＭＭＥ５６２は、Ｓ１インターフェースを介して、ＲＡＮ５０４におけるｅＮｏｄｅ－Ｂ５６２ａ、５６２ｂ、５６２ｃの各々に接続されることがあり、制御ノードとしての役割を果たすことがある。例えば、ＭＭＥ５６２は、ＷＴＲＵ５０２ａ、５０２ｂ、５０２ｃのユーザーを認証すること、ベアラのアクティベーション／非アクティベーション、ＷＴＲＵ５０２ａ、５０２ｂ、５０２ｃの初期の接続中に特定のサービングゲートウェイを選択することなどに対して責任があってもよい。ＭＭＥ５６２は、ＲＡＮ５０４と、例えば、ＧＳＭおよび／またはＷＣＤＭＡなどの他の無線技術を採用する他のＲＡＮ（図示せず）との間の切り替えに、制御プレーン機能を提供することがある。
【0043】
ＳＧＷ５６４は、Ｓ１インターフェースを介して、ＲＡＮ５０４におけるｅＮｏｄｅ Ｂ５６０ａ、５６０ｂ、５６０ｃの各々に接続されることがある。一般に、ＳＧＷ５６４は、ユーザーデータパケットを、ＷＴＲＵ５０２ａ、５０２ｂ、５０２ｃに対して、ルーティングし転送することがある。ＳＧＷ５６４は、例えば、ｅＮｏｄｅ Ｂ間ハンドオーバーの間にユーザープレーンを固定すること、ＤＬデータがＷＴＲＵ５０２ａ、５０２ｂ、５０２ｃに利用可能なときページングをトリガーすること、ＷＴＲＵ５０２ａ、５０２ｂ、５０２ｃのコンテキストを管理し格納することなどのような他の機能を実行することがある。
【0044】
ＳＧＷ５６４は、ＷＴＲＵ５０２ａ、５０２ｂ、５０２ｃと、ＩＰ対応デバイスとの間における通信を容易にするために、パケット交換ネットワーク、例えばインターネット５１０などへのアクセスを、ＷＴＲＵ５０２ａ、５０２ｂ、５０２ｃに提供することがあるＰＧＷ５６６に接続されることがある。
【0045】
ＣＮ５０６は、他のネットワークとの通信を容易にすることがある。例えば、ＣＮ５０６は、ＷＴＲＵ５０２ａ、５０２ｂ、５０２ｃと、従来の地上通信線の通信デバイスとの間における通信を容易にするために、回線交換ネットワーク、例えばＰＳＴＮ５０８などへのアクセスを、ＷＴＲＵ５０２ａ、５０２ｂ、５０２ｃに提供することがある。例えば、ＣＮ５０６は、ＣＮ５０６とＰＳＴＮ５０８との間におけるインターフェースとしての役割を果たすＩＰゲートウェイ（例えば、ＩＭＳ（ＩＰマルチメディアサブシステム）サーバー）を含むことがある、またはＩＰゲートウェイと通信することがある。加えて、ＣＮ５０６は、他のサービスプロバイダによって所有されるおよび／または運営される他の有線および／またはワイヤレスのネットワークを含むことがある他のネットワーク５１２へのアクセスを、ＷＴＲＵ５０２ａ、５０２ｂ、５０２ｃに提供することがある。
【0046】
ＷＴＲＵは、図１Ａ～図１Ｄにおいてワイヤレス端末として説明されるが、ある典型的な態様において、上記の端末は、通信ネットワークとの有線通信インターフェースを（例えば、一時的にまたは永久に）使用することがあると予想される。
【0047】
典型的な態様において、その他のネットワーク５１２は、ＷＬＡＮであってもよい。
【0048】
インフラストラクチャーのＢＳＳ（Basic Service Set）のモードにおけるＷＬＡＮは、ＢＳＳ用のＡＰ（アクセスポイント）と、ＡＰに関連付けられた１つまたは複数のＳＴＡ（ステーション）とを有することがある。ＡＰは、ＤＳ（配信システム）、またはＢＳＳに出入りするトラフィックを搬送する別のタイプの有線ネットワーク／ワイヤレスネットワークに対するアクセスまたはインターフェースを有することがある。ＢＳＳの外部から生じるＳＴＡへのトラフィックは、ＡＰを通じて届くことがあり、ＳＴＡへ配信されることがある。ＳＴＡからＢＳＳの外部の宛先へ生じるトラフィックは、ＡＰへ送られて、それぞれの宛先へ配信されることがある。ＢＳＳ内のＳＴＡ間のトラフィックは、例えば、発信元のＳＴＡがトラフィックをＡＰに送ることがあり、ＡＰがトラフィックを送信先のＳＴＡに配信することがある場合に、ＡＰを通じて送られることがある。ＢＳＳ内のＳＴＡ間のトラフィックは、ピアツーピアのトラフィックと考えられる、および／またはいわれることがある。ピアツーピアのトラフィックは、ＤＬＳ（direct link setup）によって、発信元および送信先のＳＴＡ間に（例えば、の間でダイレクトに）送られることがある。ある典型的な態様において、ＤＬＳは、８０２．１１ｅのＤＬＳまたは８０２．１１ｚのＴＤＬＳ（tunneled DLS）を使用することがある。ＩＢＳＳ（Independent BSS）モードを用いるＷＬＡＮは、ＡＰを有さないことがあり、ＩＢＳＳ内のまたはＩＢＳＳを用いるＳＴＡ（例えば、すべてのＳＴＡ）は、互いに直接通信することがある。通信のＩＢＳＳモードは、本明細書においは、時には、通信の「アドホック」モードということがある。
【0049】
動作の８０２．１１ａｃインフラストラクチャーモードまたは動作の同様のモードを用いるとき、ＡＰは、例えば、プライマリーチャネルなどの固定されたチャネル上にビーコンを送信することがある。プライマリーチャネルは、固定された幅（例えば、２０ＭＨｚ幅の帯域幅）、またはシグナリングにより動的に設定される幅であってもよい。プライマリーチャネルは、ＢＳＳの動作チャネルであってもよく、ＡＰとの接続を確立するためにＳＴＡによって用いられることがある。ある典型的な態様において、ＣＳＭＡ／ＣＡ（搬送波感知多重アクセス／衝突回避）は、例えば、８０２．１１システムに実装されることがある。ＣＳＭＡ／ＣＡに関し、ＡＰを含むＳＴＡ（例えば、あらゆるＳＴＡ）は、プライマリーチャネルを感知することがある。プライマリーチャネルが、特定のＳＴＡによって、感知される／検出される、および／または、ビジーであると決定されるならば、特定のＳＴＡは、バックオフをすることがある。１つのＳＴＡ（例えば、ただ１つのステーション）は、与えられたＢＳＳにおいて、与えられたどんなときにでも送信することがある。
【0050】
ＨＴ（高スループット）のＳＴＡは、例えば、４０ＭＨｚ幅のチャネルを構成するために、２０ＭＨｚのプライマリーチャネルと、隣り合う（adjacent）または隣り合わない２０ＭＨｚのチャネルとの組み合わせによって、通信用に４０ＭＨｚ幅のチャネルを使用することがある。
【0051】
ＶＨＴ（Very High ThroughＰＵt）のＳＴＡは、２０ＭＨｚ、４０ＭＨｚ、８０ＭＨｚ、および／または１６０ＭＨｚの幅のチャネルをサポートすることがある。４０ＭＨｚおよび／または８０ＭＨｚのチャネルは、連続的な（contiguous）２０ＭＨｚを組み合わせることによって構成されることがある。１６０ＭＨｚのチャネルは、８つの連続的な２０ＭＨｚのチャネルを組み合わせることによって、または８０＋８０構成ということがある２つの非連続的な（non-contiguous）８０ＭＨｚのチャネルを組み合わせることによって、構成されることがある。８０＋８０構成に関し、データは、チャネルエンコーディングの後に、データを２つのストリームへと分割することがあるセグメントパーサー（segment parser）にすすむことがある。ＩＦＦＴ（逆高速フーリエ変換）処理、および時間領域処理は、別々に、各ストリーム上において行われることがある。ストリームは、２つの８０ＭＨｚのチャネル上にマップされることがあり、データは、送信側のＳＴＡによって送信されることがある。受信側のＳＴＡのレシーバーにおいて、上に述べた８０＋８０構成に対する動作は、反転されることがあり、組み合わされたデータは、ＭＡＣ（メディアアクセス制御）に送られることがある。
【0052】
動作のサブの１ＧＨｚモードは、８０２．１１ａｆおよび８０２．１１ａｈによってサポートされる。チャネルの動作帯域幅、およびキャリアは、８０２．１１ｎおよび８０２．１１ａｃに用いられるのと比較して８０２．１１ａｆおよび８０２．１１ａｈにおいて減らされる。８０２．１１ａｆは、ＴＶＷＳ（ＴＶホワイトスペース）のスペクトルにおける５ＭＨｚ、１０ＭＨｚ、および２０ＭＨｚの帯域幅をサポートし、８０２．１１ａｈは、ＴＶＷＳでない（non-TVWS）スペクトルを用いる１ＭＨｚ、２ＭＨｚ、４ＭＨｚ、８ＭＨｚ、および１６ＭＨｚの帯域幅をサポートする。典型的な態様によれば、８０２．１１ａｈは、メータタイプ制御（Meter Type Control）／マシンタイプ通信（Machine-Type Communication）を、例えば、マクロカバレッジエリアにおけるＭＴＣデバイスなどをサポートすることがある。ＭＴＣデバイスは、ある程度の性能、例えば、ある程度のおよび／または制限された帯域幅用のサポート（例えば、サポートのみ）を含む制限された性能を有することがある。ＭＴＣデバイスは、（例えば、非常に長いバッテリー寿命を維持するために）しきい値を超えるバッテリー寿命を有するバッテリーを含むことがある。
【0053】
複数のチャネル、およびチャネル帯域幅、例えば、８０２．１１ｎ、８０２．１１ａｃ、８０２．１１ａｆ、および８０２．１１ａｈなどをサポートすることがあるＷＬＡＮシステムは、プライマリーチャネルとして指定されることがあるチャネルを含む。プライマリーチャネルは、ＢＳＳにおいて、すべてのＳＴＡによってサポートされる最大の共通の動作帯域幅に等しい帯域幅を有することがある。プライマリーチャネルの帯域幅は、ＢＳＳにおいて動作しているすべてのＳＴＡの中から、最小の帯域幅の動作モードをサポートするＳＴＡによって設定および／または制限されることがある。８０２．１１ａｈの例において、たとえＡＰ、およびＢＳＳにおける他のＳＴＡが、２ＭＨｚ、４ＭＨｚ、８ＭＨｚ、１６ＭＨｚ、および／または他のチャネル帯域幅の動作モードをサポートしても、プライマリーチャネルは、１ＭＨｚモードをサポートする（例えば、サポートするだけの）ＳＴＡ（例えば、ＭＴＣタイプデバイス）に対して１ＭＨｚ幅であってもよい。キャリアセンシングおよび／またはＮＡＶ（Network Allocation Vector；ネットワーク割当てベクトル）設定は、プライマリーチャネルの状態に依存することがある。プライマリーチャネルが、例えば、ＡＰに送信している（１ＭＨｚの動作モードだけをサポートする）ＳＴＡに起因してビジーであるならば、利用可能な全周波数帯域は、たとえ周波数帯域の大部分がアイドルのままであり利用可能であることがあっても、ビジーと考えられることがある。
【0054】
米国において、８０２．１１ａｈによって用いられることがある利用可能な周波数帯域は、９０２ＭＨｚから９２８ＭＨｚまでである。韓国において、利用可能な周波数帯域は、９１７．５ＭＨｚから９２３．５ＭＨｚまでである。日本において、利用可能な周波数帯域は、９１６．５ＭＨｚから９２７．５ＭＨｚまでである。８０２．１１ａｈに利用可能な合計の帯域幅は、国コードによって、６ＭＨｚから２６ＭＨｚまでである。
【0055】
図１Ｄは、態様によるＲＡＮ５１３およびＣＮ５１５を例示するシステム図である。上に述べたように、ＲＡＮ５１３は、エアインターフェイス５１６を介してＷＴＲＵ５０２ａ、５０２ｂ、５０２ｃと通信するためにＮＲの無線技術を採用することがある。さらに、ＲＡＮ５１３は、ＣＮ５１５と通信状態にあることもある。
【0056】
ＲＡＮ５１３は、ｇＮＢ５８０ａ、５８０ｂ、５８０ｃを含むことがあるが、ＲＡＮ５１３は、態様に矛盾しないまま、ｇＮＢをいくつでも含むことがあるということが理解されるであろう。ｇＮＢ５８０ａ、５８０ｂ、５８０ｃは、各々、エアインターフェイス５１６を介してＷＴＲＵ５０２ａ、５０２ｂ、５０２ｃと通信するために１つまたは複数のトランシーバーを含むことがある。一態様において、ｇＮＢ５８０ａ、５８０ｂ、５８０ｃは、ＭＩＭＯの技術を実装することがある。例えば、ｇＮＢ５８０ａ、５０８ｂは、ｇＮＢ５８０ａ、５８０ｂ、５８０ｃに対して、信号を送信するおよび／または信号を受信するためにビームフォーミングを利用することがある。したがって、例えば、ｇＮＢ５８０ａは、ＷＴＲＵ５０２ａに対して、ワイヤレス信号を送信するために、および／またはワイヤレス信号を受信するために、複数のアンテナを使用することがある。態様において、ｇＮＢ５８０ａ、５８０ｂ、５８０ｃは、キャリアアグリゲーションの技術を実装することがある。例えば、ｇＮＢ５８０ａは、複数のコンポーネントキャリアをＷＴＲＵ５０２ａ（図示せず）に送信することがある。今述べたコンポーネントキャリアのサブセットは、残りのコンポーネントキャリアが、許可されたスペクトラム上にあってもよい間、許可されないスペクトラム上にあってもよい。態様において、ｇＮＢ５８０ａ、５８０ｂ、５８０ｃは、ＣｏＭＰ（Coordinated Multi-Point）の技術を実装することがある。例えば、ＷＴＲＵ５０２ａは、ｇＮＢ５８０ａおよびｇＮＢ５８０ｂ（および／またはｇＮＢ５８０ｃ）から協調送信を受信することがある。
【0057】
ＷＴＲＵ５０２ａ、５０２ｂ、５０２ｃは、スケーラブルなニューメロロジー（numerology）に関連付けられた送信を用いて、ｇＮＢ５８０ａ、５８０ｂ、５８０ｃと通信することがある。例えば、ＯＦＤＭのシンボル間隔および／またはＯＦＤＭのサブキャリア間隔は、別個の送信、別個のセル、および／またはワイヤレス送信のスペクトルについての別個の部分に対して、変わることがある。ＷＴＲＵ５０２ａ、５０２ｂ、５０２ｃは、種々のまたはスケーラブルな長さのサブフレームまたはＴＴＩ（送信時間間隔）（例えば、様々な数のＯＦＤＭシンボルおよび／または永続的な様々な長さの絶対時間を含む）を用いて、ｇＮＢ５８０ａ、５８０ｂ、５８０ｃと通信することがある。
【0058】
ｇＮＢ５８０ａ、５８０ｂ、５８０ｃは、スタンドアロンの構成および／またはスタンドアロンでない構成において、ＷＴＲＵ５０２ａ、５０２ｂ、５０２ｃと通信するように構成されることがある。スタンドアロンの構成において、ＷＴＲＵ５０２ａ、５０２ｂ、５０２ｃは、他のＲＡＮ（例えば、ｅＮｏｄｅ－Ｂ５６０ａ、５６０ｂ、５６０ｃなど）にアクセスすることもなく、ｇＮＢ５８０ａ、５８０ｂ、５８０ｃと通信することがある。スタンドアロンの構成において、ＷＴＲＵ５０２ａ、５０２ｂ、５０２ｃは、ｇＮＢ５８０ａ、５８０ｂ、５８０ｃのうちの１つまたは複数を、モビリティアンカーポイント（mobility anchor point）として利用することがある。スタンドアロンの構成において、ＷＴＲＵ５０２ａ、５０２ｂ、５０２ｃは、許可されない帯域における信号を用いて、ｇＮＢ５８０ａ、５８０ｂ、５８０ｃと通信することがある。スタンドアロンではない構成において、ＷＴＲＵ５０２ａ、５０２ｂ、５０２ｃは、例えば、ｅＮｏｄｅ－Ｂ５６０ａ、５６０ｂ、５６０ｃなどの別のＲＡＮと通信している／接続している間にも、ｇＮＢ５８０ａ、５８０ｂ、５８０ｃと通信する／接続することがある。例えば、ＷＴＲＵ５０２ａ、５０２ｂ、５０２ｃは、ＤＣの原理を実装して、１つまたは複数のｇＮＢ５８０ａ、５８０ｂ、５８０ｃおよび１つまたは複数のｅＮｏｄｅ－Ｂ５６０ａ、５６０ｂ、５６０ｃと実質的に同時に通信することがある。スタンドアロンではない構成において、ｅＮｏｄｅ－Ｂ５６０ａ、５６０ｂ、５６０ｃは、ＷＴＲＵ５０２ａ、５０２ｂ、５０２ｃのためのモビリティアンカーとして役割を果たすことがあり、ｇＮＢ５８０ａ、５８０ｂ、５８０ｃは、ＷＴＲＵ５０２ａ、５０２ｂ、５０２ｃにサービスを提供することに、追加のカバレッジおよび／またはスループットを提供することがある。
【0059】
ｇＮＢ５８０ａ、５８０ｂ、５８０ｃの各々は、特定のセル（図示せず）に関連付けられることがあり、無線リソース管理の決定、ハンドオーバーの決定、ＵＬおよび／またはＤＬにおけるユーザーのスケジューリング、ネットワークスライシングのサポート、デュアルコネクティビティ、ＮＲとＥ－ＵＴＲＡとの間におけるインターワーキング、ＵＰＦ（User Plane Function）５８４ａ、５８４ｂに対するユーザープレーンのデータのルーティング、ＡＭＦ（Access and Mobility Management Function）５８２ａ、５８２ｂに対する制御プレーンの情報のルーティングなどを取り扱うように構成されることがある。図１Ｄに示すように、ｇＮＢ５８０ａ、５８０ｂ、５８０ｃは、Ｘｎインターフェースを介して互いに通信することがある。
【0060】
図１Ｄに示されるＣＮ５１５は、少なくとも１つのＡＭＦ５８２ａ、５８２ｂ、少なくとも１つのＵＰＦ５８４ａ、５８４ｂ、少なくとも１つのＳＭＦ（セッション管理機能）５８３ａ、５８３ｂ、およびことによるとＤＮ（データネットワーク）５８５ａ、５８５ｂを含むことがある。上述の要素の各々は、ＣＮ５１５の一部として描かれる一方、今述べた要素のうちのいずれかが、ＣＮオペレーター以外のエンティティーによって所有されるおよび／または運営されることがあるということが理解されるであろう。
【0061】
ＡＭＦ５８２ａ、５８２ｂは、Ｎ２インターフェースを介して、ＲＡＮ５１３におけるｇＮＢ５８０ａ、５８０ｂ、５８０ｃのうちの１つまたは複数に接続されることがあり、制御ノードとしての役割を果たすことがある。例えば、ＡＭＦ５８２ａ、５８２ｂは、ＷＴＲＵ５０２ａ、５０２ｂ、５０２ｃのユーザーを認証すること、ネットワークスライシングに対するサポート（例えば、別個の要件を有する別個のＰＤＵのセッションを取り扱うこと）、特定のＳＭＦ５８３ａ、５８３ｂを選択すること、登録エリアの管理、ＮＡＳシグナリングの終了、モビリティ管理などに対して責任があってもよい。ネットワークスライシングは、ＷＴＲＵ５０２ａ、５０２ｂ、５０２ｃに利用されているサービスのタイプに基づいて、ＷＴＲＵ５０２ａ、５０２ｂ、５０２ｃ用のＣＮのサポートをカスタマイズするために、ＡＭＦ５８２ａ、５８２ｂによって用いられることがある。例えば、別個のネットワークスライスは、例えば、超高信頼低遅延（ＵＲＬＬＣ）アクセスに依存するサービス、ｅＭＢＢ（enhanced massive mobile broadband）のアクセスに依存するサービス、ＭＴＣ（マシンタイプ通信）のアクセスに関するサービスなどのような別個のユースケース（use case）に関して確立されることがある。ＡＭＦ５６２は、制御プレーン機能を、ＲＡＮ５１３と、例えばＬＴＥ、ＬＴＥ－Ａ、ＬＴＥ－Ａ Ｐｒｏなどの他の無線技術および／または例えばＷｉＦｉなどの非３ＧＰＰアクセス技術を採用する他のＲＡＮ（図示せず）との間の切り替えに、提供することがある。
【0062】
ＳＭＦ５８３ａ、５８３ｂは、Ｎ１１インターフェースを介して、ＣＮ５１５におけるＡＭＦ５８２ａ、５８２ｂに接続されることがある。さらに、ＳＭＦ５８３ａ、５８３ｂは、Ｎ４インターフェースを介して、ＣＮ５１５におけるＵＰＦ５８４ａ、５８４ｂに接続されることもある。ＳＭＦ５８３ａ、５８３ｂは、ＵＰＦ５８４ａ、５８４ｂを選択し制御し、ＵＰＦ５８４ａ、５８４ｂを通るトラフィックのルーティングを構成することがある。ＳＭＦ５８３ａ、５８３ｂは、例えば、ＵＥのＩＰアドレスを管理し割当てること、ＰＤＵのセッションを管理すること、ポリシーの実施（policy enforcement）およびＱｏＳを制御すること、ダウンリンクデータ通知を提供することなどのような他の機能を実行することがある。ＰＤＵのセッションタイプは、ＩＰベース、非ＩＰベース、イーサネットベースなどであってもよい。
【0063】
ＵＰＦ５８４ａ、５８４ｂは、Ｎ３インターフェースを介してＲＡＮ５１３におけるｇＮＢ５８０ａ、５８０ｂ、５８０ｃのうちの１つまたは複数に接続されることがあり、ＷＴＲＵ５０２ａ、５０２ｂ、５０２ｃとＩＰ対応デバイスとの間の通信を容易にするために、ＷＴＲＵ５０２ａ、５０２ｂ、５０２ｃに、例えば、インターネット５１０などのパケット交換ネットワークへのアクセスを提供することがある。ＵＰＦ５８４、５８４ｂは、例えば、パケットをルーティングし転送すること、ユーザープレーンのポリシーを実施すること、マルチホームのＰＤＵのセッションをサポートすること、ユーザープレーンのＱｏＳを取り扱うこと、ダウンリンクのパケットをバッファリングすること、モビリティアンカリング（mobility anchoring）を提供することなどのような他の機能を実行することがある。
【0064】
ＣＮ５１５は、他のネットワークとの通信を容易にすることがある。例えば、ＣＮ５１５は、ＣＮ５１５とＰＳＴＮ５０８との間におけるインターフェースとしての役割を果たすＩＰゲートウェイ（例えば、ＩＭＳ（ＩＰマルチメディアサブシステム）サーバー）を含むことがある、またはＩＰゲートウェイと通信することがある。加えて、ＣＮ５１５は、他のサービスプロバイダによって所有されるおよび／または運営される他の有線および／またはワイヤレスのネットワークを含むことがある他のネットワーク５１２へのアクセスを、ＷＴＲＵ５０２ａ、５０２ｂ、５０２ｃに提供することがある。一態様において、ＷＴＲＵ５０２ａ、５０２ｂ、５０２ｃは、ＵＰＦ５８４ａ、５８４ｂへのＮ３インターフェース、およびＵＰＦ５８４ａ、５８４ｂとＤＮ（データネットワーク）５８５ａ、５８５ｂとの間におけるＮ６インターフェースを介するＵＰＦ５８４ａ、５８４ｂを通じて、ローカルなＤＮ５８５ａ、５８５ｂに接続されることがある。
【0065】
図１Ａ～１Ｄ、および図１Ａ～１Ｄに対応する説明の観点から、ＷＴＲＵ５０２ａ～ｄ、基地局５１４ａ～ｂ、ｅＮｏｄｅ－Ｂ５６０ａ～ｃ、ＭＭＥ５６２、ＳＧＷ５６４、ＰＧＷ５６６、ｇＮＢ５８０ａ～ｃ、ＡＭＦ５８２ａ～ｂ、ＵＰＦ５８４ａ～ｂ、ＳＭＦ５８３ａ～ｂ、ＤＮ５８５ａ～ｂ、および／または本明細書において説明される他のどのデバイス（複数可）をとっても、１つまたは複数に関連して、本明細書において説明される機能のうちの１つもしくは複数またはすべては、１つまたは複数のエミュレーションデバイス（図示せず）によって実行されることがある。エミュレーションデバイスは、本明細書において説明される機能のうちの１つもしくは複数またはすべてをエミュレートするように構成される１つまたは複数のデバイスであってもよい。例えば、エミュレーションデバイスは、他のデバイスをテストするために、ならびに／またはネットワークおよび／もしくはＷＴＲＵ機能をシミュレートするのに用いられることがある。
【0066】
エミュレーションデバイスは、ラボ環境において、および／またはオペレーターのネットワーク環境において、他のデバイスの１つまたは複数のテストを実装するように設計されることがある。例えば、１つまたは複数のエミュレーションデバイスは、通信ネットワーク内の他のデバイスをテストするために、有線および／またはワイヤレスの通信ネットワークの一部として全体的にもしくは部分的に実装されているおよび／または展開されている間、１つもしくは複数のまたはすべての機能を実行することがある。１つまたは複数のエミュレーションデバイスは、有線および／またはワイヤレスの通信ネットワークの一部として一時的に実装されている／展開されている間、１つもしくは複数のまたはすべての機能を実行することがある。エミュレーションデバイスは、テスティングの目的のために別のデバイスに直接結合されることがあり、および／またはＯＴＡ（over-the-air）のワイヤレス通信を用いてテスティングを実行することがある。
【0067】
１つまたは複数のエミュレーションデバイスは、有線および／またはワイヤレスの通信ネットワークの一部として実装されていない／展開されていない間、すべてを含む、１つまたは複数の機能を実行することがある。例えば、エミュレーションデバイスは、１つまたは複数のコンポーネントのテスティングを実装するために、テスティングラボラトリーならびに／または展開されない（例えば、テスティングの）有線および／もしくはワイヤレスの通信ネットワークにおけるテスティングのシナリオにおいて利用されることがある。１つまたは複数のエミュレーションデバイスは、テスト機器であってもよい。ダイレクトなＲＦカップリング（direct RF coupling）、および／または（例えば、１つもしくは複数のアンテナを含むことがある）ＲＦ回路を介したワイヤレス通信は、データを送信するおよび／または受信するために、エミュレーションデバイスによって用いられることがある。
【0068】
本出願は、ツール、特徴、例、モデル、アプローチなどを含むいろいろな様相を説明する。今述べた様相の多くは、特殊性を有して説明され、少なくとも個々の特性を示すために、多くの場合、限定するような印象を与え得るやり方において説明される。しかしながら、今述べたことは、説明における明確さの目的のためであり、今述べた様相の適用または範囲を限定しない。確かに、異なった様相のすべては、組み合わされ、入れ替えられて、さらなる様相を提供することが可能である。さらにその上、態様は、同様に、より早い出願にて説明された様相と組み合わされ、入れ替えられることが可能である。
【0069】
本出願において説明されるおよび想定される様相は、多くの異なったかたちにおいて実装されることが可能である。本明細書に説明される図１～２０は、いくつかの例を与えることがあるが、他の例が想定され、図１～２０の解説は、実装の広さを限定しない。一般に、様相のうちの少なくとも１つは、ビデオエンコーディングおよびデコーディングに関し、一般に、少なくとも１つの他の態様は、生成されたまたはエンコードされたビットストリームを送信することに関する。今述べた様相および他の様相は、説明された方法のいずれかに従ってビデオデータをエンコードまたはデコードするために、方法、装置、命令を格納したコンピューター読み取り可能な記録媒体、および／または説明された方法のいずれかに従って生成されたビットストリームを格納したコンピューター読み取り可能な記録媒体として実装されることが可能である。
【0070】
本出願にて、用語「再構成されている」および「デコードされている」は、交換可能に使用されることがあり、用語「ピクセル」および「サンプル」は、交換可能に使用されることがあり、用語「画像」、「ピクチャ」、および「フレーム」は、交換可能に使用されることがある。通例、必ずしもではないが、「デコードされる」は、デコーダー側にて使用される。用語「再構成される」は、エンコーダー側にて、および／またはデコーダー側にて使用される。
【0071】
種々の方法が本明細書にて説明され、方法の各々は、説明されている方法を達成するために１つまたは複数のステップまたは動作を含む。ステップまたは動作の特定の順が方法の固有の操作に対して必要とされない限り、特定のステップおよび／または動作の順および／または使用は、修正される、または組み合わされることがある。さらに加えて、例えば「第１」、「第２」などの用語は、例えば、「第１のデコード」および「第２のデコード」など、エレメント、コンポーネント、ステップ、動作などを変更する種々の例において使用されることがある。そのような用語の使用は、特に必要とされない限り、変更された操作に対して順序付けることの意味を含まない。だから、今述べた例にて、第１のデコードは、第２のデコードの前に行われる必要がなく、例えば、第２のデコードの前に、第２のデコードの間に、または第２のデコードと重なる時間周期において生じてもよい。
【0072】
本出願にて説明される種々の方法および他の様相は、図２および図３に示されるようなビデオエンコーダー１００およびデコーダー２００のモジュール、例えばデコードモジュールを変更するのに使用されることが可能である。さらにその上、本様相は、ＶＶＣまたはＨＥＶＣに限定されず、例えば、以前から存在しようが将来開発されようが、他の規格および勧告に、ならびにどれかの上記の規格および勧告（ＶＶＣおよびＨＥＶＣを含む）の拡張に適用されることが可能である。特に示されない限り、または特に技術的に妨げられない限り、本出願にて説明された様相は、個々にまたは組み合わせにおいて使用されることが可能である。
【0073】
種々の数値は、本出願にて使用され、例えば、４×８、４×Ｎ、８×４、および８×ＮのＣＵサイズ、４サンプルである最小予測ブロック幅、３２以上のサンプルを含むＰＵである。特定の値は、例示的な目的のためであり、説明された様相は、今述べた特定の値に限定されない。
【0074】
例えばＶＶＣなどのブロックベースのビデオ符号化システムは、ブロックベースのハイブリッドビデオ符号化フレームワークを含むことがある。図２は、例示的なブロックベースのハイブリッドビデオエンコードシステム２００のブロック図を例示する。エンコーダー２００の変形が想定されるが、エンコーダー２００は、すべての予期される変形を説明することなく、明確さの目的のために以下に説明される。入力ビデオ信号２０２は、ブロック（例えば、符号化単位（coding unit；ＣＵ））ずつ、処理されることがある。ＣＵは、１２８ｘ１２８ピクセルまでのＣＵサイズを含むことがある。ＣＴＵ（coding tree unit）は、四分木／二分木／三分木に基づいて、変化する局所的な特性に適応させるＣＵに割られることがある。ＣＵは、さらなる分割なしに予測および変換のための基本単位として使用され得る。マルチタイプの木構造の場合に、ＣＴＵは、四分木構造（quad-tree structure）によって分割され得る。四分木の葉ノード（たとえば、各四分木リードノード）は、二分木構造および三分木構造によってさらに分割されることがある。
【0075】
図２を参照して、入力ビデオブロック（たとえば、ＭＢ（マクロブロック）またはＣＵ）に対して、空間予測２６０または動き予測２６２が、行われることがある。空間予測（たとえば、またはイントラ予測）は、カレントビデオブロックを予測する同一のビデオピクチャおよび／またはスライスにおいて既に符号化された隣接ブロックから、ピクセルを使用することがある。空間予測は、ビデオ信号に固有の空間的な冗長性を減らすことがある。時間予測（たとえば、インター予測、または動き補償される予測と言われる）は、カレントビデオブロックを予測する既に符号化されたビデオピクチャから、ピクセルを使用することがある。時間予測は、ビデオ信号に固有の時間的な冗長性を減らすことがある。ＣＵに対する時間予測信号は、カレントＣＵとその時間参照との間の動きの量および方向を示すことがある１つまたは複数の動きベクトル（ＭＶ）によってシグナリングされることがある。複数の参照ピクチャがサポートされるならば、参照ピクチャインデックスは、デコーダーにシグナリングされることがある。参照インデックスは、時間予測信号が、参照ピクチャストア２６４におけるどの参照ピクチャから来ることがあるかを特定するのに使用されることがある。
【0076】
空間予測および／または時間予測の後に、エンコーダーにおけるモード決定２８０は、例えば、レート歪み最適化メカニズムに基づいて予測モードを選択することがある。予測ブロックは、２１６にて、カレントビデオブロックから減じられ得る。予測残差は、変換モジュール２０４および量子化モジュール２０６を用いて非相関化されて、目標ビットレートを達成し得る。量子化された残差係数は、２１０にて逆量子化され、２１２にて逆変換されて、再構成された残差を形成し得る。再構成された残差は、２２６にて、予測ブロックに戻して加えられて、再構成されたビデオブロックを形成し得る。例えば、デブロッキングフィルタおよび／または適応的なループフィルタなどのループ内フィルターは、参照ピクチャストア２６４に入れられる前に、２６６にて、再構成されたビデオブロックに適応されることがある。参照ピクチャストア２６４における参照ピクチャは、将来のビデオブロックを符号化するのに使用され得る。出力ビデオビットストリーム２２０が形成され得る。符号化モード（たとえば、インターまたはイントラ）、予測モード情報、動き情報、および／または量子化された残差係数は、エントロピー符号化ユニット２０８へ送られて、ビットストリーム２２０を形成するために圧縮されパックされることがある。
【0077】
図３は、例示的なブロックベースのビデオデコーダー３００の一般的なブロック図を例示する。ビデオビットストリーム３０２は、エントロピーデコードユニット３０８にて、受信され、アンパックされ、および／またはエントロピーデコードされることがある。符号化モードおよび／または予測情報は、空間予測ユニット３６０（たとえば、イントラ符号化されている場合）に、および／または時間予測ユニット３６２（たとえば、インター符号化されている場合）に送られて、予測ブロックを形成することがある。残差変換係数は、逆量子化ユニット３１０および逆変換ユニット３１２へ送られて、残差ブロックを再構成することがある。予測ブロックおよび残差ブロックは、３２６にて加えられることがある。再構成されたブロックは、ループ内フィルタリング３６６を通り抜けることがあり、参照ピクチャストア３６４に格納されることがある。参照ピクチャストア３６４における再構成されたビデオは、ディスプレイデバイスを駆動するのに、および／または将来のビデオブロックを予測するのに使用されることがある。例にて、デコーダー３００は、ＩＳＰが、ビデオビットストリーム３０２を受信した、アンパックした、および／またはエントロピーデコードした後に、カレントブロックに対して有効にされることを決定することがある。符号化モード情報（例えば、イントラ符号化モード）は、空間予測ユニット３６０に送られて、予測ブロックを形成してもよい。デコーダー３００は、アンパックされた、および／またはエントロピーデコードされたビデオビットストリーム３０２に基づいて、カレントブロックに対して、ｓサブパーティション幅を決定してもよい。カレントブロックにおけるサブパーティションに対して、デコーダーは、サブパーティション幅および最小予測ブロック幅に基づいて、対応する予測ブロックを決定してもよい。最小予測ブロック幅は、予測ブロック幅について予め決められている値であってもよい。デコーダー３００は、空間予測ユニット３６０にて参照サンプルを決定してもよい。デコーダー３００は、参照サンプルを用いて予測ブロックを予測してもよい。
【0078】
図４は、種々の様相および例が実装されるシステムの例についてのブロック図を例示する。システム１０００は、以下に説明される種々のコンポーネントを含むデバイスとして具体化されることが可能であり、本文書にて説明される１つまたは複数の様相を行うように構成される。上記のデバイスの例は、限定されないが、例えば、パーソナルコンピューター、ラップトップコンピューター、スマートフォン、タブレットコンピューター、デジタルマルチメディアセットトップボックス、デジタルテレビ放送受信機、パーソナルビデオレコーディングシステム、連結される家庭用電気機器、およびサーバーなどの種々の電子デバイスを含む。システム１０００のエレメントは、単独にまたは組み合わせにて、単一の集積回路（ＩＣ）、複数のＩＣ、および／または個別のコンポーネントに具体化されることが可能である。例えば、少なくとも１つの例にて、システム１０００の処理およびエンコーダー／デコーダーエレメントは、複数のＩＣおよび／または個別のコンポーネントにわたって分散される。種々の例にて、システム１０００は、例えば、通信バスを介して、または専用の入力および／もしくは出力ポートを介して、１つもしくは複数の他のシステム、または他の電子デバイスに通信接続される。種々の例にて、システム１０００は、本文書に説明される１つまたは複数の様相を実装するように構成される。
【0079】
システム１０００は、例えば、本文書に説明される種々の様相を実装するためにロードされる命令を実行するように構成された少なくとも１つのプロセッサー１０１０を含む。プロセッサー１０１０は、埋め込まれたメモリー、入出力インターフェース、および当技術分野にて知られている種々の他の回路を含むことが可能である。システム１０００は、少なくとも１つのメモリー１０２０（たとえば、揮発性メモリーデバイス、および／または不揮発性メモリーデバイス）を含む。システム１０００は、限定ではないが、ＥＥＰＲＯＭ（Electrically Erasable Programmable Read-Only Memory）、ＲＯＭ（Read-Only Memory）、ＰＲＯＭ（Programmable Read-Only Memory）、ＲＡＭ（Random Access Memory）、ＤＲＡＭ（Dynamic Random Access Memory）、ＳＲＡＭ（Static Random Access Memory）、フラッシュ、磁気ディスクドライブ、および／または光ディスクドライブを含む不揮発性メモリーおよび／または揮発性メモリーを含むことが可能であるストレージデバイス１０４０を含む。ストレージデバイス１０４０は、非限定の例として、内部ストレージデバイス、付属のストレージデバイス（分離できるストレージデバイス、および分離できないストレージデバイスを含む）、および／またはネットワークアクセス可能なストレージデバイスを含むことが可能である。一例にて、１つまたは複数のプロセッサーを含む装置は、ＩＳＰがカレントブロックに対して有効にされることを決定することを行うように構成されることがある。１つまたは複数のプロセッサーは、カレントブロックに対してサブパーティション幅を決定することを行うように構成されることがある。１つまたは複数のプロセッサーは、サブパーティション幅と、カレントブロックにおけるサブパーティションに対する最小予測ブロック幅とに基づいて、対応する予測ブロックを決定することを行うように構成されることがある。１つまたは複数のプロセッサーは、参照サンプルを決定することを行うように構成されることがある。１つまたは複数のプロセッサーは、参照サンプルを用いて予測ブロックを予測することを行うように構成されることがある。１つまたは複数のプロセッサーを含む装置は、デコーダーまたはエンコーダーであってもよい。
【0080】
信号は、装置に、本明細書における１つまたは複数のステップを行うことを可能にするのに送られることがある。例えば、装置は、装置に、本明細書における１つまたは複数のステップを行うことを可能にするデータにアクセスするように構成されたアクセスユニットと、データを送信するように構成されたトランスミッターとを含むことがある。方法は、装置に、本明細書における１つまたは複数のステップを行うことを可能にするデータにアクセスすることと、データを送信することとを含むことがある。コンピューター読み取り可能な媒体は、装置に、本明細書における１つまたは複数のステップを行うことを可能にするデータを含むことがある。
【0081】
システム１０００は、例えば、エンコードされたビデオまたはデコードされたビデオを提供するデータを処理するように構成されたエンコーダー／デコーダーモジュール１０３０を含み、エンコーダー／デコーダーモジュール１０３０は、独自のプロセッサーおよびメモリーを含むことが可能である。エンコーダー／デコーダーモジュール１０３０は、エンコード機能および／またはデコード機能を行うデバイスに含まれることが可能であるモジュール（複数可）を表す。既知であるように、デバイスは、エンコードモジュールおよびデコードモジュールのうちの１つまたは両方を含むことが可能である。さらに加えて、エンコーダー／デコーダーモジュール１０３０は、システム１０００の別個のエレメントとして実装されることが可能である、または当業者に知られているようにハードウェアおよびソフトウェアの組み合わせとしてプロセッサー１０１０内に組み入れられることが可能である。
【0082】
本文書に説明される種々の様相を行うプロセッサー１０１０またはエンコーダー／デコーダー１０３０上にロードされるプログラムコードは、ストレージデバイス１０４０に格納され、続いてプロセッサー１０１０による実行のためにメモリー１０２０上にロードされることが可能である。種々の例にしたがって、１つまたは複数のプロセッサー１０１０、メモリー１０２０、ストレージデバイス１０４０、およびエンコーダー／デコーダーモジュール１０３０は、本文書に説明されるプロセスの実行中に１つまたは複数の種々のアイテムを格納することが可能である。上記の格納されるアイテムは、限定しないが、入力ビデオ、デコードされたビデオ、またはデコードされたビデオの一部、ビットストリーム、行列、変数、ならびに等式、公式、演算、および操作ロジックの処理からの中間または最終の結果を含むことが可能である。
【0083】
いくつかの例にて、プロセッサー１０１０および／またはエンコーダー／デコーダーモジュール１０３０の内部のメモリーは、命令を記憶し、エンコードするまたはデコードする間に必要とされる処理にワーキングメモリーを提供するのに使用される。しかしながら、他の例にて、処理デバイス（例えば、処理デバイスは、プロセッサー１０１０またはエンコーダー／デコーダーモジュール１０３０のいずれかであることが可能である）の外部のメモリーは、１つまたは複数の今述べた機能ために使用される。外部メモリーは、メモリー１０２０および／またはストレージデバイス１０４０、例えば、ダイナミック型揮発性メモリーおよび／または不揮発性フラッシュメモリーであることが可能である。いくつかの例にて、外部不揮発性フラッシュメモリーを使用して、例えば、テレビのオペレーティングシステムを格納する。少なくとも１つの例にて、例えばＲＡＭのような高速外部ダイナミック型揮発性メモリーは、ビデオ符号化およびデコード操作に対して、例えば、ＭＰＥＧ－２（ＭＰＥＧは、Moving Picture Experts Groupを引用し、さらにＭＰＥＧ－２は、ＩＳＯ／ＩＥＣ１３８１８と呼ばれ、さらに１３８１８－１は、Ｈ．２２２として知られ、さらに１３８１８－２は、Ｈ．２６２として知られる）、ＨＥＶＣ（ＨＥＶＣは、さらにＨ．２６５およびＭＰＥＧ－Ｈ Ｐａｒｔ２としても知られるHigh Efficiency Video Codingを引用する）、またはＶＶＣ（Versatile Video Coding、ＪＶＥＴ、the Joint Video Experts Teamによって開発されている規格）などに対してワーキングメモリーとして使用される。
【0084】
システム１０００のエレメントへの入力は、ブロック１１３０に示されるように、種々の入力デバイスを介して提供されることが可能である。上記の入力デバイスは、限定されないが、（ｉ）例えば、放送局によって電波を介して送信されるＲＦ（radio frequency）信号を受信するＲＦ部、（ｉｉ）ＣＯＭＰ（Component）入力端子（またはＣＯＭＰ入力端子のセット）、（ｉｉｉ）ＵＳＢ（Universal Serial Bus）入力端子、および／または（ｉｖ）ＨＤＭＩ（High Definition Multimedia Interface）入力端子を含む。図４にて示されない他の例は、コンポジット映像を含む。
【0085】
種々の例にて、ブロック１１３０の入力デバイスは、当技術分野にて知られているそれぞれの入力処理エレメントを関連付けている。例えば、ＲＦ部分は、（ｉ）望まれる周波数を選択すること（信号を選択すること、または信号を周波数の帯域に帯域制限することとも言われる）と、（ｉｉ）選択された信号をダウンコンバートすることと、（ｉｉｉ）（例えば、）ある例にてチャネルと言われることが可能である単一の周波数帯域を選択する周波数のより狭い帯域に再び帯域制限することと、（ｉｖ）ダウンコンバートされ帯域制限された信号を復調することと、（ｖ）誤り訂正を行うことと、（ｖｉ）逆多重してデータパケットについて望まれるストリームを選択することと、に適しているエレメントに関連付けられることが可能である。種々の例のＲＦ部分は、今述べた機能を行う１つまたは複数のエレメント、例えば、周波数セレクター、信号セレクター、バンドリミッター、チャネルセレクター、フィルター、ダウンコンバーター、デモジュレーター、エラーコレクター、およびデマルチプレクサーを含む。ＲＦ部分は、例えば、受信信号を、より低い周波数（例えば、中間周波数もしくはベースバンドに近い周波数）に、またはベースバンドにダウンコンバートすることを含む、種々の機能を行うチューナーを含むことが可能である。１つのセットトップボックスの例にて、ＲＦ部分および関連する入力処理エレメントは、ワイヤード媒体（例えば、ケーブル）を介して送信されるＲＦ信号を受信し、フィルタリングし、ダウンコンバートし、および望まれる周波数帯域に再びフィルタリングすることによって周波数選択を行う。種々の例は、上述した（および他の）要素の順序を再配置し、今述べた要素のいくつかを取り除き、および／または同様のまたは異なる機能を行う他の要素を加える。要素を加えることは、例えば、増幅器、およびアナログデジタル変換器を挿入することなど、既存の要素の間に要素を挿入することを含むことが可能である。種々の例にて、ＲＦ部分は、アンテナを含む。例にて、デバイスは、本明細書における装置と、（ｉ）画像を表すデータを含む信号を受信するように構成されたアンテナ、（ｉｉ）受信した信号を、画像を表すデータを含む周波数の帯域に制限するように構成されたバンドリミッター（band limiter）、または（ｉｉｉ）画像を表示するように構成されたディスプレイのうちの少なくとも１つとを含んでもよい。本明細書における装置として成し遂げるように構成されたデバイスは、テレビ受像機、携帯電話、タブレット、またはＳＴＢ（セットトップボックス）を含むことがある。
【0086】
さらに加えて、ＵＳＢおよび／またはＨＤＭＩ端末は、システム１０００を他の電子デバイスにＵＳＢおよび／またはＨＤＭＩをわたって連結するために、それぞれのインターフェイスプロセッサーを含むことが可能である。入力処理の種々の様相、例えば、リードソロモン誤り訂正が、例えば、別個の入力処理ＩＣ内に、または必要に応じてプロセッサー１０１０内に実装されることが可能であることは、理解されることである。同様に、ＵＳＢまたはＨＤＭＩインターフェース処理の様相は、別個の入力処理ＩＣ内に、または必要に応じてプロセッサー１０１０内に実装されることが可能である。復調された、誤り訂正された、および逆多重されたストリームは、例えば、プロセッサー１０１０と、メモリーおよびストレージエレメントと協働して動作して必要に応じて出力デバイスにおける提出のためにデータストリームを処理するエンコーダー／デコーダー１０３０とを含む種々の処理エレメントに提供される。
【0087】
システム１０００の種々のエレメントは、統合エンドされているハウジング内に提供されることが可能であり、統合されているハウジング内において、種々のエレメントは、相互接続され、適切な連結配列１１４０、例えば、Ｉ２Ｃ（Inter-IC）バス、配線、およびプリント回路基板を含む当技術分野にて知られている内部バスを用いて、そこの間においてデータを送信することが可能である。
【0088】
システム１０００は、他のデバイスとの通信を、通信チャネル１０６０を介して可能にする通信インターフェース１０５０を含む。通信インターフェース１０５０は、限定ではないが、データを通信チャネル１０６０を介して送信するようにおよび受信するように構成されたトランシーバーを含むことが可能である。通信インターフェース１０５０は、限定ではないが、モデムまたはネットワークカードを含むことが可能であり、通信チャネル１０６０は、例えば、ワイヤードおよび／またはワイヤレス媒体内に実装されることが可能である。
【0089】
データは、種々の例にて、例えば、Ｗｉ－Ｆｉネットワーク、例えば、ＩＥＥＥ８０２．１１（ＩＥＥＥは、Institute of Electrical and Electronics Engineersを引用する）などのワイヤレスネットワークを用いて、システム１０００にストリーミングされるまたは他の方法により提供される。今述べた例のＷｉ－Ｆｉ信号は、Ｗｉ－Ｆｉ通信に合わせて変えられる通信チャネル１０６０および通信インターフェース１０５０を介して受信される。通常、今述べた例の通信チャネル１０６０は、ストリーミングアプリケーションおよび他のオーバーザトップ通信を可能にするために、インターネットを含む外部のネットワークへのアクセスを提供するアクセスポイントまたはルーターに連結される。他の例は、ストリーミングされたデータをシステム１０００に、入力ブロック１１３０のＨＤＭＩ接続を介してデータを配信するセットトップボックスを用いて提供する。依然として、他の例は、ストリーミングされたデータをシステム１０００に、入力ブロック１１３０のＲＦ接続を用いて提供する。上に示したように、種々の例は、ストリーミングではないやり方においてデータを提供する。さらに加えて、種々の例は、Ｗｉ－Ｆｉ以外のワイヤレスネットワーク、例えば、セルラーネットワークまたはＢｌｕｅｔｏｏｔｈネットワークを使用する。
【0090】
システム１０００は、出力信号を、ディスプレイ１１００、スピーカー１１１０、および他の周辺デバイス１１２０を含む種々の出力デバイスに提供することが可能である。種々の例のディスプレイ１１００は、例えば、タッチスクリーンディスプレイ、有機発光ダイオード（ＯＬＥＤ）ディスプレイ、曲面ディスプレイ、および／または折り畳めるディスプレイのうちの１つまたは複数を含む。ディスプレイ１１００は、テレビ、タブレット、ラップトップ、セルラーフォン（モバイルフォン）、または他のデバイス用であることが可能である。さらに、ディスプレイ１１００は、（例えば、スマートフォンにおけるような）他のコンポーネントと統合される、または（例えば、ラップトップ用の外部モニターと）分離することも可能である。例についての種々の例にて、その他の周辺デバイス１１２０は、スタンドアロンのデジタルビデオディスク（またはデジタルバーサタイルディスク）（両方の用語に対して、ＤＶＲ）、ディスクプレーヤー、ステレオシステム、および／または照明システムのうちの１つまたは複数を含む。種々の例は、システム１０００の出力に基づいて機能を提供する１つまたは複数の周辺デバイス１１２０を使用する。例えば、ディスクプレーヤーは、システム１０００の出力をプレイする役割を行う。
【0091】
種々の例にて、制御信号は、システム１０００と、ディスプレイ１１００、スピーカー１１１０、または他の周辺デバイス１１２０との間において、例えば、ＡＶ．Ｌｉｎｋ、ＣＥＣ（Consumer Electronics Control）、またはユーザーの介入の有無にかかわらずデバイスツーデバイス制御を可能にする他の通信プロトコルのようなシグナリングを用いて通信される。出力デバイスは、それぞれのインターフェース１０７０、１０８０、および１０９０を通じて専用のコネクションを介してシステム１０００に通信接続されることが可能である。代替として、出力デバイスは、システム１０００に、通信チャネル１０６０を用いて通信インターフェース１０５０を介して連結されることが可能である。ディスプレイ１１００およびスピーカー１１１０は、システム１０００のその他のコンポーネントにより単一のユニットにおいて、例えば、テレビの要件電子デバイスにおいて統合されることが可能である。種々の例にて、ディスプレイインターフェイス１０７０は、例えば、タイミングコントローラ（Ｔ Ｃｏｎ）チップのようなディスプレイドライバーを含む。
【0092】
代替として、ディスプレイ１１００およびスピーカー１１１０は、例えば、入力１１３０のＲＦ部分が別個のセットトップボックスの一部であるならば、１つまたは複数のその他のコンポーネントから分離されることが可能である。ディスプレイ１１００およびスピーカー１１１０が外部コンポーネントである種々の例にて、出力信号は、例えば、ＨＤＭＩポート、ＵＳＢポート、またはＣＯＭＰ出力を含む専用の出力コネクションを介して提出されることが可能である。
【0093】
例は、プロセッサー１０１０によって実装されるコンピュータソフトウェアによって、またはハードウェアによって、またはハードウェアおよびソフトウェアの組み合わせによって実行されることが可能である。非限定の例として、例は、１つまたは複数の集積回路によって実装されることが可能である。メモリー１０２０は、技術環境に適したどんなタイプのでもあることが可能であり、例えば、非限定の例として、光メモリーデバイス、磁気メモリーデバイス、半導体ベースのメモリーデバイス、固定メモリー、および取り外し可能なメモリーなどのどんな適したデータストレージ技術でも用いて実装されることが可能である。プロセッサー１０１０は、技術環境に適したどんなタイプのでもあることが可能であり、非限定の例として、マイクロプロセッサー、汎用コンピューター、専用コンピューター、およびマルチコアアーキテクチャに基づくプロセッサーのうちの１つまたは複数を含み込むことが可能である。
【0094】
種々の実装は、デコードすることを含む。本出願にて使用されている「デコードすること」は、例えば、ディスプレイに適している最終的な出力を生成するために、受信しているエンコードしているシーケンスに行われる処理のすべてまたは一部を含み込むことが可能である。種々の例にて、上記の処理は、デコーダーによって通常行われる処理、例えば、エントロピーデコーディング、逆量子化、逆変換、および差分デコーディングのうちの１つまたは複数を含む。種々の例にて、さらに、または代替えとして、上記の処理は、本出願にて説明された種々の実装のデコーダーによって行われる処理、例えば、サブパーティション幅と、カレントブロックにおけるサブパーティションに対する最小予測ブロック幅とに基づいて、対応する予測ブロックを決定することを含む。
【0095】
さらなる例として、一例にて「デコードすること」は、「エントロピーデコーディング」のみを引用し、別の例にて「デコードすること」は、差分デコーディングのみを引用し、別の例にて「デコードすること」は、エントロピーデコーディングおよび差分デコーディングの組み合わせを引用する。語句「デコード処理」が具体的に演算のサブセットを引用することが意図されようと一般的により広く引用することが意図されようと、デコード処理は、特定の説明の文脈に基づいて明らかになるだろう、および当業者によって十分に理解されると信じられる。
【0096】
種々の実装は、エンコードすることを含む。「デコードすること」についての上の解説に類似したやり方において、本出願にて使用されている「エンコードすること」は、例えば、エンコードされているビットストリームを生成するために、入力ビデオシーケンスに行われる処理のすべてまたは一部を含み込むことが可能である。種々の例にて、上記の処理は、エンコーダーによって通常行われる処理、例えば、分割、差分エンコーディング、変換、量子化、およびエントロピーエンコーディングのうちの１つまたは複数を含む。種々の例にて、さらに、または代替えとして、上記の処理は、本出願にて説明された種々の実装のエンコーダーによって行われる処理、例えば、サブパーティション幅と、カレントブロックにおけるサブパーティションに対する最小予測ブロック幅とに基づいて、対応する予測ブロックを決定することを含む。
【0097】
さらなる例として、一例にて「エンコードすること」は、「エントロピーデコーディング」のみを引用し、別の例にて「エンコードすること」は、差分デエンコードのみを引用し、別の例にて「エンコードすること」は、差分エンコーディングおよびエントロピーエンコーディングの組み合わせを引用する。語句「エンコード処理」が具体的に演算のサブセットを引用することが意図されようと一般的により広く引用することが意図されようと、エンコード処理は、特定の説明の文脈に基づいて明らかになるだろう、および当業者によって十分に理解されると信じられる。
【0098】
本明細書にて使用されているシンタックスエレメントは、記述的な用語であることに注意する。上記のような、それらは、他のシンタックスエレメント名の使用を排除しない。
【0099】
図がフロー図として与えられるとき、さらにそれは対応する装置のブロック図も提供することが理解されるべきである。同様に、図がブロック図として与えられるとき、さらにそれは対応する方法／処理のフロー図も提供することが理解されるべきである。
【0100】
種々の例は、レート歪み最適化を引用する。特に、エンコード処理の間、レートと歪みとの間のバランスまたはトレードオフが、通例、考慮され、多くの場合、計算に関する複雑の制約が与えられる。通例、レート歪み最適化は、レート歪み関数を最小化することとして定式化され、レートのおよび歪みの重みつき合計である。レート歪み最適化問題を解くための異なったアプローチがある。例えば、アプローチは、符号化およびデコードの後に再構成されている信号の符号化コストおよび関係している歪みについての完全な評価とともに、すべての考慮されるモードまたは符号化パラメーター値を含むすべてのエンコードオプションの広範囲なテストに基づくことがある。さらに、より高速なアプローチは、エンコードの複雑さを除くために、特に、再構成されている１つではなく予測または予測残差信号に基づいた近似されている歪みの計算とともに使用されることもある。今述べた２つのアプローチの混合は、例えば、可能性のあるエンコードオプションのいくつかだけに対して近似されている歪みと、他のエンコードオプションに対して完全な歪みと、を使用することによってなど、使用されることも可能である。他のアプローチは、可能性のあるエンコードオプションのサブセットを評価するだけである。より一般に、多くのアプローチは、最適化を行ういろいろな技法のいずれかを用いるが、最適化は、必ずしも符号化コストと関係している歪みとの両方の完全な評価であるとは限らない。
【0101】
本明細書に説明された実装および様相は、例えば、方法もしくは処理、装置、ソフトウェアプログラム、データストリーム、または信号において実装されることが可能である。実装の単一のかたちの文脈においてのみ述べられる（例えば、方法としてのみ述べられる）場合でさえ、さらに、述べられた特徴の実装は、他のかたち（例えば、装置またはプログラム）において実装されることも可能である。装置は、例えば、適切なハードウェア、ソフトウェア、およびファームウェアにおいて実装されることが可能である。方法は、例えば、コンピューター、マイクロプロセッサー、集積回路、またはプログラマブルロジックデバイスを含む、一般に処理デバイスを引用する、例えば、プロセッサーにおいて実装されることが可能である。さらに、プロセッサーは、例えば、コンピューター、携帯電話、ポータブル／パーソナルデジタルアシスタント（「ＰＤＡ」）、およびエンドユーザー間において情報の通信を容易にする他のデバイスなど、通信デバイスも含む。
【0102】
「一例」または「例」または「一実装」または「実装」への言及は、他の変形も同様に、例に関連して説明された特定の特徴、構造、特性などが、少なくとも１つの例に含まれることを意味する。ゆえに、本出願の至る所に種々の場所に現れている語句「一例にて」または「例にて」または「一実装にて」または「実装にて」の出現は、どんな他の変形でも同様に、必ずしも同一の例をすべて引用しているとは限らない。
【0103】
さらに加えて、本出願は、情報の種々の部分を「決定すること」を引用することがある。情報を決定することは、例えば、情報を推定すること、情報を計算すること、情報を予測すること、または情報をメモリーから検索することのうちの１つまたは複数を含むことが可能である。取得することは、受信すること、決定すること、特定すること、および／または検索することを含むことがある。
【0104】
さらに、本出願は、情報の種々の部分に「アクセスすること」を引用することがある。情報にアクセスすることは、例えば、情報を受信すること、情報を（例えば、メモリーから）検索すること、情報を格納すること、情報を移動すること、情報をコピーすること、情報を計算すること、情報を決定すること、情報を予測すること、または情報を推定することのうちの１つまたは複数を含むことが可能である。
【0105】
さらに加えて、本出願は、情報の種々の部分を「受信すること」を引用することがある。受信することは、「アクセスすること」に関してのように、広い用語であることが意図される。情報を受信することは、例えば、情報にアクセスすること、または情報を（例えば、メモリーから）検索することのうちの１つまたは複数を含むことが可能である。さらに、通常、「受信すること」は、何らかの仕方または別の仕方において、例えば、情報を格納すること、情報を処理すること、情報を送信すること、情報を移動すること、情報をコピーすること、情報を消去すること、情報を計算すること、情報を決定すること、情報を予測すること、または情報を推定することなどの動作の間に含まれる。
【0106】
次の「／」、「および／または」、および「のうちの少なくとも１つ」のいずれかの使用は、例えば、「Ａ／Ｂ」、「Ａおよび／またはＢ」、および「ＡおよびＢの少なくとも１つ」の場合、第１の列挙されている選択肢（Ａ）のみの選択、または第２の列挙されている選択肢（Ｂ）のみの選択、または両方の選択肢（ＡおよびＢ）の選択を含み込むことが意図されることは、理解されるべきである。さらなる例として、「Ａ、Ｂ、および／またはＣ」および「Ａ、Ｂ、およびＣの少なくとも１つ」の場合、上記語句は、第１の列挙されている選択肢（Ａ）のみの選択、または第２の列挙されている選択肢（Ｂ）のみの選択、または第３の列挙されている選択肢（Ｃ）のみの選択、または第１および第２の列挙されている選択肢（ＡおよびＢ）のみの選択、または第１のおよび第３の列挙されている選択肢（ＡおよびＣ）のみの選択、または第２および第３の列挙されている選択肢（ＢおよびＣ）、またはすべての３つの選択肢（ＡおよびＢおよびＣ）の選択を含み込むことが意図される。今述べたことは、当業者および関連業者に明らかであるように、列挙されているだけの事項に対して拡張され得る。
【0107】
さらに、本明細書にて使用されている、単語「シグナリング」は、とりわけ、対応するデコーダーへ何かを示すことを引用する。例えば、ある例にて、エンコーダーは、サブパーティションを予測するために使用されるサンプルの選択を示す特定のインデックスをシグナリングする。このようにして、例にて、同一のパラメーターは、エンコーダー側およびデコーダー側の両方に使用される。ゆえに、例えば、エンコーダーは、特定のパラメーターをデコーダーに送信（明示的なシグナリング）することが可能であって、デコーダーは、同一の特定のパラメーターを使用することが可能である。反対に、デコーダーが特定のパラメーターを他も同様にすでに有しているならば、シグナリングは、デコーダーに特定のパラメーターを知り選択することを単に可能にするのに、送信することなく使用されること（暗黙的なシグナリング）が可能である。どの現実の関数でも送信を回避することによって、ビットの節約が種々の例にて実現される。シグナリングがいろいろなやり方において遂行されることが可能であることは、理解されることである。例えば、１つまたは複数のシンタックスエレメント、フラグなどは、種々の例にて、対応するデコーダーに情報をシグナリングするのに使用される。これまでのことは、単語「シグナリング」の動詞形に関するが、さらに、単語「シグナリング」は、本明細書にて名詞として使用されることも可能である。
【0108】
当業者には明らかであろうように、実装は、例えば、格納されるまたは送信されることが可能である情報を運ぶようにフォーマットされたいろいろな信号を生成することが可能である。例えば、情報は、方法を行うための命令、または説明されている実装のうちの１つによって生成されるデータを含むことが可能である。例えば、信号は、説明されている例のビットストリームを運ぶようにフォーマットされることが可能である。例えば、上記の信号は、電磁波として（例えば、スペクトルの無線周波部分を用いて）またはベースバンド信号としてフォーマットされることが可能である。例えば、フォーマッティングは、データストリームをエンコードすることと、エンコードされたデータストリームにより搬送波を変調することとを含むことが可能である。例えば、信号が運ぶ情報は、アナログまたはデジタル情報であることが可能である。信号は、知られているように、いろいろな別々のワイヤードまたはワイヤレスリンクを介して送信されることが可能である。信号は、プロセッサー読み取り可能な媒体において格納されることが可能である。
【0109】
我々は、多くの例を説明する。今述べた例の特徴は、種々のクレームカテゴリーおよびタイプにわたって、単独にてまたはどんな組み合わせにおいても提供されることが可能である。さらに、例は、次の特徴、デバイス、または様相のうちの１つまたは複数を、単独にてまたはどんな組み合わせにおいても、種々のクレームのカテゴリおよびタイプにわたって含むことが可能である。
【0110】
特徴および要素が特定の組み合わせにおいて上に述べられるが、当業者は、各特徴または要素が単独においてまたはその他の特徴および要素とのどの組み合わせにおいても用いられることが可能であることを理解するであろう。加えて、本明細書において説明される方法は、コンピュータープログラム、ソフトウェア、またはコンピューターまたはプロセッサーによる実行のためにコンピューター読み取り可能な媒体に組み入れられたファームウェアにおいて実装されることがある。コンピューター読み取り可能な媒体の例は、（ワイヤードまたはワイヤレス接続を通じて送信される）電気信号およびコンピューター読み取り可能な記録媒体を含む。コンピューター読み取り可能な記録媒体の例は、制限しないが、ＲＯＭ（described）、ＲＡＭ（random access memory）、レジスター、キャッシュメモリー、半導体メモリーデバイス、例えば、内蔵ハードディスクおよび取り外し可能なディスクなどの磁気メディア、光磁気メディア、例えば、ＣＤ－ＲＯＭディスクおよびＤＶＤ（digital versatile disk）などの光メディアを含む。ソフトウェアに関連付けられたプロセッサーは、ＷＴＲＵ、ＵＥ、端末、基地局、ＲＮＣ、またはいずれかのホストコンピューターにおける使用のための無線周波数トランシーバーを実装するのに使用されることがある。
【0111】
イントラ符号化ツール、例えば、イントラサブパーティション（ＩＳＰ）ツールが、使用されることがある。ＩＳＰツールは、輝度チャンネルに適用されることがある。ＩＳＰツールは、ＣＵを複数のサブパーティション（例えば、２つまたは４つのサブパーティション）に分割してもよい。サブパーティションは、複数（例えば、少なくとも１６個）のサンプルを含んでもよい。分割は、水平方向および／または垂直方向に行われることがある。ＣＵスプリット（CU-split）は、水平方向および／または垂直方向に行われることがある。図５は、ＣＵ（例えば、４×８ピクセルのＣＵまたは８×４ピクセルのＣＵ）に対して許され得る分割またはＣＵスプリットの例を例示する。図５に例示されるように、ＩＳＰツールは、ＣＵを２つのサブパーティションに割ることがある。ＩＳＰスプリットタイプは、垂直または水平であり得る。図６は、ＣＵ（例えば、４×８ピクセルまたは８×４ピクセルよりも大きいＣＵ）に対して許され得る分割の例を例示する。図６に例示されるように、相対的により大きいＣＵ（例えば、４×８ピクセルまたは８×４ピクセルよりも大きいＣＵ）に対して、ＩＳＰツールは、ＣＵを４つのサブパーティションに割ることがある。イントラ予測モードは、サブパーティションに対して使用され得る。例えば、同一のイントラ予測モードは、ＣＵにおけるサブパーティションに対して使用され得る。
【0112】
ＭＰＭフラグは、例えば、ＩＳＰに対して使用されるイントラモードがＭＰＭ（most probable mode）リストのメンバーであるときに設定される（例えば、１に設定される）ことがある。イントラ参照サンプルスムージングフィルターおよび／またはＰＤＰＣ（position dependent intra prediction combination）は、ＩＳＰに対して無効にされることがある。参照ラインゼロ（reference line zero）は、ＩＳＰに対して使用されることがある。複数の参照ラインイントラ予測（reference line intra prediction）は、無効にされることがある。
【0113】
水平スプリット（horizontal split）に対して、サブパーティションは、上部から下へ処理されることがある。垂直スプリット（vertical split）に対して、サブパーティションは、左から右へ処理されることがある。サブパーティションが予測されることがあり、残差が、予測されているサブパーティションに加えられて、例えば、再構成されたサブパーティションを生成してもよい。再構成されたサブパーティションからのサンプルは、次のサブパーティションを予測するのに使用されることがある。図７は、イントラサブパーティション（Intra sub-partitions；ＩＳＰ）における例示的な予測の図を示す。図７（ａ）～（ｃ）にて、水平に割られるサブパーティションが、処理されることがある。図７（ａ）は、４つのサブパーティションＡ、Ｂ、Ｃ、およびＤを含むＣＵを例示する。図７（ｂ）は、サブパーティションＡが予測され再構成されてもよく、再構成されたサブパーティションＡの下部の行における１つまたは複数のサンプルがサブパーティションＢを予測するのに使用されることがあることを例示する。図７（ｃ）は、サブパーティションＢが予測され再構成されてもよく、再構成されたサブパーティションＢの下部の行における１つまたは複数のサンプルがサブパーティションＣを予測するのに使用されることがあることを例示する。図７（ｂ）に例示されるように、サブパーティションＡ（例えば、最も上部のサブパーティション）は、ＣＵの上および左の参照サンプルを用いて予測されることがある。サブパーティションＡは、１つまたは複数のエントロピーデコード、逆量子化、および逆変換の後に取得される残差を加えることによって再構成されてもよい。再構成されたサブパーティションＡの下部の行における１つまたは複数のサンプルは、サブパーティションＢを予測するのに使用されることがあり、サブパーティションＢの再構成があとに続く。予測および再構成は、次のサブパーティションに対して繰り返されることがある。
【0114】
それぞれのＭＰＭリスト（例えば、サイズ６の別個のＭＰＭリスト）は、参照ラインゼロイントラ予測（reference line zero intra prediction）、複数の参照ラインイントラ予測、およびＩＳＰに対して維持されることがある。ＭＰＭリストは、使用されるイントラモードを示す（例えば、シグナリングする）のに維持されることがある。参照ラインゼロイントラ予測、複数の参照ラインイントラ予測、およびＩＳＰに対して利用されるＭＰＭリスト構成は、例えば、図８、図９、および図１０ａ～１０ｃに例示されるように、区別されてもよい。図８は、参照ラインゼロイントラ予測に対するＭＰＭリスト構成のための例示的なフローチャートである。図９は、複数の参照ラインイントラ予測に対するＭＰＭリスト構成のための例示的なフローチャートである。図１０ａ～１０ｃは、ＩＳＰに対するＭＰＭリスト構成のための例示的なフローチャートを例示する。ＭＰＭリスト構成（例えば、図８、図９、図１０ａ～１０ｃに例示されるような）は、リスト構成の間、隣接する左のＣＵ（「Ａ」により示される）のイントラモード、および／または、上のＣＵ（「Ｂ」により示される）のイントラモードを考慮してもよい。複数の条件（例えば、４つの条件）は、例えば、イントラモード「Ａ」および「Ｂ」を用いて試験されることがある。ＭＰＭリストは、条件が満たされるならば生成されることがある。例えば、各々満足する条件は、別個のＭＰＭリストに帰着することがある。表１は、ＭＰＭリスト構成（例えば、図８、図９、図１０ａ～１０ｃに示されるような３つのＭＰＭリスト構成）にて使用されることがある４つの条件と、対応する論理的条件（イントラモードＡおよびＢに関して）との例を例示する。
【0115】
【表1】
【0116】
図８、図９、および／または図１０ａ～１０ｃに例示されるように、ＭＰＭリストは、インデックス（例えば、０から５まで）と、関連しているイントラモードとを含むことがある。零により近いインデックスは、ＭＰＭリストの上部により近いことがある。例えば、図８に例示されるように、デフォルトの条件は、０番目のエレメントとしてイントラモード「Ａ」を含むＭＰＭリストを生じることがある。「Ａ」および「Ｂ」の最小および最大は、それぞれ、ｍｉｎＡＢおよびｍａｘＡＢにより示され、「％」は、モジュロ演算を示す。図１０ａ～１０ｃに例示されるように、例えばＩＳＰにて、スプリットの種類（例えば、水平スプリットまたは垂直スプリット）は、ＭＰＭ構成において考慮されることがある。
【0117】
図１１は、一体化したＭＰＭリスト構成のための例示的なフローチャートである。図１１は、複数のイントラ符号化ツール（例えば、参照ラインゼロイントラ予測、複数の参照ラインイントラ予測、およびＩＳＰ）に対する一体化したＭＰＭリスト構成を例示する。一体化したＭＰＭリストは、複数の参照ラインイントラ予測およびＩＳＰのために変更されることがある。複数の参照ラインイントラ予測の場合に、ＤＣモードおよびプラナーモード（planar mode）は、例えば、ＤＣおよびプラナーモードが複数の参照ラインイントラ予測に対して使用されないので、一体化したＭＰＭリストからスキップされることがある。ＩＳＰの場合に、ＤＣモードは、例えば、ＤＣモードがＩＳＰに対して使用されないので、一体化したＭＰＭリストからスキップされる、または一体化したＭＰＭリストにおいてアンギュラーモード（angular mode）によって置き換えることがある。
【0118】
ＩＳＰにて、サブパーティションは、ＩＳＰスプリットタイプに基づいて、上部から下部へ、または左から右へ予測され（例えば、連続的に予測され）、再構成されることがある。例えば、サブパーティションは、水平スプリットが使用されるとき、上部から下部へ予測され、再構成されることがある。サブパーティションは、垂直スプリットが使用されるとき、左から右へ予測され、再構成されることがある。サブパーティション（例えば、後続のサブパーティション）は、例えば、以前のサブパーティションが再構成されたとき、予測されることがある。いくつかの例にて、サブパーティションの予測は、隣接するサブパーティションまたは以前のサブパーティションの再構成とは無関係であり得る。待ち時間を、減らすことがある。
【0119】
ＭＰＭリスト構成処理（複数可）は、参照ラインゼロイントラ予測、マルチ参照ラインイントラ予測（multi reference line intra prediction）、およびＩＳＰに対応することがある。例にて、異なるイントラ符号化ツール（例えば、参照ラインゼロイントラ予測、マルチ参照ラインイントラ予測、およびＩＳＰ）に対するそれぞれのＭＰＭリスト構成処理が、一体化されることがある。一体化したＭＰＭリストは、複数の条件に基づくことがある。それぞれの条件を満たすと、ＭＰＭリストが、変わることがある。例えば、各条件は、異なるＭＰＭリストを生じることがある。一体化したＭＰＭリストが、構成されることがある。
【0120】
システム、方法、および手段は、例えば、ＩＳＰにおける待ち時間を減らすこと、および／またはＭＰＭリスト構成処理を簡素化することによってＩＳＰを実装するために開示される。いくつかの例にて、後続のサブパーティションは、以前の隣接するサブパーティションからの予測サンプルを用いて予測されることがある。いくつかの例にて、後続のサブパーティションは、以前の隣接するサブパーティションから予測されたサンプルまたは再構成されたサンプルを用いて予測されることがある。さらに、本明細書にて水平分割に関する１つまたは複数の例は、垂直分割に適用されることもある。垂直分割にて、関係のある行は、列と置き換えられてもよく、関係のある下部の行は、右の列と置き換えられてもよい。本明細書にて１つまたは複数の例は、待ち時間を減らすことがある。
【0121】
以前のサブパーティションの予測サンプルは、予測のための参照サンプルとして使用されることがある。ＩＳＰは、サブパーティションの予測および再構成を連続して行うことがある。いくつかの例にて、サブパーティションの予測は、隣接するサブパーティションから再構成されたサンプルに依存しないことがある。第１のサブパーティションは、ＣＵに接している上の参照行（reference row）および左の参照列（reference column）を用いて予測されることがある。第１のサブパーティションは、水平スプリットに対して、最も上部のサブパーティションであってもよい。第１のサブパーティションは、垂直スプリットに対して、最も左のサブパーティションであってもよい。予測は、残っているサブパーティションに対して行うことがある。
【0122】
ＣＵベース予測（CU-based prediction）は、例えば、サブパーティション、トランスフォームユニット（transform unit；ＴＵ）、またはプレディクションユニット（prediction unit；ＰＵ）を予測するのに行われることがある。例えば、ＮがＣＵにおけるサブパーティションの数を示すならば、ＣＵベース予測（CU-based prediction）において、予測は、次のように行われることがある。第１のＮ－１個のサブパーティションの各々に対して、（例えば、水平スプリットに対する）下部の行または（例えば、垂直スプリットに対する）右の列が、予測されることがある。（ａ）および（ｂ）を含む図１２は、サブパーティションＡ、Ｂ、およびＣの下部の行が、ＣＵに接している上および左の参照ラインにおけるサンプルを用いて予測されることがある場合の例示的なＣＵベース予測を例示する。図１２に例示されるように、ＣＵは、４つのサブパーティションＡ、Ｂ、Ｃ、およびＤに水平に割られることがある。例えば、第１の３つのサブパーティションＡ、Ｂ、およびＣの各々の下部の行は、図１２（ａ）および（ｂ）に例示されるように予測されることがある。今述べた行（または垂直スプリットの場合に列）は、ＣＵに接している上の参照行および左の参照列を用いて予測されることがある。今述べた行（または垂直スプリットの場合に列）は、ＣＵのイントラモードと同じ予測モードにより予測されることがある。予測された行（または列）は、隣接するサブパーティションを予測するのに使用されることがある。例えば、図１２（ｂ）に例示されるように、サブパーティションＢの予測された下部の行のサンプルは、サブパーティションＣを予測するのに使用されることがある。ＣＵのサブパーティション（例えば、Ｎ－１個のサブパーティション）の各々が、予測されることがある。
【0123】
再構成は、例えば、予測が完了すれば、サブパーティションベースに、またはＣＵ全体に行われてもよい。再構成がサブパーティションベースに行われるならば、残差は、サブパーティションベースに逆量子化および逆変換を適用することによって生成されることがある。再構成処理が、ＣＵ（例えば、ＣＵ全体）に行われるならば、残差は、ＣＵ全体に対して生成されることがある。ＣＵベース予測は、例えば、ＩＳＰに対して、待ち時間を減らすことがある。
【0124】
サブパーティションベース予測（sub-partition-based prediction）が行われることがある。サブパーティションの予測は、例えば、以前のサブパーティションからの予測サンプルを用いて連続的に行われることがある。図１３は、サブパーティションベース予測（sub-partition-based prediction）の例を例示する。図１３に例示されるように、ＣＵは、４つのサブパーティションＡ、Ｂ、Ｃ、およびＤに水平に割られることがある。図１３に例示されるように、第１のサブパーティションは、ＣＵに接している上の参照行および左の参照列を用いて予測されることがある。例にて、第１のサブパーティションは、最も上部のサブパーティションＡであり得る。図１３（ａ）に例示されるように、Ａの下部の行からの予測サンプルは、左の参照列とともに、サブパーティションＢを予測するのに使用されることがある。図１３（ｂ）を参照して、サブパーティションＢの下部の行の予測サンプル（例えば、左の参照列といっしょに）は、サブパーティションＣを予測するのに使用されることがある。処理は、最後のサブパーティションが予測されるまで、繰り返されることがある。図１３に例示されるようなサブパーティションベース予測は、垂直に割られるサブパーティションに行われてもよい。
【0125】
再構成は、例えば、予測が完了すれば、サブパーティションベースに、またはＣＵ全体に行われてもよい。再構成がサブパーティションベースに行われるならば、残差は、サブパーティションベースに逆量子化および逆変換を適用することによって生成されることがある。再構成処理が、ＣＵ（例えば、ＣＵ全体）に行われるならば、残差は、ＣＵ全体に対して生成されることがある。ＣＵベース予測は、例えば、ＩＳＰに対して、待ち時間を減らすことがある。
【0126】
図１４（ａ）～（ｃ）は、（ａ）ＩＳＰと、サブパーティションベース予測を用いる（ｂ）ＩＳＰと、複数のサブパーティションベース予測またはマルチサブパーティションベース予測を用いる（ｃ）ＩＳＰと、に対するパイプラインステージの例についての図である。図１４（ａ）および図１４（ｂ）は、サブパーティションＡおよびＢを有するＣＵを考慮するときに、ＩＳＰに対するパイプラインと、サブパーティションベース予測を利用することがあるＩＳＰに対するパイプラインとを例示する。図１４（ａ）および図１４（ｂ）は、予測と、逆量子化および逆変換と、再構成とのパイプラインのステージを例示する。図１４（ｃ）は、マルチサブパーティションイントラ予測に基づくＩＳＰ（例えば、最初のＩＳＰに対する）のパイプラインステージを例示する。サブパーティションＢの予測は、サブパーティションＡの再構成に依存しなくてもよい。待ち時間の減少は、例えば、図１４（ａ）～（ｃ）に例示されるように達成されることがある。
【0127】
ハイブリッド予測（hybrid prediction）は、例えば、サブパーティション、ＴＵ、またはＰＵを予測するのに行われることがある。サブパーティションは、隣接するサブパーティションから予測されたサンプル、または隣接するサブパーティションから再構成されたサンプルを利用して予測されることがある。予測されるサンプルに対して、ＣＵベース予測またはサブパーティションベース予測が、利用されることがある。図１５は、サブパーティションが、隣接するサブパーティションからの再構成サンプルまたは予測サンプルを用いて予測され得る場合のハイブリッド予測の例を例示する。図１５に例示されるように、サブパーティションＡの下部の行は、例えば、本明細書に説明されているＣＵベース予測を用いて予測されることがある。サブパーティションＡ、Ｂ、Ｃ、およびＤの残差は、例えば、逆量子化および逆変換の操作を利用することによって決定されることがある。サブパーティションＡおよびＢは、例えば、残差が取得された後に予測されることがある。サブパーティションＡは、ＣＵに接している上の参照行および左の参照列を用いて予測されることがある。サブパーティションＢは、サブパーティションＡの下部の予測された行と、ＣＵの左の参照列とを用いて予測されることがある。サブパーティションＡおよびサブパーティションＢが、再構成されることがある。サブパーティションＢの下部の再構成された行と左の参照列とは、サブパーティションＣを予測するのに使用されることがある。サブパーティションＣの下部の予測された行と、左の参照列とは、例えば、本明細書に説明されているサブパーティションベース予測を用いて、サブパーティションＤを予測するのに使用されることがある。
【0128】
最後のサブパーティションは、例えば、本明細書に説明されているように、接しているサブパーティションから再構成されたサンプルから予測されることがある。例えば、最後のサブパーティションは、参照ラインの１つから最も離れていてもよい。水平スプリットにて、下部のサブパーティションは、上の参照列から最も離れていてもよい。最後のサブパーティションの予測の正確度が、向上することがある。
【0129】
ハイブリッド予測は、ＣＵを予測するために使用されてもよい。例えば、ＣＵのいくつかのサブパーティション（複数可）は、別のサブパーティション（複数可）の再構成されたサンプルに基づいて予測されてもよく、ＣＵのいくつかのサブパーティション（複数可）は、他のサブパーティション（複数可）の予測サンプルに基づいて予測されてもよい。図１６は、ハイブリッド予測の例を例示する。図１６にて、サブパーティションＤは、サブパーティションＣの下部の行の再構成されたサンプルから予測されることがある。サブパーティションベース予測および／またはＣＵベース予測が使用されることがある。図１６（ａ）に例示されるように、サブパーティションＣは、サブパーティションベース予測を利用することによって、サブパーティションＢの下部の行の予測サンプルから予測されることがある。図１６（ｂ）に例示されるように、サブパーティションＣは、ＣＵベース予測を利用することによって、サブパーティションＢの下部の行の予測サンプルから予測されることがある。
【0130】
予測タイプ（例えば、ＣＵベース予測、サブパーティションベース予測、またはハイブリッド予測）は、ＣＵサイズに基づいて選択されることがある。例えば、より大きいＣＵ（例えば、１６×１６ピクセルよりも大きいサイズのＣＵ）に対して、ハイブリッド予測が使用されることがある。より小さいＣＵ（例えば、１６×１６ピクセルまでのサイズのＣＵ）に対して、サブパーティションベース予測が使用されることがある。
【0131】
予測タイプは、イントラモード基づいて選択されることがある。イントラアンギュラーモード（intra angular mode）に対して、サブパーティションベース予測は、ノンアンギュラーモード（non-angular mode）に対して、ＣＵベース予測が使用されることがある間、使用されることがある。
【0132】
本明細書に説明される１つまたは複数の予測タイプは、サブパーティションの予測および再構成が、連続して（例えば、上部から下部へ、または左から右へ）行われる通常のＩＳＰ予測により使用されることがある。本明細書に説明されているサブパーティションベース予測は、相対的に小さいＣＵ、例えば、８×４ピクセルまたは４×８ピクセルのサイズのＣＵに適用されてもよく、通常のＩＳＰは、より大きいＣＵ（例えば、８×４ピクセルまたは４×８ピクセルよりも大きいサイズのＣＵ）に対して使用されてもよい。ときには、サブパーティションベース予測は、異なるＣＵサイズ（例えば、小さいＣＵおよび大きいＣＵ）に適用されることがある。例にて、通常のＩＳＰは、相対的に小さいＣＵ、例えば、８×４ピクセルおよび４×８ピクセルのサイズのＣＵに対しては無効にされることがある一方、ＩＳＰは、より大きいＣＵ（例えば、８×４ピクセルおよび４×８ピクセルよりも大きいサイズのＣＵ）に適用されることある。
【0133】
例にて、サブパーティションを予測するために使用されるサンプルは、適応的に選択されることがある。例えば、選択されるサンプルは、再構成されたサンプル、ＣＵベース予測から予測されたサンプル、サブパーティションベース予測から予測されたサンプルであり得る。インデックスは、ビットストリームにおいてビデオデコードデバイスにシグナリングされることがある。インデックスは、ＣＵごとにシグナリングされることがある。インデックスは、ビデオエンコードデバイスによって使用されるサンプルの選択を示すことがある。表２は、例えば、４つのサブパーティションを有するＣＵを考慮するとき、アダプティブスキーム（adaptive scheme）にて利用可能な選択の例を例示する。表２に例示されるように、インデックス２は、サブパーティションＢに対してＣＵベース予測、サブパーティションＣに対してサブパーティションベース予測、およびサブパーティションＤに対して再構成サンプルベースの予測（例えば、ＩＳＰ）を使用する。表２に例示されるように、アダプティブスキームは、ＩＳＰを使用するサブパーティションＡと、ＣＵベース予測を使用するサブパーティションＢとを制限することがある。表２にさらに例示されるように、アダプティブスキームにおける選択の数は、列挙されている選択のサブセットに制限されることがある。インデックスに対するシグナリングオーバーヘッドを、減らすことがある。例えば、選択の数は、表２に示されるように、インデックス０、１、２、および４に対応する４つの選択に制限されることがある。最後のサブパーティションＤに対する予測の正確度は、今述べた制限された選択により向上することがある。
【0134】
【表2】
【0135】
サブパーティションのイントラ予測は、カレントブロックに隣接する参照サンプル、例えば、ＣＵの隣接する参照サンプルに基づくことがある。図１７は、複数のサブパーティションベース予測またはマルチサブパーティションベースイントラ予測（multi-sub-partition based intra-prediction）の例を例示する。２つ以上のサブパーティションのイントラ予測が、並列に行われることがある。図１７に例示されるように、２つ以上のサブパーティションのイントラ予測は、それぞれのサブパーティションに関連付けられた、ＣＵの隣接する参照サンプルから、同時に（例えば、すべていっしょに）行われることがある。ＩＳＰサブパーティションの各々についての再構成の待ち時間を、減らすことがある。連続した複数のＩＳＰサブパーティションの再構成は、並列に行われることがある。図１４（ｃ）は、マルチサブパーティションイントラ予測に基づくＩＳＰ（例えば、最初のＩＳＰに対する）のパイプラインステージを例示する。
【0136】
イントラ予測されるＰＵは、トランスフォームユニット（transform unit；ＴＵ）を含むことがある。ＰＵおよびＴＵは、同一のサイズのであり得る。いくつかの例にて、１つのＰＵは、２つ以上のＴＵを含むことがある。ＴＵは、サブパーティションを含むことがある。複数のＴＵをより大きいサイズのＰＵ（例えば、個々のＴＵよりも大きい）にマージすることによって、複数のＴＵに対するＰＵイントラ予測は、同時に行われることがある。ＴＵのデコード／再構成は、並列に行われることがある。ＴＵに対するデコードおよび／または処理の待ち時間を、減らすことがある。
【0137】
デバイスは、ＣＵベースのイントラ予測、サブパーティションベースのイントラ予測、複数のサブパーティションベースのイントラ予測のうちの１つまたは複数を行うことがある。図１８は、水平スプリットのＣＵおよび垂直スプリットのＣＵのＩＳＰサブパーティションについての種々の例を例示する。図１８に例示されるように、ＩＳＰは、種々のサイズのＣＵに適用されることがある。図１８は、例えば、４×８、４×Ｎ、８×４、および８×Ｎの種々の垂直スプリットのＣＵおよび水平スプリットのＣＵの例を与える。デバイスは、サブパーティションの種類（例えば、ＩＳＰの種類）が水平スプリットか垂直スプリットかのいずれかであるインディケーションの指示を受信することがある。デバイスは、例えば、本明細書における例のうちの１つまたは複数に従って、垂直スプリットまたは水平スプリットに基づいて予測を行ってもよい。サブパーティションの種類が水平スプリットであるというインディケーションに基づいて、デバイスは、水平方向にサブパーティションを行うことがある。サブパーティションの種類が垂直スプリットであるというインディケーションに基づいて、デバイスは、垂直方向にサブパーティションを行うことがある。例にて、デバイスは、ＩＳＰのタイプに基づいて予測ブロックを予測することがある。
【0138】
符号化ブロックに対するＰＵは、予測ブロック幅を有してもよい。予測ブロック幅は、ＰＵの１つの側からもう一方の側まで測定されたサンプルの個数を引用することがある。最小予測ブロック幅は、サブパーティションの予測に関連して使用されることがある。１つのＰＵは、図１９Ｃおよび１９Ｄに例示されるように、垂直に割られたまたは水平に割られた２つ以上のサブパーティション（例えば、ＴＵサブパーティション）を含むことがある。予測ブロック幅は、例えば、図１９Ｃおよび１９Ｄに例示されるように、サブパーティション幅またはサブパーティション幅の倍数であり得る。サブパーティション幅および最小予測ブロック幅は、予測に対して、予測ブロックを決定するのに使用されることがある。例えば、サブパーティションの種類が垂直スプリットであるとき、複数のサブパーティションを有する予測ブロックは、サブパーティション幅が最小予測ブロック幅未満であるとき、予測のために使用されることがある。図１９Ｃおよび１９Ｄに例示されるように、最小予測ブロック幅は、４サンプルであってもよい。予測ブロック幅は、サブパーティション幅が４サンプル未満のとき、４サンプルであってもよい。サブパーティション幅が最小予測ブロック幅以上であるとき、サブパーティションを有する予測ブロックは、予測のために使用されることがある。予測ブロック幅は、サブパーティション幅であってもよい。
【0139】
図１９Ａは、図１８に例示されるような１×Ｎ（Ｎ≧１６）および２×Ｎ（Ｎ≧８）のサブパーティションが、取り除かれ４×Ｎ（例えば、Ｎ＞８）のサブパーティションと置き換えられることがある場合の例を例示する。１×Ｎのサブパーティションは、１サンプルの幅およびＮサンプルの高さのサブパーティションを表すことがある。２×Ｎのサブパーティションは、２サンプルの幅およびＮサンプルの高さのサブパーティションを表すことがある。４×Ｎのサブパーティションは、４サンプルの幅およびＮサンプルの高さのサブパーティションを表すことがある。
【0140】
４×Ｎのサブパーティションに対して、サブパーティション幅は、４サンプルである。４×Ｎのサブパーティションに対して、サブパーティション高は、Ｎサンプルである。サブパーティション幅および／またはサブパーティション高は、イントラ予測に対してカレントブロックをサブパーティションするために使用されることがある。カレントブロックに対するサブパーティション幅は、図１８に示されるように、カレントブロックに対するＩＳＰタイプが垂直スプリットか水平スプリットかのいずれかであることに少なくとも部分的に基づいて決定されることがある。
【0141】
最小予測ブロック幅は、４サンプルであり得る。本明細書に説明されるように、ＰＵは、１つまたは複数の水平にまたは垂直に割られたサブパーティションを含むことがある。ＰＵは、例えば、１×Ｎ（Ｎ≧１６）のサブパーティションおよび２×Ｎ（Ｎ≧８）のサブパーティションが４×Ｎのサブパーティションと置き換えられるので、１つまたは複数の４×Ｎのサブパーティションを含むことがある。複数のサブパーティションベースのイントラ予測を用いるＩＳＰは、図１９Ａに示される例に関連して行われることがある。最小予測ブロック幅は、それぞれのサブパーティションに対応するＰＵを決定するのに使用されることがある。
【0142】
予測ブロックの予測は、ＣＵの隣接サンプル、および／または再構成されたサブパーティションに基づくことがある。図１９Ａに例示されるように、１×Ｎ（Ｎ≧１６）のサブパーティションおよび／または２×Ｎ（Ｎ≧８）のサブパーティションを４×Ｎのサブパーティションと置き換えることは、４×８、４×Ｎ（Ｎ≧１６）のＣＵに対して、垂直スプリットのＩＳＰがないことに帰着することがある。サブパーティションの予測は、４サンプル以上の幅であるプレディクションユニットに基づいてもよい。上記の４×８または４×Ｎ（Ｎ≧１６）のＣＵにおける予測ブロックの予測は、ＣＵの隣接サンプルに基づき、例えば、再構成されたサブパーティションに基づかないことがある。１×Ｎ（Ｎ≧１６）のサブパーティションおよび２×Ｎ（Ｎ≧８）のサブパーティションを４×Ｎのサブパーティションと置き換えることは、肉太のおよび下線のある書体によって強調されている８×Ｎ（Ｎ≧８）のＣＵに対して２つの４×Ｎ垂直スプリットのサブパーティションに帰着することがある。上記の８×Ｎ（Ｎ≧８）のＣＵにおける予測ブロックの予測は、ＣＵの隣接サンプルおよび再構成されたサブパーティションに基づくことがある。
【0143】
ＰＵは、あるＣＵサイズに対して、複数のＴＵサブパーティションを含むことがある。４×８のＣＵは、４サンプルの幅および８サンプルの高さのＣＵまたは符号化ブロックを表すことがある。４×ＮのＣＵは、４サンプルの幅およびＮサンプルの高さのＣＵまたは符号化ブロックを表すことがある。ＰＵは、例えば、４×８、４×Ｎ、８×４、および８×ＮのＣＵサイズに対して、複数のＴＵサブパーティションを含むことがある。
【0144】
本明細書における１つまたは複数の例にて、ＣＵおよび符号化ブロックが、交換可能に使用されることがあり、ＰＵおよび予測ブロックが、交換可能に使用されることがあり、ＴＵおよび変換ブロックが、交換可能に使用されることがある。
【0145】
例にて、デバイスは、ＩＳＰがカレントブロックに対して有効にされることを決定することがある。デバイスは、カレントブロックに対してサブパーティション幅を決定することがある。カレントブロックにおけるサブパーティションに対して、デバイスは、サブパーティション幅および最小予測ブロック幅に基づいて、対応する予測ブロックを決定してもよい。デバイスは、予測ブロックに隣接する参照サンプルを用いて、予測ブロックを予測してもよい。例えば、参照サンプルは、ＣＵの隣接する参照サンプル、および／または再構成されたサブパーティションからのサンプルを含むことがある。
【0146】
参照サンプルは、ＣＵ、ＰＵ、またはＴＵに隣接することがある。例えば、ＰＵに隣接する参照サンプルは、ＰＵと隣り合う、またはＰＵから空間的に分離している参照サンプルを含むことがある。ＰＵに隣接する参照サンプルは、隣接するサブパーティションにある参照サンプルを含むことがある。ＰＵに隣接する参照サンプルは、隣接するＣＵ、ＰＵ、またはＴＵにある参照サンプルを含むことがある。隣接するサブパーティションは、ＰＵと隣り合う、またはＰＵから空間的に分離していることがある。
【0147】
Ｎ×２（Ｎ≧８）のサブパーティションが、取り除かれ、Ｎ×４のサブパーティションと置き換えられることがある。図１９Ｂは、例えば、図１９Ａに例示されるような１×Ｎ（Ｎ≧１６）のサブパーティションおよび２×Ｎ（Ｎ≧８）のサブパーティションを４×Ｎのサブパーティションと置き換えることに加えて、図１８に例示されるようなＮ×２（Ｎ≧８）のサブパーティションが、取り除かれ、Ｎ×４のサブパーティションと置き換えられることがある例を例示する。図１９Ｂに例示されるように、例えば、４×８、４×Ｎ（Ｎ≧１６）のＣＵに対して垂直スプリットのＩＳＰがないことに加えて、８×４のＣＵに適用されることがある水平スプリットのＩＳＰがない。２つのＮ×４水平スプリットのサブパーティションは、肉太のおよび下線のある書体によって強調されているＮ×８（Ｎ≧８）のＣＵに対して適用されることがある。複数のサブパーティションベースのイントラ予測を用いるＩＳＰは、図１９Ｂに示される例に関連して行われることがある。
【0148】
ＰＵは、３２以上のサンプルを含むことがある。図１９Ｃは、例えば、図１９Ａに例示されるような１×Ｎ（Ｎ≧１６）のサブパーティションおよび２×Ｎ（Ｎ≧８）のサブパーティションを４×Ｎのサブパーティションと置き換えることに加えて、ＰＵが３２のサンプルを含むことがある例を例示する。ＰＵごとに１６サンプルからＰＵごとに３２サンプルへの今述べた変更は、例えば、イントラ予測の最小ＰＵサイズを強制することによって達成されることがある。例にて、最小ＰＵサイズは、図１９Ｃにて肉太のおよび下線のある書体によって強調されている４×８または８×４のＰＵサイズを含むことがある。図１９Ｃに示されるように、最小サイズのＰＵ（例えば、４×８ＰＵまたは８×４ＰＵ）は、１つの同一ＰＵサイズのＴＵサブパーティション、または２つのハーフＰＵサイズ（例えば、４×４）のＴＵサブパーティションを含むことがある。複数のサブパーティションベースのイントラ予測を用いるＩＳＰは、図１９Ｃに示される例に関連して行われることがある。本明細書に説明されているマルチサブパーティション予測（Multi-sub-partition prediction）は、例えば、ＰＵが３２以上のサンプルを含むことがあるときに行われることがある。
【0149】
図１９Ｄは、図１９Ａ、１９Ｂ、および１９Ｃに例示される例が同時に適用されることがある場合の例を例示する。例にて、１×Ｎ、２×Ｎ、Ｎ×２のサブパーティションの除去は、例えば、ＰＵサイクルごとに３２サンプルのＩＳＰの最悪な場合のスループットといっしょに、４×８または８×４の最小ＰＵサイズのエンフォースメントにより同時に適用されることがある。複数のサブパーティションベースのイントラ予測を用いるＩＳＰは、図１９Ｄに示される例に関連して行われることがある。
【0150】
システム、方法、および手段は、ＭＰＭリスト構成のために提供されることがある。図２０は、一体化したＭＰＭリスト生成／構成の例を例示する。一体化したＭＰＭリスト構成の例にて、複数の条件（例えば、表１に列挙された４つの条件）が試験されて、一体化したＭＰＭリストを決定することがある。例えば、表１に列挙されている条件１および３は、単一の条件として組み合わされることがある。表３は、一体化したＭＰＭリスト構成に対する条件の例を例示する。表３に例示されるように、単一の条件、例えば、条件（ｂ）は、イントラモードＡかイントラモードＢかのいずれかがアンギュラーモードであるかどうかを検査するのに利用されることがある。
【0151】
【表3】
【0152】
例にて、表３に列挙されている条件（例えば、条件（ｂ））を満たすと生成されるＭＰＭリストは、図１１に例示されるような、表１に列挙されている条件（例えば、条件３）を満たすと生成されるＭＰＭリストと同じであってもよい。例示的な一体化したＭＰＭリスト構成が、図２０に例示される。
【図1A】
【図1B】
【図1C】
【図1D】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】
【図8】
【図9】
【図10a】
【図10b】
【図10c】
【図11】
【図12】
【図13】
【図14(a)】
【図14(b)】
【図14(c)】
【図15】
【図16】
【図17】
【図18】
【図19A】
【図19B】
【図19C】
【図19D】
【図20】
【手続補正書】
【提出日】2021-11-10
【手続補正1】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項1】
イントラサブパーティション（ＩＳＰ）がカレントブロックに対して有効にされることを決定し、前記カレントブロックに対してサブパーティション幅を決定し、
前記カレントブロックにおけるサブパーティションに対して、前記サブパーティション幅および最小予測ブロック幅に基づいて、対応する予測ブロックを決定し、
前記予測ブロックの参照サンプルを決定し、
前記参照サンプルを用いて前記予測ブロックを予測する
ように構成されたプロセッサー
を備えたことを特徴とする装置。
【請求項2】
前記最小予測ブロック幅は、４サンプルであることを特徴とする請求項１に記載の装置。
【請求項3】
カレントブロック幅が４サンプルでありカレントブロック高が８サンプル以上であるとき、または、前記カレントブロック幅が８サンプルであり前記カレントブロック高が８サンプル以上であるとき、前記予測ブロックは、複数の変換ブロックサブパーティションを含むことを特徴とする請求項１に記載の装置。
【請求項4】
前記カレントブロックが垂直に割られカレントブロック幅が４サンプルでありカレントブロック高が８サンプル以上であるとき、前記予測ブロックは、前記カレントブロックの隣接サンプルを用いて予測されることを特徴とする請求項１に記載の装置。
【請求項5】
前記予測ブロックは、前記カレントブロックの隣接サンプルと、前記カレントブロックにおける再構成されているサブパーティションからのサンプルとを用いて予測されることを特徴とする請求項１に記載の装置。
【請求項6】
カレントブロック幅が８サンプルでありカレントブロック高が８サンプル以上であるとき、前記予測ブロックは、前記カレントブロックの隣接サンプルと、前記カレントブロックにおける再構成されているサブパーティションからのサンプルとを用いて予測されることを特徴とする請求項１に記載の装置。
【請求項7】
前記カレントブロックに対する前記サブパーティション幅は、前記カレントブロックに対する前記ＩＳＰのタイプが垂直スプリットタイプまたは水平スプリットタイプであるかどうかに少なくとも部分的に基づいて決定されることを特徴とする請求項１に記載の装置。
【請求項8】
前記予測ブロックは、伝送ブロックを含み、前記伝送ブロックは、前記サブパーティションを含み、前記伝送ブロックの幅は、前記サブパーティションの幅であることを特徴とする請求項１に記載の装置。
【請求項9】
イントラサブパーティション（ＩＳＰ）がカレントブロックに対して有効にされることを決定することと、前記カレントブロックに対してサブパーティション幅を決定することと、
前記カレントブロックにおけるサブパーティションに対して、前記サブパーティション幅および最小予測ブロック幅に基づいて、対応する予測ブロックを決定することと、
参照サンプルを決定することと、
前記参照サンプルを用いて前記予測ブロックを予測することと
を備えることを特徴とする方法。
【請求項10】
前記最小予測ブロック幅は、４サンプルであることを特徴とする請求項９に記載の方法。
【請求項11】
カレントブロック幅が４サンプルでありカレントブロック高が８サンプル以上であるとき、または、前記カレントブロック幅が８サンプルであり前記カレントブロック高が８サンプル以上であるとき、前記予測ブロックは、複数の変換ブロックサブパーティションを含むことを特徴とする請求項９に記載の方法。
【請求項12】
前記カレントブロックが垂直に割られカレントブロック幅が４サンプルでありカレントブロック高が８サンプル以上であるとき、前記予測ブロックは、前記カレントブロックの隣接サンプルを用いて予測されることを特徴とする請求項９に記載の方法。
【請求項13】
前記装置は、画像の一部をデコードするためのデコードデバイス、または画像の一部をエンコードするためのエンコードデバイスの少なくとも１つを備えることを特徴とする請求項１ないし８のいずれか一項に記載の装置。
【請求項14】
前記方法は、デコーダーまたはエンコーダーによって行われることを特徴とする請求項９ないし１２のいずれか一項に記載の方法。
【請求項15】
１つまたは複数のプロセッサーに、請求項９ないし１２のいずれか一項に記載の方法を行わせるための命令を含むことを特徴とするコンピューター読取り可能媒体。
【請求項16】
請求項１ないし８のいずれか一項に係る装置と、（ｉ）信号を受信するように構成されたアンテナであって、前記信号は、画像を表すデータを含む、アンテナ、（ｉｉ）前記画像を表す前記データを含む周波数の帯域に、前記受信した信号を制限するように構成されたバンドリミッター、または（ｉｉｉ）前記画像を表示するように構成されたディスプレイのうちの少なくとも１つと
を備えたことを特徴とするデバイス。
【国際調査報告】