▶ インターデジタル ブイシー ホールディングス フランスの特許一覧
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】公表特許公報(A)
(11)【公表番号】
(43)【公表日】2023-03-01
(54)【発明の名称】空間予測子走査順序
(51)【国際特許分類】
H04N 19/52 20140101AFI20230221BHJP
【ＦＩ】
H04N19/52
【審査請求】未請求
【予備審査請求】未請求
(21)【出願番号】P 2022537087
(86)(22)【出願日】2020-12-17
(85)【翻訳文提出日】2022-06-16
(86)【国際出願番号】 EP2020086692
(87)【国際公開番号】W WO2021130097
(87)【国際公開日】2021-07-01
(31)【優先権主張番号】19306770.9
(32)【優先日】2019-12-24
(33)【優先権主張国・地域又は機関】EP
(81)【指定国・地域】
【公序良俗違反の表示】
（特許庁注：以下のものは登録商標）
１．ＨＤＭＩ
(71)【出願人】
【識別番号】521355902
【氏名又は名称】インターデジタル ブイシー ホールディングス フランス
(74)【代理人】
【識別番号】100079108
【弁理士】
【氏名又は名称】稲葉 良幸
(74)【代理人】
【識別番号】100109346
【弁理士】
【氏名又は名称】大貫 敏史
(74)【代理人】
【識別番号】100117189
【弁理士】
【氏名又は名称】江口 昭彦
(74)【代理人】
【識別番号】100134120
【弁理士】
【氏名又は名称】内藤 和彦
(74)【代理人】
【識別番号】100108213
【弁理士】
【氏名又は名称】阿部 豊隆
(72)【発明者】
【氏名】ロバート、アントワーヌ
(72)【発明者】
【氏名】ガルピン、フランク
(72)【発明者】
【氏名】レリーネク、ファブリス
(72)【発明者】
【氏名】ラト、ガガン
【テーマコード（参考）】
5C159
【Ｆターム（参考）】
5C159LC09
5C159MA04
5C159MA05
5C159MA21
5C159MC11
5C159ME01
5C159NN11
5C159RC12
5C159RC38
5C159UA02
5C159UA05
5C159UA16
5C159UA22
(57)【要約】
インターモードにおいてコーディングユニットを符号化するために、動きベクトル予測子（ＭＶＰ）リストを使用して、動き情報を信号伝達する複数のインターモードが存在する。異なるコーディングモードに対するＭＶＰリストは、空間予測子を含む。一実施形態では、ＭＶＰリストを使用する全てのコーディングモードについて、上部空間予測子が、左側空間予測子の前に、最初に動きベクトル予測子リストに追加される。別の実施形態では、コーディングモードのサブセットが、左側空間予測子の前に上部空間予測子を追加し、コーディングモードの別のサブセットが、上部空間予測子の前に左側空間予測子を追加する。例えば、全てのマージモードは、最初に上部空間予測子を追加し、全てのＡＭＶＰモードは、最初に左側空間予測子を追加する。別の例では、全ての非サブブロックモードは、最初に上部空間予測子を追加し、全てのサブブロックモードは、最初に左側空間予測子を追加する。
【選択図】図１２
【特許請求の範囲】
【請求項1】
ビデオ符号化のための方法であって、ビデオシーケンス内のピクチャのブロックにアクセスすることと、
前記ブロックのための動きベクトル予測子のリストを生成することであって、
前記ブロックが、複数のコーディングモードのうちの１つを使用することによって符号化され、
前記動きベクトル予測子のリストが、複数の空間予測子を含み、
前記複数のコーディングモードの各々について、前記リスト内の前記第１の空間予測子が、上部近傍ブロックからのものであり、前記第１の空間予測子に続く前記第２の空間予測子が、左側近傍ブロックからのものである、生成することと、
前記動きベクトル予測子の前記リストに基づいて、前記ブロックと関連付けられた動きベクトルを符号化することと、を含む、方法。
【請求項2】
ビデオ復号化のための方法であって、ビデオシーケンス内のピクチャのブロックのための動きベクトル予測子のリストを生成することであって、
前記ブロックが、複数のコーディングモードのうちの１つを使用することによって復号化され、
前記動きベクトル予測子のリストが、複数の空間予測子を含み、
前記複数のコーディングモードの各々について、前記リスト内の前記第１の空間予測子が、上部近傍ブロックからのものであり、前記第１の空間予測子に続く前記第２の空間予測子が、左側近傍ブロックからのものである、生成することと、
前記動きベクトル予測子のリストに基づいて、前記ブロックと関連付けられた動きベクトルを復号化することと、を含む、方法。
【請求項3】
前記ブロックが、コーディングユニットである、請求項１又は２に記載の方法。
【請求項4】
前記複数のコーディングモードが、１つ以上のマージモード及び１つ以上のＡＭＶＰモードを含む、請求項１～３のいずれか一項に記載の方法。
【請求項5】
前記複数のコーディングモードが、１つ以上のサブブロックモード及び１つ以上の非サブブロックモードを含む、請求項１～４のいずれか一項に記載の方法。
【請求項6】
前記符号化又は復号化が、ビデオコーディング規格に従い、前記複数のコーディングモードが、前記ビデオコーディング規格に従って、動きベクトル予測リストを使用する全てのコーディングモードに対応する、請求項１～５のいずれか一項に記載の方法。
【請求項7】
別の複数のコーディングモードが、前記ブロックによって使用されるために利用可能であり、前記複数のコーディングモードの各モードが、マージモードであり、前記別の複数のコーディングモードの各モードが、ＡＭＶＰモードであり、前記別の複数のコーディングモードにおける各モードについて、前記リスト内の前記第１の空間予測子が、前記左側近傍ブロックからのものであり、前記第１の空間予測子に続く前記第２の空間予測子が、前記上部近傍ブロックからのものである、請求項１～６のいずれか一項に記載の方法。
【請求項8】
別の複数のコーディングモードが、前記ブロックによって使用されるために利用可能であり、前記複数のコーディングモードの各モードが、ＡＭＶＰモードであり、前記別の複数のコーディングモードの各モードが、マージモードであり、前記別の複数のコーディングモードにおける各モードについて、前記リスト内の前記第１の空間予測子が、前記左側近傍ブロックからのものであり、前記第１の空間予測子に続く前記第２の空間予測子が、前記上部近傍ブロックからのものである、請求項１～６のいずれか一項に記載の方法。
【請求項9】
前記マージモードが、通常のマージモード、ＭＭＶＤモード、三角形区画化マージモード、イントラブロックコピーモード、及びサブブロックマージモードのうちの少なくとも１つを含む、請求項７又は８に記載の方法。
【請求項10】
前記ＡＭＶＰモードが、通常のＡＭＶＰモード及びアフィンＡＭＶＰモードを含む、請求項７～９のいずれか一項に記載の方法。
【請求項11】
別の複数のコーディングモードが、前記ブロックによって使用されるために利用可能であり、前記複数のコーディングモードの各モードが、サブブロックモードであり、前記別の複数のコーディングモードの各モードが、非サブブロックモードであり、前記別の複数のコーディングモードにおける各モードについて、前記リスト内の前記第１の空間予測子が、前記左側近傍ブロックからのものであり、前記第１の空間予測子に続く前記第２の空間予測子が、前記上部近傍ブロックからのものである、請求項１～６のいずれか一項に記載の方法。
【請求項12】
別の複数のコーディングモードが、前記ブロックによって使用されるために利用可能であり、前記複数のコーディングモードの各モードが、非サブブロックモードであり、前記別の複数のコーディングモードの各モードが、サブブロックモードであり、前記複数のコーディングモードにおける各モードについて、前記リスト内の前記第１の空間予測子が、前記左側近傍ブロックからのものであり、前記第１の空間予測子に続く前記第２の空間予測子が、前記上部近傍ブロックからのものである、請求項１～６のいずれか一項に記載の方法。
【請求項13】
前記非サブブロックモードが、通常のマージモード、ＭＭＶＤモード、三角形区画化マージモード、イントラブロックコピーモード、及び通常のＡＭＶＰモードのうちの少なくとも１つを含む、請求項１１又は１２に記載の方法。
【請求項14】
前記１つ以上のサブブロックモードが、サブブロックマージモード及びアフィンＡＭＶＰモードを含む、請求項１１～１３のいずれか一項に記載の方法。
【請求項15】
請求項１及び３～１４のいずれか一項に記載の方法を使用して符号化されたビットストリームを含むようにフォーマットされた信号。
【請求項16】
プロセッサと、前記プロセッサ上で実行されるときに、請求項１～１４のいずれか一項に記載のビデオ符号化又は復号化のための方法を実行するために動作可能な、命令を記憶する、非一時的コンピュータ可読記憶媒体と、を備える、装置。【発明の詳細な説明】
【技術分野】
【0001】
本実施形態は、概して、ビデオの符号化又は復号化のための方法及び装置、より具体的には、予測子リスト内の動きベクトル予測子を調整するための方法及び装置に関する。
【背景技術】
【0002】
高い圧縮効率を実現するために、画像及びビデオのコーディング方式は、通常、ビデオコンテンツ内の空間冗長性及び時間冗長性を活用するために予測及び変換を採用している。概して、イントラピクチャ又はインターピクチャ相関を利用するために、イントラ予測又はインター予測が使用され、次いで、予測誤差又は予測残差と呼ばれることが多い、原ブロックと予測ブロックとの間の差が、変換、量子化、及びエントロピコード化される。ビデオを再構成するには、エントロピコーディング、量子化、変換、及び予測に対応する逆の処理によって、圧縮データを復号化する。
【発明の概要】
【0003】
一実施形態によれば、ビデオ復号化の方法が提供され、ビデオシーケンス内のピクチャのブロックに関する動きベクトル予測子のリストを生成することであって、当該ブロックが、複数のコーディングモードのうちの１つを使用することによって復号化され、当該動きベクトル予測子のリストが、複数の空間予測子を含み、当該複数のコーディングモードの各々に関して、当該リスト内の第１の空間予測子が、上部近傍ブロックからのものであり、第１の空間予測子に続く第２の空間予測子が、左側近傍ブロックからのものである、生成することと、当該動きベクトル予測子のリストに基づいて、当該ブロックと関連付けられた動きベクトルを復号化することと、を含む。
【0004】
別の実施形態によれば、ビデオ符号化の方法が提供され、ビデオシーケンス内のピクチャのブロックにアクセスすることと、当該ブロックのための動きベクトル予測子のリストを生成することであって、当該ブロックが、複数のコーディングモードのうちの１つを使用することによって符号化され、当該動きベクトル予測子のリストが、複数の空間予測子を含み、当該複数のコーディングモードの各々に関して、当該リスト内の第１の空間予測子が、上部近傍ブロックからのものであり、第１の空間予測子に続く第２の空間予測子が、左側近傍ブロックからのものである、生成することと、当該動きベクトル予測子のリストに基づいて、当該ブロックと関連付けられた動きベクトルを符号化することと、を含む。
【0005】
別の実施形態によれば、ビデオ復号化の方法が提供され、当該ブロックのための動きベクトル予測子のリストを生成することであって、当該ブロックが、複数のコーディングモードのうちの１つを使用することによって復号化され、当該動きベクトル予測子のリストが、複数の空間予測子を含み、当該複数のコーディングモード内の１つ以上のマージモードの各々に関して、当該リスト内の第１の空間予測子が、上部の近傍ブロックからのものであり、第１の空間予測子に続く第２の空間予測子が、左側近傍ブロックからのものであり、当該複数のコーディングモード内の１つ以上のＡＭＶＰモードの各々に関して、当該リスト内の第１の空間予測子は、左側近傍ブロックからのものであり、第１の空間予測子に続く第２の空間予測子が、上部の近傍ブロックからのものである、生成することと、当該動きベクトル予測子のリストに基づいて、当該ブロックと関連付けられた動きベクトルを復号化することと、を含む。
【0006】
別の実施形態によれば、ビデオ符号化の方法が提供され、ビデオシーケンス内のピクチャのブロックにアクセスすることと、当該ブロックのための動きベクトル予測子のリストを生成することであって、当該ブロックが、複数のコーディングモードのうちの１つを使用することによって符号化され、当該動きベクトル予測子のリストが、複数の空間予測子を含み、当該複数のコーディングモード内の１つ以上のマージモードの各々に関して、当該リスト内の第１の空間予測子が、上部の近傍ブロックからのものであり、第１の空間予測子に続く第２の空間予測子が、左側近傍ブロックからのものであり、当該複数のコーディングモード内の１つ以上のＡＭＶＰモードの各々に関して、当該リスト内の第１の空間予測子が、左側近傍ブロックからのものであり、第１の空間予測子に続く第２の空間予測子が、上部の近傍ブロックからのものである、生成することと、当該動きベクトル予測子のリストに基づいて、当該ブロックと関連付けられた動きベクトルを符号化することと、を含む。
【0007】
別の実施形態によれば、ビデオ復号化の方法が提供され、当該ブロックのための動きベクトル予測子のリストを生成することであって、当該ブロックが、複数のコーディングモードのうちの１つを使用することによって復号化され、当該動きベクトル予測子のリストが、複数の空間予測子を含み、当該複数のコーディングモード内の１つ以上の非サブブロックモードの各々に関して、当該リスト内の第１の空間予測子が、上部の近傍ブロックからのものであり、第１の空間予測子に続く第２の空間予測子が、左側近傍ブロックからのものであり、当該複数のコーディングモード内の１つ以上のサブブロックモードの各々に関して、当該リスト内の第１の空間予測子は、左側近傍ブロックからのものであり、第１の空間予測子に続く第２の空間予測子が、上部の近傍ブロックからのものである、生成することと、当該動きベクトル予測子のリストに基づいて、当該ブロックと関連付けられた動きベクトルを復号化することと、を含む。
【0008】
別の実施形態によれば、ビデオ符号化の方法が提供され、ビデオシーケンス内のピクチャのブロックにアクセスすることと、当該ブロックのための動きベクトル予測子のリストを生成することであって、当該ブロックが、複数のコーディングモードのうちの１つを使用することによって符号化され、当該動きベクトル予測子のリストが、複数の空間予測子を含み、当該複数のコーディングモード内の１つ以上の非サブモードの各々に関して、当該リスト内の第１の空間予測子が、上部の近傍ブロックからのものであり、第１の空間予測子に続く第２の空間予測子が、左側近傍ブロックからのものであり、当該複数のコーディングモード内の１つ以上のサブブロックモードの各々に関して、当該リスト内の第１の空間予測子が、左側近傍ブロックからのものであり、第１の空間予測子に続く第２の空間予測子が、上部の近傍ブロックからのものである、生成することと、当該動きベクトル予測子のリストに基づいて、当該ブロックと関連付けられた動きベクトルを符号化することと、を含む。
【0009】
別の実施形態によれば、ビデオ符号化のための装置が提供され、当該装置は、ビデオシーケンス内のピクチャのブロックにアクセスすることと、当該ブロックのための動きベクトル予測子のリストを生成することであって、当該ブロックが、複数のコーディングモードのうちの１つを使用することによって符号化され、当該動きベクトル予測子のリストが、複数の空間予測子を含み、当該複数のコーディングモードの各々に関して、当該リスト内の第１の空間予測子が、上部近傍ブロックからのものであり、第１の空間予測子に続く第２の空間予測子が、左側近傍ブロックからのものである、生成することと、当該動きベクトル予測子のリストに基づいて、当該ブロックと関連付けられた動きベクトルを符号化することと、を行うように構成された１つ以上のプロセッサを備える。
【0010】
別の実施形態によれば、ビデオ復号化のための装置が提供され、当該装置は、ビデオシーケンス内のピクチャのブロックに関する動きベクトル予測子のリストを生成することであって、当該ブロックが、複数のコーディングモードのうちの１つを使用することによって復号化され、当該動きベクトル予測子のリストが、複数の空間予測子を含み、当該複数のコーディングモードの各々に関して、当該リスト内の第１の空間予測子が、上部近傍ブロックからであり、第１の空間予測子に続く第２の空間予測子が、左側近傍ブロックからである、生成することと、当該動きベクトル予測子のリストに基づいて、当該ブロックと関連付けられた動きベクトルを復号化することと、を行うように構成された、１つ以上のプロセッサを備える。
【0011】
一実施形態は、１つ以上のプロセッサによって実行されるとき、１つ以上のプロセッサに上で説明された実施形態のいずれかに従う符号化方法又は復号化方法を実行させる命令を含む、コンピュータプログラムを提供する。本実施形態のうちの１つ以上はまた、上で説明された方法に従ってビデオデータを符号化するか、又は復号化するための命令を記憶したコンピュータ可読記憶媒体を提供する。１つ以上の実施形態はまた、上で説明された方法に従って生成されたビットストリームを記憶したコンピュータ可読記憶媒体を提供する。１つ以上の実施形態はまた、上で説明された方法に従って生成されたビットストリームを送信するか、又は受信するための方法及び装置を提供する。
【図面の簡単な説明】
【0012】
【図1】本実施形態の態様が実装され得るシステムのブロック図を例解する。
【0013】
【図2】ビデオ符号化器の一実施形態のブロック図を例解する。
【0014】
【図3】ビデオ復号化器の一実施形態のブロック図を例解する。
【0015】
【図4】圧縮ＨＥＶＣピクチャを表すためのコーディングツリーユニット（Coding Tree Unit、ＣＴＵ）及びコーディングツリー（Coding Tree、ＣＴ）概念の一例を例解する。
【0016】
【図5】コーディングツリーユニット（ＣＴＵ）のコーディングユニット（Coding Units、ＣＵｓ）、予測ユニット（Prediction Units、ＰＵ）、及び変換ユニット（Transform Units、ＴＵ）への分割の一例を例解する。
【0017】
【図6】ＶＶＣにおいて使用される区画化を例解する。
【0018】
【図7】ＶＶＣにおける四分ツリー及び二分／三分ツリーを有するピクチャを区画化する一例を例解する。
【0019】
【図8】空間及び時間予測子の位置を例解する。
【0020】
【図9】ＶＶＣで使用される４×４サブＣＵベースのアフィン動きベクトルフィールドの一例を例解する。
【0021】
【図10】アフィンモデル継承の一例を例解する。
【0022】
【図11】ＳｂＴＭＶＰ予測の一例を例解する。
【0023】
【図12】一実施形態に従って、コーディングモードがマージモード又はＡＭＶＰモードであるかどうかに基づいて、空間予測子走査順序を調整する方法を例解する。
【0024】
【図13】一実施形態に従って、コーディングモードがサブブロックモードであるかどうかに基づいて、空間予測子走査順序を調整する方法を例解する。
【発明を実施するための形態】
【0025】
図１は、様々な態様及び実施形態が実装され得るシステムの一例のブロック図を例解する。システム１００は、以下に記載の様々な構成要素を含むデバイスとして具現化され得、本明細書に記載の態様のうちの１つ以上を実行するように構成されている。かかるデバイスの実施例としては、これらに限定されないが、パーソナルコンピュータ、ラップトップコンピュータ、スマートフォン、タブレットコンピュータ、デジタルマルチメディアセットトップボックス、デジタルテレビ受信機、パーソナルビデオ記録システム、コネクテッド家電、及びサーバなどの様々な電子デバイスが挙げられる。システム１００の要素は、単独で、又は組み合わせて、単一の集積回路、複数のＩＣ、及び／又は個別の構成要素で具現化され得る。例えば、少なくとも一つの実施形態では、システム１００の処理要素及び符号化器／復号化器要素は、複数のＩＣ及び／又は個別の構成要素にわたって分散される。様々な実施形態では、システム１００は、例えば、通信バスを介して、又は専用の入力ポート及び／若しくは出力ポートを通じて、他のシステム、又は他の電子デバイスに通信可能に結合される。様々な実施形態では、システム１００は、本出願に記載された態様のうちの１つ以上を実装するように構成される。
【0026】
システム１００は、例えば、本出願に記載された様々な態様を実装するために、内部にロードされた命令を実行するように構成された、少なくとも１つのプロセッサ１１０を含む。プロセッサ１１０は、埋め込み型メモリ、入力出力インターフェース、及び当該技術分野で既知の様々な他の回路を含み得る。システム１００は、少なくとも１つのメモリ１２０（例えば、揮発性メモリデバイス及び／又は不揮発性メモリデバイス）を含む。システム１００は、記憶デバイス１４０を含み、この記憶デバイスは、限定されるものではないが、ＥＥＰＲＯＭ、ＲＯＭ、ＰＲＯＭ、ＲＡＭ、ＤＲＡＭ、ＳＲＡＭ、フラッシュ、磁気ディスクドライブ、及び／若しくは光ディスクドライブを含む、不揮発性メモリ並びに／又は揮発性メモリを含み得る。記憶デバイス１４０は、非限定的な例として、内部記憶デバイス、取り付け型記憶デバイス、及び／又はネットワークアクセス可能な記憶デバイスを含み得る。
【0027】
システム１００は、例えば、データを処理して、符号化ビデオ又は復号化ビデオを提供するように構成された符号化器／復号化器モジュール１３０を含み、その符号化器／復号化器モジュール１３０は、それ自体のプロセッサ及びメモリを含み得る。符号化器／復号化器モジュール１３０は、符号化機能及び／又は復号化機能を実行するためにデバイス内に含まれ得るモジュールを表す。既知であるように、デバイスは、符号化及び復号化モジュールのうちの一方又は両方を含み得る。加えて、符号化器／復号化器モジュール１３０は、システム１００の個別の要素として実装され得るか、又は当業者に既知であるように、ハードウェア及びソフトウェアの組み合わせとしてプロセッサ１１０内に組み込まれ得る。
【0028】
本出願に記載の様々な態様を実行するためにプロセッサ１１０又は符号化器／復号化器１３０上にロードされるプログラムコードは、記憶デバイス１４０内に記憶され、その後、プロセッサ１１０による実行のためにメモリ１２０上にロードされ得る。様々な実施形態によれば、プロセッサ１１０、メモリ１２０、記憶デバイス１４０、及び符号化器／復号化器モジュール１３０のうちの１つ以上は、本出願に記載されるプロセスの実施中に、様々な項目のうちの１つ以上を記憶し得る。かかる記憶された項目は、限定されるものではないが、入力ビデオ、復号化ビデオ、又は復号化ビデオの一部分、ビットストリーム、行列、変数、並びに、方程式、式、動作、及び動作論理の処理からの中間結果又は最終結果を含み得る。
【0029】
いくつかの実施形態では、プロセッサ１１０及び／又は符号化器／復号化器モジュール１３０の内部のメモリは、命令を記憶するため、及び符号化又は復号化中に必要とされる処理のためのワーキングメモリを提供するために使用される。しかしながら、他の実施形態では、処理デバイス（例えば、処理デバイスは、プロセッサ１１０又は符号化器／復号化器モジュール１３０のいずれかであり得る）の外部のメモリが、これらの機能のうちの１つ以上のために使用される。外部メモリは、メモリ１２０及び／又は記憶デバイス１４０、例えば、ダイナミック揮発性メモリ及び／又は不揮発性フラッシュメモリであり得る。いくつかの実施形態では、外部不揮発性フラッシュメモリが、テレビのオペレーティングシステムを格納するために使用される。少なくとも一実施形態では、ＲＡＭなどの高速外部ダイナミック揮発性メモリが、ＭＰＥＧ－２、ＨＥＶＣ、又はＶＶＣなどのビデオコーディング動作及び復号化動作のためのワーキングメモリとして使用される。
【0030】
システム１００の要素への入力は、ブロック１０５に示されるように、様々な入力デバイスを通して提供され得る。このような入力デバイスとしては、（ｉ）例えば、放送局によって無線で送信されるＲＦ信号を受信するＲＦ部、（ｉｉ）コンポジット入力端子、（ｉｉｉ）ＵＳＢ入力端子、及び／又は（ｉｖ）ＨＤＭＩ入力端子が挙げられるが、これらに限定されない。
【0031】
様々な実施形態では、ブロック１０５の入力デバイスは、当該技術分野で既知であるように、関連するそれぞれの入力処理要素を有する。例えば、ＲＦ部分は、（ｉ）所望の周波数を選択することと（また信号を選択する、又は信号を周波数帯域に帯域制限するとも称される）、（ｉｉ）選択された信号をダウンコンバートすることと、（ｉｉｉ）特定の実施形態で、（例えば）チャネルとして称され得る信号周波数帯域を選択するために、再度より狭い周波数帯域に帯域制限することと、（ｉｖ）ダウンコンバート及び帯域制限された信号を復調することと、（ｖ）誤り訂正を実行することと、（ｖｉ）データパケットの所望のストリームを選択するために多重分離することと、に対して好適な要素と関連付けられ得る。様々な実施形態のＲＦ部は、これらの機能を実行する１つ以上の要素、例えば、周波数セレクタ、信号セレクタ、バンドリミッタ、チャネルセレクタ、フィルタ、ダウンコンバータ、復調器、誤り訂正器、及びデマルチプレクサを含む。ＲＦ部分は、これらの様々な機能を実行するチューナを含み得、例えば、受信した信号をより低い周波数（例えば、中間周波数、若しくは近接ベースバンド周波数）に、又はベースバンドにダウンコンバートすることが含まれる。セットトップボックスの一実施形態では、ＲＦ部分及びその関連する入力処理要素は、有線（例えば、ケーブル）媒体を介して送信されるＲＦ信号を受信し、所望の周波数帯域にフィルタリング、ダウンコンバート、及び再フィルタリングすることによって周波数選択を実行する。様々な実施形態では、上述した（及び他の）要素の順序を並べ替える、これらの要素の一部を削除する、並びに／又は、類似若しくは異なる機能を実行する他の要素を追加する。要素を追加することは、既存の要素の間に要素を挿入すること、例えば、増幅器及びアナログ－デジタル変換器を挿入することを含み得る。様々な実施形態において、ＲＦ部は、アンテナを含む。
【0032】
追加的に、ＵＳＢ及び／又はＨＤＭＩ端末は、ＵＳＢ及び／又はＨＤＭＩ接続全体にわたって、システム１００を他の電子デバイスに接続するためのそれぞれのインターフェースプロセッサを含み得る。入力処理の様々な態様、例えば、リードソロモン誤り訂正は、例えば、必要に応じて、個別の入力処理ＩＣ内又はプロセッサ１１０内に実装され得ることを理解されたい。同様に、ＵＳＢ又はＨＤＭＩインターフェース処理の態様は、必要に応じて、個別のインターフェースＩＣ内又はプロセッサ１１０内に実装され得る。復調され、誤り訂正され、多重分離されたストリームは、例えば、プロセッサ１１０、並びに、メモリ及び記憶要素と組み合わせて動作して、出力デバイス上に提示するのに必要なデータストリームを処理する符号化器／復号化器１３０を含む、様々な処理要素に提供される。
【0033】
システム１００の様々な要素は、統合されたハウジング内に提供され得、統合されたハウジング内では、様々な要素は、好適な接続構成１１５、例えば、Ｉ２Ｃバス、配線、及びプリント回路基板を含む、当該技術分野で既知の内部バスを使用して相互に接続され、互いの間でデータを送信し得る。
【0034】
システム１００は、通信チャネル１９０を介して他のデバイスとの通信を可能にする通信インターフェース１５０を含む。通信インターフェース１５０は、限定されるものではないが、通信チャネル１９０を介してデータを送信及び受信するように構成された送受信機を含み得る。通信インターフェース１５０は、限定されるものではないが、モデム又はネットワークカードを含み得、通信チャネル１９０は、例えば、有線及び／又は無線媒体内に実装され得る。
【0035】
データは、様々な実施形態において、ＩＥＥＥ８０２．１１などのＷｉ－Ｆｉネットワークを使用して、システム１００にストリーミングされる。これらの実施形態のＷｉ－Ｆｉ信号は、Ｗｉ－Ｆｉ通信のために適合された通信チャネル１９０及び通信インターフェース１５０を介して受信される。これらの実施形態の通信チャネル１９０は、一般には、ストリーミングアプリケーション及び他のオーバーザトップ通信を可能にするためにインターネットを含む外部ネットワークへのアクセスを提供するアクセスポイント又はルータに接続される。別の実施形態では、入力ブロック１０５のＨＤＭＩ接続を介してデータを配信するセットトップボックスを使用して、システム１００にストリーミングデータを提供する。更に他の実施形態では、入力ブロック１０５のＲＦ接続を使用して、システム１００にストリーミングデータを提供する。
【0036】
システム１００は、出力信号を、ディスプレイ１６５、スピーカ１７５、及び他の周辺デバイス１８５を含む、様々な出力デバイスに提供し得る。他の周辺デバイス１８５は、実施形態の様々な例において、スタンドアロンＤＶＲ、ディスクプレーヤ、ステレオシステム、照明システム、及びシステム１００の出力に基づいて機能を提供する他のデバイス、のうちの１つ以上を含む。様々な実施形態では、制御信号は、ＡＶ．Ｌｉｎｋ、ＣＥＣ、又はユーザ介入あり若しくはユーザ介入なしでデバイス間制御を可能にする他の通信プロトコルなどの信号伝達を使用して、システム１００とディスプレイ１６５、スピーカ１７５、又は他の周辺デバイス１８５との間で通信される。出力デバイスは、それぞれのインターフェース１６０、１７０、及び１８０を通じた専用接続を介してシステム１００に通信可能に結合され得る。代替的に、出力デバイスは、通信インターフェース１５０を介し、通信チャネル１９０を使用して、システム１００に接続され得る。ディスプレイ１６５及びスピーカ１７５は、例えば、テレビなどの電子デバイスにおいて、システム１００の他の構成要素とともに単一ユニットに統合され得る。様々な実施形態では、ディスプレイインターフェース１６０は、ディスプレイドライバ、例えば、タイミングコントローラ（timing controller、ＴＣｏｎ）チップを含む。
【0037】
ディスプレイ１６５及びスピーカ１７５は、代替的に、例えば、入力１０５のＲＦ部分が個別のセットトップボックスの一部である場合、他の構成要素のうちの１つ以上から分離され得る。ディスプレイ１６５及びスピーカ１７５が外部構成要素である様々な実施形態では、出力信号は、例えば、ＨＤＭＩポート、ＵＳＢポート、又はＣＯＭＰ出力を含む、専用の出力接続を介して提供され得る。
【0038】
図２は、ＶＶＣ（Versatile Video Coding、多用途ビデオコーディング）符号化器などのビデオ符号化器２００の一例を例解する。本出願では、「再構成された（reconstructed）」及び「復号化された（decoded）」という用語は、交換可能に使用され得、「符号化（encoded）された」及び「コード化（coded）された」という用語は、交換可能に使用され得、「画像（image）」、「ピクチャ（picture）」、及び「フレーム（frame）」という用語は、交換可能に使用され得る。通常では、必ずしもそうではないが、「再構成された」という用語は符号化器側で使用され、「復号化された」という用語は復号化器側で使用される。
【0039】
ビデオシーケンスは、符号化される前に、符号化前処理を受け得、例えば、入力カラーピクチャに色変換を適用すること（例えば、ＲＧＢ４：４：４からＹＣｂＣｒ４：２：０への変換）、又は圧縮に対してより耐性のある信号分布を得るために入力ピクチャ構成要素の再マッピングを実行すること（例えば、色成分の１つのヒストグラム等化を使用する）。メタデータは、その前処理と関連付けられ、ビットストリームに添付され得る。
【0040】
符号化器２００において、ピクチャは、以下に記載する符号化器要素によって符号化される。入力信号がマッピングされる（２０１）。２０１のマッピングは、２９１の順方向マッピングに対応し得るか、又は前処理のための他のマッピングを更に含み得る。符号化されるピクチャは、ＣＵ（２０２）のユニットで処理される。各ＣＵは、イントラモード又はインターモードのいずれかを使用して符号化される。ＣＵがイントラモードで符号化されるとき、イントラ予測（２６０）を実行する。インターモードでは、動き推定（２７５）及び動き補償（２７０）が実行される。順方向マッピング（２９１）は、予測信号に適用される。符号化器デバイスは、ＣＵを符号化するためにイントラモード又はインターモードのうちのいずれを使用するかを決定し（２０５）、予測モードフラグによってイントラ／インター決定を示す。予測残差は、（ステップ２０１からの）マッピングされた元の画像ブロックから（ステップ２９１からの）マッピングされた予測ブロックを差し引くこと（２１０）によって計算される。
【0041】
次いで、予測残差が変換され（２２５）、量子化される（２３０）。量子化された変換係数、並びに動きベクトル及び他のシンタックス要素は、エントロピコード化され（２４５）、ビットストリームを出力する。符号化器はまた、変換をスキップし、変換されていない残差信号に量子化を直接適用し得る。符号化器はまた、変換及び量子化の両方をバイパスし得、すなわち、残差は、変換処理又は量子化処理を適用することなく直接コード化される。直接ＰＣＭコーディングでは、予測は適用されず、コーディングユニットサンプルは、ビットストリームに直接コード化される。
【0042】
符号化器は、符号化されたブロックを復号化して、更なる予測のための参照を提供する。量子化された変換係数は、量子化され（２４０）、逆変換され（２５０）、予測残差を復号化する。復号化された予測残差及び予測ブロックを組み合わせると（２５５）、画像ブロックが再構成される。逆マッピング（２９０）及びループ内フィルタ（２６５）が、再構成された信号に適用されて、例えば、符号化アーチファクトを低減するために脱ブロック化／ＳＡＯ（サンプル適応オフセット）フィルタ処理を実行する。フィルタ処理された画像は、参照ピクチャバッファ（２８０）に記憶される。
【0043】
図３は、ＶＶＣ復号化器などのビデオ復号化器３００の一例のブロック図を例解する。復号化器３００では、以下に説明する復号化器要素によってビットストリームが復号化される。ビデオ復号化器３００は、概して、図２において説明されたような、符号化パスに相反する復号化パスを実行し、ビデオデータを符号化することの一部としてビデオ復号化を実行する。
【0044】
特に、復号化器の入力は、ビデオ符号化器２００によって生成され得るビデオビットストリームを含む。第１に、ビットストリームは、エントロピ復号化されて（３３０）、変換係数、動きベクトル、ピクチャ区画化情報、及び他のコード化情報を取得する。ピクチャ区画化情報は、ＣＴＵのサイズ、及びＣＴＵがＣＵに分割され、及び適用可能な場合にはＰＵに分割される様式を示す。したがって、復号化器は、復号化されたピクチャ区画化情報に従って、ピクチャをＣＴＵに、かつ各ＣＴＵをＣＵに分割し得る（３３５）。変換係数を脱量子化し（３４０）、逆変換して（３５０）、予測残差を復号化する。
【0045】
復号化された予測残差及び予測ブロックを組み合わせると（３５５）、画像ブロックが再構成される。予測ブロックは、イントラ予測（３６０）から又は動き補償予測（すなわち、インター予測）（３７５）から取得され得る（３７０）。また、順方向マッピング（３９５）は、予測信号に適用される。双予測の場合、２つの動き補償された予測が、加重和と組み合わされ得る。逆マッピング（３９６）及びループ内フィルタ（３６５）は、再構成された信号に適用される。フィルタ処理された画像は、参照ピクチャバッファ（３８０）に記憶される。
【0046】
ループ内フィルタからの出力は、前処理で実行されるマッピングプロセス（２０１）の逆を実行する、逆マッピング（３９０）を通過し得る。復号化されたピクチャは、他の復号化後処理、例えば、逆色変換（例えば、ＹＣｂＣｒ４：２：０からＲＧＢ４：４：４への変換）を更に通過することができる。復号化後処理は、符号化前処理において導出され、ビットストリームにおいて信号伝達されたメタデータを使用し得る。
【0047】
ＨＥＶＣでは、動き補償された時間予測は、動きベクトルが各予測ユニット（prediction unit、ＰＵ）と関連付けられる、ビデオの連続するピクチャ間に存在する冗長性を利用するために採用される。各ＣＴＵは、圧縮ドメイン内のコーディングツリーによって表現される。これは、図４に例解されるように、各リーフがコーディングユニット（ＣＵ）と呼ばれる、ＣＴＵの四分ツリー分割である。次いで、各ＣＵは、予測情報としていくつかのイントラ又はインター予測パラメータを与えられる。そうするために、ＣＵは、１つ以上の予測ユニット（ＰＵ）に空間的に区画化され得、各ＰＵは、いくつかの予測情報を割り当てられる。イントラ又はインターコーディングモードは、ＣＵレベルに割り当てられる。これらの概念は、図５において更に例解される。
【0048】
ＶＶＣにおける新しいビデオ圧縮ツールは、圧縮ドメイン内のコーディングツリーユニット表現を含み、これは、より柔軟な方法でピクチャデータを表現することができる。ＶＶＣでは、二分及び三分分割セグメンテーション構造を使用する、ネストマルチタイプツリー（nested multi-type tree、ＭＴＴ）を有する四分ツリーは、複数の区画化ユニットタイプの概念を置き換える、すなわち、ＶＶＣは、いくつかの特別な場合を除いて、ＣＵ、ＰＵ、及びＴＵ概念の分離を除去する。ＶＶＣコーディングツリー構造では、ＣＵは、正方形又は長方形のいずれかの形状を有することができる。コーディングツリーユニット（ＣＴＵ）は、第１に四分ツリー構造によって区画化される。次いで、四分ツリーリーフノードが、マルチタイプツリー構造によって更に区画化され得る。
【0049】
具体的には、ＣＴＵのツリー分解は、異なる段階で進行され、第１にＣＴＵが、四分ツリー様式で分割され、次いで、各四分ツリーリーフは、二分又は三分方式で更に分割することができる。図６に示されるように、マルチタイプのツリー構造において４つの分割タイプがあり、すなわち、垂直二分分割（ＶＥＲ）、水平二分分割（ＨＯＲ）、垂直三分分割（ＶＥＲ＿ＴＲＩＰＬＥ）、及び水平三分分割（ＨＯＲ＿ＴＲＩＰＬＥ）である。ＨＯＲ＿ＴＲＩＰＬＥ又はＶＥＲ＿ＴＲＩＰＬＥ分割（水平又は垂直三分ツリー分割モード）は、コーディングユニット（ＣＵ）を３つのサブコーティングユニット（サブＣＵ）に分割することにおいて構成され、それぞれのサイズは、考慮される空間分割の方向において、親ＣＵサイズの１／４、１／２、及び１／４に等しい。マルチタイプのツリーリーフノードは、コーディングユニット（ＣＵ）と呼ばれ、いくつかの特別な場合を除いて、このセグメンテーションは、任意の更なる区画化なしで予測及び変換処理に使用される。四分ツリー及び三分／二分ツリーコーディングブロック構造を有する複数のＣＵに分割されたＣＴＵの実施例が図７に示される。
【0050】
ＶＴＭ（ＶＶＣ試験モデル）における予測リスト
【0051】
ＶＶＣでは、予測リストは、異なるインターコーディングモード：通常のマージ、ＭＭＶＤ（ＭＶＤを有するマージモード）、ＣＩＩＰ（組み合わされたイントラ及びインター予測）、ＴＰＭ／ＧＥＯ、ＩＢＣ（イントラブロックコピー）、通常のＡＭＶＰ（高度な動きベクトル予測）、アフィンＡＭＶＰ、及びサブブロックマージ内に存在する。これらの予測リストは、図８において示されるような、位置｛Ａ０、Ａ１、Ａ２、Ｂ０、Ｂ１、Ｂ２、Ｂ３｝の空間近傍ブロックから選択される、空間予測子を含有する。左側近傍ブロックからの予測子は、左側空間予測子を考慮し、上方の近傍ブロックからの予測子は、上部空間予測子を考慮する。上部－左側のブロックＢ２などのいくつかのブロックは、左側及び上部近傍ブロックの両方として考慮される。
【0052】
ＶＴＭ－６．０では（「Ａｌｇｏｒｉｔｈｍ ｄｅｓｃｒｉｐｔｉｏｎ ｆｏｒ Ｖｅｒｓａｔｉｌｅ Ｖｉｄｅｏ Ｃｏｄｉｎｇ ａｎｄ Ｔｅｓｔ Ｍｏｄｅｌ ６（ＶＴＭ ６）」、ＪＶＥＴ－Ｏ２００２，１５ｔｈ Ｍｅｅｔｉｎｇ：Ｇｏｔｈｅｎｂｕｒｇ，ＳＥ，３－１２ Ｊｕｌｙ ２０１９参照）、全てのリストの空間候補が、概して左側から上部に走査される。例えば、通常のマージモードの場合、第１の空間予測子は、Ａ１（左側）からのものであり、第２の空間予測子は、Ａ１予測子とは異なる場合、Ｂ１（上部）からのものである。通常のＡＭＶＰモードでは、第１の空間予測子は、Ａ０又はＡ１（左側）から選択され、第２の空間予測子は、Ｂ０、Ｂ１、又はＢ２（上部）からのものである。異なるリストが、表１に説明される。
【表1】
【表2】
【表3】
【0053】
通常のマージモード
【0054】
ＶＴＭ－６．０では、マージ候補リスト、マージリスト、又は通常のマージリストとも称される、通常のマージモードに関する予測リストは、以下のタイプの予測子（また候補とも称される）を含むことによって構築される。
１）空間近傍ＣＵからの空間ＭＶＰ（動きベクトル予測子）、
２）配列ＣＵからの時間ＭＶＰ、
３）ＦＩＦＯテーブルからの履歴ベースのＭＶＰ、
４）ペアワイズ平均ＭＶＰ、及び
５）ゼロＭＶＰ。
１）空間近傍ＣＵからの空間ＭＶＰ（動きベクトル予測子）、
２）配列ＣＵからの時間ＭＶＰ、
３）ＦＩＦＯテーブルからの履歴ベースのＭＶＰ、
４）ペアワイズ平均ＭＶＰ、及び
５）ゼロＭＶＰ。
【0055】
マージモードでコード化された各ＣＵに関して、選択された予測子のインデックスが符号化される。マージ候補の各カテゴリの生成プロセスを以下に説明する。
【0056】
空間候補導出
【0057】
ＶＶＣ内の空間マージ候補の導出は、ＨＥＶＣと同じである。最大４つのマージ候補が、図８内に図示される位置内に位置付けられた候補の中で選択される。導出の順序は、Ａ１、Ｂ１、Ｂ０、Ａ０、及びＢ２である。位置Ｂ２は、位置Ａ１、Ｂ１、Ｂ０、Ａ０のいずれかのＣＵが利用可能ではない場合（例えば、別のスライス又はタイルに属するため）、又はイントラコード化されているときにのみ考慮される。位置Ａ１において候補が追加された後、残りの候補の追加が冗長検査に供され、これが、同じ動き情報を有する候補がリストから除外されることを確実とし、その結果、コード効率が改善される。計算の複雑さを低減するために、全ての可能な候補対が、冗長検査において考慮されるわけではない。代わりに、表１内の対のみが考慮され、冗長検査に使用される対応する候補が同じ動き情報を有さない場合、候補がリストに追加されるのみである。例えば、表１において、「空間Ｂ１＋プルーニングされたＡ１」は、位置Ｂ１における候補が、位置Ａ１における候補とは異なる場合にのみマージリストに追加されることを示す。
【0058】
時間候補導出（「ＴＭＶＰ Ｃ０／Ｃ１」）
【0059】
マージリストには、１つの時間候補のみが追加される。特に、この時間マージ候補の導出において、スケーリングされた動きベクトルは、結合された参照ピクチャに属する配列ＣＵに基づいて、導出される。図８に図示されるように、時間候補に関する位置は、候補Ｃ０とＣ１との間で選択される。位置Ｃ０におけるＣＵが利用可能ではない場合、ＣＵがイントラコード化される場合、又はＣＵがＣＴＵの現在の行の外側にある場合、位置Ｃ１が、使用される。別様に、位置Ｃ０は、時間マージ候補の導出において使用される。
【0060】
履歴ベースのマージ候補導出
【0061】
履歴ベースのＭＶＰ（history-based MVP、ＨＭＶＰ）マージ候補は、空間ＭＶＰ及びＴＭＶＰの後に、マージリストに追加される。ＨＭＶＰを使用するために、以前にコード化されたブロックの動き情報を表内に記憶し、現在のＣＵのためのＭＶＰとして使用する。複数のＨＭＶＰ候補を有する表は、符号化／復号化プロセス中に維持される。表は、新しいＣＴＵ行が遭遇するときにリセット（空）される。非サブブロック間コード化ＣＵが存在する場合は常に、関連付けられた動き情報が、新しいＨＭＶＰ候補として表の最後のエントリに追加される。
【0062】
ＨＭＶＰ候補は、マージ候補リスト構築プロセスにおいて使用され得る。表内の最新のいくつかのＨＭＶＰ候補は、順番に検査され、ＴＭＶＰ候補の後に候補リストに挿入される。冗長検査は、ＨＭＶＰ候補上で、いくつかの空間マージ候補に適用される。ＦＩＦＯ内の最後の２つのＨＭＶＰ候補の各々（より最近のもの）は、空間候補Ａ１及びＢ１と比較され、同じ動き情報を有していない場合にのみマージリストに追加される。利用可能なマージ候補の総数が最大に許容されるマージ候補マイナス１に達すると、ＨＭＶＰからのマージ候補リスト構築プロセスが終了する。
【0063】
ペアワイズ平均マージ候補導出
【0064】
ペアワイズ平均候補は、既存のマージ候補リスト内の第１の対の候補を平均化することによって生成される。ペアワイズ平均マージ候補が追加された後にマージリストが完全でないとき、最大マージ候補数に達するまで、ゼロＭＶＰが端部において挿入される。
【0065】
ＭＶＤとのマージモード（Merge mode with MVD、ＭＭＶＤ）
【0066】
マージモードに加えて、暗黙的に導出された動き情報が、現在のＣＵの予測サンプル生成のために直接使用される場合、動きベクトル差とのマージモード（ＭＭＶＤ）がＶＶＣ内に導入される。
【0067】
ＭＭＶＤでは、マージ候補が選択された後、信号伝達されたＭＶＤ情報によって更に精緻化される。更なる情報は、マージ候補フラグ、動きの大きさを指定するためのインデックス、及び動き方向の指標に関するインデックスを含む。ＭＭＶＤモードでは、マージリスト内の最初の２つの候補のうちの１つが、ＭＶ基準として使用されるように選択される。マージ候補フラグは、どれが使用されるかを指定するように信号伝達される。
【0068】
インター予測のための三角形の区画（ＴＰＭ）
【0069】
三角形区画モードが使用されるとき、対角行列分割又は反対角行列分割のいずれかを使用して、ＣＵは、２つの三角形形状の区画に均一に分割される。ＣＵ内の各三角形区画は、それ自体の動きを使用して相互予測される、各区画に対して、単一予測のみが許可される。単予測候補リストは、上で説明されたマージモードに従って構築されたマージ候補リストから直接導出される。
【0070】
三角形区画モードが現在のＣＵに対して使用される場合、三角形区画の方向を示すフラグ（対角行列又は反対角行列）、及び２つのマージインデックス（各区画に対して１つ）が、更に信号伝達される。
【0071】
イントラブロックコピーモード（Intra Block Copy mode、ＩＢＣ）
【0072】
イントラブロックコピー（ＩＢＣ）モードは、ＨＥＶＣのスクリーンコンテンツ拡張から得られる。このモードは、復号化された現在のフレームとのインター予測をエミュレートする。これは、より単純である予測子リストを除いて、対応する通常モードと同一である、ＩＢＣ ＡＭＶＰ及びＩＢＣマージモードを支持するのみである。
【0073】
ＶＶＣでは、ＩＢＣマージ予測子リスト（ＩＢＣマージ候補リスト又はＩＢＣマージリストとも称される）は、以下のタイプの候補を含むことによって構築される。
１）空間近傍ＣＵからの空間ＭＶＰ、
２）ＩＢＣ ＦＩＦＯテーブルからの履歴ベースのＭＶＰ、及び
３）ゼロＭＶＰ。
１）空間近傍ＣＵからの空間ＭＶＰ、
２）ＩＢＣ ＦＩＦＯテーブルからの履歴ベースのＭＶＰ、及び
３）ゼロＭＶＰ。
【0074】
空間候補導出
【0075】
空間ＩＢＣマージ候補の導出は、通常のマージと同じである。最大２つの空間ＩＢＣマージ候補のみが、位置Ａ１、Ｂ１内に位置付けられた候補の中で選択される。位置Ａ１において候補が追加された後、残りの候補の追加が冗長検査に供され、これが、同じ動き情報を有する候補がリストから除外されることを確実とし、その結果、コード効率が改善される。
【0076】
履歴ベースのマージ候補導出
【0077】
履歴ベースのＭＶＰ（ＨＭＶＰ）ＩＢＣマージ候補は、通常のマージリストに関するものと同じ方法で、空間ＩＢＣ ＭＶＰの後にＩＢＣマージリストに追加される。しかし、ＩＢＣモードには、個別のＦＩＦＯが使用される。
【0078】
ＨＭＶＰ候補が追加された後、ＩＢＣマージリストが完全でないとき、最大ＩＢＣマージ候補数に達するまで、ゼロＩＢＣ ＭＶＰが端部において挿入される。
【0079】
ＩＢＣ ＡＭＶＰモードでは、唯一の利用可能な参照フレームが現在のものであるため、１つの予測子リストのみが、構築されるはずである。かかる予測子リストは、プルーニングすることなく、２つの候補に制限されたＩＢＣマージリストを再使用する。
【0080】
通常のＡＭＶＰモード
【0081】
ＶＶＣのＡＭＶＰモード（通常のＡＭＶＰとも呼ばれる）は、ＨＥＶＣのうちの１つに近い。ＡＭＶＰ候補リスト、ＡＭＶＰリスト、又は通常のＡＭＶＰリストとも称されるＡＭＶＰモードの予測子リストは、以下のタイプの候補を含むことにより、各参照フレームリストの各参照フレームに対して構築される。
１）空間近傍ＣＵからの空間ＭＶ、
２）配列ＣＵからの時間ＭＶ、
３）ＦＩＦＯテーブルからの履歴ベースのＭＶ、及び
４）ゼロＭＶ。
１）空間近傍ＣＵからの空間ＭＶ、
２）配列ＣＵからの時間ＭＶ、
３）ＦＩＦＯテーブルからの履歴ベースのＭＶ、及び
４）ゼロＭＶ。
【0082】
動き記憶部の精度（１／１６－ｐｅｌ）は、ＡＭＶＲ（適応性動きベクトル解像度）モードに応じて、１／４－ｐｅｌ、１／２－ｐｅｌ、１－ｐｅｌ又は４－ｐｅｌであり得る、動きベクトル差の許容精度よりも微細である。かかる制約を順守するために、各予測子は、動きベクトル差の許容精度に丸みを付けられる。
【0083】
ＡＭＶＰモード及び各参照フレームリストにおいてコード化された各ＣＵについて、選択された参照フレームのインデックス、選択された予測子のインデックス（ＡＭＶＰ候補とも称される）、及び（動き推定を通して推定された選択された動きベクトルと予測子との間の差としての）動きベクトル差が、符号化される。ＡＭＶＰ候補の各カテゴリの生成プロセスは、参照フレームリストｙの、ｒｅｆｘｙと記される、参照フレームｘに関して以下で説明される。
【0084】
空間候補導出
【0085】
ＶＶＣ内のｒｅｆｘｙに関する空間ＡＭＶＰ候補の導出は、ＨＥＶＣの場合と同じである。最大２つのＡＭＶＰ候補が、図８に図示された位置内に位置付けられた候補の中で選択される。１つの候補は、左側の位置Ａ０又はＡ１から選択され、別の１つは、上部の位置Ｂ０、Ｂ１、又はＢ２から選択される。考慮されるべきことに、候補はまた、参照フレームｒｅｆｘｙを使用しなければならない。具体的には、Ａ０がインターコード化されていないか、又は参照フレームｒｅｆｘｙを使用しないとき、左予測子は、位置Ａ１から選択される。左側の候補が追加された後、上部の候補の追加が、冗長検査に供され、これが、同じ動きベクトルを有する候補がリストから除外されることを確実とし、その結果、コード効率が改善される。
【0086】
時間候補導出（「ＴＭＶＰ Ｃ０／Ｃ１」）
【0087】
通常のマージリスト構築と同じ導出プロセスを使用することによって、１つの時間候補のみがＡＭＶＰリストに追加されるが、ｒｅｆｘｙの使用法に制限される。
【0088】
履歴ベースの候補導出
【0089】
ＦＩＦＯテーブルにおけるいくつかのＨＭＶＰ候補は、逆順序で検査され、ｒｅｆｘｙを使用する場合、及び冗長検査なしで、ＴＭＶＰ候補の後に候補リストに挿入される。利用可能なＡＭＶＰ候補の総数が最大に許容されるＡＭＶＰ候補に達すると、ＨＭＶＰからのＡＭＶＰ候補リスト構築プロセスが終了する。
【0090】
ＨＭＶＰ候補が追加された後、ＡＭＶＰリストが完全でないとき、最大ＡＭＶＰ候補数に達するまで、ゼロＭＶが端部において挿入される。
【0091】
アフィンＡＭＶＰモード
【0092】
アフィンＡＭＶＰ、サブブロックモードは、通常のＡＭＶＰに近いが、並進の代わりに図９内に提示されるようなアフィン動きモデルを使用する。
【0093】
フラグは、ＡＭＶＰモードがアフィンであることを信号伝達し、別のフラグが、４－又は６－パラメータアフィンモデルが使用されるかどうかを示す。次いで、各参照フレームリストについて、選択された参照フレームのインデックス、選択された予測子のインデックス（アフィンＡＭＶＰ候補とも称される）及び（アフィン動き推定及びＣＰＭＶ予測子を通して推定された最良のＣＰＭＶ間の差としての）２つの動きベクトル差が、符号化される。
【0094】
予測子は、以下のタイプの候補を含むことによって、各参照フレームリストの各参照フレームに対して構築される、予測子リスト内で選択される。
１）空間アフィン近傍ＣＵからの空間継承アフィンＣＰＭＶ（制御ポイント動きベクトル）、
２）空間近傍ＣＵからの構築されたアフィンＣＰＭＶ、
３）空間及び時間近傍ＣＵからの構築された並進ＣＰＭＶ、及び
４）ゼロアフィンＣＰＭＶ。
１）空間アフィン近傍ＣＵからの空間継承アフィンＣＰＭＶ（制御ポイント動きベクトル）、
２）空間近傍ＣＵからの構築されたアフィンＣＰＭＶ、
３）空間及び時間近傍ＣＵからの構築された並進ＣＰＭＶ、及び
４）ゼロアフィンＣＰＭＶ。
【0095】
動き記憶部の精度（１／１６－ｐｅｌ）は、ＡＭＶＲ（適応性動きベクトル解像度）モードに応じて、１／１６－ｐｅｌ、１／４－ｐｅｌ、又は１－ｐｅｌであり得る、動きベクトル差の許容精度よりも微細である。かかる制約を順守するために、各予測子は、動きベクトル差の許容精度に丸みを付けられる。
【0096】
空間継承アフィン候補導出
【0097】
ＶＶＣにおける参照フレームｒｅｆｘｙに関する空間継承アフィン候補の導出は、図１０に図示された位置内に位置付けられたアフィン候補に基づく。１つの候補は、左側位置Ａ０、Ａ１において選択され、別の候補は、上部位置Ｂ０、Ｂ１、Ｂ２において選択される。考慮されるべきであるが、候補は、アフィンコード化され、また参照フレームｒｅｆｘｙを使用しなければならない。
【0098】
現在のＣＵに関するアフィンモデル（ＣＰＭＶ）は、考慮されたアフィン近傍の記憶されたモデルから導出される。
【0099】
構築されたアフィン候補導出
【0100】
１つのアフィンモデルは、ｒｅｆｘｙを使用する、上部－左側（ＬＴ）位置（Ａ２、Ｂ２、Ｂ３）、下部－左側（ＬＢ）の位置（Ａ０、Ａ１）、及び上部－右側（ＲＴ）位置（Ｂ０、Ｂ１）からＣＰＭＶを抽出することによって構築される。次いで、現在のアフィンモデルは、これらの抽出されたＣＰＭＶの組み合わせとして定義される。
【0101】
構築された並進候補の導出
【0102】
アフィンＡＭＶＰリストが構築されたアフィン候補が追加された後に完全でないとき、並進モデルがリストに挿入される。現在のアフィンモデルの全てのＣＰＭＶは、上部、左側、上部－左側、及び時間位置から並進動きベクトルに連続的に設定される。
【0103】
アフィンＡＭＶＰリストがその後完全ではないとき、最大アフィンＡＭＶＰ候補数に達するまで、ゼロＣＰＭＶが、端部において挿入される。
【0104】
サブブロックマージモード
【0105】
サブブロックマージモードは、２つの異なる組の予測子候補：ＳｂＴＭＶＰ及びアフィンマージを含む。アフィンＡＭＶＰモードに関して、フラグは、マージモードがサブブロックであることを信号伝達する。次いで、通常のマージモードの場合、サブブロックマージモードにおいてコード化された各ＣＵに関して、選択された予測子のインデックスが符号化される。
【0106】
サブブロックマージ候補リスト又はアフィンマージリストとも称される、サブブロックマージモードの予測リストは、以下のタイプの候補を含むことによって構築される。
１）ＳｂＴＭＶＰ候補、
２）空間アフィン近傍ＣＵからの空間継承アフィンＣＰＭＶ、
３）空間及び時間近傍ＣＵからの構築されたアフィンＣＰＭＶ、及び
４）ゼロＣＰＭＶ。
１）ＳｂＴＭＶＰ候補、
２）空間アフィン近傍ＣＵからの空間継承アフィンＣＰＭＶ、
３）空間及び時間近傍ＣＵからの構築されたアフィンＣＰＭＶ、及び
４）ゼロＣＰＭＶ。
【0107】
サブブロック時間動きベクトル予測子（ＳｂＴＭＶＰ）導出
【0108】
ＳｂＴＭＶＰ候補は、入力として左空間候補Ａ１（又はＡ１が利用可能である場合はゼロＭＶ）を使用する。この入力動きベクトルは、図１１に示されるように、８×８ベースで、現在のＣＵの動き情報を取得するために、配列参照フレーム上で使用される。
【0109】
空間継承アフィン候補導出
【0110】
空間継承アフィン候補の導出は、現在のＣＵに関するアフィンモデル（ＣＰＭＶ）が左、次いで上部のアフィン近傍の記憶されたモデルから導出されるアフィンＡＭＶＰモードと同じである。
【0111】
構築されたアフィン候補導出
【0112】
アフィンモデルは、上部－左側の位置（Ａ２、Ｂ２、Ｂ３）、左側の位置（Ａ０、Ａ１）、上部の位置（Ｂ０、Ｂ１）及び時間Ｃ０位置からＣＰＭＶを抽出することによって構築される。次いで、現在のアフィンモデルは、これらの抽出されたＣＰＭＶの組み合わせとして定義される。
【0113】
その後、サブブロックマージリストが完全ではないとき、最大サブブロックマージ候補数に達するまで、ゼロＣＰＭＶが、端部において挿入される。
【0114】
ＶＴＭ－７．０（「Ａｌｇｏｒｉｔｈｍ ｄｅｓｃｒｉｐｔｉｏｎ ｆｏｒ Ｖｅｒｓａｔｉｌｅ Ｖｉｄｅｏ Ｃｏｄｉｎｇ ａｎｄ Ｔｅｓｔ Ｍｏｄｅｌ ７（ＶＴＭ ７）」，ＪＶＥＴ－Ｐ２００２，１６ｔｈ Ｍｅｅｔｉｎｇ：Ｇｅｎｅｖａ，ＣＨ，１－１１ Ｏｃｔｏｂｅｒ ２０１９参照）では、上部－左側の走査は、通常のマージ、ＭＭＶＤ、及びＴＰＭ／ＧＥＯモードのために採用され、左側－上部の走査は、表２において示されるような他のコーディングモードのために維持される。通常のマージモードに関して、マージリスト構築における差が、表３に記載する。
【表4】
【表5】
【0115】
ＶＴＭ－７．０の上部－左側の走査は、マージ、ＭＭＶＤ、及び三角形のモードにのみ影響を及ぼす。それゆえ、この上部－左側の走査の概念を、ＩＢＣ、ＡＭＶＰ、アフィンＡＭＶＰ、及びサブブロックマージモードとして全ての他のコーディングモードに拡張することが可能である。一実施形態では、全ての適用可能なコーディングモードにおける空間予測子の上部－左側の走査を考慮することが提案される。
【0116】
ＩＢＣへの拡張
【0117】
表４内に提示されるように、ＩＢＣリスト構築のために空間予測子の上部－左側の走査を使用することが提案される。表４に示されるように、空間予測子Ｂ１は、予測子リスト構築において空間予測子Ａ１の前に考慮される。これは、両方のモードが同じリストを使用するため、ＩＢＣマージ及びＩＢＣ ＡＭＶＰに影響を及ぼす。
【表6】
【0118】
通常のＡＭＶＰへの拡張
【0119】
ＡＭＶＰの場合では、一組の空間近傍が探索される。しかし、ＶＴＭ－７．０では、左側の組は、上部組の前に走査される。それゆえ、表５に示されるように、左側（Ａ０／Ａ１）の前に上部の位置（Ｂ０／Ｂ１／Ｂ２）を探索することが提案される。
【表7】
【0120】
変形例では、表６内に提示されるように、左側の候補の組において、Ｂ２、すなわち、上部－左側の候補を移動させることも可能である。
【表8】
【0121】
アフィンＡＭＶＰへの拡張
【0122】
アフィンＡＭＶＰでは、同じ左側の組の候補が、ＡＭＶＰの場合に関して、上部の候補の前に探索される。表７に提示されるように、走査の順序を戻すことも可能である。
【表9】
【0123】
変形例では、表８内に提示されるように、左側の候補の組において、Ｂ２、すなわち、上部－左側の候補を移動させることも可能である。
【表10】
【0124】
サブブロックマージに拡張
【0125】
サブブロックマージリストは、ＶＴＭ－７．０において、異なる性質の５つの候補で構成される。それは、ＳｂＴＭＶＰ候補、継承又は構築されたアフィンモデルであり得る。空間候補の提案された上部－左側走査は、表９内に提示されるように、継承アフィンモデルの導出に拡張され得る。
【表11】
【0126】
変形例では、表１０内に提示されるように、左側の候補の組において、Ｂ２、すなわち、上部－左側の候補を移動させることも可能である。
表１０：左側の候補としてＢ２を有するサブブロックマージリストへの上部－
左側走査の拡張
【表12】
左側走査の拡張
【0127】
別の変形例では、修正はまた、表１１に示されるように、左側の候補の代わりに入力として空間上部候補を使用することによって、ＳｂＴＭＶＰ候補に影響を及ぼし得る。
【表13】
【0128】
上記では、全てのコーディングモードで空間近傍の左側－上部走査を使用することが提案される。別の実施形態では、コーディングモードのサブセットに対してのみこの順序を適用することが提案される。
【0129】
上で説明されたように、動きベクトル予測リストが使用されるとき、概して、コーディングモードの２つのカテゴリ：マージモード及びＡＭＶＰモードが存在する。マージモードを使用するコーディングユニットの場合、予測子リストが生成され、リストへのインデックス（例えば、ｍｖｐ＿ｉｄｘ）が復号化器に送信され、復号化器は、同じ予測子リストを生成し、選択された動きベクトル予測子の復号化されたインデックスにのみ基づいて、現在のコーディングユニットのための動きベクトルとして動きベクトル予測子を選択することができる。典型的には、参照ピクチャインデックス（ｒｅｆ＿ｉｄｘ）又は動きベクトル差（ＭＶＤ）などの他の動き情報は、送信される必要はない。
【0130】
ＡＭＶＰモードを使用するコーディングユニットの場合、予測子リストが生成され、リストへのインデックス（例えば、ｍｖｐ＿ｉｄｘ）が、復号化器に送信される。加えて、参照ピクチャインデックス（ｒｅｆ＿ｉｄｘ）及び動きベクトル差（ＭＶＤ）などの他の動き情報もまた送信される。復号化器は、同じ予測子リストを生成し、現在のコーディングユニットのための動きベクトル予測子として予測子リストから動きベクトル予測子を選択し、次いで、動きベクトル予測子、復号化されたＭＶＤ、及び参照ピクチャインデックスに基づいて、動きベクトルを復号化することができる。
【0131】
ＶＶＣでは、ＭＭＶＤは、通常、マージモードとして考慮されるが、ＭＶＤ情報を信号伝達する。
【0132】
一実施形態では、本発明者らは、マージモード（１２０５、例えば、通常のマージ、ＭＭＶＤ、ＴＰＭ、ＩＢＣ、サブブロックマージ）を伴う全てのコーディングユニットに対して上部－左側走査（１２１０、例えば、上部空間予測子が、予測子リストにおいて第１の予測子であり、左側空間予測子が続く）を使用し、ＡＭＶＰモード（１２０５、例えば、通常のＡＭＶＰ、アフィンＡＭＶＰ）を伴う全てのコーディングユニットに対して左側－上部走査（１２２０、例えば、左側空間予測子が、予測子リストにおいて第１の予測子であり、上部空間予測子が続く）を使用することを提案する。他の予測子もまた、予測子リストに追加され得る（１２３０）。予測子リストが構築された後、動き情報は、予測子リストに基づいて、符号化又は復号化され得る（１２４０）。また、ＡＭＶＰに対して上部－左側、及びマージモードに対して左側－上部の状態で反対にもなり得ることに留意されたい。
【0133】
分類の別の方法では、動きベクトル予測子リストが使用されるときのコーディングモードは、非サブブロックモード及びサブブロックモードとして分類することができる。サブブロックモードでは、コーディングモードが、コーディングユニットレベルで示されている間、動き補償は、サブブロックレベルで実行され、ＣＵのサブブロックは、異なる動きベクトルを有することができる。ＶＶＣでは、アフィン候補（アフィンＡＭＶＰ又はサブブロックマージから）及びＳｂＴＭＶＰ候補のみが存在する。しかし、ＦＲＵＣ（フレームレートアップ変換）及びＯＢＭＣ（オーバーラップされたブロック動き補償）として、他の潜在的なサブブロックツールを含むことができる。
【0134】
一実施形態では、本発明者らは、非サブブロックモード（１３０５、例えば、マージ、ＭＭＶＤ、ＴＰＭ、ＩＢＣ、ＡＭＶＰ）を伴う全てのコーディングユニットに対して上部－左側走査（１３１０、例えば、上部空間予測子が、予測子リストにおいて第１の予測子であり、左側空間予測子が続く）を使用し、サブブロックモード（１３０５、アフィンＡＭＶＰ、サブブロックマージ）を伴う全てのコーディングユニットに対して左側－上部走査（１３２０、例えば、左側空間予測子が、予測子リストにおいて第１の予測子であり、上部空間予測子が続く）を使用することを提案する。他の予測子もまた、予測子リストに追加され得る（１３３０）。予測子リストが構築された後、動き情報は、予測子リストに基づいて符号化又は復号化され得る（１３４０）。また、サブブロックモードに対して上部－左側、及び非サブブロックモードに対して左側－上部の状態で反対にもなり得ることに留意されたい。
【0135】
様々な方法が本明細書に記載されており、本方法の各々は、記載の方法を達成するための１つ以上のステップ又はアクションを含む。ステップ又はアクションの特定の順序が方法の適切な動作のために必要とされない限り、特定のステップ及び／又はアクションの順序及び／又は使用は、修正又は組み合わされ得る。
【0136】
本出願に記載されている様々な方法及び他の態様を使用して、図２及び図３に示されたようなビデオ符号化器２００及びビデオ復号化器３００のモジュール、例えば、動き推定及び補償モジュール（２７０、２７５、３７５）を修正することができる。更に、本態様は、ＶＶＣ又はＨＥＶＣに限定されず、例えば、他の規格及び勧告、並びに任意のそのような規格及び勧告の拡張に適用することができる。別段の指示がない限り、又は技術的に除外されない限り、本出願に記載される態様は、個別で又は組み合わせて使用され得る。
【0137】
一実施形態は、１つ以上のプロセッサによって実行されるとき、１つ以上のプロセッサに上で説明された実施形態のいずれかに従う符号化方法又は復号化方法を実行させる命令を含む、コンピュータプログラムを提供する。本実施形態のうちの１つ以上はまた、上で説明された方法に従って、ビデオデータを符号化するか、又は復号化するための命令を記憶したコンピュータ可読記憶媒体を提供する。１つ以上の実施形態はまた、上で説明された方法に従って生成されたビットストリームを記憶したコンピュータ可読記憶媒体を提供する。１つ以上の実施形態はまた、上で説明された方法に従って生成されたビットストリームを送信又は受信するための方法及び装置を提供する。
【0138】
様々な実装形態は、復号化することを含む。本出願で使用される場合、「復号化」は、例えば、ディスプレイに好適な最終出力を生成するために受信された符号化シーケンス上で実行されるプロセスの全て又は一部分を包含し得る。様々な実施形態において、このような処理は、例えば、エントロピ復号化、逆量子化、逆変換、及び差動復号化など、復号化器によって一般的に実行される処理のうちの１つ以上を含む。「復号化処理」という句が、操作のサブセットを具体的に指すことを意図しているか、又はより広範な復号化処理を一般的に指すことを意図しているかは、特定の説明の文脈に基づいて明らかになり、当業者にはよく理解されると考えられる。
【0139】
様々な実装形態は、符号化することを含む。「復号化（decoding）」に関する上記の考察と同様に、本出願で使用される「符号化（encoding）」は、例えば、符号化されたビットストリームを生成するために入力ビデオシーケンスに対して実行されるプロセスの全て又は一部分を包含し得る。
【0140】
本明細書で使用される際、シンタックス要素、例えば、ＲＳＴカーネルインデックスを示すために使用されるシンタックス、及び平面イントラ予測モードが使用されているか否かを示すために使用されるシンタックスが、説明の用語であることに留意されたい。したがって、これらは他のシンタックス要素名の使用を排除するものではない。
【0141】
本明細書に記載の実装形態及び態様は、例えば、方法又はプロセス、装置、ソフトウェアプログラム、データストリーム、又は信号において実装され得る。たとえ単一の形式の実装形態の文脈でのみ考察されている場合でも（例えば、方法としてのみ考察されている）、考察された特徴の実装形態は、他の形式（例えば、装置又はプログラム）でも実装され得る。装置は、例えば、適切なハードウェア、ソフトウェア、及びファームウェアで実装され得る。本方法は、例えば、コンピュータ、マイクロプロセッサ、集積回路又はプログラマブル論理デバイスを含む、一般に処理デバイスを指すプロセッサなどの装置において実装され得る。プロセッサはまた、例えば、コンピュータ、携帯電話、携帯型／パーソナルデジタルアシスタント（「ＰＤＡ」）及びエンドユーザ間の情報の通信を容易にする他のデバイスなどの通信デバイスを含む。
【0142】
「一実施形態」又は「実施形態」又は「一実装形態」又は「実装形態」、及びそれらの他の変形形態の言及は、実施形態に関連して説明される特定の特徴、構造、特性などが、少なくとも一実施形態に含まれることを意味する。したがって、本明細書の様々な場所に現れる「一実施形態では」又は「実施形態では」又は「一実装形態では」又は「実装形態では」という語句の出現、並びに任意の他の変形例は、必ずしも全てが同じ実施形態を指すものではない。
【0143】
加えて、本出願は、様々な情報を「判定する」ことに言及し得る。情報を判定することは、例えば、情報を推定すること、情報を計算すること、情報を予測すること、又は情報をメモリから取り出すことのうちの１つ以上が含み得る。
【0144】
更に、本出願は、様々な情報に「アクセスすること」に言及する場合がある。情報にアクセスすることには、例えば、情報を受信すること、情報を（例えば、メモリから）取り出すこと、情報を記憶すること、情報を移動させること、情報をコピーすること、情報を計算すること、情報を判定すること、情報を予測すること、又は情報を推定することのうちの１つ以上が含まれ得る。
【0145】
加えて、本出願は、様々な情報を「受信する」ことに言及する場合がある。受信することは、「アクセスする」と同様に、広義の用語であることを意図している。情報を受信することは、例えば、情報にアクセスすること、又は情報を（例えば、メモリから）取り出すことのうちの１つ以上を含み得る。更に、「受信すること」は、典型的には、動作、例えば、情報を記憶すること、情報を処理すること、情報を送信すること、情報を移動すること、情報をコピーすること、情報を消去すること、情報を計算すること、情報を判定すること、情報を予測すること、又は情報を推定することの間時に、何らかの形で関与する。
【0146】
例えば、「Ａ／Ｂ」、「Ａ及び／又はＢ（A and/or B）」及び「Ａ及びＢのうちの少なくとも１つ（at least one of A and B）」の場合、つぎの「／」、「及び／又は（and/or）」、及び「のうちの少なくとも１つ（at least one of）」のいずれかの使用は、第１のリストされた選択肢（Ａ）のみの選択、又は第２のリストされた選択肢（Ｂ）のみの選択、又は両方の選択肢（Ａ及びＢ）の選択を包含することが意図されていることを理解されるべきである。更なる実施例として、「Ａ、Ｂ、及び／又はＣ（A, B, and/or C）」及び「Ａ、Ｂ、及びＣのうちの少なくとも１つ（at least one of A, B, and C）」の場合、かかる表現は、第１のリストされた選択肢（Ａ）のみの選択、又は第２のリストされた選択肢（Ｂ）のみの選択、又は第３のリストされた選択肢（Ｃ）のみの選択、又は第１及び第２のリストされた選択肢（Ａ及びＢ）のみの選択、又は第１及び第３のリストされた選択肢（Ａ及びＣ）のみの選択、又は第２及び第３のリストされた選択肢のみの選択（Ｂ及びＣ）のみ、又は３つ全ての選択肢の選択（Ａ及びＢ及びＣ）を包含することが意図される。このことは、当該技術分野及び関連技術分野の通常の技術を有する者に明らかであるように、リストされた項目の数だけ拡張され得る。
【0147】
当業者には明らかであるように、実装形態は、例えば、記憶又は送信され得る情報を搬送するようにフォーマットされた様々な信号を生成し得る。情報は、例えば、方法を実行するための命令又は記載された実装形態のうちの１つによって生成されたデータを含み得る。例えば、信号は、説明された実施形態のビットストリームを搬送するようにフォーマットされ得る。かかる信号は、例えば、（例えば、スペクトルの無線周波数部分を使用して）電磁波として、又はベースバンド信号としてフォーマットされ得る。フォーマットすることは、例えば、データストリームを符号化し、符号化されたデータストリームで搬送波を変調することを含み得る。信号が搬送する情報は、例えば、アナログ情報又はデジタル情報であり得る。信号は、既知であるように、様々な異なる有線又は無線リンクによって送信され得る。信号は、プロセッサ可読媒体に記憶され得る。
【図1】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】
【図8】
【図9】
【図10】
【図11】
【図12】
【図13】
【手続補正書】
【提出日】2022-06-27
【手続補正1】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項1】
ビデオ符号化のための方法であって、ビデオシーケンス内のピクチャのブロックにアクセスすることと、
前記ブロックのための動きベクトル予測子のリストを生成することであって、
前記ブロックが、複数のコーディングモードのうちの１つを使用することによって符号化され、
前記動きベクトル予測子のリストが、複数の空間予測子を含み、
前記複数のコーディングモードの各々について、前記リスト内の前記第１の空間予測子が、上部近傍ブロックからのものであり、前記第１の空間予測子に続く前記第２の空間予測子が、左側近傍ブロックからのものである、生成することと、
前記動きベクトル予測子の前記リストに基づいて、前記ブロックと関連付けられた動きベクトルを符号化することと、を含む、方法。
【請求項2】
前記複数のコーディングモードが、動きベクトル予測子リストを使用する全ての利用可能なコーディングモードに対応する、請求項１に記載の方法。
【請求項3】
別の複数のコーディングモードが、前記ブロックによって使用されるために利用可能であり、前記複数のコーディングモードの各モードが、マージモードであり、前記別の複数のコーディングモードの各モードが、ＡＭＶＰモードであり、前記別の複数のコーディングモードにおける各モードについて、前記リスト内の前記第１の空間予測子が、前記左側近傍ブロックからのものであり、前記第１の空間予測子に続く前記第２の空間予測子が、前記上部近傍ブロックからのものである、請求項１に記載の方法。
【請求項4】
別の複数のコーディングモードが、前記ブロックによって使用されるために利用可能であり、前記複数のコーディングモードの各モードが、ＡＭＶＰモードであり、前記別の複数のコーディングモードの各モードが、マージモードであり、前記別の複数のコーディングモードにおける各モードについて、前記リスト内の前記第１の空間予測子が、前記左側近傍ブロックからのものであり、前記第１の空間予測子に続く前記第２の空間予測子が、前記上部近傍ブロックからのものである、請求項１に記載の方法。
【請求項5】
別の複数のコーディングモードが、前記ブロックによって使用されるために利用可能であり、前記複数のコーディングモードの各モードが、サブブロックモードであり、前記別の複数のコーディングモードの各モードが、非サブブロックモードであり、前記別の複数のコーディングモードにおける各モードについて、前記リスト内の前記第１の空間予測子が、前記左側近傍ブロックからのものであり、前記第１の空間予測子に続く前記第２の空間予測子が、前記上部近傍ブロックからのものである、請求項１に記載の方法。
【請求項6】
別の複数のコーディングモードが、前記ブロックによって使用されるために利用可能であり、前記複数のコーディングモードの各モードが、非サブブロックモードであり、前記別の複数のコーディングモードの各モードが、サブブロックモードであり、前記複数のコーディングモードにおける各モードについて、前記リスト内の前記第１の空間予測子が、前記左側近傍ブロックからのものであり、前記第１の空間予測子に続く前記第２の空間予測子が、前記上部近傍ブロックからのものである、請求項１に記載の方法。
【請求項7】
ビデオ復号化のための方法であって、ビデオシーケンス内のピクチャのブロックのための動きベクトル予測子のリストを生成することであって、
前記ブロックが、複数のコーディングモードのうちの１つを使用することによって復号化され、
前記動きベクトル予測子のリストが、複数の空間予測子を含み、
前記複数のコーディングモードの各々について、前記リスト内の前記第１の空間予測子が、上部近傍ブロックからのものであり、前記第１の空間予測子に続く前記第２の空間予測子が、左側近傍ブロックからのものである、生成することと、
前記動きベクトル予測子のリストに基づいて、前記ブロックと関連付けられた動きベクトルを復号化することと、を含む、方法。
【請求項8】
前記複数のコーディングモードが、動きベクトル予測子リストを使用する全ての利用可能なコーディングモードに対応する、請求項７に記載の方法。
【請求項9】
別の複数のコーディングモードが、前記ブロックによって使用されるために利用可能であり、前記複数のコーディングモードの各モードが、マージモードであり、前記別の複数のコーディングモードの各モードが、ＡＭＶＰモードであり、前記別の複数のコーディングモードにおける各モードについて、前記リスト内の前記第１の空間予測子が、前記左側近傍ブロックからのものであり、前記第１の空間予測子に続く前記第２の空間予測子が、前記上部近傍ブロックからのものである、請求項７に記載の方法。
【請求項10】
別の複数のコーディングモードが、前記ブロックによって使用されるために利用可能であり、前記複数のコーディングモードの各モードが、ＡＭＶＰモードであり、前記別の複数のコーディングモードの各モードが、マージモードであり、前記別の複数のコーディングモードにおける各モードについて、前記リスト内の前記第１の空間予測子が、前記左側近傍ブロックからのものであり、前記第１の空間予測子に続く前記第２の空間予測子が、前記上部近傍ブロックからのものである、請求項７に記載の方法。
【請求項11】
別の複数のコーディングモードが、前記ブロックによって使用されるために利用可能であり、前記複数のコーディングモードの各モードが、サブブロックモードであり、前記別の複数のコーディングモードの各モードが、非サブブロックモードであり、前記別の複数のコーディングモードにおける各モードについて、前記リスト内の前記第１の空間予測子が、前記左側近傍ブロックからのものであり、前記第１の空間予測子に続く前記第２の空間予測子が、前記上部近傍ブロックからのものである、請求項７に記載の方法。
【請求項12】
別の複数のコーディングモードが、前記ブロックによって使用されるために利用可能であり、前記複数のコーディングモードの各モードが、非サブブロックモードであり、前記別の複数のコーディングモードの各モードが、サブブロックモードであり、前記複数のコーディングモードにおける各モードについて、前記リスト内の前記第１の空間予測子が、前記左側近傍ブロックからのものであり、前記第１の空間予測子に続く前記第２の空間予測子が、前記上部近傍ブロックからのものである、請求項７に記載の方法。
【請求項13】
少なくとも１つのメモリ及び１つ以上のプロセッサを備える、ビデオ符号化のための装置であって、前記１つ以上のプロセッサが、ビデオシーケンス内のピクチャのブロックにアクセスすることと、
前記ブロックのための動きベクトル予測子のリストを生成することであって、
前記ブロックが、複数のコーディングモードのうちの１つを使用することによって符号化され、
前記動きベクトル予測子のリストが、複数の空間予測子を含み、
前記複数のコーディングモードの各々について、前記リスト内の前記第１の空間予測子が、上部近傍ブロックからのものであり、前記第１の空間予測子に続く前記第２の空間予測子が、左側近傍ブロックからのものである、生成することと、
前記動きベクトル予測子のリストに基づいて、前記ブロックと関連付けられた動きベクトルを符号化することと、を行うように構成されている、装置。
【請求項14】
前記複数のコーディングモードが、動きベクトル予測子リストを使用する全ての利用可能なコーディングモードに対応する、請求項１３に記載の装置。
【請求項15】
別の複数のコーディングモードが、前記ブロックによって使用されるために利用可能であり、前記複数のコーディングモードの各モードが、マージモードであり、前記別の複数のコーディングモードの各モードが、ＡＭＶＰモードであり、前記別の複数のコーディングモードにおける各モードについて、前記リスト内の前記第１の空間予測子が、前記左側近傍ブロックからのものであり、前記第１の空間予測子に続く前記第２の空間予測子が、前記上部近傍ブロックからのものである、請求項１３に記載の装置。
【請求項16】
別の複数のコーディングモードが、前記ブロックによって使用されるために利用可能であり、前記複数のコーディングモードの各モードが、ＡＭＶＰモードであり、前記別の複数のコーディングモードの各モードが、マージモードであり、前記別の複数のコーディングモードにおける各モードについて、前記リスト内の前記第１の空間予測子が、前記左側近傍ブロックからのものであり、前記第１の空間予測子に続く前記第２の空間予測子が、前記上部近傍ブロックからのものである、請求項１３に記載の装置。
【請求項17】
少なくとも１つのメモリ及び１つ以上のプロセッサを備える、ビデオ復号化のための装置であって、前記１つ以上のプロセッサが、ビデオシーケンス内のピクチャのブロックのための動きベクトル予測子のリストを生成することであって、
前記ブロックが、複数のコーディングモードのうちの１つを使用することによって復号化され、
前記動きベクトル予測子のリストが、複数の空間予測子を含み、
前記複数のコーディングモードの各々について、前記リスト内の前記第１の空間予測子が、上部近傍ブロックからのものであり、前記第１の空間予測子に続く前記第２の空間予測子が、左側近傍ブロックからのものである、生成することと、
前記動きベクトル予測子のリストに基づいて、前記ブロックと関連付けられた動きベクトルを復号化することと、を行うように構成されている、装置。
【請求項18】
前記複数のコーディングモードが、動きベクトル予測子リストを使用する全ての利用可能なコーディングモードに対応する、請求項１７に記載の装置。
【請求項19】
別の複数のコーディングモードが、前記ブロックによって使用されるために利用可能であり、前記複数のコーディングモードの各モードが、マージモードであり、前記別の複数のコーディングモードの各モードが、ＡＭＶＰモードであり、前記別の複数のコーディングモードにおける各モードについて、前記リスト内の前記第１の空間予測子が、前記左側近傍ブロックからのものであり、前記第１の空間予測子に続く前記第２の空間予測子が、前記上部近傍ブロックからのものである、請求項１７に記載の装置。
【請求項20】
別の複数のコーディングモードが、前記ブロックによって使用されるために利用可能であり、前記複数のコーディングモードの各モードが、ＡＭＶＰモードであり、前記別の複数のコーディングモードの各モードが、マージモードであり、前記別の複数のコーディングモードにおける各モードについて、前記リスト内の前記第１の空間予測子が、前記左側近傍ブロックからのものであり、前記第１の空間予測子に続く前記第２の空間予測子が、前記上部近傍ブロックからのものである、請求項１７に記載の装置。【国際調査報告】