▶ ベイジン バイトダンス ネットワーク テクノロジー カンパニー リミテッドの特許一覧 ▶ バイトダンス インコーポレイテッドの特許一覧
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】特許公報(B2)
(11)【特許番号】
(24)【登録日】2023-07-03
(45)【発行日】2023-07-11
(54)【発明の名称】履歴に基づく動きベクトル予測のための補間フィルタの使用
(51)【国際特許分類】
H04N 19/52 20140101AFI20230704BHJP
H04N 19/523 20140101ALI20230704BHJP
【ＦＩ】
H04N19/52
H04N19/523
【請求項の数】
14
(21)【出願番号】P 2021557130
(86)(22)【出願日】2020-04-01
(65)【公表番号】
(43)【公表日】2022-06-07
(86)【国際出願番号】 CN2020082752
(87)【国際公開番号】W WO2020200236
(87)【国際公開日】2020-10-08
【審査請求日】2021-09-27
(31)【優先権主張番号】PCT/CN2019/080754
(32)【優先日】2019-04-01
(33)【優先権主張国・地域又は機関】CN
(73)【特許権者】
【識別番号】520476341
【氏名又は名称】北京字節跳動網絡技術有限公司
【氏名又は名称原語表記】Ｂｅｉｊｉｎｇ Ｂｙｔｅｄａｎｃｅ Ｎｅｔｗｏｒｋ Ｔｅｃｈｎｏｌｏｇｙ Ｃｏ．， Ｌｔｄ．
【住所又は居所原語表記】Ｒｏｏｍ Ｂ－００３５， ２／Ｆ， Ｎｏ．３ Ｂｕｉｌｄｉｎｇ， Ｎｏ．３０， Ｓｈｉｘｉｎｇ Ｒｏａｄ， Ｓｈｉｊｉｎｇｓｈａｎ Ｄｉｓｔｒｉｃｔ Ｂｅｉｊｉｎｇ １０００４１ Ｃｈｉｎａ
(73)【特許権者】
【識別番号】520477474
【氏名又は名称】バイトダンス インコーポレイテッド
【氏名又は名称原語表記】ＢＹＴＥＤＡＮＣＥ ＩＮＣ．
【住所又は居所原語表記】１２６５５ Ｗｅｓｔ Ｊｅｆｆｅｒｓｏｎ Ｂｏｕｌｅｖａｒｄ， Ｓｉｘｔｈ Ｆｌｏｏｒ， Ｓｕｉｔｅ Ｎｏ． １３７ Ｌｏｓ Ａｎｇｅｌｅｓ， Ｃａｌｉｆｏｒｎｉａ ９００６６ Ｕｎｉｔｅｄ Ｓｔａｔｅｓ ｏｆ Ａｍｅｒｉｃａ
(74)【代理人】
【識別番号】110002000
【氏名又は名称】弁理士法人栄光事務所
(72)【発明者】
【氏名】リウ ホンビン
(72)【発明者】
【氏名】ジャン リー
(72)【発明者】
【氏名】ジャン カイ
(72)【発明者】
【氏名】シュー ジジョン
(72)【発明者】
【氏名】ワン ユエ
【審査官】鉢呂 健
(56)【参考文献】
【文献】米国特許出願公開第２０１８／００９８０６６（ＵＳ，Ａ１）
【文献】CHEN, Jianle et al.，Algorithm description for Versatile Video Coding and Test Model 4 (VTM 4)，Joint Video Experts Team (JVET) of ITU-T SG 16 WP 3 and ISO/IEC JTC 1/SC 29/WG 11 13th Meeting: Marrakech, MA, 9-18 Jan. 2019, [JVET-M1002-v2]，JVET-M1002 (version 2)，ITU-T，2019年03月19日，＜URL:http://phenix.it-sudparis.eu/jvet/doc_end_user/documents/13_Marrakech/wg11/JVET-M1002-v2.zip＞: JVET-M1002-v2.docx: pp.24,26-27
【文献】HENKEL, Anastasia et al.，Non-CE4: Switched half-pel interpolation filter，Joint Video Experts Team (JVET) of ITU-T SG 16 WP 3 and ISO/IEC JTC 1/SC 29/WG 11 14th Meeting: Geneva, CH, 19-27 March 2019, [JVET-N0309-v3]，JVET-N0309 (version 3)，ITU-T，2019年03月25日，＜URL:http://phenix.it-sudparis.eu/jvet/doc_end_user/documents/14_Geneva/wg11/JVET-N0309-v3.zip＞: JVET-N0309-v3.docx: pp.1-8
(58)【調査した分野】(Int.Cl.，ＤＢ名)
Ｈ０４Ｎ １９／００－１９／９８
(57)【特許請求の範囲】
【請求項1】
映像処理方法であって、映像の現在の映像ブロックと前記映像のビットストリームとの間の変換の前に、１または複数の以前に処理されたブロックの動き情報に対応する１または複数のエントリを含む少なくとも１つのＨＭＶＰ（Ｈｉｓｔｏｒｙ－ｂａｓｅｄ Ｍｏｔｉｏｎ Ｖｅｃｔｏｒ Ｐｒｅｄｉｃｔｉｏｎ）テーブルを維持することであって、各エントリは更に、前記１または複数の以前に処理されたブロックに対する補間フィルタ情報を含むように構成され、前記補間フィルタ情報は、前記１または複数の以前に処理されたブロックの予測ブロックに対して使用される少なくとも１つの補間フィルタを示す、ことと、
前記変換に対する、ＨＭＶＰ候補を含む動き候補リストを構成することであって、前記ＨＭＶＰ候補は、前記ＨＭＶＰテーブルから１のエントリを継承することによって導出され、前記継承することは、前記１のエントリに関連付けられた前記補間フィルタ情報を継承することを有する、ことと、
前記動き候補リストに基づいて前記変換を実行することと、
を有し、
前記少なくとも１つのＨＭＶＰテーブルを維持することは、
新たな候補を前記少なくとも１つのＨＭＶＰテーブルに挿入することによって前記少なくとも１つのＨＭＶＰテーブルを選択的に更新することを含み、
前記新たな候補は、前記ＨＭＶＰテーブルからの１のエントリに対応する１の候補と同じ候補として前記補間フィルタ情報をみなさずに、前記動き情報に基づいて判定される、映像処理方法。
【請求項2】
前記新たな候補と前記１の候補とが同じ動き情報であるが、異なる補間フィルタ情報であることに応じて、前記新たな候補は、前記１の候補と同じ候補であると判定される、請求項１に記載の映像処理方法。
【請求項3】
前記動き候補リストは、１または複数の第１の動き候補と、前記動き候補リストに追加された前記１または複数の第１の動き候補から導出された１または複数の第２の動き候補とを含み、前記第２の動き候補に割り当てられた第２の補間フィルタ情報は、前記１または複数の第１の動き候補に割り当てられた１または複数の第１の補間フィルタ情報に基づいて生成される、
請求項１または２に記載の映像処理方法。
【請求項4】
前記第２の動き候補は、ペアワイズ平均マージ候補である、請求項３に記載の映像処理方法。
【請求項5】
前記第２の動き候補は、前記１または複数の第１の動き候補の後に、前記動き候補リストに追加される、請求項３に記載の映像処理方法。
【請求項6】
前記１または複数の第１の動き候補は、前記ＨＭＶＰ候補を有する、請求項３に記載の映像処理方法。
【請求項7】
前記１または複数の第１の補間フィルタ情報と前記第２の補間フィルタ情報は、１／２サンプル補間フィルタインデックスに関連付けられる、請求項３に記載の映像処理方法。
【請求項8】
２つの第１の動き候補と、前記２つの第１の動き候補に関連付けられた、同一の２つの１／２サンプル補間フィルタインデックスとを有する前記１または複数の第１の動き候補に応じて、前記第２の補間フィルタに関連付けられた前記１／２サンプル補間フィルタインデックスは、前記２つの第１の動き候補に関連付けられた前記１／２サンプル補間フィルタインデックスと等しくなる様に設定される、請求項７に記載の映像処理方法。
【請求項9】
２つの第１の動き候補と、前記２つの第１の動き候補に関連付けられた、同一でない２つの１／２サンプル補間フィルタインデックスとを有する前記１または複数の第１の動き候補に応じて、前記第２の補間フィルタに関連付けられた前記１／２サンプル補間フィルタインデックスは０に設定される、請求項７に記載の映像処理方法。
【請求項10】
前記変換は、前記現在の映像ブロックを前記ビットストリームに符号化することを有する、請求項１～９のいずれか一項に記載の映像処理方法。
【請求項11】
前記変換は、前記現在の映像ブロックを前記ビットストリームから復号化することを有する、請求項１～９のいずれか一項に記載の映像処理方法。
【請求項12】
プロセッサと、命令を有する非一時的メモリとを有する、映像データを処理するための装置であって、前記命令が前記プロセッサによって実行されることにより、前記プロセッサに、
映像の現在の映像ブロックと前記映像のビットストリームとの間の変換の前に、１または複数の以前に処理されたブロックの動き情報に対応する１または複数のエントリを含む少なくとも１つのＨＭＶＰ（Ｈｉｓｔｏｒｙ－ｂａｓｅｄ Ｍｏｔｉｏｎ Ｖｅｃｔｏｒ Ｐｒｅｄｉｃｔｉｏｎ）テーブルを維持することであって、各エントリは更に、前記１または複数の以前に処理されたブロックに対する補間フィルタ情報を含むように構成され、前記補間フィルタ情報は、前記１または複数の以前に処理されたブロックの予測ブロックに対して使用される少なくとも１つの補間フィルタを示す、ことと、
前記変換に対する、ＨＭＶＰ候補を含む動き候補リストを構成することであって、前記ＨＭＶＰ候補は、前記ＨＭＶＰテーブルから１のエントリを継承することによって導出され、前記継承することは、前記１のエントリに関連付けられた前記補間フィルタ情報を継承することを有する、ことと、
前記動き候補リストに基づいて前記変換を実行することと、
を行わせ、
前記少なくとも１つのＨＭＶＰテーブルを維持することは、
新たな候補を前記少なくとも１つのＨＭＶＰテーブルに挿入することによって前記少なくとも１つのＨＭＶＰテーブルを選択的に更新することを含み、
前記新たな候補は、前記ＨＭＶＰテーブルからの１のエントリに対応する１の候補と同じ候補として前記補間フィルタ情報をみなさずに、前記動き情報に基づいて判定される、装置。
【請求項13】
命令を格納する非一時的コンピュータ可読記憶媒体であって、プロセッサに、
映像の現在の映像ブロックと前記映像のビットストリームとの間の変換の前に、１または複数の以前に処理されたブロックの動き情報に対応する１または複数のエントリを含む少なくとも１つのＨＭＶＰ（Ｈｉｓｔｏｒｙ－ｂａｓｅｄ Ｍｏｔｉｏｎ Ｖｅｃｔｏｒ Ｐｒｅｄｉｃｔｉｏｎ）テーブルを維持することであって、各エントリは更に、前記１または複数の以前に処理されたブロックに対する補間フィルタ情報を含むように構成され、前記補間フィルタ情報は、前記１または複数の以前に処理されたブロックの予測ブロックに対して使用される少なくとも１つの補間フィルタを示す、ことと、
前記変換に対する、ＨＭＶＰ候補を含む動き候補リストを構成することであって、前記ＨＭＶＰ候補は、前記ＨＭＶＰテーブルから１のエントリを継承することによって導出され、前記継承することは、前記１のエントリに関連付けられた前記補間フィルタ情報を継承することを有する、ことと、
前記動き候補リストに基づいて前記変換を実行することと、
を行わせ、
前記少なくとも１つのＨＭＶＰテーブルを維持することは、
新たな候補を前記少なくとも１つのＨＭＶＰテーブルに挿入することによって前記少なくとも１つのＨＭＶＰテーブルを選択的に更新することを含み、
前記新たな候補は、前記ＨＭＶＰテーブルからの１のエントリに対応する１の候補と同じ候補として前記補間フィルタ情報をみなさずに、前記動き情報に基づいて判定される、非一時的コンピュータ可読記憶媒体。
【請求項14】
映像のビットストリームを格納するための方法であって、
１または複数の以前に処理されたブロックの動き情報に対応する１または複数のエントリを含む少なくとも１つのＨＭＶＰ（Ｈｉｓｔｏｒｙ－ｂａｓｅｄ Ｍｏｔｉｏｎ Ｖｅｃｔｏｒ Ｐｒｅｄｉｃｔｉｏｎ）テーブルを維持することであって、各エントリは更に、前記１または複数の以前に処理されたブロックに対する補間フィルタ情報を含むように構成され、前記補間フィルタ情報は、前記１または複数の以前に処理されたブロックの予測ブロックに対して使用される少なくとも１つの補間フィルタを示す、ことと、
ＨＭＶＰ候補を含む動き候補リストを構成することであって、前記ＨＭＶＰ候補は、前記ＨＭＶＰテーブルから１のエントリを継承することによって導出され、前記継承することは、前記１のエントリに関連付けられた前記補間フィルタ情報を継承することを有する、ことと、
前記動き候補リストに基づいて前記ビットストリームを生成することと、
非一時的コンピュータ記録媒体に前記ビットストリームを格納することと、
を有し、
前記少なくとも１つのＨＭＶＰテーブルを維持することは、
新たな候補を前記少なくとも１つのＨＭＶＰテーブルに挿入することによって前記少なくとも１つのＨＭＶＰテーブルを選択的に更新することを含み、
前記新たな候補は、前記ＨＭＶＰテーブルからの１のエントリに対応する１の候補と同じ候補として前記補間フィルタ情報をみなさずに、前記動き情報に基づいて判定される、方法。
【発明の詳細な説明】
【技術分野】
【0001】
関連出願の相互参照
本願は、２０２０年４月１日出願の国際特許出願第ＰＣＴ／ＣＮ２０２０／０８２７５２号の国内段階である。パリ条約に基づく適用可能な特許法および／または規則に基づいて、本願は、２０１９年４月１日出願の国際特許出願第ＰＣＴ／ＣＮ２０１９／０８０７５４号の優先権および利益を適時に主張することを目的とする。上記出願の全ては、それらの全文における参照により、ここで援用される。
本願は、２０２０年４月１日出願の国際特許出願第ＰＣＴ／ＣＮ２０２０／０８２７５２号の国内段階である。パリ条約に基づく適用可能な特許法および／または規則に基づいて、本願は、２０１９年４月１日出願の国際特許出願第ＰＣＴ／ＣＮ２０１９／０８０７５４号の優先権および利益を適時に主張することを目的とする。上記出願の全ては、それらの全文における参照により、ここで援用される。
【0002】
本特許明細書は、映像処理技術、デバイスおよびシステムに関する。
【背景技術】
【0003】
映像圧縮の進歩にもかかわらず、デジタル映像は、依然として、インターネットおよび他のデジタル通信ネットワークにおいて最大の帯域幅の使用量を占めている。映像を受信および表示することが可能である接続されたユーザ機器の数が増加するにつれ、デジタル映像の使用に対する帯域幅需要は増大し続けることが予測される。
【発明の概要】
【0004】
デジタル映像処理に関し、具体的には、動きベクトルを導出することに関するデバイス、システム、および方法が記載される。記載された方法は、既存の映像符号化規格（例えば、ＨＥＶＣ（Ｈｉｇｈ Ｅｆｆｉｃｉｅｎｃｙ Ｖｉｄｅｏ Ｃｏｄｉｎｇ）またはＶＶＣ（Ｖｅｒｓａｔｉｌｅ Ｖｉｄｅｏ Ｃｏｄｉｎｇ））および将来の映像符号化規格または映像コーデックの両方に適用されてもよい。
【0005】
１つの代表的な態様において、開示される技術は、映像処理の方法を提供するために使用されてもよい。この方法は、映像の現在の映像ブロックと映像の符号化表現との間で変換を行うことを含み、前記符号化表現は、デフォルトの動き情報精度を使用しない現在の映像ブロックに対する複数の精度セットからの動き情報精度を示す第１のパラメータ、および／または、代替１／２画素補間フィルタを前記変換に使用するかどうかを識別する第２のパラメータを含み、前記第１のパラメータおよび／または前記第２のパラメータは各々、１または複数のビンに関連付けられ、コンテキストモデルに基づく符号化は、前記符号化表現における前記１または複数のビンの第１のビンに対してのみ使用される。
【0006】
別の態様では、開示される技術は、映像処理の方法を提供するために使用されてもよい。この方法は、映像の現在の映像ブロックと前記映像の符号化表現との間での変換のために、補間フィルタを使用して動き情報を判定することであって、前記動き情報は、Ｍ整数画素精度または１／Ｎサブピクセル精度を有し、Ｍ、Ｎは正の整数であり、Ｎは２に等しくない、ことと、前記動き情報に基づいて、前記変換を行うことであって、前記符号化表現の構文フィールドが前記補間フィルタに対応する、こととを含む。
【0007】
別の態様では、開示される技術は、映像処理の方法を提供するために使用されてもよい。この方法は、映像の現在の映像ブロックと前記映像の符号化表現との間での変換のために、動き候補リストにおける１または複数の動き候補および前記１または複数の動き候補に関連付けられた１または複数の補間フィルタに基づいて、第１の動き候補を生成することであって、補間フィルタが、前記１または複数の動き候補に関連付けられた前記１または複数の補間フィルタに依存する規則に従って、前記第１の動き候補に割り当てられる、ことと、前記第１の動き候補を前記動き候補リストに挿入することと、前記動き候補リストに基づいて前記変換を行うことと、を含む。
【0008】
別の態様では、開示される技術は、映像処理の方法を提供するために使用されてもよい。この方法は、映像の第１の映像領域における第１のブロックと、第２の映像領域における第２のブロックとを含む複数のブロックの各々に、前記複数のブロックの各々に対する動きベクトル差分情報を補間するために使用するそれぞれの補間フィルタについての情報を含む動き情報を関連付けることと、前記動き情報を使用して、前記映像と前記映像の符号化表現との間での変換を行うことと、を含む。
【0009】
別の態様では、開示される技術は、映像処理の方法を提供するために使用してもよい。この方法は、映像の現在の映像ブロックと前記映像の符号化表現との間で変換を行うことを含み、前記現在の映像ブロックは、マージモードまたはＭＭＶＤ（Ｍｅｒｇｅ ｗｉｔｈ Ｍｏｔｉｏｎ Ｖｅｃｔｏｒ Ｄｉｆｆｅｒｅｎｔ）モードを使用して前記符号化表現で表現され、１／Ｎの精度を有する補間フィルタが、規則に従って、前記現在の映像ブロックに関連付けられた予測ブロックを補間するために使用され、Ｎは、正の整数であり、前記規則は、前記補間フィルタがデフォルトの補間フィルタとは異なる代替補間フィルタである場合、補間情報を継承するための条件を定義する。
【0010】
別の態様では、開示される技術は、映像処理の方法を提供するために使用されてもよい。この方法は、現在の映像ブロックを含む映像と前記映像の符号化表現との間での変換中に、前記現在の映像ブロックを処理することと、マージ候補リストと前記現在の映像ブロックの動き情報とを比較し、選択的に更新することと、を含み、前記動き情報は、補間フィルタ情報を含み、前記補間フィルタ情報は、前記符号化表現における前記現在の映像ブロックを表すために使用される動きベクトル差分値を補間するために使用される補間フィルタのパラメータを含む。
【0011】
１つの代表的な態様において、開示される技術は、映像処理の方法を提供するために使用されてもよい。この方法は、映像領域の現在の映像ブロックと前記映像の符号化表現との間の変換に先だって、少なくとも１つのＨＭＶＰ（Ｈｉｓｔｏｒｙ－ｂａｓｅｄ Ｍｏｔｉｏｎ Ｖｅｃｔｏｒ Ｐｒｅｄｉｃｔｉｏｎ）テーブルを維持することであって、前記ＨＭＶＰテーブルは、１または複数の以前に処理されたブロックの動き情報に対応する１または複数のエントリを含む、ことと、前記少なくとも１つのＨＭＶＰテーブルを使用して前記変換を行うことと、を含み、各エントリの前記動き情報は、前記１または複数の以前に処理されたブロックのための補間フィルタ情報を含むように構成され、前記補間フィルタ情報は、前記１または複数の以前に処理されたブロックの予測ブロックを補間するために使用される補間フィルタを示す。
【0012】
１つの代表的な態様において、開示される技術は、映像処理の方法を提供するために使用されてもよい。この方法は、映像領域の現在の映像ブロックと前記映像の符号化表現との間の変換に先だって、１または複数の以前に処理されたブロックの動き情報に対応する１または複数のエントリを含む、少なくとも１つのＨＭＶＰ（Ｈｉｓｔｏｒｙ－ｂａｓｅｄ Ｍｏｔｉｏｎ Ｖｅｃｔｏｒ Ｐｒｅｄｉｃｔｉｏｎ）テーブルを維持することであって、各エントリの前記動き情報は、前記１または複数の以前に処理されたブロックのための補間フィルタ情報を含むように構成される、ことと、前記変換のために、ＨＭＶＰマージ候補を含む動き候補リストを構築することであって、前記ＨＭＶＰ候補は、１つのエントリを、前記１つのエントリに関連付けられた対応する補間フィルタ情報を含む前記ＨＭＶＰテーブルから継承することによって導出される、ことと、前記動き候補リストに基づいて前記変換を行うことと、を含む。
【0013】
１つの代表的な態様において、開示される技術は、映像処理の方法を提供するために使用されてもよい。この方法は、映像の符号化表現において、前記映像の現在の映像ブロックを表すために使用される符号化モードを決定することと、前記符号化モードに従って、前記現在の映像ブロックを前記符号化表現に符号化することと、を含み、動き情報を表すための１／２画素精度の使用は、前記符号化モードの使用によって、前記現在の映像ブロックに対して無効化される。
【0014】
１つの代表的な態様において、開示される技術は、映像処理の方法を提供するために使用されてもよい。この方法は、映像の現在の映像ブロックが符号化モードを使用して符号化されていると判定するために、前記映像の符号化表現を構文解析することと、前記符号化モードに従って、前記符号化表現から前記現在の映像ブロックの復号化表現を生成することと、を含み、動き情報を表すための１／２画素精度の使用は、前記符号化モードを使用することによって、前記現在の映像ブロックに対して無効化される。
【0015】
１つの代表的な態様において、開示される技術は、映像処理の方法を提供するために使用されてもよい。この方法は、ＧＢｉ（Ｇｅｎｅｒａｌｉｚｅｄ Ｂｉ－ｐｒｅｄｉｃｔｉｏｎ）モードを使用して処理される現在の映像ブロックに対して、第１の重み係数と、第２の異なる重み係数を第１の予測ブロックと第２の予測ブロックに対してそれぞれ使用するように判定することであって、前記第１の重み係数および前記第２の重み係数は、重み係数セットから選択される、ことと、前記判定に基づいて、映像の現在の映像ブロックと前記映像の符号化表現との間の変換を行うことと、を含み、インターモードに使用される第１の重み係数セットは、アフィンインターモードに使用される第２の重み係数セットとは異なる。
【0016】
１つの代表的な態様において、開示される技術は、映像処理の方法を提供するために使用されてもよい。この方法は、映像の映像領域の複数の映像ユニットと前記複数の映像ユニットの符号化表現との間での変換のために、映像ユニットの符号化モードに依存する補間フィルタに関する情報を判定することであって、前記補間フィルタは、前記符号化表現において動きベクトル差分値を補間するために使用され、Ｍ整数画素精度または１／Ｎサブピクセル精度を有し、ＭおよびＮは正の整数である、ことと、前記補間フィルタを使用してこの変換を行うことと、を含む。
【0017】
１つの代表的な態様において、開示される技術は、映像符号化の方法を提供するために使用されてもよい。この方法は、映像の符号化表現において、前記映像の現在の映像ブロックを表すために使用される符号化モードを決定することと、前記符号化モードに従って、前記現在の映像ブロックを前記符号化表現に符号化することと、を含み、動き情報を表すためのデフォルトの１／２画素精度フィルタに加えた代替１／２画素精度フィルタの使用は、前記符号化モードの使用によって、前記現在の映像ブロックに対して無効化される。
【0018】
１つの代表的な態様において、開示される技術は、映像復号化の方法を提供するために使用されてもよい。この方法は、映像の現在の映像ブロックが符号化モードを使用して符号化されていると判定するために、前記映像の符号化表現を構文解析することと、前記符号化モードに従って、前記符号化表現から前記現在の映像ブロックの復号化表現を生成することと、を含み、動き情報を表すためのデフォルトの１／２画素精度フィルタに加えた代替１／２画素精度フィルタの使用は、前記符号化モードを使用することによって、前記現在の映像ブロックに対して無効化される。
【0019】
１つの代表的な態様において、開示される技術は、映像符号化の方法を提供するために使用されてもよい。この方法は、映像の映像ブロックに対して有効にされている代替補間フィルタを使用することによって、符号化モードが前記映像ブロックを前記映像の符号化表現に符号化するために許可されないことを判定することと、前記決定に基づいて、前記映像ブロックの前記符号化表現を生成することと、を含み、前記代替補間フィルタは、前記現在の映像ブロックのインター予測ブロックを補間するために使用される。
【0020】
１つの代表的な態様において、開示される技術は、映像復号化の方法を提供するために使用されてもよい。この方法は、映像の映像ブロックに対して有効にされている代替補間フィルタを使用することによって、前記映像の符号化表現における前記映像ブロックを表すための符号化モードの使用が許可されないことを判定することと、前記判定に基づいて前記符号化表現を構文解析することによって、復号化された映像ブロックを生成することと、を含む。
【0021】
さらに、代表的な態様において、前記開示される方法のうちのいずれか１つは、エンコーダ側の実装形態である。
【0022】
また、代表的な態様において、前記開示される方法のうちのいずれか１つは、デコーダ側の実装形態である。
【0023】
上述された方法のうちの１つは、プロセッサが実行可能なコードの形式で実施され、コンピュータ可読プログラム媒体に記憶される。
【0024】
さらに別の代表的な態様では、プロセッサと、命令を有する非一時的メモリとを備える、映像システムにおける装置が開示される。命令は、プロセッサによって実行されると、プロセッサに、本明細書に開示される方法のいずれかを実装させる。
【0025】
開示される技術の上記および他の態様および特徴は、図面、説明および特許請求の範囲でより詳細に説明される。
【図面の簡単な説明】
【0026】
【図1】４分木＋２分木（ＱＴＢＴ）ブロック構造を示す図。
【図2】マージ候補リストの構築の例を示す図。
【図3】空間的候補の位置の例を示す図。
【図4】空間的マージ候補の冗長性チェックの対象となる候補対の例を示す図。
【図5A】現在のブロックのサイズおよび形状に基づく第２の予測ユニット（ＰＵ：Ｐｒｅｄｉｃｔｉｏｎ Ｕｎｉｔ）の位置の例を示す図。
【図5B】現在のブロックのサイズおよび形状に基づく第２の予測ユニット（ＰＵ）の位置の例を示す図。
【図6】時間的マージ候補のための動きベクトルのスケーリングの例を示す図。
【図7】時間的マージ候補の候補位置の例を示す図。
【図8】結合双方向予測マージ候補を生成する例を示す図。
【図9】動きベクトル予測候補の構築の例を示す図。
【図10】空間的動きベクトル候補のための動きベクトルのスケーリングの例を示す図。
【図11A】本明細書に記載されたビジュアルメディアの復号化またはビジュアルメディアの符号化技術を実装するためのハードウェアプラットフォームの一例を示すブロック図。
【図11B】本明細書に記載されたビジュアルメディアの復号化またはビジュアルメディアの符号化技術を実装するためのハードウェアプラットフォームの一例を示すブロック図。
【図12A】開示された技術のいくつかの実装形態に基づく、映像処理のための例示的な方法のフローチャート。
【図12B】開示された技術のいくつかの実装形態に基づく、映像処理のための例示的な方法のフローチャート。
【図13A】開示された技術のいくつかの実装形態に基づく、映像処理のための例示的な方法のフローチャート。
【図13B】開示された技術のいくつかの実装形態に基づく、映像処理のための例示的な方法のフローチャート。
【図13C】開示された技術のいくつかの実装形態に基づく、映像処理のための例示的な方法のフローチャート。
【図14A】開示された技術のいくつかの実装形態に基づく、映像処理のための例示的な方法のフローチャート。
【図14B】開示された技術のいくつかの実装形態に基づく、映像処理のための例示的な方法のフローチャート。
【図15A】開示された技術のいくつかの実装形態に基づく、映像処理のための例示的な方法のフローチャート。
【図15B】開示された技術のいくつかの実装形態に基づく、映像処理のための例示的な方法のフローチャート。
【図15C】開示された技術のいくつかの実装形態に基づく、映像処理のための例示的な方法のフローチャート。
【図15D】開示された技術のいくつかの実装形態に基づく、映像処理のための例示的な方法のフローチャート。
【図16A】開示される技術のいくつかの実装形態に基づく、映像処理のための例示的な方法のフローチャートを示す。
【図16B】開示される技術のいくつかの実装形態に基づく、映像処理のための例示的な方法のフローチャートを示す。
【図16C】開示される技術のいくつかの実装形態に基づく、映像処理のための例示的な方法のフローチャートを示す。
【図16D】開示される技術のいくつかの実装形態に基づく、映像処理のための例示的な方法のフローチャートを示す。
【発明を実施するための形態】
【0027】
１． ＨＥＶＣ／Ｈ．２６５における映像符号化
【0028】
映像符号化規格は、主に周知のＩＴＵ－ＴおよびＩＳＯ／ＩＥＣ規格の開発によって発展してきた。ＩＴＵ－ＴはＨ．２６１とＨ．２６３を作り、ＩＳＯ／ＩＥＣはＭＰＥＧ－１とＭＰＥＧ－４ Ｖｉｓｕａｌを作り、両団体はＨ．２６２／ＭＰＥＧ－２ ＶｉｄｅｏとＨ．２６４／ＭＰＥＧ－４ ＡＶＣ（Ａｄｖａｎｃｅｄ Ｖｉｄｅｏ Ｃｏｄｉｎｇ）とＨ．２６５／ＨＥＶＣ規格を共同で作った。Ｈ．２６２以来、映像符号化規格は、時間的予測と変換符号化が利用されるハイブリッド映像符号化構造に基づく。ＨＥＶＣを超えた将来の映像符号化技術を探索するため、２０１５年には、ＶＣＥＧとＭＰＥＧが共同でＪＶＥＴ（Ｊｏｉｎｔ Ｖｉｄｅｏ Ｅｘｐｌｏｒａｔｉｏｎ Ｔｅａｍ）を設立した。それ以来、多くの新しい方法がＪＶＥＴによって採用され、ＪＥＭ（Ｊｏｉｎｔ Ｅｘｐｌｏｒａｔｉｏｎ Ｍｏｄｅ）と呼ばれる参照ソフトウェアに組み込まれてきた。２０１８年４月には、ＶＣＥＧ（Ｑ６／１６）とＩＳＯ／ＩＥＣ ＪＴＣ１ ＳＣ２９／ＷＧ１１（ＭＰＥＧ）の間にＪＶＥＴ（Ｊｏｉｎｔ Ｖｉｄｅｏ Ｅｘｐｅｒｔ Ｔｅａｍ）が発足し、ＨＥＶＣと比較して５０％のビットレート削減を目標にＶＶＣ規格の策定に取り組んでいる。
【0029】
２．１． より大きいＣＴＵを有する４分木＋２分木（ＱＴＢＴ）ブロック構造
【0030】
ＨＥＶＣにおいて、ＣＴＵは、様々な局所的特徴に適応するように、符号化ツリーと呼ばれる４分木構造を用いてＣＵに分割される。インターピクチャ（時間的）予測またはイントラピクチャ（空間的）予測を使用して、ピクチャ領域を符号化するかどうかの決定は、ＣＵレベルで行われる。各ＣＵは、ＰＵ分割タイプに応じて１つ、２つまたは４つのＰＵに更に分割することができる。１つのＰＵの内部では、同じ予測処理が適用され、ＰＵ単位で関連情報がデコーダに送信される。ＰＵ分割タイプに基づく予測処理を適用して残差ブロックを得た後、ＣＵのための符号化ツリーに類似した別の４分木構造に基づいて、ＣＵを変換ユニット（ＴＵ：Ｔｒａｎｓｆｏｒｍ Ｕｎｉｔ）に分割することができる。ＨＥＶＣ構造の重要な特徴の１つは、ＣＵ、ＰＵ、ＴＵを含む複数のパーティション概念を有することである。
【0031】
図１は、４分木＋２分木（ＱＴＢＴ：ＱｕａｄＴｒｅｅ ｐｌｕｓ Ｂｉｎａｒｙ Ｔｒｅｅ）ブロック構造を示す図である。ＱＴＢＴ構造は、複数の分割タイプの概念を削除する。すなわち、ＣＵ、ＰＵ、ＴＵの概念の分離を取り除き、ＣＵ分割の形状の柔軟性を向上させる。ＱＴＢＴブロック構造において、ＣＵは正方形または長方形のいずれかを有することができる。図１に示すように、まず、符号化ツリーユニット（ＣＴＵ：Ｃｏｄｉｎｇ Ｔｒｅｅ Ｕｎｉｔ）を４分木構造で分割する。４分木の葉ノードは、２分木構造によってさらに分割される。２分木の分割には、対称水平分割と対称垂直分割の２つの分割タイプがある。２分木の葉ノードは、符号化ユニット（ＣＵ：Ｃｏｄｉｎｇ Ｕｎｉｔ）と呼ばれ、このセグメント化は、それ以上の分割を行うことなく、予測および変換処理に使用される。これは、ＱＴＢＴの符号化されたブロック構造において、ＣＵ、ＰＵおよびＴＵが同じブロックサイズを有することを意味する。ＪＥＭにおいて、ＣＵは、しばしば異なる色成分の符号化ブロック（ＣＢ：Ｃｏｄｉｎｇ Ｂｌｏｃｋ）からなり、例えば、４：２：０彩度フォーマットのＰおよびＢスライスの場合、１つのＣＵは１つの輝度ＣＢおよび２つの彩度ＣＢを含み、また、ＣＵは、しばしば単一の成分のＣＢからなり、例えば、Ｉスライスの場合、１つのＣＵは、１つの輝度ＣＢのみ、または、２つの彩度ＣＢのみを含む。
【0032】
ＱＴＢＴ分割スキームに対して以下のパラメータが規定される。
－ＣＴＵのサイズ：４分木のルートノードのサイズ、ＨＥＶＣと同じ概念
－ＭｉｎＱＴＳｉｚｅ：最小許容の４分木の葉ノードサイズ
－ＭａｘＢＴＳｉｚｅ：最大許容の２分木ルートノードサイズ
－ＭａｘＢＴＤｅｐｔｈ：最大許容の２分木の深さ
－ＭｉｎＢＴＳｉｚｅ：最小許容の２分木の葉ノードのサイズ
－ＣＴＵのサイズ：４分木のルートノードのサイズ、ＨＥＶＣと同じ概念
－ＭｉｎＱＴＳｉｚｅ：最小許容の４分木の葉ノードサイズ
－ＭａｘＢＴＳｉｚｅ：最大許容の２分木ルートノードサイズ
－ＭａｘＢＴＤｅｐｔｈ：最大許容の２分木の深さ
－ＭｉｎＢＴＳｉｚｅ：最小許容の２分木の葉ノードのサイズ
【0033】
ＱＴＢＴの分割構造の一例において、ＣＴＵのサイズを、２つの対応する６４×６４のブロックの彩度サンプルを有する１２８×１２８の輝度サンプルとして設定し、ＭｉｎＱＴＳｉｚｅを１６×１６として設定し、ＭａｘＢＴＳｉｚｅを６４×６４として設定し、ＭｉｎＢＴＳｉｚｅ（幅および高さの両方について）を４×４として設定し、ＭａｘＢＴＤｅｐｔｈを４として設定する。４分木の分割は、まずＣＴＵに適用され、４分木の葉ノードを生成する。４分木の葉ノードは、１６×１６（即ち、ＭｉｎＱＴＳｉｚｅ）から１２８×１２８（即ち、ＣＴＵサイズ）までのサイズを有してもよい。葉４分木のノードが１２８×１２８である場合、サイズがＭａｘＢＴＳｉｚｅ（すなわち、６４×６４）を超えるため、２分木によってさらに分割されない。そうでない場合、葉４分木のノードは、２分木によってさらに分割されてもよい。従って、４分木の葉ノードは、２分木のルートノードでもあり、その２分木の深さは０である。２分木の深さがＭａｘＢＴＤｅｐｔｈ（すなわち、４）に達した場合、それ以上の分割は考慮されない。２分木のノードの幅がＭｉｎＢＴＳｉｚｅ（すなわち、４）に等しい場合、それ以上の水平分割は考慮されない。同様に、２分木のノードの高さがＭｉｎＢＴＳｉｚｅに等しい場合、それ以上の垂直分割は考慮されない。２分木の葉ノードは、さらに分割することなく、予測および変換処理によってさらに処理される。ＪＥＭにおいて、最大ＣＴＵサイズは、２５６×２５６個の輝度サンプルである。
【0034】
図１（左）はＱＴＢＴを用いたブロックの分割の例を示し、図１（右）は対応する木表現を示す。実線は４分木の分割を表し、点線は２分木の分割を表す。２分木の各分割（即ち、非葉）ノードにおいて、１つのフラグが、どの分割タイプ（即ち、水平または垂直）が使用されるかを示すために信号通知される。ここで、０は、水平分割を表し、１は、垂直分割を表す。４分木の分割の場合、４分木の分割は常にブロックを水平および垂直に分割し、等分したサイズの４つのサブブロックを生成するため、分割タイプを示す必要がない
【0035】
さらに、ＱＴＢＴ方式は、輝度および彩度が別個のＱＴＢＴ構造を有する能力をサポートする。現在、ＰおよびＢスライスの場合、１つのＣＴＵにおける輝度および彩度ＣＴＢは、同じＱＴＢＴ構造を共有する。しかしながら、Ｉスライスの場合、輝度ＣＴＢはＱＴＢＴ構造によってＣＵに分割され、彩度ＣＴＢは別のＱＴＢＴ構造によって彩度ＣＵに分割される。これは、Ｉスライスにおける１つのＣＵが１つの輝度成分の１つの符号化ブロックまたは２つの彩度成分の符号化ブロックからなり、ＰまたはＢスライスにおける１つのＣＵが３つの色成分すべての符号化ブロックからなることを意味する。
【0036】
ＨＥＶＣにおいて、小さなブロックのためのインター予測は、動き補償のメモリアクセスを低減するために制限され、その結果、４×８および８×４ブロックのために双方向予測はサポートされず、４×４ブロックのためにインター予測はサポートされない。ＪＥＭのＱＴＢＴにおいて、これらの制限は取り除かれる。
【0037】
２．２． ＨＥＶＣ／Ｈ．２６５におけるインター予測
【0038】
各インター予測されたＰＵは、１つまたは２つの参照ピクチャリストのための動きパラメータを有する。動きパラメータは、動きベクトルおよび参照ピクチャインデックスを含む。２つの参照ピクチャリストのうちの１つの使用は、ｉｎｔｅｒ＿ｐｒｅｄ＿ｉｄｃを使用して信号通知されてもよい。動きベクトルは、予測子に対する差分として明確に符号化されてもよい。
【0039】
ＣＵがスキップモードにて符号化される場合、１つのＰＵがこのＣＵに関連付けられ、有意な残差係数、符号化された動きベクトル差分、もしくは参照ピクチャインデックスもない。マージモードを指定し、これにより、現在のＰＵのための動きパラメータを、空間的および時間的候補を含む近傍のＰＵから取得する。マージモードは、スキップモードのためだけでなく、任意のインター予測されたＰＵに適用することができる。マージモードの代替として、動きパラメータの明示的な送信があり、動きベクトル（より正確には、動きベクトル予測子と比較した動きベクトル差分）、各参照ピクチャリストの対応する参照ピクチャインデックス、および参照ピクチャリストの使用が、各ＰＵに明確に信号通知される。このようなモードを、本開示ではＡＭＶＰ（Ａｄｖａｎｃｅｄ Ｍｏｔｉｏｎ Ｖｅｃｔｏｒ Ｐｒｅｄｉｃｔｉｏｎ）と呼ぶ。
【0040】
２つの参照ピクチャリストのうちの１つを使用することを信号通知が示す場合、サンプルのうちの１つのブロックからＰＵが生成される。これを「単一予測」と呼ぶ。ＰスライスおよびＢスライスの両方に対して単一予測が利用可能である。
【0041】
両方の参照ピクチャリストを使用することを信号通知が示す場合、サンプルのうちの２つのブロックからＰＵが生成される。これを「双方向予測」と呼ぶ。Ｂスライスのみに双方向予測が利用可能である。
【0042】
以下、ＨＥＶＣに規定されるインター予測モードについて詳細に説明する。まず、マージモードについて説明する。
【0043】
２．２．１． マージモード
２．２．１．１． マージモードの候補の導出
２．２．１．１． マージモードの候補の導出
【0044】
マージモードを使用してＰＵを予測する場合、ビットストリームからマージ候補リストにおけるエントリを指すインデックスを構文解析し、これを使用して動き情報を検索する。このリストの構成は、ＨＥＶＣ規格で規定されており、以下のステップのシーケンスに基づいてまとめることができる。
●ステップ１：初期候補導出
〇ステップ１．１：空間的候補導出
〇ステップ１．２：空間的候補の冗長性チェック
〇ステップ１．３：時間的候補導出
●ステップ２：追加の候補挿入
〇ステップ２．１：双方向予測候補の作成
〇ステップ２．２：ゼロ動き候補の挿入
●ステップ１：初期候補導出
〇ステップ１．１：空間的候補導出
〇ステップ１．２：空間的候補の冗長性チェック
〇ステップ１．３：時間的候補導出
●ステップ２：追加の候補挿入
〇ステップ２．１：双方向予測候補の作成
〇ステップ２．２：ゼロ動き候補の挿入
【0045】
これらのステップは図２にも概略的に示されている。空間的マージ候補導出のために、５つの異なる位置にある候補の中から最大４つのマージ候補を選択する。時間的マージ候補導出のために、２つの候補の中から最大１つのマージ候補を選択する。デコーダ側ではＰＵごとに一定数の候補を想定しているので、ステップ１で得た候補数がスライスヘッダで信号通知されるマージ候補（ＭａｘＮｕｍＭｅｒｇｅＣａｎｄ）の最大数に達しない場合、追加候補を生成する。候補数は一定であるので、短縮された単項２値化（ＴＵ：Ｔｒｕｎｃａｔｅｄ Ｕｎａｒｙ Ｂｉｎａｒｉｚａｔｉｏｎ）を使用して最良マージ候補のインデックスを符号化する。ＣＵのサイズが８に等しい場合、現在のＣＵのすべてのＰＵは、２Ｎ×２Ｎ予測ユニットのマージ候補リストと同じ１つのマージ候補リストを共有する。
【0046】
以下、上述したステップに関連付けられた動作を詳しく説明する。
【0047】
２．２．１．２． 空間的候補導出
【0048】
空間的マージ候補の導出において、図３に示す位置にある候補の中から、最大４つのマージ候補を選択する。導出の順序はＡ１、Ｂ１、Ｂ０、Ａ０、Ｂ２である。位置Ａ１、Ｂ１、Ｂ０、Ａ０のいずれかのＰＵが利用可能でない場合（例えば、別のスライスまたはタイルに属しているため）、またはイントラ符号化された場合にのみ、位置Ｂ２が考慮される。位置Ａ１の候補を加えた後、残りの候補を加えると、冗長性チェックを受け、それにより、同じ動き情報を有する候補を確実にリストから排除でき、符号化効率を向上させることができる。計算の複雑性を低減するために、前述の冗長性チェックにおいて、考えられる候補対のすべてを考慮することはしない。代わりに、図４において矢印でリンクされた対のみを考慮し、冗長性チェックに使用される対応する候補が同じ動き情報を有していない場合にのみ、その候補をリストに加える。重複した動き情報の別のソースは、２Ｎ×２Ｎとは異なる分割に関連付けられた「第２のＰＵ」である。一例として、図５は、それぞれＮ×２Ｎおよび２Ｎ×Ｎの場合の第２のＰＵを示す。現在のＰＵをＮ×２Ｎに分割する場合、リスト構築において位置Ａ１の候補は考慮されない。実際、この候補を加えることにより、同じ動き情報を有する２つの予測ユニットが導かれることとなり、１つの符号化ユニットに１つのＰＵのみを有するためには冗長である。同様に、現在のＰＵを２Ｎ×Ｎに分割する場合、位置Ｂ１は考慮されない。
【0049】
２．２．１．３． 時間的候補導出
【0050】
このステップにおいて、１つの候補のみがリストに追加される。具体的には、この時間的マージ候補の導出において、所与の参照ピクチャリストにおける現在のピクチャとの間に最小のＰＯＣ差を有するピクチャに属する同一位置（ｃｏ－ｌｏｃａｔｅｄ）のＰＵに基づいて、スケーリングされた動きベクトルが導出される。スライスヘッダにおいて、同一位置のＰＵの導出に用いられるべき参照ピクチャリストが明確に信号通知される。図６に点線で示すように、時間的マージ候補のスケーリングされた動きベクトルが得られ、これは、ＰＯＣ距離ｔｂおよびｔｄを利用して、同一位置のＰＵの動きベクトルからスケーリングしたものであり、ｔｂは、現在のピクチャの参照ピクチャと現在のピクチャのＰＯＣ差として規定され、ｔｄは、同一位置のピクチャの参照ピクチャと同一位置のピクチャのＰＯＣ差として規定される。時間的マージ候補の参照ピクチャインデックスをゼロに等しく設定される。このスケーリング処理の実際的な実現については、ＨＥＶＣ仕様に記載されている。Ｂスライスの場合、２つの動きベクトル、即ち、１つは参照ピクチャリスト０のためのもの、もう１つは参照ピクチャリスト１のためのものが取得され、これらを組み合わせることによって、双方向予測マージ候補を形成する。
【0051】
参照フレームに属する同一位置のＰＵ（Ｙ）において、図７に示すように、候補Ｃ０と候補Ｃ１との間で時間的候補の位置が選択される。位置Ｃ０のＰＵが利用可能でない場合、イントラ符号化されている場合、または現在のＣＴＵ行の外側にある場合、位置Ｃ１が使用される。そうでない場合、位置Ｃ０が時間的マージ候補の導出に使用される。
【0052】
２．２．１．４． 追加の候補挿入
【0053】
空間的－時間的マージ候補の他に、マージ候補の２つの追加のタイプ、すなわち、結合双方向予測マージ候補およびゼロマージ候補がある。空間的－時間的マージ候補を利用して、結合双方向予測マージ候補が生成される。結合双方向予測マージ候補は、Ｂスライスのみに使用される。最初の候補の第１の参照ピクチャリスト動きパラメータと別の候補の第２の参照ピクチャリスト動きパラメータとを組み合わせることで、結合双方向予測候補が生成される。これら２つのタプルが異なる動き仮説を提供する場合、これらは、新しい双方向予測候補を形成する。一例として、図８は、ｍｖＬ０およびｒｅｆＩｄｘＬ０、またはｍｖＬ１およびｒｅｆＩｄｘＬ１を有する元のリスト（左側）における２つの候補を用いて、最終リスト（右側）に加えられる結合双方向予測マージ候補を生成する場合を示す。これらの追加のマージ候補を生成するために考慮される組み合わせについては、様々な規則が存在する。
【0054】
ゼロ動き候補を挿入し、マージ候補リストにおける残りのエントリを埋めることにより、ＭａｘＮｕｍＭｅｒｇｅＣａｎｄ容量にヒットする。これらの候補は、空間的変位がゼロであり、ゼロから始まり新しいゼロ動き候補をリストに加える度に増加する参照ピクチャインデックスを有する。これらの候補が使用する参照フレームの数は、それぞれ、一方向予測の場合は１つ、双方向予測の場合は２つである。最終的には、これらの候補に対して冗長性チェックは行われない。
【0055】
２．２．１．５． 並列処理のための動き推定領域
【0056】
符号化処理を高速化するために、動き推定を並列に行うことができ、それによって、所与の領域内のすべての予測ユニットの動きベクトルを同時に導出する。１つの予測ユニットは、その関連する動き推定が完了するまで、隣接するＰＵから動きパラメータを導出することができないので、空間的近傍からのマージ候補の導出は、並列処理に干渉する可能性がある。符号化効率と処理待ち時間との間のトレードオフを緩和するために、ＨＥＶＣは、動き推定領域（ＭＥＲ：Ｍｏｔｉｏｎ Ｅｓｔｉｍａｔｉｏｎ Ｒｅｇｉｏｎ）を規定し、そのサイズは、「ｌｏｇ２＿ｐａｒａｌｌｅｌ＿ｍｅｒｇｅ＿ｌｅｖｅｌ＿ｍｉｎｕｓ２」構文要素を使用してピクチャパラメータセットにおいて信号通知される。１つのＭＥＲを規定するとき、同じ領域にあるマージ候補は利用不可能であるとしてマークされ、それゆえにリスト構築においては考慮されない。
【0057】
２．２．２． ＡＭＶＰ
【0058】
ＡＭＶＰは、動きベクトルと近傍のＰＵとの間の空間的－時間的相関を利用し、これを動きパラメータの明確な伝送に用いる。各参照ピクチャリストに対し、まず、左側、上側の時間的に近傍のＰＵ位置の可用性をチェックし、冗長な候補を取り除き、ゼロベクトルを加えて候補リストの長さを一定にすることで、動きベクトル候補リストを構築する。次いで、エンコーダは、候補リストから最良の予測子を選択し、選択された候補を示す対応するインデックスを送信することができる。マージインデックスの信号通知と同様に、最良の動きベクトル候補のインデックスは、短縮された単項を使用して符号化される。この場合に符号化対象の最大値は２である（図９参照）。以下の章では、動きベクトル予測候補の導出処理の詳細を説明する。
【0059】
２．２．２．１． ＡＭＶＰ候補の導出
【0060】
図９に、動きベクトル予測候補の導出処理をまとめる。
【0061】
動きベクトル予測において、空間的動きベクトル候補と時間的動きベクトル候補という２つのタイプの動きベクトル候補が考慮される。空間的動きベクトル候補を導出するために、図３に示したように、５つの異なる位置にある各ＰＵの動きベクトルに基づいて、最終的には２つの動きベクトル候補を導出する。
【0062】
時間的動きベクトル候補を導出するために、２つの異なる同一位置に配置された位置に基づいて導出された２つの候補から１つの動きベクトル候補を選択する。空間的－時間的候補の最初のリストを作成した後、リストにおける重複した動きベクトル候補を除去する。候補の数が２よりも多い場合、関連づけられた参照ピクチャリストにおける参照ピクチャインデックスが１よりも大きい動きベクトル候補をリストから削除される。空間的―時間的動きベクトル候補の数が２未満である場合は、追加のゼロ動きベクトル候補をリストに加える。
【0063】
２．２．２．２． 空間的動きベクトル候補
【0064】
空間的動きベクトル候補の導出において、図３に示したような位置にあるＰＵから導出された５つの可能性のある候補のうち、最大２つの候補が考慮され、これらの位置は、動きマージと同じ位置である。現在の左側に対する導出の順序は、Ａ０、Ａ１、スケーリングされたＡ０、スケーリングされたＡ１として規定される。現在のＰＵの上側に対する導出の順序は、Ｂ０、Ｂ１、Ｂ２、スケーリングされたＢ０、スケーリングされたＢ１、スケーリングされたＢ２として規定される。辺ごとに、動きベクトル候補として使用できる４つのケースがあり、すなわち空間的スケーリングに関連付けられていない２つのケースと、空間的スケーリングを使用する２つのケースとがある。４つの異なる場合をまとめると、以下のようになる。
・空間スケーリングなし
－（１）同じ参照ピクチャリスト、かつ、同じ参照ピクチャインデックス（同じＰＯＣ）
－（２）異なる参照ピクチャリスト、かつ、同じ参照ピクチャ（同じＰＯＣ）
・空間的スケーリング
－（３）同じ参照ピクチャリスト、かつ、異なる参照ピクチャ（異なるＰＯＣ）
－（４）異なる参照ピクチャリスト、かつ、異なる参照ピクチャ（異なるＰＯＣ）
・空間スケーリングなし
－（１）同じ参照ピクチャリスト、かつ、同じ参照ピクチャインデックス（同じＰＯＣ）
－（２）異なる参照ピクチャリスト、かつ、同じ参照ピクチャ（同じＰＯＣ）
・空間的スケーリング
－（３）同じ参照ピクチャリスト、かつ、異なる参照ピクチャ（異なるＰＯＣ）
－（４）異なる参照ピクチャリスト、かつ、異なる参照ピクチャ（異なるＰＯＣ）
【0065】
最初に非空間的スケーリングの場合をチェックし、次に空間的スケーリングをチェックする。参照ピクチャリストにかかわらず、ＰＯＣが近傍のＰＵの参照ピクチャと現在のＰＵの参照ピクチャとで異なる場合、空間的スケーリングが考慮される。左側候補のすべてのＰＵが利用可能でないか、またはイントラ符号化されている場合、上側の動きベクトルのスケーリングは、左側および上側のＭＶ候補の並列導出に役立つために許可される。そうでない場合、上側の動きベクトルに対して空間的スケーリングは許可されない。
【0066】
空間的スケーリング処理において、図１０に示すように、時間的スケーリングと同様にして、近傍のＰＵの動きベクトルがスケーリングされる。主な違いは、現在のＰＵの参照ピクチャリストおよびインデックスを入力として与え、実際のスケーリング処理は時間的スケーリングと同じであることである。
【0067】
２．２．２．３． 時間的動きベクトル候補
【0068】
参照ピクチャインデックスを導出する以外は、時間的マージ候補を導出するための処理は、すべて、空間的動きベクトル候補を導出するための処理と同じである（図７参照）。参照ピクチャインデックスはデコーダに信号通知される。
２．３． ＡＭＶＲ（Ａｄａｐｔｉｖｅ Ｍｏｔｉｏｎ Ｖｅｃｔｏｒ Ｒｅｓｏｌｕｔｉｏｎ）
２．３． ＡＭＶＲ（Ａｄａｐｔｉｖｅ Ｍｏｔｉｏｎ Ｖｅｃｔｏｒ Ｒｅｓｏｌｕｔｉｏｎ）
【0069】
ＶＶＣにおいて、通常のインターモードの場合、ＭＶＤは１／４輝度サンプル、整数輝度サンプルまたは４つの輝度サンプルの単位で符号化できる。ＭＶＤ解像度は符号化ユニット（ＣＵ：Ｃｏｄｉｎｇ Ｕｎｉｔ）レベルで制御され、ＭＶＤ解像度フラグは、少なくとも１つの非ゼロＭＶＤ構成要素を有する各ＣＵに対して条件付きで信号通知される。
【0070】
少なくとも１つの非ゼロＭＶＤの構成要素を有するＣＵの場合、１／４輝度サンプルＭＶ精度がＣＵにおいて使用されるか否かを示すために、第１のフラグが信号通知される。第１のフラグ（１に等しい）が、１／４輝度サンプルＭＶ精度が使用されていないことを示す場合、整数輝度サンプルＭＶ精度が使用されるか、または４輝度サンプルＭＶ精度が使用されるかを示すために、別のフラグが信号通知される。
【0071】
ＣＵの第１のＭＶＤ解像度フラグがゼロであるか、又はＣＵに対して符号化されていない（つまり、ＣＵにおけるすべてのＭＶＤがゼロである）場合、ＣＵに対して１／４輝度サンプルＭＶ解像度が使用される。ＣＵが整数輝度サンプルＭＶ精度または４輝度サンプルＭＶ精度を使用する場合、ＣＵのＡＭＶＰ候補リストにおけるＭＶＰを対応する精度に丸める。
【0072】
２．４． ＶＶＣにおける補間フィルタ
【0073】
輝度補間フィルタリングの場合、表１に示すように、１／１６画素の精度のサンプルに対して８タップの分離可能な補間フィルタを用いる。
【0074】
【表1】
【0075】
同様に、表２に示すように、１／３２画素精度の彩度補間には、４タップの分離可能な補間フィルタが使用される。
【0076】
【表2】
【0077】
４：２：２の垂直補間、４：４：４の彩度チャネルの水平および垂直補間の場合、表２の奇数位置を使用せず、１／１６画素の彩度補間になる。
【0078】
２．５． 代替輝度１／２画素補間フィルタ
【0079】
ＪＶＥＴ－Ｎ０３０９において、代替１／２画素補間フィルタが提案されている。
【0080】
１／２画素輝度補間フィルタの切り替えは、動きベクトルの精度に基づいて行われる。既存の１／４画素、フル画素、および４画素のＡＭＶＲモードに加え、新しい１／２画素精度ＡＭＶＲモードが導入される。１／２画素度の動きベクトルの精度の場合にのみ、代替１／２画素度の輝度補間フィルタを選択することができる。
【0081】
２．５．１． １／２画素ＡＭＶＲモード
【0082】
非アフィン非マージインター符号化ＣＵのための追加のＡＭＶＲモードが提案され、このモードは、１／２画素精度で動きベクトル差分を信号通知することを可能にする。現在のＶＶＣ草案の既存のＡＭＶＲスキームは、以下のようにして簡単に拡張される。構文要素ａｍｖｒ＿ｆｌａｇの直後に、ａｍｖｒ＿ｆｌａｇ＝＝１の場合、新しいコンテキストモデル化されたバイナリ構文要素ｈｐｅｌ＿ａｍｖｒ＿ｆｌａｇがあり、これは、ｈｐｅｌ＿ａｍｖｒ＿ｆｌａｇ＝＝１の場合、新しい１／２画素ＡＭＶＲモードの使用を示す。そうでない場合、すなわちｈｐｅｌ＿ａｍｖｒ＿ｆｌａｇ＝＝０である場合、現在のＶＶＣ草案におけるように、フル画素と４画素ＡＭＶＲモードとの間の選択は、構文要素ａｍｖｒ＿ｐｒｅｃｉｓｉｏｎ＿ｆｌａｇによって示される。
【0083】
２．５．２． 代替輝度１／２画素補間フィルタ
【0084】
１／２画素動きベクトル精度を使用する非アフィン非マージインター符号化ＣＵ（すなわち、１／２画素ＡＭＶＲモード）の場合、新しい構文要素ｉｆ＿ｉｄｘの値に基づいて、ＨＥＶＣ／ＶＶＣ１／２画素輝度補間フィルタと１または複数の代替１／２画素補間との間の切り替えが行われる。構文要素ｉｆ＿ｉｄｘは、１／２画素ＡＭＶＲモードの場合にのみ信号通知される。空間的マージ候補を用いたスキップ／マージモードの場合、構文要素ｉｆ＿ｉｄｘの値は近傍のブロックから継承される。
【0085】
２．５．２．１． テスト１：１つの代替１／２画素補間フィルタ
【0086】
このテストケースにおいて、通常のＨＥＶＣ／ＶＶＣ１／２画素補間フィルタの代替えとして、１つの６タップ補間フィルタが存在する。次の表は、構文要素ｉｆ＿ｉｄｘの値と選択された１／２画素輝度補間フィルタとの間のマッピングを示す。
【0087】
【表3】
【0088】
２．５．２．２． テスト２：２つの代替的な１／２画素補間フィルタ
【0089】
このテストケースでは、通常のＨＥＶＣ／ＶＶＣ１／２画素補間フィルタの代替として、２つの８タップ補間フィルタがある。次の表は、構文要素ｉｆ＿ｉｄｘの値と選択された１／２画素輝度補間フィルタとの間のマッピングを示す。
【0090】
【表4】
【0091】
ａｍｖｒ＿ｐｒｅｃｉｓｉｏｎ＿ｉｄｘは、現在のＣＵが１／２画素、１画素、または４画素ＭＶ精度を使用しているかどうかを示すように信号通知される。符号化されるべきビンが２つある。
【0092】
ｈｐｅｌ＿ｉｆ＿ｉｄｘは、デフォルトの１／２画素補間フィルタを使用するか代替１／２画素補間フィルタを使用するかを示すように信号通知される。２つの代替１／２画素補間フィルタを使用する場合、２つの符号化対象のビンがある。
【0093】
２．６． 一般化双方向予測
【0094】
従来の双方向予測において、Ｌ０およびＬ１からの予測子を平均し、均等重み０．５を使用して最終予測子を生成する。予測子生成式は、式（３）に示される。
ＰＴｒａｄｉｔｉｏｎａｌＢｉＰｒｅｄ＝（ＰＬ０＋ＰＬ１＋ＲｏｕｎｄｉｎｇＯｆｆｓｅｔ）＞＞ｓｈｉｆｔＮｕｍ， （１）
式（３）において、ＰＴｒａｄｉｔｉｏｎａｌＢｉＰｒｅｄは従来の双予測のための最終予測子であり、ＰＬ０とＰＬ１は、それぞれＬ０およびＬ１からの予測子であり、ＲｏｕｎｄｉｎｇＯｆｆｓｅｔとｓｈｉｆｔＮｕｍは、最終予測子を正規化するために使用される。
ＰＴｒａｄｉｔｉｏｎａｌＢｉＰｒｅｄ＝（ＰＬ０＋ＰＬ１＋ＲｏｕｎｄｉｎｇＯｆｆｓｅｔ）＞＞ｓｈｉｆｔＮｕｍ， （１）
式（３）において、ＰＴｒａｄｉｔｉｏｎａｌＢｉＰｒｅｄは従来の双予測のための最終予測子であり、ＰＬ０とＰＬ１は、それぞれＬ０およびＬ１からの予測子であり、ＲｏｕｎｄｉｎｇＯｆｆｓｅｔとｓｈｉｆｔＮｕｍは、最終予測子を正規化するために使用される。
【0095】
Ｌ０とＬ１からの予測子に異なる重みを適用することを可能にするために、ＧＢＩ（Ｇｅｎｅｒａｔｅｄ Ｂｉ－ｐｒｅｄｉｎｔｉｏｎ：一般化双予測）が提案されている。予測子の生成を式（４）に示す。
ＰＧＢｉ＝（（１－ｗ１）＊ＰＬ０＋ｗ１＊ＰＬ１＋ＲｏｕｎｄｉｎｇＯｆｆｓｅｔＧＢｉ）＞＞ｓｈｉｆｔＮｕｍＧＢｉ， （２）
式（４）において、ＰＧＢｉはＧＢｉの最終予測子である。（１－ｗ１）およびｗ１は、それぞれＬ０およびＬ１の予測子に適用される選択されたＧＢＩ重みである。ＲｏｕｎｄｉｎｇＯｆｆｓｅｔＧＢｉおよびｓｅｆｔＮｕｍＧＢｉは、ＧＢｉにおける最終予測子を正規化するために用いられる。
ＰＧＢｉ＝（（１－ｗ１）＊ＰＬ０＋ｗ１＊ＰＬ１＋ＲｏｕｎｄｉｎｇＯｆｆｓｅｔＧＢｉ）＞＞ｓｈｉｆｔＮｕｍＧＢｉ， （２）
式（４）において、ＰＧＢｉはＧＢｉの最終予測子である。（１－ｗ１）およびｗ１は、それぞれＬ０およびＬ１の予測子に適用される選択されたＧＢＩ重みである。ＲｏｕｎｄｉｎｇＯｆｆｓｅｔＧＢｉおよびｓｅｆｔＮｕｍＧＢｉは、ＧＢｉにおける最終予測子を正規化するために用いられる。
【0096】
サポートされるｗ１の重みは、｛－１／４，３／８，１／２，５／８，５／４｝である。１つの均等重みセットおよび４つの不均等重みセットがサポートされる。均等重みの場合、最終予測子を生成するための処理は、従来の双予測モードにおける処理と全く同じである。ランダムアクセス（ＲＡ）条件における真の双予測の場合、候補重みセットの数を３に減らす。
【0097】
ＡＭＶＰ（Ａｄｖａｎｃｅｄ Ｍｏｔｉｏｎ Ｖｅｃｔｏｒ Ｐｒｅｄｉｃｔｉｏｎ）モードにおいて、ＣＵが双方向予測によって符号化されている場合、ＧＢＩにおける重み選択は、ＣＵレベルで明確に信号通知される。マージモードの場合、重み選択はマージ候補から継承される。
【0098】
３． 従来の実装形態における課題
【0099】
代替１／２画素補間フィルタは、ＭＭＶＤ（Ｍｅｒｇｅ ｗｉｔｈ Ｍｏｔｉｏｎ Ｖｅｃｔｏｒ Ｄｉｆｆｅｒｅｎｃｅ）モードで導出されたＭＶが１／２画素精度でなく妥当でないにしても、ＭＭＶＤモードで継承されてもよい。
【0100】
ａｍｖｒ＿ｐｒｅｃｉｓｉｏｎ＿ｉｄｘおよびｈｐｅｌ＿ｉｆ＿ｉｄｘを符号化する場合、すべてのビンはコンテキスト符号化される。
【0101】
４． 例示的な実施形態および技術
【0102】
以下の実施形態の詳細は、一般的な概念を説明するための例であると考えられるべきである。これらの実施形態は狭い意味で解釈されるべきではない。さらに、これらの実施形態は、任意の方法で組み合わせることができる。
【0103】
ＤＭＶＤ（Ｄｅｃｏｄｅｒ－ｄｉｄｅ Ｍｏｔｉｏｎ Ｖｅｃｔｏｒ Ｄｅｒｉｖａｔｉｏｎ）は、ＢＤＯＦ（Ｂｉ－Ｄｉｒｅｃｔｉｏｎ Ｏｐｔｉｃａｌ Ｆｌｏｗ）および／またはＤＭＶＲ（Ｄｅｃｏｄｅｒ－ｓｉｄｅ Ｍｏｔｉｏｎ Ｖｅｃｔｏｒ Ｒｅｆｉｎｅｍｅｎｔ）および／または改善動きベクトルまたはデコーダにおける予測サンプルに関連付けられた他のツールを表すために用いられる。
【0104】
以下の文脈において、デフォルト補間フィルタは、ＨＥＶＣ／ＶＶＣに定義されるものを示すことができる。以下の説明において、新しく導入された補間フィルタ（例えば、ＪＶＥＴ－Ｎ０３０９に提案されているもの）を代替補間フィルタとも呼ぶこともできる。
【0105】
１．Ｎが２に等しくない異なるＮに対して、代替１／Ｎ個の画素補間フィルタが使用されてもよい。
ａ．一例において、Ｎは、４、１６等に等しくてもよい。
ｂ．一例において、１／Ｎ画素の補間フィルタのインデックスは、ＡＭＶＲモードで信号通知されてもよい。
ｉ．さらに、代替的に、１／Ｎ画素のＭＶ／ＭＶＤ精度がブロックによって選択された場合にのみ、１／Ｎ画素の補間フィルタのインデックスが信号通知されてもよい。
ｃ．一例において、代替１／Ｎ画素補間フィルタは、マージモードおよび／またはＭＭＶＤモードで継承されなくてもよい。
ｉ．さらに、代替的に、デフォルトの１／Ｎ画素補間フィルタのみがマージモードおよび／またはＭＭＶＤモードで使用されてもよい。
ｄ．一例において、代替１／Ｎ画素補間フィルタは、マージモードで継承されてもよい。
ｅ．一例において、代替１／Ｎ画素補間フィルタは、ＭＭＶＤモードで継承されてもよい。
ｉ．一例において、代替１／Ｎ画素補間フィルタは、最終的に導出されたＭＶが１／Ｎ画素の精度である、すなわち、ＭＶ成分がより微細なＭＶ精度でない場合、ＭＭＶＤモードで継承されてもよい。
ｉｉ．一例において、代替１／Ｎ画素補間フィルタは、最終的に導出されたＭＶのＫ（Ｋ≧１）個のＭＶ成分が１／Ｎ画素精度である場合、ＭＭＶＤモードで継承されてもよい。
ｆ．一例において、代替１／Ｎ画素補間フィルタは、ＭＭＶＤモードおよび／またはマージモードで継承されてもよいが、代替１／Ｎ画素補間フィルタは、動き補償にのみ使用される。代替１／Ｎ画素補間フィルタのインデックスは、ブロックのために記憶されなくてもよく、後続の符号化ブロックによって使用されなくてもよい。
ａ．一例において、Ｎは、４、１６等に等しくてもよい。
ｂ．一例において、１／Ｎ画素の補間フィルタのインデックスは、ＡＭＶＲモードで信号通知されてもよい。
ｉ．さらに、代替的に、１／Ｎ画素のＭＶ／ＭＶＤ精度がブロックによって選択された場合にのみ、１／Ｎ画素の補間フィルタのインデックスが信号通知されてもよい。
ｃ．一例において、代替１／Ｎ画素補間フィルタは、マージモードおよび／またはＭＭＶＤモードで継承されなくてもよい。
ｉ．さらに、代替的に、デフォルトの１／Ｎ画素補間フィルタのみがマージモードおよび／またはＭＭＶＤモードで使用されてもよい。
ｄ．一例において、代替１／Ｎ画素補間フィルタは、マージモードで継承されてもよい。
ｅ．一例において、代替１／Ｎ画素補間フィルタは、ＭＭＶＤモードで継承されてもよい。
ｉ．一例において、代替１／Ｎ画素補間フィルタは、最終的に導出されたＭＶが１／Ｎ画素の精度である、すなわち、ＭＶ成分がより微細なＭＶ精度でない場合、ＭＭＶＤモードで継承されてもよい。
ｉｉ．一例において、代替１／Ｎ画素補間フィルタは、最終的に導出されたＭＶのＫ（Ｋ≧１）個のＭＶ成分が１／Ｎ画素精度である場合、ＭＭＶＤモードで継承されてもよい。
ｆ．一例において、代替１／Ｎ画素補間フィルタは、ＭＭＶＤモードおよび／またはマージモードで継承されてもよいが、代替１／Ｎ画素補間フィルタは、動き補償にのみ使用される。代替１／Ｎ画素補間フィルタのインデックスは、ブロックのために記憶されなくてもよく、後続の符号化ブロックによって使用されなくてもよい。
【0106】
２．補間フィルタの指示（例えば、デフォルトの１／２画素補間フィルタ、代替１／２画素補間フィルタ）は、動きベクトル、参照インデックス等の他の動き情報とともに記憶されてもよい。
ａ．一例において、１つの符号化／復号化対象のブロックが、異なる区域（例えば、異なるＣＴＵ行、異なるＶＰＤＵ）に位置する第２のブロックにアクセスする場合、第２のブロックに関連付けられた補間フィルタは、現在のブロックの符号化／復号化のために使用することは許可されない。
ａ．一例において、１つの符号化／復号化対象のブロックが、異なる区域（例えば、異なるＣＴＵ行、異なるＶＰＤＵ）に位置する第２のブロックにアクセスする場合、第２のブロックに関連付けられた補間フィルタは、現在のブロックの符号化／復号化のために使用することは許可されない。
【0107】
３．代替１／２画素補間フィルタは、マージモードおよび／またはＭＭＶＤモードで継承されなくてもよい。
ａ．一例において、代替１／２画素補間フィルタは、ＭＭＶＤモードで継承されなくてもよい。
ｉ．さらに、代替的に、ＶＶＣにおけるデフォルトの１／２画素補間フィルタは、常にＭＭＶＤモードに使用されてもよい。
ｉｉ．代替的に、代替１／２画素補間フィルタは、ＭＭＶＤモードで継承されてもよい。すなわち、ＭＭＶＤモードの場合、ベースマージ候補に関連付けられた代替１／２画素補間フィルタは継承されることができる。
ｂ．一例において、代替１／２画素補間フィルタは、特定の条件下においてＭＭＶＤモードで継承されてもよい。
ｉ．一例において、代替１／２画素補間フィルタは、最終的に導出されたＭＶが１／２画素精度である、すなわち、１／４画素精度、１／１６画素精度のようなより微細なＭＶ精度のＭＶ成分がない場合に継承されてもよい。
ｉｉ．一例において、代替１／２画素補間フィルタは、最終的に導出されたＭＶのＫ（Ｋ≧１）個のＭＶ成分が１／２画素精度である場合、ＭＭＶＤモードで継承されてもよい。
ｃ．一例において、代替１／２画素補間フィルタは、ＭＭＶＤモードおよび／またはマージモードで継承されてもよいが、代替１／２画素補間フィルタは、動き補償にのみ使用される。代替１／２画素補間フィルタの代わりに、デフォルトの１／２画素補間フィルタのインデックスをブロックに対して記憶してもよく、後続の符号化ブロックによって使用してもよい。
ｄ．上記方法は、１／Ｎ画素の精度のために複数の補間フィルタを適用することができる他の場合にも適用可能である。
ａ．一例において、代替１／２画素補間フィルタは、ＭＭＶＤモードで継承されなくてもよい。
ｉ．さらに、代替的に、ＶＶＣにおけるデフォルトの１／２画素補間フィルタは、常にＭＭＶＤモードに使用されてもよい。
ｉｉ．代替的に、代替１／２画素補間フィルタは、ＭＭＶＤモードで継承されてもよい。すなわち、ＭＭＶＤモードの場合、ベースマージ候補に関連付けられた代替１／２画素補間フィルタは継承されることができる。
ｂ．一例において、代替１／２画素補間フィルタは、特定の条件下においてＭＭＶＤモードで継承されてもよい。
ｉ．一例において、代替１／２画素補間フィルタは、最終的に導出されたＭＶが１／２画素精度である、すなわち、１／４画素精度、１／１６画素精度のようなより微細なＭＶ精度のＭＶ成分がない場合に継承されてもよい。
ｉｉ．一例において、代替１／２画素補間フィルタは、最終的に導出されたＭＶのＫ（Ｋ≧１）個のＭＶ成分が１／２画素精度である場合、ＭＭＶＤモードで継承されてもよい。
ｃ．一例において、代替１／２画素補間フィルタは、ＭＭＶＤモードおよび／またはマージモードで継承されてもよいが、代替１／２画素補間フィルタは、動き補償にのみ使用される。代替１／２画素補間フィルタの代わりに、デフォルトの１／２画素補間フィルタのインデックスをブロックに対して記憶してもよく、後続の符号化ブロックによって使用してもよい。
ｄ．上記方法は、１／Ｎ画素の精度のために複数の補間フィルタを適用することができる他の場合にも適用可能である。
【0108】
４．補間フィルタ情報は、ＨＭＶＰ（Ｈｉｓｔｏｒｙ－ｂａｓｅｄ Ｍｏｔｉｏｎ Ｖｅｃｔｏｒ Ｐｒｅｄｉｃｔｉｏｎ）テーブルに記憶されてもよく、ＨＭＶＰマージ候補によって継承されてもよい。いくつかの実装形態において、ＨＭＶＰテーブルは、映像領域の映像ブロックと符号化表現との間での変換後、選択的に更新される。テーブルを更新するかどうか、即ちテーブルを更新するときの選択性は、映像ブロックを変換した後、ＨＭＶＰテーブルを更新するのに適した変換に用いられる動き候補があるかどうか（例えば、プルーニングなどを適用することによって）を判定することに基づく。
ａ．一例において、ＨＭＶＰルックアップテーブルに新しい候補を挿入するとき、補間フィルタ情報が考慮されてよい。例えば、同じ動き情報であるが、補間フィルタ情報が異なる２つの候補が、２つの異なる候補と見なされてもよい。
ｂ．一例において、ＨＭＶＰルックアップテーブルに新しい候補を挿入するとき、同じ動き情報を有するが、補間フィルタ情報が異なる２つの候補が、同じ候補と見なされてもよい。
ａ．一例において、ＨＭＶＰルックアップテーブルに新しい候補を挿入するとき、補間フィルタ情報が考慮されてよい。例えば、同じ動き情報であるが、補間フィルタ情報が異なる２つの候補が、２つの異なる候補と見なされてもよい。
ｂ．一例において、ＨＭＶＰルックアップテーブルに新しい候補を挿入するとき、同じ動き情報を有するが、補間フィルタ情報が異なる２つの候補が、同じ候補と見なされてもよい。
【0109】
５．マージ候補リストにマージ候補を挿入する場合、プルーニング処理において補間フィルタ情報が考慮されてもよい。
ａ．一例において、補間フィルタが異なる２つのマージ候補は、２つの異なるマージ候補と見なされてもよい。
ｂ．一例において、ＨＭＶＰマージ候補をマージリストに挿入する際に、プルーニング処理において補間フィルタ情報は考慮されてもよい。
ｃ．一例において、ＨＭＶＰマージ候補をマージリストに挿入する際に、プルーニング処理において補間フィルタ情報は、考慮されなくてもよい。
ａ．一例において、補間フィルタが異なる２つのマージ候補は、２つの異なるマージ候補と見なされてもよい。
ｂ．一例において、ＨＭＶＰマージ候補をマージリストに挿入する際に、プルーニング処理において補間フィルタ情報は考慮されてもよい。
ｃ．一例において、ＨＭＶＰマージ候補をマージリストに挿入する際に、プルーニング処理において補間フィルタ情報は、考慮されなくてもよい。
【0110】
６．ペアワイズマージ候補および／または結合マージ候補および／またはゼロ動きベクトル候補および／または他のデフォルト候補を生成する際に、常にデフォルト補間フィルタを使用する代わりに、補間フィルタ情報が考慮されてもよい。
ａ．一例において、（ペアワイズマージ候補または／および結合マージ候補の生成に関与する）両方の候補が同じ代替補間フィルタを使用する場合、このような補間フィルタは、ペアワイズマージ候補または／および結合マージ候補において継承されてもよい。
ｂ．一例において、（ペアワイズマージ候補又は／及び結合マージ候補の生成に関与する）２つの候補のうちの１つがデフォルト補間フィルタを用いない場合、その補間フィルタをペアワイズマージ候補または／および結合マージ候補に継承してもよい。
ｃ．一例において、（結合マージ候補の生成に関与する）２つの候補のうちの１つがデフォルトの補間フィルタを用いない場合、その補間フィルタを結合マージ候補に継承してもよい。しかしながら、このような補間フィルタは、対応する予測方向にのみ使用してもよい。
ｄ．一例において、（結合マージ候補の生成に関与する）２つの候補が異なる補間フィルタを用いる場合、それらの補間フィルタは、両方とも結合マージ候補において継承されてもよい。この場合、異なる予測方向に対して異なる補間フィルタが使用されてもよい。
ｅ．一例において、Ｋ（Ｋ≧０）個以下のペアワイズマージ候補または／および結合されたマージ候補は、代替補間フィルタを使用してもよい。
ｆ．一例において、デフォルト補間フィルタは、ペアワイズマージ候補または／および結合マージ候補に対して常に使用される。
ａ．一例において、（ペアワイズマージ候補または／および結合マージ候補の生成に関与する）両方の候補が同じ代替補間フィルタを使用する場合、このような補間フィルタは、ペアワイズマージ候補または／および結合マージ候補において継承されてもよい。
ｂ．一例において、（ペアワイズマージ候補又は／及び結合マージ候補の生成に関与する）２つの候補のうちの１つがデフォルト補間フィルタを用いない場合、その補間フィルタをペアワイズマージ候補または／および結合マージ候補に継承してもよい。
ｃ．一例において、（結合マージ候補の生成に関与する）２つの候補のうちの１つがデフォルトの補間フィルタを用いない場合、その補間フィルタを結合マージ候補に継承してもよい。しかしながら、このような補間フィルタは、対応する予測方向にのみ使用してもよい。
ｄ．一例において、（結合マージ候補の生成に関与する）２つの候補が異なる補間フィルタを用いる場合、それらの補間フィルタは、両方とも結合マージ候補において継承されてもよい。この場合、異なる予測方向に対して異なる補間フィルタが使用されてもよい。
ｅ．一例において、Ｋ（Ｋ≧０）個以下のペアワイズマージ候補または／および結合されたマージ候補は、代替補間フィルタを使用してもよい。
ｆ．一例において、デフォルト補間フィルタは、ペアワイズマージ候補または／および結合マージ候補に対して常に使用される。
【0111】
７．現在のブロックＩＢＣモードで符号化する場合、１／２画素の動きベクトル／動きベクトル差分精度を使用できないようにすることが提案されている。
ａ．さらに、代替的に、１／２画素ＭＶ／ＭＶＤ精度の使用の指示を信号通知する必要がない。
ｂ．一例において、現在のブロックがＩＢＣモードで符号化される場合、代替１／２画素補間フィルタは、常に無効にされる。
ｃ．さらに、代替的に、１／２画素補間フィルタの指示を信号通知する必要がない。
ｄ．一例において、「現在のブロックをＩＢＣモードで符号化する」の条件は、「現在のブロックをモードで符号化する」に置き換えてもよい。このようなモードは、三角形モード、マージモード等として定義してもよい。１つの例示的なモードは、１つのブロックを２つの部分に分割し、各部分が１つの動き候補に関連付けられ、２つの動き候補が同じ動き候補リストから導出される符号化モードに対応する。
ａ．さらに、代替的に、１／２画素ＭＶ／ＭＶＤ精度の使用の指示を信号通知する必要がない。
ｂ．一例において、現在のブロックがＩＢＣモードで符号化される場合、代替１／２画素補間フィルタは、常に無効にされる。
ｃ．さらに、代替的に、１／２画素補間フィルタの指示を信号通知する必要がない。
ｄ．一例において、「現在のブロックをＩＢＣモードで符号化する」の条件は、「現在のブロックをモードで符号化する」に置き換えてもよい。このようなモードは、三角形モード、マージモード等として定義してもよい。１つの例示的なモードは、１つのブロックを２つの部分に分割し、各部分が１つの動き候補に関連付けられ、２つの動き候補が同じ動き候補リストから導出される符号化モードに対応する。
【0112】
８．ａｍｖｒ＿ｐｒｅｃｉｓｉｏｎ＿ｉｄｘおよび／またはｈｐｅｌ＿ｉｆ＿ｉｄｘを符号化する場合、最初のビンのみがコンテキスト符号化されてもよい。
ａ．さらに、代替的に、他のビンがバイパス符号化されてもよい。
ｂ．一例において、ａｍｖｒ＿ｐｒｅｃｉｓｉｏｎ＿ｉｄｘの最初のビンｇが、バイパス符号化されてもよい。
ｃ．一例において、ｈｐｅｌ＿ｉｆ＿ｉｄｘの最初のビンが、バイパス符号化されてもよい。
ｄ．一例において、１つのコンテキストのみが、ａｍｖｒ＿ｐｒｅｃｉｓｉｏｎ＿ｉｄｘの第１のビンを符号化するために使用されてもよい。
ｅ．一例において、１つのコンテキストのみが、ｈｐｅｌ＿ｉｆ＿ｉｄｘの最初のビンを符号化するために使用されてもよい。
ｆ．一例において、ａｍｖｒ＿ｐｒｅｃｉｓｉｏｎ＿ｉｄｘのすべてのビンは、同じコンテキストを共有してもよい。
ｇ．一例において、ｈｐｅｌ＿ｉｆ＿ｉｄｘのすべてのビンは、同じコンテキストを共有してもよい。
ａ．さらに、代替的に、他のビンがバイパス符号化されてもよい。
ｂ．一例において、ａｍｖｒ＿ｐｒｅｃｉｓｉｏｎ＿ｉｄｘの最初のビンｇが、バイパス符号化されてもよい。
ｃ．一例において、ｈｐｅｌ＿ｉｆ＿ｉｄｘの最初のビンが、バイパス符号化されてもよい。
ｄ．一例において、１つのコンテキストのみが、ａｍｖｒ＿ｐｒｅｃｉｓｉｏｎ＿ｉｄｘの第１のビンを符号化するために使用されてもよい。
ｅ．一例において、１つのコンテキストのみが、ｈｐｅｌ＿ｉｆ＿ｉｄｘの最初のビンを符号化するために使用されてもよい。
ｆ．一例において、ａｍｖｒ＿ｐｒｅｃｉｓｉｏｎ＿ｉｄｘのすべてのビンは、同じコンテキストを共有してもよい。
ｇ．一例において、ｈｐｅｌ＿ｉｆ＿ｉｄｘのすべてのビンは、同じコンテキストを共有してもよい。
【0113】
９．代替補間フィルタを使用する場合、一部の符号化ツールは許可されない場合がある。
ａ．一例において、代替補間フィルタを使用する場合、ＢＤＯＦ（Ｂｉ－Ｄｉｒｅｃｔｉｏｎａｌ Ｏｐｔｉｃａｌ Ｆｌｏｗ）は許可されなくてもよい。
ｂ．一例において、代替補間フィルタを使用する場合、ＤＭＶＲまたは／およびＤＭＶＤは許可されなくてもよい。
ｃ．一例において、代替補間フィルタを使用する場合、ＣＩＩＰ（Ｃｏｍｂｉｎｅｄ Ｉｎｔｅｒ－Ｉｎｔｒａ Ｐｒｅｄｉｃｔｉｏｎ）は許可されなくてもよい。
ｉ．一例において、マージ候補が代替補間フィルタを継承する場合、ＣＩＩＰフラグはスキップされ、偽であると推論されてもよい。
ｉｉ．代替的に、ＣＩＩＰフラグが真である場合、デフォルトの補間フィルタは常に使用されてもよい。
ｄ．一例において、代替補間フィルタを使用する場合、ＳＭＶＤ（Ｓｙｍｍｅｔｒｉｃ Ｍｏｔｉｏｎ Ｖｅｃｔｏｒ Ｄｉｆｆｅｒｅｎｃｅ）は許可されなくてもよい。
ｉ．一例において、ＳＭＶＤを用いる場合、デフォルトの補間フィルタが常に使用され、代替補間フィルタに関する構文要素は信号通知されない。
ｉｉ．代替的に、代替補間フィルタに関する構文要素が、代替補間フィルタを使用することを示す場合、ＳＭＶＤに関する構文要素は信号通知されなくてもよく、ＳＭＶＤモードは使用されない。
ｅ．一例において、代替補間フィルタを使用する場合、ＳＢＴ（ＳｕｂＢｌｏｃｋ Ｔｒａｎｓｆｏｒｍ）は許可されなくてもよい。
ｉ．一例において、ＳＢＴを用いる場合、デフォルトの補間フィルタが常に使用され、代替補間フィルタに関する構文要素は信号通知されない。
ｉｉ．代替的に、代替補間フィルタに関する構文要素が、代替補間フィルタを使用することを示す場合、ＳＢＴに関する構文要素は信号通知されなくてもよく、ＳＢＴは使用されない。
ｆ．一例において、代替補間フィルタを使用する場合、ブロックが２つの部分に分割される三角形予測モードおよび他の符号化モードは、許可されなくてもよい。本発明の実施例において、ブロックを２つの部分に分けるとき、各部分は１つの動き候補に関連付けられ、２つの動き候補は同じ動き候補リストから導出される。
ｉ．一例において、補間フィルタ情報は、三角形予測において継承されず、デフォルトの補間フィルタのみが使用されてもよい。
ｇ．代替的に、代替補間フィルタを使用する場合、ブロックを２つの部分に分割する三角形予測および他の符号化モードが許容されてもよい。本発明の実施例において、ブロックを２つの部分に分ける場合、各部分は１つの動き候補に関連付けられ、２つの動き候補は同じ動き候補リストから導出される。
ｉ．一例において、補間フィルタ情報は、三角形予測において継承されてもよい。
ｈ．代替的に、上述した符号化ツールの場合、それが有効にされていれば、代替１／２画素補間フィルタが無効化されてよい。
ａ．一例において、代替補間フィルタを使用する場合、ＢＤＯＦ（Ｂｉ－Ｄｉｒｅｃｔｉｏｎａｌ Ｏｐｔｉｃａｌ Ｆｌｏｗ）は許可されなくてもよい。
ｂ．一例において、代替補間フィルタを使用する場合、ＤＭＶＲまたは／およびＤＭＶＤは許可されなくてもよい。
ｃ．一例において、代替補間フィルタを使用する場合、ＣＩＩＰ（Ｃｏｍｂｉｎｅｄ Ｉｎｔｅｒ－Ｉｎｔｒａ Ｐｒｅｄｉｃｔｉｏｎ）は許可されなくてもよい。
ｉ．一例において、マージ候補が代替補間フィルタを継承する場合、ＣＩＩＰフラグはスキップされ、偽であると推論されてもよい。
ｉｉ．代替的に、ＣＩＩＰフラグが真である場合、デフォルトの補間フィルタは常に使用されてもよい。
ｄ．一例において、代替補間フィルタを使用する場合、ＳＭＶＤ（Ｓｙｍｍｅｔｒｉｃ Ｍｏｔｉｏｎ Ｖｅｃｔｏｒ Ｄｉｆｆｅｒｅｎｃｅ）は許可されなくてもよい。
ｉ．一例において、ＳＭＶＤを用いる場合、デフォルトの補間フィルタが常に使用され、代替補間フィルタに関する構文要素は信号通知されない。
ｉｉ．代替的に、代替補間フィルタに関する構文要素が、代替補間フィルタを使用することを示す場合、ＳＭＶＤに関する構文要素は信号通知されなくてもよく、ＳＭＶＤモードは使用されない。
ｅ．一例において、代替補間フィルタを使用する場合、ＳＢＴ（ＳｕｂＢｌｏｃｋ Ｔｒａｎｓｆｏｒｍ）は許可されなくてもよい。
ｉ．一例において、ＳＢＴを用いる場合、デフォルトの補間フィルタが常に使用され、代替補間フィルタに関する構文要素は信号通知されない。
ｉｉ．代替的に、代替補間フィルタに関する構文要素が、代替補間フィルタを使用することを示す場合、ＳＢＴに関する構文要素は信号通知されなくてもよく、ＳＢＴは使用されない。
ｆ．一例において、代替補間フィルタを使用する場合、ブロックが２つの部分に分割される三角形予測モードおよび他の符号化モードは、許可されなくてもよい。本発明の実施例において、ブロックを２つの部分に分けるとき、各部分は１つの動き候補に関連付けられ、２つの動き候補は同じ動き候補リストから導出される。
ｉ．一例において、補間フィルタ情報は、三角形予測において継承されず、デフォルトの補間フィルタのみが使用されてもよい。
ｇ．代替的に、代替補間フィルタを使用する場合、ブロックを２つの部分に分割する三角形予測および他の符号化モードが許容されてもよい。本発明の実施例において、ブロックを２つの部分に分ける場合、各部分は１つの動き候補に関連付けられ、２つの動き候補は同じ動き候補リストから導出される。
ｉ．一例において、補間フィルタ情報は、三角形予測において継承されてもよい。
ｈ．代替的に、上述した符号化ツールの場合、それが有効にされていれば、代替１／２画素補間フィルタが無効化されてよい。
【0114】
１０．フィルタは、Ｎ画素精度ＭＶに適用されてもよい。
ａ．一例において、Ｎは、１、２、または４等に等しくてもよい。
ｂ．一例において、フィルタは、ローパスフィルタであってもよい。
ｃ．一例において、フィルタは、１次元フィルタであってもよい。
ｉ．例えば、フィルタは、１次元水平フィルタであってもよい。
ｉｉ．例えば、フィルタは、１次元垂直フィルタであってもよい。
ｄ．一例において、そのようなフィルタが使用されているかどうかを示すように、フラグが信号通知されてもよい。
ｉ．さらに、代替的に、そのようなフラグは、ブロックに対して（ＡＭＶＲモードで信号伝達される）Ｎ画素ＭＶＤ精度を使用する場合にのみ信号伝達されてもよい。
ａ．一例において、Ｎは、１、２、または４等に等しくてもよい。
ｂ．一例において、フィルタは、ローパスフィルタであってもよい。
ｃ．一例において、フィルタは、１次元フィルタであってもよい。
ｉ．例えば、フィルタは、１次元水平フィルタであってもよい。
ｉｉ．例えば、フィルタは、１次元垂直フィルタであってもよい。
ｄ．一例において、そのようなフィルタが使用されているかどうかを示すように、フラグが信号通知されてもよい。
ｉ．さらに、代替的に、そのようなフラグは、ブロックに対して（ＡＭＶＲモードで信号伝達される）Ｎ画素ＭＶＤ精度を使用する場合にのみ信号伝達されてもよい。
【0115】
１１．ＧＢＩモードにおける通常のインターモードおよびアフィンモードのために、異なる重み係数セットが使用されてもよい。
ａ．一例において、通常のインターモードおよびアフィンモードに使用される重み係数セットは、ＳＰＳ／タイルグループヘッダ／スライスヘッダ／ＶＰＳ／ＰＰＳ等において信号通知されてもよい。
ｂ．一例において、通常のインターモードおよびアフィンモードに使用される重み係数セットは、エンコーダおよびデコーダにおいて予め規定されてもよい。
ａ．一例において、通常のインターモードおよびアフィンモードに使用される重み係数セットは、ＳＰＳ／タイルグループヘッダ／スライスヘッダ／ＶＰＳ／ＰＰＳ等において信号通知されてもよい。
ｂ．一例において、通常のインターモードおよびアフィンモードに使用される重み係数セットは、エンコーダおよびデコーダにおいて予め規定されてもよい。
【0116】
１２．代替補間フィルタをどのように定義／選択するかは、符号化モード情報に依存してもよい。
ａ．一例において、アフィンモードおよび非アフィンモードの場合、代替補間フィルタの許容されるセットは異なってもよい。
ｂ．一例において、ＩＢＣモードおよび非ＩＢＣモードの場合、代替補間フィルタの許容されるセットは異なってもよい。
ａ．一例において、アフィンモードおよび非アフィンモードの場合、代替補間フィルタの許容されるセットは異なってもよい。
ｂ．一例において、ＩＢＣモードおよび非ＩＢＣモードの場合、代替補間フィルタの許容されるセットは異なってもよい。
【0117】
５． 開示される技術の例示的な実装形態
【0118】
図１１Ａは、映像処理装置１１００のブロック図である。装置１１００は、本明細書に記載の方法の１つ以上を実装するために使用されてもよい。装置１１００は、スマートフォン、タブレット、コンピュータ、ＩｏＴ（Ｉｎｔｅｒｎｅｔ ｏｆ Ｔｈｉｎｇｓ）受信機等により実施されてもよい。装置１１００は、１または複数のプロセッサ１１０２と、１または複数のメモリ１１０４と、映像処理ハードウェア１１０６と、を含んでもよい。プロセッサ（単数または複数）１１０２は、本明細書に記載される１つ以上の方法を実装するように構成されてもよい。メモリ（単数または複数）１１０４は、本明細書で説明される方法および技術を実装するために使用されるデータおよびコードを記憶するために使用してもよい。映像処理ハードウェア１１０６を使用して、ハードウェア回路において、本明細書に記載されるいくつかの技術を実装してもよく、一部または全部がプロセッサ１１０２の一部（例えば、グラフィックプロセッサコアＧＰＵまたは他の信号処理回路）であってもよい。
【0119】
図１１Ｂは、開示された技術を実装し得る映像処理システムのブロック図の別の例である。図１１Ｂは、本明細書で開示される様々な技術が実装され得る例示的な映像処理システム４１００を示すブロック図である。様々な実装形態は、システム４１００の構成要素の一部または全部を含んでもよい。システム４１００は、映像コンテンツを受信するための入力４１０２を含んでもよい。映像コンテンツは、未加工または非圧縮フォーマット、例えば、８または１０ビットのマルチモジュール画素値で受信されてもよく、または、圧縮または符号化フォーマットで受信されてもよい。入力４１０２は、ネットワークインターフェース、周辺バスインターフェース、または記憶インターフェースを表してもよい。ネットワークインターフェースの例は、イーサネット（登録商標）、ＰＯＮ（Ｐａｓｓｉｖｅ Ｏｐｔｉｃａｌ Ｎｅｔｗｏｒｋ）等の有線インターフェース、およびＷｉ－Ｆｉ（登録商標）またはセルラーインターフェース等の無線インターフェースを含む。
【0120】
システム４１００は、本明細書に記載される様々な符号化または符号化方法を実装することができる符号化構成要素４１０４を含んでもよい。符号化構成要素４１０４は、入力４１０２からの映像の平均ビットレートを符号化構成要素４１０４の出力に低減し、映像の符号化表現を生成してもよい。従って、この符号化技術は、映像圧縮または映像コード変換技術と呼ばれることがある。符号化構成要素４１０４の出力は、構成要素４１０６によって表されるように、記憶されてもよいし、接続された通信を介して送信されてもよい。入力４１０２において受信された、記憶されたまたは通信された映像のビットストリーム（または符号化）表現は、構成要素４１０８によって使用されて、表示インターフェース４１１０に送信される画素値または表示可能な映像を生成してもよい。ビットストリーム表現からユーザが見ることができる映像を生成する処理は、映像展開と呼ばれることがある。さらに、特定の映像処理動作を「符号化」動作またはツールと呼ぶが、符号化ツールまたは動作は、エンコーダにて用いられ、それに対応する、復号化の結果を逆にする復号化ツールまたは動作が、デコーダによって行われることが理解されよう。
【0121】
周辺バスインターフェースユニットまたは表示インターフェースユニットの例は、ＵＳＢ（Ｕｎｉｖｅｒｓａｌ Ｓｅｒｉａｌ Ｂｕｓ）またはＨＤＭＩ（登録商標）（Ｈｉｇｈ Ｄｅｆｉｎｅｔｉｏｎ Ｍｕｌｔｉｍｅｄｉａ Ｉｎｔｅｒｆａｃｅ）またはディスプレイポート等を含んでもよい。ストレージインターフェースの例は、ＳＡＴＡ（Ｓｅｒｉａｌ Ａｄｖａｎｃｅｄ Ｔｅｃｈｎｏｌｏｇｙ Ａｔｔａｃｈｍｅｎｔ）、ＰＣＩ、ＩＤＥインターフェース等を含む。本明細書に記載される技術は、携帯電話、ノートパソコン、スマートフォン、またはデジタルデータ処理および／または映像表示を実施可能な他のデバイス等の様々な電子デバイスに実施されてもよい。
【0122】
開示される技術のいくつかの実施形態は、映像処理ツールまたはモードを有効化するように決定または判定することを含む。一例において、映像処理ツールまたはモードが有効化される場合、エンコーダは、１つの映像ブロックを処理する際にこのツールまたはモードを使用するまたは実装するが、このツールまたはモードの使用に基づいて、結果として得られるビットストリームを必ずしも修正しなくてもよい。すなわち、映像のブロックから映像のビットストリーム表現への変換は、決定または判定に基づいて映像処理ツールまたはモードが有効化される場合に、この映像処理ツールまたはモードを使用する。別の例において、映像処理ツールまたはモードが有効化される場合、デコーダは、ビットストリームが映像処理ツールまたはモードに基づいて修正されたことを知って、ビットストリームを処理する。すなわち、決定または判定に基づいて有効化された映像処理ツールまたはモードを使用して、映像のビットストリーム表現から映像のブロックへの変換を行う。
【0123】
開示される技術のいくつかの実施形態は、映像処理ツールまたはモードを無効化するように決定または判定することを含む。一例において、映像処理ツールまたはモードが無効にされている場合、エンコーダは、映像のブロックを映像のビットストリーム表現に変換する際に、ツールまたはモードを使用しない。別の例において、映像処理ツールまたはモードが無効にされている場合、デコーダは、決定または判定に基づいて無効化された映像処理ツールまたはモードを使用してビットストリームが修正されていないことを知って、ビットストリームを処理する。
【0124】
本明細書では、「映像処理」という用語は、映像符号化、映像復号化、映像圧縮、または映像展開を指すことができる。例えば、映像圧縮アルゴリズムは、映像の画素表現から対応するビットストリーム表現への変換、またはその逆の変換中に適用されてもよい。現在の映像ブロックのビットストリーム表現は、例えば、構文によって規定されるように、ビットストリーム内の同じ場所または異なる場所に拡散されるビットに対応していてもよい。例えば、１つのマクロブロックは、変換および符号化された誤り残差値の観点から、且つビットストリームにおけるヘッダおよび他のフィールドにおけるビットを使用して符号化されてもよい。
【0125】
開示された方法および技法は、本明細書に開示された技法を使用できるようにすることで、スマートフォン、ノートパソコン、卓上パソコン、および類似した機器等の映像処理デバイスに組み込まれる映像エンコーダおよび／またはデコーダの実施例に有益となることが理解される。
【0126】
図１２Ａは、映像処理の例の方法１２１０を示すフローチャートである。この方法１２１０は、１２１２において、映像の現在の映像ブロックと映像の符号化表現との間で変換を行うことを含む。いくつかの実装形態において、符号化表現は、デフォルトの動き情報精度を使用しない現在の映像ブロックに対する複数の精度セットからの動き情報精度を示す第１のパラメータ、および／または、代替１／２画素補間フィルタを変換に使用するかどうかを識別する第２のパラメータを含む。いくつかの実装形態において、第１のパラメータおよび／または第２のパラメータは各々、１つ以上のビンに関連付けられ、コンテキストモデルに基づく符号化は、符号化表現における１または複数のビンの第１のビンに対してのみ使用される。いくつかの実装形態において、現在の映像ブロックは、マージモードまたはＭＭＶＤ（Ｍｅｒｇｅ ｗｉｔｈ Ｍｏｔｉｏｎ Ｖｅｃｔｏｒ Ｄｉｆｆｅｒｅｎｔ）モードを使用して符号化表現で表現され、１／Ｎ予測を有する補間フィルタが、規則に従って、現在の映像ブロックに関連付けられた予測ブロックを補間するために使用され、Ｎは正の整数であり、規則は、補間フィルタがデフォルトの補間フィルタとは異なる代替補間フィルタである場合に、補間情報を継承するための条件を定義する。
【0127】
図１２Ｂは、映像処理の例の方法１２２０を示すフローチャートである。方法１２２０は、１２２２において、映像の現在の映像ブロックと映像の符号化表現との間の変換のために、補間フィルタを使用して動き情報を判定することであって、Ｍ整数画素精度または１／Ｎサブピクセル精度を有し、Ｍ、Ｎが正の整数であり、Ｎが２に等しくない、ことを含む。方法１２２０は、１２２４において、動き情報に基づいて変換を行うことを含む。
【0128】
図１３Ａは、映像処理の例の方法１３１０を示すフローチャートである。方法１３１０は、１３１２において、映像の現在の映像ブロックと映像の符号化表現との間での変換のために、動き候補リストにおける１または複数の動き候補および１または複数の動き候補に関連付けられた１または複数の補間フィルタに基づいて、第１の動き候補を生成することであって、補間フィルタが、１または複数の動き候補に関連付けられた１または複数の補間フィルタに依存する規則に従って、第１の動き候補に割り当てられる、ことを含む。方法１３１０は、１３１４において、第１の動き候補を動き候補リストに挿入することをさらに含む。方法１３１０は、１３１６において、動き候補リストに基づいて変換を行うことを含む。
【0129】
図１３Ｂは、映像処理の例の方法１３２０を示すフローチャートである。方法１３２０は、１３２２において、映像の第１の映像領域における第１のブロックと第２の映像領域における第２のブロックとを含む複数のブロックの各々に、複数のブロックの各々に対する動きベクトル差分情報を補間するために使用する補間フィルタそれぞれについての情報を含む動き情報を関連付けることを含む。方法１３２０は、１３２４において、動き情報を使用して、映像と映像の符号化表現との間で変換を行うことをさらに含む。
【0130】
図１３Ｃは、映像処理の例の方法１３３０を示すフローチャートである。方法１３３０は、１３３２において、現在の映像ブロックを含む映像と映像の符号化表現との間での変換中に、現在の映像ブロックを処理することを含む。方法１３３０は、１３３４において、マージ候補リストと現在の映像ブロックの動き情報とを比較し、選択的にマージ候補リストを更新することとをさらに含む。いくつかの実装形態において、動き情報は、補間フィルタ情報を含み、補間フィルタ情報は、符号化表現における現在の映像ブロックを表すために使用される動きベクトル差分値を補間するために使用される補間フィルタのパラメータを含む。
【0131】
図１４Ａは、映像処理の例の方法１４１０を示すフローチャートである。方法１４１０は、１４１２において、映像領域の現在の映像ブロックと映像の符号化表現との間の変換に先だって、少なくとも１つのＨＭＶＰ（Ｈｉｓｔｏｒｙ－ｂａｓｅｄ Ｍｏｔｉｏｎ Ｖｅｃｔｏｒ Ｐｒｅｄｉｃｔｉｏｎ）テーブルを維持することを含み、ＨＭＶＰテーブルは、１または複数の以前に処理されたブロックの動き情報に対応する１または複数のエントリを含む。方法１４１０は、１４１４において、少なくとも１つのＨＭＶＰテーブルを使用して変換を行うことをさらに含む。いくつかの実装形態において、各エントリの動き情報は、１または複数の以前に処理されたブロックのための補間フィルタ情報を含むように構成される。いくつかの実装形態において、補間フィルタ情報は、１または複数の以前に処理されたブロックの補間予測ブロックのために使用される補間フィルタを示す。
【0132】
図１４Ｂは、映像処理の例の方法１４２０を示すフローチャートである。方法１４２０は、１４２２において、映像領域の現在の映像ブロックと映像の符号化表現との間の変換に先だって、１または複数の以前に処理されたブロックの動き情報に対応する１または複数のエントリを含むＨＭＶＰ（Ｈｉｓｔｏｒｙ－ｂａｓｅｄ Ｍｏｔｉｏｎ Ｖｅｃｔｏｒ Ｐｒｅｄｉｃｔｉｏｎ）テーブルを維持することを含み、各エントリの動き情報は、１または複数の以前に処理されたブロックのための補間フィルタ情報を含むように構成される。方法１４２０は、１４２４において、変換のために、ＨＭＶＰマージ候補を含む動き候補リストを構成することを含み、ＨＭＶＰ候補は、１つのエントリに関連付けられた対応する補間フィルタ情報を含むＨＭＶＰテーブルから１つのエントリを継承することで導出される、ことをさらに含む。方法１４２０は、１４２６において、動き候補リストに基づいて変換を行うことを含む。
【0133】
図１５Ａは、映像処理の例の方法１５１０を示すフローチャートである。方法１５１０は、１５１２において、映像の符号化表現において、映像の現在の映像ブロックを表すために使用される符号化モードを決定することを含む。方法１５１０は、１５１４において、符号化モードに従って、現在の映像ブロックを符号化表現に符号化することをさらに含み、符号化モードの使用によって、現在の映像ブロックに対して、動き情報を表すための１／２画素精度の使用が無効化される。
【0134】
図１５Ｂは、映像処理の例の方法１５２０を示すフローチャートである。方法１５２０は、１５２２において、映像の現在の映像ブロックが符号化モードを使用して符号化されていると判定するために、映像の符号化表現を構文解析することを含む。方法１５２０は、１５２４において、符号化モードに従って、符号化された表現から現在の映像ブロックの復号化表現を生成することをさらに含み、符号化モードの使用によって、現在の映像ブロックに対して、動き情報を表すための１／２画素精度の使用が無効化される。
【0135】
図１５Ｃは、映像処理の例の方法１５３０を示すフローチャートである。方法１５３０は、１５３２において、ＧＢｉ（Ｇｅｎｅｒａｌｉｚｅｄ Ｂｉ－ｐｒｅｄｉｃｔｉｏｎ）モードを使用して処理される現在の映像ブロックに対して、第１の重み係数と、第２の異なる重み係数を第１の予測ブロックと第２の予測ブロックに対してそれぞれ使用することを判定することであって、第１の重み係数および第２の重み係数は重み係数集合から選択される、ことを含む。方法１５３０は、１５３４において、判定に基づいて映像の現在の映像ブロックと映像の符号化表現との間で変換を行うことをさらに含む。いくつかの実装形態において、インターモードに使用される第１重み係数セットは、アフィンインターモードに使用される第２重み係数セットとは異なる。
【0136】
図１５Ｄは、映像処理の例の方法１５４０を示すフローチャートである。方法１５４０は、１５４２において、映像の映像領域の複数の映像ユニットと複数の映像ユニットの符号化表現との間での変換のために、映像ユニットの符号化モードに依存して、補間フィルタに関する情報を判定することであって、補間フィルタは、符号化表現において動きベクトル差分値を補間するために使用され、Ｍ整数画素精度または１／Ｎサブピクセル精度を有し、ＭおよびＮは正の整数である、ことを含む。方法１５４０は、１５４４において、補間フィルタを使用して変換を行うことをさらに含む。
【0137】
図１６Ａは、映像処理の例の方法１６１０のフローチャートである。方法１６１０は、１６１２において、映像の符号化表現において、映像の現在の映像ブロックを表すために使用される符号化モードを決定することを含む。方法１６１０は、１６１４において、符号化モードに従って、現在の映像ブロックを符号化表現に符号化することをさらに含む。いくつかの実装形態において、符号化モードの使用に起因して、現在の映像ブロックに対して、動き情報を表すためのデフォルトの１／２画素精度フィルタに加えて代替１／２画素精度フィルタを使用することが無効化されている。
【0138】
図１６Ｂは、映像処理の例の方法１６２０のフローチャートである。方法１６２０は、１６２２において、映像の現在の映像ブロックが符号化モードを使用して符号化されていると判定するために、映像の符号化表現を構文解析することを含む。方法１６２０は、１６２４において、符号化モードに従って、符号化表現から現在の映像ブロックの復号化表現を生成することをさらに含む。いくつかの実装形態において、符号化モードの使用に起因して、現在の映像ブロックに対して、動き情報を表すためのデフォルトの１／２画素精度フィルタに加えて代替１／２画素精度フィルタを使用することが無効化されている。
【0139】
図１６Ｃは、映像処理の例の方法１６３０のフローチャートである。方法１６３０は、１６３２において、映像の映像ブロックに対して有効にされている代替補間フィルタを使用することに起因して、映像ブロックを映像の符号化表現に符号化するために符号化モードが許可されないと判定することを含む。方法１６３０は、１６３４において、判定に基づいて映像ブロックの符号化表現を生成することをさらに含み、代替補間フィルタは、現在の映像ブロックのインター予測ブロックを補間するために使用される。
【0140】
図１６Ｄは、映像処理の例の方法１６４０のフローチャートである。方法１６４０は、１６４２において、映像の映像ブロックに対して有効化されている代替補間フィルタを使用することに起因して、映像の符号化表現において映像ブロックを表すために符号化モードを使用することが許可されないと判定することを含む。方法１６４０は、１６４４において、判定に基づいて符号化表現を構文解析することによって、復号化された映像ブロックを生成することをさらに含む。
【0141】
様々な技術および実施形態を、以下の項に基づくフォーマットを使用して説明することができる。
【0142】
第１組の項目では、前章で開示された技術の特定の特徴および態様を説明する。
【0143】
１．現在の映像ブロックに対して、近傍のブロックのセットに少なくとも１つの補間フィルタを適用することに基づいて、単一の動き情報のセットを判定することであって、前記少なくとも１つの補間フィルタは、前記単一の動き情報のセットの整数画素精度またはサブピクセル精度に構成可能である、ことと、前記現在の映像ブロックと前記現在の映像ブロックのビットストリーム表現との間での変換を行うことであって、前記変換は、前記ビットストリーム表現において信号通知される前記単一の動き情報のセットを改善するためのＤＭＶＲ（Ｄｅｃｏｄｅｒ Ｍｏｔｉｏｎ Ｖｅｃｔｏｒ Ｒｅｆｉｎｅｍｅｎｔ）ステップを含む、ことを有する、映像処理方法。
【0144】
２．前記単一の動き情報のセットがＡＭＶＲ（Ａｄａｐｔｉｖｅ Ｍｏｔｉｏｎ Ｖｅｃｔｏｒ Ｒｅｓｏｌｕｔｉｏｎ）モードに関連付けられている場合、前記少なくとも１つの補間フィルタのインデックスが前記ビットストリーム表現において信号通知される、項目１に記載の方法。
【0145】
３．前記単一の動き情報のセットが１つのマージモードに関連付けられている場合、前記少なくとも１つの補間フィルタのインデックスが前の映像ブロックから継承される、項目１に記載の方法。
【0146】
４．前記単一の動き情報のセットがＭＭＶＤ（Ｍｅｒｇｅ ｗｉｔｈ Ｍｏｔｉｏｎ Ｖｅｃｔｏｒ Ｄｉｆｆｅｒｅｎｃｅ）モードに関連付けられる場合、前記少なくとも１つの補間フィルタのインデックスが前の映像ブロックから継承される、項目１に記載の方法。
【0147】
５．前記少なくとも１つの補間フィルタは、サブピクセル精度を有するデフォルトフィルタに対応し、前記単一の動き情報のセットは、ＭＭＶＤ（Ｍｅｒｇｅ ｗｉｔｈ Ｍｏｔｉｏｎ Ｖｅｃｔｏｒ Ｄｉｆｆｅｒｅｎｃｅ）モードに関連付けられる、項目１に記載の方法。
【0148】
６．前記現在の映像ブロックのための前記少なくとも１つの補間フィルタの係数は、前記前の映像ブロックから継承される、第２～４項のいずれかに記載の方法。
【0149】
７．前記単一の動き情報のセットの前記サブピクセル精度は、１／４画素または１／１６画素に等しい、項目１～６のいずれかに記載の方法。
【0150】
８．前記単一の動き情報のセットの１または複数の構成要素がサブピクセル精度を有する、項目１～７のいずれかに記載の方法。
【0151】
９．前記少なくとも１つの補間フィルタは、６つの係数または８つの係数を使用して表される、項目１に記載の方法。
【0152】
１０．前記少なくとも１つの補間フィルタのインデックスは、現在の映像ブロックにのみ関連付けられ、後続の映像ブロックには関連付けられない、第５項に記載の方法。
【0153】
１１．前記少なくとも１つの補間フィルタに関する情報が、前記単一の動き情報のセットとともに記憶される、項目１に記載の方法。
【0154】
１２．前記少なくとも１つの補間フィルタに関する情報は、前記少なくとも１つの補間フィルタをデフォルトフィルタとして特定する、項目１１に記載の方法。
【0155】
１３．前記現在の映像ブロックに対する前記少なくとも１つの補間フィルタの係数は、別の映像ブロックの補間フィルタによる利用がされないようにする、項目１に記載の方法。
【0156】
１４．前記少なくとも１つの補間フィルタは、複数のフィルタに対応し、前記複数のフィルタにおける各フィルタは、前記単一の動き情報のセットの前記サブピクセル精度に関連付けられる、項目１～１３のいずれかに記載の方法。
【0157】
１５．前記単一の動き情報のセットの各成分の精度は、前記単一の動き情報のセットのサブピクセル精度以下である、項目１～１４のいずれかに記載の方法。
【0158】
１６．前記少なくとも１つの補間フィルタは、ＨＭＶＰ（Ｈｉｓｔｏｒｙ－ｂａｓｅｄ Ｍｏｔｉｏｎ Ｖｅｃｔｏｒ Ｐｒｅｄｉｃｔｉｏｎ）ルックアップテーブルに記憶される、項目１～１５のいずれかに記載の方法。
【0159】
１７．項目１６に記載の方法であって、さらに、
【0160】
別の映像ブロックの動き情報が前記現在の映像ブロックの前記単一の動きのセットと同じであることを検出することに伴って、前記別の映像ブロックの前記動き情報を挿入せずに、前記単一の動き情報のセットを、前記ＨＭＶＰテーブルに挿入することを有する、方法。
【0161】
１８．別の映像ブロックの動き情報が前記現在の映像ブロックの前記単一の動きのセットと同じであることを検出することに伴って、ＨＭＶＰテーブルに、前記現在の映像ブロックの前記単一の動き情報のセットと前記別の映像ブロックの前記動き情報を挿入することをさらに含む、項目１６に記載の方法。
【0162】
１９．前記別の映像ブロックは補間フィルタに関連づけられ、前記挿入することは、前記現在の映像ブロックの少なくとも１つの補間フィルタおよび／または前記別の映像ブロックの補間フィルタに少なくとも部分的に基づく、項目１７～１８のいずれかに記載の方法。
【0163】
２０．前記現在の映像ブロックと前記別の映像ブロックは、ペアワイズ候補または結合マージ候補に対応する、項目１７～１９のいずれかに記載の方法。
【0164】
２１．前記現在の映像ブロックの前記少なくとも１つの補間フィルタと前記別の映像ブロックの前記補間フィルタとが同じである、項目１７～２０のいずれかに記載の方法。
【0165】
２２．前記現在の映像ブロックの前記少なくとも１つの補間フィルタと前記別の映像ブロックの前記補間フィルタとが異なる、項目１７～２０のいずれかに記載の方法。
【0166】
２３．前記現在の映像ブロックは、ＩＢＣ（Ｉｎｔｒａ Ｂｌｏｃｋ Ｃｏｐｙ）モードで符号化され、前記単一の動き情報のセットの表現における前記サブピクセル精度の使用が無効化される、項目１に記載の方法。
【0167】
２４．前記少なくとも１つの補間フィルタの使用が無効にされる、項目１～２３のいずれかに記載の方法。
【0168】
２５．前記少なくとも１つの補間フィルタは、ａｍｖｒ＿ｐｒｅｃｉｓｉｏｎ＿ｉｄｘフラグおよび／またはｈｐｅｌ＿ｉｆ＿ｉｄｘフラグに関連付けられる、項目１に記載の方法。
【0169】
２６．前記ａｍｖｒ＿ｐｒｅｃｉｓｉｏｎ＿ｉｄｘフラグおよび／または前記ｈｐｅｌ＿ｉｆ＿ｉｄｘフラグは、バイパス符号化ビンまたはコンテキスト符号化ビンに関連付けられる、項目２５に記載の方法。
【0170】
２７．最初のビンは、バイパス符号化ビンまたはコンテキスト符号化ビンである、項目２６に記載の方法。
【0171】
２８．すべてのビンが同じコンテキストを共有する、項目２５～２７のいずれかに記載の方法。
【0172】
２９．前記少なくとも１つの補間フィルタを用いることに基づいて、１または複数の映像処理ステップを無効化する、項目１に記載の方法。
【0173】
３０．前記１または複数の映像処理ステップは、ＤＭＶＲ（Ｄｅｃｏｄｅｒ Ｍｏｔｉｏｎ Ｖｅｃｔｏｒ Ｒｅｆｉｎｅｍｅｎｔ）ステップ、ＢＤＯＦ（Ｂｉ－Ｄｉｒｅｃｔｉｏｎａｌ Ｏｐｔｉｃａｌ Ｆｌｏｗ）ステップ、ＣＩＩＰ（Ｃｏｍｂｉｎｅｄ Ｉｎｔｅｒ－Ｉｎｔｒａ Ｐｒｅｄｉｃｔｉｏｎ）ステップ、ＳＭＶＤ（Ｓｙｍｍｅｔｒｉｃ Ｍｏｔｉｏｎ Ｖｅｃｔｏｒ Ｄｉｆｆｅｒｅｎｃｅ）ステップ、ＳＢＴ（ＳｕｂＢｌｏｃｋ Ｔｒａｎｓｆｏｒｍ）ステップ、または、三角形予測ステップ、を含む項目２９に記載の方法。
【0174】
３１．前記少なくとも１つの補間フィルタは、デフォルトフィルタに対応する、項目３０に記載の方法。
【0175】
３２．前記１または複数の映像処理ステップを無効化することは、前記ビットストリーム表現において、前記１または複数の映像処理ステップの指示を無効化することを含む、項目３０～３１のいずれかに記載の方法。
【0176】
３３．前記１または複数の映像処理ステップを無効化することは、前記現在の映像ブロックの前記少なくとも１つの補間フィルタを別の映像ブロックに継承することを無効化することを含む、項目３０～３１のいずれかに記載の方法。
【0177】
３４．前記単一の動き情報のセットの前記整数画素精度は、１画素、２画素、または４画素に対応する、項目１に記載の方法。
【0178】
３５．前記少なくとも１つの補間フィルタは、ローパスフィルタである、項目３４に記載の方法。
【0179】
３６．前記少なくとも１つの補間フィルタは１次元フィルタである、項目３４に記載の方法。
【0180】
３７．前記１次元フィルタは、水平フィルタまたは垂直フィルタである、項目３６に記載の方法。
【0181】
３８．前記ビットストリーム表現におけるフラグは、前記少なくとも１つの補間フィルタを用いるどうかを示す、項目３４に記載の方法。
【0182】
３９．前記現在の映像ブロックは、ＡＭＶＲ（Ａｄａｐｔｉｖｅ Ｍｏｔｉｏｎ Ｖｅｃｔｏｒ Ｒｅｓｏｌｕｔｉｏｎ）モードに関連付けられる、項目１～３８のいずれかに記載の方法。
【0183】
４０．前記現在の映像ブロックのインターモードのための前記少なくとも１つの補間フィルタは、現在の映像ブロックのＧＢＩ（Ｇｅｎｅｒａｌｉｚｅｄ Ｂｉ－Ｐｒｅｄｉｃｔｉｏｎ）モードとは異なる、項目１～３９のいずれかに記載の方法。
【0184】
４１．前記少なくとも１つの補間フィルタは、予め決定される、項目１～４０のいずれかに記載の方法。
【0185】
４２．前記ビットストリーム表現は、前記現在の映像ブロックに関連付けられた、ＶＰＳ（Ｖｉｄｅｏ Ｐａｒａｍｅｔｅｒ Ｓｅｔ）、ＰＰＳ（Ｐｉｃｔｕｒｅ Ｐａｒａｍｅｔｅｒ Ｓｅｔ）、ピクチャヘッダ、タイルグループヘッダ、またはスライスヘッダを含む、項目１～４１のいずれかに記載の方法。
【0186】
４３．前記映像処理は、エンコーダ側の実装である、項目１～４２のいずれかに記載の方法。
【0187】
４４．前記映像処理は、デコーダ側の実装である、項目１～７０のいずれかに記載の方法。
【0188】
４５．プロセッサと、命令が記憶された非一時的メモリとを備える映像システムにおける装置であって、前記命令が前記プロセッサによって実行されることにより、前記処理装置に、項目１～４４のいずれかに記載の方法を実施させる装置。
【0189】
４６．非一時的なコンピュータ可読媒体に記憶されたコンピュータプログラムプロダクトであって、項目１～４５のいずれかの方法を実行するためのプログラムコードを含む、コンピュータプログラムプロダクト。
【0190】
第２組の項目では、例えば、例示の実装形態１、８、および１０を含む、前章に記載された開示された技術の特定の特徴および態様を説明する。
【0191】
１．映像の現在の映像ブロックと前記映像の符号化表現との間で変換を行うことを有し、前記符号化表現は、前記現在の映像ブロックに対して、デフォルトの動き情報精度を使用しない複数の精度セットからの動き情報精度を示す第１のパラメータ、および／または、代替１／２画素補間フィルタを前記変換に使用するかどうかを識別する第２のパラメータを含み、前記第１のパラメータおよび／または前記第２のパラメータは各々、１または複数のビンに関連付けられ、コンテキストモデルに基づく符号化は、前記符号化表現における前記１または複数のビンの最初のビンに対してのみ使用される、映像処理方法。
【0192】
２．前記動き情報は、動きベクトル予測、動きベクトル差分、および動きベクトルのうちの少なくとも１つを有する、項目１に記載の方法。
【0193】
３．前記第１のパラメータは、ａｍｖｒ＿ｐｒｅｃｉｓｉｏｎ＿ｉｄｘである、項目１に記載の方法。
【0194】
４．前記デフォルト動き情報精度は、１／４輝度サンプルである、項目１に記載の方法。
【0195】
５．前記複数の精度セットは、１／１６輝度サンプル、１／２輝度サンプル、１輝度サンプル、および４輝度サンプルのうちの少なくとも１つを有する、項目１に記載の方法。
【0196】
６．前記現在のブロックは、インターモード、アフィンインターモード、またはイントラブロックコピーモードで符号化される、項目１に記載の方法。
【0197】
７．１つのコンテキストが前記第１のパラメータの前記最初のビンに使用される、項目１に記載の方法。
【0198】
８．残りのビンはバイパス符号化される、項目１に記載の方法。
【0199】
９．前記第１のパラメータの前記最初のビンおよび／または前記第２のパラメータの前記最初のビンは、バイパス符号化される、項目１に記載の方法。
【0200】
１０．１つのコンテキストは、前記第２のパラメータの前記最初のビンに使用される、項目１に記載の方法。
【0201】
１１．１つのコンテキストは、前記第１のパラメータのすべてのビンによって共有される、項目１に記載の方法。
【0202】
１２．１つのコンテキストは、前記第２のパラメータのすべてのビンによって共有される、項目１に記載の方法。
【0203】
１３．前記第２のパラメータは、デフォルトの１／２画素補間フィルタの使用を示す第１の値を有する、項目１に記載の方法。
【0204】
１４．前記第２のパラメータは、前記代替１／２画素補間フィルタを使用する第２の値を有する、項目１に記載の方法。
【0205】
１５．前記デフォルトの１／２画素補間フィルタは、［－１，４，－１１，４０，４０，－１１，４，－１］の係数セットを有する、項目１３に記載の方法。
【0206】
１６．前記代替１／２画素補間フィルタは、［０，３，９，２０，２０，９，３，０］の係数セットを有する、項目１に記載の方法。
【0207】
１７．映像の現在の映像ブロックと前記映像の符号化表現との間での変換のために、補間フィルタを使用して動き情報を判定することであって、前記動き情報は、Ｍ－整数画素精度または１／Ｎサブピクセル精度を有し、Ｍ、Ｎは正の整数であり、Ｎが２に等しくない、ことと、前記動き情報に基づいて、前記変換を行うこととであって、前記符号化表現の構文フィールドは前記補間フィルタに対応する、こととを有する、映像処理方法。
【0208】
１８．Ｎは４と等しい、項目１７に記載の方法。代替的に、いくつかの実施形態において、Ｎは１６と等しい。
【0209】
１９．ＡＭＶＲ（Ａｄａｐｔｉｖｅ Ｍｏｔｉｏｎ Ｖｅｃｔｏｒ Ｄｉｆｆｅｒｅｎｃｅ Ｒｅｓｏｌｕｔｉｏｎ）モードで符号化された前記現在の映像ブロックに起因して、前記符号化表現は、前記補間フィルタのインデックスを含む、項目１７に記載の方法。
【0210】
２０．マージモードおよび／またはＭＭＶＤ（Ｍｅｒｇｅ ｗｉｔｈ Ｍｏｔｉｏｎ Ｖｅｃｔｏｒ Ｄｉｆｆｅｒｅｎｃｅ）モードで符号化された現在の映像ブロックに起因して、前記補間フィルタのインデックスは前の映像ブロックから継承されない、項目１７に記載の方法。
【0211】
２１．マージモードおよび／またはＭＭＶＤ（Ｍｅｒｇｅ ｗｉｔｈ Ｍｏｔｉｏｎ Ｖｅｃｔｏｒ Ｄｉｆｆｅｎｒｅｎｃｅ）モードで符号化された前記現在の映像ブロックに起因して、前記構文フィールドはデフォルト補間フィルタを示す、項目１７に記載の方法。
【0212】
２２．マージモードおよび／またはＭＭＶＤ（Ｍｅｒｇｅ ｗｉｔｈ Ｍｏｔｉｏｎ Ｖｅｃｔｏｒ Ｄｉｆｆｅｎｒｅｎｃｅ）モードで符号化された前記現在の映像ブロックに起因して、前の映像ブロックから前記補間フィルタのインデックスが継承される、項目１７に記載の方法。
【0213】
２３．前記動き情報は、前記サブピクセル精度を有する、項目２２に記載の方法。
【0214】
２４．前記動き情報は、前記サブピクセル精度を有する１または複数の構成要素を含む、項目２２に記載の方法。
【0215】
２５．前記補間フィルタのインデックスは、前記現在の映像ブロックにのみ関連付けられ、後続の映像ブロックには関連付けられない、項目２２に記載の方法。
【0216】
２６．Ｍは、１、２または４と等しい、項目１７に記載の方法。
【0217】
２７．前記補間フィルタは、ローパスフィルタである、項目１７に記載の方法。
【0218】
２８．前記補間フィルタは、１次元フィルタである、項目１７に記載の方法。
【0219】
２９．前記１次元フィルタは、水平フィルタまたは垂直フィルタである、項目２８に記載の方法。
【0220】
３０．前記符号化表現は、Ｍ整数画素精度を有する前記補間フィルタが有効であるかどうかを示すフラグを選択的に含む、項目１７に記載の方法。
【0221】
３１．前記フラグは、前記現在の映像ブロックが整数画素動きベクトル精度を使用して符号化され、かつその場合にのみ信号通知される、項目３０に記載の方法。
【0222】
３２．前記変換を行うことは、前記符号化表現から前記映像を生成することを含む、項目１～３１のいずれかに記載の方法。
【0223】
３３．前記変換を行うことは、前記映像から前記符号化表現を生成することを含む、項目１～３１のいずれかに記載の方法。
【0224】
３４．プロセッサと、命令が記憶された非一時的メモリとを備える映像システムにおける装置であって、前記命令が前記プロセッサによって実行されることにより、前記プロセッサに、項目１～３３のいずれかに記載の方法を実施させる映像システムの装置。
【0225】
３５．非一時的なコンピュータ可読媒体に記憶されたコンピュータプログラムプロダクトであって、項目１～３５のいずれかに記載の方法を実行するためのプログラムコードを含む、コンピュータプログラムプロダクト。
【0226】
第３組の項目では、例えば、例示の実装形態２、３、５および６を含む、前章に記載された開示された技術の特定の特徴および態様を説明する。
【0227】
１．映像の現在の映像ブロックと前記映像の符号化表現との間での変換のために、動き候補リストにおける１または複数の動き候補および前記１または複数の動き候補に関連付けられた１または複数の補間フィルタに基づいて、第１の動き候補を生成することであって、前記補間フィルタは、前記１または複数の動き候補に関連付けられた前記１または複数の補間フィルタに依存する規則に従って、前記第１の動き候補に割り当てられる、ことと、前記第１の動き候補を前記動き候補リストに挿入することと、前記動き候補リストに基づいて前記変換を行うことと、を有する映像処理方法。
【0228】
２．前記第１の動き候補は、ペアワイズマージ候補、結合マージ候補、ゼロ動きベクトル候補、および／または他のデフォルト候補のうちの少なくとも１つに対応する、項目１に記載の方法。
【0229】
３．各動き候補は、１／２サンプル補間フィルタインデックスに関連付けられ、前記第１の動き候補の１／２サンプル補間フィルタは、少なくとも２つの動き候補の１／２サンプル補間フィルタインデックスによって決定される、項目１に記載の方法。
【0230】
４．同じ１／２サンプル補間フィルタに関連付けられている２つの動き候補に対し、前記規則は、前記第１の動き候補において同じ１／２サンプル補間フィルタを継承することを規定する、項目１に記載の方法。
【0231】
５．前記同じ１／２サンプル補間フィルタは、１に等しい１／２サンプル補間フィルタインデックスに関連付けられた代替１／２サンプル補間フィルタに対応し、前記代替１／２サンプル補間フィルタは、０に等しい１／２サンプル補間フィルタインデックスに関連付けられたデフォルト１／２サンプル補間フィルタとは異なる、項目４に記載の方法。
【0232】
６．デフォルト補間フィルタに関連付けられていない前記動き候補の１つに対し、前記規則は、前記補間フィルタを前記第１の動き候補に継承することを規定する、項目１に記載の方法。
【0233】
７．前記補間フィルタは、対応する予測方向に対してのみ使用される、項目６に記載の方法。
【0234】
８．異なる補間フィルタに関連付けられている２つの動き候補に対し、前記規則は、前記第１の動き候補において前記異なる補間フィルタが継承されることを規定する、項目１に記載の方法。
【0235】
９．前記異なる補間フィルタが、異なる予測方向に対して使用される、項目１に記載の方法。
【0236】
１０．割り当てられた補間フィルタに対応する代替補間フィルタの前記第１の動き候補の数は、Ｋ以下であり、Ｋは０以上である、項目１に記載の方法。
【0237】
１１．前記デフォルト補間フィルタは、前記第１の動き候補に対して常に用いられる、項目１に記載の方法。
【0238】
１２．映像の第１の映像領域における第１のブロックと、第２の映像領域における第２のブロックとを含む複数のブロックの各々に、前記複数のブロックの各々に対して動きベクトル差分情報を補間するために使用するそれぞれの補間フィルタについての情報を含む動き情報を関連付けることと、前記動き情報を使用して、前記映像と前記映像の符号化表現との間の変換を行うことと、を含む、映像処理方法。
【0239】
１３．前記動き情報は、デフォルト動き補間フィルタの使用を示す情報を含む、項目１２に記載の方法。
【0240】
１４．前記動き情報は、デフォルトの補間フィルタとは異なる代替補間フィルタを特定する、項目１２に記載の方法。
【0241】
１５．前記動き情報は、１または複数の動きベクトル、および１または複数の参照フレームインデックスを含む、項目１２に記載の方法。
【0242】
１６．前記第１の映像領域および前記第２の映像領域は、符号化ツリーユニット行である、項目１２～１５のいずれかに記載の方法。
【0243】
１７．前記第１の映像領域および前記第２の映像領域は、仮想パイプラインデータユニットである、項目１２～１５のいずれかに記載の方法。
【0244】
１８．前記第１の映像領域および前記第２の映像領域は、異なる領域である、項目１２～１７のいずれかに記載の方法。
【0245】
１９．前記第２のブロックは、前記第１のブロックにアクセスすることで符号化または復号化され、前記動き情報は、前記第１の映像領域が前記第２の映像領域と異なる場合、前記第２のブロックに使用される補間フィルタが、第１のブロックに使用される補間フィルタと同じであることは許可されないことを規定する規則に従う、項目１２～１８のいずれかに記載の方法。
【0246】
２０．前記第１の映像領域および前記第２の映像領域は、同じである、項目１２～１７のいずれかに記載の方法。
【0247】
２１．映像の現在の映像ブロックと前記映像の符号化表現との間で変換を行うことを有し、前記現在の映像ブロックは、マージモードまたはＭＭＶＤ（Ｍｅｒｇｅ ｗｉｔｈ Ｍｏｔｉｏｎ Ｖｅｃｔｏｒ Ｄｉｆｆｅｒｅｎｔ）モードを使用して前記符号化表現で表現され、１／Ｎ精度を有する補間フィルタは、規則に従って、前記現在の映像ブロックに関連付けられた予測ブロックを補間するために用いられ、Ｎは正の整数であり、前記規則は、前記補間フィルタがデフォルトの補間フィルタとは異なる代替補間フィルタである場合、補間情報を継承するための条件を定義する、映像処理方法。
【0248】
２２．前記規則は、前記代替補間フィルタの係数を前記継承することを許可しないことを判定する、項目２１に記載の方法。
【0249】
２３．前記符号化表現における構文要素は、常に前記デフォルト補間フィルタを示す、項目２１に記載の方法。
【0250】
２４．前記規則は、前記代替補間フィルタの係数を前記継承することを許可することを判定する、項目２１に記載の方法。
【0251】
２５．最終的に導出された動きベクトルが１／２画素の精度であり、動きベクトル構成要素がより細かい動きベクトル精度を有していない場合、前記代替補間フィルタの前記係数が継承される、項目２４に記載の方法。
【0252】
２６．最終的に導出された動きベクトルが、１／２画素の精度を有する１または複数の動きベクトル構成要素を含む場合、前記代替補間フィルタの前記係数が継承される、項目２４に記載の方法。
【0253】
２７．前記代替補間フィルタは、動き補償にのみ使用される、項目２４に記載の方法。
【0254】
２８．前記現在の映像ブロックのために、前記デフォルト補間フィルタのインデックスが記憶され、前記現在の映像ブロックの後続の符号化ブロックで使用される、項目２４に記載の方法。
【0255】
２９．現在の映像ブロックを含む映像と前記映像の符号化表現との間での変換中に、前記現在の映像ブロックを処理することと、マージ候補リストと前記現在の映像ブロックの動き情報とを比較して、選択的に更新することと、を有し、前記動き情報は、補間フィルタ情報を含み、前記補間フィルタ情報は、前記符号化表現における前記現在の映像ブロックを表すために使用される動きベクトル差分値を補間するために使用される補間フィルタのパラメータを含む、映像処理方法。
【0256】
３０．異なる補間フィルタに関連付けられた２つのマージ候補は、２つの異なるマージ候補として見なされる、項目２９に記載の方法。
【0257】
３１．前記マージリストを比較して選択的に更新することは、前記補間フィルタ情報を考慮することにより、ＨＭＶＰ（Ｈｉｓｔｏｒｙ－ｍａｓｅｄ Ｍｏｔｉｏｎ Ｖｅｃｔｏｒ Ｐｒｅｄｉｃｔｉｏｎ）マージ候補を前記マージ候補リストに挿入することを含む、項目２９に記載の方法。
【0258】
３２．前記マージ候補リストを比較して選択的に更新することは、前記補間フィルタ情報を考慮することなく、ＨＭＶＰ（Ｈｉｓｔｏｒｙ－ｂａｓｅｄ Ｍｏｔｉｏｎ Ｖｅｃｔｏｒ Ｐｒｅｄｉｃｔｉｏｎ）マージ候補を前記マージ候補リストに挿入することを含む、項目２９に記載の方法。
【0259】
３３．前記デフォルトの動き補間フィルタは、［－１，４，－１１，４０，４０，－１１，４，－１］の係数セットを有する、項目１～３２のいずれかに記載の方法。
【0260】
３４．前記代替補間フィルタは、［０，３，９，２０，２０，９，３，０］の係数セットを有する、項目１～３２のいずれかに記載の方法。
【0261】
３５．前記変換を行うことは、前記現在の映像ブロックから前記符号化表現を生成することを含む、項目１～３４のいずれかに記載の方法。
【0262】
３６．前記変換を行うことは、前記符号化表現から前記現在の映像ブロックを生成することを含む、項目１～３４のいずれかに記載の方法。
【0263】
３７．プロセッサと、命令が記憶された非一時的メモリとを備える映像システムにおける装置であって、前記命令が前記プロセッサによって実行されることにより、前記プロセッサに、項目１～３６のいずれかに記載の方法を実施させる映像システムの装置。
【0264】
３８．非一時的なコンピュータ可読媒体に記憶されたコンピュータプログラムプロダクトであって、項目１～３６のいずれかに記載の方法を実行するためのプログラムコードを含む、コンピュータプログラムプロダクト。
【0265】
第４組の項目では、例えば、例示の実装形態４を含む、前章に記載された開示された技術の特定の特徴および態様を説明する。
【0266】
１．映像領域の現在の映像ブロックと映像の符号化表現との間の変換の前に、少なくとも１つのＨＭＶＰ（Ｈｉｓｔｏｒｙ－ｂａｓｅｄ Ｍｏｔｉｏｎａ Ｖｅｃｔｏｒ Ｐｒｅｄｉｃｔｉｏｎ）テーブルを維持することであって、前記ＨＭＶＰテーブルは、１または複数の以前に処理されたブロックの動き情報に対応する１または複数のエントリを含む、ことと、前記少なくとも１つのＨＭＶＰテーブルを使用して前記変換を行うことと、を有し、各エントリの前記動き情報は、１または複数の以前に処理されたブロックのための補間フィルタ情報を含むように構成され、前記補間フィルタ情報は、１または複数の以前に処理されたブロックのうちの予測ブロックを補間するために使用した補間フィルタを示す、映像処理方法。
【0267】
２．映像領域の現在の映像ブロックと映像の符号化表現との間の変換の前に、１または複数の以前に処理されたブロックの動き情報に対応する１または複数のＨＭＶＰ（Ｈｉｔｏｒｙ－ｂａｓｅｄ Ｍｏｔｉｏｎ Ｖｅｃｔｏｒ Ｐｒｅｄｉｃｔｉｏｎ）テーブルを維持することであって、各エントリの前記動き情報は、１または複数の以前に処理されたブロックのための補間フィルタ情報を含むように構成される、ことと、前記変換のために、ＨＭＶＰマージ候補を含む動き候補リストを構築することであって、前記ＨＭＶＰ候補は、１つのエントリに関連付けられた対応する補間フィルタ情報を含む前記ＨＭＶＰテーブルからの前記１つのエントリを継承することによって導出される、ことと、前記動き候補リストに基づいて前記変換を行うことと、を有する映像処理方法。
【0268】
３．前記変換の後、前記ＨＭＶＰテーブルを選択的に更新することをさらに有する、項目１または２に記載の方法。
【0269】
４．前記現在の映像ブロックのための前記変換中に導出された前記動き情報を使用して、前記ＨＭＶＰテーブルを選択的に更新することをさらに有し、前記現在の映像ブロックのために導出された動前記動き情報は、前記現在の映像ブロックのための補間フィルタ情報を含む。項目１または２に記載の方法。
【0270】
５．前記更新することは、前記補間フィルタ情報を考慮せずに、新しい候補を前記ＨＭＶＰテーブルに挿入するかどうかを判定することを含む、項目３または４に記載の方法。
【0271】
６．補間フィルタ情報が異なるが、前記補間フィルタ情報を除く残りの動き情報の一部又は全部が同じである、前記新しい候補と、更新前の前記ＨＭＶＰテーブルにおけるエントリとは、同じ候補として考慮される、項目４に記載の方法。
【0272】
７．前記更新することは、前記補間フィルタ情報を考慮することにより、新しい候補を前記ＨＭＶＰテーブルに挿入するかどうかを判定することを含む、項目３または４に記載の方法。
【0273】
８．、前記補間フィルタ情報を除く残りの動き情報の一部または全部が同じである、前記新しい候補と、更新前の前記ＨＭＶＰテーブルにおけるエントリとは、２つの異なる候補として考慮される、項目７に記載の方法。
【0274】
９．前記新しい候補は、前記現在の映像ブロックの前記動き情報に基づいて導出される、項目５～８のいずれかに記載の方法。
【0275】
１０．前記更新することは、前記ＨＭＶＰテーブルにおけるエントリと異なる新しい候補に対し、前記新しい候補を前記ＨＭＶＰテーブルに追加することを含む、項目５～８のいずれかに記載の方法。
【0276】
１１．前記更新することは、前記ＨＭＶＰテーブルにおけるエントリと同じ前記新規候補に対し、前記ＨＭＶＰテーブルから前記エントリを削除し、前記新しい候補を前記ＨＭＶＰテーブルに追加することを含む、項目５～８のいずれかに記載の方法。
【0277】
１２．前記補間フィルタ情報は、代替補間フィルタまたはデフォルト補間フィルタの使用を示す１／２サンプル補間フィルタインデックスを含む、項目１～１１のいずれか記載の方法。
【0278】
１３．前記デフォルト補間フィルタの前記使用を示すために、前記１／２サンプル補間フィルタのインデックスが０に等しい、項目１２に記載の方法。
【0279】
１４．前記代替補間フィルタの前記使用を示すために、前記１／２サンプル補間フィルタのインデックスが１に等しい、項目１２に記載の方法。
【0280】
１５．前記デフォルト補間フィルタは、［－１，４，－１１，４０，４０，－１１，４，－１］である係数セットを有する、項目１２に記載の方法。
【0281】
１６．前記代替補間フィルタは、［０，３，９，２０，２０，９，３，０］の係数セットを有する、項目１２に記載の方法。
【0282】
１７．前記変換を行うことは、前記現在の映像ブロックから前記符号化表現を生成することを含む、項目１～１６のいずれかに記載の方法。
【0283】
１８．前記変換を行うことは、前記符号化表現から前記現在の映像ブロックを生成することを含む、項目１～１６のいずれかに記載の方法。
【0284】
１９．プロセッサと、命令が記憶された非一時的メモリとを備える映像システムにおける装置であって、前記命令が前記プロセッサによって実行されることにより、前記プロセッサに、項目１～１８のいずれかに記載の方法を実施させる映像システムの装置。
【0285】
２０．非一時的なコンピュータ可読媒体に記憶されたコンピュータプログラムプロダクトであって、項目１～１８のいずれかに記載の方法を実行するためのプログラムコードを含む、コンピュータプログラムプロダクト。
【0286】
第５組の項目では、例えば、例示の実装形態７および１１～１２を含む、前章に記載された開示された技術の特定の特徴および態様を説明する。
【0287】
１．映像の符号化表現において、映像の現在の映像ブロックを表すために使用される符号化モードを決定することと、前記符号化モードに従って、前記現在の映像ブロックを前記符号化表現に符号化することと、を有し、前記符号化モードの使用に起因して、前記現在の映像ブロックに対して、動き情報を表すための１／２画素精度の使用が無効化される、映像符号化方法。
【0288】
２．映像の現在の映像ブロックが符号化モードを使用して符号化されているかを判定するために、前記映像の符号化表現を構文解析することと、前記符号化モードに従って、前記符号化表現から前記現在の映像ブロックの復号化表現を生成することと、を有し、前記符号化モードを使用することに起因して、前記現在の映像ブロックに対して、動き情報を表すための１／２画素精度の使用が無効化される、映像復号化方法。
【0289】
３．前記動き情報は、前記現在の映像ブロックのための１または複数の動きベクトルに対応する、項目１または２に記載の方法。
【0290】
４．前記動き情報は、前記現在の映像ブロックの１または複数の動きベクトル差分値に対応する、項目１または２に記載の方法。
【0291】
５．前記動き情報は、前記現在の映像ブロックの動きベクトルおよび前記現在の映像ブロックの１または複数の動きベクトル差分値に対応する、項目１または２に記載の方法。
【0292】
６．前記符号化モードの使用に起因して、前記符号化表現は、１／２画素解像度が前記現在の映像ブロックに適用可能であるかどうかを信号通知するためのビットおよび／またはビンを省略する、項目１～４のいずれかに記載の方法。
【0293】
７．前記符号化モードは、前記現在の映像ブロックを符号化するために、前記現在の映像ブロックを含む映像フレームを指すブロックベクトルを少なくとも使用して予測ブロックを生成するＩＢＣ（Ｉｎｔｒａ Ｂｌｏｃｋ Ｃｏｐｙ）モードに対応する、項目１～６のいずれかに記載の方法。
【0294】
８．１／２画素補間フィルタの指示が信号通知されない、項目７に記載の方法。
【0295】
９．前記符号化モードは、前記現在の映像ブロックを２つの部分に分割し、各部分が１つの動き候補に関連付けられ、同じ動き候補リストから２つの動き候補を導出するモードに対応する、項目１に記載の方法。
【0296】
１０．前記符号化モードは、三角形予測モードに対応する、項目９に記載の方法。
【0297】
１１．前記符号化モードは、前記現在の映像ブロックと近傍のブロックとが前記動き情報を共有するマージモードに対応する、項目１に記載の方法。
【0298】
１２．ＧＢｉ（Ｇｅｎｅｒａｌｉｚｅｄ Ｂｉ－ｐｒｅｄｉｃｔｉｏｎ）モードを使用して処理される現在の映像ブロックに対して、第１の重み係数と、第２の異なる重み係数を第１の予測ブロックと第２の予測ブロックに対してそれぞれ使用するように、判定することであって、前記第１の重み係数および前記第２の重み係数は重み係数セットから選択される、ことと、前記最終予測子を使用して、映像の現在の映像ブロックと前記映像の符号化表現との間で変換を行うことと、を有し、インターモードにて使用される第１の重み係数セットは、アフィンインターモードにて使用される第２の重み係数セットとは異なる、映像処理方法。
【0299】
１３．前記第１の重み係数と前記第２の重み係数との合計が１に等しい、項目１２に記載の方法。
【0300】
１４．前記重み係数セットは、現在の映像ブロックに関連付けられた、ＳＰＳ（ＳｅｑｕｅｎｃｅＰａｒａｍｔｅｒ Ｓｅｔ）、ＶＰＳ（Ｖｉｄｅｏ Ｐａｒａｍｅｔｅｒ Ｓｅｔ）、ＰＰＳ（Ｐｉｃｔｕｒｅ Ｐａｒａｍｅｔｅｒ Ｓｅｔ）、ピクチャヘッダ、タイルグループヘッダ、またはスライスヘッダにおいて信号通知される、項目１２に記載の方法。
【0301】
１５．前記重み係数セットは予め規定される、項目１２に記載の方法。
【0302】
１６．映像の映像領域の複数の映像ユニットと前記複数の映像ユニットの符号化表現との間での変換のために、映像ユニットの符号化モードに依存する補間フィルタに関する情報を判定することであって、前記補間フィルタは、前記符号化表現において動きベクトル差分値を補間するために使用され、Ｍ整数画素精度または１／Ｎサブピクセル精度を有し、ＭおよびＮは正の整数である、ことと、前記補間フィルタを使用して前記変換を行うことと、を有する、映像処理方法。
【0303】
１７．判定することは、アフィンモードで符号化された前記映像ユニットのための前記補間フィルタの第１の係数セットを判定し、判定することは、非アフィンモードで符号化された別の映像ユニットのための前記補間の異なる第２の係数セットを判定する、項目１６に記載の方法。
【0304】
１８．判定することは、ＩＢＣモードで符号化された前記映像ユニットのための前記補間フィルタの第１の係数セットを判定し、判定することは、非ＩＢＣモードで符号化された別の映像ユニットのための前記補間の異なる第２の係数セットを判定する、項目１６に記載の方法。
【0305】
１９．前記変換を行うことは、前記現在の映像ブロックから前記符号化表現を生成することを含む、項目１～１８のいずれかに記載の方法。
【0306】
２０．前記変換を行うことは、前記符号化表現から前記現在の映像ブロックを生成することを含む、項目１～１８のいずれかに記載の方法。
【0307】
２１．プロセッサと、命令が記憶された非一時的メモリとを備える映像システムにおける装置であって、前記命令が前記プロセッサによって実行されることにより、前記プロセッサに、項目１～２０のいずれかに記載の方法を実施させる映像システムの装置。
【0308】
２２．非一時的なコンピュータ可読媒体に記憶されたコンピュータプログラムプロダクトであって、項目１～２０のいずれかに記載の方法を実行するためのプログラムコードを含む、コンピュータプログラムプロダクト。
【0309】
第６組の項目では、例えば、例示の実装形態９を含む、前章に記載された開示された技術の特定の特徴および態様を説明する。
【0310】
１．映像の符号化表現において、前記映像の現在の映像ブロックを表すために使用される符号化モードを決定することと、前記符号化モードに従って、前記現在の映像ブロックを前記符号化表現に符号化することと、を有し、前記符号化モードの使用に起因して、前記現在の映像ブロックに対して、動き情報を表すためのデフォルトの１／２画素精度フィルタに加えて代替１／２画素精度フィルタの使用が無効化される、映像符号化方法。
【0311】
２．映像の現在の映像ブロックが符号化モードを使用して符号化されていることを判定するために、前記映像の符号化表現を構文解析することと、前記符号化モードに従って、前記符号化表現から前記現在の映像ブロックの復号化表現を生成することと、を有し、前記符号化モードを使用することに起因して、前記現在の映像ブロックに対して、動き情報を表すためのデフォルトの１／２画素精度フィルタに加えて代替１／２画素精度フィルタの使用が無効化される、映像復号化方法。
【0312】
３．前記符号化モードは、前記映像ブロックを複数の区画に分割し、そのうちの少なくとも１つが非長方形区画である三角形予測モードに対応する、項目１または２に記載の方法。
【0313】
４．前記三角形予測モードにおいて、前記代替１／２画素精度フィルタに関する情報は継承されず、前記デフォルトの１／２画素精度フィルタのみが用いられる、項目３に記載の方法。
【0314】
５．前記符号化モードは、前記現在のブロックが双方向予測されるＢＤＯＦ（Ｂｉ－Ｄｉｒｅｃｔｉｏｎ Ｏｐｔｉｃａｌ Ｆｌｏｗ）に対応する、項目１または２に記載の方法。
【0315】
６．前記符号化モードは、デコーダ側で導出された動き情報から予測情報を改善するＤＭＶＲ（Ｄｅｃｏｄｅｒ－ｓｉｄｅ Ｍｏｔｉｏｎ Ｖｅｃｔｏｒ Ｒｅｆｉｎｅｍｅｎｔ）に対応する、項目１または２に記載の方法。
【0316】
７．前記符号化モードは、デコーダ側で動き情報を導出するＤＭＶＤ（Ｄｅｃｏｄｅｒ－ｓｉｄｅ Ｍｏｔｉｏｎ Ｖｅｃｔｏｒ Ｄｅｒｉｖａｔｉｏｎ）に対応する、項目１または２に記載の方法。
【0317】
８．前記符号化モードは、インター予測とイントラ予測とを組み合わせて最終予測信号を生成するＣＩＩＰ（Ｃｏｍｂｉｎｅｄ Ｉｎｔｅｒ－Ｉｎｔｒａ Ｐｒｅｄｉｃｔｉｏｎ）に対応する、項目１または２に記載の方法。
【0318】
９．前記符号化モードは、動きベクトルの差分を対称的に処理するＳＭＶＤ（Ｓｙｍｍｅｔｒｉｃ Ｍｏｔｉｏｎ Ｖｅｃｔｏｒ Ｄｉｆｆｅｒｅｎｃｅ）に対応する、項目１または２に記載の方法。
【0319】
１０．前記符号化モードは、サブブロックを１つの変換ブロックに変換するＳＢＴ（ＳｕｂＢｌｏｃｋ Ｔｒａｎｓｆｏｒｍ）に対応する、項目１または２に記載の方法。
【0320】
１１．映像の映像ブロックに対して有効にされている代替補間フィルタを使用することに起因して、前記映像ブロックを前記映像の符号化表現に符号化するために符号化モードが許可されないことを判定することと、前記判定に基づいて、前記映像ブロックの前記符号化表現を生成することと、を有し、前記代替補間フィルタは、前記現在の映像ブロックのインター予測ブロックを補間するために使用される、映像符号化方法。
【0321】
１２．映像の映像ブロックに対して有効にされている代替補間フィルタを使用することに起因して、前記映像の符号化表現における前記映像ブロックを表すための符号化モードの使用が許可されないことを判定することと、前記判定に基づいて前記符号化表現を構文解析することにより、復号化された映像ブロックを生成することと、を有する、映像復号化方法。
【0322】
１３．前記代替補間フィルタは、代替１／２サンプル補間フィルタである、項目１１または１２に記載の方法。
【0323】
１４．前記判定することは、前記現在の映像ブロックを２つの部分に分割し、各部分が１つの動き候補に関連付けられ、２つの動き候補は同じ動き候補リストから導出される符号化モードに対応する前記符号化モードを許可しないことを判定する、項目１１に記載の方法。
【0324】
１５．前記符号化モードは、三角形予測モードに対応する、項目１４に記載の方法。
【0325】
１６．前記代替補間フィルタに関する情報は、前記符号化モードにおいて継承されず、デフォルトの１／２サンプル補間フィルタのみが使用される項目１３または１４に記載の方法。
【0326】
１７．前記判定することは、前記現在のブロックが双方向予測されるＢＤＯＦ（Ｂｉ－Ｄｉｒｅｃｔｉｏｎ Ｏｐｔｉｃａｌ Ｆｌｏｗ）に対応する前記符号化モードを許可しないことを判定する、項目１１または１２に記載の方法。
【0327】
１８．前記判定することは、デコーダ側で導出された動き情報から予測情報を改善するＤＭＶＲ（Ｄｅｃｏｄｅｒ－ｓｉｄｅ Ｍｏｔｉｏｎ Ｖｅｃｔｏｒ Ｒｅｆｉｎｅｍｅｎｔ）に対応する前記符号化モードを許可しないかを判定する、項目１７に記載の方法。
【0328】
１９．前記判定することは、デコーダ側において動き情報を導出するＤＭＶＤ（Ｄｅｃｏｄｅｒ－ｓｉｄｅ Ｍｏｔｉｏｎ Ｖｅｃｔｏｒ Ｄｅｒｉｖａｔｉｏｎ）に対応する前記符号化モードを許可しないことを判定する、項目１２に記載の方法。
【0329】
２０．前記判定することは、インター予測とイントラ予測とを組み合わせることで最終予測信号を生成するＣＩＩＰ（Ｃｏｍｂｉｎｅｄ Ｉｎｔｅｒ－Ｉｎｔｒａ Ｐｒｅｄｉｃｔｉｏｎ）に対応する前記符号化モードを許可しないことを判定する、項目１１に記載の方法。
【0330】
２１．マージ候補が前記補間フィルタを継承する場合、ＣＩＩＰフラグをスキップし、偽であると推論する、項目２０に記載の方法。
【0331】
２２．ＣＩＩＰフラグが真である場合、常にデフォルトの補間フィルタが使用される、項目２０に記載の方法。
【0332】
２３．前記判定することは、動きベクトル差分を対称的に処理するＳＭＶＤ（Ｓｙｍｍｅｔｒｉｃ Ｍｏｔｉｏｎ Ｖｅｃｔｏｒ Ｄｉｆｆｅｒｅｎｃｅ）に対応する前記符号化モードを許可しないことを判定する、項目１１に記載の方法。
【0333】
２４．前記ＳＭＶＤの前記使用のために常にデフォルトの補間フィルタが使用され、前記補間フィルタに関する構文要素は信号通知されない、項目２３に記載の方法。
【0334】
２５．前記補間フィルタに関する構文要素は、前記補間フィルタを使用しないことを表し、前記ＳＭＶＤに関する構文要素は信号通知されず、前記ＳＭＶＤは使用されない、項目２３に記載の方法。
【0335】
２６．前記判定することは、サブブロックを変換ブロックに変換するＳＢＴ（ＳｕｂＢｌｏｃｋ Ｔｒａｎｓｆｏｒｍ）に対応する前記符号化モードを許可しないことを判定する、項目１２に記載の方法。
【0336】
２７．デフォルトの補間フィルタは前記ＳＢＴの使用のために常に使用され、前記補間フィルタに関する構文要素は信号通知されない、項目２６に記載の方法。
【0337】
２８．前記補間フィルタに関する構文要素は、前記補間フィルタが使用されないことを示し、前記ＳＢＴに関する構文要素は信号通知されず、前記ＳＢＴは使用されない、項目２６に記載の方法。
【0338】
２９．前記符号化表現を前記生成することは、前記映像ブロックが複数の部分に分割され、少なくとも１つが長方形部分である、三角符号化モードを使用して前記映像ブロックを符号化することによって、前記符号化表現を生成することを含む、項目１１に記載の方法。
【0339】
３０．前記補間フィルタに関する情報は、前記三角形符号化モードにおいて継承される、項目２９に記載の方法。
【0340】
３１．前記符号化表現を生成することは、前記符号化モードの使用を信号通知する構文要素を省略することにより、前記符号化表現を生成することを含む、項目１１に記載の方法。
【0341】
３２．前記符号化表現を前記構文解析することは、前記符号化モードの使用を信号通知する構文要素がない場合に前記符号化表現を構文解析すること含む、項目１２に記載の方法。
【0342】
３３．プロセッサと、命令が記憶された非一時的メモリとを備える映像システムにおける装置であって、前記命令が前記プロセッサによって実行されることにより、前記プロセッサに、項目１～３２のいずれかに記載の方法を実施させる映像システムの装置。
【0343】
３４．非一時的なコンピュータ可読媒体に記憶されたコンピュータプログラムプロダクトであって、項目１～３２のいずれかに記載の方法を実行するためのプログラムコードを含む、コンピュータプログラムプロダクト。
【0344】
いくつかの実施形態において、上記開示の方法は、この方法を実行するように構成可能なプロセッサを備える装置によって実装されてもよい。
【0345】
本明細書に記載された開示された、およびその他の解決策、実施例、実施形態、モジュール、および機能動作の実装形態は、本明細書に開示された構造およびその構造的等価物を含め、デジタル電子回路、またはコンピュータソフトウェア、ファームウェア、若しくはハードウェアで実施されてもよく、またはそれらの１または複数の組み合わせで実施してもよい。開示された、およびその他の実施形態は、１または複数のコンピュータプログラムプロダクト、すなわち、データ処理装置によって実装されるため、またはデータ処理装置の動作を制御するために、コンピュータ可読媒体上に符号化されたコンピュータプログラム命令の１つ以上のモジュールとして実施することができる。このコンピュータ可読媒体は、機械可読記憶デバイス、機械可読記憶基板、メモリデバイス、機械可読伝播信号をもたらす物質の組成物、またはこれらの１または複数の組み合わせであってもよい。「データ処理装置」という用語は、例えば、プログラマブルプロセッサ、コンピュータ、または複数のプロセッサ、若しくはコンピュータを含む、データを処理するためのすべての装置、デバイス、および機械を含む。この装置は、ハードウェアの他に、当該コンピュータプログラムの実行環境を作るコード、例えば、プロセッサファームウェア、プロトコルスタック、データベース管理システム、オペレーティングシステム、またはこれらの１つ以上の組み合わせを構成するコードを含むことができる。伝播信号は、人工的に生成した信号、例えば、機械で生成した電気、光、または電磁信号であり、適切な受信装置に送信するための情報を符号化するために生成される。
【0346】
コンピュータプログラム（プログラム、ソフトウェア、ソフトウェアアプリケーション、スクリプト、またはコードとも呼ばれる）は、コンパイルされた言語または解釈された言語を含む任意の形式のプログラミング言語で記述することができ、また、それは、スタンドアロンプログラムとして、またはコンピューティング環境で使用するのに適したモジュール、コンポーネント、サブルーチン、または他のユニットとして含む任意の形式で展開することができる。コンピュータプログラムは、必ずしもファイルシステムにおけるファイルに対応するとは限らない。プログラムは、他のプログラムまたはデータを保持するファイルの一部（例えば、マークアップ言語文書に格納された１つ以上のスクリプト）に記録されていてもよいし、当該プログラム専用の単一のファイルに記憶されていてもよいし、複数の調整ファイル（例えば、１または複数のモジュール、サブプログラム、またはコードの一部を格納するファイル）に記憶されていてもよい。１つのコンピュータプログラムを、１つのサイトに位置する１つのコンピュータ、または複数のサイトに分散され通信ネットワークによって相互接続される複数のコンピュータで実行させるように展開することも可能である。
【0347】
本明細書に記載された処理およびロジックフローは、入力データ上で動作し、出力を生成することによって機能を実行するための１つ以上のコンピュータプログラムを実行する１または複数のプログラマブルプロセッサによって行うことができる。処理およびロジックフローはまた、特定用途のロジック回路、例えば、ＦＰＧＡ（Ｆｉｅｌｄ Ｐｒｏｇｒａｍｍａｂｌｅ Ｇａｔｅ Ａｒｒａｙ）またはＡＳＩＣ（Ａｐｐｌｉｃａｔｉｏｎ Ｓｐｅｃｉｆｉｃ Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ）によって行うことができ、装置はまた、特別目的のロジック回路として実装することができる。
【0348】
コンピュータプログラムの実行に適したプロセッサは、例えば、汎用および専用マイクロプロセッサの両方、並びに任意の種類のデジタルコンピュータの任意の１または複数のプロセッサを含む。一般的に、プロセッサは、リードオンリーメモリまたはランダムアクセスメモリまたはその両方から命令およびデータを受信する。コンピュータの本質的な要素は、命令を実行するためのプロセッサと、命令およびデータを記憶するための１つ以上のメモリデバイスとである。一般的に、コンピュータは、データを記憶するための１つ以上の大容量記憶デバイス、例えば、磁気、光磁気ディスク、または光ディスクを含んでもよく、またはこれらの大容量記憶デバイスからデータを受信するか、またはこれらにデータを転送するように動作可能に結合されてもよい。しかしながら、コンピュータは、このようなデバイスを有する必要はない。コンピュータプログラム命令およびデータを記憶するのに適したコンピュータ可読媒体は、あらゆる形式の不揮発性メモリ、媒体、およびメモリデバイスを含み、例えば、ＥＰＲＯＭ、ＥＥＰＲＯＭ、フラッシュ記憶装置、磁気ディスク、例えば内部ハードディスクまたはリムーバブルディスク、光磁気ディスク、およびＣＤ－ＲＯＭおよびＤＶＤ－ＲＯＭディスク等の半導体記憶装置を含む。プロセッサおよびメモリは、特定用途のロジック回路によって補完されてもよく、または特定用途のロジック回路に組み込まれてもよい。
【0349】
本特許明細書は多くの詳細を含むが、これらは、任意の主題の範囲または特許請求の範囲を限定するものと解釈されるべきではなく、むしろ、特定の技術の特定の実施形態に特有であり得る特徴の説明と解釈されるべきである。本特許文献において別個の実施形態のコンテキストで説明されている特定の特徴は、１つの例において組み合わせて実装してもよい。逆に、１つの例のコンテキストで説明された様々な特徴は、複数の実施形態において別個にまたは任意の適切なサブコンビネーションで実装してもよい。さらに、特徴は、特定の組み合わせで作用するものとして上記に記載され、最初にそのように主張されていてもよいが、主張された組み合わせからの１または複数の特徴は、場合によっては、組み合わせから抜粋されることができ、主張された組み合わせは、サブコンビネーションまたはサブコンビネーションのバリエーションに向けられてもよい。
【0350】
同様に、動作は図面において特定の順番で示されているが、これは、所望の結果を達成するために、このような動作が示された特定の順番でまたは連続した順番で行われること、または示された全ての動作が行われることを必要とするものと理解されるべきではない。また、本特許明細書に記載されている例における様々なシステムの構成要素の分離は、全ての実施形態においてこのような分離を必要とするものと理解されるべきではない。
【0351】
いくつかの実装形態および例のみが記載されており、本特許明細書に記載され図示されているコンテンツに基づいて、他の実施形態、拡張および変形が可能である。
【図1】
【図2】
【図3】
【図4】
【図5A】
【図5B】
【図6】
【図7】
【図8】
【図9】
【図10】
【図11A】
【図11B】
【図12A】
【図12B】
【図13A】
【図13B】
【図13C】
【図14A】
【図14B】
【図15A】
【図15B】
【図15C】
【図15D】
【図16A】
【図16B】
【図16C】
【図16D】