▶ グァンドン オッポ モバイル テレコミュニケーションズ コーポレーション リミテッドの特許一覧
特開2024-129129ビデオ画像成分予測方法および装置、コンピュータ記憶媒体
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】公開特許公報(A)
(11)【公開番号】P2024129129
(43)【公開日】2024-09-26
(54)【発明の名称】ビデオ画像成分予測方法および装置、コンピュータ記憶媒体
(51)【国際特許分類】
H04N 19/105 20140101AFI20240918BHJP
H04N 19/157 20140101ALI20240918BHJP
H04N 19/176 20140101ALI20240918BHJP
H04N 19/186 20140101ALI20240918BHJP
【ＦＩ】
H04N19/105
H04N19/157
H04N19/176
H04N19/186
【審査請求】有
【請求項の数】15
【出願形態】ＯＬ
(21)【出願番号】P 2024108422
(22)【出願日】2024-07-04
(62)【分割の表示】P 2021517944の分割
【原出願日】2019-10-11
(31)【優先権主張番号】62/744,747
(32)【優先日】2018-10-12
(33)【優先権主張国・地域又は機関】US
(71)【出願人】
【識別番号】516227559
【氏名又は名称】オッポ広東移動通信有限公司
【氏名又は名称原語表記】ＧＵＡＮＧＤＯＮＧ ＯＰＰＯ ＭＯＢＩＬＥ ＴＥＬＥＣＯＭＭＵＮＩＣＡＴＩＯＮＳ ＣＯＲＰ．， ＬＴＤ．
【住所又は居所原語表記】Ｎｏ． １８ Ｈａｉｂｉｎ Ｒｏａｄ，Ｗｕｓｈａ， Ｃｈａｎｇ’ａｎ，Ｄｏｎｇｇｕａｎ， Ｇｕａｎｇｄｏｎｇ ５２３８６０ Ｃｈｉｎａ
(74)【代理人】
【識別番号】100120031
【弁理士】
【氏名又は名称】宮嶋 学
(74)【代理人】
【識別番号】100107582
【弁理士】
【氏名又は名称】関根 毅
(74)【代理人】
【識別番号】100152205
【弁理士】
【氏名又は名称】吉田 昌司
(74)【代理人】
【識別番号】100137523
【弁理士】
【氏名又は名称】出口 智也
(72)【発明者】
【氏名】フオ、チュンイェン
(72)【発明者】
【氏名】ワン、シューアイ
(57)【要約】 （修正有）
【課題】ビデオの符号化・復号化効率を向上させるビデオ画像成分予測方法及び装置を提供する。
【解決手段】ビデオ画像成分予測方法は、現在のブロックの第１画像成分の参照値セットから複数の第１画像成分参照値を決定することと、複数の第１画像成分参照値に対応する画素点のサンプル値に対して第１フィルタリング処理をそれぞれ実行して取得された複数のフィルタリング後の第１画像参照サンプル値に対応する予測待ち画像成分参照値を決定することと、複数のフィルタリング後の第１画像参照サンプル値および予測待ち画像成分参照値に基づいて、成分線形モデルのパラメータを決定することと、成分線形モデルに基づいて、現在のブロックの第１画像成分の再構成値に対してマッピング処理を実行して、マッピング値を取得することと、マッピング値に基づいて、現在のブロックの予測待ち画像成分の予測値を決定することと、を含む。
【選択図】図４
【解決手段】ビデオ画像成分予測方法は、現在のブロックの第１画像成分の参照値セットから複数の第１画像成分参照値を決定することと、複数の第１画像成分参照値に対応する画素点のサンプル値に対して第１フィルタリング処理をそれぞれ実行して取得された複数のフィルタリング後の第１画像参照サンプル値に対応する予測待ち画像成分参照値を決定することと、複数のフィルタリング後の第１画像参照サンプル値および予測待ち画像成分参照値に基づいて、成分線形モデルのパラメータを決定することと、成分線形モデルに基づいて、現在のブロックの第１画像成分の再構成値に対してマッピング処理を実行して、マッピング値を取得することと、マッピング値に基づいて、現在のブロックの予測待ち画像成分の予測値を決定することと、を含む。
【選択図】図４
【特許請求の範囲】
【請求項1】
画像成分予測方法であって、復号化器に適用され、
現在のブロックの第１画像成分の参照サンプルセットを決定することと、
前記第１画像成分の参照サンプルセットから、複数の第１画像成分参照サンプルを決定することであって、前記複数の第１画像成分参照サンプルは４つのプリセットされたサンプル位置に対応する、ことと、
前記複数の第１画像成分参照サンプルに対して第１フィルタリング処理をそれぞれ実行して、複数のフィルタリング後の第１画像参照サンプルを得ることと、
前記複数のフィルタリング後の第１画像参照サンプルに対応する予測待ち画像成分参照サンプルを決定することであって、前記予測待ち画像成分は、前記第１画像成分と異なる画像成分である、ことと、
前記複数のフィルタリング後の第１画像参照サンプルおよび前記予測待ち画像成分参照サンプルに基づいて、成分線形モデルのパラメータを決定することであって、前記成分線形モデルは、前記第１画像成分のサンプルを前記予測待ち画像成分のサンプルにマッピングする線形マッピング関係を表す、ことと、
前記成分線形モデルに基づいて、前記現在のブロックの前記第１画像成分の再構成サンプルに対してマッピング処理を実行して、マッピングサンプルを取得することと、
前記マッピングサンプルに基づいて、前記現在のブロックの前記予測待ち画像成分の予測サンプルを決定することと、を含む、
画像成分予測方法。
現在のブロックの第１画像成分の参照サンプルセットを決定することと、
前記第１画像成分の参照サンプルセットから、複数の第１画像成分参照サンプルを決定することであって、前記複数の第１画像成分参照サンプルは４つのプリセットされたサンプル位置に対応する、ことと、
前記複数の第１画像成分参照サンプルに対して第１フィルタリング処理をそれぞれ実行して、複数のフィルタリング後の第１画像参照サンプルを得ることと、
前記複数のフィルタリング後の第１画像参照サンプルに対応する予測待ち画像成分参照サンプルを決定することであって、前記予測待ち画像成分は、前記第１画像成分と異なる画像成分である、ことと、
前記複数のフィルタリング後の第１画像参照サンプルおよび前記予測待ち画像成分参照サンプルに基づいて、成分線形モデルのパラメータを決定することであって、前記成分線形モデルは、前記第１画像成分のサンプルを前記予測待ち画像成分のサンプルにマッピングする線形マッピング関係を表す、ことと、
前記成分線形モデルに基づいて、前記現在のブロックの前記第１画像成分の再構成サンプルに対してマッピング処理を実行して、マッピングサンプルを取得することと、
前記マッピングサンプルに基づいて、前記現在のブロックの前記予測待ち画像成分の予測サンプルを決定することと、を含む、
画像成分予測方法。
【請求項2】
現在のブロックの第１画像成分の参照サンプルセットを決定することは、
前記現在のブロックの隣接サンプルを前記第１画像成分の参照サンプルセットとして決定することを含む、
請求項１に記載の画像成分予測方法。
前記現在のブロックの隣接サンプルを前記第１画像成分の参照サンプルセットとして決定することを含む、
請求項１に記載の画像成分予測方法。
【請求項3】
前記現在のブロックの前記隣接サンプルは、前記現在のブロックの上側の１つ又は複数の隣接行におけるサンプル、前記現在のブロックの左側の１つ又は複数の隣接列におけるサンプルのうちの少なくとも１つを含む、
請求項２に記載の画像成分予測方法。
請求項２に記載の画像成分予測方法。
【請求項4】
前記第１画像成分の参照サンプルセットから、複数の第１画像成分参照サンプルを決定することは、
プリセットされた位置に基づいて、前記現在のブロックの上側の１つ又は複数の隣接行におけるサンプルと、前記現在のブロックの左側の１つの又は複数の隣接列におけるサンプルとから、参照サンプルを決定することであって、前記プリセットされた位置の数が４つである、ことと、
決定された参照サンプルに基づいて、前記複数の第１画像成分参照サンプルを決定することと、を含む、
請求項３に記載の画像成分予測方法。
プリセットされた位置に基づいて、前記現在のブロックの上側の１つ又は複数の隣接行におけるサンプルと、前記現在のブロックの左側の１つの又は複数の隣接列におけるサンプルとから、参照サンプルを決定することであって、前記プリセットされた位置の数が４つである、ことと、
決定された参照サンプルに基づいて、前記複数の第１画像成分参照サンプルを決定することと、を含む、
請求項３に記載の画像成分予測方法。
【請求項5】
前記複数のフィルタリング後の第１画像参照サンプルおよび前記予測待ち画像成分参照サンプルに基づいて、成分線形モデルのパラメータを決定することは、
前記複数のフィルタリング後の第１画像参照サンプルに基づいて、フィルタリング後の最大の第１画像成分参照サンプルとフィルタリング後の最小の第１画像成分参照サンプルとを決定することと、
前記フィルタリング後の最大の第１画像成分参照サンプルに対応する最大の予測待ち画像成分参照サンプル、および前記フィルタリング後の最小の第１画像成分参照サンプルに対応する最小の予測待ち画像成分参照サンプルを決定することと、
前記フィルタリング後の最大の第１画像成分参照サンプル、前記フィルタリング後の最小の第１画像成分参照サンプル、前記最大の予測待ち画像成分参照サンプル、及び前記最小の予測待ち画像成分参照サンプルに基づいて、前記成分線形モデルのパラメータを決定することと、を含む、
請求項１に記載の画像成分予測方法。
前記複数のフィルタリング後の第１画像参照サンプルに基づいて、フィルタリング後の最大の第１画像成分参照サンプルとフィルタリング後の最小の第１画像成分参照サンプルとを決定することと、
前記フィルタリング後の最大の第１画像成分参照サンプルに対応する最大の予測待ち画像成分参照サンプル、および前記フィルタリング後の最小の第１画像成分参照サンプルに対応する最小の予測待ち画像成分参照サンプルを決定することと、
前記フィルタリング後の最大の第１画像成分参照サンプル、前記フィルタリング後の最小の第１画像成分参照サンプル、前記最大の予測待ち画像成分参照サンプル、及び前記最小の予測待ち画像成分参照サンプルに基づいて、前記成分線形モデルのパラメータを決定することと、を含む、
請求項１に記載の画像成分予測方法。
【請求項6】
前記成分線形モデルに基づいて、前記現在のブロックの前記第１画像成分の再構成サンプルに対してマッピング処理を実行して、マッピングサンプルを取得することは、
前記第１画像成分の再構成サンプルに対して第２フィルタリング処理を実行して、前記第１画像成分の再構成サンプルの第２フィルタサンプルを取得することと、
前記成分線形モデルに基づいて、前記第２フィルタサンプルに対してマッピング処理を実行して、前記マッピングサンプルを決定することと、を含む、
請求項１に記載の画像成分予測方法。
前記第１画像成分の再構成サンプルに対して第２フィルタリング処理を実行して、前記第１画像成分の再構成サンプルの第２フィルタサンプルを取得することと、
前記成分線形モデルに基づいて、前記第２フィルタサンプルに対してマッピング処理を実行して、前記マッピングサンプルを決定することと、を含む、
請求項１に記載の画像成分予測方法。
【請求項7】
画像成分予測方法であって、符号化器に適用され、
現在のブロックの第１画像成分の参照サンプルセットを決定することと、
前記第１画像成分の参照サンプルセットから、複数の第１画像成分参照サンプルを決定することであって、前記複数の第１画像成分参照サンプルは４つのプリセットされたサンプル位置に対応する、ことと、
前記複数の第１画像成分参照サンプルに対して第１フィルタリング処理をそれぞれ実行して、複数のフィルタリング後の第１画像参照サンプルを得ることと、
前記複数のフィルタリング後の第１画像参照サンプルに対応する予測待ち画像成分参照サンプルを決定することであって、前記予測待ち画像成分は、前記第１画像成分と異なる画像成分である、ことと、
前記複数のフィルタリング後の第１画像参照サンプルおよび前記予測待ち画像成分参照サンプルに基づいて、成分線形モデルのパラメータを決定することであって、前記成分線形モデルは、前記第１画像成分のサンプルを前記予測待ち画像成分のサンプルにマッピングする線形マッピング関係を表す、ことと、
前記成分線形モデルに基づいて、前記現在のブロックの前記第１画像成分の再構成サンプルに対してマッピング処理を実行して、マッピングサンプルを取得することと、
前記マッピングサンプルに基づいて、前記現在のブロックの前記予測待ち画像成分の予測サンプルを決定することと、を含む、
画像成分予測方法。
現在のブロックの第１画像成分の参照サンプルセットを決定することと、
前記第１画像成分の参照サンプルセットから、複数の第１画像成分参照サンプルを決定することであって、前記複数の第１画像成分参照サンプルは４つのプリセットされたサンプル位置に対応する、ことと、
前記複数の第１画像成分参照サンプルに対して第１フィルタリング処理をそれぞれ実行して、複数のフィルタリング後の第１画像参照サンプルを得ることと、
前記複数のフィルタリング後の第１画像参照サンプルに対応する予測待ち画像成分参照サンプルを決定することであって、前記予測待ち画像成分は、前記第１画像成分と異なる画像成分である、ことと、
前記複数のフィルタリング後の第１画像参照サンプルおよび前記予測待ち画像成分参照サンプルに基づいて、成分線形モデルのパラメータを決定することであって、前記成分線形モデルは、前記第１画像成分のサンプルを前記予測待ち画像成分のサンプルにマッピングする線形マッピング関係を表す、ことと、
前記成分線形モデルに基づいて、前記現在のブロックの前記第１画像成分の再構成サンプルに対してマッピング処理を実行して、マッピングサンプルを取得することと、
前記マッピングサンプルに基づいて、前記現在のブロックの前記予測待ち画像成分の予測サンプルを決定することと、を含む、
画像成分予測方法。
【請求項8】
現在のブロックの第１画像成分の参照サンプルセットを決定することは、
前記現在のブロックの隣接サンプルを前記第１画像成分の参照サンプルセットとして決定することを含む、
請求項７に記載の画像成分予測方法。
前記現在のブロックの隣接サンプルを前記第１画像成分の参照サンプルセットとして決定することを含む、
請求項７に記載の画像成分予測方法。
【請求項9】
前記現在のブロックの前記隣接サンプルは、前記現在のブロックの上側の１つ又は複数の隣接行におけるサンプル、前記現在のブロックの左側の１つ又は複数の隣接列におけるサンプルのうちの少なくとも１つを含む、
請求項８に記載の画像成分予測方法。
請求項８に記載の画像成分予測方法。
【請求項10】
前記第１画像成分の参照サンプルセットから、複数の第１画像成分参照サンプルを決定することは、
プリセットされた位置に基づいて、前記現在のブロックの上側の１つ又は複数の隣接行におけるサンプルと、前記現在のブロックの左側の１つの又は複数の隣接列におけるサンプルとから、参照サンプルを決定することであって、前記プリセットされた位置の数が４つである、ことと、
決定された参照サンプルに基づいて、前記複数の第１画像成分参照サンプルを決定することと、を含む、
請求項９に記載の画像成分予測方法。
プリセットされた位置に基づいて、前記現在のブロックの上側の１つ又は複数の隣接行におけるサンプルと、前記現在のブロックの左側の１つの又は複数の隣接列におけるサンプルとから、参照サンプルを決定することであって、前記プリセットされた位置の数が４つである、ことと、
決定された参照サンプルに基づいて、前記複数の第１画像成分参照サンプルを決定することと、を含む、
請求項９に記載の画像成分予測方法。
【請求項11】
前記複数のフィルタリング後の第１画像参照サンプルおよび前記予測待ち画像成分参照サンプルに基づいて、成分線形モデルのパラメータを決定することは、
前記複数のフィルタリング後の第１画像参照サンプルに基づいて、フィルタリング後の最大の第１画像成分参照サンプルとフィルタリング後の最小の第１画像成分参照サンプルとを決定することと、
前記フィルタリング後の最大の第１画像成分参照サンプルに対応する最大の予測待ち画像成分参照サンプル、および前記フィルタリング後の最小の第１画像成分参照サンプルに対応する最小の予測待ち画像成分参照サンプルを決定することと、
前記フィルタリング後の最大の第１画像成分参照サンプル、前記フィルタリング後の最小の第１画像成分参照サンプル、前記最大の予測待ち画像成分参照サンプル、及び前記最小の予測待ち画像成分参照サンプルに基づいて、前記成分線形モデルのパラメータを決定することと、を含む、
請求項７に記載の画像成分予測方法。
前記複数のフィルタリング後の第１画像参照サンプルに基づいて、フィルタリング後の最大の第１画像成分参照サンプルとフィルタリング後の最小の第１画像成分参照サンプルとを決定することと、
前記フィルタリング後の最大の第１画像成分参照サンプルに対応する最大の予測待ち画像成分参照サンプル、および前記フィルタリング後の最小の第１画像成分参照サンプルに対応する最小の予測待ち画像成分参照サンプルを決定することと、
前記フィルタリング後の最大の第１画像成分参照サンプル、前記フィルタリング後の最小の第１画像成分参照サンプル、前記最大の予測待ち画像成分参照サンプル、及び前記最小の予測待ち画像成分参照サンプルに基づいて、前記成分線形モデルのパラメータを決定することと、を含む、
請求項７に記載の画像成分予測方法。
【請求項12】
前記成分線形モデルに基づいて、前記現在のブロックの前記第１画像成分の再構成サンプルに対してマッピング処理を実行して、マッピングサンプルを取得することは、
前記第１画像成分の再構成サンプルに対して第２フィルタリング処理を実行して、前記第１画像成分の再構成サンプルの第２フィルタサンプルを取得することと、
前記成分線形モデルに基づいて、前記第２フィルタサンプルに対してマッピング処理を実行して、前記マッピングサンプルを決定することと、を含む、
請求項７に記載の画像成分予測方法。
前記第１画像成分の再構成サンプルに対して第２フィルタリング処理を実行して、前記第１画像成分の再構成サンプルの第２フィルタサンプルを取得することと、
前記成分線形モデルに基づいて、前記第２フィルタサンプルに対してマッピング処理を実行して、前記マッピングサンプルを決定することと、を含む、
請求項７に記載の画像成分予測方法。
【請求項13】
復号化装置であって、
実行可能なビデオ成分予測命令を記憶するように構成されるメモリと、
前記メモリに記憶された実行可能なビデオ成分予測命令を実行するときに、請求項１ないし６のいずれか一項に記載の画像成分予測方法を実現するように構成されるプロセッサと、を備える、復号化装置。
実行可能なビデオ成分予測命令を記憶するように構成されるメモリと、
前記メモリに記憶された実行可能なビデオ成分予測命令を実行するときに、請求項１ないし６のいずれか一項に記載の画像成分予測方法を実現するように構成されるプロセッサと、を備える、復号化装置。
【請求項14】
符号化装置であって、
実行可能なビデオ成分予測命令を記憶するように構成されるメモリと、
前記メモリに記憶された実行可能なビデオ成分予測命令を実行するときに、請求項７ないし１２のいずれか一項に記載の画像成分予測方法を実現するように構成されるプロセッサと、を備える、符号化装置。
実行可能なビデオ成分予測命令を記憶するように構成されるメモリと、
前記メモリに記憶された実行可能なビデオ成分予測命令を実行するときに、請求項７ないし１２のいずれか一項に記載の画像成分予測方法を実現するように構成されるプロセッサと、を備える、符号化装置。
【請求項15】
１つ又は複数のプロセッサによって実行される請求項７ないし１２のいずれか一項に記載の画像成分予測方法によって得られたビットストリームが記憶された不揮発性コンピュータ可読媒体。
【発明の詳細な説明】
【技術分野】
【0001】
本願の実施例は、ビデオ符号化・復号化の技術分野に関し、特に、ビデオ画像成分予測方法および装置、コンピュータ記憶媒体に関する。
【背景技術】
【0002】
人々からのビデオ表示品質に対する要求の増加に伴い、高解像度および超高解像度ビデオなどの新しいビデオアプリケーションが出現した。このような高解像度、高品質のビデオ鑑賞アプリケーションの拡張が進むにつれて、ビデオ圧縮技術に対する要件も高まっている。Ｈ．２６５／高效率ビデオコーディング（ＨＥＶＣ：Ｈｉｇｈ Ｅｆｆｉｃｉｅｎｃｙ Ｖｉｄｅｏ Ｃｏｄｉｎｇ）は、現在の最新の国際ビデオ圧縮規格であり、前世代のビデオコーディング規格Ｈ．２６４／アドバンスドビデオコーディング（ＡＶＣ：Ａｄｖａｎｃｅｄ Ｖｉｄｅｏ Ｃｏｄｉｎｇ）より、約５０％向上しているが、それでもビデオアプリケーション急速な開発ニーズを満たすことはできなく、特に、超高精細ビデオや仮想現実（ＶＲ：Ｖｉｒｔｕａｌ Ｒｅａｌｉｔｙ）などの新しいビデオアプリケーションを満たすことはできない。
【0003】
多機能ビデオコーディング（ＶＶＣ：Ｖｅｒｓａｔｉｌｅ Ｖｉｄｅｏ Ｃｏｄｉｎｇ）の次世代ビデオ符号化規格で採用されているコーディングツールでは、線形モデルベースの予測方法が採用されており、色差成分の色差予測値は、線形モデルを介して再構成された輝度成分によって取得することができる。
【0004】
しかしながら、線形モデルを使用してビデオ成分を予測する時に、輝度隣接領域の画素値を使用してダウンサンプリング処理を実行した後、線形モデルを構築するために、ダウンサンプリングによって得られた参照サンプル点から最大値および最小値を見つける必要があり、隣接する参照ブロックの数が多いため、上記のような方式でモデルを構築する複雑さが高く、その結果、色差予測の効率が低くなり、それによってビデオの符号化・復号化効率に影響を与える。
【発明の概要】
【0005】
本願の実施例は、ビデオ成分予測の複雑さを軽減させ、予測効率を向上させることにより、ビデオの符号化・復号化効率を向上させることができる、ビデオ画像成分予測方法および装置、コンピュータ記憶媒体を提供する。
【0006】
本願の実施例の技術的解決策は以下のように実現することができる。
【0007】
本願の実施例はビデオ成分予測方法を提供し、前記方法は、
現在のブロックの第１画像成分の参照値セットを取得することと、
前記第１画像成分の参照値セットから複数の第１画像成分参照値を決定することと、
前記複数の第１画像成分参照値に対応する画素点のサンプル値に対して第１フィルタリング処理をそれぞれ実行して、複数のフィルタリング後の第１画像参照サンプル値を取得することと、
前記複数のフィルタリング後の第１画像参照サンプル値に対応する予測待ち画像成分参照値を決定することであって、前記予測待ち画像成分は、前記第１画像成分と異なる画像成分である、ことと、
前記複数のフィルタリング後の第１画像参照サンプル値および前記予測待ち画像成分参照値に基づいて、成分線形モデルのパラメータを決定することであって、前記成分線形モデルは、前記第１画像成分のサンプル値を前記予測待ち画像成分のサンプル値にマッピングする線形マッピング関係を表す、ことと、
前記成分線形モデルに基づいて、前記現在のブロックの前記第１画像成分の再構成値に対してマッピング処理を実行して、マッピング値を取得することと、
前記マッピング値に基づいて、前記現在のブロックの前記予測待ち画像成分の予測値を決定することと、を含む。
現在のブロックの第１画像成分の参照値セットを取得することと、
前記第１画像成分の参照値セットから複数の第１画像成分参照値を決定することと、
前記複数の第１画像成分参照値に対応する画素点のサンプル値に対して第１フィルタリング処理をそれぞれ実行して、複数のフィルタリング後の第１画像参照サンプル値を取得することと、
前記複数のフィルタリング後の第１画像参照サンプル値に対応する予測待ち画像成分参照値を決定することであって、前記予測待ち画像成分は、前記第１画像成分と異なる画像成分である、ことと、
前記複数のフィルタリング後の第１画像参照サンプル値および前記予測待ち画像成分参照値に基づいて、成分線形モデルのパラメータを決定することであって、前記成分線形モデルは、前記第１画像成分のサンプル値を前記予測待ち画像成分のサンプル値にマッピングする線形マッピング関係を表す、ことと、
前記成分線形モデルに基づいて、前記現在のブロックの前記第１画像成分の再構成値に対してマッピング処理を実行して、マッピング値を取得することと、
前記マッピング値に基づいて、前記現在のブロックの前記予測待ち画像成分の予測値を決定することと、を含む。
【0008】
本願の実施例はビデオ成分予測装置を提供し、前記装置は、
現在のブロックの第１画像成分の参照値セットを取得するように構成される取得部と、 前記第１画像成分の参照値セットから複数の第１画像成分参照値を決定するように構成される決定部と、
前記複数の第１画像成分参照値に対応する画素点のサンプル値に対して第１フィルタリング処理をそれぞれ実行して、複数のフィルタリング後の第１画像参照サンプル値を取得するように構成されるフィルタリング部と、
前記マッピング値に基づいて、前記現在のブロックの前記予測待ち画像成分の予測値を決定するように構成される予測部と、を備え、
前記決定部は、さらに、前記複数のフィルタリング後の第１画像参照サンプル値に対応する予測待ち画像成分参照値を決定し、前記予測待ち画像成分は、前記第１画像成分と異なる画像成分であり、前記複数のフィルタリング後の第１画像参照サンプル値および前記予測待ち画像成分参照値に基づいて、成分線形モデルのパラメータを決定するように構成され、前記成分線形モデルは、前記第１画像成分のサンプル値を前記予測待ち画像成分のサンプル値にマッピングする線形マッピング関係を表し、
前記フィルタリング部は、さらに、前記成分線形モデルに基づいて、前記現在のブロックの前記第１画像成分の再構成値に対してマッピング処理を実行して、マッピング値を取得するように構成される。
現在のブロックの第１画像成分の参照値セットを取得するように構成される取得部と、 前記第１画像成分の参照値セットから複数の第１画像成分参照値を決定するように構成される決定部と、
前記複数の第１画像成分参照値に対応する画素点のサンプル値に対して第１フィルタリング処理をそれぞれ実行して、複数のフィルタリング後の第１画像参照サンプル値を取得するように構成されるフィルタリング部と、
前記マッピング値に基づいて、前記現在のブロックの前記予測待ち画像成分の予測値を決定するように構成される予測部と、を備え、
前記決定部は、さらに、前記複数のフィルタリング後の第１画像参照サンプル値に対応する予測待ち画像成分参照値を決定し、前記予測待ち画像成分は、前記第１画像成分と異なる画像成分であり、前記複数のフィルタリング後の第１画像参照サンプル値および前記予測待ち画像成分参照値に基づいて、成分線形モデルのパラメータを決定するように構成され、前記成分線形モデルは、前記第１画像成分のサンプル値を前記予測待ち画像成分のサンプル値にマッピングする線形マッピング関係を表し、
前記フィルタリング部は、さらに、前記成分線形モデルに基づいて、前記現在のブロックの前記第１画像成分の再構成値に対してマッピング処理を実行して、マッピング値を取得するように構成される。
【0009】
本願の実施例はビデオ成分予測装置を提供し、前記装置は、
実行可能なビデオ成分予測命令を記憶するように構成されるメモリと、
前記メモリに記憶された実行可能なビデオ成分予測命令を実行するときに、本願の実施例によるビデオ成分予測方法を実現するように構成されるプロセッサと、を備える。
実行可能なビデオ成分予測命令を記憶するように構成されるメモリと、
前記メモリに記憶された実行可能なビデオ成分予測命令を実行するときに、本願の実施例によるビデオ成分予測方法を実現するように構成されるプロセッサと、を備える。
【0010】
本願の実施例は、実行可能なビデオ成分予測命令を含むコンピュータ可読記憶媒体を提供し、前記実行可能なビデオ成分予測命令は、プロセッサによって実行されるときに、本願の実施例によるビデオ成分予測方法を実現するように構成される。
【0011】
本願の実施例において、ビデオ画像成分予測方法を提供し、ビデオ画像成分予測装置が、まず、直接取得された現在のブロックに対応する第１画像成分の参照値セットに基づいて、複数の第１画像成分参照値の選択を実行した後、選択された複数の第１画像成分参照値の画素点位置に基づいてフィルタリング処理を実行して、複数のフィルタリング後の第１画像参照サンプル値を取得し、次に、複数のフィルタリング後の第１画像参照サンプル値に対応する予測待ち画像成分参照値を見つけて、成分線形モデル的パラメータを取得し、成分線形モデルのパラメータに基づいて、成分線形モデルを構築し、その後、構築された成分線形モデルを使用して、予測待ち画像成分の予測プロセスを実行する。成分線形モデルの構築プロセスでは、まず複数の第１画像成分参照値の選択を実行し、次に選択された複数の第１画像成分参照値に対応する位置に基づいてフィルタリング処理を実行して、成分線形モデルを構築することにより、現在のブロックに対応する画素点のフィルタリング処理の作業負荷が軽減され、すなわち、フィルタリング操作が軽減され、これにより、成分線形モデルの構築の複雑さが軽減され、ビデオ成分予測の複雑さがさらに軽減され、予測効率が向上し、ビデオの符号化・復号化効率が向上する。
【図面の簡単な説明】
【0012】
【図1】本願の実施例による現在のブロックと隣接参照画素点との間の関係を示す概略図である。
【図2】本願の実施例によるビデオ画像成分予測システムのアーキテクチャ図である。
【図3A】本願の実施例によるビデオ符号化システムの概略ブロック図である。
【図3B】本願の実施例によるビデオ復号化システムの概略ブロック図である。
【図4】本願の実施例におけるビデオ画像成分予測方法のフローチャート１である。
【図5】本願の実施例におけるビデオ画像成分予測方法のフローチャート２である。
【図6】本願の実施例におけるビデオ画像成分予測方法のフローチャート３である。
【図7】本願の実施例による、最大値および最小値に基づいて予測モデルを構築するための構造図である。
【発明を実施するための形態】
【0013】
本出願の目的、技術的解決策及びメリットをより明確にするために、下記において、図面を参照して、本出願をさらに詳しく説明する。下記で説明される実施例は、本出願を限定するためのものではなく、当業者の創造的労力を払わなくても得られる他のすべての実施例は、本出願の保護範囲に含まれる。
【0014】
特に明記されていない限り、本願で使用されるすべての技術用語および科学用語は、本願の当業者によって通常理解されるものと同じ意味を有する。本願で使用される用語は、本願の実施例を説明するためにのみ採用され、本願を限定することを意図するものではない。
【0015】
以下、まずフレーム内予測、ビデオ符号化・復号化などの概念について説明する。
【0016】
予測符号化・復号化の主な機能は、ビデオ符号化・復号化において、空間または時間における既存の再構成画像を使用して現在のブロックの予測値を生成し、オリジナル値と予測値との差分値のみを伝送することにより、伝送データ量を削減する目的を達成することである。
【0017】
フレーム内予測の主な機能は、現在のブロックと、現在のブロックに隣接する上部の１行および左側の１列の画素ユニットを使用して、当該現在のブロックの予測値を生成することである。図１に示されるように、現在のブロック１０１の周囲の復元された隣接画素（すなわち、現在のブロックに隣接する上部の行１０２の画素ユニットおよび左側の列１０３の画素ユニット）を使用して、現在のブロック１０１の各画素ユニットを予測する。
【0018】
本願の実施例では、ビデオ画像について、通常、３つの画像成分を使用して処理ブロックを表す。ここで、この３つの画像成分は、それぞれ、輝度成分、青色差成分、および赤色差成分である。具体的には、輝度成分は通常符号Ｙで表され、青色差成分は通常符号Ｃｂで表され、赤色差成分は通常符号Ｃｒで表される。
【0019】
現在、ビデオ画像の一般的なサンプリングフォーマットはＹＣｂＣｒフォーマットであり、ＹＣｂＣｒフォーマットは、以下のフォーマットを含む。
【0020】
４：４：４フォーマット：青色差成分または赤色差成分がダウンサンプリングされていないことを意味する。これは、各スキャンラインの４つの連続する画素点ごとに、輝度成分の４つのサンプル、青色差成分の４つのサンプル、および赤色差成分の４つのサンプルを抽出することを意味する。
【0021】
４：２：２フォーマット：輝度成分が青色差成分または赤色差成分に対して２：１で水平方向にサンプリングされ、垂直方向にダウンサンプリングが実行されないことを意味する。これは、各スキャンラインの４つの連続する画素点ごとに、輝度成分の４つのサンプル、青色差成分の２つのサンプル、および赤色差成分の２つのサンプルを抽出することを意味する。
【0022】
４：２：０フォーマット：輝度成分が青色差成分または赤色差成分に対して２：１で水平方向にサンプリングされ、２：１で垂直方向にダウンサンプリングされることを意味する。これは、水平スキャンラインおよび垂直スキャンラインの２つの連続する画素点ごとに、輝度成分の２つのサンプル、青色差成分の１つのサンプル、および赤色差成分の１つのサンプルを抽出することを意味する。
【0023】
ビデオ画像が４：２：０フォーマットのＹＣｂＣｒを採用するという条件下で、ビデオ画像の輝度成分が２Ｎ×２Ｎサイズの処理ブロックである場合、対応する青色差成分または赤色差成分は、Ｎ×Ｎサイズの処理ブロックであり、ここで、Ｎは処理ブロックの辺の長さである。本願の実施例では、４：２：０フォーマットを例として以下で説明するが、本願の実施例の技術的解決策は、他のサンプリングフォーマットにも適用可能である。
【0024】
上記の概念に基づき、本願の実施例は、フレーム内予測のためのビデオ画像成分予測方法を含むビデオ符号化・復号化システムのネットワークアーキテクチャを提供する。図２は、本願の実施例によるビデオ符号化・復号化のためのネットワークアーキテクチャの構成構造図である。図２に示されるように、当該ネットワークアーキテクチャは、１つまたは複数の電子機器１１から１Ｎおよび通信ネットワーク０１を含み、ここで、電子機器１１から１Ｎは、通信ネットワーク０１を介してビデオインタラクションを実行し得る。実装プロセスにおいて、電子機器は、ビデオ符号化・復号化機能を備えた様々なタイプの機器であり得る。例えば、前記電子機器は、携帯電話、タブレットコンピュータ、パーソナルコンピュータ、携帯情報端末、ナビゲーター、デジタル電話、ビデオ電話、テレビ、感知機器、サーバなどを含み得るが、本願の実施例はこれらに限定されない。ここで、本願の実施例におけるフレーム内予測装置は、上記の電子機器であり得る。
【0025】
ここで、本願の実施例における電子機器は、ビデオ符号化・復号化機能を備え、通常、ビデオ復号化器およびビデオ復号化器を含む。
【0026】
例示的に、図３Ａを参照すると、ビデオ符号化器２１の構成構造は、変換と量子化ユニット２１１、フレーム内推定ユニット２１２、フレーム内予測ユニット２１３、動き補償ユニット２１４、動き推定ユニット２１５、逆変換と逆量子化ユニット２１６、フィルタ制御分析ユニット２１７、フィルタリングユニット２１８、エントロピー符号化ユニット２１９、および復号化された画像キャッシュユニット２１０などを含む。ここで、フィルタリングユニット２１８は、デブロッキングフィルタリングとサンプル適応オフセット（ＳＡＯ：Ｓａｍｐｌｅ Ａｄａｐｔｉｖｅ ０ｆｆｓｅｔ）フィルタリングを実現することができ、エントロピー符号化ユニット２１９は、ヘッダ情報符号化とコンテキストベースの適応バイナリ算術符号化（ＣＡＢＡＣ：Ｃｏｎｔｅｘｔ－ｂａｓｅｄ Ａｄａｐｔｉｖｅ Ｂｉｎａｒｙ Ａｒｉｔｈｍａｔｉｃ Ｃｏｄｉｎｇ）を実現することができる。
入力されたソースビデオデータに対して、符号化ツリーユニット（ＣＴＵ：Ｃｏｄｉｎｇ Ｔｒｅｅ Ｕｎｉｔ）の分割により、１つの現在のビデオフレームの符号化待ちブロックを取得することができ、その後、当該符号化待ちブロックに対してフレーム内予測またはフレーム間予測を実行して得られた残差情報は、変換と量子化ユニット２１１によって変換される（残差情報を画素ドメインから変換ドメインに変換し、得られた変換係数を量子化し、それによってビットレートをさらに低減することを含む）。フレーム内推定ユニット２１２およびフレーム内予測ユニット２１３は、当該符号化待ちブロックに対してフレーム内予測を実行するように構成され、例えば、当該符号化待ちブロックを符号化するために使用されるフレーム内予測モードを決定する。動き補償ユニット２１４および動き推定ユニット２１５は、１つまたは複数の参照フレーム内の１つまたは複数のブロックに対して符号化待ちブロックのフレーム間予測符号化を実行し、時間予測情報を提供するように構成される。ここで、動き推定ユニット２１５は、動きベクトルを推定するように構成され、当該符号化待ちブロックの動きは、動きベクトルに基づいて推定することができ、次いで、動き補償ユニット２１４は、動きベクトルに基づいて動き補償を実行する。フレーム内予測モードを決定した後、フレーム内予測ユニット２１３は、さらに、選択されたフレーム内予測データをエントロピー符号化ユニット２１９に提供するように構成され、動き推定ユニット２１５は、計算によって決定された動きベクトルデータもエントロピー符号化ユニット２１９に送信する。さらに、逆変換と逆量子化ユニット２１６は、当該符号化待ちブロックを再構築するように構成され、すなわち、画素ドメインで残差ブロックを再構築し、当該再構築された残差ブロックのブロッキング効果によるアーチファクトは、フィルタ制御分析ユニット２１７およびフィルタリングユニット２１８によって除去され、その後、当該再構築された残差ブロックを復号化された画像キャッシュユニット２１０のフレーム内の１つの予測ブロックに追加して、再構築されたビデオ符号化ブロックを生成する。エントロピー符号化ユニット２１９は、様々な符号化パラメータおよび量子化された変換係数を符号化するように構成され、ＣＡＢＡＣに基づく符号化アルゴリズムでは、コンテキスト内容は、隣接符号化ブロックに基づくことができ、決定されたフレーム内予測モードを指示する情報を符号化して、当該ビデオデータのビットストリームを出力するために使用できる。復号化された画像キャッシュユニット２１０は、予測参照に使用される、再構築されたビデオ符号化ブロックを格納するように構成される。ビデオの符号化に伴い、新しい再構築されたビデオ符号化ブロックが継続的に生成され、これらの再構築されたビデオ符号化ブロックは、復号化された画像キャッシュユニット２１０に記憶される。
入力されたソースビデオデータに対して、符号化ツリーユニット（ＣＴＵ：Ｃｏｄｉｎｇ Ｔｒｅｅ Ｕｎｉｔ）の分割により、１つの現在のビデオフレームの符号化待ちブロックを取得することができ、その後、当該符号化待ちブロックに対してフレーム内予測またはフレーム間予測を実行して得られた残差情報は、変換と量子化ユニット２１１によって変換される（残差情報を画素ドメインから変換ドメインに変換し、得られた変換係数を量子化し、それによってビットレートをさらに低減することを含む）。フレーム内推定ユニット２１２およびフレーム内予測ユニット２１３は、当該符号化待ちブロックに対してフレーム内予測を実行するように構成され、例えば、当該符号化待ちブロックを符号化するために使用されるフレーム内予測モードを決定する。動き補償ユニット２１４および動き推定ユニット２１５は、１つまたは複数の参照フレーム内の１つまたは複数のブロックに対して符号化待ちブロックのフレーム間予測符号化を実行し、時間予測情報を提供するように構成される。ここで、動き推定ユニット２１５は、動きベクトルを推定するように構成され、当該符号化待ちブロックの動きは、動きベクトルに基づいて推定することができ、次いで、動き補償ユニット２１４は、動きベクトルに基づいて動き補償を実行する。フレーム内予測モードを決定した後、フレーム内予測ユニット２１３は、さらに、選択されたフレーム内予測データをエントロピー符号化ユニット２１９に提供するように構成され、動き推定ユニット２１５は、計算によって決定された動きベクトルデータもエントロピー符号化ユニット２１９に送信する。さらに、逆変換と逆量子化ユニット２１６は、当該符号化待ちブロックを再構築するように構成され、すなわち、画素ドメインで残差ブロックを再構築し、当該再構築された残差ブロックのブロッキング効果によるアーチファクトは、フィルタ制御分析ユニット２１７およびフィルタリングユニット２１８によって除去され、その後、当該再構築された残差ブロックを復号化された画像キャッシュユニット２１０のフレーム内の１つの予測ブロックに追加して、再構築されたビデオ符号化ブロックを生成する。エントロピー符号化ユニット２１９は、様々な符号化パラメータおよび量子化された変換係数を符号化するように構成され、ＣＡＢＡＣに基づく符号化アルゴリズムでは、コンテキスト内容は、隣接符号化ブロックに基づくことができ、決定されたフレーム内予測モードを指示する情報を符号化して、当該ビデオデータのビットストリームを出力するために使用できる。復号化された画像キャッシュユニット２１０は、予測参照に使用される、再構築されたビデオ符号化ブロックを格納するように構成される。ビデオの符号化に伴い、新しい再構築されたビデオ符号化ブロックが継続的に生成され、これらの再構築されたビデオ符号化ブロックは、復号化された画像キャッシュユニット２１０に記憶される。
【0027】
図３Ｂに示されるように、ビデオ符号化器２１に対応するビデオ復号化器２２の構成構造は、エントロピー復号化ユニット２２１、逆変換と逆量子化ユニット２２２、フレーム内予測ユニット２２３、動き補償ユニット２２４、フィルタリングユニット２２５、および復号化された画像キャッシュユニット２２６などを含む。ここで、エントロピー復号化ユニット２２１は、ヘッダ情報復号化とＣＡＢＡＣ復号化を実現することができ、フィルタリングユニット２２５は、デブロッキングフィルタリングとＳＡＯフィルタリングを実現することができる。入力されたビデオ信号に対して、図３Ａに示される符号化処理を実行した後、当該ビデオ信号のビットストリームを出力する。当該ビットストリームをビデオ復号化器２２に入力し、最初にエントロピー復号化ユニット２２１によって処理されて、復号化された変換係数を取得する。当該変換係数は、逆変換と逆量子化ユニット２２２によって処理されることによって、画素ドメインで残差ブロックを生成する。フレーム内予測ユニット２２３は、決定されたフレーム内予測モード、および現在のフレームまたは画像からの以前の復号化されたブロックのデータに基づいて、現在の復号化ブロックの予測データを生成するように構成されることができる。動き補償ユニット２２４は、動きベクトルおよび他の関連する構文要素を分析して、現在の復号化ブロックの予測情報を決定し、当該予測情報を使用して、現在復号化されている現在の復号化ブロックの予測ブロックを生成する。逆変換と逆量子化ユニット２２２からの残差ブロックと、フレーム内予測ユニット２２３または動き補償ユニット２２４によって生成された対応する予測ブロックとを合計して、復号化されたビデオブロックを生成する。当該復号化されたビデオブロックのブロッキング効果によるアーチファクトは、フィルタリングユニット２２５によって除去され、これにより、品質を改善する。その後、復号化されたビデオブロックを復号化された画像キャッシュユニット２２６に記憶し、復号化された画像キャッシュユニット２２６は、後続のフレーム内予測または動き補償のために使用される参照画像を記憶し、ビデオ信号の出力表示にも使用される。
【0028】
これに基づき、以下、添付の図面及び実施例を参照して、本願の技術的解決策をさらに詳細に説明する。本願の実施例で提供されるビデオ画像成分予測方法は、予測符号化・復号化のためのフレーム内予測プロセスにおける予測を指し、つまり、ビデオ符号化器２１に提供されてもよいし、ビデオ復号化器２２に適用されてもよいが、本願の実施例はこれに限定されない。
【0029】
次世代ビデオ符号化規格Ｈ．２６６では、符号化・復号化性能および符号化・復号化効率をさらに向上させるために、成分間予測（ＣＣＰ：Ｃｒｏｓｓ－ｃｏｍｐｏｎｅｎｔ Ｐｒｅｄｉｃｔｉｏｎ）が拡張および改善され、成分間線形予測（ＣＣＬＭ：Ｃｒｏｓｓ－ｃｏｍｐｏｎｅｎｔ Ｌｉｎｅａｒ Ｍｏｄｅｌ Ｐｒｅｄｉｃｔｉｏｎ）が提案されている。Ｈ．２６６では、ＣＣＬＭは、輝度成分から青色差成分へ、輝度成分から赤色差成分へ、および青色差成分と赤色差成分との間の予測を実現する。以下、従来のＣＣＬＭを背景としたビデオ成分予測方法について説明する。
【0030】
本願の実施例は、ビデオ画像成分予測方法を提供し、当該方法はビデオ画像成分予測装置に適用され、当該方法によって実現される機能は、ビデオ画像成分予測装置内のプロセッサによりプログラムコードを呼び出すことによって実現できる。もちろん、プログラムコードはコンピュータ記憶媒体に記憶されることができ、明らかに、当該ビデオ画像成分予測装置は、少なくともプロセッサおよび記憶媒体を含む。
【0031】
【0032】
ステップＳ１０１において、現在のブロックの第１画像成分参照値を取得する。
【0033】
ステップＳ１０２において、第１画像成分の参照値セットから複数の第１画像成分参照値を決定する。
【0034】
ステップＳ１０３において、複数の第１画像成分参照値に対応する画素点のサンプル値に対して第１フィルタリング処理をそれぞれ実行して、複数のフィルタリング後の第１画像参照サンプル値を取得する。
【0035】
ステップＳ１０４において、複数のフィルタリング後の第１画像参照サンプル値に対応する予測待ち画像成分参照値を決定し、ここで、予測待ち画像成分は、第１画像成分と異なる画像成分である。
【0036】
ステップＳ１０５において、複数のフィルタリング後の第１画像参照サンプル値および予測待ち画像成分参照値に基づいて、成分線形モデルのパラメータを決定し、ここで、成分線形モデルは、第１画像成分のサンプル値を予測待ち画像成分のサンプル値にマッピングする線形マッピング関係を表す。
【0037】
ステップＳ１０６において、成分線形モデルに基づいて、現在のブロックの第１画像成分の再構成値に対してマッピング処理を実行して、マッピング値を取得する。
【0038】
ステップＳ１０７において、マッピング値に基づいて、現在のブロックの予測待ち画像成分の予測値を決定する。
【0039】
ステップＳ１０１において、本願の実施例では、現在のブロックは、画像成分予測待ちの符号化ブロックまたは復号化ブロックである。本願の実施例では、ビデオ画像成分予測装置は、現在のブロックの第１画像成分参照値を取得し、ここで、第１画像成分的参照値セットは、１つまたは複数の第１画像成分参照値を含む。現在のブロックの参照値は、参照ブロックから取得でき、参照ブロックは、現在のブロックの隣接ブロックであってもよいし、現在のブロックの非隣接ブロックであってもよいが、本願の実施例はこれに限定されない。
【0040】
本願のいくつかの実施例では、ビデオ画像成分予測装置は、現在のブロックではない位置にある１つまたは複数の参照画素点を決定し、１つまたは複数の参照画素点を、１つまたは複数の第１画像成分参照値として決定する。
【0041】
本願の実施例では、現在のブロックに対応する隣接処理ブロックは、現在のブロックの１つまたは複数の辺に隣接する処理ブロックであり、１つまたは複数の隣接する辺は、現在のブロックに隣接する上側辺を指し得、または現在のブロックに隣接する左側辺を指し得、または現在のブロックに隣接する上側辺および左側辺を指し得るが、本願の実施例はこれに限定されないことに留意されたい。
【0042】
本願のいくつかの実施例では、ビデオ画像成分予測装置は、現在のブロックに隣接する画素点を１つまたは複数の参照画素点として決定する。
【0043】
本願の実施例では、１つまたは複数の参照画素点は、隣接する画素点であってもよいし、非隣接する画素点であってもよいが、本願の実施例はこれに限定されないことに留意されたい。本願では、隣接する画素点を例として説明する。
【0044】
ここで、現在のブロックの隣接処理ブロックに対応する１つまたは複数の辺で隣接する画素点を、現在のブロックに対応する１つまたは複数の隣接参照画素点として使用し、各隣接参照画素点は、３つの画像成分参照値（すなわち、第１画像成分参照値、第２画像成分参照値、および第３画像成分参照値）に対応する。したがって、ビデオ画像成分予測装置は、現在のブロックに対応する１つまたは複数の隣接参照画素点の各隣接参照画素点における第１画像成分の参照値を、第１画像成分の参照値セットとして取得することができ、このようにして、１つまたは複数の第１画像成分参照値を取得する。つまり、１つまたは複数の第１画像成分参照値は、現在のブロックに対応する隣接参照ブロック内の１つまたは複数の隣接画素点の対応する第１画像成分の参照値を表す。ここで、本願の実施例における第１画像成分は、他の画像成分を予測するために使用される。
【0045】
本願のいくつかの実施例では、第１画像成分と予測待ち画像成分との組み合わせは、以下のうちの少なくとも１つを含む。
【0046】
第１画像成分は輝度成分であり、予測待ち画像成分は第１または第２色差成分であるか、または、
第１画像成分は第１色差成分であり、予測待ち画像成分は輝度成分または第２色差成分であるか、または、
第１画像成分は第２色差成分であり、予測待ち画像成分は輝度成分または第１色差成分であるか、または、
第１画像成分は第１色成分であり、予測待ち画像成分は第２色成分または第３色成分であるか、または、
第１画像成分は第２色成分であり、予測待ち画像成分は第１色成分または第３色成分であるか、または、
第１画像成分は第３色成分であり、予測待ち画像成分は第２色成分または第１色成分である。
第１画像成分は第１色差成分であり、予測待ち画像成分は輝度成分または第２色差成分であるか、または、
第１画像成分は第２色差成分であり、予測待ち画像成分は輝度成分または第１色差成分であるか、または、
第１画像成分は第１色成分であり、予測待ち画像成分は第２色成分または第３色成分であるか、または、
第１画像成分は第２色成分であり、予測待ち画像成分は第１色成分または第３色成分であるか、または、
第１画像成分は第３色成分であり、予測待ち画像成分は第２色成分または第１色成分である。
【0047】
本願のいくつかの実施例では、第１色成分は赤成分であり、第２色成分は緑成分であり、第３色成分は青成分である。
【0048】
ここで、第１色差成分は青色差成分であり得、第２色差成分は赤色差成分であり得、または、第１色差成分は赤色差成分であり得、第２色差成分は青色差成分であり得る。ここで、第１色差成分および第２色差成分は、それぞれ、青色差成分および赤色差成分を表すだけでよい。
【0049】
第１色差成分は青色差成分であり得、第２色差成分が赤色差成分であり得ることを例として説明する。第１画像成分が輝度成分であり、予測待ち画像成分が第１色差成分である場合、ビデオ画像成分予測装置は、輝度成分を使用して青色差成分を予測することができる。第１画像成分が輝度成分であり、予測待ち画像成分が第２色差成分である場合、ビデオ画像成分予測装置は、輝度成分を使用して赤色差成分を予測することができる。第１画像成分が第１色差成分であり、予測待ち画像成分が第２色差成分である場合、ビデオ画像成分予測装置は、青色差成分を使用して赤色差成分を予測することができる。第１画像成分が第２色差成分であり、予測待ち画像成分が第１色差成分である場合、ビデオ画像成分予測装置は、赤色差成分を使用して青色差成分を予測することができる。
【0050】
ステップＳ１０２において、ビデオ画像成分予測装置は、１つまたは複数の第１画像成分参照値から、複数の第１画像成分参照値を決定することができる。
【0051】
本願のいくつかの実施例では、ビデオ画像成分予測装置は、第１画像成分の参照値セットに含まれる１つまたは複数の第１画像成分参照値を比較して、最大の第１画像成分参照値と最小の第１画像成分参照値を決定することができる。
【0052】
本願のいくつかの実施例では、ビデオ画像成分予測装置は、１つまたは複数の第１画像成分参照値から、複数の第１画像成分参照値のうちの最大値および最小値を決定することができ、１つまたは複数の第１画像成分参照値から、最大または最小の第１画像成分参照値を表す参照値を決定することができる。
【0053】
例えば、ビデオ画像成分予測装置は、第１画像成分の参照値セットから、最大の第１画像成分参照値と最小の第１画像成分参照値を決定する。
【0054】
本願の実施例では、ビデオ画像成分予測装置は、様々な方式で、最大の第１画像成分参照値と最小の第１画像成分参照値を取得することができる。
【0055】
方式１において、１つまたは複数の第１画像成分参照値の各第１画像成分参照値を順次比較して、最大の１つの第１画像成分参照値および最小の１つの第１画像成分参照値を決定する。
【0056】
方式２において、１つまたは複数の第１画像成分参照値から、プリセットされた位置にある少なくとも２つの第１画像成分参照値を選別し、数値の大きさに従って、少なくとも２つの第１サブ画像成分参照値を最大画像成分参照値セットと最小画像成分参照値セットに分割し、最大画像成分参照値セットと最小画像成分参照値セットに基づいて、最大の第１画像成分参照値と最小の第１画像成分参照値を取得する。
【0057】
つまり、本願の実施例では、ビデオ画像成分予測装置は、１つまたは複数の第１画像成分参照値から、第１画像成分参照値内の値が一番大きいものを、最大の第１画像成分参照値として選択し、値が一番小さいものを、最小の第１画像成分参照値として選択する。決定方式は、順次２つずつで比較してもよいし、ソート後に決定してもよいが、本願の実施例では具体的な決定方式を限定しない。
【0058】
ビデオ画像成分予測装置は、１つまたは複数の第１画像成分参照値に対応する画素点位置から、プリセットされた位置（プリセットされた画素点位置）に対応するいくつかの第１画像成分参照値を少なくとも２つの第１画像成分参照値として選択することもでき、次に、少なくとも２つの第１画像成分参照値に基づいて分割して最大のデータセット（最大画像成分参照値セット）と最小のデータセット（最小画像成分参照値セット）を得、最大のデータセットと最小のデータセットに基づいて、最大の第１画像成分参照値と最小の第１画像成分参照値を決定する。ここで、最大のデータセットと最小のデータセットに基づいて、最大の第１画像成分参照値と最小の第１画像成分参照値を決定するプロセスは、最大のデータセットに対して平均処理を実行して、最大の第１画像成分参照値を取得し、最小のデータセットに対して平均処理を実行して、最小の第１画像成分参照値を取得することであり得、他の方式を使用して最大値と最小値を決定することもできるが、本願の実施例はこれに限定されない。
【0059】
最大のデータセットと最小のデータセット内の数値の数は１以上である整数であり、２つのセット内の数値の数は同じでも異なっていてもよいが、本願の実施例はこれに限定されないことに留意されたい。
【0060】
ビデオ画像成分予測装置は、プリセットされた位置に対応するいくつかの第１画像成分参照値を、少なくとも２つの第１サブ画像成分参照値として決定した後、少なくとも２つの第１サブ画像成分参照値のうちの最大値を最大の第１画像成分参照値として直接選択し、少なくとも２つの第１サブ画像成分参照値のうちの最小値を最小の第１画像成分参照値として直接選択することもできる。
【0061】
例示的に、ビデオ画像成分予測装置は、少なくとも２つの第１サブ画像成分参照値のうちのＭ（Ｍは４を超える値であってもよいし、限定されなくてもよい）個の最大の第１サブ画像成分参照値を、最大画像成分参照値セットとし、Ｍ個の最大の第１サブ画像成分参照値を除く少なくとも２つの第１サブ画像成分参照値を最小画像成分参照値セットとし、最後に、最大画像成分参照値セットに対して平均処理を実行して、最大の第１画像成分参照値を取得し、最小画像成分参照値セットに対して平均処理を実行して、最小の第１画像成分参照値を取得することができる。
【0062】
なお、本願の実施例では、最大の第１画像成分参照値および最小の第１画像成分参照値は、数値の大きさによって直接決定された最大値および最小値であってもよいし、プリセットされた位置で参照値の有効性を代表することができる第１画像成分参照値（少なくとも２つの第１サブ画像成分参照値）を選択した後、有効な第１画像成分参照値を分割して比較的に大きな数値からなる１つのセットと、比較的に小さな数値からなる１つのセットを得、そうしてから、比較的に大きな数値のセットに基づいて最大の第１画像成分参照値を決定し、比較的に小さな数値のセットに基づいて最小の第１画像成分参照値を決定する。または、数値の大きさに従って、プリセットされた位置に対応する有効な第１画像成分参照値セットから、最大の第１画像成分参照値と最小の第１画像成分参照値を直接決定する。
【0063】
本願の実施例では、ビデオ画像成分予測装置が最大の第１画像成分参照値と最小の第１画像成分参照値を決定する方式を限定しない。例えば、ビデオ画像成分予測装置は、１つまたは複数の第１画像成分参照値をサイズに従って３つまたは４つのセットに分割してから、各セットを処理して、１つの代表パラメータを取得し、そして、代表パラメータから、最大および最小のパラメータを最大の第１画像成分参照値および最小の第１画像成分参照値として選択することもできる。
【0064】
本願の実施例では、プリセットされた位置の選択は、第１画像成分参照値の有効性を代表する位置を選択することができ、プリセットされた位置の数は限定されない（例えば、４または６であり得る）。プリセットされた位置は、隣接画素点のすべての位置であり得るが、本願の実施例はこれに限定されない。
【0065】
例示的に、プリセットされた位置で、所在する行または列の中心を基準として、サンプリングの頻度に従って両側からプリセット数の第１画像成分参照値を選択してもよいし、行または列のエッジ位置を除く他の位置にある第１画像成分参照値であってもよいが、本願の実施例はこれに限定されない。
【0066】
行および列におけるプリセットされた位置の割り当ては、均一に割り当ててもよいし、プリセットされた方式による割り当てであってもよいが、本願の実施例はこれに限定されない。例えば、プリセットされた位置の数が４であり、且つ隣接行および隣接列が１つまたは複数の第１画像成分参照値に対応する位置である場合、隣接行に対応する第１画像成分参照値から２つの第１画像成分参照値を選択し、隣接列に対応する第１画像成分参照値から２つの第１画像成分参照値を選択することができる。または、隣接行に対応する第１画像成分参照値から１つの第１画像成分参照値を選択し、隣接列に対応する第１画像成分参照値から３つの第１画像成分参照値を選択することができるが、本願の実施例はこれに限定されない。
【0067】
ビデオ画像成分予測装置は、１つまたは複数の第１画像成分参照値から、１つまたは複数の第１画像成分参照値のうちの最大値および最小値を決定することができる。つまり、１つまたは複数の第１画像成分参照値のうちの最大値（最大の第１画像成分参照値）、および１つまたは複数の第１画像成分参照値のうちの最小値（最小の第１画像成分参照値）を取得する。または、１つまたは複数の第１画像成分参照値のプリセットされた位置から複数の参照値を決定した後、処理により、最大の第１画像成分参照値と最小の第１画像成分参照値を取得する。ここで、他のビデオ成分のサンプリング位置と一致させ、またはそれに近づけるため、最大の第１画像成分参照値および最小の第１画像成分参照値に対応する画素点位置に基づいてフィルタリングを実行した後に、後続の処理を実行する必要がある。
【0068】
ステップＳ１０３では、ビデオ画像成分予測装置は、決定された複数の第１画像成分参照値に対応する画素点のサンプル値に対して第１フィルタリング処理をそれぞれ実行して、複数のフィルタリング後の第１画像参照サンプル値を取得する。
【0069】
本願の実施例では、複数のフィルタリング後の第１画像参照サンプル値は、フィルタリング後の最大の第１画像成分参照値およびフィルタリング後の最小の第１画像成分参照値であってもよいし、最大の第１画像成分参照値およびフィルタリング後の最小の第１画像成分参照値を含む複数の参照サンプル値であってもよいし、他の複数の参照サンプル値であってもよいが、本願の実施例はこれに限定されない。
【0070】
本願の実施例では、ビデオ画像成分予測装置は、決定された第１画像成分参照値に対応する画素点位置（すなわち、対応する画素点のサンプル値）に対して、フィルタリング処理（すなわち、第１フィルタリング処理）を実行し、それによって、対応する複数のフィルタリング後の第１画像参照サンプル値を取得することができ、これにより、複数のフィルタリング後の第１画像参照サンプル値に基づいて、成分線形モデルを構築することができる。
【0071】
本願のいくつかの実施例では、ビデオ画像成分予測装置は、最大の第１画像成分参照値および最小の第１画像成分参照値に対応する画素点のサンプル値に対して第１フィルタリング処理をそれぞれ実行して、フィルタリング後の最大の第１画像成分参照値およびフィルタリング後の最小の第１画像成分参照値を取得する。
【0072】
なお、決定された複数の第１画像成分参照値は、最大の第１画像成分参照値および最小の第１画像成分参照値であり得るため、フィルタリングプロセスは、最大の第１画像成分参照値および最小の第１画像成分参照値を決定するための画素点位置（すなわち、対応する画素点のサンプル値）に対して、フィルタリング処理（すなわち、第１フィルタリング処理）を実行し、それによって、対応するフィルタリング後の最大の第１画像成分参照値とフィルタリング後の最小の画像成分参照値（すなわち、複数のフィルタリング後の第１画像参照サンプル値）を取得することができ、このようにして、後続で、フィルタリング後の最大の第１画像成分参照値とフィルタリング後の最小の第１画像成分参照値に基づいて、成分線形モデルを構築することができる。
【0073】
本願の実施例では、フィルタリング方式は、アップサンプリング、ダウンサンプリング、およびローパスフィルタリングなどの方式であり得るが、本願の実施例はこれに限定されない。ここで、ダウンサンプリングの方式は、平均、補間、または中央値などを含み得るが、本願の実施例はこれに限定されない。
【0074】
本願の実施例では、第１フィルタリング処理は、ダウンサンプリングフィルタリングおよびローパスフィルタリングであり得る。
【0075】
例示的に、ビデオ画像成分予測装置は、最大の第１画像成分参照値と最小の第１画像成分参照値を決定するための画素点位置に対して、ダウンサンプリングフィルタリングを実行して、対応するフィルタリング後の最大の第１画像成分参照値とフィルタリング後の最小の第１画像成分参照値を取得することができる。
【0076】
以下、ダウンサンプリングが平均の方式であることを例として説明する。
【0077】
ビデオ成分予測装置は、最大の第１画像成分参照値に対応する位置およびその隣接画素点位置によって構成された領域に対して、第１画像成分の平均計算を実行し、このブロック領域の画素を１つの画素に融合し、当該平均結果は当該融合後の画素点に対応する第１画像成分参照値、すなわち、フィルタリング後の最大の第１画像成分参照値である。同様に、ビデオ成分予測装置は、最小の第１画像成分参照値に対応する位置およびその隣接画素点位置によって構成された領域に対して、第１画像成分の平均計算を実行し、このブロック領域の画素を１つの画素に融合し、当該平均結果は、当該融合後の画素点に対応する第１画像成分参照値、すなわち、フィルタリング後の最小の第１画像成分参照値である。
【0078】
なお、本願の実施例では、ビデオ画像成分予測装置のダウンサンプリング処理は、フィルタによって実現され、具体的には、最大の第１画像成分参照値に対応する位置に隣接するベクトル画素点の位置範囲は、フィルタのタイプによって決定できるが、本願の実施例はこれに限定されない。
【0079】
本願の実施例では、フィルタのタイプは、６タップフィルタであってもよいし、４タップフィルタであってもよいが、本願の実施例はこれに限定されない。
【0080】
ステップＳ１０４およびステップＳ１０５では、ビデオ画像成分予測装置は、複数のフィルタリング後の第１画像参照サンプル値に対応する予測待ち画像成分参照値を決定し、ここで、予測待ち画像成分は、第１画像成分と異なる画像成分（例えば、第２画像成分または第３画像成分）であり、次に、複数のフィルタリング後の第１画像参照サンプル値および予測待ち画像成分参照値に基づいて、成分線形モデルのパラメータを決定し、ここで、成分線形モデルは、第１画像成分のサンプル値を予測待ち画像成分のサンプル値にマッピングする線形マッピング関係（関数関係）を表す。
【0081】
本願のいくつかの実施例では、ビデオ画像成分予測装置は、フィルタリング後の最大の第１画像成分参照値に対応する最大の予測待ち画像成分参照値、およびフィルタリング後の最小の第１画像成分参照値に対応する最小の予測待ち画像成分参照値を決定する。
【0082】
なお、本願の実施例では、ビデオ画像成分予測装置は、最大値および最小値の構築方式で、「２点で線を決定する」という原則に従って、モデルパラメータ（すなわち、成分線形モデルのパラメータ）を導出することにより、成分線形モデル（すなわち、簡略化された成分間線形予測モデル（ＣＣＬＭ：Ｃｒｏｓｓ－ｃｏｍｐｏｎｅｎｔ Ｌｉｎｅａｒ Ｍｏｄｅｌ Ｐｒｅｄｉｃｔｉｏｎ））を構築することができる。
【0083】
本願の実施例では、ビデオ画像成分予測装置は、ダウンサンプリング（すなわち、フィルタリング）を実行し、予測待ち画像の位置とのアライメントを実現する。このようにして、フィルタリング後の第１画像成分参照サンプル値に対応する予測待ち画像成分参照値を決定することができる。例えば、フィルタリング後の最大の第１画像成分参照値に対応する最大の予測待ち画像成分参照値、およびフィルタリング後の最小の第１画像成分参照値に対応する最小の予測待ち画像成分参照値を決定する。このように、ビデオ画像成分予測装置は、（フィルタリング後の最大の第１画像成分参照値、最大の予測待ち画像成分参照値）と（フィルタリング後の最小の第１画像成分参照値、最小の予測待ち画像成分参照値）という２つの点を決定したため、「２点で線を決定する」という原則に従って、モデルパラメータを導出し、成分線形モデルを構築することができる。
【0084】
本願のいくつかの実施例では、ビデオ画像成分予測装置は、フィルタリング後の最大の第１画像成分参照値、最大の予測待ち画像成分参照値、フィルタリング後の最小の第１画像成分参照値、および最小の予測待ち画像成分参照値に基づいて、成分線形モデルのパラメータを決定し、ここで、成分線形モデルは、第１画像成分のサンプル値を予測待ち画像成分のサンプル値にマッピングする線形マッピング関係を表す。
【0085】
本願のいくつかの実施例では、ビデオ画像成分予測装置が、フィルタリング後の最大の第１画像成分参照値、最大の予測待ち画像成分参照値、フィルタリング後の最小の第１画像成分参照値、および最小の予測待ち画像成分参照値に基づいて、成分線形モデルのパラメータを決定する実現方式は、以下の方式を含み得る。方式（１）において、成分線形モデルのパラメータは、倍数因子および加法的オフセットを含む。そのため、ビデオ画像成分予測装置は、最大の予測待ち画像成分参照値と最小の予測待ち画像成分参照値との間の第１差分値を計算し、最大の第１画像成分参照値と最小の第１画像成分参照値との間の第２差分値を計算し、倍数因子を第１差分値と第２差分値の比率として設定し、最大の第１画像成分参照値と倍数因子との間の第１積を計算し、加法的オフセットを、最大の予測待ち画像成分参照値と第１積との間の差分値として設定するか、または、最小の第１画像成分参照値と倍数因子との間の第２積を計算し、加法的オフセットを最小の予測待ち画像成分参照値と第２積との間の差分値として設定することができる。方式（２）において、フィルタリング後の最大の第１画像成分参照値、最大の予測待ち画像成分参照値、およびプリセットされた初期線形モデルを使用して、第１サブ成分線形モデルを構築し、フィルタリング後の最小の第１画像成分参照値、最小の予測待ち画像成分参照値、およびプリセットされた初期線形モデルを使用して、第２サブ成分線形モデルを構築し、第１サブ成分線形モデルおよび第２サブ成分線形モデルに基づいて、モデルパラメータを取得し、モデルパラメータおよびプリセットされた初期線形モデルを使用して、成分線形モデルを構築する。
【0086】
ここで、上記の値の設定は、実際の条件に応じて決定または設計され、本願の実施例はこれに限定されない。
【0087】
例示的に、成分線形モデルが、第１画像成分と予測待ち画像成分との間の線形マッピング関係を表しているため、ビデオ画像成分予測装置は、第１画像成分および成分線形モデルに基づいて、予測待ち画像成分を予測することができ、本願の実施例における予測待ち画像成分は、色差成分であり得る。
【0088】
例示的に、成分線形モデルは、下記式（１）に示される通りであり得る。
【0089】
Ｃ＝αＹ＋β （１）
ここで、Ｙは、現在のブロック（ダウンサンプリングされた）内の特定の画素点に対応する第１画像成分再構成値を表し、Ｃは、現在のブロック内の当該特定の画素点に対応する第２画像成分予測値を表し、αおよびβは、前記成分線形モデルのモデルパラメータである。
ここで、Ｙは、現在のブロック（ダウンサンプリングされた）内の特定の画素点に対応する第１画像成分再構成値を表し、Ｃは、現在のブロック内の当該特定の画素点に対応する第２画像成分予測値を表し、αおよびβは、前記成分線形モデルのモデルパラメータである。
【0090】
ここで、モデルパラメータの具体的な実現については、後続の実施例で詳細に説明する。
【0091】
ビデオ画像成分予測装置は、直接取得された、現在のブロックに対応する１つまたは複数の第１画像成分参照値に基づいて、最大および最小の第１画像成分参照値を選択してから、選択された最大の第１画像成分参照値および最小の第１画像成分参照値に対応する位置に基づいてダウンサンプリングを実行して、成分線形モデルを構築する。このようにして、現在のブロックに対応する画素点のダウンサンプリング処理の作業負荷が軽減され、すなわち、フィルタリング操作が軽減され、これにより、成分線形モデルの構築の複雑さが軽減され、ビデオ成分予測の複雑さがさらに軽減され、予測効率が向上し、ビデオの符号化・復号化効率が向上する。
【0092】
ステップＳ１０６およびステップＳ１０７において、本願の実施例では、ビデオ画像成分予測装置は、成分線形モデルを取得した後、成分線形モデルを使用して現在のブロックに対してビデオ成分予測を直接実行することができ、これにより、予測待ち画像成分の予測値を取得することができる。ここで、ビデオ画像成分予測装置は、成分線形モデルに基づいて、現在のブロックの第１画像成分の再構成値に対してマッピング処理を実行して、マッピング値を取得し、次に、マッピング値に基づいて、現在のブロックの予測待ち画像成分の予測値を決定することができる。
【0093】
本願のいくつかの実施例では、ビデオ画像成分予測装置は、第１画像成分の再構成値に対して第２フィルタリング処理を実行して、第１画像成分の再構成値の第２フィルタ値を取得し、成分線形モデルに基づいて、第２フィルタ値に対してマッピング処理を実行して、マッピング値を取得する。
【0094】
本願のいくつかの実施例では、ビデオ画像成分予測装置は、マッピング値を、現在のブロックの予測待ち画像成分の予測値として設定する。
【0095】
ここで、第２フィルタリング処理は、ダウンサンプリングフィルタリングまたはローパスフィルタリングであり得る。
【0096】
本願のいくつかの実施例では、ビデオ画像成分予測装置はまた、マッピング値に対して第３フィルタリング処理を実行して、マッピング値の第３フィルタ値を取得し、第３フィルタ値を現在のブロックの予測待ち画像成分の予測値として設定することができる。
【0097】
ここで、第３フィルタリング処理は、ローパスフィルタリングであり得る。
【0098】
本願の実施例では、予測値は、現在のブロックの１つまたは複数の画素点に対応する第２画像成分の予測値または第３画像成分の予測値を表す。
【0099】
成分線形モデルの構築プロセスでは、複数の第１画像成分参照値の選択を実行してから、選択された複数の第１画像成分参照値に対応する位置に基づいてフィルタリング処理を実行して、成分線形モデルを構築しているため、現在のブロックに対応する画素点のフィルタリング処理の作業負荷が軽減され、すなわち、フィルタリング操作が軽減され、これにより、成分線形モデルの構築の複雑さが軽減され、ビデオ成分予測の複雑さがさらに軽減され、予測効率が向上し、ビデオの符号化・復号化効率が向上する。
【0100】
本願のいくつかの実施例では、図５に示されるように、本願の実施例はさらに、ビデオ画像成分予測方法を提供し、前記方法は以下のステップを含む。
【0101】
ステップＳ２０１において、現在のブロックの第１画像成分の参照値セットを取得する。
【0102】
ステップＳ２０２において、第１画像成分の参照値セットに含まれる参照値を比較して、最大の第１画像成分参照値と最小の第１画像成分参照値を決定する。
【0103】
ステップＳ２０３において、最大の第１画像成分参照値および最小の第１画像成分参照値に対応する画素点のサンプル値に対して第１フィルタリング処理をそれぞれ実行して、フィルタリング後の最大の第１画像成分参照値およびフィルタリング後の最小の第１画像成分参照値を取得する。
【0104】
ステップＳ２０４において、フィルタリング後の最大の第１画像成分参照値に対応する最大の予測待ち画像成分参照値、およびフィルタリング後の最小の第１画像成分参照値に対応する最小の予測待ち画像成分参照値を決定する。
【0105】
ステップＳ２０５において、フィルタリング後の最大の第１画像成分参照値、最大の予測待ち画像成分参照値、フィルタリング後の最小の第１画像成分参照値、および最小の予測待ち画像成分参照値に基づいて、成分線形モデルのパラメータを決定し、ここで、成分線形モデルは、第１画像成分のサンプル値を予測待ち画像成分のサンプル値にマッピングする線形マッピング関係を表す。
【0106】
ステップＳ２０６において、成分線形モデルに基づいて、現在のブロックの第１画像成分の再構成値に対してマッピング処理を実行して、マッピング値を取得する。
【0107】
ステップＳ２０７において、マッピング値に基づいて、現在のブロックの予測待ち画像成分の予測値を決定する。
【0108】
本願の実施例では、ステップＳ２０１～２０７のプロセスについては、上記の実施例で既に説明しており、ここでは繰り返して説明しない。
【0109】
なお、ビデオ画像成分予測装置が予測を実行する時に、現在のブロックの第１画像成分再構成値について、現在のブロックに対して第１画像成分フィルタリングを実行して、現在のブロックに対応する第１画像成分再構成値を取得してから、成分線形モデルおよび第１画像成分再構成値に基づいて、現在のブロックの予測待ち画像成分の予測値を取得する。
【0110】
本願の実施例では、ビデオ画像成分予測装置が成分線形モデルを取得した後、現在のブロックを予測するための最小単位が画素点であるため、現在のブロックの各画素点に対応する第１画像成分再構成値によって、当該画素点に対応する予測待ち画像成分の予測値を予測する必要である。ここで、ビデオ画像成分予測装置は、まず、現在のブロックに対して第１画像成分フィルタリング（例えば、ダウンサンプリング）を実行して、現在のブロックに対応する第１画像成分再構成値を取得し、具体的には、現在のブロックに対応する各画素点の第１画像成分再構成値を取得する。
【0111】
本願の実施例では、第１画像成分再構成値は、現在のブロックの１つまたは複数の画素点に対応する第１画像成分の再構成値を表す。
【0112】
これにより、ビデオ画像成分予測装置は、成分線形モデルによって、現在のブロックの第１画像成分の再構成値に対してマッピング処理を実行して、マッピング値を取得し、マッピング値に基づいて、現在のブロックの予測待ち画像成分の予測値を取得することができる。
【0113】
本願のいくつかの実施例では、図６に示されるように、ステップＳ２０４の具体的な実現は、以下のように、ステップＳ２０４１～Ｓ２０４２を含み得る。
【0114】
ステップＳ２０４１において、現在のブロックの予測待ち画像成分参照値を取得する。
【0115】
ステップＳ２０４２において、予測待ち画像成分参照値から、最大の予測待ち画像成分参照値および最小の予測待ち画像成分参照値を決定する。
【0116】
本願の実施例では、ビデオ画像成分予測装置が、フィルタリング後の最大画像成分参照値およびフィルタリング後の最小画像成分参照値に基づいて、成分線形モデルを構築し、このプロセスで、「２点で線を決定する」という原則に基づき、第１画像成分が横座標であり、予測待ち画像成分が縦座標である場合、２点の横座標の値が既知であり、「２点で線を決定する」という原則に従って１つの線形モデル、すなわち、成分線形モデルを決定する前に、当該２点に対応する縦座標の値を決定する必要がある。
【0117】
本願のいくつかの実施例では、ビデオ画像成分予測装置は、最大の第１画像成分参照値に対応する第１画像成分参照値のサンプリング点（Ｓａｍｐｌｅ）位置を、第１サンプリング点の位置に変換し、最大の予測待ち画像成分参照値を、予測待ち画像成分参照値のうちの第１サンプリング点の位置における参照値として設定し、最小の第１画像成分参照値に対応する第１画像成分参照値のサンプリング点の位置を、第２サンプリング点の位置に変換し、最小の予測待ち画像成分参照値を、予測待ち画像成分参照値のうちの第２サンプリング点の位置における参照値として設定する。
【0118】
例示的に、参照画素点が隣接画素点であることを例として説明する。ビデオ画像成分予測装置は、隣接ブロックに関する上記の説明に基づいて、現在のブロックに対応する１つまたは複数の予測待ち画像成分参照値を取得することができ、ここでの１つまたは複数の予測待ち画像成分参照値は、現在のブロックに対応する１つまたは複数の参照画素点の各隣接参照画素点における予測待ち画像成分の参照値を指し得、それを１つの予測待ち画像成分参照値として使用し、このようにして、ビデオ画像成分予測装置は、１つまたは複数の予測待ち画像成分参照値を取得する。
【0119】
ビデオ画像成分予測装置は、１つまたは複数の予測待ち画像成分参照値に対応する画素点から、フィルタリング後の最大の第１画像成分参照値の所在する第１隣接参照画素点を見つけ、第１隣接参照画素点に対応する予測待ち画像成分参照値を最大の予測待ち画像成分参照値として使用し、つまり、フィルタリング後の最大の第１画像成分参照値に対応する最大の予測待ち画像成分参照値を決定し、１つまたは複数の予測待ち画像成分参照値に対応する画素点から、フィルタリング後の最小の第１画像成分参照値の所在する第２隣接参照画素点を見つけ、第２隣接参照画素点に対応する予測待ち画像成分参照値を最小の予測待ち画像成分参照値として使用し、つまり、フィルタリング後の最小の第１画像成分参照値に対応する最小の予測待ち画像成分参照値を決定する。最後に、「２点で線を決定する」という原則に従って、（フィルタリング後の最大の第１画像成分参照値、最大の予測待ち画像成分参照値）と（フィルタリング後の最小の第１画像成分参照値、最小の予測待ち画像成分参照値）の２点に基づいて直線を決定し、当該直線で表される関数（マッピング関係）は、成分線形モデルである。
【0120】
本願のいくつかの実施例では、ビデオ画像成分予測装置はまた、まず、隣接画素点位置に対してフィルタリングを実行して、フィルタリング後の画素点の１つまたは複数の予測待ち画像成分参照値を取得し、次に、フィルタリング後の画素点位置から、フィルタリング後の最大の第１画像成分参照値の所在する第１隣接参照画素点を見つけ、第１隣接参照画素点に対応する予測待ち画像成分参照値（１つまたは複数の予測待ち画像成分参照値のうちの１つ）を、最大の予測待ち画像成分参照値として使用し、つまり、フィルタリング後の最大の第１画像成分参照値に対応する最大の予測待ち画像成分参照値を決定し、フィルタリング後の画素点位置から、フィルタリング後の最小の第１画像成分参照値の所在する第２隣接参照画素点を見つけ、第２隣接参照画素点に対応する予測待ち画像成分参照値を、最小の予測待ち画像成分参照値として使用し、つまり、フィルタリング後の最小の第１画像成分参照値に対応する最小の予測待ち画像成分参照値を決定する。
【0121】
なお、ビデオ画像成分予測装置が、まず隣接画素点位置に対してフィルタリングを実行することもでき、このようなプロセスは、予測待ち画像成分（例えば色差画像成分）をフィルタリングすることであり、本願の実施例はこれに限定されない。つまり、本願の実施例では、ビデオ画像成分予測装置は、予測待ち画像成分参照値に対して第４フィルタリング処理を実行して、予測待ち画像成分再構成値を取得することができる。
【0122】
ここで、第４フィルタリング処理は、ローパスフィルタリングであり得る。
【0123】
本願のいくつかの実施例では、ビデオ画像成分予測装置が成分線形モデルを構築するプロセスは、フィルタリング後の最大の第１画像成分参照値、最大の予測待ち画像成分参照値、およびプリセットされた初期線形モデルを使用して、第１サブ成分線形モデルを構築することと、フィルタリング後の最小の第１画像成分参照値、最小の予測待ち画像成分参照値、およびプリセットされた初期線形モデルを使用して、第２サブ成分線形モデルを構築することと、第１サブ成分線形モデルおよび第２サブ成分線形モデルに基づいて、モデルパラメータを取得することと、モデルパラメータおよびプリセットされた初期線形モデルを使用して、成分線形モデルを構築することとを含む。
【0124】
本願の実施例では、プリセットされた初期線形モデルは、モデルパラメータが未知である初期モデルである。
【0125】
例示的に、プリセットされた初期線形モデルは、式（１）の形であり得るが、その中のαおよびβは未知であり、第１サブ成分線形モデルおよび第２サブ成分線形モデルを使用して、二元第２方程式を構築し、モデルパラメータαとβを求めることができ、αとβを式（１）に代入して、第１画像成分と予測待ち画像成分との線形マッピング関係モデルを取得することができる。
【0126】
例示的に、最大の第１画像成分参照値（フィルタリング後の最大の第１画像成分参照値）および最小の第１画像成分参照値（フィルタリング後の最小の第１画像成分参照値）を見つけることにより、「２点で線を決定する」という原則に従ってモデルパラメータ（下記式（２）に示されるαとβ）を導出する。
【数1】
【0127】
ここで、ＬｍａｘおよびＬｍｉｎは、ダウンサンプリングされていない左側辺および／または上側辺に対応する第１画像成分参照値から見つけて得られる最大値および最小値を表し、ＣｍａｘおよびＣｍｉｎは、ＬｍａｘおよびＬｍｉｎに対応する位置の隣接参照画素点に対応する予測待ち画像成分参照値を表す。図７は、現在のブロックの最大値および最小値に基づいて予測モデルを構築することを示す概略構造図である。ここで、横座標は現在のブロックの第１画像成分参照値を表し、縦座標は現在のブロックの予測待ち画像成分参照値を表し、ＬｍａｘとＬｍｉｎ、およびＣｍａｘとＣｍｉｎに従って、式（２）を介してモデルパラメータαとβを算出でき、構築された予測モデルはＣ＝αＹ＋βである。実際の予測プロセスでは、Ｙは、現在のブロック内の１つの画素点に対応する第１画像成分再構成値を表し、Ｃは、現在のブロック内の当該画素点に対応する予測待ち画像成分予測値を表す。
【0128】
明らかに、ビデオ画像成分予測装置は、まず、直接取得された、現在のブロックに対応する１つまたは複数の第１画像成分参照値に基づいて、最大および最小の第１画像成分参照値を選択し、次に、選択された最大の第１画像成分参照値および最小の第１画像成分参照値に対応する位置に基づいてダウンサンプリング（フィルタリング）を実行して、成分線形モデルを構築する。このようにして、現在のブロックに対応する画素点のダウンサンプリング処理の作業負荷が軽減され、すなわち、フィルタリング操作が軽減され、これにより、成分線形モデルの構築の複雑さが軽減され、ビデオ成分予測の複雑さがさらに軽減され、予測効率が向上し、ビデオの符号化・復号化効率が向上する。
【0129】
上記の実施例に基づき、本願の実施例はビデオ成分予測装置を提供し、当該装置の各ユニットおよび各ユニットに含まれる各モジュールは、ビデオ成分予測装置内のプロセッサによって実現でき、もちろん、具体的な論理回路によって実現することもできる。実施プロセスでは、プロセッサは、中央処理装置、マイクロ処理装置、デジタル信号プロセッサ（ＤＳＰ：Ｄｉｇｉｔａｌ Ｓｉｇｎａｌ Ｐｒｏｃｅｓｓｏｒ）、またはフィールドプログラマブルゲートアレイなどであり得る。
【0130】
図８に示されるように、本願の実施例によるビデオ成分予測装置３は、
現在のブロックの第１画像成分の参照値セットを取得するように構成される取得部３０であって、前記第１画像成分の参照値セットは、１つまたは複数の第１画像成分参照値を含む、取得部３０と、
前記第１画像成分の参照値セットから複数の第１画像成分参照値を決定するように構成される決定部３１と、
前記複数の第１画像成分参照値に対応する画素点のサンプル値に対して第１フィルタリング処理をそれぞれ実行して、複数のフィルタリング後の第１画像参照サンプル値を取得するように構成されるフィルタリング部３２と、
前記マッピング値に基づいて、前記現在のブロックの前記予測待ち画像成分の予測値を決定するように構成される予測部３３と、を備え、
前記決定部３１は、さらに、前記複数のフィルタリング後の第１画像参照サンプル値に対応する予測待ち画像成分参照値を決定し、前記予測待ち画像成分は、前記第１画像成分と異なる画像成分である、前記複数のフィルタリング後の第１画像参照サンプル値および前記予測待ち画像成分参照値に基づいて、成分線形モデルのパラメータを決定するように構成され、前記成分線形モデルは、前記第１画像成分のサンプル値を前記予測待ち画像成分のサンプル値にマッピングする線形マッピング関係を表し、
前記フィルタリング部３２は、さらに、前記成分線形モデルに基づいて、前記現在のブロックの前記第１画像成分の再構成値に対してマッピング処理を実行して、マッピング値を取得するように構成される。
現在のブロックの第１画像成分の参照値セットを取得するように構成される取得部３０であって、前記第１画像成分の参照値セットは、１つまたは複数の第１画像成分参照値を含む、取得部３０と、
前記第１画像成分の参照値セットから複数の第１画像成分参照値を決定するように構成される決定部３１と、
前記複数の第１画像成分参照値に対応する画素点のサンプル値に対して第１フィルタリング処理をそれぞれ実行して、複数のフィルタリング後の第１画像参照サンプル値を取得するように構成されるフィルタリング部３２と、
前記マッピング値に基づいて、前記現在のブロックの前記予測待ち画像成分の予測値を決定するように構成される予測部３３と、を備え、
前記決定部３１は、さらに、前記複数のフィルタリング後の第１画像参照サンプル値に対応する予測待ち画像成分参照値を決定し、前記予測待ち画像成分は、前記第１画像成分と異なる画像成分である、前記複数のフィルタリング後の第１画像参照サンプル値および前記予測待ち画像成分参照値に基づいて、成分線形モデルのパラメータを決定するように構成され、前記成分線形モデルは、前記第１画像成分のサンプル値を前記予測待ち画像成分のサンプル値にマッピングする線形マッピング関係を表し、
前記フィルタリング部３２は、さらに、前記成分線形モデルに基づいて、前記現在のブロックの前記第１画像成分の再構成値に対してマッピング処理を実行して、マッピング値を取得するように構成される。
【0131】
本願のいくつかの実施例では、前記決定部３１は、さらに、前記第１画像成分の参照値セットに含まれる参照値を比較して、最大の第１画像成分参照値と最小の第１画像成分参照値を決定するように構成される。
【0132】
本願のいくつかの実施例では、前記フィルタリング部３２は、さらに、前記最大の第１画像成分参照値および前記最小の第１画像成分参照値に対応する画素点のサンプル値に対して前記第１フィルタリング処理をそれぞれ実行して、フィルタリング後の最大の第１画像成分参照値およびフィルタリング後の最小の第１画像成分参照値を取得するように構成される。
【0133】
本願のいくつかの実施例では、前記決定部３１は、さらに、前記フィルタリング後の最大の第１画像成分参照値に対応する最大の予測待ち画像成分参照値、および前記フィルタリング後の最小の第１画像成分参照値に対応する最小の予測待ち画像成分参照値を決定するように構成される。
【0134】
本願のいくつかの実施例では、前記決定部３１は、さらに、前記フィルタリング後の最大の第１画像成分参照値、前記最大の予測待ち画像成分参照値、前記フィルタリング後の最小の第１画像成分参照値、および前記最小の予測待ち画像成分参照値に基づいて、成分線形モデルのパラメータを決定するように構成され、前記成分線形モデルは、前記第１画像成分のサンプル値を前記予測待ち画像成分のサンプル値にマッピングする線形マッピング関係を表す。
【0135】
本願のいくつかの実施例では、前記決定部３１は、さらに、前記現在のブロックではない位置にある１つまたは複数の参照画素点を決定するように構成され、
前記取得部３０は、さらに、前記１つまたは複数の参照画素点を前記１つまたは複数の第１画像成分参照値として決定するように構成される。
前記取得部３０は、さらに、前記１つまたは複数の参照画素点を前記１つまたは複数の第１画像成分参照値として決定するように構成される。
【0136】
本願のいくつかの実施例では、前記決定部３１は、さらに、前記現在のブロックに隣接する画素点を前記１つまたは複数の参照画素点として決定するように構成される。
【0137】
本願のいくつかの実施例では、前記フィルタリング部３２は、さらに、前記第１画像成分の再構成値に対して第２フィルタリング処理を実行して、前記第１画像成分の再構成値の第２フィルタ値を取得し、前記成分線形モデルに基づいて、前記第２フィルタ値に対してマッピング処理を実行して、前記マッピング値を取得するように構成される。
【0138】
本願のいくつかの実施例では、前記第２フィルタリング処理は、ダウンサンプリングフィルタリングまたはローパスフィルタリングである。
【0139】
本願のいくつかの実施例では、前記予測部３３は、さらに、前記マッピング値を前記現在のブロックの前記予測待ち画像成分の予測値として設定するように構成される。
【0140】
本願のいくつかの実施例では、前記フィルタリング部３２は、さらに、前記マッピング値に対して第３フィルタリング処理を実行して、マッピング値の第３フィルタ値を取得するように構成され、
前記予測部３３は、さらに、前記第３フィルタ値を、前記現在のブロックの前記予測待ち画像成分の予測値として設定するように構成される。
前記予測部３３は、さらに、前記第３フィルタ値を、前記現在のブロックの前記予測待ち画像成分の予測値として設定するように構成される。
【0141】
本願のいくつかの実施例では、前記第３フィルタリング処理は、ローパスフィルタリングである。
【0142】
本願のいくつかの実施例では、前記決定部３１は、さらに、前記現在のブロックの予測待ち画像成分参照値を取得し、前記予測待ち画像成分参照値から、前記最大の予測待ち画像成分参照値および前記最小の予測待ち画像成分参照値を決定するように構成される。
【0143】
本願のいくつかの実施例では、前記フィルタリング部３２は、さらに、前記予測待ち画像成分参照値に対して第４フィルタリング処理を実行して、予測待ち画像成分再構成値を取得するように構成される。
【0144】
本願のいくつかの実施例では、前記第４フィルタリング処理は、ローパスフィルタリングである。
【0145】
本願のいくつかの実施例では、前記決定部３１は、さらに、前記最大の第１画像成分参照値に対応する第１画像成分参照値のサンプリング点の位置を、第１サンプリング点の位置に変換し、前記最大の予測待ち画像成分参照値を、前記予測待ち画像成分参照値のうち前記第１サンプリング点の位置における参照値として設定し、前記最小の第１画像成分参照値に対応する第１画像成分参照値のサンプリング点の位置を、第２サンプリング点の位置に変換し、前記最小の予測待ち画像成分参照値を、前記予測待ち画像成分参照値のうち前記第２サンプリング点の位置における参照値として設定するように構成される。
【0146】
本願のいくつかの実施例では、前記決定部３１は、さらに、前記フィルタリング後の最大の第１画像成分参照値、前記最大の予測待ち画像成分参照値、およびプリセットされた初期線形モデル使用して、第１サブ成分線形モデルを構築し、前記フィルタリング後の最小の第１画像成分参照値、前記最小の予測待ち画像成分参照値、および前記プリセットされた初期線形モデルを使用して、第２サブ成分線形モデルを構築し、前記第１サブ成分線形モデルおよび前記第２サブ成分線形モデルに基づいて、モデルパラメータを取得し、前記モデルパラメータおよび前記プリセットされた初期線形モデルを使用して、前記成分線形モデルを構築するように構成される。
【0147】
本願のいくつかの実施例では、前記決定部３１は、さらに、前記成分線形モデルのパラメータが倍数因子と加法的オフセットを含み、前記最大の予測待ち画像成分参照値と前記最小の予測待ち画像成分参照値との間の第１差分値を計算し、前記最大の第１画像成分参照値と前記最小の第１画像成分参照値との間の第２差分値を計算し、前記倍数因子を、前記第１差分値と前記第２差分値の比率として設定し、前記最大の第１画像成分参照値と前記倍数因子との間の第１積を計算し、前記加法的オフセットを前記最大の予測待ち画像成分参照値と前記第１積との間の差分値として設定するか、または、前記最小の第１画像成分参照値と前記倍数因子との間の第２積を計算し、前記加法的オフセットを前記最小の予測待ち画像成分参照値と前記第２積との間の差分値として設定するように構成される。
【0148】
本願のいくつかの実施例では、前記第１画像成分は輝度成分であり、前記予測待ち画像成分は第１または第２色差成分であるか、または、
前記第１画像成分は前記第１色差成分であり、前記予測待ち画像成分は前記輝度成分または前記第２色差成分であるか、または、
前記第１画像成分は前記第２色差成分であり、前記予測待ち画像成分は前記輝度成分または前記第１色差成分であるか、または、
前記第１画像成分は第１色成分であり、前記予測待ち画像成分は第２色成分または第３色成分であるか、または、
前記第１画像成分は前記第２色成分であり、前記予測待ち画像成分は前記第１色成分または前記第３色成分であるか、または、
前記第１画像成分は前記第３色成分であり、前記予測待ち画像成分は前記第２色成分または前記第１色成分である。
前記第１画像成分は前記第１色差成分であり、前記予測待ち画像成分は前記輝度成分または前記第２色差成分であるか、または、
前記第１画像成分は前記第２色差成分であり、前記予測待ち画像成分は前記輝度成分または前記第１色差成分であるか、または、
前記第１画像成分は第１色成分であり、前記予測待ち画像成分は第２色成分または第３色成分であるか、または、
前記第１画像成分は前記第２色成分であり、前記予測待ち画像成分は前記第１色成分または前記第３色成分であるか、または、
前記第１画像成分は前記第３色成分であり、前記予測待ち画像成分は前記第２色成分または前記第１色成分である。
【0149】
本願のいくつかの実施例では、前記第１色成分は赤成分であり、前記第２色成分は緑成分であり、前記第３色成分は青成分である。
【0150】
本願のいくつかの実施例では、前記第１フィルタリング処理は、ダウンサンプリングフィルタリングまたはローパスフィルタリングである。
【0151】
なお、本願の実施例では、上記のビデオ成分予測方法が、ソフトウェア機能モジュールの形で実行され、独立した製品として販売または使用される場合、コンピュータ可読記憶媒体に記憶されることもできる。このような理解に基づき、本願の実施例の技術的解決策の本質的な部分、すなわち、関連技術に貢献のある部分は、ソフトウェア製品の形で具現されることができ、当該コンピュータソフトウェア製品は、１つの記憶媒体に記憶され、電子機器（携帯電話、タブレットコンピュータ、パーソナルコンピュータ、携帯情報端末、ナビゲーター、デジタル電話、ビデオ電話、テレビ、感知機器、サーバなどであり得る）に、本願の各実施例に記載の方法の全部または一部を実行させるためのいくつかの命令を含む。上記の記憶媒体は、Ｕディスク、モバイルハードディスク、読み取り専用メモリ（ＲＯＭ：Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）、磁気ディスク、または光ディスクなど、プログラムコードを記憶することができる様々な媒体を含む。このように、本願の実施例は、特定のハードウェアおよびソフトウェアの組み合わせに限定されない。
【0152】
実際の応用では、図９に示されるように、本願の実施例によるビデオ成分予測装置は、 実行可能なビデオ成分予測命令を記憶するように構成されるメモリ３４と、
前記メモリ３４に記憶された実行可能なビデオ成分予測命令を実行するときに、上記の実施例で提供されるビデオ成分予測方法のステップを実現するように構成されるプロセッサ３５と、を備える。
前記メモリ３４に記憶された実行可能なビデオ成分予測命令を実行するときに、上記の実施例で提供されるビデオ成分予測方法のステップを実現するように構成されるプロセッサ３５と、を備える。
【0153】
これに対応して、本願の実施例は、ビデオ成分予測命令が記憶されたコンピュータ可読記憶媒体を提供し、当該ビデオ成分予測命令がプロセッサ３５によって実行されるときに、上記の実施例で提供されるビデオ成分予測方法のステップを実現する。
【0154】
ここで、記憶媒体および装置の実施例に関する上記の説明は、上記の方法の実施例に関する説明と同様であり、方法の実施例と同様の有益な効果を有することを指摘されたい。
本願の記憶媒体および装置の実施例に開示されていない技術的詳細については、本願の方法の実施例の説明を参照することによって理解できる。
本願の記憶媒体および装置の実施例に開示されていない技術的詳細については、本願の方法の実施例の説明を参照することによって理解できる。
【0155】
上記の内容は、本願の具体的な実施形態に過ぎず、本願の保護範囲はこれに限定されない。当業者は、本願で開示された技術的範囲内で容易に想到し得る変更または置換は、すべて本願の保護範囲内に含まれるべきである。したがって、本出願の保護範囲は、特許請求の保護範囲に従うものとする。
【産業上の利用可能性】
【0156】
本願の実施例では、ビデオ成分予測装置は、まず、直接取得された、現在のブロックに対応する第１画像成分の参照値セットに基づいて、複数の第１画像成分参照値的を決定し、次に、決定された複数の第１画像成分参照値に対応する位置に基づいてフィルタリング処理を実行して、成分線形モデルを構築する。このようにして、現在のブロックに対応する画素点のフィルタリング処理の作業負荷が軽減され、すなわち、フィルタリング操作が軽減され、これにより、成分線形モデルの構築の複雑さが軽減され、ビデオ成分予測の複雑さがさらに軽減され、予測効率が向上し、ビデオの符号化・復号化効率が向上する。
【図1】
【図2】
【図3A】
【図3B】
【図4】
【図5】
【図6】
【図7】
【図8】
【図9】
