(19)【発行国】日本国特許庁(JP)
(12)【公報種別】公開特許公報(A)
(11)【公開番号】P2024028972
(43)【公開日】2024-03-05
(54)【発明の名称】映像コーディングにおけるイントラブロックコピーのための方向に基づく予測
(51)【国際特許分類】
H04N 19/11 20140101AFI20240227BHJP
H04N 19/156 20140101ALI20240227BHJP
H04N 19/176 20140101ALI20240227BHJP
H04N 19/593 20140101ALI20240227BHJP
【FI】
H04N19/11
H04N19/156
H04N19/176
H04N19/593
【審査請求】有
【請求項の数】14
【出願形態】OL
【外国語出願】
(21)【出願番号】P 2023210570
(22)【出願日】2023-12-13
(62)【分割の表示】P 2021551506の分割
【原出願日】2020-03-02
(31)【優先権主張番号】PCT/CN2019/076695
(32)【優先日】2019-03-01
(33)【優先権主張国・地域又は機関】CN
(71)【出願人】
【識別番号】520476341
【氏名又は名称】北京字節跳動網絡技術有限公司
【氏名又は名称原語表記】Beijing Bytedance Network Technology Co., Ltd.
【住所又は居所原語表記】Room B-0035, 2/F, No.3 Building, No.30, Shixing Road, Shijingshan District Beijing 100041 China
(71)【出願人】
【識別番号】520477474
【氏名又は名称】バイトダンス インコーポレイテッド
【氏名又は名称原語表記】BYTEDANCE INC.
【住所又は居所原語表記】12655 West Jefferson Boulevard, Sixth Floor, Suite No. 137 Los Angeles, California 90066 United States of America
(74)【代理人】
【識別番号】110002000
【氏名又は名称】弁理士法人栄光事務所
(72)【発明者】
【氏名】シュー ジジョン
(72)【発明者】
【氏名】ジャン リー
(72)【発明者】
【氏名】ジャン カイ
(72)【発明者】
【氏名】リウ ホンビン
(72)【発明者】
【氏名】ワン ユエ
(57)【要約】 (修正有)
【課題】イントラブロックコピーモードにおけるバッファ管理およびブロックベクトルコーディングのための方法、装置及びコンピュータ可読媒体を提供する。
【解決手段】方法は、イントラブロックコピーモードで予測するための参照サンプルを記憶するバッファを判定することと、現在の映像ブロックを含み、ブロックベクトルを有するコーディングツリーユニットの左上の位置に対して、現在の映像ブロックの位置に空間的に位置し、かつ、ブロックベクトルを有するサンプルに対して、バッファにおける対応する参照サンプルを、ブロックベクトルと位置とを使用して判定される参照位置で計算することと、参照位置がバッファの外側にあると判定したとき、現在の映像ブロックを含むコーディングツリーユニットに対する現在の映像ブロックの位置に少なくとも部分的に基づいて、参照位置を再計算することと、を含む。
【選択図】
図18
【特許請求の範囲】
【請求項1】
視覚メディア処理方法であって、
視覚メディアデータの現在の映像ブロックと前記現在の映像ブロックのビットストリー
ム表現との間での変換のために、イントラブロックコピーモードで予測するための参照サ
ンプルを記憶するバッファを判定することであって、前記変換は、前記現在の映像ブロッ
クと同じ映像領域に位置する再構成ブロックに関する動き情報に基づく前記イントラブロ
ックコピーモードで行われる、判定することと、
前記現在の映像ブロックを含むコーディングツリーユニットの左上位置に対する前記現在の映像ブロックの位置(x0、y0)に空間的に配置され、かつブロックベクトル(BVx、BVy)を有するサンプルに対して、前記バッファにおける対応する参照を参照位置(P,Q)で計算することであって、前記参照位置(P,Q)は前記ブロックベクトル(BVx,BVy)と前記位置(x0,y0)を使用して判定される、計算することと、
前記参照位置(P,Q)が前記バッファの外側にあることを判定すると、前記現在の映像ブロックを含む前記コーディングツリーユニットに対する前記現在の映像ブロックの位置に少なくとも部分的に基づいて前記参照位置を再計算することと、を含む、
方法。
【請求項2】
前記参照位置(P,Q)は、P=x0+BVx、Q=y0+BVyとして判定される、
請求項1に記載の方法。
【請求項3】
前記再計算することは、前記現在の映像ブロックが前記コーディングツリーユニットに対して水平方向に位置するか、又は前記コーディングツリーユニットに対して垂直方向に位置するかどうかに少なくとも部分的に基づいて、前記参照位置(P,Q)を再計算することを含む、
請求項1に記載の方法。
【請求項4】
前記現在の映像ブロックが前記コーディングツリーユニットに対して水平方向に位置する、
請求項1~3のいずれか1項以上に記載の方法。
【請求項5】
前記現在の映像ブロックが前記コーディングツリーユニットに対して垂直方向に位置する、
請求項1~3のいずれか1項以上に記載の方法。
【請求項6】
前記再計算することは、前記現在の映像ブロックが前記視覚メディアデータの境界から
予め規定された距離内にあるかどうかに少なくとも部分的に基づいて、前記参照位置(P
,Q)を再計算する、
請求項1に記載の方法。
【請求項7】
前記現在の映像ブロックが、前記視覚メディアデータの境界から予め規定された距離内
に位置する、請求項1~2および6のいずれか1項以上に記載の方法。
【請求項8】
Nが前記バッファのy次元を表す整数であり、(y0+BVy)が範囲[0,..,N
-1]の外側にあることを判定することに応じて、前記参照位置(P,Q)に予め規定さ
れた値が割り当てられる、
請求項1~2のいずれか1項以上に記載の方法。
【請求項9】
Mが前記バッファのx次元を表す整数であり、(x0+BVx)が範囲[0,..,M
-1]の外側にあることを判定することに応じて、前記参照位置(P,Q)に予め規定さ
れた値が割り当てられる、
請求項1~2のいずれか1項以上に記載の方法。
【請求項10】
前記参照位置(P、Q)は、((x0+BVx)mod M、y0+BVy)として割
り当てられ、式中、“mod”は、xmod y=x-y*floor(x/y)、fl
oor(a)はa以下の最大の整数、Mは前記バッファのx次元を表す整数として定義さ
れるモジュロ演算である、
請求項1~2のいずれか1項以上に記載の方法。
【請求項11】
前記参照位置(P、Q)は、(x0+BVx,(y0+BVy)mod N))として
割り当てられ、式中、“mod”は、xmod y=x-y*floor(x/y)、f
loor(a)はa以下の最大の整数、Nは前記バッファのy次元を表す整数として定義
されるモジュロ演算である、
請求項1~2のいずれか1項以上に記載の方法。
【請求項12】
(x0+BVx)mod M,y0+BVy)が前記バッファの外側にあると判定する
ことに応じて、追加の処理が行われる、
請求項10に記載の方法。
【請求項13】
(x0+BVx,(y0+BVy)mod N))がバッファの外側にあると判定する
ことに応じて、追加の処理が行われる、
請求項12に記載の方法。
【請求項14】
視覚メディア処理方法であって、
視覚メディアデータの現在の映像ブロックと前記現在の映像ブロックのビットストリー
ム表現との間での変換のために、イントラブロックコピーモードで予測するための参照サ
ンプルを記憶するバッファを判定することであって、前記変換は、前記現在の映像ブロッ
クと同じ映像領域に位置する再構成ブロックに関する動き情報に基づく前記イントラブロ
ックコピーモードで行われる、判定することと、
空間的に、前記現在の映像ブロックを含むピクチャの左上位置に対する前記現在の映像ブロックの位置(x,y)に位置し、ブロックベクトル(BVx,BVy)を有するサンプルに対して、前記現在の映像ブロックの前記位置(x,y)、前記現在の映像ブロックの寸法、前記ピクチャの寸法、前記現在の映像ブロックを含むコーディングツリーユニットの寸法、または前記バッファの寸法のうちの少なくとも1つに関連付けられた1つ以上の条件を満たすことに少なくとも部分的に基づいて、ブロックベクトル(BVx,BVy)を有効なものとして割り当てることと、
前記ブロックベクトル(BVx,BVy)が有効であることを判定することをチェック
することと、
前記ブロックベクトル(BVx,BVy)が有効であることを確認すると、前記バッフ
ァにおける対応する参照を参照位置(P,Q)で計算することであって、前記参照位置(
P,Q)が、前記ブロックベクトル(BVx,BVy)、前記位置(x,y)、および前
記バッファの前記寸法を使用して判定される、計算することとを含む、
方法。
【請求項15】
前記参照位置(P,Q)は、((x+BVx)%Wbuf,(x+BVy)%Hbuf
)として判定され、式中、Wbuf×Hbufは、前記バッファの前記寸法を示し、「%
」は前記モジュロ演算を示し、x<0のときの「x%y」はx-y*floor(x/y
)として定義され、ここでfloor(a)はaを超えない最大の整数である、
請求項14に記載の方法。
【請求項16】
前記変換は、前記現在の映像ブロックから前記ビットストリーム表現を生成することを
含む、
請求項1~15のいずれかに記載の方法。
【請求項17】
前記変換は、前記ビットストリーム表現から前記現在の映像ブロックの画素値を生成す
ることを含む、
請求項1~15のいずれかに記載の方法。
【請求項18】
請求項1~15のいずれか1項以上に記載の方法を実施するように構成された処理装置
を備える映像エンコーダ装置。
【請求項19】
請求項1~15のいずれか1項以上に記載の方法を実施するように構成された処理装置
を備える映像デコーダ装置。
【請求項20】
コードが記憶されたコンピュータ可読媒体であって、
前記コードは、請求項1~15のいずれかまたは複数項に記載の方法を実施するための
処理装置実行可能命令を具現化する、コンピュータ可読媒体。
【発明の詳細な説明】
【技術分野】
【0001】
関連出願の相互参照
パリ条約に基づく適用可能な特許法及び/又は規則に基づいて、本願は、2019年3
月1日出願の国際特許出願PCT/CN2019/076695号、2019年3月4日
出願の国際特許出願PCT/CN2019/076848号、2019年3月11日出願
の国際特許出願PCT/CN2019/077725号、2019年3月21日出願の国
際特許出願PCT/CN2019/079151号、2019年5月7日出願の国際特許
出願PCT/CN2019/085862号、2019年5月23日出願の国際特許出願
PCT/CN2019/088129号、2019年6月18日出願の国際特許出願PC
T/CN2019/091691号、2019年6月28日出願の国際特許出願PCT/
CN2019/093552号、2019年7月6日出願の国際特許出願PCT/CN2
019/094957号、2019年7月9日出願の国際特許出願PCT/CN2019
/095297号、2019年7月10日出願の国際特許出願PCT/CN2019/0
95504号、2019年7月11日出願の国際特許出願PCT/CN2019/095
656号、2019年7月13日出願の国際特許出願PCT/CN2019/09591
3号、2019年7月15日出願の国際特許出願PCT/CN2019/096048号
の優先権及び利益を適時に主張することを目的とする。法に基づくすべての目的のために
、上記出願の開示全体は、本明細書の開示の一部として参照により援用される。
【0002】
この特許明細書は、映像符号化および復号化技術、デバイスおよびシステムに関する。
【背景技術】
【0003】
映像圧縮の進歩にもかかわらず、デジタル映像は、依然として、インターネット及び他
のデジタル通信ネットワークにおいて最大の帯域幅の使用量を占めている。映像の受信及
び表示が可能な接続されたユーザ機器の数が増加するにつれ、デジタル映像の使用に対す
る帯域幅需要は増大し続けることが予測される。
【発明の概要】
【0004】
本明細書は、映像または画像を復号化または符号化するためのイントラブロックコピー
モードにおけるバッファ管理およびブロックベクトルコーディングのための様々な実施形
態および技術を説明する。
【0005】
一つの例示的な態様において、映像または画像(視覚データ)処理の方法が開示される
。この方法は、視覚メディアデータの現在の映像ブロックと現在の映像ブロックのビット
ストリーム表現との間での変換のために、イントラブロックコピーモードで予測するため
の参照サンプルを記憶するバッファを判定することであって、変換は、現在の映像ブロッ
クと同じ映像領域に位置する再構成ブロックに関する動き情報に基づくイントラブロック
コピーモードで行われる、判定することと、現在の映像ブロックを含むコーディングツリ
ーユニットの左上位置に対する現在の映像ブロックの位置(x0、y0)に空間的に配置
され、かつブロックベクトル(BVx、BVy)を有するサンプルに対して、参照位置(
P,Q)のバッファの対応する参照を計算することであって、参照位置(P,Q)はブロ
ックベクトル(BVx,BVy)と位置(x0,y0)を使用して判定される、計算する
ことと、参照位置(P,Q)がバッファの外側にあることを判定すると、現在の映像ブロ
ックを含むコーディングツリーユニットに対する現在の映像ブロックの位置に少なくとも
部分的に基づいて参照位置を再計算することと、を含む。
【0006】
別の例示的な態様において、映像データ処理の別の方法が開示される。この方法は、視
覚メディアデータの現在の映像ブロックと現在の映像ブロックのビットストリーム表現と
の間での変換のために、イントラブロックコピーモードで予測するための参照サンプルを
記憶するバッファを判定することであって、この変換は、現在の映像ブロックと同じ映像
領域に位置する再構成ブロックに関する動き情報に基づくイントラブロックコピーモード
で行われる、判定することと、空間的に、現在の映像ブロックを含むピクチャの左上位置
に対する現在の映像ブロックの位置(x,y)に位置し、ブロックベクトル(BVx,B
Vy)を有するサンプルに対して、現在の映像ブロックの位置(x,y)、現在の映像ブ
ロックの寸法(dimension)、ピクチャの寸法、現在の映像ブロックを含むコー
ディングツリーユニットの寸法、またはバッファの寸法のうちの少なくとも1つに関連付
けられた1つ以上の条件を満たすことに少なくとも部分的に基づいて、ブロックベクトル
(BVx,BVy)を有効なものとして割り当てることと、ブロックベクトル(BVx,
BVy)が有効であることを判定するチェックを行うことと、ブロックベクトル(BVx
,BVy)が有効であることを確認すると、バッファにおける対応する参照を参照位置(
P,Q)で計算することであって、参照位置(P,Q)が、ブロックベクトル(BVx,
BVy)、位置(x,y)、およびバッファの寸法を使用して判定される、計算すること
と、を含む。
【0007】
さらに、別の例示的な態様において、映像データ処理の別の方法が開示される。この方
法は、視覚メディアデータの現在の映像ブロックと現在の映像ブロックのビットストリー
ム表現との間での変換のために、現在の映像ブロックについてのブロックベクトル(BV
x,BVy)またはブロックベクトル差(BVDx,BVDy)を判定することであって
、変換は、現在の映像ブロックと同じ映像領域に位置する再構成ブロックに関する動き情
報に基づくイントラブロックコピーモードで行われる、判定することと、ブロックベクト
ル(BVx,BVy)のうちの少なくとも1つの成分、またはブロックベクトルの差分(
BVDx,BVDy)の少なくとも1つの成分を範囲内に収まるように正規化することと
、を含む。
【0008】
さらに別の例示的な態様において、映像処理の別の方法が開示される。この方法は、現
在の映像ブロックと現在の映像ブロックのビットストリーム表現との間での変換のために
、イントラブロックコピーモードで予測するための再構成サンプルを記憶するために使用
するバッファを判定することであって、この変換は、現在の映像ブロックと同じ映像領域
に位置する再構成ブロックに関する動き情報に基づくイントラブロックコピーモードで行
われる、判定することと、バッファに記憶された、再構成されたサンプルを、順番にした
がって更新することと、を含む。
【0009】
別の例示的な態様において、映像処理の別の方法が開示される。この方法は、現在の映
像ブロックと現在の映像ブロックのビットストリーム表現との間での変換を行うことであ
って、この変換は、現在の映像ブロックと同じ映像領域に位置する再構成ブロックに関す
る動き情報に基づくイントラブロックコピーモードで行われ、変換時に、予測計算に使用
される第1の精度は、再構成計算に使用される第2の精度よりも低くなる、変換を行うこ
とと、を含む。
【0010】
さらに別の例示的な態様において、映像処理の別の方法が開示される。この方法は、現
在の映像ブロックと、現在の映像ブロックのビットストリーム表現との間での変換を、現
在の映像ブロックと同じ映像領域に位置する再構成ブロックに関する動き情報に基づくイ
ントラブロックコピーモードを使用して行うことであって、変換時には,nおよびMは整
数である場合に、nM×nMサイズの参照領域が使用され、現在の映像ブロックは、コー
ディングツリーユニットに位置決めされ、参照領域は、現在の映像ブロックに対応するコ
ーディングツリーユニット列のn×n個の直近の利用可能なコーディングツリーユニット
からのサンプルを含む、行うことを含む。
【0011】
さらに別の例示的な態様において、映像処理の別の方法が開示される。この方法は、現
在の映像ブロックと、現在の映像ブロックのビットストリーム表現との間での変換を、現
在の映像ブロックと同じ映像領域に位置する再構成ブロックに関する動き情報に基づくイ
ントラブロックコピーモードを使用して行うことであって、変換時には,n、pおよびM
は整数である場合に、nM×pMサイズの参照領域が使用され、現在の映像ブロックは、
コーディングツリーユニットに位置決めされ、参照領域は、現在の映像ブロックに対応す
るコーディングツリーユニット列のn×p-1個の直近の利用可能なコーディングツリー
ユニットからのサンプルを含む、行うことを含む。
【0012】
さらに別の例示的な態様において、映像処理の別の方法が開示される。この方法は、映
像領域の仮想パイプラインデータユニット(VPDU)の現在の映像ブロックと、現在の
映像ブロックのビットストリーム表現との間での変換を、現在の映像ブロックと同じ映像
領域に位置する再構成ブロックに関する動き情報に基づくイントラブロックコピーモード
を使用して行うことであって、変換時には,k、nおよびMは整数である場合に、nM×
nMサイズの参照領域が使用され、VPDUの寸法がkM×kMであり、現在の映像ブロ
ックは、コーディングツリーユニットに位置決めされ、参照領域は、現在の映像ブロック
に対応するコーディングツリーユニット列のn×n-k個の直近の利用可能なコーディン
グツリーユニットからのサンプルを含む、行うことを含む。
【0013】
さらに別の例示的な態様において、映像処理の別の方法が開示される。この方法は、視
覚メディアデータの、サイズがw×hである現在の映像ブロックと現在の映像ブロックの
ビットストリーム表現との間での変換のために、イントラブロックコピーモードで予測す
るための参照サンプルを記憶するバッファを判定することであって、この変換は、現在の
映像ブロックと同じ映像領域に位置する再構成ブロックに関する動き情報に基づくイント
ラブロックコピーモードで行われる、判定することと、現在の映像ブロックを含む、サイ
ズがM×Mのコーディングツリーユニット(CTU)の左上位置に対する現在の映像ブロ
ックの位置(x0,y0)に空間的に配置され、かつブロックベクトル(BVx,BVy
)を有するサンプルに対して、バッファにおける参照位置(P,Q)から始まる対応する
参照領域を計算することであって、参照位置(P,Q)は、ブロックベクトル(BVx,
BVy)および/または位置(x0,y0)を使用して判定する、計算することと、参照
領域および/または参照位置(P,Q)に1つ以上の規則ベースの制約を適用して、参照
領域と映像領域との重なりを制限することと、を含む。
【0014】
さらに別の例示的な態様において、映像処理の別の方法が開示される。この方法は、視
覚メディアデータの現在の映像ブロックと現在の映像ブロックのビットストリーム表現と
の間での変換のために、イントラブロックコピーモードで予測するための参照サンプルを
記憶するバッファを判定することを含み、この変換は、現在の映像ブロックと同じ映像領
域に位置する再構成ブロックに関する動き情報に基づいて、イントラブロックコピーモー
ドで行われる、判定することと、現在の映像ブロックを含むコーディングユニット(CU
)に対する現在の映像ブロックの位置(x0,y0)に空間的に位置するサンプルに対し
て、バッファにおける参照位置から始まる対応する参照領域を計算することと、参照領域
及び参照位置を調整して、前に処理されたブロックのうちどれを予測に用いるかを判定す
ることと、を含む。
【0015】
さらに別の例示的な態様において、映像処理の別の方法が開示される。この方法は、映
像の現在の映像ブロックと現在の映像ブロックのビットストリーム表現との間での変換の
ために、映像の成分Xを使用して、この映像の成分cの現在の映像ブロックに対応するブ
ロックベクトルの有効性を判定することであって、この成分Xは、映像の輝度成分とは異
なる、判定することと、この現在の映像ブロックに対してこのブロックベクトルが有効で
あると判定された場合、このブロックベクトルを使用してこの変換を行うことであって、
この変換は、現在の映像ブロックと同じ映像領域に位置する再構成ブロックに関する動き
情報に基づくイントラブロックコピー(IBC)モードで行われる、変換を行うことと、
を含む。
【0016】
さらに別の例示的な態様において、上述された方法を実装するように構成された処理装
置を備える映像エンコーダまたはデコーダ装置が開示される。
【0017】
別の例示的な態様において、コンピュータ可読プログラム媒体が開示される。この媒体
は、開示された方法のうちの1つを実装するための処理装置実行可能命令を具現化するコ
ードを記憶する。
【0018】
これらの、および他の態様は、本明細書でより詳細に説明される。
【図面の簡単な説明】
【0019】
【
図1】
図1は、現在のピクチャ参照またはイントラブロックコピー映像または画像コーディング技術を例示する。
【
図3】
図3は、(x,y)から始まるブロックのコーディングを例示する。
【
図4】
図4は、前回コーディングされた64×64ブロックを選択するための、考えられる代替方法を例示する。
【
図5】
図5は、64×64ブロックの符号化/復号化の順序を変更するための、考えられる代替方法を例示する。
【
図6】
図6は、映像または画像の処理方法の一例を示すフローチャートである。
【
図7】
図7は、映像または画像の符号化または復号化を行うハードウェアプラットフォームを示すブロック図である。
【
図8】
図8は、64×64ブロックの復号化の順序が上から下へ、左から右である場合、前回のコーディングされた64×64ブロックを選択するための、別の考えられる代替方法を示す。
【
図9】
図9は、前回のコーディングされた64×64ブロックを選択するための、別の考えられる代替方法を示す。
【
図10】
図10は、リシェイプを伴う復号化処理の例示的なフローチャートを示す。
【
図11】
図11は、64×64ブロックの復号化の順序が左から右、上から下である場合、前回のコーディングされた64×64ブロックを選択するための、別の考えられる代替方法を示す。
【
図12】
図12は、IBC参照バッファステータスを示す図であり、1つのブロックは64×64CTUを示す。
【
図13】
図13は、IBCのための参照領域の1つの配置を示す。
【
図14】
図14は、IBCのための参照領域の別の配置を示す。
【
図15】
図15は、現在の仮想パイプラインデータユニット(VPDU)がピクチャ境界の右側にある場合のIBCのための参照領域の別の配置を示す。
【
図16】
図16は、1つのCTU行内のVPDUを順次復号化する場合の仮想バッファの状態の例を示す。
【
図17】
図17は、開示された技術を実装することができる例示的な映像処理システムを示すブロック図である。
【
図18】
図18は、映像データ処理方法の一例を示すフローチャートである。
【
図19】
図19は、映像データ処理方法の一例を示すフローチャートである。
【
図20】
図20は、映像データ処理方法の一例を示すフローチャートである。
【
図21】
図21は、映像データ処理方法の一例を示すフローチャートである。
【
図22】
図22は、映像データ処理方法の一例を示すフローチャートである。
【
図23】
図23は、映像データ処理方法の一例を示すフローチャートである。
【
図24】
図24は、映像データ処理方法の一例を示すフローチャートである。
【
図25】
図25は、映像データ処理方法の一例を示すフローチャートである。
【
図26】
図26は、映像データ処理方法の一例を示すフローチャートである。
【
図27】
図27は、映像データ処理方法の一例を示すフローチャートである。
【
図28】
図28は、映像データ処理方法の一例を示すフローチャートである。
【発明を実施するための形態】
【0020】
本明細書では、理解を容易にするために章の見出しを使用しており、1つの章に開示さ
れた実施形態をその章にのみ限定するものではない。本明細書は、映像または画像を復号
化または符号化するためのイントラブロックコピーモードにおけるバッファ管理およびブ
ロックベクトルコーディングのための様々な実施形態および技術を説明する。
【0021】
1. 概要
【0022】
本明細書は、映像コーディング技術に関する。具体的には、映像コーディングにおける
イントラブロックコピーに関する。これは、例えば、汎用映像コーディングなど、開発中
の規格に適用されてもよい。本発明は、将来の映像コーディング規格または映像コーデッ
クにも適用可能である。
【0023】
2. 簡単な説明
【0024】
映像コーディング規格は、主に周知のITU-TおよびISO/IEC規格の開発によ
って発展してきた。ITU-TはH.261とH.263を作り、ISO/IECはMP
EG-1とMPEG-4 Visualを作り、両団体はH.262/MPEG-2 V
ideoとH.264/MPEG-4 AVC(Advanced Video Cod
ing)とH.265/HEVC規格を共同で作った。H.262以来、映像コーディン
グ規格は、時間予測と変換コーディングが利用されるハイブリッド映像コーディング構造
に基づく。HEVCを超えた将来の映像コーディング技術を探索するため、2015年に
は、VCEGとMPEGが共同でJVET(Joint Video Explorat
ion Team)を設立した。それ以来、多くの新しい方法がJVETによって採用さ
れ、JEM(Joint Exploration Mode)と呼ばれる参照ソフトウ
ェアに組み込まれてきた。2018年4月には、VCEG(Q6/16)とISO/IE
C JTC1 SC29/WG11(MPEG)との間にJoint Video Ex
pert Team(JVET)が発足し、HEVCと比較して50%のビットレート削
減を目標にVVC規格の策定に取り組んでいる。
【0025】
2.1 HEVC/H.265におけるインター予測
【0026】
各インター予測されたPUは、1つまたは2つの参照ピクチャリストのための動きパラ
メータを有する。動きパラメータは、動きベクトルおよび参照ピクチャインデックスを含
む。2つの参照ピクチャリストのうちの1つの参照ピクチャリストの使用は、inter
_pred_idcを使用して信号通知されてもよい。動きベクトルは、予測子に対する
デルタ(delta)として明確にコーディングされてもよい。
【0027】
1つのCUがスキップモードにてコーディングされる場合、1つのPUがこのCUに関
連付けられ、有意な残差係数がなく、コーディングされた動きベクトル差分も参照ピクチ
ャインデックスもない。マージモードを指定し、これにより、現在のPUのための動きパ
ラメータを、空間的および時間的候補を含む近傍のPUから取得する。マージモードは、
スキップモードのためだけでなく、任意のインター予測されたPUに適用することができ
る。マージモードの代替として、動きパラメータの明示的な送信があり、動きベクトル(
より正確には、動きベクトル予測子と比較した動きベクトル差分(MVD))、各参照ピ
クチャリストの対応する参照ピクチャインデックス、および参照ピクチャリストの使用状
況が、各PUに明確に信号通知される。このようなモードを、本開示では高度動きベクト
ル予測(AMVP)と呼ぶ。
【0028】
2つの参照ピクチャリストのうちの1つを使用することを信号通知が示す場合、サンプ
ルのうちの1つのブロックからPUを生成する。これを「単一予測」と呼ぶ。Pスライス
およびBスライスの両方に対して単一予測が利用可能である。
【0029】
両方の参照ピクチャリストを使用することを信号通知が示す場合、サンプルのうちの2
つのブロックからPUを生成する。これを「双方向予測」と呼ぶ。Bスライスのみに双方
向予測が利用可能である。
【0030】
以下、HEVCに規定されるインター予測モードについて詳細に説明する。まず、マー
ジモードについて説明する。
【0031】
2.2 現在のピクチャの参照
【0032】
現在のピクチャの参照(CPR)は、イントラブロックコピー(IBC)と呼ばれたこ
ともあるが、HEVCスクリーンコンテンツコーディング拡張機能(HEVC-SCC)
と現在のVVCテストモデルに採用されている。IBCは、動き補償の概念をフレーム間
コーディングからイントラフレームコーディングに拡張する。
図1に示すように、現在の
ブロックは、CPRが適用される場合、同じピクチャ内の1つの参照ブロックによって予
測される。現在のブロックを符号化または復号化する前に、参照ブロックにおけるサンプ
ルは既に再構成されていなければならない。CPRは、カメラでキャプチャされたほとん
どのシーケンスに対してそれほど効率的ではないが、スクリーンコンテンツに対しては、
有意なコーディング利得を示す。その理由は、スクリーンコンテンツピクチャにおいて、
アイコン、文字等の繰り返しパターンが多いためである。CPRは、これらの繰り返しパ
ターン間の冗長性を有効に除去することができる。HEVC-SCCにおいて、インター
コーディングされたコーディングユニット(CU)は、現在のピクチャをその参照ピクチ
ャとして選択する場合、CPRを適用することができる。この場合、MVをブロックベク
トル(BV)と改称し、BVは常に整数画素精度を有する。メインプロファイルHEVC
に適合するように、現在のピクチャは、復号化ピクチャバッファ(DPB)における「長
期」参照ピクチャとしてマークされる。なお、同様に、マルチプルビュー/3D映像コー
ディング規格において、ビュー間の参照ピクチャも「長期」参照ピクチャとしてマークさ
れる。
【0033】
BVがその参照ブロックを見つけた後、この参照ブロックをコピーすることで予測を生
成することができる。残差は、元の信号から参照画素を減算することによって得ることが
できる。そして、他のコーディングモードと同様に、変換および量子化を適用することが
できる。
【0034】
【0035】
しかしながら、参照ブロックがピクチャの外にある場合、または現在のブロックと重複
する場合、または再構成された領域の外にある場合、或いは何らかの制約によって制限さ
れた有効領域の外にある場合、画素値の一部または全部は規定されない。基本的に、この
ような問題に対処するために2つの解決策がある。1つは、このような状況、例えばビッ
トストリーム適合性を許可しないことである。もう1つは、これらの未定義の画素値にパ
ディングを適用することである。以下のサブセッションでは、解決策を詳細に説明する。
【0036】
2.3 HEVCスクリーンコンテンツコーディング拡張機能におけるCPR
【0037】
HEVCのスクリーンコンテンツコーディング拡張機能において、1つのブロックが現
在のピクチャを参照として使用する場合、以下の仕様のテキストに示すように、参照ブロ
ック全体が利用可能な再構成された領域内にあることを保証すべきである。
変数offsetXおよびoffsetYは、以下のように導出される。
offsetX=(ChromaArrayType==0)?0:(mvCLX[
0]&0x7?2:0) (8-104)
offsetY=(ChromaArrayType==0)?0:(mvCLX[
1]&0x7?2:0) (8-105)
参照ピクチャが現在のピクチャである場合、輝度動きベクトルmvLXは、以下の制約
に従うべきであることが、ビットストリーム適合性の要件である。
- 6.4.1項で規定されたようなz走査順序ブロックの可用性に対する導出処理が、
(xCb,yCb)と等しく設定された(xCurr,yCurr)と、(xPb+(m
vLX[0]>>2)-offsetX,yPb+(mvLX[1]>>2)-offs
etY)に等しく設定された近傍の輝度位置(xNbY,yNbY)と、が入力として呼
び出されると、出力はTRUEとなる。
- 6.4.1項に規定されたようなz走査順序ブロックの可用性に対する導出処理が、
(xCb,yCb)と等しく設定された(xCurr,yCurr)と、(xPb+(m
vLX[0]>>2)+nPbW-1+offsetX、yPb+(mvLX[1]>>
2)+nPbI-I-1+offsetY)と等しく設定された近傍の輝度位置(xNb
Y,yNbY)と、が入力として呼び出されると、出力はTRUEとなる。
- 次の条件の一方または両方がtrueであること
- (mvLX[0]>>2)の値+nPbW+xB1+offsetXが0以下であ
る。
- (mvLX[1]>>2)の値+nPbH+yB1+offsetYが0以下であ
る。
- 次の条件がtrueとなること。
(xPb+(mvLX[0]>>2)+nPbSw-1+offsetX)/CtbS
izeY-xCb/CtbSizeY<=yCb/CtbSizeY-(yPb+(mv
LX[1]>>2)+nPbSh-1+offsetY)/CtbSizeY (
8-106)
【0038】
このように、参照ブロックが現在のブロックと重複するケース、または参照ブロックが
ピクチャの外にあるケースは発生しない。参照ブロックまたは予測ブロックを埋める必要
がない。
【0039】
2.4 CPR/IBCの例
【0040】
VVC試験モデルにおいて、参照ブロック全体は現在のコーディングツリーユニット(
CTU)を有するべきであり、現在のブロックと重複しない。よって、参照または予測ブ
ロックをパディングする必要がない。
【0041】
デュアルツリーが有効化される場合、分割構造は、輝度CTUとクロマCTUとで異な
ってもよい。従って、4:2:0カラーフォーマットの場合、1つのクロマブロック(例
えば、CU)は、複数の輝度CUに分割されたコロケーションされた1つの輝度領域に対
応してもよい。
【0042】
クロマブロックは、以下の条件がtrueである場合に、CPRモードでのみコーディ
ングすることができる。
1)コロケーションされた輝度ブロックの輝度CUの各々は、CPRモードでコーディ
ングされるべきである。
2)輝度4×4ブロック’BVの各々は、まず、クロマブロックのBVに変換され、ク
ロマブロックのBVは、有効なBVである。
【0043】
2つの条件のいずれかがfalseである場合、クロマブロックは、CPRモードでコ
ーディングされない。
【0044】
なお、有効なBVの定義には、以下の制約がある。
1)BVによって特定される参照ブロックのすべてのサンプルは、制限された検索範囲
内にあるべきである(例えば、現在のVVC設計において同じCTU内にある)。
2)BVによって特定された参照ブロックのすべてのサンプルが再構成されている。
【0045】
2.5 CPR/IBCの例
【0046】
いくつかの実施例において、CPR/IBCのための参照領域は、現在のCTUに制限
され、最大128×128である。CPR/IBCブロックがより多くの参照候補を有す
ることができる一方、CPR/IBCの参照バッファを1つのCTUから維持または低減
することができるように、参照領域を動的に変更してメモリを再利用し、CPR/IBC
の参照サンプルを記憶する。
【0047】
図2は1つの方法を示しており、1つのブロックは64×64であり、1つのCTUは
4つの64×64ブロックを含む。64×64ブロックをコーディングする場合、前の3
つの64×64ブロックを参照として使用できる。そうすることによって、デコーダは、
CPR/IBCをサポートするために、4つの64×64ブロックを記憶するだけでよい
。
【0048】
ピクチャの左上隅に対する現在の輝度CUの位置を(x,y)とし、ブロックベクトル
を(BVx,BVy)とする。現在の設計において、BVが有効であるかどうかは、輝度
位置((x+BVx)>>6<<6+(1<<7),(y+BVy)>>6<<6)が再
構成されておらず、((x+BVx)>>6<<6+(1<<7),(y+BVy)>>
6<<6)が(x>>6<<6,y>>6<<6)と等しくないことによって知ることが
できる。
【0049】
2.6 インループリシェイプ(ILR)
【0050】
インループリシェイプ(ILR)の基本的な考えは、元の(第1のドメインにおける)
信号(予測/再構成信号)を第2のドメイン(リシェイプされたドメイン)に変換するこ
とである。
【0051】
インループ輝度リシェイパは、1対のルックアップテーブル(LUT)として実装され
るが、信号通知されたLUTから他方を計算することができるので、2つのLUTのうち
の一方のみを信号通知する必要がある。各LUTは、1次元10ビット1024エントリ
マッピングテーブル(1D-LUT)である。1つのLUTは、フォワードLUT、Fw
dLUTであり、これは、入力輝度コード値Yiを変更された値Yr:Yr=FwdLU
T[Yi]にマッピングする。他方のLUTは、逆LUT、InvLUTであり、変更さ
れたコード値YrをY^i:Y^i=InvLUT[Yr]にマッピングする。(Y^i
はYiの再構成値を表す)。
【0052】
2.6.1 PWLモデル
【0053】
概念的には、区分線形(PWL)は、以下のように実装される。
【0054】
x1、x2を2つの入力支点とし、y1、y2を1つのピースに対応する出力支点とす
る。x1とx2との間の任意の入力値xに対する出力値yは、以下の式によって補間する
ことができる
【0055】
y=((y2-y1)/(x2-x1))*(x-x1)+y1
【0056】
固定点実装では、この式は、以下のように書き換えることができる。
y=((m*x+2FP_PREC-1)>>FP_PREC)+c
【0057】
mはスカラーであり、cはオフセットであり、FP_PRECは精度を規定するための
定数である。
【0058】
いくつかの実施例において、PWLモデルは、1024エントリのFwdLUTマッピ
ングテーブルおよびInvLUTマッピングテーブルを予め計算するために使用されるが
、PWLモデルは、LUTを予め計算することなく、実装において同一のマッピング値を
オンザフライで計算することも可能にする。
【0059】
2.6.2.1 輝度のリシェイプ
【0060】
インループ輝度リシェイプの方法は、より複雑性低いパイプラインを提供し、且つイン
タースライス再構成におけるブロック単位のイントラ予測のための復号化待ち時間を排除
する。イントラ予測は、インタースライスおよびイントラスライスの両方のために、リシ
ェイプされたドメインにおいて行われる。
【0061】
イントラ予測は、スライスタイプにかかわらず、常にリシェイプされたドメインで行わ
れる。このような構成によれば、前回のTU再構成を行った直後にイントラ予測を開始す
ることができる。このような構成は、スライスに依存する代わりに、イントラモードのた
めの統一された処理を提供することもできる。
図10は、CE12-2の方式に基づく復
号化処理を示すブロック図である。
【0062】
32ピース区分線形(PWL)モデルの代わりに、16ピースのPWLモデルを使用し
て、輝度およびクロマ残差スケーリングを行った。
【0063】
インループ輝度リシェイパを用いたインタースライス再構成(薄い緑色の影が付けられ
たブロックは、リシェイプされたドメインにおける信号を示す。輝度残差、輝度内予測、
および輝度内再構成)
【0064】
2.6.2.2 輝度依存クロマ残差スケーリング
【0065】
輝度依存クロマ残差スケーリングは、固定小数点整数演算で実装される乗算処理である
。クロマ残差スケーリングは、輝度信号のクロマ信号との相互作用を補償する。TUレベ
ルでクロマ残差スケーリングを適用する。具体的には、以下が適用される。
- イントラの場合、再構成された輝度を平均する。
- インターの場合、予測輝度を平均する。
【0066】
この平均値は、PWLモデルにおけるインデックスを特定するために使用される。この
インデックスは、スケーリング係数cScaleInvを特定する。クロマ残差にその数
を乗算する。
【0067】
なお、クロマスケーリング係数は、再構成された輝度値ではなく、フォワードマップさ
れた予測輝度値から算出される。
【0068】
2.6.2.3 ILR側情報の信号通知
【0069】
パラメータは(現在)タイルグループヘッダ(ALFに類似)で送信される。これらは
、40~100ビットを要すると報告されている。
【0070】
いくつかの実施例において、追加された構文は、イタリック体で強調されている。
【0071】
【0072】
【0073】
新しい構文表タイルグループリシェイパを追加する。
【0074】
【0075】
一般的に、シーケンスパラメータセットRBSPの意味論では、次の意味論を追加する
。sps_reshaper_enabled_flagが1と等しい場合は、コーディ
ング映像シーケンス(CVS)においてリシェイパが使用されていることを規定している
。sps_reshaper_enabled_flagが0と等しい場合は、CVSに
おいてリシェイパが使用されていないことを規定している。
【0076】
タイルグループヘッダ構文において、以下の意味論を追加する。
tile_group_reshaper_model_present_flagが
1と等しい場合は、tile_group_reshaper_model()がタイル
グループ内に存在することを規定している。
tile_group_reshaper_model_present_flagが
0と等しい場合は、tile_group_reshaper_model()がタイル
グループヘッダに存在しないことを規定している。
tile_group_reshaper_model_present_flagが
存在しない場合は、0に等しいと推論される。
tile_group_reshaper_enabled_flagが1と等しい場
合は、現在のタイルグループに対してリシェイパが有効になっていることを規定している
。
tile_group_reshaper_enabled_flagが0と等しい場
合は、現在のタイルグループに対してリシェイパが有効になっていないことを規定してい
る。
tile_group_reshaper_enable_flagが存在しない場合
、0であると推論される。
tile_group_reshaper_chroma_residual_sca
le_flagが1と等しい場合は、現在のタイルグループに対してクロマ残差スケーリ
ングを有効であることを規定している。
tile_group_reshaper_chroma_residual_sca
le_flagが0と等しい場合は、現在のタイルグループに対してクロマ残差スケーリ
ングが有効でないことを規定している。
tile_group_reshaper_chroma_residual_sca
le_flagが存在しない場合は、0であると推測される。
【0077】
tile_group_reshaper_model()構文を追加する。
reshape_model_min_bin_idxは、最小のビン(またはピース
)インデックスを、リシェイパ構築処理に使用するように規定している。
reshape_model_min_bin_idxの値が0~MaxBinIdx
の範囲内にあるものとする。MaxBinIdxの値は15と等しいとする。
reshape_model_delta_max_bin_idxは、最大許容ビン
(またはピース)インデックスMaxBinIdxから最大ビンインデックスを引いたも
のが、リシェイパ構築処理で使用されることを規定している。
reshape_model_max_bin_idxの値は、MaxBinIdx-
reshape_model_delta_max_bin_idxに等しく設定される
。
reshaper_model bin_delta_abs_cw_prec_mi
nus1+1は、構文reshape_model_bin_delta_abs_CW
[i]の表現に使用するビット数を規定している。
reshape_model_bin_delta_abs_CW[i]は、i番目の
ビンの絶対デルタコード名値を規定する。reshaper_model_bin_de
lta_sign_CW_flag[i]は、reshape_model_bin_d
elta_abs_CW[i]のサインを次のように記述する。
- reshape_model_bin_delta_sign_CW_flag[i
]が0と等しい場合、対応する変数RspDeltaCW[i]は正の値である。
- そうでない場合(reshape_model_bin_delta_sign_C
W_flag[i]が0と等しくない)、対応する変数RspDeltaCW[i]は負
の値である。
reshape_model_bin_delta_sign_CW_flag[i]
が存在しない場合、0に等しいと推測される。
変数RspDeltaCW[i]=(1 2*reshape_model_bin_
delta_sign_CW[i])*reshape_model_bin_delt
a_abs_CW[i];
変数RspCW[i]は、以下のステップとして導出される。
変数OrgCWは、(1<<BitDepthY)/(MaxBinIdx+1)に等
しく設定される。
- reshaper_model_min_bin_idx<=i<=reshape
r_model_max_bin_idxの場合、RspCW[i]=OrgCW+Rs
pDeltaCW[i]である。
- そうでない場合、RspCW[i]=0である。
BitDepthYの値が10に等しい場合、RspCW[i]の値は、32~2*O
rgCW_1の範囲内にくる。
iが0~MaxBinIdx+1の範囲にある変数InputPivot[i]は、以
下のように導出される。
InputPivot[i]=i*OrgCW
iが0~MaxBinIdx+1の範囲にあり、変数ScaleCoef[i]および
InvScaleCoeff[i]がそれぞれ0~MaxBinIdxの範囲にあり、i
が0~MaxBinIdxの範囲にある変数ReshapePivot[i]は、以下の
ように導出される。
【0078】
shiftY=14
ReshapePivot[0]=0;
for(i=0;i<=MaxBinIdx;i++){
ReshapePivot[i+1]=ReshapePivot[i]+RspCW
[i]
ScaleCoef[i]=(RspCW[i]*(1<<shiftY)+(1<
<(Log2(OrgCW)-1)))>>(Log2(OrgCW))
if(RspCW[i]==0)
InvScaleCoeff[i]=0
else
InvScaleCoeff[i]=OrgCW*(1<<shiftY)/Rs
pCW[i]
}
【0079】
iが0~MaxBinIdxの範囲内にある変数ChromaScaleCoef[i
]は、以下のように導出される。
ChromaResidualScaleLut[64]={16384,16384
,16384,16384,16384,16384,16384,8192,8192
,8192,8192,5461,5461,5461,5461,4096,4096
,4096,4096,3277,3277,3277,3277,2731,2731
,2731,2731,2341,2341,2341,2048,2048,2048
,1820,1820,1820,1638,1638,1638,1638,1489
,1489,1489,1489,1365,1365,1365,1365,1260
,1260,1260,1260,1170,1170,1170,1170,1092
,1092,1092,1092,1024,1024,1024,1024};
shiftC=11
-if(RspCW[i]==0)
ChromaScaleCoef[i]=(1<<shiftC)
-そうでない場合(RspCW[i]!=0),ChromaScaleCoef[i]=
ChromaResidualScaleLut[RspCW[i]>>1]
【0080】
2.6.2.4 ILRの使用方法
【0081】
エンコーダ側では、まず、各ピクチャ(またはタイルグループ)をリシェイプされたド
メインに変換する。そして、すべてのコーディング処理は、リシェイプされたドメインで
行われる。イントラ予測の場合、近傍のブロックはリシェイプされたドメインにあり、イ
ンター予測の場合、まず、参照ブロック(復号化ピクチャバッファからの元のドメインか
ら生成される)をリシェイプされたドメインに変換する。そして、残差を生成し、ビット
ストリームにコーディングする。
【0082】
ピクチャ全体(またはタイルグループ)の符号化/復号化が終わった後、リシェイプさ
れたドメインのサンプルを元のドメインに変換し、次いで、非ブロック化フィルタおよび
他のフィルタを適用する。
【0083】
以下の場合、予測信号へのフォワードリシェイプは無効化される。
【0084】
現在のブロックはイントラコーディングされている。
【0085】
現在のブロックはCPR(現在のピクチャを参照し、別名イントラブロックコピー、I
BC)としてコーディングされる。
【0086】
現在のブロックは、結合されたインターイントラモード(CIIP)としてコーディン
グされ、イントラ予測ブロックのためにフォワードリシェイプは無効化される。
【0087】
3. 様々な実施形態によって解決される問題の例
【0088】
現在のCPR/IBCの設計において、いくつかの問題が存在する。
1)参照領域が動的に変化するため、エンコーダ/デコーダの処理が複雑になる。
2)無効なブロックベクトルは容易に生成され、チェックしにくいため、エンコーダお
よびデコーダの両方を複雑にする。
3)参照領域が不規則であると、ブロックベクトルのコーディングが非効率になる。
4)128×128より小さいCTUサイズに対してどのように対処するかは不明であ
る。
5)BVが有効であるか無効であるかの判定処理において、クロマブロックの場合、こ
の決定は、輝度サンプルの可用性に基づいて行われ、このことは、デュアルツリーパーテ
ィション構造に起因して誤った判定をもたらす可能性がある。
【0089】
4. 例示的な実施形態
【0090】
いくつかの実施形態において、CPR/IBCブロックが参照を得るために、通常のバ
ッファを使用できる。
【0091】
関数isRec(x,y)は、画素(x,y)が再構成され、IBCモードによって参
照されたかどうかを示すように規定される。(x,y)が異なるスライス/タイル/ブリ
ックのピクチャから外れている場合、isRec(x,y)はfalseを返し、(x,
y)が再構成されていない場合、isRec(x,y)はfalseを返す。別の例にお
いて、サンプル(x,y)が再構成されたが、何らかの他の条件が満たされた場合、その
サンプルは、参照領域外/異なるVPDU内など、利用不可能であるとマークされてもよ
く、isRec(x,y)はfalseを返す。
【0092】
関数isRec(c,x,y)は、成分cのサンプル(x,y)が利用可能であるかど
うかを示すように規定される。例えば、サンプル(x,y)がまだ再構成されていない場
合、それは利用不可能であるとマークされる。別の例において、サンプル(x,y)が再
構成されたが、何らかの他の条件が満たされた場合、該サンプル(x,y)はまた、使用
不可能であるとしてマークされてもよく、例えば、ピクチャから外れている/異なるスラ
イス/タイル/ブリック内にある/異なるVPDU内にある、許可された参照領域のなど
のようにサンプル(x,y)が利用不可能である場合、isRec(c,x,y)はfa
lseを返し、そうでない場合、trueを返す。
【0093】
以下の説明において、参照サンプルは再構成サンプルであってもよい。なお、「画素バ
ッファ」は、「1つの色成分のバッファ」または「複数の色成分のバッファ」に応答して
もよい。
【0094】
CPR/IBC用参照バッファ
【0095】
1. CPR/IBCのために輝度参照サンプルを記憶するために、M×N個の画素バッ
ファを使用することが提案される。
a. 一例において、バッファサイズは64×64である。
b. 一例において、バッファサイズは128×128である。
c. 一例において、バッファサイズは64×128である。
d. 一例において、バッファサイズは128×64である。
e. 一例において、NはCTUの高さに等しい。
f. 一例において、N=nHであり、HはCTUの高さであり、nは正の整数である
。
g. 一例において、MはCTUの幅に等しい。
h. 一例において、M=mWであり、WはCTUの幅であり、mは正の整数である。
i. 一例において、バッファサイズは、CTUサイズに等しくなく、例えば、96×
128または128×96である。
j. 一例において、バッファサイズはCTUサイズに等しい。
k. 一例において、M=mW、N=Hであり、WおよびHは、CTUの幅および高さ
であり、mは、正の整数である。
l. 一例において、M=W、N=nHであり、WおよびHは、CTUの幅および高さ
であり、nは、正の整数である。
m. 一例において、M=mW、N=nHであり、WおよびHは、CTUの幅および高
さであり、mおよびnは、正の整数である。
n. 上記例において、mおよびnはCTUのサイズに依存してもよい。
i. 一例において、CTUのサイズが128×128である場合、m=1であり、
n=1である。
ii. 一例において、CTUのサイズが64×64である場合、m=4であり、n
=1である。
iii. 一例において、CTUのサイズが32×32である場合、m=16であり
、n=1である。
iv. 一例において、CTUのサイズが16×16である場合、m=64であり、
n=1である。
o. 代替的に、バッファサイズはCTUサイズに対応する。
p. 代替的に、このバッファサイズは、仮想パイプラインデータユニット(VPDU
)のサイズに対応する。
q. Mおよび/またはNは、エンコーダからデコーダに、例えばVPS/SPS/P
PS/ピクチャヘッダ/スライスヘッダ/タイルグループヘッダ等で信号通知されてもよ
い。
【0096】
2. Mおよび/またはNは、規格で規定された異なるプロファイル/レベル/層で異な
ってもよい。別のMc×Nc画素バッファを使用して、CPR/IBCのためのクロマ参
照サンプルを記憶することが提案される。
a. 一例において、4:2:0映像の場合、Mc=M/2およびNc=N/2である
。
b. 一例において、4:4:4映像の場合、Mc=MおよびNc=Nである。
c. 一例において、4:2:2映像の場合、Mc=MおよびNc=N/2である。
d. 代替的に、McおよびNcは、MおよびNから独立してもよい。
e. 一例において、クロマバッファは、CbおよびCrに対応する2つのチャネルを
含む。
f. 一例において、Mc=Mであり、Nc=Nである。
【0097】
3. M×Nサンプルバッファを使用してCPR/IBCのためにRGB参照サンプルを
記憶ことが提案される。
a. 一例において、バッファサイズは64×64である。
b. 一例において、バッファサイズは128×128である。
c. 一例において、バッファサイズは64×128である。
d. 一例において、バッファサイズは128×64である。
e. 代替的に、バッファサイズはCTUサイズに対応する。
f. 代替的に、このバッファサイズは、仮想パイプラインデータユニット(VPDU
)のサイズに対応する。
【0098】
4. バッファは、ループフィルタリングの前に再構成された画素を記憶することができ
ることが提案される。ループフィルタリングは、非ブロック化フィルタ、適応ループフィ
ルタ(ALF)、サンプル適応オフセット(SAO)、クロス成分ALF、または任意の
他のフィルタを参照してもよい。
a. 一例において、バッファは、現在のCTUにサンプルを記憶することができる。
b. 一例において、バッファは、現在のCTUの外部にサンプルを記憶することがで
きる。
c. 一例において、バッファは、現在のピクチャの任意の部分からのサンプルを記憶
することができる。
d. 一例において、バッファは、他のピクチャからのサンプルを記憶することができ
る。
【0099】
5. バッファは、ループフィルタリングの後に再構成された画素を記憶することができ
ることが提案される。ループフィルタリングは、非ブロック化フィルタ、適応ループフィ
ルタ(ALF)、サンプル適応オフセット(SAO)、クロス成分ALF、または任意の
他のフィルタを参照してもよい。
a. 一例において、バッファは、現在のCTUにサンプルを記憶することができる。
b. 一例において、バッファは、現在のCTUの外部にサンプルを記憶することがで
きる。
c. 一例において、バッファは、現在のピクチャの任意の部分からのサンプルを記憶
することができる。
d. 一例において、バッファは、他のピクチャからのサンプルを記憶することができ
る。
【0100】
6. バッファは、ループフィルタリング前およびループフィルタリング後の両方で再構
成されたサンプルを記憶することができることが提案される。ループフィルタリングは、
非ブロック化フィルタ、適応ループフィルタ(ALF)、サンプル適応オフセット(SA
O)、クロス成分ALF、または任意の他のフィルタを参照してもよい。
a. 一例において、バッファは、現在のピクチャからのサンプルと他のピクチャから
のサンプルとを、それらのサンプルの可用性に基づいて記憶することができる。
b. 一例において、他のピクチャからの参照サンプルは、ループフィルタリング後の
再構成サンプルからのものである。
c. 一例において、他のピクチャからの参照サンプルは、ループフィルタリングの前
に再構成されたサンプルからのものである。
【0101】
7. バッファは、コーディング映像データのビット深度とは異なり得る所与のビット深
度を有するサンプルを記憶することが提案される。
a. 一例において、再構成バッファ/コーディング映像データのビット深度は、バッ
ファに記憶されたIBC参照サンプルのビット深度よりも大きい。
b. 一例において、内部ビット深度が1つの映像シーケンスのための入力ビット深度
と異なる場合、例えば(10ビット対8ビット)であっても、IBC参照サンプルは、入
力ビット深度に位置合わせされて記憶される。
c. 一例において、ビット深度は再構成バッファのビット深度と同じである。
d. 一例において、ビット深度は、入力画像/映像のビット深度と同じである。
e. 一例において、ビット深度は、予め規定された数と同じである。
f. 一例において、ビット深度は、標準のプロファイルに依存する。
g. 一例において、出力ビット深度/入力ビット深度/内部ビット深度と比較したビ
ット深度またはビット深度の差は、SPS/PPS/シーケンスヘッダ/ピクチャヘッダ
/スライスヘッダ/タイルグループヘッダ/タイルヘッダまたは他の種類の映像データユ
ニットにおいて信号通知されてもよい。
h. 提案された方法は、他の黒丸印で言及された提案されたバッファ定義に適用され
てもよく、代替的に、IBCの既存の設計にも適用されてもよい。
i. バッファの各色成分のビット深度は異なってもよい。
【0102】
バッファ初期化
【0103】
8. 所与の値でバッファを初期化することが提案される。
a. 一例において、バッファは所与の値で初期化される。
i. 一例において、所与の値は、入力ビット深度および/または内部ビット深度に
依存してもよい。
ii. 一例において、バッファは、中間グレー値で初期化され、例えば、8ビット
信号の場合、128が設定され、10ビット信号の場合、512が設定される。
iii. 一例において、ILRが使用される場合、バッファはforwardLU
T(m)で初期化される。例m=1<<(Bitdepth-1)。
b. 代替的に、バッファは、SPS/VPS/APS/PPS/シーケンスヘッダ/
タイルグループヘッダ/ピクチャヘッダ/タイル/CTU/コーディングユニット/VP
DU/領域で信号通知される値で初期化される。
c. 一例において、この所与の値は、前に復号化されたピクチャまたはスライスまた
はCTUの行またはCTUまたはCUのサンプルから導出されてもよい。
d. この所与の値は、異なる色成分ごとに異なってもよい。
【0104】
9. 代替的に、前回コーディングされたブロックからの復号化された画素を使用してバ
ッファを初期化することが提案される。
a. 一例において、復号化された画素は、インループフィルタリング前の画素である
。
b. 一例において、バッファサイズがCTUである場合、バッファは、利用可能であ
る場合、前回の復号化されたCTUの復号化された画素で初期化される。
c. 一例において、バッファサイズが64×64である場合、そのバッファサイズは
、利用可能である場合、前回の復号化された64×64ブロックの復号化された画素で初
期化される。
d. 代替的に、さらに、前回コーディングされたブロックが利用可能でない場合、黒
丸印8の方法が適用されてもよい。
【0105】
バッファの参照
【0106】
10. 1つのブロックがバッファ内の画素を参照として使用するために、このブロック
は、バッファ内の位置(x,y),x=0,1,2,...,M-1;y=0,1,2,
...,N-1,を使って参照先を示すことができる。
【0107】
11. 代替的に、この参照位置は、l=y*M+x,l=0,1,...,M*N-1
として表すことができる。
【0108】
12. なお、現在のCTUに関するブロックの左上の位置を(x0,y0)として、ブ
ロックベクトル(BVx,BVy)=(x-x0,y-y0)をデコーダに送信し、バッ
ファにおける参照先を示してもよい。
【0109】
13. 代替的に、ブロックベクトル(BVx,BVy)は、(x-x0+Tx,y-y
0+Ty)として規定されてもよく、TxおよびTyは、予め規定されたオフセットであ
る。
【0110】
14. 任意の画素(x0,y0)および(BVx,BVy)の場合、バッファにおける
その参照は、(x0+BVx,y0+BVy)に見出すことができる。
a. 一例において、(x0+BVx,y0+BVy)がバッファの外にある場合、そ
れは境界にクリップされる。
b. 代替的に、(x0+BVx,y0+BVy)がバッファの外にある場合、その基
準値は、所与の値、例えば、中間グレーとして予め規定される。
c. 代替的に、参照位置は、常にバッファ内にあるように、((x0+BVx)mo
d M,(y0+BVy)mod N)として規定される。
【0111】
15. 任意の画素(x0,y0)および(BVx,BVy)に対して、(x0+BVx
,y0+BVy)がバッファの外にある場合、その基準値はバッファにおける値から導出
されてもよい。
a. 一例において、この値は、バッファにおけるサンプル((x0+BVx)mod
M,(y0+BVy)mod N)から導出される。
b. 一例において、この値は、バッファにおけるサンプル((x0+BVx)mod
M, clip(y0+BVy,0,N-1))から導出される。
c. 一例において、この値は、バッファにおけるサンプル(clip(x0+BVx
,0,M-1),(y0+BVy)mod N)から導出される。
d. 一例において、この値は、バッファにおけるサンプル(clip(x0+BVx
,0,M-1),clip(y0+BVy,0,N-1))から導出される。
【0112】
16. バッファ範囲外の特定の座標を許可しない場合がある。
a. 一例において、CTUの左上隅およびブロックベクトル(BVx,BVy)に対
する任意の画素(x0,y0)について、y0+BVyが[0,..,N-1]の範囲内
にあるべきであることが、ビットストリーム制約である。
b. 一例において、CTUおよびブロックベクトル(BVx,BVy)の左上隅の任
意の画素(x0,y0)に対して、x0+BVxが[0,..,M-1]の範囲内にある
べきであることが、ビットストリーム制約である。
c. 一例において、CTUおよびブロックベクトル(BVx,BVy)の左上隅の任
意の画素(x0,y0)に対して、y0+BVyが[0,..,N-1]の範囲内にある
べきであり、且つx0+BVxが[0,..,M-1]の範囲内にあるべきであることが
、ビットストリーム制約である。
【0113】
17. 1つのブロックの信号通知されたまたは導出されたブロックベクトルがバッファ
の外のどこかを指している場合、バッファに基づいてパディングを行ってもよい。
a. 一例において、バッファの外の任意のサンプルの値は、予め規定された値で規定
される。
i. 一例において、この値は、1<(ビット深度-1)であってもよく、例えば、
8ビット信号の場合、128であり、10ビット信号の場合、512である。
ii. 一例において、ILRが使用される場合、この値はforwardLUT(
m)であってもよい。例m=1<<(Bitdepth-1).
iii. 代替的に、予め規定された値の表示は、SPS/PPS/シーケンスヘッ
ダ/ピクチャヘッダ/スライスヘッダ/タイルグループ/タイル/CTU/CUレベルで
信号通知または表示されてもよい。
b. 一例において、バッファの外の任意のサンプルは、バッファにおける最も近いサ
ンプルの値として規定される。
【0114】
18. バッファ参照からの取り扱い方法は、水平方向と垂直方向とで異なってもよく、
または現在のブロックの位置によって(例えば、ピクチャ境界により近いか否か)異なっ
てもよい。
a. 一例において、y0+BVyが[0,N-1]の外にある場合、(x0+BVx
,y0+BVy)のサンプル値が予め規定された値として割り当てられる。
b. 一例において、x0+BVxが[0,M-1]の外にある場合、(x0+BVx
,y0+BVy)のサンプル値が予め規定された値として割り当てられる。
c. 代替的に、(x0+BVx,y0+BVy)のサンプル値を((x0+BVx)
mod M,y0+BVy)のサンプル値として割り当て、これにより、(((x0+B
Vx)mod M,y0+BVy)がまだバッファの外にある場合には、その値をさらに
導出するために他の方法を呼び出してもよい。
d. 代替的に、(x0+BVx,y0+BVy)のサンプル値を(x0+BVx,(
y0+BVy)mod N)のサンプル値として割り当て、これにより、(x0+BVx
,(y0+BVy)mod N)がまだバッファの外にある場合には、その値をさらに導
出するために他の方法を呼び出してもよい。
【0115】
ブロックベクトル表現
【0116】
19. ブロックベクトル(BVx,BVy)の各成分またはその成分の1つを一定の範
囲に正規化してもよい。
a. 一例において、BVxは、(BVx mod M)に置き換えられてもよい。
b. 代替的に、BVxは、((BVx+X)mod M)-Xに置き換えられてもよ
く、Xは、予め規定された値である。
i. 一例において、Xは64。
ii. 一例において、XはM/2。
iii. 一例において、Xは、現在のCTUに対するブロックの水平座標である。
c. 一例において、BVyは、(BVy mod N)に置き換えられてもよい。
d. 代替的に、BVyを((BVy+Y)mod N)-Yで置き換えてもよく、Y
は予め規定された値である。
i. 一例において、Yは64。
ii. 一例において、YはN/2。
iii. 一例において、Yは、現在のCTUに対するブロックの垂直座標である。
【0117】
20. BVxおよびBVyは、異なる正規化範囲を有してもよい。
【0118】
21. ブロックベクトル差(BVDx,BVDy)を一定の範囲に正規化することがで
きる。
a. 一例において、BVDxは、(BVDx mod M)に置き換えられてもよく
、関数modは、リマインダを返す。
b. 代替的に、BVDxは、((BVDx+X)mod M)-Xに置き換えられて
もよく、Xは、予め規定された値である。
i. 一例において、Xは64。
ii. 一例において、XはM/2。
c. 一例において、BVyは、(BVDy mod N)に置き換えられてもよい。
d. 代替的に、BVyを((BVDy+Y)mod N)-Yで置き換えてもよく、
Yは予め規定された値である。
i. 一例において、Yは64。
ii. 一例において、YはN/2。
【0119】
22. BVDxおよびBVDyは、異なる正規化範囲を有してもよい。
【0120】
ブロックベクトルの妥当性検査
【0121】
IBCバッファの幅および高さをWbufおよびHbufとする。ピクチャの左上隅に
対して(X,Y)から始まるW×Hブロック(輝度ブロック、クロマブロック、CU、T
U、4×4、2×2、または他のサブブロックであってもよい)の場合、ブロックベクト
ル(BVx、BVy)が有効であるかどうかを示すために、以下を適用してもよい。Wp
ic、Hpicを1つのピクチャの幅および高さとし、Wctu、Hctuを1つのCT
Uの幅および高さとする。関数floor(x)は、xより大きくない最大の整数を返す
。関数isRec(x,y)は、サンプル(x,y)を再構成した場合、それを返す。
【0122】
23. いずれかの参照位置がピクチャ境界の外にあっても、ブロックベクトル(BVx
,BVy)を有効であるとして設定してもよい。
a. 一例において、ブロックベクトルは、X+BVx<0であっても有効であるとし
て設定してもよい。
b. 一例において、ブロックベクトルは、X+W+BVx>Wpicであっても、有
効であるとして設定してもよい。
c. 一例において、Y+BVy<0であっても、ブロックベクトルを有効であるとし
て設定してもよい。
d. 一例において、Y+H+BVy>Hpicであっても、ブロックベクトルを有効
であるとして設定してもよい。
【0123】
24. 現在のCTU行の外側に参照位置が存在しても、ブロックベクトル(BVx,B
Vy)を有効であるとして設定してもよい。
a. 一例において、ブロックベクトルは、Y+BVy<floor(Y/Hctu)
*Hctuであっても有効であるとして設定してもよい。
b. 一例において、ブロックベクトルは、Y+H+BVy>=floor(Y/Hc
tu)*Hctu+Hctuであっても有効であるとして設定してもよい。
【0124】
25. ブロックベクトル(BVx,BVy)は、いずれかの参照位置が現在のCTUお
よび左(n-1)CTUの外にあったとしても、有効であるとして設定してもよく、nは
、IBCのための参照領域として使用できるCTU(現在のCTUを含む、または除く)
の数である。
a. 一例において、ブロックベクトルは、X+BVx<floor(X/Wctu)
*Wctu-(n-1)*Wctuであっても有効であるとして設定してもよい。
b. 一例において、ブロックベクトルは、X+W+BVx>floor(X/Wct
u)*Wctu+Wctuであっても、有効であるとして設定してもよい。
【0125】
26. 特定のサンプルが再構成されていなくても、ブロックベクトル(BVx,BVy
)を有効として設定してもよい。
a. 一例において、isRec(X+BVx,Y+BVy)がfalseであっても
、ブロックベクトルを有効であるとして設定してもよい。
b. 一例において、isRec(X+BVx+W-1,Y+BVy)がfalseで
あっても、ブロックベクトルを有効であるとして設定してもよい。
c. 一例において、isRec(X+BVx,Y+BVy+H-1)がfalseで
あっても、ブロックベクトルを有効であるとして設定してもよい。
d. 一例において、isRec(X+BVx+W-1,Y+BVy+H-1)がfa
lseであっても、ブロックベクトルを有効であるとして設定してもよい。
【0126】
27. ブロックベクトル(BVx,BVy)は、1つのブロックがCTU行における第
1のCTUのブロックでない場合、常に有効であるとして設定してもよい。
a. 代替的に、ブロックベクトルは、常に有効であるとして設定してもよい。
【0127】
28. 以下の3つの条件をすべて満たす場合、ブロックベクトル(BVx,BVy)を
常に有効であるとして設定してもよい。
・X+BVx>=0
・Y+BVy>=floor(Y/Hctu)
・isRec(X+BVx+W-1,Y+BVy+H-1)==true
a. 代替的に、1つのCTU行における第1のCTUのブロックについて、3つの条
件をすべて満たす場合、ブロックベクトルを常に有効であるとして設定してもよい。
【0128】
29. ブロックベクトル(BVx,BVy)が有効である場合、ブロックのサンプルコ
ピーはブロックベクトルに基づいて行われてもよい。
a. 一例において、サンプル(X,Y)の予測は、((X+BVx)%Wbuf,(
Y+BVy)%Hbuf)から得ることができる。
【0129】
バッファ更新
【0130】
30. 新しいピクチャまたはタイルをコーディングするとき、バッファはリセットされ
てもよい。
a. 「リセット」という用語は、バッファが初期化されることを指すことができる。
b. 用語「リセット」は、バッファ内のすべてのサンプル/画素が所与の値(例えば
、0または-1)に設定されることを指すことができる。
【0131】
31. VPDUのコーディングを終えたら、バッファはVPDUの再構成された値で更
新されてもよい。
【0132】
32. CTUのコーディングを終えたら、バッファはCTUの再構成された値で更新さ
れてもよい。
a. 一例において、バッファが満杯でない場合、バッファはCTUによってCTUを
順次更新することができる。
b. 一例において、バッファが満杯である場合、最も古いCTUに対応するバッファ
領域を更新する。
c. 一例において、M=mW、N=H(W、HはCTUのサイズであり、M、Nはバ
ッファサイズである)であり、前回更新された領域が(kW,0)から始まる場合、更新
する次の開始位置は、((k+1)W mod M,0)となる。
【0133】
33. バッファは、各CTU行の最初にリセットされてもよい。
a. 代替的に、バッファは、各CTUの復号化の開始時にリセットされてもよい。
b. 代替的に、バッファは、1つのタイルを復号化する開始時にリセットされてもよ
い。
c. 代替的に、バッファは、1つのタイルグループ/ピクチャの復号化の開始時にリ
セットされもよい。
【0134】
34. (x,y)から始まるブロックのコーディングを終えたら、(x,y)から始ま
るバッファの対応する領域は、ブロックからの再構成によって更新される。
a. 一例において、(x,y)は、CTUの左上隅に対する位置である。
【0135】
35. ピクチャに対するブロックのコーディングを終えたら、バッファの対応する領域
は、ブロックからの再構成によって更新される。
a. 一例において、バッファにおける位置(x mod M,y mod N)の値
は、ピクチャの左上隅に対する位置(x,y)の再構成された画素値で更新されてもよい
。
b. 一例において、バッファにおける位置(x mod M,y mod N)の値
は、現在のタイルの左上隅に対する位置(x,y)の再構成された画素値で更新されても
よい。
c. 一例において、バッファにおける位置(x mod M,y mod N)の値
は、現在のCTU行の左上隅に対する位置(x,y)の再構成された画素値で更新されて
もよい。
d. 一例において、バッファ内の値は、ビット深度整列後の再構成された画素値で更
新されてもよい。
【0136】
36. (x,y)から始まるブロックのコーディングを終えたら、(xb,yb)から
始まるバッファの対応する領域は、ブロックからの再構成によって更新され、(xb,y
b)および(x,y)は2つの異なる座標である。
a. 一例において、(x,y)は、CTUの左上隅に関する位置であり、(xb,y
b)は、(x+update_x,y+update_y)であり、update_xお
よびupdate_yは、バッファにおける更新可能な位置を示す。
【0137】
37. 上記の例では、1つのブロックの再構成された値は、フィルタ(例えば、非ブロ
ック化フィルタ)を適用する前の再構成された値を示してもよい。
a. 代替的に、1つのブロックの再構成された値は、フィルタ(例えば、非ブロック
化フィルタ)が適用された後の再構成された値を示してもよい。
【0138】
38. バッファが再構成されたサンプルから更新されるとき、再構成されたサンプルは
、記憶される前にまず修正されてもよく、例えば、サンプルのビット深度を変更してもよ
い。
a. 一例において、バッファは、バッファのビット深度へのビット深度整列後、再構
成されたサンプル値で更新される。
b. 一例において、バッファ値は、値{p+[1<<(b-1)]}>>bに基づい
て更新され、pは、再構成されたサンプル値であり、bは、予め規定されたビットシフト
値である。
c. 一例において、バッファ値は、clip({p+[1<<(b-1)]}>>b
,0,(1<<bitdepth)-1)の値に基づいて更新され、pは、再構成された
サンプル値であり、bは、予め規定されたビットシフト値であり、ビット深度は、バッフ
ァビット深度である。
d. 一例において、バッファ値は、値{p+[1<(b-1)-1]}>bに基づい
て更新され、pは、再構成されたサンプル値であり、bは、予め規定されたビットシフト
値である。
e. 一例において、バッファ値は、clip({p+[1<<(b-1)-1]}>
>b,0,(1<<bitdepth)-1)の値に基づいて更新され、pは、再構成さ
れたサンプル値であり、bは、予め規定されたビットシフト値であり、bitdepth
は、バッファビット深度である。
f. 一例において、バッファ値は、値p>>bに基づいて更新される。
g. 一例において、バッファ値は、clip(p>>b,0,(1<<bitdep
th)-1)の値に基づいて更新され、bitdepthは、バッファビット深度である
。
h. 上記例において、bは、ビット深度から入力サンプルビット深度を引いたものと
して再構成されてもよい。
【0139】
39. バッファサンプルを使用して予測を形成する場合、前処理を適用することができ
る。
a. 一例において、予測値は、p<<bであり、pは、バッファにおけるサンプル値
であり、bは、予め規定された値である。
b. 一例において、予測値は、clip(p<<b,0,1<<bitdepth)
であり、bitdepthは、再構成サンプルのビット深度である。
c. 一例において、予測値は、(p<<b)+(1<<(bitdepth-1))
であり、pは、バッファにおけるサンプル値であり、bは、予め規定された値であり、b
itdepthは、再構成サンプルのビット深度である。
d. 上記例において、bは、ビット深度から入力サンプルビット深度を引いたものと
して再構成されてもよい。
【0140】
40. バッファは所与の順番で更新されてもよい。
a. 一例において、バッファは順次更新されてもよい。
b. 一例において、バッファは、再構成されたブロックの順に基づいて更新されても
よい。
【0141】
41. バッファが満杯である場合、バッファ内のサンプルを最新の再構成サンプルに置
き換えることができる。
a. 一例において、サンプルは、先入れ先出し方式で更新されてもよい。
b. 一例において、最も古いサンプルが置き換えられる。
c. 一例において、サンプルに優先順位を割り当て、この優先順位に基づいてサンプ
ルを置き換えることができる。
d. 一例において、サンプルは、他のサンプルが最初に置き換えられるように、「長
期」としてマークされ得る。
e. 一例において、高い優先順位を示すために、1つのブロックとともに1つのフラ
グを送信することができる。
f. 一例において、優先順位を示すために、1つのブロックとともに1つの数字を送
信することができる。
g. 一例において、ある特徴を有する再構成されたブロックからのサンプルは、他の
サンプルが最初に置き換えられるように、より高い優先順位を割り当てられる。
i. 一例において、IBCモードでコーディングされたサンプルのパーセンテージ
が閾値よりも大きい場合、ブロックのすべてのサンプルに高い優先順位を割り当てること
ができる。
ii. 一例において、パレットモードでコーディングされたサンプルのパーセンテ
ージが閾値よりも大きい場合、ブロックのすべてのサンプルに高い優先順位を割り当てる
ことができる。
iii. 一例において、IBCまたはパレットモードでコーディングされたサンプ
ルのパーセンテージが閾値よりも大きい場合、ブロックのすべてのサンプルに高い優先順
位を割り当てることができる。
iv. 一例において、変換スキップモードでコーディングされたサンプルのパーセ
ンテージが閾値よりも大きい場合、ブロックのすべてのサンプルに高い優先順位を割り当
てることができる。
v. この閾値は、ブロックサイズ、色成分、CTUサイズに基づいて異なってもよ
い。
vi. 閾値は、SPS/PPS/シーケンスヘッダ/スライスヘッダ/タイルグル
ープ/タイルレベル/領域で信号通知されてもよい。
h. 一例において、このバッファが一杯であることは、このバッファにおける利用可
能なサンプルの数が所与の閾値に等しいかまたはそれよりも多いことを意味し得る。
i. 一例において、バッファにおける利用可能なサンプルの数が64×64×3輝
度サンプル以上である場合、バッファは満杯であると判定されてもよい。
【0142】
代替バッファ組み合わせ
【0143】
42. 前回コーディングされた3つの64×64ブロックを常に参照領域として使用す
る代わりに、現在のブロック(またはVPDU)の位置に基づいてそれを適応的に変更す
ることが提案される。
a. 一例において、64×64ブロックを符号化/復号化するとき、前回の3つの6
4×64ブロックを参照として使用できる。
図2に比べ、前回の64×64個のブロック
をより多く組み合わせてもよい。
図2は、前の64×64ブロックの異なる組み合わせの
例を示す。
【0144】
43. z走査順序を用いる代わりに、垂直走査順序を使用してもよい。
a. 一例において、1つのブロックがz走査順序にインデックス0..3を有する4
つのVPDUに分割される場合、符号化/復号化の順序は、0、2、1、3である。
b. 一例において、64×64個のブロックを符号化/復号化するとき、前回の3つ
の64×64個のブロックを参照として使用できる。
図2と比較して、より多くの種類の
64×64ブロックの符号化/復号化の順序を適用することができる。
図4は、64×6
4ブロックの異なる符号化/復号化の順序の例を示す。
c. 代替的に、上記方法は、スクリーンコンテンツのコーディングにのみ適用されて
もよい。
d. 代替的に、上記方法は、1つのタイル/タイルグループ/ピクチャに対してCP
Rが有効化される場合にのみ適用されてもよい。
e. 代替的に、上記方法は、1つのCTUまたは1つのCTU行に対してCPRが有
効化される場合にのみ適用されてもよい。
【0145】
仮想IBCバッファ
【0146】
以下、輝度サンプルにおいて、VPDUの幅および高さを、それぞれWVPDU(例え
ば、64)およびHVPDU(例えば、64)と表す。代替的に、WVPDUおよび/ま
たはHVPDUは、他の映像ユニット(例えば、CTU)の幅および/または高さを表し
てもよい。
【0147】
44. IBC参照領域の状態を追跡し続けるために、仮想バッファを維持してもよい。
a. 一例において、仮想バッファサイズは、mWVPDU×nHVPDUである。
i. 一例において、mは3に等しく、nは2に等しい。
ii. 一例において、mおよび/またはnは、ピクチャ解像度、CTUサイズに依
存してもよい。
iii. 一例において、mおよび/またはnは、信号通知されてもよく、または予
め規定されてもよい。
b. 一例において、上記の黒丸印および副黒丸印で記載された方法は、仮想バッファ
に適用されてもよい。
c. 一例において、ピクチャ/スライス/タイル/ブリックの左上隅に対するサンプ
ル(x,y)は、(x%(mWVPDU),y%(nHVPDU))にマッピングされて
もよい。
【0148】
45. アレイを使用して、仮想バッファに関連付けられた各サンプルの可用性を追跡し
てもよい。
a. 一例において、フラグは、仮想バッファにおけるサンプルに関連付けて、バッフ
ァにおけるサンプルがIBC参照として使用できるか否かを特定してもよい。
b. 一例において、輝度サンプルおよびクロマサンプルを含む各4×4ブロックは、
1つのフラグを共有して、そのブロックに関連付けられたいずれかのサンプルがIBC参
照として使用できるかどうかを示してもよい。
c. 一例において、3×2個のVPDUに対応するアレイ(例えば、各4×4ブロッ
クは、同じ可用性フラグを共有してもよい)は、IBC参照サンプルの可用性を追跡する
ように維持される。
d. 一例において、4×2個のVPDUに対応するアレイ(例えば、各4×4ブロッ
クは、同じ可用性フラグを共有してもよい)は、IBC参照サンプルの可用性を追跡する
ように維持される。
【0149】
46. VPDUまたは映像ユニットの復号化を終えた後、仮想バッファに関連付けられ
た特定のサンプルは、IBC参照に利用不可能なものとしてマークされてもよい。
a. 一例において、どのサンプルが利用不可能であるかは、直近に復号化されたVP
DUの位置に依存してもよい。
b. 1つのサンプルが利用不可能とマークされた場合、このサンプルからの予測は許
可されない。
i. 代替的に、他の方法(例えば、デフォルト値を使用する)をさらに適用して、
予測子を導出し、利用不可能なサンプルを置き換えてもよい。
【0150】
47. 最近復号化されたVPDUの位置を記録し、仮想バッファに関連付けられたどの
サンプルが利用不可能であるとマークされているかを識別しやすくすることができる。
a. 一例において、VPDUを復号化する開始時に、最近復号化されたVPDUの位
置に基づいて、仮想バッファに関連付けられたいくつかのサンプルに利用不可能なマーク
を付けることができる。
i. 一例において、直近に復号化されたVPDUのピクチャ/スライス/タイル/
ブリック/他の映像処理ユニットの左上隅に対して(xPrevVPDU,yPrevV
PDU)を左上位置として表し、yPrevVPDU%(nHVPDU)が0に等しいと
、特定の位置(x,y)は、利用不可能とマークを付けることができる。
1. 一例において、xは、[xPrevVPDU-2WVPDU+2mWVPD
U)% mWVPDU,((xPrevVPDU-2WVPDU+2mWVPDU)%
mWVPDU)-1+WVPDU]のような範囲内にあってもよい。
2. 一例において、yは、[yPrevVPDU%(nHVPDU),(yPr
evVPDU%(nHVPDU))-1+HVPDU]のような範囲内にあってもよい。
3. 一例において、xは、[xPrevVPDU-2WVPDU+2mWVPD
U]%mWVPDU、((xPrevVPDU-2WVPDU+2mWVPDU)%mW
VPDU、((xPrevVPDU-2WVPDU+2mWVPDU)%mWVPDU)
-1+WVPDU]のような範囲内にあってもよく、yは、[yPrevVPDU%(n
HVPDU),(yPrevVPDU%(nHVPDU))-1+HVPDU]のような
範囲内にあってもよい。
ii. 一例において、直近に復号化されたVPDUのピクチャ/スライス/タイル
/ブリック/他の映像処理ユニットの左上隅に対して、(xPrevVPDU,yPre
vVPDU)を左上位置として表し、yPrevVPDU%(nHVPDU)が0に等し
くない場合、特定の位置(x,y)は、利用不可能とマークを付けることができる。
1. 一例において、xは、[xPrevVPDU-WVPDU+2mWVPDU
)% mWVPDU,((xPrevVPDU-WVPDU+2mWVPDU)% mW
VPDU)-1+WVPDU]のような範囲内にあってもよい。
2. 一例において、yは、[yPrevVPDU%(nHVPDU),(yPr
evVPDU%(nHVPDU))-1+HVPDU]のような範囲内にあってもよい。
3. 一例において、xは、[xPrevVPDU-WVPDU+2mWVPDU
)% mWVPDU,((xPrevVPDU-WVPDU+2mWVPDU)% mW
VPDU)-1+WVPDU]のような範囲内にあってもよく、yは、[yPrevVP
DU%(nHVPDU),(yPrevVPDU%(nHVPDU))-1+HVPDU
]のような範囲内にあってもよい。
【0151】
48. 1つのCUが複数のVPDUを含む場合、VPDUに基づくIBC参照可用性マ
ーキング処理を適用する代わりに、IBC参照可用性マーキング処理は以下のCUに従っ
てもよい。
a. 一例において、複数のVPDUを含むCUを復号化する開始時に、CU内のVP
DUを復号化する前に、各VPDUごとにIBC参照可用性マーキング処理を適用しても
よい。
b. このような場合、128×64個のIBCブロックと64×128個のIBCブ
ロックとは許可されないことがある。
i. 一例において、128×64および64×128個のCUのためのpred_
mode_ibc_flagは送信されなくてもよく、0に等しいと推測されてもよい。
【0152】
49. 参照ブロックまたはサブブロックの場合、右上隅の参照可用性ステータスをチェ
ックして、この参照ブロックに関連付けられたブロックベクトルが有効であるかどうかを
判断する必要がない場合がある。
a. 一例において、ブロックベクトルが有効であるか否かを判断して、ブロック/サ
ブブロックの左上、左下、右下の角のみをチェックする。
【0153】
50. IBCバッファサイズは、VPDUのサイズ(幅/高さはvSizeで表される
)および/またはCTB/CTUのサイズ(幅/高さはctbSizeで表される)に依
存してもよい。
a. 一例において、バッファの高さはctbSizeに等しくてもよい。
b. 一例において、バッファの幅は、min(ctbSize,64)に依存しても
よい。
i. 一例において、バッファの幅は、(128*128/vSize,min(c
tbSize,64))であってもよい。
【0154】
51. IBCバッファは、画素範囲外の値を含んでもよく、このことは、この位置がI
BC参照に利用可能でない(例えば、他のサンプルの予測に利用されない)可能性がある
ことを示す。
a. サンプル値は、サンプルが利用不可能であることを示す値に設定してもよい。
b. 一例において、この値は、-1であってもよい。
c. 一例において、この値は、[0,1<<(internal_bit_dept
h)-1]の外側の任意の値であってもよく、internal_bit_depthは
正の整数値である。
例えば、internal_bit_depthは、1つの色成分のサンプルを符号化
/復号化するために使用される内部ビット深度である。
d. 一例において、この値は、[0, 1<<(input_bit_depth)
- 1]の範囲外の任意の値であってもよく、input_bit_depthは正の整
数値である。例えば、input_bit_depthは、1つの色成分のサンプルを符
号化/復号化するために使用される入力ビット深度である。
【0155】
52. IBCバッファにおけるサンプルの可用性マーキングは、現在のブロックの位置
、現在のブロックのサイズ、CTU/CTBのサイズ、およびVPDUのサイズに依存し
てもよい。一例において、(xCb,yCb)は、ピクチャの左上に対するブロックの位
置を表し、ctbSizeは、CTU/CTBのサイズ(即ち、幅および/または高さ)
であり、vSize=min(ctbSize,64)であり、wIbcBufおよびh
IbcBufは、IBCバッファの幅および高さである。
a. 一例において、(xCb%vSize)が0に等しく、(yCb%vSize)
が0に等しい場合、IBCバッファにおける特定の位置のセットは、利用不可能とマーク
を付けることができる。
b. 一例において、現在のブロックのサイズがVPDUのサイズ、即ち、min(c
tbSize,64)より小さい場合、利用不可能とマークを付けられた領域は、VPD
Uのサイズに従ってもよい
c. 一例において、現在のブロックのサイズがVPDUのサイズより大きい場合、即
ち、min(ctbSize,64)である場合、利用不可能とマークを付けられた領域
は、CUのサイズに従ってもよい。
【0156】
53. ピクチャの左上位置に対する映像ユニット(例えば、VPDU(xV,yV))
の復号化の開始時に、IBCバッファにおける対応する位置は、画素範囲外の値に設定し
てもよい。
a. 一例において、バッファにおける位置(x%wIbcBuf,y%hIbcBu
f)を有し、x=xV、...、xV+ctbSize-1、y=yV、...、yV+
ctbSize-1を有するバッファサンプルは、値-1に設定される。wIbcBuf
およびhIbcBufは、IBCバッファの幅および高さであり、ctbSizeは、C
TU/CTBの幅である。
i. 一例において、hIbcBufはctbSizeに等しくてもよい。
【0157】
54. ビットストリーム適合性の制約は、IBCバッファにおけるサンプルの値に従っ
てもよい。
a. 一例において、IBCバッファにおける1つのブロックベクトルに関連付けられ
た1つの参照ブロックが画素範囲外の値を含む場合、このビットストリームは不正である
可能性がある。
【0158】
55. IBCバッファにおける可用性表示に基づいて、ビットストリーム適合性の制約
を設定してもよい。
a. 一例において、IBCバッファにマッピングされたいずれかの参照サンプルが、
1つのブロックを符号化/復号化するために利用不可能とマークを付けられた場合には、
このビットストリームは不正である可能性がある。
b. 一例において、singletreeが使用される場合、1つのブロックを符号
化/復号化するためにIBCバッファにマッピングされたいずれかの輝度参照サンプルが
利用不可能とマークを付けられた場合には、このビットストリームは不正である可能性が
ある。
c. 1つの適合ビットストリームは、IBCコーディングブロックの場合、関連付け
られたブロックベクトルがIBCバッファにマッピングされた1つの参照ブロックを指し
てもよく、1つのブロックを符号化/復号化するためにIBCバッファに位置する各輝度
参照サンプルには利用可能なものとしてマークを付けることを満たすことができる(例え
ば、サンプルの値は、[K0,K1]の範囲内にあり、例えば、K0が0に設定され、K
1が(1<<BitDepth-1)に設定され、BitDepthは、内部ビット深度
または入力ビット深度である)。
【0159】
56. ビットストリーム適合性の制約は、分割木のタイプおよび現在のCUのコーディ
ングのtreeTypeに依存してもよい。
a. 一例において、dualtreeが高レベル(例えば、スライス/ピクチャ/ブ
リック/タイル)で許可され、現在の映像ブロック(例えば、CU/PU/CB/PB)
がシングルツリーでコーディングされる場合、ビットストリーム制約は、IBCバッファ
にマッピングされたすべての成分の位置が利用不可能としてマークされているかどうかを
チェックする必要がある場合もある。
b. 一例において、dualtreeがハイレベル(例えば、スライス/ピクチャ/
ブリック/タイル)で許可され、現在の輝度映像ブロック(例えば、CU/PU/CB/
PB)がデュアルツリーでコーディングされている場合には、ビットストリームの制約に
より、クロマ成分のIBCバッファ内にマッピングされた位置が利用不可能としてマーク
されているかどうかを無視してもよい。
i. 代替的に、このような場合、ビットストリーム制約は、依然として、IBCバ
ッファにマッピングされたすべての成分の位置が利用不可能としてマークされているかど
うかをチェックすることもある。
c. 一例において、シングルツリーが使用される場合、ビットストリーム制約は、I
BCバッファにマッピングされたクロマ成分の位置が利用不可能であるか否かを無視する
ことができる。
【0160】
現在のVTM設計の改善
【0161】
57. IBCの予測は、再構成よりも低い精度を有していてもよい。
a. 一例において、予測値は、値clip{{p+[1<<(b-1)]}>>b,
0,(1<<bitdepth)-1}<<bに基づいており、pは、再構成されたサン
プル値であり、bは、予め規定されたビットシフト値であり、bitdepthは、予測
サンプルビットのビット深度である。
b. 一例において、予測値は、値clip{{p+[1<<(b-1)-1]}>>
b,0,(1<<bitdepth)-1}<<bに基づいており、pは、再構成された
サンプル値であり、bは、予め規定されたビットシフト値である。
c. 一例において、予測値は、値((p>>b)+(1<<(bitdepth-1
)))<<bに基づいており、ビット深度は、予測サンプルのビット深度である。
d. 一例において、予測値は、値(clip((p>>b),0,(1<<(bit
depth-b)))+(1<<(bitdepth-1)))<<bに基づいており、
ビット深度は、予測サンプルのビット深度である。
e. 一例において、予測値は、ILRが適用されるかどうかに基づいて、異なる方法
でクリップされる。
f. 上記例において、bは、ビット深度から入力サンプルビット深度を引いたものと
して再構成されてもよい。
g. 一例において、出力ビット深度/入力ビット深度/内部ビット深度と比較したビ
ット深度またはビット深度の差は、SPS/PPS/シーケンスヘッダ/ピクチャヘッダ
/スライスヘッダ/タイルグループヘッダ/タイルヘッダまたは他の種類の映像データユ
ニットにおいて信号通知されてもよい。
【0162】
58. IBCの予測の一部はより精度が低くてもよく、他の部分は再構成と同じ精度を
有する。
a. 一例において、許容される参照領域は、異なる精度(例えば、ビット深度)を有
するサンプルを含んでもよい。
b. 一例において、現在の64×64ブロックが復号化されていない他の64×64
ブロックからの参照は、精度が低く、現在の64×64ブロックからの参照は、再構成と
同じ精度を有する。
c. 一例において、復号化されている現在のCTU以外のCTUからの参照は精度が
低く、現在のCTUからの参照は再構成と同じ精度を有する。
d. 一例において、特定の色成分の集まりからの参照は精度が低く、他の色成分から
の参照は再構成と同じ精度を有する。
【0163】
59. CTUのサイズがM×Mであり、参照領域のサイズがnM×nMである場合、参
照領域は、CTUの行における最も近い利用可能なn×n CTUである。
a. 一例において、参照領域のサイズが128×128であり、CTUのサイズが6
4×64である場合、1つのCTU行における最も近い利用可能な4つのCTUをIBC
参照に使用できる。
b. 一例において、参照領域のサイズが128×128であり、CTUのサイズが3
2×32である場合、1つのCTU行における最も近い利用可能な16個のCTUをIB
C参照に使用できる。
【0164】
60. CTUのサイズがMであり、参照領域のサイズがnMである場合、参照領域は、
CTUの行/タイルにおける最も近い利用可能なn-1個のCTUである。
a. 一例において、参照領域のサイズが128×128または256×64であり、
CTUのサイズが64×64である場合、1つのCTU行における最も近い利用可能な3
つのCTUをIBC参照に使用できる。
b. 一例において、参照領域のサイズが128×128または512×32であり、
CTUのサイズが32×32である場合、1つのCTU行における最も近い利用可能な1
5個のCTUをIBC参照に使用できる。
【0165】
61. CTUのサイズがMである場合、VPDUのサイズはkMであり、参照領域のサ
イズはnMであり、参照領域はCTUの行/タイルにおける最も近い利用可能なn-k個
のCTUである。
a. 一例において、CTUのサイズは64×64であり、VPDUのサイズも64×
64であり、参照のサイズは128×128であり、1つのCTUの行における最も近い
3つのCTUをIBC参照のために使用できる。
b. 一例において、CTUのサイズは32×32であり、VPDUのサイズは64×
64であり、参照のサイズは128×128であり、1つのCTU行における最も近い(
16-4)=12個のCTUをIBC参照のために使用できる。
【0166】
62. IBCを使用して、左上隅が(x,y)であるw×hブロックの場合、参照ブロ
ックをメモリ再利用のための特定の領域から守る制約があり、wおよびhは、現在のブロ
ックの幅および高さである。
a. 一例において、CTUのサイズが128×128であり、(x,y)=(m×6
4,n×64)である場合、参照ブロックは、((m-2)×64,n×64)から始ま
る64×64の領域と重複することはできない。
b. 一例において、CTUのサイズが128×128である場合、参照ブロックは、
w×hブロックの左上隅が(x-128,y)である場合に重複することはできない。
c. 一例において、CTUのサイズが128×128である場合、(x+BVx,y
+BVy)は、左上隅は(x-128,y)であるw*hブロック内に存在することはな
く、BVxおよびBVyは、現在のブロックのブロックベクトルを表す。
d. 一例において、CTUのサイズがM×Mであり、IBCバッファサイズがk×M
×Mである場合、参照ブロックは、w×hブロックと重複することができず、左上隅は(
x-k×M,y)であり、BVxおよびBVyは、現在のブロックのブロックベクトルを
表す。
e. 一例において、CTUのサイズがM×Mであり、IBCバッファサイズがk×M
×Mである場合、(x+BVx,y+BVy)は、w×hイントラブロック内に存在する
ことはなく、左上隅は(x-k×M,y)であり、BVxおよびBVyは、現在のブロッ
クのブロックベクトルを表す。
【0167】
63. CTUのサイズがM×Mでなく、参照領域のサイズがnM×nMである場合、参
照領域は、CTUの行における最も近い利用可能なn×n-1個のCTUである。
a. 一例において、参照領域のサイズが128×128であり、CTUのサイズが6
4×64である場合、1つのCTU行における最も近い利用可能な3つのCTUをIBC
参照に使用できる。
b. 一例において、参照領域のサイズが128×128であり、CTUのサイズが3
2×32である場合、1つのCTU行における最も近い利用可能な15個のCTUをIB
C参照に使用できる。
【0168】
64. (2m*64,2n*64)から始まる64×64のブロックのCU、即ち12
8×128CTUにおける左上の64×64ブロックの場合、そのIBC予測は、((2
m-2)*64,2n*64)から始まる64×64ブロック、((2m-1)*64,
2n*64)から始まる64×64ブロック、および((2m-1)*64,(2n+1
)*64)から始まる64×64ブロック、および現在の64×64ブロックにおける再
構成サンプルから行うことができる。
【0169】
65. ((2m+1)*64、(2n+1)*64)から始まる64×64ブロックの
CU、すなわち、128×128CTUにおける右下の64×64ブロックの場合、その
IBC予測は、現在の128×128CTUからであってもよい。
【0170】
66. ((2m+1)*64,2n*64)から始まる64×64のブロックのCU、
即ち128×128CTUにおける右上の64×64ブロックの場合、そのIBC予測は
、((2m-1)*64, 2n*64)から始まる64×64ブロック、((2m-1
)*64,(2n+1)*64)から始まる64×64ブロック、および(2m*64,
2n*64)から始まる64×64ブロック、および現在の64×64ブロックにおける
再構成サンプルから行うことができる。
a. 代替的に、(2m*64,(2n+1)*64)から始まる64×64ブロック
を再構成した場合、IBC予測は、((2m-1)*64,2n*64)から始まる64
×64ブロック、(2m*64,2n*64)から始まる64×64ブロック、(2m*
64,(2n+1)*64)から始まる64×64ブロック、および現在の64×64ブ
ロックにおける再構成サンプルから行うことができる。
【0171】
67. (2m*64,(2n+1)*64)から始まる64×64ブロックのCU、即
ち128×128CTUにおける左下の64×64ブロックの場合、そのIBC予測は、
((2m-1)*64,(2n+1)*64)から始まる64×64ブロック、(2m*
64,2n*64)から始まる64×64ブロック、((2m+1)*64,2n*64
)から始まる64×64ブロック、および現在の64×64ブロックにおける再構成サン
プルから行うことができる。
a. 代替的に、((2m+1)*64,2n*64)から始まる64×64ブロック
を再構成されていない場合、IBC予測は、((2m-1)*64,2n*64)から始
まる64×64ブロック、((2m-1)*64,(2n+1)*64)から始まる64
×64ブロック、(2m*64,2n*64)から始まる64×64ブロック、および現
在の64×64ブロックにおける再構成サンプルから行うことができる。
【0172】
68. 現在のCUがどの64×64ブロックに属するかに基づいて、参照領域を調整す
ることが提案される。
a. 一例において、(x,y)から始まるCUの場合、(y>>6)&1==0のと
き、((x>>6<<6)-128,y>>6<<6)および((x>>6<<6)-6
4,y>>6<<6)から始まる2つまたは2つ前までの64×64ブロックは、IBC
モードによって参照することができる。
b. 一例において、(x,y)から始まるCUの場合、(y>>6)&1==1であ
るとき、((x>>6<<6)-64,y>>6<<6)から始まる1つの前の64×6
4ブロックは、IBCモードによって参照することができる。
【0173】
69. (x,y)から始まり、ブロックベクトル(BVx,BVy)を有するブロック
の場合、isRec(((x+BVx)>>6<<6)+128-(((y+BVy)>
>6)&1)*64+(x%64),((y+BVy)>>6<<6)+(y%64))
がtrueならば、ブロックベクトルは無効である。
a. 一例において、ブロックは輝度ブロックである。
b. 一例において、このブロックは、4:4:4フォーマットではクロマブロックで
ある。
c. 一例において、このブロックは、輝度成分およびクロマ成分の両方を含む。
【0174】
70. (x,y)から始まり、ブロックベクトル(BVx,BVy)を有する4:2:
0形式のクロマブロックの場合、isRec(((x+BVx)>>5<<5)+64-
(((y+BVy)>>5)&1)*32+(x%32),((y+BVy)>>5<<
5)+(y%32))がtrueならば、ブロックベクトルは無効である。
【0175】
71. 成分cのブロックに対してBVが無効であるかどうかの判定は、輝度サンプルの
みをチェックする代わりに、成分Xのサンプルの可用性に依存してもよい。
a. (x,y)から始まり、ブロックベクトル(BVx,BVy)を有する成分cの
ブロックの場合、isRec(c,((x+BVx)>>6<<6)+128-(((y
+BVy)>>6)&1)*64+(x%64),((y+BVy)>>6<<6)+(
y%64))がtrueであれば、ブロックベクトルは無効として扱ってもよい。
i. 一例において、このブロックは、輝度ブロックである(例えば、cは、輝度成
分であるか、またはRGBコーディングのためのG成分である)。
ii. 一例において、このブロックは、4:4:4フォーマットのクロマブロック
である(例えば、cは、cbまたはcr成分、またはRGBコーディングのためのB/R
成分である)。
iii. 一例において、例えば、このブロックは、輝度およびクロマ成分の両方を
含むなど、輝度およびクロマ成分の両方のためのサンプルの可用性がチェックしてもよい
。
b. 成分cの(x,y)から始まり、ブロックベクトル(BVx,BVy)を有する
4:2:0形式のクロマブロックの場合、isRec(c,((x+BVx)>>5<<
5)+64-(((y+BVy)>>5)&1)*32+(x%32),((y+BVy
)>>5<<5)+(y%32))がtrueである場合、ブロックベクトルは、無効と
して扱ってもよい。
c. 成分cの(x,y)から始まり、ブロックベクトル(BVx,BVy)を有する
クロマブロックまたはサブブロックの場合、クロマ成分のためのisRec(c,x+B
Vx+Chroma_CTU_size,y)がtrueである場合、ブロックベクトル
は無効として扱ってもよく、Chroma_CTU_sizeは、クロマ成分のCTUサ
イズである。
i. 一例において、4:2:0フォーマットの場合、Chroma_CTU_si
zeは64であってもよい。
ii. 一例において、クロマサブブロックは、4:2:0フォーマットの2×2ブ
ロックであってもよい。
iii. 一例において、クロマサブブロックは、4:4:4フォーマットの4×4
ブロックであってもよい。
iv. 一例において、クロマサブブロックは、輝度成分における最小CUサイズに
対応しうる。
1. 代替的に、クロマサブブロックは、クロマ成分の最小CUサイズに対応して
もよい。
【0176】
72. 上述したすべての黒丸印について、参照バッファは複数のM×Mブロック(M=
64)を含むと仮定する。しかしながら、これは、参照バッファが複数のN×M個のブロ
ックを含む(例えば、N=128、M=64)等の他の場合にも拡張できる。
【0177】
73. 上述したすべての黒丸印に対して、参照バッファが現在のブロックと同じブリッ
ク/タイル/タイルグループ/スライス内にあるべきであるという、さらなる制限を適用
してもよい。
a. 一例において、参照バッファの一部が現在のブリック/タイル/タイルグループ
/スライスの外にある場合、IBCの使用は無効にされ得る。IBC関連構文要素の信号
通知はスキップしてもよい。
b. 代替的に、参照バッファの一部が現在のブリック/タイル/タイルグループ/ス
ライスの外にある場合、IBCは1つのブロックに対して依然として有効化される可能性
があるが、1つのブロックに関連付けられたブロックベクトルは残りの参照バッファのみ
を指してもよい。
【0178】
74. IBCの参照領域として、現在のVPDUを除き、利用可能であれば、CTU/
CTB行の第1のVPDU行において、K1個の最近コーディングされたVPDUを有し
、可能であれば、CTU/CTB行の第2のVPDU行において、K2個の最近コーディ
ングされたVPDUを有することが提案される。
a. 一例において、K1は2に等しく、K2は1に等しい。
b. 一例において、上記方法は、CTU/CTBサイズが128×128であり、V
PDUサイズが64×64である場合に適用されてもよい。
c. 一例において、上記方法は、CTU/CTBサイズが64×64であり、VPD
Uサイズが64×64および/または32×32である場合に適用されてもよい。
d. 一例において、上記方法は、CTU/CTBサイズが32×32であり、VPD
Uサイズが32×32以下である場合に適用されてもよい。
【0179】
75. 上述した方法は、異なる段階で適用されてもよい。
a. 一例において、ブロックベクトル(BV)のモジュール演算(例えば、mod
b)を、BVの可用性チェック処理において呼び出して、BVが有効であるか否かを判定
してもよい。
b. 一例において、ブロックベクトル(BV)のモジュール演算(例えば、mod
b)を呼び出して、IBC仮想バッファまたは再構成ピクチャバッファにおける参照サン
プルの位置(例えば、現在のサンプルの位置およびBVのモジュール結果に基づいて)を
特定してもよい(例えば、インループフィルタリング処理の前)。
【0180】
5. 実施形態
【0181】
5.1 実施形態#1
【0182】
IBCのためのバッファの1つの実装形態を以下に説明する。
【0183】
バッファサイズは128×128である。CTU のサイズも128×128である。
1つのCTU行における第1のCTUのコーディングのために、バッファは128(8ビ
ットの映像信号の場合)で初期化される。CTU行におけるk番目のCTUをコーディン
グするために、バッファは、(k-1)番目のCTUのループフィルタリングの前に、再
構成で初期化される。
【0184】
図3は、(x,y)から始まるブロックのコーディングを例示する。
【0185】
現在のCTUに関する(x,y)から始まるブロックをコーディングする場合、ブロッ
クベクトル(BVx,BVy)=(x-x0,y-y0)をデコーダに送信し、参照ブロ
ックがIBCバッファにおける(x0,y0)からであることを示す。それぞれ、ブロッ
クの幅をwとし、ブロックの高さをhとする。ブロックのコーディングを終えるとき、I
BCバッファにおける(x,y)から始まるwxh領域は、ループフィルタリング前のブ
ロックの再構成によって更新される。
【0186】
5.2 実施形態#2
【0187】
図4は、前回コーディングされた64×64ブロックを選択するための、考えられる代
替方法を例示する。
【0188】
5.3 実施形態#3
【0189】
図5は、64×64ブロックの符号化/復号化の順序を変更することができる代替方法
を例示する。
【0190】
5.4 実施形態#4
【0191】
図8は、64×64ブロックの復号化の順序が上から下へ、左から右である場合、前回
のコーディングされた64×64ブロックを選択する別の考えられる代替方法を示す。
【0192】
5.5 実施形態#5
【0193】
図9は、前回のコーディングされた64×64ブロックを選択する別の考えられる代替
方法を示す。
【0194】
5.6 実施形態#6
【0195】
図11は、64×64ブロックの復号化の順序が左から右、上から下である場合、前回
のコーディングされた64×64ブロックを選択するための別の考えられる代替方法を示
す。
【0196】
5.7 実施形態#7
【0197】
CTUのサイズがW×Wであり、デコーダにおいて、サイズがmW×Wであり、ビット
深度がBであるIBCバッファを実装すると、以下のようになる。
【0198】
CTU行の復号化の開始時に、バッファを値(1<<(B-1))で初期化し、更新の
開始点(xb,yb)を(0,0)に設定する。
【0199】
CTUの左上隅に関する、サイズがw×hである(x,y)から始まるCUを復号化す
る場合、ビット深度をBビットに整列させた後、(xb+x,yb+y)およびw×hサ
イズから始まる領域を、CUの再構成された画素値で更新する。
【0200】
CTUを復号化した後、更新開始点(xb,yb)を((xb+W)mod mW,0
)と設定する。
【0201】
ブロックベクトル(BVx,BVy)を有するIBC CUを復号化するとき、CTU
の左上隅に関する任意の画素(x,y)について、予測信号のビット深度にビット深度整
列した後、バッファの位置((x+BVx)mod mW,(y+BVy)mode W
)からその予測を抽出する。
【0202】
一例において、Bは7または8に設定され、一方、ブロックの出力/入力ビット深度は
10に等しくてもよい。
【0203】
5.8 実施形態#8
【0204】
ピクチャの左上隅に関する(x,y)およびブロックベクトル(BVx,BVy)から
始まる輝度CUまたは結合輝度/クロマCUの場合、ブロックベクトルは、isRec(
((x+BVx)>>6<<6)+128-(((y+BVy)>>6)&1)*64+
(x%64),((y+BVy)>>6<<6)+(y%64))がtrueの場合は無
効である。
【0205】
ピクチャの左上隅に関する(x,y)およびブロックベクトル(BVx,BVy)から
始まるクロマCUの場合、ブロックベクトルは、isRec(((x+BVx)>>5<
<5)+64-(((y+BVy)>>5)&1)*32+(x%32),((y+BV
y)>>5<<5)+(y%32))がtrueの場合は無効である。
【0206】
5.9 実施形態#9
【0207】
ピクチャの左上隅に関する4:2:0形式の(x,y)から始まるクロマブロックまた
はサブブロック、およびブロックベクトル(BVx,BVy)の場合、isRec(c,
(x+BVx+64,y+BVy)がtrueで、cがクロマ成分であるとき、ブロック
ベクトルは無効である。
【0208】
ピクチャの左上隅に関する、4:4:4形式の(x,y)から始まるクロマブロックま
たはサブブロック、およびブロックベクトル(BVx,BVy)の場合、isRec(c
,(x+BVx+64,y+BVy)がtrueで、cがクロマ成分であるとき、ブロッ
クベクトルは無効である。
【0209】
5.10 実施形態#10
【0210】
ピクチャの左上隅に関する(x,y)およびブロックベクトル(BVx,BVy)から
始まる輝度CUまたは結合輝度/クロマCUの場合、ブロックベクトルは、isRec(
((x+BVx)>>6<<6)+128-(((y+BVy)>>6)&1)*64+
(x%64),((y+BVy)>>6<<6)+(y%64))がtrueの場合は無
効である。
【0211】
ピクチャの左上隅に関する、4:2:0形式の(x,y)から始まるクロマブロックま
たはサブブロック、およびブロックベクトル(BVx,BVy)の場合、isRec(c
,((x+BVx)>>5<<5)+64-(((y+BVy)>>5)&1)*32+
(x%32),((y+BVy)>>5<<5)+(y%32))がtrueで、cがク
ロマ成分であるとき、ブロックベクトルは無効である。
【0212】
5.11 実施形態#11
【0213】
本実施形態においては、現在のVPDUを除き、第1のVPDUの行にある2つの最も
コーディングされたVPDUと、第1のCTU/CTBの行の第2のVPDUの行にある
1つの最もコーディングされたVPDUとを保持する実装が強調される。
【0214】
VPDUのコーディング順が上から下へ、左から右への場合、参照領域は
図13のよう
に示される。
【0215】
VPDUのコーディング順が左から右および上から下であり、かつ、現在のVPDUが
ピクチャ境界の右側にない場合、参照領域は、
図14のように示される。
【0216】
VPDUのコーディング順が左から右および上から下であり、かつ現在のVPDUがピ
クチャ境界の右側にある場合、参照領域を
図15として示すことができる。
【0217】
輝度ブロック(x,y)のサイズがw×hだとすると、ブロックベクトル(BVx,B
Vy)は有効であるか、どうかは以下の条件をチェックすることによって知ることができ
る。
【0218】
isRec(((x+BVx+128)>>6<<6)-(refy&0x40)+(
x%64),((y+BVy)>>6<<6)+(refy>>6==y>>6)?(y
%64):0)。ここでは、refy=(y&0x40)?(y+BVy):(y+BV
y+w-1)。
【0219】
上記関数がtrueを返す場合、ブロックベクトル(BVx,BVy)は無効であり、
そうでない場合、ブロックベクトルは有効であり得る。
【0220】
5.12 実施形態#12
【0221】
CTUのサイズが192×128である場合、サイズが192×128の仮想バッファ
が維持されてIBCの参照サンプルを追跡する。
【0222】
ピクチャの左上隅に対するサンプル(x,y)は、バッファの左上隅に対する位置(x
%192,y%128)に関連付けられる。以下のステップは、IBC参照のために仮想
バッファに関連付けられたサンプルの可用性をどのようにマークするかを示す。
【0223】
ピクチャの左上隅に対する位置(xPrevVPDU,yPrevVPDU)を記録し
て、直近に復号化されたVPDUの左上のサンプルを表す。
1) 1つのVPDU行の復号化の開始時に、バッファのすべての位置が利用不可能と
マークされる。(xPrevVPDU,yPrevVPDU)は、(0,0)として設定
される。
2) VPDUの第1のCUの復号化開始時に、x=(xPrevVPDU-2WVP
DU+2mWVPDU)%(mWVPDU),..,((xPrevVPDU-2WVP
DU+2mWVPDU)%(mWVPDU))-1+WVPDU;およびy=yPre
vVPDU%(nHVPDU),..,(yPrevVPDU%(nHVPDU))-1
+HVPDUの場合の位置(x,y)を利用不可能としてマークしてもよい。そして、(
xPrevVPDU,yPrevVPDU)を(xCU,yCU)として、即ち、CUの
ピクチャに対する左上位置に設定する。
3) 1つのCUを復号化した後、x=xCU%(mWVPDU),...,(xCU
+CU_width-1)%(mWVPDU)およびy=yCU%(nHVPDU),.
..,(yCU+CU_height-1)%(nHVPDU)の場合の位置(x,y)
は、利用可能としてマークされる。
4)ブロックベクトル(xBV,yBV)を有するIBCCUの場合、x=(xCU+
xBV)%(mWVPDU),...,(xCU+xBV+CU_width-1)%(
mWVPDU)およびy=(yCU+yBV)%(nHVPDU),...,(yCU+
yBV+CU_height-1)%(nHVPDU)の場合の位置(x,y)は、利用
不可能としてマークされ、ブロックベクトルは、無効であると考えられる。
【0224】
図16は、ピクチャにおけるバッファ状態をVPDUの復号化状態とともに示す。
【0225】
5.13 実施形態#13
【0226】
CTUのサイズが128×128であるか、またはCTUのサイズがVPDUのサイズ
よりも大きい(例えば、現在の設計においては、64×64)場合、またはCTUのサイ
ズがVPDUのサイズよりも大きい(例えば、現在の設計においては、64×64)場合
には、サイズ192×128の仮想バッファを維持してIBCのための参照サンプルを追
跡する。以下、a<0の場合、(a%b)をfloor(a/b)*bとして定義し
、floor(c)は、c以下の最大の整数を返す。
【0227】
ピクチャの左上隅に対するサンプル(x,y)は、バッファの左上隅に対する位置(x
%192,y%128)に関連付けられる。以下のステップは、IBC参照のために仮想
バッファに関連付けられたサンプルの可用性をどのようにマークするかを示す。
【0228】
ピクチャの左上隅に対する位置(xPrevVPDU,yPrevVPDU)を記録し
て、直近に復号化されたVPDUの左上のサンプルを表す。
1) 1つのVPDU行の復号化の開始時に、バッファのすべての位置が利用不可能と
マークされる。(xPrevVPDU,yPrevVPDU)は、(0,0)として設定
される。
2) VPDUの第1のCUの復号化の始めに、
a. yPrevVPDU%64が0に等しい場合、x=(xPrevVPDU-1
28)%192,..,((xPrevVPDU-128)%192)+63;およびy
=yPrevVPDU%128,..,(yPrevVPDU%128)+63の位置(
x,y)は、利用不可能としてマークされる。そして、(xPrevVPDU,yPre
vVPDU)を(xCU,yCU)として、即ち、CUのピクチャに対する左上位置に設
定する。
b. そうでない場合、x=(xPrevVPDU-64)%192,..,((x
PrevVPDU-64)%192)+63;およびy=yPrevVPDU%128,
..,(yPrevVPDU%128)+63の位置(x,y)は、利用不可能としてマ
ークされる。そして、(xPrevVPDU,yPrevVPDU)を(xCU,yCU
)として、即ち、CUのピクチャに対する左上位置に設定する。
3) 1つのCUを復号化した後、x=xCU%192,...,(xCU+CU_w
idth-1)%192およびy=yCU%128,...,(yCU+CU_heig
ht-1)%128の場合の位置(x,y)は、利用可能としてマークされる。
4) ブロックベクトル(xBV,yBV)を有するIBCCUの場合、x=(xCU
+xBV)%192,...,(xCU+xBV+CU_width-1)%192およ
びy=(yCU+yBV)%128,...,(yCU+yBV+CU_height-
1)%128の場合の位置(x,y)は、利用不可能としてマークされ、ブロックベクト
ルは、無効であると考えられる。
【0229】
CTUのサイズがS×Sである場合、Sが128に等しくないので、Wbufを128
*128/Sに等しくする。サイズWbufxSの仮想バッファが維持して、IBCの参
照サンプルを追跡する。この場合、VPDUのサイズはCTUのサイズに等しい。
【0230】
ピクチャの左上隅に対する位置(xPrevVPDU,yPrevVPDU)を記録し
て、直近に復号化されたVPDUの左上のサンプルを表す。
1) 1つのVPDU行の復号化の開始時に、バッファのすべての位置が利用不可能と
マークされる。(xPrevVPDU,yPrevVPDU)は、(0,0)として設定
される。
2) VPDUの第1のCUの復号化の開始時に、x=(xPrevVPDU-Wbu
f*S)%S,..,((xPrevVPDU-Wbuf*S)%S)+S-1;および
y=yPrevVPDU%S,..,(yPrevVPDU%S)+S-1の場合の位置
(x,y)は、利用不可能であるとマークされる。そして、(xPrevVPDU,yP
revVPDU)を(xCU,yCU)として、即ち、CUのピクチャに対する左上位置
に設定する。
3) 1つのCUを復号化した後、x=xCU%(Wbuf),...,(xCU+C
U_width-1)%(Wbuf)およびy=yCU%S,...,(yCU+CU_
height-1)%Sである場合の位置(x,y)は、利用可能としてマークされる。
4) ブロックベクトル(xBV,yBV)を有するIBCCUの場合、x=(xCU
+xBV)%(Wbuf),...,(xCU+xBV+CU_width-1)%(W
buf)およびy=(yCU+yBV)%S,...,(yCU+yBV+CU_hei
ght-1)%Sの場合の位置(x,y)は、利用不可能としてマークされ、ブロックベ
クトルは、無効であると考えられる。
【0231】
5.14 実施形態#14
【0232】
CTUのサイズが128×128であるか、またはCTUのサイズがVPDUのサイズ
よりも大きい(例えば、現在の設計においては、64×64)場合、またはCTUのサイ
ズがVPDUのサイズよりも大きい(例えば、現在の設計においては、64×64)場合
には、サイズ256×128の仮想バッファを維持してIBCのための参照サンプルを追
跡する。以下、a<0の場合、(a%b)をfloor(a/b)*bとして定義し、f
loor(c)は、c以下の最大の整数を返す。
【0233】
ピクチャの左上隅に対するサンプル(x,y)は、バッファの左上隅に対する位置(x
%256,y%128)に関連付けられる。以下のステップは、IBC参照のために仮想
バッファに関連付けられたサンプルの可用性をどのようにマークするかを示す。
【0234】
ピクチャの左上隅に対する位置(xPrevVPDU,yPrevVPDU)を記録し
て、直近に復号化されたVPDUの左上のサンプルを表す。
1) 1つのVPDU行の復号化の開始時に、バッファのすべての位置が利用不可能と
マークされる。(xPrevVPDU,yPrevVPDU)は、(0,0)として設定
される。
2) VPDUの第1のCUの復号化の始めに、
a. yPrevVPDU%64が0に等しい場合、x=(xPrevVPDU-1
28)%256,..,((xPrevVPDU-128)%256)+63;およびy
=yPrevVPDU%128,..,(yPrevVPDU%128)+63の位置(
x,y)は、利用不可能としてマークされる。そして、(xPrevVPDU,yPre
vVPDU)を(xCU,yCU)として、即ち、CUのピクチャに対する左上位置に設
定する。
b. そうでない場合、x=(xPrevVPDU-64)%256,..,((x
PrevVPDU-64)%256)+63;およびy=yPrevVPDU%128,
..,(yPrevVPDU%128)+63の位置(x,y)は、利用不可能としてマ
ークされる。そして、(xPrevVPDU,yPrevVPDU)を(xCU,yCU
)として、即ち、CUのピクチャに対する左上位置に設定する。
3) 1つのCUを復号化した後、x=xCU%256,...,(xCU+CU_w
idth-1)%256およびy=yCU%128,...,(yCU+CU_heig
ht-1)%128の場合の位置(x,y)は、利用可能としてマークされる。
4) ブロックベクトル(xBV,yBV)を有するIBCCUの場合、x=(xCU
+xBV)%256,...,(xCU+xBV+CU_width-1)%256およ
びy=(yCU+yBV)%128,...,(yCU+yBV+CU_height-
1)%128の場合の位置(x,y)は、利用不可能としてマークされ、ブロックベクト
ルは、無効であると考えられる。
【0235】
CTUのサイズが128×128でない、または64×64未満である、または64×
64未満である場合、前の実施例、すなわち、実施形態#14と同じ処理が適用される。
【0236】
5.15 実施形態#15
【0237】
IBC参照可用性マーキング処理を以下のように説明する。この文書では、その変更を
太字、下線、イタリック体で示している。
【0238】
【0239】
【0240】
【0241】
7.3.7.5 コーディングユニット構文
【0242】
【0243】
8.6.2 IBCブロックの動きベクトル成分の導出処理
【0244】
8.6.2.1 一般
【0245】
【0246】
8.6.3 ibcブロックの復号化処理
【0247】
8.6.3.1 一般
【0248】
この処理は、ibc予測モードでコーディングされたコーディングユニットを復号化す
るときに呼び出される。
【0249】
【0250】
xSbIdx=0..numSbX-1,およびySbIdx=0..numSbY-
1である場合のサブブロックインデックス(xSbIdx,ySbIdx)の各コーディ
ングサブブロックに対して、以下が適用される。
- 現在のピクチャの左上の輝度サンプルに対する現在のコーディングサブブロックの左
上のサンプルを規定する輝度位置(xSb,ySb)は、以下のように導出される。
(xSb,ySb)=(xCb+xSbIdx*sbWidth,yCb+ySbId
x*sbHeight) (8-913)
【0251】
【0252】
【0253】
【0254】
8.7.5 ピクチャ再構成処理
【0255】
8.7.5.1 一般
【0256】
この処理への入力は以下の通りである。
- 現在のピクチャ成分の左上のサンプルに対する現在のブロックの左上のサンプルを規
定する位置(xCurr,yCurr)、
- 現在のブロックの幅および高さをそれぞれ規定する変数nCurrSwおよびnCu
rrSh、
- 現在のブロックの色成分を規定する変数cIdx、
- 現在のブロックの予測サンプルを規定するan(nCurrSw)×(nCurrS
h) array predSamples、
- 現在のブロックの残差サンプル規定するan(nCurrSw)×(nCurrSh
) array 。
【0257】
【0258】
5.16 実施形態#16
【0259】
以下の変更を除き、上記実施形態と同じである。
【0260】
【0261】
【0262】
【0263】
5.17 実施形態#17
【0264】
本明細書では、一部の例における変更は、太字、下線を付したテキストで示される。
【0265】
7.3.7 スライスデータ構文
【0266】
7.3.7.1 一般スライスデータ構文
【0267】
【0268】
7.4.8.5 コーディングユニット構文
【0269】
以下のすべての条件がtrueである場合、NumHmvpSmrIbcCandをN
umHmvpIbcCandに等しく設定し、HmvpSmrIbcCandList[
i]をHmvpIbcCandList[i]に等しく設定してi=0..NumHmv
pIbcCand-1とすることにより、共有したマージ候補リスト領域に対する履歴に
基づく動きベクトル予測子は更新される。
- IsInSmr[x0][y0]はTRUEに等しい。
- SmrX[x0][y0]はx0に等しい。
- SmrY[x0][y0]はy0に等しい。
【0270】
x=x0..x0+cbWidth-1およびy=y0..y0+cbHeight-
1に対して、以下の通り割り当てをする。
CbPosX[x][y]=x0 (7-135)
CbPosY[x][y]=y0 (7-136)
CbWidth[x][y]=cbWidth (7-137)
CbHeight[x][y]=cbHeight (7-138)
【0271】
【0272】
8.6.2 IBCブロックの動きベクトル成分の導出処理
【0273】
8.6.2.1一般
【0274】
この処理への入力は以下の通りである。
- 現在のピクチャの左上の輝度サンプルに対する現在の輝度コーディングブロックの左
上のサンプルの輝度位置(xCb,yCb)、
- 輝度サンプルにおける現在のコーディングブロックの幅を規定する変数cbWidt
h、
- 輝度サンプルにおける現在のコーディングブロックの高さを規定する変数cbHei
ght。
【0275】
この処理の出力は以下の通りである。
- 1/16分数サンプル精度mvLにおける輝度動きベクトル。
【0276】
輝度動きベクトルmvLは、以下のように導出される。
- 8.6.2.2項で規定されたIBC輝度動きベクトル予測の導出処理は、輝度位置
(xCb,yCb)、変数cbWidthおよびcbHeightを入力として呼び出さ
れ、その出力は輝度動きベクトルmvLである。
- general_merge_flag[xCb][yCb]が0の場合、以下が適
用される
1. 変数mvdは、以下のように導出される。
mvd[0]=MvdL0[xCb][yCb][0] (8-883)
mvd[1]=MvdL0[xCb][yCb][1] (8-884)
2. 8.5.2.14項で規定されるような動きベクトルの丸め処理は、mvLに等
しく設定されたmvXセット、MvShift+2に等しく設定されたrightShi
ftセット、MvShift+2に等しく設定されたleftShiftセットを入力と
して呼び出され、丸められたmvLが出力となる。
3. 輝度動きベクトルmvLは、以下のように修正される。
u[0]=(mvL[0]+mvd[0]+218)% 218 (8-885
)
mvL[0]=(u[0]>=217)?(u[0]-218):u[0](8-8
86)
u[1]=(mvL[1]+mvd[1]+218)% 218 (8-887
)
mvL[1]=(u[1]>=217)?(u[1]-218):u[1] (
8-888)
注1- 上記で指定したmvL[0]およびmvL[1]の結果値は、常に-217
~217-1の範囲に含まれる。
【0277】
【0278】
8.7.5 ピクチャ再構成処理
【0279】
8.7.5.1 一般
【0280】
この処理への入力は以下の通りである。
- 現在のピクチャ成分の左上のサンプルに対する現在のブロックの左上のサンプルを規
定する位置(xCurr,yCurr)、
- 現在のブロックの幅および高さをそれぞれ規定する変数nCurrSwおよびnCu
rrSh、
- 現在のブロックの色成分を規定する変数cIdx、
- 現在のブロックの予測サンプルを規定するan(nCurrSw)×(nCurrS
h)array predSamples、
- 現在のブロックの残差サンプル規定するan(nCurrSw)×(nCurrSh
)array predSamples。
【0281】
【0282】
色成分cIdxの値に基づいて、以下の割り当てが行われる。
- cIdxが0に等しい場合、recSamplesは再構成ピクチャサンプルアレイ
SLに対応し、関数clipCidx1はClip1Yに対応する。
- そうでない場合、cIdxが1に等しければ、tuCbfChromaはtu_cb
f_cb[xCurr][yCurr]に等しく設定され、recSamplesは再構
成されたクロマサンプル配列SCbに対応し、関数clipCidx1はClip1Cに
対応する。
- そうでない場合(cIdxが2に等しい)、tuCbfChromaをtu_cbf
_cr[xCurr][yCurr]に等しく設定し、recSamplesは再構成さ
れたクロマサンプル配列SCrに対応し、関数clipCidx1はClip1Cに対応
する。
【0283】
slice_lmcs_enabled_flagの値によって、以下が適用される。
- slice_lmcs_enabled_flagが0に等しい場合、位置(xCu
rr,yCurr)における再構成サンプルrecSamplesの(nCurrSw)
×(nCurrSh)ブロックは、i=0..nCurrSw-1,j=0..nCur
rSh-1に対しては下記のように導出する。
recSamples[xCurr+i][yCurr+j]=clipCidx1
(predSamples[i][j]+resSamples[i][j]) (8
-992)
- そうでない場合(slice_lmcs_enabled_flagが1に等しい)
、以下が適用される。
- cIdxが0に等しい場合、以下が適用される。
- 8.7.5.2項で規定されるような輝度サンプルのマッピング処理を伴うピク
チャ再構成は、輝度位置(xCurr,yCurr)、ブロック幅nCurrSwおよび
高さnCurrSh、予測輝度サンプル配列preSamples、および残差輝度サン
プル配列resSamplesを入力として呼び出され、出力は再構成輝度サンプル配列
reCamplesとなる。
-それ以外の場合(cIdxが0より大きい場合)は,8.7.5.3項で規定されて
いるクロマサンプルの輝度依存クロマ残差スケーリング処理によるピクチャ再構成が、ク
ロマの位置(xCurr,yCurr)、変換ブロックの幅nCurrSwおよび高さn
CurrSh、現在のクロマ変換ブロックのコーディングブロックフラグtuCbfCh
roma、予測クロマサンプル配列 predSamples、残差クロマサンプル配列
resSamplesを入力として呼び出され、再構成されたクロマサンプル配列rec
Samplesを出力とする。
【0284】
【0285】
5.18 実施形態#18
【0286】
本明細書では、いくつかの例における変更を、太字、下線、イタリック体で示している
。
【0287】
7.3.7 スライスデータ構文
【0288】
7.3.7.1 一般スライスデータ構文
【0289】
【0290】
7.4.8.5 コーディングユニット構文
【0291】
以下のすべての条件がtrueである場合、NumHmvpSmrIbcCandをN
umHmvpIbcCandに等しく設定し、HmvpSmrIbcCandList[
i]をHmvpIbcCandList[i]に等しく設定してi=0..NumHmv
pIbcCand-1とすることにより、共有したマージ候補リスト領域に対する履歴に
基づく動きベクトル予測子は更新される。
- IsInSmr[x0][y0]はTRUEに等しい。
- SmrX[x0][y0]はx0に等しい。
- SmrY[x0][y0]はy0に等しい。
【0292】
x=x0..x0+cbWidth-1およびy=y0..y0+cbHeight-
1に対して、以下の通り割り当てをする。
CbPosX[x][y]=x0 (7-135)
CbPosY[x][y]=y0 (7-136)
CbWidth[x][y]=cbWidth (7-137)
CbHeight[x][y]=cbHeight (7-138)
【0293】
【0294】
【0295】
【0296】
8.6.2 IBCブロックの動きベクトル成分の導出処理
【0297】
8.6.2.1 一般
【0298】
この処理への入力は以下の通りである。
- 現在のピクチャの左上の輝度サンプルに対する現在の輝度コーディングブロックの左
上のサンプルの輝度位置(xCb,yCb)、
- 輝度サンプルにおける現在のコーディングブロックの幅を規定する変数cbWidt
h、
- 輝度サンプルにおける現在のコーディングブロックの高さを規定する変数cbHei
ght。
【0299】
この処理の出力は以下の通りである。
- 1/16分数サンプル精度mvLにおける輝度動きベクトル。
【0300】
輝度動きベクトルmvLは、以下のように導出される。
- 8.6.2.2項で規定されたIBC輝度動きベクトル予測の導出処理は、輝度位置
(xCb,yCb)、変数cbWidthおよびcbHeightを入力として呼び出さ
れ、その出力は輝度動きベクトルmvLである。
- general_merge_flag[xCb][yCb]が0と等しい場合、以
下が適用される。
4. 変数mvdは、以下のように導出される。
mvd[0]=MvdL0[xCb][yCb][0] (8-883)
mvd[1]=MvdL0[xCb][yCb][1] (8-884)
5. 8.5.2.14項で規定されるような動きベクトルの丸め処理は、mvLに等
しく設定されたmvXセット、MvShift+2に等しく設定されたrightShi
ftセット、MvShift+2に等しく設定されたleftShiftセットを入力と
して呼び出され、丸められたmvLが出力となる。
6. 輝度動きベクトルmvLは、以下のように修正される。
u[0]=(mvL[0]+mvd[0]+218)% 218 (8-885
)
mvL[0]=(u[0]>=217)?(u[0]-218):u[0] (
8-886)
u[1]=(mvL[1]+mvd[1]+218)% 218 (8-887
)
mvL[1]=(u[1]>=217)?(u[1]-218):u[1] (
8-888)
注1- 上記で指定したmvL[0]およびmvL[1]の結果値は、常に-217
~217-1の範囲に含まれる。
【0301】
8.6.2.6項で規定されるような履歴に基づく動きベクトル予測子リストの更新処
理は、輝度動きベクトルmvLを使用して呼び出される。
【0302】
【0303】
8.6.3 ibcブロックの復号化処理
【0304】
8.6.3.1 一般
【0305】
この処理は、ibc予測モードでコーディングされたコーディングユニットを復号化す
るときに呼び出される。
【0306】
【0307】
この処理の出力は以下の通りである。
- 予測サンプルの配列predSamples。
【0308】
【0309】
8.7.5ピクチャ再構成処理
【0310】
8.7.5.1一般
【0311】
この処理への入力は以下の通りである。
- 現在のピクチャ成分の左上のサンプルに対する現在のブロックの左上のサンプルを規
定する位置(xCurr,yCurr)、
- 現在のブロックの幅および高さをそれぞれ規定する変数nCurrSwおよびnCu
rrSh、
- 現在のブロックの色成分を規定する変数cIdx、
- 現在のブロックの予測サンプルを規定するan(nCurrSw)×(nCurrS
h)array predSamples、
- 現在のブロックの残差サンプル規定するan(nCurrSw)×(nCurrSh
)array。
【0312】
【0313】
色成分cIdxの値に基づいて、以下の割り当てが行われる。
- cIdxが0に等しい場合、recSamplesは再構成ピクチャサンプルアレイ
SLに対応し、関数clipCidx1はClip1Yに対応する。
- そうでない場合、cIdxが1に等しければ、tuCbfChromaはtu_cb
f_cb[xCurr][yCurr]に等しく設定され、recSamplesは再構
成されたクロマサンプル配列SCbに対応し、関数clipCidx1はClip1Cに
対応する。
- そうでない場合、(cIdxが2に等しければ、tuCbfChromaはtu_c
bf_cb[xCurr][yCurr]に等しく設定され、recSamplesは再
構成されたクロマサンプル配列SCrに対応し、関数clipCidx1はClip1C
に対応する。
【0314】
slice_lmcs_enabled_flagの値によって、以下が適用される。
- slice_lmcs_enabled_flagが0に等しい場合、位置(xCu
rr,yCurr)における再構成サンプルrecSamplesの(nCurrSw)
x(nCurrSh)ブロックは、i=0..nCurrSw-1,j=0..nCur
rSh-1に対しては下記のように導出する。
recSamples[xCurr+i][yCurr+j]=clipCidx1(
predSamples[i][j]+resSamples[i][j]) (8-
992)
- そうでない場合(slice_lmcs_enabled_flagが1に等しい)
、以下が適用される。
- cIdxが0に等しい場合、以下が適用される。
- 8.7.5.2項で規定されるような輝度サンプルのマッピング処理を伴うピク
チャ再構成は、輝度位置(xCurr,yCurr)、ブロック幅nCurrSwおよび
高さnCurrSh、予測輝度サンプル配列preSamples、および残差輝度サン
プル配列resSamplesを入力として呼び出され、出力は再構成輝度サンプル配列
reCamplesとなる。
- それ以外の場合(cIdxが0より大きい場合)は,8.7.5.3項で規定され
ているクロマサンプルの輝度依存クロマ残差スケーリング処理によるピクチャ再構成が、
クロマの位置(xCurr,yCurr)、変換ブロックの幅nCurrSwおよび高さ
nCurrSh、現在のクロマ変換ブロックのコーディングブロックフラグtuCbfC
hroma、予測クロマサンプル配列predSamples、残差クロマサンプル配列
resSamplesを入力として呼び出され、再構成されたクロマサンプル配列rec
Samplesを出力とする。
【0315】
【0316】
5.19 実施形態#19
【0317】
本明細書では、一部の例における変更は、太字、下線を付したテキストで示される。
【0318】
7.3.7 スライスデータ構文
【0319】
7.3.7.1 一般スライスデータ構文
【0320】
【0321】
7.4.8.5 コーディングユニット構文
【0322】
以下のすべての条件がtrueである場合、NumHmvpSmrIbcCandをN
umHmvpIbcCandに等しく設定し、HmvpSmrIbcCandList[
i]をHmvpIbcCandList[i]に等しく設定してi=0..NumHmv
pIbcCand-1とすることにより、共有したマージ候補リスト領域に対する履歴に
基づく動きベクトル予測子は更新される。
- IsInSmr[x0][y0]は、TRUEに等しい。
- SmrX[x0][y0]は、x0に等しい。
- SmrY[x0][y0]は、y0に等しい。
【0323】
x=x0..x0+cbWidth-1およびy=y0..y0+cbHeight-1
に対して、以下の通り割り当てをする。
CbPosX[x][y]=x0 (7-135)
CbPosY[x][y]=y0 (7-136)
CbWidth[x][y]=cbWidth (7-137)
CbHeight[x][y]=cbHeight (7-138)
【0324】
【0325】
【0326】
【0327】
8.6.2 IBCブロックの動きベクトル成分の導出処理
【0328】
8.6.2.1 一般
【0329】
この処理への入力は以下の通りである。
- 現在のピクチャの左上の輝度サンプルに対する現在の輝度コーディングブロックの左
上のサンプルの輝度位置(xCb,yCb)、
- 輝度サンプルにおける現在のコーディングブロックの幅を規定する変数cbWidt
h、
- 輝度サンプルにおける現在のコーディングブロックの高さを規定する変数cbHei
ght。
【0330】
この処理の出力は以下の通りである。
- 1/16分数サンプル精度mvLにおける輝度動きベクトル。
【0331】
輝度動きベクトルmvLは、以下のように導出される。
- 8.6.2.2項で規定されたIBC輝度動きベクトル予測の導出処理は、輝度位置
(xCb,yCb)、変数cbWidthおよびcbHeightを入力として呼び出さ
れ、その出力は輝度動きベクトルmvLである。
- general_merge_flag[xCb][yCb]が0の場合、以下が適
用される。
7. 変数mvdは、以下のように導出される。
mvd[0]=MvdL0[xCb][yCb][0] (8-883)
mvd[1]=MvdL0[xCb][yCb][1] (8-884)
8. 8.5.2.14項で規定されるような動きベクトルの丸め処理は、mvLに等
しく設定されたmvXセット、MvShift+2に等しく設定されたrightShi
ftセット、MvShift+2に等しく設定されたleftShiftセットを入力と
して呼び出され、丸められたmvLが出力となる。
9. 輝度動きベクトルmvLは、以下のように修正される。
u[0]=(mvL[0]+mvd[0]+218)% 218 (8-885
)
mvL[0]=(u[0]>=217)?(u[0]-218):u[0] (
8-886)
u[1]=(mvL[1]+mvd[1]+218)% 218 (8-887
)
mvL[1]=(u[1]>=217)?(u[1]-218):u[1] (
8-888)
注1- 上記で指定したmvL[0]およびmvL[1]の結果値は、常に-217
~217-1の範囲に含まれる。
【0332】
8.6.2.6項で規定されるような履歴に基づく動きベクトル予測子リストの更新処
理は、輝度動きベクトルmvLを使用して呼び出される。
【0333】
【0334】
8.6.3 ibcブロックの復号化処理
【0335】
8.6.3.1 一般
【0336】
この処理は、ibc予測モードでコーディングされたコーディングユニットを復号化す
るときに呼び出される。
【0337】
【0338】
【0339】
【0340】
8.7.5 ピクチャ再構成処理
【0341】
8.7.5.1 一般
【0342】
この処理への入力は以下の通りである。
- 現在のピクチャ成分の左上のサンプルに対する現在のブロックの左上のサンプルを規
定する位置(xCurr,yCurr)、
- 現在のブロックの幅および高さをそれぞれ規定する変数nCurrSwおよびnCu
rrSh、
- 現在のブロックの色成分を規定する変数cIdx、
- 現在のブロックの予測サンプルを規定するan(nCurrSw)×(nCurrS
h)array predSamples、
- 現在のブロックの残差サンプル規定するan(nCurrSw)×(nCurrSh
)array。
【0343】
この処理の出力は、再構成されたピクチャサンプルアレイrecSamplesおよび
IBCバッファアレイibcBufL、ibcBufCb、ibcBufCrである。
【0344】
色成分cIdxの値に基づいて、以下の割り当てが行われる。
- cIdxが0に等しい場合、recSamplesは再構成ピクチャサンプルアレイ
SLに対応し、関数clipCidx1はClip1Yに対応する。
- そうでない場合、cIdxが1に等しければ、tuCbfChromaはtu_cb
f_cb[xCurr][yCurr]に等しく設定され、recSamplesは再構
成されたクロマサンプル配列SCbに対応し、関数clipCidx1はClip1Cに
対応する。
- そうでない場合、(cIdxが2に等しければ、tuCbfChromaはtu_c
bf_cb[xCurr][yCurr]に等しく設定され、recSamplesは再
構成されたクロマサンプル配列SCrに対応し、関数clipCidx1はClip1C
に対応する。
【0345】
slice_lmcs_enabled_flagの値によって、以下が適用される。
-slice_lmcs_enabled_flagが0に等しい場合、位置(xCur
r,yCurr)における再構成サンプルrecSamplesの(nCurrSw)×
(nCurrSh)ブロックは、i=0..nCurrSw-1,j=0..nCurr
Sh-1に対しては下記のように導出する。
recSamples[xCurr+i][yCurr+j]=clipCidx1(
predSamples[i][j]+resSamples[i][j]) (8-
992)
- そうでない場合(slice_lmcs_enabled_flagが1に等しい)
、以下が適用される。
- cIdxが0に等しい場合、以下が適用される。
- 8.7.5.2項で規定されるような輝度サンプルのマッピング処理を伴うピク
チャ再構成は、輝度位置(xCurr,yCurr)、ブロック幅nCurrSwおよび
高さnCurrSh、予測輝度サンプル配列preSamples、および残差輝度サン
プル配列resSamplesを入力として呼び出され、出力は再構成輝度サンプル配列
reCamplesとなる。
- それ以外の場合(cIdxが0より大きい場合)、8.7.5.3項で規定されて
いるクロマサンプルの輝度依存クロマ残差スケーリング処理によるピクチャ再構成が、ク
ロマの位置(xCurr,yCurr)、変換ブロックの幅nCurrSwおよび高さn
CurrSh、現在のクロマ変換ブロックのコーディングブロックフラグtuCbfCh
roma、予測クロマサンプル配列 predSamples、残差クロマサンプル配列
resSamplesを入力として呼び出され、再構成されたクロマサンプル配列rec
Samplesを出力とする。
【0346】
【0347】
5.20 実施形態#20
【0348】
本明細書では、いくつかの例における変更を、太字、下線、イタリック体で示している
。
【0349】
7.3.7 スライスデータ構文
【0350】
7.3.7.1 一般スライスデータ構文
【0351】
【0352】
7.4.8.5 コーディングユニット構文
【0353】
以下のすべての条件がtrueである場合、NumHmvpSmrIbcCandをN
umHmvpIbcCandに等しく設定し、HmvpSmrIbcCandList[
i]をHmvpIbcCandList[i]に等しく設定してi=0..NumHmv
pIbcCand-1とすることにより、共有したマージ候補リスト領域に対する履歴に
基づく動きベクトル予測子は更新される。
- IsInSmr[x0][y0]は、TRUEに等しい。
- SmrX[x0][y0]は、x0に等しい。
- SmrY[x0][y0]は、y0に等しい。
【0354】
x=x0..x0+cbWidth-1およびy=y0..y0+cbHeight-
1に対して、以下の通り割り当てをする。
CbPosX[x][y]=x0 (7-135)
CbPosY[x][y]=y0 (7-136)
CbWidth[x][y]=cbWidth (7-137)
CbHeight[x][y]=cbHeight (7-138)
【0355】
【0356】
【0357】
【0358】
8.6.2 IBCブロックの動きベクトル成分の導出処理
【0359】
8.6.2.1 一般
【0360】
この処理への入力は以下の通りである。
- 現在のピクチャの左上の輝度サンプルに対する現在の輝度コーディングブロックの左
上のサンプルの輝度位置(xCb,yCb)、
- 輝度サンプルにおける現在のコーディングブロックの幅を規定する変数cbWidt
h、
- 輝度サンプルにおける現在のコーディングブロックの高さを規定する変数cbHei
ght。
【0361】
この処理の出力は以下の通りである。
- 1/16分数サンプル精度mvLにおける輝度動きベクトル。
【0362】
輝度動きベクトルmvLは、以下のように導出される。
- 8.6.2.2項で規定されたIBC輝度動きベクトル予測の導出処理は、輝度位置
(xCb,yCb)、変数cbWidthおよびcbHeightを入力として呼び出さ
れ、その出力は輝度動きベクトルmvLである。
- general_merge_flag[xCb][yCb]が0と等しい場合、以
下が適用される。
10. 変数mvdは、以下のように導出される。
mvd[0]=MvdL0[xCb][yCb][0] (8-883)
mvd[1]=MvdL0[xCb][yCb][1] (8-884)
11. 8.5.2.14項で規定されるような動きベクトルの丸め処理は、mvLに
等しく設定されたmvXセット、MvShift+2に等しく設定されたrightSh
iftセット、MvShift+2に等しく設定されたleftShiftセットを入力
として呼び出され、丸められたmvLが出力となる。
12. 輝度動きベクトルmvLは、以下のように修正される。
u[0]=(mvL[0]+mvd[0]+218)% 218 (8-885
)
mvL[0]=(u[0]>=217)?(u[0]-218):u[0] (
8-886)
u[1]=(mvL[1]+mvd[1]+218)% 218 (8-887
)
mvL[1]=(u[1]>=217)?(u[1]-218):u[1] (
8-888)
注1- 上記で指定したmvL[0]およびmvL[1]の結果値は、常に-217
~217-1の範囲に含まれる。
【0363】
8.6.2.6項で規定されるような履歴に基づく動きベクトル予測子リストの更新処
理は、輝度動きベクトルmvLを使用して呼び出される。
【0364】
【0365】
8.6.3 ibcブロックの復号化処理
【0366】
8.6.3.1 一般
【0367】
この処理は、ibc予測モードでコーディングされたコーディングユニットを復号化す
るときに呼び出される。
【0368】
【0369】
【0370】
【0371】
8.7.5 ピクチャ再構成処理
【0372】
8.7.5.1 一般
【0373】
この処理への入力は以下の通りである。
- 現在のピクチャ成分の左上のサンプルに対する現在のブロックの左上のサンプルを規
定する位置(xCurr,yCurr)、
- 現在のブロックの幅および高さをそれぞれ規定する変数nCurrSwおよびnCu
rrSh、
- 現在のブロックの色成分を規定する変数cIdx、
- 現在のブロックの予測サンプルを規定するan(nCurrSw)×(nCurrS
h) array predSamples、
- 現在のブロックの残差サンプル規定するan(nCurrSw)×(nCurrSh
) array。
【0374】
この処理の出力は、再構成されたピクチャサンプルアレイrecSamplesおよび
IBCバッファアレイibcBuf
L
、ibcBuf
Cb
、ibcBuf
Cr
である。
【0375】
色成分cIdxの値に基づいて、以下の割り当てが行われる。
- cIdxが0に等しい場合、recSamplesは再構成ピクチャサンプルアレイ
SLに対応し、関数clipCidx1はClip1Yに対応する。
- そうでない場合、cIdxが1に等しければ、tuCbfChromaはtu_cb
f_cb[xCurr][yCurr]に等しく設定され、recSamplesは再構
成されたクロマサンプル配列SCbに対応し、関数clipCidx1はClip1Cに
対応する。
- そうでない場合、(cIdxが2に等しければ、tuCbfChromaはtu_c
bf_cb[xCurr][yCurr]に等しく設定され、recSamplesは再
構成されたクロマサンプル配列SCrに対応し、関数clipCidx1はClip1C
に対応する。
【0376】
slice_lmcs_enabled_flagの値によって、以下が適用される。
- slice_lmcs_enabled_flagが0に等しい場合、位置(xCu
rr,yCurr)における再構成サンプルrecSamplesの(nCurrSw)
x(nCurrSh)ブロックは、i=0..nCurrSw-1,j=0..nCur
rSh-1に対しては下記のように導出する。
recSamples[xCurr+i][yCurr+j]=clipCidx1
(predSamples[i][j]+resSamples[i][j]) (8
-992)
- そうでない場合(slice_lmcs_enabled_flagが1に等しい)
、以下が適用される。
- cIdxが0に等しい場合、以下が適用される。
- 8.7.5.2項で規定されるような輝度サンプルのマッピング処理を伴うピク
チャ再構成は、輝度位置(xCurr,yCurr)、ブロック幅nCurrSwおよび
高さnCurrSh、予測輝度サンプル配列preSamples、および残差輝度サン
プル配列resSamplesを入力として呼び出され、出力は再構成輝度サンプル配列
reCamplesとなる。
- それ以外の場合(cIdxが0より大きい場合)は,8.7.5.3項で規定され
ているクロマサンプルの輝度依存クロマ残差スケーリング処理によるピクチャ再構成が、
クロマの位置(xCurr,yCurr)、変換ブロックの幅nCurrSwおよび高さ
nCurrSh、現在のクロマ変換ブロックのコーディングブロックフラグtuCbfC
hroma、予測クロマサンプル配列predSamples、残差クロマサンプル配列
resSamplesを入力として呼び出され、再構成されたクロマサンプル配列rec
Samplesを出力とする。
【0377】
【0378】
図6は、視覚媒体(映像または画像)処理の例示的な方法の一例を示すフローチャート
である。方法600は、現在の映像ブロックと現在の映像ブロックのビットストリーム表
現との間での変換のため、イントラブロックコピーコーディングモードを使用して現在の
映像ブロックのための参照サンプルを記憶するバッファサイズを判定することと(602
)、このバッファに記憶された参照サンプルを使用してこの変換を行うことと(604)
を含む。
【0379】
以下の項は、方法600の実施形態および他の方法によって実装されるいくつかの例示
的な好適な特徴を説明する。追加の例は、本明細書の第4章に記載する。
【0380】
1. 現在の映像ブロックと前記現在の映像ブロックのビットストリーム表現との間で
の変換のため、イントラブロックコピーコーディングモードを使用して前記現在の映像ブ
ロックのための参照サンプルを記憶するバッファサイズを判定することと、前記バッファ
に記憶された前記参照サンプルを使用して前記変換を行うことと、を含む、映像処理方法
。
【0381】
2. 前記バッファサイズが所定の定数である、第1項に記載の方法。
【0382】
3. 前記サイズがM×Nであり、MおよびNが整数である、第1項から2項のいずれ
かに記載の方法。
【0383】
4. M×Nが64×64または128×128または64×128に等しい、第3項
に記載の方法。
【0384】
5. 前記バッファサイズは、前記現在の映像ブロックのコーディングツリーユニット
のサイズに等しい、第1項に記載の方法。
【0385】
6. 前記バッファサイズは、前記変換に使用される仮想パイプラインデータユニット
のサイズに等しい、第1項に記載の方法。
【0386】
7. 前記バッファサイズは、前記ビットストリーム表現における1つのフィールドに
対応する、第1項に記載の方法。
【0387】
8. 前記フィールドは、映像パラメータセット、シーケンスパラメータセットまたは
ピクチャパラメータセット、またはピクチャヘッダ、スライスヘッダ、またはタイルグル
ープヘッダレベルでのビットストリーム表現に含まれる、第7項に記載の方法。
【0388】
9. 前記バッファの前記サイズが、輝度成分の参照サンプルとクロマ成分の参照サン
プルとで異なる、第1~8項のいずれかに記載の方法。
【0389】
10. 前記バッファの前記サイズは、前記現在の映像ブロックのクロマサブサンプリ
ングフォーマットに依存する、第1~8項のいずれかに記載の方法。
【0390】
11. 前記参照サンプルはRGBフォーマットで記憶される、第1~8項のいずれか
に記載の方法。
【0391】
12. 前記バッファは、ループフィルタリング前およびループフィルタリング後の再
構成サンプルを記憶するために使用される、第1~11項のいずれかに記載の方法。
【0392】
13. ループフィルタリングは、非ブロック化フィルタリング、または適応ループフ
ィルタリング(ALF)、またはサンプル適応オフセット(SAO)フィルタリングを含
む、第12項に記載の方法。
【0393】
14. 現在の映像ブロックと前記現在の映像ブロックのビットストリーム表現との間
での変換のため、前記参照サンプルの初期値を使用してイントラブロックコピーコーディ
ングモードを使用して前記現在の映像ブロックのための参照サンプルを記憶するバッファ
を初期化することと、前記バッファに記憶された前記参照サンプルを使用して前記変換を
行うことと、を含む、映像処理方法。
【0394】
15. 前記初期値は定数に対応する、第14項に記載の方法。
【0395】
16. 前記初期値は、現在の映像ブロックのビット深度の関数である、第14~15
項のいずれかに記載の方法。
【0396】
17. 前記定数が中間グレー値に対応する、第15項に記載の方法。
【0397】
18. 前記初期値は、前回復号化された映像ブロックの画素値に対応する、第14項
に記載の方法。
【0398】
19. 前回復号化された映像ブロックは、インループフィルタリング前の復号化され
たブロックに対応する、第18項に記載の方法。
【0399】
20. 前記バッファサイズが第1~13項の1つに記載のものである、第14~19
項のいずれかに記載の方法。
【0400】
21. xおよびyの数字を使用して、前記バッファ内の画素位置がアドレス指定され
る、第1~20項のいずれかに記載の方法。
【0401】
22. 前記バッファ内の画素位置を0からM*N-1までの範囲の単一の数を使用し
て、アドレス指定し、MおよびNは、バッファの画素幅および画素高さである、第1~2
0項のいずれかに記載の方法。
【0402】
23. 現在のビットストリーム表現は、前記変換のためのブロックベクトルを含み、
(BVx,BVy)として表される前記ブロックベクトルは、(x-x0,y-y0)に
等しく、(x0,y0)は、前記現在の映像ブロックのコーディングツリーユニットの左
上位置に対応する、第1~20項のいずれかに記載の方法。
【0403】
24. 現在のビットストリーム表現は、前記変換のためのブロックベクトルを含み、
(BVx,BVy)として表される前記ブロックベクトルは、(x-x0+Tx,y-y
0+Ty)に等しく、(x0,y0)は、前記現在の映像ブロックのコーディングツリー
ユニットの左上位置に対応し、TxおよびTyは、オフセット値である、第1~20項の
いずれかに記載の方法。
【0404】
25. TxおよびTyが予め規定されたオフセット値である、第24項に記載の方法
。
【0405】
26. 前記変換の間、位置(x0,y0)にあり、ブロックベクトル(BVx,BV
y)を有する画素に対し、前記バッファにおける対応する参照が、参照位置(x0+BV
x,y0+BVy)に見出される、第1~20項のいずれかに記載の方法。
【0406】
27. 前記参照位置が前記バッファの外にある場合、前記バッファにおける前記参照
は、前記バッファの境界でクリッピングすることによって判定される、第26項に記載の
方法。
【0407】
28. 前記参照位置が前記バッファの外にある場合、前記バッファにおける前記参照
は、所定の値を有すると判定される、第26項に記載の方法。
【0408】
29. 前記変換の間、位置(x0,y0)にあり、ブロックベクトル(BVx,BV
y)を有する画素に対し、前記バッファにおける対応する参照が、参照位置((x0+B
Vx)mod M,(y0+BVy)mod N)に見出され、「mod」は、モジュロ
演算であり、MおよびNは、前記バッファのxおよびy寸法を表す整数である、第1~2
0項に記載の方法。
【0409】
30. 映像と現在の映像ブロックのビットストリーム表現との間での変換中に、映像
境界におけるイントラブロックコピーコーディングのための参照サンプルを記憶するバッ
ファをリセットすることと、このバッファに記憶された参照サンプルを使用してこの変換
を行うことと、を含む、映像処理方法。
【0410】
31. 前記映像境界は、新しいピクチャまたは新しいタイルに対応する、第30項に
記載の方法。
【0411】
32. 前記変換は、前記リセットの後、前記バッファを仮想パイプラインデータユニ
ット(VPDU)の再構成された値で更新することによって行われる、第30項に記載の
方法。
【0412】
33. 前記変換は、前記リセットの後、前記バッファをコーディングツリーユニット
の再構成された値で更新することによって行われる、第30項に記載の方法。
【0413】
34. 前記リセットは、各コーディングツリーユニット行の最初に行われる、第30
項に記載の方法。
【0414】
35. 前記バッファの前記サイズは、64×64の前回復号化されたブロックL個に
対応し、Lは整数である、第1項に記載の方法。
【0415】
36. 前記変換中に前記バッファ内のサンプルを読み取るかまたは記憶するために、
垂直走査順序が使用される、第1~35項のいずれかに記載の方法。
【0416】
37. 現在の映像ブロックと前記現在の映像ブロックのビットストリーム表現との間
での変換のため、イントラブロックコピーコーディングモードを使用して前記現在の映像
ブロックのための参照サンプルを記憶するためのバッファを使用することであって、前記
バッファの第1のビット深度は、前記コーディングされたデータの第2のビット深度とは
異なる、使用することと、前記バッファに記憶された前記参照サンプルを使用して前記変
換を行うことと、を含む、映像処理方法。
【0417】
38. 前記第1のビット深度が前記第2のビット深度よりも大きい、第37項に記載
の方法。
【0418】
39. 前記第1のビット深度が、変換中に使用される再構成バッファのビット深度と
同じである、第37~38項のいずれかに記載の方法。
【0419】
40. 前記第1のビット深度が、前記ビットストリーム表現において値または差分値
として信号伝達される、第37~39項のいずれかに記載の方法。
【0420】
41. 前記変換は、クロマおよび輝度成分に対して異なるビット深度を使用する、第
37~40項のいずれかに記載の方法。
【0421】
第37~41項までの追加の実施形態および実施例は、第4章の第7項に記載されてい
る。
【0422】
42. イントラブロックコピーモードを使用して現在の映像ブロックと前記現在の映
像ブロックのビットストリーム表現との間で変換を行うことを含み、前記変換中に予測計
算に使用される第1の精度は、前記変換中に再構成計算に使用される第2の精度より低い
、映像処理方法。
【0423】
43. 前記予測計算は、clip{{p+[1<<(b-1)]}>>b,0,(1
<<bitdepth)-1}<<bを使用して、再構成サンプル値から予測サンプル値
を判定することを含み、pは、再構成サンプル値であり、bは、予め規定されたビットシ
フト値であり、bitdepthは、予測サンプル精度である、第43項に記載の方法。
【0424】
第42~43項までの追加の実施形態および実施例は、第4章の第28~31、および
34項に記載されている。
【0425】
44. イントラブロックコピーモードを使用して現在の映像ブロックと現在の映像ブ
ロックのビットストリーム表現との間で変換を行うことを含み、サイズnM×nMは、コ
ーディングツリーユニットサイズM×Mに使用され、nおよびNは、整数であり、前記現
在の映像ブロックは、前記コーディングツリーユニットに位置決めされ、前記参照領域は
、前記現在の映像ブロックに対応するコーディングツリーユニットで最も近く、利用可能
なn×nコーディングツリーユニットである、映像処理方法。
【0426】
第4項の追加の実施形態および実施例は、第4章の第35項に記載されている。
【0427】
45. イントラブロックコピーモードを使用して現在の映像ブロックと現在の映像ブ
ロックのビットストリーム表現との間で変換を行うことを含み、サイズnM×nMは、コ
ーディングツリーユニットサイズ、M×M以外に使用され、nおよびNは、整数であり、
前記現在の映像ブロックは、前記コーディングツリーユニットに位置決めされ、前記参照
領域は、前記現在の映像ブロックに対応するコーディングツリーユニットで最も近く、利
用可能なn×n-1コーディングツリーユニットである、映像処理方法。
【0428】
第4項の追加の実施形態および実施例は、第4章の第36項に記載されている。
図8お
よび9には、さらなる例示的な実施形態が示されている。
【0429】
46. M=mW、N=Hであり、WおよびHは、現在の映像ブロックのコーディング
ツリーユニット(CTU)の幅および高さであり、mは、正の整数である、請求項3に記
載の方法。
【0430】
47. M=WかつN=nHであり、WおよびHは、コーディングツリーユニット(C
TU)の幅および高さであり、nは、正の整数である、請求項3に記載の方法。
【0431】
48. M=mW、N=nHであり、WおよびHは、コーディングツリーユニット(C
TU)の幅および高さであり、mおよびnは、正の整数である、請求項3に記載の方法。
【0432】
49. nおよびmがCTUのサイズに依存する、請求項46~48のいずれかに記載
の方法。
【0433】
50. 現在の映像ブロックと現在の映像ブロックのビットストリーム表現との間での
変換のため、前記映像の成分Xを使用して前記映像の成分cの前記現在の映像ブロックに
対応するブロックベクトルの妥当性を判定することであって、前記成分Xは、前記映像の
輝度成分とは異なる、判定することと、前記ブロックベクトルが前記現在の映像ブロック
に対して有効であると判定されると前記ブロックベクトルを使用して前記変換を行うこと
と、を含む映像処理方法。ここで、(BVx,BVy)と表されるブロックベクトルは、
(x-x0,y-y0)に等しく、(x0,y0)は、現在の映像ブロックのコーディン
グツリーユニットの左上位置に対応する。
【0434】
51. 前記成分cが、前記映像の輝度成分に対応する、項50項に記載の方法。
【0435】
52. 前記現在の映像ブロックがクロマブロックであり、前記映像が4:4:4フォ
ーマットである、第50項に記載の方法。
【0436】
53. 前記映像は、4:2:0形式であり、前記現在の映像ブロックは、位置(x,
y)で始まるクロマブロックであり、前記判定することは、isRec(c,((x+B
Vx)>>5<<5)+64-(((y+BVy)>>5)&1)*32+(x%32)
,((y+BVy)>>5<<5)+(y%32))がtrueである場合には前記ブロ
ックベクトルは無効であると判定することを含む、第50項に記載の方法。
【0437】
54. 前記映像は、4:2:0形式であり、前記現在の映像ブロックは、位置(x,
y)から始まるクロマブロックであり、前記判定することは、isRec(c,x+BV
x+Chroma_CTU_size,y)がtrueである場合には、前記ブロックベ
クトルは無効であると判定することを含む、第50項に記載の方法
【0438】
55. 映像領域の現在の仮想パイプラインデータユニット(VPDU)の現在の映像
ブロックと、現在の映像ブロックのビットストリーム表現との間での変換のため、選択的
に、映像領域の第1の行から前処理済みVPDUであるK1および第2の行の前処理済み
VPDUであるK2を使用することを判定することと、変換を行うことであって、この変
換は、現在のVPDUの残りを使用することを除外する、変換を多なうことと、を含む映
像処理方法。
【0439】
56. K1=1であり、K2=2である、第55項に記載の方法。
【0440】
57. 前記現在の映像ブロックは、前記映像領域の寸法または前記現在のVPDUの
寸法に基づいて選択的に処理される、第55~56項に記載の方法。
【0441】
58. 現在の映像ブロックと、前記現在の映像ブロックのビットストリーム表現との
間での変換のためにブロックベクトルの妥当性チェックを行うことであって、前記ブロッ
クベクトルは、イントラブロックコピーモードで使用する、妥当性チェックを行うことと
、前記妥当性チェックの結果を使用して前記変換中に前記ブロックベクトルを選択的に使
用することと、を含む、映像処理方法。
【0442】
59. イントラブロックコピー(IBC)バッファを前記変換中に使用し、前記IB
Cバッファの幅と高さをWbufおよびHbufとして、前記現在の映像ブロックの寸法
がW×Hであり、前記ブロックベクトルは、(BVx,BVy)として表現され、現在の
映像ブロックは、WpicおよびHpicの寸法を有する現在のピクチャにあり、コーデ
ィングツリーユニットは、幅および高さとしてWctuおよびHctuを有し、前記妥当
性チェックは、所定の規則を使用する、第58項に記載の方法。
【0443】
60. 前記現在の映像ブロックは、輝度ブロック、クロマブロック、コーディングユ
ニットCU、変換ユニットTU、4×4ブロック、2×2ブロック、または画素座標(X
,Y)から始まる親ブロックのサブブロックである、第58~59項のいずれかに記載の
方法。
【0444】
61. 前記妥当性チェックは、前記現在のピクチャの境界外にある前記ブロックベク
トルを妥当であると見なす、第58~60項のいずれかに記載の方法。
【0445】
62. 前記妥当性チェックは、コーディングツリーユニットの境界外にあるブロック
ベクトルを妥当であると見なす、第58~60項のいずれかに記載の方法。
【0446】
前章の第23~30項では、上記第58~62項の追加例および変形例を述べている。
【0447】
63. 前記変換は、前記現在の映像ブロックから前記ビットストリーム表現を生成す
ることを含む、第1~62項のいずれかに記載の方法。
【0448】
64. 前記変換は、前記ビットストリーム表現から前記現在の映像ブロックの画素値
を生成することを含む、第1~62項のいずれかに記載の方法。
【0449】
65. 第1~62項の1項以上に記載の方法を実装するように構成された処理装置を備える映像エンコーダ装置。
【0450】
66. 第1~62項の1項以上に記載の方法を実装するように構成された処理装置を
備える、映像デコーダ装置。
【0451】
67. コードが記憶されたコンピュータ可読媒体であって、前記コードは第1~62
項のいずれかまたは複数項に記載の方法を実装するための処理装置が実行可能な命令を実
施する、コンピュータ可読媒体。
【0452】
図7は、映像/画像処理装置700のハードウェアプラットフォームを示すブロック図
である。装置700は、本明細書に記載の方法の1つ以上を実装するために使用してもよ
い。装置700は、スマートフォン、タブレット、コンピュータ、IoT(Intern
et of Things)受信機等により実装されてもよい。装置700は、1つ以上
の処理装置702と、1つ以上のメモリ704と、映像処理ハードウェア706と、を含
んでもよい。1つまたは複数の処理装置702は、本明細書に記載される1つ以上の方法
(方法600を含むが、これに限定されない)を実装するように構成されてもよい。メモ
リ(複数可)704は、本明細書で説明される方法および技術を実装するために使用され
るデータおよびコードを記憶するために使用してもよい。映像処理ハードウェア706は
、本明細書に記載される技術をハードウェア回路にて実装するために使用してもよい。
【0453】
現在の映像ブロックに対応するビットストリーム表現は、ビットの連続したセットであ
る必要はなく、ヘッダ、パラメータセット、およびネットワーク抽象化層(NAL)パケ
ットにまたがって分散されてもよい。
【0454】
セクションA:追加の例示的な実施形態
【0455】
セクションAにおいて、本明細書に記載される技術の一部を実装するために、VVC規
格の現在のバージョンを修正し得る別の例示的な実施形態を提示する。
【0456】
本セクションでは、現在のIBC参照バッファ設計におけるいくつかの問題を分析し、
これらの問題に対処するための異なる設計を提示する。復号化メモリと混合する代わりに
、独立したIBC参照バッファが提案される。現在のアンカと比較して、提案されたスキ
ームは、クラスFで-0.99%/-0.71%/-0.79%のAI/RA/LD-B
の輝度BD率、4:2:0 TGMでは-2.57%/-1.81%/-1.36%で、
6.7%のメモリの減少、あるいは、クラスFでは-1.31%/-1.01%/-0.
81%、4:2:0 TGMでは-3.23%/-2.33%/-1.71%で、6.7
%のメモリの増加を示している。
【0457】
A1. 導入
【0458】
イントラブロックコピー、すなわちIBC(または現在のピクチャ参照、即ち前のCP
R)コーディングモードが採用される。なお、IBC参照サンプルはオンチップメモリに
記憶されるべきであり、従って、1つのCTUの限られた参照領域が規定される。バッフ
ァのためのエクストラオンチップメモリを制限するために、現在の設計は、64×64メ
モリを再利用して現在のVPDUを復号化するので、IBCをサポートするために必要な
メモリは3つの追加の64×64ブロックのメモリのみである。CTUの大きさが128
×128である場合の、現在の参照領域を
図2に示す。
【0459】
現在の草案(VVC草案4)において、領域は、次のように定義される。
【0460】
【0461】
このように、合計基準サイズはCTUである。
【0462】
A2. 現在の設計における潜在的な問題
【0463】
現在の設計は、現在のVPDUを復号化するために64×64メモリを再使用すること
を想定し、IBC基準は、それに応じてVPDUメモリの再利用に合わせられる。このよ
うな設計は、VPDU復号化メモリをIBCバッファで束ねる。次のような問題が考えら
れる。
1. より小さなCTUサイズを扱うことが問題となり場合がある。CTUのサイズが
32x32であるとすると、現在のVPDUを復号化する現在の64×64メモリが、異
なるアーキテクチャにおいて32×32レベルのメモリ再利用を効率的にサポートできる
かどうかは、不明である。
2. 参照領域は有意に異なる。従って、あまりにも多くのビットストリーム適合性の
制約が導入されている。これは、参照領域を効率的に利用し、合法的なビットストリーム
の生成を回避するために、エンコーダに余分な負担をかける。また、異なるモジュール、
例えばマージリストにおいて無効なBVを有する可能性が高まる。これらの無効なBVを
扱うことにより、余分なロジックまたは余分な適合性の制約を導入してしまう場合がある
。これは、エンコーダまたはデコーダに負担をもたらすだけでなく、BVコーディングと
MVコーディングとの間に相違を生じさせる可能性がある。
3. 設計がうまく拡大縮小されていない。VPDU復号化はIBCバッファと混合さ
れるので、現在の1つの128×128CTU設計に対して参照領域を増減させることは
容易ではない。を利用することは、より低いまたはより高いプロファイルなどの、後の開
発において、より優れたコーディング効率とオンチップメモリのトレードオフを有効に利
用するための柔軟性を制限する可能性がある。
4. IBC参照バッファのビット深度は、復号化バッファに接続される。通常、スク
リーンコンテンツのビット深度は内部復号化のビット深度よりも小さいが、バッファは、
大部分が丸められたり量子化されたりするノイズを表すビットを記憶するために、依然と
してメモリを費やす必要がある。より高い復号化ビット深度構成を考える場合、この問題
はさらに深刻になる。
【0464】
A3. クリアなIBCバッファ設計
【0465】
上記サブセクションに記載された問題に対処するために、我々は、復号化メモリと混合
されない専用のIBCバッファを有することを提案する。
【0466】
128×128CTUの場合、バッファは8ビットのサンプルを含む128×128と
して規定され、サイズw×hのCU(x,y)が復号化されていると、ループフィルタリ
ング前のバッファの再構成は8ビットに変換され、位置(x%128,y%128)から
始まるw×hブロック領域に書き込まれる。モジュロ演算子%は、常に正の数を返す。即
ち、x<0であってx%Lを-(-x%L)と定義すると、例えば、-3%128=12
5である。
【0467】
画素(x,y)がIBCモードでBV=(BVx,BVy)でコーディングされると仮
定すると、IBC参照バッファにおける予測サンプルは、((x+BVx)%128、(
y+BVy)%128)に位置し、画素値は予測前に10ビットに変換される。
【0468】
バッファを(W,H)と見なす場合、(x,y)から始まるCTUまたはCUを復号化
した後、ループフィルタリング前の再構成された画素を(x%W,y%H)から始まるバ
ッファに記憶する。このように、CTUを復号化した後、対応するIBC参照バッファは
それに応じて更新される。このような設定は、CTUのサイズが128×128でない場
合に発生することがある。例えば、64×64 CTUの場合、現在のバッファサイズは
、256×64バッファと見なすことができる。64×64 CTU の場合のバッファ
の状態を
図2に示す。
【0469】
図12は、IBC参照バッファステータスを示す図であり、1つのブロックは64×6
4CTUを示す。
【0470】
このような設計において、IBCバッファはVPDU復号化メモリとは異なるので、す
べてのIBC参照バッファを参照として使用できる。
【0471】
IBCバッファのビット深度が8ビットである場合、3つの追加の10ビット64×6
4バッファを必要とする現在の設計に比べ、オンチップメモリの増加は、(8*4)/(
10*3)-100%=6.7%である。
【0472】
ビット深度をさらに低減した場合メモリ要件をさらに低減することができる。例えば、
7ビットバッファの場合、オンチップメモリの節約は、100%-(7*4)/(10*
3)=6.7%である。
【0473】
この設計では、唯一のビットストリーム適合性の制約は、参照ブロックが現在のタイル
の現在のCTU行における再構成された領域内にあるべきである、ということである。
【0474】
各CTU行の開始時に512への初期化が許可される場合、すべてのビットストリーム
適合性の制約を除去することができる。
【0475】
A4. 実験結果
【0476】
いくつかの実施形態において、開示された方法は、VTM-4.0ソフトウェアを使用
して実装されてもよい。
【0477】
10ビットバッファ実装およびCTCの場合、このデコーダは、現在のVTM4.0エ
ンコーダに完全に適合する。すなわち、これは、提案されたデコーダがVTM-4.0
CTCビットストリームを正確に復号化することができることを意味する。
【0478】
7ビットバッファの実装形態では、表1に示す結果が得られる。
【0479】
8ビットバッファの実装形態では、結果を表2に示す。
【0480】
【0481】
【0482】
図17は、本明細書で開示される様々な技術が実装され得る例示的な映像処理システム
1700を示すブロック図である。様々な実装形態は、システム1700のモジュールの
一部又は全部を含んでもよい。システム1700は、映像コンテンツを受信するための入
力ユニット1702を含んでもよい。映像コンテンツは、未加工又は非圧縮フォーマット
、例えば、8又は10ビットのマルチモジュール画素値で受信されてもよく、又は圧縮又
は符号化フォーマットで受信されてもよい。入力ユニット1702は、ネットワークイン
ターフェース、周辺バスインターフェース、又は記憶インターフェースを表してもよい。
ネットワークインターフェースの例は、イーサネット(登録商標)、パッシブ光ネットワ
ーク(PON)等の有線インターフェース、およびWi-Fi(登録商標)またはセルラ
ーインターフェース等の無線インターフェースを含む。
【0483】
システム1700は、本明細書に記載される様々なコーディング又は符号化方法を実装
することができるコーディングモジュール1704を含んでもよい。コーディングモジュ
ール1704は、入力ユニット1702からの映像の平均ビットレートをコーディングモ
ジュール1704の出力に低減し、映像のコーディング表現を生成してもよい。従って、
このコーディング技術は、映像圧縮または映像コード変換技術と呼ばれることがある。コ
ーディングモジュール1704の出力は、モジュール1706によって表されるように、
記憶されてもよいし、接続された通信を介して送信されてもよい。入力ユニット1702
において受信された、記憶された又は通信された映像のビットストリーム(又はコーディ
ング)表現は、モジュール1708によって使用されて、表示インターフェースユニット
1710に送信される画素値又は表示可能な映像を生成してもよい。ビットストリーム表
現からユーザが見ることができる映像を生成する処理は、映像伸張(映像展開)と呼ばれ
ることがある。さらに、特定の映像処理動作を「コーディング」動作又はツールと呼ぶが
、コーディングツール又は動作は、エンコーダで使用され、コーディングの結果を逆にす
る対応する復号化ツール又は動作が、デコーダによって行われることが理解されよう。
【0484】
周辺バスインターフェースユニットまたは表示インターフェースユニットの例は、ユニ
バーサルシリアルバス(USB)または高精細マルチメディアインターフェース(HDM
I)(登録商標)またはディスプレイポート等を含んでもよい。ストレージインターフェ
ースの例は、シリアルアドバンスドテクノロジーアタッチメント(SATA)、PCI、
IDEインターフェース等を含む。本明細書に記載される技術は、携帯電話、ノートパソ
コン、スマートフォン、又はデジタルデータ処理及び/又は映像表示を実施可能な他のデ
バイス等の様々な電子デバイスに実施されてもよい。
【0485】
図18は、映像データ処理方法の一例を示すフローチャートである。このフローチャー
トのステップは、本願の第4章の例示的な実施例18に関連して説明する。ステップ18
02において、このプロセスは、視覚メディアデータの現在の映像ブロックと現在の映像
ブロックのビットストリーム表現との間での変換のために、イントラブロックコピーモー
ドで予測するための参照サンプルを記憶するバッファを判定し、この変換は、現在の映像
ブロックと同じ映像領域に位置する再構成ブロックに関する動き情報に基づくイントラブ
ロックコピーモードで行われる。ステップ1804において、現在の映像ブロックを含む
コーディングツリーユニットの左上位置に対する現在の映像ブロックの位置(x0、y0
)に空間的に配置され、かつブロックベクトル(BVx、BVy)を有するサンプルに対
して、このプロセスは、バッファにおける対応する参照を参照位置(P,Q)で計算し、
この参照位置(P,Q)はブロックベクトル(BVx,BVy)と位置(x0,y0)を
使用して判定される。参照位置(P,Q)がバッファの外側にあると判定されると、ステ
ップ1805において、現在の映像ブロックを含むコーディングツリーユニットに対する
現在の映像ブロックの位置に少なくとも部分的に基づいて、このプロセスは、参照位置を
再計算する。
【0486】
図19は、映像データ処理方法の一例を示すフローチャートである。このフローチャー
トのステップは、本願の第4章の例示的な実施例29に関連して説明する。ステップ19
02において、このプロセスは、視覚メディアデータの現在の映像ブロックと現在の映像
ブロックのビットストリーム表現との間での変換のために、イントラブロックコピーモー
ドで予測するための参照サンプルを記憶するバッファを判定し、この変換は、現在の映像
ブロックと同じ映像領域に位置する再構成ブロックに関する動き情報に基づくイントラブ
ロックコピーモードで行われる。ステップ1904において、現在の映像ブロックを含む
ピクチャの左上の位置に対して、現在の映像ブロックの位置(x,y)に空間的に配置さ
れ、ブロックベクトル(BVx,BVy)を有するサンプルに対して、このプロセスは、
現在の映像ブロックの位置(x,y)、現在の映像ブロックの寸法、ピクチャの寸法、現
在の映像ブロックを含むコーディングツリーユニットの寸法、またはバッファの寸法のう
ちの少なくとも1つに関連付けられた1つ以上の条件を満たすことに少なくとも部分的に
基づいて、ブロックベクトル(BVx,BVy)を有効なものとして割り当てる。ステッ
プ1906において、このプロセスは、ブロックベクトル(BVx,BVy)が有効であ
るかどうかを判断するためのチェックを行う。ステップ1908において、ブロックベク
トル(BVx,BVy)が有効であることを確認すると、このプロセスは、バッファにお
ける対応する参照を参照位置(P,Q)で計算し、この参照位置(P,Q)が、ブロック
ベクトル(BVx,BVy)、位置(x,y)、およびバッファの寸法を使用して判定さ
れる。
【0487】
図20は、映像データ処理方法の一例を示すフローチャートである。このフローチャー
トのステップは、本願の第4章の例示的な実施例19に関連して説明する。ステップ20
02において、このプロセスは、視覚メディアデータの現在の映像ブロックと現在の映像
ブロックのビットストリーム表現との間での変換のために、現在の映像ブロックについて
のブロックベクトル(BVx,BVy)またはブロックベクトル差(BVDx,BVDy
)を判定し、この変換は、現在の映像ブロックと同じ映像領域に位置する再構成ブロック
に関する動き情報に基づくイントラブロックコピーモードで行われる。ステップ2004
において、このプロセスは、ブロックベクトル(BVx,BVy)のうちの少なくとも1
つの成分、またはブロックベクトルの差分(BVDx,BVDy)の少なくとも1つの成
分を範囲内に収まるように正規化する。
【0488】
図21は、映像データ処理方法の一例を示すフローチャートである。このフローチャー
トのステップは、本願の第4章の例示的な実施例40に関連して説明する。ステップ21
02において、このプロセスは、現在の映像ブロックと現在の映像ブロックのビットスト
リーム表現との間での変換のために、イントラブロックコピーモードで予測するための再
構成サンプルを記憶するために使用するバッファを判定し、この変換は、現在の映像ブロ
ックと同じ映像領域に位置する再構成ブロックに関する動き情報に基づくイントラブロッ
クコピーモードで行われる。ステップ2104において、このプロセスは、バッファに記
憶された再構成サンプルを順番にしたがって更新する。
【0489】
図22は、映像データ処理方法の一例を示すフローチャートである。このフローチャー
トのステップは、本願の第4章の例示的な実施例57に関連して説明する。ステップ22
02において、このプロセスは、現在の映像ブロックと現在の映像ブロックのビットスト
リーム表現との間での変換を行い、この変換は、現在の映像ブロックと同じ映像領域に位
置する再構成ブロックに関する動き情報に基づくイントラブロックコピーモードで行われ
、変換時に、予測計算に使用される第1の精度は、再構成計算に使用される第2の精度よ
りも低くなる。
【0490】
図23は、映像データ処理方法の一例を示すフローチャートである。このフローチャー
トのステップは、本願の第4章の例示的な実施例59に関連して説明する。ステップ23
02において、このプロセスは、現在の映像ブロックと、現在の映像ブロックのビットス
トリーム表現との間での変換を、現在の映像ブロックと同じ映像領域に位置する再構成ブ
ロックに関する動き情報に基づくイントラブロックコピーモードを使用して行い、この変
換時には、nおよびMは整数である場合に、nM×nMサイズの参照領域が使用され、現
在の映像ブロックは、コーディングツリーユニットに位置決めされ、参照領域は、現在の
映像ブロックに対応するコーディングツリーユニット列のn×n個の直近の利用可能なコ
ーディングツリーユニットからのサンプルを含む。
【0491】
図24は、映像データ処理方法の一例を示すフローチャートである。このフローチャー
トのステップは、本願の第4章の例示的な実施例60に関連して説明する。ステップ24
02において、このプロセスは、現在の映像ブロックと、現在の映像ブロックのビットス
トリーム表現との間での変換を、現在の映像ブロックと同じ映像領域に位置する再構成ブ
ロックに関する動き情報に基づくイントラブロックコピーモードを使用して行い、この変
換時には,n、pおよびMは整数である場合に、nM×pMサイズの参照領域が使用され
、現在の映像ブロックは、コーディングツリーユニットに位置決めされ、参照領域は、現
在の映像ブロックに対応するコーディングツリーユニット列のn×p-1個の直近の利用
可能なコーディングツリーユニットからのサンプルを含む。
【0492】
図25は、映像データ処理方法の一例を示すフローチャートである。このフローチャー
トのステップは、本願の第4章の例示的な実施例61に関連して説明する。ステップ25
02において、このプロセスは、映像領域の仮想パイプラインデータユニット(VPDU
)の現在の映像ブロックと、現在の映像ブロックのビットストリーム表現との間での変換
を、現在の映像ブロックと同じ映像領域に位置する再構成ブロックに関する動き情報に基
づくイントラブロックコピーモードを使用して行い、この変換時には、k、nおよびMは
整数である場合に、nM×nMサイズの参照領域が使用され、VPDUの寸法がkM×k
Mであり、現在の映像ブロックは、コーディングツリーユニットに位置決めされ、参照領
域は、現在の映像ブロックに対応するコーディングツリーユニット列のn×n-k個の直
近の利用可能なコーディングツリーユニットからのサンプルを含む。
【0493】
図26は、映像データ処理方法の一例を示すフローチャートである。このフローチャー
トのステップは、本願の第4章の例示的な実施例62~66に関連して説明する。ステッ
プ2602において、このプロセスは、視覚メディアデータのw×h寸法の現在の映像ブ
ロックと現在の映像ブロックのビットストリーム表現との間での変換のために、イントラ
ブロックコピーモードで予測するための参照サンプルを記憶するバッファを判定し、この
変換は、現在の映像ブロックと同じ映像領域に位置する再構成ブロックに関する動き情報
に基づくイントラブロックコピーモードで行われる。ステップ2604において、現在の
映像ブロックを含むコーディングツリーユニット(CTU)の左上位置に対する現在の映
像ブロックの位置(x0、y0)に空間的に配置され、かつブロックベクトル(BVx、
BVy)を有するサンプルに対して、このプロセスは、バッファにおける参照位置(P,
Q)から始まる対応する参照領域を計算し、参照位置(P,Q)はブロックベクトル(B
Vx,BVy)および/または位置(x0,y0)を使用して判定される。ステップ26
06において、このプロセスは、参照領域および/または参照位置(P、Q)に1つ以上
の規則ベースの制約を適用して、参照領域と映像領域との重なりを制限する。
【0494】
図27は、映像データ処理方法の一例を示すフローチャートである。このフローチャー
トのステップは、本願の第4章の例示的な実施例68に関連して説明する。ステップ27
02において、このプロセスは、視覚メディアデータの現在の映像ブロックと現在の映像
ブロックのビットストリーム表現との間での変換のために、イントラブロックコピーモー
ドで予測するための参照サンプルを記憶するバッファを判定し、この変換は、現在の映像
ブロックと同じ映像領域に位置する再構成ブロックに関する動き情報に基づくイントラブ
ロックコピーモードで行われる。ステップ2704において、現在の映像ブロックを含む
コーディングユニット(CU)に対して、現在の映像ブロックの位置(x0,y0)に空
間的に位置するサンプルに対して、このプロセスは、バッファにおける参照位置から始ま
る対応する参照領域を計算する。ステップ2706において、このプロセスは、前回処理
されたブロックのうちどれを予測に用いるかを判定するために、参照領域及び参照位置を
調整する。
【0495】
図28は、映像データ処理方法の一例を示すフローチャートである。このフローチャー
トのステップは、本願の第4章の例示的な実施例69~75に関連して説明する。ステッ
プ2802において、このプロセスは、映像の現在の映像ブロックと現在の映像ブロック
のビットストリーム表現との間での変換のために、映像の成分Xを使用して、この映像の
成分cの現在の映像ブロックに対応するブロックベクトルの有効性を判定し、この成分X
は、映像の輝度成分とは異なる。ステップ2804において、このプロセスは、現在の映
像ブロックに対してブロックベクトルが有効であると判定すると、ブロックベクトルを使
用して変換を行い、この変換は、現在の映像ブロックと同じ映像領域に位置する再構成ブ
ロックに関する動き情報に基づくイントラブロックコピー(IBC)モードモードで行わ
れる。
【0496】
本明細書のいくつかの実施形態は、項に基づく形式で提示される。
【0497】
A1. 視覚メディア処理方法であって、
視覚メディアデータの現在の映像ブロックと現在の映像ブロックのビットストリーム表
現との間での変換のために、イントラブロックコピーモードで予測するための参照サンプ
ルを記憶するバッファを判定することであって、この変換は、現在の映像ブロックと同じ
映像領域に位置する再構成ブロックに関する動き情報に基づくイントラブロックコピーモ
ードで行われる、判定することと、
現在の映像ブロックを含むコーディングツリーユニットの左上位置に対する現在の映像
ブロックの位置(x0、y0)に空間的に配置され、かつブロックベクトル(BVx、B
Vy)を有するサンプルについて、バッファにおける対応する参照を参照位置(P,Q)
で計算することであって、参照位置(P,Q)はブロックベクトル(BVx,BVy)と
位置(x0,y0)を使用して判定される、計算することと、
参照位置(P,Q)がバッファの外側にあることを判定すると、現在の映像ブロックを
含むコーディングツリーユニットに対する現在の映像ブロックの位置に少なくとも部分的
に基づいて参照位置を再計算することと、を含む、方法。
【0498】
A2. 参照位置(P,Q)は、P=x0+BVx、Q=y0+BVyとして判定され
る、A1項に記載の方法。
【0499】
A3.再計算は、
現在の映像ブロックがコーディングツリーユニットに対して水平方向に位置するか、又
はコーディングツリーユニットに対して垂直方向に位置するかどうかに少なくとも部分的
に基づいて、参照位置(P,Q)を再計算することを含む、第1項に記載の方法。
【0500】
A4. 現在の映像ブロックがコーディングツリーユニットに対して水平方向に位置す
る、A1~A3項のいずれか1項以上に記載の方法。
【0501】
A5. 現在の映像ブロックがコーディングツリーユニットに対して垂直方向に位置す
る、A1~A3項のいずれか1項以上に記載の方法。
【0502】
A6.再計算は、
現在の映像ブロックが視覚メディアデータの境界から予め規定された距離内にあるかど
うかに少なくとも部分的に基づいて、参照位置(P,Q)を再計算する、第1項に記載の
方法。
【0503】
A7. 現在の映像ブロックが、視覚メディアデータの境界から予め規定された距離内
に位置する、A1~A2項及びA6項のいずれか1項以上に記載の方法。
【0504】
A8. Nがバッファのy次元を表す整数であり、(y0+BVy)が範囲[0,..
,N-1]の外側にあることを判定することに応じて、参照位置(P,Q)に予め規定さ
れた値が割り当てられる、A1~A2項のいずれか1項以上に記載の方法。
【0505】
A9. Mがバッファのy次元を表す整数であり、(x0+BVx)が範囲[0,..
,M-1]の外側にあることを判定することに応じて、参照位置(P,Q)に予め規定さ
れた値が割り当てられる、A1~A2項のいずれか1項以上に記載の方法。
【0506】
A10. 参照位置(P、Q)は、((x0+BVx)mod M、y0+BVy)と
して割り当てられ、式中、“mod”は、xmod y=x-y*floor(x/y)
、floor(a)はa以下の最大の整数、Mはバッファのx次元を表す整数として定義
されるモジュロ演算である、A1~A2項のいずれか1項以上に記載の方法。
【0507】
A11. 参照位置(P、Q)は、(x0+BVx,(y0+BVy)mod N))
として割り当てられ、式中、“mod”は、xmod y=x-y*floor(x/y
)、floor(a)はa以下の最大の整数、Nはバッファのy次元を表す整数として定
義されるモジュロ演算である、A1~A2項のいずれか1項以上に記載の方法。
【0508】
A12. (x0+BVx)mod M,y0+BVy)がバッファの外側にあると判
定することに応じて、追加の処理が行われる、A10項に記載の方法。
【0509】
A13. (x0+BVx,(y0+BVy)mod N))がバッファの外側にある
と判定することに応じて、追加の処理が行われる、A12項に記載の方法。
【0510】
B1. 視覚メディア処理方法であって、
視覚メディアデータの現在の映像ブロックと現在の映像ブロックのビットストリーム表
現との間での変換のために、イントラブロックコピーモードで予測するための参照サンプ
ルを記憶するバッファを判定することであって、この変換は、現在の映像ブロックと同じ
映像領域に位置する再構成ブロックに関する動き情報に基づくイントラブロックコピーモ
ードで行われる、判定することと、
現在の映像ブロックを含むピクチャの左上の位置に対して、現在の映像ブロックの位置
(x,y)に空間的に配置され、ブロックベクトル(BVx,BVy)を有するサンプル
に対して、現在の映像ブロックの位置(x,y)、現在の映像ブロックの寸法、ピクチャ
の寸法、現在の映像ブロックを含むコーディングツリーユニットの寸法、またはバッファ
の寸法のうちの少なくとも1つに関連付けられた1つ以上の条件を満たすことに少なくと
も部分的に基づいて、ブロックベクトル(BVx,BVy)を有効なものとして割り当て
ることと、
ブロックベクトル(BVx,BVy)が有効であるかどうかを判断するためのチェック
を行うことと、
ブロックベクトル(BVx,BVy)が有効であることを確認すると、バッファにおけ
る対応する参照を参照位置(P,Q)で計算することであって、参照位置(P,Q)が、
ブロックベクトル(BVx,BVy)、位置(x,y)、およびバッファの寸法を使用し
て判定される、計算することとを含む、方法。
【0511】
B2. 参照位置(P,Q)が((x+BVx)%Wbuf,(x+BVy)%Hbu
f)として判定され、式中、Wbuf×Hbufはバッファの寸法を示し、「%」はモジ
ュロ演算を示し、x<0のときの「x%y」はx-y*floor(x/y)として定義
され、ここでfloor(a)はaを超えない最大の整数である、B1項に記載の方法。
【0512】
C1. 視覚メディア処理方法であって、
視覚メディアデータの現在の映像ブロックと現在の映像ブロックのビットストリーム表
現との間での変換のため、現在の映像ブロックについてのブロックベクトル(BVx,B
Vy)またはブロックベクトル差(BVDx,BVDy)を判定することであって、変換
は、現在の映像ブロックと同じ映像領域に位置する再構成ブロックに関する動き情報に基
づくイントラブロックコピーモードで行われる、判定することと、
ブロックベクトル(BVx,BVy)のうちの少なくとも1つの成分、またはブロック
ベクトルの差分(BVDx,BVDy)の少なくとも1つの成分を範囲内に収まるように
正規化することと、を含む、方法。
【0513】
C2.正規化することは、
バッファの寸法に基づいて、ブロックベクトル(BVx,BVy)の少なくとも1つの
成分、又はブロックベクトル差(BVDx,BVDy)の少なくとも1つの成分が範囲内
にあるように正規化することを含み、バッファは、イントラブロックコピーモードにおけ
る予測のための参照サンプルを記憶する、C1項に記載の方法。
【0514】
C3. 成分BVxが(BVxmod M)に正規化され、式中、Mはバッファのx次
元を表す整数であり、「mod」は、xmod y=x-y*floor(x/y)とし
て定義されるモジュロ演算であり、floor(a)は、a以下の最大の整数である、C
2項に記載の方法。
【0515】
C4. 成分BVDxが((BVDy+x0)mod M)-Vに正規化され、式中、
Mはバッファのx次元を表す整数であり、「mod」は、xmod y=x-y*flo
or(x/y)として定義されるモジュロ演算であり、式中、floor(a)は、a以
下の最大の整数であり、Vは、予め規定された値である、C2項に記載の方法。
【0516】
C5. Vが64である、C4項に記載の方法。
【0517】
C6. VがM/2である、C4項に記載の方法。
【0518】
C7. Vがx0である、C4項に記載の方法。
【0519】
C8. 成分BVyが(BVy mod N)に正規化され、式中、Nはバッファのy
次元を表す整数であり、「mod」は、xmod y=x-y*floor(x/y)と
して定義されるモジュロ演算であり、floor(a)は、a以下の最大の整数である、
C2項に記載の方法。
【0520】
C9. 成分BVyが((BVy+y0)mod N)-Vに正規化され、式中、Nは
バッファのy次元を表す整数であり、「mod」は、xmod y=x-y*floor
(x/y)として定義されるモジュロ演算であり、式中、floor(a)は、a以下の
最大の整数であり、Vは、予め規定された値である、C2項に記載の方法。
【0521】
C10. Vが64である、C9項に記載の方法。
【0522】
C11. VがN/2である、C9項に記載の方法。
【0523】
C12. Vがy0である、C9項に記載の方法。
【0524】
C13. 成分BVx及びBVyが異なる範囲内にあるように正規化される、C1項に
記載の方法。
【0525】
C14. 成分BVDxが(BVDxmod M)に正規化され、式中、Mはバッファ
のx次元を表す整数であり、「mod」は、xmod y=x-y*floor(x/y
)として定義されるモジュロ演算であり、floor(a)は、a以下の最大の整数であ
る、C2項に記載の方法。
【0526】
C15. 成分BVDxが((BVDx+x0)mod M)-Vに正規化され、式中
、Mはバッファのx次元を表す整数であり、「mod」は、xmod y=x-y*fl
oor(x/y)として定義されるモジュロ演算であり、式中、floor(a)は、a
以下の最大の整数であり、Vは、予め規定された値である、C2項に記載の方法。
【0527】
C16. Vが64である、C15項に記載の方法。
【0528】
C17. VがM/2である、C15項に記載の方法。
【0529】
C18. Vがx0である、C15項に記載の方法。
【0530】
C19. 成分BVDyが(BVDy mod N)に正規化され、式中、Nはバッフ
ァのy次元を表す整数であり、「mod」は、モジュロ演算である、C2項に記載の方法
。
【0531】
C20. 成分BVDyが((BVDy+y0)mod N)-Vに正規化され、式中
、Nはバッファのy次元を表す整数であり、「mod」は、モジュロ演算であり、Vは、
予め規定された値である、C2項に記載の方法。
【0532】
C21. Vが64である、C20項に記載の方法。
【0533】
C22. VがN/2である、C20項に記載の方法。
【0534】
C23. Vがy0である、C20項に記載の方法。
【0535】
C24. 成分BVDx及びBVDyが異なる範囲内にあるように正規化される、C1
項に記載の方法。
【0536】
D1. 視覚メディア処理方法であって、
現在の映像ブロックと現在の映像ブロックのビットストリーム表現との間での変換のた
めに、イントラブロックコピーモードで予測するための再構成サンプルを記憶するために
使用するバッファを判定することであって、変換は、現在の映像ブロックと同じ映像領域
に位置する再構成ブロックに関する動き情報に基づくイントラブロックコピーモードで行
われる、判定することと、
バッファに記憶された再構成サンプルを、順にしたがって更新することと、を含む、方
法。
【0537】
D2. バッファは、順番にしたがって更新される、D1項に記載の方法。
【0538】
D3. バッファは、再構成されたブロックの順にしたがって更新される、D1項に記
載の方法。
【0539】
D4. バッファが満杯であると判定されると、バッファに記憶された再構成サンプル
を最近再構成されたサンプルに置き換えることをさらに含む、D1項に記載の方法。
【0540】
D5. バッファに記憶された再構成サンプルを先入れ先出し順に置き換える、D1項
に記載の方法。
【0541】
D6. バッファに記憶された再構成サンプルの最も古い集合を置き換える、D1項に
記載の方法。
【0542】
D7. バッファに記憶された再構成サンプルが、割り当てられた優先順位値であり、
バッファに記憶された再構成サンプルを優先順位値に従って置き換える、D1項に記載の
方法。
【0543】
D8. バッファに記憶された再構成サンプルのサブセットに、将来の置き換えのため
のマークを付け、サブセットに含まれていないサンプルを最初に置き換える、D1項に記
載の方法。
【0544】
D9. ビットストリーム表現に含まれるフラグは、1つ以上の条件を満たす優先順位
値を示す、D7項に記載の方法。
【0545】
D10. 現在の映像ブロックの特徴に基づいて優先順位値が割り当てられる、D7項
に記載の方法。
【0546】
D11. 1つ以上の条件は、パレットモードおよび/またはイントラブロックコーデ
ィング(IBC)モードおよび/または変換スキップモードを使用してコーディングされ
た再構成サンプルのパーセンテージに関連する、D9項に記載の方法。
【0547】
D12. パレットモードおよび/またはイントラブロックコーディング(IBC)モ
ードおよび/または変換スキップモードを使用してコーディングされた再構成サンプルの
パーセンテージが閾値を超えていることを判定することに応じて、現在の映像ブロックに
おけるすべてのサンプルを高い優先順位として割り当てる、D11項に記載の方法。
【0548】
D13. 閾値は、現在の映像ブロックのサイズおよび/または現在の映像ブロックの
色成分、および/または現在の映像ブロックを含むコーディングツリーユニット(CTU
)のサイズに基づく、D12項に記載の方法。
【0549】
D14. 閾値がビットストリーム表現のフィールドとして含まれる、D13項に記載
の方法。
【0550】
D15. フィールドは、シーケンスパラメータセット(SPS)、ピクチャパラメー
タセット(PPS)、シーケンスヘッダ、スライスヘッダ、タイルグループ、タイルレベ
ル、又は映像領域に含まれる、D14項に記載の方法。
【0551】
D16. バッファにおける利用可能なサンプルの数が閾値以上であることを判定する
ことは、バッファが満杯であることを示す、D4項に記載の方法。
【0552】
D17. 閾値が64×64×3輝度サンプルである、D16項に記載の方法。
【0553】
E1. 視覚メディア処理方法であって、
現在の映像ブロックと現在の映像ブロックのビットストリーム表現との間での変換を行
うことであって、変換は、映像ブロックと同じ映像領域に位置する再構成ブロックに関す
る動き情報に基づくイントラブロックコピーモードで行われ、変換時に、予測計算に使用
される第1の精度は、再構成計算に使用される第2の精度よりも低くなる、変換を行うこ
とと、を含む方法。
【0554】
E2. 予測計算は、clip{{p+[1<<(b-1)]}>>b,0,(1<<
bitdepth)-1}<<bを使用して、再構成サンプル値から予測サンプル値を判
定することを含み、pは、再構成サンプル値であり、bは、予め規定されたビットシフト
値であり、bitdepthは、予測サンプル精度であり、clipは、clip(x,
y,z)=(x<y)?y:(x>z?z:x)と定義されるクリッピング演算である、
E1項に記載の方法。
【0555】
E3. 予測計算は、clip{{p+[1<<(b-1)-1]}>>b,0,(1
<<bitdepth)-1}<<bを使用して、再構成サンプル値から予測サンプル値
を判定することを含み、pは、再構成サンプル値であり、bは、予め規定されたビットシ
フト値であり、bitdepthは、予測サンプル精度であり、clipは、clip(
x,y,z)=(x<y)?y:(x>z?z:x)と定義されるクリッピング演算であ
る、E1項に記載の方法。
【0556】
E4. 予測計算は、((p>>b)+(1<<(bitdepth-1)))<<b
を使用して、再構成サンプル値から予測サンプル値を判定することを含み、pは、再構成
サンプル値であり、bは、予め規定されたビットシフト値であり、bitdepthは、
予測サンプル精度である、E1項に記載の方法。
【0557】
E5. 予測計算は、(clip((p>>b),0,(1<<(bitdepth-
b)))+(1<<(bitdepth-1)))<<bを使用して、再構成サンプル値
から予測サンプル値を判定することを含み、pは、再構成サンプル値であり、bは、予め
規定されたビットシフト値であり、bitdepthは、予測サンプル精度であり、cl
ipは、clip(x,y,z)=(x<y)?y:(x>z?z:x)と定義されるク
リッピング演算である、E1項に記載の方法。
【0558】
E6. 予測計算は、インループリシェイピング(ILR)ステップが適用されるかど
うかに基づいて、クリッピング演算を使用して、再構成されたサンプル値から予測サンプ
ル値を判定することを含む、E1項に記載の方法。
【0559】
E7. bが、再構成されたサンプルと現在の映像ブロックのビット深度の差である、
E1~E5項のいずれか1項以上に記載の方法。
【0560】
E8. 第1の精度および/または第2の精度、および/または第1の精度と第2の精
度との差が、ビットストリーム表現におけるフィールドとして信号通知される、E1項に
記載の方法。
【0561】
E9. 予測計算は、再構成されたサンプル値から予測サンプル値を判定することを含
み、予測サンプル値の第1の部分は第1の精度を有し、予測サンプル値の第2の部分は第
2の精度を有する、E1項に記載の方法。
【0562】
E10. 現在の映像ブロックは、異なる精度のサンプルを含むコーディングツリーユ
ニット内に位置する、E9項に記載の方法。
【0563】
E11. 異なる精度を有するサンプルが、現在の映像ブロックに対して許容される参
照領域に含まれる、E10項に記載の方法。
【0564】
E12. 別の映像ブロックを含むコーディングツリーユニットに関連付けられた第1
の参照領域は、第1の精度を使用し、第2の参照領域は、現在の映像ブロックを含むコー
ディングツリーユニットに関連付けられた第2の参照領域は、第2の精度を使用する、E
9項に記載の方法。
【0565】
E13. 第1の参照領域が第1の色成分に対応し、第2の参照領域が第2の色成分に
対応する、E12項に記載の方法。
【0566】
F1. 視覚メディア処理方法であって、
現在の映像ブロックと、現在の映像ブロックのビットストリーム表現との間での変換を
、現在の映像ブロックと同じ映像領域に位置する再構成ブロックに関する動き情報に基づ
くイントラブロックコピーモードを使用して行うことであって、変換時には,nおよびM
は整数である場合に、nM×nMサイズの参照領域が使用され、現在の映像ブロックは、
コーディングツリーユニットに位置決めされ、参照領域は、現在の映像ブロックに対応す
るコーディングツリーユニット列のn×n個の直近の利用可能なコーディングツリーユニ
ットからのサンプルを含む、行うことを含む、方法。
【0567】
F2. 参照領域のサイズは128×128サンプルであり、コーディングツリーユニ
ットのサイズは64×64であり、バッファは、現在の映像ブロックを含む同じコーディ
ングツリーユニット行内の4つの最も近い利用可能なコーディングツリーユニットを含む
、F1項に記載の方法。
【0568】
F3. 参照領域のサイズは128×128サンプルであり、コーディングツリーユニ
ットのサイズは32×32であり、バッファは、現在の映像ブロックを含む同じコーディ
ングツリーユニット行内の16個の最も近い利用可能なコーディングツリーユニットを含
む、F1項に記載の方法。
【0569】
G1. 視覚メディア処理方法であって、
現在の映像ブロックと、現在の映像ブロックのビットストリーム表現との間での変換を
、現在の映像ブロックと同じ映像領域に位置する再構成ブロックに関する動き情報に基づ
くイントラブロックコピーモードを使用して行うことであって、変換時には,n、pおよ
びMは整数である場合に、nM×pMサイズの参照領域が使用され、現在の映像ブロック
は、コーディングツリーユニットに位置決めされ、参照領域は、現在の映像ブロックに対
応するコーディングツリーユニット列のn×p-1個の直近の利用可能なコーディングツ
リーユニットからのサンプルを含む、行うことを含む。
【0570】
G2. 参照領域のサイズは128×128サンプルまたは256×64サンプルであ
り、コーディングツリーユニットのサイズは64×64であり、バッファは、現在の映像
ブロックを含む同じコーディングツリーユニット行内の3つの最も近い利用可能なコーデ
ィングツリーユニットを含む、G1項に記載の方法。
【0571】
G3. 参照領域のサイズは128×128サンプルまたは512×32サンプルであ
り、コーディングツリーユニットのサイズは32×32であり、バッファは、現在の映像
ブロックを含む同じコーディングツリーユニット行内の15個の最も近い利用可能なコー
ディングツリーユニットを含む、G1項に記載の方法。
【0572】
G4. コーディングツリーユニットのサイズがM×Mである、G1項に記載の方法。
【0573】
G5. バッファの外側のサンプルは変換中に使用することが許可されない、G1項~
G4項のいずれか1項に記載の方法。
【0574】
H1. 視覚メディア処理方法であって、
映像領域の仮想パイプラインデータユニット(VPDU)の現在の映像ブロックと、現
在の映像ブロックのビットストリーム表現との間での変換を、現在の映像ブロックと同じ
映像領域に位置する再構成ブロックに関する動き情報に基づくイントラブロックコピーモ
ードを使用して行うことであって、変換時には,k、nおよびMは整数である場合に、n
M×nMサイズの参照領域が使用され、VPDUの寸法がkM×kMであり、現在の映像
ブロックは、コーディングツリーユニットに位置決めされ、参照領域は、現在の映像ブロ
ックに対応するコーディングツリーユニット列のn×n-k個の直近の利用可能なコーデ
ィングツリーユニットからのサンプルを含む、行うことを含む方法。
【0575】
H2. 参照領域のサイズは128×128サンプルであり、コーディングツリーユニ
ットのサイズは64×64であり、VPDUの寸法は64×64であり、バッファは、現
在の映像ブロックを含む同じコーディングツリーユニット行内の3つの最も近い利用可能
なコーディングツリーユニットを含む、G1項に記載の方法。
【0576】
H3. 参照領域のサイズは128×128サンプルであり、コーディングツリーユニ
ットのサイズは32×32であり、VPDUの寸法は64×64であり、バッファは、現
在の映像ブロックを含む同じコーディングツリーユニット行内の12個の最も近い利用可
能なコーディングツリーユニットを含む、H1項に記載の方法。
【0577】
I1. 視覚メディア処理方法であって、
視覚メディアデータのw×hサイズの現在の映像ブロックと現在の映像ブロックのビッ
トストリーム表現との間での変換のために、イントラブロックコピーモードで予測するた
めの参照サンプルを記憶するバッファを判定することであって、変換は、現在の映像ブロ
ックと同じ映像領域に位置する再構成ブロックに関する動き情報に基づくイントラブロッ
クコピーモードで行われる、判定することと、
現在の映像ブロックを含むサイズがM×Mのコーディングツリーユニット(CTU)の
左上位置に対する現在の映像ブロックの位置(x0、y0)に空間的に配置され、かつブ
ロックベクトル(BVx、BVy)を有するサンプルに対して、バッファにおける参照位
置(P,Q)から始まる対応する参照領域を計算することであって、参照位置(P,Q)
はブロックベクトル(BVx、BVy)および/または位置(x0,y0)を使用して判
定する、計算することと、
参照領域および/または参照位置(P、Q)に1つ以上の規則ベースの制約を適用して
、参照領域と映像領域との重なりを制限することと、を含む方法。
【0578】
I2. CTUのサイズが128×128である場合、(x0,y0)を(m×64,
n×64)で表すと、参照領域は、((m-2)×64,n×64)で表される左上隅を
有するサイズ64×64の映像領域と重ならないように制限され、mおよびnは整数であ
る、I1項に記載の方法。
【0579】
I3. CTUのサイズが128×128である場合、(x0,y0)を(m×64,
n×64)で表すと、参照領域は、(x0-128,y0)で表される左上隅を有するサ
イズw×hの映像領域と重ならないように制限され、mおよびnは整数である、I1項に
記載の方法。
【0580】
I4. バッファのサイズがkM×Mである場合、参照領域が、(x0-kM y0)
として表される左上隅を有するサイズw×hの映像領域と重複しないように制限される、
I1項に記載の方法。
【0581】
I5. 現在の映像ブロックの左上の位置が(2m*64,2n*64)として表され
る場合、再構成されたブロックの左上の位置は、((2m-2)*64,2n*64)と
して表され、式中、mおよびnは整数であり、現在の映像ブロックのサイズは64×64
である、I1項に記載の方法。
【0582】
I6. 現在の映像ブロックの左上の位置が(2m*64,2n*64)として表され
る場合、再構成されたブロックの左上の位置は、((2m-1)*64,2n*64)と
して表され、式中、mおよびnは整数であり、現在の映像ブロックのサイズは64×64
である、I1項に記載の方法。
【0583】
I7. 現在の映像ブロックの左上の位置が(2m*64,2n*64)として表され
る場合、再構成されたブロックの左上の位置は、((2m-1)*64,(2n+1)*
64)として表され、式中、mおよびnは整数であり、現在の映像ブロックのサイズは6
4×64である、I1項に記載の方法。
【0584】
I8. 現在の映像ブロックの左上の位置が(2m*64,2n*64)として表され
る場合、再構成されたブロックの左上の位置は、現在の映像ブロックの左上の位置に位置
する、mおよびnは整数であり、現在の映像ブロックのサイズは64×64である、I1
項に記載の方法。
【0585】
I9. 現在の映像ブロックの左上の位置が((2m+1)*64,(2n+1)*6
4)として表される場合、再構成されたブロックの左上の位置は、現在の映像ブロックの
左上の位置に位置する、mおよびnは整数であり、現在の映像ブロックのサイズは64×
64である、I1項に記載の方法。
【0586】
I10. 現在の映像ブロックの左上の位置が((2m+1)*64,2n*64)と
して表される場合、再構成されたブロックの左上の位置は、((2m-1)*64,2n
*64)として表され、式中、mおよびnは整数であり、現在の映像ブロックのサイズは
64×64である、I1項に記載の方法。
【0587】
I11. 現在の映像ブロックの左上の位置が((2m+1)*64,2n*64)と
して表される場合、再構成されたブロックの左上の位置は、((2m-1)*64,(2
n+1)*64)として表され、式中、mおよびnは整数であり、現在の映像ブロックの
サイズは64×64である、I1項に記載の方法。
【0588】
I12. 現在の映像ブロックの左上の位置が((2m+1)*64,2n*64)と
して表される場合、再構成されたブロックの左上の位置は、(2m*64,2n*64)
として表され、式中、mおよびnは整数であり、現在の映像ブロックのサイズは64×6
4である、I1項に記載の方法。
【0589】
I13. 現在の映像ブロックの左上の位置が((2m+1)*64,2n*64)と
して表される場合、前再構成されたブロックの左上の位置は、現在の映像ブロックの左上
の位置に位置する、mおよびnは整数であり、現在の映像ブロックのサイズは64×64
である、I1項に記載の方法。
【0590】
I14. 現在の映像ブロックの左上の位置が(2m*64,(2n+1)*64)と
して表される場合、再構成されたブロックの左上の位置は、((2m-1)*64,(2
n+1)*64)として表され、式中、mおよびnは整数であり、現在の映像ブロックの
サイズは64×64である、I1項に記載の方法。
【0591】
I15. 現在の映像ブロックの左上の位置が(2m*64,(2n+1)*64)と
して表される場合、再構成されたブロックの左上の位置は、(2m*64,2n*64)
として表され、式中、mおよびnは整数であり、現在の映像ブロックのサイズは64×6
4である、I1項に記載の方法。
【0592】
I16. 現在の映像ブロックの左上の位置が(2m*64,(2n+1)*64)と
して表される場合、再構成されたブロックの左上の位置は、((2m+1)*64,2n
*64)として表され、式中、mおよびnは整数であり、現在の映像ブロックのサイズは
64×64である、I1項に記載の方法。
【0593】
I17. 現在の映像ブロックの左上の位置が(2m*64,(2n+1)*64)と
して表される場合、再構成されたブロックの左上の位置は、現在の映像ブロックの左上の
位置に位置する、mおよびnは整数であり、現在の映像ブロックのサイズは64×64で
ある、I1項に記載の方法。
【0594】
J1. 視覚メディア処理方法であって、
視覚メディアデータの現在の映像ブロックと現在の映像ブロックのビットストリーム表
現との間での変換のために、イントラブロックコピーモードで予測するための参照サンプ
ルを記憶するバッファを判定することであって、この変換は、現在の映像ブロックと同じ
映像領域に位置する再構成ブロックに関する動き情報に基づくイントラブロックコピーモ
ードで行われる、判定することと、
現在の映像ブロックを含むコーディングユニット(CU)に対して、現在の映像ブロッ
クの位置(x0,y0)に空間的に位置するサンプルに対して、バッファにおける参照位
置から始まる対応する参照領域を計算することと、
前回処理されたブロックのうちどれを予測に用いるかを判定するために、参照領域及び
参照位置を調整することと、を含む、方法。
【0595】
J2. (y0>>6)&1==0のとき、最大2つの前回処理されたブロックが予測
に使用され、2つの前回処理されたブロックの左上の位置は((x>>6<<6)-12
8,y>>6<<6)および((x>>6<<6)-64,y>>6<<6)で表される
。J1項に記載の方法。
【0596】
J3. (y0>>6)&1==1である場合、左上位置が((x>>6<<6)-6
4,y>>6<<<6)で表される1つの前回処理されたブロックを予測に使用する、J
1項に記載の方法。
【0597】
K1. 映像処理方法であって、
映像の現在の映像ブロックと現在の映像ブロックのビットストリーム表現との間での変
換のために、映像の成分Xを使用して、映像の成分cの現在の映像ブロックに対応するブ
ロックベクトルの有効性を判定することであって、成分Xは、映像の輝度成分とは異なる
、判定することと、
現在の映像ブロックに対してブロックベクトルが有効であると判定すると、ブロックベ
クトルを使用して変換を行うことであって、変換は、現在の映像ブロックと同じ映像領域
に位置する再構成ブロックに関する動き情報に基づくイントラブロックコピー(IBC)
モードで行われることと、を含む、方法。
【0598】
K2. 現在の映像ブロックは位置(x,y)から開始し、判定することは、isRe
c((x+BVx)>>6<<6)+128-((y+BVy)>>>6)&1)*64
+(x%64),((y+BVy)>>6<<6)+(y%64))が真である場合に無
効であると判定することを含み、サンプル(x,y)がIBCモードで再構成され、ブロ
ックベクトルが(BVx,BVy)と表記されている場合に、isRec(x,y)が真
である、K1項に記載の方法。
【0599】
K3. 成分cが、映像の輝度成分に対応する、K1項に記載の方法。
【0600】
K4. 現在の映像ブロックがクロマブロックであり、映像が4:4:4フォーマット
である、K1項に記載の方法。
【0601】
K5. 現在の映像ブロックは、輝度成分及びクロマ成分を含む、K1項に記載の方法
。
【0602】
K6. 映像が4:2:0フォーマットであり、現在の映像ブロックは、位置(x,y
)から始まるクロマブロックであり、判定することは、ブロックベクトルが、isRec
(c.((x+BVx)>>5<<5)+64-(((y+BVy)>>5)&1)*3
2+(x%32),((y+BVy)>>5<<5)+(y%32))が真である場合に
無効であると判定することを含み、サンプル(x,y)がIBCモードで再構成された場
合、isRec(x,y)が真である、K1項に記載の方法。
【0603】
K7. 判定は、映像の成分Xのサンプルの可用性に少なくとも部分的に基づいている
、項K1に記載の方法。
【0604】
K8. 現在の映像ブロックが位置(x,y)から始まり、判定することは、ブロック
ベクトルが、isRec(c.((x+BVx)>>6<<6)+128-(((y+B
Vy)>>6)&1)*64+(x%64),((y+BVy)>>6<<6)+(y%
64))が真の場合には無効であると判定し、isRec(c,x,y)は、成分cのサ
ンプル(x,y)が利用可能であり、IBCモードによって再構成され、ブロックベクト
ルが(BVx,BVy)と表記される場合には、真である、K7項に記載の方法。
【0605】
K9. 現在の映像ブロックが輝度ブロックである、K8項に記載の方法。
【0606】
K10. 現在の映像ブロックがクロマブロックであり、映像が4:4:4フォーマッ
トである、K8項に記載の方法。
【0607】
K11. 判定するステップは、映像の成分Xのサンプルの可用性を判定するステップ
を含む、K7項に記載の方法。
【0608】
K12. 現在の映像ブロックは、位置(x,y)から始まり、判定するステップは、
isRec(c,x+BVx+Chroma_CTU_size,y)が真の場合、ブロ
ックベクトルが無効であると判定し、成分cのサンプル(x,y)が利用可能であり、I
BCモードによって再構成された場合にはisRec(c,x,y)が真であり、ブロッ
クベクトルは、(BVx,BVy))、Chroma_CTU_sizeは、クロマ成分
のコーディングツリーユニットのサイズを示す、K7項に記載の方法。
【0609】
K13. クロマ成分のためのコーディングツリーユニットのサイズが64である、K
12項に記載の方法。
【0610】
K14. 現在の映像ブロックの特徴を判定する方法であって、
イントラブロックコピーモードにおいて、予測のための参照サンプルを記憶するバッフ
ァを判定することと、
現在の映像ブロックを含むコーディングツリーユニット(CTU)の左上の位置に対し
て、現在の映像ブロックの位置(x0,y0)に空間的に位置するサンプルに対して、バ
ッファにおける参照位置(P,Q)から始まる対応する参照領域を計算することと、をさ
らに含む、K1項に記載の方法。
【0611】
K15. バッファは、サイズM×Mのブロックを記憶する、K14項に記載の方法。
【0612】
K16. バッファは、サイズN×Mのブロックを記憶し、式中、MとNが等しくない
、K14項に記載の方法。
【0613】
K17. 1つ以上の条件が満たされる場合、バッファの使用が制限される、K14項
に記載の方法。
【0614】
K18. バッファが現在の映像ブロックと同じブリック/タイル/タイルグループ/
スライス内にある場合、バッファの使用が制限される、K14項に記載の方法。
【0615】
L1. 変換は、現在の映像ブロックからビットストリーム表現を生成することを含む
A1~K18項のいずれかに記載の方法。
【0616】
L2. 変換は、ビットストリーム表現から現在の映像ブロックの画素値を生成するこ
とを含む、A1~K18項のいずれかに記載の方法。
【0617】
L3. A1~K18のいずれか1項以上に記載の方法を実施するように構成された処
理装置を備える映像エンコーダ装置。
【0618】
L4. A1~K18項のいずれか1項以上に記載の方法を実施するように構成された
処理装置を備える、映像デコーダ装置。
【0619】
L5. コードが記憶されたコンピュータ可読媒体であって、コードはA1~K18の
1項以上のいずれかに記載の方法を実施するための処理装置実行可能命令を具現化する、
コンピュータ可読媒体。
【0620】
本明細書では、「映像処理」という用語は、映像符号化、映像復号化、映像圧縮、また
は映像展開を指すことができる。例えば、映像圧縮アルゴリズムは、映像の画素表現から
対応するビットストリーム表現への変換、またはその逆の変換中に適用されてもよい。現
在の映像ブロックのビットストリーム表現は、例えば、構文によって規定されるように、
ビットストリーム内の同じ場所または異なる場所に拡散されるビットに対応していてもよ
い。例えば、1つのマクロブロックは、変換およびコーディングされた誤り残差値の観点
から、且つビットストリームにおけるヘッダおよび他のフィールドにおけるビットを使用
して符号化されてもよい。
【0621】
以上、説明の目的で本開示の技術の特定の実施形態を説明したが、本発明の範囲から逸
脱することなく様々な修正が可能であることは、理解されるであろう。従って、本開示の
技術は、添付の特許請求の範囲による場合を除き、限定されない。
【0622】
本特許明細書に記載された主題および機能操作の実装形態は、本明細書に開示された構
造およびその構造的等価物を含め、様々なシステム、デジタル電子回路、またはコンピュ
ータソフトウェア、ファームウェア、若しくはハードウェアで実施されてもよく、または
それらの1つ以上の組み合わせで実施してもよい。本明細書に記載された主題の実装形態
は、1つ以上のコンピュータプログラム製品、すなわち、データ処理装置によって実行さ
れるため、又はデータ処理装置の操作を制御するために、有形で非可搬性のコンピュータ
可読媒体上に符号化されたコンピュータプログラム命令の1つ以上のモジュールとして実
装することができる。このコンピュータ可読媒体は、機械可読記憶装置、機械可読記憶基
板、メモリデバイス、機械可読伝播信号をもたらす物質の組成物、又はこれらの1つ以上
の組み合わせであってもよい。「データ処理ユニット」又は「データ処理装置」という用
語は、例えば、プログラマブル処理装置、コンピュータ、又は複数の処理装置若しくはコ
ンピュータを含め、データを処理するためのすべての装置、デバイス、および機械を含む
。この装置は、ハードウェアの他に、当該コンピュータプログラムの実行環境を作るコー
ド、例えば、処理装置ファームウェア、プロトコルスタック、データベース管理システム
、オペレーティングシステム、又はこれらの1つ以上の組み合わせを構成するコードを含
むことができる。
【0623】
コンピュータプログラム(プログラム、ソフトウェア、ソフトウェアアプリケーション
、スクリプト、又はコードとも呼ばれる)は、コンパイルされた言語又は解釈された言語
を含む任意の形式のプログラミング言語で記述することができ、また、それは、スタンド
アロンプログラムとして、又はコンピューティング環境で使用するのに適したモジュール
、コンポーネント、サブルーチン、又は他のユニットとして含む任意の形式で展開するこ
とができる。コンピュータプログラムは、必ずしもファイルシステムにおけるファイルに
対応するとは限らない。プログラムは、他のプログラム又はデータを保持するファイルの
一部(例えば、マークアップ言語文書に格納された1つ以上のスクリプト)に記録されて
いてもよいし、当該プログラム専用の単一のファイルに記憶されていてもよいし、複数の
調整ファイル(例えば、1つ以上のモジュール、サブプログラム、又はコードの一部を格
納するファイル)に記憶されていてもよい。1つのコンピュータプログラムを、1つのサ
イトに位置する1つのコンピュータ、又は複数のサイトに分散され通信ネットワークによ
って相互接続される複数のコンピュータで実行させるように展開することも可能である。
【0624】
本明細書に記載された処理およびロジックフローは、入力データ上で動作し、出力を生
成することによって機能を実行するための1つ以上のコンピュータプログラムを実行する
1つ以上のプログラマブル処理装置によって行うことができる。処理及びロジックフロー
はまた、特定用途のロジック回路、例えば、FPGA(フィールドプログラマブルゲート
アレイ)又はASIC(特定用途向け集積回路)によって行うことができ、装置はまた、
特別目的のロジック回路として実装することができる。
【0625】
コンピュータプログラムの実行に適した処理装置は、例えば、汎用及び専用マイクロ処
理装置の両方、並びに任意の種類のデジタルコンピュータの任意の1つ以上の処理装置を
含む。一般的に、処理装置は、読み出し専用メモリ又はランダムアクセスメモリ又はその
両方から命令及びデータを受信する。コンピュータの本質的な要素は、命令を実行するた
めのプロセッサと、命令およびデータを記憶するための1つ以上の記憶装置とである。一
般的に、コンピュータは、データを記憶するための1つ以上の大容量記憶デバイス、例え
ば、磁気、光磁気ディスク、又は光ディスクを含んでもよく、又はこれらの大容量記憶デ
バイスからデータを受信するか、又はこれらにデータを転送するように動作可能に結合さ
れてもよい。しかしながら、コンピュータは、このようなデバイスを有する必要はない。
コンピュータプログラム命令およびデータを記憶するのに適したコンピュータ可読媒体は
、あらゆる形式の不揮発性メモリ、媒体、およびメモリデバイスを含み、例えば、EPR
OM、EEPROM、フラッシュメモリデバイス等の半導体メモリデバイスを含む。処理
装置及びメモリは、特定用途のロジック回路によって補完されてもよく、又は特定用途の
ロジック回路に組み込まれてもよい。
【0626】
本明細書は、図面とともに、例示のみを目的とするものであり、例示的とは例を意味す
ることが意図される。本明細書において、「または」の使用は、文脈からそうでないこと
が明確に示されていない限り、「および/または」を含むことが意図される。
【0627】
本特許明細書は多くの詳細を含むが、これらは、任意の発明の範囲又は特許請求の範囲
を限定するものと解釈されるべきではなく、むしろ、特定の発明の特定の実施形態に特有
であり得る特徴の説明と解釈されるべきである。本特許文献において別個の実施形態の文
脈で説明されている特定の特徴は、1つの例において組み合わせて実装してもよい。逆に
、1つの例の文脈で説明された様々な特徴は、複数の実施形態において別個に又は任意の
適切なサブコンビネーションで実装してもよい。さらに、特徴は、特定の組み合わせで作
用するものとして上記に記載され、最初にそのように主張されていてもよいが、主張され
た組み合わせからの1つ以上の特徴は、場合によっては、組み合わせから抜粋されること
ができ、主張された組み合わせは、サブ組み合わせまたはサブ組み合わせのバリエーショ
ンに向けられてもよい。
【0628】
同様に、動作は図面において特定の順番で示されているが、これは、所望の結果を達成
するために、このような動作が示された特定の順番で又は連続した順番で実行されること
、又は示された全ての操作が実行されることを必要とするものと理解されるべきではない
。また、本特許明細書に記載されている例における様々なシステムの構成要素の分離は、
全ての実施形態においてこのような分離を必要とするものと理解されるべきではない。
【0629】
いくつかの実装形態及び例のみが記載されており、この特許文献に記載され図示されて
いる内容に基づいて、他の実施形態、拡張及び変形が可能である。
【手続補正書】
【提出日】2024-01-10
【手続補正1】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項1】
視覚メディア処理方法であって、
映像の現在の映像ブロックと前記映像のビットストリームとの変換のために、前記現在の映像ブロックに第1のコーディングモードが適用されることを判定することと、
前記現在の映像ブロックにおける第1のブロックベクトル(BVx、BVy)を導出することと、
前記第1のブロックベクトル及びサンプルバッファに基づいて、前記現在の映像ブロックの予測サンプルを生成することであって、フィルタリング演算が適用されずに前の映像ブロックの再構成サンプルがサンプルバッファに記憶され、前記第1のコーディングモードにおいて、前記予測サンプルは前記現在の映像ブロックを含む同じピクチャから導出され、前記サンプルバッファのビット深度は前記変換時に使用される再構成バッファのビット深度と同一である、生成することと、
前記予測サンプルに基づいて前記変換を行うことと、
を有する方法。
【請求項2】
前記サンプルバッファは、第1の順序で更新される、
請求項1に記載の方法。
【請求項3】
前記第1の順序は、前記変換時の再構成サンプルの順序である、
請求項2に記載の方法。
【請求項4】
前記第1の順序は、先入れ先出し規則に基づく、
請求項2に記載の方法。
【請求項5】
前記サンプルバッファが満杯である場合、前記サンプルバッファに最も早く追加されたサンプルは、最新の再構成サンプルと置き換えられる、
請求項4に記載の方法。
【請求項6】
前記サンプルバッファは、矩形領域であり、
前記サンプルバッファのサイズは、前記ビットストリームに含まれるフィールドに基づいて示される、
請求項1に記載の方法。
【請求項7】
前記前の映像ブロックの一部は、前記現在の映像ブロックを含む現在のコーディングツリーブロックとは異なるコーディングツリーブロックに配置される、
請求項1に記載の方法。
【請求項8】
前記現在の映像ブロック内の第1のサンプル(x0,y0)の予測サンプルを生成するために、位置変換演算が(x0+BVx,y0+BVy)に適用されて、前記第1の予測サンプルの前記サンプルバッファ内の位置を導出する、
請求項1に記載の方法。
【請求項9】
前記位置変換演算は、モジュロ演算であり、
前記第1の予測サンプルの位置は、((x0+BVx)modM、(y0+BVy)modN)で表され、modはモジュロ関数である、
請求項8に記載の方法。
【請求項10】
前記変換は、前記現在の映像ブロックを前記ビットストリームに符号化することを含む、
請求項1から9のいずれか1項に記載の方法。
【請求項11】
前記変換は、前記ビットストリームから前記現在の映像ブロックを復号することを含む、
請求項1から9のいずれか1項に記載の方法。
【請求項12】
処理装置と、命令が記憶された非一時的メモリと、を備える映像データを処理する装置であって、
前記命令は、前記処理装置による実行時に、前記処理装置に、
映像の現在の映像ブロックと前記映像のビットストリームとの変換のために、前記現在の映像ブロックに第1のコーディングモードが適用されることを判定することと、
前記現在の映像ブロックにおける第1のブロックベクトル(BVx、BVy)を導出することと、
前記第1のブロックベクトル及びサンプルバッファに基づいて、前記現在の映像ブロックの予測サンプルを生成することであって、フィルタリング演算が適用されずに前の映像ブロックの再構成サンプルがサンプルバッファに記憶され、前記第1のコーディングモードにおいて、前記予測サンプルは前記現在の映像ブロックを含む同じピクチャから導出され、前記サンプルバッファのビット深度は前記変換時に使用される再構成バッファのビット深度と同一である、生成することと、
前記予測サンプルに基づいて前記変換を行うことと、を実行させる、
装置。
【請求項13】
命令を記憶する非一時的なコンピュータ可読記憶媒体であって、
前記命令は、処理装置に、
映像の現在の映像ブロックと前記映像のビットストリームとの変換のために、前記現在の映像ブロックに第1のコーディングモードが適用されることを判定することと、
前記現在の映像ブロックにおける第1のブロックベクトル(BVx、BVy)を導出することと、
前記第1のブロックベクトル及びサンプルバッファに基づいて、前記現在の映像ブロックの予測サンプルを生成することであって、フィルタリング演算が適用されずに前の映像ブロックの再構成サンプルがサンプルバッファに記憶され、前記第1のコーディングモードにおいて、前記予測サンプルは前記現在の映像ブロックを含む同じピクチャから導出され、前記サンプルバッファのビット深度は前記変換時に使用される再構成バッファのビット深度と同一である、生成することと、
前記予測サンプルに基づいて前記変換を行うことと、を実行させる、
非一時的なコンピュータ可読記憶媒体。
【請求項14】
映像のビットストリームを記憶する方法であって、
前記映像の現在の映像ブロックのために、前記現在の映像ブロックに第1のコーディングモードが適用されることを判定することと、
前記現在の映像ブロックにおける第1のブロックベクトル(BVx、BVy)を導出することと、
前記第1のブロックベクトル及びサンプルバッファに基づいて、前記現在の映像ブロックの予測サンプルを生成することであって、フィルタリング演算が適用されずに前の映像ブロックの再構成サンプルがサンプルバッファに記憶され、前記第1のコーディングモードにおいて、前記予測サンプルは前記現在の映像ブロックを含む同じピクチャから導出され、前記サンプルバッファのビット深度は前記生成時に使用される再構成バッファのビット深度と同一である、生成することと、
前記予測サンプルに基づいて前記変換を行うことと、
前記ビットストリームを非一時的なコンピュータ可読記録媒体に記憶することと、を含む、
方法。
【手続補正2】
【補正対象書類名】明細書
【補正対象項目名】0001
【補正方法】変更
【補正の内容】
【0001】
関連出願の相互参照
本願は、2021年8月27日提出の日本特許出願2021-551506号に基づくものであり、この日本特許出願は、2020年3月2日出願の国際特許出願PCT/CN2020/077415号に基づくものであり、この国際特許出願は、2019年3月1日出願の国際特許出願PCT/CN2019/076695号の優先権および利益を主張する。前述の特許出願は全て、参照によりその全体が本明細書に組み込まれる。
【外国語明細書】