特表2024-521525 | 知財ポータル「IP Force」

知財求人 - 知財ポータルサイト「IP Force」

▶ 中興通訊股▲ふん▼有限公司の特許一覧

特表2024-521525ビデオ処理のための方法、装置、記憶媒体及び電子装置

書誌要約請求の範囲詳細な説明課題実施例実施するための形態図面の説明

目に優しい文字サイズ小中大 PDF Top

< >

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公表特許公報(A)

(11)【公表番号】

(43)【公表日】2024-05-31

(54)【発明の名称】ビデオ処理のための方法、装置、記憶媒体及び電子装置

(51)【国際特許分類】

H04N 19/82 20140101AFI20240524BHJP

H04N 19/70 20140101ALI20240524BHJP

【ＦＩ】

H04N19/82

H04N19/70

【審査請求】有

【予備審査請求】未請求

(21)【出願番号】P 2023578160

(86)(22)【出願日】2022-11-24

(85)【翻訳文提出日】2023-12-19

(86)【国際出願番号】 CN2022134125

(87)【国際公開番号】W WO2023124673

(87)【国際公開日】2023-07-06

(31)【優先権主張番号】202111679995.5

(32)【優先日】2021-12-31

(33)【優先権主張国・地域又は機関】CN

(81)【指定国・地域】

(71)【出願人】

【識別番号】511151662

【氏名又は名称】中興通訊股▲ふん▼有限公司

【氏名又は名称原語表記】ＺＴＥＣＯＲＰＯＲＡＴＩＯＮ

【住所又は居所原語表記】ＺＴＥＰｌａｚａ，ＫｅｊｉＲｏａｄＳｏｕｔｈ，Ｈｉ－ＴｅｃｈＩｎｄｕｓｔｒｉａｌＰａｒｋ，ＮａｎｓｈａｎＳｈｅｎｚｈｅｎ，Ｇｕａｎｇｄｏｎｇ５１８０５７Ｃｈｉｎａ

(74)【代理人】

【識別番号】100112656

【弁理士】

【氏名又は名称】宮田英毅

(74)【代理人】

【識別番号】100089118

【弁理士】

【氏名又は名称】酒井宏明

(72)【発明者】

【氏名】周怡

(72)【発明者】

【氏名】鄒文杰

(72)【発明者】

【氏名】黄成

(72)【発明者】

【氏名】白雅賢

【テーマコード（参考）】

5C159

【Ｆターム（参考）】

5C159PP04

5C159PP16

5C159RB09

5C159RC12

5C159UA02

5C159UA05

5C159UA16

(57)【要約】

本発明の実施例は、ビデオ処理のための方法、装置、記憶媒体及び電子装置を提供する。当該方法は、再構成されたビデオユニットのニューラルネットワークループフィルタリング有効化フラグを決定することと、前記ニューラルネットワークループフィルタリング有効化フラグに基づいて、前記再構成されたビデオユニットのために適応ループフィルタリング有効化フラグを設定することと、シグナリングによって、前記再構成されたビデオユニットのニューラルネットワークループフィルタリングに関連するフィルタ情報と、前記再構成されたビデオユニットの適応ループフィルタリングに関連するフィルタ情報とのうちの少なくとも一つの情報を通知することとを含む。
【選択図】図４

【特許請求の範囲】

【請求項1】

再構成されたビデオユニットのニューラルネットワークループフィルタリング有効化フラグを決定することと、
前記ニューラルネットワークループフィルタリング有効化フラグに基づいて、前記再構成されたビデオユニットのために適応ループフィルタリング有効化フラグを設定することと、
シグナリングによって、前記再構成されたビデオユニットのニューラルネットワークループフィルタリングに関連するフィルタ情報と、前記再構成されたビデオユニットの適応ループフィルタリングに関連するフィルタ情報とのうちの少なくとも一つの情報を通知することと、
を含む、ビデオ処理のための方法。

【請求項2】

前記適応ループフィルタリングに関連するフィルタ情報は、前記適応ループフィルタリング有効化フラグと、適応ループフィルタリングによって参照される適応パラメータセットとを含む、
請求項１に記載の方法。

【請求項3】

前記適応ループフィルタリング有効化フラグは、輝度適応ループフィルタリング有効化フラグと、クロマ適応ループフィルタリング有効化フラグとを含む、
請求項１に記載の方法。

【請求項4】

【請求項5】

前記再構成されたビデオユニットの符号化ビデオデータを生成するための符号化ビットストリームのシーケンスパラメータセットＳＰＳと、画像パラメータセットＰＰＳと、画像ヘッダＰＨと、スライスヘッダＳＨと、符号化・復号化ツリーユニットＣＴＵとの少なくとも一つのシンタックス要素において、シグナリングによって前記適応ループフィルタリング有効化フラグを通知する、
請求項１～４のいずれか１項に記載の方法。

【請求項6】

【請求項7】

前記ニューラルネットワークループフィルタリング有効化フラグがシーケンスレベルにおいて前記再構成されたビデオユニットに対してニューラルネットワークループフィルタリングを実行することを指示し、且つ前記適応ループフィルタリング有効化フラグが画像レベル又はスライスレベルにおいて前記再構成されたビデオユニットに対して輝度適応ループフィルタリングを実行しないことを指示する場合に、前記再構成されたビデオユニットのために輝度適応ループフィルタリング有効化フラグとクロマ適応ループフィルタリング有効化フラグとをそれぞれ設定すること、
をさらに含む、
請求項１に記載の方法。

【請求項8】

前記クロマ適応ループフィルタリング有効化フラグに基づいて、前記再構成されたビデオユニットに対してクロマ適応ループフィルタリングを実行するかどうかを判定すること
をさらに含む、
請求項６又は７に記載の方法。

【請求項9】

前記再構成されたビデオユニットのために輝度適応ループフィルタリング有効化フラグとクロマ適応ループフィルタリング有効化フラグとをそれぞれ設定することは、
前記再構成されたビデオユニットのために輝度成分の適応ループフィルタに関連する第一のフラグを設定することを含む、
請求項６～８のいずれか１項に記載の方法。

【請求項10】

前記再構成されたビデオユニットのために輝度適応ループフィルタリング有効化フラグとクロマ適応ループフィルタリング有効化フラグとをそれぞれ設定することは、
前記再構成されたビデオユニットのためにクロマ成分の適応ループフィルタに関連する第二のフラグを設定することを含む、
請求項６から８のいずれか１項に記載の方法。

【請求項11】

【請求項12】

前記再構成されたビデオユニットに対して適応ループフィルタリングを実行することは、
前記再構成されたビデオユニットの輝度成分に対して輝度適応ループフィルタリングを実行することと、
前記再構成されたビデオユニットの第一のクロマ成分に対して第一のクロマ適応ループフィルタリングを実行することと、
前記再構成されたビデオユニットの第二のクロマ成分に対して第二のクロマ適応ループフィルタリングを実行することと、
前記再構成されたビデオユニットの第一のクロマ成分に対して第一のクロマ成分間適応ループフィルタリングを実行することと、
前記再構成されたビデオユニットの第二のクロマ成分に対して第一のクロマ成分間適応ループフィルタリングを実行することと、
のうちの少なくとも一つの操作を含む、
請求項１１に記載の方法。

【請求項13】

前記ニューラルネットワークループフィルタリング有効化フラグがシーケンスレベル又は画像レベル又はスライスレベルにおいて前記再構成されたビデオユニットに対してニューラルネットワークループフィルタリングを実行することを指示する場合に、
前記再構成されたビデオユニットの輝度成分に対して輝度適応ループフィルタリングを実行する決定と、
前記再構成されたビデオユニットの第一のクロマ成分に対して第一のクロマ適応ループフィルタリングを実行する決定と、
前記再構成されたビデオユニットの第二のクロマ成分に対して第二のクロマ適応ループフィルタリングを実行する決定と、
前記再構成されたビデオユニットの第一のクロマ成分に対して第一のクロマ成分間適応ループフィルタリングを実行する決定と、
前記再構成されたビデオユニットの第二のクロマ成分に対して第一のクロマ成分間適応ループフィルタリングを実行する決定と
のうちの少なくとも一つの決定に基づいて、前記再構成されたビデオユニットのために適応ループフィルタリング有効化フラグを設定する、
請求項１に記載の方法。

【請求項14】

前記ニューラルネットワークループフィルタリングに関連するフィルタ情報は、ニューラルネットワークループフィルタリング有効化フラグと、ニューラルネットワークループフィルタリングによって参照される適応パラメータセットとを含む、
請求項１に記載の方法。

【請求項15】

前記ニューラルネットワークループフィルタリング有効化フラグは、
輝度ニューラルネットワークループフィルタリング有効化フラグと、
第一のクロマニューラルネットワークループフィルタリング有効化フラグと、
第二のクロマニューラルネットワークループフィルタリング有効化フラグと
のうちの少なくとも一つを含む、
請求項１に記載の方法。

【請求項16】

前記再構成されたビデオユニットの符号化ビデオデータを生成するための符号化ビットストリームのシーケンスパラメータセットＳＰＳと、画像パラメータセットＰＰＳと、画像ヘッダＰＨと、スライスヘッダＳＨと、符号化・復号化ツリーユニットＣＴＵとの少なくとも一つのシンタックス要素において、シグナリングによって前記ニューラルネットワークループフィルタリング有効化フラグを通知する、
請求項１から１５のいずれか１項に記載の方法。

【請求項17】

前記再構成されたビデオユニットは、
ビデオ画像と、ビデオクリップと、ビデオパターンブロックと、スライス（Ｓｌｉｃｅ）と、符号化・復号化ツリーユニットＣＴＵと、符号化・復号化ユニットＣＵとのうちの少なくとも一つに対応する、
請求項１から１６のいずれか１項に記載の方法。

【請求項18】

再構成されたビデオユニットのニューラルネットワークループフィルタリングに関連するフィルタ情報と、再構成されたビデオユニットの適応ループフィルタリングに関連するフィルタ情報とのうちの少なくとも一つの情報を受信することと、
前記再構成されたビデオユニットのニューラルネットワークループフィルタリング有効化フラグ及び前記再構成されたビデオユニットの適応ループフィルタリング有効化フラグを決定することと、
前記適応ループフィルタリング有効化フラグに基づいて、前記再構成されたビデオユニットに対して適応ループフィルタリングを実行することと、
を含む、ビデオ処理のための方法。

【請求項19】

前記適応ループフィルタリングに関連するフィルタ情報は、適応ループフィルタリング有効化フラグと、適応ループフィルタリングによって参照される適応パラメータセットとを含む、
請求項１８に記載の方法。

【請求項20】

前記適応ループフィルタリング有効化フラグは、輝度適応ループフィルタリング有効化フラグと、クロマ適応ループフィルタリング有効化フラグとを含む、
請求項１８に記載の方法。

【請求項21】

【請求項22】

前記再構成されたビデオユニットの符号化ビデオデータを生成するための符号化ビットストリームのシーケンスパラメータセットＳＰＳと、画像パラメータセットＰＰＳと、画像ヘッダＰＨと、スライスヘッダＳＨと、符号化・復号化ツリーユニットＣＴＵとの少なくとも一つのシンタックス要素において、前記適応ループフィルタリング有効化フラグを決定する、
請求項１８～２１のいずれか１項に記載の方法。

【請求項23】

【請求項24】

前記ニューラルネットワークループフィルタリング有効化フラグがシーケンスレベルにおいて前記再構成されたビデオユニットに対してニューラルネットワークループフィルタリングを実行することを指示する場合に、画像レベル又はスライスレベルにおいて前記再構成されたビデオユニットの輝度適応ループフィルタリング有効化フラグを決定することと、
前記輝度適応ループフィルタリング有効化フラグが前記再構成されたビデオユニットに対して輝度適応ループフィルタリングを実行しないことを指示する場合に、前記再構成されたビデオユニットのクロマ適応ループフィルタリング有効化フラグを決定することと、
をさらに含む、
請求項１８に記載の方法。

【請求項25】

前記クロマ適応ループフィルタリング有効化フラグに基づいて、前記再構成されたビデオユニットに対してクロマ適応ループフィルタリングを実行するかどうかを判定すること
をさらに含む、
請求項２３又は２４に記載の方法。

【請求項26】

前記再構成されたビデオユニットの輝度適応ループフィルタリング有効化フラグを決定することは、
前記再構成されたビデオユニットの輝度成分の適応ループフィルタに関連する第一のフラグの値を決定することを含む、
請求項２３～２５のいずれか１項に記載の方法。

【請求項27】

前記再構成されたビデオユニットのクロマ適応ループフィルタリング有効化フラグを決定することは、
前記再構成されたビデオユニットのクロマ成分の適応ループフィルタに関連する第二のフラグの値を決定することを含む、
請求項２３～２５のいずれか１項に記載の方法。

【請求項28】

【請求項29】

【請求項30】

前記ニューラルネットワークループフィルタリングに関連するフィルタ情報は、ニューラルネットワークループフィルタリング有効化フラグと、ニューラルネットワークループフィルタリングによって参照される適応パラメータセットとを含む、
請求項１８に記載の方法。

【請求項31】

前記ニューラルネットワークループフィルタリング有効化フラグは、
輝度ニューラルネットワークループフィルタリング有効化フラグと、
第一のクロマニューラルネットワークループフィルタリング有効化フラグと、
第二のクロマニューラルネットワークループフィルタリング有効化フラグと、
のうちの少なくとも一つを含む、
請求項１８に記載の方法。

【請求項32】

前記再構成されたビデオユニットの符号化ビデオデータを生成するための符号化ビットストリームのシーケンスパラメータセットＳＰＳと、画像パラメータセットＰＰＳと、画像ヘッダＰＨと、スライスヘッダＳＨと、符号化・復号化ツリーユニットＣＴＵとの少なくとも一つのシンタックス要素において、前記ニューラルネットワークループフィルタリング有効化フラグを決定する、
請求項１８から３１のいずれか１項に記載の方法。

【請求項33】

前記再構成されたビデオユニットは、ビデオ画像と、ビデオクリップと、ビデオパターンブロックと、スライス（Ｓｌｉｃｅ）と、符号化・復号化ツリーユニットＣＴＵと、符号化・復号化ユニットＣＵとのうちの少なくとも一つに対応する、
請求項１８から３２のいずれか１項に記載の方法。

【請求項34】

再構成されたビデオユニットのニューラルネットワークループフィルタリング有効化フラグを決定するための決定モジュールと、
前記ニューラルネットワークループフィルタリング有効化フラグに基づいて、前記再構成されたビデオユニットのために適応ループフィルタリング有効化フラグを設定するための設定モジュールと、
シグナリングによって、前記再構成されたビデオユニットのニューラルネットワークループフィルタリングに関連するフィルタ情報と、前記再構成されたビデオユニットの適応ループフィルタリングに関連するフィルタ情報とのうちの少なくとも一つの情報を通知するための通知モジュールと、
を備える、ビデオ処理のための装置。

【請求項35】

前記適応ループフィルタリングに関連するフィルタ情報は、適応ループフィルタリング有効化フラグと、適応ループフィルタリングによって参照される適応パラメータセットとを含む、
請求項３４に記載の装置。

【請求項36】

前記通知モジュールは、
前記再構成されたビデオユニットの符号化ビデオデータを生成するための符号化ビットストリームのシーケンスパラメータセットＳＰＳと、画像パラメータセットＰＰＳと、画像ヘッダＰＨと、スライスヘッダＳＨと、符号化・復号化ツリーユニットＣＴＵとの少なくとも一つのシンタックス要素において、シグナリングによって前記適応ループフィルタリング有効化フラグを通知するための通知ユニットを備える、
請求項３４又は３５に記載の装置。

【請求項37】

再構成されたビデオユニットのニューラルネットワークループフィルタリングに関連するフィルタ情報と、再構成されたビデオユニットの適応ループフィルタリングに関連するフィルタ情報とのうちの少なくとも一つの情報を受信するための受信モジュールと、
ニューラルネットワークループフィルタリング有効化フラグが前記再構成されたビデオユニットに対してニューラルネットワークループフィルタリングを実行することを指示する場合に、前記再構成されたビデオユニットの適応ループフィルタリング有効化フラグを識別するための識別モジュールと、
前記適応ループフィルタリング有効化フラグに基づいて、前記再構成されたビデオユニットに対して適応ループフィルタリングを実行するためのフィルタリングモジュールと、
を備える、ビデオ処理のための装置。

【請求項38】

前記適応ループフィルタリングに関連するフィルタ情報は、適応ループフィルタリング有効化フラグと、適応ループフィルタリングによって参照される適応パラメータセットとを含む、
請求項３７に記載の装置。

【請求項39】

前記識別モジュールは、
前記再構成されたビデオユニットの符号化ビデオデータを生成するための符号化ビットストリームのシーケンスパラメータセットＳＰＳと、画像パラメータセットＰＰＳと、画像ヘッダＰＨと、スライスヘッダＳＨと、符号化・復号化ツリーユニットＣＴＵとの少なくとも一つのシンタックス要素において、前記適応ループフィルタリング有効化フラグを決定するための識別ユニットを備える、
請求項３７又は３８に記載の装置。

【請求項40】

プロセッサにより実行される時、前記請求項１～１７のいずれか１項に記載の方法のステップ、又は請求項１８～３３のいずれか１項に記載の方法のステップを実現するコンピュータプログラムが記憶されている、
コンピュータ可読記憶媒体。

【請求項41】

メモリと、プロセッサと、前記メモリに記憶されて前記プロセッサ上で実行できるコンピュータプログラムとを含む電子装置であって、前記プロセッサは、前記コンピュータプログラムを実行する時に前記請求項１～１７のいずれか１項に記載の方法のステップを実現し、又は請求項１８～３３のいずれか１項に記載の方法のステップを実現する、
電子装置。

【発明の詳細な説明】

【技術分野】

【0001】

本開示は、２０２１年１２月３１日に出願された中国出願第ＣＮ２０２１１１６７９９９５．５号（発明名称：ビデオ処理のための方法、装置、記憶媒体及び電子装置）に基づき、その優先権を主張し、該出願の全ての内容は、引用により全体として本開示に組み込まれる。
本発明の実施例は、通信分野に関し、具体的には、ビデオ処理のための方法、装置、記憶媒体及び電子装置に関する。

【背景技術】

【0002】

ニューラルネットワーク（ＮｅｕｒａｌＮｅｔｗｏｒｋ、ＮＮと略称される）に代表される機械学習技術を画像／ビデオ符号化に利用することは、トレンドとなっている。ニューラルネットワークに基づくループフィルタリング（ＮｅｕｒａｌＮｅｔｗｏｒｋＩｎ－ｌｏｏｐＦｉｌｔｅｒ、ＮＮＦと略称される））は、歪み領域からオリジナル／ロスレス領域への非線形マッピング関係を確立することにより、再構築されたビデオの品質を大幅に向上させることができる。

【0003】

ＮＮＦネットワークトレーニングのオフライン性のため、一般的には、ＮＮＦ後も適応ループフィルタリング（ＡｄａｐｔｉｖｅＬｏｏｐＦｉｌｔｅｒ、ＡＬＦと略称される）フィルタを用いて符号化画像の性能をさらに向上させる。ＮＮＦは、ビデオの輝度成分に対して最適な性能を達成できることが多いが、ＡＬＦフィルタリングモジュールがＳｌｉｃｅ（スライス）レベルで決定選択を行う時、輝度成分のレート歪み最適化性能のみに基づいて判断すると、ＡＬＦフィルタリングモジュールをオフにする場合がある。一方、クロマ成分のＮＮＦは、最適でない場合が多く、さらにクロマＡＬＦ及び成分間適応ループフィルタリング（Ｃｒｏｓｓ－ｃｏｍｐｏｎｅｎｔＡｄａｐｔｉｖｅＬｏｏｐＦｉｌｔｅｒ、ＣＣＡＬＦと略称される）を行ってクロマ成分のより良い性能を達成する必要がある。

【0004】

しかし、現在のＡＬＦフィルタリング技術では、ＮＮＦフィルタリング後にＡＬＦモジュールを直接使用すると、以下の問題を招いてしまう。

【0005】

スライスレベルの輝度成分がＮＮＦ後に最適な性能を達成しており、ＡＬＦフィルタリングが輝度成分においてこれ以上向上することがない場合、現在のスライスレベルの輝度ＡＬＦは、オフ状態に設定される。しかしながら、一旦輝度の性能に応じてＡＬＦをオフにすると、クロマＡＬＦ及びＣＣＡＬＦは、いずれも強制的にオフされ、クロマのＡＬＦフィルタリング操作を行わなくなる。ＮＮＦフィルタリング後のクロマ成分をＡＬＦフィルタリングしないと、より多くの値と元の値との間の偏差が導入されてしまい、画質が最適化できなくなる可能性がある。

【0006】

処理後の画質が比較的悪いという関連技術における問題に対して、現在はまだ効果的な解決策が提案されていない。

【発明の概要】

【発明が解決しようとする課題】

【0007】

本発明の実施例は、処理後の画質が比較的悪いという関連技術における問題を少なくとも解決するビデオ処理のための方法、装置、記憶媒体及び電子装置を提供する。

【課題を解決するための手段】

【0008】

本発明の一つの実施例によれば、ビデオ処理のための方法を提供する。この方法は、再構成されたビデオユニットのニューラルネットワークループフィルタリング有効化フラグを決定することと、前記ニューラルネットワークループフィルタリング有効化フラグに基づいて前記再構成されたビデオユニットのために適応ループフィルタリング有効化フラグを設定することと、シグナリングによって、前記再構成されたビデオユニットのニューラルネットワークループフィルタリングに関連するフィルタ情報と、前記再構成されたビデオユニットの適応ループフィルタリングに関連するフィルタ情報とのうちの少なくとも一つの情報を通知することと、を含む。

【0009】

一つの選択的な実施例では、前記適応ループフィルタリングに関連するフィルタ情報は、適応ループフィルタリング有効化フラグと、適応ループフィルタリングによって参照される適応パラメータセットとを含む。

【0010】

一つの選択的な実施例では、前記適応ループフィルタリング有効化フラグは、輝度適応ループフィルタリング有効化フラグと、クロマ適応ループフィルタリング有効化フラグとを含む。

【0011】

【0012】

一つの選択的な実施例では、前記再構成されたビデオユニットの符号化ビデオデータを発生させるための符号化ビットストリームのシーケンスパラメータセットＳＰＳと、画像パラメータセットＰＰＳと、画像ヘッダＰＨと、スライスヘッダＳＨと、符号化・復号化ツリーユニットＣＴＵとの少なくとも一つのシンタックス要素においてシグナリングによって前記適応ループフィルタリング有効化フラグを通知する。

【0013】

一つの選択的な実施例では、前記方法は、前記ニューラルネットワークループフィルタリング有効化フラグがシーケンスレベル又は画像レベル又はスライスレベルで前記再構成されたビデオユニットに対してニューラルネットワークループフィルタリングを実行することを指示する場合に、前記再構成されたビデオユニットのために輝度適応ループフィルタリング有効化フラグとクロマ適応ループフィルタリング有効化フラグとをそれぞれ設定することをさらに含む。

【0014】

【0015】

一つの選択的な実施例では、前記方法は、前記クロマ適応ループフィルタリング有効化フラグに基づいて前記再構成されたビデオユニットに対してクロマ適応ループフィルタリングを実行するかどうかを判定することをさらに含む。

【0016】

一つの選択的な実施例では、前記再構成されたビデオユニットのために輝度適応ループフィルタリング有効化フラグとクロマ適応ループフィルタリング有効化フラグとをそれぞれ設定することは、前記再構成されたビデオユニットのために輝度成分の適応ループフィルタに関連する第一のフラグを設定することを含む。

【0017】

一つの選択的な実施例では、前記再構成されたビデオユニットのために輝度適応ループフィルタリング有効化フラグとクロマ適応ループフィルタリング有効化フラグとをそれぞれ設定することは、前記再構成されたビデオユニットのためにクロマ成分の適応ループフィルタに関連する第二のフラグを設定することを含む。

【0018】

一つの選択的な実施例では、前記適応ループフィルタリング有効化フラグの値が第一の値である場合に、前記適応ループフィルタリング有効化フラグは、前記再構成されたビデオユニットに対して適応ループフィルタリングを実行することを指示するために用いられ、前記適応ループフィルタリング有効化フラグの値が第二の値である場合に、前記適応ループフィルタリング有効化フラグは、前記再構成されたビデオユニットに対して適応ループフィルタリングを実行しないことを指示するために用いられ、前記第一の値は前記第二の値と異なる。

【0019】

【0020】

一つの選択的な実施例では、前記ニューラルネットワークループフィルタリング有効化フラグがシーケンスレベル又は画像レベル又はスライスレベルにおいて前記再構成されたビデオユニットに対してニューラルネットワークループフィルタリングを実行することを指示する場合に、前記再構成されたビデオユニットの輝度成分に対して輝度適応ループフィルタリングを実行する決定と、前記再構成されたビデオユニットの第一のクロマ成分に対して第一のクロマ適応ループフィルタリングを実行する決定と、前記再構成されたビデオユニットの第二のクロマ成分に対して第二のクロマ適応ループフィルタリングを実行する決定と、前記再構成されたビデオユニットの第一のクロマ成分に対して第一のクロマ成分間適応ループフィルタリングを実行する決定と、前記再構成されたビデオユニットの第二のクロマ成分に対して第一のクロマ成分間適応ループフィルタリングを実行する決定とのうちの少なくとも一つの決定に基づいて、前記再構成されたビデオユニットのために適応ループフィルタリング有効化フラグを設定する。

【0021】

一つの選択的な実施例では、前記ニューラルネットワークループフィルタリングに関連するフィルタ情報は、ニューラルネットワークループフィルタリング有効化フラグと、ニューラルネットワークループフィルタリングによって参照される適応パラメータセットとを含む。

【0022】

【0023】

一つの選択的な実施例では、前記再構成されたビデオユニットの符号化ビデオデータを発生させるための符号化ビットストリームのシーケンスパラメータセットＳＰＳと、画像パラメータセットＰＰＳと、画像ヘッダＰＨと、スライスヘッダＳＨと、符号化・復号化ツリーユニットＣＴＵとの少なくとも一つのシンタックス要素においてシグナリングによって前記ニューラルネットワークループフィルタリング有効化フラグを通知する。

【0024】

一つの選択的な実施例では、前記再構成されたビデオユニットは、ビデオ画像と、ビデオクリップと、ビデオパターンブロックと、スライスＳｌｉｃｅと、符号化・復号化ツリーユニットＣＴＵと、符号化・復号化ユニットＣＵとのうちの少なくとも一つに対応する。

【0025】

本発明の別の実施例によれば、ビデオ処理のための方法をさらに提供する。この方法は、再構成されたビデオユニットのニューラルネットワークループフィルタリングに関連するフィルタ情報と、再構成されたビデオユニットの適応ループフィルタリングに関連するフィルタ情報とのうちの少なくとも一つの情報を受信することと、前記再構成されたビデオユニットのニューラルネットワークループフィルタリング有効化フラグ及び前記再構成されたビデオユニットの適応ループフィルタリング有効化フラグを決定することと、前記適応ループフィルタリング有効化フラグに基づいて前記再構成されたビデオユニットに対して適応ループフィルタリングを実行することと、を含む。

【0026】

【0027】

【0028】

【0029】

一つの選択的な実施例では、前記再構成されたビデオユニットの符号化ビデオデータを発生させるための符号化ビットストリームのシーケンスパラメータセットＳＰＳと、画像パラメータセットＰＰＳと、画像ヘッダＰＨと、スライスヘッダＳＨと、符号化・復号化ツリーユニットＣＴＵとの少なくとも一つのシンタックス要素において前記適応ループフィルタリング有効化フラグを決定する。

【0030】

一つの選択的な実施例では、前記方法は、前記ニューラルネットワークループフィルタリング有効化フラグがシーケンスレベル又は画像レベル又はスライスレベルにおいて前記再構成されたビデオユニットに対してニューラルネットワークループフィルタリングを実行することを指示する場合に、前記再構成されたビデオユニットの輝度適応ループフィルタリング有効化フラグとクロマ適応ループフィルタリング有効化フラグとを決定することをさらに含む。

【0031】

一つの選択的な実施例では、前記方法は、前記ニューラルネットワークループフィルタリング有効化フラグがシーケンスレベルにおいて前記再構成されたビデオユニットに対してニューラルネットワークループフィルタリングを実行することを指示する場合に、画像レベル又はスライスレベルで前記再構成されたビデオユニットの輝度適応ループフィルタリング有効化フラグを決定することと、前記輝度適応ループフィルタリング有効化フラグが前記再構成されたビデオユニットに対して輝度適応ループフィルタリングを実行しないことを指示する場合に、前記再構成されたビデオユニットのクロマ適応ループフィルタリング有効化フラグを決定することと、をさらに含む。

【0032】

一つの選択的な実施例では、前記方法は、前記クロマ適応ループフィルタリング有効化フラグに基づいて、前記再構成されたビデオユニットに対してクロマ適応ループフィルタリングを実行するかどうかを判定することをさらに含む。

【0033】

一つの選択的な実施例では、前記再構成されたビデオユニットの輝度適応ループフィルタリング有効化フラグを決定することは、前記再構成されたビデオユニットの輝度成分の適応ループフィルタに関連する第一のフラグの値を決定することを含む。

【0034】

一つの選択的な実施例では、前記再構成されたビデオユニットのクロマ適応ループフィルタリング有効化フラグを決定することは、前記再構成されたビデオユニットのクロマ成分の適応ループフィルタに関連する第二のフラグの値を決定することを含む。

【0035】

【0036】

【0037】

【0038】

【0039】

一つの選択的な実施例では、前記再構成されたビデオユニットの符号化ビデオデータを発生させるための符号化ビットストリームのシーケンスパラメータセットＳＰＳと、画像パラメータセットＰＰＳと、画像ヘッダＰＨと、スライスヘッダＳＨと、符号化・復号化ツリーユニットＣＴＵとの少なくとも一つのシンタックス要素において前記ニューラルネットワークループフィルタリング有効化フラグを決定する。

【0040】

一つの選択的な実施例では、前記再構成されたビデオユニットは、ビデオ画像と、ビデオクリップと、ビデオパターンブロックと、スライス（Ｓｌｉｃｅ）と、符号化・復号化ツリーユニットＣＴＵと、符号化・復号化ユニットＣＵとのうちの少なくとも一つに対応する。

【0041】

本発明の別の実施例によれば、ビデオ処理のための装置をさらに提供する。この装置は、再構成されたビデオユニットのニューラルネットワークループフィルタリング有効化フラグを決定するための決定モジュールと、前記ニューラルネットワークループフィルタリング有効化フラグに基づいて前記再構成されたビデオユニットのために適応ループフィルタリング有効化フラグを設定するための設定モジュールと、シグナリングによって、前記再構成されたビデオユニットのニューラルネットワークループフィルタリングに関連するフィルタ情報と、前記再構成されたビデオユニットの適応ループフィルタリングに関連するフィルタ情報とのうちの少なくとも一つの情報を通知するための通知モジュールとを備える。

【0042】

【0043】

一つの選択的な実施例では、前記通知モジュールは、前記再構成されたビデオユニットの符号化ビデオデータを発生させるための符号化ビットストリームのシーケンスパラメータセットＳＰＳと、画像パラメータセットＰＰＳと、画像ヘッダＰＨと、スライスヘッダＳＨと、符号化・復号化ツリーユニットＣＴＵとの少なくとも一つのシンタックス要素においてシグナリングによって前記適応ループフィルタリング有効化フラグを通知するための通知ユニットを備える。

【0044】

本発明の別の実施例によれば、ビデオ処理のための装置をさらに提供する。この装置は、再構成されたビデオユニットのニューラルネットワークループフィルタリングに関連するフィルタ情報と、再構成されたビデオユニットの適応ループフィルタリングに関連するフィルタ情報とのうちの少なくとも一つの情報を受信するための受信モジュールと、ニューラルネットワークループフィルタリング有効化フラグが前記再構成されたビデオユニットに対してニューラルネットワークループフィルタリングを実行することを指示する場合に、前記再構成されたビデオユニットの適応ループフィルタリング有効化フラグを識別するための識別モジュールと、前記適応ループフィルタリング有効化フラグに基づいて前記再構成されたビデオユニットに対して適応ループフィルタリングを実行するためのフィルタリングモジュールとを備える。

【0045】

一つの選択的な実施例では、前記適応ループフィルタリングに関連するフィルタ情報は、適応ループフィルタリング有効化フラグと、適応ループフィルタリングによって参照される適応パラメータセットＡＰＳとを含む。

【0046】

一つの選択的な実施例では、前記識別モジュールは、前記再構成されたビデオユニットの符号化ビデオデータを発生させるための符号化ビットストリームのシーケンスパラメータセットＳＰＳと、画像パラメータセットＰＰＳと、画像ヘッダＰＨと、スライスヘッダＳＨと、符号化・復号化ツリーユニットＣＴＵとの少なくとも一つのシンタックス要素において前記適応ループフィルタリング有効化フラグを決定するための識別ユニットを備える。

【0047】

本発明のまた一つの実施例によれば、コンピュータ可読記憶媒体をさらに提供する。前記コンピュータ可読記憶媒体にはコンピュータプログラムが記憶されている。前記コンピュータプログラムは、実行時に上記いずれか一つの方法の実施例におけるステップを実行するように設定される。

【0048】

本発明のまた一つの実施例によれば、電子装置をさらに提供する。この電子装置は、メモリとプロセッサとを備え、前記メモリにはコンピュータプログラムが記憶されている。前記プロセッサは、前記コンピュータプログラムを実行して上記いずれか一つの方法の実施例におけるステップを実行するように設定される。

【図面の簡単な説明】

【0049】

【図1】関連技術におけるＨ．２６６／ＶＶＣループフィルタリングフローである。

【図2】関連技術におけるＮＮフィルタリング、ＡＬＦフィルタリングのフローチャートである。

【図3】本発明の実施例のビデオ処理のための方法の移動端末のハードウェア構成ブロック図である。

【図4】本発明の実施例によるビデオ処理のための方法のフローチャートの一である。

【図5】本発明の実施例による輝度スイッチを加えた後の画像（ｐｉｃｔｕｒｅ）／スライス（ｓｌｉｃｅ）層の伝送フローチャートである。

【図6】本発明の実施例による更新（ｕｐｄａｔｅ）操作を加えた後の全体的なフローチャートである。

【図7】本発明の実施例による更新（ｕｐｄａｔｅ）操作の具体的なフローチャートである。

【図8】本発明を実施するための形態による符号化端のＮＮフィルタリングに基づくＡＬＦ－ＳＰＬＩＴ操作のフローチャートである。

【図9】本発明の実施例による輝度スイッチを加えた後の画像（ｐｉｃｔｕｒｅ）／スライス（ｓｌｉｃｅ）層の伝送フローチャートである。

【図10】本発明の実施例によるクロマスイッチを加えた後の画像（ｐｉｃｔｕｒｅ）／スライス（ｓｌｉｃｅ）層の伝送フローチャートである。

【図11】本発明の実施例によるＣＣ－ＡＬＦを含むＡＬＦフィルタリングフレームワーク図である。

【図12】本発明の実施例によるビデオ処理のための方法のフローチャートの二である。

【図13】本発明の具体的な実施例による復号端のＮＮフィルタリングに基づくＡＬＦ－ＳＰＬＩＴ操作のフローチャートである。

【図14】本具体的な実施例による符号化端のＮＮフィルタリングに基づくＡＬＦ－ＳＰＬＩＴ操作のフローチャートである。

【図15】本具体的な実施例によるＡＬＦ－ＳＰＬＩＴスイッチを加えた後の画像（ｐｉｃｔｕｒｅ）／スライス（ｓｌｉｃｅ）層の伝送フローチャートである。

【図16】本発明の実施例によるビデオ処理のための装置の構成ブロック図である。

【図17】本発明の実施例による別のビデオ処理のための装置の構成ブロック図である。

【発明を実施するための形態】

【0050】

以下、図面を参照して、実施例を結び付けながら本発明の実施例を詳細に説明する。

【0051】

説明すべきこととして、本発明の明細書と特許請求の範囲及び上記図面における用語である「第一」、「第二」などは、類似している対象を区別するものであり、必ずしも特定の順序又は前後手順を記述するためのものではない。

【0052】

まず本発明の関連技術について説明する。

【0053】

次世代ビデオ符号化規格Ｈ．２６６／ＶＶＣ（ＶｅｒｓａｔｉｌｅＶｉｄｅｏＣｏｄｉｎｇ、多機能ビデオ符号化、Ｈ．２６６の別称）は、ブロックに基づく混合符号化フレームワークを採用し、ブロック効果、リンギング効果、色偏差及び画像ぼやけなどの歪み効果は、依然としてＨ．２６６／ＶＶＣ規格を採用した圧縮ビデオに存在する。このような歪みによるビデオ品質への影響を低減させるために、Ｈ．２６６／ＶＶＣには、輝度マッピングとクロマスケーリング（ＬｕｍａＭａｐｐｉｎｇＷｉｔｈＣｈｒｏｍａＳｃａｌｉｎｇ、ＬＭＣＳと略称される）、デブロッキングフィルタリング（ＤｅｂｌｏｃｋｉｎｇＦｉｌｔｅｒ、ＤＢＦと略称される）、サンプルアダプティブオフセット（ＳａｍｐｌｅＡｄａｐｔｉｖｅＯｆｆｓｅｔ、ＳＡＯと略称される）及び適応ループフィルタリング（ＡｄａｐｔｉｖｅＬｏｏｐＦｉｌｔｅｒ、ＡＬＦと略称される）を含むループフィルタリング技術（Ｉｎ－ｌｏｏｐＦｉｌｔｅｒｉｎｇ）が採用されている。ＬＭＣＳは、ダイナミックレンジ内の情報に符号語(ｃｏｄｅｗｏｒｄ)を再割り当てることによって圧縮効率を向上させる。ＤＢＦは、ブロック効果を低減させるために用いられる。ＳＡＯは、リンギング効果を改善するために用いられる。ＡＬＦは、復号誤差を減少させることができる。Ｈ．２６６／ＶＶＣループフィルタリングフローは、図１に示される。図１は、関連技術におけるＨ．２６６／ＶＶＣ規格におけるループフィルタリングフローチャートである。Ｈ．２６６／ＶＶＣの発表に続き、ＮＮに基づくビデオ符号化は、次世代ビデオ符号化の研究の焦点となっている。ループフィルタリングモジュールのうち、ＮＮフィルタリングモジュールは、新たなモジュールとしてループフィルタリングに加えられてもよいし、本来のＤＢＦとＳＡＯモジュールに代替されてもよい。これにより、伝送オーバヘッドを節約するだけでなく、画質を向上させることもできる。一般的には、コーデックでは、具体的に図２に示すように、ＮＮに基づくフィルタリング後も、ＡＬＦフィルタを使用して画像性能をさらに向上させる。図２において「スライスレベルのＡＬＦスイッチ」が設定されており、このスイッチは、主に現在のスライスの輝度ＡＬＦをオンにするかどうかを制御するために用いられる。ここで、図２は、関連技術におけるＮＮフィルタリング、ＡＬＦフィルタリングのフローチャートである。

【0054】

本発明の一つの実施例によれば、符号化側の操作ステップは、以下のとおりである。

【0055】

（１）シーケンスパラメータセット（Ｓｅｑｕｅｎｃｅｐａｒａｍｅｔｅｒｓｅｔ、ＳＰＳと略称される）層のＮＮフィルタリングがオンされた場合、ＬＭＣＳ後の再構築画像に対して以下のステップａ～ｃに従ってＮＮフィルタリングを行う。オフにされた場合、従来のフィルタリングフロー（ＤＢＦ、ＳＡＯ）に従ってフィルタリング操作を行う。

【0056】

ａ．事前にＮＮフィルタリングを行う。
ｂ．レート歪み最適化（ＲａｔｅＤｉｓｔｏｒｔｉｏｎＯｐｔｉｍｉｚａｔｉｏｎ、ＲＤＯと略称される）によって、ＮＮフィルタリングのｓｌｉｃｅ／ブロック（ブロックは、ＣＴＵブロックを指してもよいし、ＮＮフィルタリングブロックであってもよい）レベルのスイッチ決定を行い、
ｃ．ＮＮフィルタリング後の再構築画像を得る。

【0057】

（２）ＡＬＦフィルタリング操作を行う。

【0058】

ａ．輝度成分を分類し、クロマは、分類を必要とせず、
ｂ．輝度とクロマとそれぞれに対して新たなＡＰＳフィルタリングセットを計算し、
ｃ．輝度に対してスライス（Ｓｌｉｃｅ）／ＣＴＵレベルのスイッチ決定及びフィルタリングセット選択を行い、
ｄ．現在のスライス（ｓｌｉｃｅ）／ＣＴＵのＡＬＦスイッチ決定及びフィルタリングセット選択を行う。まず輝度に対してＡＬＦ決定を行い、決定後に輝度ＡＬＦがオンになると、現在のスライスのＡＬＦをオンにし、クロマのスライス／ＣＴＵレベルのスイッチ決定及びフィルタリングセット選択を継続し、決定後に輝度ＡＬＦがオフになると、現在のスライスのＡＬＦがオフになり、クロマＡＬＦは、デフォルトでオフ状態になり、クロマのスライス／ＣＴＵレベルのスイッチ決定及びフィルタリングセット選択を行わなくなる。

【0059】

ｅ．ＡＬＦフィルタリングを経た後の再構築画像を得る。

【0060】

（３）ＣＣＡＬＦフィルタリング操作を行う。現在のスライスについてＡＬＦがオンの場合、以下のステップａ～ｃに従ってＣＣＡＬＦフィルタリング操作を行い、最終的な再構築フレームを出力する。現在のスライスについてＡＬＦがオフの場合、ＣＣＡＬＦは、デフォルトでオフ状態になり、ＣＣＡＬＦ操作を行わず、前のステップの結果を最終的な再構築フレームとして直接出力する。

【0061】

ａ．クロマに対してＣＣＡＬＦフィルタリングセットを計算し、
ｂ．スライス／ＣＴＵレベルのスイッチ決定及びフィルタリングセット選択を行い、
ｃ．ＣＣＡＬＦフィルタリング後の再構築画像を得る。

【0062】

本発明の一つの実施例によれば、復号側フィルタリングの操作ステップは、以下のとおりである。

【0063】

（１）ＳＰＳ層のＮＮフィルタリングがオンの場合、ＬＭＣＳ後の再構築画像に対して以下のステップａ～ｄに従ってＮＮフィルタリングを行う。ＳＰＳ層のＮＮフィルタリングがオフの場合、従来のフィルタリングフロー（ＤＢＦ、ＳＡＯ）に従ってフィルタリング操作を行う。

【0064】

ａ．コードストリームからＮＮフィルタリングのスライス／ＣＴＵレベルのスイッチ決定を取得し、
ｂ．スライスのスイッチに応じて、オンの場合、ＣＴＵのスイッチを取得し続け、ステップｃに進み、オフの場合、ＮＮフィルタリング操作を実行せず、ステップｄに進み、
ｃ．コードストリームから各ＣＴＵのスイッチ情報を順に取得する。現在のＣＴＵスイッチ情報がオンである場合、ＮＮ操作を行い、オフの場合、再構築図を直接出力し、
ｄ．ＮＮフィルタリング後の再構築画像を得る。

【0065】

（２）ＳＰＳ層のＡＬＦフィルタリングがオンの場合、（１）の再構築画像に対して以下のステップａ～ｄに従ってＡＬＦフィルタリング処理を行う。ＳＰＳ層のＡＬＦフィルタリングがオフの場合、（１）の再構築画像を直接出力する。

【0066】

ａ．分類：輝度成分を分類し、クロマは、分類する必要がない。

【0067】

ｂ．コードストリームから現在のスライスのＡＬＦスイッチ決定を取得する。まずコードストリームから現在のスライスのＡＬＦスイッチ情報を取得し、オンの場合、輝度は、ＡＬＦを使用してフィルタリングすることをサポートし、第一のクロマ成分と第二のクロマ成分のスライスレベルのＡＬＦスイッチ情報をそれぞれ取得し続ける。オンの場合、対応するクロマ成分は、ＡＬＦを使用してフィルタリングすることをサポートする。現在のスライスのＡＬＦスイッチ情報をオフにすると、このスライスは、輝度ＡＬＦ、クロマＡＬＦとＣＣＡＬＦをサポートしない。

【0068】

ｃ．現在のスライスがＡＬＦの使用をサポートする場合、コードストリームから各ＣＴＵにおける各成分のＡＬＦスイッチ決定を順に取得する。スイッチがオンの場合、ＣＴＵに対応する成分に対してＡＬＦフィルタリング操作を行う。

【0069】

（３）ＡＬＦフィルタリング操作を行い、再構築画像を得る。

【0070】

ａ．コードストリームから現在のスライス／ＣＴＵのＣＣＡＬＦスイッチ決定を取得する。現在のスライスのＡＬＦがオンの場合、第一のクロマ成分と第二のクロマ成分のスライスレベルのＣＣＡＬＦスイッチ情報をそれぞれ取得し続ける。オンの場合、対応するクロマ成分は、ＣＣＡＬＦを使用してフィルタリングすることをサポートする。現在のスライスについてＡＬＦがオフになると、ＣＣＡＬＦは、デフォルトでオフ状態となり、ＣＣＡＬＦの情報を取得しなくなる。

【0071】

ｂ．現在のスライスがＣＣＡＬＦの使用をサポートする場合、コードストリームから各ＣＴＵにおける各成分のＣＣＡＬＦスイッチ決定を順に取得する。スイッチがオンの場合、ＣＴＵに対応する成分に対してＣＣＡＬＦフィルタリング操作を行う。

【0072】

ｃ．ＣＣＡＬＦフィルタリングを行い、再構築画像を得る。

【0073】

上記内容から分かるように、ＮＮフィルタリング後の輝度ＡＬＦは、オフ状態にあるが、輝度ＡＬＦがオフになると、クロマＡＬＦ及びＣＣＡＬＦも強制的にオフされ、よって処理後の画質が比較的低い可能性がある。

【0074】

関連技術における上記問題に対して、本開示の実施例では、ＮＮフィルタリング後のＡＬＦモジュールにおいて、輝度ＡＬＦ、クロマＡＬＦを分離し、輝度ＡＬＦがオフの場合でも、クロマＡＬＦ及びＣＣＡＬＦを行うようにすることを提案した。ＮＮフィルタリングによって輝度を明らかに高めるため、多くの場合に、ＮＮフィルタリング後の輝度ＡＬＦは、オフ状態にあるが、輝度ＡＬＦがオフになると、クロマＡＬＦ及びＣＣＡＬＦも強制的にオフされる。そのため、輝度とクロマとを分離することでクロマのフィルタリングへのニーズをより良く満たし、クロマ性能をさらに向上させることができる。

【0075】

以下では、実施例を結び付けながら、本発明がどのように関連技術における上記問題を解決するかについて説明する。

【0076】

本出願の実施例において提供される方法の実施例は、移動端末、コンピュータ端末又は類似している演算装置において実行されてもよい。移動端末上で実行することを例にして、図３は、本発明の実施例のビデオ処理の方法に用いられる移動端末のハードウェア構成ブロック図である。図３に示すように、移動端末は、一つ又は複数の（図３において一つのみが示されている）プロセッサ３０２（プロセッサ３０２は、マイクロプロセッサＭＣＵ又はプログラマブルロジックデバイスＦＰＧＡなどの処理装置を含んでもよいが、それらに限らない）と、データを記憶するためのメモリ３０４とを備えてもよい。ここで、上記移動端末は、通信機能のための伝送機器３０６と入出力機器３０８とをさらに備えてもよい。当業者であれば理解できるように、図３に示す構成は、概略にすぎず、それは、上記移動端末の構成を限定するものではない。例えば、移動端末は、図３に示すものよりも多く又は少なくのコンポーネントをさらに備えてもよいし、又は図３に示すものと異なる構成を有してもよい。

【0077】

メモリ３０４は、コンピュータプログラム、例えばアプリケーションソフトウェアのソフトウェアプログラム及びモジュール、例えば本発明の実施例におけるビデオ処理のための方法に対応するコンピュータプログラムを記憶するために用いられてもよい。プロセッサ３０２は、メモリ３０４内に記憶されたコンピュータプログラムを実行することによって、様々な機能アプリケーション及びデータ処理を実行し、即ち上記の方法を実現する。メモリ３０４は、高速ランダムアクセスメモリを含んでもよいし、不揮発性メモリ、例えば一つ又は複数の磁気記憶装置、フラッシュメモリ、又は他の不揮発性固体メモリを含んでもよい。いくつかの実例では、メモリ３０４は、プロセッサ３０２に対してリモートに設置されたメモリをさらに含んでもよい。これらのリモートメモリは、ネットワークを介して移動端末に接続されてもよい。上記ネットワークの実例は、インターネット、企業イントラネット、ローカルエリアネットワーク、移動通信ネットワーク及びそれらの組み合わせを含むが、それらに限らない。

【0078】

伝送装置３０６は、ネットワークを経由してデータを受信又は送信するために用いられる。上記のネットワークの具体的な実例は、移動端末の通信ベンダーによって提供される無線ネットワークを含んでもよい。一つの実例では、伝送装置３０６は、基地局を介して他のネットワーク機器と繋がってインターネットと通信できるネットワークアダプタ（ＮｅｔｗｏｒｋＩｎｔｅｒｆａｃｅＣｏｎｔｒｏｌｌｅｒ、ＮＩＣと略称される）を備える。一つの実例では、伝送装置３０６は、無線の方式でインターネットと通信するように構成されている無線周波数（ＲａｄｉｏＦｒｅｑｕｅｎｃｙ、ＲＦと略称される）モジュールであってもよい。

【0079】

本実施例では、ビデオ処理のための方法を提供する。図４は、本発明の実施例によるビデオ処理のための方法のフローチャートの一である。図４に示すように、このフローは、以下のステップを含む。

【0080】

ステップＳ４０２において、再構成されたビデオユニットのニューラルネットワークループフィルタリング有効化フラグを決定し、
ステップＳ４０４において、前記ニューラルネットワークループフィルタリング有効化フラグに基づいて、前記再構成されたビデオユニットのために適応ループフィルタリング有効化フラグを設定し、
ステップＳ４０６において、シグナリングによって、前記再構成されたビデオユニットのニューラルネットワークループフィルタリングに関連するフィルタ情報と、前記再構成されたビデオユニットの適応ループフィルタリングに関連するフィルタ情報とのうちの少なくとも一つの情報を通知する。

【0081】

ここで、上記操作を実行するものは、ビデオ符号化側の機器、例えばプロセッサ、コントローラ、又は類似する処理能力を備える機器などであってもよい。

【0082】

上記実施例では、決定されたニューラルネットワークループフィルタリング有効化フラグは、ニューラルネットワークループフィルタリング有効化フラグの具体的な状態を判定し、又はニューラルネットワークループフィルタリング有効化フラグの具体的な値を判定してもよい。ここで、異なる状態又は異なる値は、異なる意味に対応する。例えば、ニューラルネットワークループフィルタリング有効化フラグの状態がオンであるか、又は値が１である（無論、他の値であってもよく、例えば値が真であるなど）ことが判定された場合、ニューラルネットワークループフィルタリングを実行する必要があることを示す。ニューラルネットワークループフィルタリング有効化フラグの状態がオフであるか、又は値が０である（無論、他の値であってもよく、例えば値が偽であるなど）ことが決定された場合、ニューラルネットワークループフィルタリングを実行する必要がないことを示す。同様に、適応ループフィルタリング起動フラグを設定することは、実際には適応ループフィルタリング起動フラグの状態を設定すること、又は適応ループフィルタリング起動フラグの具体的な値を設定することでもあり、且つ適応ループフィルタリング起動フラグの異なる状態又は異なる値も異なる意味に対応し、ここで、これ以上説明しない。

【0083】

なお、上記の、前記再構成されたビデオユニットのニューラルネットワークループフィルタリングに関連するフィルタ情報及び／又は前記再構成されたビデオユニットの適応ループフィルタリングに関連するフィルタ情報を通知する操作は、適応ループフィルタリング有効化フラグを設定する操作と必然的な前後関係を持たず、先に適応ループフィルタリング有効化フラグを設定し、そしてニューラルネットワークループフィルタリングに関連するフィルタ情報及び／又は適応ループフィルタリングに関連するフィルタ情報を通知してもよいし、先にニューラルネットワークループフィルタリングに関連するフィルタ情報及び／又は適応ループフィルタリングに関連するフィルタ情報を通知し、そして適応ループフィルタリング有効化フラグを設定してもよい。無論、適応ループフィルタリング有効化フラグを設定する操作とニューラルネットワークループフィルタリングに関連するフィルタ情報及び／又は適応ループフィルタリングに関連するフィルタ情報を通知する操作を同時に実行してもよい。

【0084】

本実施例では、ニューラルネットワークループフィルタリングと適応ループフィルタリングが起動されたか否かに関わらず、ニューラルネットワークループフィルタリングに関連するフィルタ情報及び／又は適応ループフィルタリングに関連するフィルタ情報を通知する操作を実行してもよい。説明すべきこととして、ニューラルネットワークループフィルタリングに関連するフィルタ情報及び／又は適応ループフィルタリングに関連するフィルタ情報においてＳ４０２とＳ４０４の操作結果に関連する場合、Ｓ４０２とＳ４０４の実行が完了した後に、Ｓ４０６を実行する必要がある。復号側についても類似している。

【0085】

上記実施例によれば、再構成されたビデオユニットのニューラルネットワークループフィルタリング有効化フラグに基づいて再構成されたビデオユニットのために適応ループフィルタリング有効化フラグを設定することができ、よって設定結果に基づいて適応ループフィルタリングを実行し、ニューラルネットワークループフィルタリングを行った後に適応ループフィルタリングを直接オフにすることにより、画像にさらなる輝度及び／又はクロマ処理を行うことができず、さらに画質が最適化を達成できないという問題を回避し、画質を高める効果を達成する。

【0086】

一つの選択的な実施例では、前記適応ループフィルタリングに関連するフィルタ情報は、適応ループフィルタリング有効化フラグと、適応ループフィルタリングによって参照される適応パラメータセットとを含む。本実施例では、適応ループフィルタリング有効化フラグは、Ｓ４０４によって決定されてもよい。上記の適応ループフィルタリングによって参照される適応パラメータセットは、クロマに関連するＡＰＳ及び／又は輝度に関連する適応パラメータセットＡＰＳを含んでもよい。クロマに関連するＡＰＳ及び／又は輝度に関連するＡＰＳの具体的な計算方式及び選択ポリシーについては、後続の具体的な実施例における具体的な記述を参照する。

【0087】

一つの選択的な実施例では、前記適応ループフィルタリング有効化フラグは、輝度適応ループフィルタリング有効化フラグと、クロマ適応ループフィルタリング有効化フラグとを含む。本実施例では、ニューラルネットワークループフィルタリング有効化フラグに基づいて輝度適応ループフィルタリング有効化フラグ及びクロマ適応ループフィルタリング有効化フラグをそれぞれ設定してもよい。つまり、輝度適応ループフィルタリングの起動の有無は、クロマ適応ループフィルタリングの起動の有無と必然的な関連がない。輝度、クロマを別々に設定することにより、クロマのフィルタリングへのニーズをより良く満たし、クロマ性能をさらに向上させることができる。

【0088】

一つの選択的な実施例では、前記クロマ適応ループフィルタリング有効化フラグは、第一のクロマ適応ループフィルタリング有効化フラグと、第二のクロマ適応ループフィルタリング有効化フラグと、第一のクロマ成分間適応ループフィルタリング有効化フラグと、第二のクロマ成分間適応ループフィルタリング有効化フラグとのうちの少なくとも一つを含む。本実施例では、クロマ適応フィルタリング有効化フラグを様々なタイプクロマの適応ループフィルタリング有効化フラグにさらに細分化してもよい。ここで、上記の第一のクロマ適応ループフィルタリング有効化フラグは、青差Ｃｂクロマ成分の適応ループフィルタリング有効化フラグを指してもよい。上記の第二のクロマ適応ループフィルタリング有効化フラグは、赤差Ｃｒクロマ成分の適応ループフィルタリング有効化フラグを指してもよい。上記の第一のクロマ成分間適応ループフィルタリング有効化フラグは、ＣｂＣＣＡＬＦ有効化フラグを指してもよい。上記の第二のクロマ成分間適応ループフィルタリング有効化フラグは、ＣｒＣＣＡＬＦ有効化フラグを指してもよい。

【0089】

【0090】

本発明の一つの実施形態によれば、符号化ビットストリームのＳＰＳレベルでシグナリングによってニューラルネットワークループフィルタリング有効化フラグ及び適応ループフィルタリング有効化フラグを通知する。

【0091】

表１は、符号化ビットストリームＳＰＳレベルのシンタックス表である。具体的には以下のように示される（説明すべきこととして、後続の各表において、各識別子の値は、例示的説明にすぎず、実際の応用において他のタイプの値を取ってもよく、例えば「真」と「偽」で「１」と「０」を代替し、又は他のタイプの文字又は記号で「１」と「０」を代替するなど）。

【0092】

【表1】

【0093】

表１における関連するシンタックスフィールドの語義説明は、以下のとおりである。ここで、
sps_nn_enabled_flag：ＳＰＳレベルのＮＮＦフィルタリング有効化フラグは、ＳＰＳレベルでＮＮＦフィルタリングをオンにするかどうかを指示するために用いられる。１の場合はオンにすることを表し、０の場合はオンにしないことを表す。

【0094】

sps_alf_enabled_flag：ＳＰＳレベルのＡＬＦフィルタリング有効化フラグは、ＳＰＳレベルでＡＬＦフィルタリングをオンにするかどうかを指示するために用いられる。１の場合はオンにすることを表し、０の場合はオンにしないことを表す。

【0095】

sps_ccalf_enabled_flag：ＳＰＳレベルのＡＬＦフィルタリング有効化フラグは、ＳＰＳレベルでＣＣ－ＡＬＦフィルタリングをオンにするかどうかを指示するために用いられる。１の場合はオンにすることを表し、０の場合はオンにしないことを表す。

【0096】

本発明の一つの実施形態によれば、符号化ビットストリームのＰＰＳレベルでシグナリングによってニューラルネットワークループフィルタリングに関連するフィルタ情報の位置、及び適応ループフィルタリングに関連するフィルタ情報の位置を通知する。

【0097】

表２は、符号化ビットストリームＰＰＳレベルのシンタックス表である。具体的には以下のように示される。

【0098】

【表2】

【0099】

表２における関連するシンタックスフィールドの語義説明は、以下のとおりである。ここで、
pps_nnf_info_in_ph_flag：ＮＮＦフィルタリング情報がＰＨレベルで現れるかどうかを指示する。１に等しい場合は、ＮＮＦフィルタリング情報がＰＨレベルにあることを表し、０に等しい場合は、ＮＮＦフィルタリング情報がＳＨレベルにあることを表す。デコーダは、ＰＨレベル又はＳＨレベルにおける関連するシンタックス要素を解析することによって、各成分のＮＮＦ有効化フラグ及び対応するフィルタ情報を決定することができる。

【0100】

pps_alf_info_in_ph_flag：ＡＬＦフィルタリング情報がＰＨレベルで現れるかどうかを指示する。１に等しい場合は、ＡＬＦフィルタリング情報がＰＨレベルにあることを表し、０に等しい場合は、ＡＬＦフィルタリング情報がＳＨレベルにあることを表す。デコーダは、ＰＨレベル又はＳＨレベルにおける関連するシンタックス要素を解析することによって、各成分のＡＬＦ有効化フラグ及び対応するフィルタ情報を決定することができる。

【0101】

本発明の一つの実施形態によれば、符号化ビットストリームのＰＨレベルでシグナリングによってニューラルネットワークループフィルタリングに関連するフィルタ情報及び適応ループフィルタリングに関連するフィルタ情報を通知する。

【0102】

表３は、符号化ビットストリームＰＨレベルのシンタックス表である。具体的には以下のように示される。

【0103】

【表3】

【0104】

表３における関連するシンタックスフィールドの語義説明は、以下のとおりである。

【0105】

ここで、pps_alf_info_in_ph_flagが１に等しい場合、ＡＬＦフィルタリング情報がＰＨレベルで現れることを表す。デコーダは、ＰＨレベルにおけるalf_split_structure( )シンタックス構成又はalf_structure( )シンタックス構成を解析して各成分のＡＬＦ有効化フラグ及び対応するフィルタ情報を決定する。

【0106】

本発明の一つの実施形態によれば、符号化ビットストリームのＳＨレベルでシグナリングによってニューラルネットワークループフィルタリングに関連するフィルタ情報及び適応ループフィルタリングに関連するフィルタ情報を通知する。

【0107】

表４は、符号化ビットストリームＳＨレベルのシンタックス表である。具体的には以下のように示される。

【0108】

【表4】

【0109】

表４における関連するシンタックスフィールドの語義説明は、以下のとおりである。
ここで、pps_alf_info_in_ph_flagが０に等しい場合、ＡＬＦフィルタリング情報がＳＨレベルで現れることを表す。デコーダは、ＳＨレベルにおけるalf_split_structure( )シンタックス構成又はalf_structure( )シンタックス構成を解析して各成分のＡＬＦ有効化フラグ及び対応するフィルタ情報を決定する。

【0110】

ＰＨレベル又はＳＨレベルに含まれるnn_structure( )（即ち、表３におけるnn_structure( )及び表４におけるnn_structure( )）シンタックス構成は、具体的に表５に示すとおりである。

【0111】

【表5】

【0112】

ここで、
nn_structure( )シンタックス構成におけるニューラルネットワークループフィルタリング有効化フラグは、
輝度成分ニューラルネットワークループフィルタリング有効化フラグ（nnf_luma_enabled_flag）と、
第一のクロマ成分ニューラルネットワークループフィルタリング有効化フラグ（nnf_cb_enabled_flag）と、
第二のクロマ成分ニューラルネットワークループフィルタリング有効化フラグ（nnf_cr_enabled_flag）とのうちの少なくとも一つを含む。
nn_luma_enabled_flag：現在の画像／スライス輝度成分がＮＮを使用しているかどうかを識別する。１の場合はＮＮを使用することを表し、０の場合は使用しないことを表す。

【0113】

nn_cb_enabled_flag：現在の画像／スライス輝度成分がＮＮを使用しているかどうかを識別する。１の場合はＮＮを使用することを表し、０の場合は使用しないことを表す。

【0114】

nn_cr_enabled_flag：現在の画像／スライス輝度成分がＮＮを使用しているかどうかを識別する。１の場合はＮＮを使用することを表し、０の場合は使用しないことを表す。

【0115】

本発明の一つの実施形態によれば、符号化ビットストリームのＳＰＳレベルで設定されたＮＮＦフィルタリング有効化フラグ（sps_nn_enabled_flag）がＳＰＳレベルでＮＮＦフィルタリングを実行することを指示する場合に、符号化ビットストリームのＰＨレベル又はＳＨレベルには、符号化ビットストリームのＰＨレベル又はＳＨレベルで輝度適応ループフィルタリング有効化フラグとクロマ適応ループフィルタリング有効化フラグとをそれぞれ設定するためのalf_split_structure( )シンタックス構成が含まれる。

【0116】

alf_split_structure( )シンタックス構成における適応ループフィルタリング有効化フラグは、
輝度成分適応ループフィルタリング有効化フラグ（alf_luma_enabled_flag）と、
第一のクロマ適応ループフィルタリング有効化フラグ（alf_cb_enabled_flag）と、
第二のクロマ適応ループフィルタリング有効化フラグ（alf_cr_enabled_flag）と、
第一のクロマ成分間適応ループフィルタリング有効化フラグ（alf_cc_cb_enabled_flag）と、
第二のクロマ成分間適応ループフィルタリング有効化フラグ（alf_cc_cr_enabled_flag）とのうちの少なくとも一つを含む。

【0117】

ＰＨレベル又はＳＨレベルに含まれるalf_split_structure( )シンタックス構成は、具体的に表６に示すとおりである。

【0118】

【表6】

【0119】

表６における関連するシンタックスフィールドの語義説明は、以下のとおりである。ここで、
alf_luma_enabled_flag：ＰＨレベル又はＳＨレベルの輝度成分ＡＬＦフィルタリング有効化フラグは、ＰＨレベル又はＳＨレベルで輝度成分ＡＬＦフィルタリングをオンにするかどうかを指示するために用いられる。１の場合はオンにすることを表し、０の場合はオンにしないことを表す。

【0120】

num_alf_aps_ids_luma：現在の画像／スライス輝度ＡＬＦがＡＰＳフィルタリングを使用するサブセットの数を識別する。
alf_aps_id_luma[ i ]：ｉ番目の輝度ＡＰＳフィルタリングサブセットのＩＤ番号を識別する。

【0121】

alf_cb_enabled_flag：ＰＨレベル又はＳＨレベルの第一のクロマ（即ち、Ｃｂ青差）成分ＡＬＦフィルタリング有効化フラグは、ＰＨレベル又はＳＨレベルで第一のクロマ（即ち、Ｃｂ青差）成分ＡＬＦフィルタリングをオンにするかどうかを指示するために用いられる。１の場合はオンにすることを表し、０の場合はオンにしないことを表す。

【0122】

alf_cr_enabled_flag：ＰＨレベル又はＳＨレベルの第二のクロマ（即ち、Ｃｒ赤差）成分ＡＬＦフィルタリング有効化フラグは、ＰＨレベル又はＳＨレベルで第一のクロマ（即ち、Ｃｒ赤差）成分ＡＬＦフィルタリングをオンにするかどうかを指示するために用いられる。１の場合はオンにすることを表し、０の場合はオンにしないことを表す。

【0123】

alf_aps_id_chroma：現在の画像／スライスクロマＡＬＦがＡＰＳフィルタを使用するＩＤを識別する。

【0124】

alf_cc_cb_enabled_flag：ＰＨレベル又はＳＨレベルの第一のクロマ成分間（即ち、輝度がＣｂ青差に対する）ＡＬＦフィルタリング有効化フラグは、ＰＨレベル又はＳＨレベルで第一のクロマ成分間（即ち、輝度がＣｂ青差に対する）ＡＬＦフィルタリングをオンにするかどうかを指示するために用いられる。１の場合はオンにすることを表し、０の場合はオンにしないことを表す。

【0125】

alf_cc_cb_aps_id：現在の画像／スライスクロマＣｂ成分が使用するＣＣ－ＡＬＦフィルタの番号を識別する。

【0126】

alf_cc_cr_enabled_flag：ＰＨレベル又はＳＨレベルの第二のクロマ成分間（即ち、輝度がＣｒ赤差に対する）ＡＬＦフィルタリング有効化フラグは、ＰＨレベル又はＳＨレベルで第二のクロマ成分間（即ち、輝度がＣｒ赤差に対する）ＡＬＦフィルタリングをオンにするかどうかを指示するために用いられる。１の場合はオンにすることを表し、０の場合はオンにしないことを表す。

【0127】

alf_cc_cr_aps_id：現在の画像／スライスクロマＣｒ成分が使用するＣＣ－ＡＬＦフィルタの番号を識別する。

【0128】

本発明の一つの実施形態によれば、符号化ビットストリームのＳＰＳレベルで設定されたＮＮＦフィルタリング有効化フラグ（sps_nn_enabled_flag）がＳＰＳレベルでＮＮＦフィルタリングを実行しないことを指示する場合に、符号化ビットストリームのＰＨレベル又はＳＨレベルには、Ｈ．２６６／ＶＶＣ規格に定義されたpicture_header_structure ( )とslice_header ( )シンタックス構造が含まれる。

【0129】

本発明の一つの実施形態によれば、符号化ビットストリームのＣＴＵレベルでシグナリングによってニューラルネットワークループフィルタリングに関連するフィルタ情報及び適応ループフィルタリングに関連するフィルタ情報を通知する。

【0130】

表７は、ＣＴＵレベルのシンタックス表であり、具体的には以下のように示される。

【0131】

【表7】

【0132】

表７における関連するシンタックスフィールドの語義説明は、以下のとおりである。

【0133】

nn_ctb_flag[ 0 ][ CtbAddrX ][ CtbAddrY ]：このＣＴＢ輝度ニューラルネットワークループフィルタリング有効化フラグを識別する。
nn_ctb_flag[ 1 ][ CtbAddrX ][ CtbAddrY ]：このＣＴＢ第一のクロマニューラルネットワークループフィルタリング有効化フラグを識別する。
nn_ctb_flag[ 2 ][ CtbAddrX ][ CtbAddrY ]：このＣＴＢ第二のクロマニューラルネットワークループフィルタリング有効化フラグを識別する。
但し、sps_nn_enabled_flagは、表１に示すＳＰＳレベルのＮＮＦフィルタリング有効化フラグに相当し、ＳＰＳレベルでＮＮＦフィルタリングをオンにするかどうかを指示するために用いられる。なお、１の場合はオンにすることを表し、０の場合はオンにしないことを表す。

【0134】

本発明の一つの実施形態によれば、符号化ビットストリームのＳＰＳレベルで設定されたＮＮＦフィルタリング有効化フラグ（sps_nn_enabled_flag）がＳＰＳレベルでＮＮＦフィルタリングを実行することを指示する場合に、符号化ビットストリームのＣＴＵレベルには、符号化ビットストリームのＣＴＢレベルで輝度適応ループフィルタリング有効化フラグとクロマ適応ループフィルタリング有効化フラグとをそれぞれ設定するためのalf_split_ctb_structure( )シンタックス構成が含まれる。

【0135】

alf_split_ctb_structure( )シンタックス構造における適応ループフィルタリング有効化フラグは、
輝度成分適応ループフィルタリング有効化フラグ（alf_luma_enabled_flag）と、
第一のクロマ適応ループフィルタリング有効化フラグ（alf_cb_enabled_flag）と、
第二のクロマ適応ループフィルタリング有効化フラグ（alf_cr_enabled_flag）とのうちの少なくとも一つを含む。
ＣＴＵレベルに含まれるalf_split_ctb_structure( )シンタックス構成は、具体的に表８に示すとおりである。

【0136】

【表8】

【0137】

表８における関連するシンタックスフィールドの語義説明は、以下のとおりである。ここで、
alf_luma_enabled_flag：ＣＴＢレベルの輝度成分ＡＬＦフィルタリング有効化フラグは、ＣＴＢレベルで輝度成分ＡＬＦフィルタリングをオンにするかどうかを指示するために用いられる。１の場合はオンにすることを表し、０の場合はオンにしないことを表す。ここで、ｌｕｍａ関連要素を導入することで輝度メインスイッチを導入する目的を実現する。
alf_cb_enabled_flag：ＣＴＢレベルの第一のクロマ成分ＡＬＦフィルタリング有効化フラグは、ＣＴＢレベルで第一のクロマ成分ＡＬＦフィルタリングをオンにするかどうかを指示するために用いられる。１の場合はオンにすることを表し、０の場合はオンにしないことを表す。
alf_cr_enabled_flag：ＣＴＢレベルの第二のクロマ成分ＡＬＦフィルタリング有効化フラグは、ＣＴＢレベルで第二のクロマ成分ＡＬＦフィルタリングをオンにするかどうかを指示するために用いられる。１の場合はオンにすることを表し、０の場合はオンにしないことを表す。

【0138】

なお、上記alf_split_ctb_structure( )シンタックス構造において、
alf_ctb_flag[ 0 ][ CtbAddrX ][ CtbAddrY ]：このＣＴＢが輝度ＡＬＦフィルタリングを使用するかどうかを識別し、
alf_ctb_flag[ 1 ][ CtbAddrX ][ CtbAddrY ]：このＣＴＢが第一のクロマＡＬＦフィルタリングを使用するかどうかを識別し、
alf_ctb_flag[ 2 ][ CtbAddrX ][ CtbAddrY ]：このＣＴＢが第二のクロマＡＬＦフィルタリングを使用するかどうかを識別する。

【0139】

本発明の一つの実施形態によれば、符号化ビットストリームのＳＰＳレベルで設定されたＮＮＦフィルタリング有効化フラグ（sps_nn_enabled_flag）がＳＰＳレベルでＮＮＦフィルタリングを実行しないことを指示する場合に、符号化ビットストリームのＣＴＵレベルは、Ｈ．２６６／ＶＶＣ規格に定義されたcoding_tree_unit( )シンタックス構成を含む。

【0140】

一つの選択的な実施例では、前記ニューラルネットワークループフィルタリング有効化フラグがシーケンスレベル又は画像レベル又はスライスレベルで前記再構成されたビデオユニットに対してニューラルネットワークループフィルタリングを実行することを指示する場合に、前記再構成されたビデオユニットのために輝度適応ループフィルタリング有効化フラグとクロマ適応ループフィルタリング有効化フラグとをそれぞれ設定する。本実施例では、輝度適応ループフィルタリング有効化フラグとクロマ適応ループフィルタリング有効化フラグとを設定することは、実際には輝度に対して適応ループフィルタリング有効化フラグの状態とクロマ適応ループフィルタリング有効化フラグの状態とを設定することである。ＳＰＳ層のＮＮフィルタリングがオンの場合、ＬＭＣＳ後の再構築画像に対して以下のａ－ｃに従って操作ＮＮフィルタリングを行ってもよい。ＳＰＳ層のＮＮフィルタリングがオフの場合、従来のフィルタリングフロー（ＤＢＦ、ＳＡＯ）に従ってフィルタリング操作を行う。

【0141】

ａ．事前にＮＮフィルタリングを行い、
ｂ．ＲＤＯによってＮＮフィルタリングのスライスｅ／ブロック（ブロックは、ＣＴＵブロックを指してもよいし、ＮＮフィルタリングブロックであってもよい）レベルのスイッチ決定を行い、
ｃ．ＮＮフィルタリング後の出力を再構築する。

【0142】

一つの選択的な実施例では、前記方法は、前記ニューラルネットワークループフィルタリング有効化フラグがシーケンスレベルで前記再構成されたビデオユニットに対してニューラルネットワークループフィルタリングを実行することを指示し、且つ前記適応ループフィルタリング有効化フラグが画像レベル又はスライスレベルで前記再構成されたビデオユニットに対して輝度適応ループフィルタリングを実行しないことを指示する場合に、前記再構成されたビデオユニットのために輝度適応ループフィルタリング有効化フラグとクロマ適応ループフィルタリング有効化フラグとをそれぞれ設定することをさらに含む。本実施例では、輝度適応ループフィルタリング有効化フラグとクロマ適応ループフィルタリング有効化フラグとを設定することは、実際には輝度に対して適応ループフィルタリング有効化フラグの状態とクロマ適応ループフィルタリング有効化フラグの状態とを設定することである。本実施例では、ニューラルネットワークループフィルタリングを実行する必要があることを決定するとともに、輝度適応ループフィルタリングを実行する必要がないことを決定した場合に一つのクロマ適応ループフィルタリング有効化フラグ更新（ｕｐｄａｔｅ）操作を導入してもよい。即ち、この場合に、前記再構成されたビデオユニットのために輝度適応ループフィルタリング有効化フラグとクロマ適応ループフィルタリング有効化フラグとをそれぞれ設定してもよい。即ち、現在のＳＰＳレベルのＮＮＦフィルタリング有効化フラグがオンであり、且つ現在のＰＨレベル／ＳＨレベルのＡＬＦフィルタリング有効化フラグがオフである場合、クロマ適応ループフィルタリング有効化フラグの更新（ｕｐｄａｔｅ）操作をトリガーする。

【0143】

以下では、具体的にどのようにクロマ適応ループフィルタリング有効化フラグを設定するかについて説明する。具体的に図７に示す更新（ｕｐｄａｔｅ）操作を参照することができる。本実施例では、更新（ｕｐｄａｔｅ）に実際には主に含まれるのは、クロマＡＬＦｆｌａｇ（フラグ）の伝送である。本実施例は、主にコードストリーム伝送方式を変え、符号化端は、前述の実施例と同じである。しかしながら、伝送時には、ＮＮに基づいて適応的に伝送パラメータを調整する。更新（ｕｐｄａｔｅ）操作を加えた後の全体的なフローは、図６を参照することができる。ここで、更新（ｕｐｄａｔｅ）操作の具体的なフローは、図７を参照することができる。図６と図７において、各スイッチに対応するフィールドの値に基づいて各スイッチをオンにするかどうかを決定することができる。例えば、スイッチに対応するフィールド値が１である場合、スイッチをオンにすることを確認し、スイッチに対応するフィールド値が０である場合、スイッチをオフにすることを確認することができる。以下の他の図面に関連するスイッチは、いずれも類似している操作であり、即ち、スイッチに対応するフィールド値が１である場合、スイッチをオンにすることを確認し、スイッチに対応するフィールド値が０である場合、スイッチをオフにすることを確認する。以下、これ以上説明しない。

【0144】

更新（ｕｐｄａｔｅ）操作を加えた後に、ＰＨレベル、ＳＨレベル、及びＣＴＵレベルのシンタックス語義をそれに応じて調整する。

【0145】

本発明の一つの実施形態によれば、符号化ビットストリームのＳＰＳレベルで設定されたＮＮＦフィルタリング有効化フラグ（sps_nn_enabled_flag）がＳＰＳレベルでＮＮＦフィルタリングを実行することを指示するが、符号化ビットストリームのＰＨレベル又はＳＨレベルのＡＬＦフィルタリング有効化フラグ（alf_enabled_flag）がＰＨレベル又はＳＨレベルでＡＬＦフィルタリングを実行しないことを指示する場合に、符号化ビットストリームのＰＨレベル又はＳＨレベルには、符号化ビットストリームのＰＨレベル又はＳＨレベルでクロマ適応ループフィルタリング有効化フラグを更新し、即ち輝度適応ループフィルタリング有効化フラグとクロマ適応ループフィルタリング有効化フラグとをそれぞれ設定するためのalf_update_structure( )シンタックス構造が含まれる。

【0146】

本発明の一つの実施形態によれば、符号化ビットストリームのＰＨレベルでシグナリングによってニューラルネットワークループフィルタリングに関連するフィルタ情報及び適応ループフィルタリングに関連するフィルタ情報を通知する。表９は、更新（ｕｐｄａｔｅ）操作を加えた後に、ＰＨレベルに含まれるpicture_header_structure( )シンタックス構造表であり、具体的には以下のように示される。

【0147】

【表9】

【0148】

ここで、上記のalf_update_structure( )は、ＰＨレベルシンタックス構造に新たに加えられた要素であり、クロマＡＬＦフィルタリングの有効化フラグを更新するために用いられる。ＰＨレベルシンタックス構造において従来の適応フィルタリング有効化フラグ（alf_enabled_flag）が０に等しい場合、クロマ適応ループフィルタリング有効化フラグの更新操作を実行する必要があることを表す。

【0149】

本発明の一つの実施形態によれば、符号化ビットストリームのＳＨレベルでシグナリングによってニューラルネットワークループフィルタリングに関連するフィルタ情報及び適応ループフィルタリングに関連するフィルタ情報を通知する。表１０は、更新（ｕｐｄａｔｅ）操作を加えた後に、ＳＨレベルに含まれるslice_header ( )シンタックス構造表であり、具体的には以下のように示される。

【0150】

【表10】

【0151】

ここで、上記のalf_update_structure( )は、ＳＨレベルシンタックス構造に新たに加えられた要素であり、クロマＡＬＦフィルタリングの有効化フラグを更新するために用いられる。ＳＨレベルシンタックス構造において適応フィルタリング有効化フラグ（alf_enabled_flag）が０に等しい場合、クロマ適応ループフィルタリング有効化フラグの更新操作を実行する必要があることを表す。

【0152】

ＰＨレベル又はＳＨレベルに含まれるalf_update_structure( )シンタックス構造は、具体的に表１１に示すとおりである。

【0153】

【表11】

【0154】

本発明の一つの実施形態によれば、符号化ビットストリームのＳＰＳレベルで設定されたＮＮＦフィルタリング有効化フラグ（sps_nn_enabled_flag）がＳＰＳレベルでＮＮＦフィルタリングを実行することを指示するが、符号化ビットストリームのＰＨレベル又はＳＨレベルのＡＬＦフィルタリング有効化フラグ（alf_enabled_flag）がＰＨレベル又はＳＨレベルでＡＬＦフィルタリングを実行しないことを指示する場合に、符号化ビットストリームのＣＴＵレベルには、符号化ビットストリームのＣＴＵレベルでクロマ適応ループフィルタリング有効化フラグを更新し、即ち輝度適応ループフィルタリング有効化フラグとクロマ適応ループフィルタリング有効化フラグとをそれぞれ設定するためのalf_update_structure( )シンタックス構造が含まれる。

【0155】

表１２は、更新（ｕｐｄａｔｅ）操作を加えた後、ＣＴＵレベルに含まれるcoding_tree_unit( )シンタックス構造表であり、具体的には以下のように示される。

【0156】

【表12】

【0157】

ここで、上記のalf_update_ctb_structure( )は、ＣＴＵレベルシンタックス構造に新たに加えられた要素であり、クロマＡＬＦフィルタリングの有効化フラグを更新するために用いられる。ＰＨレベル又はＳＨレベルシンタックス構造において適応フィルタリング有効化フラグ（alf_enabled_flag）が０に等しい場合、クロマ適応ループフィルタリング有効化フラグの更新操作を実行する必要があることを表す。

【0158】

本開示の一つの実施形態によれば、符号化ビットストリームのＣＴＢレベルでシグナリングによって適応ループフィルタリングに関連するフィルタ情報を通知し、即ち、ＣＴＢレベルにおける関連構造によって適応ループフィルタリングに関連するフィルタリング情報の通知を実現してもよい。

【0159】

ここで、ＣＴＢレベルに含まれるalf_update_ctb_structure( )要素は、クロマＡＬＦの伝送を指示するためのＣＴＢレベルのスイッチ情報である。この要素語義は、具体的に表１３に示すとおりである。

【0160】

【表13】

【0161】

ここで、
alf_ctb_flag[1]は、このＣＴＢ第一のクロマ適応ループフィルタリング有効化フラグを指示するために用いられ、
alf_ctb_flag[2]は、このＣＴＢ第二のクロマ適応ループフィルタリング有効化フラグを指示するために用いられ、
alf_ctb_filter_alt_idx[0]は、この第一のクロマ適応ネットワークループフィルタリングによって使用されるフィルタＩＤを指示するために用いられ、
alf_ctb_filter_alt_idx[1]は、この第二のクロマ適応ネットワークループフィルタリングによって使用されるフィルタＩＤを指示するために用いられる。

【0162】

一つの選択的な実施例では、前記方法は、前記クロマ適応ループフィルタリング有効化フラグに基づいて前記再構成されたビデオユニットに対してクロマ適応ループフィルタリングを実行するかどうかを決定することをさらに含む。本実施例では、異なるクロマ適応ループフィルタリング有効化フラグに対応する操作は異なる。クロマ適応ループフィルタリング有効化フラグの値が１である場合、前記再構成されたビデオユニットに対してクロマ適応ループフィルタリングを実行する必要があることを表すことができる。クロマ適応ループフィルタリング有効化フラグの値が０である場合、前記再構成されたビデオユニットに対してクロマ適応ループフィルタリングを実行する必要がないことを表すことができる。無論、値を１と０に設定することは、例示的説明にすぎない。

【0163】

一つの選択的な実施例では、前記再構成されたビデオユニットのために輝度適応ループフィルタリング有効化フラグとクロマ適応ループフィルタリング有効化フラグとをそれぞれ設定することは、前記再構成されたビデオユニットのために輝度成分の適応ループフィルタに関連する第一のフラグを設定することを含む。本来のＶＶＣ規格では、輝度ＡＬＦのオンは、ＡＬＦマスタスイッチに依存する。マスタスイッチがオンの場合、輝度ＡＬＦを必ず使用し、マスタスイッチがオフの場合、輝度ＡＬＦがオフになり、クロマもオフになる。これは合理的ではないため、alf_structure( )に輝度ＡＬＦスイッチを新規追加し又はクロマに対して一つのメインスイッチを追加することができる。本実施例は、主にコードストリーム伝送方式を変え、符号化側は、前述の実施例と同じである。しかしながら、伝送時に、ＮＮに基づいて適応して伝送パラメータを調整する。本実施例では、主に修正されたalf_structure( )とalf_ctb_structure( )について説明し、本実施例では、alf_structure( )に輝度メインスイッチを表すための要素を追加してもよいし、alf_ctb_structure( )にＣＴＢレベルの輝度メインスイッチを表すための要素を追加してもよい。本実施例では、輝度スイッチを加えた後の画像（ｐｉｃｔｕｒｅ）／スライス（ｓｌｉｃｅ）層の伝送フローは、図９を参照すればよい。

【0164】

以下では、修正後のalf_structure( )と修正後のalf_ctb_structure( )についてそれぞれ説明する。

【0165】

修正後のalf_structure( )のシンタックス語義は、表１４を参照すればよい。

【0166】

【表14】

【0167】

ここで、alf_luma_enabled_flagは、新規追加された輝度メインスイッチであり、輝度ＡＬＦをオンにするかどうかを表すために用いられる。上記alf_structure( )における他の要素は、従来のＨ．２６６／ＶＶＣに定義されたalf_structure（）シンタックス構造における要素と一致する。

【0168】

修正後のalf_ctb_structure( )のシンタックス語義は、表１５を参照すればよい。

【0169】

【表15】

【0170】

ここで、alf_luma_enabled_flagは、新規追加されたＣＴＢレベルの輝度メインスイッチである。

【0171】

説明すべきこととして、ここで、alf_enabled_flagを伝送してもよいし、伝送しなくてもよい。伝送しない時、alf_enabled_flagは、以下の方式で値を取る。

【0172】

alf_enabled_flag ＝ alf_luma_enabled_flag ｜｜ alf_cb_enabled_flag ｜｜ alf_cr_enabled_flag ｜｜ alf_cc_cb_enabled_flag ｜｜ alf_cc_cr_enabled_flag。

【0173】

一つの選択的な実施例では、前記再構成されたビデオユニットのために輝度適応ループフィルタリング有効化フラグとクロマ適応ループフィルタリング有効化フラグとをそれぞれ設定することは、前記再構成されたビデオユニットのためにクロマ成分の適応ループフィルタに関連する第二のフラグを設定することを含む。本実施例では、主にクロマメインスイッチの追加について説明し、本実施例では、alf_structure( )にクロマメインスイッチを表すための要素を追加してもよいし、alf_ctb_structure( )にＣＴＢレベルのクロマメインスイッチを表すための要素を追加してもよい。ここで、クロマメインスイッチを加えた後の画像（ｐｉｃｔｕｒｅ）／スライス（ｓｌｉｃｅ）層の伝送フローは、図１０を参照すればよい。なお、クロマメインスイッチを加えた後に、alf_enabled_flagは、輝度にのみ作用する。シンタックス語義は、表１８～１９に示すとおりである。

【0174】

以下では、修正後のalf_structure( )と修正後のalf_ctb_structure( )についてそれぞれ説明する。

【0175】

修正後のalf_structure( )のシンタックス語義は、表１６に示すとおりである。

【0176】

【表16】

【0177】

ここで、alf_chroma_enabled_flagは、新規追加されたクロマメインスイッチであり、クロマＡＬＦをオンにするかどうかを表すために用いられる。上記alf_structure( )における他の要素は、従来のＨ．２６６／ＶＶＣに定義されたalf_structure（）シンタックス構造における要素と一致する。

【0178】

修正後のalf_ctb_structure( )のシンタックス語義は、表１７に示すとおりである。

【0179】

【表17】

【0180】

ここで、alf_chroma_enabled_flagは、新規追加されたＣＴＢレベルのクロマメインスイッチである。

【0181】

説明すべきこととして、ここで、alf_enabled_flagを伝送してもよいし、伝送しなくてもよい。伝送しない時、alf_enabled_flagは、以下の方式で値を取る。

【0182】

alf_enabled_flag = alf_luma_enabled_flag || alf_cb_enabled_flag || alf_cr_enabled_flag || alf_cc_cb_enabled_flag || alf_cc_cr_enabled_flag。

【0183】

一つの選択的な実施例では、前記適応ループフィルタリング有効化フラグの値が第一の値である場合に、前記適応ループフィルタリング有効化フラグは、前記再構成されたビデオユニットに対して適応ループフィルタリングを実行することを指示するために用いられ、前記適応ループフィルタリング有効化フラグの値が第二の値である場合に、前記適応ループフィルタリング有効化フラグは、前記再構成されたビデオユニットに対して適応ループフィルタリングを実行しないことを指示するために用いられ、ここで、前記第一の値は、前記第二の値と異なる。本実施例では、上記の第一の値は、「１」又は「真」又は他の値であってもよい。上記の第二の値は、「０」又は「偽」又は他の値であってもよい。

【0184】

一つの選択的な実施例では、前記再構成されたビデオユニットに対して適応ループフィルタリングを実行することは、前記再構成されたビデオユニットの輝度成分に対して輝度適応ループフィルタリングを実行することと、前記再構成されたビデオユニットの第一のクロマ成分に対して第一のクロマ適応ループフィルタリングを実行することと、前記再構成されたビデオユニットの第二のクロマ成分に対して第二のクロマ適応ループフィルタリングを実行することと、前記再構成されたビデオユニットの第一のクロマ成分に対して第一のクロマ成分間適応ループフィルタリングを実行することと、前記再構成されたビデオユニットの第二のクロマ成分に対して第一のクロマ成分間適応ループフィルタリングを実行することとのうちの少なくとも一つの操作を含む。本実施例では、輝度適応ループフィルタリングは、ＬｕｍａＡＬＦであり、第一のクロマ適応ループフィルタリングは、ＣｂＡＬＦであり、第二のクロマ適応ループフィルタリングは、ＣｒＡＬＦであり、第一のクロマ成分間適応ループフィルタリングは、ＣｂＣＣＡＬＦであり、第二のクロマ成分間適応ループフィルタリングは、ＣｒＣＣＡＬＦである。ここで、第一のクロマ成分は、青差（Ｃｂ）クロマ成分であり、第二のクロマ成分は、赤差（Ｃｒ）クロマ成分である。

【0185】

一つの選択的な実施例では、前記ニューラルネットワークループフィルタリング有効化フラグがシーケンスレベル又は画像レベル又はスライスレベルで前記再構成されたビデオユニットに対してニューラルネットワークループフィルタリングを実行することを指示する場合に、前記再構成されたビデオユニットの輝度成分に対して輝度適応ループフィルタリングを実行する決定と、前記再構成されたビデオユニットの第一のクロマ成分に対して第一のクロマ適応ループフィルタリングを実行する決定と、前記再構成されたビデオユニットの第二のクロマ成分に対して第二のクロマ適応ループフィルタリングを実行する決定と、前記再構成されたビデオユニットの第一のクロマ成分に対して第一のクロマ成分間適応ループフィルタリングを実行する決定と、前記再構成されたビデオユニットの第二のクロマ成分に対して第一のクロマ成分間適応ループフィルタリングを実行する決定とのうちの少なくとも一つの決定に基づいて前記再構成されたビデオユニットのために適応ループフィルタリング有効化フラグを設定する。本実施例では、ＡＬＦ－ＳＰＬＩＴオン条件が成立すれば、輝度成分、クロマ成分に対してフィルタリング決定をそれぞれ実行する必要がある。

【0186】

一つの選択的な実施例では、前記ニューラルネットワークループフィルタリングに関連するフィルタ情報は、ニューラルネットワークループフィルタリング有効化フラグと、ニューラルネットワークループフィルタリングによって参照される適応パラメータセットとを含む。本実施利では、ニューラルネットワークループフィルタリング有効化フラグは、異なる状態又は異なる値で実行する操作は異なる。

【0187】

一つの選択的な実施例では、前記ニューラルネットワークループフィルタリング有効化フラグは、輝度ニューラルネットワークループフィルタリング有効化フラグと、第一のクロマニューラルネットワークループフィルタリング有効化フラグと、第二のクロマニューラルネットワークループフィルタリング有効化フラグとのうちの少なくとも一つを含む。本実施例では、輝度ニューラルネットワークループフィルタリング有効化フラグと、第一のクロマニューラルネットワークループフィルタリング有効化フラグと、第二のクロマニューラルネットワークループフィルタリング有効化フラグとをそれぞれ決定し、次いで輝度ニューラルネットワークループフィルタリング有効化フラグと、第一のクロマニューラルネットワークループフィルタリング有効化フラグと、第二のクロマニューラルネットワークループフィルタリング有効化フラグとに基づいて対応する操作をそれぞれ実行してもよい。本実施例では、ニューラルネットワークループフィルタリング有効化フラグを指示するためのシンタックス構造は、表１８に示すとおりであってもよい。

【0188】

【表18】

【0189】

ここで、nn_luma_enabled_flagは、上記の輝度ニューラルネットワークループフィルタリング有効化フラグを識別し、
nn_cb_enabled_flagは、上記の第一のクロマニューラルネットワークループフィルタリング有効化フラグを識別し、
nn_cr_enabled_flagは、上記の第二のクロマニューラルネットワークループフィルタリング有効化フラグを識別する。

【0190】

一つの選択的な実施例では、前記再構成されたビデオユニットの符号化ビデオデータを発生させるための符号化ビットストリームのシーケンスパラメータセットＳＰＳと、画像パラメータセットＰＰＳと、画像ヘッダＰＨと、スライスヘッダＳＨと、符号化・復号化ツリーユニットＣＴＵとの少なくとも一つのシンタックス要素においてシグナリングによって前記ニューラルネットワークループフィルタリング有効化フラグを通知する。前述の実施例においてすでに各シンタックス要素について具体的に記述したため、ここでその説明を省略する。

【0191】

【0192】

上記各実施例における操作は、すべて符号化側における操作についての説明である。

【0193】

以下では、具体的な実施例を結び付けながら符号化側におけるフローについて全体的に説明する。図８は、本具体的な実施例による符号化側のＮＮフィルタリングに基づくＡＬＦ－ＳＰＬＩＴ操作のフローチャートであり、具体的には、以下のステップを含む。

【0194】

ステップ１：ＮＮフィルタリング
ＳＰＳ層のＮＮフィルタリングがオンの場合、ＬＭＣＳ後の再構築画像に対して以下のａ～ｃに従って操作ＮＮフィルタリングを行う。ＳＰＳ層のＮＮフィルタリングがオフの場合、従来のフィルタリングフロー（ＤＢＦ、ＳＡＯ）に従って操作フィルタリングを行う。具体的には、以下のサブステップａ～ｃを含む。

【0195】

ａ．事前にＮＮフィルタリングを行い、
ｂ．ＲＤＯによってＮＮフィルタリングのスライス（ｓｌｉｃｅ）／ブロック（ブロックは、ＣＴＵブロックを指してもよく、ＮＮフィルタリングブロックであってもよい）レベルのスイッチ決定を行い、
ｃ．ＮＮフィルタリング後の出力を再構築する。

【0196】

以下では、各サブステップについて具体的に説明する。

【0197】

ステップ１－ａにおいて、事前にＮＮフィルタリング操作を行うことについては、
ＬＭＣＳの再構築画像を得た後に、まずＮＮフィルタリングを行う。

【0198】

まずネットワークに入力する必要のある各データ、例えば再構築画像サンプル、ＱＰ情報、ＣＵ分け情報、デブロッキングフィルタリング情報、予測サンプルなどを構成し、そしてこれらの情報をネットワークモジュールに入力し、ＮＮ処理を経た後のサンプルを得る。

【0199】

ステップ１－ｂにおついて、スライス（Ｓｌｉｃｅ）／ブロックレベルのＮＮフィルタリングスイッチ決定について、
スライスに対応するチャンネルのＮＮフィルタリングがオン状態の場合、そのうちの各ブロックのＮＮフィルタリング前のコスト（ｃｏｓｔ）とＮＮフィルタリング後のコストとを計算し、比較して各ブロックのスイッチ状態を取得し、最終的にスライスがＮＮフィルタリングをオンにする場合のコストを取得し、
スライスがＮＮフィルタリングを使用しない場合、スライスがＮＮフィルタリングを採用しない場合のコストを取得し、
現在のスライスの各チャンネルについてＮＮフィルタリング前のコストとＮＮフィルタリング後のコストとをそれぞれ比較し、スライスレベルのＮＮフィルタリングをオンにするかどうかを決定し、スライスがＮＮフィルタリングをオンにする場合、各ブロックレベルのＮＮフィルタリングをオンにするかどうかを決定する。

【0200】

ステップ１－ｃにおいて、ＮＮフィルタリング後の出力を再構築することについて、
ステップ１－ｂのスライス／ブロックレベルのスイッチ決定に基づいて、ＮＮフィルタリング後の再構築画像を得る。

【0201】

ステップ２：適応ループフィルタリング（ＡＬＦ）
再構築画像に対して以下のステップに従って適応ループフィルタリング処理を行い、具体的には、以下のサブステップを含む。

【0202】

ａ．輝度成分を分類し、クロマは、分類を必要とせず、
ｂ．輝度とクロマに対して新たなＡＰＳフィルタリングセットをそれぞれ計算し、
ｃ．ＡＬＦのスライス／ｃｔｕレベルのフィルタリング決定を行う。

【0203】

ＡＬＦ－ＳＰＬＩＴオン条件が成立すれば、輝度とクロマに対してそれぞれスライス／ＣＴＵレベルのスイッチ決定及びフィルタリングセット選択を行う。ＡＬＦ－ＳＰＬＩＴオン条件が成立しなければ、まず輝度に対してスライス／ＣＴＵレベルのスイッチ決定及びフィルタリングセット選択を行い、選択後に輝度ＡＬＦがオン状態にあれば、現在のスライスのＡＬＦをオン状態に設定し、クロマのスライス／ＣＴＵレベルのスイッチ決定及びフィルタリングセット選択を継続する。決定後に輝度ＡＬＦがオフ状態にあれば、現在のスライスのＡＬＦをオフ状態に設定し、デフォルトでクロマＡＬＦは、オフ状態であり、クロマのスライス／ＣＴＵレベルのスイッチ決定及びフィルタリングセット選択を行わなくなる。

【0204】

ｄ．輝度とクロマＡＬＦ後の出力を再構築する。

【0205】

以下では、各サブステップについて説明する。

【0206】

ステップ２－ａにおいて：分類
輝度ＡＬＦ分類：
主に４ｘ４画素ブロックの内容特性に基づいて、フィルタタイプを分類結果として選択する。４ｘ４画素ブロックのフィルタクラス決定方法ステップは、以下のとおりである。

【0207】

（１）ラプラス勾配の計算
各４ｘ４輝度ブロックについて、このブロックを中心とする８ｘ８画素ブロックにおける各画素の、水平０°、垂直９０°、１３５°、４５°方向における一次元ラプラシアン勾配を計算する。計算の複雑度を減少させるために、横座標と縦座標がいずれも偶数であるか又はいずれも偶数ではない一部の画素点のみを対象に、水平０°、垂直９０°、１３５°、４５°方向における勾配を計算し、ｇ_ｈ、ｇ_ｖを得る。

【0208】

（２）方向性係数Ｄの計算
方向性係数Ｄは、勾配方向を表す。まずｇ_ｈ、ｇ_ｖに基づいて水平と垂直方向の勾配の最大値と最小値との比、対角方向の勾配の最大値と最小値との比を計算し、そして閾値ｔ１＝２、ｔ２＝４．５と比較して、方向性係数を得る。

【0209】

（３）活動性係数Ａの計算
活動性係数Ａは、勾配の強弱を表す。ｇ_ｈ、ｇ_ｖに基づいてテーブル検索の方式で得られる。

【0210】

（４）分類結果
４ｘ４小ブロックの分類は、ｆｉｌｔＩｄｘ＝５＊Ｄ＋Ａである。

【0211】

クロマは、分類する必要がない。

【0212】

ステップ２－ｂについて：新たなＡＰＳフィルタリングセットの計算
輝度計算ＡＰＳフィルタリングセット方式：
ＡＰＳフィルタを構築する基本的な考え方は、スライスを４ｘ４のブロックに分け、勾配に基づいて各４ｘ４のブロックの方向性と活動度を計算し、さらに各ブロックのフィルタクラスを得ることである。各フィルタクラスに対して、この種類のフィルタを採用するすべての４ｘ４のブロックを一つの全体として、ビナホフ方程式を利用することによって、この種類のフィルタの係数を求める。

【0213】

アルゴリズム性能を向上させ、計算の複雑度を低減させるために、以下のように最適化することができる。

【0214】

（１）ＡＬＦは、ＣＴＵごとに圧縮性能を向上させることができるわけではないため、レート歪み最適化ポリシーを利用し、ＡＬＦを採用しないＣＴＵを決定し、そしてＡＬＦを採用しないＣＴＵを除外してフィルタ係数を再計算する。この最適化ポリシーは、最適になるまで複数回繰り返してもよい。

【0215】

（２）ＡＰＳフィルタリング係数は、符号化して伝送することを必要とし、統合して２５種類のフィルタを減少させることで、圧縮効率を向上させることができる。２５組のフィルタリング係数を得た後に、隣接するフィルタクラスにそのうちの一組のフィルタ係数を採用し、それによる圧縮性能の低下が限られる場合、隣接するフィルタクラスを融合して１つのクラスになる。この最適化ポリシーは、最適になるまで複数回繰り返してもよい。

【0216】

クロマ計算ＡＰＳフィルタリングセット方式：
クロマ成分に対して、スライスを８つの部分に分け、各領域内には、それぞれ連続する整数個のＣＴＵが含まれ、各部分のＣＴＵの数は、ほぼ一致している。領域ごとに一組のフィルタ係数を計算し、合計で８組のフィルタを得る。そして、輝度成分と類似するように、クロマ成分領域を統合する方式によって統合フィルタグループを最適化することができ、よって符号化ビットを節約する。

【0217】

ステップ２－ｃについて：スライス／ＣＴＵレベルのスイッチ決定及びフィルタリングセット選択
輝度スイッチ決定及びフィルタリングセット選択：
輝度は、スライスとＣＴＵスイッチレベルでＡＬＦ操作をオンにするかどうかを選択することができる。

【0218】

輝度ＡＬＦに対して、フィルタリング係数セットは、１６個の固定サブセットと最大７個のＡＰＳサブセットとを含み、各サブセットは、２５個のフィルタクラスを含む。輝度ＡＬＦを選択する各ＣＴＵに対して、選択されるフィルタリングサブセットは、符号化のサブセットインデックスによって決定され、選択されるフィルタクラスは、画素ブロックのコンテンツ特徴によって決定され、具体的にどのフィルタリングセットを選択するかは、ＲＤＯに基づいて選択される。

【0219】

クロマスイッチ決定及びフィルタリングセット選択：
同様にクロマは、スライスとＣＴＵスイッチレベルでＡＬＦ操作をオンにするかどうかを選択することができる。

【0220】

クロマＡＬＦは、ＡＰＳフィルタサブセットのみを使用する。ＡＰＳ層は、クロマＡＰＳサブセットを符号化して伝送する時、輝度情報ＡＰＳサブセットと一つのＩＤ番号を共有し、また同様に最大７個のＡＰＳサブセットを維持する。各スライスは、一つのＡＰＳサブセットのみを使用し、且つＣｂ成分とＣｒ成分は、一つのＡＰＳサブセットを共有する。

【0221】

クロマ成分ＣｂとＣｒは、各ＡＰＳサブセットにも最大８個のフィルタが含まれる。各ＣＴＵは、そのうちの一つのフィルタを選択して使用する。Ｃｂ成分とＣｒ成分は、異なるインデックスのフィルタを使用してもよい。具体的にどのフィルタを使用するかは、ＲＤＯに基づいて選択される。

【0222】

なお、輝度とクロマスイッチを加えた後の画像（ｐｉｃｔｕｒｅ）／スライス（ｓｌｉｃｅ）層の伝送フローは、図５を参照することができる。図５において、ＬｕｍａＡＬＦスイッチは主に、輝度ＡＬＦをオンにするかどうかを制御するために用いられる。即ち、このＬｕｍａＡＬＦスイッチを指示するためのフィールド値が１である場合、オンを表し、値が０である場合、オフを表す。ＣｂＡＬＦスイッチは主に、第一のクロマ成分ＣｂＡＬＦをオンにするかどうかを制御するために用いられる。即ち、このＣｂＡＬＦスイッチを指示するためのフィールド値が１である場合、オンを表し、値が０である場合、オフを表す。ＣｒＡＬＦスイッチは主に、第二のクロマ成分ＣｒＡＬＦをオンにするかどうかを制御するために用いられる。即ち、このＣｒＡＬＦスイッチを指示するためのフィールド値が１である場合、オンを表し、値が０である場合、オフを表す。ＣｂＣＣＡＬＦスイッチは主に、第一のクロマ成分間ＡＬＦをオンにするかどうかを制御するために用いられる。即ち、このＣｂＣＣＡＬＦスイッチを指示するためのフィールド値が１である場合、オンを表し、値が０である場合、オフを表す。ＣｒＣＣＡＬＦスイッチは主に、第二のクロマ成分間ＡＬＦをオンにするかどうかを制御するために用いられる。即ち、このＣｒＣＣＡＬＦスイッチを指示するためのフィールド値が１である場合、オンを表し、値が０である場合、オフを表す。

【0223】

ステップ２－ｄについて：ＡＬＦフィルタリング操作
輝度フィルタリング操作：
以上のステップに基づいて、４ｘ４の輝度ブロックごとに一つの７ｘ７のフィルタリングテンプレートを決定することができる。そして４ｘ４の輝度ブロックにおける各画素に対してフィルタリング処理を行う。

【0224】

クロマフィルタリング操作：
以上のステップに基づいて、クロマＣＴＵごとに一つの５ｘ５のフィルタリングテンプレートを決定することができる。そしてＣＴＵにおけるクロマブロックにおける各画素に対してフィルタリング処理を行う。

【0225】

輝度とクロマを統合してＡＬＦ後の再構築フレームを得る。

【0226】

ステップ３：成分間適応ループフィルタリング（ＣＣＡＬＦ）
一般的には、ビデオの輝度成分には細かいテクスチャがより多く含まれているが、クロマ成分が相対的に平坦である。また、人間の目は、輝度情報により敏感であり、ビデオ符号化もできる限りより多くのディテールを保持しようとする。輝度情報に対してＡＬＦを行うことにより、クロマ成分のディテールを補償することにより、クロマ成分の圧縮性能を改善することができる。そのため、Ｈ．２６６／ＶＶＣには、成分間ＡＬＦ（ＣＣ－ＡＬＦ）が導入されており、ＡＬＦフィルタリング前の再構築輝度値を利用してＣＣ－ＡＬＦを行い、クロマ値に対して補足と修正を行う。ＣＣ－ＡＬＦを含むＡＬＦフィルタリングフレームワークは、図１１に示すとおりである。

【0227】

ＣＣＡＬＦ符号化側の具体的なステップは、以下のとおりである。

【0228】

ＳＰＳ層のＮＮフィルタリングがオンの場合、以下のＣＣＡＬＦのステップを直接行い、最終的な再構築フレームを出力する。ＳＰＳ層のＮＮフィルタリングがオフの場合、現在のスライスの輝度ＡＬＦがオンであるかどうかを判断する必要があり、オンの場合、以下のＣＣＡＬＦのステップを行う。現在のスライスの輝度ＡＬＦがオフの場合、ＣＣＡＬＦは、デフォルトでオフ状態であり、ＣＣＡＬＦ操作を行わず、前のステップの結果を最終的な再構築フレームとして直接出力する。具体的には、以下のサブステップを含む。

【0229】

ａ．クロマに対してＣＣＡＬＦフィルタリングセットを計算し、
ｂ．スライス／ＣＴＵレベルのスイッチ決定及びフィルタリングセット選択を行い、
ｃ．ＣＣＡＬＦ後の出力を再構築する。

【0230】

以下では、各サブステップについて説明する。

【0231】

ステップ３－ａについて：ＣＣＡＬＦフィルタリングセットの計算
スライスを４つの部分に分け、各領域内には、それぞれ連続する整数個のＣＴＵが含まれ、各部分のＣＴＵの数は、ほぼ一致している。領域ごとに一組のフィルタ係数を計算し、合計で４組のフィルタを得る。そして、クロマＡＬＦと類似するように、クロマ成分領域を統合する方式によって統合フィルタグループを最適化することができ、よって符号化ビットを節約する。

【0232】

ステップ３－ｂについて：スライス／ＣＴＵレベルのスイッチ決定及びフィルタリングセット選択
ＣＣＡＬＦ操作は、スライスとＣＴＵスイッチレベルでオンにするかどうかを選択することができる。

【0233】

ＣＣ－ＡＬＦは、ＡＰＳフィルタサブセットのみを使用する。ＡＰＳ層は、ＣＣ－ＡＬＦのＡＰＳサブセットを符号化して伝送する時、最大７個のＡＰＳサブセットを維持する。各スライスは、一つのＡＰＳサブセットのみを使用し、且つＣｂ成分とＣｒ成分は、異なるＡＰＳサブセットを使用してもよい。

【0234】

ＣＣ－ＡＬＦは、クロマ成分ＣｂとＣｒに対して、各ＡＰＳサブセットにも最大４個のフィルタが含まれる。各ＣＴＵは、そのうちの一つのフィルタを選択して使用する。Ｃｂ成分とＣｒ成分は、異なるインデックスのフィルタを使用してもよい。具体的にどのフィルタを使用するかは、ＲＤＯに基づいて選択される。

【0235】

ステップ３－ｃについて：ＣＣＡＬＦフィルタリング操作
以上のステップに基づいて、クロマＣＴＵごとに一つの３ｘ４のフィルタリングテンプレートを決定することができる。そしてＣＴＵにおけるクロマブロックにおける各画素に対してフィルタリング処理を行う。

【0236】

説明すべきこととして、上記の具体的な実施例に言及されたフィルタリング係数は、ＡＰＳ層で伝送されてもよい。aps_params_typeがALF_APSである時、alf_data( )シンタックス構造を解析する。alf_data( )には、ＡＬＦのフィルタリングセットパラメータが含まれている。復号側は、ＡＰＳ層におけるalf_data( )を解析することにより、ＡＬＦに対応するフィルタリングセットパラメータを取得する。シンタックス語義は、表１９に示すとおりである。

【0237】

【表19】

【0238】

ここで、alf_data( )のシンタックス語義は、表２０に示すとおりである。

【0239】

【表20】

【0240】

ここで、
alf_luma_filter_signal_flag：輝度ＡＬＦフィルタリング係数を含むかどうかを識別する。１の場合は含むことを表し、０の場合は含まないことを表す。

【0241】

alf_chroma_filter_signal_flag：クロマＡＬＦフィルタリング係数を含むかどうかを識別する。１の場合は含むことを表し、０の場合は含まないことを表す。

【0242】

alf_cc_cb_filter_signal_flag：Ｃｂ成分ＣＣ－ＡＬＦフィルタリング係数を含むかどうかを識別する。１の場合は含むことを表し、０の場合は含まないことを表す。

【0243】

alf_cc_cr_filter_signal_flag：Ｃｒ成分ＣＣ－ＡＬＦフィルタリング係数を含むかどうかを識別する。１の場合は含むことを表し、０の場合は含まないことを表す。

【0244】

alf_luma_clip_flag：輝度クランプ閾値を含むかどうかを識別する。１の場合は含むことを表し、０の場合は含まないことを表す。
alf_luma_num_filters_signalled_minus1：輝度ＡＬＦサブセットに含まれるフィルタの数を識別する。この値に１を加算するものである。

【0245】

alf_luma_coeff_delta_idx[ filtIdx ]：複数のフィルタクラスが同一組のフィルタを使用する可能性があるため、輝度ＡＬＦのｆｉｌｔｅｒｉｄｘ番目の分類に使用されるフィルタのシリアル番号を識別する。

【0246】

alf_luma_coeff_abs[ sfIdx ][j]：輝度ＡＬＦのｆｉｌｔＩｄｘ番目のフィルタのｊ番目のフィルタリング係数の絶対値を識別する。

【0247】

alf_luma_coeff_sign[ sfldx ][j ]：輝度ＡＬＦのｆｉｌｔｌｄｘ番目のフィルタのｊ番目のフィルタリング係数の符号を識別する。

【0248】

alf_luma_clip_idx[ sfldx ][j ]：輝度ＡＬＦのｆｉｌｔｌｄｘ番目のフィルタのｊ番目のフィルタリング係数に対応するクランプ閾値を識別する。

【0249】

alf_chroma_clip_flag：クロマクランプ閾値を含むかどうかを識別する。１の場合は含むことを表し、０の場合は含まないことを表す。
alf_chroma_num_alt_filters_minus1：クロマＡＬＦサブセットに含まれるフィルタの数を識別する。この値に１を加算するものである。

【0250】

alf_chroma_coeff_abs[ altldx ][j]：クロマＡＬＦのａｌｔＩｄｘ番目のフィルタのｊ番目のフィルタリング係数の絶対値を識別する。

【0251】

alf_chroma_coeff_sign[ altldx ][j]：クロマＡＬＦのａｌｔＩｄｘ番目のフィルタのｊ番目のフィルタリング係数の符号を識別する。

【0252】

alf_chroma_clip_idx[ altIldx ][j]：クロマＡＬＦのａｌｔｌｄｘ番目のフィルタのｊ番目のフィルタリング係数に対応するクランプ閾値を識別する。

【0253】

alf_cc_cb_filters_signalled_minus1：クロマＣｂ成分のＣＣ－ＡＬＦサブセットに含まれるフィルタの数を識別する。この値に１を加算するものである。

【0254】

alf_cc_cb_mapped_coeff_abs[ k][j]：クロマＣｂ成分のＣＣ－ＡＬＦのｉ番目のフィルタのｊ番目のフィルタリング係数の絶対値を識別する。

【0255】

alf_cc_cb_coef_sign[ k ][j]：クロマＣｂ成分のＣＣ－ＡＬＦのｉ番目のフィルタのｊ番目のフィルタリング係数の符号を識別する。

【0256】

alf_ cc_cr_filters_signalled_minus1：クロマＣｒ成分のＣＣ－ＡＬＦサブセットに含まれるフィルタの数を識別する。この値に１を加算するものである。

【0257】

alf_cc_cr_mapped_coeff_abs[ k ][j]：クロマＣｒ成分のＣＣ－ＡＬＦのｉ番目のフィルタのｊ番目のフィルタリング係数の絶対値を識別する。

【0258】

alf_cc_or_coeff_sign[ k][j]：クロマＣｒ成分のＣＣ－ＡＬＦのｉ番目のフィルタのｊ番目のフィルタリング係数の符号を識別する。

【0259】

本実施例では、ビデオ処理のための方法をさらに提供する。図１２は、本発明の実施例によるビデオ処理のための方法のフローチャートの二である。図１２に示すように、このフローは、以下のステップを含む。

【0260】

ステップＳ１２０２において、再構成されたビデオユニットのニューラルネットワークループフィルタリングに関連するフィルタ情報と、再構成されたビデオユニットの適応ループフィルタリングに関連するフィルタ情報とのうちの少なくとも一つの情報を受信する。
ステップＳ１２０４において、前記再構成されたビデオユニットのニューラルネットワークループフィルタリング有効化フラグ及び前記再構成されたビデオユニットの適応ループフィルタリング有効化フラグを決定する。
ステップＳ１２０６において、前記適応ループフィルタリング有効化フラグに基づいて前記再構成されたビデオユニットに対して適応ループフィルタリングを実行する。

【0261】

ここで、上記操作を実行するものは、ビデオ復号側の機器、例えばプロセッサ、コントローラ、又は類似する処理能力を備える機器などであってもよい。

【0262】

上記実施例によれば、再構成されたビデオユニットのニューラルネットワークループフィルタリング有効化フラグに基づいて再構成されたビデオユニットのために適応ループフィルタリング有効化フラグを設定することができ、よってニューラルネットワークループフィルタリング有効化フラグに基づいて前記再構成されたビデオユニットの適応ループフィルタリング有効化フラグを識別し、さらに識別結果に基づいて適応ループフィルタリングを実行することができ、ニューラルネットワークループフィルタリングを行った後に適応ループフィルタリングを直接オフにすることにより、画像にさらなる輝度及び／又はクロマ処理を行うことができず、さらに画質が最適化を達成できないという問題を回避し、画質を向上させる効果を達成する。

【0263】

【0264】

【0265】

【0266】

一つの選択的な実施例では、前記再構成されたビデオユニットの符号化ビデオデータを発生させるための符号化ビットストリームのシーケンスパラメータセットＳＰＳと、画像パラメータセットＰＰＳと、画像ヘッダＰＨと、スライスヘッダＳＨと、符号化・復号化ツリーユニットＣＴＵとの少なくとも一つのシンタックス要素において前記適応ループフィルタリング有効化フラグを決定する。

【0267】

一つの選択的な実施例では、前記方法は、前記ニューラルネットワークループフィルタリング有効化フラグがシーケンスレベル又は画像レベル又はスライスレベルで前記再構成されたビデオユニットに対してニューラルネットワークループフィルタリングを実行することを指示する場合に、前記再構成されたビデオユニットの輝度適応ループフィルタリング有効化フラグとクロマ適応ループフィルタリング有効化フラグとを決定することをさらに含む。

【0268】

一つの選択的な実施例では、前記方法は、前記ニューラルネットワークループフィルタリング有効化フラグがシーケンスレベルで前記再構成されたビデオユニットに対してニューラルネットワークループフィルタリングを実行することを指示する場合に、画像レベル又はスライスレベルで前記再構成されたビデオユニットの輝度適応ループフィルタリング有効化フラグを決定することと、前記輝度適応ループフィルタリング有効化フラグが前記再構成されたビデオユニットに対して輝度適応ループフィルタリングを実行しないことを指示する場合に、前記再構成されたビデオユニットのクロマ適応ループフィルタリング有効化フラグを決定することと、をさらに含む。

【0269】

一つの選択的な実施例では、前記方法は、前記クロマ適応ループフィルタリング有効化フラグに基づいて前記再構成されたビデオユニットに対してクロマ適応ループフィルタリングを実行するかどうかを決定することをさらに含む。

【0270】

【0271】

【0272】

一つの選択的な実施例では、前記適応ループフィルタリング有効化フラグの値が第一の値である場合に、前記適応ループフィルタリング有効化フラグは、前記再構成されたビデオユニットに対して適応ループフィルタリングを実行することを指示するために用いられ、前記適応ループフィルタリング有効化フラグの値が第二の値である場合に、前記適応ループフィルタリング有効化フラグは、前記再構成されたビデオユニットに対して適応ループフィルタリングを実行しないことを指示するために用いられ、ここで、前記第一の値は前記第二の値と異なる。

【0273】

【0274】

【0275】

本実施例では、ニューラルネットワークフィルタリング適応パラメータセットＡＰＳシンタックス要素は、具体的に表２１に示すとおりである。

【0276】

【表21】

【0277】

適応パラメータセットタイプ（aps_params_type）フィールド値NNF_APSは、ＮＮフィルタリング適応パラメータセットを指示する。

【0278】

ここで、nnf_dataに含まれているフィルタリングパラメータ情報は主に、
フィルタリング係数絶対値と、
フィルタリング係数シンボルとを含む。

【0279】

一つの選択的な実施形態として、nnf_dataにおける輝度成分ＮＮフィルタリングに関連するシンタックス要素は、具体的に表２２に示すとおりである。

【0280】

【表22】

【0281】

一つの選択的な実施形態として、nnf_dataにおけるクロマ成分ＮＮフィルタリングに関連するシンタックス要素は、具体的に表２３に示すとおりである。

【0282】

【表23】

【0283】

【0284】

一つの選択的な実施例では、前記再構成されたビデオユニットの符号化ビデオデータを発生させるための符号化ビットストリームのシーケンスパラメータセットＳＰＳと、画像パラメータセットＰＰＳと、画像ヘッダＰＨと、スライスヘッダＳＨと、符号化・復号化ツリーユニットＣＴＵとの少なくとも一つのシンタックス要素において前記ニューラルネットワークループフィルタリングに関連するフィルタ情報に含まれるニューラルネットワークループフィルタリング有効化フラグを決定する。

【0285】

【0286】

上記各実施例における操作は、すべて復号側における操作についての説明である。

【0287】

以下では、具体的な実施例を結び付けながら復号側におけるフローについて全体的に説明し、具体的には、以下のステップを含む。

【0288】

図１３は、本発明の具体的な実施例による復号側のＮＮフィルタリングに基づくＡＬＦ－ＳＰＬＩＴ操作フローチャートである。メイン方案ＡＬＦ＿ＳＰＬＩＴ操作が復号側フィルタリング操作に用いられる時に、図１３に示すように、現在のスライスの輝度とクロマＡＬＦ、及びＣＣＡＬＦのスライス／ＣＴＵレベルのスイッチ及びフィルタリングセットの選択は、コードストリームを解析することによって得られる。全体的なフローは、以下のとおりである。

【0289】

ＡＬＦ－ＳＰＬＩＴオン条件：ＳＰＳ層のＮＮフィルタリングスイッチオン
（１）ＬＭＣＳの再構築画像を得た後に、ＳＰＳ層のＮＮフィルタリングスイッチがオンの場合、以下のステップに従ってＮＮフィルタリングを行う。ＳＰＳ層のＮＮフィルタリングがオフの場合、従来のフィルタリングフローに従ってフィルタリングを行う。

【0290】

ａ．コードストリームからフィルタリングのスライス／ブロックレベルのスイッチ決定を取得する。

【0291】

ｂ．スイッチ情報に基づいてＮＮフィルタリング後の出力を再構築する。

【0292】

（２）ＮＮ後の再構築画像に対してＡＬＦ処理を行い、最終的な再構築画像を得る。

【0293】

ａ．分類。輝度成分を分類し、クロマは、分類する必要がない。

【0294】

ｂ．コードストリームから現在のスライス／ＣＴＵのＡＬＦスイッチ決定を取得する。

【0295】

ＡＬＦ－ＳＰＬＩＴオン条件が成立すれば、コードストリームから輝度とクロマのスライス／ＣＴＵレベルのスイッチ情報及び対応するフィルタリングセットをそれぞれ取得する。ＡＬＦ－ＳＰＬＩＴオン条件が成立しなければ、コードストリームから現在のスライスのスイッチ情報を取得し、オンの場合、輝度ＡＬＦをオンに設定し、クロマのスライスレベルのスイッチ情報を取得し続け、そして輝度クロマのスイッチ状況に基づいてｃｔｕスイッチ情報及び対応するフィルタリングセットを取得する。現在のスライスのＡＬＦがオフの場合、輝度ＡＬＦをオフに設定し、クロマのスライススイッチ情報を取得しなくなり、デフォルトでクロマＡＬＦがオフ状態であるとする。

【0296】

ｃ．輝度に対してクロマＡＬＦフィルタリング操作を行う。

【0297】

（３）ＮＮ後の再構築画像に対してＣＣＡＬＦ処理を行い、最終的な再構築フレームを出力する。

【0298】

ａ．コードストリームから現在のスライス／ＣＴＵのＣＣＡＬＦスイッチ決定を取得する。

【0299】

ＡＬＦ－ＳＰＬＩＴオン条件が成立すれば、コードストリームから現在のスライスＣＣＡＬＦのスライス／ＣＴＵレベルのスイッチ情報及び対応するフィルタリングセットを直接取得する。ＡＬＦ－ＳＰＬＩＴオン条件が成立しなければ、現在のスライス輝度ＡＬＦがオンであるかどうかを判断する必要があり、オンの場合、コードストリームからＣＣＡＬＦのスライス／ＣＴＵレベルのスイッチ情報及び対応するフィルタリングセットを取得し続け、現在のスライスのＡＬＦがオフ状態にある場合、ＣＣＡＬＦは、デフォルトでオフ状態となり、クロマのスライス／ＣＴＵレベルのスイッチ決定及びフィルタリングセット選択を行わなくなる。

【0300】

ｂ．ＣＣＡＬＦフィルタリングを行う。

【0301】

本発明の一つの具体的な実施例によれば、ＡＬＦ－ＳＰＬＩＴのオン条件を変える方案をさらに提供する。
前述の方案（具体的には、前述の符号化側におけるフローについて全体的に説明する方案を参照することができる）におけるＡＬＦ－ＳＰＬＩＴは、一つの実現方法にすぎない。前述の方案の主な考え方は、ＮＮフィルタリング後に、輝度クロマＡＬＦを分けることである。ＮＮ後にＡＬＦが大量にオフになるのが、ＮＮにより輝度性能が大幅に向上され、よって輝度ＡＬＦが大量にオフになるためであることを考慮すると、クロマＡＬＦ及びＣＣＡＬＦが強制的にオフにされる。現在の画像／スライスがＮＮフィルタリングを行わない時、輝度ＡＬＦが一般的にオン状態にあれば、ＡＬＦ－ＳＰＬＩＴを行う必要はない。

【0302】

前述の方案で以下の二つの状況が発生した場合、ＡＬＦ－ＳＰＬＩＴ操作を行う必要はない。

【0303】

ＮＮがフィルタリング決定を行う時、スライス層がＮＮフィルタリングをオフにすると決めた場合。

【0304】

現在のスライスのＮＮフィルタリングスイッチがオンであるが、そのうち多数のＣＴＵのＮＮフィルタリングスイッチがオフである場合。

【0305】

以上の２点に基づいて、本具体的な実施方案は、ＮＮフィルタリングモジュールからＡＬＦ－ＳＰＬＩＴのスイッチを抽出し、ＡＬＦ－ＳＰＬＩＴのＮＮフィルタリングに対する適応性を増やし、以下の選択的な実施方案を提案する。

【0306】

本具体的な実施例における方案は、主に符号化側を変え、復号側は、前述の実施例におけるものと一致する。

【0307】

図１４は、本具体的な実施例による符号化側のＮＮフィルタリングに基づくＡＬＦ－ＳＰＬＩＴ操作のフローチャートである。符号化端の全体的なフローは、具体的に以下のとおりである。

【0308】

（１）ＬＭＣＳ後の再構築画像に対してＮＮフィルタリングを行う。

【0309】

ａ．ＮＮフィルタリング操作。前述の実施例における符号化側のステップ１－ａと同じである。
ｂ．ＮＮのスライス／ブロックレベルのＮＮフィルタリングスイッチ決定、ＡＬＦ－ＳＰＬＩＴのスイッチ決定の生成。ＮＮのスライス／ブロックレベルのＮＮフィルタリングスイッチ決定は、前述の実施例における符号化側のステップ１－ｂと一致する。ＡＬＦ－ＳＰＬＩＴのスイッチ決定は、二つの生成方式がある。そして、ＡＬＦ－ＳＰＬＩＴスイッチ決定をコードストリームに書き込む。

【0310】

１．ＮＮのスライススイッチに基づいて、ＡＬＦ－ＳＰＬＩＴをオンにするかどうかを決める。現在のスライスのＮＮフィルタリングがオンの場合、ＡＬＦ－ＳＰＬＩＴオン条件が成立するように設定する。現在のスライスのＮＮフィルタリングがオフの場合、ＡＬＦ－ＳＰＬＩＴオン条件が成立しないように設定する。

【0311】

２．ＮＮのＣＴＵスイッチの占有率に基づいて、ＡＬＦ－ＳＰＬＩＴをオンにするかどうかを決める。現在のスライスがオン状態であれば、オンになっているＣＴＵがＣＴＵの総数に占める割合を統計し、閾値よりも大きい場合（ここで閾値が５０％であるとする）、ＡＬＦ－ＳＰＬＩＴのｆｌａｇをオンに設定し、そうでなければ、ＡＬＦ－ＳＰＬＩＴのｆｌａｇをオフに設定する。現在のスライスのＮＮフィルタリングがオフ状態であれば、ＡＬＦ－ＳＰＬＩＴのｆｌａｇは、オフである。

【0312】

ｃ．ＮＮフィルタリング後の出力を再構築する。前述の実施例における符号化側のステップ１－ｃと同じである。

【0313】

（２）ＡＬＦフィルタリング操作を行う。ＡＬＦ－ＳＰＬＩＴオン条件が成立するかどうかを取得する。他のステップは、前述の実施例における符号化側のステップ２と一致する。

【0314】

（３）ＣＣＡＬＦフィルタリング操作を行う。ＡＬＦ－ＳＰＬＩＴオン条件が成立するかどうかを取得する。前述の実施例における符号化側のステップ３と一致する。

【0315】

以下では、本具体的な実施例に関連するシンタックス語義について説明する。

【0316】

ＡＬＦ－ＳＰＬＩＴスイッチを加えた後の画像／スライス層の伝送フローチャートは、図１５を参照することができる。

【0317】

本具体的な実施例におけるシンタックス語義は、主にＰＨ層、ＳＨ層及びＣＴＵ層のＡＬＦ－ＳＰＬＩＴスイッチ条件を変え、残りの層は、変えられない。nn_structure( )では、ＡＬＦ－ＳＰＬＩＴのスイッチ情報が伝送される。

【0318】

本具体的な実施例におけるnn_structure( )のシンタックス語義は、具体的に表２４を参照する。

【0319】

【表24】

【0320】

ここで、この表２４は、実際には表１８のうえにalf_split_enabled_flag要素が追加されたものである。この新規要素は、ＡＬＦ－ＳＰＬＩＴ技術をオンにするかどうかを表すために用いられる。１の場合はオンにすることを表し、０の場合はオンにしないことを表す。存在しない場合、０に等しいとして処理する。

【0321】

（このシンタックス要素は、ＮＮにおける情報に基づいて生成され、例えば上記に言及されたようにＮＮフィルタリングを使用してオンにするＣＴＵ占有率が閾値よりも大きい場合、オンにする）。

【0322】

本具体的な実施例では、符号化ビットストリームのＰＨレベルでシグナリングによってニューラルネットワークループフィルタリングに関連するフィルタ情報及び適応ループフィルタリングに関連するフィルタ情報を通知する。本具体的な実施例に関連するＰＨ層におけるシンタックス語義は、具体的に表２５を参照する。

【0323】

【表25】

【0324】

ここで、この表２５は、実際には表３のうえにalf_split_structure( )の実行前提を調整したものである。即ち、alf_split_enabled_flagが１に等しいと判定した場合、ＡＬＦ－ＳＰＬＩＴ操作を実行する。

【0325】

本具体的な実施例では、符号化ビットストリームのＳＨレベルでシグナリングによってニューラルネットワークループフィルタリングに関連するフィルタ情報及び適応ループフィルタリングに関連するフィルタ情報を通知する。本具体的な実施例に関連するＳＨ層におけるシンタックス語義は、具体的に表２６を参照する。

【0326】

【表26】

【0327】

ここで、この表２６は、実際的には表４の上にalf_split_structure( )の実行前提を調整したものである。即ち、alf_split_enabled_flagが１に等しいと決定した場合、ＡＬＦ－ＳＰＬＩＴ操作を実行する。

【0328】

ＣＴＵ層におけるシンタックス語義は、具体的に表２７を参照する。

【0329】

【表27】

【0330】

本発明の一つの具体的な実施例によれば、コードストリームを変えることなくＡＬＦ－ＳＰＬＩＴを実現する方法をさらに提供する。本具体的な実施例は、符号化側の修正にのみ関し、コードストリームの伝送を変えない。

【0331】

符号化側のステップは、以下のとおりである。

【0332】

（１）ＮＮ操作フィルタリング。前述の方案（具体的には、前述の符号化側におけるフローについて全体的に説明する方案を参照することができる）のステップ１と一致する。

【0333】

（２）ＡＬＦフィルタリング操作を行う。

【0334】

ａ．輝度成分を分類する。クロマは、分類する必要がない。
ｂ．輝度とクロマに対して新たなＡＰＳフィルタリングセットをそれぞれ計算する。
ｃ．ＡＬＦのスライス／ｃｔｕレベルのフィルタリング決定を行う。

【0335】

すると、輝度とクロマに対してそれぞれスライス／ＣＴＵレベルのスイッチ決定及びフィルタリングセット選択を行う。決定後に輝度とクロマとが少なくとも一つがオンの場合、現在のスライスのＡＬＦスイッチをオンに設定する。決定後に輝度とクロマとのＡＬＦがいずれもオフの場合、現在のスライスのＡＬＦスイッチをオフに設定する。

【0336】

ｄ．輝度とクロマＡＬＦ後の出力を再構築する。

【0337】

（３）ＣＣＡＬＦフィルタリング操作を行う。

【0338】

ａ．クロマに対してＣＣＡＬＦフィルタリングセットを計算する。
ｂ．ＣＣＡＬＦのスライス／ＣＴＵレベルのスイッチ決定及びフィルタリングセット選択を行う。

【0339】

決定後に現在のスライスがＣＣＡＬＦをオンにすると、現在のスライスのＡＬＦスイッチをオンに設定するように更新する。決定後にＣＣＡＬＦをオフにすると、前のＡＬＦスイッチをそのままに維持する。

【0340】

ｃ．ＣＣＡＬＦ後の出力を再構築する。

【0341】

説明すべきこととして、この場合に、クロマＡＬＦとＣＣＡＬＦが一旦行われると、輝度ＡＬＦが情報を伝送する。

【0342】

以上の実施形態の記述によって、当業者であればはっきりと分かるように、上記実施例の方法は、ソフトウェアと必要な汎用ハードウェアプラットフォームの形態によって実現されることができる。無論、ハードウェアによって実現されてもよいが、多くの場合、前者は、より好適な実施形態である。このような理解を踏まえて、本発明の技術案が実質には又は従来の技術に寄与した部分がソフトウェア製品の形式によって具現化されてもよい。このコンピュータソフトウェア製品は、一つの記憶媒体（例えばＲＯＭ／ＲＡＭ、磁気ディスク、光ディスク）に記憶され、一台の端末機器（携帯電話、コンピュータ、サーバ、又はネットワーク機器などであってもよい）に本発明の各実施例に記載の方法を実行させるための若干の命令を含む。

【0343】

本実施例では、ビデオ処理のための装置をさらに提供する。この装置は、上記実施例及び好ましい実施形態を実現するために用いられ、すでに説明したため、これ以上説明しない。以下に使用されるように、用語「モジュール」は、所定の機能のソフトウェア及び／又はハードウェアの組み合わせを実現することができる。以下の実施例に記述された装置は、好ましくはソフトウェアで実現されるが、ハードウェア、又は想定されるように、ソフトウェアとハードウェアの組み合わせの実現も可能である。

【0344】

図１６は、本発明の実施例によるビデオ処理のための装置のブロック構成図である。図１６に示すように、この装置は、
再構成されたビデオユニットのニューラルネットワークループフィルタリング有効化フラグを決定するための第一の決定モジュール１６２と、
前記ニューラルネットワークループフィルタリング有効化フラグに基づいて前記再構成されたビデオユニットのために適応ループフィルタリング有効化フラグを設定するための設定モジュール１６４と、
シグナリングによって、前記再構成されたビデオユニットのニューラルネットワークループフィルタリングに関連するフィルタ情報と、前記再構成されたビデオユニットの適応ループフィルタリングに関連するフィルタ情報とのうちの少なくとも一つの情報を通知するための通知モジュール１６６と、
を備える。

【0345】

【0346】

【0347】

【0348】

一つの選択的な実施例では、前記通知モジュール１６６は、前記再構成されたビデオユニットの符号化ビデオデータを発生させるための符号化ビットストリームのシーケンスパラメータセットＳＰＳと、画像パラメータセットＰＰＳと、画像ヘッダＰＨと、スライスヘッダＳＨと、符号化・復号化ツリーユニットＣＴＵとの少なくとも一つのシンタックス要素においてシグナリングによって前記適応ループフィルタリング有効化フラグを通知するために用いられる。

【0349】

一つの選択的な実施例では、前記装置はさらに、前記ニューラルネットワークループフィルタリング有効化フラグがシーケンスレベル又は画像レベル又はスライスレベルで前記再構成されたビデオユニットに対してニューラルネットワークループフィルタリングを実行することを指示する場合に、前記再構成されたビデオユニットのために輝度適応ループフィルタリング有効化フラグとクロマ適応ループフィルタリング有効化フラグとをそれぞれ設定するために用いられる。

【0350】

一つの選択的な実施例では、前記装置はさらに、前記ニューラルネットワークループフィルタリング有効化フラグがシーケンスレベルで前記再構成されたビデオユニットに対してニューラルネットワークループフィルタリングを実行することを指示し、且つ前記適応ループフィルタリング有効化フラグが画像レベル又はスライスレベルで前記再構成されたビデオユニットに対して輝度適応ループフィルタリングを実行しないことを指示する場合に、前記再構成されたビデオユニットのために輝度適応ループフィルタリング有効化フラグとクロマ適応ループフィルタリング有効化フラグとをそれぞれ設定するために用いられる。

【0351】

一つの選択的な実施例では、前記装置はさらに、前記クロマ適応ループフィルタリング有効化フラグに基づいて前記再構成されたビデオユニットに対してクロマ適応ループフィルタリングを実行するかどうかを決定するために用いられる。

【0352】

一つの選択的な実施例では、前記装置は、前記再構成されたビデオユニットのために輝度成分の適応ループフィルタに関連する第一のフラグを設定する方式で、前記再構成されたビデオユニットのために輝度適応ループフィルタリング有効化フラグとクロマ適応ループフィルタリング有効化フラグとをそれぞれ設定するために用いられる。

【0353】

一つの選択的な実施例では、前記装置は、前記再構成されたビデオユニットのためにクロマ成分の適応ループフィルタに関連する第二のフラグを設定する方式で、前記再構成されたビデオユニットのために輝度適応ループフィルタリング有効化フラグとクロマ適応ループフィルタリング有効化フラグとをそれぞれ設定するために用いられる。

【0354】

【0355】

一つの選択的な実施例では、前記装置は、前記再構成されたビデオユニットの輝度成分に対して輝度適応ループフィルタリングを実行することと、前記再構成されたビデオユニットの第一のクロマ成分に対して第一のクロマ適応ループフィルタリングを実行することと、前記再構成されたビデオユニットの第二のクロマ成分に対して第二のクロマ適応ループフィルタリングを実行することと、前記再構成されたビデオユニットの第一のクロマ成分に対して第一のクロマ成分間適応ループフィルタリングを実行することと、前記再構成されたビデオユニットの第二のクロマ成分に対して第一のクロマ成分間適応ループフィルタリングを実行することとのうちの少なくとも一つの方式で、前記再構成されたビデオユニットに対して適応ループフィルタリングを実行するために用いられる。

【0356】

一つの選択的な実施例では、前記ニューラルネットワークループフィルタリング有効化フラグがシーケンスレベル又は画像レベル又はスライスレベルで前記再構成されたビデオユニットに対してニューラルネットワークループフィルタリングを実行することを指示する場合に、前記装置は、前記再構成されたビデオユニットの輝度成分に対して輝度適応ループフィルタリングを実行する決定と、前記再構成されたビデオユニットの第一のクロマ成分に対して第一のクロマ適応ループフィルタリングを実行する決定と、前記再構成されたビデオユニットの第二のクロマ成分に対して第二のクロマ適応ループフィルタリングを実行する決定と、前記再構成されたビデオユニットの第一のクロマ成分に対して第一のクロマ成分間適応ループフィルタリングを実行する決定と、前記再構成されたビデオユニットの第二のクロマ成分に対して第一のクロマ成分間適応ループフィルタリングを実行する決定のうちの少なくとも一つの決定に基づいて前記再構成されたビデオユニットのために適応ループフィルタリング有効化フラグを設定するために用いられる。

【0357】

【0358】

【0359】

一つの選択的な実施例では、前記通知モジュール１６６は、前記再構成されたビデオユニットの符号化ビデオデータを発生させるための符号化ビットストリームのシーケンスパラメータセットＳＰＳと、画像パラメータセットＰＰＳと、画像ヘッダＰＨと、スライスヘッダＳＨと、符号化・復号化ツリーユニットＣＴＵとの少なくとも一つのシンタックス要素においてシグナリングによって前記ニューラルネットワークループフィルタリング有効化フラグを通知するために用いられる。

【0360】

【0361】

図１７は、本発明の実施例による別のビデオ処理のための装置の構成ブロック図である。図１７に示すように、この装置は、
再構成されたビデオユニットのニューラルネットワークループフィルタリングに関連するフィルタ情報と、再構成されたビデオユニットの適応ループフィルタリングに関連するフィルタ情報とのうちの少なくとも一つの情報を受信するための受信モジュール１７２と、
前記再構成されたビデオユニットのニューラルネットワークループフィルタリング有効化フラグ及び前記再構成されたビデオユニットの適応ループフィルタリング有効化フラグを決定するための第二の決定モジュール１７４と、
前記適応ループフィルタリング有効化フラグに基づいて前記再構成されたビデオユニットに対して適応ループフィルタリングを実行するためのフィルタリングモジュール１７６と、
を備える。

【0362】

【0363】

【0364】

【0365】

一つの選択的な実施例では、前記第二の決定モジュール１７４は、前記再構成されたビデオユニットの符号化ビデオデータを発生させるための符号化ビットストリームのシーケンスパラメータセットＳＰＳと、画像パラメータセットＰＰＳと、画像ヘッダＰＨと、スライスヘッダＳＨと、符号化・復号化ツリーユニットＣＴＵとの少なくとも一つのシンタックス要素において前記適応ループフィルタリング有効化フラグを決定するために用いられる。

【0366】

一つの選択的な実施例では、前記装置はさらに、前記ニューラルネットワークループフィルタリング有効化フラグがシーケンスレベル又は画像レベル又はスライスレベルで前記再構成されたビデオユニットに対してニューラルネットワークループフィルタリングを実行することを指示する場合に、前記再構成されたビデオユニットの輝度適応ループフィルタリング有効化フラグとクロマ適応ループフィルタリング有効化フラグとを決定するために用いられる。

【0367】

一つの選択的な実施例では、前記装置はさらに、前記ニューラルネットワークループフィルタリング有効化フラグがシーケンスレベルで前記再構成されたビデオユニットに対してニューラルネットワークループフィルタリングを実行することを指示する場合に、画像レベル又はスライスレベルで前記再構成されたビデオユニットの輝度適応ループフィルタリング有効化フラグを決定することと、前記輝度適応ループフィルタリング有効化フラグが前記再構成されたビデオユニットに対して輝度適応ループフィルタリングを実行しないことを指示する場合に、前記再構成されたビデオユニットのクロマ適応ループフィルタリング有効化フラグを決定することとに用いられる。

【0368】

【0369】

一つの選択的な実施例では、前記装置は、前記再構成されたビデオユニットの輝度成分の適応ループフィルタに関連する第一のフラグの値を決定する方式で、前記再構成されたビデオユニットの輝度適応ループフィルタリング有効化フラグを決定するために用いられる。

【0370】

一つの選択的な実施例では、前記装置は、前記再構成されたビデオユニットのクロマ成分の適応ループフィルタに関連する第二のフラグの値を決定する方式で、前記再構成されたビデオユニットのクロマ適応ループフィルタリング有効化フラグを決定するために用いられる。

【0371】

【0372】

【0373】

【0374】

【0375】

一つの選択的な実施例では、前記第二の決定モジュール１７４は、前記再構成されたビデオユニットの符号化ビデオデータを発生させるための符号化ビットストリームのシーケンスパラメータセットＳＰＳと、画像パラメータセットＰＰＳと、画像ヘッダＰＨと、スライスヘッダＳＨと、符号化・復号化ツリーユニットＣＴＵとの少なくとも一つのシンタックス要素において前記ニューラルネットワークループフィルタリング有効化フラグを決定するために用いられる。

【0376】

【0377】

説明すべきこととして、上記各モジュールは、ソフトウェア又はハードウェアによって実現されてもよい。後者については、以下の方式で実現されてもよいが、これらに限らず、即ち、上記モジュールは、いずれも同一のプロセッサに位置し、又は、上記各モジュールは、任意の組み合わせの形式でそれぞれ異なるプロセッサに位置する。

【0378】

本発明の実施例は、コンピュータ可読記憶媒体をさらに提供する。このコンピュータ可読記憶媒体にはコンピュータプログラムが記憶されている。このコンピュータプログラムは、実行時に上記いずれか一つの方法の実施例におけるステップを実行するように設定される。

【0379】

一例示的実施例では、上記コンピュータ可読記憶媒体は、ＵＳＢメモリ、リードオンリーメモリ（Ｒｅａｄ－ＯｎｌｙＭｅｍｏｒｙ、ＲＯＭと略称される）、ランダムアクセスメモリ（ＲａｎｄｏｍＡｃｃｅｓｓＭｅｍｏｒｙ、ＲＡＭと略称される）、モバイルハードディスク、磁気ディスク又は光ディスクなどの、コンピュータプログラムを記憶できる様々な媒体を含んでもよいが、それらに限らない。

【0380】

本発明の実施例は、電子装置をさらに提供する。当該電子装置は、メモリとプロセッサとを備える。このメモリにはコンピュータプログラムが記憶されている。このプロセッサは、コンピュータプログラムを実行して上記いずれか一つの方法の実施例におけるステップを実行するように設定される。

【0381】

一例示的実施例では、上記電子装置は、伝送機器と入力出力機器とをさらに備えてもよい。この伝送機器は、上記プロセッサに接続され、この入力出力機器は、上記プロセッサに接続される。

【0382】

本実施例における具体例は、上記実施例及び例示的実施形態において記述された例を参照すればよいため、本実施例は、ここでこれ以上説明しない。

【0383】

明らかに、当業者が理解すべきこととして、上記の本発明の各モジュール又は各ステップは、汎用のコンピューティング装置によって実現されてもよい。それらは、単一のコンピューティング装置上に集中してもよいし、又は複数のコンピューティング装置からなるネットワーク上に分布してもよい。それらは、コンピューティング装置の実行可能なプログラムコードによって実現されてもよい。よって、それらを記憶装置に記憶してコンピューティング装置によって実行されてもよい。また、いくつかの場合に、ここと異なる順序で示された又は記述されたステップを実行してもよいし、又はそれらをそれぞれ各集積回路モジュールとして、又はそれらのうちの複数のモジュール又はステップを単一の集積回路モジュールとして実現してもよい。このように、本出願は、任意の特定のハードウェアとソフトウェアの組み合わせに制限されない。

【0384】

上述は、本発明の好ましい実施例にすぎず、本発明を制限するためのものではない。当業者にとって、本発明は、様々な変更と変化が可能である。本発明の原則内で行われた任意の修正、同等の置き換え、改良などは、いずれも本発明の保護範囲内に含まれるべきである。

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】

【図15】

【図16】

【図17】

【手続補正書】

【提出日】2023-12-19

【手続補正1】

【補正対象書類名】特許請求の範囲

【補正対象項目名】全文

【補正方法】変更

【補正の内容】

【特許請求の範囲】

【請求項1】

【請求項2】

前記適応ループフィルタリングに関連するフィルタ情報は、前記適応ループフィルタリング有効化フラグと、適応ループフィルタリングによって参照される適応パラメータセットとを含む、又は、
前記適応ループフィルタリング有効化フラグは、輝度適応ループフィルタリング有効化フラグと、クロマ適応ループフィルタリング有効化フラグとを含む、又は、
前記ニューラルネットワークループフィルタリングに関連するフィルタ情報は、ニューラルネットワークループフィルタリング有効化フラグと、ニューラルネットワークループフィルタリングによって参照される適応パラメータセットとを含む、
請求項１に記載の方法。

【請求項3】

前記クロマ適応ループフィルタリング有効化フラグは、
第一のクロマ適応ループフィルタリング有効化フラグと、
第二のクロマ適応ループフィルタリング有効化フラグと、
第一のクロマ成分間適応ループフィルタリング有効化フラグと、
第二のクロマ成分間適応ループフィルタリング有効化フラグと、
のうちの少なくとも一つを含む、又は、
前記ニューラルネットワークループフィルタリング有効化フラグは、
輝度ニューラルネットワークループフィルタリング有効化フラグと、
第一のクロマニューラルネットワークループフィルタリング有効化フラグと、
第二のクロマニューラルネットワークループフィルタリング有効化フラグと、
のうちの少なくとも一つを含む、
請求項２に記載の方法。

【請求項4】

前記再構成されたビデオユニットの符号化ビデオデータを生成するための符号化ビットストリームのシーケンスパラメータセットＳＰＳと、画像パラメータセットＰＰＳと、画像ヘッダＰＨと、スライスヘッダＳＨと、符号化・復号化ツリーユニットＣＴＵとの少なくとも一つのシンタックス要素において、シグナリングによって前記適応ループフィルタリング有効化フラグ、又は、前記ニューラルネットワークループフィルタリング有効化フラグを通知する、
請求項１に記載の方法。

【請求項5】

前記ニューラルネットワークループフィルタリング有効化フラグが、シーケンスレベル又は画像レベル又はスライスレベルにおいて前記再構成されたビデオユニットに対してニューラルネットワークループフィルタリングを実行することを指示する場合に、前記再構成されたビデオユニットのために輝度適応ループフィルタリング有効化フラグとクロマ適応ループフィルタリング有効化フラグとをそれぞれ設定すること、又は、
前記ニューラルネットワークループフィルタリング有効化フラグがシーケンスレベルにおいて前記再構成されたビデオユニットに対してニューラルネットワークループフィルタリングを実行することを指示し、且つ前記適応ループフィルタリング有効化フラグが画像レベル又はスライスレベルにおいて前記再構成されたビデオユニットに対して輝度適応ループフィルタリングを実行しないことを指示する場合に、前記再構成されたビデオユニットのために輝度適応ループフィルタリング有効化フラグとクロマ適応ループフィルタリング有効化フラグとをそれぞれ設定すること、又は、
前記クロマ適応ループフィルタリング有効化フラグに基づいて、前記再構成されたビデオユニットに対してクロマ適応ループフィルタリングを実行するかどうかを判定すること、
をさらに含む、請求項１に記載の方法。

【請求項6】

前記再構成されたビデオユニットのために輝度適応ループフィルタリング有効化フラグとクロマ適応ループフィルタリング有効化フラグとをそれぞれ設定することは、
前記再構成されたビデオユニットのために輝度成分の適応ループフィルタに関連する第一のフラグを設定すること、又は、
前記再構成されたビデオユニットのためにクロマ成分の適応ループフィルタに関連する第二のフラグを設定すること、を含む、
請求項５に記載の方法。

【請求項7】

前記適応ループフィルタリング有効化フラグの値が第一の値である場合に、前記適応ループフィルタリング有効化フラグは、前記再構成されたビデオユニットに対して適応ループフィルタリングを実行することを指示するために用いられ、
前記適応ループフィルタリング有効化フラグの値が第二の値である場合に、前記適応ループフィルタリング有効化フラグは、前記再構成されたビデオユニットに対して適応ループフィルタリングを実行しないことを指示するために用いられ、
前記第一の値は、前記第二の値と異なり、
前記再構成されたビデオユニットに対して適応ループフィルタリングを実行することは、
前記再構成されたビデオユニットの輝度成分に対して輝度適応ループフィルタリングを実行することと、
前記再構成されたビデオユニットの第一のクロマ成分に対して第一のクロマ適応ループフィルタリングを実行することと、
前記再構成されたビデオユニットの第二のクロマ成分に対して第二のクロマ適応ループフィルタリングを実行することと、
前記再構成されたビデオユニットの第一のクロマ成分に対して第一のクロマ成分間適応ループフィルタリングを実行することと、
前記再構成されたビデオユニットの第二のクロマ成分に対して第一のクロマ成分間適応ループフィルタリングを実行することと、
のうちの少なくとも一つの操作を含む、
請求項１に記載の方法。

【請求項8】

【請求項9】

【請求項10】

前記適応ループフィルタリングに関連するフィルタ情報は、適応ループフィルタリング有効化フラグと、適応ループフィルタリングによって参照される適応パラメータセットとを含む、又は、
前記適応ループフィルタリング有効化フラグは、輝度適応ループフィルタリング有効化フラグと、クロマ適応ループフィルタリング有効化フラグとを含む、又は、
前記ニューラルネットワークループフィルタリングに関連するフィルタ情報は、ニューラルネットワークループフィルタリング有効化フラグと、ニューラルネットワークループフィルタリングによって参照される適応パラメータセットと、を含む、
請求項９に記載の方法。

【請求項11】

前記クロマ適応ループフィルタリング有効化フラグは、
第一のクロマ適応ループフィルタリング有効化フラグと、
第二のクロマ適応ループフィルタリング有効化フラグと、
第一のクロマ成分間適応ループフィルタリング有効化フラグと、
第二のクロマ成分間適応ループフィルタリング有効化フラグと
のうちの少なくとも一つを含む、又は、
前記ニューラルネットワークループフィルタリング有効化フラグは、
輝度ニューラルネットワークループフィルタリング有効化フラグと、
第一のクロマニューラルネットワークループフィルタリング有効化フラグと、
第二のクロマニューラルネットワークループフィルタリング有効化フラグと、
のうちの少なくとも一つを含む、
請求項１０に記載の方法。

【請求項12】

前記再構成されたビデオユニットの符号化ビデオデータを生成するための符号化ビットストリームのシーケンスパラメータセットＳＰＳと、画像パラメータセットＰＰＳと、画像ヘッダＰＨと、スライスヘッダＳＨと、符号化・復号化ツリーユニットＣＴＵとの少なくとも一つのシンタックス要素において、前記適応ループフィルタリング有効化フラグ、又は、前記ニューラルネットワークループフィルタリング有効化フラグを決定する、
請求項９に記載の方法。

【請求項13】

前記ニューラルネットワークループフィルタリング有効化フラグがシーケンスレベル又は画像レベル又はスライスレベルにおいて前記再構成されたビデオユニットに対してニューラルネットワークループフィルタリングを実行することを指示する場合に、前記再構成されたビデオユニットの輝度適応ループフィルタリング有効化フラグとクロマ適応ループフィルタリング有効化フラグとを決定すること、又は、
前記ニューラルネットワークループフィルタリング有効化フラグがシーケンスレベルにおいて前記再構成されたビデオユニットに対してニューラルネットワークループフィルタリングを実行することを指示する場合に、画像レベル又はスライスレベルにおいて前記再構成されたビデオユニットの輝度適応ループフィルタリング有効化フラグを決定すること、又は、
前記輝度適応ループフィルタリング有効化フラグが前記再構成されたビデオユニットに対して輝度適応ループフィルタリングを実行しないことを指示する場合に、前記再構成されたビデオユニットのクロマ適応ループフィルタリング有効化フラグを決定すること、又は、
前記クロマ適応ループフィルタリング有効化フラグに基づいて、前記再構成されたビデオユニットに対してクロマ適応ループフィルタリングを実行するかどうかを判定すること、
をさらに含む、請求項９に記載の方法。

【請求項14】

請求項１～８のいずれか１項に記載の方法、又は請求項９～１３のいずれか１項に記載の方法を実現するための手段を備える、ビデオ処理のための装置。

【請求項15】

プロセッサにより実行される時、請求項１～８のいずれか１項に記載の方法のステップ、又は請求項９～１３のいずれか１項に記載の方法のステップを実現するコンピュータプログラムが記憶されている、
コンピュータ可読記憶媒体。

【国際調査報告】

知財求人

知財求人お知らせサービス

知財のニュースを調べる
- 知財ニュース
- 知財周辺ニュース
企業の特許を調べる
知財のセミナーを調べる
知財,特許事務所への求職・転職
特許事務所をさがす
弁理士試験を受ける
- 年の弁理士試験情報
- 弁理士試験の合格率など統計
知財の法律をしらべる
期限日をしらべる
- 今日に対して意見書・補正書の期限
- 今日に対して審査請求期限日
知財の判決をしらべる
コンテンツ・リンク
運営会社
プレスの皆様へ
- お問い合わせ
ユーザーの皆様
- お問い合わせ・フィードバック
広告掲載を希望の皆様へ
- 広告掲載について
- 求人広告の掲載について

IP Force 特許公報掲載プロジェクト 2022.1.31 β版