知財求人 - 知財ポータルサイト「IP Force」
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】特許公報(B2)
(11)【特許番号】
(24)【登録日】2025-01-10
(45)【発行日】2025-01-21
(54)【発明の名称】フィルタリング方法、装置及び機器
(51)【国際特許分類】
H04N 19/117 20140101AFI20250114BHJP
H04N 19/167 20140101ALI20250114BHJP
H04N 19/176 20140101ALI20250114BHJP
H04N 19/80 20140101ALI20250114BHJP
【ＦＩ】
H04N19/117
H04N19/167
H04N19/176
H04N19/80
【請求項の数】
13
(21)【出願番号】P 2023513515
(86)(22)【出願日】2021-08-24
(65)【公表番号】
(43)【公表日】2023-09-15
(86)【国際出願番号】 CN2021114311
(87)【国際公開番号】W WO2022042550
(87)【国際公開日】2022-03-03
【審査請求日】2023-02-24
(31)【優先権主張番号】202010859387.1
(32)【優先日】2020-08-24
(33)【優先権主張国・地域又は機関】CN
(73)【特許権者】
【識別番号】508219313
【氏名又は名称】杭州海康威視数字技術股▲フン▼有限公司
(74)【代理人】
【識別番号】100110364
【弁理士】
【氏名又は名称】実広 信哉
(74)【代理人】
【識別番号】100133400
【弁理士】
【氏名又は名称】阿部 達彦
(72)【発明者】
【氏名】潘 冬萍
(72)【発明者】
【氏名】▲孫▼ ▲ユ▼程
(72)【発明者】
【氏名】▲陳▼ 方▲棟▼
(72)【発明者】
【氏名】王 莉
【審査官】久保 光宏
(56)【参考文献】
【文献】中国特許出願公開第１０５３０６９５７（ＣＮ，Ａ）
【文献】特表２０１４－５０６０６１（ＪＰ，Ａ）
【文献】米国特許出願公開第２０２０／００２１８２２（ＵＳ，Ａ１）
【文献】中国特許出願公開第１０５３５７５３８（ＣＮ，Ａ）
【文献】中国特許出願公開第１０４７０２９６３（ＣＮ，Ａ）
【文献】"Information Technology Intelligent Media Coding Part 2: Video"，T/AI 109.2-2020，中国，[online], 中関村視聴産業技術創新連盟，2020年05月13日，第1～8,20,43,44,187～191頁，[令和6年7月10日検索], インターネット, <URL: http://www.aitisa.org.cn/detail?id=374> and <URL: http://www.aitisa.org.cn/ueditor/php/upload/file/20200904/1599200706.pdf>.
【文献】"IEEE Standard for Second-Generation IEEE 1857 Video Coding"，IEEE Std 1857.4-2018，米国，[online], IEEE Computer Society，2019年08月30日，Pages 8,9,14,30,168-172，[令和6年7月9日検索], インターネット, <URL: https://ieeexplore.ieee.org/stamp/stamp.jsp?arnumber=8821610>，ISBN: 978-1-5044-5461-2.
【文献】Benjamin Bross, et al.，"Versatile Video Coding (Draft 8)"，Document: JVET-Q2001-vE, [online]，JVET-Q2001 (version 15)，Joint Video Experts Team (JVET) of ITU-T SG 16 WP 3 and ISO/IEC JTC 1/SC 29/WG 11，2020年03月12日，Pages 39-44,47-50,106,120，[令和5年8月24日検索], インターネット, <URL: https://jvet-experts.org/doc_end_user/current_document.php?id=9675> and <URL: https://jvet-experts.org/doc_end_user/documents/17_Brussels/wg11/JVET-Q2001-v15.zip>.，(See document file "JVET-Q2001-vE.docx" in the zip file "JVET-Q2001-v15.zip".)
【文献】Takeshi Chujoh, et al.，"Block-based Adaptive Loop Filter"，Document VCEG-AI18, [online]，ITU - Telecommunications Standardization Sector STUDY GROUP 16 Question 6 Video Coding Experts Group (VCEG)，2008年07月17日，Pages 1-6，[令和6年1月24日検索], インターネット, <URL: https://www.itu.int/wftp3/av-arch/video-site/0807_Ber/VCEG-AI18.zip>.，(See document file "VCEG-AI18_r1.doc" in the zip file "VCEG-AI18.zip".)
(58)【調査した分野】(Int.Cl.，ＤＢ名)
Ｈ０４Ｎ１９／００－１９／９８
ＣＳＤＢ（日本国特許庁）
学術文献等データベース（日本国特許庁）
ＩＥＥＥＸｐｌｏｒｅ（ＩＥＥＥ）
(57)【特許請求の範囲】
【請求項1】
符号化／復号機器に適用されるフィルタリング方法であって、現在のフレーム画像の適応補正フィルタリングユニットに対してウィーナーフィルタリングを開始すると決定したとき、
前記現在のフレーム画像の現在の最大符号化ユニットＬＣＵに基づいて前記適応補正フィルタリングユニットを導出するステップと、
前記適応補正フィルタリングユニットの参照画素及びウィーナーフィルタのフィルタ係数を取得するステップと、
取得した参照画素及びウィーナーフィルタのフィルタ係数に従って、前記適応補正フィルタリングユニットのサンプル画素に基づいて前記ウィーナーフィルタリングを行うステップと、を含み、
前記ウィーナーフィルタは７＊７の十字形に５＊５の方形が加えられた形状となる中心対称フィルタであり、前記参照画素の値はフィルタリング前の再構成画像の画素値によって導出され、
前記取得した参照画素及びウィーナーフィルタのフィルタ係数に従って、前記適応補正フィルタリングユニットのサンプル画素に基づいて前記ウィーナーフィルタリングを行うステップは、
適応補正フィルタリング過程において用いられるサンプルが適応補正フィルタリングユニット内のサンプルである場合、当該サンプルを用いてフィルタリングを行うことと、
適応補正フィルタリング過程において用いられるサンプルが適応補正フィルタリングユニット内のサンプルでない場合、
当該サンプルが画像境界外にあり、又はパッチ境界外にあり且つクロスパッチ境界フィルタフラグの値が０である場合、当該サンプルが適応補正フィルタリングユニットの左上隅、左下隅、右上隅又は右下隅に位置する１番目のサンプル点であれば、当該サンプルの代わりに、適応補正フィルタリングユニット内の当該サンプルに最も近いサンプルを用いてフィルタリングを行い、
当該サンプルが画像境界外になく、且つ、当該サンプルがパッチ境界外にあり且つクロスパッチ境界フィルタフラグの値が０であることを満たさなく、且つ、当該サンプルが適応補正フィルタリングユニットの上境界外又は下境界外にある場合、当該サンプルが適応補正フィルタリングユニットの左上隅、左下隅、右上隅又は右下隅に位置する１番目のサンプル点であれば、当該サンプルの代わりに、適応補正フィルタリングユニット内の当該サンプルに最も近いサンプルを用いてフィルタリングを行い、
当該サンプルが画像境界外になく、且つ、当該サンプルがパッチ境界外にあり且つクロスパッチ境界フィルタフラグの値が０であることを満たさなく、且つ、当該サンプルが適応補正フィルタリングユニットの上境界外になく、適応補正フィルタリングユニットの下境界外にもない場合、当該サンプルを用いてフィルタリングを行うことと、を含む、
ことを特徴とするフィルタリング方法。
【請求項2】
前記ウィーナーフィルタはフィルタ係数を１５個含む、ことを特徴とする請求項１に記載の方法。
【請求項3】
現在のフレーム画像の適応補正フィルタリングユニットに対してウィーナーフィルタリングを開始すると決定する前、さらに、現在のフレーム画像に対してフィルタリングを行うか否かを決定するステップと、
前記現在のフレーム画像に対してフィルタリングを行うと決定したとき、前記適応補正フィルタリングユニットに対してウィーナーフィルタリングを開始するか否かを決定し、前記適応補正フィルタリングユニットに対してウィーナーフィルタリングを開始すると決定したとき、前記現在のフレーム画像の現在の最大符号化ユニットＬＣＵに基づいて前記適応補正フィルタリングユニットを導出し、前記適応補正フィルタリングユニットの参照画素及びウィーナーフィルタのフィルタ係数を取得し、取得した参照画素及びウィーナーフィルタのフィルタ係数に従って、前記適応補正フィルタリングユニットのサンプル画素に基づいてウィーナーフィルタリングを行うステップを実行するステップと、を含む、
ことを特徴とする請求項１又は２に記載の方法。
【請求項4】
前記現在のフレーム画像の適応補正フィルタリングユニットに対してウィーナーフィルタリングを開始すると決定する前、さらに、前記現在のフレーム画像に対してＬＣＵの規格に基づいて領域分割を行い、１つの領域に属するＬＣＵに同じフィルタパラメータを配置するステップであって、前記フィルタパラメータは前記ウィーナーフィルタがウィーナーフィルタリングを行うフィルタ係数を含むステップをさらに含む、
ことを特徴とする請求項１から３のいずれかに記載の方法。
【請求項5】
前記現在のフレーム画像に対してＬＣＵの規格に基づいて領域分割を行うことは、前記現在のフレーム画像に対して領域分割を行って得られた領域数が１６以上であることを含む、
ことを特徴とする請求項４に記載の方法。
【請求項6】
符号化／復号機器に適用されるフィルタリング装置であって、決定ユニット及びフィルタリングユニットを含み、前記フィルタリングユニットは、前記決定ユニットが現在のフレーム画像の適応補正フィルタリングユニットに対してウィーナーフィルタリングを開始すると決定したとき、前記現在のフレーム画像の現在の最大符号化ユニットＬＣＵに基づいて前記適応補正フィルタリングユニットを導出し、前記適応補正フィルタリングユニットの参照画素及びウィーナーフィルタのフィルタ係数を取得し、取得した参照画素及びウィーナーフィルタのフィルタ係数に従って、前記適応補正フィルタリングユニットのサンプル画素に基づいて前記ウィーナーフィルタリングを行うために用いられ、
前記ウィーナーフィルタは７＊７の十字形に５＊５の方形が加えられた形状となる中心対称フィルタであり、前記参照画素の値はフィルタリング前の再構成画像の画素値によって導出され、
前記フィルタリングユニットは、さらに、
適応補正フィルタリング過程において用いられるサンプルが適応補正フィルタリングユニット内のサンプルである場合、当該サンプルを用いてフィルタリングを行い、
適応補正フィルタリング過程において用いられるサンプルが適応補正フィルタリングユニット内のサンプルでない場合、
当該サンプルが画像境界外にあり、又はパッチ境界外にあり且つクロスパッチ境界フィルタフラグの値が０である場合、当該サンプルが適応補正フィルタリングユニットの左上隅、左下隅、右上隅又は右下隅に位置する１番目のサンプル点であれば、当該サンプルの代わりに、適応補正フィルタリングユニット内の当該サンプルに最も近いサンプルを用いてフィルタリングを行い、
当該サンプルが画像境界外になく、且つ、当該サンプルがパッチ境界外にあり且つクロスパッチ境界フィルタフラグの値が０であることを満たさなく、且つ、当該サンプルが適応補正フィルタリングユニットの上境界外又は下境界外にある場合、当該サンプルが適応補正フィルタリングユニットの左上隅、左下隅、右上隅又は右下隅に位置する１番目のサンプル点であれば、当該サンプルの代わりに、適応補正フィルタリングユニット内の当該サンプルに最も近いサンプルを用いてフィルタリングを行い、
当該サンプルが画像境界外になく、且つ、当該サンプルがパッチ境界外にあり且つクロスパッチ境界フィルタフラグの値が０であることを満たさなく、且つ、当該サンプルが適応補正フィルタリングユニットの上境界外になく、適応補正フィルタリングユニットの下境界外にもない場合、当該サンプルを用いてフィルタリングを行うために用いられる、 ことを特徴とするフィルタリング装置。
【請求項7】
復号機器であって、プロセッサ及び機械可読記憶媒体を備え、前記機械可読記憶媒体に前記プロセッサによって実行可能な機械実行可能な命令が記憶され、前記プロセッサは機械実行可能な命令を実行すると、現在のフレーム画像の適応補正フィルタリングユニットに対してウィーナーフィルタリングを開始すると決定したとき、
前記現在のフレーム画像の現在の最大符号化ユニットＬＣＵに基づいて前記適応補正フィルタリングユニットを導出し、
前記適応補正フィルタリングユニットの参照画素及びウィーナーフィルタのフィルタ係数を取得し、
取得した参照画素及びウィーナーフィルタのフィルタ係数に従って、前記適応補正フィルタリングユニットのサンプル画素に基づいて前記ウィーナーフィルタリングを行い、
前記ウィーナーフィルタは７＊７の十字形に５＊５の方形が加えられた形状となる中心対称フィルタであり、前記参照画素の値はフィルタリング前の再構成画像の画素値によって導出され、
取得した参照画素及びウィーナーフィルタのフィルタ係数に従って、前記適応補正フィルタリングユニットのサンプル画素に基づいて前記ウィーナーフィルタリングを行う際に、前記プロセッサはさらに、
適応補正フィルタリング過程において用いられるサンプルが適応補正フィルタリングユニット内のサンプルである場合、当該サンプルを用いてフィルタリングを行い、
適応補正フィルタリング過程において用いられるサンプルが適応補正フィルタリングユニット内のサンプルでない場合、
当該サンプルが画像境界外にあり、又はパッチ境界外にあり且つクロスパッチ境界フィルタフラグの値が０である場合、当該サンプルが適応補正フィルタリングユニットの左上隅、左下隅、右上隅又は右下隅に位置する１番目のサンプル点であれば、当該サンプルの代わりに、適応補正フィルタリングユニット内の当該サンプルに最も近いサンプルを用いてフィルタリングを行い、
当該サンプルが画像境界外になく、且つ、当該サンプルがパッチ境界外にあり且つクロスパッチ境界フィルタフラグの値が０であることを満たさなく、且つ、当該サンプルが適応補正フィルタリングユニットの上境界外又は下境界外にある場合、当該サンプルが適応補正フィルタリングユニットの左上隅、左下隅、右上隅又は右下隅に位置する１番目のサンプル点であれば、当該サンプルの代わりに、適応補正フィルタリングユニット内の当該サンプルに最も近いサンプルを用いてフィルタリングを行い、
当該サンプルが画像境界外になく、且つ、当該サンプルがパッチ境界外にあり且つクロスパッチ境界フィルタフラグの値が０であることを満たさなく、且つ、当該サンプルが適応補正フィルタリングユニットの上境界外になく、適応補正フィルタリングユニットの下境界外にもない場合、当該サンプルを用いてフィルタリングを行う、
ことを特徴とする復号機器。
【請求項8】
第２のウィーナーフィルタはフィルタ係数を１５個含む、ことを特徴とする請求項７に記載の復号機器。
【請求項9】
現在のフレーム画像の適応補正フィルタリングユニットに対してウィーナーフィルタリングを開始すると決定する前、前記プロセッサはさらに、現在のフレーム画像に対してフィルタリングを行うか否かを決定し、
前記現在のフレーム画像に対してフィルタリングを行うと決定したとき、前記適応補正フィルタリングユニットに対してウィーナーフィルタリングを開始するか否かを決定し、前記適応補正フィルタリングユニットに対してウィーナーフィルタリングを開始すると決定したとき、前記現在のフレーム画像の現在の最大符号化ユニットＬＣＵに基づいて前記適応補正フィルタリングユニットを導出し、前記適応補正フィルタリングユニットの参照画素及びウィーナーフィルタのフィルタ係数を取得し、取得した参照画素及びウィーナーフィルタのフィルタ係数に従って、前記適応補正フィルタリングユニットのサンプル画素に基づいてウィーナーフィルタリングを行うステップを実行する、
ことを特徴とする請求項７又は８に記載の復号機器。
【請求項10】
前記現在のフレーム画像の適応補正フィルタリングユニットに対してウィーナーフィルタリングを開始すると決定する前、前記プロセッサはさらに、前記現在のフレーム画像に対してＬＣＵの規格に基づいて領域分割を行い、１つの領域に属するＬＣＵに同じフィルタパラメータを配置し、
前記フィルタパラメータは前記ウィーナーフィルタがウィーナーフィルタリングを行うフィルタ係数を含む、
ことを特徴とする請求項７から９のいずれかに記載の復号機器。
【請求項11】
前記現在のフレーム画像に対してＬＣＵの規格に基づいて領域分割を行うことは、前記現在のフレーム画像に対して領域分割を行って得られた領域数が１６以上であることを含む、
ことを特徴とする請求項１０に記載の復号機器。
【請求項12】
符号化機器であって、プロセッサ及び機械可読記憶媒体を備え、前記機械可読記憶媒体に前記プロセッサによって実行可能な機械実行可能な命令が記憶され、前記プロセッサは機械実行可能な命令を実行して、請求項１から５のいずれかに記載の方法を実施させる、ことを特徴とする符号化機器。
【請求項13】
プロセッサにより実行されると請求項１から５のいずれかに記載の方法を実施させる機械可読命令が記憶されている、ことを特徴とする非一時的機械可読記憶媒体。
【発明の詳細な説明】
【技術分野】
【0001】
本発明はビデオの符号化・復号技術に関し、特にフィルタリング方法、装置及び機器に関する。
【背景技術】
【0002】
完全なビデオ符号化は一般的に予測、変換、量子化、エントロピー符号化、フィルタリングなどの操作を含む。
【0003】
ブロックに基づいた動き補償後に量子化操作が存在することで、符号化雑音が発生し、それによりビデオ品質の歪みを引き起こす。ループ後処理技術はこのような歪みによる影響を低減するために用いられる。ループ後処理技術はデブロッキングフィルタ（Ｄｅｂｌｏｃｋｉｎｇ Ｆｉｌｔｅｒ、ＤＢＦと略称）、サンプル適応オフセット（Ｓａｍｐｌｅ Ａｄａｐｔｉｖｅ Ｏｆｆｓｅｔ、ＳＡＯと略称）及び適応レベリングフィルタ（Ａｄａｐｔｉｖｅ Ｌｅｖｅｌｉｎｇ Ｆｉｌｔｅｒ、ＡＬＦと略称）の３つの技術を含む。
【0004】
オーディオ・ビデオ符号化規格（Ａｕｄｉｏ Ｖｉｄｅｏ ｃｏｄｉｎｇ Ｓｔａｎｄａｒｄ、ＡＶＳと略称）による符号化フレームワークに使用されるＡＬＦ技術は、ウィーナーフィルタ（ｗｉｅｎｅｒ ｆｉｌｔｅｒ）の原理に基づいて、元の信号と歪み信号とが平均二乗意味で達成できる最適な線形フィルタを計算する。
【0005】
しかしながら、実践によると、ＡＬＦ技術はウィーナーフィルタの原理に基づいて、符号化側で極めて少ないフィルタ係数をトレーニングし、復号側に伝送することにより、再構成画像シーケンスに対してフィルタリングを行って画像品質を向上させる効果を達成することが発見される。画像画素の数が非常に多いが、フィルタ係数が非常に少ないため、ＡＬＦ技術によって作成されるモデルが大多数の画像を処理する際にアンダーフィッティング（ｕｎｄｅｒｆｉｔｔｉｎｇ）の状況が存在する。
【発明の概要】
【課題を解決するための手段】
【0006】
これに鑑みて、本発明はフィルタリング方法、装置及び機器を提供する。
【0007】
具体的には、本発明は以下の技術的解決手段により実現される。
【0008】
本発明の実施例の第１の態様によれば、符号化／復号機器に適用されるフィルタリング方法であって、
現在のフレーム画像の適応補正フィルタリングユニットに対してウィーナーフィルタリングを開始すると決定したとき、
前記現在のフレーム画像の現在の最大符号化ユニットＬＣＵに基づいて前記適応補正フィルタリングユニットを導出するステップと、
前記適応補正フィルタリングユニットの参照画素及びウィーナーフィルタのフィルタ係数を取得するステップと、
取得した参照画素及びウィーナーフィルタのフィルタ係数に従って、前記適応補正フィルタリングユニットのサンプル画素に基づいて前記ウィーナーフィルタリングを行うステップと、を含み、
前記ウィーナーフィルタは７＊７の十字形に５＊５の方形が加えられた形状となる中心対称フィルタであり、前記参照画素の値はフィルタリング前の再構成画像の画素値によって導出される、フィルタリング方法が提供される。
現在のフレーム画像の適応補正フィルタリングユニットに対してウィーナーフィルタリングを開始すると決定したとき、
前記現在のフレーム画像の現在の最大符号化ユニットＬＣＵに基づいて前記適応補正フィルタリングユニットを導出するステップと、
前記適応補正フィルタリングユニットの参照画素及びウィーナーフィルタのフィルタ係数を取得するステップと、
取得した参照画素及びウィーナーフィルタのフィルタ係数に従って、前記適応補正フィルタリングユニットのサンプル画素に基づいて前記ウィーナーフィルタリングを行うステップと、を含み、
前記ウィーナーフィルタは７＊７の十字形に５＊５の方形が加えられた形状となる中心対称フィルタであり、前記参照画素の値はフィルタリング前の再構成画像の画素値によって導出される、フィルタリング方法が提供される。
【0009】
本発明の実施例の第２の態様によれば、符号化／復号機器に適用されるフィルタリング装置であって、決定ユニット及びフィルタリングユニットを含み、そのうち、
前記フィルタリングユニットは、前記決定ユニットが現在のフレーム画像の適応補正フィルタリングユニットに対してウィーナーフィルリングを開始すると決定したとき、前記現在のフレーム画像の現在の最大符号化ユニットＬＣＵに基づいて前記適応補正フィルタリングユニットを導出し、前記適応補正フィルタリングユニットの参照画素及びウィーナーフィルタのフィルタ係数を取得し、取得した参照画素及びウィーナーフィルタのフィルタ係数に従って、前記適応補正フィルタリングユニットのサンプル画素に基づいて前記ウィーナーフィルタリングを行うために用いられ、
ここで、前記ウィーナーフィルタは７＊７の十字形に３＊３の方形を加えた形状となる中心対称フィルタであり、前記参照画素の値はフィルタリング前の再構成画像の画素値によって導出される、フィルタリング装置が提供される。
前記フィルタリングユニットは、前記決定ユニットが現在のフレーム画像の適応補正フィルタリングユニットに対してウィーナーフィルリングを開始すると決定したとき、前記現在のフレーム画像の現在の最大符号化ユニットＬＣＵに基づいて前記適応補正フィルタリングユニットを導出し、前記適応補正フィルタリングユニットの参照画素及びウィーナーフィルタのフィルタ係数を取得し、取得した参照画素及びウィーナーフィルタのフィルタ係数に従って、前記適応補正フィルタリングユニットのサンプル画素に基づいて前記ウィーナーフィルタリングを行うために用いられ、
ここで、前記ウィーナーフィルタは７＊７の十字形に３＊３の方形を加えた形状となる中心対称フィルタであり、前記参照画素の値はフィルタリング前の再構成画像の画素値によって導出される、フィルタリング装置が提供される。
【0010】
本発明の実施例の第３の態様によれば、プロセッサ及び機械可読記憶媒体を含む復号機器であって、前記機械可読記憶媒体に前記プロセッサによって実行可能な機械実行可能な命令が記憶され、前記プロセッサは機械実行可能な命令を実行すると、
現在のフレーム画像の適応補正フィルタリングユニットに対してウィーナーフィルタリングを開始すると決定したとき、
前記現在のフレーム画像の現在の最大符号化ユニットＬＣＵに基づいて前記適応補正フィルタリングユニットを導出し、
前記適応補正フィルタリングユニットの参照画素及びウィーナーフィルタのフィルタ係数を取得し、
取得した参照画素及びウィーナーフィルタのフィルタ係数に従って、前記適応補正フィルタリングユニットのサンプル画素に基づいて前記ウィーナーフィルタリングを行うように促され、
ここで、前記ウィーナーフィルタは７＊７の十字形に５＊５の方形が加えられた形状となる中心対称フィルタであり、前記参照画素の値はフィルタリング前の再構成画像の画素値によって導出される、フィルタリング方法が提供される。
現在のフレーム画像の適応補正フィルタリングユニットに対してウィーナーフィルタリングを開始すると決定したとき、
前記現在のフレーム画像の現在の最大符号化ユニットＬＣＵに基づいて前記適応補正フィルタリングユニットを導出し、
前記適応補正フィルタリングユニットの参照画素及びウィーナーフィルタのフィルタ係数を取得し、
取得した参照画素及びウィーナーフィルタのフィルタ係数に従って、前記適応補正フィルタリングユニットのサンプル画素に基づいて前記ウィーナーフィルタリングを行うように促され、
ここで、前記ウィーナーフィルタは７＊７の十字形に５＊５の方形が加えられた形状となる中心対称フィルタであり、前記参照画素の値はフィルタリング前の再構成画像の画素値によって導出される、フィルタリング方法が提供される。
【0011】
本発明の実施例の第４の態様によれば、プロセッサ及び機械可読記憶媒体を含む符号化機器であって、前記機械可読記憶媒体に前記プロセッサによって実行可能な機械実行可能な命令が記憶され、前記プロセッサは第１の態様にて提供される方法を実施するように機械実行可能な命令を実行するために用いられる、符号化機器が提供される。
【0012】
本発明の実施例の第５の態様によれば、プロセッサ及び機械可読記憶媒体を含む復号機器であって、前記機械可読記憶媒体に前記プロセッサによって実行可能な機械実行可能な命令が記憶され、前記プロセッサは第１の態様にて提供される方法を実施するように機械実行可能な命令を実行するために用いられる、復号機器が提供される。
【0013】
本発明の実施例の第６の態様によれば、プロセッサにより実行されると第１の態様にて提供される方法を実施する機械可読命令が記憶されている非一時的機械可読記憶媒体が提供される。
【0014】
本発明の実施例のフィルタリング方法は、ウィンドウが７＊７の十字形に３＊３の方形が加えられた形状となる中心対称フィルタの第１のウィーナーフィルタを基に形状拡張を行って第２のウィーナーフィルタを得、現在のフレーム画像の現在のＬＣＵに対してウィーナーフィルタリングを開始すると決定したとき、前記現在のＬＣＵの参照画素及び第２のウィーナーフィルタのフィルタ係数を取得し、それらに基づいて、現在の画素に対して一つ一つウィーナーフィルタリングを行うことにより、フィルタリング効果を最適化し、符号化・復号性能を向上させる。
【図面の簡単な説明】
【0015】
【図1】ビデオの符号化・復号のフローチャートである。
【図2】領域分割の概略図である。
【図3】領域統合の概略図である。
【図4】参照画素位置の概略図である。
【図5】第１のウィーナーフィルタの概略図である。
【図6A】本発明の例示的な一実施例に示すフィルタリング方法のフローチャートである。
【図6B】本発明の例示的な一実施例に示すフィルタリング方法のフローチャートである。
【図7】本発明の例示的な一実施例に示す第２のウィーナーフィルタの概略図である。
【図8】本発明の例示的な一実施例に示す参照画素位置の概略図である。
【図9】本発明の例示的な一実施例に示すフィルタリング方法のフローチャートである。
【図10】本発明の例示的な一実施例に示すフィルタリング方法のフローチャートである。
【図11】本発明の例示的な一実施例に示す復号のフローチャートである。
【図12】本発明の例示的な一実施例に示す２回のフィルタの復号のフローチャートである。
【図13】本発明の例示的な一実施例に示すＣＴＵ決定のフローチャートである。
【図14】本発明の例示的な一実施例に示すサンプルフィルタオフセットユニットの概略図である。
【図15】本発明の例示的な一実施例に示すフィルタリング装置の構造の概略図である。
【図16】本発明の例示的な一実施例に示すフィルタリング装置の構造の概略図である。
【図17】本発明の例示的な一実施例に示すフィルタリング装置の構造の概略図である。
【図18】本発明の例示的な一実施例に示す復号機器の構造の概略図である。
【図19】本発明の例示的な一実施例に示す符号化機器の構造の概略図である。
【発明を実施するための形態】
【0016】
ここで、例示的な実施例について詳細に説明し、その例を図面において表示する。以下の説明が図面にかかわる場合、特に示さない限り、異なる図における同一の数字は同一又は類似の要素を表す。以下の例示的な実施例において説明される実施形態は、本発明に一致するすべての実施形態を代表するものではない。これに対して、それらは、添付の特許請求の範囲に詳しく記載されるような、本発明のいくつかの態様に一致する装置及び方法の例に過ぎない。
【0017】
本発明において使用される用語は、特定の実施例を説明するためのものに過ぎず、本発明を限定するものではない。本発明及び添付の特許請求の範囲において使用される単数形の「一種」、「前記」及び「当該」は、文脈において他の意味が明確に指示されない限り、複数形を含むことも意図している。
【0018】
以下、当業者が本発明の実施例にて提供される技術的解決手段をよりよく理解できるように、本発明の実施例にかかわる技術用語、既存のビデオ符号化・復号の主なフロー及びウィーナーフィルタ技術（ＡＬＦ技術）の実現について簡単に説明する。
【0019】
一、技術用語
１、レート歪み最適化（ＲＤＯ、Ｒａｔｅ－Ｄｉｓｔｏｒｔｉｏｎ Ｏｐｔｉｍｉｚｅｄ）：符号化効率を評価する指標であり、ビットレートとピーク信号対雑音比（Ｐｅａｋ Ｓｉｇｎａｌ ｔｏ Ｎｏｉｓｅ Ｒａｔｉｏ、略称ＰＳＮＲ）とを含む。ビットレートが小さければ小さいほど、圧縮率が大きく、ＰＳＮＲが大きければ大きいほど、再構成画像品質が良好である。モード選択時には、判別式は実質的に両者に対する総合評価である。
１、レート歪み最適化（ＲＤＯ、Ｒａｔｅ－Ｄｉｓｔｏｒｔｉｏｎ Ｏｐｔｉｍｉｚｅｄ）：符号化効率を評価する指標であり、ビットレートとピーク信号対雑音比（Ｐｅａｋ Ｓｉｇｎａｌ ｔｏ Ｎｏｉｓｅ Ｒａｔｉｏ、略称ＰＳＮＲ）とを含む。ビットレートが小さければ小さいほど、圧縮率が大きく、ＰＳＮＲが大きければ大きいほど、再構成画像品質が良好である。モード選択時には、判別式は実質的に両者に対する総合評価である。
【0020】
モードに対応するコスト：Ｊ（ｍｏｄｅ）＝Ｄ＋λ＊Ｒ。ここで、Ｄは歪み（Ｄｉｓｔｏｒｔｉｏｎ）を表し、一般的にはＳＳＥ（Ｓｕｍ ｏｆ Ｓｑｕａｒｅｄ Ｅｒｒｏｒｓ、差分の平均二乗和）指標を用いて測定され、ＳＳＥとは、再構成ブロックとソース画像ブロックとの差分の平均二乗和であり、λはラグランジュ乗数であり、Ｒはこのモードで画像ブロックの符号化に必要な実際のビット数であり、モード情報、動き情報、及び残差などを符号化することに必要なビット数の総和を含む。
【0021】
モード選択時に、ＲＤＯ原則により符号化モードを比較決定すれば、通常、符号化の性能の最適さを保証することができる。
【0022】
２、符号化木ユニット（Ｃｏｄｉｎｇ Ｔｒｅｅ Ｕｎｉｔ、ＣＴＵと略称）：従来のビデオ符号化はいずれもマクロブロックに基づいて実現され、４：２：０サンプリングフォーマットのビデオについて、１つのマクロブロックは１つの１６×１６サイズの輝度ブロック及び２つの８×８サイズの色度ブロックを含み、ハイビジョンビデオ／スーパーハイビジョンビデオの自己特性を考慮して、汎用ビデオ符号化（Ｖｅｒｓａｔｉｌｅ Ｖｉｄｅｏ Ｃｏｄｉｎｇ、ＶＶＣと略称）にＣＴＵが導入され、そのサイズが符号化機器によって指定され、マクロブロックサイズより大きいことが許可される。同一箇所に位置する１つの輝度符号化木ブロック（Ｃｏｄｉｎｇ Ｔｒｅｅ Ｂｌｏｃｋ、ＣＴＢと略称）及び２つの色度ＣＴＢに、対応するシンタックス要素をさらに加えると、１つのＣＴＵが形成される。ＶＶＣにおいて１つのＬ×Ｌサイズの輝度ＣＴＢについて、Ｌ∈｛８、１６、３２、６４、１２８｝とする。
【0023】
輝度ＣＴＢの値範囲は｛８×８、１６×１６、３２×３２、６４×６４、１２８×１２８｝である。
【0024】
色度ＣＴＢの値範囲は｛４×４、８×８、１６×１６、３２×３２、６４×６４｝である。
【0025】
高解像度ビデオの符号化過程において、より大きいＣＴＢを用いると、より良好な圧縮効果を得ることができる。
【0026】
３、デブロッキングフィルタリング：画像符号化過程は異なるブロックに基づいて行われるものであり、各ブロック内に相対的に独立した符号化が行われており、各ブロックが異なるパラメータを使用するため、ブロック内の分布特性が互いに独立し、ブロックのエッジの不連続が存在することを引き起こし、それはブロッキング効果と呼ばれる。デブロッキングフィルタリングは主にブロックの境界を平滑化し、ブロッキング効果を除去する。
【0027】
４、サンプル適応オフセット：画素領域から着手し、再構成画像をその特徴に基づいて類別分けし、続いて画素領域においてオフセット処理を行う。主にリンギング効果（Ｒｉｎｇｉｎｇ ｅｆｆｅｃｔ）を低減するためである。
【0028】
５、適応レベリングフィルタリング：ＤＢＦ及びＳＡＯの後に適用され、客観的な条件下で画像品質をさらに向上させることを主な目的とする。ＡＬＦ技術は参照画素の特徴に基づいて、最小二乗を基礎とする多重線形回帰モデルを構築し、画素領域にフィルタオフセットを行う。
【0029】
６、ウィーナーフィルタリング（ｗｉｅｎｅｒ ｆｉｌｔｅｒｉｎｇ）：本質的に、推定誤差（所望の応答とフィルタの実際の出力との差として定義される）の二乗平均を最小化することである。
【0030】
二、ビデオの符号化・復号の主なフロー
図１における（ａ）に示すように、ビデオ符号化を例とし、ビデオ符号化は一般的に予測、変換、量子化、及びエントロピー符号化などのプロセスを含み、さらに、符号化プロセスは図１における（ｂ）のフレームワークに従って実現することができる。
図１における（ａ）に示すように、ビデオ符号化を例とし、ビデオ符号化は一般的に予測、変換、量子化、及びエントロピー符号化などのプロセスを含み、さらに、符号化プロセスは図１における（ｂ）のフレームワークに従って実現することができる。
【0031】
そのうち、予測はイントラ予測とインター予測に分けることができ、イントラ予測とは、周囲の符号化済みブロックを基準として現在の未符号化ブロックに対して予測を行い、空間領域における冗長性を効果的に除去することである。インター予測とは、隣接する符号化済み画像を用いて現在の画像を予測し、時間領域における冗長性を効果的に除去することである。
【0032】
変換とは、画像を空間領域から変換領域に変換し、変換係数を用いて画像を表すことである。ほとんどの画像は多くの平坦領域及び緩やかに変化する領域を含み、適切な変換により画像を空間領域における分散分布から変換領域における相対的な集中分布に変換させ、信号間の周波数領域相関を除去し、量子化過程と連携して、ビットストリームを効果的に圧縮することができる。
【0033】
エントロピー符号化は可逆符号化方式であり、一連の要素符号を伝送又は記憶のためのバイナリストリームに変換することができ、入力された符号は量子化された変換係数、動きベクトル情報、予測モード情報、及び変換量子化関連シンタックスなどを含む可能性がある。エントロピー符号化はビデオ要素符号の冗長性を効果的に除去することができる。
【0034】
以上は符号化を例として紹介し、ビデオ復号のプロセスとビデオ符号化のプロセスとは相対であり、すなわちビデオ復号は一般的にエントロピー復号、予測、逆量子化、逆変換、及びフィルタリングなどのプロセスを含み、各プロセスの実現原理はビデオ符号化と同一又は類似である。
【0035】
三、ウィーナーフィルタリング技術の実現
ＡＬＦ符号化プロセスは、領域分割→参照画素の取得→領域統合且つフィルタ係数の算出→ＣＴＵ決定による各ＬＣＵがフィルタリングを開始するか否かについての判断を含む。
ＡＬＦ符号化プロセスは、領域分割→参照画素の取得→領域統合且つフィルタ係数の算出→ＣＴＵ決定による各ＬＣＵがフィルタリングを開始するか否かについての判断を含む。
【0036】
プロセス全体において計算し取得する必要があるパラメータは以下のとおりである。１）フィルタパラメータの数、２）領域統合フラグ、３）各グループのフィルタ係数、４）ＬＣＵがフィルタリングを開始するか否かについてのフラグ、５）現在の成分（Ｙ，Ｕ，Ｖ）がフィルタリングを開始するか否かについてのフラグ。
【0037】
以下、ＡＬＦ過程における一部の処理及び概念について詳細に説明する。
【0038】
１、領域分割
ＡＬＦフローにおいて、取得した再構成ビデオデータについて、輝度成分上のデータに対して領域分割処理を行い、色度成分上のデータに対して領域分割処理を行わない。
ＡＬＦフローにおいて、取得した再構成ビデオデータについて、輝度成分上のデータに対して領域分割処理を行い、色度成分上のデータに対して領域分割処理を行わない。
【0039】
一例として、領域分割の具体的な実現プロセスは、画像をサイズが基本的に等しく、且つＬＣＵに基づいて位置合わせした１６個の領域に分割することであってもよい。非最右領域の幅は（（（ｐｉｃ＿ｗｉｄｔｈ＿ＩｎＬｃｕｓ＋１）／４）×Ｌｃｕ＿Ｗｉｄｔｈ）であり、ｐｉｃ＿ｗｉｄｔｈ＿ＩｎＬｃｕｓは画像の幅におけるＬＣＵの数を示し、Ｌｃｕ＿Ｗｉｄｔｈは各ＬＣＵの幅を示す。最右領域の幅は画像の幅と一番右でない３つの領域の幅との差（画像の幅から非最右の３つの領域の全幅を減るもの）である。
【0040】
同様に、非底部領域の高さは(((ｐｉｃ＿ｈｅｉｇｈｔ＿ＩｎＬｃｕｓ+1)/4)×Ｌｃｕ＿Ｈｅｉｇｈｔ)であり、ｐｉｃ＿ｈｅｉｇｈｔ＿ＩｎＬｃｕｓは画像の高さにおけるＬＣＵの数を示し、Ｌｃｕ＿Ｈｅｉｇｈｔは各ＬＣＵの高さを示す。最底部領域の高さは画像の高さと非底部の３つの領域の高さとの差（画像の高さから非底部の３つの領域の全高を減るもの）である。
【0041】
全画像の領域分割結果を得た後、各領域にインデックス値を割り当て、概略図は図２に示すとおりであってもよい。
【0042】
２、領域統合
領域統合操作とはインデックス値の順序に基づいて隣接する領域を統合するか否かを判断することである。統合の目的は符号化係数を低減することである。現在の領域を隣接する領域と統合するか否かを示すために、１つの統合フラグを使用する必要がある。
領域統合操作とはインデックス値の順序に基づいて隣接する領域を統合するか否かを判断することである。統合の目的は符号化係数を低減することである。現在の領域を隣接する領域と統合するか否かを示すために、１つの統合フラグを使用する必要がある。
【0043】
例えば、上記領域分割方式に従って領域分割を行うと、合計１６個の領域（１６クラス又は１６グループ（ｇｒｏｕｐｓ）と呼ばれてもよく、インデックス値は順に０～１５である）が含まれ、１回目の統合時、領域０と領域１との統合、領域１と領域２との統合、領域２と領域３との統合、…、領域１３と領域１４との統合、領域１４と領域１５との統合を順次試み、誤差が最小となる統合方式に従って、１回目の領域統合を行い、それにより１６個の領域が統合されると１５個の領域になる。
【0044】
１回目の統合後の１５個の領域（領域２と領域３とを統合して、領域２＋３を得ると仮定する）に対して、領域０と領域１との統合、領域１と領域２＋３との統合、領域２＋３と領域４との統合、…、領域１３と領域１４との統合、領域１４と領域１５との統合を順次試み、誤差が最小となる統合方式に従って、２回目の領域統合を行い、それにより１５個の領域が統合されると１４個の領域になる。
【0045】
２回目の統合後の１４個の領域に対して（領域１４と領域１５を統合して、領域１４＋１５を得ると仮定し、すなわち統合領域は領域２＋３及び領域１４＋１５を含む）に対し、領域０と領域１との統合、領域１と領域２＋３との統合、領域２＋３と領域４との統合、…、領域１２と領域１３との統合、領域１３と領域１４＋１５との統合を順次試み、誤差が最小となる統合方式に従って、３回目の領域統合を行い、それにより１４個の領域が統合されると１３個の領域になる。
【0046】
以下、１つの領域に統合するまで同様とし、その概略図は図３に示すとおりであってもよい。
【0047】
上記領域統合操作が完了した後、領域統合を行わない場合（合計１６個の領域）、領域統合を１回行った場合（合計計１５個の領域）、…、領域統合を１４回行った場合（合計２個の領域）、領域統合を１５回行った場合（合計１個の領域）の順に、全フレームの画像に対してウィーナーフィルタリングを行う誤差を計算し、誤差が最小となる領域統合方式を最終的な領域統合方式として決定することができる。
【0048】
３、参照画素、フィルタ係数
上記方式に従って領域分割を行った後、各領域における各画素の参照画素に基づいて、ウィーナーフィルタの原理に従ってフィルタ係数を算出することができる。
上記方式に従って領域分割を行った後、各領域における各画素の参照画素に基づいて、ウィーナーフィルタの原理に従ってフィルタ係数を算出することができる。
【0049】
例えば、第１のウィーナーフィルタを例とし、参照画素の選択を図４に示し、フィルタは中心対称特性を満たすため、参照画素の選択は以下のとおりである。
Ｅ［ｉ］＝（Ｐｉ＋Ｐ１６－ｉ）
Ｅ［８］＝Ｐ８
Ｐｉはフィルタリング前の再構成画像における画素値に属し、Ｅ［ｉ］は参照画素の値であり、ｉ＝０、１、２、３、４、５、６、７である。
Ｅ［ｉ］＝（Ｐｉ＋Ｐ１６－ｉ）
Ｅ［８］＝Ｐ８
Ｐｉはフィルタリング前の再構成画像における画素値に属し、Ｅ［ｉ］は参照画素の値であり、ｉ＝０、１、２、３、４、５、６、７である。
【0050】
ウィーナーフィルタリングは、参照画素値に対する線形結合を目標とし、線形結合の結果を原画像の画素値に近似させる。
【0051】
例えば、第１のウィーナーフィルタを例とし、フィルタ形状を図５に示し、７＊７の十字形に３×３の方形を加えて構成されるフィルタである。フィルタは中心対称フィルタとして設計され、符号化機器は復号機器に９個のフィルタ係数を伝達するだけでよい。
【0052】
そのうちＣ０～Ｃ７は７ｂｉｔの符号あり数値であり、値の範囲は［－１，１）であり、Ｃ８は７ｂｉｔの符号なし数値であり、値の範囲は［０，２）である。
【0053】
ＡＬＦ技術は最大符号化ユニット（Ｌａｒｇｅｓｔ Ｃｏｄｉｎｇ Ｕｎｉｔ、ＬＣＵと略称）に基づいて処理を行うものである。同一の統合された領域に属するＬＣＵは、同一のグループのフィルタ係数を用いてフィルタリングする。
【0054】
４、適応補正フィルタリングユニット
図１４に示すように、現在の最大符号化ユニットに基づいて以下のステップで適応補正フィルタリングユニットを導出する。
図１４に示すように、現在の最大符号化ユニットに基づいて以下のステップで適応補正フィルタリングユニットを導出する。
【0055】
４．１、現在の最大符号化ユニットＣが位置するサンプル領域の画像境界を超える部分を削除し、サンプル領域Ｄを得る。
【0056】
４．２、サンプル領域Ｄの下境界が位置するサンプルが画像の下境界に属しなければ、輝度成分及び色度成分サンプル領域Ｄの下境界を上向きに４行収縮し、サンプル領域Ｅ１を得、そうでなければ、サンプル領域Ｅ１をサンプル領域Ｄに等しくする。サンプル領域Ｄの最後の行のサンプルはサンプル領域Ｅ１の下境界である。
【0057】
４．３、サンプル領域Ｅ１の上境界が位置するサンプルが画像の上境界に属し、又はパッチ境界に属し且つｃｒｏｓｓ＿ｐａｔｃｈ＿ｌｏｏｐｆｉｌｔｅｒ＿ｅｎａｂｌｅ＿ｆｌａｇの値が「０」であれば、サンプル領域Ｅ２をサンプル領域Ｅ１に等しくし、そうでなければ、輝度成分及び色度成分のサンプル領域Ｅ１の上境界を上向きに４行拡張し、サンプル領域Ｅ２を得る。サンプル領域Ｅ１の１行目のサンプルはサンプル領域Ｅ２の上境界である。
【0058】
４．４サンプル領域Ｅ２を現在の適応補正フィルタリングユニットとする。画像の１行目のサンプルは画像の上境界であり、最後の行のサンプルは画像の下境界である。
【0059】
５、適応補正フィルタリング動作
適応補正フィルタリング過程において用いられるサンプルは適応補正フィルタリングユニット内のサンプルであれば、当該サンプルを直接用いてフィルタリングを行い、そうでなければ、以下の方式に従ってフィルタリングを行う。
適応補正フィルタリング過程において用いられるサンプルは適応補正フィルタリングユニット内のサンプルであれば、当該サンプルを直接用いてフィルタリングを行い、そうでなければ、以下の方式に従ってフィルタリングを行う。
【0060】
５．１、当該サンプルが画像境界外にあり、又はパッチ境界外にあり且つｃｒｏｓｓ＿ｐａｔｃｈ＿ｌｏｏｐｆｉｌｔｅｒ＿ｅｎａｂｌｅ＿ｆｌａｇの値が「０」であれば、当該サンプルの代わりに適応補正フィルタリングユニット内の当該サンプルに最も近いサンプルを用いてフィルタリングを行う。
【0061】
５．２、そうでなく、当該サンプルが適応補正フィルタリングユニットの上境界外又は下境界外にあれば、当該サンプルの代わりに適応補正フィルタリングユニット内の当該サンプルに最も近いサンプルを用いてフィルタリングを行う。
【0062】
５．３、当該サンプルが適応補正フィルタリングユニットの上境界外にもなく、適応補正フィルタリングユニットの下境界外にもなければ、当該サンプルを直接用いてフィルタリングを行う。
【0063】
６、符号化木ユニット（Ｃｏｄｉｎｇ Ｔｒｅｅ Ｕｎｉｔ、ＣＴＵと略称）決定
領域統合をして、各領域のフィルタ係数を算出した後、ＣＴＵ決定を行う必要があり、ＣＴＵ決定もＬＣＵを基本単位とし、現在の画像における各ＬＣＵがＡＬＦを使用するか否か（すなわちウィーナーフィルタリングを開始するか否か）を判断する。
領域統合をして、各領域のフィルタ係数を算出した後、ＣＴＵ決定を行う必要があり、ＣＴＵ決定もＬＣＵを基本単位とし、現在の画像における各ＬＣＵがＡＬＦを使用するか否か（すなわちウィーナーフィルタリングを開始するか否か）を判断する。
【0064】
現在のＬＣＵのオンオフ前後のレート歪みコストを計算して、現在のＬＣＵがＡＬＦを使用するか否かを決定する。現在のＬＣＵがＡＬＦを使用するようにマーキングされれば、ＬＣＵ内の各画素をウィーナーフィルタリングする。
【0065】
関連技術において、ウィーナーフィルタリング原理に基づいて、符号化側で極めて少ないフィルタのフィルタ係数をトレーニングし、復号側に伝送することにより、再構成画像シーケンスに対してフィルタリングを行って画像品質を向上させる効果を達成する。画像画素の数が多いが、フィルタ係数が少ないため、ＡＬＦ技術によって作成されるモデルが大多数の画像を処理する際にアンダーフィッティングの状況が存在する。そのため、ＡＬＦ技術の利用には依然として画像品質を向上させる余地がある。
【0066】
一例として、符号化機器について、イントラ／インター予測を行った後、予測結果に対して変換、量子化、逆量子化及び逆変換処理を順に行い、再構成画像シーケンスを得てもよい。
【0067】
復号機器について、ビットストリームに対してエントロピー復号、逆量子化及び逆変換を順に行い、再構成画像シーケンスを得てもよい。
【0068】
ウィーナーフィルタリング効果を最適化し、符号化・復号性能を向上させるために、本発明の実施例は以下のいくつかの点から従来のウィーナーフィルタリング技術を改善することを考慮する。
【0069】
１、より細かい領域分割、又はフィルタ係数の増加により、ＡＬＦ技術によって作成されたモデルが画像を処理する時のアンダーフィッティング度合いを緩和することができるが、それとともにより多くの情報を復号側に伝送する必要があり、ビットレートを増大させるため、フィルタ係数を適切に増加する方式でフィルタリングを行う。
【0070】
２、ＡＬＦ技術は画像の再構成品質を向上させることができ、１回目のＡＬＦにはアンダーフィッティングの状況が存在するため、２次ウィーナーフィルタリングの方法を導入することにより、１回目のフィルタリング後の画像に対して、１グループのフィルタ係数を新たにトレーニングし、再びフィルタリングを行い、画像品質をさらに向上させる。
【0071】
３、フィルタの形状が一定であるため、いくつかの位置における参照画素とフィルタリング対象の画素との間の関係が小さい可能性があり、又は参照画素の共線性が存在し、それによりトレーニングされた係数が最適な係数ではない可能性がある。したがって、ステップワイズ回帰の思想を用い、３回のＣＴＵ決定の後、１回のＣＴＵ決定を追加し、係数が０である位置における参照画素はフィルタ係数の計算に関与しない。
【0072】
以下、本発明の実施例の上記目的、特徴及び利点をより明らかにするために、図面を参照しながら本発明の実施例における技術的解決手段について一層詳細に説明する。
【0073】
実施例１、フィルタ係数の増加
フィルタの形状を変更し、フィルタ係数を適切に増加する方式を用いてフィルタリングを行い、ＡＬＦ技術によって作成されたモデルが画像を処理する時のアンダーフィッティング度合いを緩和する。
フィルタの形状を変更し、フィルタ係数を適切に増加する方式を用いてフィルタリングを行い、ＡＬＦ技術によって作成されたモデルが画像を処理する時のアンダーフィッティング度合いを緩和する。
【0074】
なお、実施例１に記載のフィルタリング方法は符号化機器にも、復号機器にも適用できる。
【0075】
【0076】
ステップＳ６００において、現在のフレーム画像の適応補正フィルタリングユニットに対してウィーナーフィルタリングを開始すると決定したとき、前記現在のフレーム画像の現在の最大符号化ユニットＬＣＵに基づいて前記適応補正フィルタリングユニットを導出し、前記適応補正フィルタリングユニットの参照画素及びウィーナーフィルタのフィルタ係数を取得し、取得した参照画素及びウィーナーフィルタのフィルタ係数に従って、前記適応補正フィルタリングユニットのサンプル画素に基づいて前記ウィーナーフィルタリングを行い、前記ウィーナーフィルタは７＊７の十字形に５＊５の方形が加えられた形状となる中心対称フィルタであり、前記参照画素の値はウィーナーフィルタリング前の再構成画像の画素値によって導出される。
【0077】
【0078】
ステップＳ６０１において、現在のフレーム画像の現在のＬＣＵに対してウィーナーフィルタリングを開始すると決定したとき、現在のＬＣＵの参照画素及びウィーナーフィルタのフィルタ係数を取得し、それらに基づいて、現在のＬＣＵの画素に対して一つ一つウィーナーフィルタリングを行う。一例として、当該ウィーナーフィルタは第２のウィーナーフィルタであり、第２のウィーナーフィルタは第１のウィーナーフィルタを基に形状拡張を行って得られたものであり、第１のウィーナーフィルタは７＊７の十字形に３＊３の方形が加えられた形状となる中心対称フィルタであり、参照画素の値はフィルタリング前の再構成画像の画素値に基づいて決定される。
【0079】
なお、本発明の実施例において、特に断らない限り、言及された現在のフレーム画像は再構成画像を指す。
【0080】
また、現在のフレーム画像に対してウィーナーフィルタリングを行う前に、ニーズに応じて現在のフレーム画像に対してＤＢＦ処理又は／及びＳＡＯ処理を行うか否かを選択することができ、その具体的な実現について、ここでは重複する説明は省略する。
【0081】
現在のフレームに対してＤＢＦ処理又は／及びＳＡＯ処理を行った場合、本発明の実施例において言及された現在のフレーム画像はＤＢＦ処理又は／及びＳＡＯ処理が行われた再構成画像であってもよく、現在のフレームに対してＤＢＦ処理又は／及びＳＡＯ処理を行わない場合、本発明の実施例に言及された現在のフレーム画像は上記逆量子化及び逆変換処理後に得られた再構成画像であってもよい。
【0082】
なお、以下説明されるＬＣＵに対してウィーナーフィルタリングを行うことは、特に説明しない限り、ＬＣＵの各画素の輝度成分（Ｙ成分）及び色度成分（Ｕ成分とＶ成分）に対してウィーナーフィルタリングを行うことを含んでもよいが、前者（Ｙ成分）に対してフィルタリングを行う場合には、領域分割及び領域統合などの処理を行う必要があり、後者（Ｕ成分とＶ成分）に対してフィルタリングを行う場合には、領域分割及び領域統合の処理を行う必要がない。
【0083】
本発明の実施例において、フィルタリング効果を最適化し、符号化・復号性能を向上させるために、ウィーナーフィルタのフィルタ係数を適切に増加し、新しいウィーナーフィルタを得ることにより、ＡＬＦ技術が画像を処理する時に存在するアンダーフィッティング状況を緩和することができる。
【0084】
一例として、７＊７の十字形に３＊３の正方形が加えられた形状となる中心対称フィルタ（本明細書では第１のウィーナーフィルタと呼ばれ、概略図は図５に示すとおりであってもよい）を基に形状拡張を行う方式により、新しいウィーナーフィルタ（本明細書では第２のウィーナーフィルタと呼ばれる）を得るとしてもよい。
【0085】
現在のフレーム画像の現在のＬＣＵに対してウィーナーフィルタリングを開始すると決定したとき、符号化／復号機器は現在のＬＣＵの参照画素及び第２のウィーナーフィルタのフィルタ係数を取得し、取得した参照画素及びフィルタ係数に基づいて現在のＬＣＵの画素に対して一つ一つウィーナーフィルタリングを行うことができる。
【0086】
一例において、第２のウィーナーフィルタは７＊７の十字形に５＊５の方形が加えられた形状となる中心対称フィルタである。
【0087】
一例として、図７に示すように、第２のウィーナーフィルタは１５個のフィルタ係数を含む。
【0088】
一例として、図７に示す第２のウィーナーフィルタに対応して、参照画素の位置は図８に示すとおりであってもよく、参照画素値を取得するための再構成画像の参照画素位置は第２のウィーナーフィルタリングのフィルタ係数の形状にマッチングする。
【0089】
一例では、ステップＳ６０１において、現在のフレーム画像の現在のＬＣＵに対してウィーナーフィルタリングを行うと決定する前に、さらに、現在のフレーム画像に対してフィルタリングを行うか否かを決定し、現在のフレーム画像に対してフィルタリングを行うと決定したとき、現在のＬＣＵに対してウィーナーフィルタリングを開始するか否かを決定し、現在のＬＣＵに対してウィーナーフィルタリングを開始すると決定したとき、現在のＬＣＵの参照画素及びウィーナーフィルタのフィルタ係数を取得し、それらに基づいて現在のＬＣＵの画素に対して一つ一つウィーナーフィルタを行うステップを実行することを含んでもいい。
【0090】
一例として、現在のＬＣＵに対してウィーナーフィルタリングを行う前に、現在のフレーム画像に対してフィルタリングを行うか否かを決定してもよい。
【0091】
一例として、符号化機器について、あるフレームの画像に対してフィルタリングを行うか否かを決定することは、フィルタリング前後の当該フレームの画像のレート歪みコストに基づいて、当該フレームの画像に対してフィルタリングを行うか否かを決定することであってもよく、その具体的な実現について、ここでは重複する説明は省略する。
【0092】
現在のフレーム画像に対してフィルタリングを行うと決定したとき、現在のフレーム画像における各ＬＣＵに対してウィーナーフィルタリングを開始するか否かをそれぞれ決定してもよい。
【0093】
一例として、符号化機器はＣＴＵ決定に基づいて、あるＬＣＵに対してウィーナーフィルタリングを開始するか否かを決定してもよい。
【0094】
復号機器について、受信した現在のフレーム画像の符号化ビットストリームに付加されたフレームレベルのフィルタフラグビットの値に基づいて、現在のフレーム画像に対してフィルタリングを行うか否かを決定してもよく、現在のフレーム画像に対してフィルタリングを行うと決定したとき、ビットストリームにおけるＬＣＵレベルのフィルタフラグビットの値に基づいて、対応するＬＣＵに対してフィルタリングを行うか否かを決定してもよい。
【0095】
一例として、現在のＬＣＵに対してウィーナーフィルタリングを開始すると決定したとき、上記実施例で説明した方式に従って、現在のＬＣＵに対してウィーナーフィルタリングを行ってもよい。
【0096】
実施例２、フィルタリング過程を１回追加する
２回フィルタリングの方法を導入することにより、１回目のフィルタリング後の画像に対して、１グループのフィルタ係数を新たにトレーニングし、再びフィルタリングを行い、画像品質をさらに向上させる。
２回フィルタリングの方法を導入することにより、１回目のフィルタリング後の画像に対して、１グループのフィルタ係数を新たにトレーニングし、再びフィルタリングを行い、画像品質をさらに向上させる。
【0097】
なお、実施例２に記載のフィルタリング方法は符号化機器にも、復号機器にも適用できる。
【0098】
【0099】
ステップＳ９００において、現在の画像の現在のＬＣＵに対してウィーナーフィルタリングを開始すると決定したとき、現在のＬＣＵに対して１回目のウィーナーフィルタリング及び２回目のウィーナーフィルタリングを行う。
【0100】
本発明の実施例において、ウィーナーフィルタリングが開始されるＬＣＵに対して、２回のウィーナーフィルタリング（本明細書では１回目のウィーナーフィルタリング及び２回目のウィーナーフィルタリングと呼ばれる）を行うことができる。
【0101】
現在のフレーム画像の現在ＬＣＵに対してウィーナーフィルタリングを開始すると決定したとき、現在のＬＣＵに対して１回目のウィーナーフィルタリング及び２回目のウィーナーフィルタリングを行うことができる。
【0102】
一例として、現在のＬＣＵに対して１回目のウィーナーフィルタリング及び２回目のウィーナーフィルタリングを行うことは、
【0103】
現在のＬＣＵに対して１回目のウィーナーフィルタリングを行うウィーナーフィルタのフィルタ係数及び参照画素、並びに現在のＬＣＵに対して２回目のウィーナーフィルタリングを行うウィーナーフィルタのフィルタ係数及び参照画素を取得し、それらに基づいて現在のＬＣＵの画素に対して一つ一つ１回目のウィーナーフィルタリング及び２回目のウィーナーフィルタリングを行う。
【0104】
一例として、符号化機器について、ウィーナーフィルタのフィルタ係数は計算によって決定されてもよく、復号機器について、ウィーナーフィルタのフィルタ係数はビットストリームから取得されてもよい。
【0105】
一例では、ステップＳ９００において、現在のＬＣＵに対して１回目のウィーナーフィルタリング及び２回目のウィーナーフィルタリングを行う前に、さらに、
現在のフレーム画像に対してフィルタリングを行うか否かを決定するステップと、
現在のフレーム画像に対してフィルタリングを行うと決定したとき、現在のＬＣＵに対してウィーナーフィルタリングを開始するか否かを決定し、現在のＬＣＵに対してウィーナーフィルタリングを開始すると決定したとき、現在のＬＣＵに対して１回目のウィーナーフィルタリング及び２回目のウィーナーフィルタリングを行うステップを実行すると決定するステップと、を含んでもよい。
現在のフレーム画像に対してフィルタリングを行うか否かを決定するステップと、
現在のフレーム画像に対してフィルタリングを行うと決定したとき、現在のＬＣＵに対してウィーナーフィルタリングを開始するか否かを決定し、現在のＬＣＵに対してウィーナーフィルタリングを開始すると決定したとき、現在のＬＣＵに対して１回目のウィーナーフィルタリング及び２回目のウィーナーフィルタリングを行うステップを実行すると決定するステップと、を含んでもよい。
【0106】
一例として、１つのフレームレベルのフィルタフラグによって画像がフィルタリングを必要とするか否かを識別し、１つのＬＣＵレベルのフィルタフラグによってＬＣＵがウィーナーフィルタを開始するか否かを識別するとしてもよい。
【0107】
符号化機器は当該フレームレベルのフィルタフラグによって復号機器に現在の画像に対してフィルタリングを行うか否かを通知してもよく、復号機器はビットストリームにおける当該フレームレベルのフィルタフラグの値に基づいて現在のフレーム画像に対してフィルタリングを行うか否かを決定してもよい。
【0108】
同様に、符号化機器は当該ＬＣＵレベルのフィルタフラグによって現在のＬＣＵがウィーナーフィルタを開始するか否かを通知してもよく、復号機器はビットストリームにおける当該ＬＣＵレベルのフィルタフラグの値に基づいて現在のＬＣＵがウィーナーフィルタを開始するか否かを決定してもよい。
【0109】
一例として、符号化機器があるフレームの画像に対してフィルタリングを行うか否かを決定することは、従来のフィルタリング方法による実現を参照してもよく、例えば、フィルタリング前後の当該フレームの画像のレート歪みコストに基づいて、当該フレームの画像に対してフィルタリングを行うか否かを決定してもよく、その具体的な実現について、ここでは重複する説明は省略する。
【0110】
現在のフレーム画像に対してフィルタリングを行うと決定したとき、現在のフレーム画像における各ＬＣＵに対してウィーナーフィルタリングを開始するか否かをそれぞれ決定してもよい。
【0111】
一例として、符号化機器はＣＴＵ決定に基づいて、あるＬＣＵに対してウィーナーフィルタリングを開始するか否かを決定してもよい。
【0112】
符号化／復号機器が現在のフレーム画像に対してフィルタリングを行い、且つ現在のＬＣＵに対してウィーナーフィルタリングを開始すると決定したときは、現在のＬＣＵに対して１回目のウィーナーフィルタリングを行うウィーナーフィルタのフィルタ係数及び参照画素、並びに現在のＬＣＵに対して２回目のウィーナーフィルタリングを行うウィーナーフィルタ係数及び参照画素を取得し、取得したフィルタ係数及び参照画素に基づいて、現在のＬＣＵの画素に対して一つ一つ１回目のウィーナーフィルタリング及び２回目のウィーナーフィルタリングを行うとしてもよい。
【0113】
なお、フィルタリング効率を向上させるために、現在のＬＣＵに対してウィーナーフィルタリングを行うとき、現在の画素に対して１回目のウィーナーフィルタリング及び２回目のウィーナーフィルタリングを行った後、次の画素に対して１回目のウィーナーフィルタリング及び２回目のウィーナーフィルタリングを行ってもよく、それにより画素を１回読み取る場合に、各画素に対して２回のウィーナーフィルタリングを行い、画素の読み取り回数を減少させる。
【0114】
別の例では、ステップＳ９００において、現在のＬＣＵに対して１回目のウィーナーフィルタリング及び２回目のウィーナーフィルタリングを行う前に、さらに、
現在のフレーム画像に対して１回目のフィルタリングを行うか否か、及び現在のフレーム画像に対して２回目のフィルタリングを行うか否かを決定するステップと、
現在のフレーム画像に対して１回目のフィルタリングを行い、且つ現在のフレーム画像に対して２回目のフィルタリングを行うと決定したとき、現在のＬＣＵに対して１回目のウィーナーフィルタリングを開始するか否か、及び現在のＬＣＵに対して２回目のウィーナーフィルタリングを開始するか否かを決定するステップと、
現在のＬＣＵに対して１回目のウィーナーフィルタリングを開始し、且つ現在ＬＣＵに対して２回目のウィーナーフィルタリングを開始すると決定したとき、現在のＬＣＵに対して１回目のウィーナーフィルタリング及び２回目のウィーナーフィルタリングを行うステップを実行すると決定するステップと、を含んでもよい。
現在のフレーム画像に対して１回目のフィルタリングを行うか否か、及び現在のフレーム画像に対して２回目のフィルタリングを行うか否かを決定するステップと、
現在のフレーム画像に対して１回目のフィルタリングを行い、且つ現在のフレーム画像に対して２回目のフィルタリングを行うと決定したとき、現在のＬＣＵに対して１回目のウィーナーフィルタリングを開始するか否か、及び現在のＬＣＵに対して２回目のウィーナーフィルタリングを開始するか否かを決定するステップと、
現在のＬＣＵに対して１回目のウィーナーフィルタリングを開始し、且つ現在ＬＣＵに対して２回目のウィーナーフィルタリングを開始すると決定したとき、現在のＬＣＵに対して１回目のウィーナーフィルタリング及び２回目のウィーナーフィルタリングを行うステップを実行すると決定するステップと、を含んでもよい。
【0115】
一例として、現在のフレーム画像に対して１回目のフィルタリングを行うか否か、及び現在のフレーム画像に対して２回目のフィルタリングを行うか否かをそれぞれ決定する必要があり、現在のフレームに対して１回目のフィルタリング又は／及び２回目のフィルタリングを行うと決定したとき、現在のＬＣＵに対して１回目のウィーナーフィルタリングを開始するか否か、及び現在のＬＣＵに対して２回目のウィーナーフィルタリングを開始するか否かをそれぞれ決定する必要がある。
【0116】
一例として、２つのフレームレベルのフィルタフラグによって画像が１回目のフィルタリング及び２回目のフィルタリングを必要とするか否かをそれぞれ識別し、そして２つのＬＣＵレベルのフィルタフラグによってＬＣＵが１回目のウィーナーフィルタリング及び２回目のウィーナーフィルタリングを開始するか否かをそれぞれ識別するとしてもよい。
【0117】
符号化機器は当該フレームレベルのフィルタフラグによって現在の画像に対して１回目のフィルタリング及び２回目のフィルタリングを行うか否かを復号機器に通知してもよく、復号機器はビットストリームにおける当該フレームレベルのフィルタフラグの値に基づいて現在のフレーム画像に対して１回目のフィルタリング及び２回目のフィルタリングを行うか否かを決定してもよい。
【0118】
同様に、符号化機器は当該ＬＣＵレベルのフィルタフラグによって現在のＬＣＵが１回目のフィルタリング及び２回目のフィルタリングを開始するか否かを通知してもよく、復号機器はビットストリームにおける当該ＬＣＵレベルのフィルタフラグの値に基づいて現在のＬＣＵが１回目のフィルタリング及び２回目のフィルタリングを開始するか否かを決定してもよい。
【0119】
一例として、符号化機器はフィルタリング前後の当該フレーム画像のレート歪みコストに基づいて、当該フレームの画像に対して１回目のフィルタリング及び２回目のフィルタリングを行うか否かを決定するとしてもよく、その具体的な実現について、ここでは重複する説明は省略する。
【0120】
現在のフレーム画像に対して１回目のフィルタリング及び２回目のフィルタリングを行うと決定したとき、現在のＬＣＵに対して１回目のウィーナーフィルタリングを開始するか否か、及び現在のＬＣＵに対して２回目のウィーナーフィルタリングを開始するか否かを決定してもよい。
【0121】
一例として、符号化機器はＣＴＵ決定に基づいて、あるＬＣＵに対して１回目のフィルタリング及び２回目のフィルタリングを開始するか否かを決定してもよい。
【0122】
なお、本発明の実施例において、画像について、さらに現在のフレーム画像に対して１回目のフィルタリングを行い、２回目のフィルタリングを行わなく、又は、現在のフレーム画像に対して２回目のフィルタリングを行い、１回目のフィルタリングを行わなく、又は、現在のフレーム画像に対して１回目のフィルタリングも、２回目のフィルタリングも行わないとしてもよい。
【0123】
ＬＣＵについて、現在のＬＣＵに対して１回目のウィーナーフィルタリングを開始し、２回目のウィーナーフィルタリングを開始しなく、又は、現在のＬＣＵに対して２回目のウィーナーフィルタリングを開始し、１回目のウィーナーフィルタリングを開始しなく、又は、現在のＬＣＵに対して１回目のウィーナーフィルタリングも、２回目のウィーナーフィルタリングも開始しないとしてもよい。
【0124】
符号化機器はそれぞれ上記２つのフレームレベルのフィルタフラグ及び２つのＬＣＵレベルのフィルタフラグにより、現在のフレーム画像に対して１回目のフィルタリング又は／及び２回目のフィルタリングを行うか否か、及び、現在のフレーム画像に対して１回目のフィルタリング又は／及び２回目のフィルタリングを行う場合、現在のＬＣＵに対して１回目のウィーナーフィルタリング又は／及び２回目のウィーナーフィルタリングを開始するか否かを復号機器に指示する。
【0125】
一例において、現在のＬＣＵに対して１回目のウィーナーフィルタリングを行うウィーナーフィルタ及び２回目のウィーナーフィルタリングを行うウィーナーフィルタはいずれも第１のウィーナーフィルタであり、又は、
現在のＬＣＵに対して１回目のウィーナーフィルタリングを行うウィーナーフィルタ及び２回目のウィーナーフィルタリングを行うウィーナーフィルタはいずれも第２のウィーナーフィルタであり、又は、
現在のＬＣＵに対して１回目のウィーナーフィルタリングを行うウィーナーフィルタは第１のウィーナーフィルタであり、現在のＬＣＵに対して２回目のウィーナーフィルタリングを行うウィーナーフィルタは第２のウィーナーフィルタであり、又は、
現在のＬＣＵに対して１回目のウィーナーフィルタリングを行うウィーナーフィルタは第２のウィーナーフィルタであり、現在のＬＣＵに対して２回目のウィーナーフィルタリングを行うウィーナーフィルタは第１のウィーナーフィルタである。
現在のＬＣＵに対して１回目のウィーナーフィルタリングを行うウィーナーフィルタ及び２回目のウィーナーフィルタリングを行うウィーナーフィルタはいずれも第２のウィーナーフィルタであり、又は、
現在のＬＣＵに対して１回目のウィーナーフィルタリングを行うウィーナーフィルタは第１のウィーナーフィルタであり、現在のＬＣＵに対して２回目のウィーナーフィルタリングを行うウィーナーフィルタは第２のウィーナーフィルタであり、又は、
現在のＬＣＵに対して１回目のウィーナーフィルタリングを行うウィーナーフィルタは第２のウィーナーフィルタであり、現在のＬＣＵに対して２回目のウィーナーフィルタリングを行うウィーナーフィルタは第１のウィーナーフィルタである。
【0126】
一例として、現在のＬＣＵに対して１回目のウィーナーフィルタリング又は２回目のウィーナーフィルタリングを行う場合は、いずれも第１のウィーナーフィルタ又は第２のウィーナーフィルタから使用されるウィーナーフィルタを選択してもよく、具体的に使用されるウィーナーフィルタは配置された命令によって指示することができる。
【0127】
一例として、第２のウィーナーフィルタは第１のウィーナーフィルタを基に形状拡張を行って得られたものであり、第１のウィーナーフィルタは７＊７の十字形に３＊３の方形が加えられた中心対称フィルタであり、その概略図は図５に示すとおりであってもよい。
【0128】
一例として、第２のウィーナーフィルタは７＊７の十字形に５＊５の方形が加えられた中心対称フィルタであり、その概略図は図７に示すとおりであってもよい。
【0129】
一例において、現在のＬＣＵに対して１回目のウィーナーフィルタリングを行う参照画素の値は第１の方式に従って第１の再構成画像から取得され、第１の再構成画像は１回目のウィーナーフィルタリング前の再構成画像である。
【0130】
現在のＬＣＵに対して２回目のウィーナーフィルタリングを行う参照画素の画素値は第２の方式に従って第１の再構成画像から取得される。
【0131】
一例として、現在のＬＣＵに対して１回目のウィーナーフィルタリングを行う参照画素の値及び現在のＬＣＵに対して２回目のウィーナーフィルタリングを行う参照画素の値は、いずれも１回目のウィーナーフィルタリング前の再構成画像（本明細書では第１の再構成画像と呼ばれる）から取得されてもよい。
【0132】
一例として、現在のＬＣＵに対して１回目のウィーナーフィルタリングを行う参照画素の値は第１の方式に従って第１の再構成画像から取得されてもよい。
【0133】
現在のＬＣＵに対して１回目のウィーナーフィルタリングを行う参照画素の値は第２の方式に従って第１の再構成画像から取得されてもよい。
【0134】
一例として、第１の方式は図４に示す参照画素位置及び図５に示す第１のウィーナーフィルタの形状に基づいて、第１の再構成画像の参照画素位置から参照画素の値を取得することであってもよい。
Ｅ［ｉ］＝Ｐｉ＋Ｐ１６－ｉ
Ｅ［８］＝Ｐ８
ここで、Ｐiはフィルタリング前の再構成画像における画素値に属し、Ｅ［ｉ］は参照画素の値であり、ｉ＝０、１、２、３、４、５、６、７である。
Ｅ［ｉ］＝Ｐｉ＋Ｐ１６－ｉ
Ｅ［８］＝Ｐ８
ここで、Ｐiはフィルタリング前の再構成画像における画素値に属し、Ｅ［ｉ］は参照画素の値であり、ｉ＝０、１、２、３、４、５、６、７である。
【0135】
一例として、第２の方式は以下のとおりであってもよい。
現在のＬＣＵにおける各画素に対応する参照画素の値は第１の再構成画像における各参照画素位置の画素値と中心位置の画素値との差の絶対値に基づいて決定される。
現在のＬＣＵにおける各画素に対応する参照画素の値は第１の再構成画像における各参照画素位置の画素値と中心位置の画素値との差の絶対値に基づいて決定される。
【0136】
例えば、図４に示す参照画素位置を例とし、第２の方式に従って第１の再構成画像から参照画素の値を取得することは以下のポリシーによって実現されてもよい。
Ｅ［ｉ］＝ａｂｓ（Ｐｉ－Ｐ８）＋ａｂｓ（Ｐ１６－ｉ－Ｐ８）
Ｅ［８］＝１
Ｐｉは第１の再構成画像における画素値であり、Ｅ［ｉ］は参照画素の値であり、ｉ＝０、１、２、３、４、５、６、７である。
Ｅ［ｉ］＝ａｂｓ（Ｐｉ－Ｐ８）＋ａｂｓ（Ｐ１６－ｉ－Ｐ８）
Ｅ［８］＝１
Ｐｉは第１の再構成画像における画素値であり、Ｅ［ｉ］は参照画素の値であり、ｉ＝０、１、２、３、４、５、６、７である。
【0137】
また例えば、図８に示す参照画素位置を例とし、第２の方式に従って第１の再構成画像から参照画素の値を取得することは以下のポリシーによって実現されてもよい。
Ｅ［ｉ］＝ａｂｓ（Ｐｉ－Ｐ１４）＋ａｂｓ（Ｐ２８－ｉ－Ｐ１４）
Ｅ［１４］＝１
Ｐｉは第１の再構成画像における画素値であり、Ｅ［ｉ］は参照画素の値であり、ｉ＝０、１、２、３、４、５、６、７、８、９、１０、１１、１２、１３である。
Ｅ［ｉ］＝ａｂｓ（Ｐｉ－Ｐ１４）＋ａｂｓ（Ｐ２８－ｉ－Ｐ１４）
Ｅ［１４］＝１
Ｐｉは第１の再構成画像における画素値であり、Ｅ［ｉ］は参照画素の値であり、ｉ＝０、１、２、３、４、５、６、７、８、９、１０、１１、１２、１３である。
【0138】
なお、Ｅ［８］＝１又はＥ［１４］＝１は単に参照画素の値を取得する方式であり、本発明の実施例においてこれに限定されず、すなわち本発明の実施例において、Ｅ［８］（又はＥ［１４］）の値は他の画素値（最大画素値を超えない）であってもよく、又は、Ｅ［８］（又はＥ［１４］）の値はＰ８（Ｐ１４）であってもよい。
【0139】
一例として、２回目のウィーナーフィルタリングを行う際に、第１の再構成画像における各参照画素位置の画素値と中心位置の画素値との差の絶対値に基づいて参照画素の値を決定し、それにより、２回目のウィーナーフィルタリングによって参照画素値に対して線形結合を実現し、線形結合の結果を原画像の画素と１回目のフィルタリング後の画像画素との画素値の差に近似させる。
【0140】
いずれかの画素について、当該画素に対する１回目のウィーナーフィルタリング及び２回目のウィーナーフィルタリングを完了したとき、再構成画像がいずれも第１の再構成画像であれば、当該画素の１回目のウィーナーフィルタリングを行った後の画素値と当該画素の２回目のウィーナーフィルタリングを行った後の画素値との和を、当該画素のフィルタリングされた後の画素値として決定してもよい。
【0141】
いずれかの画素について、当該画素に対する１回目のウィーナーフィルタリング及び２回目のウィーナーフィルタリングを完了したとき、１回目のフィルタリングが第１の方式を用いて参照画素の値（原値に近似する）を取得し、且つ２回目のフィルタリングが第２の方式を用いて参照画素の値（１回目のフィルタリングと原値との差に近似する）を取得する場合には、１回目のフィルタリングと２回目のフィルタリングのフィルタリング結果を重畳することにより、最終的なフィルタリング結果を得るとしてもよい。
【0142】
例として、ＬＣＵに対して１回目のウィーナーフィルタリング及び２回目のウィーナーフィルタリングを行う時に、参照画素の値がいずれも第１の再構成画像から取得されれば、フィルタリング効率を向上させるように、現在のＬＣＵに対して１回目のウィーナーフィルタリングと現在のＬＣＵに対して２回目のウィーナーフィルタリングとは並行して実行してもよい。
【0143】
別の例において、現在のＬＣＵに対して１回目のウィーナーフィルタリングを行う参照画素の値は第１の再構成画像における画素値に基づいて決定され、第１の再構成画像は１回目のウィーナーフィルタリング前の再構成画像である。
【0144】
現在のＬＣＵに対して２回目のウィーナーフィルタリングを行う参照画素の値は第２の再構成画像における画素値によって決定され、第２の再構成画像は１回目のウィーナーフィルタリング後の再構成画像である。
【0145】
一例として、現在のＬＣＵに対して１回目のウィーナーフィルタリングを行う参照画素の値及び現在のＬＣＵに対して２回目のウィーナーフィルタリングを行う参照画素の値は、それぞれ１回目のウィーナーフィルタリング前の再構成画像（すなわち第１の再構成画像）及び１回目のウィーナーフィルタリング後の再構成画像（本明細書では第２の再構成画像と呼ばれる）から取得されてもよい。
【0146】
一例として、現在のＬＣＵに対して２回目のウィーナーフィルタリングを行う参照画素の値は第２の再構成画像における各参照画素位置の画素値と中心位置の画素値との差の絶対値に基づいて決定される。
【0147】
一例として、２回目のウィーナーフィルタリングを行う際に、第２の再構成画像における各参照画素位置の画素値と中心位置の画素値との差の絶対値に基づいて参照画素の値を決定し、それにより、２回目のウィーナーフィルタリングによって参照画素値に対して線形結合を実現し、線形結合の結果を原画像の画素と１回目のフィルタリング後の画像画素との画素値の差に近似させる。
【0148】
いずれかの画素について、当該画素に対する１回目のウィーナーフィルタリング及び２回目のウィーナーフィルタリングを完了したとき、当該画素の１回目のウィーナーフィルタリングを行った後の画素値と当該画素の２回目のウィーナーフィルタリングを行った後の画素値との和を、当該画素のフィルタリングされた後の画素値として決定してもよい。
【0149】
一例では、ステップＳ９００において、現在のＬＣＵに対して１回目のウィーナーフィルタリング及び２回目のウィーナーフィルタリングを行う前に、さらに、
現在のフレーム画像に対してＬＣＵの規格に基づいて領域分割を行い、１つの領域に分割されたＬＣＵに同じフィルタパラメータを配置するステップを含んでもよく、フィルタパラメータはウィーナーフィルタリングを行うフィルタ及びフィルタ係数、並びに参照画素の位置インデックスを含み、分割方式は１種を含むがそれに限定されない。
現在のフレーム画像に対してＬＣＵの規格に基づいて領域分割を行い、１つの領域に分割されたＬＣＵに同じフィルタパラメータを配置するステップを含んでもよく、フィルタパラメータはウィーナーフィルタリングを行うフィルタ及びフィルタ係数、並びに参照画素の位置インデックスを含み、分割方式は１種を含むがそれに限定されない。
【0150】
一例として、画像に対して領域分割を行う具体的な実現は従来のフィルタリング方法における関連実現を参照することができ、本発明の実施例はこれについて重複する説明を省略する。
【0151】
なお、本発明の実施例において、現在のフレーム画像に対して１回目のフィルタリング及び２回目のフィルタリングを行うとき、領域分割を行う方式が異なってもよく、画像における各ＬＣＵに対してウィーナーフィルタリングを行うために選択したウィーナーフィルタが異なってもよい。
【0152】
一例において、図９に示すフィルタリング方法は、符号化機器に適用される場合に、さらに、
３回のＣＴＵ決定を完了したとき、３回のＣＴＵ決定の後にウィーナーフィルタリングを開始すると決定されたＬＣＵに対して、３回のＣＴＵ決定の後に保留された当該ＬＣＵに対してウィーナーフィルタリングを行って得た第１グループのフィルタ係数を取得し、フィルタ係数が０である参照画素位置の参照画素の値を０に設定し、更新された参照画素の値に基づいて、第２グループのフィルタ係数を計算するステップと、
第２のグループのフィルタ係数に基づいて４回目のＣＴＵ決定を行い、現在のフレーム画像の各ＬＣＵがウィーナーフィルタリングを開始するか否かを判断するステップと、を含んでもよい。
３回のＣＴＵ決定を完了したとき、３回のＣＴＵ決定の後にウィーナーフィルタリングを開始すると決定されたＬＣＵに対して、３回のＣＴＵ決定の後に保留された当該ＬＣＵに対してウィーナーフィルタリングを行って得た第１グループのフィルタ係数を取得し、フィルタ係数が０である参照画素位置の参照画素の値を０に設定し、更新された参照画素の値に基づいて、第２グループのフィルタ係数を計算するステップと、
第２のグループのフィルタ係数に基づいて４回目のＣＴＵ決定を行い、現在のフレーム画像の各ＬＣＵがウィーナーフィルタリングを開始するか否かを判断するステップと、を含んでもよい。
【0153】
一例として、現在のフレーム画像に対して１回目のフィルタリング又は２回目のフィルタリングを行うとき、符号化機器はいずれも３回のＣＴＵ決定によって現在のフレーム画像におけるウィーナーフィルタリングを開始するＬＣＵを決定してもよく、すなわち符号化機器は３回のＣＴＵ決定によってあるＬＣＵが１回目のウィーナーフィルタリングを開始するか否かを決定すること、及び、３回のＣＴＵ決定によって当該ＬＣＵが２回目のウィーナーフィルタリングを開始するか否かを決定することができる。
【0154】
いくつかの位置における参照画素とフィルタリング対象の画素との間の関係が小さく、又は参照画素の共線性が存在し、それによりトレーニングされた係数が最適な係数ではない可能性があることが考慮され、したがって、フィルタ係数のトレーニング効果を最適化するために、ＣＴＵ決定により各ＬＣＵが１回目のウィーナーフィルタリング（又は２回目のウィーナーフィルタリング）を開始するか否かを決定する過程において、３回のＣＴＵ決定を完了したとき、符号化機器はＣＴＵ決定に基づいて１回目のウィーナーフィルタリング（又は２回目のウィーナーフィルタリング）を開始するＬＣＵを決定することができ、３回のＣＴＵ決定後に保留された当該ＬＣＵに対してウィーナーフィルタリングを行うフィルタ係数（本明細書では第１グループのフィルタ係数と呼ばれる）に基づいて、フィルタ係数が０である位置の参照画素位置の参照画素の値を０に設定し、フィルタ係数が０でない参照画素位置の参照画素の値を変更せず、参照画素の値を更新し、更新後の参照画素の値に基づいて、新しいフィルタ係数（本明細書では第２グループのフィルタ係数と呼ばれる）を計算する。
【0155】
第２グループのフィルタ係数を得たときは、第２のグループのフィルタ係数に基づいて４回目のＣＴＵ決定を行い、現在のフレーム画像の各ＬＣＵがウィーナーフィルタリングを開始するか否かを判断するとしてもよい。
【0156】
別の例において、図９に示すフィルタリング方法は、符号化機器に適用される場合に、さらに、
１回のＣＴＵ決定を完了するたびに、今回のＣＴＵ決定の後にウィーナーフィルタリングを開始すると決定されたＬＣＵに対して、今回のＣＴＵ決定の後に保留された当該ＬＣＵに対してウィーナーフィルタリングを行う第１グループのフィルタ係数を取得し、当該フィルタ係数が０である参照画素位置の参照画素の値を０に設定し、更新された参照画素の値に基づいて、第２グループのフィルタ係数を計算するステップと、
第２のグループのフィルタ係数に基づいて次回のＣＴＵ決定を行い、現在のフレーム画像の各ＬＣＵがウィーナーフィルタリングを開始するか否かを判断するステップと、を含んでもよい。
１回のＣＴＵ決定を完了するたびに、今回のＣＴＵ決定の後にウィーナーフィルタリングを開始すると決定されたＬＣＵに対して、今回のＣＴＵ決定の後に保留された当該ＬＣＵに対してウィーナーフィルタリングを行う第１グループのフィルタ係数を取得し、当該フィルタ係数が０である参照画素位置の参照画素の値を０に設定し、更新された参照画素の値に基づいて、第２グループのフィルタ係数を計算するステップと、
第２のグループのフィルタ係数に基づいて次回のＣＴＵ決定を行い、現在のフレーム画像の各ＬＣＵがウィーナーフィルタリングを開始するか否かを判断するステップと、を含んでもよい。
【0157】
一例として、いくつかの位置における参照画素とフィルタリング対象の画素との間の関係が小さく、又は参照画素の共線性が存在し、それによりトレーニングされた係数が最適な係数ではない可能性があることが考慮され、したがって、フィルタ係数のトレーニング効果を最適化するために、毎回のＣＴＵ決定の後、今回のＣＴＵ決定に基づいて１回目のウィーナーフィルタリング（又は２回目のウィーナーフィルタリング）を開始すると決定したＬＣＵに対して、符号化機器は今回のＣＴＵ決定によって保留された当該ＬＣＵに対してウィーナーフィルタリングを行うフィルタ係数（第１グループのフィルタ係数と呼ばれてもよい）に基づいて、フィルタ係数が０である位置の参照画素位置の参照画素の値を０に設定し、フィルタ係数が０でない参照画素位置の参照画素の値を変更せず、参照画素の値を更新し、更新後の参照画素の値に基づいて、新しいフィルタ係数（第２グループのフィルタ係数と呼ばれてもよい）を計算する。
【0158】
第２グループのフィルタ係数を得たときは、第２のグループのフィルタ係数に基づいて次回のＣＴＵ決定を行い、現在のフレーム画像の各ＬＣＵがウィーナーフィルタリングを開始するか否かを判断するとしてもよい。
【0159】
なお、本発明の実施例において、毎回計算して第２グループのフィルタ係数を得たとき、さらに第１グループのフィルタ係数に基づいて現在のフレーム画像に対してフィルタリングを行うレート歪みコストと第２グループのフィルタ係数に基づいて現在のフレーム画像に対してフィルタリングを行うレート歪みコストとを比較してもよく、前者が小さければ、第１グループのフィルタ係数を保留し、そうでなければ、第２グループのフィルタ係数を保留する。
【0160】
実施例３、ＣＴＵ決定を１回追加する
ステップワイズ回帰の思想を用い、３回のＣＴＵ決定の後、ＣＴＵ決定を１回追加し、係数が０である位置における参照画素はフィルタ係数の計算に関与せず、トレーニングして得られたフィルタ係数を最適化する。
ステップワイズ回帰の思想を用い、３回のＣＴＵ決定の後、ＣＴＵ決定を１回追加し、係数が０である位置における参照画素はフィルタ係数の計算に関与せず、トレーニングして得られたフィルタ係数を最適化する。
【0161】
なお、実施例３に記載のフィルタリング方法は符号化機器に適用できる。
【0162】
【0163】
ステップＳ１０００において、３回のＣＴＵ決定を完了したとき、３回のＣＴＵ決定の後にウィーナーフィルタリングを開始すると決定されたＬＣＵに対して、３回のＣＴＵ決定の後に保留された当該ＬＣＵに対してウィーナーフィルタリングを行って得た第１のグループのフィルタ係数を取得し、フィルタ係数が０である参照画素位置の参照画素の値を０に設定し、更新された参照画素の値に基づいて、第２のグループのフィルタ係数を計算する。
【0164】
ステップＳ１０１０において、第２のグループのフィルタ係数に基づいて４回目のＣＴＵ決定を行い、現在のフレーム画像の各ＬＣＵがウィーナーフィルタリングを開始するか否かを判断する。
【0165】
本発明の実施例において、いくつかの位置における参照画素とフィルタリング対象の画素との間の関係が小さく、又は参照画素の共線性が存在し、それによりトレーニングして得られた係数が最適な係数ではない可能性があることが考慮され、したがって、フィルタ係数のトレーニング効果を最適化するために、ＣＴＵ決定により各ＬＣＵがウィーナーフィルタリングを開始するか否かを決定する過程において、３回のＣＴＵ決定を完了したとき、符号化機器はＣＴＵ決定に基づいてウィーナーフィルタリングを開始するＬＣＵを決定することができ、３回のＣＴＵ決定後に保留された当該ＬＣＵに対してウィーナーフィルタリングを行うフィルタ係数（本明細書では第１グループのフィルタ係数と呼ばれる）に基づいて、フィルタ係数が０であるフィルタ係数位置の参照画素の値を０に設定し、フィルタ係数が０でない参照画素位置の参照画素の値を変更せず、参照画素の値を更新し、更新後の参照画素の値に基づいて、新しいフィルタ係数（本明細書では第２グループのフィルタ係数と呼ばれる）を計算する。
【0166】
第２グループのフィルタ係数を得たときは、第２のグループのフィルタ係数に基づいて４回目のＣＴＵ決定を行い、現在のフレーム画像の各ＬＣＵがウィーナーフィルタリングを開始するか否かを判断するとしてもよい。
【0167】
なお、本発明の実施例において、計算して第２グループのフィルタ係数を得たとき、さらに第１グループのフィルタ係数に基づいて現在のフレーム画像に対してフィルタリングを行うレート歪みコストと第２グループのフィルタ係数に基づいて現在のフレーム画像に対してフィルタリングを行うレート歪みコストとを比較してもよく、前者が小さければ、第１グループのフィルタ係数を保留し、そうでなければ、第２グループのフィルタ係数を保留する。
【0168】
また、更新後のフィルタ係数が保留されたとき、符号化機器はさらに更新後のフィルタ係数に基づいて領域統合結果を更新することができ、その具体的な実現について、ここでは重複する説明は省略する。
【0169】
一例において、図１０に示すフィルタリング方法は、さらに、
現在のフレーム画像における現在のＬＣＵがウィーナーフィルタリングを開始すると決定したとき、現在のＬＣＵにウィーナーフィルタリングを行うウィーナーフィルタのフィルタ係数及び参照画素を取得し、それらに基づいて現在のＬＣＵにおける画素に対して一つ一つウィーナーフィルタリングを行うステップを含む。
現在のフレーム画像における現在のＬＣＵがウィーナーフィルタリングを開始すると決定したとき、現在のＬＣＵにウィーナーフィルタリングを行うウィーナーフィルタのフィルタ係数及び参照画素を取得し、それらに基づいて現在のＬＣＵにおける画素に対して一つ一つウィーナーフィルタリングを行うステップを含む。
【0170】
本発明の実施例において、現在のフレーム画像における現在のＬＣＵがウィーナーフィルタリングを開始すると決定したとき、現在のＬＣＵにウィーナーフィルタリングを行うウィーナーフィルタのフィルタ係数及び参照画素を取得し、現在のＬＣＵにおける画素に対して一つ一つウィーナーフィルタリングを行うことができる。
【0171】
一例において、フィルタリング効果を最適化し、符号化・復号性能を向上させるために、ウィーナーフィルタのフィルタ係数を適切に増加し、新しいウィーナーフィルタを得ることにより、ＡＬＦ技術が画像を処理する時に存在するアンダーフィッティング状況を緩和するとしてもよく、その具体的な実現は実施例１又は実施例２における関連説明を参照することができ、本発明の実施例はここで重複する説明を省略する。
【0172】
一例において、２回フィルタリングを導入する方法により、１回目のフィルタリング後の画像に対し、１グループのフィルタ係数を新たにトレーニングし、再びフィルタリングを行い、画像品質をさらに向上させ、その具体的な実現は実施例２における関連説明を参照することができ、本発明の実施例はここで重複する説明を省略する。
【0173】
一例では、ステップＳ１０００において、３回のＣＴＵ決定を完了する前に、さらに、
１回のＣＴＵ決定を完了するたびに、今回のＣＴＵ決定の後にウィーナーフィルタリングを開始すると決定されたＬＣＵに対して、今回のＣＴＵ決定の後に保留された当該ＬＣＵに対してウィーナーフィルタリングを行う第１グループのフィルタ係数を取得し、当該フィルタ係数が０である参照画素位置の参照画素の値を０に設定し、更新された参照画素の値に基づいて、第２グループのフィルタ係数を計算するステップと、
第２のグループのフィルタ係数に基づいて次回のＣＴＵ決定を行い、現在のフレーム画像の各ＬＣＵがウィーナーフィルタリングを開始するか否かを判断するステップと、を含んでもよい。
１回のＣＴＵ決定を完了するたびに、今回のＣＴＵ決定の後にウィーナーフィルタリングを開始すると決定されたＬＣＵに対して、今回のＣＴＵ決定の後に保留された当該ＬＣＵに対してウィーナーフィルタリングを行う第１グループのフィルタ係数を取得し、当該フィルタ係数が０である参照画素位置の参照画素の値を０に設定し、更新された参照画素の値に基づいて、第２グループのフィルタ係数を計算するステップと、
第２のグループのフィルタ係数に基づいて次回のＣＴＵ決定を行い、現在のフレーム画像の各ＬＣＵがウィーナーフィルタリングを開始するか否かを判断するステップと、を含んでもよい。
【0174】
一例として、いくつかの位置における参照画素とフィルタリングすべき画素との間の関係が小さく、又は参照画素の共線性が存在し、それにより、トレーニングされた係数が最適な係数ではない可能性があることが考慮され、したがって、フィルタ係数のトレーニング効果を最適化するために、毎回のＣＴＵ決定の後、今回のＣＴＵ決定に基づいてウィーナーフィルタリングを開始すると決定したＬＣＵに対して、符号化機器は今回のＣＴＵ決定に保留された当該ＬＣＵに対してウィーナーフィルタリングを行うフィルタ係数（第１グループのフィルタ係数と呼ばれてもよい）に基づいて、フィルタ係数が０である位置の参照画素位置の参照画素の値を０に設定し、フィルタ係数が０でない参照画素位置の参照画素の値を変更せず、参照画素の値を更新し、更新後の参照画素の値に基づいて、更新されたフィルタ係数（第２グループのフィルタ係数と呼ばれてもよい）を計算する。
【0175】
第２グループのフィルタ係数を得たときは、第２のグループのフィルタ係数に基づいて次回のＣＴＵ決定を行い、現在のフレーム画像の各ＬＣＵがウィーナーフィルタリングを開始するか否かを判断するとしてもよい。
【0176】
なお、本発明の実施例において、毎回計算して第２グループのフィルタ係数を得たときは、さらに第１グループのフィルタ係数に基づいて現在のフレーム画像に対してフィルタリングを行うレート歪みコストと第２グループのフィルタ係数に基づいて現在のフレーム画像に対してフィルタリングを行うレート歪みコストとを比較してもよく、前者が小さければ、第１グループのフィルタ係数を保留し、そうでなければ、第２グループのフィルタ係数を保留する。
【0177】
また、第２グループのフィルタ係数が保留されたとき、符号化機器はさらに更新後のフィルタ係数に基づいて領域統合結果を更新することができ、その具体的な実現について、ここでは重複する説明は省略する。
【0178】
以下、当業者が本発明の実施例にて提供される技術的解決手段をよりよく理解できるように、具体的な例に合わせて本発明の実施例にて提供される技術的解決手段について説明する。
【0179】
従来ＡＬＦ技術の欠点に対して、本発明は従来のＡＬＦパラメータを基に、各グループのフィルタ係数の個数を増加し、又は、各グループのフィルタ係数の個数をそのまま保持し、フィルタ係数のグループ数を増やすことを提案する。ＲＤＯポリシーに基づいて、最後により多くのグループのフィルタ係数を追加する必要があるか否かを制御する。
【0180】
以下、まずそれぞれ符号化側及び復号側から本発明の主な改善点について説明する。
【0181】
１、符号化方法及び符号化機器
１．１、フィルタ形状の変更
図７に示すように、フィルタ係数を増加する符号化方法であって、図８に示す参照画素位置に基づいて、７＊７の十字形に３＊３の方形が加えられたフィルタ形状（図５に示すとおりであってもよい）を拡張し、７＊７の十字形に５＊５の方形が加えられたフィルタ形状を得、従来のフィルタ係数の上で６つのフィルタ係数を増加する。
１．１、フィルタ形状の変更
図７に示すように、フィルタ係数を増加する符号化方法であって、図８に示す参照画素位置に基づいて、７＊７の十字形に３＊３の方形が加えられたフィルタ形状（図５に示すとおりであってもよい）を拡張し、７＊７の十字形に５＊５の方形が加えられたフィルタ形状を得、従来のフィルタ係数の上で６つのフィルタ係数を増加する。
【0182】
１．２、フィルタリング過程を１回追加する
本解決手段は従来のＡＬＦ技術を基に、さらに１セットのフィルタパラメータをトレーニングする。
本解決手段は従来のＡＬＦ技術を基に、さらに１セットのフィルタパラメータをトレーニングする。
【0183】
第２セットのフィルタパラメータをトレーニングする過程は従来のＡＬＦ技術に一致するが、以下の相違点が存在する。
【0184】
１．２．１、画素に対する領域分割方法は以下を含んでもよい。
１．２．１．１、図２に示す領域分割及び図３に示す領域統合方式と同様の分割方式。
１．２．１．２、図２に示す領域分割及び図３に示す領域統合方式とは異なる分割方式（例えば、図２に示す領域分割の上でさらに複数の領域に細分化するなど）。
１．２．１．１、図２に示す領域分割及び図３に示す領域統合方式と同様の分割方式。
１．２．１．２、図２に示す領域分割及び図３に示す領域統合方式とは異なる分割方式（例えば、図２に示す領域分割の上でさらに複数の領域に細分化するなど）。
【0185】
【0186】
１．２．３、２回目のフィルタリングの参照画素の選択は従来の解決手段における１回目のフィルタリングと異なる。
【0187】
１．２．３．１、２回目のフィルタリングの参照画素は再構成画像における参照画素位置と中心位置との画素値の差の絶対値で構成され、再構成画像は１回目のフィルタリング前の再構成画像（すなわち第１の再構成画像）を指す。
【0188】
１．２．３．２、２回目のフィルタリングの参照画素は再構成画像における参照画素値と中心値との差の絶対値で構成され、再構成画像は１回目のフィルタリング後の再構成画像（すなわち第２の再構成画像）を指す。
【0189】
１．２．３．３、２回目のフィルタリングの参照画素は１回目の参照画素の選択方式と同じであるが、２回目のフィルタリングの参照画素Ｐｉは１回目のフィルタリング後の再構成画像（すなわち第２の再構成画像）から取得される。
【0190】
なお、１．２．３．１、１．２．３．２及び１．２．３．３はいずれも参照画素の計算方法及び取得方法に対する改善であり、三者は互いに排他関係であり、１．２．１及び１．２．２は（１．２．３．１、１．２．３．２及び１．２．３．３）と独立し、互いに組み合わせることができる。
【0191】
１．３、符号化側にＣＴＵ決定を１回追加する
毎回のＣＴＵ決定前に、１グループのフィルタ係数を算出して取得し、このグループのフィルタ係数は各参照画素位置の重みを反映することができ、係数が０である参照位置がいくつかあり、それは目標値との相関性が低いと考えられる。フィルタ係数を計算するとき、相関性が高い位置をできるだけ多く保留し、相関性が低く、ひいては相関性がない位置を削除し、このように得られたフィルタ効果がより高い。
毎回のＣＴＵ決定前に、１グループのフィルタ係数を算出して取得し、このグループのフィルタ係数は各参照画素位置の重みを反映することができ、係数が０である参照位置がいくつかあり、それは目標値との相関性が低いと考えられる。フィルタ係数を計算するとき、相関性が高い位置をできるだけ多く保留し、相関性が低く、ひいては相関性がない位置を削除し、このように得られたフィルタ効果がより高い。
【0192】
したがって、最後のＣＴＵ決定の後に、ＣＴＵ決定を１回追加し、最後のＣＴＵ決定を完了したとき、現在保留されたフィルタ係数に従って、係数が０であれば、この現在の位置における参照画素値を０と記す。係数が０でなければ、当該位置における参照画素値をそのまま保持し、最後の１グループのフィルタ係数をトレーニングし、フィルタ係数の更新を実現する。
【0193】
最後の２グループのフィルタ係数（更新前後のフィルタ係数）のレート歪みコストを計算し、レート歪みコストが小さい係数を保留し、符号化する。
【0194】
１．４、符号化側のフィルタ係数の計算についての改善
本解決手段において、フィルタ係数を再計算する必要がある場合、例えば、１回のＣＴＵ決定を完了するたびに、前回に保留されたフィルタ係数のうち係数が０である位置について、当該位置の参照画素はフィルタ計算に関与せず、当該参照画素の値を０に直接設定する。
本解決手段において、フィルタ係数を再計算する必要がある場合、例えば、１回のＣＴＵ決定を完了するたびに、前回に保留されたフィルタ係数のうち係数が０である位置について、当該位置の参照画素はフィルタ計算に関与せず、当該参照画素の値を０に直接設定する。
【0195】
なお、符号化機器について、１．１（すなわちフィルタ形状の変更）、１．２（フィルタリング過程を１回追加する）、１．３（符号化側にＣＴＵ決定を１回追加する）及び１．４（符号化側のフィルタ係数の計算についての改善）に記載の改善は独立して用いられてもよく、又は、２つずつ若しくは２つ以上を組み合わせて用いられてもよい。
【0196】
例えば、フィルタリング過程を１回追加した上で、１回目のフィルタリング過程又は／及び２回目のフィルタリング過程において新しいフィルタ形状を用い、又は、ＣＴＵを１回追加した上で、ＣＴＵ決定によってウィーナーフィルタリングを開始するＬＣＵを決定した後、ウィーナーフィルタリングを開始するＬＣＵに対して、２回のウィーナーフィルタリングを行ってもよく、且つ１回目のウィーナーフィルタリング又は／及び２回目のウィーナーフィルタリング過程において新しいフィルタ形状を用いてもよい。
【0197】
２、復号方法及び復号機器
２．１、フィルタ形状の変更
図７に示すように、フィルタ係数を増加させる符号化方法であって、図８に示す参照画素位置に基づいて、７＊７の十字形に３＊３の方形が加えられたフィルタ形状（図５に示すとおりであってもよい）を拡張し、７＊７の十字形に５＊５の方形が加えられたフィルタ形状を得、従来のフィルタ係数の上で６つのフィルタ係数を増加する。
２．１、フィルタ形状の変更
図７に示すように、フィルタ係数を増加させる符号化方法であって、図８に示す参照画素位置に基づいて、７＊７の十字形に３＊３の方形が加えられたフィルタ形状（図５に示すとおりであってもよい）を拡張し、７＊７の十字形に５＊５の方形が加えられたフィルタ形状を得、従来のフィルタ係数の上で６つのフィルタ係数を増加する。
【0198】
２．２、フィルタリング過程を１回追加する
ＡＬＦ復号過程の改善は上記符号化過程に対応する。１回目のフィルタリング及び２回目のフィルタリングの参照画素がいずれも１回目のフィルタリング前の再構成画像（すなわち第１の再構成画像）により決定されれば、２回目のフィルタリングは１回目のフィルタリングと並行して実行でき、２回目のフィルタリングの参照画素が１回目のフィルタリング後の再構成画像（すなわち第２の再構成画像）により決定されれば、２回目のフィルタリングは１回目のフィルタリング後に行う必要がある。
ＡＬＦ復号過程の改善は上記符号化過程に対応する。１回目のフィルタリング及び２回目のフィルタリングの参照画素がいずれも１回目のフィルタリング前の再構成画像（すなわち第１の再構成画像）により決定されれば、２回目のフィルタリングは１回目のフィルタリングと並行して実行でき、２回目のフィルタリングの参照画素が１回目のフィルタリング後の再構成画像（すなわち第２の再構成画像）により決定されれば、２回目のフィルタリングは１回目のフィルタリング後に行う必要がある。
【0199】
２．２．１、２回目のフィルタリングの領域分割と１回目のフィルタリングの領域分割とは同じでも、異なってもよく、符号化側に一致すべきである。
【0200】
２．２．２、２回目のフィルタリングのフィルタ形状と１回目のフィルタリングのフィルタ形状とは同じでも、異なってもよく、符号化側に一致すべきである。
【0201】
２．２．３、符号化側の２回目のフィルタリングの参照画素が１回目のフィルタリング前の再構成画像（すなわち第１の再構成画像）により決定され、且つ２回目のフィルタリングの参照画素の値が第２の方式に従って第１の再構成画像から取得されれば、２回目のフィルタリングと１回目のフィルタリングの参照画素は同じ再構成画像により決定され、同一のＬＣＵに対して、２グループのフィルタ係数を取得し、フィルタリング過程を並行して実行し、フィルタリング結果を重畳する。
【0202】
２．２．４、符号化側の２回目のフィルタリングの参照画素が１回目のフィルタリング後の再構成画像（すなわち第２の再構成画像）により決定されれば、２回目のフィルタリングと１回目のフィルタリングの参照画素は異なる再構成画像により決定され、且つ２回目のフィルタリングの参照画素の値は第２の方式に従って第２の再構成画像から取得され、２回目のフィルタリングの参照画素は１回目のフィルタリングが終了した後に取得する必要があり、同一のＬＣＵに対して、２回のフィルタリングを前後して行い、フィルタリング結果を重畳する。
【0203】
２．２．５、符号化側の１回目のフィルタリング及び２回目のフィルタリングはそれぞれ第１の方式を用いて第１の再構成画像及び第２の再構成画像から参照画素の値を取得すれば、２回目のフィルタリングの参照画素は１回目のフィルタリングが終了した後に取得する必要があり、同一のＬＣＵに対して、２回のフィルタリングを前後して行う。
【0204】
なお、復号機器について、２．１（すなわちフィルタ形状の変更）及び２．２（フィルタリング過程を１回追加する）に記載の改善は独立して用いられてもよく、又は、２つずつ若しくは２つ以上を組み合わせて用いられてもよい。
【0205】
また、上記改善の採用に対して、符号化機器と復号化側機器とは一致を保持する必要がある。
【0206】
以下、それぞれ実施例に合わせて各改善点の独立採用又は組み合わせ採用の一部の実現方式について例示的に説明する。
【0207】
実施例４
フィルタ形状を変更し、符号化側で符号化フローを、領域分割→参照画素の取得→領域統合且つフィルタ係数の算出→ＣＴＵ決定による各ＬＣＵがフィルタリングを開始するか否かについての判断のまま、変更しない。
フィルタ形状を変更し、符号化側で符号化フローを、領域分割→参照画素の取得→領域統合且つフィルタ係数の算出→ＣＴＵ決定による各ＬＣＵがフィルタリングを開始するか否かについての判断のまま、変更しない。
【0208】
計算する必要があるパラメータは以下のとおりである。１）フィルタパラメータの数（変更せず）、２）領域統合フラグ（変更せず）、３）各グループのフィルタ係数（各グループの係数を元の９個から１５個に変更する）、４）ＬＣＵがフィルタリングを開始するか否かについてのフラグ（変更せず）、及び５）現在の成分（Ｙ，Ｕ，Ｖ）がフィルタリングを開始するか否かについてのフラグ。
【0209】
復号側はビットストリームを取得し、フィルタ係数は元の９個から１５個に変更され、復号側のＡＬＦによる復号フローは以下のとおりである。現在のフレームのフィルタフラグ（すなわちＦｒａｍｅ＿ｆｌａｇ）を取得し、当該フレームにフィルタリングを行うべきであれば（すなわちフレームのフィルタフラグの値が真（ｔｒｕｅ）であり、もし偽（ｆａｌｓｅ）であれば、フィルタリングを行わない）、さらにＬＣＵを最小ユニットとし、現在のＬＣＵのフィルタフラグ（すなわちＬＣＵ＿ｆｌａｇ）によってＡＬＦを必要とするか否かを判断し、必要とすれば、現在のＬＣＵのために、フィルタ係数（Ｆｉｌｔｅｒ＿ｃｏｅｆｆ）を取得する 。各グループの係数は１５個であり、当該フィルタ係数を用いて、当該ＬＣＵにおける全ての画素に対して図７におけるフィルタ形状に従ってフィルタリングを行う。復号のフィルタリング過程を図１１に示す。
【0210】
一例として、符号化機器について、ＣＴＵ決定によって現在のフレーム画像における各ＬＣＵがウィーナーフィルタリングを開始するか否かを決定し、最終的に決定した結果に基づいて、各ＬＣＵに対応するＬＣＵ＿ｆｌａｇの値を決定し、それを符号化ビットストリームに付加させて復号機器に通知し、復号機器が各ＬＣＵに対応するＬＣＵ＿ｆｌａｇの値に基づいて、対応するＬＣＵに対してウィーナーフィルタリングを行うか否かを決定する。
【0211】
実施例５
フィルタリング過程を１回追加し、１回目のＡＬＦと同じの領域分割方式を用い、１回目のＡＬＦと同じのフィルタ形状を用いるが、２回目のフィルタリングの参照画素の選択は元の方法における１回目のフィルタリングと異なり、２回目のフィルタリングの参照画素は再構成画像における参照画素位置と中心位置との画素値の差の絶対値で構成され、再構成画像は１回目のフィルタリング前の再構成画像（すなわち第１の再構成画像）を指す。
フィルタリング過程を１回追加し、１回目のＡＬＦと同じの領域分割方式を用い、１回目のＡＬＦと同じのフィルタ形状を用いるが、２回目のフィルタリングの参照画素の選択は元の方法における１回目のフィルタリングと異なり、２回目のフィルタリングの参照画素は再構成画像における参照画素位置と中心位置との画素値の差の絶対値で構成され、再構成画像は１回目のフィルタリング前の再構成画像（すなわち第１の再構成画像）を指す。
【0212】
フィルタ形状は図５に示すフィルタ形状であり、各位置における参照画素は図４に示すとおりである。
Ｅ［ｉ］＝ａｂｓ（Ｐｉ－Ｐ８）＋ａｂｓ（Ｐ１６－ｉ－Ｐ８）
Ｅ［８］＝１
Ｐｉは第１の再構成画像における画素値であり、Ｅ［ｉ］は参照画素の値であり、ｉ＝０、１、２、３、４、５、６、７である。
Ｅ［ｉ］＝ａｂｓ（Ｐｉ－Ｐ８）＋ａｂｓ（Ｐ１６－ｉ－Ｐ８）
Ｅ［８］＝１
Ｐｉは第１の再構成画像における画素値であり、Ｅ［ｉ］は参照画素の値であり、ｉ＝０、１、２、３、４、５、６、７である。
【0213】
２回目のフィルタリングは、参照画素値に対する線形結合を目標とし、線形結合の結果を原画像の画素と１回目のフィルタリング後の画像画素との画素値の差に近似させる。
【0214】
復号側の具体的な実現プロセスは以下のとおりである。現在のフレームの２回のフィルタリングのフィルタフラグ（１回目のフィルタリングのフィルタフラグＦｒａｍｅ＿ｆｌａｇ［０］及び２回目のフィルタリングのフィルタフラグＦｒａｍｅ＿ｆｌａｇ［１］を含む）を取得し、１つのフィルタフラグが真であれば、ＬＣＵを最小単位とし、現在のＬＣＵの２グループのフィルタフラグ（１回目のフィルタリングのフィルタフラグＬＣＵ＿ｆｌａｇ［０］及び２回目のフィルタリングのフィルタフラグＬＣＵ＿ｆｌａｇ［１］を含む）のうち真であるフィルタフラグがあるか否かを判断し、あれば、復号側は２セットのフィルタフラグのうち真と判断されたフィルタフラグに対応するフィルタ係数（１回目のフィルタリングのフィルタ係数Ｆｉｌｔｅｒ＿ｃｏｅｆｆ［０］又は／及び２回目のフィルタリングのフィルタ係数Ｆｉｌｔｅｒ＿ｃｏｅｆｆ［１］）を取得し、ＬＣＵにおける全ての画素に対して点ごとにフィルタリングを行い、具体的な過程を図１２に示す。２回のフィルタリングの参照画素はいずれも同じ画素を読み取るだけでよいため、２回のフィルタリングは復号側で並行して実行することができる。
【0215】
実施例６
フィルタリング過程を１回追加し、２回目のＡＬＦは１回目のＡＬＦと異なる領域分割方式を用い、ここで、同一のＬＣＵの２回のフィルタリングは異なる領域に位置してもよく、また、２回目のＡＬＦは１回目のＡＬＦと同じのフィルタ形状を用いるが、２回目のＡＬＦの参照画素の選択は元の方法における１回目のフィルタリングと異なり、２回目のＡＬＦの参照画素は再構成画像における参照画素位置と中心位置との画素値の差の絶対値で構成され、再構成画像は１回目のフィルタリング前の再構成画像（すなわち第１の再構成画像）を指す。
フィルタリング過程を１回追加し、２回目のＡＬＦは１回目のＡＬＦと異なる領域分割方式を用い、ここで、同一のＬＣＵの２回のフィルタリングは異なる領域に位置してもよく、また、２回目のＡＬＦは１回目のＡＬＦと同じのフィルタ形状を用いるが、２回目のＡＬＦの参照画素の選択は元の方法における１回目のフィルタリングと異なり、２回目のＡＬＦの参照画素は再構成画像における参照画素位置と中心位置との画素値の差の絶対値で構成され、再構成画像は１回目のフィルタリング前の再構成画像（すなわち第１の再構成画像）を指す。
【0216】
フィルタ形状は図５に示すフィルタ形状であり、各位置における参照画素は図４に示すとおりである。
Ｅ［ｉ］＝ａｂｓ（Ｐｉ－Ｐ８）＋ａｂｓ（Ｐ１６－ｉ－Ｐ８）
Ｅ［８］＝１
Ｐｉは第１の再構成画像における画素値であり、Ｅ［ｉ］は参照画素の値であり、ｉ＝０、１、２、３、４、５、６、７である。
Ｅ［ｉ］＝ａｂｓ（Ｐｉ－Ｐ８）＋ａｂｓ（Ｐ１６－ｉ－Ｐ８）
Ｅ［８］＝１
Ｐｉは第１の再構成画像における画素値であり、Ｅ［ｉ］は参照画素の値であり、ｉ＝０、１、２、３、４、５、６、７である。
【0217】
２回目のＡＬＦは、参照画素値に対する線形結合を目標とし、線形結合の結果を原画像の画素と１回目のＡＬＦ後の画像画素との画素値の差に近似させる。
【0218】
復号側の具体的な実現プロセスは以下のとおりである。現在のフレームの２回のフィルタリングのフィルタフラグを取得し、１つのフィルタフラグが真であれば、ＬＣＵを最小単位とし、現在のＬＣＵの２グループのフィルタフラグのうち真のフィルタフラグがあるか否かを判断し、あれば、復号側は２セットのフィルタフラグのうち真と判断されたフィルタ係数を取得し、ＬＣＵにおける全ての画素に対して点ごとにフィルタリングを行い、具体的な過程を図１２に示す。２回のフィルタリングの参照画素はいずれも同じ画素を読み取るだけでよいため、２回のフィルタリングは復号側で並行して実行することができる。
【0219】
一例として、符号化機器について、それぞれＣＴＵ決定によって現在のフレーム画像における各ＬＣＵが１回目のウィーナーフィルタリング及び２回目のウィーナーフィルタリングを開始するか否かを決定し、最終的に決定した結果に基づいて、各ＬＣＵに対応するＬＣＵ＿ｆｌａｇ［０］及びＬＣＵ＿ｆｌａｇ［１］の値を決定し、それらを符号化ビットストリームに付加させて復号機器に通知し、復号機器が各ＬＣＵに対応するＬＣＵ＿ｆｌａｇ［０］及びＬＣＵ＿ｆｌａｇ［１］の値に基づいて、対応するＬＣＵに対して１回目のウィーナーフィルタリングを行うか否か、及び対応するＬＣＵに対して２回目のウィーナーフィルタリングを行うか否かを決定する。
【0220】
実施例７
フィルタリング過程を１回追加し、１回目のＡＬＦと同じの領域分割方式を用いるが、フィルタ形状は１回目のＡＬＦと異なるフィルタ形状を用い、且つ２回目のＡＬＦの参照画素は再構成画像における参照画素位置と中心位置との画素値の差の絶対値で構成され、再構成画像は１回目のＡＬＦ前の再構成画像（すなわち第１の再構成画像）を指す。
フィルタリング過程を１回追加し、１回目のＡＬＦと同じの領域分割方式を用いるが、フィルタ形状は１回目のＡＬＦと異なるフィルタ形状を用い、且つ２回目のＡＬＦの参照画素は再構成画像における参照画素位置と中心位置との画素値の差の絶対値で構成され、再構成画像は１回目のＡＬＦ前の再構成画像（すなわち第１の再構成画像）を指す。
【0221】
フィルタ形状は図７に示すフィルタ形状であり、各位置における参照画素は図８に示すとおりである。
Ｅ［ｉ］＝ａｂｓ（Ｐｉ－Ｐ１４）＋ａｂｓ（Ｐ２８－ｉ－Ｐ１４）
Ｅ［１４］＝１
Ｐｉは第１の再構成画像における画素値であり、Ｅ［ｉ］は参照画素の値であり、ｉ＝０、１、２、３、４、５、６、７、８、９、１０、１１、１２、１３である。
Ｅ［ｉ］＝ａｂｓ（Ｐｉ－Ｐ１４）＋ａｂｓ（Ｐ２８－ｉ－Ｐ１４）
Ｅ［１４］＝１
Ｐｉは第１の再構成画像における画素値であり、Ｅ［ｉ］は参照画素の値であり、ｉ＝０、１、２、３、４、５、６、７、８、９、１０、１１、１２、１３である。
【0222】
２回目のＡＬＦは、参照画素値に対する線形結合を目標とし、線形結合の結果を原画像の画素と１回目のＡＬＦ後の画像画素との画素値の差に近似させる。
【0223】
復号側の具体的な実現プロセスは以下のとおりである。現在のフレームの２回のフィルタリングのフィルタフラグを取得し、１つのフィルタフラグが真であれば、ＬＣＵを最小単位とし、現在のＬＣＵの２グループのフィルタフラグのうち真であるフィルタフラグがあるか否かを判断し、あれば、復号側は２セットのフィルタフラグのうち真と判断されたフィルタ係数を取得し、ＬＣＵにおける全ての画素に対して点ごとにフィルタリングを行い、具体的な過程を図１２に示す。２回のフィルタリングの参照画素はいずれも同じ画素を読み取るだけでよいため、２回のフィルタリングは復号側で並行して実行することができる。
【0224】
実施例８
フィルタリング過程を１回追加し、１回目のＡＬＦと異なる領域分割方式を用い、且つフィルタ形状は１回目のＡＬＦと異なるフィルタ形状を用い、２回目のＡＬＦの参照画素は再構成画像における参照画素位置と中心位置との画素の差の絶対値で構成され、再構成画像は１回目のＡＬＦ前の再構成画像（すなわち第１の再構成画像）を指す。
フィルタリング過程を１回追加し、１回目のＡＬＦと異なる領域分割方式を用い、且つフィルタ形状は１回目のＡＬＦと異なるフィルタ形状を用い、２回目のＡＬＦの参照画素は再構成画像における参照画素位置と中心位置との画素の差の絶対値で構成され、再構成画像は１回目のＡＬＦ前の再構成画像（すなわち第１の再構成画像）を指す。
【0225】
フィルタ形状は図７に示すフィルタ形状であり、各位置における参照画素は図８に示すとおりである。
Ｅ［ｉ］＝ａｂｓ（Ｐｉ－Ｐ１４）＋ａｂｓ（Ｐ２８－ｉ－Ｐ１４）
Ｅ［１４］＝１
Ｐｉは第１の再構成画像における画素値であり、Ｅ［ｉ］は参照画素の値であり、ｉ＝０、１、２、３、４、５、６、７、８、９、１０、１１、１２、１３である。
Ｅ［ｉ］＝ａｂｓ（Ｐｉ－Ｐ１４）＋ａｂｓ（Ｐ２８－ｉ－Ｐ１４）
Ｅ［１４］＝１
Ｐｉは第１の再構成画像における画素値であり、Ｅ［ｉ］は参照画素の値であり、ｉ＝０、１、２、３、４、５、６、７、８、９、１０、１１、１２、１３である。
【0226】
２回目のＡＬＦは、参照画素値に対する線形結合を目標とし、線形結合の結果を原画像の画素と１回目のＡＬＦ後の画像画素との画素値の差に近似させる。
【0227】
復号側の具体的な実現プロセスは以下のとおりである。現在のフレームの２回のフィルタリングのフィルタフラグを取得し、１つのフィルタフラグが真であれば、ＬＣＵを最小単位とし、現在のＬＣＵの２グループのフィルタフラグのうち真であるフィルタフラグがあるか否かを判断し、あれば、復号側は２セットのフィルタフラグのうち真と判断されたフィルタ係数を取得し、ＬＣＵにおける全ての画素に対して点ごとにフィルタリングを行い、具体的な過程を図１２に示す。２回のフィルタリングの参照画素はいずれも同じ画素を読み取るだけでよいため、２回のフィルタリングは復号側で並行して実行することができる。
【0228】
実施例９
フィルタリング過程を１回追加し、１回目のＡＬＦと同じの領域分割方式を用い、１回目のＡＬＦと同じのフィルタ形状を用いるが、２回目のＡＬＦの参照画素の選択は元の方法における１回目のＡＬＦと異なり、２回目のＡＬＦの参照画素は再構成画像における参照画素位置と中心位置との画素の差の絶対値で構成され、再構成画像は１回目のＡＬＦ後の再構成画像（すなわち第２の再構成画像）を指す。
フィルタリング過程を１回追加し、１回目のＡＬＦと同じの領域分割方式を用い、１回目のＡＬＦと同じのフィルタ形状を用いるが、２回目のＡＬＦの参照画素の選択は元の方法における１回目のＡＬＦと異なり、２回目のＡＬＦの参照画素は再構成画像における参照画素位置と中心位置との画素の差の絶対値で構成され、再構成画像は１回目のＡＬＦ後の再構成画像（すなわち第２の再構成画像）を指す。
【0229】
フィルタ形状は図５に示すフィルタ形状であり、各位置における参照画素は図４に示すとおりである。
Ｅ［ｉ］＝ａｂｓ（Ｐｉ－Ｐ８）＋ａｂｓ（Ｐ１６－ｉ－Ｐ８）
Ｅ［８］＝１
Ｐは第２の再構成画像における画素値であり、Ｅ［ｉ］は参照画素の値であり、ｉ＝０、１、２、３、４、５、６、７である。
Ｅ［ｉ］＝ａｂｓ（Ｐｉ－Ｐ８）＋ａｂｓ（Ｐ１６－ｉ－Ｐ８）
Ｅ［８］＝１
Ｐは第２の再構成画像における画素値であり、Ｅ［ｉ］は参照画素の値であり、ｉ＝０、１、２、３、４、５、６、７である。
【0230】
２回目のＡＬＦは、参照画素値に対する線形結合を目標とし、線形結合の結果を原画像の画素と１回目のＡＬＦ後の画像画素との画素値の差に近似させる。
【0231】
復号側の具体的な実現プロセスは以下のとおりである。現在のフレームの２回のフィルタリングのフィルタフラグを取得し、１つのフィルタフラグが真であれば、ＬＣＵを最小単位とし、現在のＬＣＵの２グループのフィルタフラグのうち真であるフィルタフラグがあるか否かを判断し、あれば、復号側は２セットのフィルタフラグのうち真と判断されたフィルタ係数を取得し、ＬＣＵにおける全ての画素に対して点ごとにフィルタリングを行い、具体的な過程を図１２に示す。
【0232】
実施例１０
フィルタリング過程を１回追加し、１回目のＡＬＦと異なる領域分割方式を用い、１回目のＡＬＦと同じのフィルタ形状を用いるが、２回目のＡＬＦの参照画素の選択は元の方法における１回目のＡＬＦと異なり、２回目のＡＬＦの参照画素は再構成画像における参照画素位置と中心位置との画素の差の絶対値で構成され、再構成画像は１回目のＡＬＦ後の再構成画像（すなわち第２の再構成画像）を指す。
フィルタリング過程を１回追加し、１回目のＡＬＦと異なる領域分割方式を用い、１回目のＡＬＦと同じのフィルタ形状を用いるが、２回目のＡＬＦの参照画素の選択は元の方法における１回目のＡＬＦと異なり、２回目のＡＬＦの参照画素は再構成画像における参照画素位置と中心位置との画素の差の絶対値で構成され、再構成画像は１回目のＡＬＦ後の再構成画像（すなわち第２の再構成画像）を指す。
【0233】
フィルタ形状は図５に示すフィルタ形状であり、各位置における参照画素は図４に示すとおりである。
Ｅ［ｉ］＝ａｂｓ（Ｐｉ－Ｐ８）＋ａｂｓ（Ｐ１６－ｉ－Ｐ８）
Ｅ［８］＝１
Ｐは第２の再構成画像における画素値であり、Ｅ［ｉ］は参照画素の値であり、ｉ＝０、１、２、３、４、５、６、７である。
Ｅ［ｉ］＝ａｂｓ（Ｐｉ－Ｐ８）＋ａｂｓ（Ｐ１６－ｉ－Ｐ８）
Ｅ［８］＝１
Ｐは第２の再構成画像における画素値であり、Ｅ［ｉ］は参照画素の値であり、ｉ＝０、１、２、３、４、５、６、７である。
【0234】
２回目のＡＬＦは、参照画素値に対する線形結合を目標とし、線形結合の結果を原画像の画素と１回目のＡＬＦ後の画像画素との画素値の差に近似させる。
【0235】
復号側の具体的な実現プロセスは以下のとおりである。現在のフレームの２回のフィルタリングのフィルタフラグを取得し、１つのフィルタフラグが真であれば、ＬＣＵを最小単位とし、現在のＬＣＵの２グループのフィルタフラグのうち真であるフィルタフラグがあるか否かを判断し、あれば、復号側は２セットのフィルタフラグのうち真と判断されたフィルタ係数を取得し、ＬＣＵにおける全ての画素に対して点ごとにフィルタリングを行い、具体的な過程を図１２に示す。
【0236】
実施例１１
フィルタリング過程を１回追加し、１回目のＡＬＦと同じの領域分割方式を用いるが、フィルタ形状は１回目のＡＬＦと異なるフィルタ形状を用い、且つ２回目のＡＬＦの参照画素は再構成画像における参照画素位置と中心位置との画素の差の絶対値で構成され、再構成画像は１回目のＡＬＦ後の再構成画像（すなわち第２の再構成画像）を指す。
フィルタリング過程を１回追加し、１回目のＡＬＦと同じの領域分割方式を用いるが、フィルタ形状は１回目のＡＬＦと異なるフィルタ形状を用い、且つ２回目のＡＬＦの参照画素は再構成画像における参照画素位置と中心位置との画素の差の絶対値で構成され、再構成画像は１回目のＡＬＦ後の再構成画像（すなわち第２の再構成画像）を指す。
【0237】
フィルタ形状は図７に示すフィルタ形状であり、各位置における参照画素は図８に示すとおりである。
Ｅ［ｉ］＝ａｂｓ（Ｐｉ－Ｐ１４）＋ａｂｓ（Ｐ２８－ｉ－Ｐ１４）
Ｅ［１４］＝１
Ｐｉは第２の再構成画像における画素値であり、Ｅ［ｉ］は参照画素の値であり、ｉ＝０、１、２、３、４、５、６、７、８、９、１０、１１、１２、１３である。
Ｅ［ｉ］＝ａｂｓ（Ｐｉ－Ｐ１４）＋ａｂｓ（Ｐ２８－ｉ－Ｐ１４）
Ｅ［１４］＝１
Ｐｉは第２の再構成画像における画素値であり、Ｅ［ｉ］は参照画素の値であり、ｉ＝０、１、２、３、４、５、６、７、８、９、１０、１１、１２、１３である。
【0238】
２回目のＡＬＦは、参照画素値に対する線形結合を目標とし、線形結合の結果を原画像の画素と１回目のＡＬＦ後の画像画素との画素値の差に近似させる。
【0239】
復号側の具体的な実現プロセスは以下のとおりである。現在のフレームの２回のフィルタリングのフィルタフラグを取得し、１つのフィルタフラグが真であれば、ＬＣＵを最小単位とし、現在のＬＣＵの２グループのフィルタフラグのうち真であるフィルタフラグがあるか否かを判断し、あれば、復号側は２セットのフィルタフラグのうち真と判断されたフィルタ係数を取得し、ＬＣＵにおける全ての画素に対して点ごとにフィルタリングを行い、具体的な過程を図１２に示す。
【0240】
実施例１２
フィルタリング過程を１回追加し、１回目のＡＬＦと異なる領域分割方式を用い、且つフィルタ形状は１回目のＡＬＦと異なるフィルタ形状を用い、２回目のＡＬＦの参照画素は再構成画像における参照画素位置と中心位置との画素の差の絶対値で構成され、再構成画像は１回目のＡＬＦ後の再構成画像（すなわち第２の再構成画像）を指す。
フィルタリング過程を１回追加し、１回目のＡＬＦと異なる領域分割方式を用い、且つフィルタ形状は１回目のＡＬＦと異なるフィルタ形状を用い、２回目のＡＬＦの参照画素は再構成画像における参照画素位置と中心位置との画素の差の絶対値で構成され、再構成画像は１回目のＡＬＦ後の再構成画像（すなわち第２の再構成画像）を指す。
【0241】
フィルタ形状は図７に示すフィルタ形状であり、各位置における参照画素は図８に示すとおりである。
Ｅ［ｉ］＝ａｂｓ（Ｐｉ－Ｐ１４）＋ａｂｓ（Ｐ２８－ｉ－Ｐ１４）
Ｅ［１４］＝１
Ｐは第２の再構成画像における画素値であり、Ｅ［ｉ］は参照画素の値であり、ｉ＝０、１、２、３、４、５、６、７、８、９、１０、１１、１２、１３である。
Ｅ［ｉ］＝ａｂｓ（Ｐｉ－Ｐ１４）＋ａｂｓ（Ｐ２８－ｉ－Ｐ１４）
Ｅ［１４］＝１
Ｐは第２の再構成画像における画素値であり、Ｅ［ｉ］は参照画素の値であり、ｉ＝０、１、２、３、４、５、６、７、８、９、１０、１１、１２、１３である。
【0242】
復号側の具体的な実現プロセスは以下のとおりである。現在のフレームの２回のフィルタリングのフィルタフラグを取得し、１つのフィルタフラグが真であれば、ＬＣＵを最小単位とし、現在のＬＣＵの２グループのフィルタフラグのうち真であるフィルタフラグがあるか否かを判断し、あれば、復号側は２セットのフィルタフラグのうち真と判断されたフィルタ係数を取得し、ＬＣＵにおける全ての画素に対して点ごとにフィルタリングを行い、具体的な過程を図１２に示す。
【0243】
実施例１３
フィルタリング過程を１回追加し、１回目のＡＬＦと同じの領域分割方式を用い、１回目のＡＬＦと同じのフィルタ形状を用い、且つ２回目のＡＬＦの参照画素の選択は元の方法における１回目のＡＬＦと同じであり、２回目のＡＬＦの参照画素の値は１回目のＡＬＦ後の再構成画像（すなわち第２の再構成画像）によって決定される。
フィルタリング過程を１回追加し、１回目のＡＬＦと同じの領域分割方式を用い、１回目のＡＬＦと同じのフィルタ形状を用い、且つ２回目のＡＬＦの参照画素の選択は元の方法における１回目のＡＬＦと同じであり、２回目のＡＬＦの参照画素の値は１回目のＡＬＦ後の再構成画像（すなわち第２の再構成画像）によって決定される。
【0244】
フィルタ形状は図５に示すフィルタ形状であり、各位置における参照画素は図４に示すとおりである。
Ｅ［ｉ］＝ａｂｓ（Ｐｉ－Ｐ８）＋ａｂｓ（Ｐ１６－ｉ－Ｐ８）
Ｅ［８］＝Ｐ８
ここで、Ｐｉは第２の再構成画像における画素に属し、Ｅ［ｉ］は参照画素の値であり、ｉ＝０、１、２、３、４、５、６、７である。
Ｅ［ｉ］＝ａｂｓ（Ｐｉ－Ｐ８）＋ａｂｓ（Ｐ１６－ｉ－Ｐ８）
Ｅ［８］＝Ｐ８
ここで、Ｐｉは第２の再構成画像における画素に属し、Ｅ［ｉ］は参照画素の値であり、ｉ＝０、１、２、３、４、５、６、７である。
【0245】
２回目のウィーナーフィルタリングは、参照画素値に対する線形結合を目標とし、線形結合の結果を原画像の画素値に近似させる。
【0246】
復号側の具体的な実現プロセスは以下のとおりである。現在のフレームの２回のフィルタリングのフィルタフラグを取得し、１つのフィルタフラグが真であれば、ＬＣＵを最小単位とし、現在のＬＣＵの２グループのフィルタフラグのうち真であるフィルタフラグがあるか否かを判断し、あれば、復号側は２セットのフィルタフラグのうち真と判断されたフィルタ係数を取得し、ＬＣＵにおける全ての画素に対して点ごとにフィルタリングを行い、具体的な過程を図１２に示す。
【0247】
実施例１４
フィルタリング過程を１回追加し、１回目のＡＬＦと異なる領域分割方式を用い、１回目のＡＬＦと同じのフィルタ形状を用い、且つ２回目のＡＬＦの参照画素の選択は元の方法における１回目のＡＬＦと同じであり、２回目のＡＬＦの参照画素の値は１回目のＡＬＦ後の再構成画像（すなわち第２の再構成画像）によって決定される。
フィルタリング過程を１回追加し、１回目のＡＬＦと異なる領域分割方式を用い、１回目のＡＬＦと同じのフィルタ形状を用い、且つ２回目のＡＬＦの参照画素の選択は元の方法における１回目のＡＬＦと同じであり、２回目のＡＬＦの参照画素の値は１回目のＡＬＦ後の再構成画像（すなわち第２の再構成画像）によって決定される。
【0248】
フィルタ形状は図５に示すフィルタ形状であり、各位置における参照画素は図４に示すとおりである。
Ｅ［ｉ］＝ａｂｓ（Ｐｉ－Ｐ８）＋ａｂｓ（Ｐ１６－ｉ－Ｐ８）
Ｅ［８］＝Ｐ８
ここで、Ｐｉは第２の再構成画像における画素に属し、Ｅ［ｉ］は参照画素の値であり、ｉ＝０、１、２、３、４、５、６、７である。
Ｅ［ｉ］＝ａｂｓ（Ｐｉ－Ｐ８）＋ａｂｓ（Ｐ１６－ｉ－Ｐ８）
Ｅ［８］＝Ｐ８
ここで、Ｐｉは第２の再構成画像における画素に属し、Ｅ［ｉ］は参照画素の値であり、ｉ＝０、１、２、３、４、５、６、７である。
【0249】
２回目のウィーナーフィルタリングは、参照画素値に対する線形結合を目標とし、線形結合の結果を原画像の画素値に近似させる。
【0250】
復号側の具体的な実現プロセスは以下のとおりである。現在のフレームの２回のフィルタリングのフィルタフラグを取得し、１つのフィルタフラグが真であれば、ＬＣＵを最小単位とし、現在のＬＣＵの２グループのフィルタフラグのうち真であるフィルタフラグがあるか否かを判断し、あれば、復号側は２セットのフィルタフラグのうち真と判断されたフィルタ係数を取得し、ＬＣＵにおける全ての画素に対して点ごとにフィルタリングを行い、具体的な過程を図１２に示す。
【0251】
実施例１５
フィルタリング過程を１回追加し、１回目のＡＬＦと同じの領域分割方式を用い、１回目のＡＬＦと異なるフィルタ形状を用い、２回目のＡＬＦの参照画素の選択は元の方法における１回目のＡＬＦと同じであり、２回目のＡＬＦの参照画素の値は１回目のＡＬＦ後の再構成画像（すなわち第２の再構成画像）によって決定される。
フィルタリング過程を１回追加し、１回目のＡＬＦと同じの領域分割方式を用い、１回目のＡＬＦと異なるフィルタ形状を用い、２回目のＡＬＦの参照画素の選択は元の方法における１回目のＡＬＦと同じであり、２回目のＡＬＦの参照画素の値は１回目のＡＬＦ後の再構成画像（すなわち第２の再構成画像）によって決定される。
【0252】
フィルタ形状は図７に示すフィルタ形状であり、各位置における参照画素は図８に示すとおりである。
Ｅ［ｉ］＝Ｐｉ＋Ｐ２８－ｉ
Ｅ［１４］＝Ｐ１４
ここで、Ｐｉは第２の再構成画像における画素であり、Ｅ［ｉ］は参照画素の値であり、ｉ＝０、１、２、３、４、５、６、７、８、９、１０、１１、１２、１３である。
Ｅ［ｉ］＝Ｐｉ＋Ｐ２８－ｉ
Ｅ［１４］＝Ｐ１４
ここで、Ｐｉは第２の再構成画像における画素であり、Ｅ［ｉ］は参照画素の値であり、ｉ＝０、１、２、３、４、５、６、７、８、９、１０、１１、１２、１３である。
【0253】
２回目のウィーナーフィルタリングは、参照画素値に対する線形結合を目標とし、線形結合の結果を原画像の画素値に近似させる。
【0254】
復号側の具体的な実現プロセスは以下のとおりである。現在のフレームの２回のフィルタリングのフィルタフラグを取得し、１つのフィルタフラグが真であれば、ＬＣＵを最小単位とし、現在のＬＣＵの２グループのフィルタフラグのうち真であるフィルタフラグがあるか否かを判断し、あれば、復号側は２セットのフィルタフラグのうち真と判断されたフィルタ係数を取得し、ＬＣＵにおける全ての画素に対して点ごとにフィルタリングを行い、具体的な過程を図１２に示す。
【0255】
実施例１６
フィルタリング過程を１回追加し、１回目のＡＬＦと異なる領域分割方式を用い、１回目のＡＬＦと異なるフィルタ形状を用い、２回目のＡＬＦの参照画素の選択は元の方法における１回目のＡＬＦと同じであり、２回目のＡＬＦの参照画素の値は１回目のＡＬＦ後の再構成画像（すなわち第２の再構成画像）によって決定される。
フィルタリング過程を１回追加し、１回目のＡＬＦと異なる領域分割方式を用い、１回目のＡＬＦと異なるフィルタ形状を用い、２回目のＡＬＦの参照画素の選択は元の方法における１回目のＡＬＦと同じであり、２回目のＡＬＦの参照画素の値は１回目のＡＬＦ後の再構成画像（すなわち第２の再構成画像）によって決定される。
【0256】
フィルタ形状は図７に示すフィルタ形状であり、各位置における参照画素は図８に示すとおりである。
Ｅ［ｉ］＝Ｐｉ＋Ｐ２８－ｉ
Ｅ［１４］＝Ｐ１４
ここで、Ｐｉは第２の再構成画像における画素であり、Ｅ［ｉ］は参照画素の値であり、ｉ＝０、１、２、３、４、５、６、７、８、９、１０、１１、１２、１３である。
Ｅ［ｉ］＝Ｐｉ＋Ｐ２８－ｉ
Ｅ［１４］＝Ｐ１４
ここで、Ｐｉは第２の再構成画像における画素であり、Ｅ［ｉ］は参照画素の値であり、ｉ＝０、１、２、３、４、５、６、７、８、９、１０、１１、１２、１３である。
【0257】
２回目のウィーナーフィルタリングは、参照画素値に対する線形結合を目標とし、線形結合の結果を原画像の画素値に近似させる。
【0258】
復号側の具体的な実現プロセスは以下のとおりである。現在のフレームの２回のフィルタリングのフィルタフラグを取得し、１つのフィルタフラグが真であれば、ＬＣＵを最小単位とし、現在のＬＣＵの２グループのフィルタフラグのうち真であるフィルタフラグがあるか否かを判断し、あれば、復号側は２セットのフィルタフラグのうち真と判断されたフィルタ係数を取得し、ＬＣＵにおける全ての画素に対して点ごとにフィルタリングを行い、具体的な過程を図１２に示す。
【0259】
実施例１７
符号化側はＣＴＵ決定を１回追加し、従来の方法において符号化側のＣＴＵ決定のフローを図１３に示し、ＣＴＵ決定の数を４に変更するが、３回目のＣＴＵ決定を完了した後、フラグが真であるＬＣＵに対して、元のフィルタ係数の代わりに、新しいフィルタ係数を再計算し、新しいフィルタ係数を計算するとき、前回の係数が０である位置に対して、最後に係数を計算する時に、これらの位置における参照画素の値を０に設定し、すなわち図１３における破線枠部分を変更する。
符号化側はＣＴＵ決定を１回追加し、従来の方法において符号化側のＣＴＵ決定のフローを図１３に示し、ＣＴＵ決定の数を４に変更するが、３回目のＣＴＵ決定を完了した後、フラグが真であるＬＣＵに対して、元のフィルタ係数の代わりに、新しいフィルタ係数を再計算し、新しいフィルタ係数を計算するとき、前回の係数が０である位置に対して、最後に係数を計算する時に、これらの位置における参照画素の値を０に設定し、すなわち図１３における破線枠部分を変更する。
【0260】
図１３に示すように、ＣＴＵ決定のフローは以下を含んでもよい。
【0261】
１回目のＣＴＵ決定を行うとき、現在のフレーム画像の現在のＬＣＵのフィルタ係数を取得することができ、一方では、現在のＬＣＵにおけるいずれかの画素に対して、フィルタ係数及び対応する位置の参照画素の値に基づいて加重加算を行って、当該画素に対応する加重加算結果を得、さらに、現在のＬＣＵの各画素の加重加算結果を加算し、結果をｃｏｓｔ１（現在のＬＣＵに対してフィルタリングを行う損失の推定値として理解することができる）と記すことができる。
【0262】
他方では、現在のＬＣＵにおけるいずれかの画素に対して、中心値が１であり、残りの値が０であるフィルタで、フィルタ係数及び対応する位置の参照画素の値に基づいて加重加算を行って、当該画素に対応する加重加算結果を得、さらに、現在のＬＣＵの各画素の加重加算結果を加算し、結果をｃｏｓｔ０（現在のＬＣＵに対してフィルタリングを行わない損失の推定値として理解することができる）と記すことができる。
【0263】
ｃｏｓｔ１＜ｃｏｓｔ０であれば、現在のＬＣＵに対してウィーナーフィルタリングを開始すると決定し、そうでなければ、現在のＬＣＵに対してウィーナーフィルタリングを開始しないと決定する。
【0264】
上記方式に従って、現在のフレーム画像において各ＬＣＵがウィーナーフィルタリングを開始するか否かを決定した後、全フレームの画像がフィルタフラグを開始する損失ｃｏｓｔ２及びフィルタフラグをオフにする損失ｃｏｓｔ３を計算することができる。
【0265】
ｃｏｓｔ２＜ｃｏｓｔ３であれば、現在のフレーム画像に対してフィルタリングを行うと決定し、そうでなければ、現在のフレーム画像に対してフィルタリングを行わないと決定する。
【0266】
これをもって、１回のＣＴＵ決定が完了する。
【0267】
完了したＣＴＵ決定の回数が３回以下の場合、ウィーナーフィルタリングを開始するＬＣＵに対応するフィルタ係数に従って、フィルタ係数が０である参照画素位置の参照画素の値を０に設定し、更新された参照画素の値に基づいて、元のフィルタ係数の代わりに、新しいフィルタ係数を計算し、新しいフィルタ係数に基づいて次回のＣＴＵ決定を行うことができる。
【0268】
完了したＣＴＵ決定の回数が３回より大きい（すなわち４回に達する）場合、現在のフィルタ係数を用いて現在のＬＣＵに対してフィルタリングを行って、ｃｏｓｔ４を得、ｃｏｓｔ４と、現在のＬＣＵに対してフィルタリングを行わないｃｏｓｔ５とを比較する。
【0269】
ｃｏｓｔ４＜ｃｏｓｔ５であれば、現在のＬＣＵに対してウィーナーフィルタリングを開始し、又は、現在のＬＣＵに対してウィーナーフィルタリングを開始しないと決定する。
【0270】
実施例１８
毎回のＣＴＵ決定の後に、フラグが真であるＬＣＵに対して、元のフィルタ係数の代わりに、新しいフィルタ係数を再計算する必要がある。したがって、新しいフィルタ係数を計算するたびに、前回の係数が０である位置に対して、次回係数を計算する時に、その位置における参照画素の値を０に設定する。
毎回のＣＴＵ決定の後に、フラグが真であるＬＣＵに対して、元のフィルタ係数の代わりに、新しいフィルタ係数を再計算する必要がある。したがって、新しいフィルタ係数を計算するたびに、前回の係数が０である位置に対して、次回係数を計算する時に、その位置における参照画素の値を０に設定する。
【0271】
実施例１９、補正フィルタリング動作の修正
７ｘ７の十字形に５ｘ５の方形が加えられたフィルタのサンプルについては、５．１～５．３に記載された適応補正フィルタリング動作により取得し、又は以下の方式により取得することができる。
７ｘ７の十字形に５ｘ５の方形が加えられたフィルタのサンプルについては、５．１～５．３に記載された適応補正フィルタリング動作により取得し、又は以下の方式により取得することができる。
【0272】
境界領域について：
現在の適応補正フィルタリングユニットの左境界外が画像境界であり、又はパッチ境界外に位置し且つｃｒｏｓｓ＿ｐａｔｃｈ＿ｌｏｏｐｆｉｌｔｅｒ＿ｅｎａｂｌｅ＿ｆｌａｇの値が「０」であれば、左境界外が存在せず、そうでなければ、左境界外は現在の適応補正フィルタリングユニットを左へ３つのサンプル点移す箇所から現在の適応補正フィルタリングユニットまでの領域である。
現在の適応補正フィルタリングユニットの左境界外が画像境界であり、又はパッチ境界外に位置し且つｃｒｏｓｓ＿ｐａｔｃｈ＿ｌｏｏｐｆｉｌｔｅｒ＿ｅｎａｂｌｅ＿ｆｌａｇの値が「０」であれば、左境界外が存在せず、そうでなければ、左境界外は現在の適応補正フィルタリングユニットを左へ３つのサンプル点移す箇所から現在の適応補正フィルタリングユニットまでの領域である。
【0273】
同様に、現在の適応補正フィルタリングユニットの右境界外が画像境界であり、又はパッチ境界外に位置し且つｃｒｏｓｓ＿ｐａｔｃｈ＿ｌｏｏｐｆｉｌｔｅｒ＿ｅｎａｂｌｅ＿ｆｌａｇの値が「０」であれば、右境界外が存在せず、そうでなければ、右境界外領域は現在の適応補正フィルタリングユニットを左へ３つのサンプル点移す箇所から現在の適応補正フィルタリングユニットまでの領域である。
【0274】
一例として、境界領域は左境界外領域及び右境界外領域を含む。
【0275】
適応補正フィルタリング過程において用いられるサンプルが適応補正フィルタリングユニット内のサンプルである場合、当該サンプルを直接用いてフィルタリングを行い、そうでなければ、以下の方式に従ってフィルタリングを行う。
【0276】
１９．１、当該サンプルが画像境界外にあり、又はパッチ境界外にあり且つｃｒｏｓｓ＿ｐａｔｃｈ＿ｌｏｏｐｆｉｌｔｅｒ＿ｅｎａｂｌｅ＿ｆｌａｇ（クロスパッチ境界フィルタフラグ）の値が「０」である場合、
１９．１．１、当該サンプルが適応補正フィルタリングユニットの左上隅、左下隅、右上隅又は右下隅に位置する１番目のサンプル点であれば、当該サンプルの代わりに、適応補正フィルタリングユニット内の当該サンプルに最も近いサンプルを用いてフィルタリングを行い、
１９．１．２、そうでなければ、当該サンプルの代わりに、適応補正フィルタリングユニットにおける境界領域内の当該サンプルに最も近いサンプルを用いて、フィルタリングを行う。
１９．１．１、当該サンプルが適応補正フィルタリングユニットの左上隅、左下隅、右上隅又は右下隅に位置する１番目のサンプル点であれば、当該サンプルの代わりに、適応補正フィルタリングユニット内の当該サンプルに最も近いサンプルを用いてフィルタリングを行い、
１９．１．２、そうでなければ、当該サンプルの代わりに、適応補正フィルタリングユニットにおける境界領域内の当該サンプルに最も近いサンプルを用いて、フィルタリングを行う。
【0277】
１９．２、当該サンプルが画像境界外になく、且つ『パッチ境界外にあり且つｃｒｏｓｓ＿ｐａｔｃｈ＿ｌｏｏｐｆｉｌｔｅｒ＿ｅｎａｂｌｅ＿ｆｌａｇの値が「０」である』を満たさない場合、当該サンプルが適応補正フィルタリングユニットの上境界外又は下境界外にあるとき、
１９．２．１、当該サンプルが適応補正フィルタリングユニットの左上隅、左下隅、右上隅又は右下隅に位置する１番目のサンプル点である場合、当該サンプルの代わりに、適応補正フィルタリングユニット内の当該サンプルに最も近いサンプルを用いてフィルタリングを行い、
１９．２．２、そうでなければ、当該サンプルの代わりに、適応補正フィルタリングユニットにおける境界領域内の当該サンプルに最も近いサンプルを用いてフィルタリングを行う。
１９．２．１、当該サンプルが適応補正フィルタリングユニットの左上隅、左下隅、右上隅又は右下隅に位置する１番目のサンプル点である場合、当該サンプルの代わりに、適応補正フィルタリングユニット内の当該サンプルに最も近いサンプルを用いてフィルタリングを行い、
１９．２．２、そうでなければ、当該サンプルの代わりに、適応補正フィルタリングユニットにおける境界領域内の当該サンプルに最も近いサンプルを用いてフィルタリングを行う。
【0278】
１９．３、当該サンプルが適応補正フィルタリングユニットの上境界外になく、適応補正フィルタリングユニットの下境界外にもない場合、当該サンプルを直接用いてフィルタリングを行う。
【0279】
一例として、実施例１～実施例１８のうちいずれかの実施例は実施例１９における方式を用いて適応補正フィルタリング動作を行ってもよい。
【0280】
以上、本発明にて提供される方法について説明した。以下、本発明にて提供される装置について説明する。
【0281】
図１５に示すように、図１５は本発明の実施例にて提供されるフィルタリング装置の構造概略図であり、ここで、当該フィルタリング装置は符号化／復号機器に適用することができ、当該装置は決定ユニット１５１０及びフィルタリングユニット１５２０を含んでもよく、
前記フィルタリングユニット１５２０は、前記決定ユニット１５１０が現在のフレーム画像の現在のＬＣＵに対してウィーナーフィルタリングを開始すると決定したとき、前記現在のＬＣＵの参照画素及びウィーナーフィルタのフィルタ係数を取得し、それらに基づいて、前記現在のＬＣＵの画素に対して一つ一つウィーナーフィルタリングを行うために用いられ、
一例として、前記ウィーナーフィルタは第２のウィーナーフィルタであり、前記第２のウィーナーフィルタは第１のウィーナーフィルタを基に形状拡張を行って得られたものであり、前記第１のウィーナーフィルタは７＊７の十字形に３＊３の方形が加えられた形状となる中心対称フィルタであり、前記参照画素の値はフィルタリング前の再構成画像の画素値に基づいて決定される。
前記フィルタリングユニット１５２０は、前記決定ユニット１５１０が現在のフレーム画像の現在のＬＣＵに対してウィーナーフィルタリングを開始すると決定したとき、前記現在のＬＣＵの参照画素及びウィーナーフィルタのフィルタ係数を取得し、それらに基づいて、前記現在のＬＣＵの画素に対して一つ一つウィーナーフィルタリングを行うために用いられ、
一例として、前記ウィーナーフィルタは第２のウィーナーフィルタであり、前記第２のウィーナーフィルタは第１のウィーナーフィルタを基に形状拡張を行って得られたものであり、前記第１のウィーナーフィルタは７＊７の十字形に３＊３の方形が加えられた形状となる中心対称フィルタであり、前記参照画素の値はフィルタリング前の再構成画像の画素値に基づいて決定される。
【0282】
可能な一実施形態において、前記第２のウィーナーフィルタは７＊７の十字形に５＊５の方形が加えられた形状となる中心対称フィルタである。
【0283】
可能な一実現形態において、前記第２のウィーナーフィルタのフィルタ係数は１５個を含む。
【0284】
可能な一実施形態において、前記決定ユニット１５１０は、現在のフレーム画像に対してフィルタリングを行うか否かを決定するために用いられ、
前記フィルタリングユニット１５２０は、具体的には、前記決定ユニット１５１０が前記現在のフレーム画像に対してフィルタリングを行うと決定したとき、前記現在のＬＣＵに対してウィーナーフィルタリングを開始するか否かを決定し、前記現在のＬＣＵに対してウィーナーフィルタリングを開始すると決定したとき、前記現在のＬＣＵの参照画素及びウィーナーフィルタのフィルタ係数を取得し、それらに基づいて、前記現在のＬＣＵの画素に対して一つ一つウィーナーフィルタリングを行うために用いられる。
前記フィルタリングユニット１５２０は、具体的には、前記決定ユニット１５１０が前記現在のフレーム画像に対してフィルタリングを行うと決定したとき、前記現在のＬＣＵに対してウィーナーフィルタリングを開始するか否かを決定し、前記現在のＬＣＵに対してウィーナーフィルタリングを開始すると決定したとき、前記現在のＬＣＵの参照画素及びウィーナーフィルタのフィルタ係数を取得し、それらに基づいて、前記現在のＬＣＵの画素に対して一つ一つウィーナーフィルタリングを行うために用いられる。
【0285】
図１６に示すように、図１６は本発明の実施例にて提供されるフィルタリング装置の構造概略図であり、ここで、当該フィルタリング装置は符号化／復号機器に適用することができ、当該装置は決定ユニット１６１０及びフィルタリングユニット１６２０を含んでもよく、
前記フィルタリングユニット１６２０は、前記決定ユニット１６１０が現在の画像の現在のＬＣＵに対してウィーナーフィルタリングを開始すると決定したとき、前記現在のＬＣＵに対して１回目のウィーナーフィルタリング及び２回目のウィーナーフィルタリングを行うために用いられ、
前記フィルタリングユニット１６２０は、具体的に、前記現在のＬＣＵに対して１回目のウィーナーフィルタリングを行うウィーナーフィルタのフィルタ係数及び参照画素、並びに前記現在のＬＣＵに対して２回目のウィーナーフィルタリングを行うウィーナーフィルタ係数及び参照画素を取得し、それらに基づいて前記現在のＬＣＵの画素に対して一つ一つ１回目のウィーナーフィルタリング及び２回目のウィーナーフィルタリングを行うために用いられる。
前記フィルタリングユニット１６２０は、前記決定ユニット１６１０が現在の画像の現在のＬＣＵに対してウィーナーフィルタリングを開始すると決定したとき、前記現在のＬＣＵに対して１回目のウィーナーフィルタリング及び２回目のウィーナーフィルタリングを行うために用いられ、
前記フィルタリングユニット１６２０は、具体的に、前記現在のＬＣＵに対して１回目のウィーナーフィルタリングを行うウィーナーフィルタのフィルタ係数及び参照画素、並びに前記現在のＬＣＵに対して２回目のウィーナーフィルタリングを行うウィーナーフィルタ係数及び参照画素を取得し、それらに基づいて前記現在のＬＣＵの画素に対して一つ一つ１回目のウィーナーフィルタリング及び２回目のウィーナーフィルタリングを行うために用いられる。
【0286】
可能な一実施形態において、前記決定ユニット１６１０は、現在のフレーム画像に対してフィルタリングを行うか否かを決定するために用いられ、
前記フィルタリングユニット１６２０は、具体的には、前記決定ユニット１６１０が前記現在のフレーム画像に対してフィルタリングを行うと決定したとき、前記現在のＬＣＵに対してウィーナーフィルタリングを開始するか否かを決定し、前記現在のＬＣＵに対してウィーナーフィルタリングを開始すると決定したとき、前記現在のＬＣＵに対して１回目のウィーナーフィルタリング及び２回目のウィーナーフィルタリングを行うために用いられる。
前記フィルタリングユニット１６２０は、具体的には、前記決定ユニット１６１０が前記現在のフレーム画像に対してフィルタリングを行うと決定したとき、前記現在のＬＣＵに対してウィーナーフィルタリングを開始するか否かを決定し、前記現在のＬＣＵに対してウィーナーフィルタリングを開始すると決定したとき、前記現在のＬＣＵに対して１回目のウィーナーフィルタリング及び２回目のウィーナーフィルタリングを行うために用いられる。
【0287】
可能な一実施形態において、前記決定ユニット１６１０は、現在のフレーム画像に対して１回目のフィルタリングを行うか否か、及び現在のフレーム画像に対して２回目のフィルタリングを行うか否かを決定するために用いられ、
前記決定ユニット１６１０は、さらに、現在のフレーム画像に対して１回目のフィルタリングを行い、且つ現在のフレーム画像に対して２回目のフィルタリングを行うと決定したとき、現在のＬＣＵに対して１回目のウィーナーフィルタリングを開始するか否か、及び現在のＬＣＵに対して２回目のウィーナーフィルタリングを開始するか否かを決定するために用いられ、
前記フィルタリングユニット１６２０は、具体的に、前記決定ユニット１６１０が前記現在のＬＣＵに対して１回目のウィーナーフィルタリングを行い、且つ前記現在のＬＣＵに対し２回目のウィーナーフィルタリングを開始すると決定したとき、前記現在のＬＣＵに対して１回目のウィーナーフィルタリング及び２回目のウィーナーフィルタリングを行うために用いられる。
前記決定ユニット１６１０は、さらに、現在のフレーム画像に対して１回目のフィルタリングを行い、且つ現在のフレーム画像に対して２回目のフィルタリングを行うと決定したとき、現在のＬＣＵに対して１回目のウィーナーフィルタリングを開始するか否か、及び現在のＬＣＵに対して２回目のウィーナーフィルタリングを開始するか否かを決定するために用いられ、
前記フィルタリングユニット１６２０は、具体的に、前記決定ユニット１６１０が前記現在のＬＣＵに対して１回目のウィーナーフィルタリングを行い、且つ前記現在のＬＣＵに対し２回目のウィーナーフィルタリングを開始すると決定したとき、前記現在のＬＣＵに対して１回目のウィーナーフィルタリング及び２回目のウィーナーフィルタリングを行うために用いられる。
【0288】
可能な一実施形態において、前記現在のＬＣＵに対して１回目のウィーナーフィルタリングを行うウィーナーフィルタ及び２回目のウィーナーフィルタリングを行うウィーナーフィルタはいずれも第１のウィーナーフィルタであり、又は、
前記現在のＬＣＵに対して１回目のウィーナーフィルタリングを行うウィーナーフィルタ及び２回目のウィーナーフィルタリングを行うウィーナーフィルタはいずれも第２のウィーナーフィルタであり、又は、
前記現在のＬＣＵに対して１回目のウィーナーフィルタリングを行うウィーナーフィルタは第１のウィーナーフィルタであり、前記現在のＬＣＵに対して２回目のウィーナーフィルタリングを行うウィーナーフィルタは第２のウィーナーフィルタであり、又は、
前記現在のＬＣＵに対して１回目のウィーナーフィルタリングを行うウィーナーフィルタは第２のウィーナーフィルタであり、前記現在のＬＣＵに対して２回目のウィーナーフィルタリングを行うウィーナーフィルタは第１のウィーナーフィルタである。
前記現在のＬＣＵに対して１回目のウィーナーフィルタリングを行うウィーナーフィルタ及び２回目のウィーナーフィルタリングを行うウィーナーフィルタはいずれも第２のウィーナーフィルタであり、又は、
前記現在のＬＣＵに対して１回目のウィーナーフィルタリングを行うウィーナーフィルタは第１のウィーナーフィルタであり、前記現在のＬＣＵに対して２回目のウィーナーフィルタリングを行うウィーナーフィルタは第２のウィーナーフィルタであり、又は、
前記現在のＬＣＵに対して１回目のウィーナーフィルタリングを行うウィーナーフィルタは第２のウィーナーフィルタであり、前記現在のＬＣＵに対して２回目のウィーナーフィルタリングを行うウィーナーフィルタは第１のウィーナーフィルタである。
【0289】
ここで、前記第２のウィーナーフィルタは第１のウィーナーフィルタを基に形状拡張を行って得られたものであり、前記第１のウィーナーフィルタは７＊７の十字形に３＊３の方形が加えられた中心対称フィルタである。
【0290】
可能な一実施形態において、前記第２のウィーナーフィルタは７＊７の十字形に５＊５の方形が加えられた中心対称フィルタである。
【0291】
可能な一実施形態において、前記現在のＬＣＵに対して１回目のウィーナーフィルタリングを行う参照画素の値は第１の方式に従って第１の再構成画像から取得され、前記第１の再構成画像は１回目のウィーナーフィルタリング前の再構成画像であり、
前記現在のＬＣＵに対して２回目のウィーナーフィルタリングを行う参照画素の値は第２の方式に従って前記第１の再構成画像から取得される。
前記現在のＬＣＵに対して２回目のウィーナーフィルタリングを行う参照画素の値は第２の方式に従って前記第１の再構成画像から取得される。
【0292】
可能な一実施形態において、前記第２の方式は以下のとおりである。
前記現在のＬＣＵにおける各画素に対応する参照画素の値は第１の再構成画像における各参照画素位置の画素値と中心位置の画素値との差の絶対値に基づいて決定される。
前記現在のＬＣＵにおける各画素に対応する参照画素の値は第１の再構成画像における各参照画素位置の画素値と中心位置の画素値との差の絶対値に基づいて決定される。
【0293】
可能な一実施形態において、前記現在のＬＣＵに対する１回目のウィーナーフィルタリングと、前記現在のＬＣＵに対する２回目のウィーナーフィルタリングとを並行して実行する。
【0294】
可能な一実施形態において、前記現在のＬＣＵに対して１回目のウィーナーフィルタリングを行う参照画素の値は第１の再構成画像における画素値に基づいて決定され、前記第１の再構成画像は１回目のウィーナーフィルタリング前の再構成画像であり、
前記現在のＬＣＵに対して２回目のウィーナーフィルタリングを行う参照画素の値は第２の再構成画像における画素値によって決定され、前記第２の再構成画像は１回目のウィーナーフィルタリング後の再構成画像である。
前記現在のＬＣＵに対して２回目のウィーナーフィルタリングを行う参照画素の値は第２の再構成画像における画素値によって決定され、前記第２の再構成画像は１回目のウィーナーフィルタリング後の再構成画像である。
【0295】
可能な一実施形態において、前記現在のＬＣＵに対して２回目のウィーナーフィルタリングを行う参照画素の値は第２の再構成画像における各参照画素位置の画素値と中心位置の画素値との差の絶対値に基づいて決定される。
【0296】
可能な一実施形態において、前記フィルタリングユニットは、さらに、現在のフレーム画像に対してＬＣＵの規格に基づいて領域分割を行い、１つの領域に分割されたＬＣＵに同じフィルタパラメータを配置するために用いられ、前記フィルタパラメータはウィーナーフィルタリングを行うフィルタ及びフィルタ係数、並びに参照画素を含み、ここで、前記分割方式は１種を含むがそれに限定されない。
【0297】
可能な一実施形態において、前記フィルタリング装置が符号化機器に適用される場合、
前記決定ユニット１６１０は、さらに、３回のＣＴＵ決定を完了したとき、前記３回のＣＴＵ決定の後にウィーナーフィルタリングを開始すると決定されたＬＣＵに対して、３回のＣＴＵ決定の後に保留された当該ＬＣＵに対してウィーナーフィルタリングを行う第１グループのフィルタ係数を取得し、フィルタ係数が０である参照画素位置の参照画素の値を０に設定し、更新された参照画素の値に基づいて、第２グループのフィルタ係数を計算するために用いられる。
前記決定ユニット１６１０は、さらに、３回のＣＴＵ決定を完了したとき、前記３回のＣＴＵ決定の後にウィーナーフィルタリングを開始すると決定されたＬＣＵに対して、３回のＣＴＵ決定の後に保留された当該ＬＣＵに対してウィーナーフィルタリングを行う第１グループのフィルタ係数を取得し、フィルタ係数が０である参照画素位置の参照画素の値を０に設定し、更新された参照画素の値に基づいて、第２グループのフィルタ係数を計算するために用いられる。
【0298】
前記決定ユニット１６１０は、さらに、第２グループのフィルタ係数に基づいて４回目のＣＴＵ決定を行い、前記現在のフレーム画像の各ＬＣＵがウィーナーフィルタリングを開始するか否かを判断するために用いられる。
【0299】
可能な一実施形態において、前記フィルタリング装置が符号化機器に適用される場合、
前記決定ユニット１６１０は、さらに、ＣＴＵ決定を１回完了するたびに、今回のＣＴＵ決定の後にウィーナーフィルタリングを開始すると決定されたＬＣＵに対して、今回のＣＴＵ決定の後に保留された当該ＬＣＵに対してウィーナーフィルタリングを行う第１グループのフィルタ係数を取得し、当該フィルタ係数が０である参照画素位置の参照画素の値を０に設定し、更新された参照画素の値に基づいて、第２グループのフィルタ係数を計算するために用いられる。
前記決定ユニット１６１０は、さらに、ＣＴＵ決定を１回完了するたびに、今回のＣＴＵ決定の後にウィーナーフィルタリングを開始すると決定されたＬＣＵに対して、今回のＣＴＵ決定の後に保留された当該ＬＣＵに対してウィーナーフィルタリングを行う第１グループのフィルタ係数を取得し、当該フィルタ係数が０である参照画素位置の参照画素の値を０に設定し、更新された参照画素の値に基づいて、第２グループのフィルタ係数を計算するために用いられる。
【0300】
前記決定ユニット１６１０は、さらに、第２グループのフィルタ係数に基づいて次回のＣＴＵ決定を行い、前記現在のフレーム画像の各ＬＣＵがウィーナーフィルタリングを開始するか否かを判断するために用いられる。
【0301】
図１７に示すように、図１７は本発明の実施例にて提供されるフィルタリング装置の構造概略図であり、ここで、当該フィルタリング装置は符号化／復号機器に適用することができ、当該装置はフィルタリングユニット１７１０及び決定ユニット１７２０を含んでもよく、
前記フィルタリングユニット１７１０は、３回のＣＴＵ決定を完了したとき、前記３回のＣＴＵ決定の後にウィーナーフィルタリングを開始すると決定されたＬＣＵに対して、３回のＣＴＵ決定の後に保留された当該ＬＣＵに対してウィーナーフィルタリングを行って得た第１グループのフィルタ係数を取得し、フィルタ係数が０である参照画素位置の参照画素の値を０に設定し、更新された参照画素の値に基づいて、第２グループのフィルタ係数を計算するために用いられ、
前記決定ユニット１７２０は、第２グループのフィルタ係数に基づいて４回目のＣＴＵ決定を行い、前記現在のフレーム画像の各ＬＣＵがウィーナーフィルタリングを開始するか否かを判断するために用いられる。
前記フィルタリングユニット１７１０は、３回のＣＴＵ決定を完了したとき、前記３回のＣＴＵ決定の後にウィーナーフィルタリングを開始すると決定されたＬＣＵに対して、３回のＣＴＵ決定の後に保留された当該ＬＣＵに対してウィーナーフィルタリングを行って得た第１グループのフィルタ係数を取得し、フィルタ係数が０である参照画素位置の参照画素の値を０に設定し、更新された参照画素の値に基づいて、第２グループのフィルタ係数を計算するために用いられ、
前記決定ユニット１７２０は、第２グループのフィルタ係数に基づいて４回目のＣＴＵ決定を行い、前記現在のフレーム画像の各ＬＣＵがウィーナーフィルタリングを開始するか否かを判断するために用いられる。
【0302】
可能な一実施形態において、前記決定ユニット１７２０は、さらに、ＣＴＵ決定を１回完了するたびに、今回のＣＴＵ決定の後にウィーナーフィルタリングを開始すると決定されたＬＣＵに対して、今回のＣＴＵ決定の後に保留された当該ＬＣＵに対してウィーナーフィルタリングを行う第１グループのフィルタ係数を取得し、当該フィルタ係数が０である参照画素位置の参照画素の値を０に設定し、更新された参照画素の値に基づいて、第２グループのフィルタ係数を計算するために用いられ、
前記決定ユニット１７２０は、さらに、第２グループのフィルタ係数に基づいて次回のＣＴＵ決定を行い、前記現在のフレーム画像の各ＬＣＵがウィーナーフィルタリングを開始するか否かを判断するために用いられる。
前記決定ユニット１７２０は、さらに、第２グループのフィルタ係数に基づいて次回のＣＴＵ決定を行い、前記現在のフレーム画像の各ＬＣＵがウィーナーフィルタリングを開始するか否かを判断するために用いられる。
【0303】
可能な一実施形態において、前記フィルタリングユニット１７１０は、さらに、前記決定ユニット１７２０が現在のフレーム画像の現在のＬＣＵに対してウィーナーフィルタリングを開始すると決定したとき、前記現在のＬＣＵの参照画素及びウィーナーフィルタのフィルタ係数を取得し、それらに基づいて、前記現在のＬＣＵの画素に対して一つ一つウィーナーフィルタリングを行うために用いられ、
ここで、前記ウィーナーフィルタは第２のウィーナーフィルタであり、前記第２のウィーナーフィルタは第１のウィーナーフィルタを基に形状拡張を行って得られたものであり、前記第１のウィーナーフィルタは７＊７の十字形に３＊３の方形が加えられた形状となる中心対称フィルタであり、前記参照画素の値はフィルタリング前の再構成画像の画素値に基づいて決定され、前記第２のウィーナーフィルタは７＊７の十字形に５＊５の方形が加えられた形状となる中心対称フィルタである。
ここで、前記ウィーナーフィルタは第２のウィーナーフィルタであり、前記第２のウィーナーフィルタは第１のウィーナーフィルタを基に形状拡張を行って得られたものであり、前記第１のウィーナーフィルタは７＊７の十字形に３＊３の方形が加えられた形状となる中心対称フィルタであり、前記参照画素の値はフィルタリング前の再構成画像の画素値に基づいて決定され、前記第２のウィーナーフィルタは７＊７の十字形に５＊５の方形が加えられた形状となる中心対称フィルタである。
【0304】
図１８に示すように、本発明の実施例にて提供される復号機器のハードウェア構造の概略図である。当該復号機器はプロセッサ１８０１と、機械実行可能な命令が記憶されている機械可読記憶媒体１８０２とを含んでもよい。プロセッサ１８０１と機械可読記憶媒体１８０２とはシステムバス１８０３を介して通信可能である。また、プロセッサ１８０１は、機械可読記憶媒体１８０２中のフィルタリング制御ロジックに対応する機械実行可能な命令を読み取り、実行することにより、上述した復号機器のフィルタリング方法を実行することができる。
【0305】
本明細書で言及される機械可読記憶媒体１８０２は、任意の電子的、磁気的、光学的、又は他の物理的記憶装置とすることができ、例えば、実行可能な命令、データなどの情報を含むか、又は記憶することができる。例えば、機械可読記憶媒体は、ＲＡＭ（Ｒａｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ、ランダムアクセスメモリ）、揮発性メモリ、不揮発性メモリ、フラッシュメモリ、記憶ドライブ（例えばハードディスクドライブ）、ソリッドステートハードディスク、任意のタイプの記憶ディスク（例えば光ディスク、ｄｖｄなど）、若しくは類似の記憶媒体、又はそれらの組み合わせであってもよい。
【0306】
いくつかの実施例において、機械実行可能な命令が記憶されている機械可読記憶媒体であって、前記機械実行可能な命令がプロセッサにより実行されると、上述した復号機器のフィルタリング方法を実施させる、機械可読記憶媒体がさらに提供される。例えば、前記機械可読記憶媒体はＲＯＭ、ＲＡＭ、ＣＤ－ＲＯＭ、磁気テープ、フロッピーディスク、及び光データ記憶装置などであってもよい。
【0307】
図１９に示すように、本発明の実施例にて提供される符号化機器のハードウェア構造の概略図である。当該符号化機器はプロセッサ１９０１と、機械実行可能な命令が記憶されている機械可読記憶媒体１９０２とを含んでもよい。プロセッサ１９０１と機械可読記憶媒体１９０２とはシステムバス１９０３を介して通信可能である。また、プロセッサ１９０１は、機械可読記憶媒体１９０２中のフィルタリング制御ロジックに対応する機械実行可能な命令を読み取り、実行することにより、上述した符号化機器のフィルタリング方法を実行することができる。
【0308】
本明細書で言及される機械可読記憶媒体１９０２は、任意の電子的、磁気的、光学的、又は他の物理的記憶装置とすることができ、例えば、実行可能な命令、データなどの情報を含むか、又は記憶することができる。例えば、機械可読記憶媒体は、ＲＡＭ（Ｒａｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ、ランダムアクセスメモリ）、揮発性メモリ、不揮発性メモリ、フラッシュメモリ、記憶ドライブ（例えばハードディスクドライブ）、ソリッドステートハードディスク、任意のタイプの記憶ディスク（例えば光ディスク、ｄｖｄなど）、若しくは類似の記憶媒体、又はそれらの組み合わせであってもよい。
【0309】
いくつかの実施例において、機械実行可能な命令が記憶されている機械可読記憶媒体であって、前記機械実行可能な命令がプロセッサにより実行されると、上述した符号化機器のフィルタリング方法を実施させる、機械可読記憶媒体がさらに提供される。例えば、前記機械可読記憶媒体はＲＯＭ、ＲＡＭ、ＣＤ－ＲＯＭ、磁気テープ、フロッピーディスク、及び光データ記憶装置などであってもよい。
【0310】
いくつかの実施例において、上記の実施形態のいずれかにおけるフィルタリング装置を含むカメラ機器がさらに提供される。
【0311】
なお、本明細書において、第１及び第２などのような関係用語は１つのエンティティ又は操作を別のエンティティ又は操作と区別するためのものに過ぎず、必ずしもこれらのエンティティ又は操作の間に任意のこのような実際の関係又は順序が存在することを要求又は示唆するものではない。また、用語の「含む」、「包含」又はその他の任意の変形は非排他的な包含をカバーすることを意図し、それにより、一連の要素を含むプロセス、方法、物品又は機器はそれらの要素を含むだけでなく、さらに明確に列挙されない他の要素を含み、又はこのようなプロセス、方法、物品又は機器に固有の要素を含む。それ以上の制限がない場合、文の「１つ……を含む」によって限定された要素は、前記要素を含むプロセス、方法、物品又は機器に別の同じ要素がさらに存在することを排除するものではない。
【0312】
以上は本発明の好適な実施例に過ぎず、本発明を限定するものではなく、本発明の精神及び原則内で行われる任意の修正、同等の置換、及び改善などは、いずれも本発明の保護範囲内に含まれるべきである。
【符号の説明】
【0313】
１５１０ 決定ユニット
１５２０ フィルタリングユニット
１６１０ 決定ユニット
１６２０ フィルタリングユニット
１７１０ フィルタリングユニット
１７２０ 決定ユニット
１５２０ フィルタリングユニット
１６１０ 決定ユニット
１６２０ フィルタリングユニット
１７１０ フィルタリングユニット
１７２０ 決定ユニット
【図1】
【図2】
【図3】
【図4】
【図5】
【図6A】
【図6B】
【図7】
【図8】
【図9】
【図10】
【図11】
【図12】
【図13】
【図14】
【図15】
【図16】
【図17】
【図18】
【図19】
