特許 7597880 復号装置及びプログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2024-12-02

(45)【発行日】2024-12-10

(54)【発明の名称】復号装置及びプログラム

(51)【国際特許分類】

   H04N 19/105 20140101AFI20241203BHJP

   H04N 19/136 20140101ALI20241203BHJP

   H04N 19/182 20140101ALI20241203BHJP

   H04N 19/593 20140101ALI20241203BHJP

【ＦＩ】

H04N19/105

H04N19/136

H04N19/182

H04N19/593

【請求項の数】 2

(21)【出願番号】P 2023141326

(22)【出願日】2023-08-31

(62)【分割の表示】P 2022109409の分割

【原出願日】2016-07-04

(65)【公開番号】P2023159443

(43)【公開日】2023-10-31

【審査請求日】2023-08-31

(73)【特許権者】

【識別番号】000004352

【氏名又は名称】日本放送協会

(74)【代理人】

【識別番号】110001106

【氏名又は名称】弁理士法人キュリーズ

(72)【発明者】

【氏名】岩村 俊輔

(72)【発明者】

【氏名】市ヶ谷 敦郎

(72)【発明者】

【氏名】千田 和博

【審査官】山▲崎▼ 雄介

(56)【参考文献】

【文献】特開２０１２－２０５２８８（ＪＰ，Ａ）

【文献】特開２０１２－１３８７７４（ＪＰ，Ａ）

【文献】国際公開第２０１１／０８３５９９（ＷＯ，Ａ１）

【文献】国際公開第２００６／１０６９３５（ＷＯ，Ａ１）

【文献】特開２０１４－１６１０３９（ＪＰ，Ａ）

【文献】特開２０１１－１７１９１１（ＪＰ，Ａ）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｈ０４Ｎ １９／００－１９／９８

(57)【特許請求の範囲】

【請求項1】

動画像を構成するフレーム単位の原画像を分割した符号化対象ブロックを復号するように構成されている復号装置であって、
イントラ予測モードに基づいて決定する第１予測処理により第１予測画像を生成する第１予測部と、
前記符号化対象ブロックにおける合成領域を決定するように構成されている合成領域決定部と、
前記第１予測処理と異なる第２予測処理により第２予測画像を生成する第２予測部と、
前記合成領域に含まれる予測画像を、前記第１予測画像と前記第２予測画像との加重平均により生成する予測画像合成部とを具備しており、
前記予測画像合成部は、前記符号化対象ブロックに隣接するブロックが復号済みか否かに基づいて前記加重平均に用いる重みを決定することを特徴とする復号装置。

【請求項2】

コンピュータを請求項１に記載の復号装置として機能させるためのプログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、復号装置及びプログラムに関する。

【背景技術】

【0002】

Ｈ．２６５／ＨＥＶＣ（Ｈｉｇｈ Ｅｆｆｉｃｉｅｎｃｙ Ｖｉｄｅｏ Ｃｏｄｉｎｇ）に代表される動画像の符号化方式では、フレーム間の時間的相関を利用したインター予測及びフレーム内の空間的相関を利用したイントラ予測の２種類の予測を切り替えながら予測を行って残差信号を生成した後、直交変換処理やループフィルタ処理やエントロピー符号化処理を行い得られたストリームを出力するように構成されている。

【0003】

ＨＥＶＣにおけるイントラ予測では、Ｐｌａｎａｒ予測やＤＣ予測や方向予測の計３５種類のモードが用意されており、エンコーダで決定されたモードに従って、隣接する復号済み参照画素を用いてイントラ予測を行うように構成されている。

【0004】

ここで、イントラ予測では、フレーム内で最も左上に位置するＣＵ（Ｃｏｄｉｎｇ Ｕｎｉｔ）等、隣接する復号済み参照画素が存在しないＣＵでは、規定した値（１０ビットの動画像であれば「５１２」）を埋める処理により、予測画像を生成する際に用いる参照画素を作り出すように構成されている。

【0005】

また、従来のＨＥＶＣでは、符号化処理が、左上からラスタースキャン順に行われるために、参照画素が復号済みでない場合がある。このような場合には、最も近い復号済み参照画素を０次外挿した値を用いて予測画像を生成するように構成されている。

【0006】

ＣＵは、複数のブロック（ＴＵ：Ｔｒａｎｓｆｏｒｍ Ｕｎｉｔ）に分割され直交変換処理が施される。ＨＥＶＣにおいて、適用するイントラ予測の種類を示すイントラ予測モードは、ＣＵ内で共通であり、複数のＴＵに対して共通したイントラ予測モードを用いて予測が行われる。

【0007】

イントラ予測では、図７に示すように、ラスタースキャン順による符号化処理により、ＣＵ＃Ｘの左下や右上に位置する参照画素Ｎが復号済みでない場合が多く、このような場合に、復号済みでない参照画素が存在する方向からの方向予測を行うと予測精度が低下し、符号化効率が低減してしまうという問題点があった。

【0008】

以下、図８（ａ）～図８（ｄ）を用いて、かかる問題点について具体的に説明する。図８は、従来のＨＥＶＣにおけるイントラ予測の一例について示す。

【0009】

かかる例では、図８（ａ）に示すように、図７の例の場合と同様に、ＣＵ＃Ａ１（フレーム内の左上のＣＵ）の参照画素については、全てが復号済みである。同様に、図８（ｃ）に示すように、ＣＵ＃Ａ３（フレーム内の左下のＣＵ）の参照画素については、全てが復号済みである。

【0010】

これに対して、図８（ｂ）に示すように、ＣＵ＃Ａ１内に位置する参照画素Ｗ１～Ｗ３は復号済みであるが、ＣＵ＃Ａ３内に位置する参照画素Ｂ１～Ｂ４は復号されていないので、そのままＣＵ＃Ａ２（フレーム内の右上のＣＵ）の予測画像を生成する際の参照画素とすることはできない。

【0011】

このため、従来のＨＥＶＣでは、図８（ｂ）に示すように、ＣＵ＃Ａ１内に位置する復号済み参照画素Ｗ１～Ｗ３の一番下に位置する参照画素Ｗ１の値を、ＣＵ＃Ａ３内の同じ列に位置する未復号参照画素Ｂ１～Ｂ４にコピーするように規定されている。

【0012】

同様に、従来のＨＥＶＣでは、図８（ｄ）に示すように、ＣＵ＃Ａ３内に位置する復号済み参照画素Ｂ１～Ｂ３の一番下に位置する参照画素Ｂ１の値を、ＣＵ＃Ａ３の下側に存在するＣＵ内の同じ列に位置する未復号参照画素Ｐ３にコピーするように規定されている。

【0013】

したがって、図８の例のように、左下から右上に向かって方向予測が行われる場合、生成された予測画像の多くはコピーで埋められた未復号参照画素により構成されているため、予測精度が低下し、符号化効率が低減してしまうという問題点があった。

【0014】

かかる問題点を解決するために、ＴＵ分割が行われるイントラ予測において、ＣＵ内に存在する複数のＴＵに対する符号化処理順として、ラスタースキャン順（例えば、Ｚ型）の他、Ｕ型やＸ型等の符号化順に自由度を持たせることによって予測精度の向上を図る技術が知られている（非特許文献１参照）。

【先行技術文献】

【非特許文献】

【0015】

【文献】望月等、「平均値座標に基づいた適用イントラ予測方式」、情報処理学会研究報告、ｖｏｌ、２０１２－ＡＶＭ－７７、Ｎｏ．１２

【発明の概要】

【発明が解決しようとする課題】

【0016】

しかしながら、上述の非特許文献１に規定されている技術では、ＣＵ単位でどのような符号化処理順を用いるのかについてのフラグを伝送する必要があるため、伝送する情報量が増大してしまう他、全ての符号化処理順の中からどの符号化処理順が良いかを選択するために、符号化装置側では全ての組み合わせを試す必要があり、符号化装置側の計算時間が増大してしまうという問題点があった。

【0017】

そこで、本発明は、上述した課題を解決するためになされたものであり、符号化装置によって伝送する情報量を増大させることなく、また、符号化装置側の計算時間を増大させることなく、予測精度や符号化効率を向上させることができる符号化装置、復号装置及びプログラムを提供することを目的とする。

【課題を解決するための手段】

【0018】

本発明の第１の特徴は、動画像を構成するフレーム単位の原画像を分割した符号化対象ブロックを復号するように構成されている復号装置であって、予測モードに基づいて決定する第１予測処理により第１予測画像を生成する第１予測部と、前記符号化対象ブロックに対応する合成領域を決定するように構成されている合成領域決定部と、前記第１予測処理と異なる第２予測処理により第２予測画像を生成する第２予測部と、前記合成領域に含まれる予測画像を、前記第１予測画像と前記第２予測画像との加重平均により生成する予測画像合成部とを具備しており、前記予測画像合成部は、前記符号化対象ブロックに隣接するブロックが復号済みか否かに基づいて前記加重平均に用いる重みを決定することを要旨とする。一実施形態に係る符号化装置は、動画像を構成するフレーム単位の原画像を符号化対象ブロックに分割して符号化するように構成されている符号化装置であって、イントラ予測モードに基づいて、前記符号化対象ブロック内において復号済みでない隣接画素から予測画像が生成される合成領域を決定するように構成されている合成領域決定部と、前記合成領域に含まれるか否かに基づいて、各領域の予測画像の生成方法を変更するように構成されているイントラ予測部とを具備することを要旨とする。

【0019】

一実施形態に係る復号装置は、動画像を構成するフレーム単位の原画像を符号化対象ブロックに分割して復号するように構成されている復号装置であって、イントラ予測モードに基づいて、前記符号化対象ブロック内において復号済みでない隣接画素から予測画像が生成される合成領域を決定するように構成されている合成領域決定部と、前記合成領域に含まれるか否かに基づいて、各領域の予測画像の生成方法を変更するように構成されているイントラ予測部とを具備することを要旨とする。

【0020】

一実施形態に係るプログラムは、コンピュータを、上述の符号化装置として機能させるためのプログラムであることを要旨とする。

【0021】

一実施形態に係るプログラムは、コンピュータを、上述の復号装置として機能させるためのプログラムであることを要旨とする。

【発明の効果】

【0022】

本発明によれば、符号化装置によって伝送する情報量を増大させることなく、また、符号化装置側の計算時間を増大させることなく、予測精度や符号化効率を向上させることができる符号化装置、復号装置及びプログラムを提供することができる。

【図面の簡単な説明】

【0023】

【図1】図１は、第１の実施形態に係る符号化装置１の機能ブロック図である。

【図2】図２は、第１の実施形態において予測画像が生成される様子の一例を示す図である。

【図3】図３は、第１の実施形態において予測画像が生成される様子の一例を示す図である。

【図4】図４は、第１の実施形態に係る復号装置３の機能ブロック図である。

【図5】図５は、第１の実施形態に係る符号化装置１及び復号装置３の動作を示すフローチャートである。

【図6】図６は、第２の実施形態において予測画像が生成される様子の一例を示す図である。

【図7】図７は、従来のＨＥＶＣにおいて予測画像が生成される様子の一例を示す図である。

【図8】図８は、従来のＨＥＶＣにおいて予測画像が生成される様子の一例を示す図である。

【発明を実施するための形態】

【0024】

（第１の実施形態）
以下、図１～図５を参照して、本発明の第１の実施形態に係る符号化装置１及び復号装置３について説明する。ここで、本実施形態に係る符号化装置１及び復号装置３は、ＨＥＶＣにおけるイントラ予測に対応するように構成されている。

【0025】

本実施形態に係る符号化装置１は、動画像を構成するフレーム単位の原画像を符号化対象ブロックに分割して符号化するように構成されている。なお、本実施形態では、符号化対象のＣＵの左側及び上側に隣接する画素は全て復号済みであるものとする。

【0026】

また、本実施形態に係る符号化装置１は、ＣＵを複数のＴＵに分割することができるように構成されていてもよい。したがって、本実施形態では、符号化対象ブロックは、ＣＵであってもよいし、ＴＵであってもよい。以下、本実施形態では、符号化対象ブロックとしてＣＵが用いられるケースを例にして説明する。

【0027】

また、本実施形態では、ＣＵの符号化順及び復号順として、従来のＨＥＶＣで用いられているラスタースキャン順（図７や図８に示すようなＺ型）が用いられているケースを例にして説明しているが、かかる符号化順及び復号順として、Ｕ型やＸ型等の他の符号化順及び復号順が用いられていてもよい。

【0028】

図１に示すように、本実施形態に係る符号化装置１は、イントラ予測モード決定部１１と、合成領域決定部１２と、イントラ予測部１３と、残差信号生成部１４と、直交変換・量子化部１５と、逆直交変換・逆量子化部１６と、局部復号画像生成部１７と、メモリ部１８と、エントロピー符号化部１９とを具備している。

【0029】

イントラ予測モード決定部１１は、ＣＵに適用する最適なイントラ予測モードを決定するように構成されている。

【0030】

合成領域決定部１２は、イントラ予測モード決定部１１によって決定されたイントラ予測モードに基づいて、ＣＵ内において復号済みでない隣接画素から予測画像が生成される合成領域Ｘを決定するように構成されている。

【0031】

具体的には、図２に示すように、合成領域決定部１２は、イントラ予測モード決定部１１によって決定されたイントラ予測モードの方向が左下から右上に向かう方向である場合（すなわち、左下から右上に向かって方向予測が行われる場合）に、ＣＵ＃Ａ２内において復号済みでない隣接画素Ｂ１～Ｂ４から予測画像が生成される合成領域Ｘを決定するように構成されていてもよい。

【0032】

また、本発明は、イントラ予測モード決定部１１によって決定されたイントラ予測モードの方向が右上から左下に向かう方向である場合（すなわち、右上から左下に向かって方向予測が行われる場合）にも適用可能であるが、以下、イントラ予測モード決定部１１によって決定されたイントラ予測モードの方向が左下から右上に向かう方向である場合（すなわち、左下から右上に向かって方向予測が行われる場合）を例に挙げて説明する。

【0033】

なお、本明細書の図において、イントラ予測モードの方向（予測方向）を示す矢印は、ＨＥＶＣ規格書における記載と同様に、イントラ予測の対象の画素から参照画素に向かうものとする（以下同様）。

【0034】

イントラ予測部１３は、合成領域決定部１２によって決定された合成領域Ｘに含まれるか否かに基づいて、各領域の予測画像の生成方法を変更するように構成されている。

【0035】

具体的には、イントラ予測部１３は、図３（ａ）に示すように、ＣＵ＃Ａ２において、合成領域Ｘに含まれていない領域（すなわち、参照画素Ｗ１～Ｗ３が復号済みである領域）Ｙでは、イントラ予測モード決定部１１によって決定されたイントラ予測モードを用いて、復号済み参照画素Ｗ１～Ｗ３に基づいて予測画像を生成するように構成されている。

【0036】

一方、イントラ予測部１３は、図３（ｂ）に示すように、ＣＵ＃Ａ２において、合成領域Ｘに含まれている領域（すなわち、参照画素Ｂ２～Ｂ４が復号済みでない領域）では、予め規定した予測方法を用いて予測画像を生成するように構成されている。

【0037】

ここで、予め規定した予測方法とは、例えば、ＤＣ予測やＰｌａｎａｒ予測等のイントラ予測の他、隣接する復号済み参照画素の値の平均等で予測画像を生成する予測方法等が挙げられる。

【0038】

なお、符号化装置１及び復号装置３において、かかる予測方法について予め決定していれば、如何なる予測方法を使う場合であっても、符号化装置１から復号装置３に対して、かかる予測方法を示す新たなフラグを伝送する必要はない。

【0039】

また、合成領域決定部１２によって決定された合成領域は、イントラ予測モードの方向及び隣接する画素が復号済みであるか否かによって一意に決定することができるため、符号化装置１から復号装置３に対して、新たに合成領域がどの領域であるかを示すフラグを伝送する必要はない。

【0040】

例えば、図３（ｂ）に示すように、イントラ予測部１３は、ＣＵ＃Ａ２における合成領域Ｘに含まれている領域内の画素Ｘ１の位置では、Ｐｌａｎａｒ予測を用いて、画素Ｗ３、画素Ｄ１、画素Ｄ２及び画素Ｄ４を合成することによって予測画像を生成するように構成されていてもよい。ここで、画素Ｄ４には、画素Ｂ４の値がコピーされており、画素Ｂ４には、画素Ｗ１の値がコピーされている。

【0041】

残差信号生成部１４は、イントラ予測部１３によって生成された予測画像と原画像との差分により残差信号を生成するように構成されている。

【0042】

直交変換・量子化部１５は、残差信号生成部１４によって生成された残差信号に対して直交変換処理及び量子化処理を施し、量子化された変換係数を生成するように構成されている。

【0043】

逆直交変換・逆量子化部１６は、直交変換・量子化部１５によって生成された量子化された変換係数に対して、再び逆量子化処理及び逆直交変換処理を施し、量子化された残差信号を生成するように構成されている。

【0044】

局部復号画像生成部１７は、逆直交変換・逆量子化部１６によって生成された量子化された残差信号に対してイントラ予測部１３によって生成された予測画像を加えることで局部復号画像を生成するように構成されている。

【0045】

メモリ部１８は、局部復号画像生成部１７によって生成された局部復号画像を参照画像として利用可能に保持するように構成されている。

【0046】

エントロピー符号化部１９は、イントラ予測モード決定部１１によって決定されたイントラ予測モード等を含むフラグ情報や量子化された変換係数に対してエントロピー符号化処理を施してストリーム出力するように構成されている。

【0047】

また、本実施形態に係る復号装置３は、動画像を構成するフレーム単位の原画像をＣＵに分割して復号するように構成されている。また、本実施形態に係る復号装置３は、本実施形態に係る符号化装置１と同様に、ＣＵを複数のＴＵに分割することができるように構成されている。

【0048】

図４に示すように、本実施形態に係る復号装置３は、エントロピー復号部３１と、合成領域決定部３２と、イントラ予測部３３と、逆量子化・逆変換部３４と、局部復号画像生成部３５と、メモリ部３６とを具備している。

【0049】

エントロピー復号部３１は、符号化装置１から出力されたストリームから、変換係数やフラグ情報等を復号するように構成されている。ここで、変換係数は、符号化装置１によって、フレーム単位の原画像をＣＵに分割して符号化された信号として得られた量子化された変換係数である。また、フラグ情報は、予測モード等の付随する情報を含む。

【0050】

合成領域決定部３２は、エントロピー復号部３１によって出力されたイントラ予測モードに基づいて、ＣＵ内において復号済みでない隣接画素から予測画像が生成される合成領域Ｘを決定するように構成されている。

【0051】

具体的には、図２に示すように、合成領域決定部３２は、エントロピー復号部３１によって出力されたイントラ予測モードの方向が左下から右上に向かう方向である場合（すなわち、左下から右上に向かって方向予測が行われる場合）に、ＣＵ＃Ａ２内において復号済みでない隣接画素Ｂ１～Ｂ４から予測画像が生成される合成領域Ｘを決定するように構成されていてもよい。

【0052】

イントラ予測部３３は、合成領域決定部３２によって決定された合成領域Ｘ及びエントロピー復号部３１によって出力されたイントラ予測モードを用いて、予測画像を生成するように構成されていてもよい。

【0053】

具体的には、イントラ予測部３３は、イントラ予測部１３と同様に、合成領域決定部１２によって決定された合成領域Ｘに含まれるか否かに基づいて、各領域の予測画像の生成方法を変更するように構成されている。

【0054】

例えば、イントラ予測部３３は、図３（ａ）に示すように、ＣＵ＃Ａ２において、合成領域Ｘに含まれていない領域（すなわち、参照画素Ｗ１～Ｗ３が復号済みである領域）Ｙでは、エントロピー復号部３１によって出力されたイントラ予測モードを用いて、復号済み参照画素Ｗ１～Ｗ３に基づいて予測画像を生成するように構成されている。

【0055】

一方、イントラ予測部３３は、図３（ｂ）に示すように、ＣＵ＃Ａ２において、合成領域Ｘに含まれている領域（すなわち、参照画素Ｂ２～Ｂ４が復号済みでない領域）では、上述の予め規定した予測方法を用いて予測画像を生成するように構成されている。

【0056】

逆量子化・逆変換部３４は、エントロピー復号部３１によって出力された量子化された変換係数に対して逆量子化処理及び逆変換処理（例えば、逆直交変換処理）を施すことによって、残差信号を生成するように構成されている。

【0057】

局部復号画像生成部３５は、イントラ予測部３３によって生成された予測画像と逆量子化・逆変換部３４によって生成された残差信号とを加えることで局部復号画像を生成するように構成されている。

【0058】

メモリ部３６は、局部復号画像生成部３５によって生成された局部復号画像を、イントラ予測及びインター予測のための参照画像として利用可能に保持するように構成されている。

【0059】

図５に、本実施形態に係る符号化装置１及び復号装置３によって予測画像を生成する動作の一例について説明するためのフローチャートについて示す。

【0060】

第１に、図５を参照して、本実施形態に係る符号化装置１によって予測画像を生成する動作の一例について説明する。

【0061】

図５に示すように、ステップＳ１０１において、符号化装置１は、ＣＵに適用する最適なイントラ予測モードを決定する。

【0062】

ステップＳ１０２において、符号化装置１は、ステップＳ１０１において決定されたイントラ予測モードに基づいて、ＣＵ内において復号済みでない隣接画素から予測画像が生成される合成領域Ｘを決定する。

【0063】

ステップＳ１０３において、符号化装置１は、ＣＵ内において、予測画像を生成する領域が合成領域に含まれているか否かについて判定する。「Ｎｏ」の場合、本動作は、ステップＳ１０４に進み、「Ｙｅｓ」の場合、本動作は、ステップＳ１０５に進む。

【0064】

ステップＳ１０４において、符号化装置１は、ステップＳ１０１において決定されたイントラ予測モードを用いて、復号済み参照画素に基づいて予測画像を生成する。

【0065】

ステップＳ１０５において、符号化装置１は、上述の予め規定した予測方法を用いて予測画像を生成する。

【0066】

第２に、図５を参照して、本実施形態に係る復号装置３によって予測画像を生成する動作の一例について説明する。

【0067】

図５に示すように、ステップＳ１０１において、復号装置３は、エントロピー復号処理によって得られた情報に基づいてイントラ予測モードを決定する。

【0068】

ステップＳ１０２において、復号装置３は、ステップＳ１０１において決定されたイントラ予測モードに基づいて、ＣＵ内において復号済みでない隣接画素から予測画像が生成される合成領域Ｘを決定する。

【0069】

ステップＳ１０３において、復号装置３は、ＣＵ内において、予測画像を生成する領域が合成領域に含まれているか否かについて判定する。「Ｎｏ」の場合、本動作は、ステップＳ１０４に進み、「Ｙｅｓ」の場合、本動作は、ステップＳ１０５に進む。

【0070】

ステップＳ１０４において、復号装置３は、ステップＳ１０１において決定されたイントラ予測モードを用いて、復号済み参照画素に基づいて予測画像を生成する。

【0071】

ステップＳ１０５において、復号装置３は、上述の予め規定した予測方法を用いて予測画像を生成する。

【0072】

本実施形態に係る符号化装置１及び復号装置３によれば、イントラ予測モードの方向（予測方向）の参照先に未復号画素が含まれている場合、隣接する復号済み参照画素をコピーすることで補間した参照画素を用いて生成した予測画像と予め規定した予測方法を用いて生成した予測画像とを合成することにより新たな予測画像を生成することで、予測精度低下を抑制することができる。

【0073】

（第２の実施形態）
以下、図６を参照して、本発明の第２の実施形態に係る符号化装置１及び復号装置３について、上述の第１の実施形態に係る符号化装置１及び復号装置３との相違点に着目して説明する。

【0074】

本実施形態に係る符号化装置１では、イントラ予測部１３は、合成領域Ｘに含まれる領域と合成領域Ｘに含まれない領域Ｙとの間の境界領域において、所定条件が満たされる場合に、かかる境界領域の予測画像に対して平滑フィルタを適用するように構成されている。

【0075】

同様に、本実施形態に係る復号装置３では、イントラ予測部３３は、合成領域Ｘに含まれる領域と合成領域Ｘに含まれない領域Ｙとの間の境界領域において、所定条件が満たされる場合に、かかる境界領域の予測画像に対して平滑フィルタを適用するように構成されている。

【0076】

例えば、図６の例では、かかる境界領域には、合成領域Ｘに含まれる領域内の画素Ｘ１、Ｘ２、Ｘ３、Ｘ４及び合成領域Ｘに含まれない領域Ｙ内の画素Ｙ１、Ｙ２、Ｙ３が位置する領域が該当する。

【0077】

また、所定条件としては、かかる境界領域における不連続性が所定閾値よりも高いことが挙げられる。ここで、不連続性の評価としては、例えば、水平方向の差分や垂直方向の差分や斜め方向の差分等の線形結合で表わす方法が挙げられる。

【0078】

すなわち、イントラ予測部１３及びイントラ予測部３３は、かかる境界領域における不連続性の評価の値が所定閾値よりも高い場合には、かかる境界領域の予測画像に対して平滑フィルタを適用するように構成されている。

【0079】

例えば、図６の例では、イントラ予測部１３及びイントラ予測部３３は、かかる境界領域における不連続性の評価の値が所定閾値よりも高い場合には、合成領域Ｘに含まれる領域内の画素Ｘ１、Ｘ２、Ｘ３、Ｘ４及び合成領域Ｘに含まれない領域Ｙ内の画素Ｙ１、Ｙ２、Ｙ３が位置する領域の予測画像に対して平滑フィルタを適用するように構成されている。

【0080】

なお、図６の例では、イントラ予測部１３及びイントラ予測部３３は、合成領域Ｘに含まれる領域内の画素Ｘ５、Ｘ６、Ｘ７が位置する領域の予測画像に対しても平滑フィルタを適用するように構成されている。

【0081】

ここで、符号化装置１と復号装置３との間で、上述の所定閾値を共有することで、符号化装置１から復号装置３に対して新たなフラグを伝送する必要がなくなる。

【0082】

本実施形態に係る符号化装置１及び復号装置３によれば、合成領域Ｘに含まれるか否かに基づいて各領域の予測画像の生成方法を変更することに起因する境界領域の不連続性を低減することができ、符号化性能を向上させることができる。

【0083】

（第３の実施形態）
以下、図６を参照して、本発明の第３の実施形態に係る符号化装置１及び復号装置３について、上述の第１及び第２の実施形態に係る符号化装置１及び復号装置３との相違点に着目して説明する。

【0084】

本実施形態に係る符号化装置１及び復号装置３において、イントラ予測部１３及びイントラ予測部３３は、合成領域Ｘに含まれる領域において、従来のＨＥＶＣにおける予測方法を用いて生成された予測画像（コピーによって埋められた未復号参照画素に基づいて生成された予測画像）及び合成領域Ｘにおいて生成された予測画像（上述の予め規定した予測方法を用いて生成された予測画像）の加重平均によって予測画像を生成するように構成されている。

【0085】

なお、本実施形態に係る符号化装置１及び復号装置３において、イントラ予測部１３及びイントラ予測部３３は、上述の所定条件が満たされる場合にのみ、合成領域Ｘに含まれる領域において、従来のＨＥＶＣにおける予測方法を用いて生成された予測画像（コピーによって埋められた未復号参照画素に基づいて生成された予測画像）及び合成領域Ｘにおいて生成された予測画像（上述の予め規定した予測方法を用いて生成された予測画像）の加重平均によって予測画像を生成するように構成されていてもよい。

【0086】

本実施形態に係る符号化装置１及び復号装置３では、イントラ予測部１３及びイントラ予測部３３は、かかる加重平均を算出する際に用いる重み係数を算出するように構成されていてもよい。

【0087】

イントラ予測部１３及びイントラ予測部３３は、重み係数として予め定めた規定の値を用いるように構成されていてもよいし、予測画像を生成する際の復号済み参照画素の信用度を用いて重み係数を算出するように構成されていてもよい。

【0088】

なお、図３（ｂ）の例では、復号済み参照画素Ｗ１～Ｗ４の信用度は高く、コピーによって生成された参照画素Ｂ１～Ｂ４の信用度は低い。また、参照画素Ｂ１の信用度と参照画素Ｂ４の信用度を比べると、コピー元に近い参照画素Ｂ４の信用度の方が高い。

【0089】

また、イントラ予測部１３及びイントラ予測部３３は、合成領域Ｘに含まれる領域と合成領域Ｘに含まれない領域Ｙとの間の境界領域からの距離に応じて、かかる重み係数を算出するように構成されていてもよい。

【0090】

例えば、イントラ予測部１３及びイントラ予測部３３は、かかる境界領域付近では、従来のＨＥＶＣにおける予測方法を用いて生成された予測画像（コピーによって埋められた未復号参照画素に基づいて生成された予測画像）の重み係数が強くなるように算出し、かかる境界領域から離れた領域では、合成領域Ｘにおいて生成された予測画像（上述の予め規定した予測方法を用いて生成された予測画像）の重み係数が強くなるように算出してもよい。

【0091】

（その他の実施形態）
上述のように、本発明について、上述した実施形態によって説明したが、かかる実施形態における開示の一部をなす論述及び図面は、本発明を限定するものであると理解すべきではない。かかる開示から当業者には様々な代替実施形態、実施例及び運用技術が明らかとなろう。

【0092】

また、上述の実施形態では特に触れていないが、上述の符号化装置１及び復号装置３によって行われる各処理をコンピュータに実行させるプログラムが提供されてもよい。また、かかるプログラムは、コンピュータ読取り可能媒体に記録されていてもよい。コンピュータ読取り可能媒体を用いれば、かかるプログラムをコンピュータにインストールすることが可能である。ここで、かかるプログラムが記録されたコンピュータ読取り可能媒体は、非一過性の記録媒体であってもよい。非一過性の記録媒体は、特に限定されるものではないが、例えば、ＣＤ－ＲＯＭやＤＶＤ－ＲＯＭ等の記録媒体であってもよい。

【0093】

或いは、上述の符号化装置１及び復号装置３内の少なくとも一部の機能を実現するためのプログラムを記憶するメモリ及びメモリに記憶されたプログラムを実行するプロセッサによって構成されるチップが提供されてもよい。

【符号の説明】

【0094】

１…符号化装置
１１…イントラ予測モード決定部
１２…合成領域決定部
１３…イントラ予測部
１４…残差信号生成部
１５…直交変換・量子化部
１６…逆量子化部・逆直交変換部
１７…局部復号画像生成部
１８…メモリ部
１９…エントロピー符号化部
３…復号装置
３１…エントロピー復号部
３２…合成領域決定部
３３…イントラ予測部
３４…逆量子化・逆変換部
３５…局部復号画像生成部
３６…メモリ部

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】