知財求人 - 知財ポータルサイト「IP Force」
▶ パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカの特許一覧
特許5841540画像符号化方法、画像復号方法、画像符号化装置、画像復号装置、プログラム、及び集積回路
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】特許公報(B2)
(11)【特許番号】5841540
(24)【登録日】2015年11月20日
(45)【発行日】2016年1月13日
(54)【発明の名称】画像符号化方法、画像復号方法、画像符号化装置、画像復号装置、プログラム、及び集積回路
(51)【国際特許分類】
H04N 19/13 20140101AFI20151217BHJP
H04N 19/134 20140101ALI20151217BHJP
H04N 19/42 20140101ALI20151217BHJP
H04N 19/46 20140101ALI20151217BHJP
H04N 19/503 20140101ALI20151217BHJP
H04N 19/593 20140101ALI20151217BHJP
H04N 19/60 20140101ALI20151217BHJP
H04N 19/61 20140101ALI20151217BHJP
H04N 19/70 20140101ALI20151217BHJP
H04N 19/91 20140101ALI20151217BHJP
【ＦＩ】
H04N19/13
H04N19/134
H04N19/42
H04N19/46
H04N19/503
H04N19/593
H04N19/60
H04N19/61
H04N19/70
H04N19/91
【請求項の数】13
【全頁数】47
(21)【出願番号】特願2012-545619(P2012-545619)
(86)(22)【出願日】2011年11月24日
(86)【国際出願番号】JP2011006527
(87)【国際公開番号】WO2012070239
(87)【国際公開日】20120531
【審査請求日】2014年8月26日
(31)【優先権主張番号】61/417,307
(32)【優先日】2010年11月26日
(33)【優先権主張国】US
(73)【特許権者】
【識別番号】514136668
【氏名又は名称】パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ
【氏名又は名称原語表記】Ｐａｎａｓｏｎｉｃ Ｉｎｔｅｌｌｅｃｔｕａｌ Ｐｒｏｐｅｒｔｙ Ｃｏｒｐｏｒａｔｉｏｎ ｏｆ Ａｍｅｒｉｃａ
(74)【代理人】
【識別番号】100109210
【弁理士】
【氏名又は名称】新居 広守
(72)【発明者】
【氏名】笹井 寿郎
(72)【発明者】
【氏名】西 孝啓
(72)【発明者】
【氏名】柴原 陽司
(72)【発明者】
【氏名】杉尾 敏康
【審査官】
畑中 高行
(56)【参考文献】
【文献】
特開２００３−３３３６０（ＪＰ，Ａ）
【文献】
特開２００３−３２４７３１（ＪＰ，Ａ）
【文献】
特開２００９−１０５６９６（ＪＰ，Ａ）
【文献】
国際公開第２００９／０７８１５０（ＷＯ，Ａ１）
(58)【調査した分野】（Int.Cl.，ＤＢ名）
Ｈ０４Ｎ１９／００−１９／９８
(57)【特許請求の範囲】
【請求項1】
画像を符号化する画像符号化方法であって、
複数の参照ピクチャリストのうちの前記画像の画面間予測に用いられた参照ピクチャリストを特定する第１の情報と、前記第１の情報で特定される前記参照ピクチャリストに含まれる参照ピクチャのうちの前記画像の画面間予測に用いられた参照ピクチャを特定する第２の情報とを、符号化対象信号から取得する取得ステップと、
前記取得ステップで取得された前記第１及び第２の情報を混合して混合信号を生成する混合信号生成ステップと、
前記混合信号生成ステップで生成された前記混合信号の最大変動幅に応じて、可変長符号化テーブルを選択するテーブル選択ステップと、
前記テーブル選択ステップで選択された前記可変長符号化テーブルを用いて前記混合信号を可変長符号化する可変長符号化ステップとを含む
画像符号化方法。
複数の参照ピクチャリストのうちの前記画像の画面間予測に用いられた参照ピクチャリストを特定する第１の情報と、前記第１の情報で特定される前記参照ピクチャリストに含まれる参照ピクチャのうちの前記画像の画面間予測に用いられた参照ピクチャを特定する第２の情報とを、符号化対象信号から取得する取得ステップと、
前記取得ステップで取得された前記第１及び第２の情報を混合して混合信号を生成する混合信号生成ステップと、
前記混合信号生成ステップで生成された前記混合信号の最大変動幅に応じて、可変長符号化テーブルを選択するテーブル選択ステップと、
前記テーブル選択ステップで選択された前記可変長符号化テーブルを用いて前記混合信号を可変長符号化する可変長符号化ステップとを含む
画像符号化方法。
【請求項2】
前記可変長符号化テーブルは、前記混合信号の取り得る複数の値と複数の符号とを対応づけて保持し、
前記複数の符号は、符号長が最も長く、且つ最下位桁の異なる２つの符号を含む
請求項１に記載の画像符号化方法。
前記複数の符号は、符号長が最も長く、且つ最下位桁の異なる２つの符号を含む
請求項１に記載の画像符号化方法。
【請求項3】
前記テーブル選択ステップでは、第１及び第２ピクチャリストの一方に登録されている前記参照ピクチャのみを用いる場合と、前記第１及び第２ピクチャリストの両方に登録されている前記参照ピクチャを用いる場合との全ての組み合わせを前記最大変動幅として、前記可変長符号化テーブルを選択する
請求項１又は２に記載の画像符号化方法。
請求項１又は２に記載の画像符号化方法。
【請求項4】
前記テーブル選択ステップでは、
前記第１ピクチャリストの登録インデックス数ｎ１と、前記第２ピクチャリストの登録インデックス数ｎ２とを前記符号化対象信号から取得し、
ｎ１＋ｎ２＋（ｎ１×ｎ２）で算出される前記最大変動幅ＭａｘＲａｎｇｅに応じて、前記可変長符号化テーブルを選択する
請求項３に記載の画像符号化方法。
前記第１ピクチャリストの登録インデックス数ｎ１と、前記第２ピクチャリストの登録インデックス数ｎ２とを前記符号化対象信号から取得し、
ｎ１＋ｎ２＋（ｎ１×ｎ２）で算出される前記最大変動幅ＭａｘＲａｎｇｅに応じて、前記可変長符号化テーブルを選択する
請求項３に記載の画像符号化方法。
【請求項5】
前記テーブル選択ステップでは、
前記第１及び第２ピクチャリストに登録されている前記参照ピクチャが同一の場合に、前記第１ピクチャリストの登録インデックス数ｎ１を前記符号化対象信号から取得し、
ｎ１＋（ｎ１×ｎ１）で算出される前記最大変動幅ＭａｘＲａｎｇｅに応じて、前記可変長符号化テーブルを選択する
請求項３に記載の画像符号化方法。
前記第１及び第２ピクチャリストに登録されている前記参照ピクチャが同一の場合に、前記第１ピクチャリストの登録インデックス数ｎ１を前記符号化対象信号から取得し、
ｎ１＋（ｎ１×ｎ１）で算出される前記最大変動幅ＭａｘＲａｎｇｅに応じて、前記可変長符号化テーブルを選択する
請求項３に記載の画像符号化方法。
【請求項6】
前記画像符号化方法は、さらに、前記可変長符号化ステップで用いられた前記可変長符号化テーブルを更新するテーブル更新ステップを含み、
前記テーブル更新ステップでは、前記混合信号の値に対応する符号の符号長が短くなるように、前記混合信号の取り得る各値と符号との対応関係を変更する
請求項１〜５のいずれか１項に記載の画像符号化方法。
前記テーブル更新ステップでは、前記混合信号の値に対応する符号の符号長が短くなるように、前記混合信号の取り得る各値と符号との対応関係を変更する
請求項１〜５のいずれか１項に記載の画像符号化方法。
【請求項7】
符号化画像を復号する画像復号方法であって、
符号化された混合信号である符号化混合信号を取得する取得ステップと、
前記混合信号の最大変動幅に応じて、可変長復号テーブルを選択するテーブル選択ステップと、
前記テーブル選択ステップで選択された前記可変長復号テーブルを用いて前記符号化混合信号を可変長復号する可変長復号ステップと、
前記可変長復号ステップで復号された前記混合信号を、複数の参照ピクチャリストのうちの前記符号化画像の画面間予測に用いられる参照ピクチャリストを特定する第１の情報と、前記第１の情報で特定される前記参照ピクチャリストに含まれる参照ピクチャのうちの前記符号化画像の画面間予測に用いられる参照ピクチャを特定する第２の情報とに分割する分割ステップとを含む
画像復号方法。
符号化された混合信号である符号化混合信号を取得する取得ステップと、
前記混合信号の最大変動幅に応じて、可変長復号テーブルを選択するテーブル選択ステップと、
前記テーブル選択ステップで選択された前記可変長復号テーブルを用いて前記符号化混合信号を可変長復号する可変長復号ステップと、
前記可変長復号ステップで復号された前記混合信号を、複数の参照ピクチャリストのうちの前記符号化画像の画面間予測に用いられる参照ピクチャリストを特定する第１の情報と、前記第１の情報で特定される前記参照ピクチャリストに含まれる参照ピクチャのうちの前記符号化画像の画面間予測に用いられる参照ピクチャを特定する第２の情報とに分割する分割ステップとを含む
画像復号方法。
【請求項8】
画像を符号化する画像符号化装置であって、
複数の参照ピクチャリストのうちの前記画像の画面間予測に用いられた参照ピクチャリストを特定する第１の情報と、前記第１の情報で特定される前記参照ピクチャリストに含まれる参照ピクチャのうちの前記画像の画面間予測に用いられた参照ピクチャを特定する第２の情報とを、符号化対象信号から取得する取得部と、
前記取得部で取得された前記第１及び第２の情報を混合して混合信号を生成する混合信号生成部と、
前記混合信号生成部で生成された前記混合信号の最大変動幅に応じて、可変長符号化テーブルを選択するテーブル選択部と、
前記テーブル選択部で選択された前記可変長符号化テーブルを用いて前記混合信号を可変長符号化する可変長符号化部とを備える
画像符号化装置。
複数の参照ピクチャリストのうちの前記画像の画面間予測に用いられた参照ピクチャリストを特定する第１の情報と、前記第１の情報で特定される前記参照ピクチャリストに含まれる参照ピクチャのうちの前記画像の画面間予測に用いられた参照ピクチャを特定する第２の情報とを、符号化対象信号から取得する取得部と、
前記取得部で取得された前記第１及び第２の情報を混合して混合信号を生成する混合信号生成部と、
前記混合信号生成部で生成された前記混合信号の最大変動幅に応じて、可変長符号化テーブルを選択するテーブル選択部と、
前記テーブル選択部で選択された前記可変長符号化テーブルを用いて前記混合信号を可変長符号化する可変長符号化部とを備える
画像符号化装置。
【請求項9】
符号化画像を復号する画像復号装置であって、
符号化された混合信号である符号化混合信号を取得する取得部と、
前記混合信号の最大変動幅に応じて、可変長復号テーブルを選択するテーブル選択部と、
前記テーブル選択部で選択された前記可変長復号テーブルを用いて前記符号化混合信号を可変長復号する可変長復号部と、
前記可変長復号部で復号された前記混合信号を、複数の参照ピクチャリストのうちの前記符号化画像の画面間予測に用いられる参照ピクチャリストを特定する第１の情報と、前記第１の情報で特定される前記参照ピクチャリストに含まれる参照ピクチャのうちの前記符号化画像の画面間予測に用いられる参照ピクチャを特定する第２の情報とに分割する分割部とを備える
画像復号装置。
符号化された混合信号である符号化混合信号を取得する取得部と、
前記混合信号の最大変動幅に応じて、可変長復号テーブルを選択するテーブル選択部と、
前記テーブル選択部で選択された前記可変長復号テーブルを用いて前記符号化混合信号を可変長復号する可変長復号部と、
前記可変長復号部で復号された前記混合信号を、複数の参照ピクチャリストのうちの前記符号化画像の画面間予測に用いられる参照ピクチャリストを特定する第１の情報と、前記第１の情報で特定される前記参照ピクチャリストに含まれる参照ピクチャのうちの前記符号化画像の画面間予測に用いられる参照ピクチャを特定する第２の情報とに分割する分割部とを備える
画像復号装置。
【請求項10】
コンピュータに、画像を符号化させるプログラムであって、
複数の参照ピクチャリストのうちの前記画像の画面間予測に用いられた参照ピクチャリストを特定する第１の情報と、前記第１の情報で特定される前記参照ピクチャリストに含まれる参照ピクチャのうちの前記画像の画面間予測に用いられた参照ピクチャを特定する第２の情報とを、符号化対象信号から取得する取得ステップと、
前記取得ステップで取得された前記第１及び第２の情報を混合して混合信号を生成する混合信号生成ステップと、
前記混合信号生成ステップで生成された前記混合信号の最大変動幅に応じて、可変長符号化テーブルを選択するテーブル選択ステップと、
前記テーブル選択ステップで選択された前記可変長符号化テーブルを用いて前記混合信号を可変長符号化する可変長符号化ステップとを、コンピュータに実行させる
プログラム。
複数の参照ピクチャリストのうちの前記画像の画面間予測に用いられた参照ピクチャリストを特定する第１の情報と、前記第１の情報で特定される前記参照ピクチャリストに含まれる参照ピクチャのうちの前記画像の画面間予測に用いられた参照ピクチャを特定する第２の情報とを、符号化対象信号から取得する取得ステップと、
前記取得ステップで取得された前記第１及び第２の情報を混合して混合信号を生成する混合信号生成ステップと、
前記混合信号生成ステップで生成された前記混合信号の最大変動幅に応じて、可変長符号化テーブルを選択するテーブル選択ステップと、
前記テーブル選択ステップで選択された前記可変長符号化テーブルを用いて前記混合信号を可変長符号化する可変長符号化ステップとを、コンピュータに実行させる
プログラム。
【請求項11】
コンピュータに、符号化画像を復号させるプログラムであって、
符号化された混合信号である符号化混合信号を取得する取得ステップと、
前記混合信号の最大変動幅に応じて、可変長復号テーブルを選択するテーブル選択ステップと、
前記テーブル選択ステップで選択された前記可変長復号テーブルを用いて前記符号化混合信号を可変長復号する可変長復号ステップと、
前記可変長復号ステップで復号された前記混合信号を、複数の参照ピクチャリストのうちの前記符号化画像の画面間予測に用いられる参照ピクチャリストを特定する第１の情報と、前記第１の情報で特定される前記参照ピクチャリストに含まれる参照ピクチャのうちの前記符号化画像の画面間予測に用いられる参照ピクチャを特定する第２の情報とに分割する分割ステップとを、コンピュータに実行させる
プログラム。
符号化された混合信号である符号化混合信号を取得する取得ステップと、
前記混合信号の最大変動幅に応じて、可変長復号テーブルを選択するテーブル選択ステップと、
前記テーブル選択ステップで選択された前記可変長復号テーブルを用いて前記符号化混合信号を可変長復号する可変長復号ステップと、
前記可変長復号ステップで復号された前記混合信号を、複数の参照ピクチャリストのうちの前記符号化画像の画面間予測に用いられる参照ピクチャリストを特定する第１の情報と、前記第１の情報で特定される前記参照ピクチャリストに含まれる参照ピクチャのうちの前記符号化画像の画面間予測に用いられる参照ピクチャを特定する第２の情報とに分割する分割ステップとを、コンピュータに実行させる
プログラム。
【請求項12】
画像を符号化する集積回路であって、
複数の参照ピクチャリストのうちの前記画像の画面間予測に用いられた参照ピクチャリストを特定する第１の情報と、前記第１の情報で特定される前記参照ピクチャリストに含まれる参照ピクチャのうちの前記画像の画面間予測に用いられた参照ピクチャを特定する第２の情報とを、符号化対象信号から取得する取得部と、
前記取得部で取得された前記第１及び第２の情報を混合して混合信号を生成する混合信号生成部と、
前記混合信号生成部で生成された前記混合信号の最大変動幅に応じて、可変長符号化テーブルを選択するテーブル選択部と、
前記テーブル選択部で選択された前記可変長符号化テーブルを用いて前記混合信号を可変長符号化する可変長符号化部とを備える
集積回路。
複数の参照ピクチャリストのうちの前記画像の画面間予測に用いられた参照ピクチャリストを特定する第１の情報と、前記第１の情報で特定される前記参照ピクチャリストに含まれる参照ピクチャのうちの前記画像の画面間予測に用いられた参照ピクチャを特定する第２の情報とを、符号化対象信号から取得する取得部と、
前記取得部で取得された前記第１及び第２の情報を混合して混合信号を生成する混合信号生成部と、
前記混合信号生成部で生成された前記混合信号の最大変動幅に応じて、可変長符号化テーブルを選択するテーブル選択部と、
前記テーブル選択部で選択された前記可変長符号化テーブルを用いて前記混合信号を可変長符号化する可変長符号化部とを備える
集積回路。
【請求項13】
符号化画像を復号する集積回路であって、
符号化された混合信号である符号化混合信号を取得する取得部と、
前記混合信号の最大変動幅に応じて、可変長復号テーブルを選択するテーブル選択部と、
前記テーブル選択部で選択された前記可変長復号テーブルを用いて前記符号化混合信号を可変長復号する可変長復号部と、
前記可変長復号部で復号された前記混合信号を、複数の参照ピクチャリストのうちの前記符号化画像の画面間予測に用いられる参照ピクチャリストを特定する第１の情報と、前記第１の情報で特定される前記参照ピクチャリストに含まれる参照ピクチャのうちの前記符号化画像の画面間予測に用いられる参照ピクチャを特定する第２の情報とに分割する分割部とを備える
集積回路。
符号化された混合信号である符号化混合信号を取得する取得部と、
前記混合信号の最大変動幅に応じて、可変長復号テーブルを選択するテーブル選択部と、
前記テーブル選択部で選択された前記可変長復号テーブルを用いて前記符号化混合信号を可変長復号する可変長復号部と、
前記可変長復号部で復号された前記混合信号を、複数の参照ピクチャリストのうちの前記符号化画像の画面間予測に用いられる参照ピクチャリストを特定する第１の情報と、前記第１の情報で特定される前記参照ピクチャリストに含まれる参照ピクチャのうちの前記符号化画像の画面間予測に用いられる参照ピクチャを特定する第２の情報とに分割する分割部とを備える
集積回路。
【発明の詳細な説明】
【技術分野】
【0001】
本発明は、画像符号化および画像復号の分野に関し、特にエントロピー符号化、復号方法の一つである可変長符号化および復号のための方法およびシステムに関するものである。【背景技術】
【0002】
近年、インターネットを介したビデオ会議、デジタルビデオ放送および映像コンテンツのストリーミングを含む、例えば、ビデオ・オン・デマンドタイプのサービスのためのアプリケーションの数が増えており、これらのアプリケーションは、映像情報の送信に頼っている。映像データが送信され、または、記録される時、かなりの量のデータは、限られたバンド幅の従来の伝送路を通って送信され、または、限られたデータ容量の従来の記憶媒体に記憶される。従来の伝送チャネルおよび記憶媒体に映像情報を送信および記憶するためには、デジタルデータの量を圧縮または削減することが不可欠である。【0003】
そこで、映像データの圧縮のために、複数の映像符号化規格が開発されている。このような映像符号化規格は、例えばＨ．２６ｘで示されるＩＴＵ−Ｔ（国際電気通信連合電気通信標準化部門）規格、および、ＭＰＥＧ−ｘで示されるＩＳＯ／ＩＥＣ規格である。最新かつ最も進んだ映像符号化規格は、現在、Ｈ．２６４／ＡＶＣ、またはＭＰＥＧ−４ ＡＶＣで示される規格である（非特許文献１参照）。【0004】
Ｈ．２６４／ＡＶＣ規格では、既に符号化、復号した画像信号を元に画像信号を予測し、入力画像信号と前記予測した画像信号との差分信号を変換、量子化した差分信号と、予測情報を符号化することにより情報を圧縮する。画像信号を予測する場合に、既に符号化及び復号したピクチャ（参照ピクチャ）を特定する情報として、２つの参照ピクチャリストＬ０、Ｌ１が用いられている。そして、参照ピクチャを特定する情報として、２つの参照ピクチャリストＬ０、Ｌ１のうちのいずれの参照ピクチャリストを使用するかを特定するための第１の情報と、参照ピクチャを特定するための第２の情報とを用いている。例えば、上記の第１及び第２の情報を可変長符号化する可変長符号化部を図１８に、可変長復号する可変長復号部を図１９に示す。【先行技術文献】
【非特許文献】
【0005】
【非特許文献1】ＳＯ／ＩＥＣ １４４９６−１０「ＭＰＥＧ−４ Ｐａｒｔ １０ Ａｄｖａｎｃｅｄ Ｖｉｄｅｏ Ｃｏｄｉｎｇ」
【発明の概要】
【発明が解決しようとする課題】
【0006】
しかしながら、上記従来の方式のように、第１の情報と第２の情報とを用いると情報量が大きくなり、符号化効率が低下するという課題があった。【0007】
本発明は、上記従来の課題を解決するもので、参照ピクチャリストおよび参照ピクチャを特定するための情報量を削減することにより、符号化効率を向上させた画像符号化方法及び画像復号方法を提供することを目的とする。【課題を解決するための手段】
【0008】
本発明の一形態に係る画像符号化方法は、画像を符号化する方法である。具体的には、画像符号化方法は、複数の参照ピクチャリストのうちの前記画像の画面間予測に用いられた参照ピクチャリストを特定する第１の情報と、前記第１の情報で特定される前記参照ピクチャリストに含まれる参照ピクチャのうちの前記画像の画面間予測に用いられた参照ピクチャを特定する第２の情報とを、符号化対象信号から取得する取得ステップと、前記取得ステップで取得された前記第１及び第２の情報を混合して混合信号を生成する混合信号生成ステップと、前記混合信号生成ステップで生成された前記混合信号の最大変動幅に応じて、可変長符号化テーブルを選択するテーブル選択ステップと、前記テーブル選択ステップで選択された前記可変長符号化テーブルを用いて前記混合信号を可変長符号化する可変長符号化ステップとを含む。【0009】
上記のように、混合信号の最大変動幅に応じた適切な可変長符号化テーブルを選択することにより、第１及び第２の情報の符号量を削減することができる。【0010】
また、前記可変長符号化テーブルは、前記混合信号の取り得る複数の値と複数の符号とを対応づけて保持してもよい。そして、前記複数の符号は、符号長が最も長く、且つ最下位桁の異なる２つの符号を含んでもよい。【0011】
また、前記テーブル選択ステップでは、第１及び第２ピクチャリストの一方に登録されている前記参照ピクチャのみを用いる場合と、前記第１及び第２ピクチャリストの両方に登録されている前記参照ピクチャを用いる場合との全ての組み合わせを前記最大変動幅として、前記可変長符号化テーブルを選択してもよい。【0012】
一例として、前記テーブル選択ステップでは、前記第１ピクチャリストの登録インデックス数ｎ１と、前記第２ピクチャリストの登録インデックス数ｎ２とを前記符号化対象信号から取得し、ｎ１＋ｎ２＋（ｎ１×ｎ２）で算出される前記最大変動幅ＭａｘＲａｎｇｅに応じて、前記可変長符号化テーブルを選択してもよい。【0013】
他の例として、前記テーブル選択ステップでは、前記第１及び第２ピクチャリストに登録されている前記参照ピクチャが同一の場合に、前記第１ピクチャリストの登録インデックス数ｎ１を前記符号化対象信号から取得し、ｎ１＋（ｎ１×ｎ１）で算出される前記最大変動幅ＭａｘＲａｎｇｅに応じて、前記可変長符号化テーブルを選択してもよい。【0014】
さらに、前記画像符号化方法は、前記可変長符号化ステップで用いられた前記可変長符号化テーブルを更新するテーブル更新ステップを含んでもよい。そして、前記テーブル更新ステップでは、前記混合信号の値に対応する符号の符号長が短くなるように、前記混合信号の取り得る各値と符号との対応関係を変更してもよい。【0015】
本発明の一形態に係る画像復号方法は、符号化画像を復号する方法である。具体的には、画像復号方法は、符号化された混合信号である符号化混合信号を取得する取得ステップと、前記混合信号の最大変動幅に応じて、可変長復号テーブルを選択するテーブル選択ステップと、前記テーブル選択ステップで選択された前記可変長復号テーブルを用いて前記符号化混合信号を可変長復号する可変長復号ステップと、前記可変長復号ステップで復号された前記混合信号を、複数の参照ピクチャリストのうちの前記符号化画像の画面間予測に用いられる参照ピクチャリストを特定する第１の情報と、前記第１の情報で特定される前記参照ピクチャリストに含まれる参照ピクチャのうちの前記符号化画像の画面間予測に用いられる参照ピクチャを特定する第２の情報とに分割する分割ステップとを含む。【0016】
本発明の一形態に係る画像符号化装置は、画像を符号化する。具体的には、画像符号化装置は、複数の参照ピクチャリストのうちの前記画像の画面間予測に用いられた参照ピクチャリストを特定する第１の情報と、前記第１の情報で特定される前記参照ピクチャリストに含まれる参照ピクチャのうちの前記画像の画面間予測に用いられた参照ピクチャを特定する第２の情報とを、符号化対象信号から取得する取得部と、前記取得部で取得された前記第１及び第２の情報を混合して混合信号を生成する混合信号生成部と、前記混合信号生成部で生成された前記混合信号の最大変動幅に応じて、可変長符号化テーブルを選択するテーブル選択部と、前記テーブル選択部で選択された前記可変長符号化テーブルを用いて前記混合信号を可変長符号化する可変長符号化部とを備える。【0017】
本発明の一形態に係る画像復号装置は、符号化画像を復号する。具体的には、画像復号装置は、符号化された混合信号である符号化混合信号を取得する取得部と、前記混合信号の最大変動幅に応じて、可変長復号テーブルを選択するテーブル選択部と、前記テーブル選択部で選択された前記可変長復号テーブルを用いて前記符号化混合信号を可変長復号する可変長復号部と、前記可変長復号部で復号された前記混合信号を、複数の参照ピクチャリストのうちの前記符号化画像の画面間予測に用いられる参照ピクチャリストを特定する第１の情報と、前記第１の情報で特定される前記参照ピクチャリストに含まれる参照ピクチャのうちの前記符号化画像の画面間予測に用いられる参照ピクチャを特定する第２の情報とに分割する分割部とを備える。【0018】
本発明の一形態に係るプログラムは、コンピュータに、画像を符号化させる。具体的には、プログラムは、複数の参照ピクチャリストのうちの前記画像の画面間予測に用いられた参照ピクチャリストを特定する第１の情報と、前記第１の情報で特定される前記参照ピクチャリストに含まれる参照ピクチャのうちの前記画像の画面間予測に用いられた参照ピクチャを特定する第２の情報とを、符号化対象信号から取得する取得ステップと、前記取得ステップで取得された前記第１及び第２の情報を混合して混合信号を生成する混合信号生成ステップと、前記混合信号生成ステップで生成された前記混合信号の最大変動幅に応じて、可変長符号化テーブルを選択するテーブル選択ステップと、前記テーブル選択ステップで選択された前記可変長符号化テーブルを用いて前記混合信号を可変長符号化する可変長符号化ステップとを、コンピュータに実行させる。【0019】
本発明の他の形態に係るプログラムは、コンピュータに、符号化画像を復号させる。具体的には、プログラムは、符号化された混合信号である符号化混合信号を取得する取得ステップと、前記混合信号の最大変動幅に応じて、可変長復号テーブルを選択するテーブル選択ステップと、前記テーブル選択ステップで選択された前記可変長復号テーブルを用いて前記符号化混合信号を可変長復号する可変長復号ステップと、前記可変長復号ステップで復号された前記混合信号を、複数の参照ピクチャリストのうちの前記符号化画像の画面間予測に用いられる参照ピクチャリストを特定する第１の情報と、前記第１の情報で特定される前記参照ピクチャリストに含まれる参照ピクチャのうちの前記符号化画像の画面間予測に用いられる参照ピクチャを特定する第２の情報とに分割する分割ステップとを、コンピュータに実行させる。【0020】
本発明の一形態に係る集積回路は、画像を符号化する。具体的には、集積回路は、複数の参照ピクチャリストのうちの前記画像の画面間予測に用いられた参照ピクチャリストを特定する第１の情報と、前記第１の情報で特定される前記参照ピクチャリストに含まれる参照ピクチャのうちの前記画像の画面間予測に用いられた参照ピクチャを特定する第２の情報とを、符号化対象信号から取得する取得部と、前記取得部で取得された前記第１及び第２の情報を混合して混合信号を生成する混合信号生成部と、前記混合信号生成部で生成された前記混合信号の最大変動幅に応じて、可変長符号化テーブルを選択するテーブル選択部と、前記テーブル選択部で選択された前記可変長符号化テーブルを用いて前記混合信号を可変長符号化する可変長符号化部とを備える。【0021】
本発明の他の形態に係る集積回路は、符号化画像を復号する。具体的には、集積回路は、符号化された混合信号である符号化混合信号を取得する取得部と、前記混合信号の最大変動幅に応じて、可変長復号テーブルを選択するテーブル選択部と、前記テーブル選択部で選択された前記可変長復号テーブルを用いて前記符号化混合信号を可変長復号する可変長復号部と、前記可変長復号部で復号された前記混合信号を、複数の参照ピクチャリストのうちの前記符号化画像の画面間予測に用いられる参照ピクチャリストを特定する第１の情報と、前記第１の情報で特定される前記参照ピクチャリストに含まれる参照ピクチャのうちの前記符号化画像の画面間予測に用いられる参照ピクチャを特定する第２の情報とに分割する分割部とを備える。【発明の効果】
【0022】
本発明の画像符号化方法および画像復号方法によれば、第１及び第２の情報の情報量を削減することにより、符号化効率を向上させることが可能になる。【図面の簡単な説明】
【0023】
【発明を実施するための形態】
【0024】
（実施の形態１）図１Ａ及び図１Ｂを参照して、実施の形態１に係る画像符号化装置を説明する。図１Ａは、実施の形態１に係る画像符号化装置１０の概略ブロック図である。図１Ｂは、画像符号化装置１０の動作を示すフローチャートである。
【0025】
実施の形態１に係る画像符号化装置１０は、図１Ａに示されるように、取得部１１と、混合信号生成部１２と、テーブル選択部１３と、可変長符号化部１４とを備える。【0026】
取得部１１は、符号化対象信号に含まれる第１の情報及び第２の情報を取得する（Ｓ１１）。本実施の形態１における第１の情報は、複数の参照ピクチャリストのうちの画像の画面間予測に用いられた参照ピクチャリストを特定する情報である。また、本実施の形態２における第２の情報は、第１の情報で特定される参照ピクチャリストに含まれる参照ピクチャのうちの画像の画面間予測に用いられた参照ピクチャを特定する情報である。【0027】
混合信号生成部１２は、取得部１１で取得された第１及び第２の情報を混合して混合信号を生成する（Ｓ１２）。第１及び第２の情報の混合の仕方は、後述する。【0028】
テーブル選択部１３は、混合信号生成部１２で生成された混合信号の最大変動幅に応じて、予め作成されている複数の画像符号化テーブルのうちから、混合信号の符号化に用いる可変長符号化テーブルを選択する（Ｓ１３）。テーブル選択部１３で選択され得る可変長符号化テーブルは、混合信号の取り得る複数の値と複数の符号とを対応づけて保持している。また、可変長符号化テーブルに保持されている複数の符号は、符号長が最も長く、且つ最下位桁の異なる２つの符号を含む。【0029】
可変長符号化部１４は、テーブル選択部１３で選択された可変長符号化テーブルを用いて、混合信号を可変長符号化する（Ｓ１４）。【0030】
図２Ａは、本発明の可変長符号化方法を用いた画像符号化装置のブロック図である。図２Ａに示すように、画像符号化装置１００は、差分部１１０と、変換部１２０と、量子化部１３０と、逆量子化部１４０と、逆変換部１５０と、加算部１６０と、ブロックメモリ（図示省略）と、フレームメモリ（図示省略）と、画面内予測部１７０と、画面間予測部１８０と、符号化制御部１９０と、スイッチ２００、２１０と、可変長符号化部２２０とを備える。なお、画面内予測部１７０、画面間予測部１８０、及び可変長符号化部２２０は、それぞれ内部にメモリを備えていても良い。【0031】
入力画像信号は、画面間予測部１８０および差分部１１０に対して入力される。画面間予測部１８０は、符号化制御部１９０より入力される参照ピクチャ情報に基づいて、入力画像信号と既に符号化済みの画像信号である復号画像信号とから予測画像信号を生成し、スイッチ２００のＳ２に対して出力する。さらに、予測画像信号の生成に必要な画面間予測モード情報と、参照ピクチャインデックス情報とを含む画面間予測情報をスイッチ２１０のＳ３に対して出力する。【0032】
一方、画面内予測部１７０は、既に符号化済みの画像信号である復号画像信号から予め決められた方法（例えば、隣接画素値を水平方向に引き伸ばした画像信号を予測画像とする）により予測画像信号を生成し、スイッチ２００のＳ１に対して出力する。さらに予測画像信号の生成に必要な予測モード情報を含む画面内予測情報をスイッチ２１０のＳ２に対して出力する。【0033】
ここで、画面間予測モード情報とは、対象画像と参照ピクチャ画像（既に符号化済みのピクチャ）との関係を示す画面間予測情報の一部であり、具体的には、参照ピクチャを管理する参照ピクチャリストのうち、どの参照ピクチャリストで管理されている参照ピクチャ画像を予測に使用するかを示す情報である。例えば、２つの参照ピクチャリストＬ０、Ｌ１がある場合、参照ピクチャリストＬ０のみを使用する、参照ピクチャリストＬ１のみを使用する、参照ピクチャリストＬ０、Ｌ１の両方を使用するという３種類の状態を示す情報となる。【0034】
スイッチ２００は、符号化制御部１９０よりＳ１またはＳ２のどちらかを選択した結果を取得し、選択された予測画像信号を出力する。【0035】
ここで、Ｓ１またはＳ２の決定方法としては、予測画像信号と入力画像信号との差分値と、予測画像の生成に必要な情報との重み付け和の小さい方を予測画像信号として決定してもよい。決められた予測画像信号は、差分部１１０と、さらに既に符号化済みの画像信号を生成するために加算部１６０とに対して出力する。符号化制御部１９０は、さらに、符号化対象信号の種別を示す符号化制御信号をスイッチ２１０のＳ３と、可変長符号化部２２０とに対して出力する。【0036】
差分部１１０は、入力画像信号と予測画像信号との差分処理を行い、その信号を変換部１２０に対して出力する。変換部１２０は、差分信号に対して変換処理を施し、量子化部１３０に対して出力する。量子化部１３０は、変換処理が施された変換係数に対して量子化処理を施し、量子化変換係数情報をスイッチ２１０のＳ１と、逆量子化部１４０とに対して出力する。逆量子化部１４０は、量子化変換係数情報に逆量子化処理を施し、変換係数を逆変換部１５０に対して出力する。逆変換部１５０は、変換係数に対して逆変換処理を施し、復号残差画像信号を加算部１６０に対して出力する。加算部１６０では、復号残差画像信号と予測画像信号とに対して加算処理を施し、復号画像信号を画面内予測部１７０と、画面間予測部１８０とに対して出力する。スイッチ２１０は、符号化制御信号が示す信号の種別に応じてＳ１、Ｓ２、Ｓ３を切り替え、符号化対象信号を可変長符号化部２２０に対して出力する。可変長符号化部２２０は、符号化対象信号を符号化制御信号が示す信号の種別に応じて可変長符号化し、符号列として出力する。【0037】
さらに可変長符号化部２２０を図２Ｂ及び図３を用いて詳細に説明する。図２Ｂは、可変長符号化部２２０のブロック図である。また図３は、可変長符号化部２２０の動作フローを示すフローチャートである。【0038】
可変長符号化部２２０は、制御部（図１Ａの取得部１１に相当）２２１と、信号混合部（図１Ａの混合信号生成部１２に相当）２２２と、ＶＬＣテーブル群２２３と、ＶＬＣテーブル選択部（図１Ａのテーブル選択部１３に相当）２２４と、テーブル参照部（図１Ａの可変長符号化部１４に相当）２２５と、テーブル更新部２２６とを備える。なお、信号混合部は内部にメモリを備えていても良い。【0039】
可変長符号化部２２０は、入力された符号化対象信号に対応する制御信号を制御部２２１に対して入力する（ステップＳ３０１）。制御部２２１は、符号化対象信号が混合対象信号かどうかを判断する。そして、混合対象情報である場合（ステップＳ３０２でＹＥＳ）、符号化対象信号は、信号混合部２２２に対して入力され保持される（ステップＳ３０３）。【0040】
一方、混合を完了するための情報が全て取得できていない場合（ステップＳ３０４でＮＯ）、さらに符号化制御信号に対応する制御信号を取得することを繰り返し、混合を完了するための情報が全て取得できれば（ステップＳ３０４でＹＥＳ）、符号化対象信号の混合処理を実施し、符号化信号Ｓを決定する（ステップＳ３０５）。なお、符号化対象信号が混合対象信号ではない場合（ステップＳ３０２でＮＯ）、符号化対象信号をそのまま符号化信号Ｓとして決定する。【0041】
なお、ここで混合対象信号とは、例えば予測に用いる画面間予測モード情報（第１の情報）と、参照インデックス情報（第２の情報）とであってもよい。これらの情報は、共に画面間予測符号化に関する情報である。具体的には、画面間予測モード情報は、参照ピクチャリストのうちのどちらか一方、もしくは両方の参照ピクチャリストを用いるかを示す情報である。また、参照インデックス情報は、画面間予測モードで指定された参照ピクチャリストの中で、実際に参照されるピクチャを示すインデックス情報（番号）である。【0042】
制御部２２１は、さらに符号化対象信号に対応するテーブル選択情報ＣＳを決定し、ＶＬＣテーブル選択部２２４に対して出力する（ステップＳ３０６）。ＶＬＣテーブル選択部２２４は、テーブル選択情報ＣＳに対応するテーブル情報ＴＩをＶＬＣテーブル群２２３より取得し、取得したテーブル情報をテーブル参照部２２５に対して出力する（ステップＳ３０７）。また、対応するテーブル情報ＴＩをテーブル更新部に対して出力する。【0043】
テーブル参照部２２５は、入力される符号化信号Ｓに対応する符号を取得したテーブル情報ＴＩに示されるＶＬＣテーブルから探索し、符号列ＢＳとして出力する（ステップＳ３０８）。ここでテーブル参照部２２５は、テーブル参照結果ＴＲ（符号列ＢＳを取得するために用いたテーブル位置）をテーブル更新部２２６に対して出力する。テーブル更新部２２６は、テーブル参照結果ＴＲに基づいて用いられたＶＬＣテーブルを更新し、ＶＬＣテーブル群２２３に対して更新処理を行う（ステップＳ３０９）。【0044】
さらに図４及び図５Ａ〜図５Ｃを用いて、ＶＬＣテーブルの更新方法について説明する。図４は、ＶＬＣテーブル群の例を示した図である。図５Ａは、符号化信号列の例を示す図である。図５Ｂは、入力信号（符号化信号）とシンボルとの対応テーブルの一例を示す図である。図５Ｃは、対応テーブルが更新される様子を示す模式図である。【0045】
図４に示すように、ＶＬＣテーブル群には、複数のｃｏｄｅ（符号列）とｖａｌ（符号化対象信号列）との対応テーブルが蓄積されている。図５Ａは、可変長符号化部２２０に入力される符号化信号列の一例である。なお、図４に示すＶＬＣテーブル群のうち、どのＶＬＣテーブルを用いるかは、例えば信号の種別に応じて決定される。決定方法については、後に詳しく説明する。【0046】
図５Ｂに示す対応テーブル５０１は、入力される符号化信号Ｓとシンボルインデックスとの対応関係を示す。図５Ａの符号化信号列に対応するシンボルインデックスは、ｓ４、ｓ７、ｓ７、ｓ２の順番となる。図５Ｃは、ｓ４、ｓ７、ｓ７、ｓ２の順番でテーブル参照を行う場合の対応テーブルの更新の一例を示している。初期状態の対応テーブル５０２は、ｓ４を参照したため、ｓ４を一つ上にシフトし、ｓ３を一つ下にシフトする形で入れ替えられる。その結果、対応テーブル５０３に示すように、参照されたシンボルが以前の状態と比べて上位に位置する形となる。同様に、ｓ７、ｓ７、ｓ２と更新すると、対応テーブル５０４、５０５、５０６の順に更新される。【0047】
上記のように更新することにより、発生頻度の高いシンボルインデックスに対する符号化対象信号列ｖａｌを小さくすることができ、ＶＬＣテーブルにより算出される符号長を短くすることができる。例えば、初期状態の対応テーブル５０２を使って図５Ａの符号化信号列をｖａｌに変換し、図４のＶＬＣＴａｂｌｅ［０］を用いて符号化したとする。この場合、ｖａｌは３、６、６、１となり、符号長はそれぞれ４、７、７、２となり、符号長の合計は２０となる。一方、更新後の対応テーブル５０６を使った場合、ｖａｌは２、４、４、０となり、符号長はそれぞれ３、５、５、１となり、符号長の合計は１４となる。また、実際に参照した直後に対応テーブルを更新する場合には、ｖａｌは３、６、５、１となり、符号長はそれぞれ４、７、６、２となり、符号長の合計は１９となる。このように、傾向が似た信号が発生する場合には、符号長を短くすることが期待できる。【0048】
なお、図５Ａ〜図５Ｃの例では、更新時にシンボルインデックスを一つ上にシフトする例を述べたが、これに限らない。対応テーブルの下位のシンボルインデックスに対しては一つ以上シフトし、その間のシンボルインデックスを一つずつ下にシフトする方法をとっても良い。これにより、発生頻度が低いシンボルインデックスの発生頻度が上がった場合に、短時間で符号長を短くすることができ、符号化効率を向上することができる。【0049】
また、ここでは図５Ｂに示す符号化信号Ｓとシンボルインデックスとを別として扱ったが、直接符号化信号Ｓをシンボルインデックスとして更新してもよい。この場合、使用メモリ量を削減することが期待できる。【0050】
さらに図６を用いて、２つの参照ピクチャリストＬ０、Ｌ１がある場合の画面間予測モード情報と、参照インデックス情報との混合方法について説明する。まず、出力となる出力インデックス（符号化信号Ｓ）をリセット（０をセット）する（ステップＳ６０１）。【0051】
次に、信号混合部２２２は、画面間予測モード情報と参照インデックス情報（参照ピクチャリストに対応する予測に使用される参照インデックス番号および参照インデックス数）とを入力する（ステップＳ６０２）。画面間予測モード情報が、参照ピクチャリストＬ０に登録されている参照ピクチャのみを予測に用いることを示す場合（ステップＳ６０３でＹＥＳ）、出力インデックスに対し、参照ピクチャリストＬ０中で使用される参照インデックス番号を加える（ステップＳ６０４）。一方、画面間予測モード情報が、参照ピクチャリストＬ０に登録されている参照ピクチャのみを予測に用いるのでないことを示す場合（ステップＳ６０３でＮＯ）、出力インデックスに参照ピクチャリストＬ０のインデックス数を加える（ステップＳ６０５）。【0052】
なお、ここでインデックス数とは、参照ピクチャリストに入れられているインデックスの総数であり、対象フレームの符号化時には既に決められている情報である。この情報は制御部２２１より信号混合部２２２に入力され、信号混合部２２２で保持される。【0053】
次に、画面間予測モード情報が、参照ピクチャリストＬ１に登録されている参照ピクチャのみを予測に用いることを示す場合（ステップＳ６０６でＹＥＳ）、出力インデックスに対し、参照ピクチャリストＬ１中で使用される参照インデックス番号を加える（ステップＳ６０７）。一方、画面間予測モード情報が、参照ピクチャリストＬ１に登録されている参照ピクチャのみを予測に用いるのでないことを示す場合（ステップＳ６０６でＮＯ）、出力インデックスにさらに参照ピクチャリストＬ１のインデックス数を加える（ステップＳ６０８）。さらに、出力インデックスに参照ピクチャリストＬ０中で使用される参照インデックス番号と参照ピクチャリストＬ１のインデックス数とを掛け合わせた値を加える（ステップＳ６０９）。さらに、出力インデックスに参照ピクチャリストＬ１中で使用される参照インデックス番号を加える（ステップＳ６１０）。最後に得られる出力インデックスが符号化信号Ｓとして決定され（ステップＳ６１１）、テーブル参照部２２５に対して出力される。【0054】
この混合方法については、例えば、式１のように示すことができる。【0055】
if ( PredDir == L0-Pred ){
TargetIdx = L0Idx;
}
else if( PredDir == L1-Pred )
{
TargetIdx = Number(L0)+L1Idx;
}
else // ( PredDir == Bi-Pred )
{
TargetIdx = {Number(L0) + Number(L1)}+L0Idx*Number(L1)+L1Idx;
} ・・（式１）
【0056】
ここでＰｒｅｄＤｉｒは画面間予測モード、すなわち参照ピクチャリストＬ０のみを使用するか（Ｌ０−Ｐｒｅｄ）、参照ピクチャリストＬ１のみを使用するか（Ｌ１−Ｐｒｅｄ）、参照ピクチャリストＬ０、Ｌ１の両方を使用するか（Ｂｉ−Ｐｒｅｄ）を示す情報である。また、ＴａｒｇｅｔＩｄｘは出力インデックス（符号化信号Ｓ）を、Ｎｕｍｂｅｒ（Ｌ０）は参照ピクチャリストＬ０のインデックス数を、Ｎｕｍｂｅｒ（Ｌ１）は参照ピクチャリストＬ１のインデックス数を、Ｌ０Ｉｄｘは参照ピクチャリストＬ０中で使用される参照インデックス番号を、Ｌ１Ｉｄｘは参照ピクチャリストＬ１中で使用される参照インデックス番号を、それぞれ示す。【0057】
なお、復号時の除算を削減するため、Ｎｕｍｂｅｒ（Ｌ１）が２の乗数ではない場合、Ｎｕｍｂｅｒ（Ｌ１）にＯｆｆｓｅｔ値を加え、Ｎｕｍｂｅｒ（Ｌ１）を超える最も小さい２の乗数となるようにしてもよい。この場合、ＴａｒｇｅｔＩｄｘは離散数になるが、値の取りうる種別数（最大変動幅）は変わらず、また、間に変換テーブルを持つことにより、式１を用いることができ、復号時の除算を削減することできる。【0058】
次に図７及び図８Ａ〜図８Ｃを参照して、ＶＬＣテーブル選択部２２４における処理の流れを説明する。ＶＬＣテーブル選択部２２４は、制御部２２１より参照ピクチャリストＬ０のインデックス数および参照ピクチャリストＬ１のインデックス数を取得する（ステップＳ７０１）。なお、上記に述べたように、参照ピクチャリストＬ０のインデックス数および参照ピクチャリストＬ１のインデックス数は、ストリームのヘッダ情報として、符号化対象信号の符号化に先立って、既に符号化されている情報である。次に、取得した参照ピクチャ情報より符号化信号Ｓの最大変動幅を算出する（ステップＳ７０２）。ここで最大変動幅（ＭａｘＲａｎｇｅ）は、例えば、式２のように算出できる。【0059】
MaxRange = {Number(L1)+Number(L0)}+ {Number(L1)*Number(L0)}・・・（式２）【0060】
なお、式１の場合と同様に、Ｎｕｍｂｅｒ（Ｌ０）は参照ピクチャリストＬ０のインデックス数を、Ｎｕｍｂｅｒ（Ｌ１）は参照ピクチャリストＬ１のインデックス数を示す。上記に示すように最大変動幅とは、符号化信号Ｓの取りうる値の数の最大値を示しており、例えば、符号化信号Ｓが０、２、４の３種類のみの信号となる場合には、最大変動幅は“３”となる。言い換えれば、式２で算出される最大変動幅は、参照ピクチャリストＬ０、Ｌ１の一方に登録されている参照ピクチャのみを用いる場合と、第１及び第２ピクチャリストＬ０、Ｌ１の両方に登録されている参照ピクチャを用いる場合との全ての組み合わせ数を表す。【0061】
次に、最大変動幅に合わせてＶＬＣテーブルを選択する（ステップＳ７０３）。【0062】
図８Ａ〜図８Ｃは、最大変動幅に合わせてＶＬＣテーブルを選択する場合の一例を示している。例えば図８Ａは、最大変動幅（ＭａｘＲａｎｇｅ）と図４のＶＬＣテーブル群との対応関係を示した例である。ただし、最大変動幅が“２”の場合には、単純な０もしくは１のフラグとして符号化できるため、ＶＬＣテーブルは用いなくてもよい。図８Ａの場合において、最大変動幅が“３”の場合には、短い符号になるＶＬＣテーブルを選択する。一方、最大変動幅が大きい場合には、その発生確率に合わせて異なるＶＬＣテーブルを選択する方が効率が高い場合があるため、別のＶＬＣテーブルを選択し（図８Ａでは、最大変動幅が“１１”以上で異なるＶＬＣテーブルを使用する例を示す）、それ以外は共通のＶＬＣテーブルを利用する例である。【0063】
それ以外は共通のＶＬＣテーブルを利用する例である。【0064】
このような対応関係を用いる場合、ＶＬＣテーブルの切換えが少なくなり、処理量が少なくてすむ。その結果、ＶＬＣテーブルを保持するためのメモリ量を節約することができる。【0065】
一方、図８Ｂは、最大変動幅が既知であるため、ＶＬＣテーブルの符号を１ビットずつ増加させ、最後の符号のビットを１ビット削る方式の例である。例えば、最大変動幅が“５”である場合、符号化対象信号３、４に対して同じ長さの符号（０００１、００００）を用いることが出来る。この場合、符号長が最大となる部分で、符号量を節約することができるメリットがある。また、図８Ｂの方法は、式３の方法で符号に変更することができる。【0066】
for( counter=0; counter<val; counter++ ){
output_code(“0”);
}
if ( val != MaxRange )
{
output_code(“1”);
} ・・・（式３）
【0067】
図８Ｃは、式３の処理の流れを示すフローチャートである。まず上記より得られる符号化対象信号ｖａｌおよび最大変動幅ＭａｘＲａｎｇｅを取得する（ステップＳ８０１）。次にＣｏｕｎｔｅｒが０からｖａｌ−１の値をとる間繰り返し処理を行う（ステップＳ８０２とステップＳ８０４で囲まれる処理）。繰り返し処理として、符号“０”を出力する（ステップＳ８０３）処理を実施し、その後、Ｃｏｕｎｔｅｒを１つ進めて（ステップＳ８０４）、ステップＳ８０２へ戻る。なお、ｖａｌ＝０となる場合には、繰り返し処理は行わないものとする。全ての繰り返し処理が終わった後、ｖａｌの値がＭａｘＲａｎｇｅの値と等しいかどうかを判定する。そして、一致しない場合には（ステップＳ８０５でＮＯ）、符号“１”を出力して（ステップＳ８０６）終了する。また、ｖａｌの値とＭａｘＲａｎｇｅの値とが一致する場合には（ステップＳ８０６でＹＥＳ）、そのまま終了する。これによって出力された符号列が符号化対象信号ｖａｌに対応する符号列となる。【0068】
なお、上記のテーブルの組み合わせ方法については一例でありこれに限らない。【0069】
なお、初期テーブルもしくは更新テーブルについては、ストリームのヘッダ部分（実施の形態３記載のヘッダ部）に記述しておいてもよい。【0070】
なお、本実施例の説明では、参照ピクチャリストが２種類の場合について説明したが、本発明はこれに限らない。３種類以上ある場合には、さらに画面間予測モード情報および参照インデックス情報の符号量が増えるため、本発明を用いることで、さらに符号量の削減が期待できる。【0071】
なお、制御部２２１により符号化制御信号中の信号種別からテーブル選択情報ＣＳを決定する方法としては、予め符号化方法及び復号方法で種別情報毎にどのＶＬＣテーブルを使用するかを決めておいても良い。これにより、信号種別にあわせたＶＬＣテーブルを使用することができる。【0072】
また、異なる種別情報（例えば予測画像生成に使用する画面間予測に必要な情報と、画面内予測に必要な情報）に対して同じＶＬＣテーブルを使用することにしておいてもよい。信号の種別が異なったとしても、符号化対象信号が同じような分布を取る場合があり、この場合、ＶＬＣテーブルを共有化することで、符号化効率を維持しつつＶＬＣテーブルの保持に必要なメモリ量を削減することができる。【0073】
（実施の形態２）図９Ａ及び図９Ｂを参照して、実施の形態２に係る画像復号装置を説明する。図９Ａは、実施の形態２に係る画像復号装置９０の概略ブロック図である。図９Ｂは、画像復号装置９０の動作を示すフローチャートである。
【0074】
実施の形態２に係る画像復号装置９０は、取得部９１と、テーブル選択部９２と、可変長復号部９３と、分割部９４とを備える。【0075】
取得部９１は、符号化された混合信号である符号化混合信号を取得する（Ｓ９１）。【0076】
テーブル選択部９２は、混合信号の最大変動幅に応じて、予め作成されている複数の画像復号テーブルのうちから、混合信号の復号に用いる可変長復号テーブルを選択する（Ｓ９２）。【0077】
可変長復号部９３は、テーブル選択部９２で選択された可変長復号テーブルを用いて符号化混合信号を可変長復号する（Ｓ９３）。【0078】
分割部９４は、可変長復号部９３で復号された混合信号を第１の情報と第２の情報とに分割する（Ｓ９４）。【0079】
図１０Ａは、本発明の可変長復号方法を用いた画像復号装置のブロック図である。図１０Ａに示すように、画像復号装置９００は、可変長復号部９１０と、復号制御部９２０と、逆量子化部９３０と、逆変換部９４０と、画面内予測部９５０と、画面間予測部９６０と、加算部９７０と、スイッチ９８０とを備える。なお、可変長復号部９１０、画面内予測部９５０、及び画面間予測部９６０は、それぞれ内部にメモリを備えていても良い。【0080】
入力符号列は、本発明の可変長符号化方法を用いた画像符号化装置１００により生成されたものとする。入力符号列は、可変長復号部９１０に入力される。可変長復号部９１０では、復号制御部９２０より得られる信号の種別情報に基づいて、符号列に対して可変長復号を施し、復号信号を復号制御部９２０と逆量子化部９３０とに対して出力する。復号信号が量子化された変換係数である場合、逆量子化部９３０で逆量子化を施され、逆変換部９４０で逆変換を施されて、復号残差画像信号となり、加算部９７０に対して出力される。また復号信号が予測画像生成関連情報である場合、復号制御部９２０は復号信号を画面間予測部９６０と画面内予測部９５０とスイッチ９８０とに対して出力する。画面間予測部９６０は、既に復号済みの復号画像信号と予測画像生成関連情報とから予測画像信号を生成し、スイッチ９８０のＳ２に対して出力する。一方、画面内予測部９５０は、既に復号済みの復号画像信号と予測画像生成関連情報とから予測画像信号を生成し、スイッチ９８０のＳ１に対して出力する。スイッチ９８０は、符号化制御部９２０から得られる符号化モード情報により、Ｓ１もしくはＳ２のどちらか一方に切り替え、選択された予測画像信号を加算部９７０に対して出力する。加算部９７０は、復号残差画像信号と予測画像信号とを加算して復号画像信号として出力する。また、復号制御部９２０は、可変長復号部９１０に対して次に復号すべき信号種別情報を出力する。【0081】
さらに可変長復号部９１０を図１０Ｂおよび図１１を用いて詳細に説明する。図１０Ｂは、可変長復号部９１０のブロック図である。また図１１は、可変長復号部９１０の動作フローを示すフローチャートである。【0082】
可変長復号部９１０は、制御部（図９Ａの取得部９１に相当）９１１と、信号分割部（図９Ａの分割部９４に相当）９１２と、ＶＬＤテーブル群９１３と、ＶＬＤテーブル選択部（図９Ａのテーブル選択部９２に相当）９１４と、テーブル参照部（図９Ａの可変長復号部９３に相当）９１５と、テーブル更新部９１６とを備える。【0083】
可変長復号部９１０は、入力された信号種別情報を含む復号制御信号を制御部９１１に対して入力する（ステップＳ１１０１）。制御部９１１は、種別情報に対応するテーブル選択情報ＣＳを決定し、ＶＬＤテーブル選択部９１４に対して出力する（ステップＳ１１０２）。ＶＬＤテーブル選択部９１４は、テーブル選択情報ＣＳに対応するＶＬＤテーブルをＶＬＤテーブル群９１３より取得し、取得したテーブル情報ＴＩをテーブル参照部９１５に対して出力する（ステップＳ１１０３）。また、ＶＬＤテーブル選択部９１４は、対応するＶＬＤテーブルをテーブル更新部９１６に対して出力する。テーブル参照部９１５は、取得したＶＬＤテーブルから入力される符号列ＢＳに対応する符号を探索し、復号信号ＤＳとして出力する（ステップＳ１１０４）。ここでテーブル参照部９１５は、テーブル参照結果ＴＲ（復号信号ＤＳを取得するために用いたテーブル位置）をテーブル更新部９１６に対して出力する。テーブル更新部９１６は、用いられたＶＬＤテーブルのテーブル参照結果ＴＲに基づきＶＬＤテーブルを更新する（ステップＳ１１０５）。次に、制御部９１１は、復号制御情報の信号種別情報により、復号対象の符号列の情報に対応して取得される復号信号ＤＳが分割対象であるかどうかを判断する。【0084】
なお、ここで分割対象信号とは、実施の形態１で説明した符号化時に混合対象とした信号であり、例えば予測に用いる画面間予測モード情報（第１の情報）と、参照インデックス情報（第２の情報）とが混合された情報としてもよい。これらの情報は、共に画面間予測符号化に関する情報として得られる情報となる。【0085】
分割対象であった場合（ステップＳ１１０６でＹＥＳ）、信号分割部９１２は、復号信号ＤＳを分割する（ステップＳ１１０７）。なお、分割方法については後に詳しく説明する。一方、分割対象ではない場合（ステップＳ１１０６でＮＯ）、復号信号ＤＳはそのまま復号信号として出力される。【0086】
さらに図１２Ａ及び図１２Ｂを用いてＶＬＤテーブルの参照方法について説明する。図１２Ａは、ＶＬＤテーブル群の例である。図１２Ａに示すように、ＶＬＤテーブル群には複数のＣｏｄｅ（符号列）とｖａｌ（復号信号）との対応テーブルが蓄積されている。復号に必要な種別情報を取得し、実施の形態１に示す方法と同じように、種別情報と対応するＶＬＤテーブルをＶＬＤテーブル群より抽出し、符号列ＢＳに対応する復号信号ＤＳを出力する。例えば、ＶＬＤテーブル０を対象とする復号処理の場合、符号列が“００１”であった場合にはｖａｌ“２”を復号信号ＤＳとして出力する。【0087】
その後、ＶＬＤテーブルの更新処理を行う。なお、ＶＬＤテーブルの更新は、符号化方法と同じ方法を用いる。実施の形態１に示した方法と同じ方法に従い、例えば、更新の幅を変える場合には、復号時に同じ方法で更新テーブルを切り替える。実施の形態１で詳しく説明したように、更新に用いる場合に、中間テーブルを用いる場合には、図１２Ｂに示すように、テーブル参照結果のｖａｌの値から更に復号信号ＤＳに変換する。例えば、上記のようにｖａｌ“２”の場合、“１”が対応する復号信号ＤＳとなる。【0088】
次に図１３を用いて、信号列ＢＳが画面間予測符号化に関する情報として得られるインデックス情報である場合に、画面間予測モード情報と、参照インデックス情報とに分割する方法について説明する。なお、実施の形態１で説明したものと同様に、画面間予測モード情報は、参照ピクチャリストのうちのどちらか一方、もしくは両方を用いるかを示す情報である。また、参照インデックス情報とは、参照ピクチャ情報により特定される参照ピクチャリストの中の実際に参照する参照ピクチャを示すインデックス情報である。また、ここでは、参照ピクチャリストが２種類（参照ピクチャリストＬ０、参照ピクチャリストＬ１）のみの場合の例を示す。【0089】
まず、ＶＬＤテーブルの参照によって復号された信号列ＢＳをテーブル参照部９１５から取得し、参照ピクチャリストＬ０に含まれるインデックス数、および参照ピクチャリストＬ１に含まれるインデックス数を制御部９１１から取得する（ステップＳ１３０１）。取得した復号信号ＤＳが参照ピクチャリストＬ０のインデックス数より小さい場合（ステップＳ１３０２でＹＥＳ）、画面内予測モード情報の予測信号として、参照ピクチャリストＬ０に登録されている参照ピクチャを用いた予測であることを設定し、参照インデックス情報として、参照ピクチャリストＬ０の予測インデックスに復号信号ＤＳの数値を設定する（ステップＳ１３０３）。【0090】
一方、復号信号ＤＳが参照ピクチャリストＬ０のインデックス数より大きい場合（ステップＳ１３０２でＮＯ）、復号信号ＤＳが参照ピクチャリストＬ０のインデックス数と参照ピクチャリストＬ１のインデックス数との和の値より小さいかどうかを判断する。判断結果として小さい場合（ステップＳ１３０４でＹＥＳ）、画面内予測モード情報の予測信号として、参照ピクチャリストＬ１に登録されている参照ピクチャを用いた予測であることを設定し、参照インデックス情報として、参照ピクチャリストＬ１の予測インデックス番号に復号信号ＤＳの数値から参照ピクチャリストＬ０のインデックス数を引いた値を設定する（ステップＳ１３０５）。一方、ステップＳ１３０４でＮＯとなる場合、画面内予測モード情報の予測信号として、双方向（Ｂｉ）参照予測であることを設定する（ステップＳ１３０６）。次に、復号信号ＤＳから、参照ピクチャリストＬ０の予測インデックス番号と、参照ピクチャリストＬ１の予測インデックス番号とを後述する方法で取得し、設定する（ステップＳ１３０７）。【0091】
双方向参照予測の場合の、参照ピクチャリストＬ０の予測インデックス番号は、復号信号ＤＳから参照ピクチャリストＬ０及び参照ピクチャリストＬ１の予測インデックス数を引いた値を、参照ピクチャリストＬ１の予測インデクス数で割った場合の商で表される値となる。また、参照ピクチャリストＬ１の予測インデックス番号は、復号信号ＤＳから参照ピクチャリストＬ０及び参照ピクチャリストＬ１の予測インデックス数を引いた値を、参照ピクチャリストＬ１の予測インデクス数で割った場合の剰余で表される値となる。【0092】
上記の分割処理は、例えば、式４のように示すことができる。【0093】
if ( DecodedIdx < Number(L0) ){
PredDir = L0-Pred;
L0Idx = DecodedIdx;
}
else if( DecodedIdx < Number(L0)+Number(L1) )
{
PredDir = L1-Pred;
L1Idx = DecodedIdx-Number(L0);
}
else
{
PredDir = Bi-Pred;
L0Idx = Quotient{{DecodedIdx-{Number(L0)+ Number(L1)}, Numer(L1)}
L1Idx = Mod( DecodedIdx-{Number(L0)+ Number(L1)}, Number(L1) )
} ・・・（式４）
【0094】
なお、ＰｒｅｄＤｉｒは画面間予測モード情報、すなわち参照ピクチャリストＬ０に登録されている参照ピクチャのみを用いるか（Ｌ０−Ｐｒｅｄ）、参照ピクチャリストＬ１に登録されている参照ピクチャのみを用いるか（Ｌ１−Ｐｒｅｄ）、参照ピクチャリストＬ０、Ｌ１の両方を使用するか（Ｂｉ−Ｐｒｅｄ）を示す情報である。また、ＤｅｃｏｄｅｄＩｄｘは復号信号ＤＳを、Ｎｕｍｂｅｒ（Ｌ０）を参照ピクチャリストＬ０のインデックス数を、Ｎｕｍｂｅｒ（Ｌ１）は参照ピクチャリストＬ１のインデックス数を、Ｌ０Ｉｄｘは参照ピクチャリストＬ０のうちの参照インデックス番号を、Ｌ１Ｉｄｘは参照ピクチャリストＬ１の参照インデックス番号を、それぞれ示す。【0095】
但し、Ｑｕｏｔｉｅｎｔ（Ａ，Ｂ）はＡをＢで割ったときの商の値、Ｍｏｄ（Ａ，Ｂ）はＡをＢで割ったときの余りの値を表す。【0096】
なお、実施の形態１で説明したように、予め符号化時にＮｕｍｂｅｒ（Ｌ１）が２の乗数ではない場合であって、Ｎｕｍｂｅｒ（Ｌ１）を超える最も小さい２の乗数となるようにＯｆｆｓｅｔ値を加えている場合には、ＤｅｃｏｄｅｄＩｄｘ−｛Ｎｕｍｂｅｒ（Ｌ０）＋Ｎｕｍｂｅｒ（Ｌ１）｝の値から、前述のＯｆｆｓｅｔを加えてできる２の乗数の乗数値を右シフトして得られる値がＬ０Ｉｄｘとなり、ＤｅｃｏｄｅｄＩｄｘ−｛Ｎｕｍｂｅｒ（Ｌ０）＋Ｎｕｍｂｅｒ（Ｌ１）｝の値から、２のＬ０Ｉｄｘ乗数の値（１をＬ０Ｉｄｘの値だけ左シフトした値）を引いた値がＬ１Ｉｄｘとなる。また、符号化時と同様に、使用しないインデックス分を飛ばすことが必要である。このように処理することで除算を省くことができ、演算回路を小さくすることができる。【0098】
ＶＬＤテーブル選択部９１４は、参照ピクチャリストＬ０のインデックス数および参照ピクチャリストＬ１のインデックス数を制御部９１１から取得する（ステップＳ１４０１）。なお、参照ピクチャリストＬ０のインデックス数および参照ピクチャリストＬ１のインデックス数は、ストリームのヘッダ情報として、復号対象信号の復号に先立って、既に復号されている情報である。次に、取得した参照ピクチャリストＬ０、Ｌ１のインデックス数から最大変動幅を算出する（ステップＳ１４０２）。ここで最大変動幅（ＭａｘＲａｎｇｅ）は符号化時と同様に式２を用いて算出できる。次に、ＶＬＤテーブル選択部９１４は、最大変動幅に合わせてＶＬＤテーブルを選択する（ステップＳ１４０３）。【0099】
図１５Ａ〜図１５Ｃは、最大変動幅に合わせてＶＬＤテーブルを選択する場合の一例を示している。例えば、図１５Ａは、最大変動幅（ＭａｘＲａｎｇｅ）と図１２ＡのＶＬＤテーブル群との対応関係を示した例である。ただし、最大変動幅が“２”の場合には、単純な０もしくは１のフラグとして符号化／復号できるため、ＶＬＤテーブルは用いなくてもよい。【0100】
図１５Ａの場合において、最大変動幅が“３”の場合には、短い符号になるＶＬＤテーブルを選択する。一方、最大変動幅が長い場合には、その発生確率に合わせて異なるＶＬＤテーブルを選択する方が効率が高い場合があるため、異なるＶＬＤテーブルとし（図１５Ａでは、最大変動幅が“１１”以上で異なるＶＬＤテーブルを使用する例を示す）、それ以外は共通のＶＬＤテーブルを利用する例である。【0101】
なお、このような対応関係を用いる場合、ＶＬＤテーブルの切換えが少なくなり、処理量が少なくてすむ。すなわち、ＶＬＤテーブルを保持するためのメモリ量を節約することができるメリットがある。なお、ＶＬＤテーブル選択の方法は、符号化側と同様のものを用いる必要があり、図１５Ａの例は、符号化側で図８ＡのＶＬＣテーブルの選択方法を用いた場合の例となる。【0102】
一方、図１５Ｂは、最大変動幅が既知であるため、ＶＬＤテーブルの符号を１ビットずつ増加させ、最後の符号のビットを１ビット削る方式の例である（符号化側で図８ＢのＶＬＣテーブルの選択方法を用いた場合の例に対応する）。例えば、最大変動幅が“５”である場合、シンボル３、４に対して同じ長さの符号（０００１、００００）を用いることが出来る。この場合、最大変動幅となる部分で、符号量を節約することができるメリットがある。また、図１５Ｂの方法はテーブル参照ではなく、式５の方法で復号することもできる。【0103】
DS = 0;for( counter=0; counter<MaxRange; counter++ )
{
code = read_code();
if ( code == “1” )
{
break;
}
else
{
DS += 1;
}
} ・・・（式５）
【0104】
図１５Ｃは、式５の処理の流れを示すフローチャートである。まず復号信号ＤＳをリセット（０をセット）し、上記より得られる最大変動幅ＭａｘＲａｎｇｅを取得する（ステップＳ１５０１）。次に、Ｃｏｕｎｔｅｒが０からＭａｘＲａｎｇｅ−１の値をとる間繰り返し処理を行う（ステップＳ１５０２とステップＳ１５０６とで囲まれる処理）。【0105】
繰り返して処理として、符号列から１ビットを読み出す（ステップＳ１５０４）、読み出しコードが１かどうかを判定し（ステップＳ１５０４）、復号信号ＤＳに１を加える（ステップＳ１５０５）。一方、読み出されたコードが１でない場合（ステップ１５０４でＮＯ）、復号信号ＤＳに１を加える処理を行い（ステップＳ１５０５）、Ｃｏｕｎｔｅｒを一つ進めて（ステップＳ１５０６）、Ｓ１５０２の繰り返し処理に戻る。一方、読み出されたコードが１である場合（ステップＳ１５０４でＹＥＳ）、繰り返し処理をスキップして、次のステップへ進む。繰り返し処理が終了もしくは、ステップＳ１５０４でＹＥＳとなった場合、その時点での復号信号ＤＳを出力する（Ｓ１５０７）ことにより、復号処理が行われる。【0106】
上記のような処理を行うことで、本発明の符号化方法で符号化した符号列を正しく復号処理することができ、符号化効率の高い符号化方法、復号方法を実現することができる。【0107】
（実施の形態３）本実施の形態では、信号と参照するテーブルとの対応関係を示すテーブル関連情報ＴｂｌＳｔｒをストリームのヘッダ情報として記述し、符号化および復号する方法を説明する。図１６は、本発明の画像符号化方法における符号列ＢＳの構成図である。図１６の（ａ）は少なくとも１画面で構成される動画シーケンスに対応する符号化信号である。符号化信号は、全画面のデータであるシーケンスデータＳｅｑＤａｔａと、全画面の全データに共通のデータであるシーケンスヘッダＳｅｑＨｄｒとで構成される。
【0108】
テーブル関連情報ＴｂｌＳｔｒとは、例えば、参照ピクチャリストＬ０のインデックス数と参照ピクチャリストＬ１のインデックス数とが同じであり、かつ、参照ピクチャリストＬ０中の参照インデックス番号の示す参照ピクチャと、参照ピクチャリストＬ１中の参照インデックス番号の示す参照ピクチャとが同じである場合を示す情報である。図１７は、上記の情報を示すフラグ“Ｌ０＿Ｌ１＿ｉｎｆｏ＿ｍｅｒｇｅ＿ｆｌｇ”を含むシンタックスの例である。【0109】
このフラグが１の場合には、参照ピクチャリストＬ０、Ｌ１に登録されている参照ピクチャが同じであり、予測モードとしてＬ１参照モードが無いものとして扱うことができる。この場合、例えば、式６で示す方法でインデックスを決定できる。【0110】
if ( PredDir == L0-Pred ){
TargetIdx = L0Idx;
}
else // ( PredDir == Bi-Pred )
{
TargetIdx = Number(L0)+L0Idx*Number(L0)+L1Idx;
} ・・・（式６）
【0111】
なお、ＰｒｅｄＤｉｒは画面間予測モード情報、すなわち参照ピクチャリストＬ０に登録されている参照ピクチャのみを用いるか（Ｌ０−Ｐｒｅｄ）、参照ピクチャリストＬ０、Ｌ１の両方を使用するか（Ｂｉ−Ｐｒｅｄ）を示す情報である。また、ＴａｒｇｅｔＩｄｘは出力インデックスを、Ｎｕｍｂｅｒ（Ｌ０）は参照ピクチャリストＬ０のインデックス数を、Ｌ０Ｉｄｘは参照ピクチャリストＬ０の参照インデックス番号を、Ｌ１Ｉｄｘは参照ピクチャリストＬ１の参照インデックス番号を、それぞれ示す。【0112】
この場合の最大変動幅は、例えば、式７で算出され、短い符号長で表現できることがわかる。【0113】
MaxRange = Number(L0) + {Number(L1)*Number(L0)}・・・（式７）
【0114】
なお、式１の場合と同様に、Ｎｕｍｂｅｒ（Ｌ０）は参照ピクチャリストＬ０のインデックス数を、Ｎｕｍｂｅｒ（Ｌ１）は参照ピクチャリストＬ１のインデックス数を、それぞれ示す。なお、上記方法で符号化された符号列は、復号時には、式８で示す方法で復号することができる。【0115】
if ( DecodedIdx < Number(L0) ){
PredDir = L0-Pred;
L0Idx = DecodedIdx;
}
else
{
PredDir = Bi-Pred;
L0Idx = Quotient( DecodedIdx-Number(L0),Number(L0) )
L1Idx = Mod( DecodedIdx-Number(L0), Number(L0) )
} ・・・（式８）
【0116】
但し、Ｑｕｏｔｉｅｎｔ（Ａ，Ｂ）はＡをＢで割ったときの商の値、Ｍｏｄ（Ａ，Ｂ）はＡをＢで割ったときの余りの値を表す。なお、実施の形態１および実施の形態２と同様に除算処理を省き、シフト演算で処理してもよい。【0117】
シーケンスヘッダには、テーブル関連情報ＴｂｌＳｔｒが含まれている。【0118】
図１６の（ｂ）は、シーケンスデータＳｅｑＤａｔａの構造である。シーケンスデータＳｅｑＤａｔａは、複数の１画面に対応する符号化信号であるピクチャの符号化信号である、ピクチャ信号ＰｉｃＳｔｒを含んでいる。【0119】
図１６の（ｃ）は、ピクチャ信号ＰｉｃＳｔｒの構造である。ピクチャ信号ＰｉｃＳｔｒは、１画面のデータであるピクチャデータＰｉｃＤａｔａと、１画面全体に共通のデータであるピクチャヘッダＰｉｃＨｄｒとで構成される。ピクチャヘッダＰｉｃＨｄｒには、テーブル関連情報ＴｂｌＳｔｒが含まれている。【0120】
図１６の（ｄ）は、ピクチャデータＰｉｃＤａｔａの構造である。ピクチャデータＰｉｃＤａｔａは、複数のブロック単位の集合で構成されるスライスの符号化信号である、スライス信号ＳｌｉｃｅＳｔｒを含んでいる。【0121】
図１６の（ｅ）は、スライス信号ＳｌｉｃｅＳｔｒの構造である。スライス信号ＳｌｉｃｅＳｔｒは、１スライスのデータであるスライスデータＳｌｉｃｅＤａｔａと、１スライスの全データに共通のデータであるスライスヘッダＳｌｉｃｅＨｄｒとで構成される。スライスヘッダＳｌｉｃｅＨｄｒにテーブル関連情報ＴｂｌＳｔｒを含めることにより、スライスデータＳｌｉｃｅＤａｔａ単位で受信した符号化信号を正しく復号できる。【0122】
なお、シーケンスデータＳｅｑＤａｔａに複数の画面信号ＰｉｃＳｔｒが含まれている場合には、全てのＰｉｃＨｄｒにテーブル関連情報ＴｂｌＳｔｒを含める代わりに、一部のＰｉｃＨｄｒのみにテーブル関連情報ＴｂｌＳｔｒを含むようにしてもよい。同様に、ピクチャデータＰｉｃＤａｔａに複数のスライス信号ＳｌｉｃｅＳｔｒが含まれている場合は、全てのスライスヘッダＳｌｉｃｅＨｄｒにテーブル関連情報ＴｂｌＳｔｒを含める代わりに、一部のスライスヘッダＳｌｉｃｅＨｄｒのみにテーブル関連情報ＴｂｌＳｔｒを含めるようにしてもよい。テーブル関連情報ＴｂｌＳｔｒの内容が各スライスで共通であれば、図１６の（ｅ）に示すようにスライスヘッダＳｌｉｃｅＨｄｒにテーブル関連情報ＴｂｌＳｔｒが無い場合は、他のスライスヘッダＳｌｉｃｅＨｄｒのテーブル関連情報ＴｂｌＳｔｒで代用することで、テーブル関連情報ＴｂｌＳｔｒの繰り返しによるビット数の増加を抑えることも可能である。【0123】
また、符号列ＢＳが連続したビットストリームでなく、細切れのデータの単位であるパケット等で伝送する場合はヘッダ部とヘッダ以外のデータ部とを分離して別に伝送してもよい。その場合は、図１６のようにヘッダ部とデータ部とが１つのビットストリームとなることはない。しかしながら、パケットの場合は、ヘッダ部とデータ部との伝送する順序が連続しなくても、対応するデータ部に対応するヘッダ部が別のパケットで伝送されるだけであり、１つのビットストリームとなっていなくても、概念は図１６で説明したビットストリームの場合と同じである。【0124】
また、本発明の復号方法において、上記の手法で符号化された符号列ＢＳは、次の手順で復号される。まず、シーケンスヘッダＳｅｑＨｄｒに含まれるテーブル関連情報ＴｂｌＳｔｒを取得し、各情報を保持する。次に、ピクチャヘッダＰｉｃＨｄｒに含まれるテーブル関連情報ＴｂｌＳｔｒを取得し、各情報を更新する。ここで、テーブル関連情報ＴｂｌＳｔｒが無い場合、もしくは一部が無い場合には、シーケンスヘッダＳｅｑＨｄｒに含まれた情報をそのまま保持する。同様に、スライスヘッダＳｌｉｃｅＨｄｒ含まれるテーブル関連情報ＴｂｌＳｔｒを取得し、各情報を更新する。【0125】
このようにすることにより、上記符号列を正しく復号することができる。【0126】
（実施の形態４）上記各実施の形態で示した動画像符号化方法または動画像復号化方法の構成を実現するためのプログラムを記憶メディアに記録することにより、上記各実施の形態で示した処理を独立したコンピュータシステムにおいて簡単に実施することが可能となる。記憶メディアは、磁気ディスク、光ディスク、光磁気ディスク、ＩＣカード、半導体メモリ等、プログラムを記録できるものであればよい。
【0127】
さらにここで、上記各実施の形態で示した動画像符号化方法や動画像復号化方法の応用例とそれを用いたシステムを説明する。【0128】
図２０は、コンテンツ配信サービスを実現するコンテンツ供給システムex１００の全体構成を示す図である。通信サービスの提供エリアを所望の大きさに分割し、各セル内にそれぞれ固定無線局である基地局ex１０６、ex１０７、ex１０８、ex１０９、ex１１０が設置されている。【0129】
このコンテンツ供給システムex１００は、インターネットex１０１にインターネットサービスプロバイダex１０２および電話網ex１０４、および基地局ex１０６からex１１０を介して、コンピュータex１１１、ＰＤＡ（Personal Digital Assistant）ex１１２、カメラex１１３、携帯電話ex１１４、ゲーム機ex１１５などの各機器が接続される。【0130】
しかし、コンテンツ供給システムex１００は図２０のような構成に限定されず、いずれかの要素を組合せて接続するようにしてもよい。また、固定無線局である基地局ex１０６からex１１０を介さずに、各機器が電話網ex１０４に直接接続されてもよい。また、各機器が近距離無線等を介して直接相互に接続されていてもよい。【0131】
カメラex１１３はデジタルビデオカメラ等の動画撮影が可能な機器であり、カメラex１１６はデジタルカメラ等の静止画撮影、動画撮影が可能な機器である。また、携帯電話ex１１４は、ＧＳＭ（登録商標）（Global System for Mobile Communications）方式、ＣＤＭＡ（Code Division Multiple Access）方式、Ｗ−ＣＤＭＡ（Wideband-Code Division Multiple Access）方式、若しくはＬＴＥ（Long Term Evolution）方式、ＨＳＰＡ(High Speed Packet Access)の携帯電話機、またはＰＨＳ（Personal Handyphone System）等であり、いずれでも構わない。【0132】
コンテンツ供給システムex１００では、カメラex１１３等が基地局ex１０９、電話網ex１０４を通じてストリーミングサーバex１０３に接続されることで、ライブ配信等が可能になる。ライブ配信では、ユーザがカメラex１１３を用いて撮影するコンテンツ（例えば、音楽ライブの映像等）に対して上記各実施の形態で説明したように符号化処理を行い、ストリーミングサーバex１０３に送信する。一方、ストリーミングサーバex１０３は要求のあったクライアントに対して送信されたコンテンツデータをストリーム配信する。クライアントとしては、上記符号化処理されたデータを復号化することが可能な、コンピュータex１１１、ＰＤＡex１１２、カメラex１１３、携帯電話ex１１４、ゲーム機ex１１５等がある。配信されたデータを受信した各機器では、受信したデータを復号化処理して再生する。【0133】
なお、撮影したデータの符号化処理はカメラex１１３で行っても、データの送信処理をするストリーミングサーバex１０３で行ってもよいし、互いに分担して行ってもよい。同様に配信されたデータの復号化処理はクライアントで行っても、ストリーミングサーバex１０３で行ってもよいし、互いに分担して行ってもよい。また、カメラex１１３に限らず、カメラex１１６で撮影した静止画像および／または動画像データを、コンピュータex１１１を介してストリーミングサーバex１０３に送信してもよい。この場合の符号化処理はカメラex１１６、コンピュータex１１１、ストリーミングサーバex１０３のいずれで行ってもよいし、互いに分担して行ってもよい。【0134】
また、これら符号化・復号化処理は、一般的にコンピュータex１１１や各機器が有するＬＳＩex５００において処理する。ＬＳＩex５００は、ワンチップであっても複数チップからなる構成であってもよい。なお、動画像符号化・復号化用のソフトウェアをコンピュータex１１１等で読み取り可能な何らかの記録メディア（ＣＤ−ＲＯＭ、フレキシブルディスク、ハードディスクなど）に組み込み、そのソフトウェアを用いて符号化・復号化処理を行ってもよい。さらに、携帯電話ex１１４がカメラ付きである場合には、そのカメラで取得した動画データを送信してもよい。このときの動画データは携帯電話ex１１４が有するＬＳＩex５００で符号化処理されたデータである。【0135】
また、ストリーミングサーバex１０３は複数のサーバや複数のコンピュータであって、データを分散して処理したり記録したり配信するものであってもよい。【0136】
以上のようにして、コンテンツ供給システムex１００では、符号化されたデータをクライアントが受信して再生することができる。このようにコンテンツ供給システムex１００では、ユーザが送信した情報をリアルタイムでクライアントが受信して復号化し、再生することができ、特別な権利や設備を有さないユーザでも個人放送を実現できる。【0137】
なお、コンテンツ供給システムex１００の例に限らず、図２１に示すように、デジタル放送用システムex２００にも、上記各実施の形態の少なくとも動画像符号化装置または動画像復号化装置のいずれかを組み込むことができる。具体的には、放送局ex２０１では映像データに音楽データなどが多重化された多重化データが電波を介して通信または衛星ex２０２に伝送される。この映像データは上記各実施の形態で説明した動画像符号化方法により符号化されたデータである。これを受けた放送衛星ex２０２は、放送用の電波を発信し、この電波を衛星放送の受信が可能な家庭のアンテナex２０４が受信する。受信した多重化データを、テレビ（受信機）ex３００またはセットトップボックス（ＳＴＢ）ex２１７等の装置が復号化して再生する。【0138】
また、ＤＶＤ、ＢＤ等の記録メディアex２１５に記録した多重化データを読み取り復号化する、または記録メディアex２１５に映像信号を符号化し、さらに場合によっては音楽信号と多重化して書き込むリーダ／レコーダex２１８にも上記各実施の形態で示した動画像復号化装置または動画像符号化装置を実装することが可能である。この場合、再生された映像信号はモニタex２１９に表示され、多重化データが記録された記録メディアex２１５により他の装置やシステムにおいて映像信号を再生することができる。また、ケーブルテレビ用のケーブルex２０３または衛星／地上波放送のアンテナex２０４に接続されたセットトップボックスex２１７内に動画像復号化装置を実装し、これをテレビのモニタex２１９で表示してもよい。このときセットトップボックスではなく、テレビ内に動画像復号化装置を組み込んでもよい。【0139】
図２２は、上記各実施の形態で説明した動画像復号化方法および動画像符号化方法を用いたテレビ（受信機）ex３００を示す図である。テレビex３００は、上記放送を受信するアンテナex２０４またはケーブルex２０３等を介して映像データに音声データが多重化された多重化データを取得、または出力するチューナex３０１と、受信した多重化データを復調する、または外部に送信する多重化データに変調する変調／復調部ex３０２と、復調した多重化データを映像データと、音声データとに分離する、または信号処理部ex３０６で符号化された映像データ、音声データを多重化する多重／分離部ex３０３を備える。【0140】
また、テレビex３００は、音声データ、映像データそれぞれを復号化する、またはそれぞれの情報を符号化する音声信号処理部ex３０４、映像信号処理部ex３０５を有する信号処理部ex３０６と、復号化した音声信号を出力するスピーカex３０７、復号化した映像信号を表示するディスプレイ等の表示部ex３０８を有する出力部ex３０９とを有する。さらに、テレビex３００は、ユーザ操作の入力を受け付ける操作入力部ex３１２等を有するインタフェース部ex３１７を有する。さらに、テレビex３００は、各部を統括的に制御する制御部ex３１０、各部に電力を供給する電源回路部ex３１１を有する。インタフェース部ex３１７は、操作入力部ex３１２以外に、リーダ／レコーダex２１８等の外部機器と接続されるブリッジex３１３、ＳＤカード等の記録メディアex２１６を装着可能とするためのスロット部ex３１４、ハードディスク等の外部記録メディアと接続するためのドライバex３１５、電話網と接続するモデムex３１６等を有していてもよい。なお記録メディアex２１６は、格納する不揮発性／揮発性の半導体メモリ素子により電気的に情報の記録を可能としたものである。テレビex３００の各部は同期バスを介して互いに接続されている。【0141】
まず、テレビex３００がアンテナex２０４等により外部から取得した多重化データを復号化し、再生する構成について説明する。テレビex３００は、リモートコントローラex２２０等からのユーザ操作を受け、ＣＰＵ等を有する制御部ex３１０の制御に基づいて、変調／復調部ex３０２で復調した多重化データを多重／分離部ex３０３で分離する。さらにテレビex３００は、分離した音声データを音声信号処理部ex３０４で復号化し、分離した映像データを映像信号処理部ex３０５で上記各実施の形態で説明した復号化方法を用いて復号化する。復号化した音声信号、映像信号は、それぞれ出力部ex３０９から外部に向けて出力される。出力する際には、音声信号と映像信号が同期して再生するよう、バッファex３１８、ex３１９等に一旦これらの信号を蓄積するとよい。また、テレビex３００は、放送等からではなく、磁気／光ディスク、ＳＤカード等の記録メディアex２１５、ex２１６から多重化データを読み出してもよい。次に、テレビex３００が音声信号や映像信号を符号化し、外部に送信または記録メディア等に書き込む構成について説明する。テレビex３００は、リモートコントローラex２２０等からのユーザ操作を受け、制御部ex３１０の制御に基づいて、音声信号処理部ex３０４で音声信号を符号化し、映像信号処理部ex３０５で映像信号を上記各実施の形態で説明した符号化方法を用いて符号化する。符号化した音声信号、映像信号は多重／分離部ex３０３で多重化され外部に出力される。多重化する際には、音声信号と映像信号が同期するように、バッファex３２０、ex３２１等に一旦これらの信号を蓄積するとよい。なお、バッファex３１８、ex３１９、ex３２０、ex３２１は図示しているように複数備えていてもよいし、１つ以上のバッファを共有する構成であってもよい。さらに、図示している以外に、例えば変調／復調部ex３０２や多重／分離部ex３０３の間等でもシステムのオーバフロー、アンダーフローを避ける緩衝材としてバッファにデータを蓄積することとしてもよい。【0142】
また、テレビex３００は、放送等や記録メディア等から音声データ、映像データを取得する以外に、マイクやカメラのＡＶ入力を受け付ける構成を備え、それらから取得したデータに対して符号化処理を行ってもよい。なお、ここではテレビex３００は上記の符号化処理、多重化、および外部出力ができる構成として説明したが、これらの処理を行うことはできず、上記受信、復号化処理、外部出力のみが可能な構成であってもよい。【0143】
また、リーダ／レコーダex２１８で記録メディアから多重化データを読み出す、または書き込む場合には、上記復号化処理または符号化処理はテレビex３００、リーダ／レコーダex２１８のいずれで行ってもよいし、テレビex３００とリーダ／レコーダex２１８が互いに分担して行ってもよい。【0144】
一例として、光ディスクからデータの読み込みまたは書き込みをする場合の情報再生／記録部ex４００の構成を図２３に示す。情報再生／記録部ex４００は、以下に説明する要素ex４０１、ex４０２、ex４０３、ex４０４、ex４０５、ex４０６、ex４０７を備える。光ヘッドex４０１は、光ディスクである記録メディアex２１５の記録面にレーザスポットを照射して情報を書き込み、記録メディアex２１５の記録面からの反射光を検出して情報を読み込む。変調記録部ex４０２は、光ヘッドex４０１に内蔵された半導体レーザを電気的に駆動し記録データに応じてレーザ光の変調を行う。再生復調部ex４０３は、光ヘッドex４０１に内蔵されたフォトディテクタにより記録面からの反射光を電気的に検出した再生信号を増幅し、記録メディアex２１５に記録された信号成分を分離して復調し、必要な情報を再生する。バッファex４０４は、記録メディアex２１５に記録するための情報および記録メディアex２１５から再生した情報を一時的に保持する。ディスクモータex４０５は記録メディアex２１５を回転させる。サーボ制御部ex４０６は、ディスクモータex４０５の回転駆動を制御しながら光ヘッドex４０１を所定の情報トラックに移動させ、レーザスポットの追従処理を行う。システム制御部ex４０７は、情報再生／記録部ex４００全体の制御を行う。上記の読み出しや書き込みの処理はシステム制御部ex４０７が、バッファex４０４に保持された各種情報を利用し、また必要に応じて新たな情報の生成・追加を行うと共に、変調記録部ex４０２、再生復調部ex４０３、サーボ制御部ex４０６を協調動作させながら、光ヘッドex４０１を通して、情報の記録再生を行うことにより実現される。システム制御部ex４０７は例えばマイクロプロセッサで構成され、読み出し書き込みのプログラムを実行することでそれらの処理を実行する。【0145】
以上では、光ヘッドex４０１はレーザスポットを照射するとして説明したが、近接場光を用いてより高密度な記録を行う構成であってもよい。【0146】
図２４に光ディスクである記録メディアex２１５の模式図を示す。記録メディアex２１５の記録面には案内溝（グルーブ）がスパイラル状に形成され、情報トラックex２３０には、予めグルーブの形状の変化によってディスク上の絶対位置を示す番地情報が記録されている。この番地情報はデータを記録する単位である記録ブロックex２３１の位置を特定するための情報を含み、記録や再生を行う装置において情報トラックex２３０を再生し番地情報を読み取ることで記録ブロックを特定することができる。また、記録メディアex２１５は、データ記録領域ex２３３、内周領域ex２３２、外周領域ex２３４を含んでいる。ユーザデータを記録するために用いる領域がデータ記録領域ex２３３であり、データ記録領域ex２３３より内周または外周に配置されている内周領域ex２３２と外周領域ex２３４は、ユーザデータの記録以外の特定用途に用いられる。情報再生／記録部ex４００は、このような記録メディアex２１５のデータ記録領域ex２３３に対して、符号化された音声データ、映像データまたはそれらのデータを多重化した多重化データの読み書きを行う。【0147】
以上では、１層のＤＶＤ、ＢＤ等の光ディスクを例に挙げ説明したが、これらに限ったものではなく、多層構造であって表面以外にも記録可能な光ディスクであってもよい。また、ディスクの同じ場所にさまざまな異なる波長の色の光を用いて情報を記録したり、さまざまな角度から異なる情報の層を記録したりなど、多次元的な記録／再生を行う構造の光ディスクであってもよい。【0148】
また、デジタル放送用システムex２００において、アンテナex２０５を有する車ex２１０で衛星ex２０２等からデータを受信し、車ex２１０が有するカーナビゲーションex２１１等の表示装置に動画を再生することも可能である。なお、カーナビゲーションex２１１の構成は例えば図２２に示す構成のうち、ＧＰＳ受信部を加えた構成が考えられ、同様なことがコンピュータex１１１や携帯電話ex１１４等でも考えられる。【0149】
図２５（ａ）は、上記実施の形態で説明した動画像復号化方法および動画像符号化方法を用いた携帯電話ex１１４を示す図である。携帯電話ex１１４は、基地局ex１１０との間で電波を送受信するためのアンテナex３５０、映像、静止画を撮ることが可能なカメラ部ex３６５、カメラ部ex３６５で撮像した映像、アンテナex３５０で受信した映像等が復号化されたデータを表示する液晶ディスプレイ等の表示部ex３５８を備える。携帯電話ex１１４は、さらに、操作キー部ex３６６を有する本体部、音声を出力するためのスピーカ等である音声出力部ex３５７、音声を入力するためのマイク等である音声入力部ex３５６、撮影した映像、静止画、録音した音声、または受信した映像、静止画、メール等の符号化されたデータもしくは復号化されたデータを保存するメモリ部ex３６７、又は同様にデータを保存する記録メディアとのインタフェース部であるスロット部ex３６４を備える。【0150】
さらに、携帯電話ex１１４の構成例について、図２５（ｂ）を用いて説明する。携帯電話ex１１４は、表示部ex３５８及び操作キー部ex３６６を備えた本体部の各部を統括的に制御する主制御部ex３６０に対して、電源回路部ex３６１、操作入力制御部ex３６２、映像信号処理部ex３５５、カメラインタフェース部ex３６３、ＬＣＤ（Liquid Crystal Display）制御部ex３５９、変調／復調部ex３５２、多重／分離部ex３５３、音声信号処理部ex３５４、スロット部ex３６４、メモリ部ex３６７がバスex３７０を介して互いに接続されている。【0151】
電源回路部ex３６１は、ユーザの操作により終話及び電源キーがオン状態にされると、バッテリパックから各部に対して電力を供給することにより携帯電話ex１１４を動作可能な状態に起動する。【0152】
携帯電話ex１１４は、ＣＰＵ、ＲＯＭ、ＲＡＭ等を有する主制御部ex３６０の制御に基づいて、音声通話モード時に音声入力部ex３５６で収音した音声信号を音声信号処理部ex３５４でデジタル音声信号に変換し、これを変調／復調部ex３５２でスペクトラム拡散処理し、送信／受信部ex３５１でデジタルアナログ変換処理および周波数変換処理を施した後にアンテナex３５０を介して送信する。また携帯電話ex１１４は、音声通話モード時にアンテナex３５０を介して受信した受信データを増幅して周波数変換処理およびアナログデジタル変換処理を施し、変調／復調部ex３５２でスペクトラム逆拡散処理し、音声信号処理部ex３５４でアナログ音声信号に変換した後、これを音声出力部ex３５６から出力する。【0153】
さらにデータ通信モード時に電子メールを送信する場合、本体部の操作キー部ex３６６等の操作によって入力された電子メールのテキストデータは操作入力制御部ex３６２を介して主制御部ex３６０に送出される。主制御部ex３６０は、テキストデータを変調／復調部ex３５２でスペクトラム拡散処理をし、送信／受信部ex３５１でデジタルアナログ変換処理および周波数変換処理を施した後にアンテナex３５０を介して基地局ex１１０へ送信する。電子メールを受信する場合は、受信したデータに対してこのほぼ逆の処理が行われ、表示部ex３５８に出力される。【0154】
データ通信モード時に映像、静止画、または映像と音声を送信する場合、映像信号処理部ex３５５は、カメラ部ex３６５から供給された映像信号を上記各実施の形態で示した動画像符号化方法によって圧縮符号化し、符号化された映像データを多重／分離部ex３５３に送出する。また、音声信号処理部ex３５４は、映像、静止画等をカメラ部ex３６５で撮像中に音声信号入力部ex３５６で収音した音声信号を符号化し、符号化された音声データを多重／分離部ex３５３に送出する。【0155】
多重／分離部ex３５３は、映像信号処理部ex３５５から供給された符号化された映像データと音声信号処理部ex３５４から供給された符号化された音声データを所定の方式で多重化し、その結果得られる多重化データを変調／復調回路部ex３５２でスペクトラム拡散処理をし、送信／受信部ex３５１でデジタルアナログ変換処理及び周波数変換処理を施した後にアンテナex３５０を介して送信する。【0156】
データ通信モード時にホームページ等にリンクされた動画像ファイルのデータを受信する場合、または映像およびもしくは音声が添付された電子メールを受信する場合、アンテナex３５０を介して受信された多重化データを復号化するために、多重／分離部ex３５３は、多重化データを分離することにより映像データのビットストリームと音声データのビットストリームとに分け、同期バスex３７０を介して符号化された映像データを映像信号処理部ex３５５に供給するとともに、符号化された音声データを音声信号処理部ex３５４に供給する。映像信号処理部ex３５５は、上記各実施の形態で示した動画像符号化方法に対応した動画像復号化方法によって復号化することにより映像信号を復号し、ＬＣＤ制御部ex３５９を介して表示部ex３５８から、例えばホームページにリンクされた動画像ファイルに含まれる映像、静止画が表示される。また音声信号処理部ex３５４は、音声信号を復号し、音声出力部ex３５７から音声が出力される。【0157】
また、上記携帯電話ex１１４等の端末は、テレビex３００と同様に、符号化器・復号化器を両方持つ送受信型端末の他に、符号化器のみの送信端末、復号化器のみの受信端末という３通りの実装形式が考えられる。さらに、デジタル放送用システムex２００において、映像データに音楽データなどが多重化された多重化された多重化データを受信、送信するとして説明したが、音声データ以外に映像に関連する文字データなどが多重化されたデータであってもよいし、多重化データではなく映像データ自体であってもよい。【0158】
このように、上記各実施の形態で示した動画像符号化方法あるいは動画像復号化方法を上述したいずれの機器・システムに用いることは可能であり、そうすることで、上記各実施の形態で説明した効果を得ることができる。【0159】
また、本発明はかかる上記実施形態に限定されるものではなく、本発明の範囲を逸脱することなく種々の変形または修正が可能である。【0160】
（実施の形態５）上記各実施の形態で示した動画像符号化方法または装置と、ＭＰＥＧ−２、ＭＰＥＧ４−ＡＶＣ、ＶＣ−１など異なる規格に準拠した動画像符号化方法または装置とを、必要に応じて適宜切替えることにより、映像データを生成することも可能である。
【0161】
ここで、それぞれ異なる規格に準拠する複数の映像データを生成した場合、復号する際に、それぞれの規格に対応した復号方法を選択する必要がある。しかしながら、復号する映像データが、どの規格に準拠するものであるか識別できないため、適切な復号方法を選択することができないという課題を生じる。【0162】
この課題を解決するために、映像データに音声データなどを多重化した多重化データは、映像データがどの規格に準拠するものであるかを示す識別情報を含む構成とする。上記各実施の形態で示す動画像符号化方法または装置によって生成された映像データを含む多重化データの具体的な構成を以下説明する。多重化データは、ＭＰＥＧ−２トランスポートストリーム形式のデジタルストリームである。【0163】
図２６は、多重化データの構成を示す図である。図２６に示すように多重化データは、ビデオストリーム、オーディオストリーム、プレゼンテーショングラフィックスストリーム（ＰＧ）、インタラクティブグラファイックスストリームのうち、１つ以上を多重化することで得られる。ビデオストリームは映画の主映像および副映像を、オーディオストリーム（ＩＧ）は映画の主音声部分とその主音声とミキシングする副音声を、プレゼンテーショングラフィックスストリームは、映画の字幕をそれぞれ示している。ここで主映像とは画面に表示される通常の映像を示し、副映像とは主映像の中に小さな画面で表示する映像のことである。また、インタラクティブグラフィックスストリームは、画面上にＧＵＩ部品を配置することにより作成される対話画面を示している。ビデオストリームは、上記各実施の形態で示した動画像符号化方法または装置、従来のＭＰＥＧ−２、ＭＰＥＧ４−ＡＶＣ、ＶＣ−１などの規格に準拠した動画像符号化方法または装置によって符号化されている。オーディオストリームは、ドルビーＡＣ−３、Ｄｏｌｂｙ Ｄｉｇｉｔａｌ Ｐｌｕｓ、ＭＬＰ、ＤＴＳ、ＤＴＳ−ＨＤ、または、リニアＰＣＭのなどの方式で符号化されている。【0164】
多重化データに含まれる各ストリームはＰＩＤによって識別される。例えば、映画の映像に利用するビデオストリームには０ｘ１０１１が、オーディオストリームには０ｘ１１００から０ｘ１１１Ｆまでが、プレゼンテーショングラフィックスには０ｘ１２００から０ｘ１２１Ｆまでが、インタラクティブグラフィックスストリームには０ｘ１４００から０ｘ１４１Ｆまでが、映画の副映像に利用するビデオストリームには０ｘ１Ｂ００から０ｘ１Ｂ１Ｆまで、主音声とミキシングする副音声に利用するオーディオストリームには０ｘ１Ａ００から０ｘ１Ａ１Ｆが、それぞれ割り当てられている。【0165】
図２７は、多重化データがどのように多重化されるかを模式的に示す図である。まず、複数のビデオフレームからなるビデオストリームex２３５、複数のオーディオフレームからなるオーディオストリームex２３８を、それぞれＰＥＳパケット列ex２３６およびex２３９に変換し、ＴＳパケットex２３７およびex２４０に変換する。同じくプレゼンテーショングラフィックスストリームex２４１およびインタラクティブグラフィックスex２４４のデータをそれぞれＰＥＳパケット列ex２４２およびex２４５に変換し、さらにＴＳパケットex２４３およびex２４６に変換する。多重化データex２４７はこれらのＴＳパケットを１本のストリームに多重化することで構成される。【0166】
図２８は、ＰＥＳパケット列に、ビデオストリームがどのように格納されるかをさらに詳しく示している。図２８における第１段目はビデオストリームのビデオフレーム列を示す。第２段目は、ＰＥＳパケット列を示す。図２８の矢印ｙｙ１，ｙｙ２， ｙｙ３， ｙｙ４に示すように、ビデオストリームにおける複数のＶｉｄｅｏ Ｐｒｅｓｅｎｔａｔｉｏｎ ＵｎｉｔであるＩピクチャ、Ｂピクチャ、Ｐピクチャは、ピクチャ毎に分割され、ＰＥＳパケットのペイロードに格納される。各ＰＥＳパケットはＰＥＳヘッダを持ち、ＰＥＳヘッダには、ピクチャの表示時刻であるＰＴＳ（Ｐｒｅｓｅｎｔａｔｉｏｎ Ｔｉｍｅ−Ｓｔａｍｐ）やピクチャの復号時刻であるＤＴＳ（Ｄｅｃｏｄｉｎｇ Ｔｉｍｅ−Ｓｔａｍｐ）が格納される。【0167】
図２９は、多重化データに最終的に書き込まれるＴＳパケットの形式を示している。ＴＳパケットは、ストリームを識別するＰＩＤなどの情報を持つ４ＢｙｔｅのＴＳヘッダとデータを格納する１８４ＢｙｔｅのＴＳペイロードから構成される１８８Ｂｙｔｅ固定長のパケットであり、上記ＰＥＳパケットは分割されＴＳペイロードに格納される。ＢＤ−ＲＯＭの場合、ＴＳパケットには、４ＢｙｔｅのＴＰ＿Ｅｘｔｒａ＿Ｈｅａｄｅｒが付与され、１９２Ｂｙｔｅのソースパケットを構成し、多重化データに書き込まれる。ＴＰ＿Ｅｘｔｒａ＿ＨｅａｄｅｒにはＡＴＳ（Ａｒｒｉｖａｌ＿Ｔｉｍｅ＿Ｓｔａｍｐ）などの情報が記載される。ＡＴＳは当該ＴＳパケットのデコーダのＰＩＤフィルタへの転送開始時刻を示す。多重化データには図２９下段に示すようにソースパケットが並ぶこととなり、多重化データの先頭からインクリメントする番号はＳＰＮ（ソースパケットナンバー）と呼ばれる。【0168】
また、多重化データに含まれるＴＳパケットには、映像・音声・字幕などの各ストリーム以外にもＰＡＴ（Ｐｒｏｇｒａｍ Ａｓｓｏｃｉａｔｉｏｎ Ｔａｂｌｅ）、ＰＭＴ（Ｐｒｏｇｒａｍ Ｍａｐ Ｔａｂｌｅ）、ＰＣＲ（Ｐｒｏｇｒａｍ Ｃｌｏｃｋ Ｒｅｆｅｒｅｎｃｅ）などがある。ＰＡＴは多重化データ中に利用されるＰＭＴのＰＩＤが何であるかを示し、ＰＡＴ自身のＰＩＤは０で登録される。ＰＭＴは、多重化データ中に含まれる映像・音声・字幕などの各ストリームのＰＩＤと各ＰＩＤに対応するストリームの属性情報を持ち、また多重化データに関する各種ディスクリプタを持つ。ディスクリプタには多重化データのコピーを許可・不許可を指示するコピーコントロール情報などがある。ＰＣＲは、ＡＴＳの時間軸であるＡＴＣ（Ａｒｒｉｖａｌ Ｔｉｍｅ Ｃｌｏｃｋ）とＰＴＳ・ＤＴＳの時間軸であるＳＴＣ（Ｓｙｓｔｅｍ Ｔｉｍｅ Ｃｌｏｃｋ）の同期を取るために、そのＰＣＲパケットがデコーダに転送されるＡＴＳに対応するＳＴＣ時間の情報を持つ。【0169】
図３０はＰＭＴのデータ構造を詳しく説明する図である。ＰＭＴの先頭には、そのＰＭＴに含まれるデータの長さなどを記したＰＭＴヘッダが配置される。その後ろには、多重化データに関するディスクリプタが複数配置される。上記コピーコントロール情報などが、ディスクリプタとして記載される。ディスクリプタの後には、多重化データに含まれる各ストリームに関するストリーム情報が複数配置される。ストリーム情報は、ストリームの圧縮コーデックなどを識別するためストリームタイプ、ストリームのＰＩＤ、ストリームの属性情報（フレームレート、アスペクト比など）が記載されたストリームディスクリプタから構成される。ストリームディスクリプタは多重化データに存在するストリームの数だけ存在する。【0170】
記録媒体などに記録する場合には、上記多重化データは、多重化データ情報ファイルと共に記録される。【0171】
多重化データ情報ファイルは、図３１に示すように多重化データの管理情報であり、多重化データと１対１に対応し、多重化データ情報、ストリーム属性情報とエントリマップから構成される。【0172】
多重化データ情報は図３１に示すようにシステムレート、再生開始時刻、再生終了時刻から構成されている。システムレートは多重化データの、後述するシステムターゲットデコーダのＰＩＤフィルタへの最大転送レートを示す。多重化データ中に含まれるＡＴＳの間隔はシステムレート以下になるように設定されている。再生開始時刻は多重化データの先頭のビデオフレームのＰＴＳであり、再生終了時刻は多重化データの終端のビデオフレームのＰＴＳに１フレーム分の再生間隔を足したものが設定される。【0173】
ストリーム属性情報は図３２に示すように、多重化データに含まれる各ストリームについての属性情報が、ＰＩＤ毎に登録される。属性情報はビデオストリーム、オーディオストリーム、プレゼンテーショングラフィックスストリーム、インタラクティブグラフィックスストリーム毎に異なる情報を持つ。ビデオストリーム属性情報は、そのビデオストリームがどのような圧縮コーデックで圧縮されたか、ビデオストリームを構成する個々のピクチャデータの解像度がどれだけであるか、アスペクト比はどれだけであるか、フレームレートはどれだけであるかなどの情報を持つ。オーディオストリーム属性情報は、そのオーディオストリームがどのような圧縮コーデックで圧縮されたか、そのオーディオストリームに含まれるチャンネル数は何であるか、何の言語に対応するか、サンプリング周波数がどれだけであるかなどの情報を持つ。これらの情報は、プレーヤが再生する前のデコーダの初期化などに利用される。【0174】
本実施の形態においては、上記多重化データのうち、ＰＭＴに含まれるストリームタイプを利用する。また、記録媒体に多重化データが記録されている場合には、多重化データ情報に含まれる、ビデオストリーム属性情報を利用する。具体的には、上記各実施の形態で示した動画像符号化方法または装置において、ＰＭＴに含まれるストリームタイプ、または、ビデオストリーム属性情報に対し、上記各実施の形態で示した動画像符号化方法または装置によって生成された映像データであることを示す固有の情報を設定するステップまたは手段を設ける。この構成により、上記各実施の形態で示した動画像符号化方法または装置によって生成した映像データと、他の規格に準拠する映像データとを識別することが可能になる。【0175】
また、本実施の形態における動画像復号化方法のステップを図３３に示す。ステップexＳ１００において、多重化データからＰＭＴに含まれるストリームタイプ、または、多重化データ情報に含まれるビデオストリーム属性情報を取得する。次に、ステップexＳ１０１において、ストリームタイプ、または、ビデオストリーム属性情報が上記各実施の形態で示した動画像符号化方法または装置によって生成された多重化データであることを示しているか否かを判断する。そして、ストリームタイプ、または、ビデオストリーム属性情報が上記各実施の形態で示した動画像符号化方法または装置によって生成されたものであると判断された場合には、ステップexＳ１０２において、上記各実施の形態で示した動画像復号方法により復号を行う。また、ストリームタイプ、または、ビデオストリーム属性情報が、従来のＭＰＥＧ−２、ＭＰＥＧ４−ＡＶＣ、ＶＣ−１などの規格に準拠するものであることを示している場合には、ステップexＳ１０３において、従来の規格に準拠した動画像復号方法により復号を行う。【0176】
このように、ストリームタイプ、または、ビデオストリーム属性情報に新たな固有値を設定することにより、復号する際に、上記各実施の形態で示した動画像復号化方法または装置で復号可能であるかを判断することができる。従って、異なる規格に準拠する多重化データが入力された場合であっても、適切な復号化方法または装置を選択することができるため、エラーを生じることなく復号することが可能となる。また、本実施の形態で示した動画像符号化方法または装置、または、動画像復号方法または装置を、上述したいずれの機器・システムに用いることも可能である。【0177】
（実施の形態６）上記各実施の形態で示した動画像符号化方法および装置、動画像復号化方法および装置は、典型的には集積回路であるＬＳＩで実現される。一例として、図３４に１チップ化されたＬＳＩex５００の構成を示す。ＬＳＩex５００は、以下に説明する要素ex５０１、ex５０２、ex５０３、ex５０４、ex５０５、ex５０６、ex５０７、ex５０８、ex５０９を備え、各要素はバスex５１０を介して接続している。電源回路部ex５０５は電源がオン状態の場合に各部に対して電力を供給することで動作可能な状態に起動する。
【0178】
例えば符号化処理を行う場合には、ＬＳＩex５００は、ＣＰＵex５０２、メモリコントローラex５０３、ストリームコントローラex５０４、駆動周波数制御部ex５１２等を有する制御部ex５０１の制御に基づいて、ＡＶ Ｉ／Ｏex５０９によりマイクex１１７やカメラex１１３等からＡＶ信号を入力する。入力されたＡＶ信号は、一旦ＳＤＲＡＭ等の外部のメモリex５１１に蓄積される。制御部ex５０１の制御に基づいて、蓄積したデータは処理量や処理速度に応じて適宜複数回に分けるなどされ信号処理部ex５０７に送られ、信号処理部ex５０７において音声信号の符号化および／または映像信号の符号化が行われる。ここで映像信号の符号化処理は上記各実施の形態で説明した符号化処理である。信号処理部ex５０７ではさらに、場合により符号化された音声データと符号化された映像データを多重化するなどの処理を行い、ストリームＩ／Ｏex５０６から外部に出力する。この出力された多重化データは、基地局ex１０７に向けて送信されたり、または記録メディアex２１５に書き込まれたりする。なお、多重化する際には同期するよう、一旦バッファex５０８にデータを蓄積するとよい。【0179】
なお、上記では、メモリex５１１がＬＳＩex５００の外部の構成として説明したが、ＬＳＩex５００の内部に含まれる構成であってもよい。バッファex５０８も１つに限ったものではなく、複数のバッファを備えていてもよい。また、ＬＳＩex５００は１チップ化されてもよいし、複数チップ化されてもよい。【0180】
また、上記では、制御部ex５１０が、ＣＰＵex５０２、メモリコントローラex５０３、ストリームコントローラex５０４、駆動周波数制御部ex５１２等を有するとしているが、制御部ex５１０の構成は、この構成に限らない。例えば、信号処理部ex５０７がさらにＣＰＵを備える構成であってもよい。信号処理部ex５０７の内部にもＣＰＵを設けることにより、処理速度をより向上させることが可能になる。また、他の例として、ＣＰＵex５０２が信号処理部ex５０７、または信号処理部ex５０７の一部である例えば音声信号処理部を備える構成であってもよい。このような場合には、制御部ex５０１は、信号処理部ex５０７、またはその一部を有するＣＰＵex５０２を備える構成となる。【0181】
なお、ここでは、ＬＳＩとしたが、集積度の違いにより、ＩＣ、システムＬＳＩ、スーパーＬＳＩ、ウルトラＬＳＩと呼称されることもある。【0182】
また、集積回路化の手法はＬＳＩに限るものではなく、専用回路または汎用プロセッサで実現してもよい。ＬＳＩ製造後に、プログラムすることが可能なＦＰＧＡ（Field Programmable Gate Array）や、ＬＳＩ内部の回路セルの接続や設定を再構成可能なリコンフィギュラブル・プロセッサを利用してもよい。【0183】
さらには、半導体技術の進歩または派生する別技術によりＬＳＩに置き換わる集積回路化の技術が登場すれば、当然、その技術を用いて機能ブロックの集積化を行ってもよい。バイオ技術の適応等が可能性としてありえる。【0184】
（実施の形態７）上記各実施の形態で示した動画像符号化方法または装置によって生成された映像データを復号する場合、従来のＭＰＥＧ−２、ＭＰＥＧ４−ＡＶＣ、ＶＣ−１などの規格に準拠する映像データを復号する場合に比べ、処理量が増加することが考えられる。そのため、ＬＳＩex５００において、従来の規格に準拠する映像データを復号する際のＣＰＵex５０２の駆動周波数よりも高い駆動周波数に設定する必要がある。しかし、駆動周波数を高くすると、消費電力が高くなるという課題が生じる。
【0185】
この課題を解決するために、テレビex３００、ＬＳＩex５００などの動画像復号化装置は、映像データがどの規格に準拠するものであるかを識別し、規格に応じて駆動周波数を切替える構成とする。図３５は、本実施の形態における構成ex８００を示している。駆動周波数切替え部ex８０３は、映像データが、上記各実施の形態で示した動画像符号化方法または装置によって生成されたものである場合には、駆動周波数を高く設定する。そして、上記各実施の形態で示した動画像復号化方法を実行する復号処理部ex８０１に対し、映像データを復号するよう指示する。一方、映像データが、従来の規格に準拠する映像データである場合には、映像データが、上記各実施の形態で示した動画像符号化方法または装置によって生成されたものである場合に比べ、駆動周波数を低く設定する。そして、従来の規格に準拠する復号処理部ex８０２に対し、映像データを復号するよう指示する。【0186】
より具体的には、駆動周波数切替え部ex８０３は、図３４のＣＰＵex５０２と駆動周波数制御部ex５１２から構成される。また、上記各実施の形態で示した動画像復号化方法を実行する復号処理部ex８０１、および、従来の規格に準拠する復号処理部ex８０２は、図３２の信号処理部ex５０７に該当する。ＣＰＵex５０２は、映像データがどの規格に準拠するものであるかを識別する。そして、ＣＰＵex５０２からの信号に基づいて、駆動周波数制御部ex５１２は、駆動周波数を設定する。また、ＣＰＵex５０２からの信号に基づいて、信号処理部ex５０７は、映像データの復号を行う。ここで、映像データの識別には、例えば、実施の形態５で記載した識別情報を利用することが考えられる。識別情報に関しては、実施の形態５で記載したものに限られず、映像データがどの規格に準拠するか識別できる情報であればよい。例えば、映像データがテレビに利用されるものであるか、ディスクに利用されるものであるかなどを識別する外部信号に基づいて、映像データがどの規格に準拠するものであるか識別可能である場合には、このような外部信号に基づいて識別してもよい。また、ＣＰＵex５０２における駆動周波数の選択は、例えば、図３７のような映像データの規格と、駆動周波数とを対応付けたルックアップテーブルに基づいて行うことが考えられる。ルックアップテーブルを、バッファex５０８や、ＬＳＩの内部メモリに格納しておき、ＣＰＵex５０２がこのルックアップテーブルを参照することにより、駆動周波数を選択することが可能である。【0187】
図３６は、本実施の形態の方法を実施するステップを示している。まず、ステップexＳ２００では、信号処理部ex５０７において、多重化データから識別情報を取得する。次に、ステップexＳ２０１では、ＣＰＵex５０２において、識別情報に基づいて映像データが上記各実施の形態で示した符号化方法または装置によって生成されたものであるか否かを識別する。映像データが上記各実施の形態で示した符号化方法または装置によって生成されたものである場合には、ステップexＳ２０２において、駆動周波数を高く設定する信号を、ＣＰＵex５０２が駆動周波数制御部ex５１２に送る。そして、駆動周波数制御部ex５１２において、高い駆動周波数に設定される。一方、従来のＭＰＥＧ−２、ＭＰＥＧ４−ＡＶＣ、ＶＣ−１などの規格に準拠する映像データであることを示している場合には、ステップexＳ２０３において、駆動周波数を低く設定する信号を、ＣＰＵex５０２が駆動周波数制御部ex５１２に送る。そして、駆動周波数制御部ex５１２において、映像データが上記各実施の形態で示した符号化方法または装置によって生成されたものである場合に比べ、低い駆動周波数に設定される。【0188】
さらに、駆動周波数の切替えに連動して、ＬＳＩex５００またはＬＳＩex５００を含む装置に与える電圧を変更することにより、省電力効果をより高めることが可能である。例えば、駆動周波数を低く設定する場合には、これに伴い、駆動周波数を高く設定している場合に比べ、ＬＳＩex５００またはＬＳＩex５００を含む装置に与える電圧を低く設定することが考えられる。【0189】
また、駆動周波数の設定方法は、復号する際の処理量が大きい場合に、駆動周波数を高く設定し、復号する際の処理量が小さい場合に、駆動周波数を低く設定すればよく、上述した設定方法に限らない。例えば、ＭＰＥＧ４−ＡＶＣ規格に準拠する映像データを復号する処理量の方が、上記各実施の形態で示した動画像符号化方法または装置により生成された映像データを復号する処理量よりも大きい場合には、駆動周波数の設定を上述した場合の逆にすることが考えられる。【0190】
さらに、駆動周波数の設定方法は、駆動周波数を低くする構成に限らない。例えば、識別情報が、上記各実施の形態で示した動画像符号化方法または装置によって生成された映像データであることを示している場合には、ＬＳＩex５００またはＬＳＩex５００を含む装置に与える電圧を高く設定し、従来のＭＰＥＧ−２、ＭＰＥＧ４−ＡＶＣ、ＶＣ−１などの規格に準拠する映像データであることを示している場合には、ＬＳＩex５００またはＬＳＩex５００を含む装置に与える電圧を低く設定することも考えられる。また、他の例としては、識別情報が、上記各実施の形態で示した動画像符号化方法または装置によって生成された映像データであることを示している場合には、ＣＰＵex５０２の駆動を停止させることなく、従来のＭＰＥＧ−２、ＭＰＥＧ４−ＡＶＣ、ＶＣ−１などの規格に準拠する映像データであることを示している場合には、処理に余裕があるため、ＣＰＵex５０２の駆動を一時停止させることも考えられる。識別情報が、上記各実施の形態で示した動画像符号化方法または装置によって生成された映像データであることを示している場合であっても、処理に余裕があれば、ＣＰＵex５０２の駆動を一時停止させることも考えられる。この場合は、従来のＭＰＥＧ−２、ＭＰＥＧ４−ＡＶＣ、ＶＣ−１などの規格に準拠する映像データであることを示している場合に比べて、停止時間を短く設定することが考えられる。【0191】
このように、映像データが準拠する規格に応じて、駆動周波数を切替えることにより、省電力化を図ることが可能になる。また、電池を用いてＬＳＩex５００またはＬＳＩex５００を含む装置を駆動している場合には、省電力化に伴い、電池の寿命を長くすることが可能である。【0192】
（実施の形態８）テレビや、携帯電話など、上述した機器・システムには、異なる規格に準拠する複数の映像データが入力される場合がある。このように、異なる規格に準拠する複数の映像データが入力された場合にも復号できるようにするために、ＬＳＩex５００の信号処理部ex５０７が複数の規格に対応している必要がある。しかし、それぞれの規格に対応する信号処理部ex５０７を個別に用いると、ＬＳＩex５００の回路規模が大きくなり、また、コストが増加するという課題が生じる。
【0193】
この課題を解決するために、上記各実施の形態で示した動画像復号方法を実行するための復号処理部と、従来のＭＰＥＧ−２、ＭＰＥＧ４−ＡＶＣ、ＶＣ−１などの規格に準拠する復号処理部とを一部共有化する構成とする。この構成例を図３８（ａ）のex９００に示す。例えば、上記各実施の形態で示した動画像復号方法と、ＭＰＥＧ４−ＡＶＣ規格に準拠する動画像復号方法とは、エントロピー符号化、逆量子化、デブロッキング・フィルタ、動き補償などの処理において処理内容が一部共通する。共通する処理内容については、ＭＰＥＧ４−ＡＶＣ規格に対応する復号処理部ex９０２を共有し、ＭＰＥＧ４−ＡＶＣ規格に対応しない、本発明特有の他の処理内容については、専用の復号処理部ex９０１を用いるという構成が考えられる。特に、本発明は、逆量子化に特徴を有していることから、例えば、逆量子化については専用の復号処理部ex９０１を用い、それ以外のエントロピー符号化、デブロッキング・フィルタ、動き補償のいずれか、または、全ての処理については、復号処理部を共有することが考えられる。復号処理部の共有化に関しては、共通する処理内容については、上記各実施の形態で示した動画像復号化方法を実行するための復号処理部を共有し、ＭＰＥＧ４−ＡＶＣ規格に特有の処理内容については、専用の復号処理部を用いる構成であってもよい。【0194】
また、処理を一部共有化する他の例を図３８（ｂ）のex１０００に示す。この例では、本発明に特有の処理内容に対応した専用の復号処理部ex１００１と、他の従来規格に特有の処理内容に対応した専用の復号処理部ex１００２と、本発明の動画像復号方法と他の従来規格の動画像復号方法とに共通する処理内容に対応した共用の復号処理部ex１００３とを用いる構成としている。ここで、専用の復号処理部ex１００１、ex１００２は、必ずしも本発明、または、他の従来規格に特有の処理内容に特化したものではなく、他の汎用処理を実行できるものであってもよい。また、本実施の形態の構成を、ＬＳＩex５００で実装することも可能である。【0195】
このように、本発明の動画像復号方法と、従来の規格の動画像復号方法とで共通する処理内容について、復号処理部を共有することにより、ＬＳＩの回路規模を小さくし、かつ、コストを低減することが可能である。【産業上の利用可能性】
【0196】
本発明の画像符号化方法および画像復号化方法は、従来の可変長符号化および復号化方法では対応できなかった符号化情報の統合と、画像特徴に応じたテーブル更新、テーブル選択を少ない処理量、符号量で行うことができ、これにより符号量を大きく削減することができるという効果を有し、蓄積、伝送、通信など様々な用途に利用可能である。例えば、テレビ、デジタルビデオレコーダー、カーナビゲーション、携帯電話、デジタルカメラ、デジタルビデオカメラ等の高解像度の情報表示機器や撮像機器に利用可能であり、利用価値が高い。【符号の説明】
【0197】
１０，１００ 画像符号化装置９０，９００ 画像復号装置
１１，９１ 取得部
１２ 混合信号生成部
１３，９２ テーブル選択部
１４，２２０ 可変長符号化部
９３，９１０ 可変長復号部
９４ 分割部
１１０ 差分部
１２０ 変換部
１３０ 量子化部
１４０，９３０ 逆量子化部
１５０，９４０ 逆変換部
１６０，９７０ 加算部
１７０，９５０ 画面内予測部
１８０，９６０ 画面間予測部
１９０ 符号化制御部
２００，２１０，９８０ スイッチ
２２１，９１１ 制御部
２２２ 信号混合部
２２３ ＶＬＣテーブル群
２２４ ＶＬＣテーブル選択部
２２５，９１５ テーブル参照部
２２６，９１６ テーブル更新部
９１２ 信号分割部
９１３ ＶＬＤテーブル群
９１４ ＶＬＤテーブル選択部
９２０ 復号制御部