特開2022-185105ＨＯＡ信号の係数領域表現からこのＨＯＡ信号の混合した空間／係数領域表現を生成する方法および装置
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】公開特許公報(A)
(11)【公開番号】P2022185105
(43)【公開日】2022-12-13
(54)【発明の名称】ＨＯＡ信号の係数領域表現からこのＨＯＡ信号の混合した空間／係数領域表現を生成する方法および装置
(51)【国際特許分類】
G10L 19/008 20130101AFI20221206BHJP
G10L 19/035 20130101ALI20221206BHJP
G10L 19/00 20130101ALI20221206BHJP
【ＦＩ】
G10L19/008 100
G10L19/035 A
G10L19/00 330B
G10L19/00 330D
【審査請求】有
【請求項の数】4
【出願形態】ＯＬ
【外国語出願】
(21)【出願番号】P 2022163123
(22)【出願日】2022-10-11
(62)【分割の表示】P 2020184838の分割
【原出願日】2014-06-24
(31)【優先権主張番号】13305986.5
(32)【優先日】2013-07-11
(33)【優先権主張国・地域又は機関】EP
(71)【出願人】
【識別番号】510185767
【氏名又は名称】ドルビー・インターナショナル・アーベー
(74)【代理人】
【識別番号】100107766
【弁理士】
【氏名又は名称】伊東 忠重
(74)【代理人】
【識別番号】100070150
【弁理士】
【氏名又は名称】伊東 忠彦
(74)【代理人】
【識別番号】100135079
【弁理士】
【氏名又は名称】宮崎 修
(72)【発明者】
【氏名】コルドン，スフエン
(72)【発明者】
【氏名】クルーガー，アレクサンダー
(57)【要約】 （修正有）
【課題】ＨＯＡ（高次アンビソニックス）信号は、空間領域および係数領域が存在し、係数領域表現からＨＯＡ信号の数を可変とすることができる混合した空間／係数領域表現を生成する方法及び装置を提供する。
【解決手段】符号化器は、係数領域信号のベクトルを、ある定数のＨＯＡ係数を有する係数領域信号のベクトルＤ１と、可変数のＨＯＡ係数を有する係数領域信号のベクトルＤ２と、に分離３０し、定数のＨＯＡ係数を有する係数領域信号のベクトルを、対応する空間領域信号のベクトルに変換３１してＰＣＭ符号化する、さらに、信号の不連続部を生じさせることなく高品質の符号化を容易にするために、可変数のＨＯＡ係数を有する係数領域信号のベクトルを適応的に正規化３６してＰＣＭ符号化し、空間領域信号のベクトルと多重化する３３。
【選択図】図３
【解決手段】符号化器は、係数領域信号のベクトルを、ある定数のＨＯＡ係数を有する係数領域信号のベクトルＤ１と、可変数のＨＯＡ係数を有する係数領域信号のベクトルＤ２と、に分離３０し、定数のＨＯＡ係数を有する係数領域信号のベクトルを、対応する空間領域信号のベクトルに変換３１してＰＣＭ符号化する、さらに、信号の不連続部を生じさせることなく高品質の符号化を容易にするために、可変数のＨＯＡ係数を有する係数領域信号のベクトルを適応的に正規化３６してＰＣＭ符号化し、空間領域信号のベクトルと多重化する３３。
【選択図】図３
【特許請求の範囲】
【請求項1】
多重化され、知覚的に符号化されたＨＯＡ信号を復号する方法であって、前記復号することは、
ＨＯＡ表現のＰＣＭ符号化空間領域信号およびＰＣＭ符号化され正規化された係数領域信号の多重化されたベクトルを逆多重化することと、
ＰＣＭ符号化空間領域信号の前記ベクトルを変換行例と乗算することによって、前記ＨＯＡ表現のＰＣＭ符号化空間領域信号の前記ベクトルを係数領域信号の対応するベクトルに変換することと、
ＰＣＭ符号化され正規化された係数領域信号の前記ベクトルを非正規化することであって、前記非正規化することは、
副情報の対応する冪指数と再帰的に計算された利得値とに基づいて遷移ベクトルを決定することであって、前記対応する冪指数及び前記利得値は、ＨＯＡ信号ベクトルの入力行例の連続するインデックスに基づいている、遷移ベクトルを決定することと、
ＰＣＭ符号化され非正規化された信号の対応するベクトルを決定するために、前記対応する逆利得値をＰＣＭ符号化され正規化された係数領域信号の前記ベクトルに適用することと、
を含む、非正規化することと、
係数領域信号の前記ベクトルと非正規化された係数領域信号の前記ベクトルとを合成して、可変数のＨＯＡ係数を有することができるＨＯＡ係数領域信号の結合されたベクトルを決定することと、
を含み、
前記多重化され、知覚的に符号化されたＨＯＡ信号は、逆多重化される前に、対応して知覚的に復号される、
方法。
ＨＯＡ表現のＰＣＭ符号化空間領域信号およびＰＣＭ符号化され正規化された係数領域信号の多重化されたベクトルを逆多重化することと、
ＰＣＭ符号化空間領域信号の前記ベクトルを変換行例と乗算することによって、前記ＨＯＡ表現のＰＣＭ符号化空間領域信号の前記ベクトルを係数領域信号の対応するベクトルに変換することと、
ＰＣＭ符号化され正規化された係数領域信号の前記ベクトルを非正規化することであって、前記非正規化することは、
副情報の対応する冪指数と再帰的に計算された利得値とに基づいて遷移ベクトルを決定することであって、前記対応する冪指数及び前記利得値は、ＨＯＡ信号ベクトルの入力行例の連続するインデックスに基づいている、遷移ベクトルを決定することと、
ＰＣＭ符号化され非正規化された信号の対応するベクトルを決定するために、前記対応する逆利得値をＰＣＭ符号化され正規化された係数領域信号の前記ベクトルに適用することと、
を含む、非正規化することと、
係数領域信号の前記ベクトルと非正規化された係数領域信号の前記ベクトルとを合成して、可変数のＨＯＡ係数を有することができるＨＯＡ係数領域信号の結合されたベクトルを決定することと、
を含み、
前記多重化され、知覚的に符号化されたＨＯＡ信号は、逆多重化される前に、対応して知覚的に復号される、
方法。
【請求項2】
多重化され、知覚的に符号化されたＨＯＡ信号を復号する装置であって、前記復号する装置は、
ＨＯＡ表現のＰＣＭ符号化空間領域信号およびＰＣＭ符号化され正規化された係数領域信号の多重化されたベクトルを逆多重化するデマルチプレクサと、
ＰＣＭ符号化空間領域信号の前記ベクトルを変換行例と乗算することによって、前記ＨＯＡ表現のＰＣＭ符号化空間領域信号のベクトルを係数領域信号の対応するベクトルに変換する第一の処理ユニットと、
ＰＣＭ符号化され正規化された係数領域信号の前記ベクトルを非正規化する第二の処理ユニットであって、該第二の処理ユニットは、
副情報の対応する冪指数と再帰的に計算された利得値とに基づいて遷移ベクトルを決定する段階であって、前記対応する冪指数及び前記利得値は、ＨＯＡ信号ベクトルの入力行例の連続するインデックスに基づいている、段階と、
ＰＣＭ符号化され非正規化された信号の対応するベクトルを決定するために、前記対応する逆利得値をＰＣＭ符号化され正規化された係数領域信号の前記ベクトルに適用する段階とを実行するように適応されている、第二の処理ユニットと、
係数領域信号の前記ベクトルと非正規化された係数領域信号の前記ベクトルとを合成して、可変数のＨＯＡ係数を有することができるＨＯＡ係数領域信号の結合されたベクトルを決定するように構成されている合成器とを有しており、
前記多重化され、知覚的に符号化されたＨＯＡ信号は、逆多重化される前に、対応して知覚的に復号される、
装置。
ＨＯＡ表現のＰＣＭ符号化空間領域信号およびＰＣＭ符号化され正規化された係数領域信号の多重化されたベクトルを逆多重化するデマルチプレクサと、
ＰＣＭ符号化空間領域信号の前記ベクトルを変換行例と乗算することによって、前記ＨＯＡ表現のＰＣＭ符号化空間領域信号のベクトルを係数領域信号の対応するベクトルに変換する第一の処理ユニットと、
ＰＣＭ符号化され正規化された係数領域信号の前記ベクトルを非正規化する第二の処理ユニットであって、該第二の処理ユニットは、
副情報の対応する冪指数と再帰的に計算された利得値とに基づいて遷移ベクトルを決定する段階であって、前記対応する冪指数及び前記利得値は、ＨＯＡ信号ベクトルの入力行例の連続するインデックスに基づいている、段階と、
ＰＣＭ符号化され非正規化された信号の対応するベクトルを決定するために、前記対応する逆利得値をＰＣＭ符号化され正規化された係数領域信号の前記ベクトルに適用する段階とを実行するように適応されている、第二の処理ユニットと、
係数領域信号の前記ベクトルと非正規化された係数領域信号の前記ベクトルとを合成して、可変数のＨＯＡ係数を有することができるＨＯＡ係数領域信号の結合されたベクトルを決定するように構成されている合成器とを有しており、
前記多重化され、知覚的に符号化されたＨＯＡ信号は、逆多重化される前に、対応して知覚的に復号される、
装置。
【請求項3】
請求項１に従って復号されたデジタル・オーディオ信号を含む又は保存する、又はその中に記録した非一時的な記憶媒体。
【請求項4】
ＨＯＡ信号の係数領域表現から前記ＨＯＡ信号の混合した空間領域／係数領域表現を生成する方法であって、連続する係数フレーム内で前記ＨＯＡ信号の数は経時的に可変であることができ、当該方法は、
ＨＯＡ係数領域信号のベクトルを、ある定数のＨＯＡ係数を有する係数領域信号の第１のベクトルと、経時的に可変数のＨＯＡ係数を有する係数領域信号の第２のベクトルとに分離するステップと、
係数領域信号の前記第１のベクトルを変換行列の逆行列と乗算することによって、係数領域信号の前記第１のベクトルを空間領域信号の対応するベクトルに変換するステップと、
空間領域信号の前記ベクトルをＰＣＭ符号化してＰＣＭ符号化された空間領域信号のベクトルを取得するステップと、
正規化因子によって係数領域信号の前記第２のベクトルを正規化するステップであって、前記正規化は、係数領域信号の前記第２のベクトルの前記ＨＯＡ係数の現在の値の範囲に対して適応的な正規化であり、前記正規化において前記ベクトルのＨＯＡ係数に対して利用可能な値の範囲は超過されず、前記正規化において一様に連続する遷移関数が前記第２のベクトルの係数に適用され、該第２のベクトルは以後、現在の第２のベクトルを表し、これは、その現在の第２のベクトル内の利得を前の第２のベクトルにおける利得から後続する第２のベクトルにおける利得に連続的に変化させるためであり、前記正規化は、対応する復号器側の非正規化のための副情報を提供する、ステップと、
正規化された係数領域信号の前記現在の第２のベクトルをＰＣＭ符号化して、ＰＣＭ符号化され正規化された係数領域信号のベクトルを取得するステップと、
ＰＣＭ符号化された空間領域信号の前記ベクトルと、ＰＣＭ符号化され正規化された係数領域信号の前記ベクトルとを多重化するステップと、を含み、
前記非正規化は：
前記現在の第２のベクトルの各係数に、前の第２のベクトル正規化処理から保持された利得値を乗算するステップと；
結果として得られる正規化された第２のベクトルから、絶対値の最大を決定するステップと；
スムージング済み最大の前の値を受領する再帰的フィルタを使用することによって前記最大値に時間的スムージングを適用するステップであって、その結果、現在の時間的なスムージング済みの最大値が得られ、前記時間的スムージングは前記最大値が所定の値の範囲にある場合にのみ適用され、そうでない場合は、前記最大値がそのまま採用される、ステップと；
前記現在の時間的なスムージング済みの最大値から、正規化利得を、基数「2」に対する冪指数として計算し、それにより量子化された指数値を得るステップと；
前記量子化された指数値を遷移関数に適用して、現在の利得値を得るステップであって、前記遷移関数は、前記前の利得値を前記現在の利得値への連続的な遷移に役立つ、ステップと；
前の第２のベクトルの各係数を前記遷移関数によって重み付けして、係数領域信号の前記正規化された第２のベクトルを得る段階とを含み、
前記現在の時間的な平滑化済みの最大値は、
によって計算され、
ここで、xn,maxは前記最大値を表し、０＜ａ≦１は減衰定数であり、ｊはＨＯＡ信号ベクトルの入力行列の連続するインデックスである、
方法。
ＨＯＡ係数領域信号のベクトルを、ある定数のＨＯＡ係数を有する係数領域信号の第１のベクトルと、経時的に可変数のＨＯＡ係数を有する係数領域信号の第２のベクトルとに分離するステップと、
係数領域信号の前記第１のベクトルを変換行列の逆行列と乗算することによって、係数領域信号の前記第１のベクトルを空間領域信号の対応するベクトルに変換するステップと、
空間領域信号の前記ベクトルをＰＣＭ符号化してＰＣＭ符号化された空間領域信号のベクトルを取得するステップと、
正規化因子によって係数領域信号の前記第２のベクトルを正規化するステップであって、前記正規化は、係数領域信号の前記第２のベクトルの前記ＨＯＡ係数の現在の値の範囲に対して適応的な正規化であり、前記正規化において前記ベクトルのＨＯＡ係数に対して利用可能な値の範囲は超過されず、前記正規化において一様に連続する遷移関数が前記第２のベクトルの係数に適用され、該第２のベクトルは以後、現在の第２のベクトルを表し、これは、その現在の第２のベクトル内の利得を前の第２のベクトルにおける利得から後続する第２のベクトルにおける利得に連続的に変化させるためであり、前記正規化は、対応する復号器側の非正規化のための副情報を提供する、ステップと、
正規化された係数領域信号の前記現在の第２のベクトルをＰＣＭ符号化して、ＰＣＭ符号化され正規化された係数領域信号のベクトルを取得するステップと、
ＰＣＭ符号化された空間領域信号の前記ベクトルと、ＰＣＭ符号化され正規化された係数領域信号の前記ベクトルとを多重化するステップと、を含み、
前記非正規化は：
前記現在の第２のベクトルの各係数に、前の第２のベクトル正規化処理から保持された利得値を乗算するステップと；
結果として得られる正規化された第２のベクトルから、絶対値の最大を決定するステップと；
スムージング済み最大の前の値を受領する再帰的フィルタを使用することによって前記最大値に時間的スムージングを適用するステップであって、その結果、現在の時間的なスムージング済みの最大値が得られ、前記時間的スムージングは前記最大値が所定の値の範囲にある場合にのみ適用され、そうでない場合は、前記最大値がそのまま採用される、ステップと；
前記現在の時間的なスムージング済みの最大値から、正規化利得を、基数「2」に対する冪指数として計算し、それにより量子化された指数値を得るステップと；
前記量子化された指数値を遷移関数に適用して、現在の利得値を得るステップであって、前記遷移関数は、前記前の利得値を前記現在の利得値への連続的な遷移に役立つ、ステップと；
前の第２のベクトルの各係数を前記遷移関数によって重み付けして、係数領域信号の前記正規化された第２のベクトルを得る段階とを含み、
前記現在の時間的な平滑化済みの最大値は、
【数40】
ここで、xn,maxは前記最大値を表し、０＜ａ≦１は減衰定数であり、ｊはＨＯＡ信号ベクトルの入力行列の連続するインデックスである、
方法。
【発明の詳細な説明】
【技術分野】
【0001】
本発明は、ＨＯＡ信号の係数領域表現からこのＨＯＡ信号の混合した空間／係数領域表現を生成する方法および装置であって、ＨＯＡ信号の数を可変とすることができる、方法および装置に関する。
【背景技術】
【0002】
ＨＯＡと称する高次アンビソニックスは、２次元または３次元の音場の数学的な記述である。音場は、マイクロフォン・アレイによって捉えることができ、あるいは合成音源から設計することができ、あるいは音場はその両方の組み合わせである。ＨＯＡは、２次元または３次元のサラウンド・サウンドのための伝送フォーマットとして使用することができる。ラウドスピーカに基づくサラウンド・サウンド表現とは対照的に、ＨＯＡの利点は、様々なラウドスピーカの構成で音場を再現することである。そのため、ＨＯＡはユニバーサル・オーディオ・フォーマットに適している。
【0003】
ＨＯＡの空間解像度は、ＨＯＡの次数によって決まる。この次数は音場を記述するＨＯＡ信号の数を決める。ＨＯＡには２つの表現があり、それぞれ、空間領域および係数領域と呼ばれている。大抵の場合には、ＨＯＡは、もともと係数領域で表現され、行列乗算（または変換）によって空間領域に変換される（欧州特許出願公開第２４６９７４２号に記載されている。）。空間領域は、係数領域と同じ数の信号を含む。しかしながら、空間領域においては、各信号は方向に関連し、その方向は単位球面上に一様に分布している。これにより、ＨＯＡ表現の空間分布を分析することが容易になる。係数領域表現は、空間領域表現と同様に時間領域表現である。
【発明の概要】
【0004】
以下の説明において基本的には、ねらいは、各方向に対して同一のダイナミックレンジをもたらすために、ＨＯＡ表現のＰＣＭ伝送のために可能な限り空間領域を使用することである。これにより、空間領域におけるＨＯＡ信号のＰＣＭサンプルが所定の値の範囲に正規化されなければならないことを意味する。しかしながら、このような正規化の欠点は、空間領域におけるＨＯＡ信号のダイナミックレンジが係数領域よりも小さいことである。これは、係数領域信号から空間領域信号を生成する変換行列によって生ずる。
【0005】
あるアプリケーションでは、ＨＯＡ信号が係数領域において送信されるものがある。例えば、欧州特許出願第１３３０５５５８号に記載された処理では、全ての信号が係数領域において送信される。それは定数のＨＯＡ信号および可変数の追加のＨＯＡ信号が送信されるからである。しかし、上述および欧州特許出願公開第２４６９７４２号に示されているように、係数領域における送信は有利ではない。
【0006】
解決法として、定数のＨＯＡ信号を空間領域において送信することができ、可変数の追加のＨＯＡ信号のみを係数領域で伝送する。追加のＨＯＡ信号を空間領域で伝送することは可能ではない。その理由は、ＨＯＡ信号の数が経時的に変化すると、係数領域から空間領域への変換行列が経時的に変化し、後続する知覚符号化処理にとって最適であるとはいえない不連続部が全ての空間領域信号で生ずることがあるからである。
【0007】
この追加のＨＯＡ信号を所定の値の範囲を超えることなく送信できるようにするために、このような信号の不連続部を回避するように設計されており、反転パラメータの効率的な送信を達成する可逆の正規化処理を使用することができる。
【0008】
２つのＨＯＡ表現のダイナミックレンジおよびＰＣＭ符号化のためのＨＯＡ信号の正規化に関し、以下、このような正規化が係数領域で行われるべきか、空間領域で行われるべきかを導く。
【0009】
係数時間領域において、ＨＯＡ表現は、Ｎ個の係数信号
の連続するフレームから構成される。ここで、ｋはサンプル・インデックスを示し、ｎは信号インデックスを示す。
【数1】
【0010】
この係数信号は、コンパクトな表現を得るために、ベクトル
にまとめる。
【数2】
【0011】
空間領域への変換は、ＮｘＮの下記の変換行列によって行われる。
この変換は欧州特許出願第１２３０６５６９号に定義されており、式（２１）および（２２）に関連したΞGRIDの定義を参照されたい。
【数3】
【0012】
空間領域ベクトル
が下記の式から取得される。
ｗ（ｋ）＝Ψ－１ｄ（ｋ） （１）
ここで、Ψ－１は行列Ψの逆行列である。
【数4】
ｗ（ｋ）＝Ψ－１ｄ（ｋ） （１）
ここで、Ψ－１は行列Ψの逆行列である。
【0013】
空間領域から係数領域への逆変換は、下記の式によって行われる。
ｄ（ｋ）＝Ψｗ（ｋ） （２）
サンプルの値の範囲が、一方の領域において定義されると、変換行列Ψは、自動的に他方の領域の値の範囲を定める。以下の説明では、ｋ番目のサンプルに対する項（ｋ）を省略する。
ｄ（ｋ）＝Ψｗ（ｋ） （２）
サンプルの値の範囲が、一方の領域において定義されると、変換行列Ψは、自動的に他方の領域の値の範囲を定める。以下の説明では、ｋ番目のサンプルに対する項（ｋ）を省略する。
【0014】
ＨＯＡ表現は実際には空間領域で再生されるため、値の範囲、ラウドネスおよびダイナミックレンジは空間領域において定義される。ダイナミックレンジはＰＣＭ符号化のビット解像度によって定義される。本出願において、「ＰＣＭ符号化」は、浮動小数点表現サンプルから固定小数点の表記での整数表現サンプルへの変換を意味する。
【0015】
ＨＯＡ表現のＰＣＭ符号化のためには、Ｎ個の空間領域信号が、最大のＰＣＭ値Ｗｍａｘにアップスケーリングされ、固定小数点の整数ＰＣＭ表記に端数処理されるように、－１≦ｗｎ＜１の値の範囲に正規化されなければならない。
注：これは、一般化されたＰＣＭ符号化表現である。
【数5】
【0016】
係数領域のサンプルの値の範囲は、（４）式によって定義される行列Ψの無限ノルムと、
空間領域における最大絶対値ｗｍａｘ＝１とによって算出することができ、下記の式のようになる。
行列Ψに使用されている定義から、
の値は「１」よりも大きいため、ｄｎの値の範囲は増加する。
【数6】
【数7】
【数8】
【0017】
逆に言うと、
であるため、係数領域における信号のＰＣＭ符号化には
による正規化が必要であることを意味する。しかしながら、この正規化は、係数領域における信号のダイナミックレンジを減少させ、この結果として、信号対量子化雑音比が低下することになる。したがって、空間領域信号をＰＣＭ符号化することが好ましい。
【数9】
【数10】
【0018】
本発明によって解決される課題は、係数領域におけるダイナミックレンジを減少させることなく、正規化を使用して空間領域が所望されているＨＯＡ信号の部分を係数領域においてどのように送信するかである。さらに、正規化された信号は、信号レベルの不連続な変化によって生じる品質の劣化を起こさずに知覚符号化を行うために、信号レベルの不連続な変化を含んではならない。この課題は、請求項１および６に開示された方法によって解決される。この方法を使用する装置が請求項２および７にそれぞれ開示されている。
【0019】
原理的には、本発明の生成方法は、ＨＯＡ信号の係数領域表現から上記ＨＯＡ信号の混合した空間／係数領域表現を生成するのに適している。連続する係数フレーム内で上記ＨＯＡ信号の数を経時的に可変とすることができる。この方法は、
－ＨＯＡ係数領域信号のベクトルを、ある定数のＨＯＡ係数を有する係数領域信号の第１のベクトルと、経時的に可変数のＨＯＡ係数を有する係数領域信号の第２のベクトルとに分離するステップと、
－係数領域信号の上記第１のベクトルを変換行列の逆行列と乗算することによって、係数領域信号の上記第１のベクトルを空間領域信号の対応するベクトルに変換するステップと、
－空間領域信号の上記ベクトルをＰＣＭ符号化してＰＣＭ符号化された空間領域信号のベクトルを取得するステップと、
－正規化因子によって係数領域信号の上記第２のベクトルを正規化するステップであって、上記正規化は、係数領域信号の上記第２のベクトルの上記ＨＯＡ係数の現在の値の範囲に対して適応的な正規化であり、上記正規化において上記ベクトルのＨＯＡ係数に対して利用可能な値の範囲は超過することがなく、上記ベクトル内の利得を前の第２のベクトルにおける利得から後続する第２のベクトルにおける利得に連続的に変化させるために、上記正規化において、一様に連続する遷移関数が現在の第２のベクトルの係数に適用され、上記正規化は対応する復号器側の非正規化のための副情報〔サイド情報〕を提供する、上記ステップと、
－正規化された係数領域信号の上記ベクトルをＰＣＭ符号化してＰＣＭ符号化され正規化された係数領域信号のベクトルを取得するステップと、
－ＰＣＭ符号化された空間領域信号の上記ベクトルと、ＰＣＭ符号化され正規化された係数領域信号の上記ベクトルとを多重化するステップと、を含む。
－ＨＯＡ係数領域信号のベクトルを、ある定数のＨＯＡ係数を有する係数領域信号の第１のベクトルと、経時的に可変数のＨＯＡ係数を有する係数領域信号の第２のベクトルとに分離するステップと、
－係数領域信号の上記第１のベクトルを変換行列の逆行列と乗算することによって、係数領域信号の上記第１のベクトルを空間領域信号の対応するベクトルに変換するステップと、
－空間領域信号の上記ベクトルをＰＣＭ符号化してＰＣＭ符号化された空間領域信号のベクトルを取得するステップと、
－正規化因子によって係数領域信号の上記第２のベクトルを正規化するステップであって、上記正規化は、係数領域信号の上記第２のベクトルの上記ＨＯＡ係数の現在の値の範囲に対して適応的な正規化であり、上記正規化において上記ベクトルのＨＯＡ係数に対して利用可能な値の範囲は超過することがなく、上記ベクトル内の利得を前の第２のベクトルにおける利得から後続する第２のベクトルにおける利得に連続的に変化させるために、上記正規化において、一様に連続する遷移関数が現在の第２のベクトルの係数に適用され、上記正規化は対応する復号器側の非正規化のための副情報〔サイド情報〕を提供する、上記ステップと、
－正規化された係数領域信号の上記ベクトルをＰＣＭ符号化してＰＣＭ符号化され正規化された係数領域信号のベクトルを取得するステップと、
－ＰＣＭ符号化された空間領域信号の上記ベクトルと、ＰＣＭ符号化され正規化された係数領域信号の上記ベクトルとを多重化するステップと、を含む。
【0020】
原理的には、本発明の生成装置は、ＨＯＡ信号の係数領域表現から上記ＨＯＡ信号の混合した空間／係数領域表現を生成するのに適している。連続する係数フレーム内で上記ＨＯＡ信号の数を経時的に可変とすることができる。この装置は、
－ＨＯＡ係数領域信号のベクトルを、ある定数のＨＯＡ係数を有する係数領域信号の第１のベクトルと、経時的に可変数のＨＯＡ係数を有する係数領域信号の第２のベクトルとに分離するように構成された手段と、
－係数領域信号の上記第１のベクトルを、変換行列の逆行列と乗算することによって、係数領域信号の上記第１のベクトルを空間領域信号の対応するベクトルに変換するように構成された手段と、
－空間領域信号の上記ベクトルをＰＣＭ符号化してＰＣＭ符号化された空間領域信号のベクトルを取得するように構成された手段と、
－正規化因子によって係数領域信号の上記第２のベクトルを正規化するように構成された手段であって、上記正規化は、係数領域信号の上記第２のベクトルの上記ＨＯＡ係数の現在の値の範囲に対して適応的な正規化であり、上記正規化において上記ベクトルのＨＯＡ係数に対して利用可能な値の範囲は超過することがなく、上記ベクトル内の利得を前の第２のベクトルにおける利得から後続する第２のベクトルにおける利得に連続的に変化させるために、上記正規化において、一様に連続する遷移関数が現在の第２のベクトルの係数に適用され、上記正規化は対応する復号器側の非正規化のための副情報を提供する、上記手段と、
－正規化された係数領域信号の上記ベクトルをＰＣＭ符号化してＰＣＭ符号化され正規化された係数領域信号のベクトルを取得するように構成された手段と、
－ＰＣＭ符号化された空間領域信号の前記ベクトルと、ＰＣＭ符号化され正規化された係数領域信号の上記ベクトルとを多重化するように構成された手段と、を含む。
－ＨＯＡ係数領域信号のベクトルを、ある定数のＨＯＡ係数を有する係数領域信号の第１のベクトルと、経時的に可変数のＨＯＡ係数を有する係数領域信号の第２のベクトルとに分離するように構成された手段と、
－係数領域信号の上記第１のベクトルを、変換行列の逆行列と乗算することによって、係数領域信号の上記第１のベクトルを空間領域信号の対応するベクトルに変換するように構成された手段と、
－空間領域信号の上記ベクトルをＰＣＭ符号化してＰＣＭ符号化された空間領域信号のベクトルを取得するように構成された手段と、
－正規化因子によって係数領域信号の上記第２のベクトルを正規化するように構成された手段であって、上記正規化は、係数領域信号の上記第２のベクトルの上記ＨＯＡ係数の現在の値の範囲に対して適応的な正規化であり、上記正規化において上記ベクトルのＨＯＡ係数に対して利用可能な値の範囲は超過することがなく、上記ベクトル内の利得を前の第２のベクトルにおける利得から後続する第２のベクトルにおける利得に連続的に変化させるために、上記正規化において、一様に連続する遷移関数が現在の第２のベクトルの係数に適用され、上記正規化は対応する復号器側の非正規化のための副情報を提供する、上記手段と、
－正規化された係数領域信号の上記ベクトルをＰＣＭ符号化してＰＣＭ符号化され正規化された係数領域信号のベクトルを取得するように構成された手段と、
－ＰＣＭ符号化された空間領域信号の前記ベクトルと、ＰＣＭ符号化され正規化された係数領域信号の上記ベクトルとを多重化するように構成された手段と、を含む。
【0021】
原理的には、本発明の復号方法は、符号化されたＨＯＡ信号の混合した空間／係数領域表現を復号するのに適している。連続する係数フレーム内で上記ＨＯＡ信号の数を経時的に可変とすることができ、符号化されたＨＯＡ信号の上記混合した空間／係数領域表現は、上記の本発明の生成方法に従って生成されており、上記復号方法は、
－ＰＣＭ符号化された空間領域信号とＰＣＭ符号化され正規化された係数領域信号との上記多重化されたベクトルを逆多重化〔多重分離〕するステップと、
－ＰＣＭ符号化された空間領域信号の上記ベクトルを上記変換行列と乗算することによってＰＣＭ符号化された空間領域信号の上記ベクトルを係数領域信号の対応するベクトルに変換するステップと、
－ＰＣＭ符号化され正規化された係数領域信号の上記ベクトルを非正規化するステップであって、上記非正規化は、
－－受信した上記副情報の対応する冪指数ｅｎ（ｊ－１）および再帰的に算出された利得値ｇｎ（ｊ－２）を使用して、遷移ベクトルｈｎ（ｊ－１）を算出することであって、処理されるＰＣＭ符号化され正規化された係数領域信号の後続するベクトルの対応する処理に対する利得値ｇｎ（ｊ－１）が保持され、ｊはＨＯＡ信号ベクトルの入力行列の連続するインデックス〔ランニング・インデックス〕である、上記遷移ベクトルを算出することと、
－－ＰＣＭ符号化され正規化された信号の現在のベクトルに対して対応する逆利得値（利得値の逆数）を適用して上記ＰＣＭ符号化され非正規化された信号の対応するベクトルを取得することと、
を含む、上記非正規化するステップと、
－係数領域信号の上記ベクトルおよび非正規化された係数領域のベクトルを合成して可変数のＨＯＡ係数を有することができるＨＯＡ係数領域信号の結合されたベクトルを取得するステップと、を含む。
－ＰＣＭ符号化された空間領域信号とＰＣＭ符号化され正規化された係数領域信号との上記多重化されたベクトルを逆多重化〔多重分離〕するステップと、
－ＰＣＭ符号化された空間領域信号の上記ベクトルを上記変換行列と乗算することによってＰＣＭ符号化された空間領域信号の上記ベクトルを係数領域信号の対応するベクトルに変換するステップと、
－ＰＣＭ符号化され正規化された係数領域信号の上記ベクトルを非正規化するステップであって、上記非正規化は、
－－受信した上記副情報の対応する冪指数ｅｎ（ｊ－１）および再帰的に算出された利得値ｇｎ（ｊ－２）を使用して、遷移ベクトルｈｎ（ｊ－１）を算出することであって、処理されるＰＣＭ符号化され正規化された係数領域信号の後続するベクトルの対応する処理に対する利得値ｇｎ（ｊ－１）が保持され、ｊはＨＯＡ信号ベクトルの入力行列の連続するインデックス〔ランニング・インデックス〕である、上記遷移ベクトルを算出することと、
－－ＰＣＭ符号化され正規化された信号の現在のベクトルに対して対応する逆利得値（利得値の逆数）を適用して上記ＰＣＭ符号化され非正規化された信号の対応するベクトルを取得することと、
を含む、上記非正規化するステップと、
－係数領域信号の上記ベクトルおよび非正規化された係数領域のベクトルを合成して可変数のＨＯＡ係数を有することができるＨＯＡ係数領域信号の結合されたベクトルを取得するステップと、を含む。
【0022】
原理的には、本発明の復号装置は、符号化されたＨＯＡ信号の混合した空間／係数領域表現を復号するのに適している。連続する係数フレーム内で上記ＨＯＡ信号の数を経時的に可変とすることができ、符号化されたＨＯＡ信号の上記混合した空間／係数領域表現は、上記発明の生成方法に従って生成されており、上記復号装置は、
－ＰＣＭ符号化された空間領域信号とＰＣＭ符号化され正規化された係数領域信号との上記多重化されたベクトルを逆多重化するように構成された手段と、
－ＰＣＭ符号化された空間領域信号の上記ベクトルを上記変換行列と乗算することによってＰＣＭ符号化された空間領域信号の上記ベクトルを係数領域信号の対応するベクトルに変換するように構成された手段と、
－ＰＣＭ符号化され正規化された係数領域信号の上記ベクトルを非正規化するように構成された手段であって、上記非正規化は、
－－受信した前記副情報の対応する冪指数ｅｎ（ｊ－１）および再帰的に算出された利得値ｇｎ（ｊ－２）を使用して、遷移ベクトルｈｎ（ｊ－１）を算出することであって、処理されるべきＰＣＭ符号化され正規化された係数領域信号の後続するベクトルの対応する処理に対する利得値ｇｎ（ｊ－１）が保持され、ｊは、ＨＯＡ信号ベクトルの入力行列の連続するインデックスである、上記遷移ベクトルを算出することと、
－－ＰＣＭ符号化され正規化された信号の現在のベクトルに対して対応する逆利得値（利得値の逆数）を適用して上記ＰＣＭ符号化され非正規化された信号の対応するベクトルを取得することと、
を含む、上記非正規化するように構成された手段と、
－係数領域信号の上記ベクトルおよび非正規化された係数領域のベクトルを合成して可変数のＨＯＡ係数を有することができるＨＯＡ係数領域信号の合成されたベクトルを取得するように構成された手段と、を含む。
－ＰＣＭ符号化された空間領域信号とＰＣＭ符号化され正規化された係数領域信号との上記多重化されたベクトルを逆多重化するように構成された手段と、
－ＰＣＭ符号化された空間領域信号の上記ベクトルを上記変換行列と乗算することによってＰＣＭ符号化された空間領域信号の上記ベクトルを係数領域信号の対応するベクトルに変換するように構成された手段と、
－ＰＣＭ符号化され正規化された係数領域信号の上記ベクトルを非正規化するように構成された手段であって、上記非正規化は、
－－受信した前記副情報の対応する冪指数ｅｎ（ｊ－１）および再帰的に算出された利得値ｇｎ（ｊ－２）を使用して、遷移ベクトルｈｎ（ｊ－１）を算出することであって、処理されるべきＰＣＭ符号化され正規化された係数領域信号の後続するベクトルの対応する処理に対する利得値ｇｎ（ｊ－１）が保持され、ｊは、ＨＯＡ信号ベクトルの入力行列の連続するインデックスである、上記遷移ベクトルを算出することと、
－－ＰＣＭ符号化され正規化された信号の現在のベクトルに対して対応する逆利得値（利得値の逆数）を適用して上記ＰＣＭ符号化され非正規化された信号の対応するベクトルを取得することと、
を含む、上記非正規化するように構成された手段と、
－係数領域信号の上記ベクトルおよび非正規化された係数領域のベクトルを合成して可変数のＨＯＡ係数を有することができるＨＯＡ係数領域信号の合成されたベクトルを取得するように構成された手段と、を含む。
【0023】
本発明の追加的な実施形態の利点は、各従属請求項に開示されている。
【0024】
本発明の例示的な実施形態が添付図面を参照して説明されている。
【図面の簡単な説明】
【0025】
【図1】空間領域におけるもとの係数領域ＨＯＡ表現のＰＣＭ送信を示す図である。
【図2】係数領域および空間領域におけるＨＯＡ表現を組み合わせた送信を示す図である。
【図3】係数領域における信号に対してブロック単位で適応的な正規化を使用した係数領域および空間領域におけるＨＯＡ表現を組み合わせた送信を示す図である。
【図4】係数領域において表現されたＨＯＡ信号ｘｎ（ｊ）に対する適応的正規化処理を示す図である。
【図5】２つの異なる利得値間の円滑な遷移のために使用される遷移関数を示す図である。
【図6】適応的な非正規化処理を示す図である。
【図7】異なる冪指数ｅｎを使用した遷移関数ｈn（ｌ）のＦＦＴ周波数スペクトルを示す図であり、ここで各関数の最大振幅は０ｄＢに正規化されている。
【図8】３つの連続する信号ベクトルに対する例示的な遷移関数を示した図である。
【発明を実施するための形態】
【0026】
空間領域におけるＨＯＡ表現のＰＣＭ符号化に関して、図１に示されているようなＨＯＡ表現のＰＣＭ送信を行えるように、（浮動小数点表現において）－１≦ｗｎ＜１が満たされているものと仮定する。ＨＯＡ符号化器の入力部で、変換ステップまたはステージ１１は、式（１）を使用して、現在の入力信号フレームの係数領域信号ｄを空間領域信号ｗに変換する。ＰＣＭ符号化ステップまたはステージ１２は、式（３）を使用して浮動小数点サンプルｗを固定小数点の表記法のＰＣＭ符号化された整数サンプルｗ’に変換する。多重化ステップまたはステージ１３において、ＰＣＭ符号化された整数サンプルｗ’を多重化してＨＯＡ送信フォーマットにする。
【0027】
ＨＯＡ復号器は、逆多重化ステップまたはステージ１４で、受信したＨＯＡ送信フォーマットから信号ｗ’に逆多重化し、ステップまたはステージ１５で式（２）を使用して信号ｗ’を再変換して係数領域信号ｄ’にする。この逆変換は、空間領域から係数領域への変換が常に整数（ＰＣＭ）から浮動小数点へのフォーマット変換を含むため、ｄ’のダイナミックレンジが増加する。
【0028】
行列Ψが経時的に変化する場合には図１の標準的なＨＯＡ送信は失敗する。これは、ＨＯＡ信号の数またはインデックスが、連続するＨＯＡ係数シーケンス、つまり、連続する入力信号フレームに対して経時的に変化する場合である。上述したように、このような場合の一例は、欧州特許出願第１３３０５５５８号に記載されたＨＯＡ圧縮処理である。そのＨＯＡ圧縮処理では、ある定数のＨＯＡ信号が連続的に伝送され、経時的に可変数のＨＯＡ信号が変化する信号インデックスを伴って並列的に伝送される。その全ての信号は係数領域で送信され、これは上述したように最善とはいえない。
【0029】
【0030】
ステップまたはステージ２０において、ＨＯＡ符号化器は、ＨＯＡベクトルｄを２つのベクトルｄ１およびｄ２に分離する。ここで、ベクトルｄ１に対するＨＯＡ係数の数Ｍは一定であり、ベクトルｄ２は可変数Ｋ個のＨＯＡ係数を含む。信号インデックスｎは、ベクトルｄ１に対して時間的に不変であるため、ＰＣＭ符号化は、空間領域において、ステップまたはステージ２１、２２、２３、２４、２５において、図２の下側の信号経路内に示されたｗ１およびｗ’１に対応する信号を用いて行われる。これは、図１のステップまたはステージ１１～１５に対応する。しかしながら、多重化ステップ／ステージ２３は追加の入力信号ｄ”2を取得し、ＨＯＡ復号器では逆多重化ステップ／ステージ２４は異なる出力信号ｄ”2を供給する。
【0031】
ベクトルｄ２のＨＯＡ係数の数またはサイズＫは経時的に変化し、送信されるＨＯＡ信号のインデックスｎは経時的に変化する。これは空間領域での送信を妨げる。その理由は、経時的に変化する変換行列が必要となり、その結果、全ての知覚符号化されたＨＯＡ信号に不連続部が生ずることがあるからである（なお、知覚符号化ステップまたはステージは図に示されていない）。しかしながら、このような信号の不連続部は、送信された信号の知覚符号化の品質を低下させかねないため、回避されるべきである。
【0032】
そこで、係数領域でｄ２を送信すべきである。係数領域における信号の値の範囲が大きくなるため、信号は、ステップまたはステージ２７でＰＣＭ符号化が適用される前に、因子
によって、ステップまたはステージ２６でスケーリングされる。しかしながら、このようなスケーリングの欠点は、
の最大絶対値が最悪の推定値となることであり、通常は値の範囲が小さくなることが予期されるのでサンプルが最大絶対値となることはあまり多くは発生しない。その結果、ＰＣＭ符号化のために利用可能な分解能は効率的には使用されず、信号対量子化雑音比が低い。
【数11】
【数12】
【0033】
逆多重化ステップ／ステージ２４の出力信号ｄ”2は、因子
を使用してステップまたはステージ２８で逆スケーリングされる。結果として得られる信号
は、ステップまたはステージ２９において信号ｄ’1と結合され、その結果、復号された係数領域ＨＯＡ信号ｄ’となる。
【数13】
【数14】
【0034】
本発明によれば、信号の信号適応的な正規化を使用することで係数領域におけるＰＣＭ符号化の効率を向上させることができる。しかしながら、このような正規化は、可逆でなければならず、かつ、サンプルからサンプルに一様に連続していなければならない。必要なブロック単位の適応的処理が図３に示されている。ｊ番目の入力行列
は、Ｌ個のＨＯＡ信号ベクトルｄからなる（インデックスｊは図３に示されていない）。行列Ｄは、図２の処理の場合のように、２つの行列Ｄ１およびＤ２に分離される。ステップまたはステージ３１～３５におけるＤ１の処理は、図２および図１に関連して説明した空間領域における処理に対応する。しかし、係数領域信号の符号化は、ブロック単位の適応的正規化ステップまたはステージ３６を含み、この適応的正規化ステップまたはステージ３６は、信号の現在の値の範囲に自動的に適応し、その後、ＰＣＭ符号化ステップまたはステージ３７が行われる。行列Ｄ”2における各ＰＣＭ符号化された信号の非正規化のために必要な副情報は、ベクトルｅ内に記憶および転送される。ベクトル
は、信号毎に１つの値を含む。受信側の復号器の対応する適応的非正規化ステップまたはステージ３８は、送信されたベクトルｅからの情報を使用して、正規化の逆を行って信号Ｄ”2を信号
にする。その結果、得られた信号
は、ステップまたはステージ３９において、信号Ｄ’１と結合され、その結果、復号された係数領域ＨＯＡ信号Ｄ’が得られる。
【数15】
【数16】
【数17】
【数18】
【0035】
ステップ／ステージ３６における適応的正規化においては、最後の入力係数ブロックの利得から次の入力係数ブロックの利得に連続的に変化させるために、一様に連続する遷移関数が現在の入力係数ブロックのサンプルに適用される。この種の処理は、１つのブロックの遅延を必要とする。その理由は、正規化利得の変化は、１つ前の入力ブロックで検出されなければならないからである。その利点は、導入される振幅変調は小さいため、変調された信号の知覚符号化は非正規化された信号にほとんど影響を与えないことである。
【0036】
適応的正規化の実施は、Ｄ２（ｊ）のＨＯＡ信号毎に独立して行われる。信号は、以下の行列の行ベクトルｘｎ
Tによって表現される
ここで、ｎは、送信されたＨＯＡ信号のインデックスを表す。ｘｎは、当初は列ベクトルであつたが、ここでは行ベクトルが必要であるため転置されている。
【数19】
【0037】
図４は、より詳細にステップ／ステージ３６における適応的正規化を示している。この処理の入力値は、以下の通りである。
・時間的にスムージングされた最大値ｘｎ，ｍａｘ，ｓｍ（ｊ－２）
・利得値ｇｎ（ｊ－２）、つまり、対応する信号ベクトル・ブロックｘｎ（ｊ－２）のすぐ前の係数に適用される利得
・現在のブロックの信号ベクトルｘｎ（ｊ）
・前のブロックの信号ベクトルｘｎ（ｊ－１）
・時間的にスムージングされた最大値ｘｎ，ｍａｘ，ｓｍ（ｊ－２）
・利得値ｇｎ（ｊ－２）、つまり、対応する信号ベクトル・ブロックｘｎ（ｊ－２）のすぐ前の係数に適用される利得
・現在のブロックの信号ベクトルｘｎ（ｊ）
・前のブロックの信号ベクトルｘｎ（ｊ－１）
【0038】
第１のブロックｘｎ（０）の処理を開始すると、再帰的な入力値が所定の値によって初期化される。ベクトルｘｎ（－１）の係数は、零に設定することができ、利得値ｇｎ（－２）は、「１」に設定するとよく、ｘｎ，ｍａｘ，ｓｍ（－２）は、所定の平均振幅値に設定するとよい。
【0039】
その後、すぐ前のブロックｇｎ（ｊ－１）の利得値、副情報ベクトルｅ（ｊ－１）の対応する値ｅｎ（ｊ－１）、時間的にスムージングされた最大値ｘｎ，ｍａｘ，ｓｍ（ｊ－１）、および正規化された信号ベクトルｘ’ｎ（ｊ－１）が処理の出力である。
【0040】
この処理の目的は信号ベクトルｘｎ（ｊ－１）に適用される利得値をｇｎ（ｊ－２）からｇｎ（ｊ－１）に連続的に変更して、利得値ｇｎ（ｊ－１）が信号ベクトルｘｎ（ｊ）を正規化して適切な値の範囲にすることにある。
【0041】
最初の処理ステップまたはステージ４１において、信号ベクトル
の各係数に利得値ｇｎ（ｊ－２）を乗算する。ここで、ｇｎ（ｊ－２）は、次の正規化利得のための基礎として、信号ベクトルｘｎ（ｊ－１）の正規化処理から保持されている。結果として得られる正規化された信号ベクトルｘｎ（ｊ）から、式（５）を使用してステップまたはステージ４２で絶対値の最大値ｘｎ，ｍａｘを得る。
【数20】
【数21】
【0042】
ステップまたはステージ４３において、ｘｎ，ｍａｘに時間的なスムージングを適用する。この処理は、すぐ前の時間的なスムージング済みの最大値ｘｎ，ｍａｘ，ｓｍ（ｊ－２）を受信する再帰的フィルタを使用して行われる。この結果、現在の時間的なスムージング済みの最大値ｘｎ，ｍａｘ，ｓｍ（ｊ－１）が得られる。このようなスムージングの目的は、時間的に正規化利得の適応を弱め、これにより、利得の変更の回数を低減し、それで信号の振幅変調を低減することにある。値ｘｎ，ｍａｘが所定の値の範囲にある場合にのみ、時間的なスムージングが適用される。値ｘｎ，ｍａｘが所定の値の範囲にない場合は、ｘｎ，ｍａｘ，ｓｍ（ｊ－１）をｘｎ，ｍａｘに設定する（すなわち、現在の状態のままでｘｎ，ｍａｘの値が保持される。）。その理由は、後続する処理がｘｎ，ｍａｘの実際の値を所定の値の範囲に減衰させなければならないからである。したがって、正規化利得が一定である場合か、信号ｘｎ（ｊ）が値の範囲を外れることなく増幅される場合にのみ、時間的なスムージング処理が動作する。
【0043】
ステップ／ステージ４３において、ｘｎ，ｍａｘ，ｓｍ（ｊ－１）を以下のように算出する。
ここで、０＜ａ≦１は、減衰定数である。
【数22】
【0044】
ベクトルｅの送信のためのビットレートを低減するために、現在の時間的なスムージング済みの最大値ｘｎ，ｍａｘ，ｓｍ（ｊ－１）から正規化利得を算出し、「２」を基数とする冪指数として送信する。したがって、
が満たされるべきであり、ステップまたはステージ４４において、量子化された冪指数ｅｎ（ｊ－１）を下記の式から取得する
【数23】
【数24】
【0045】
効率的なＰＣＭ符号化のために利用可能な解像度を利用するために信号が再度増幅されている（すなわち、合計利得の値が経時的に増加する）期間においては、冪指数ｅｎ（ｊ）（したがって、連続するブロック間の利得差）は、小さな最大値、例えば「１」に制限されることがある。この処理には２つの有利な効果がある。その一方は、連続するブロック間の利得差が小さいと、遷移関数を通じて小さい振幅変調のみとなり、結果としてＦＦＴスペクトルの隣接するサブバンド間のクロストークが低減されることである（図７に関連した知覚符号化への遷移関数の影響についての関連記述を参照）。他方は、冪指数の符号化のためのビットレートは、その値範囲を制限することによって低減されることである。
【0046】
合計の最大増幅の値
は制限することができ、例えば「１」に制限することができる。その理由は、係数信号の一つが、（空間領域におけるＨＯＡ表現の正規化を想定すると）１番目のブロックが極めて小さな振幅を有し、２番目のブロックが起こり得る最も高い振幅を有するという、２つの連続するブロック間で大きな振幅の変化を示す場合には、この２つのブロック間の極めて大きな利得差により、遷移関数を通じて振幅変調が大きくなり、結果として、ＦＦＴスペクトルの隣接するサブバンド間に重大なクロストークが生じるからである。これは、以下に説明する後続する知覚符号化処理にとって最適とはいえないことがある。
【数25】
【0047】
ステップまたはステージ４５において、冪指数値ｅｎ（ｊ－１）を遷移関数に適用して、現在の利得値ｇｎ（ｊ－１）を得る。利得値ｇｎ（ｊ－２）から利得値ｇｎ（ｊ－１）への連続する遷移に対して図５に示した関数を使用する。その関数の演算ルールは以下の通りである。
ここで、
である。実際の遷移関数ベクトル
は、ｇｎ（ｊ－２）からｇｎ（ｊ－１）に連続的にフェードする（ｆａｄｅ）ために使用される。例えば、ｅｎ（ｊ－１）の各値に対して、ｆ（０）＝１であるため、ｈｎ（０）の値は、ｇｎ（ｊ－２）となる。ｆ（Ｌ－１）の最後の値は、０．５であるため、
は、結果として、式（９）からのｘｎ（ｊ）の正規化に対して必要な増幅ｇｎ（ｊ－１）が得られる。
【数26】
【数27】
【数28】
【数29】
【0048】
ステップまたはステージ４６において、信号ベクトルｘｎ（ｊ－１）のサンプルは、下記の式（１２）を得るために、遷移ベクトルｈｎ（ｊ－１）の利得値によって重み付けされる。
ここで、
の演算子は、２つのベクトルのベクトル要素単位の乗算を表す。この乗算は、信号ｘｎ（ｊ－１）の振幅変調を表すものと考えることもできる。
【数30】
【数31】
【0049】
より詳細には、遷移ベクトル
の係数は、信号ベクトルｘｎ（ｊ－１）の対応する係数によって乗算され、ここで、ｈｎ（０）の値は、ｈｎ（０）＝ｇｎ（ｊ－２）であり、ｈｎ（Ｌ－１）の値は、ｈｎ（Ｌ－１）＝ｇｎ（ｊ－１）である。したがって、遷移関数は、図８の例に示されているように、利得値ｇｎ（ｊ－２）から利得値ｇｎ（ｊ－１）に連続的にフェードする。これは、遷移関数ｈｎ（ｊ）、ｈｎ（ｊ－１）、およびｈｎ（ｊ－２）からの利得値を示しており、この遷移関数は３つの連続するブロックに対する対応する信号ベクトルｘｎ（ｊ）、ｘｎ（ｊ－１）、およびｘｎ（ｊ－２）に対して適用される。ダウンストリームの知覚符号化に関して、利点は、ブロック境界で適用される利得が連続していることである。遷移関数ｈｎ（ｊ－１）は、ｘｎ（ｊ－１）の係数の利得をｇｎ（ｊ－２）からｇｎ（ｊ－１）に連続的にフェードさせる。
【数32】
【0050】
復号器または受信器側での適応的な非正規化処理が図６に示されている。入力値は、ＰＣＭ符号化され正規化された信号ｘ”ｎ（ｊ－１）、適切な冪指数en（ｊ－１）、およびすぐ前のブロックの利得値ｇｎ（ｊ－２）である。すぐ前のブロックの利得値ｇｎ（ｊ－２）は、再帰的に算出される。ここで、ｇｎ（ｊ－２）は、符号化器に使用されている所定の値によって初期化されなければならない。出力は、ステップ／ステージ６１からの利得値ｇｎ（ｊ－１）およびステップ／ステージ６２からの非正規化された信号
である。
【数33】
【0051】
ステップまたはステージ６１において、冪指数を遷移関数に適用する。ｘｎ（ｊ－１）の値の範囲を復元するために、式（１１）は、受信した冪指数ｅｎ（ｊ－１）および再帰的に算出された利得ｇｎ（ｊ－２）から遷移ベクトルｈｎ（ｊ－１）を算出する。次のブロックの処理のための利得ｇｎ（ｊ－１）は、ｈｎ（Ｌ－１）に設定される。
【0052】
ステップまたはステージ６２において、逆利得（利得の逆数）が適用される。正規化処理で適用された振幅変調は、
によって逆処理される。ここで、
であり、
は、符号化器側または送信機側で使用されているベクトル要素単位の乗算である。ｘ’ｎ（ｊ－１）のサンプルは、ｘ”ｎ（ｊ－１）の入力ＰＣＭフォーマットによって表現することができず、非正規化は、例えば浮動小数点フォーマットのように、より広い値の範囲のフォーマットへの変換を必要とする。
【数34】
【数35】
【数36】
【0053】
副情報送信に関して、冪指数ｅｎ（ｊ－１）の送信に対して、同一の値の範囲の連続するブロックに対して、適用される正規化利得は一定となるだろうから、その確率が一様になると仮定することはできない。したがって、エントロピー符号化は、例えば、ハフマン符号化と同様に、必要なデータ・レートを減少させるために、冪指数値に適用することができる。
【0054】
上記処理の１つの欠点は、利得値ｇｎ（ｊ－２）の再帰的な算出であろう。そのため、非正規化処理はＨＯＡストリームの最初からしか開始することができない。
【0055】
この問題の１つの解決法は、ｇｎ（ｊ－２）を規則的に算出するための情報を提供するために、アクセス・ユニットをＨＯＡフォーマットに追加することである。この場合、アクセス・ユニットは、ｔ番目のブロック毎に
が算出されて非正規化が開始されるように、ｔ番目のブロック毎に冪指数
を提供しなければならない。
【数37】
【数38】
【0056】
正規化された信号ｘ’ｎ（ｊ－１）の知覚符号化処理への影響は、ｈn（ｌ）の周波数応答
の絶対値によって分析される。周波数応答は、式（１５）によって示されているような、ｈn（ｌ）の高速フーリエ変換（ＦＦＴ）によって定義される。
【数39】
【0057】
図７は、振幅変調によって導入されるスペクトル変形を明確にするために、マグニチュードが（０ｄＢに）正規化されたＦＦＴスペクトルＨn（ｕ）を示している。|Ｈn（ｕ）|の減衰は、小さな冪指数では比較的に急激であり、冪指数が大きくなるほど平坦になる。
【0058】
時間領域におけるｈn（ｌ）によるｘｎ（ｊ－１）の振幅変調は、周波数領域におけるＨn（ｕ）による畳み込みと同等であるため、周波数応答Ｈn（ｕ）の急激な減衰により、ｘ’n（ｊ－１）のＦＦＴスペクトルの隣接するサブバンド間のクロストークが低減する。これは、ｘ’n（ｊ－１）の後続する知覚符号化処理に大いに関連がある。その理由は、サブバンド・クロストークが信号の推定された知覚的な特徴に影響を与えるからである。したがって、急激なＨｎ（ｕ）の減衰に対し、非正規化された信号ｘn（ｊ－１）に対してもまた、ｘ’n（ｊ－１）に対する知覚符号化処理の仮定が有効である。
【0059】
これは、小さな冪指数に対して、ｘ’n（ｊ－１）の知覚符号化処理がほぼｘｎ（ｊ－１）の知覚符号化処理と同等であることと、さらに、正規化された信号の知覚符号化処理が、冪指数の大きさが小さい限り、非正規化された信号に対してほとんど影響を与えないことを示している。
【0060】
本発明の処理は、送信側および受信側で単一のプロセッサまたは電子回路によって実行することができ、あるいは、並列に動作する、且つ／または、本発明の処理の複数の異なる部分に対して動作する、幾つかのプロセッサまたは電子回路によって実行することもできる。
【0061】
いくつかの態様を記載しておく。
〔態様１〕
ＨＯＡ表現を復号する方法であって、前記復号する方法は、
ＰＣＭ符号化空間領域信号のベクトルを変換行例と乗算することによって、前記ＨＯＡ表現のＰＣＭ符号化空間領域信号の前記ベクトルを係数領域信号の対応するベクトルに変換することと、
前記ＨＯＡ表現のＰＣＭ符号化され正規化された係数領域信号のベクトルを非正規化することであって、前記非正規化することは、
遷移ベクトルを決定することであって、前記遷移ベクトルの各要素は、再帰的に計算された利得値に基本値を対応する冪指数乗したものを乗算したものとして決定され、前記対応する冪指数は副情報として与えられるものであり、前記対応する冪指数及び前記利得値は、ＨＯＡ信号ベクトルの入力行例の連続するインデックスに基づいている、遷移ベクトルを決定することと、
ＰＣＭ符号化され非正規化された信号の対応するベクトルを決定するために、前記対応する逆利得値をＰＣＭ符号化され正規化された係数領域信号の前記ベクトルに適用することと、
を含む、非正規化することと、
係数領域信号の前記ベクトルと非正規化された係数領域信号の前記ベクトルとを合成して、可変数のＨＯＡ係数を有することができるＨＯＡ係数領域信号の結合されたベクトルを決定することと、
を含む、方法。
〔態様２〕
ＨＯＡ表現を復号する装置であって、前記復号する装置は、
ＰＣＭ符号化空間領域信号のベクトルを変換行例と乗算することによって、前記ＨＯＡ表現のＰＣＭ符号化空間領域信号の前記ベクトルを係数領域信号の対応するベクトルに変換するように構成された手段と、
前記ＨＯＡ表現のＰＣＭ符号化され正規化された係数領域信号のベクトルを非正規化するように構成された手段であって、前記非正規化するように構成された手段は、
遷移ベクトルを決定するように構成された手段であって、前記遷移ベクトルの各要素は、再帰的に計算された利得値に基本値を対応する冪指数乗したものを乗算したものとして決定され、前記対応する冪指数は副情報として与えられるものであり、前記対応する冪指数及び前記利得値は、ＨＯＡ信号ベクトルの入力行例の連続するインデックスに基づいている、遷移ベクトルを決定するように構成された手段と、
ＰＣＭ符号化され非正規化された信号の対応するベクトルを決定するために、前記対応する逆利得値をＰＣＭ符号化され正規化された係数領域信号の前記ベクトルに適用するように構成された手段と、
を含む、非正規化するように構成された手段と、
係数領域信号の前記ベクトルと非正規化された係数領域信号の前記ベクトルとを合成して、可変数のＨＯＡ係数を有することができるＨＯＡ係数領域信号の結合されたベクトルを決定するように構成された手段と、
を含む、装置。
〔態様３〕
コンピュータに態様１に記載の方法を実行させるためのコンピュータ・プログラム。
〔態様１〕
ＨＯＡ表現を復号する方法であって、前記復号する方法は、
ＰＣＭ符号化空間領域信号のベクトルを変換行例と乗算することによって、前記ＨＯＡ表現のＰＣＭ符号化空間領域信号の前記ベクトルを係数領域信号の対応するベクトルに変換することと、
前記ＨＯＡ表現のＰＣＭ符号化され正規化された係数領域信号のベクトルを非正規化することであって、前記非正規化することは、
遷移ベクトルを決定することであって、前記遷移ベクトルの各要素は、再帰的に計算された利得値に基本値を対応する冪指数乗したものを乗算したものとして決定され、前記対応する冪指数は副情報として与えられるものであり、前記対応する冪指数及び前記利得値は、ＨＯＡ信号ベクトルの入力行例の連続するインデックスに基づいている、遷移ベクトルを決定することと、
ＰＣＭ符号化され非正規化された信号の対応するベクトルを決定するために、前記対応する逆利得値をＰＣＭ符号化され正規化された係数領域信号の前記ベクトルに適用することと、
を含む、非正規化することと、
係数領域信号の前記ベクトルと非正規化された係数領域信号の前記ベクトルとを合成して、可変数のＨＯＡ係数を有することができるＨＯＡ係数領域信号の結合されたベクトルを決定することと、
を含む、方法。
〔態様２〕
ＨＯＡ表現を復号する装置であって、前記復号する装置は、
ＰＣＭ符号化空間領域信号のベクトルを変換行例と乗算することによって、前記ＨＯＡ表現のＰＣＭ符号化空間領域信号の前記ベクトルを係数領域信号の対応するベクトルに変換するように構成された手段と、
前記ＨＯＡ表現のＰＣＭ符号化され正規化された係数領域信号のベクトルを非正規化するように構成された手段であって、前記非正規化するように構成された手段は、
遷移ベクトルを決定するように構成された手段であって、前記遷移ベクトルの各要素は、再帰的に計算された利得値に基本値を対応する冪指数乗したものを乗算したものとして決定され、前記対応する冪指数は副情報として与えられるものであり、前記対応する冪指数及び前記利得値は、ＨＯＡ信号ベクトルの入力行例の連続するインデックスに基づいている、遷移ベクトルを決定するように構成された手段と、
ＰＣＭ符号化され非正規化された信号の対応するベクトルを決定するために、前記対応する逆利得値をＰＣＭ符号化され正規化された係数領域信号の前記ベクトルに適用するように構成された手段と、
を含む、非正規化するように構成された手段と、
係数領域信号の前記ベクトルと非正規化された係数領域信号の前記ベクトルとを合成して、可変数のＨＯＡ係数を有することができるＨＯＡ係数領域信号の結合されたベクトルを決定するように構成された手段と、
を含む、装置。
〔態様３〕
コンピュータに態様１に記載の方法を実行させるためのコンピュータ・プログラム。
【図1】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】
【図8】
【外国語明細書】