特表2022-548038空間オーディオパラメータ符号化および関連する復号化の決定
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】公表特許公報(A)
(11)【公表番号】
(43)【公表日】2022-11-16
(54)【発明の名称】空間オーディオパラメータ符号化および関連する復号化の決定
(51)【国際特許分類】
G10L 19/008 20130101AFI20221109BHJP
【ＦＩ】
G10L19/008 100
【審査請求】有
【予備審査請求】未請求
(21)【出願番号】P 2022516079
(86)(22)【出願日】2020-09-09
(85)【翻訳文提出日】2022-05-10
(86)【国際出願番号】 FI2020050578
(87)【国際公開番号】W WO2021048468
(87)【国際公開日】2021-03-18
(31)【優先権主張番号】1913274.5
(32)【優先日】2019-09-13
(33)【優先権主張国・地域又は機関】GB
(81)【指定国・地域】
(71)【出願人】
【識別番号】515076873
【氏名又は名称】ノキア テクノロジーズ オサケユイチア
(74)【代理人】
【識別番号】100099759
【弁理士】
【氏名又は名称】青木 篤
(74)【代理人】
【識別番号】100123582
【弁理士】
【氏名又は名称】三橋 真二
(74)【代理人】
【識別番号】100092624
【弁理士】
【氏名又は名称】鶴田 準一
(74)【代理人】
【識別番号】100141162
【弁理士】
【氏名又は名称】森 啓
(72)【発明者】
【氏名】アドリアナ バシラケ
(57)【要約】
【課題】空間オーディオパラメータ符号化および関連する復号化の決定。
【解決手段】時間周波数ブロックに対する空間オーディオ信号指向性メタデータパラメータを生成し、第１量子化解像度に基づいて、時間周波数ブロックのための符号化空間オーディオ信号指向性メタデータパラメータを生成し、第１量子化解像度に基づく時間周波数ブロックの前記符号化空間オーディオ信号指向性メタデータパラメータに使用されるビット数を、決定されたビット数と比較し、前記第１量子化解像度に基づく前記時間周波数ブロックのための符号化空間オーディオ信号指向性パラメータのために使用されるビット数が、決定されたビット数未満である場合、第１量子化解像度に基づく時間周波数ブロックのための前記符号化空間オーディオ信号指向性メタデータパラメータを出力または格納し、前記第１量子化解像度に基づく前記時間周波数ブロックの前記符号化空間オーディオ信号指向性パラメータに使用されるビット数が、前記決定されたビット数よりも多く、前記決定されたビット数と、前記第１量子化解像度に基づく前記時間周波数ブロックの前記符号化空間オーディオ信号指向性パラメータに使用されるビット数との間の差が決定されたビット数よりも少なく、決定されたビット数未満である場合に、第２量子化解像度に基づいて、前記時間周波数ブロックの符号化空間オーディオ信号指向性メタデータパラメータを生成し、前記第１量子化解像度に基づく前記時間周波数ブロックのための前記符号化空間オーディオ信号指向性パラメータに使用されるビット数が、前記決定されたビット数よりも大きく、および、前記決定されたビット数と、前記第１量子化解像度に基づく前記時間周波数ブロックのための前記符号化空間オーディオ信号指向性パラメータに使用された前記ビット数との間の差が、前記決定された閾値よりも大きいとき、第３量子化解像度に基づく前記時間周波数ブロックのための符号化空間オーディオ信号指向性メタデータパラメータを生成する、ように構成された手段を備える装置であって、前記第３量子化解像度は、前記第３量子化解像度に基づく前記時間周波数ブロックのための符号化空間オーディオ信号指向性パラメータに使用されるビット数が、常に、決定されたビット数以下であるように決定される、装置。
【選択図】図１
【解決手段】時間周波数ブロックに対する空間オーディオ信号指向性メタデータパラメータを生成し、第１量子化解像度に基づいて、時間周波数ブロックのための符号化空間オーディオ信号指向性メタデータパラメータを生成し、第１量子化解像度に基づく時間周波数ブロックの前記符号化空間オーディオ信号指向性メタデータパラメータに使用されるビット数を、決定されたビット数と比較し、前記第１量子化解像度に基づく前記時間周波数ブロックのための符号化空間オーディオ信号指向性パラメータのために使用されるビット数が、決定されたビット数未満である場合、第１量子化解像度に基づく時間周波数ブロックのための前記符号化空間オーディオ信号指向性メタデータパラメータを出力または格納し、前記第１量子化解像度に基づく前記時間周波数ブロックの前記符号化空間オーディオ信号指向性パラメータに使用されるビット数が、前記決定されたビット数よりも多く、前記決定されたビット数と、前記第１量子化解像度に基づく前記時間周波数ブロックの前記符号化空間オーディオ信号指向性パラメータに使用されるビット数との間の差が決定されたビット数よりも少なく、決定されたビット数未満である場合に、第２量子化解像度に基づいて、前記時間周波数ブロックの符号化空間オーディオ信号指向性メタデータパラメータを生成し、前記第１量子化解像度に基づく前記時間周波数ブロックのための前記符号化空間オーディオ信号指向性パラメータに使用されるビット数が、前記決定されたビット数よりも大きく、および、前記決定されたビット数と、前記第１量子化解像度に基づく前記時間周波数ブロックのための前記符号化空間オーディオ信号指向性パラメータに使用された前記ビット数との間の差が、前記決定された閾値よりも大きいとき、第３量子化解像度に基づく前記時間周波数ブロックのための符号化空間オーディオ信号指向性メタデータパラメータを生成する、ように構成された手段を備える装置であって、前記第３量子化解像度は、前記第３量子化解像度に基づく前記時間周波数ブロックのための符号化空間オーディオ信号指向性パラメータに使用されるビット数が、常に、決定されたビット数以下であるように決定される、装置。
【選択図】図１
【特許請求の範囲】
【請求項1】
時間周波数ブロックに対する空間オーディオ信号指向性メタデータパラメータを生成し、第１量子化解像度に基づいて、時間周波数ブロックのための符号化空間オーディオ信号指向性メタデータパラメータを生成し、
第１量子化解像度に基づく時間周波数ブロックの前記符号化空間オーディオ信号指向性メタデータパラメータに使用されるビット数を、決定されたビット数と比較し、
前記第１量子化解像度に基づく前記時間周波数ブロックのための符号化空間オーディオ信号指向性パラメータのために使用されるビット数が、決定されたビット数未満である場合、第１量子化解像度に基づく時間周波数ブロックのための前記符号化空間オーディオ信号指向性メタデータパラメータを出力または格納し、
前記第１量子化解像度に基づく前記時間周波数ブロックの前記符号化空間オーディオ信号指向性パラメータに使用されるビット数が、前記決定されたビット数よりも多く、前記決定されたビット数と、前記第１量子化解像度に基づく前記時間周波数ブロックの前記符号化空間オーディオ信号指向性パラメータに使用されるビット数との間の差が決定されたビット数よりも少なく、決定されたビット数未満である場合に、第２量子化解像度に基づいて、
前記時間周波数ブロックの符号化空間オーディオ信号指向性メタデータパラメータを生成し、前記第１量子化解像度に基づく前記時間周波数ブロックのための前記符号化空間オーディオ信号指向性パラメータに使用されるビット数が、前記決定されたビット数よりも大きく、および、前記決定されたビット数と、前記第１量子化解像度に基づく前記時間周波数ブロックのための前記符号化空間オーディオ信号指向性パラメータに使用された前記ビット数との間の差が、前記決定された閾値よりも大きいとき、第３量子化解像度に基づく前記時間周波数ブロックのための符号化空間オーディオ信号指向性メタデータパラメータを生成する、
ように構成された手段を備える装置であって、
前記第３量子化解像度は、前記第３量子化解像度に基づく前記時間周波数ブロックのための符号化空間オーディオ信号指向性パラメータに使用されるビット数が、常に、決定されたビット数以下であるように決定される、装置。
【請求項2】
第１量子化解像度に基づいて時間周波数ブロックについて符号化空間オーディオ信号指向性メタデータパラメータを生成するように構成された手段は、前記空間オーディオ信号指向性メタデータパラメータの値とインデックス値との間のマッピングのための前記第１量子化解像度を決定し、前記第１量子化解像度を使用するマッピングに基づいて、前記空間オーディオ信号指向性メタデータパラメータに関連するインデックスを生成し、固定レート符号化またはエントロピー符号化がより少ないビット数を使用するかどうかに基づいて、該固定レート符号化またはエントロピー符号化を使用して前記インデックスを選択的に符号化するように構成される、請求項１に記載の装置。
【請求項3】
前記空間オーディオ信号指向性メタデータパラメータの値とインデックス値との間のマッピングのための前記第１量子化解像度を決定するように構成された前記手段は、前記空間オーディオ信号指向性メタデータパラメータに関連するエネルギー比値に基づいて前記空間オーディオ信号指向性メタデータパラメータの値とインデックス値との間のマッピングのための前記第１量子化解像度を決定するように構成される、請求項２に記載の装置。
【請求項4】
前記決定されたビット数と、前記第１量子化解像度に基づく前記時間周波数ブロックのための前記符号化空間オーディオ信号指向性パラメータのために使用されるビット数との間の差異が、決定された閾値内にある場合に、第２量子化解像度に基づいて、前記時間周波数ブロックのための符号化空間オーディオ信号指向性メタデータパラメータを生成するように構成された前記手段は、前記空間オーディオ信号指向性メタデータパラメータの値とインデックス値との間のマッピングのための前記第２量子化解像度を決定し、前記第１量子化解像度を使用して固定レート符号化された空間オーディオ信号指向性メタデータパラメータのための前記第２量子化解像度を使用する前記マッピングに基づいて、前記空間オーディオ信号指向性メタデータパラメータに関連するインデックスを生成するように構成される、請求項２または３に記載の装置。
【請求項5】
前記手段はさらに、空間オーディオ信号指向性メタデータパラメータのための前記第１量子化解像度を使用するマッピングに基づく前記空間オーディオ信号指向性メタデータパラメータに関連する前記エントロピー符号化インデックスと、空間オーディオ信号指向性メタデータパラメータのための前記第２量子化解像度を使用する前記マッピングに基づく前記空間オーディオ信号指向性メタデータパラメータに関連する前記固定レート符号化インデックスと、を出力または格納するように構成される、請求項４に記載の装置。
【請求項6】
前記手段は、前記エントロピー符号化インデックスが前記固定レート符号化インデックスに先行するように、前記符号化インデックスを順序付けるようにさらに構成される、請求項５に記載の装置。
【請求項7】
前記手段は、前記第１または第２量子化解像度が使用されるときに指標を生成するようにさらに構成される、請求項１ないし６のいずれか１項に記載の装置。
【請求項8】
第３量子化解像度に基づいて前記時間周波数ブロックのための符号化空間オーディオ信号指向性メタデータパラメータを生成するように構成された前記手段は、前記第３量子化解像度を使用して、常に、前記決定されたビット数以下である固定レート符号化に使用されるビット数に基づいて、前記空間オーディオ信号指向性メタデータパラメータの値とインデックス値との間のマッピングのための前記第３量子化解像度を決定し、前記第３量子化解像度を使用するマッピングに基づいて、前記空間オーディオ信号指向性メタデータパラメータに関連するインデックスを生成し、
固定レート符号化またはエントロピー符号化がより少ないビット数を使用するかどうかに基づいて、固定レート符号化またはエントロピー符号化を使用してインデックスを選択的に符号化するように構成される、
請求項１ないし７のいずれか１項に記載の装置。
【請求項9】
前記手段は、前記固定レート符号化またはエントロピー符号化がより少ないビット数を使用するかどうかに基づいて、固定レート符号化またはエントロピー符号化を使用して、前記選択的に符号化されたインデックスを出力するようにさらに構成される、請求項８に記載の装置。
【請求項10】
前記手段は、前記第３量子化解像度が決定されたときに指標を生成するようにさらに構成される、請求項１ないし９のいずれか１項に記載の装置。
【請求項11】
時間周波数ブロックの符号化空間オーディオ信号指向性メタデータパラメータを受信し、前記符号化空間オーディオ信号指向性メタデータパラメータが、常に決定されたビット数以下である量子化解像度に基づいて符号化されたかどうかを識別するように構成されたインジケータを受信し、
前記インジケータが、前記符号化空間オーディオ信号指向性メタデータパラメータが常に決定されたビット数以下である量子化解像度に基づいて符号化されたことを識別するとき、常に決定されたビット数以下である量子化解像度に基づいて、前記時間周波数ブロックのための前記符号化空間オーディオ信号指向性メタデータパラメータを復号し、
前記インジケータが、前記符号化空間オーディオ信号指向性メタデータパラメータが常に決められたビット数以下である量子化解像度に基づいて符号化されなかったことを識別するとき、前記手段は、さらなる量子化解像度に基づいて前記時間周波数ブロックの前記符号化空間オーディオ信号指向性メタデータパラメータの第１部分を復号し、ここで、該第１部分は、前記さらなる量子化解像度に基づいて前記時間周波数ブロックのエントロピー符号化空間オーディオ信号指向性メタデータパラメータを含むものであり、
前記決定されたビット数と前記第１部分を符号化するために使用されるビット数との間の差が前記さらなる量子化解像度に基づいて前記時間周波数ブロックのための前記符号化空間オーディオ信号指向性メタデータパラメータの第２部分を符号化するために必要とされるビット数未満である場合、低減ビット量子化解像度に基づいて前記時間周波数ブロックのための固定レート符号化空間オーディオ信号指向性メタデータパラメータを含む前記第２部分を復号し、そうでなければ、前記さらなる量子化解像度に基づいて前記時間周波数ブロックのための固定レート符号化空間オーディオ信号指向性メタデータパラメータを含む前記第２部分を復号するように構成される、
ように構成された手段を含む装置。
【請求項12】
前記手段は、前記空間オーディオ信号指向性メタデータパラメータの値と前記インデックス値との間のマッピングのために、前記さらなる量子化解像度を決定するようにさらに構成される、請求項１１に記載の装置。
【請求項13】
前記空間オーディオ信号指向性メタデータパラメータの値と前記インデックス値との間のマッピングのための前記さらなる量子化解像度を決定するように構成された前記手段は、前記空間オーディオ信号指向性メタデータパラメータに関連するエネルギー比値に基づいて、前記さらなる量子化解像度を決定するように構成される、請求項１２に記載の装置。
【請求項14】
前記手段は、前記空間オーディオ信号指向性メタデータパラメータの値と前記インデックス値との間のマッピングのために、前記低減ビット量子化解像度を決定するようにさらに構成される、請求項１１１３のいずれかに記載の装置。
【請求項15】
前記手段は、前記量子化解像度に基づいて、前記空間オーディオ信号指向性メタデータパラメータに関連するインデックスから、仰角および方位角のうちの少なくとも１つへのマッピングを生成するように構成される、請求項１１ないし１４のいずれか１項に記載の装置。
【請求項16】
時間周波数ブロックのための空間オーディオ信号指向性メタデータパラメータを生成するステップと、第１量子化解像度に基づいて時間周波数のブロックのための符号化空間オーディオ信号指向性メタデータパラメータを生成するステップと、
前記第１量子化解像度に基づく時間周波数ブロックの前記符号化空間オーディオ信号指向性パラメータに使用されるビット数と、決定されたビット数とを比較するステップと、
前記第１量子化解像度に基づく時間周波数ブロックのための前記符号化空間オーディオ信号指向性パラメータのために使用されるビット数が、決定されたビット数未満である場合、第１量子化解像度に基づく時間周波数ブロックのための符号化空間オーディオ信号指向性メタデータパラメータを出力または格納するステップと、
前記第１量子化解像度に基づいて前記時間周波数ブロックのための前記符号化空間オーディオ信号指向性パラメータに使用されるビット数が、前記決定されたビット数より多く、前記決定されたビット数と、前記第１量子化解像度に基づいて時間周波数ブロックのための前記符号化空間オーディオ信号指向性パラメータに使用されるビット数との差が、決定されたビット数未満であり、決定された閾値内であるとき、第２量子化解像度に基づいて時間周波数ブロックのための符号化空間オーディオ信号指向性メタデータパラメータを生成するステップと、
前記第１量子化解像度に基づく前記時間周波数ブロックのための前記符号化空間オーディオ信号指向性パラメータに用いられた前記ビット数が、前記決定されたビット数よりも大きく、および、前記決定されたビット数と、前記第１量子化解像度に基づく前記時間周波数ブロックのための前記符号化空間オーディオ信号指向性パラメータのために使用される前記ビット数との間の差が、前記決定された閾値よりも大きいとき、第３量子化解像度に基づいた前記時間周波数ブロックのための符号化空間オーディオ信号指向性パラメータを生成するステップであって、前記第３の量子化解像度は、前記第３量子化解像度に基づく前記時間周波数ブロックのための符号化空間オーディオ信号指向性パラメータのために使用されるビット数が、常に、前記決定されたビット数以下であるように決定される、ステップと、
を含む方法。
【請求項17】
時間周波数ブロックのための符号化空間オーディオ信号指向性メタデータパラメータを受信するステップと、前記符号化空間オーディオ信号指向性メタデータパラメータが、常に決定されたビット数以下である量子化解像度に基づいて符号化されたかどうかを識別するように構成されたインジケータを受信するステップと、
前記インジケータが、前記符号化した空間オーディオ信号指向性メタデータパラメータが常に所定のビット数以下である量子化解像度に基づいて符号化されたことを識別するときに、常に所定のビット数以下である量子化解像度に基づいて、前記時間周波数ブロックのための符号化された前記空間オーディオ信号指向性メタデータパラメータを復号するステップと、
を含む方法であって、
前記インジケータが、前記符号化空間オーディオ信号指向性メタデータパラメータが常に決定されたビット数以下である量子化解像度に基づいて符号化されなかったことを識別する場合、該方法は、さらなる量子化解像度に基づいて前記時間周波数ブロックのための前記符号化空間オーディオ信号指向性メタデータパラメータの第１部分を復号するステップであって、前記第１部分は、前記さらなる量子化解像度に基づいて前記時間周波数ブロックのためのエントロピー符号化空間オーディオ信号指向性メタデータパラメータを含む、ステップと、
前記決定されたビット数と前記第１部分を符号化するために使用されるビット数との間の差が、前記さらなる量子化解像度に基づいて時間周波数ブロックのための前記符号化空間オーディオ信号指向性メタデータパラメータの第２部分を符号化するために必要とされるビット数未満である場合、低減ビット量子化解像度に基づいて前記時間周波数ブロックのための固定レート符号化空間オーディオ信号指向性メタデータパラメータを含む前記第２部分を復号し、そうでなければ、さらなる量子化解像度に基づいて前記時間周波数ブロックのための固定レート符号化空間オーディオ信号指向性メタデータパラメータを含む前記第２部分を復号するステップと、
を含む、方法。
【発明の詳細な説明】
【技術分野】
【0001】
本出願は、音場関連パラメータ符号化のための装置および方法に関する。しかし、オーディオエンコ－ダおよびデコーダのための時間周波数領域方向関連パラメータ符号化関連に限るものではない。
【背景技術】
【0002】
パラメトリック空間オーディオ処理は、音の空間的側面が一組のパラメータを用いて記述されるオーディオ信号処理の分野である。例えば、マイクロホンアレイからのパラメトリック空間オーディオキャプチャでは、マイクロホンアレイから、周波数帯域における音の方向、および周波数帯域におけるキャプチャされた音の指向性部分と非指向性部分との間の比などの一連のパラメータを信号として推定することは典型的で有効な選択である。これらのパラメータは、マイクロフォンアレイの位置における捕捉された音の知覚空間特性をよく記述することが知られている。これらのパラメータは、それに応じて空間音の合成、バイノーラルでのヘッドホン、ラウドスピーカ、またはアンビソニックのような他のフォーマットに利用することができる。
【0003】
したがって、周波数帯域における方向と直接対全エネルギー比（ｄｉｒｅｃｔ－ｔｏ－ｔｏｔａｌ ｅｎｅｒｇｙ ｒａｔｉｏｓ）は、空間オーディオキャプチャに特に有効なパラメータ化となる。
【0004】
周波数帯域における方向パラメータと周波数帯域におけるエネルギー比パラメータ（音の指向性を示す）とからなるパラメータセットは、オーディオコーデックのための空間メタデータ（コヒーレンス、拡散コヒーレンス、方向の数、距離などの他のパラメータを含むこともできる）として利用することもできる。例えば、これらのパラメータはマイクロフォンアレイキャプチャされたオーディオ信号から推定することができ、例えば、ステレオ信号は、空間メタデータと共に搬送されるマイクロフォンアレイ信号から生成することができる。
【0005】
ステレオ信号は例えば、ＡＡＣエンコ－ダで符号化することができる。デコーダはオーディオ信号を（空間メタデータを使用して）ＰＣＭ信号に復号し、周波数帯域の音を処理して、空間出力、例えばバイノーラル出力を得ることができる。
【0006】
前述のソリューションはマイクロホンアレイ（例えば、携帯電話、ＶＲカメラ、独立型マイクロホンアレイ）から捕捉された空間音を符号化するのに特に適している。
【0007】
しかしながら、そのようなエンコ－ダには、マイクロホンアレイ捕捉信号以外の他の入力タイプ、例えば、拡声器信号、オーディオオブジェクト信号、またはアンビソニック信号を有することも望ましい場合がある。
【0008】
空間メタデータ抽出のための一次アンビソニックス（ＦＯＡ）入力の解析は、方向性オーディオ符号化（ＤｉｒＡＣ）および高調波平面波展開（Ｈａｒｐｅｘ）に関連する科学文献に完全に文書化されている。これはＦＯＡ信号（より正確にはその変形例であるＢフォーマット信号）を直接提供するマイクロホンアレイが存在するためであり、このような入力を解析することは、このように、現場での試験のポイントとなっている。
【0009】
エンコ－ダのさらなる入力は、５．１または７．１チャンネルのサラウンド入力などのマルチチャンネルラウドスピーカー入力でもある。
【0010】
しかしながら、メタデータの指向性成分に関して、これは、考慮される各時間／周波数サブバンドについて、結果として生じる方向の仰角、方位角（および１拡散性であるエネルギー比）を含み得る。これらの指向性成分の量子化は現在の研究トピックである。
【発明の概要】
【0011】
第１の態様によれば、時間周波数ブロックのための空間オーディオ信号指向性メタデータパラメータを生成し、第１の量子化解像度に基づいて時間周波数ブロックのための符号化空間オーディオ信号指向性メタデータパラメータを生成し、第１の量子化解像度に基づいて時間周波数ブロックのための符号化空間オーディオ信号指向性パラメータを、決定されたビット数と比較し、第１の量子化解像度に基づいて、時間周波数ブロックのための符号化空間オーディオ信号指向性メタデータパラメータのビット数が決定されたビット数未満である場合に、第１の量子化解像度に基づいて時間周波数ブロックのための符号化空間オーディオ信号指向性メタデータパラメータを出力または格納し、前記第１量子化解像度に基づく時間周波数ブロックのための符号化空間オーディオ信号指向性パラメータのために使用されるビット数が、決定されたビット数より多く、決定されたビット数と、第一の量子化解像度に基づいて時間周波数ブロックのための前記符号化空間オーディオ信号指向性パラメータのために使用される前記ビット数との差が、決定されたビット数未満であり、決定された閾値内であるとき第２量子化解像度に基づいて時間周波数ブロックのための符号化空間オーディオ信号指向性メタデータパラメータを生成し、第一の量子化解像度に基づいて時間周波数ブロックのための符号化空間オーディオ信号指向性パラメータのために使用されるビット数が、決定されたビット数より多く、前記決定されたビット数と第一の量子化解像度に基づいて時間周波数ブロックのための前記符号化空間オーディオ信号指向性パラメータのために使用される前記ビット数との間の差が、前記決定された閾値よりも大きいときに、第３量子化解像度に基づいた時間周波数ブロックのための符号化空間オーディオ信号指向性メタデータパラメータを生成するように構成された手段を備える装置が提供される。ここで、前記第３の量子化解像度は、前記第３量子化解像度に基づく前記時間周波数ブロックのための前記符号化空間オーディオ信号指向性パラメータに使用されるビット数と、常に、前記決定されたビット数以下であるように決定される。
【0012】
第１の量子化解像度に基づいて、時間周波数ブロックのための符号化空間オーディオ信号指向性メタデータパラメータを生成するように構成された前記手段は、空間オーディオ信号指向性メタデータパラメータの値とインデックス値との間のマッピングのための前記第１量子化解像度を決定し、第１の量子化解像度を使用するマッピングに基づいて、前記空間オーディオ信号指向性メタデータパラメータに関連するインデックスを生成し、前記固定レート符号化またはエントロピー符号化がより少ないビット数を使用するかどうかに基づいて、固定レート符号化またはエントロピー符号化を使用してインデックスを選択的に符号化するように構成されることができる。
【0013】
前記空間オーディオ信号指向性メタデータパラメータの前記値とインデックス値との間のマッピングのための前記第１量子化解像度を決定するように構成された前記手段は、前記空間オーディオ信号指向性メタデータパラメータに関連するエネルギー比値に基づいて、前記空間オーディオ信号指向性メタデータパラメータの前記値とインデックス値との間のマッピングのための前記第１量子化解像度を決定するように構成することができる。
【0014】
前記決定されたビット数と第一の量子化解像度に基づいて時間周波数ブロックのための前記符号化空間オーディオ信号指向性パラメータのために使用される前記ビット数との間の差が、決定閾値内にあるとき、第２量子化解像度に基づいて時間周波数ブロックのための符号化空間オーディオ信号指向性メタデータパラメータを生成するように構成された前記手段は、空間オーディオ信号指向性メタデータパラメータの値とインデックス値との間のマッピングのための第２の量子化解像度を決定し、前記第１の量子化解像度を使用して固定レート符号化された空間オーディオ信号指向性メタデータパラメータのための前記第２量子化解像度を使用する前記マッピングに基づく前記空間オーディオ信号指向性メタデータパラメータに関連するインデックスを生成するように構成されることができる。
【0015】
この手段は、さらに、空間オーディオ信号指向性メタデータパラメータのための前記第１量子化解像度を使用するマッピングに基づく前記空間オーディオ信号指向性メタデータパラメータに関連する前記エントロピー符号化インデックスと、空間オーディオ信号指向性メタデータパラメータのための前記第２量子化解像度を使用する前記マッピングに基づく前記空間オーディオ信号指向性メタデータパラメータに関連する固定レート符号化インデックスと、を出力または格納するように構成することができる。
【0016】
この手段は、エントロピー符号化インデックスが固定レート符号化インデックスに先行するように、符号化インデックスを順序付けるようにさらに構成され得る。
【0017】
この手段は、第１または第２の量子化解像度が使用されるときに指標を生成するようにさらに構成され得る。
【0018】
第３の量子化解像度に基づいて時間周波数ブロックの符号化空間オーディオ信号指向性メタデータパラメータを生成するように構成された手段は前記空間オーディオ信号指向性メタデータパラメータの前記値と常に、前記決定されたビット数以下である第３の量子化解像度を使用する固定レート符号化に使用されるビット数に基づくインデックス値とインデックス値との間のマッピングのための第３の量子化解像度を決定し、第３の量子化解像度を使用するマッピングに基づいて空間オーディオ信号指向性メタデータパラメータに関連するインデックスを生成し、固定レート符号化またはエントロピー符号化がより少ないビット数を使用するかどうかに基づいて固定レート符号化またはエントロピー符号化を使用してインデックスを選択的に符号化するように構成され得る。
【0019】
この手段は、固定レート符号化またはエントロピー符号化がより少ないビット数を使用するかどうかに基づいて、固定レート符号化またはエントロピー符号化を使用して選択的に符号化されたインデックスを出力するようにさらに構成され得る。
【0020】
この手段は、第３の量子化解像度が決定されたときに指標を生成するようにさらに構成され得る。
【0021】
第２の態様によれば、時間周波数ブロックのための符号化空間オーディオ信号指向性メタデータパラメータを受信し、前記符号化空間オーディオ信号指向性メタデータパラメータが、常に所定のビット数以下である量子化解像度に基づいて符号化されたかどうかを識別するように構成されたインジケータを受信し、前記インジケータが、前記符号化した空間オーディオ信号指向性メタデータパラメータが常に所定のビット数以下である量子化解像度に基づいて符号化されたことを識別する場合、および、前記インジケータが、前記符号化した空間オーディオ信号指向性メタデータパラメータが常に決定されたビット数以下である量子化解像度に基づいて符号化されなかったことを識別する場合、前記手段は、さらなる量子化解像度に基づいて前記時間周波数ブロックのための前記符号化空間オーディオ信号指向性メタデータパラメータの第１部分を復号し、前記第１部分は、前記さらなる量子化解像度に基づいて前記時間周波数ブロックのためのエントロピー符号化空間オーディオ信号指向性メタデータパラメータを含むように構成される、常に所定のビット数以下である量子化解像度に基づいて、時間周波数ブロックのための前記符号化空間オーディオ信号指向性メタデータパラメータを復号し、前記決定されたビット数と前記第１部分を符号化するために使用されるビット数との間の差が、前記さらなる量子化解像度に基づいて前記時間周波数ブロックのための前記符号化空間オーディオ信号指向性メタデータパラメータの第２部分を符号化するために必要とされるビット数未満であるとき、低減ビット（ｒｅｄｕｃｅｄ ｂｉｔ）量子化解像度に基づいて前記時間周波数ブロックのための固定レート符号化空間オーディオ信号指向性メタデータパラメータを含む前記第２部分を復号し、そうでなければ、さらなる量子化解像度に基づいて前記時間周波数ブロックのための固定レート符号化空間オーディオ信号指向性メタデータパラメータを含む前記第２部分を復号するように構成された手段を備える装置が提供される。
【0022】
この手段は、空間オーディオ信号指向性メタデータパラメータの値とインデックス値との間のマッピングのためのさらなる量子化解像度を決定するようにさらに構成されることができる。
【0023】
空間オーディオ信号指向性メタデータパラメータの値とインデックス値との間のマッピングのためのさらなる量子化解像度を決定するように構成された手段は、空間オーディオ信号指向性メタデータパラメータに関連するエネルギー比値に基づいてさらなる量子化解像度を決定するように構成されることができる。
【0024】
この手段は、空間オーディオ信号指向性メタデータパラメータの値とインデックス値との間のマッピングのために、低減ビット量子化解像度を決定するようにさらに構成されることができる。
【0025】
この手段は、量子化解像度に基づいて、空間オーディオ信号指向性メタデータパラメータに関連するインデックスから、仰角および方位角のうちの少なくとも１つへのマッピングを生成するように構成されることができる。
【0026】
第３の態様によれば、時間周波数ブロックのための空間オーディオ信号指向性メタデータパラメータを生成するステップと、第１の量子化解像度に基づいて、時間周波数ブロックのための符号化空間オーディオ信号指向性メタデータパラメータを生成するステップと、決定されたビット数に対して前記第１量子化解像度に基づく時間周波数ブロックのための前記符号化空間オーディオ信号指向性パラメータに使用されるビット数を、比較するステップと、第１の量子化解像度に基づいて、時間周波数ブロックのための符号化空間オーディオ信号指向性メタデータパラメータを出力または格納するステップと、前記第１量子化解像度に基づく時間周波数ブロックのための符号化空間オーディオ信号指向性パラメータのために使用されるビット数が、決定されたビット数未満であるとき、前記第１量子化解像度に基づく時間周波数ブロックのための符号化空間オーディオ信号指向性パラメータのために使用されるビット数が、決定されたビット数より多く、決定されたビット数と、前記第１量子化解像度に基づく時間周波数ブロックのための前記符号化空間オーディオ信号指向性パラメータのために使用される前記ビット数との差が、決定されたビット数未満であり、決定された閾値内である第２量子化解像度に基づいて時間周波数ブロックのための符号化空間オーディオ信号指向性メタデータパラメータを生成するステップと、第一の量子化解像度に基づいて時間周波数ブロックのための符号化空間オーディオ信号指向性パラメータのために使用されるビット数が、決定されたビット数より多く、前記決定されたビット数と第一の量子化解像度に基づいて時間周波数ブロックのための前記符号化空間オーディオ信号指向性パラメータのために使用される前記ビット数との間の差が、前記決定された閾値よりも大きいときに、第３量子化解像度に基づいた時間周波数ブロックのための符号化空間オーディオ信号指向性メタデータパラメータを生成するステップであって、前記第３の量子化解像度は、前記第３量子化解像度に基づく前記時間周波数ブロックのための前記符号化空間オーディオ信号指向性パラメータに使用されるビット数が、常に、前記決定されたビット数以下であるように決定される、ステップと、を含む方法が提供される。
【0027】
第１の量子化解像度に基づいて時間周波数ブロックについて符号化空間オーディオ信号指向性メタデータパラメータを生成することは、空間オーディオ信号指向性メタデータパラメータの値とインデックス値との間のマッピングのための第１の量子化解像度を決定することと、第１の量子化解像度を使用するマッピングに基づいて空間オーディオ信号指向性メタデータパラメータに関連するインデックスを生成することと、固定レートまたはエントロピー符号化がより少ないビット数を使用するかどうかに基づいて固定レートまたはエントロピー符号化を使用してインデックスを選択的に符号化することとを備えることができる。
【0028】
空間オーディオ信号指向性メタデータパラメータの値とインデックス値との間のマッピングのための第１の量子化解像度を決定することは、空間オーディオ信号指向性メタデータパラメータの値と、空間オーディオ信号指向性メタデータパラメータに関連するエネルギー比値に基づくインデックス値との間のマッピングのための第１の量子化解像度を決定することを含むことができる。
【0029】
第２量子化解像度に基づいて時間周波数ブロックのための符号化空間オーディオ信号指向性メタデータパラメータを生成するステップは、決定されたビット数と、第一の量子化解像度に基づいて時間周波数ブロックのための前記符号化空間オーディオ信号指向性パラメータに使用されるビット数と、の差が、決定された閾値内にあるとき、空間オーディオ信号指向性メタデータパラメータの値とインデックス値との間のマッピングのための第２の量子化解像度を決定するステップと、前記第１の量子化解像度を使用して固定レート符号化された空間オーディオ信号指向性メタデータパラメータのための前記第２量子化解像度を使用する前記マッピングに基づく前記空間オーディオ信号指向性メタデータパラメータに関連するインデックスを生成するステップと、を含むことができる。
【0030】
本方法は、空間オーディオ信号指向性メタデータパラメータのための第１の量子化解像度を使用するマッピングに基づいて、空間オーディオ信号指向性メタデータパラメータに関連付けられたエントロピー符号化インデックスと、空間オーディオ信号指向性メタデータパラメータのための第２の量子化解像度を使用するマッピングに基づいて、空間オーディオ信号指向性メタデータパラメータに関連付けられた固定レート符号化インデックスとを出力または格納するステップをさらに含むことができる。
【0031】
本方法はエントロピー符号化インデックスが固定レート符号化インデックスに先行するように、符号化インデックスを順序付けるステップ、をさらに含むことができる。
【0032】
本方法は第１または第２の量子化解像度が使用される場合に、インジケータを生成することをさらに含むことができる。
【0033】
第３の量子化解像度に基づいて時間周波数ブロックのための符号化空間オーディオ信号指向性メタデータパラメータを生成することは、前記空間オーディオ信号指向性メタデータパラメータの前記値とインデックス値との間のマッピングのための第３の量子化解像度を決定することと、常に、前記決定されたビット数以下である前記第３量子化解像度を使用して固定レート符号化に使用されるビット数に基づいて、を備えることができる。第３の量子化解像度を使用するマッピングに基づいて空間オーディオ信号指向性メタデータパラメータに関連するインデックスを生成することと、固定レート符号化またはエントロピー符号化がより少ないビット数を使用するかどうかに基づいて固定レート符号化またはエントロピー符号化を使用してインデックスを選択的に符号化することとを含むことができる。
【0034】
この方法は、固定レート符号化またはエントロピー符号化がより少ないビット数を使用するかどうかに基づいて、固定レート符号化またはエントロピー符号化を使用して選択的に符号化されたインデックスを出力することをさらに含むことができる。
【0035】
本方法は第３の量子化解像度が決定されたときに、インジケータを生成することをさらに含むことができる。
【0036】
第４の態様によれば、時間周波数ブロックのための符号化空間オーディオ信号指向性メタデータパラメータを受信するステップと、前記符号化空間オーディオ信号指向性メタデータパラメータが、常に所定のビット数以下である量子化解像度に基づいて符号化されたかどうかを識別するように構成されたインジケータを受信するステップと、前記インジケータが、前記符号化た空間オーディオ信号指向性メタデータパラメータが常に所定のビット数以下である量子化解像度に基づいて符号化されたことを識別する場合、常に所定のビット数以下である量子化解像度に基づいて、時間周波数ブロックのための前記空間オーディオ信号指向性メタデータパラメータを復号するステップと、を含む、方法が提供され、前記インジケータが、前記符号化た空間オーディオ信号指向性メタデータパラメータが常に決定されたビット数以下である量子化解像度に基づいて符号化されなかったことを識別する場合、前記方法は、さらなる量子化解像度に基づいて前記時間周波数ブロックのための前記符号化空間オーディオ信号指向性メタデータパラメータの第１部分を復号するステップであって、前記第１部分は、前記さらなる量子化解像度に基づいて前記時間周波数ブロックのためのエントロピー符号化空間オーディオ信号指向性メタデータパラメータを含む、ステップと、前記決定されたビット数と前記第１の部分を符号化するために使用されたビット数との差が、前記さらなる量子化解像度に基づいて前記時間周波数ブロックに対する符号化空間オーディオ信号指向性メタデータパラメータの第２の部分を符号化するために必要なビット数より小さい場合に、低減ビット量子化解像度に基づいて時間周波数ブロックに対する固定レート符号化空間オーディオ信号指向性メタデータパラメータを含む第２の部分復号し、そうでなければ、さらなる量子化解像度に基づいて時間周波数ブロックに対する固定レート符号化空間オーディオ信号指向性メタデータパラメータを含む第２の部分を復号するステップを含む。
【0037】
本方法は、空間オーディオ信号指向性メタデータパラメータの値とインデックス値との間のマッピングのためのさらなる量子化解像度を決定するステップをさらに含むことができる。
【0038】
空間オーディオ信号指向性メタデータパラメータの値とインデックス値との間のマッピングのためのさらなる量子化解像度を決定することは、空間オーディオ信号指向性メタデータパラメータに関連するエネルギー比値に基づいてさらなる量子化解像度を決定することを含むことができる。
【0039】
この方法は、空間オーディオ信号指向性メタデータパラメータの値とインデックス値との間のマッピングのために、低減ビット量子化解像度を決定することを含むことができる。
【0040】
この方法は、空間オーディオ信号指向性メタデータパラメータに関連するインデックスから、量子化解像度に基づいて仰角および方位角値のうちの少なくとも１つへのマッピングを生成することを含むことができる。
【0041】
第５の態様によれば、少なくとも１つのプロセッサと、コンピュータプログラムコードを含む少なくとも１つのメモリとを備える装置であって、少なくとも１つのメモリおよびコンピュータプログラムコードは、少なくとも１つのプロセッサによって、装置に少なくとも、時間周波数ブロックに対して、空間オーディオ信号指向性メタデータパラメータを生成させ、第１の量子化解像度に基づいて、時間周波数ブロックのための符号化空間オーディオ信号指向性メタデータパラメータを生成させ、前記第１の量子化解像度に基づく時間周波数ブロックのための符号化空間オーディオ信号指向性パラメータに使用されるビット数を、決定されたビット数と比較させ、前記第１の量子化解像度に基づく時間周波数ブロックに対する符号化空間オーディオ信号指向性メタデータパラメータに使用されるビット数が、決定されたビット数未満である場合に、前記第１の量子化解像度に基づく時間周波数ブロックに対する符号化空間オーディオ信号指向性メタデータパラメータを出力または保存させ、第１の量子化解像度に基づく時間周波数ブロックに対する符号化空間オーディオ信号指向性パラメータに使用されるビット数が決定されたビット数以上であり、決定されたビット数と第１の量子化解像度に基づく時間周波数ブロックに対する符号化空間オーディオ信号指向性パラメータに使用されるビット数との差が、決定されたビット数未満であり、決定された閾値内である場合に、第２の量子化解像度に基づいて、時間周波数ブロックに対する符号化空間オーディオ信号指向性メタデータパラメータを生成させ、前記第１の量子化解像度に基づく前記時間周波数ブロックの前記符号化空間オーディオ信号指向性パラメータに使用されるビット数が決定されたビット数より多く、前記決定されたビット数と、前記第１の量子化解像度に基づく前記時間周波数ブロックの前記符号化空間オーディオ信号指向性パラメータに使用されるビット数との差が決定された閾値より大きい場合、前記第３の量子化解像度に基づく前記時間周波数ブロックの符号化空間オーディオ信号指向性メタデータパラメータを生成させるように構成される装置が提供される。ここで、前記第３の量子化解像度に基づく前記時間周波数ブロックの符号化された前記空間オーディオ信号指向性パラメータに使用されるビット数が、常に前記決定されたビット数以下となるように、前記第３の量子化解像度が決定される。
【0042】
第１の量子化解像度に基づいて時間周波数ブロックについて符号化空間オーディオ信号指向性メタデータパラメータを生成するようにされた装置は、空間オーディオ信号指向性メタデータパラメータの値とインデックス値との間のマッピングのための第１の量子化解像度を決定することと、第１の量子化解像度を使用するマッピングに基づいて空間オーディオ信号指向性メタデータパラメータに関連するインデックスを生成することと、固定レートまたはエントロピー符号化がより少ないビット数を使用するかどうかに基づいて固定レートまたはエントロピー符号化を使用してインデックスを選択的に符号化することと、を行わせることができる。
【0043】
空間オーディオ信号指向性メタデータパラメータの値とインデックス値との間のマッピングのための第１の量子化解像度を決定するようにされた装置は、空間オーディオ信号指向性メタデータパラメータの値と、空間オーディオ信号指向性メタデータパラメータに関連するエネルギー比値に基づくインデックス値との間のマッピングのための第１の量子化解像度を決定するようにされることができる。
【0044】
前記決定されたビット数と、第１の量子化解像度に基づく時間周波数ブロックのための符号化空間オーディオ信号指向性メタデータパラメータのビット数との間の差が決定された閾値内にあるときに、第２の量子化解像度に基づいて、時間周波数ブロックのための符号化空間オーディオ信号指向性メタデータパラメータを生成することを引き起こされた装置は、空間オーディオ信号指向性メタデータパラメータの値とインデックス値との間のマッピングのための第２の量子化解像度を決定することと、第１の量子化解像度を使用して固定レート符号化空間オーディオ信号指向性メタデータパラメータのための第２の量子化解像度を使用するマッピングに基づいて、空間オーディオ信号指向性メタデータパラメータに関連するインデックスを生成することと、を行うことができる。
【0045】
この装置は、空間オーディオ信号指向性メタデータパラメータのための第１の量子化解像度を使用するマッピングに基づいて、空間オーディオ信号指向性メタデータパラメータに関連するエントロピー符号化インデックスと、空間オーディオ信号指向性メタデータパラメータのための第２の量子化解像度を使用するマッピングに基づいて、空間オーディオ信号指向性メタデータパラメータに関連する固定レート符号化インデックスとを出力または格納させることができる。
【0046】
この装置はエントロピー符号化されたインデックスが固定レート符号化されたインデックスに先行するように、符号化されたインデックスを順序付けるようにされることができる。
【0047】
この装置は、第１または第２の量子化解像度が使用されるときに、インジケータを生成するようにされることができる。
【0048】
第３の量子化解像度に基づいて時間周波数ブロックのための符号化空間オーディオ信号指向性メタデータパラメータを生成する装置は、空間オーディオ信号指向性メタデータパラメータの値と、第３の量子化解像度を使用する固定レート符号化に使用されるビット数に基づくインデックス値との間のマッピングのための第３の量子化解像度を決定し、第３の量子化解像度を使用するマッピングに基づいて空間オーディオ信号指向性メタデータパラメータに関連するインデックスを生成し、固定レート符号化またはエントロピー符号化がより少ないビット数を使用するかどうかに基づいて固定レート符号化またはエントロピー符号化を使用してインデックスを選択的に符号化することができる。
【0049】
この装置は、固定レート符号化またはエントロピー符号化がより少ないビット数を使用するかどうかに基づいて、固定レート符号化またはエントロピー符号化を使用して選択的に符号化されたインデックスを出力するようにすることができる。
【0050】
装置は、第３の量子化解像度が決定されたときにインジケータを生成するようにされることができる。
【0051】
第６の態様によれば、少なくとも１つのプロセッサと、コンピュータプログラムコードを含む少なくとも１つのメモリとを備える装置であって、少なくとも１つのメモリとコンピュータプログラムコードとは、少なくとも１つのプロセッサにより、装置に少なくとも、時間周波数ブロックに対して符号化空間オーディオ信号指向性メタデータパラメータを受信するステップと前記符号化空間オーディオ信号指向性メタデータパラメータが、常に決定されたビット数以下の量子化解像度に基づいて符号化されたかどうかを識別するように構成された指標を受信するステップと前記符号化空間オーディオ信号指向性メタデータパラメータが、常に決められたビット数以下である量子化解像度に基づいて符号化されたことが前記指標によって識別されるとき、前記時間周波数ブロックのための符号化空間オーディオ信号の方向性メタデータパラメータを復号化するステップと、を行わせるように構成される装置が提供され、前記指標により、符号化された前記空間オーディオ信号指向性メタデータパラメータが、常に決められたビット数以下である量子化解像度に基づいて符号化されていないことが特定されたとき、前記装置に、さらなる量子化解像度に基づいて、時間周波数ブロックに対する符号化空間オーディオ信号指向性メタデータパラメータの第１の部分を復号化させ、ここで、第１の部分は、さらなる量子化解像度に基づいて、時間周波数ブロックに対するエントロピー符号化空間オーディオ信号指向性メタデータパラメータを含んでおり、決定されたビット数と第１の部分を符号化するために使用されたビット数との間の差が、さらなる量子化解像度に基づいて時間周波数ブロックのための符号化空間オーディオ信号指向性メタデータパラメータの第２の部分を符号化するために必要なビット数より小さいとき、低減ビット量子化解像度に基づいて前記時間周波数ブロックに対する固定レート符号化空間オーディオ信号指向性メタデータパラメータを含む前記第２の部分を復号させ、そうでなければ、前記さらなる量子化解像度に基づいて前記時間周波数ブロックに対する固定レート符号化空間オーディオ信号指向性メタデータパラメータを含む前記第２の部分を復号させる。
【0052】
この装置は、さらに、空間オーディオ信号指向性メタデータパラメータの値とインデックス値との間のマッピングのためのさらなる量子化解像度を決定するようにされることができる。
【0053】
空間オーディオ信号指向性メタデータパラメータの値とインデックス値との間のマッピングのためのさらなる量子化解像度を決定させる装置は、空間オーディオ信号指向性メタデータパラメータに関連するエネルギー比値に基づいてさらなる量子化解像度を決定するようにされることができる。
【0054】
この装置は、空間オーディオ信号指向性メタデータパラメータの値とインデックス値との間のマッピングのために、低減ビット量子化解像度を決定するようにさらにされることができる。
【0055】
この装置はさらに、空間オーディオ信号指向性メタデータパラメータに関連するインデックスから、量子化解像度に基づいて仰角および方位角値のうちの少なくとも１つへのマッピングを生成するようにされることができる。
【0056】
第７の態様によれば、時間周波数ブロックのための空間オーディオ信号指向性メタデータパラメータを生成するように構成された生成回路と、第１の量子化解像度に基づいて、時間周波数ブロックのための符号化空間オーディオ信号指向性メタデータパラメータを生成するように構成された生成回路と、前記第１の量子化解像度に基づく前記時間周波数ブロックの符号化空間オーディオ信号指向性パラメータに使用されるビット数を決定されたビット数に対して比較するように構成された比較回路と、前記第１の量子化解像度に基づく前記時間周波数ブロックに対する前記符号化空間オーディオ信号指向性メタデータパラメータに使用されるビット数が、決定されたビット数よりも少ない場合に、前記第１の量子化解像度に基づく前記時間周波数ブロックに対する前記符号化空間オーディオ信号指向性メタデータパラメータを出力または格納するように構成される出力または格納回路と、前記第１の量子化解像度に基づく前記空間オーディオ信号指向性パラメータに使用されるビット数が、前記決定されたビット数以上であり、前記決定されたビット数と、前記第１の量子化解像度に基づく前記時間周波数ブロックに対する前記符号化空間オーディオ信号指向性パラメータに使用されるビット数との差が、前記決定されたビット数未満であり、決定された閾値内である場合に、第２の量子化解像度に基づいて時間周波数ブロックのための符号化空間オーディオ信号指向性メタデータパラメータを生成するように構成された生成回路と、前記第１の量子化解像度に基づく前記時間周波数ブロックに対する前記符号化空間オーディオ信号指向性パラメータに使用されるビット数が決定されたビット数以上であり、前記第１の量子化解像度に基づく前記時間周波数ブロックに対する前記符号化空間オーディオ信号指向性パラメータに使用されるビット数との差が決定された閾値より大きい場合に、前記第３の量子化解像度に基づいて前記時間周波数ブロックに対する符号化空間オーディオ信号指向性メタデータパラメータを生成するよう構成される生成回路であって、前記第３の量子化解像度に基づく前記時間周波数ブロックの符号化された前記空間オーディオ信号指向性パラメータに使用されるビット数が、常に前記決定されたビット数以下となるように、前記第３の量子化解像度が決定される、生成回路と、を備える装置が提供される。
【0057】
第８の態様によれば、時間周波数ブロックに対する符号化空間オーディオ信号指向性メタデータパラメータを受信するように構成された受信回路と、符号化空間オーディオ信号指向性メタデータパラメータが、常に決定されたビット数と等しいかまたはそれより小さい量子化解像度に基づいて符号化されたかどうかを識別するように構成された指標を受信するように構成された受信回路と、前記符号化空間オーディオ信号指向性メタデータパラメータが、常に決定されたビット数以下である量子化解像度に基づいて符号化されたことを前記指標が識別するとき、常に決定されたビット数以下である量子化解像度に基づいて前記時間周波数ブロックに対する符号化空間オーディオ信号指向性メタデータパラメータを復号するように構成される復号回路と、を備える装置が提供され、前記指標により、符号化された前記空間オーディオ信号指向性メタデータパラメータが、常に決められたビット数以下である量子化解像度に基づいて符号化されていないことが特定された場合、本装置は、さらなる量子化解像度に基づいて時間周波数ブロックに対する符号化空間オーディオ信号指向性メタデータパラメータの第１の部分を復号するように構成された復号回路であって、前記第１の部分は、前記さらなる量子化解像度に基づいて時間周波数ブロックに対するエントロピー符号化空間オーディオ信号指向性メタデータパラメータを含む復号回路と、決定されたビット数と第１の部分を符号化するために使用されたビット数との間の差が、さらなる量子化解像度に基づいて時間周波数ブロックに対する符号化空間オーディオ信号指向性メタデータパラメータの第２の部分を符号化するために必要なビット数より小さいとき、前記第２の部分が、低減ビット量子化解像度に基づいて前記時間周波数ブロックに対する固定レート符号化空間オーディオ信号指向性メタデータパラメータを構成する、そうでなければ、前記さらなる量子化解像度に基づいて前記時間周波数ブロックに対する固定レート符号化空間オーディオ信号指向性メタデータパラメータを構成する第２の部分を復号化するように構成された復号回路と、復号するように構成された復号回路と、を備える。
【0058】
第９の態様によれば、装置に、少なくとも、時間周波数ブロックに対する空間オーディオ信号指向性メタデータパラメータを生成するステップと、第１の量子化解像度に基づいて、時間周波数ブロックのための符号化空間オーディオ信号指向性メタデータパラメータを生成するステップと、第１の量子化解像度に基づいて時間周波数ブロックのための符号化空間オーディオ信号指向性パラメータに使用されるビット数を、決定されたビット数に対して比較するステップと第１の量子化解像度に基づく時間周波数ブロックのための符号化空間オーディオ信号指向性パラメータに使用されるビット数が決定されたビット数より小さいとき、第１の量子化解像度に基づく時間周波数ブロックのための符号化空間オーディオ信号指向性メタデータパラメータを出力または格納するステップと前記第１の量子化解像度に基づく前記時間周波数のブロックの符号化された空間オーディオ信号指向性パラメータに使用されるビット数が、決定されたビット数より多く、前記決定されたビット数と前記第１の量子化解像度に基づく前記時間周波数のブロックの符号化された空間オーディオ信号指向性パラメータに使用されるビット数との差が、決定されたビット数未満であり、決定された閾値以内である場合に前記第２の量子化解像度に基づいて、前記時間周波数のブロックの符号化された空間オーディオ信号指向性メタデータパラメータを生成するステップと、第１の量子化解像度に基づく時間周波数ブロックに対する符号化空間オーディオ信号指向性パラメータに使用されるビット数が決定されたビット数より多く、決定されたビット数と、第１の量子化解像度に基づく時間周波数ブロックに対する符号化空間オーディオ信号指向性パラメータに使用されるビット数との差が決定された閾値より大きいときに第３の量子化解像度に基づく時間周波数ブロックに対する符号化空間オーディオ信号指向性メタデータパラメータを生成するステップであって、前記第３の量子化解像度が決定される、ステップと、前記第３の量子化解像度に基づく時間周波数ブロックに対する符号化空間オーディオ信号指向性パラメータに使用されるビット数が、常に前記決定されたビット数と等しいかそれ以下であるように、を実行させるための命令［またはプログラム命令を含むコンピュータ可読媒体］を含むコンピュータプログラムが提供される。
【0059】
第１０の態様によれば、装置に少なくとも、時間周波数ブロックに対して符号化空間オーディオ信号指向性メタデータパラメータを受信するステップと、前記符号化空間オーディオ信号指向性メタデータパラメータが、常に決定されたビット数以下の量子化解像度に基づいて符号化されたかどうかを識別するように構成されたインジケータを受信するステップと、前記符号化空間オーディオ信号指向性メタデータパラメータが、常に決定されたビット数以下である量子化解像度に基づいて符号化されたことが前記指標によって識別される場合、常に決定されたビット数以下の量子化解像度に基づいて前記時間周波数ブロックのための符号化空間オーディオ信号指向性メタデータパラメータを復号化するステップと、前記インジケータが、前記符号化空間オーディオ信号指向性メタデータパラメータが、常に決定されたビット数以下である量子化解像度に基づいて符号化されなかったことを識別したとき、さらなる量子化解像度に基づいて、時間周波数ブロックに対する符号化空間オーディオ信号指向性メタデータパラメータの第１の部分を復号化し、第１の部分は、さらなる量子化解像度に基づいて、時間周波数ブロックに対するエントロピー符号化空間オーディオ信号指向性メタデータパラメータを含む、ステップと、決定されたビット数と第１の部分を符号化するために使用されたビット数との差が、さらなる量子化解像度に基づいて時間周波数ブロックに対する符号化空間オーディオ信号指向性メタデータパラメータの第２の部分を符号化するために必要なビット数より小さいとき、低減ビット量子化解像度に基づいて前記時間周波数ブロックに対する固定レート符号化空間オーディオ信号指向性メタデータパラメータを含む前記第２の部分を復号化する、そうでなければ、前記さらなる量子化解像度に基づいて前記時間周波数ブロックに対する固定レート符号化空間オーディオ信号指向性メタデータパラメータを含む前記第２の部分を復号化するステップと、を実行するステップと、を実行させるための命令［またはプログラム命令を含むコンピュータ可読媒体］を含むコンピュータプログラムが提供される。
【0060】
第１１の態様によれば、装置に少なくとも、時間周波数ブロックに対する空間オーディオ信号指向性メタデータパラメータを生成するステップと、第１の量子化解像度に基づいて、時間周波数ブロックのための符号化空間オーディオ信号指向性メタデータパラメータを生成するステップと、前記第１の量子化解像度に基づく前記時間周波数ブロックの符号化空間オーディオ信号指向性パラメータに使用されるビット数を、決定されたビット数に対して比較するステップと、前記第１の量子化解像度に基づく時間周波数ブロックに対する符号化空間オーディオ信号指向性メタデータパラメータに使用されるビット数が、決定されたビット数より少ない場合に、前記第１の量子化解像度に基づく時間周波数ブロックに対する符号化空間オーディオ信号指向性メタデータパラメータを出力または格納するステップと、前記第１の量子化解像度に基づく前記時間周波数のブロックの符号化された空間オーディオ信号指向性パラメータに使用されるビット数が、決定されたビット数より多く、前記決定されたビット数と、前記第１の量子化解像度に基づく前記時間周波数のブロックの符号化された空間オーディオ信号指向性パラメータに使用されるビット数との差が、決定されたビット数未満であり、決定された閾値以内である場合に前記第２の量子化解像度に基づいて、前記時間周波数のブロックの符号化空間オーディオ信号指向性メタデータパラメータを生成するステップと、前記第１の量子化解像度に基づく前記時間周波数ブロックに対する前記符号化空間オーディオ信号指向性パラメータに使用されるビット数が決定されたビット数以上であり、前記第１の量子化解像度に基づく前記時間周波数ブロックに対する前記符号化空間オーディオ信号指向性パラメータに使用されるビット数との差が決定された閾値より大きい場合に、前記第３の量子化解像度に基づいて前記時間周波数ブロックに対する符号化空間オーディオ信号指向性メタデータパラメータを生成するステップであって、前記第３の量子化解像度に基づく前記時間周波数ブロックの符号化された前記空間オーディオ信号指向性パラメータに使用されるビット数が、常に前記決定されたビット数以下となるように、前記第３の量子化解像度が決定される、ステップと、を実行させるためのプログラム命令を含む非一時的なコンピュータ可読媒体が提供される。
【0061】
第１２の態様によれば、装置に少なくとも、時間周波数ブロックに対する符号化空間オーディオ信号指向性メタデータパラメータを受信するステップと、前記符号化空間オーディオ信号指向性メタデータパラメータが、常に決定されたビット数以下である量子化解像度に基づいて符号化されたかどうかを識別するように構成された指標を受信するステップと、前記符号化空間オーディオ信号指向性メタデータパラメータが、常に決定されたビット数以下である量子化解像度に基づいて符号化されたことが前記指標によって識別される場合、常に決定されたビット数以下である量子化解像度に基づいて前記時間周波数ブロックのための符号化空間オーディオ信号指向性メタデータパラメータを復号化するステップと、前記指標により、符号化された前記空間オーディオ信号指向性メタデータパラメータが、常に決められたビット数以下である量子化解像度に基づいて符号化されていないことが特定された場合に、さらなる量子化解像度に基づいて、時間周波数ブロックに対する符号化空間オーディオ信号指向性メタデータパラメータの第１の部分を復号化するステップであって、第１の部分は、さらなる量子化解像度に基づいて、時間周波数ブロックに対するエントロピー符号化空間オーディオ信号指向性メタデータパラメータを含む、ステップと、決定されたビット数と第１の部分を符号化するために使用されたビット数との差が、さらなる量子化解像度に基づいて時間周波数ブロックに対する符号化空間オーディオ信号指向性メタデータパラメータの第２の部分を符号化するために必要なビット数より小さいとき、低減ビット量子化解像度に基づいて前記時間周波数ブロックに対する固定レート符号化空間オーディオ信号指向性メタデータパラメータを含む前記第２の部分を復号化し、そうでなければ、前記さらなる量子化解像度に基づいて前記時間周波数ブロックに対する固定レート符号化空間オーディオ信号指向性メタデータパラメータを含む前記第２の部分を復号化するステップと、を実行するステップと、を実行させるためのプログラム命令を含む非一時的なコンピュータ可読媒体が提供される。
【0062】
第１３の態様によれば、時間周波数ブロックに対する空間オーディオ信号指向性メタデータパラメータを生成するための手段と、第１の量子化解像度に基づいて、時間周波数ブロックのための符号化空間オーディオ信号指向性メタデータパラメータを生成する手段と、第１の量子化解像度に基づいて、決定されたビット数に対して、前記時間周波数ブロックのための符号化空間オーディオ信号指向性パラメータに使用されるビット数を比較する手段と、前記第１の量子化解像度に基づく時間周波数ブロックに対する符号化空間オーディオ信号指向性メタデータパラメータに使用されるビット数が、決定されたビット数より少ない場合に、前記第１の量子化解像度に基づく時間周波数ブロックに対する符号化空間オーディオ信号指向性メタデータパラメータを出力または格納する手段と、第２の量子化解像度に基づいて、時間周波数のブロックに対する符号化された空間オーディオ信号指向性メタデータパラメータを生成する手段と、第１の量子化解像度に基づく時間周波数のブロックに対する符号化された空間オーディオ信号指向性パラメータに用いられたビット数が決定されたビット数以上であり、決定されたビット数と、第１の量子化解像度に基づく時間周波数のブロックに対する決定されたビット数未満であり、決定された閾値以内である符号化された空間オーディオ信号指向性パラメータに用いられたビット数との間の差が前記第１の量子化解像度に基づく前記時間周波数ブロックの前記符号化空間オーディオ信号指向性パラメータに使用されるビット数が、決定されたビット数以上であり、前記決定されたビット数と、前記第１の量子化解像度に基づく前記時間周波数ブロックの前記符号化空間オーディオ信号指向性パラメータに使用されるビット数との差が、決定された閾値よりも大きくなった場合、第３の量子化分解能に基づいて、時間周波数ブロックのための符号化空間オーディオ信号指向性メタデータパラメータを生成するように構成された生成回路を有する手段であって、前記第３の量子化解像度に基づく前記時間周波数ブロックの符号化された前記空間オーディオ信号指向性パラメータに使用されるビット数が、常に前記決定されたビット数以下となるように、前記第３の量子化解像度が決定される、手段と、場合に、を備える装置が提供される。
【0063】
第１４の態様によれば、時間周波数ブロックについて符号化空間オーディオ信号指向性メタデータパラメータを受信するための手段と、前記符号化空間オーディオ信号指向性メタデータパラメータが、常に決定されたビット数以下である量子化解像度に基づいて符号化されたかどうかを識別するように構成された指標を受信するための手段と、前記符号化空間オーディオ信号指向性メタデータパラメータが、常に決められたビット数以下である量子化解像度に基づいて符号化されたことが前記指標によって識別されたとき、常に決められたビット数以下の量子化解像度に基づいて前記時間周波数ブロックに対する符号化空間オーディオ信号指向性メタデータパラメータを復号する手段と、前記指標が、符号化された前記空間オーディオ信号指向性メタデータパラメータが、常に決められたビット数以下となる量子化解像度に基づいて符号化されていないことが特定された場合に、さらなる量子化解像度に基づいて、時間周波数ブロックに対する符号化空間オーディオ信号指向性メタデータパラメータの第１の部分を復号化する手段であって、第１の部分は、さらなる量子化解像度に基づいて、時間周波数ブロックに対するエントロピー符号化空間オーディオ信号指向性メタデータパラメータを含む、手段と、決定されたビット数と第１の部分を符号化するために使用されたビット数との差が、さらなる量子化解像度に基づいて時間周波数ブロックのための符号化空間オーディオ信号指向性メタデータパラメータの第２の部分を符号化するために必要なビット数より小さいとき、低減ビット量子化解像度に基づいて前記時間周波数ブロックに対する固定レート符号化空間オーディオ信号指向性メタデータパラメータを備える前記第２の部分を、復号化するための手段、そうでなければ、前記さらなる量子化解像度に基づいて前記時間周波数ブロックに対する固定レート符号化空間オーディオ信号指向性メタデータパラメータを構成する第２の部分を復号化する手段とを備える装置が提供される。
【0064】
第１５の態様によれば、装置に少なくとも、時間周波数ブロックに対する空間オーディオ信号指向性メタデータパラメータを生成するステップと、第１の量子化解像度に基づいて、時間周波数ブロックのための符号化空間オーディオ信号指向性メタデータパラメータを生成するステップと、前記第１の量子化解像度に基づく時間周波数ブロックのための符号化空間オーディオ信号指向性パラメータに使用されるビット数を、決定されたビット数と比較するステップと、前記第１の量子化解像度に基づく時間周波数ブロックに対する符号化空間オーディオ信号指向性メタデータパラメータに使用されるビット数が、決定されたビット数より少ない場合に、前記第１の量子化解像度に基づく時間周波数ブロックに対する符号化空間オーディオ信号指向性メタデータパラメータを出力または格納するステップと第１の量子化解像度に基づく時間周波数ブロックに対する符号化空間オーディオ信号指向性パラメータに使用されるビット数が決定されたビット数より多く、決定されたビット数と、第１の量子化解像度に基づく時間周波数ブロックに対する符号化空間オーディオ信号指向性パラメータに使用されるビット数との差が、決定されたビット数より少なく、決定された閾値内であるとき、第２の量子化解像度に基づいて、時間周波数ブロックに対する符号化空間オーディオ信号指向性メタデータパラメータを生成するステップと、第１の量子化解像度に基づく時間周波数ブロックに対する符号化空間オーディオ信号指向性パラメータに使用されるビット数が決定されたビット数より多く、決定されたビット数と、第１の量子化解像度に基づく時間周波数ブロックに対する符号化空間オーディオ信号指向性パラメータに使用されるビット数との差が決定された閾値より大きいときに第３の量子化解像度に基づく時間周波数ブロックに対する符号化空間オーディオ信号指向性メタデータパラメータを生成するステップであって、前記第３の量子化解像度に基づく時間周波数ブロックに対する符号化空間オーディオ信号指向性パラメータに使用されるビット数が、常に前記決定されたビット数と等しいかそれ以下であるように、前記第３の量子化解像度が決定されるステップと、を実行させるためのプログラム命令を含むコンピュータ可読媒体が提供される。
【0065】
第１６の態様によれば、時間周波数ブロックに対して符号化空間オーディオ信号指向性メタデータパラメータを受信するステップと、前記符号化空間オーディオ信号指向性メタデータパラメータが、常に決定されたビット数以下である量子化解像度に基づいて符号化されたかどうかを識別するように構成された指標を受信するステップと、前記符号化空間オーディオ信号指向性メタデータパラメータが、常に決定されたビット数以下である量子化解像度に基づいて符号化されたことが前記指標によって識別される場合、常に決定されたビット数以下である量子化解像度に基づいて、前記時間周波数ブロックのための符号化空間オーディオ信号指向性メタデータパラメータを復号化するステップと、前記指標により、符号化された前記空間オーディオ信号指向性メタデータパラメータが、常に決められたビット数以下である量子化解像度に基づいて符号化されていないことが特定された場合に、さらなる量子化解像度に基づいて、時間周波数ブロックに対する符号化空間オーディオ信号指向性メタデータパラメータの第１の部分を復号化するステップであって、第１の部分は、さらなる量子化解像度に基づいて、時間周波数ブロックに対するエントロピー符号化空間オーディオ信号指向性メタデータパラメータを含む、ステップと、決定されたビット数と第１の部分を符号化するために使用されたビット数との差が、さらなる量子化解像度に基づいて時間周波数ブロックに対する符号化空間オーディオ信号指向性メタデータパラメータの第２の部分を符号化するために必要なビット数より小さいとき、低減ビット量子化解像度に基づいて前記時間周波数ブロックに対する固定レート符号化空間オーディオ信号指向性メタデータパラメータを含む前記第２の部分を復号し、そうでなければ、前記さらなる量子化解像度に基づいて前記時間周波数ブロックに対する固定レート符号化空間オーディオ信号指向性メタデータパラメータを構成すること前記第２の部分を復号するステップと、を実行するステップと、を少なくとも装置に実行させるためのプログラム命令を含むコンピュータ可読媒体が提供される。
【0066】
上述の動作を実行するための手段を備える装置。
【0067】
上述の方法の動作を実行するように構成された装置。
【0068】
コンピュータに上述の方法を実行させるためのプログラム命令を含むコンピュータプログラム。
【0069】
媒体に格納されたコンピュータプログラム製品は、装置に本明細書に記載された方法を実行させることができる。
【0070】
電子デバイスは、本明細書で説明されるような装置を備えることができる。
【0071】
チップセットは、本明細書に記載されるような装置を備えてもよい。
【0072】
本出願の実施形態は、最新技術に関連する課題に対処することを目的とする。
【図面の簡単な説明】
【0073】
本出願をより良く理解するために、添付の図面を例として参照する。
【発明を実施するための形態】
【0074】
以下に、効果的な空間分析導出メタデータパラメータを提供するための適切な装置および可能な機構をさらに詳細に説明する。以下の説明では、マルチチャネル・マイクロフォン実装に関してマルチチャネル・システムを説明する。しかしながら、上述したように、入力フォーマットは、マルチチャネルラウドスピーカ、アンビソニック（ＦＯＡ／ＨＯＡ）などのような任意の適切な入力フォーマットであり得る。いくつかの実施形態では、チャネル位置がマイクロフォンの位置に基づくか、または仮想位置または方向であることが理解される。さらに、例示システムの出力は、マルチチャネルラウドスピーカ配置である。しかしながら、アウトプットは、スピーカ以外の手段を介してユーザにレンダリングされることができることが理解される。さらに、マルチチャネルラウドスピーカ信号は、２つ以上の再生オーディオ信号であるように一般化されることができる。
【0075】
メタデータは、考慮される各時間／周波数サブバンドについて、結果として生じる方向の仰角、方位角、およびエネルギー比から少なくとも構成される。方向パラメータ成分、方位角、仰角はオーディオデータから抽出され、次いで所定の量子化解像度に量子化される。結果として生じるインデックスは、効率的な伝送のためにさらに圧縮されなければならない。高ビットレートのためには、メタデータの高品質の無損失符号化が必要とされる。
【0076】
以下に説明する概念は、得られたビットレートの初期量子化および符号化に続く状況において、メタデータの符号化および量子化表現の品質を、コーデックによって許容されるビットレートよりも大きく改善することである。そのような実施形態では、エントロピー符号化ビットの再推定も、修正のいかなる補足信号も行わずに、中間量子化解像度を得る方法が提案される。したがって、縮小は、固定レート符号化を使用するサブバンドに対してのみ実行され、暗黙の信号は出力されるべきビットストリームを書き込むときにサブバンドを並べ替えることによって実施される。
【0077】
いくつかの実施形態では、これは符号化される変数の値を低減する方法を用いてさらに実施することができる。この縮小は、いくつかの実施形態ではより多数のシンボルが存在する場合に実施することができる。この変更は符号化されるインデックスが利用可能なシンボルの数から減算し、結果の差分を符号化することによって実行することができる。いくつかの実施形態では方位表現の場合、これは後方にバイアスを置いて位置するオーディオソースを有することに対応する。さらに、いくつかの実施形態では、すべてのインデックスが偶数であるかどうか、またはすべてのインデックスが奇数であるかどうかをチェックし、値を２で割ったものを符号化することによって、変化を実施することもできる。仰角表現の場合、いくつかの実施形態では、これはオーディオシーンの上側または下側に主に位置するオーディオソースを有することに対応する。
【0078】
いくつかの実施形態では、例えば、ＩＶＡＳコーデック内のＭＡＳＡメタデータの符号化は、各時間周波数タイルについての量子化されたエネルギー比の値に基づいて、指向性データについてのビット数を最初に推定するように構成される。さらに、元の量子化解像度のエントロピー符号化を試験した。結果として得られる合計が利用可能なビットの量よりも大きい場合、ビットの数は利用可能なビットの数に適合するように、各時間周波数タイルに対して比例的に減少させることができるが、ビットレートが許容するとき（例えば、より高いビットレートで）、量子化解像度は不必要に調整されない。
【0079】
図１を参照すると、本出願の実施形態を実施するための例示的な装置およびシステムが示されている。システム１００は、「分析」部１２１および「合成」部１３１を備えていることが示されている。「分析」部分１２１はマルチチャネルラウドスピーカ信号を受信してからメタデータおよびダウンミックス信号の符号化までの部分であり、「合成」部分１３１は、符号化されたメタデータおよびダウンミックス信号の復号から、（例えば、マルチチャネルラウドスピーカ形成の）再生成された信号の提示までの部分である。
【0080】
システム１００および「分析」パート１２１への入力は、マルチチャネル信号１０２である。以下の例では、マイクロフォンチャネル信号入力について説明するが、他の実施形態では任意の適切な入力（または合成マルチチャネル）フォーマットを実装することができる。例えば、いくつかの実施形態では、空間分析器および空間分析がエンコ－ダの外部で実施されることができる。例えば、いくつかの実施形態では、オーディオ信号に関連する空間メタデータが別個のビットストリームとしてエンコ－ダに提供されることができる。いくつかの実施形態では、空間メタデータが空間（方向）インデックス値のセットとして提供されることができる。
【0081】
マルチチャネル信号は、ダウンミキサ１０３および分析プロセッサ１０５に渡される。
【0082】
いくつかの実施形態では、ダウンミキサ１０３がマルチチャネル信号を受信し、決められた数のチャネルに信号をダウンミックスし、ダウンミックス信号１０４を出力するように構成される。例えば、ダウンミキサ１０３は、マルチチャンネル信号の２つのオーディオチャンネルダウンミックスを生成するように構成することができる。決定されたチャネル数は、任意の適切な数のチャネルであり得る。
【0083】
いくつかの実施形態では、ダウンミキサ１０３は任意であり、マルチチャネル信号はこの例におけるダウンミックス信号と同様にエンコ－ダ１０７に未処理で渡される。
【0084】
いくつかの実施形態では、統計解析プロセッサー１０５はまた、マルチャネル信号を受信し、その信号を統計解析して、マルチャネル信号に関連し、したがってダウンミックス信号１０４に関連したメタデータ１０６を生成するように構成される。分析プロセッサ１０５は、時間周波数分析間隔ごとに、方向パラメータ１０８およびエネルギー比パラメータ１１０（およびいくつかの実施形態では、コヒーレンスパラメータおよび拡散パラメータ）を備えることができるメタデータを生成するように構成することができる。いくつかの実施形態では、方向およびエネルギー比が空間オーディオパラメータであると見なされることができる。言い換えれば、空間オーディオパラメータは、マルチチャネル信号（または一般に２つ以上の再生オーディオ信号）によって生成される音場を特徴付けることを目的とするパラメータを含む。
【0085】
一部の実施形態では、生成されるパラメータが周波数帯域ごとに異なる場合がある。したがって、例えば、帯域Ｘでは、すべてのパラメータが生成され、送信されるが、帯域Ｙではパラメータのうちの１つだけが生成され、送信され、さらに、帯域Ｚではパラメータは生成または送信されない。この実際的な例は、最高帯域のようないくつかの周波数帯域に対して、パラメータのいくつかが知覚上の理由のために必要とされないことであり得る。ダウンミックス信号１０４およびメタデータ１０６は、エンコ－ダ１０７に渡すことができる。
【0086】
エンコ－ダ１０７は、ダウンミックス（またはその他の方法で）信号１０４を受信し、これらのオーディオ信号の適切なエンコーディングを生成するように構成されたオーディオエンコ－ダコア１０９を備えることができる。エンコ－ダ１０７は、いくつかの実施形態では、（メモリ上および少なくとも１つのプロセッサ上に格納された適切なソフトウェアを実行する）コンピュータ、または代替的に、例えばＦＰＧＡまたはＡＳＩＣを利用する特定のデバイスとすることができる。符号化は、任意の適切なスキームを使用して実装され得る。エンコ－ダ１０７はさらに、メタデータを受信し、情報の符号化または圧縮された形態を出力するように構成されたメタデータエンコ－ダ／量子化器１１１を備えることができる。いくつかの実施形態では、エンコ－ダ１０７がさらに、図１に鎖線で示す送信または格納の前に、単一のデータストリームにインターリーブし、多重化し、または符号化されたダウンミックス信号内にメタデータを埋め込むことができる。多重化は、任意の適切なスキームを使用して実施することができる。
【0087】
デコーダ側では、受信または取り出されたデータ（ストリーム）がデコーダ／デマルチプレクサ１３３によって受信され得る。デコーダ／デマルチプレクサ１３３は、符号化されたストリームを逆多重化し、オーディオ符号化されたストリームを、オーディオ信号を復号してダウンミックス信号を得るように構成されたダウンミックス抽出器１３５に渡すことができる。同様に、デコーダ／デマルチプレクサ１３３は符号化されたメタデータを受信し、メタデータを生成するように構成されたメタデータ抽出器１３７を備えることができる。デコーダ／デマルチプレクサ１３３は、いくつかの実施形態では、（メモリ上および少なくとも１つのプロセッサ上に格納された適切なソフトウェアを実行する）コンピュータ、または代替として、たとえばＦＰＧＡまたはＡＳＩＣを利用する特定のデバイスとすることができる。
【0088】
復号化されたメタデータおよびダウンミックスオーディオ信号は、合成プロセッサ１３９に渡されることができる。
【0089】
システム１００「合成」部分１３１は、ダウンミックスおよびメタデータを受信し、ダウンミックス信号およびメタデータに基づいて、マルチチャネル信号１１０（これらはマルチチャネルスピーカフォーマットであってもよく、またはいくつかの実施形態ではユースケースに応じて、バイノーラルまたはアンビソニックス信号などの任意の適切な出力フォーマットであり得る）の形態の合成空間オーディオを任意の適切なフォーマットで再作成するように構成された合成プロセッサ１３９をさらに示す。
【0090】
したがって、要約すると、最初に、システム（分析部）は、マルチチャネルオーディオ信号を受信するように構成される。次いで、システム（分析部）はダウンミックスを生成するか、または（例えば、オーディオ信号チャネルのいくつかを選択することによって）適切な搬送オーディオ信号を生成するように構成される。次いで、システムは、メモリ／伝達のためにダウンミックス（またはより一般的には搬送）信号を符号化するように構成される。この後、システムは符号化されたダウンミックスとメタデータを保存／送信することができる。システムは、符号化されたダウンミックスとメタデータを取得／受信することができる。次に、システムは、符号化ダウンミックスおよびメタデータパラメータ、例えば逆多重化、符号化ダウンミックスおよびメタデータパラメータからダウンミックスおよびメタデータを抽出し、符号化ダウンミックスおよびメタデータパラメータを復号するように構成される。
【0091】
システム（合成部）は、抽出されたマルチチャネルオーディオ信号およびメタデータのダウンミックスに基づいて、出力マルチチャネルオーディオ信号を合成するように構成される。
【0092】
【0093】
いくつかの実施形態では、分析プロセッサ１０５が時間周波数領域変換器２０１を備える。
【0094】
いくつかの実施形態では、時間周波数領域変成器２０１が、入力時間領域信号を適切な時間周波数信号に変換するために、マルチチャネル信号１０２を受信し、短時間フーリエ変換（ＳＴＦＴ）などの周波数領域変換に適切な時間を印加するように構成される。これらの時間周波数信号は、空間分析器２０３および信号分析器２０５に渡すことができる。
【0095】
したがって、例えば、時間周波数信号２０２は、ｂが周波数ビンインデックスであり、ｎが時間周波数ブロック（フレーム）インデックスであり、ｉがチャネルインデックスである場合ｓｉ（ｂ，ｎ）によって、時間周波数領域表現で表すことができる。別の発現ではｎは元の時間領域信号のサンプリングレートよりも低いサンプリングレートを有する時間インデックスと見なすことができる。これらの周波数ビンは、１つまたは複数のビンを帯域インデックスｋ＝０，．．．，Ｋ－１のサブバンドにグループ化するサブバンドにグループ化することができる。各サブバンドｋは、最低ビンｂｋ，ｌｏｗと最も高いビンｂｋ，ｈｉｇｈとを有し、サブバンドは、ｂｋ，ｌｏｗからｂｋ，ｈｉｇｈのすべてのビンを含む。サブバンドの幅は、任意の適切な分布に近似することができる。例えば、等価矩形帯域幅（ＥＲＢ：Ｅｑｕｉｖａｌｅｎｔ ｒｅｃｔａｎｇｕｌａｒ ｂａｎｄｗｉｄｔｈ）スケールまたはバークスケールである。
【0096】
いくつかの実施形態では、分析プロセッサ１０５が空間分析器２０３を備える。空間分析器２０３は時間周波数信号２０２を受信し、これらの信号に基づいて方向パラメータ１０８を推定するように構成することができる。方向パラメータは、任意のオーディオベースの「方向」決定に基づいて決定されることができる。
【0097】
例えば、いくつかの実施形態では、空間分析器２０３が２つ以上の信号入力で方向を推定するように構成される。これは、「方向」を推定するための最も単純な構成を表し、さらに多くの信号を用いてより複雑な処理を実行することができる。
【0098】
したがって、空間分析器２０３は、方位角（ｋ，ｎ）および仰角θ（ｋ，ｎ）として示されるオーディオ信号のフレーム内のそれぞれの周波数帯域および時間周波数ブロックに対して少なくとも１つの方位角および仰角を提供するように構成され得る。方向パラメータ１０８は、方向解析器／インデックス生成器２１５に渡すこともできる。
【0099】
また、空間分析器２０３は、エネルギー比パラメータ１１０を決定するように構成されることができる。エネルギー比は、ある方向から到来すると考えられるオーディオ信号のエネルギーであり得る。直接対総エネルギー比ｒ（ｋ，ｎ）は、例えば、方向推定値の安定性測度を使用して、または任意の相関測度を使用して、または比パラメータを得るための任意の他の適当な方法を使用して推定することができる。エネルギー比は、エネルギー比平均発生器／量子化解像度決定器２１１に渡すことができる。
【0100】
したがって、要約すると、分析プロセッサは、マイクロフォンまたはアンビソニックスオーディオ信号などの時間領域マルチチャネルまたは他のフォーマットを受信するように構成される。
【0101】
この後、解析プロセッサは時間領域を周波数領域変換（例えば、ＳＴＦＴ）に適用して、解析のための適切な時間周波数領域信号を生成し、次いで、方向解析を適用して、方向およびエネルギー比パラメータを決定することができる。
【0102】
そして、解析プロセッサは、決定されたパラメータを出力するように構成することができる。
【0103】
方向および比率はここでは各時間インデックスｎについて表されるが、いくつかの実施形態ではパラメータがいくつかの時間インデックスにわたって組み合わされることができる。周波数軸についても同様に当てはまり、表現されているように、いくつかの周波数ビンｂの方向は、いくつかの周波数ビンｂからなるバンドｋにおける一方向パラメータによって表すことができる。同じことが、本明細書で説明される空間パラメータのすべてに当てはまる。
【0104】
図２にも示されるように、いくつかの実施形態による例示的なメタデータエンコ－ダ／量子化器１１１が示される。
【0105】
上述のように、オーディオ空間メタデータは、各サブバンドの方位角、仰角、およびエネルギー比データからなる。ＭＡＳＡフォーマットでは、方向データは１６ビットで表され、方位角は９ビットで、仰角は７ビットでほぼ表される。エネルギー比は８ビットで表される。
【0106】
フレームごとにＮ＝５のサブバンドとＭ＝４のタイムブロックがあり、各フレームの非圧縮メタデータを格納するために（１６＋８）ｘＭｘＮビットが必要になる。より高い周波数解像度バージョンでは、２０または２４の周波数サブバンドが存在する可能性がある。以下の例ではＭＡＳＡフォーマットのビット割り当てが使用されているが、他の実施形態は他のビット割り当て、またはサブバンドまたは時間ブロックの選択を用いて実施されてもよく、これらは代表的な例にすぎないことが理解される。
【0107】
メタデータエンコ－ダ／量子化器１１１は、エネルギー比平均発生器／量子化解像度決定器２１１を含んでもよい。エネルギー比平均発生器／量子化解像度決定器２１１は、エネルギー比を受け取り、分析から、そしてこれから比の適切な符号化を生成するように構成されることができる。例えば、決定されたエネルギー比（例えば、直接対全エネルギー比、さらには拡散対全エネルギー比および剰余対全エネルギー比）を受け取り、これらを符号化／量子化する。これらの符号化された形式は、エンコ－ダ２１７に渡されることができる。
【0108】
いくつかの実施形態では、エネルギー比平均発生器／量子化解像度決定器２１１が決定されたビット数を使用して各エネルギー比値を符号化するように構成される。例えば、Ｎ＝５のサブバンドがある上記の場合、各エネルギー比値を符号化するために３ビットが使用される。したがって、エネルギー比平均発生器／量子化解像度決定器２１１は、各サブバンドに対して３ビットを使用してスカラー不均一量子化を適用するように構成されることができる。
【0109】
加えて、エネルギー比平均発生器／量子化解像度決定器２１１は、全てのＴＦブロックについてのエネルギー比値の全ての送信／格納を制御するのではなく、サブバンド毎に１つの加重平均値のみを生成し、これを送信／格納すべきエンコ－ダに渡すように構成される。
【0110】
いくつかの実施形態では、この平均が、各時間周波数ブロックの全エネルギーと、より多くのエネルギーを有するサブバンドに基づいて適用される重み付けとを考慮することによって計算される。
【0111】
加えて、エネルギー比平均発生器／量子化解像度決定器２１１は、フレーム内の全ての時間周波数ブロックに対する方向パラメータ（換言すれば、仰角および方位角値に対する量子化解像度）に対する量子化解像度を決定するように構成される。このビット割り当ては、例えば、ｂｉｔｓ＿ｄｉｒ０［０：Ｎ－１］［０：Ｍ－１］によって定義することができ、方向アナライザ／インデックス発生器２１５に渡すことができる。
【0112】
図３に示されるように、エネルギー比平均発生器／量子化解像度決定器２１１の作用を要約することができる。
【0113】
第１のステップは図３のステップ３０１に示すように、比率値を受信するステップである。次に、サブバンドループは、ステップ３０３によって図３において開始される。サブバンドループは、ステップ３０５によって図３に示されるように、時間ブロック（ここで、重み付けはオーディオ信号のエネルギー値によって決定される）内の全ての値についてのエネルギー比値の重量平均に基づいてエネルギー比値を表すために、決定されたビット数（例えば３）を使用する第１の動作を含む。次いで、第２の作用は、ステップ３０７によって、図３に示されるようなエネルギー比の値に基づいて、現在のサブバンドの全ての時間ブロックについての方位角および仰角に対する量子化解像度を決定するものである。ループは、図３においてステップ３０９によって閉じられる。
【0114】
これは、さらに、以下によって擬似コードで表現することができる。
１．各サブバンドについて、ｉ＝１：Ｎ
ａ．３ビットを使用して、対応するエネルギー比値を符号化するｂ．現在のサブバンドのすべてのタイムブロックについて、方位角と仰角に対する量子化解像度を設定する。量子化解像度は、エネルギー比ｂｉｔｓ＿ｄｉｒ０［０：Ｎ－１］［０：Ｍ－１］の値によって与えられる所定数のビットを許容することによって設定される
２．終了
１．各サブバンドについて、ｉ＝１：Ｎ
ａ．３ビットを使用して、対応するエネルギー比値を符号化するｂ．現在のサブバンドのすべてのタイムブロックについて、方位角と仰角に対する量子化解像度を設定する。量子化解像度は、エネルギー比ｂｉｔｓ＿ｄｉｒ０［０：Ｎ－１］［０：Ｍ－１］の値によって与えられる所定数のビットを許容することによって設定される
２．終了
【0115】
メタデータエンコ－ダ／量子化器１１１は、方向解析器／インデックス生成器２１５を含んでもよい。方向インデックス発生器２１５は方向パラメータ（方位角φ（ｋ，ｎ）および仰角θ（ｋ，ｎ）１０８、および量子化ビット割り当てなど）を受信し、これから量子化出力を生成するように構成される。いくつかの実施形態では、量子化が決定された量子化解像度によって定義されるルックアップテーブルによって定義される「表面」球体上にリング状に配置された球形グリッドを形成する球体の配置に基づく。言い換えれば、球状グリッドはより小さな球体で球体をカバーし、小さな球体の中心をほぼ等距離の方向のグリッドを定義する点と見なすという考え方を使用する。したがって、より小さい球は、任意の適切なインデックス付けアルゴリズムにしたがってインデックス付けすることができる中心点の周りの円錐または立体角を規定する。ここでは球状量子化を任意の適切な量子化について説明するが、線形または非線形を用いてもよい。
【0116】
例えば、いくつかの実施形態では方向パラメータ（方位角および仰角）のビットが表ｂｉｔｓ＿ｄｉｒｅｃｔｉｏｎ［］にしたがって割り当てられ、エネルギー比がインデックスｉを有する場合、方向のビット数はｂｉｔｓ＿ｄｉｒｅｃｔｉｏｎ［ｉ］である。
【数1】
【0117】
異なるビット解像度に対する方向量子化器の構造は、以下の変数によって与えられる。
【数2】
【0118】
「ｎｏ＿θ」は、赤道を含む方向の球の「北半球」における仰角値の数に対応する。「ｎｏ＿ｐｈｉ」は、各量子化器（ｑｕａｎｔｉｚｅｒ）の各仰角における方位値の数に対応する。
【0119】
例えば、５ビットに対して、［０、３０、６０、９０］および４－１＝３の負の仰角値［－３０、－６０、－９０］に対応する４つの仰角値がある。最初の仰角値０については１２の等距離方位値があり、仰角値３０と－３０については７の等距離方位値がある。以下同様である。
【0120】
４ビットに対応する構造を除く全ての量子化構造は、仰角値「ｎｏ＿θ」の数で割った９０度によって与えられる連続する仰角値間の差を有する。これは一例であり、任意の他の適切な配布を実施することができる。例えば、いくつかの実施形態では、赤道の下に点を有さない可能性がある４ビットの球状グリッドを実装することができる。同様に、３ビット分布は球上に拡散されることができるし、赤道のみに限定されることができる。このようにして、インデックスは、方向パラメータの固定レート符号化であると考えることができる。
【0121】
方向インデックスを決定すると、方向解析器／インデックス発生器２１５は、方位インデックスおよび仰角インデックスをエントロピー符号化するように構成することができる。エントロピー符号化は、一度に１つの周波数サブバンドに対して実施され、そのサブバンドに対する全ての時間サブフレームを符号化する。この手段は、例えば、最良のＧＲ順序が、現サブバンドの時間サブフレームに対応する４つの値に対して決定される。さらに、本明細書で説明されるように、１つのサブバンドの値を符号化するいくつかの方法がある場合、方法のうちの１つが、後述されるように選択される。いくつかの実施形態における方位角および仰角インデックスのエントロピー符号化は、ゴロム・ライスパラメータに対して２つの可能な値を有するゴロム・ライス符号化方法を使用して実施されることができる。いくつかの実施形態では、エントロピー符号化はまた、任意の適切なエントロピー符号化技術（例えば、ハフマン、算術符号化．）を使用して実装されることができる。
【0122】
固定レートおよびエントロピー符号化された方向インデックス（この例では仰角および方位角インデックス）を有すると、方向アナライザ／インデックス発生器２１５は次に、サブバンドのそれぞれについて、エントロピー符号化（ＥＣ）方法によって使用されるビット数を固定レート符号化方法と比較し、より少ないビット数を使用する符号化方法をサブバンドごとに選択するように構成され得る。したがって、ｂｉｔｓ＿ＥＣは、固定レート符号化が使用されるか可変レート符号化が使用されるかにかかわらず、各サブバンドで使用されるビットの合計である。固定レート符号化が使用されるサブバンドの場合、各方向に使用されるビット数はｂｉｔｓ＿ｄｉｒ０［ｉ］［ｊ］によって与えられ、ここで、「ｉ」はサブバンドのインデックスであり、「ｊ」は時間サブフレームのインデックスである。
【0123】
エントロピー符号化後の各サブバンドのビットを以下のように仮定する。
【表1】
【0124】
次に、タイムブロックまたはフレームの符号化に使用されるビット数が、使用可能なビット数と比較される。例えば、いくつかの実施形態では、時間ブロックまたはフレームを符号化するために使用されるビット数（ｂｉｔｓ＿ＥＣ）と利用可能なビットとの間の差である値デルタを計算することができる。
【0125】
いくつかの実施形態では、方向解析器／インデックス生成器２１５が差分値（デルタ）が負であるか否かを判断するように構成される。言い換えれば、（固定レートおよびエントロピー符号化サブバンドの両方を使用する）符号化方向インデックスのビット数が、利用可能なビットより多いかどうかである。
【0126】
使用されるビット数が、利用可能なビットよりも多くない（またはデルタが正または負でない）場合、エンコ－ダ２１７は（ｂｉｔｓ＿ＥＣ）符号化方向インデックスを使用し、どのサブフレームがエントロピー符号化され、どのサブフレームが固定レート符号化されるかを信号送信するように構成される。例えば、いくつかの実施形態では、エンコ－ダが、ＥＣ＋固定レート方法が使用されることを示すために１ビットを信号化するように構成され、また、サブバンド当たり１ビットを使用して、サブバンドが固定レートであるか、エントロピーであるかを示すように構成される。次に、符号化されたサブバンドがグループ化される。例えば、エントロピー符号化されたサブバンドはグループ化され、次に固定レート符号化されたサブバンドが続く。
【0127】
これは、例えば、図４ａに示されており、ステップ３０９に続く初期動作は、ｂｉｔｓ＿ｄｉｒ０［０：Ｎ－１］［０：Ｍ－１］によって設定された量子化解像度に基づいて方向インデックス（方位角および仰角）を決定すること、換言すれば、図４ａにステップ４００によって示されているような固定レート符号化を実行することのうちの１つである。
【0128】
インデックスを生成すると、次の動作は、ステップ４０１によって図４ａに示すように方向インデックスをエントロピー符号化することである。
【0129】
すべてのサブバンドに対してエントロピー符号化され、固定レート符号化された形式を生成した後、各サブバンドに対して、より少ないビット数を使用するオプションが選択され、ステップ４０３によって図４ａに示すように、時間ブロックまたはフレームに使用されるビットが（ｂｉｔｓ＿ＥＣとして）決定される。
【0130】
次に、ステップ４０５によって図４ａに示すように、使用されるビットと使用可能なビットとの差が決定される（Ｄｅｌｔａ＝ｂｉｔｓ＿ＥＣｂｉｔｓ＿ａｖａｉｌａｂｌｅ）。
【0131】
次の動作は、図４ａにステップ４０７で示すように、符号化方向インデックスのビット数が利用可能なビット数より多いかどうか（換言すれば、デルタ・ネガティブであるかどうか）を決定する動作であり得る。
【0132】
決定の結果、符号化方向インデックスのビット数が利用可能なビット数以下である（換言すれば、デルタ値が負でないか、または正である）という回答が得られた場合、符号化方向インデックスが使用され、さらに、ステップ４０８によって図４ａに示されるように、選択がシグナリングされる（換言すれば、どのサブフレームがエントロピー符号化され、どのサブフレームが固定レート符号化されているかをシグナリングするために生成されたインジケータ）。いくつかの実施形態では、１ビットを使用してＥＣ選択方法が使用されることを信号伝達することは、どのサブバンドが固定またはエントロピー符号化されているかを示すために１ビット／サブバンドを使用し、次いで、エントロピー符号化されたサブバンドのすべてが最初にビットストリームにパックされ、次いで、固定レート符号化されたサブバンドがパックされるように、符号化されたメタデータをグループ化することである。
【0133】
符号化方向インデックスのビット数が利用可能なビットよりも多い（またはデルタが負である）いくつかの実施形態では、方向アナライザ／インデックス発生器２１５が、符号化方向インデックスに使用されるビット数が量子化解像度縮小閾値によって利用可能なビット数よりも多いかどうかを決定するように構成される。量子化解像度縮小閾値は、いくつかの実施形態では固定レート符号化サブバンドの数に基づいて計算することができ、量子化の品質が著しく劣化する前に、各時間－頻度タイル（または時間－頻度のブロック）から縮小することができるビットの数と、ブロック内のサブフレームの数とに基づいて計算することができる。例えば、いくつかの実施形態では、使用することができる最小ビット数は３である（しかし、任意の他の適切な数の最小ビットを使用することができる）。これは、Ｄｅｌｔａ＞＝ＦＲＢ＊ＢＭ＊Ｍで表すことができ、ここで、ＦＲＢ＝サブフレームにおける固定レートサブバンドの数、ＢＭ＝各ＴＦタイルから減少させることができるビットの最大数、および、Ｍ＝時間ブロック又は時間サブフレームの数である。
【0134】
この決定結果がその差が量子化解像度縮小閾値よりも小さいという答えに帰着する場合、方向解析器／インデックス生成器２１５は、量子化解像度を修正することによって固定レート符号化に使用されるビット数を再計算するように構成される。いくつかの実施形態では、量子化解像度が固定レート符号化サブバンドの各ＴＦタイルについて、最大ＢＭビット縮小まで（換言すれば、使用されるべき最小ビット数に達するまで）、およびフレームのビット数が利用可能なビット数まで、縮小される。一部の実施形態では、ＴＦにおける量子化解像度が一様に影響されるように、時間ＴＦあたり１ビットずつ削減が行われる。さらに、いくつかの実施形態では、縮小がより下側サブバンドからより高いサブバンドに適用される。この減少は量子化解像度の減少の先端に、時間ブロックのために使用されるビットの数がｂｉｔｓ＿ＥＣではなくｂｉｔｓ＿ＥＣ１であるようなものである。つまり、「ｂｉｔｓ＿ＥＣ１」は「ｂｉｔｓ＿ａｖａｉｌａｂｌｅ」に対応するように縮小される。
【0135】
固定レートサブフレームに量子化解像度を適用した後、エンコ－ダ２１７は（ｂｉｔｓ＿ＥＣ１）符号化方向インデックスを使用し、どのサブフレームがエントロピー符号化され、どのサブフレームが固定レート符号化されているかをシグナリングするように構成される。例えば、いくつかの実施形態では、エンコ－ダがＥＣ＋固定レート方法が使用されることを示すために１ビットを信号化するように構成され、また、サブバンド当たり１ビットを使用して、サブバンドが固定レートであるか、エントロピーであるかを示すように構成される。次に、符号化されたサブバンドがグループ化される。例えば、エントロピー符号化されたサブバンドはグループ化され、次に固定レート符号化されたサブバンドが続く。
【0136】
決定の結果、差が量子化解像度縮小閾値以上である場合、方向分析器／インデックス生成器２１５は、割り当てられたビットの合計がエネルギー比を符号化した後に残された利用可能なビットの数に等しくなるように、量子化ビット＿ｄｉｒ１［０：Ｎ－１］［０：Ｍ－１］のビット数の割り当てを縮小するように構成される。
【0137】
さらに、方向分析器／インデックス生成器２１５は次いで、エネルギー比を符号化した後に、低減された数の利用可能なビットを使用してサブバンド符号化を開始するように構成され得る。これは、固定レートと可変（エントロピー符号化）形式の両方が再び符号化されるという点で、上記の量子化解像度の低下とは異なる。
【0138】
次いで、減少されたレート符号化方向インデックスおよび固定レート符号化サブバンドの信号化使用は、エンコ－ダ２１７において符号化され得る。言い換えれば、使用されたエントロピーまたは固定レート方法を使用してサブバンドが符号化されたかどうかを信号で知らせるためにビットを使用することができ、次いで、符号化されたサブバンドのためのビットが送信される。
【0139】
これは、例えば、図４ｂにおいて、ステップ４０７から続く場合に、ステップ４０９によって、図４ｂに示されるような量子化解像度縮小閾値によって、その差が利用可能なビットよりも多いかどうかを決定する動作が存在する場合に示される。
【0140】
差が量子化解像度縮小閾値よりも小さい場合、本方法は、固定レート符号化サブバンドに対する量子化解像度を（言い換えると、エントロピー符号化サブバンドを変化させないで）ステップ４１０によって、図４ｂに示されるように修正することによって、固定レートサブバンドを符号化するためのビット数を再計算するように構成される。
【0141】
固定レートサブバンドを符号化するためのビット数を再計算した後、ビットが出力され、ここで、ステップ４１２によって図４ｂに示されるように、符号化された方向インデックスが（修正された量子化解像度固定レートサブフレームと共に）使用され、さらに選択がシグナリングされ（換言すれば、どのサブフレームがエントロピー符号化され、どのサブフレームが固定レート符号化されているかをシグナリングするために生成されたインジケータ）、いくつかの実施形態では、１ビットを使用して、ＥＣ選択方法が使用されることをシグナリングし、サブバンド当たり１ビットを使用して、どれが固定またはエントロピー符号化されているかを示し、次いで、エントロピー符号化されたサブバンドのすべてが最初にビットストリームにパックされ、次に、修正された解像度の固定レート符号化されたサブバンドがその後にパックされるように、符号化されたメタデータをグループ化する。
【0142】
いくつかの実施形態では、低減されたビットレート符号化が従属サブバンドＮ－１までの各サブバンドについてループを開始することによって実現されることができる。このループ内で、現在のサブバンドの許容ビット数は、ｂｉｔｓ＿ａｌｌｏｗｅｄ＝ｓｕｍ（ｂｉｔｓ＿ｄｉｒ１［ｉ］［０：Ｍ－１］）と決定される。次に、現在のサブバンドの許容ビット数を決定すると、方向分析器／インデックス生成器２１５は、低減された割り当てビット数＿ｆｉｘｅｄ＝ｂｉｔｓ＿ａｌｌｏｗｅｄで固定レート符号化を使用することによってインデックスを符号化するように構成することができる。
【0143】
次に、方向分析器／インデックス生成器２１５はより少ないビットを使用する方法に基づいて、固定レート符号化またはエントロピー符号化のいずれかを選択する、すなわち、ｂｉｔｓ＿ｆｉｘｅｄまたはｂｉｔｓ＿ｅｃの最下位を選択するように構成することができる。さらに、方向アナライザ／インデックス発生器２１５は、２つの符号化方法のうちのどちらが選択されたかを示すために１ビットを使用するように構成することができる。したがって、サブバンドエンコーディングに使用されるビット数はｎｂ＝ｍｉｎ（ｂｉｔｓ＿ｆｉｘｅｄ、ｂｉｔｓ＿ｅｃ）＋１である。
【0144】
次いで、方向分析器／インデックス生成器２１５は許可されたビットに関して利用可能なビットがあるかどうか、言い換えれば、ｄｉｆｆ＝ａｌｌｏｗｅｄ＿ｂｉｔｓｎｂ＞０であるかどうかを決定するように構成され得る。利用可能なビット数とサブバンドで使用されるビット数との間に差がある場合、例えば、ｂｉｔｓ＿ｄｉｒ１［ｉ＋１：Ｎ－１］［０＿Ｍ－１］を更新することによって、差ｄｉｆｆを後のサブバンドに分配することができ、さもなければ、方向アナライザ／インデックス発生器２１５は、次のサブバンド割り当てｂｉｔｓ＿ｄｉｒ１［ｉ＋１］［０］からビットを減算するように構成することができる。
【0145】
最終サブバンドＮの場合、方向分析器／インデックス生成器２１５は固定レート符号化方法を使用し、ｂｉｔｓ＿ｄｉｒ１［Ｎ－１］［０：Ｍー１］ビットを使用して方向インデックスを符号化するように構成することができる。
【0146】
図４ｃに示すように、これらの低減されたビットレート動作（言い換えれば、図４ｂのステップ４１３）は、例示的な流れ図として示すことができる。第１のステップは、ステップ４２１によって、図４ｃに示されるように、サブバンドについてのループを１からペナルティマルト（Ｎ－１）サブバンドまで開始するステップの１つである。
【0147】
ループ内で、現在のサブバンドについて、符号化のために許可されたビットの数は、ステップ４２３によって図４ｃに示されるように決定される。
【0148】
次に、固定レート符号化方法を使用して、ステップ４２５によって図４ｃに示すように、ビット数を減らしたものを使用してインデックスを符号化する。
【0149】
次に、固定レート符号化またはエントロピー符号化のいずれかが、どの方法がより少ないビットを使用するかに基づいて選択され、その選択はさらに、ステップ４２７によって図４ｃに示すように、単一ビットによって示すことができる。
【0150】
許可されたビットの数と選択された符号化によって使用されたビットの数との間の差に基づいて利用可能な残りのビットがあるかどうかの決定と、残りのビットの後のサブバンド割り当てへの再分配とが、図４ｃにステップ４２９によって示されている。
【0151】
その後、ループは完了し、ステップ４３１によって図４ｃに示されるように、次のサブバンドについて繰り返すことができる。
【0152】
最後に、最後のサブバンドはステップ４３３によって図４ｃに示されるように、ビットの残りの割り当てを使用して固定レート方法を使用して符号化される。
【0153】
したがって、この方法は、以下のように要約することができる。
１．各サブバンドについて、ｉ＝１：Ｎ
ａ．エネルギー比率値を符号化する
ｂ．符号化エネルギー比値に基づいて量子化解像度（現在のサブバンドの全時間ブロックについて）に基づく方向インデックスを決定する
３．終了
４．エントロピーは方向インデックスを符号化する
５．各サブバンドについて、固定レート（インデックス）またはエントロピー符号化がより少ないビット数を使用するかどうかを選択し、使用されるブロックビットを決定する
６．使用されるブロックビットが使用可能なビットよりも多い場合
ａ．使用されるブロックビットと利用可能なビットとの間の差が量子化解像度修正閾値未満である場合
ｉ．固定レート符号化サブバンドの量子化解像度を修正することによって使用されるビットを再計算する
ｉｉ．固定レート（修正量子化解像度）またはエントロピー法を使用して符号化されたかどうかに基づいて、シグナリングされた方法、シグナリングされた選択、次いでグループ化されたサブバンドに基づいて出力を生成する
ｂ．そうでなければ、
ｉ．割り当てられたビット数ｂｉｔｓ＿ｄｉｒ１［０：Ｎ－１］［０：Ｍ－１］を減らし、割り当てられたビットの合計がエネルギー比の符号化・に残された使用可能なビット数に等しくなるようにする
ｉｉ．各サブバンドｉ＝１：Ｎー１について再符号化する
１．電流サブバンドの許容ビットを算出する。ｂｉｔｓ＿ａｌｌｏｗｅｄ＝ ｓｕｍ（ｂｉｔｓ＿ｄｉｒ１［ｉ］［０：Ｍ－１］）
２．方向パラメータインデックスを符号化するには、割り当てられたビット数を減らした固定レート符号化を使用するか、ｂｉｔｓ＿ｆｉｘｅｄ＝ｂｉｔｓ＿ａｌｌｏｗｅｄ、またはエントロピー符号化を使用する。ｂｉｔｓ＿ｅｃを少なくして選択し、１ビットを使用して方法、ｎｂ＝ｍｉｎ（ｂｉｔｓ＿ｆｉｘｅｄ、ｂｉｔｓ＿ｅｃ）＋１を指定する
３．許可されたビットに関して使用可能なビットがある場合、（ｄｉｆｆ＝ａｌｌｏｗｅｄ＿ｂｉｔｓｎｂ＞０の場合）
ａ．ｂｉｔｓ＿ｄｉｒ１［ｉ＋１：Ｎ－１］［０＿Ｍ－１］を更新することによって、差分ｄｉｆｆを次のサブバンドに再配分する
４．そうでなければ、
ａ．ｂｉｔｓ＿ｄｉｒ１［ｉ＋１］［０］ から１ ビット減算する
５．終了
ｂｉｔｓ＿ｄｉｒ１［Ｎ－１］［０：Ｍ－１］ビットを使用して、固定レートアプローチで最後のサブバンドの方向パラメータインデックスを符号化する。
７．そうでなければ、
８．シグナリングされた方法、シグナリングされた選択、およびその後、それらが固定レートまたはエントロピー方法を使用して符号化されたかどうかに基づいてグループ化されたサブバンドに基づいて、出力を生成する。
９．終了
１．各サブバンドについて、ｉ＝１：Ｎ
ａ．エネルギー比率値を符号化する
ｂ．符号化エネルギー比値に基づいて量子化解像度（現在のサブバンドの全時間ブロックについて）に基づく方向インデックスを決定する
３．終了
４．エントロピーは方向インデックスを符号化する
５．各サブバンドについて、固定レート（インデックス）またはエントロピー符号化がより少ないビット数を使用するかどうかを選択し、使用されるブロックビットを決定する
６．使用されるブロックビットが使用可能なビットよりも多い場合
ａ．使用されるブロックビットと利用可能なビットとの間の差が量子化解像度修正閾値未満である場合
ｉ．固定レート符号化サブバンドの量子化解像度を修正することによって使用されるビットを再計算する
ｉｉ．固定レート（修正量子化解像度）またはエントロピー法を使用して符号化されたかどうかに基づいて、シグナリングされた方法、シグナリングされた選択、次いでグループ化されたサブバンドに基づいて出力を生成する
ｂ．そうでなければ、
ｉ．割り当てられたビット数ｂｉｔｓ＿ｄｉｒ１［０：Ｎ－１］［０：Ｍ－１］を減らし、割り当てられたビットの合計がエネルギー比の符号化・に残された使用可能なビット数に等しくなるようにする
ｉｉ．各サブバンドｉ＝１：Ｎー１について再符号化する
１．電流サブバンドの許容ビットを算出する。ｂｉｔｓ＿ａｌｌｏｗｅｄ＝ ｓｕｍ（ｂｉｔｓ＿ｄｉｒ１［ｉ］［０：Ｍ－１］）
２．方向パラメータインデックスを符号化するには、割り当てられたビット数を減らした固定レート符号化を使用するか、ｂｉｔｓ＿ｆｉｘｅｄ＝ｂｉｔｓ＿ａｌｌｏｗｅｄ、またはエントロピー符号化を使用する。ｂｉｔｓ＿ｅｃを少なくして選択し、１ビットを使用して方法、ｎｂ＝ｍｉｎ（ｂｉｔｓ＿ｆｉｘｅｄ、ｂｉｔｓ＿ｅｃ）＋１を指定する
３．許可されたビットに関して使用可能なビットがある場合、（ｄｉｆｆ＝ａｌｌｏｗｅｄ＿ｂｉｔｓｎｂ＞０の場合）
ａ．ｂｉｔｓ＿ｄｉｒ１［ｉ＋１：Ｎ－１］［０＿Ｍ－１］を更新することによって、差分ｄｉｆｆを次のサブバンドに再配分する
４．そうでなければ、
ａ．ｂｉｔｓ＿ｄｉｒ１［ｉ＋１］［０］ から１ ビット減算する
５．終了
ｂｉｔｓ＿ｄｉｒ１［Ｎ－１］［０：Ｍ－１］ビットを使用して、固定レートアプローチで最後のサブバンドの方向パラメータインデックスを符号化する。
７．そうでなければ、
８．シグナリングされた方法、シグナリングされた選択、およびその後、それらが固定レートまたはエントロピー方法を使用して符号化されたかどうかに基づいてグループ化されたサブバンドに基づいて、出力を生成する。
９．終了
【0154】
【0155】
例えば、図５に関して、いくつかの実施形態において、方向インデックスをエントロピー符号化するために必要とされるビット数を低減することを試みるために、一連のインデックスチェックおよび最適化が適用される例が示される。
【0156】
いくつかの実施形態では、方向インデックス決定が図５に示すように、ステップ５０１によって開始される。この例では、示されたインデックス決定をエントロピー符号化するために必要とされるビットが仰角インデックス決定である。しかしながら、後述するように、同様のアプローチが方位インデックス決定に適用されることができる。
【0157】
いくつかの実施形態では、ステップ５０３によって図５に示されるように、０の仰角（または方位角）値が０のインデックスを有し、増加するインデックス値が増加する正および負の仰角（方位角）値に割り当てられるように、マッピングが生成される。
【0158】
マッピングを生成した後、ステップ５０５によって図５に示されるように、マッピングはオーディオソースに適用される（例えば、ルックアップテーブルに基づいてコードワード出力を生成する形態で）。
【0159】
生成されたインデックスはいくつかの実施形態では、ステップ５０７によって図５に示されるように、すべてのインデックスが同じ半球内に位置するかどうかを決定するために実行されるチェックがある。
【0160】
全てのインデックスが同じ半球内に位置する場合には、インデックス値を２で割り（丸め）、インデックスが全てどの半球内に位置したかを示すインジケータを生成し、次に、ステップ５０９によって図５に示すように、これらの値をエントロピー符号化することができる。
【0161】
すべてのインデックスが同じ半球内に位置しない場合、平均除去エントロピー符号化をインデックスに適用することができる。平均除去エントロピー符号化は符号化されるサブフレームの平均インデックス値を最初に除去し、次に、インデックスをポジ型のものに再マッピングし、次に、ステップ５１０によって図５に示されるように、ゴロンボ・ライス符号化などの適切なエントロピー符号化を用いてそれらを符号化するように構成され得る。
【0162】
エントロピー符号化を適用した後、いくつかの実施形態では、ステップ５１１によって図５に示されるように、すべての時間サブフレームが同じ仰角（方位角）値またはインデックスを有するかどうかを決定するためにチェックを適用することができる。
【0163】
すべての時間サブフレームが同じ仰角（方位角）値またはインデックスを有する場合、ステップ５１３によって図５に示すように仰角（方位角）値またはインデックスの倍数を示すインジケータが生成され、そうでない場合、方法はステップ５１７に直接進む。
【0164】
次の動作はステップ５１７によって図５に示されるように、エントロピー符号化インデックスに必要なビット数および任意のインジケータビットを提供することの１つである。
【0165】
例えば、仰角値に関して、仰角のインデックスは、領域［－９０；９０］におけるコードブックから決定することができる。これは、値０を有する仰角がインデックスゼロを有するコードワードを戻し、代替的に、ゼロ仰角値からそれ自体離れている正および負のコードワードに増加するインデックスを割り当てるように形成される。
【0166】
したがって、一例として、いくつかの実施形態では、インデックス｛６、４、２、０、１、３、５｝を生成するコードワード｛－９０、－６０、－３０、０、３０、６０、９０｝を有するコードブックが実装される。このインデックス付けは、一般的な意味でより確率の高い方向に対してより低い値のインデックスを生成する（実際の例では方向は赤道に近い）。別の観察はオーディオソースがより高い値のインデックスに対応して、赤道からさらに離れている場合、それらは赤道の下で、とりわけ、またはすべてである傾向があることである。いくつかの実施形態では、エンコ－ダがより効率的に符号化することができるより小さい値のインデックスを生成するために、すべてのオーディオソースが赤道より上にあるかどうか（またはすべてのオーディオソースが下にあるかどうか）をチェックするように構成することができ、この場合、これはサブバンドのすべての時間サブフレームについての場合であり、次いで、インデックスを２で分割する。
【0167】
いくつかの実施形態では、仰角インデックスのビット数の推定が以下のようにＣで実施することができる。
【数3】
【0168】
すべての時間サブフレームについて同じ仰角値の特別な場合もチェックされ、信号が送られる。
【0169】
上記の例の機能ｍｅａｎ＿ｒｅｍｏｖｅｄ＿ＧＲ（）は符号化されるサブフレームの平均インデックス値を最初に削除し、インデックスをポジ型の値に再マッピングしてから、ゴロンボ・ライス符号化で符号化するように設定されている。
【0170】
これは、例えば、Ｃ言語で、次のように実装することができる。
【数4】
【0171】
機能ｏｄｄ＿ｅｖｅｎ＿ｍｅａｎ＿ｒｅｍｏｖｅｄ＿ＧＲ（） はすべてのインデックスが奇数か偶数かを最初にチェックするように設定されており、この発生を通知し、半分になったインデックスを符号化した後のタイプ（奇数または偶数）を示す。
【数5-1】
【数5-2】
【0172】
いくつかの実施形態では、一連のエントロピー符号化最適化動作が実行され、次いで、最低値が選択される。これは、例えば、方位値の符号化に関して、図６に示すように示すことができる。いくつかの実施形態では、図６に示すように、ステップ６０１によって方向インデックスの決定が開始される。
【0173】
いくつかの実施形態では、ステップ５０３によって図６に示すように、方位値０がインデックス０を有し、増加するインデックス値が増加する正および負の方位値に割り当てられるように、マッピングが生成される。
【0174】
マッピングを生成した後、ステップ６０５によって図６に示すように、（例えば、ルックアップテーブルに基づいてコードワード出力を生成する形態で）マッピングはオーディオソースに適用される。
【0175】
この例では、方位角のインデックスがさらなるコードブックから決定することができる。この例では、方位角に対するゼロ値が正面方向であり得る基準方向に対応し、正の値は左に、負の値は右に、それぞれ対応する。この例では、方位値のインデックスが、値（－１５０、－１２０、－９０、－６０、－３０、０、３０、６０、９０、１２０、１５０、１８０）が以下のインデックス（１０、８、６、４、２、０、１、３、５、７、９、１１）を割り当てるように割り当てられる。いくつかの実施形態では、奇数／偶数アプローチが方位角（左／右位置決めに対応する）についてチェックすることができる。
【0176】
この例では、より高いインデックス値が「キャプチャ環境」の後部または後部からの値に割り当てられる。
【0177】
サブフレームの方位インデックスの符号化は、いくつかの実施形態では以下に基づいて実行することができる。
１．（ステップ６０７によって図６に示されるように）現在のサブバンドについて符号化されるべき方位インデックスの数を決定する
２．（図６のステップ６０９に示すように）電流サブバンドのタイルの記号の最大数を見つける
３．閾値よりも多くのシンボルがある場合（図６に示すように、ステップ６１１）
ａ．（図６のステップ６１３に示すように）相補値ｎｏ＿ｓｙｍｂ－ｉｎｄｅｘ＿ａｚｉｍｕｔｈによって与えられる値の符号化をチェックすることによって方位値を符号化する。
ｉ．インデックスを前にあるように符号化する場合、ビット数を推定する。平均除去順序選択的ゴロム・ライスコーディングを使用する。ＧＲ順序は、２または３であり得る。また、ＧＲ オーダーは、シンボル数のデフォルトの範囲に応じて、異なる値に設定することもできる。
ｉｉ．平均除去次数選択ＧＲ符号化を使用して相補インデックスを符号化する場合、ビット数を推定する。
ｉｉｉ．より少ないビット数を使用し、どの方法が使用されているかを示すためにビットを使用する符号化方法を使用する
４．そうでなければ、
ａ．（ステップ６１５によって図６に示されるように）次数１または２で平均除去ＧＲ符号化を使用して方位インデックスを符号化する。
５．終了
６．最小除去ＧＲ符号化がより良い出力を生成するかどうかをチェックし、それをより良く使用するかどうかをチェックする（図６のステップ６１７に示すように）
１．（ステップ６０７によって図６に示されるように）現在のサブバンドについて符号化されるべき方位インデックスの数を決定する
２．（図６のステップ６０９に示すように）電流サブバンドのタイルの記号の最大数を見つける
３．閾値よりも多くのシンボルがある場合（図６に示すように、ステップ６１１）
ａ．（図６のステップ６１３に示すように）相補値ｎｏ＿ｓｙｍｂ－ｉｎｄｅｘ＿ａｚｉｍｕｔｈによって与えられる値の符号化をチェックすることによって方位値を符号化する。
ｉ．インデックスを前にあるように符号化する場合、ビット数を推定する。平均除去順序選択的ゴロム・ライスコーディングを使用する。ＧＲ順序は、２または３であり得る。また、ＧＲ オーダーは、シンボル数のデフォルトの範囲に応じて、異なる値に設定することもできる。
ｉｉ．平均除去次数選択ＧＲ符号化を使用して相補インデックスを符号化する場合、ビット数を推定する。
ｉｉｉ．より少ないビット数を使用し、どの方法が使用されているかを示すためにビットを使用する符号化方法を使用する
４．そうでなければ、
ａ．（ステップ６１５によって図６に示されるように）次数１または２で平均除去ＧＲ符号化を使用して方位インデックスを符号化する。
５．終了
６．最小除去ＧＲ符号化がより良い出力を生成するかどうかをチェックし、それをより良く使用するかどうかをチェックする（図６のステップ６１７に示すように）
【0178】
Ｃ言語では、エンコーディングは次のようになる。
【数6-1】
【数6-2】
【数6-3】
【数6-4】
【0179】
【0180】
いくつかの実施形態では、メタデータ抽出器１３７が、符号化された信号を受信し、符号化されたエネルギー比値をエネルギー比デコーダ７０３に出力し、信号ビットをエントロピー符号化モード検出器７０５およびサブバンド検出器７０７に出力し、符号化されたインデックスをインデックスデコーダ７０９に出力するように構成されたデマルチプレクサ７０１を備える。
【0181】
メタデータ抽出器１３７は、復号されたエネルギー比を生成するために、符号化されたエネルギー比を受信し、復号するように構成されたエネルギー比デコーダ７０３をさらに備えることができる。復号化されたエネルギー比７０４は、出力されることができる。エネルギー比デコーダ７０３はさらに、符号化されたエネルギー比値に基づいてエネルギー比に基づく量子化解像度値７０８を生成し、これをインデックスデコーダおよび方向インデックス－方向値（ＡＺ／ＥＬ）変換器７１１に渡すことができる。
【0182】
メタデータ抽出器１３７はさらに、エントロピー符号化（ＥＣ）モード検出器７０５を備えることができる。ＥＣモード検出器は、ブロックがすべて固定レートモードで符号化されたかどうか（ブロックが符号化されたインデックス値を含むかどうか、したがって、エントロピー復号が必要とされないかどうか）、またはエントロピー固定レートハイブリッド符号化がこのブロックについて実施されたかどうかを示す、ブロック内の第１のビットを読み取ることができる。
【0183】
したがって、エントロピー符号化モード検出器７０５は、第１のビット（モードインジケータ）に基づいてインデッデコーダ７０９を制御するように構成され得る。
【0184】
メタデータ抽出器１３７は、サブバンド検出器７０７をさらに備えることができる。サブバンド検出器７０７はブロック内の次のビット（例えば、５つのサブバンドがある場合、５ビットがある）を読み取ることができ、このビットは、ブロックについて、どのサブバンドが固定レート方法にしたがって符号化されているか、およびどのサブバンドがエントロピー方法にしたがって符号化されているかを示す。
【0185】
したがって、サブバンド検出器７０７は、読み出しビット（サブバンドインジケータ）に基づいてインデックスデコーダ７０９を制御するように構成され得る。
【0186】
メタデータ抽出器１３７はさらに、インデックスデコーダ７０９を備えることができる。サブバンドのメタデータ符号化値を受信したインデックスデコーダ７０９は、サブバンド検出器７０７およびエントロピーモード検出器７０５によって制御することができる。
【0187】
したがって、例えば、インデックスデコーダ７０９は、モードインジケータが、ハイブリッドモードがディスエーブルされていることを示すときに、メタデータ符号化値を固定レート復号するように構成され得る。
【0188】
さらに、インデックスデコーダ７０９は、サブバンドインジケータに基づいてエントロピー符号化されたサブバンドを復号するように構成され得る。エントロピー値を読み取り、復号した後、利用可能なビットと読み取られたビット（インジケータビットおよびエントロピー符号化方向インデックスビット）との間の差が決定される。インデックスデコーダ７０９はさらに、その差が、量子化解像度値７０８に基づくエネルギー比に基づいて、残りの符号化サブバンドを固定レート符号化するために必要なビット数よりも少ないか否かを判断するように構成される。言い換えると、差（ｂｉｔｓ＿ａｖａｉｌａｂｌｅ－ｂｉｔｓ＿ｒｅａｄ）＜ｓｕｍ（ｂｉｔｓ＿ｄｉｒ０［ｉ］［ｊ］）（ｉ＝固定レート符号化されたサブバンドのインデックス、ｊ＝０：Ｍ－１）かどうかである。
【0189】
差が量子化解像度値７０８に基づくエネルギー比に基づいて割り当てられたビット数未満である場合、インデックスデコーダは固定レートサブバンドのための量子化解像度変更を使用して符号化が実施されたかどうかを決定するように構成され、復号はエンコ－ダで実施されたのと同じ方法で決定された低減された量子化解像度に基づいて固定レートサブバンド上で実行される。差が正しい場合、元の解像度を使用して固定レートのサブバンドを復号する。
【0190】
次に、復号された方向パラメータ７１２を出力することができる。
【0191】
したがって、いくつかの実施形態では、２つの還元レベルがあり得る。
【0192】
（差が十分に小さい場合の）より微細な低減レベルは、以下のようにシグナリングされる。
【0193】
各時間周波数ブロックの元のビット数はエネルギー量子化比によって決定される。第１に、ＥＣまたは固定レート符号化を使用しているサブバンドのシグナリングがある。ＥＣ符号化されたサブバンドは最初に書き込まれ、したがって、それらを読み出すときに、それらが何ビットを使用したかが分かる。また、固定レート符号化されたサブバンドの使用可能なビット数と所定のビット数は既知である。所定のビット数＋ＥＣ符号化されたサブバンドのビットが利用可能なビットに適合する場合、全て良好であり、したがって、減少はなく、さもなければ、わずかな減少がある。
【0194】
より粗い、または「より厳しい」縮小では、（ステップ４１１に対応して）ビット割当てが利用可能なビット限界の数まで縮小されるか否かをデコーダに指示するために、始めに１ビットが送られる。
【0195】
【0196】
したがって、この方法は図８のステップ８０１に示すように、符号化データを受信することを含む。
【0197】
符号化されたデータは図８に示すように、ステップ８０３によって逆多重化される。
【0198】
次に、ＥＣモード信号ビットを読み出して、ハイブリッドエントロピー符号化方法が採用されているか否かを判断し、ステップ８０５によって図８に示すように、ファインＥＣモード（または粗いＥＣモード）符号化が採用されているか否かを判断する。
【0199】
ＥＣモード信号ビットが粗い率低減が適用されたことを示す場合、ステップ８０６によって図８に示されるように、復号は、（粗い率低減エネルギー比量子化解像度を実装するいくつかの実施形態において）復号に基づく率低減のみに基づいて実行される。
【0200】
ＥＣモード・信号・ビットがハイブリッド・エントロピー固定レート・エンコーディングが使用されたこと、および微レート低減（量子化解像度の修正のみ）またはレート低減が要求されなかったことを示す場合、次の動作は、サブバンド・信号・ビットを読み取って、どのサブバンドがエントロピー・符号化されたか、および、どのサブバンドがステップ８０７によって図８に示されるように固定レート・符号化されたかを決定することのうちの１つである。
【0201】
グループ化されたエントロピー符号化サブバンドビットは、ステップ８０９によって図８に示されるように、元のエネルギー比量子化解像度に基づいて方向に変換することができる方向インデックスを生成するように読み取り、復号される。
【0202】
次の動作は、ブロックに利用可能なビットと読み出されたビット（シグナリングおよびＥＣ符号化ビット）との間の差が、ステップ８１１によって図８に示されるように、元のエネルギー比量子化解像度にしたがって残りの固定レートビットを符号化するのに必要なビット数未満であるかどうかを決定するうちの１つである。
【0203】
差が必要とされるビット数よりも小さい場合、ステップ８１３によって図８に示されるように、修正された量子化解像度方法に基づいて、「微」レート低減符号化に対して復号化を実行することができる。
【0204】
差が必要とされるビット数よりも小さくない（または等しい）場合、ステップ８１２によって図８に示されるように、元の量子化解像度方法に基づいて符号化に対して復号化を実行することができる。
【0205】
図９を参照すると、分析または合成装置として使用することができる例示的な電子装置が示されている。デバイスは、任意の適切な電子デバイスまたは装置であり得る。例えば、いくつかの実施形態では、デバイス１４００がモバイルデバイス、ユーザ装置、タブレットコンピュータ、コンピュータ、オーディオ再生装置などである。
【0206】
いくつかの実施形態では、デバイス１４００が少なくとも１つのプロセッサまたは中央処理装置１４０７を備える。プロセッサ１４０７は、本明細書で説明されるような方法などの様々なプログラムコードを実行するように構成され得る。
【0207】
いくつかの実施形態では、装置１４００がメモリ１４１１を備える。いくつかの実施形態では、少なくとも１つのプロセッサ１４０７がメモリ１４１１に結合される。メモリ１４１１は、任意の適切な格納手段とすることができる。ある実施形態では、メモリ１４１１がプロセッサ１４０７上に実装可能なプログラムコードを格納するためのプログラムコードセクションを含む。さらに、いくつかの実施形態では、メモリ１４１１がデータ、例えば、本明細書で説明される実施形態にしたがって処理された、または処理されるべきデータを格納するための格納されたデータセクションをさらに備えることができる。プログラム・コード・セクション内に格納された実施されたプログラム・コードおよび格納されたデータ・セクション内に格納されたデータは、メモリ・プロセッサ結合を介して必要なときにいつでもプロセッサ１４０７によって検索することができる。
【0208】
いくつかの実施形態では、装置１４００がユーザインターフェース１４０５を備える。ユーザインターフェース１４０５は、いくつかの実施形態ではプロセッサ１４０７に結合することができる。いくつかの実施形態では、プロセッサ１４０７がユーザインターフェース１４０５の動作を制御し、ユーザインターフェース１４０５から入力を受信することができる。ある実施形態では、ユーザインターフェース１４０５が、ユーザが例えばキーパッドを介して、装置１４００にコマンドを入力することを可能にすることができる。いくつかの実施形態では、ユーザインターフェース１４０５が、ユーザが装置１４００から情報を取得することを可能にすることができる。例えば、ユーザインターフェース１４０５は、装置１４００からユーザに情報を表示するように構成されたディスプレイを含んでもよい。ユーザインターフェース１４０５は、いくつかの実施形態では、情報をデバイス１４００に入力することを可能にすることと、さらに情報をデバイス１４００のユーザに表示することとの両方が可能なタッチスクリーンまたはタッチインターフェースを備えることができる。いくつかの実施形態では、ユーザインターフェース１４０５が本明細書で説明されるように、位置決定器と通信するためのユーザインターフェースであり得る。
【0209】
いくつかの実施形態では、装置１４００が入力／出力ポート１４０９を備える。入出力ポート１４０９は、いくつかの実施形態ではトランシーバを備える。そのような実施形態におけるトランシーバはプロセッサ１４０７に結合され、例えば、無線通信ネットワークを介して、他の装置または電子デバイスとの通信を可能にするように構成され得る。トランシーバまたは任意の好適なトランシーバまたは送信機および／または受信機手段は、いくつかの実施形態では有線または有線結合を介して他の電子デバイスまたは装置と通信するように構成することができる。
【0210】
トランシーバは、任意の適切な既知の通信プロトコルによって、さらなる装置と通信することができる。例えば、いくつかの実施形態では、トランシーバは、適切なユニバーサル移動通信システム（ＵＭＴＳ）プロトコル、例えばＩＥＥＥ８０２．Ｘのような無線ローカルエリアネットワーク（ＷＬＡＮ）プロトコル、Ｂｌｕｅｔｏｏｔｈ（登録商標）のような適切な短距離無線周波数通信プロトコル、または赤外線データ通信経路（ＩＲＤＡ）を使用することができる。
【0211】
トランシーバ入出力ポート１４０９は信号を受信するように構成することができ、いくつかの実施形態では、適切なコードを実行するプロセッサ１４０７を使用することによって、本明細書で説明するようにパラメータを決定する。
【0212】
一般に、本発明の様々な実施形態は、ハードウェアまたは専用回路、ソフトウェア、ロジック、またはそれらの任意の組合せで実施することができる。例えば、いくつかの態様はハードウェアで実装されてもよく、他の態様はコントローラ、マイクロプロセッサ、または他の計算装置によって実行されることができるファームウェアまたはソフトウェアで実装されることができるが、本発明はそれに限定されない。本発明の様々な態様は、ブロック図、フローチャートとして、またはいくつかの他の絵画的表現を使用して図示および目的され得るが、本明細書で目的されるこれらのブロック、装置、システム、技術、または方法は、非限定的な例として、ハードウェア、ソフトウェア、ファームウェア、専用回路もしくは論理、汎用ハードウェアもしくはコントローラ、または他の計算装置、あるいはそれらのいくつかの組合せで実装され得ることをよく理解されたい。
【0213】
本発明の実施形態は、プロセッサエンティティ内などのモバイル装置のデータプロセッサによって実行可能なコンピュータソフトウェアによって、または、ハードウェアによって、あるいはソフトウェアとハードウェアの組み合わせによって実行可能なコンピュータソフトウェアによって実現することができる。さらに、この点に関して、図のような論理フローの任意のブロックは、プログラムステップ、または相互接続された論理回路、ブロックおよび機能、またはプログラムステップと論理回路、ブロックおよび機能の組合せを表すことができることに留意されたい。このソフトウェアは、メモリチップなどの物理媒体、またはプロセッサ内に実装されたメモリブロック、ハードディスクまたはフロッピー（登録商標）ディスクなどの磁気媒体、およびたとえばＤＶＤやそのデータ変異体などの光学媒体に格納することができる。
【0214】
メモリはローカル技術環境に適した任意のタイプのものとすることができ、半導体ベースのメモリデバイス、磁気メモリデバイスおよびシステム、光メモリデバイスおよびシステム、固定メモリおよびリムーバブルメモリなど、任意の適切なデータ格納技術を使用して実装することができる。データプロセッサはローカル技術環境に適した任意のタイプとすることができ、非限定的な例として、汎用コンピュータ、専用コンピュータ、マイクロプロセッサ、デジタル信号プロセッサ（ＤＳＰ）、特定用途向け集積回路（ＡＳＩＣ）、ゲートレベル回路、およびマルチコアプロセッサアーキテクチャに基づくプロセッサのうちの１つまたは複数を含むことができる。
【0215】
本発明の実施形態は、集積回路モジュールなどの様々な部品で実施することができる。集積回路の設計は高度に自動化された処理によるものであり、大規模である。論理レベルの設計を、エッチングされ、半導体基板上に形成される準備ができている整った半導体回路設計に変換するための、複雑で強力なソフトウェアツールが利用可能である。
【0216】
カリフォルニア州マウンテンビューにあるシノプシス社（Ｓｙｎｏｐｓｙｓ）、カリフォルニア州サンノゼにあるケーデンス・デザイン社（Ｃａｄｅｎｃｅ Ｄｅｓｉｇｎ）から提供されているようなプログラムは、設計の十分に確立されたルール、および予め格納された設計モジュールのライブラリを用いて、導体を自動的にルーティングし、半導体チップ上の部品の位置を特定する。半導体回路の設計が完了すると、標準化された電子フォーマット（例えば、Ｏｐｕｓ、ＧＤＳＩＩなど）の結果として得られる設計は、製造のために半導体製造施設または「ファブ」に送信されることができる。
【0217】
前述の説明は、本発明の例示的な実施形態の完全かつ有益な説明を、例示的かつ非限定的な例として提供した。しかしながら、添付の図面および付随の請求項を熟読する際に、前述の説明を考慮して、種々の修正および適合が、当業者に明白になるのであろう。しかしながら、本発明の教示の全てのそのような同様の修正は、添付の特許請求の範囲に定義される本発明の範囲内に依然として含まれる。
【図1】
【図2】
【図3】
【図4a】
【図4b】
【図4c】
【図5】
【図6】
【図7】
【図8】
【図9】
【手続補正書】
【提出日】2022-05-10
【手続補正1】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項1】
時間周波数ブロックに対する空間オーディオ信号指向性メタデータパラメータを生成し、第１量子化解像度に基づいて、時間周波数ブロックのための符号化空間オーディオ信号指向性メタデータパラメータを生成し、
第１量子化解像度に基づく時間周波数ブロックの前記符号化空間オーディオ信号指向性メタデータパラメータに使用されるビット数を、決定されたビット数と比較し、
前記第１量子化解像度に基づく前記時間周波数ブロックのための符号化空間オーディオ信号指向性パラメータのために使用されるビット数が、決定されたビット数未満である場合、第１量子化解像度に基づく時間周波数ブロックのための前記符号化空間オーディオ信号指向性メタデータパラメータを出力または格納し、
前記第１量子化解像度に基づく前記時間周波数ブロックの前記符号化空間オーディオ信号指向性パラメータに使用されるビット数が、前記決定されたビット数よりも多く、前記決定されたビット数と、前記第１量子化解像度に基づく前記時間周波数ブロックの前記符号化空間オーディオ信号指向性パラメータに使用されるビット数との間の差が決定されたビット数よりも少なく、決定されたビット数未満である場合に、第２量子化解像度に基づいて、前記時間周波数ブロックの符号化空間オーディオ信号指向性メタデータパラメータを生成し、前記第１量子化解像度に基づく前記時間周波数ブロックのための前記符号化空間オーディオ信号指向性パラメータに使用されるビット数が、前記決定されたビット数よりも大きく、および、前記決定されたビット数と、前記第１量子化解像度に基づく前記時間周波数ブロックのための前記符号化空間オーディオ信号指向性パラメータに使用された前記ビット数との間の差が、前記決定された閾値よりも大きいとき、第３量子化解像度に基づく前記時間周波数ブロックのための符号化空間オーディオ信号指向性メタデータパラメータを生成する、
ように構成された手段を備える装置であって、
前記第３量子化解像度は、前記第３量子化解像度に基づく前記時間周波数ブロックのための符号化空間オーディオ信号指向性パラメータに使用されるビット数が、常に、決定されたビット数以下であるように決定される、装置。
【請求項2】
第１量子化解像度に基づいて時間周波数ブロックについて符号化空間オーディオ信号指向性メタデータパラメータを生成するように構成された手段は、前記空間オーディオ信号指向性メタデータパラメータの値とインデックス値との間のマッピングのための前記第１量子化解像度を決定し、前記第１量子化解像度を使用するマッピングに基づいて、前記空間オーディオ信号指向性メタデータパラメータに関連するインデックスを生成し、固定レート符号化またはエントロピー符号化がより少ないビット数を使用するかどうかに基づいて、該固定レート符号化またはエントロピー符号化を使用して前記インデックスを選択的に符号化するように構成される、請求項１に記載の装置。
【請求項3】
前記空間オーディオ信号指向性メタデータパラメータの値とインデックス値との間のマッピングのための前記第１量子化解像度を決定するように構成された前記手段は、前記空間オーディオ信号指向性メタデータパラメータに関連するエネルギー比値に基づいて前記空間オーディオ信号指向性メタデータパラメータの値とインデックス値との間のマッピングのための前記第１量子化解像度を決定するように構成される、請求項２に記載の装置。
【請求項4】
前記決定されたビット数と、前記第１量子化解像度に基づく前記時間周波数ブロックのための前記符号化空間オーディオ信号指向性パラメータのために使用されるビット数との間の差異が、決定された閾値内にある場合に、第２量子化解像度に基づいて、前記時間周波数ブロックのための符号化空間オーディオ信号指向性メタデータパラメータを生成するように構成された前記手段は、前記空間オーディオ信号指向性メタデータパラメータの値とインデックス値との間のマッピングのための前記第２量子化解像度を決定し、前記第１量子化解像度を使用して固定レート符号化された空間オーディオ信号指向性メタデータパラメータのための前記第２量子化解像度を使用する前記マッピングに基づいて、前記空間オーディオ信号指向性メタデータパラメータに関連するインデックスを生成するように構成される、請求項２または３に記載の装置。
【請求項5】
前記手段はさらに、空間オーディオ信号指向性メタデータパラメータのための前記第１量子化解像度を使用するマッピングに基づく前記空間オーディオ信号指向性メタデータパラメータに関連する前記エントロピー符号化のインデックスと、空間オーディオ信号指向性メタデータパラメータのための前記第２量子化解像度を使用する前記マッピングに基づく前記空間オーディオ信号指向性メタデータパラメータに関連する前記固定レート符号化のインデックスと、を出力または格納するように構成される、請求項４に記載の装置。
【請求項6】
前記手段は、前記エントロピー符号化の前記インデックスが前記固定レート符号化の前記インデックスに先行するように、前記符号化のインデックスを順序付けるようにさらに構成される、請求項５に記載の装置。
【請求項7】
前記手段は、前記第１または第２量子化解像度が使用されるときに指標を生成するようにさらに構成される、請求項１ないし６のいずれか１項に記載の装置。
【請求項8】
第３量子化解像度に基づいて前記時間周波数ブロックのための符号化空間オーディオ信号指向性メタデータパラメータを生成するように構成された前記手段は、前記第３量子化解像度を使用して、常に、前記決定されたビット数以下である固定レート符号化に使用されるビット数に基づいて、前記空間オーディオ信号指向性メタデータパラメータの値とインデックス値との間のマッピングのための前記第３量子化解像度を決定し、前記第３量子化解像度を使用するマッピングに基づいて、前記空間オーディオ信号指向性メタデータパラメータに関連するインデックスを生成し、
固定レート符号化またはエントロピー符号化がより少ないビット数を使用するかどうかに基づいて、固定レート符号化またはエントロピー符号化を使用してインデックスを選択的に符号化するように構成される、
請求項１ないし７のいずれか１項に記載の装置。
【請求項9】
前記手段は、前記固定レート符号化またはエントロピー符号化がより少ないビット数を使用するかどうかに基づいて、固定レート符号化またはエントロピー符号化を使用して、前記選択的に符号化されたインデックスを出力するようにさらに構成される、請求項８に記載の装置。
【請求項10】
前記手段は、前記第３量子化解像度が決定されたときに指標を生成するようにさらに構成される、請求項１ないし９のいずれか１項に記載の装置。
【請求項11】
時間周波数ブロックの符号化空間オーディオ信号指向性メタデータパラメータを受信し、前記符号化空間オーディオ信号指向性メタデータパラメータが、常に決定されたビット数以下である量子化解像度に基づいて符号化されたかどうかを識別するように構成されたインジケータを受信し、
前記インジケータが、前記符号化空間オーディオ信号指向性メタデータパラメータが常に決定されたビット数以下である量子化解像度に基づいて符号化されたことを識別するとき、常に決定されたビット数以下である量子化解像度に基づいて、前記時間周波数ブロックのための前記符号化空間オーディオ信号指向性メタデータパラメータを復号するように構成された手段を含む装置であって、
前記インジケータが、前記符号化空間オーディオ信号指向性メタデータパラメータが常に決められたビット数以下である量子化解像度に基づいて符号化されなかったことを識別するとき、前記手段は、さらなる量子化解像度に基づいて前記時間周波数ブロックの前記符号化空間オーディオ信号指向性メタデータパラメータの第１部分を復号し、ここで、該第１部分は、前記さらなる量子化解像度に基づいて前記時間周波数ブロックのエントロピー符号化空間オーディオ信号指向性メタデータパラメータを含むものであり、
前記決定されたビット数と前記第１部分を符号化するために使用されるビット数との間の差が前記さらなる量子化解像度に基づいて前記時間周波数ブロックのための前記符号化空間オーディオ信号指向性メタデータパラメータの第２部分を符号化するために必要とされるビット数未満である場合、低減ビット量子化解像度に基づいて前記時間周波数ブロックのための固定レート符号化空間オーディオ信号指向性メタデータパラメータを含む前記第２部分を復号し、そうでなければ、前記さらなる量子化解像度に基づいて前記時間周波数ブロックのための固定レート符号化空間オーディオ信号指向性メタデータパラメータを含む前記第２部分を復号するように構成される、装置。
【請求項12】
前記手段は、前記符号化空間オーディオ信号指向性メタデータパラメータの値とインデックス値との間のマッピングのために、前記さらなる量子化解像度を決定するようにさらに構成される、請求項１１に記載の装置。
【請求項13】
前記符号化空間オーディオ信号指向性メタデータパラメータの値と前記インデックス値との間のマッピングのための前記さらなる量子化解像度を決定するように構成された前記手段は、前記符号化空間オーディオ信号指向性メタデータパラメータに関連するエネルギー比値に基づいて、前記さらなる量子化解像度を決定するように構成される、請求項１２に記載の装置。
【請求項14】
前記手段は、前記符号化空間オーディオ信号指向性メタデータパラメータの値とインデックス値との間のマッピングのために、前記低減ビット量子化解像度を決定するようにさらに構成される、請求項１１ないし１３のいずれか１項に記載の装置。
【請求項15】
前記手段は、前記量子化解像度に基づいて、前記符号化空間オーディオ信号指向性メタデータパラメータに関連するインデックスから、仰角および方位角のうちの少なくとも１つへのマッピングを生成するように構成される、請求項１１ないし１４のいずれか１項に記載の装置。
【請求項16】
時間周波数ブロックのための空間オーディオ信号指向性メタデータパラメータを生成するステップと、第１量子化解像度に基づいて時間周波数のブロックのための符号化空間オーディオ信号指向性メタデータパラメータを生成するステップと、
前記第１量子化解像度に基づく時間周波数ブロックの符号化空間オーディオ信号指向性パラメータに使用されるビット数と、決定されたビット数とを比較するステップと、
前記第１量子化解像度に基づく時間周波数ブロックのための前記符号化空間オーディオ信号指向性パラメータのために使用されるビット数が、決定されたビット数未満である場合、第１量子化解像度に基づく時間周波数ブロックのための符号化空間オーディオ信号指向性メタデータパラメータを出力または格納するステップと、
前記第１量子化解像度に基づいて前記時間周波数ブロックのための前記符号化空間オーディオ信号指向性パラメータに使用されるビット数が、前記決定されたビット数より多く、前記決定されたビット数と、前記第１量子化解像度に基づいて時間周波数ブロックのための前記符号化空間オーディオ信号指向性パラメータに使用されるビット数との差が、決定されたビット数未満であり、決定された閾値内であるとき、第２量子化解像度に基づいて時間周波数ブロックのための符号化空間オーディオ信号指向性メタデータパラメータを生成するステップと、
前記第１量子化解像度に基づく前記時間周波数ブロックのための前記符号化空間オーディオ信号指向性パラメータに用いられた前記ビット数が、前記決定されたビット数よりも大きく、および、前記決定されたビット数と、前記第１量子化解像度に基づく前記時間周波数ブロックのための前記符号化空間オーディオ信号指向性パラメータのために使用される前記ビット数との間の差が、前記決定された閾値よりも大きいとき、第３量子化解像度に基づいた前記時間周波数ブロックのための符号化空間オーディオ信号指向性パラメータを生成するステップであって、前記第３量子化解像度は、該第３量子化解像度に基づく前記時間周波数ブロックのための符号化空間オーディオ信号指向性パラメータのために使用されるビット数が、常に、前記決定されたビット数以下であるように決定される、ステップと、
を含む方法。
【請求項17】
時間周波数ブロックのための符号化空間オーディオ信号指向性メタデータパラメータを受信するステップと、前記符号化空間オーディオ信号指向性メタデータパラメータが、常に決定されたビット数以下である量子化解像度に基づいて符号化されたかどうかを識別するように構成されたインジケータを受信するステップと、
前記インジケータが、前記符号化した空間オーディオ信号指向性メタデータパラメータが常に所定のビット数以下である量子化解像度に基づいて符号化されたことを識別するときに、常に所定のビット数以下である量子化解像度に基づいて、前記時間周波数ブロックのための符号化された前記空間オーディオ信号指向性メタデータパラメータを復号するステップと、
を含む方法であって、
前記インジケータが、前記符号化空間オーディオ信号指向性メタデータパラメータが常に決定されたビット数以下である量子化解像度に基づいて符号化されなかったことを識別する場合、該方法は、さらなる量子化解像度に基づいて前記時間周波数ブロックのための前記符号化空間オーディオ信号指向性メタデータパラメータの第１部分を復号するステップであって、前記第１部分は、前記さらなる量子化解像度に基づいて前記時間周波数ブロックのためのエントロピー符号化空間オーディオ信号指向性メタデータパラメータを含む、ステップと、
前記決定されたビット数と前記第１部分を符号化するために使用されるビット数との間の差が、前記さらなる量子化解像度に基づいて時間周波数ブロックのための前記符号化空間オーディオ信号指向性メタデータパラメータの第２部分を符号化するために必要とされるビット数未満である場合、低減ビット量子化解像度に基づいて前記時間周波数ブロックのための固定レート符号化空間オーディオ信号指向性メタデータパラメータを含む前記第２部分を復号し、そうでなければ、さらなる量子化解像度に基づいて前記時間周波数ブロックのための固定レート符号化空間オーディオ信号指向性メタデータパラメータを含む前記第２部分を復号するステップと、
を含む、方法。
【国際調査報告】