特許 7297803 低ビットレートで背景ノイズをモデル化するためのコンフォートノイズ付加

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2023-06-16

(45)【発行日】2023-06-26

(54)【発明の名称】低ビットレートで背景ノイズをモデル化するためのコンフォートノイズ付加

(51)【国際特許分類】

   G10L 19/012 20130101AFI20230619BHJP

【ＦＩ】

G10L19/012

【請求項の数】 25

(21)【出願番号】P 2021034012

(22)【出願日】2021-03-04

(62)【分割の表示】P 2018000043の分割

【原出願日】2013-12-19

(65)【公開番号】P2021092816

(43)【公開日】2021-06-17

【審査請求日】2021-03-29

(31)【優先権主張番号】61/740,883

(32)【優先日】2012-12-21

(33)【優先権主張国・地域又は機関】US

(73)【特許権者】

【識別番号】500341779

【氏名又は名称】フラウンホーファー－ゲゼルシャフト・ツール・フェルデルング・デル・アンゲヴァンテン・フォルシュング・アインゲトラーゲネル・フェライン

(74)【代理人】

【識別番号】100205981

【弁理士】

【氏名又は名称】野口 大輔

(72)【発明者】

【氏名】フッハス，ギローム

(72)【発明者】

【氏名】ロンバード，アンソニー

(72)【発明者】

【氏名】ラベリー，エマニュエル

(72)【発明者】

【氏名】デーラ，ステファン

(72)【発明者】

【氏名】レコンテ，ジェレミー

(72)【発明者】

【氏名】ディーツ，マルチン

【審査官】冨澤 直樹

(56)【参考文献】

【文献】特許第６８４９６１９（ＪＰ，Ｂ２）

【文献】特開２００７－０６５６３６（ＪＰ，Ａ）

【文献】特表２００３－５２２９６４（ＪＰ，Ａ）

【文献】特表２０１１－５１６９０１（ＪＰ，Ａ）

【文献】国際公開第２０１１／０４９５１５（ＷＯ，Ａ１）

【文献】特開平１１－２０５４８５（ＪＰ，Ａ）

【文献】国際公開第２０１２／０５５０１６（ＷＯ，Ａ１）

【文献】特開２００５－１１４８９０（ＪＰ，Ａ）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｇ１０Ｌ １９／００－１９／２６

Ｈ０４Ｒ ３／００－３／１４

Ｇ１０Ｌ １５／００－１５／１２

(57)【特許請求の範囲】

【請求項1】

符号化済みのオーディオビットストリーム（ＢＳ）を処理するよう構成された復号器（１）であって、
前記ビットストリーム（ＢＳ）から復号化済みオーディオ信号（ＤＳ）を導出するよう構成されたビットストリーム復号器（２）であって、前記復号化済みオーディオ信号（ＤＳ）が１つ以上の復号化済みフレームを含む、ビットストリーム復号器（２）と、
前記復号化済みオーディオ信号（ＤＳ）内のノイズ（Ｎ）のレベル及び／又はスペクトル形状の推定を含むノイズ推定信号（ＮＥ）を生成するよう構成されたノイズ推定装置（３）と、
前記ノイズ推定信号（ＮＥ）からコンフォートノイズ信号（ＣＮ）を導出するよう構成されたコンフォートノイズ生成装置（４）であって、前記コンフォートノイズ信号（ＣＮ）は前記復号化済みオーディオ信号（ＤＳ）内の符号化アーチファクトをマスキングするための人工的ノイズである、コンフォートノイズ生成装置（４）と、
前記復号化済みオーディオ信号（ＤＳ）の前記復号化済みフレームと前記コンフォートノイズ信号（ＣＮ）とを前記復号器（１）の非不連続な動作モードにおいて結合してオーディオ出力信号（ＯＳ）を得るよう構成され、前記オーディオ出力信号（ＯＳ）内の前記復号化済みフレームが人工的ノイズを含むようにする、結合部（５）と、
を含む復号器（１）。

【請求項2】

前記１つ以上の復号化済みフレームが活性フレームを含む、請求項１に記載の復号器。

【請求項3】

前記１つ以上の復号化済みフレームが不活性フレームを含む、請求項１又は２に記載の復号器。

【請求項4】

前記ノイズ推定装置（３）は、前記復号化済みオーディオ信号（ＤＳ）内の前記ノイズ（Ｎ）のレベル及びスペクトル形状を含む分析信号（ＡＳ）を生成するよう構成されたスペクトル分析装置（６）と、前記分析信号（ＡＳ）に基づいてノイズ推定信号（ＮＥ）を生成するよう構成されたノイズ推定生成装置（７）とを含む、請求項１乃至３のいずれか一項に記載の復号器。

【請求項5】

前記コンフォートノイズ生成装置（４）は、前記ノイズ推定信号（ＮＥ）に基づいて周波数ドメインのコンフォートノイズ信号（ＦＤ）を生成するよう構成されたノイズ生成部（８）と、前記周波数ドメインのコンフォートノイズ信号（ＦＤ）に基づいて前記コンフォートノイズ信号（ＣＮ）を生成するよう構成されたスペクトル合成部（９）とを含む、請求項１乃至４のいずれか一項に記載の復号器。

【請求項6】

前記復号器（１）は、第１操作モード又は第２操作モードへと択一的に前記復号器を切り替えるよう構成されたスイッチ装置（１０）を含み、前記第１操作モードにおいては前記コンフォートノイズ信号（ＣＮ）が前記結合部（５）へ供給され、前記第２操作モードにおいては前記コンフォートノイズ信号（ＣＮ）が前記結合部（５）へ供給されない、請求項１乃至５のいずれか一項に記載の復号器。

【請求項7】

前記復号器（１）は、前記スイッチ装置（１０）を自動的に制御するよう構成された制御装置（１１）を含み、前記制御装置（１１）は、前記復号化済みオーディオ信号（ＤＳ）の信号対ノイズ比に依存して前記スイッチ装置（１０）を制御するよう構成されたノイズ検出部（１２）を含み、前記復号器（１）は、信号対ノイズ比が低い状況下では前記第１操作モードへと切り替えられ、信号対ノイズ比が高い状況下では前記第２操作モードへと切り替えられる、請求項６に記載の復号器。

【請求項8】

前記制御装置（１１）は、前記ビットストリーム（ＢＳ）内に含まれた、前記復号化済みオーディオ信号（ＤＳ）の前記信号対ノイズ比に対応するサイド情報を受信し、ノイズ検出信号（ＮＤ）を生成するよう構成されたサイド情報受信部（１３）を含み、前記ノイズ検出部（１２）は、前記ノイズ検出信号（ＮＤ）に依存して前記スイッチ装置（１０）を切り替える、請求項７に記載の復号器。

【請求項9】

前記復号化済みオーディオ信号（ＤＳ）の信号対ノイズ比に対応するサイド情報は、前記ビットストリーム（ＢＳ）内の少なくとも１つの専用ビットから構成される、請求項８に記載の復号器。

【請求項10】

前記制御装置（１１）は、前記復号化済みオーディオ信号（ＤＳ）の所望信号（ＷＳ）のエネルギーを決定するよう構成された所望信号エネルギー推定部（１４）と、前記復号化済みオーディオ信号（ＤＳ）のノイズ（Ｎ）のエネルギーを決定するよう構成されたノイズエネルギー推定部（１５）と、前記所望信号（ＷＳ）のエネルギーと前記ノイズ（Ｎ）のエネルギーとに基づいて前記復号化済みオーディオ信号（ＤＳ）の信号対ノイズ比を決定するよう構成された信号対ノイズ比推定部（１６）と、を含み、前記制御装置（１１）によって決定された前記信号対ノイズ比に依存して前記スイッチ装置（１０）が切り替えられる、請求項７乃至９のいずれか一項に記載の復号器。

【請求項11】

前記ビットストリームは活性フレームと不活性フレームとを含み、前記制御装置（１１）は、前記復号化済みオーディオ信号（ＤＳ）の前記所望信号（ＷＳ）のエネルギーを前記活性フレームの期間中に決定し、前記復号化済みオーディオ信号（ＤＳ）の前記ノイズ（Ｎ）のエネルギーを前記不活性フレームの期間中に決定するよう構成されている、請求項７乃至１０のいずれか一項に記載の復号器。

【請求項12】

前記ビットストリームは活性フレームと不活性フレームとを含み、前記復号器（１）はサイド情報受信部（１７）を含み、前記サイド情報受信部（１７）は、前記ビットストリーム（ＢＳ）内の現在のフレームが活性か不活性かを示すサイド情報に基づいて、前記活性フレームと前記不活性フレームとを区別するよう構成されている、請求項１乃至１１のいずれか一項に記載の復号器。

【請求項13】

前記現在のフレームが活性か不活性かを示すサイド情報は、前記ビットストリーム（ＢＳ）内の少なくとも１つの専用ビットから構成されている、請求項１２に記載の復号器。

【請求項14】

前記制御装置（１１）は、前記復号化済みオーディオ信号（ＤＳ）の前記所望信号（ＷＳ）のエネルギーを、前記分析信号（ＡＳ）に基づいて決定するよう構成されている、請求項４及び請求項７乃至１３のいずれか一項に記載の復号器。

【請求項15】

前記制御装置（１１）は、前記復号化済みオーディオ信号（ＤＳ）の前記ノイズ（Ｎ）のエネルギーを、前記ノイズ推定信号（ＮＥ）に基づいて決定するよう構成されている、請求項７乃至１４のいずれか一項に記載の復号器。

【請求項16】

前記コンフォートノイズ生成装置（４）は、目標コンフォートノイズレベル信号（ＴＮＬ）に基づいて前記コンフォートノイズ信号（ＣＮ）を生成するよう構成されている、請求項１乃至１５のいずれか一項に記載の復号器。

【請求項17】

前記目標コンフォートノイズレベル信号（ＴＮＬ）は、前記ビットストリーム（ＢＳ）のビットレートに依存して調整される、請求項１６に記載の復号器。

【請求項18】

前記目標コンフォートノイズレベル信号（ＴＮＬ）は、前記ビットストリーム（ＢＳ）に適用されたノイズ低減方法によって引き起こされたノイズ減衰レベルに依存して調整される、請求項１５又は１７に記載の復号器。

【請求項19】

前記周波数ドメインのコンフォートノイズ信号（ＦＤ）の周波数帯域ｋのエネルギーＥ_ｗ（ｋ）は、前記目標コンフォートノイズレベル信号（ＴＮＬ）に依存して調整され、前記目標コンフォートノイズレベル信号（ＴＮＬ）は目標コンフォートノイズレベルｇ_ｔａｒを示し、各周波数帯域ｋについて、

であり、ここで、

は、前記ノイズ推定生成装置（７）によって供給された、前記周波数帯域ｋにおける前記復号化済みオーディオ信号（ＤＳ）の前記ノイズ（Ｎ）のエネルギーの推定を示す、請求項１６乃至１８のいずれか一項に記載の復号器。

【請求項20】

前記復号器（１）は更なるビットストリーム復号器を含み、前記ビットストリーム復号器（２）と前記更なるビットストリーム復号器とは異なるタイプのものであり、前記復号器（１）はスイッチを含み、そのスイッチは、前記ビットストリーム復号器（２）からの前記復号化済み信号（ＤＳ）、又は前記更なるビットストリーム復号器からの復号化済み信号のいずれかを、前記ノイズ推定装置（３）と前記結合部（５）とに供給するよう構成されている、請求項１乃至１９のいずれか一項に記載の復号器。

【請求項21】

オーディオビットストリーム（ＢＳ）を生成するよう構成された符号器（１８）であって、
オーディオ入力信号（ＩＳ）に対応する符号化済みオーディオ信号（ＥＳ）を生成し、前記符号化済みオーディオ信号（ＥＳ）から前記ビットストリーム（ＢＳ）を導出するよう構成されたビットストリーム符号器（２０）と、
所望信号エネルギー推定部（３１）により決定された前記オーディオ入力信号（ＩＳ）の所望信号（ＷＳ）のエネルギーとノイズエネルギー推定部（３２）により決定された前記オーディオ入力信号（ＩＳ）のノイズ（Ｎ）のエネルギーとに基づいて、前記オーディオ入力信号（ＩＳ）の信号対ノイズ比を決定するよう構成された信号対ノイズ比推定部（３３）を有し、前記信号対ノイズ比推定部（３３）は、活性フレームの期間中に前記オーディオ入力信号（ＩＳ）の前記所望信号（ＷＳ）の前記エネルギーのみが決定され、不活性フレームの期間中に前記オーディオ入力信号（ＩＳ）の前記ノイズ（N）の前記エネルギーのみが決定されるように構成されている、信号分析部（３０）と、
前記オーディオ入力信号（ＩＳ）の前記ノイズ（Ｎ）を減衰させることによってノイズ低減済みオーディオ信号（ＴＳ）を生成するよう構成されたノイズ低減装置（２７，２８）と、
前記オーディオ入力信号（ＩＳ）の決定された信号対ノイズ比に依存して、前記オーディオ入力信号（ＩＳ）又は前記ノイズ低減済みオーディオ信号（ＴＳ）のいずれかを、それぞれの信号（ＩＳ，ＴＳ）を符号化するために、前記ビットストリーム符号器（２０）に対して供給するよう構成されたスイッチ装置（３５）であって、前記ビットストリーム符号器（２０）は、前記オーディオ入力信号（ＩＳ）又は前記ノイズ低減済みオーディオ信号（ＴＳ）のどちらが符号化されているかを示すサイド情報（ＮＦ）を前記ビットストリーム（ＢＳ）内で伝送するよう構成されている、スイッチ装置（３５）と、
を含む符号器（１８）。

【請求項22】

復号器（１）と符号器（１８）とを含むシステムであって、前記復号器（１）が請求項１乃至１９のいずれか一項に記載のように設計され、及び／又は前記符号器（１８）が請求項２１に記載のように設計されている、システム。

【請求項23】

オーディオビットストリーム（ＢＳ）を復号化する方法であって、
前記ビットストリーム（ＢＳ）から復号化済みオーディオ信号（ＤＳ）を導出するステップであって、前記復号化済みオーディオ信号（ＤＳ）が少なくとも１つの復号化済みフレームを含むステップと、
前記復号化済みオーディオ信号（ＤＳ）内のノイズ（Ｎ）のレベル及び／又はスペクトル形状の推定を含むノイズ推定信号（ＮＥ）を生成するステップと、
前記ノイズ推定信号（ＮＥ）からコンフォートノイズ信号（ＣＮ）を導出するステップであって、前記コンフォートノイズ信号（ＣＮ）が前記復号化済みオーディオ信号（ＤＳ）内の符号化アーチファクトをマスキングするための人工的ノイズである、ステップと、
前記復号化済みオーディオ信号（ＤＳ）の前記復号化済みフレームと前記コンフォートノイズ信号（ＣＮ）とを復号器（１）の非不連続な動作モードにおいて結合して、オーディオ出力信号（ＯＳ）を得るステップであって、前記オーディオ出力信号（ＯＳ）内の前記復号化済みフレームが人工的ノイズを含むようにする、ステップと、
を含む方法。

【請求項24】

オーディオビットストリーム（ＢＳ）を生成するためのオーディオ信号符号化の方法であって、
オーディオ入力信号（ＩＳ）の所望信号（ＷＳ）の決定されたエネルギーと前記オーディオ入力信号（ＩＳ）のノイズ（Ｎ）の決定されたエネルギーとに基づいて、前記オーディオ入力信号（ＩＳ）の信号対ノイズ比を決定するステップであって、活性フレームの期間中に前記オーディオ入力信号（ＩＳ）の前記所望信号（ＷＳ）の前記エネルギーのみが決定され、不活性フレームの期間中に前記オーディオ入力信号（ＩＳ）の前記ノイズ（N）の前記エネルギーのみが決定される、ステップと、
前記オーディオ入力信号（ＩＳ）の前記ノイズ（Ｎ）を減衰させることによってノイズ低減済みオーディオ信号（ＴＳ）を生成するステップと、
前記オーディオ入力信号（ＩＳ）と対応する符号化済みオーディオ信号（ＥＳ）を生成するステップであって、前記オーディオ入力信号（ＩＳ）の決定された信号対ノイズ比に依存して、前記オーディオ入力信号（ＩＳ）と前記ノイズ低減済みオーディオ信号（ＴＳ）とのいずれかを符号化するステップと、
前記符号化済みオーディオ信号（ＥＳ）から前記ビットストリーム（ＢＳ）を導出するステップと、
前記オーディオ入力信号（ＩＳ）又は前記ノイズ低減済みオーディオ信号（ＴＳ）のどちらが符号化されているかを示すサイド情報（ＮＦ）を、前記ビットストリーム（ＢＳ）内で伝送するステップと、
を含む方法。

【請求項25】

コンピュータ又はプロセッサ上で作動したときに、請求項２３又は２４の方法を実行するためのコンピュータプログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、オーディオ信号処理に関し、特に、ノイズの多いスピーチの符号化とオーディオ信号に対するコンフォートノイズ付加とに関するものである。

【背景技術】

【0002】

コンフォートノイズ生成器は、通常、オーディオ信号、特にスピーチを含むオーディオ信号の不連続的な伝送（ＤＴＸ）において用いられる。このようなモードでは、オーディオ信号はまず、ボイス活性度検出部（ＶＡＤ）によって活性フレームと不活性フレームとに分類される。ＶＡＤの一例は、非特許文献１の中に見出すことができる。ＶＡＤの結果に基づき、活性スピーチフレームだけが基準ビットレートで符号化され、伝送される。背景ノイズだけが存在するような長いポーズ期間中は、ビットレートが低減されるか又はゼロにされ、背景ノイズが挿話的にかつパラメトリック的に符号化される。そのため、平均ビットレートは有意に低減される。ノイズは、不活性フレームの期間中に復号器側でコンフォートノイズ生成器（ＣＮＧ）によって生成される。例えば、非特許文献２に記載のスピーチコーダＡＭＲ－ＷＢと非特許文献１に記載のＩＴＵ Ｇ．７１８とは、ＤＴＸモードにおいて両方が作動される可能性を持つ。

【0003】

スピーチの符号化、特に低ビットレートにおけるノイズの多いスピーチの符号化は、アーチファクトをもたらす傾向がある。スピーチコーダは通常、背景ノイズが存在する場所ではもはや当てはまらなくなるようなスピーチ生成モデルに基づいている。そのような場合、符号化効率は低下し、復号化されたオーディオ信号の品質も低下する。更に、ノイズの多いスピーチを取り扱う場合には、スピーチ符号化の幾つかの特徴が特に混乱する可能性がある。確かに、低ビットレートにおいては、符号化パラメータの粗い量子化が、経時的にいくらかの揺らぎ(fluctuation)を生じさせ、その揺らぎは、定常的な背景ノイズの上にスピーチを符号化するときに知覚的な不快感を生じさせる。

【0004】

ノイズ低減は、スピーチの了解度を向上させ、背景ノイズが存在する場合のコミュニケーションを改善させるための公知の技術である。それはまた、スピーチ符号化の中でも採用されてきた。例えば、コーダＧ．７１８は、スピーチピッチのような幾つかの符号化パラメータを推論するためのノイズ低減を用いている。ノイズ低減の技術はまた、オリジナル信号の代わりに強化された信号を符号化するという可能性も有する。その場合、復号化された信号において、スピーチはノイズレベルと比較してより優勢なものとなる。しかしながら、スピーチは通常、より劣化し又は不自然な音をもたらしてしまう。なぜなら、ノイズ低減がスピーチ成分を歪ませ、符号化アーチファクトに加えて、可聴の楽音的ノイズアーチファクトをも引き起こす可能性があるからである。

【先行技術文献】

【非特許文献】

【0005】

【文献】Recommendation ITU-T G.718: “Frame error robust narrow-band and wideband embedded variable bit-rate coding of speech and audio from 8-32 kbit/s”

【文献】3GPP TS 26.190 “Adaptive Multi-Rate wideband speech transcoding,” 3GPP Technical Specification.

【発明の概要】

【発明が解決しようとする課題】

【0006】

本発明の目的は、オーディオ信号処理の改善された概念を提供することである。本発明の目的は、請求項１に記載の復号器と、請求項２１に記載の符号器と、請求項２２に記載のシステムと、請求項２３又は２４に記載の方法と、請求項２５に記載のビットストリームと、請求項２６に記載のコンピュータプログラムとによって達成される。

【課題を解決するための手段】

【0007】

１つの態様において、本発明は、符号化済みのオーディオビットストリームを処理するよう構成された復号器を提供し、その復号器は、
ビットストリームから復号化済みオーディオ信号を導出するよう構成されたビットストリーム復号器であって、その復号化済みオーディオ信号が少なくとも１つの復号化済みフレームを含む、ビットストリーム復号器と、
復号化済みオーディオ信号内のノイズのレベル及び／又はスペクトル形状の推定を含むノイズ推定信号を生成するよう構成されたノイズ推定装置と、
ノイズ推定信号からコンフォートノイズ信号を導出するよう構成されたコンフォートノイズ生成装置と、
復号化済みオーディオ信号の復号化済みフレームとコンフォートノイズ信号とを結合してオーディオ出力信号を得るよう構成された結合部と、を含む。

【0008】

ビットストリーム復号器は、オーディオ情報を含むデジタルデータストリームである、オーディオビットストリームを復号化できる装置又はコンピュータプログラムであってもよい。復号化処理の結果として、デジタルの復号化済みオーディオ信号が生成され、これがＡ／Ｄ変換器へと供給されてアナログのオーディオ信号が生成され、その信号が次にラウドスピーカへと供給されて可聴信号が生成されてもよい。

【0009】

復号化済みオーディオ信号は所謂フレームへと分割され、これらフレームの各々が、ある時間区間に関連するオーディオ情報を含んでいる。そのようなフレームは、活性フレームと不活性フレームとに分類されてもよく、活性フレームとは、スピーチや音楽などのオーディオ情報の所望の成分を含むフレームであり、一方、不活性フレームとは、オーディオ情報の如何なる所望の成分をも含まないフレームである。不活性フレームは通常、音楽やスピーチなどの所望の成分が存在しないようなポーズ期間中に発生する。したがって、不活性フレームは通常は背景ノイズだけを含む。

【0010】

オーディオ信号の不連続な伝送（ＤＴＸ）においては、不活性フレームの期間中、符号器はビットストリーム内にオーディオ信号を伝送しないので、ビットストリームを復号化することによって、復号化済みオーディオ信号の活性フレームだけが取得される。

【0011】

オーディオ信号の非不連続な伝送（ｎｏｎ－ＤＴＸ）においては、ビットストリームを復号化することによって、活性フレーム及び不活性フレームが取得される。

【0012】

ビットストリーム復号器によりビットストリームを復号化することで取得されるフレームは、復号化済みフレームと呼ばれる。

【0013】

ノイズ推定装置は、復号化済みオーディオ信号内のノイズのレベル及び／又はスペクトル形状の推定を含むノイズ推定信号を生成するよう構成されている。更に、コンフォートノイズ生成装置は、ノイズ推定信号からコンフォートノイズ信号を導出するよう構成されている。ノイズ推定信号は、復号化済みオーディオ信号内にパラメトリック形式で含まれているノイズの特性に関する情報を含む信号であってもよい。コンフォートノイズ信号とは、復号化済みオーディオ信号に含まれたノイズに対応する人工的なオーディオ信号である。これらの特徴により、ビットストリーム内の背景ノイズに関する如何なるサイド情報も必要とせずに、コンフォートノイズが実際の背景ノイズのように聴こえることができる。

【0014】

結合部は、復号化済みオーディオ信号の復号化済みフレームとコンフォートノイズ信号とを結合して、オーディオ出力信号を取得するよう構成されている。その結果、オーディオ出力信号は、人工的ノイズを含む復号化済みフレームを含む。復号化済みフレーム内の人工的ノイズにより、特にビットストリームが低ビットレートで伝送される場合に、オーディオ出力信号内のアーチファクトをマスキングできるようになる。それは、通常観測される揺らぎを平滑化し、その一方で、優勢な符号化アーチファクトをマスキングする。

【0015】

先行技術とは対照的に、本発明は、復号化済みフレームに対して人工的なコンフォートノイズを付加するという原理を適用する。本発明の概念は、ＤＴＸ及び非ＤＴＸの両方のモードにおいて適用可能である。

【0016】

本発明は、低ビットレートで符号化されかつ伝送されるノイズの多いスピーチの品質を向上させる方法を提供する。低ビットレートでは、ノイズの多いスピーチ、即ち背景ノイズと一緒に録音されたスピーチの符号化は、通常、明瞭なスピーチの符号化ほど効率的でない。復号化された合成信号は、通常、アーチファクトを持つ傾向にある。２つの異なる種類の音源、即ちノイズとスピーチとは、単一音源モデルに依存する１つの符号化スキームによって効率的に符号化され得ない。本発明は、復号器側において背景ノイズをモデル化しかつ合成する概念を提供し、サイド情報を極少量しか必要としないか又は全く必要としない。このことは、背景ノイズのレベル及びスペクトル形状を復号器側で推定し、かつコンフォートノイズを人工的に生成することによって達成される。生成されたノイズは、復号化済みオーディオ信号と結合され、符号化アーチファクトのマスキングを可能にする。

【0017】

更に、本発明の概念は、符号器側において適用されるノイズ低減手法と組み合わせることができる。ノイズ低減は信号対ノイズ比（ＳＮＲ）レベルを改善し、後続のオーディオ符号化の性能を向上させる。復号化済みオーディオ信号内のノイズの消失量は、次に復号器側でコンフォートノイズによって補償される。しかし、それは通常、より劣化した又は不自然に聴こえるものである。なぜなら、ノイズ低減がオーディオ成分を歪ませ、符号化アーチファクトに加えて、可聴の楽音ノイズアーチファクトを引き起こし得るからである。本発明の一つの特徴は、そのような不快な歪みを、復号器側でコンフォートノイズを付加することによりマスキングすることである。ノイズ低減手法を使用する場合、コンフォートノイズの付加はＳＮＲを劣化させない。更に、コンフォートノイズが、ノイズ低減技術で典型的に生じる悩ましい楽音ノイズの大部分を隠蔽する。

【0018】

本発明の好ましい一実施形態において、復号化済みフレームは活性フレームである。この特徴は、コンフォートノイズの付加の原理を復号化済み活性フレームに拡張するものである。

【0019】

本発明の好ましい一実施形態において、復号化済みフレームは不活性フレームである。この特徴は、コンフォートノイズの付加の原理を復号化済み不活性フレームに拡張するものである。

【0020】

本発明の好ましい一実施形態において、ノイズ推定装置は、復号化済みオーディオ信号内のノイズのレベルとスペクトル形状とを含む分析信号を生成するよう構成されたスペクトル分析装置と、その分析信号に基づいてノイズ推定信号を生成するよう構成されたノイズ推定生成装置と、を含む。

【0021】

本発明の好ましい一実施形態において、コンフォートノイズ生成装置は、ノイズ推定信号に基づいて周波数ドメインのコンフォートノイズ信号を生成するよう構成されたノイズ生成部と、その周波数ドメインのコンフォートノイズ信号に基づいてコンフォートノイズ信号を生成するよう構成されたスペクトル合成部と、を含む。

【0022】

本発明の好ましい一実施形態において、復号器は、第１操作モード又は第２操作モードへとニ者択一的に復号器を切り替えるよう構成されたスイッチ装置を含み、第１操作モードにおいてはコンフォートノイズ信号が結合部へと供給され、一方、第２操作モードにおいてはコンフォートノイズ信号が結合部に供給されない。これらの特徴により、人工的なコンフォートノイズが不要な状況下では人工的なコンフォートノイズの使用を中止させることが可能になる。

【0023】

本発明の好ましい一実施形態において、復号器は、スイッチ装置を自動的に制御するよう構成された制御装置を含み、その制御装置は、復号化済みオーディオ信号の信号対ノイズ比に依存してスイッチ装置を制御するよう構成されたノイズ検出部を含み、復号器は、信号対ノイズ比が低い状況下では第１操作モードへと切り替えられ、信号対ノイズ比が高い状況下では第２操作モードへと切り替えられる。これらの特徴により、コンフォートノイズは、ノイズの多いスピーチシナリオにおいてだけトリガーされることができ、明瞭なスピーチ又は明瞭な音楽の状況においてはトリガーされない。信号対ノイズ比が低い状況と信号対ノイズ比が高い状況とを区別する目的で、信号対ノイズ比の閾値が定義され使用されてもよい。

【0024】

本発明の好ましい一実施形態において、制御装置は、ビットストリーム内に含まれた、復号化済みオーディオ信号の信号対ノイズ比に対応するサイド情報を受信し、かつ、ノイズ検出信号を生成するよう構成されたサイド情報受信部を含み、ノイズ検出部はそのノイズ検出信号に依存してスイッチ装置を制御する。これらの特徴により、受信されたビットストリームを生成及び／又は処理する外部装置によって実行された信号分析に基づいて、スイッチ装置を制御することが可能になる。その外部装置は、特に、ビットストリームを生成している符号器であってもよい。

【0025】

本発明の好ましい一実施形態において、復号化済みオーディオ信号の信号対ノイズ比に対応するサイド情報は、ビットストリーム内の少なくとも１つの専用ビットから構成される。一般的に、専用ビットとは、それ単独で、又は他の専用ビットと共に、定義された情報を含む１つのビットのことである。ここでは、専用ビットは、信号対ノイズ比が所定の閾値より上か下かを示してもよい。

【0026】

本発明の好ましい一実施形態において、制御装置は、復号化済みオーディオ信号の所望信号のエネルギーを決定するよう構成された所望信号エネルギー推定部と、復号化済みオーディオ信号のノイズのエネルギーを決定するよう構成されたノイズエネルギー推定部と、所望信号のエネルギー及びノイズのエネルギーに基づいて復号化済みオーディオ信号の信号対ノイズ比を決定するよう構成された信号対ノイズ比推定部と、を含み、スイッチ装置はこの制御装置によって決定された信号対ノイズ比に依存して切り替えられる。この場合、ビットストリーム内のサイド情報は必要でない。所望信号のエネルギーは通常、復号化済み信号のノイズのエネルギーより大きいので、所望信号のエネルギーとノイズのエネルギーとを含む復号化済みオーディオ信号の全エネルギーによって、復号化済みオーディオ信号の所望信号のエネルギーの粗い推定が得られる。この理由により、信号対ノイズ比は、復号化済みオーディオ信号の全エネルギーを復号化済み信号のノイズのエネルギーで除算することにより、近似的に計算されてもよい。

【0027】

本発明の好ましい一実施形態において、ビットストリームは活性フレームと不活性フレームとを含み、制御装置は、復号化済みオーディオ信号の所望信号のエネルギーを活性フレームの期間中に決定し、復号化済みオーディオ信号のノイズのエネルギーを不活性フレームの期間中に決定するよう構成されている。これにより、信号対ノイズ比を推定するときの高度な正確性が容易な方法で達成され得る。

【0028】

本発明の好ましい一実施形態において、ビットストリームは活性フレームと不活性フレームとを含み、復号器はサイド情報受信部を含み、そのサイド情報受信部は、現在のフレームが活性か不活性かを示すビットストリーム内のサイド情報に基づいて、活性フレームと不活性フレームとを区別するよう構成されている。この特徴により、活性フレーム又は不活性フレームはそれぞれ、計算労力なく識別され得る。

【0029】

本発明の好ましい一実施形態において、現在のフレームが活性か不活性かを示すサイド情報は、ビットストリーム内の少なくとも１つの専用ビットから構成される。

【0030】

本発明の好ましい一実施形態において、制御装置は、復号化済みオーディオ信号の所望信号のエネルギーを分析信号に基づいて決定するよう構成されている。この場合、通常はノイズ推定の目的で計算されるべき分析信号が再使用されることができ、その結果、複雑さが低減され得る。

【0031】

本発明の好ましい一実施形態において、制御装置は、復号化済みオーディオ信号のノイズのエネルギーをノイズ推定信号に基づいて決定するよう構成されている。そのような実施形態においては、典型的にはコンフォートノイズ生成の目的で計算されるべきノイズ推定信号が再使用されることができ、その結果、複雑さが更に低減され得る。

【0032】

本発明の好ましい一実施形態において、コンフォートノイズ生成装置は、目標コンフォートノイズレベル信号に基づいてコンフォートノイズ信号を生成するよう構成されている。付加されるコンフォートノイズのレベルは、了解度と品質を保存するために制限される必要がある。この点については、事前に決定された目標ノイズレベルを示す目標ノイズ信号を使用してコンフォートノイズをスケールすることで達成可能である。

【0033】

本発明の好ましい一実施形態において、目標コンフォートノイズレベル信号は、ビットストリームのビットレートに依存して調整される。典型的に、復号化済みオーディオ信号は、特に符号化アーチファクトが最も激しい低ビットレートにおいて、オリジナル入力信号よりも高い信号対ノイズ比を示す。スピーチ符号化におけるノイズレベルのこのような減衰は、入力としてスピーチを有することを想定しているソースモデルパラダイムに起因する。その他の場合には、そのソースモデルの符号化は全く適切ではなく、非スピーチ成分の全体エネルギーを再生できないであろう。それ故、目標コンフォートノイズレベル信号は、符号化プロセスによって固有に導入されたノイズ減衰を大まかに補償するために、ビットレートに依存して調整されてもよい。

【0034】

本発明の好ましい一実施形態において、目標コンフォートノイズレベル信号は、ビットストリームに適用されたノイズ低減法によって引き起こされたノイズ減衰レベルに依存して調整される。この特徴により、符号器内のノイズ低減モジュールによって引き起こされたノイズ減衰が補償され得る。

【0035】

本発明の好ましい一実施形態において、ランダムノイズｗ（ｋ）の周波数ドメインのコンフォートノイズ信号のエネルギーは、目標コンフォートノイズレベル信号に依存して調整される。その目標コンフォートノイズレベル信号は目標コンフォートノイズレベルｇ_tarを示し、各周波数ｋについて次式の通りである。

【数1】

【0036】

ここで、

は、周波数ｋにおける復号化済みオーディオ信号のノイズのエネルギーの推定値であり、ノイズ推定生成装置によって供給されたものである。これらの特徴により、出力信号の了解度及び品質が向上され得る。

【0037】

本発明の好ましい実施形態において、復号器は更なるビットストリーム復号器を含み、前記ビットストリーム復号器とその更なるビットストリーム復号器とは異なるタイプのものであり、復号器はスイッチを含み、そのスイッチは、ビットストリーム復号器からの復号化済み信号、又は更なるビットストリーム復号器からの復号化済み信号のいずれかを、ノイズ推定装置と結合部とに供給するよう構成されている。ビットストリーム復号器を使用する場合と同様に、更なるビットストリーム復号器を使用する場合でも、コンフォートノイズの付加が実行されるので、ビットストリーム復号器と更なるビットストリーム復号器とを切り替えるときの遷移アーチファクトは最小化され得る。例えば、ビットストリーム復号器は代数符号励振線形予測（ＡＣＥＬＰ）ビットストリーム復号器であってもよく、他方、更なるビットストリーム復号器は変換ベースのコア（ＴＣＸ）ビットストリーム復号器であってもよい。

【0038】

本発明は更に、オーディオビットストリームを生成するよう構成されたオーディオ信号処理符号器を提供し、その符号器は、
オーディオ入力信号に対応する符号化済みオーディオ信号を生成し、その符号化済みオーディオ信号からビットストリームを導出するよう構成されたビットストリーム符号器と、
所望信号エネルギー推定部により決定されたオーディオ信号の所望信号のエネルギーと、ノイズエネルギー推定部により決定されたオーディオ入力信号のノイズのエネルギーとに基づいて、オーディオ入力信号の信号対ノイズ比を決定するよう構成された信号対ノイズ比推定部を有する、信号分析部と、
ノイズ低減済みオーディオ信号を生成するよう構成されたノイズ低減装置と、
オーディオ入力信号の決定された信号対ノイズ比に依存して、オーディオ入力信号又はノイズ低減済みオーディオ信号のいずれかを、これら各信号を符号化するために、ビットストリーム符号器に対して供給するよう構成されたスイッチ装置であって、ビットストリーム符号器は、オーディオ入力信号又はノイズ低減済みオーディオ信号のどちらが符号化されているかを示すサイド情報を、ビットストリーム内で伝送するよう構成されている、スイッチ装置と、を含む。

【0039】

ビットストリーム符号器は、オーディオ情報を含むデジタルデータ信号であるオーディオ信号を符号化できる装置またはコンピュータプログラムであってもよい。符号化処理の結果、デジタルビットストリームが生成され、それがデジタルデータリンクを介して遠位の復号器へと伝送されてもよい。

【0040】

オーディオ入力信号はビットストリーム符号器によって直接的に符号化される。ビットストリーム符号器は、スピーチ符号器であってもよいし、スピーチコーダＡＣＥＬＰと変換ベースのオーディオコーダＴＣＸとの間を切り替える低遅延のスキームであってもよい。ビットストリーム符号器は、オーディオ入力信号を符号化し、さらにそのオーディオ信号を復号化するために必要なビットストリームを生成する役割を担う。これと並行して、入力信号は、信号分析器と称される何らかのモジュールによって分析される。好ましい一実施形態において、その信号分析はＧ．７１８において使用されているものと同じである。信号分析は、スペクトル分析装置と、それに続くノイズ推定生成装置とにより構成されている。オリジナル信号と推定されたノイズとの両方のスペクトルがノイズ低減モジュールに入力される。ノイズ低減は、周波数ドメインにおいて背景ノイズレベルを減衰させる。その低減量は、目標減衰レベルによって与えられる。強化された時間ドメイン信号（ノイズ低減済みオーディオ信号）は、スペクトル合成の後で生成される。その信号は、幾つかの特徴、即ち活性フレームと不活性フレームとを区別するためにＶＡＤにより活用されるピッチ安定度など、を推論するために使用される。その分類の結果は、符号器モジュールによってさらに利用されてもよい。好ましい実施形態において、特定の符号化モードが不活性フレームを取り扱うために使用される。このようにして、復号器は、専用ビットを必要とせずに、ビットストリームからＶＡＤフラグを推論できる。

【0041】

ノイズのない状態（明瞭なスピーチ又は明瞭な音楽）における不要な歪みを回避するために、ノイズ低減はノイズの多いスピーチの場合にのみ適用され、その他の場合には迂回される。ノイズが多い信号とノイズが無い信号との間の区別は、ノイズと所望信号（スピーチ又は音楽）との両者の長期間エネルギーを推定することで達成される。活性フレームの期間中は、長期間エネルギーは入力フレームエネルギーの一次の自己回帰フィルタリングにより計算され、一方で不活性フレームの期間中は、長期間エネルギーはノイズ推定モジュールの出力を使用して計算される。このようにして信号対ノイズ比の推定が計算されることができ、その推定はノイズの長期間エネルギーに対するスピーチ又は音楽の長期間エネルギーの比として定義される。信号対ノイズ比が所定の閾値を下回る場合、そのフレームはノイズの多いスピーチとして認識され、その他の場合には明瞭なスピーチとして分類される。ビットストリーム符号器は、オーディオ入力信号又はノイズ低減済みオーディオ信号のいずれが符号化されているかを示すサイド情報を、ビットストリームの中で伝送するよう構成されているため、復号器は、目標コンフォートノイズレベル信号を、符号器の操作モードに対して自動的に調整することができる。

【0042】

本発明の好ましい一実施形態において、活性フレームの期間中に、長期間のスピーチ／音楽エネルギー推定だけが更新される。不活性フレームの期間中には、ノイズエネルギー推定だけが更新される。

【0043】

本発明は更に、オーディオ信号処理復号器とオーディオ信号処理符号器とを含むシステムを提供し、その復号器は特許請求の範囲に従って設計されており、及び／又はその符号器は特許請求の範囲に従って設計されている。

【0044】

本発明の他の態様は、オーディオビットストリームを復号化する方法を提供し、その方法は、
ビットストリームから復号化済みオーディオ信号を導出するステップであって、その復号化済みオーディオ信号が少なくとも１つの復号化済みフレームを含む、ステップと、
復号化済みオーディオ信号内のノイズのレベル及び／又はスペクトル形状の推定を含むノイズ推定信号を生成するステップと、
ノイズ推定信号からコンフォートノイズ信号を導出するステップと、
復号化済みオーディオ信号の復号化済みフレームとコンフォートノイズ信号とを結合してオーディオ出力信号を得るステップと、
を含む。

【0045】

本発明は、オーディオビットストリームを生成するためのオーディオ信号符号化の方法を更に提供し、その方法は、
オーディオ入力信号の所望信号の決定されたエネルギーとオーディオ入力信号のノイズの決定されたエネルギーとに基づいて、オーディオ入力信号の信号対ノイズ比を決定するステップと、
ノイズ低減済みオーディオ信号を生成するステップと、
オーディオ入力信号と対応する符号化済みオーディオ信号を生成するステップであって、オーディオ入力信号の決定された信号対ノイズ比に依存して、オーディオ入力信号とノイズ低減済みオーディオ信号とのいずれかを符号化するステップと、
符号化済みオーディオ信号からビットストリームを導出するステップと、
オーディオ入力信号又はノイズ低減済みオーディオ信号のいずれが符号化されているかを示すサイド情報を、ビットストリーム内で伝送するステップと、
を含む。

【0046】

本発明は、更に、上述の方法に従って生成されたビットストリームを提供する。特許請求の範囲に記載のビットストリームは、オーディオ入力信号又はノイズ低減済みオーディオ信号のいずれが符号化されているかを示すサイド情報を含む。

【0047】

本発明の更なる態様は、コンピュータ又はプロセッサ上で作動するときに、本発明の方法を実行するコンピュータプログラムを提供する。

【0048】

本発明の好ましい実施形態を、添付の図を参照しながら以下に説明する。

【図面の簡単な説明】

【0049】

【図1】本発明に係る復号器の第１実施例を示す。

【図2】本発明に係る復号器の第２実施例を示す。

【図3】先行技術に係る符号器を示す。

【図4】本発明に係る符号器の第１実施例を示す。

【図5】本発明に係る符号器の第２実施例を示す。

【図6】本発明に係るビットストリームのフレームフォーマットの一実施例を示す。

【発明を実施するための形態】

【0050】

図１は、本発明に係る復号器１の第１実施例を示す。復号器１は、符号化済みビットストリームＢＳを処理するよう構成され、復号器１は、
ビットストリームＢＳから復号化済みオーディオ信号ＤＳを導出するよう構成されたビットストリーム復号器２であって、復号化済みオーディオ信号ＤＳが少なくとも１つの復号化済みフレームを含む、ビットストリーム復号器２と、
復号化済みオーディオ信号ＤＳ内のノイズＮのレベル及び／又はスペクトル形状の推定を含むノイズ推定信号ＮＥを生成するよう構成されたノイズ推定装置３と、
ノイズ推定信号ＮＥからコンフォートノイズ信号ＣＮを導出するよう構成されたコンフォートノイズ生成装置４と、
復号化済みオーディオ信号ＤＳの復号化済みフレームとコンフォートノイズ信号ＣＮとを結合してオーディオ出力信号ＯＳを得るよう構成された結合部５と、
を含む。

【0051】

ビットストリーム復号器２は、オーディオ情報を含むデジタルデータストリームであるオーディオビットストリームＢＳを復号化できる装置又はコンピュータプログラムであってもよい。復号化処理の結果としてデジタル復号化済みオーディオ信号ＤＳが生成され、この信号がＡ／Ｄ変換器へと供給されてアナログオーディオ信号が生成され、その信号が次にラウドスピーカへと供給されて、可聴信号が生成されてもよい。

【0052】

復号化済みオーディオ信号ＤＳは所謂フレームを含み、これらフレームの各々がある時間に関するオーディオ情報を含んでいる。そのようなフレームは、活性フレームと不活性フレームとに分類されてもよく、活性フレームとは、スピーチや音楽などのオーディオ情報の所望の成分ＷＳ（所望信号ＷＳとも呼ばれる）を含むフレームであり、一方、不活性フレームとは、オーディオ情報の如何なる所望の成分をも含まないフレームである。不活性フレームは通常はポーズの期間中に発生し、そこでは音楽やスピーチなどの所望の成分は存在しない。したがって、不活性フレームは通常は背景ノイズＮだけを含む。

【0053】

ノイズ推定装置３は、復号化済みオーディオ信号ＤＳ内のノイズのレベル及び／又はスペクトル形状の推定を含むノイズ推定信号ＮＥを生成するよう構成されている。更に、コンフォートノイズ生成装置４は、ノイズ推定信号ＮＥからコンフォートノイズ信号ＣＮを導出するよう構成されている。ノイズ推定信号ＮＥは、復号化済みオーディオ信号ＤＳ内にパラメトリック形式で含まれているノイズＮの特性に関する情報を含む信号であってもよい。コンフォートノイズ信号ＣＮとは、復号化済みオーディオ信号ＤＳ内に含まれるノイズＮに対応する人工的なオーディオ信号である。これらの特徴により、背景ノイズＮに関するビットストリームＢＳ内のサイド情報を何も必要とせずに、コンフォートノイズＣＮが実際の背景ノイズＮのように聴こえることができる。

【0054】

結合部５は、復号化済みオーディオ信号ＤＳの復号化済みフレームとコンフォートノイズ信号ＣＮとを結合して、オーディオ出力信号ＯＳを取得するよう構成されている。その結果、オーディオ出力信号ＯＳは、人工的ノイズＣＮを含む復号化済みフレームを含む。復号化済みフレーム内の人工的ノイズＣＮにより、特にビットストリームＢＳが低ビットレートで伝送される場合に、オーディオ出力信号ＯＳ内のアーチファクトをマスキングできるようになる。

【0055】

先行技術とは対照的に、本発明は、復号化済みの活性フレーム又は不活性フレームに対して人工的なコンフォートノイズＣＮを付加するという原理を適用する。本発明の概念は、ＤＴＸ及び非ＤＴＸの両方のモードに適用可能である。

【0056】

本発明は、低ビットレートで符号化されかつ伝送されるノイズの多いスピーチの品質を向上させる方法を提供する。低ビットレートでは、ノイズの多いスピーチ、即ち背景ノイズＮとともに録音されたスピーチの符号化は、通常、明瞭なスピーチＷＳの符号化ほど効率的でない。復号化された合成信号は、通常、アーチファクトを持つ傾向にある。２つの異なる種類の音源、即ちノイズＮとスピーチＷＳとは、単一音源モデルに依存する１つの符号化スキームによって効率的に符号化され得ない。本発明は、復号器側において背景ノイズＮをモデル化しかつ合成し、サイド情報を極少量しか必要としないか又は全く必要としないような概念を提供する。これは、背景ノイズＮのレベル及びスペクトル形状を復号器側で推定し、かつコンフォートノイズＣＮを人工的に生成することによって達成される。その生成されたノイズＣＮは、復号化済みオーディオ信号ＤＳと結合されて、復号化済みフレーム内の符号化アーチファクトをマスキングすることを可能にする。

【0057】

更に、前記概念は、符号器側において適用されるノイズ低減スキームと組み合わせることができる。ノイズ低減により信号対ノイズ比（ＳＮＲ）のレベルが改善し、後続のオーディオ符号化の性能を向上させる。復号化済みオーディオ信号ＤＳ内のノイズＮの消失量は、復号器側でコンフォートノイズＣＮによって補償される。しかし、それは通常、より劣化した又は不自然に聴こえるものである。なぜなら、ノイズ低減がオーディオ成分を歪ませ、符号化アーチファクトに加えて、可聴の楽音的ノイズアーチファクトを引き起こし得るからである。本発明の一つの特徴は、そのような不快な歪みを、復号器側でコンフォートノイズＣＮを付加することでマスクすることである。ノイズ低減スキームを使用する場合、コンフォートノイズの付加はＳＮＲを劣化させない。更に、コンフォートノイズは、ノイズ低減技術では典型的に生じる悩ましい楽音ノイズの大部分を隠蔽する。

【0058】

本発明の好ましい一実施形態において、復号化済みフレームは活性フレームである。この特徴は、コンフォートノイズの付加の原理を復号化済み活性フレームに拡張するものである。

【0059】

本発明の好ましい一実施形態において、復号化済みフレームは不活性フレームである。この特徴は、コンフォートノイズの付加の原理を復号化済み不活性フレームに拡張するものである。

【0060】

本発明の好ましい一実施形態において、ノイズ推定装置３は、復号化済みオーディオ信号ＤＳ内のノイズのレベル及びスペクトル形状を含む分析信号ＡＳを生成するよう構成されたスペクトル分析装置６と、その分析信号ＡＳに基づいてノイズ推定信号ＮＥを生成するよう構成されたノイズ推定生成装置７と、を含む。

【0061】

本発明の好ましい一実施形態において、コンフォートノイズ生成装置４は、ノイズ推定信号ＮＥに基づいて周波数ドメインのコンフォートノイズ信号ＦＤを生成するよう構成されたノイズ生成部８と、その周波数ドメインのコンフォートノイズ信号ＦＤに基づいてコンフォートノイズ信号ＣＮを生成するよう構成されたスペクトル合成部９と、を含む。

【0062】

本発明の好ましい一実施形態において、復号器１は、第１操作モード又は第２操作モードへとニ者択一的に復号器１を切り替えるよう構成されたスイッチ装置１０を含み、第１操作モードにおいてはコンフォートノイズ信号ＣＮが結合部へと供給され、第２操作モードにおいてはコンフォートノイズ信号ＣＮが結合部５に供給されない。これらの特徴により、コンフォートノイズＣＮの不要な状況下での人工的なコンフォートノイズＣＮの使用を中止させることが可能になる。

【0063】

本発明の好ましい一実施形態において、復号器１は、スイッチ装置１０を自動的に制御するよう構成された制御装置１１を含み、その制御装置１１は、復号化済みオーディオ信号ＤＳの信号対ノイズ比に依存してスイッチ装置１０を制御するよう構成されたノイズ検出部１２を含み、復号器は、信号対ノイズ比が低い状況下では第１操作モードへ切り替えられ、信号対ノイズ比が高い状況下では第２操作モードへ切り替えられる。これらの特徴により、コンフォートノイズＣＮの使用は、ノイズの多いスピーチシナリオにおいてだけトリガーされてもよい。即ち、明瞭なスピーチ又は明瞭な音楽の状況においてはトリガーされない。信号対ノイズ比が低い状況と信号対ノイズ比が高い状況とを区別する目的で、信号対ノイズ比についての閾値が定義され使用されてもよい。

【0064】

本発明の好ましい一実施形態において、制御装置１１は、ビットストリームＢＳ内に含まれた、復号化済みオーディオ信号ＤＳの信号対ノイズ比に対応するサイド情報を受信し、ノイズ検出信号ＮＤを生成するよう構成されたサイド情報受信部１３を含み、ノイズ検出部１２はそのノイズ検出信号ＮＤに依存してスイッチ装置１０を切り替える。これらの特徴により、受信されたビットストリームＢＳを生成及び／又は処理する外部装置によってなされた信号分析に基づいて、スイッチ装置１０を制御することが可能になる。その外部装置は、特に、ビットストリームＢＳを生成している符号器であってもよい。

【0065】

本発明の好ましい一実施形態において、復号化済みオーディオ信号ＤＳの信号対ノイズ比に対応するサイド情報は、ビットストリームＢＳ内の少なくとも１つの専用ビットから構成される。一般的に、専用ビットとは、それ単独で、又は他の専用ビットと共に、定義された情報を含む１つのビットのことである。ここでは、専用ビットは、信号対ノイズ比が所定の閾値より上か下かを示してもよい。

【0066】

本発明の好ましい一実施形態において、コンフォートノイズ生成装置４は、目標コンフォートノイズレベル信号ＴＮＬに基づいてコンフォートノイズ信号ＣＮを生成するよう構成されている。付加されるコンフォートノイズＣＮのレベルは、了解度と品質を保存するために制限されるべきである。この点については、予め決定された目標ノイズレベルを示す目標ノイズ信号ＴＮＬを使用してコンフォートノイズＣＮをスケールすることで達成可能である。

【0067】

本発明の好ましい一実施形態において、目標コンフォートノイズレベル信号ＴＮＬは、ビットストリームＢＳのビットレートに依存して調整される。典型的に、復号化済みオーディオ信号ＤＳは、特に符号化アーチファクトが最も激しい低ビットレートにおいて、オリジナル入力信号よりも高い信号対ノイズ比を示す。スピーチ符号化におけるノイズレベルのこのような減衰は、入力としてスピーチを有することを想定しているソースモデルパラダイムに起因する。その他の場合には、そのソースモデルの符号化は全く適切ではなく、非スピーチ成分の全体エネルギーを再生できないであろう。それ故、目標コンフォートノイズレベル信号ＴＮＬは、符号化プロセスによって固有に導入されたノイズ減衰を大まかに補償するために、ビットレートに依存して調整されてもよい。

【0068】

本発明の好ましい一実施形態において、目標コンフォートノイズレベル信号ＴＮＬは、ビットストリームＢＳに適用されたノイズ低減法によって引き起こされるノイズ減衰レベルに依存して調整される。この特徴により、符号器内のノイズ低減モジュールによって引き起こされるノイズ減衰は、補償され得る。

【0069】

本発明の好ましい一実施形態において、ランダムノイズｗ（ｋ）の周波数ドメインのコンフォートノイズ信号ＦＤのエネルギーは、目標コンフォートノイズレベル信号ＴＮＬに依存して調整される。その目標コンフォートノイズレベル信号ＴＮＬは目標コンフォートノイズレベルｇ_tarを示し、各周波数ｋについて次式の通りである。

【数2】

【0070】

ここで、

は、ノイズ推定生成装置７によって供給された、周波数ｋにおける復号化済みオーディオ信号ＤＳのノイズＮのエネルギーの推定値である。これらの特徴により、出力信号ＯＳの了解度及び品質が改善され得る。

【0071】

図２は本発明にかかる復号器１の第２実施例を示す。この復号器１の第２実施例は、第１実施例の復号器１に基づいている。以下では、第１実施例との相違点だけを説明する。

【0072】

本発明の好ましい一実施形態において、制御装置は、復号化済みオーディオ信号ＤＳの所望信号ＷＳのエネルギーを決定するよう構成された所望信号エネルギー推定部１４と、復号化済みオーディオ信号ＤＳのノイズＮのエネルギーを決定するよう構成されたノイズエネルギー推定部１５と、所望信号ＷＳのエネルギーに基づきまたノイズＮのエネルギーにも基づいて復号化済みオーディオ信号ＤＳの信号対ノイズ比を決定するよう構成された信号対ノイズ比推定部１６と、を含み、スイッチ装置１０は制御装置１１によって決定された信号対ノイズ比に依存して切り替えられる。この場合、信号対ノイズ比に関するビットストリーム内のサイド情報は必要でない。従って、第１実施例におけるサイド情報受信部１３も必要でない。

【0073】

本発明の好ましい一実施形態において、ビットストリームＢＳは活性フレームと不活性フレームとを含み、制御装置１１は、復号化済みオーディオ信号ＤＳの所望信号ＷＳのエネルギーを活性フレームの期間中に決定し、復号化済みオーディオ信号ＤＳのノイズＮのエネルギーを不活性フレームの期間中に決定するよう構成されている。これにより、信号対ノイズ比を推定するときの高度な正確性が容易な方法で達成され得る。

【0074】

本発明の好ましい一実施形態において、ビットストリームＢＳは活性フレームと不活性フレームとを含み、復号器１はサイド情報受信部１７を含み、そのサイド情報受信部１７は、ビットストリーム内の現在のフレームが活性か不活性かを示すサイド情報に基づいて、活性フレームと不活性フレームとを区別するよう構成されている。この特徴により、活性フレーム又は不活性フレームはそれぞれ、計算労力なく識別され得る。

【0075】

本発明の好ましい一実施形態において、サイド情報受信部１７は、スイッチ１７ａを制御するよう構成されてもよく、そのスイッチ１７ａは、所望信号エネルギー推定部１４の出力信号ＯＷ、又はノイズエネルギー推定部１５の出力信号ＯＮのいずれかを択一的に信号対ノイズ比推定部１６へと供給し、その場合、所望信号エネルギー推定部１４の出力信号ＯＷは活性フレームの期間中に信号対ノイズ比推定部１６へと供給され、ノイズエネルギー推定部１５の出力信号ＯＮは不活性フレームの期間中に信号対ノイズ比推定部１６へと供給される。これらの特徴により、信号対ノイズ比は容易かつ正確な方法で計算され得る。

【0076】

本発明の好ましい一実施形態において、制御装置１１は、分析信号ＡＳに基づいて復号化済みオーディオ信号の所望信号のエネルギーを決定するよう構成されている。この場合、通常はノイズ推定の目的で計算されるべき分析信号ＡＳが再使用されて、複雑さが軽減されてもよい。

【0077】

本発明の好ましい一実施形態において、制御装置１１は、復号化済みオーディオ信号ＤＳのノイズＮのエネルギーを、ノイズ推定信号ＮＥに基づいて決定するよう構成されている。このような実施形態においては、典型的にはコンフォートノイズ生成の目的で計算されるべきノイズ推定信号ＮＥが再使用されて、複雑さが更に軽減されてもよい。

【0078】

本発明の好ましい実施形態において、復号器１は更なるビットストリーム復号器（図示せず）を含み、前記ビットストリーム復号器２とその更なるビットストリーム復号器とは異なるタイプであり、復号器１はスイッチ（図示せず）を含み、そのスイッチは、ノイズ推定装置３と結合部５とに対し、ビットストリーム復号器２からの復号化済み信号ＤＳ、又は更なるビットストリーム復号器からの復号化済み信号のいずれかを供給するよう構成されている。ビットストリーム復号器２を使用する場合と同様に、更なるビットストリーム復号器を使用する場合でも、コンフォートノイズ付加が実行されるので、ビットストリーム復号器２と更なるビットストリーム復号器とを切り替えるときの遷移アーチファクトが最小化され得る。例えば、ビットストリーム復号器２は代数符号励振線形予測（ＡＣＥＬＰ）のビットストリーム復号器であってもよく、一方、更なるビットストリーム復号器は変換ベースのコア（ＴＣＸ）ビットストリーム復号器であってもよい。

【0079】

本発明の復号器１は、図１及び図２に示されており、そこではコンフォートノイズの付加が周波数ドメインで盲目的に実行される。実際の背景ノイズＮのように聞こえるコンフォートノイズＣＮを得るために、ノイズ推定装置３が復号器１において使用され、何らのサイド情報をも必要とせずに背景ノイズＮのレベル及びスペクトル形状を決定する。

【0080】

コンフォートノイズ生成装置４は、ノイズの多いスピーチシナリオにおいてだけトリガーされる。即ち、明瞭なスピーチ又は明瞭な音楽の状況においてはトリガーされない。その区別は符号器内で実行される検出に基づいてもよい。この場合、その決定は専用ビットを使用して伝送されるべきである。対照的に、好ましい実施形態においては、符号器内で使用されるノイズ推定装置に類似するノイズ推定生成装置７が適用される。その装置は、ＶＡＤ決定に依存して、ノイズＮのエネルギーと、スピーチ及び／又は音楽などの所望信号ＷＳのエネルギーとのいずれかの長期間推定を別個に採用することで、長期間の信号対ノイズ比を推定する。ＶＡＤ決定は、ＡＣＥＬＰモード及びＴＣＸモードのインデックスから直接的に推定されてもよい。実際のところ、信号が不活性のスピーチ／音楽フレーム、即ち背景ノイズだけを有するフレームであるとき、ＴＣＸ及びＡＣＥＬＰは、ＴＣＸ－ＮＡ及びＡＣＥＬＰ－ＮＡと呼ばれる特定のモードにおいてそれぞれ作動することができる。ＡＣＥＬＰ及びＴＣＸの他の全てのモードは、活性フレームに関連する。それ故、ビットストリーム内における専用のＶＡＤビットの存在は省略され得る。

【0081】

付加されるコンフォートノイズのレベルは、了解度と品質を保存するために制限されるべきである。それ故、コンフォートノイズは予め決定された目標ノイズレベルに到達するまでスケールされる。コンフォートノイズ付加後の目標ノイズ振幅レベルをｇ_tarで示す場合、ランダムノイズｗ（ｋ）のエネルギーＥｗは各周波数ｋについて次式のように調整される。

【0082】

【数3】

【0083】

ここで、

は周波数ｋにおいて復号化されたオーディオ出力内に存在するノイズエネルギーの推定値を示し、ノイズ推定モジュールによって出力されたものである。

【0084】

典型的に、復号化済みオーディオ信号ＤＳは、特に符号化アーチファクトが最も激しい低ビットレートにおいて、オリジナル入力信号よりも高い信号対ノイズ比を示す。スピーチ符号化におけるノイズレベルのこのような減衰は、入力としてスピーチを有することを想定しているソースモデルパラダイムに起因する。その他の場合には、ソースモデル符号化は全く適切ではなく、非スピーチ成分の全体エネルギーを再生できないであろう。それ故、図３に示された符号器を用いる本発明の第１の態様において、目標コンフォートノイズレベルｇ_tarは、符号化プロセスによって固有に導入されたノイズ減衰を大まかに補償するために、ビットレートに依存して調整される。

【0085】

図４及び図５に示された符号器を用いる本発明の第２の態様について、目標コンフォートノイズレベルｇ_tarは、追加的に、符号器内のノイズ低減モジュールによって引き起こされるノイズ減衰を考慮に入れなければならない。

【0086】

更に、本明細書で説明されるコンフォートノイズの付加によれば、全てのフレーム上にコンフォートノイズを均一に付加することで、一つの符号化タイプ（例えばＡＣＥＬＰ）から別のタイプ（例えばＴＣＸ）への遷移アーチファクトを平滑化することが可能になる。

【0087】

図３は、図１及び図２に示された復号器と組み合わせて使用し得る、従来技術に係る符号器を示す。

【0088】

入力信号ＩＳはビットストリーム符号器２０によって直接的に符号化される。ビットストリーム符号器２０はスピーチコーダであってもよく、又は、スピーチコーダＡＣＥＬＰと変換ベースのオーディオコーダＴＣＸとの間を切り替える低遅延スキームであってもよい。ビットストリーム符号器２０は、信号ＩＳを符号化する信号符号器２１と、復号器１において復号化済み信号ＤＳを生成するために必要なビットストリームＢＳを生成するビットストリーム生成部２２とを含む。これと並行して、入力信号ＩＳは信号分析器２３と称されるモジュールによって分析され、そのモジュールはノイズ推定装置２４を含む。好ましい一実施形態において、ノイズ推定装置２４は、Ｇ．７１８において使用されるものと同じである。それは、スペクトル分析装置２５と、後続のノイズ推定生成装置２６とにより構成されている。オリジナル信号ＩＳのスペクトルＳＩと推定されたノイズのスペクトルＮＩとは、ノイズ低減モジュール２７に入力される。ノイズ低減モジュール２７は、強化された周波数ドメイン信号ＦＳにおける背景ノイズレベルを減衰させる。その低減量は、目標減衰レベル信号ＴＡＳによって与えられる。強化された時間ドメイン信号（ノイズ低減済みオーディオ信号）ＴＳは、スペクトル合成装置２８によって実行されるスペクトル合成の後で生成される。信号ＴＳは、活性フレームと不活性フレームとを区別するために信号活性度検出部２９により活用されるピッチ安定度などの、幾つかの特徴を推論するために使用される。その分類の結果は、符号器モジュール１８によってさらに利用されてもよい。好ましい実施形態において、特定の符号化モードが不活性フレームを取り扱うために使用される。このようにして、復号器１は、専用ビットを必要とせずに、ビットストリームから信号活性度フラグ（ＶＡＤフラグ）を推論できる。

【0089】

図４は本発明にかかる符号器１８の第１実施形態を示す。図４に示された符号器１８は図３に示された符号器１８に基づいている。

【0090】

図４の符号器１８は、オーディオビットストリームＢＳを生成するよう構成され、符号器１８は、
オーディオ入力信号ＩＳに対応する符号化済みオーディオ信号ＥＳを生成し、その符号化済みオーディオ信号ＥＳからビットストリームＢＳを導出するよう構成されたビットストリーム符号器２０と、
所望信号エネルギー推定部３１により決定されたオーディオ入力信号ＩＳの所望信号ＷＳのエネルギーと、ノイズエネルギー推定部３２により決定されたオーディオ入力信号ＩＳのノイズＮのエネルギーとに基づいて、オーディオ入力信号ＩＳの信号対ノイズ比を決定するよう構成された信号対ノイズ比推定部３３を有する、信号分析部３０と、
ノイズ低減済みオーディオ信号ＴＳを生成するよう構成されたノイズ低減装置２７、２８と、
オーディオ入力信号ＩＳの決定された信号対ノイズ比に依存して、オーディオ入力信号ＩＳ又はノイズ低減済みオーディオ信号ＴＳのいずれかを、それぞれの信号ＩＳ、ＴＳを符号化するために、ビットストリーム符号器２０に対して供給するよう構成されたスイッチ装置３５であって、ビットストリーム符号器２０は、オーディオ入力信号ＩＳ又はノイズ低減済みオーディオ信号ＴＳのどちらが符号化されているかを示すサイド情報を、ビットストリームの中で伝送するよう構成されている、スイッチ装置３５と、を含む。

【0091】

ビットストリーム符号器２０は、オーディオ情報を含むデジタルデータ信号であるオーディオ信号を符号化できる装置またはコンピュータプログラムであってもよい。符号化処理の結果、デジタルビットストリームが生成され、それがデジタルデータリンクを介して遠位の復号器へと伝送されてもよい。

【0092】

本発明の一実施形態の符号器部分を図４に示す。図３と比較した主な相違点は、ノイズ低減の出力、即ち強化された信号ＴＳを符号化するという事実から生まれる。ノイズのない状態（明瞭なスピーチ又は明瞭な音楽）における不要な歪みを回避するために、ノイズ低減はノイズの多いスピーチの場合にのみ適用され、それ以外の場合には迂回される。ノイズが多い信号とノイズが無い信号との間の区別は、所望信号エネルギー推定部３１により所望信号ＷＳ（スピーチ又は音楽）の長期間エネルギーを推定すること、及びノイズ推定部３２によりノイズＮの長期間エネルギーを推定することとによって達成される。この目的のため、所望信号エネルギー推定部３１は、スペクトル分析装置２５により供給される入力信号ＩＳについてのスペクトル信号ＳＩを受信する。さらに、ノイズエネルギー推定部は、ノイズ推定生成装置２６により供給される入力信号ＩＳについてのノイズ推定信号ＮＩを受信する。活性フレームの期間中には、長期間スピーチ／音楽エネルギー推定ＷＥだけが更新される。不活性フレームの期間中には、ノイズエネルギー推定ＮＥだけが更新される。活性フレームの期間中は、長期間エネルギーは入力フレームエネルギーの一次の自己回帰フィルタリングにより計算され、一方で不活性フレームの期間中は、長期間エネルギーはノイズ推定モジュールの出力を使用して計算される。このようにして、信号対ノイズ比信号ＲＳを信号対ノイズ比推定部３３により計算することができ、その信号はノイズＮの長期間エネルギーに対するスピーチ又は音楽ＷＳの長期間エネルギーの比を含む。信号対ノイズ比信号ＲＳはノイズ検出部３４に供給され、その検出部は、現在のフレームがノイズの多いオーディオ信号を含むか又は明瞭なオーディオ信号を含むかについて決定する。信号対ノイズ比信号ＲＳが所定の閾値を下回る場合、そのフレームはノイズの多いスピーチと認識され、その他の場合には明瞭なスピーチとして分類される。

【0093】

分類の結果は、ノイズフラグ信号ＮＦとして出力され、これはスイッチ３５を制御するために使用される。更に、ノイズフラグ信号ＮＦはビットストリーム符号器２０へと供給される。ビットストリーム符号器２０は、ノイズフラグ信号ＮＦに基づいて、ビットストリーム内にサイド情報を生成しかつ伝送するよう構成されており、そのサイド情報は、オーディオ入力信号ＩＳ又はノイズ低減済みオーディオ信号ＴＳのいずれが符号化されているかを示す。このフラグを復号化することで、復号器は、復号化済み信号ＤＳをノイズの多い信号又は明瞭な信号として分類する必要なく、目標ノイズレベルを自動的に調整できる。

【0094】

図５は、本発明にかかる符号器１８の第２の実施形態を示す。図５に示された符号器１８は、図４に示された符号器に基づいている。以下に追加的な特徴について説明する。図５では、信号分析部３０は、入力信号ＩＳについてのノイズ低減済みオーディオ信号ＴＳとノイズ推定信号ＮＩとを受け取る、信号活性度検出部３６を含む。信号活性度検出部３６は、上記２つの信号に基づいて、活性フレームと不活性フレームとを区別するよう構成されている。信号活性度検出部は信号活性度信号ＳＡを生成し、その信号活性度信号ＳＡは、一方では、ビットストリームＢＳを信号活性度に適合させる目的でビットストリーム符号器２０へと送信され、他方では、スイッチ３７を切り替えるために使用される。このスイッチ３７は、信号対ノイズ比推定部３３に対し、所望信号エネルギー信号ＷＥ又はノイズエネルギー信号ＥＮを択一的に供給するよう構成されている。

【0095】

図６は、本発明にかかるビットストリームＢＳのフレームフォーマットＦＦの一実施形態を示す。このフレームフォーマットＦＦに従うフレームは、０からｎまでの位置に配置された複数ビットを有する信号ベクトルＳＶを含む。ｎ＋１の位置には、そのフレームが活性フレームか不活性フレームかを示す活性度フラグＡＦである１ビットが配置されている。更に、ｎ＋２の位置には、そのフレームがノイズの多い信号又は明瞭な信号を含むかを示すノイズフラグＮＦである１ビットが配置される。ｎ＋３の位置には、パディングビットＰＢが配置されている。

【0096】

本発明の好ましい一実施形態において、現在フレームが活性であるか不活性であるかを示すサイド情報は、ビットストリーム内の少なくとも１つの専用ビットから構成されている。

【0097】

要約すると、本発明の一態様においては、オリジナル信号が符号化され、復号器１において、人工的に生成されたコンフォートノイズＣＮによって付加される前にオリジナル信号が復号化される。コンフォートノイズ生成装置４は、サイド情報を全く必要としないか、又は極少量しか必要としない。第１実施形態において、コンフォートノイズ生成装置４はサイド情報を全く必要とせず、全ての処理は盲目的に実行される。その好ましい実施形態において、コンフォートノイズ生成装置４は、ＶＡＤ情報（活性フレームと不活性フレームとの分類結果）をビットストリームＢＳから復元する必要があり、そのＶＡＤ情報は、ビットストリーム内に既に存在することができ、他の目的にも使用可能である。図１に示す実施形態において、復号器１は、明瞭なスピーチとノイズの多いスピーチを区別するノイズフラグを符号器１８から要求する。更に、コンフォートノイズ生成装置４の駆動を助成し得る、パラメトリック的に符号化されたいかなる種類の情報をも想定することができる。

【0098】

本発明の他の態様において、ノイズ低減が最初にオリジナル信号ＩＳに対して適用され、強化された信号ＴＳがビットストリーム符号器２０へと送られて、符号化されかつ送信される。復号化の最終段階において、人工的に生成されたコンフォートノイズＣＮが、復号化された（強化された）信号ＤＳに付加される。符号器においてノイズ低減のために使用された目標減衰レベルは、復号器におけるＣＮＧモジュールと共有される固定値である。それ故、目標減衰レベルは明示的に伝送される必要がない。

【0099】

これまで装置を説明する文脈で幾つかの態様を示してきたが、これらの態様は対応する方法の説明でもあることは明らかであり、そのブロック又は装置が方法ステップ又は方法ステップの特徴に対応することは明らかである。同様に、方法ステップを説明する文脈で示した態様もまた、対応する装置の対応するブロックもしくは項目又は特徴を表している。方法ステップの幾つか又は全ては、例えばマイクロプロセッサ、プログラム可能なコンピュータ、又は電子回路等のハードウエア装置により（を使用して）実行されても良い。幾つかの実施形態においては、最も重要な方法ステップの内の１つ又は複数のステップはそのような装置によって実行されても良い。

【0100】

所定の構成要件にも依るが、本発明の実施形態は、ハードウエア又はソフトウエアにおいて構成可能である。この構成は、その中に格納される電子的に読み取り可能な制御信号を有し、本発明の各方法が実行されるようにプログラム可能なコンピュータシステムと協働する（又は協働可能な）、デジタル記憶媒体、例えばフレキシブルディスク，ＤＶＤ，ブルーレイ，ＣＤ，ＲＯＭ，ＰＲＯＭ，ＥＰＲＯＭ，ＥＥＰＲＯＭ，フラッシュメモリなどの非一時的記憶媒体を使用して実行することができる。従って、そのデジタル記憶媒体はコンピュータ読み取り可能であっても良い。

【0101】

本発明に従う幾つかの実施形態は、上述した方法の１つを実行するようプログラム可能なコンピュータシステムと協働可能で、電子的に読み取り可能な制御信号を有するデータキャリアを含む。

【0102】

一般的に、本発明の実施例は、プログラムコードを有するコンピュータプログラム製品として構成することができ、このプログラムコードは当該コンピュータプログラム製品がコンピュータ上で作動するときに、本発明の方法の一つを実行するよう作動する。そのプログラムコードは例えば機械読み取り可能なキャリアに記憶されていても良い。

【0103】

本発明の他の実施形態は、上述した方法の１つを実行するための、機械読み取り可能なキャリアに記憶されたコンピュータプログラムを含む。

【0104】

換言すれば、本発明の方法のある実施形態は、そのコンピュータプログラムがコンピュータ上で作動するときに、上述した方法の１つを実行するためのプログラムコードを有するコンピュータプログラムである。

【0105】

本発明の他の実施形態は、上述した方法の１つを実行するために記録されたコンピュータプログラムを含む、データキャリア（又はデジタル記憶媒体又はコンピュータ読み取り可能な媒体）である。データキャリア、デジタル記憶媒体、または記録された媒体は、典型的には有形であり、及び／又は非一時的である。

【0106】

本発明の他の実施形態は、上述した方法の１つを実行するためのコンピュータプログラムを表現するデータストリーム又は信号列である。そのデータストリーム又は信号列は、例えばインターネットを介するデータ通信接続を介して伝送されるよう構成されても良い。

【0107】

他の実施形態は、上述した方法の１つを実行するように構成又は適応された、例えばコンピュータ又はプログラム可能な論理デバイスのような処理手段を含む。

【0108】

他の実施形態は、上述した方法の１つを実行するためのコンピュータプログラムがインストールされたコンピュータを含む。

【0109】

本発明によるさらなる実施形態は、本明細書に記載の方法のうちの１つを実行するためのコンピュータプログラムを受信機へと（例えば電子的または光学的に）転送するよう構成された装置またはシステムを含む。受信機は、例えばコンピュータ、携帯デバイス、メモリデバイスなどであってもよい。装置またはシステムは、例えばコンピュータプログラムを受信機へと転送するためのファイルサーバを備えてもよい。

【0110】

幾つかの実施形態においては、（例えば書換え可能ゲートアレイのような）プログラム可能な論理デバイスが、上述した方法の幾つか又は全ての機能を実行するために使用されても良い。幾つかの実施形態では、書換え可能ゲートアレイは、上述した方法の１つを実行するためにマイクロプロセッサと協働しても良い。一般的に、そのような方法は、好適には任意のハードウエア装置によって実行される。

【0111】

上述した実施形態は、本発明の原理を単に例示的に示したにすぎない。本明細書に記載した構成及び詳細について修正及び変更が可能であることは、当業者にとって明らかである。従って、本発明は、本明細書に実施形態の説明及び解説の目的で提示した具体的詳細によって限定されるものではなく、添付した特許請求の範囲によってのみ限定されるべきである。
－備考－
[請求項１]
符号化済みのオーディオビットストリーム（ＢＳ）を処理するよう構成された復号器（１）であって、
前記ビットストリーム（ＢＳ）から復号化済みオーディオ信号（ＤＳ）を導出するよう構成されたビットストリーム復号器（２）であって、前記復号化済みオーディオ信号（ＤＳ）が少なくとも１つの復号化済みフレームを含む、ビットストリーム復号器（２）と、
前記復号化済みオーディオ信号（ＤＳ）内のノイズ（Ｎ）のレベル及び／又はスペクトル形状の推定を含むノイズ推定信号（ＮＥ）を生成するよう構成されたノイズ推定装置（３）と、
前記ノイズ推定信号（ＮＥ）からコンフォートノイズ信号（ＣＮ）を導出するよう構成されたコンフォートノイズ生成装置（４）と、
前記復号化済みオーディオ信号（ＤＳ）の前記復号化済みフレームと前記コンフォートノイズ信号（ＣＮ）とを結合して、オーディオ出力信号（ＯＳ）を得るよう構成された結合部（５）と、
を含む復号器（１）。
[請求項２]
前記復号化済みフレームが活性フレームである、請求項１に記載の復号器。
[請求項３]
前記復号化済みフレームが不活性フレームである、請求項１又は２に記載の復号器。
[請求項４]
前記ノイズ推定装置（３）は、前記復号化済みオーディオ信号（ＤＳ）内の前記ノイズ（Ｎ）のレベル及びスペクトル形状を含む分析信号（ＡＳ）を生成するよう構成されたスペクトル分析装置（６）と、前記分析信号（ＡＳ）に基づいてノイズ推定信号（ＮＥ）を生成するよう構成されたノイズ推定生成装置（７）とを含む、請求項１乃至３のいずれか一項に記載の復号器。
[請求項５]
前記コンフォートノイズ生成装置（４）は、前記ノイズ推定信号（ＮＥ）に基づいて周波数ドメインのコンフォートノイズ信号（ＦＤ）を生成するよう構成されたノイズ生成部（８）と、前記周波数ドメインのコンフォートノイズ信号（ＦＤ）に基づいて前記コンフォートノイズ信号（ＣＮ）を生成するよう構成されたスペクトル合成部（９）とを含む、請求項１乃至４のいずれか一項に記載の復号器。
[請求項６]
前記復号器（１）は、第１操作モード又は第２操作モードへと択一的に前記復号器を切り替えるよう構成されたスイッチ装置（１０）を含み、前記第１操作モードにおいては前記コンフォートノイズ信号（ＣＮ）が前記結合部（５）へ供給され、前記第２操作モードにおいては前記コンフォートノイズ信号（ＣＮ）が前記結合部（５）へ供給されない、請求項１乃至５のいずれか一項に記載の復号器。
[請求項７]
前記復号器（１）は、前記スイッチ装置（１０）を自動的に制御するよう構成された制御装置（１１）を含み、前記制御装置（１１）は、前記復号化済みオーディオ信号（ＤＳ）の信号対ノイズ比に依存して前記スイッチ装置（１０）を制御するよう構成されたノイズ検出部（１２）を含み、前記復号器（１）は、信号対ノイズ比が低い状況下では前記第１操作モードへと切り替えられ、信号対ノイズ比が高い状況下では前記第２操作モードへと切り替えられる、請求項６に記載の復号器。
[請求項８]
前記制御装置（１１）は、前記ビットストリーム（ＢＳ）内に含まれた、前記復号化済みオーディオ信号（ＤＳ）の前記信号対ノイズ比に対応するサイド情報を受信し、ノイズ検出信号（ＮＤ）を生成するよう構成されたサイド情報受信部（１３）を含み、前記ノイズ検出部（１２）は、前記ノイズ検出信号（ＮＤ）に依存して前記スイッチ装置（１０）を切り替える、請求項７に記載の復号器。
[請求項９]
前記復号化済みオーディオ信号（ＤＳ）の信号対ノイズ比に対応するサイド情報は、前記ビットストリーム（ＢＳ）内の少なくとも１つの専用ビットから構成される、請求項８に記載の復号器。
[請求項１０]
前記制御装置（１１）は、前記復号化済みオーディオ信号（ＤＳ）の所望信号（ＷＳ）のエネルギーを決定するよう構成された所望信号エネルギー推定部（１４）と、前記復号化済みオーディオ信号（ＤＳ）のノイズ（Ｎ）のエネルギーを決定するよう構成されたノイズエネルギー推定部（１５）と、前記所望信号（ＷＳ）のエネルギーと前記ノイズ（Ｎ）のエネルギーとに基づいて前記復号化済みオーディオ信号（ＤＳ）の信号対ノイズ比を決定するよう構成された信号対ノイズ比推定部（１６）と、を含み、前記制御装置（１１）によって決定された前記信号対ノイズ比に依存して前記スイッチ装置（１０）が切り替えられる、請求項７乃至９のいずれか一項に記載の復号器。
[請求項１１]
前記ビットストリームは活性フレームと不活性フレームとを含み、前記制御装置（１１）は、前記復号化済みオーディオ信号（ＤＳ）の前記所望信号（ＷＳ）のエネルギーを前記活性フレームの期間中に決定し、前記復号化済みオーディオ信号（ＤＳ）の前記ノイズ（Ｎ）のエネルギーを前記不活性フレームの期間中に決定するよう構成されている、請求項７乃至１０のいずれか一項に記載の復号器。
[請求項１２]
前記ビットストリームは活性フレームと不活性フレームとを含み、前記復号器（１）はサイド情報受信部（１７）を含み、前記サイド情報受信部（１７）は、前記ビットストリーム（ＢＳ）内の現在のフレームが活性か不活性かを示すサイド情報に基づいて、前記活性フレームと前記不活性フレームとを区別するよう構成されている、請求項１乃至１１のいずれか一項に記載の復号器。
[請求項１３]
前記現在のフレームが活性か不活性かを示すサイド情報は、前記ビットストリーム（ＢＳ）内の少なくとも１つの専用ビットから構成されている、請求項１２に記載の復号器。
[請求項１４]
前記制御装置（１１）は、前記復号化済みオーディオ信号（ＤＳ）の前記所望信号（ＷＳ）のエネルギーを、前記分析信号（ＡＳ）に基づいて決定するよう構成されている、請求項４及び請求項７乃至１３のいずれか一項に記載の復号器。
[請求項１５]
前記制御装置（１１）は、前記復号化済みオーディオ信号（ＤＳ）の前記ノイズ（Ｎ）のエネルギーを、前記ノイズ推定信号（ＮＥ）に基づいて決定するよう構成されている、請求項７乃至１４のいずれか一項に記載の復号器。
[請求項１６]
前記コンフォートノイズ生成装置（４）は、目標コンフォートノイズレベル信号（ＴＮＬ）に基づいて前記コンフォートノイズ信号（ＣＮ）を生成するよう構成されている、請求項１乃至１５のいずれか一項に記載の復号器。
[請求項１７]
前記目標コンフォートノイズレベル信号（ＴＮＬ）は、前記ビットストリーム（ＢＳ）のビットレートに依存して調整される、請求項１６に記載の復号器。
[請求項１８]
前記目標コンフォートノイズレベル信号（ＴＮＬ）は、前記ビットストリーム（ＢＳ）に適用されたノイズ低減方法によって引き起こされたノイズ減衰レベルに依存して調整される、請求項１５又は１７に記載の復号器。
[請求項１９]
前記周波数ドメインのコンフォートノイズ信号（ＦＤ）の周波数帯域ｋのエネルギーＥ_w（ｋ）は、前記目標コンフォートノイズレベル信号（ＴＮＬ）に依存して調整され、前記目標コンフォートノイズレベル信号（ＴＮＬ）は目標コンフォートノイズレベルｇ_tarを示し、各周波数帯域ｋについて、
[数４]

であり、ここで、

は、前記ノイズ推定生成装置（７）によって供給された、前記周波数帯域ｋにおける前記復号化済みオーディオ信号（ＤＳ）の前記ノイズＮのエネルギーの推定を示す、請求項１６乃至１８のいずれか一項に記載の復号器。
[請求項２０]
前記復号器（１）は更なるビットストリーム復号器を含み、前記ビットストリーム復号器（２）と前記更なるビットストリーム復号器とは異なるタイプのものであり、前記復号器（１）はスイッチを含み、そのスイッチは、前記ビットストリーム復号器（２）からの前記復号化済み信号（ＤＳ）、又は前記更なるビットストリーム復号器からの復号化済み信号のいずれかを、前記ノイズ推定装置（３）と前記結合部（５）とに供給するよう構成されている、請求項１乃至１９のいずれか一項に記載の復号器。
[請求項２１]
オーディオビットストリーム（ＢＳ）を生成するよう構成された符号器（１８）であって、
オーディオ入力信号（ＩＳ）に対応する符号化済みオーディオ信号（ＥＳ）を生成し、前記符号化済みオーディオ信号（ＥＳ）から前記ビットストリーム（ＢＳ）を導出するよう構成されたビットストリーム符号器（２０）と、
所望信号エネルギー推定部（３１）により決定された前記オーディオ入力信号（ＩＳ）の所望信号のエネルギーとノイズエネルギー推定部（３２）により決定された前記オーディオ入力信号（ＩＳ）のノイズのエネルギーとに基づいて、前記オーディオ入力信号（ＩＳ）の信号対ノイズ比を決定するよう構成された信号対ノイズ比推定部（３３）を有する、信号分析部（３０）と、
ノイズ低減済みオーディオ信号（ＴＳ）を生成するよう構成されたノイズ低減装置（２７，２８）と、
前記オーディオ入力信号（ＩＳ）の決定された信号対ノイズ比に依存して、前記オーディオ入力信号（ＩＳ）又は前記ノイズ低減済みオーディオ信号（ＴＳ）のいずれかを、それぞれの信号（ＩＳ，ＴＳ）を符号化するために、前記ビットストリーム符号器（２０）に対して供給するよう構成されたスイッチ装置（３５）であって、前記ビットストリーム符号器（２０）は、前記オーディオ入力信号（ＩＳ）又は前記ノイズ低減済みオーディオ信号（ＴＳ）のどちらが符号化されているかを示すサイド情報（ＮＦ）を前記ビットストリーム（ＢＳ）内で伝送するよう構成されている、スイッチ装置（３５）と、
を含む符号器（１８）。
[請求項２２]
復号器（１）と符号器（１８）とを含むシステムであって、前記復号器（１）が請求項１乃至１９のいずれか一項に記載のように設計され、及び／又は前記符号器（１８）が請求項２１に記載のように設計されている、システム。
[請求項２３]
オーディオビットストリーム（ＢＳ）を復号化する方法であって、
前記ビットストリーム（ＢＳ）から復号化済みオーディオ信号（ＤＳ）を導出するステップであって、前記復号化済みオーディオ信号（ＤＳ）が少なくとも１つの復号化済みフレームを含むステップと、
前記復号化済みオーディオ信号（ＤＳ）内のノイズ（Ｎ）のレベル及び／又はスペクトル形状の推定を含むノイズ推定信号（ＮＥ）を生成するステップと、
前記ノイズ推定信号（ＮＥ）からコンフォートノイズ信号（ＣＮ）を導出するステップと、
前記復号化済みオーディオ信号（ＤＳ）の前記復号化済みフレームと前記コンフォートノイズ信号（ＣＮ）とを結合して、オーディオ出力信号（ＯＳ）を得るステップと、
を含む方法。
[請求項２４]
オーディオビットストリーム（ＢＳ）を生成するためのオーディオ信号符号化の方法であって、
オーディオ入力信号（ＩＳ）の所望信号（ＷＳ）の決定されたエネルギーと前記オーディオ入力信号（ＩＳ）のノイズ（Ｎ）の決定されたエネルギーとに基づいて、前記オーディオ入力信号（ＩＳ）の信号対ノイズ比を決定するステップと、
ノイズ低減済みオーディオ信号（ＴＳ）を生成するステップと、
前記オーディオ入力信号（ＩＳ）と対応する符号化済みオーディオ信号（ＥＳ）を生成するステップであって、前記オーディオ入力信号（ＩＳ）の決定された信号対ノイズ比に依存して、前記オーディオ入力信号（ＩＳ）と前記ノイズ低減済みオーディオ信号（ＴＳ）とのいずれかを符号化するステップと、
前記符号化済みオーディオ信号（ＥＳ）から前記ビットストリーム（ＢＳ）を導出するステップと、
前記オーディオ入力信号（ＩＳ）又は前記ノイズ低減済みオーディオ信号（ＴＳ）のどちらが符号化されているかを示すサイド情報（ＮＦ）を、前記ビットストリーム（ＢＳ）内で伝送するステップと、
を含む方法。
[請求項２５]
請求項２４に記載の方法に従って生成されたビットストリーム。
[請求項２６]
コンピュータ又はプロセッサ上で作動したときに、請求項２３又は２４の方法を実行するためのコンピュータプログラム。

【符号の説明】

【0112】

１ 復号器
２ ビットストリーム復号器
３ ノイズ推定装置
４ コンフォートノイズ生成装置
５ 結合部
６ スペクトル分解装置
７ ノイズ推定生成装置
８ ノイズ生成部
９ スペクトル合成部
１０ スイッチ装置
１１ 制御装置
１２ ノイズ検出部
１３ サイド情報受信部
１４ 所望信号エネルギー推定部
１５ ノイズエネルギー推定部
１６ 信号対ノイズ比推定部
１７ サイド情報受信部
１７ａ スイッチ
１８ 符号器
１９ 信号分析部
２０ ビットストリーム符号器
２１ 信号符号器
２２ ビットストリーム生成部
２３ 信号分析部
２４ ノイズ推定装置
２５ スペクトル分析装置
２６ ノイズ推定生成部
２７ ノイズ低減モジュール
２８ スペクトル合成装置
２９ 信号活性度検出部
３０ 信号分析部
３１ 所望信号エネルギー推定部
３２ ノイズエネルギー推定部
３３ 信号対ノイズ比推定部
３４ ノイズ検出部
３５ スイッチ
３６ 信号活性度検出部
３７ スイッチ
ＢＳ 符号化済みオーディオビットストリーム
ＤＳ 復号化済みオーディオ信号
ＮＥ ノイズ推定信号
Ｎ ノイズ
ＣＮ コンフォートノイズ
ＯＳ オーディオ出力信号
ＡＳ 分析信号
ＦＤ 周波数ドメインのコンフォートノイズ信号
ＮＤ ノイズ検出信号
ＴＮＬ 目標コンフォートノイズレベル
ＩＳ 入力信号
ＥＳ 符号化済み信号
ＯＷ 所望信号エネルギー推定部の出力信号
ＯＮ ノイズエネルギー推定部の出力信号
ＳＩ 入力信号についてのスペクトル信号
ＮＩ 入力信号についてのノイズ推定信号
ＴＡＳ 目標減衰信号
ＦＳ 強化された周波数ドメイン信号
ＴＳ ノイズ低減済みオーディオ信号
ＡＤ 活性度検出部信号
ＷＥ 所望信号エネルギー信号
ＥＮ ノイズエネルギー信号
ＲＳ 信号対ノイズ比信号
ＮＦ ノイズフラグ
ＳＡ 信号活性度信号
ＦＦ フレームフォーマット
ＳＶ 信号ベクトル
ＡＦ 活性度フラグ
ＮＦ ノイズフラグ信号
ＰＢ パディングビット

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】