特表2023-551556エコーの抑制のためのオーディオ信号処理方法及びシステム
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】公表特許公報(A)
(11)【公表番号】
(43)【公表日】2023-12-08
(54)【発明の名称】エコーの抑制のためのオーディオ信号処理方法及びシステム
(51)【国際特許分類】
H04R 3/02 20060101AFI20231201BHJP
【ＦＩ】
H04R3/02
【審査請求】有
【予備審査請求】未請求
(21)【出願番号】P 2023533789
(86)(22)【出願日】2020-12-28
(85)【翻訳文提出日】2023-06-01
(86)【国際出願番号】 CN2020140215
(87)【国際公開番号】W WO2022140928
(87)【国際公開日】2022-07-07
(81)【指定国・地域】
【公序良俗違反の表示】
（特許庁注：以下のものは登録商標）
１．ＪＡＶＡ
(71)【出願人】
【識別番号】514156013
【氏名又は名称】深▲セン▼市韶音科技有限公司
【氏名又は名称原語表記】ＳＨＥＮＺＨＥＮ ＳＨＯＫＺ ＣＯ．，ＬＴＤ．
【住所又は居所原語表記】Ｆｌｏｏｒｓ １－４，Ｆａｃｔｏｒｙ Ｂｕｉｌｄｉｎｇ ２６，Ｓｈａｎｃｈｅｎｇ Ｉｎｄｕｓｔｒｉａｌ Ｐａｒｋ，Ｓｈｉｙａｎ Ｓｔｒｅｅｔ，Ｂａｏ’ａｎ Ｄｉｓｔｒｉｃｔ，Ｓｈｅｎｚｈｅｎ，Ｇｕａｎｇｄｏｎｇ ５１８１０８，ＣＨＩＮＡ
(74)【代理人】
【識別番号】100205936
【弁理士】
【氏名又は名称】崔 海龍
(74)【代理人】
【識別番号】100132805
【弁理士】
【氏名又は名称】河合 貴之
(72)【発明者】
【氏名】鄭 金波
(72)【発明者】
【氏名】周 美林
(72)【発明者】
【氏名】廖 風云
(72)【発明者】
【氏名】齊 心
【テーマコード（参考）】
5D220
【Ｆターム（参考）】
5D220BA01
5D220BA21
5D220CC01
(57)【要約】
本明細書によって提供されるエコーの抑制のためのオーディオ信号処理方法及びシステムは、スピーカ信号強度に基づいて目標オーディオ処理モードの選択を制御する。前記方法及びシステムは、スピーカ信号強度に基づいて対応する制御信号を生成し、制御信号に基づいて目標オーディオ処理モードを制御し、より優れる音声品質が得られるようにマイクロフォン信号を信号処理する。システムは、スピーカ信号が閾値を超えていない場合、第１のモードを選択し、第１の目標オーディオが得られるように第１のオーディオ信号及び第２のオーディオ信号を信号処理する。システムは、スピーカ信号が閾値を超えている場合、第２のモードを選択し、第２の目標オーディオが得られるように第２のオーディオ信号を信号処理する。前記方法及びシステムは、スピーカ信号に基づいて目標オーディオ処理モードを切り替え、異なるシーンでより良い音声品質が得られることを確保し、音声通信品質を向上させることができる。
【選択図】図１
【選択図】図１
【特許請求の範囲】
【請求項1】
エコーの抑制のためのオーディオ信号処理方法であって、少なくともスピーカ信号に基づいて複数のオーディオ処理モードから電子機器の目標オーディオ処理モードを選択するステップであって、前記スピーカ信号は、制御機器が前記電子機器に送信するオーディオ信号であるステップと、
前記目標オーディオ処理モードによってマイクロフォン信号を処理して目標オーディオを生成することにより、少なくとも前記目標オーディオにおけるエコーを低減するステップであって、前記マイクロフォン信号は、前記電子機器が取得するマイクロフォンモジュールの出力信号であり、前記マイクロフォンモジュールは、少なくとも１つの第１のタイプのマイクロフォン及び少なくとも１つの第２のタイプのマイクロフォンを含むステップと、
前記目標オーディオ信号を出力するステップと、を含む、
ことを特徴とするエコーの抑制のためのオーディオ信号処理方法。
【請求項2】
前記少なくとも１つの第１のタイプのマイクロフォンは、第１のオーディオ信号を出力し、及び、前記少なくとも１つの第２のタイプのマイクロフォンは、第２のオーディオ信号を出力し、
ここで、前記マイクロフォン信号は、前記第１のオーディオ信号及び前記第２のオーディオ信号を含む、
ことを特徴とする請求項１に記載のオーディオ信号処理方法。
【請求項3】
前記少なくとも１つの第１のタイプのマイクロフォンは、人体振動信号の収集に用いられ、及び、前記少なくとも１つの第２のタイプのマイクロフォンは、空気振動信号の収集に用いられる、
ことを特徴とする請求項２に記載のオーディオ信号処理方法。
【請求項4】
前記複数のオーディオ処理モードは、少なくとも、前記第１のオーディオ信号及び前記第２のオーディオ信号を信号処理する第１のモードと、
前記第２のオーディオ信号を信号処理する第２のモードと、を含む、
ことを特徴とする請求項２に記載のオーディオ信号処理方法。
【請求項5】
少なくともスピーカ信号に基づいて複数のオーディオ処理モードから電子機器の目標オーディオ処理モードを選択する前記ステップは、少なくとも前記スピーカ信号強度に基づいて、前記スピーカ信号に対応する制御信号を生成するステップであって、前記制御信号が第１の制御信号又は第２の制御信号を含むステップと、
前記制御信号に基づいて、前記制御信号に対応する目標オーディオ処理モードを選択するステップであって、ここで、前記第１のモードが前記第１の制御信号に対応し、前記第２のモードが前記第２の制御信号に対応するステップと、を含む、
ことを特徴とする請求項４に記載のオーディオ信号処理方法。
【請求項6】
少なくとも前記スピーカ信号強度に基づいて、前記スピーカ信号に対応する制御信号を生成する前記ステップは、前記スピーカ信号強度が予め設定されたスピーカ閾値より低いと決定し、前記第１の制御信号を生成するステップ、あるいは、
前記スピーカ信号強度が前記スピーカ閾値より高いと決定し、前記第２の制御信号を生成するステップを含む、
ことを特徴とする請求項５に記載のオーディオ信号処理方法。
【請求項7】
少なくとも前記スピーカ信号強度に基づいて、前記スピーカ信号に対応する制御信号を生成する前記ステップは、前記スピーカ信号強度及び前記マイクロフォン信号に基づいて、対応する制御信号を生成するステップを含む、
ことを特徴とする請求項５に記載のオーディオ信号処理方法。
【請求項8】
前記スピーカ信号強度及び前記マイクロフォン信号に基づいて、対応する制御信号を生成する前記ステップは、前記マイクロフォン信号の評価パラメータを取得するステップであって、前記評価パラメータは、環境ノイズ評価パラメータを含み、前記環境ノイズ評価パラメータは、環境ノイズレベル及び信号対雑音比の少なくとも１つを含むステップと、
前記スピーカ信号強度及び前記評価パラメータに基づいて、前記制御信号を生成するステップと、を含む、
ことを特徴とする請求項７に記載のオーディオ信号処理方法。
【請求項9】
前記スピーカ信号強度及び前記評価パラメータに基づいて、前記制御信号を生成するステップは、前記スピーカ信号強度が予め設定されたスピーカ閾値より高いと決定し、前記第２の制御信号を生成するステップと、
前記スピーカ信号強度が前記スピーカ閾値より低く、かつ前記環境ノイズ評価パラメータが予め設定されたノイズ評価範囲外にあると決定し、前記第１の制御信号を生成するステップと、
前記スピーカ信号強度が前記スピーカ閾値より低く、かつ前記環境ノイズ評価パラメータが前記ノイズ評価範囲内にあると決定し、前記第１の制御信号又は前記第２の制御信号を生成するステップとのいずれかの場合を含む、
ことを特徴とする請求項８に記載のオーディオ信号処理方法。
【請求項10】
前記環境ノイズ評価パラメータが前記ノイズ評価範囲内にあることは、前記環境ノイズレベルが予め設定された環境ノイズ閾値より低いことと、
前記信号対雑音比が予め設定された信号対雑音比閾値より高いことと、の少なくとも１つを含む、
ことを特徴とする請求項９に記載のオーディオ信号処理方法。
【請求項11】
前記評価パラメータは、人間音声信号強度をさらに含み、前記スピーカ信号強度及び前記評価パラメータに基づいて、前記制御信号を生成する前記ステップは、前記スピーカ信号強度が予め設定されたスピーカ閾値より高く、かつ前記人間音声信号強度が予め設定された人間音声閾値を超え、前記環境ノイズ評価パラメータが予め設定されたノイズ評価範囲外にあると決定し、前記第１の制御信号を生成するステップと、
前記スピーカ信号強度が前記スピーカ閾値より高く、かつ前記人間音声信号強度が前記人間音声閾値を超え、前記環境ノイズ評価パラメータが前記ノイズ評価範囲内にあると決定し、前記第２の制御信号を生成するステップと、
前記スピーカ信号強度が前記スピーカ閾値より高く、かつ前記人間音声信号強度が前記人間音声閾値より低いと決定し、前記第２の制御信号を生成するステップと、
前記スピーカ信号強度が前記スピーカ閾値より低く、かつ前記環境ノイズ評価パラメータが前記ノイズ評価範囲外にあると決定し、前記第１の制御信号を生成するステップと、
前記スピーカ信号強度が前記スピーカ閾値より低く、かつ前記環境ノイズ評価パラメータが前記ノイズ評価範囲内にあると決定し、前記第１の制御信号又は前記第２の制御信号を生成するステップとのいずれかの場合を含む、
ことを特徴とする請求項８に記載のオーディオ信号処理方法。
【請求項12】
前記環境ノイズ評価パラメータが前記ノイズ評価範囲内にあることは、前記環境ノイズレベルが予め設定された環境ノイズ閾値より低いことと、
前記信号対雑音比が予め設定された信号対雑音比閾値より高いことと、の少なくとも１つを含む、
ことを特徴とする請求項１１に記載のオーディオ信号処理方法。
【請求項13】
目標オーディオを生成する前記ステップは、前記第１のモードにおける第１のアルゴリズムにより、前記第１のオーディオ信号及び前記第２のオーディオ信号を信号処理し、第１の目標オーディオを生成するステップ、あるいは、
前記第２のモードにおける第２のアルゴリズムにより、前記第２のオーディオ信号を信号処理し、第２の目標オーディオを生成するステップを含み、
ここで、前記目標オーディオは、前記第１の目標オーディオと前記第２の目標オーディオとのうちの１つを含む、
ことを特徴とする請求項５に記載のオーディオ信号処理方法。
【請求項14】
前記目標オーディオを出力する前記ステップは、前記目標オーディオに対して平滑化処理を行い、前記目標オーディオが前記第１の目標オーディオと前記第２の目標オーディオとの間で切り替えられる時、前記第１の目標オーディオと前記第２の目標オーディオとの接続箇所に対して前記平滑化処理を行うステップと、
前記平滑化処理された前記目標オーディオを出力するステップと、を含む、
ことを特徴とする請求項１３に記載のオーディオ信号処理方法。
【請求項15】
前記方法は、前記制御信号に基づいて、前記スピーカのスピーカ入力信号の強度を制御するステップをさらに含む、
ことを特徴とする請求項５に記載のオーディオ信号処理方法。
【請求項16】
前記制御信号に基づいて、前記スピーカのスピーカ入力信号の強度を制御する前記ステップは、前記制御信号を前記第１の制御信号として決定し、前記スピーカに入力される前記スピーカ入力信号の強度を低減することにより、前記スピーカが出力する音響の強度を低減するステップを含む、
ことを特徴とする請求項１５に記載のオーディオ信号処理方法。
【請求項17】
エコーの抑制のためのオーディオ信号処理のシステムであって、エコーを抑制するオーディオ信号処理のための少なくとも１つの指令セットが記憶されている少なくとも１つの記憶媒体と、
前記少なくとも１つの記憶媒体と通信可能に接続されている少なくとも１つのプロセッサと、を含み、
ここで、前記少なくとも１つのプロセッサは、前記システムが動作する場合、前記少なくとも１つの指令セットを読み取り、前記少なくとも１つの指令セットの指示に基づいて請求項１～１６のいずれかに記載のエコーの抑制のためのオーディオ信号処理方法を実行する、
ことを特徴とするエコーの抑制のためのオーディオ信号処理のシステム。
【発明の詳細な説明】
【技術分野】
【0001】
本明細書は、オーディオ信号処理分野に関し、特に、エコーの抑制のためのオーディオ信号処理方法及びシステムに関する。
【背景技術】
【0002】
現在、振動センサは、イヤホンなどの電子製品に用いられ、骨伝導マイクロフォンとして音声信号を受信する応用が増えている。人が話している時、骨格及び皮膚の振動を同時に引き起こし、これらの振動は、骨伝導の音声信号であり、骨伝導マイクロフォンによってピックアップされて信号を発生させることができる。システムは、骨伝導マイクロフォンが収集した振動信号を電気信号又は他のタイプの信号に変換し、電子機器に伝達してピックアップ機能を実現する。現在、ますます多くの電子機器は、異なる特性を有する気伝導マイクロフォンと骨伝導マイクロフォンとを組み合わせて、気伝導マイクロフォンを利用して外部のオーディオ信号をピックアップし、骨伝導マイクロフォンを利用して発声部位の振動信号をピックアップし、ピックアップした信号に対して音声強調処理及び融合を行う。骨伝導マイクロフォンをイヤホン又はスピーカを有する他の電子機器内に配置すると、骨伝導マイクロフォンは、人の発話時の振動信号だけでなく、イヤホン又は他の電子機器のスピーカが音を再生している時に発生する振動信号も受信することにより、エコー信号を発生させることができる。この場合、エコー消去アルゴリズム処理が必要となる。スピーカのエコー信号が異なると、マイクロフォンの音声品質にも影響を与える。例えば、スピーカの入力信号が強い場合、骨伝導マイクロフォンが受信するスピーカ振動信号が比較的大きく、骨伝導マイクロフォンが受信する人の発話時に発生する振動信号より遥かに大きく、この時、従来のエコー消去アルゴリズムでは、骨伝導マイクロフォンにおけるエコーを消去することは困難である。この時、気伝導マイクロフォン及び骨伝導マイクロフォンから出力されるマイクロフォン信号を音源信号として得られる音声品質が比較的悪い。したがって、マイクロフォンの音源信号を選択する時にスピーカのエコー信号を考慮しないのは合理的ではない。
【0003】
したがって、異なるスピーカ入力信号に基づいて入力される音源信号を切り替え、エコー消去の効果を向上させ、音声品質を向上させるように、エコーの抑制のための新たなオーディオ信号処理方法及びシステムを提供する必要がある。
【発明の概要】
【0004】
本明細書は、エコー消去の効果を向上させ、音声品質を向上させるように、エコーの抑制のための新たなオーディオ信号処理方法及びシステムを提供する。
【課題を解決するための手段】
【0005】
第１の態様において、本明細書は、少なくともスピーカ信号に基づいて複数のオーディオ処理モードから電子機器の目標オーディオ処理モードを選択するステップであって、前記スピーカ信号は、制御機器が前記電子機器に送信するオーディオ信号であるステップと、前記目標オーディオ処理モードによってマイクロフォン信号を処理して目標オーディオを生成することにより、少なくとも前記目標オーディオにおけるエコーを低減するステップであって、前記マイクロフォン信号は、前記電子機器が取得するマイクロフォンモジュールの出力信号であり、前記マイクロフォンモジュールは、少なくとも１つの第１のタイプのマイクロフォン及び少なくとも１つの第２のタイプのマイクロフォンを含むステップと、前記目標オーディオ信号を出力するステップと、を含むエコーの抑制のためのオーディオ信号処理方法を提供する。
【0006】
いくつかの実施形態では、前記少なくとも１つの第１のタイプのマイクロフォンは、第１のオーディオ信号を出力し、及び、前記少なくとも１つの第２のタイプのマイクロフォンは、第２のオーディオ信号を出力し、ここで、前記マイクロフォン信号は、前記第１のオーディオ信号及び前記第２のオーディオ信号を含む。
【0007】
いくつかの実施形態では、前記少なくとも１つの第１のタイプのマイクロフォンは、人体振動信号の収集に用いられ、及び、前記少なくとも１つの第２のタイプのマイクロフォンは、空気振動信号の収集に用いられる。
【0008】
いくつかの実施形態では、前記複数のオーディオ処理モードは、少なくとも、前記第１のオーディオ信号及び前記第２のオーディオ信号を信号処理する第１のモードと、前記第２のオーディオ信号を信号処理する第２のモードと、を含む。
【0009】
いくつかの実施形態では、少なくともスピーカ信号に基づいて複数のオーディオ処理モードから電子機器の目標オーディオ処理モードを選択する前記ステップは、少なくとも前記スピーカ信号強度に基づいて、前記スピーカ信号に対応する制御信号を生成するステップであって、前記制御信号が第１の制御信号又は第２の制御信号を含むステップと、前記制御信号に基づいて、前記制御信号に対応する目標オーディオ処理モードを選択するステップであって、ここで、前記第１のモードが前記第１の制御信号に対応し、前記第２のモードが前記第２の制御信号に対応するステップと、を含む。
【0010】
いくつかの実施形態では、少なくとも前記スピーカ信号強度に基づいて、前記スピーカ信号に対応する制御信号を生成する前記ステップは、前記スピーカ信号強度が予め設定されたスピーカ閾値より低いと決定し、前記第１の制御信号を生成するステップ、あるいは、前記スピーカ信号強度が前記スピーカ閾値より高いと決定し、前記第２の制御信号を生成するステップを含む。
【0011】
いくつかの実施形態では、少なくとも前記スピーカ信号強度に基づいて、前記スピーカ信号に対応する制御信号を生成する前記ステップは、前記スピーカ信号強度及び前記マイクロフォン信号に基づいて、対応する制御信号を生成するステップを含む。
【0012】
いくつかの実施形態では、前記スピーカ信号強度及び前記マイクロフォン信号に基づいて、対応する制御信号を生成する前記ステップは、前記マイクロフォン信号の評価パラメータを取得するステップであって、前記評価パラメータは、環境ノイズ評価パラメータを含み、前記環境ノイズ評価パラメータは、環境ノイズレベルと信号対雑音比とのうちの少なくとも１つを含むステップと、前記スピーカ信号強度及び前記評価パラメータに基づいて、前記制御信号を生成するステップと、を含む。
【0013】
いくつかの実施形態では、前記スピーカ信号強度及び前記評価パラメータに基づいて、前記制御信号を生成するステップは、前記スピーカ信号強度が予め設定されたスピーカ閾値より高いと決定し、前記第２の制御信号を生成するステップと、前記スピーカ信号強度が前記スピーカ閾値より低く、かつ前記環境ノイズ評価パラメータが予め設定されたノイズ評価範囲外にあると決定し、前記第１の制御信号を生成するステップと、前記スピーカ信号強度が前記スピーカ閾値より低く、かつ前記環境ノイズ評価パラメータが前記ノイズ評価範囲内にあると決定し、前記第１の制御信号又は前記第２の制御信号を生成するステップとのいずれかの場合を含む。
【0014】
いくつかの実施形態では、前記環境ノイズ評価パラメータが前記ノイズ評価範囲内にあることは、前記環境ノイズレベルが予め設定された環境ノイズ閾値より低いことと、前記信号対雑音比が予め設定された信号対雑音比閾値より高いことと、の少なくとも１つを含む。
【0015】
いくつかの実施形態では、前記評価パラメータは、人間音声信号強度をさらに含み、前記スピーカ信号強度及び前記評価パラメータに基づいて、前記制御信号を生成する前記ステップは、前記スピーカ信号強度が予め設定されたスピーカ閾値より高く、かつ前記人間音声信号強度が予め設定された人間音声閾値を超え、前記環境ノイズ評価パラメータが予め設定されたノイズ評価範囲外にあると決定し、前記第１の制御信号を生成するステップと、前記スピーカ信号強度が前記スピーカ閾値より高く、かつ前記人間音声信号強度が前記人間音声閾値を超え、前記環境ノイズ評価パラメータが前記ノイズ評価範囲内にあると決定し、前記第２の制御信号を生成するステップと、前記スピーカ信号強度が前記スピーカ閾値より高く、かつ前記人間音声信号強度が前記人間音声閾値より低いと決定し、前記第２の制御信号を生成するステップと、前記スピーカ信号強度が前記スピーカ閾値より低く、かつ前記環境ノイズ評価パラメータが前記ノイズ評価範囲外にあると決定し、前記第１の制御信号を生成するステップと、前記スピーカ信号強度が前記スピーカ閾値より低く、かつ前記環境ノイズ評価パラメータが前記ノイズ評価範囲内にあると決定し、前記第１の制御信号又は前記第２の制御信号を生成するステップとのいずれかの場合を含む。
【0016】
いくつかの実施形態では、前記環境ノイズ評価パラメータが前記ノイズ評価範囲内にあることは、前記環境ノイズレベルが予め設定された環境ノイズ閾値より低いことと、前記信号対雑音比が予め設定された信号対雑音比閾値より高いことと、の少なくとも１つを含む。
【0017】
いくつかの実施形態では、目標オーディオを生成する前記ステップは、前記第１のモードにおける第１のアルゴリズムにより、前記第１のオーディオ信号及び前記第２のオーディオ信号を信号処理し、第１の目標オーディオを生成するステップ、あるいは、前記第２のモードにおける第２のアルゴリズムにより、前記第２のオーディオ信号を信号処理し、第２の目標オーディオを生成するステップを含み、ここで、前記目標オーディオは、前記第１の目標オーディオと前記第２の目標オーディオとのうちの１つを含む。
【0018】
いくつかの実施形態では、前記目標オーディオを出力する前記ステップは、前記目標オーディオに対して平滑化処理を行い、前記目標オーディオが前記第１の目標オーディオと前記第２の目標オーディオとの間で切り替えられる時、前記第１の目標オーディオと前記第２の目標オーディオとの接続箇所に対して前記平滑化処理を行うステップと、前記平滑化処理された前記目標オーディオを出力するステップと、を含む。
【0019】
いくつかの実施形態では、前記方法は、前記制御信号に基づいて、前記スピーカのスピーカ入力信号の強度を制御するステップをさらに含む。
【0020】
いくつかの実施形態では、前記制御信号に基づいて、前記スピーカのスピーカ入力信号の強度を制御する前記ステップは、前記制御信号を前記第１の制御信号として決定し、前記スピーカに入力される前記スピーカ入力信号の強度を低減することにより、前記スピーカが出力する音響の強度を低減するステップを含む。
【0021】
第２の態様において、本明細書は、エコーを抑制するオーディオ信号処理のための少なくとも１つの指令セットが記憶されている少なくとも１つの記憶媒体と、前記少なくとも１つの記憶媒体と通信可能に接続されている少なくとも１つのプロセッサと、を含むエコーの抑制のためのオーディオ信号処理のシステムであって、ここで、前記少なくとも１つのプロセッサは、前記システムが動作する場合、前記少なくとも１つの指令セットを読み取り、前記少なくとも１つの指令セットの指示に基づいて本明細書の第１の態様に記載のエコーの抑制のためのオーディオ信号処理方法を実行するエコーの抑制のためのオーディオ信号処理のシステムをさらに提供する。
【0022】
以上の技術案から分かるように、本明細書によって提供されるエコーの抑制のためのオーディオ信号処理方法及びシステムは、スピーカ信号強度に基づいて前記スピーカ信号に対応する制御信号を生成し、制御信号に基づいてオーディオ処理モードを制御又は切り替えることにより、オーディオ処理モードに対応する音源信号を信号処理し、より優れる音声品質を取得することができる。前記システムは、スピーカ信号が閾値を超えていない場合、第1の制御信号を生成し、第1のモードを選択し、第１のオーディオ信号及び第２のオーディオ信号を第１の音源信号とし、第１の目標オーディオが得られるように第１の音源信号を信号処理する。スピーカ信号が閾値を超えている場合、第１のオーディオ信号におけるスピーカエコーが大きい。この時、前記システムは、第２の制御信号を生成し、第２のモードを選択し、第２のオーディオ信号を第２の音源信号とし、第２の目標オーディオが得られるように、第２の音源信号を信号処理する。前記方法及びシステムは、スピーカ信号に基づいて異なるオーディオ処理モードを切り替えることにより、マイクロフォン信号の音源信号を切り替え、音声品質を向上させ、異なるシーンでより良い音声品質が得られることを確保することができる。
【0023】
本明細書によって提供されるエコーの抑制のためのオーディオ信号処理方法及びシステムのその他の機能の一部は、以下の説明に記載される。説明によると、以下の数字及び例で紹介されている内容は、当業者にとって自明なことである。本明細書によって提供されるエコーの抑制のためのオーディオ信号処理方法及びシステムの創造的な態様は、以下の詳細な例に記載の方法、装置及び組み合わせを実践するか又は使用することによって十分に説明することができる。
【図面の簡単な説明】
【0024】
本明細書の実施形態における技術案をより明確に説明するために、以下に、実施形態の説明において使用する必要がある図面を簡単に説明するが、以下の説明における図面は、本明細書のいくつかの実施形態に過ぎず、当業者にとって創造的な労力を払うことなく、これらの図面に基づいて他の図面を得ることもできることは明白である。
【図1】本明細書の実施形態に従って提供されるエコーの抑制のためのオーディオ信号処理システムのいくつかの応用シーンの概略図を示す。
【図2】本明細書の実施形態に従って提供されるいくつかの電子機器の機器概略図を示す。
【図3】本明細書の実施形態に従って提供されるいくつかの第１のモードの動作概略図を示す。
【図4】本明細書の実施形態に従って提供されるいくつかの第２のモードの動作概略図を示す。
【図5】本明細書の実施形態に従って提供されるエコーの抑制のためのオーディオ信号処理方法のいくつかのフローチャートを示す。
【図6】本明細書の実施形態に従って提供されるエコーの抑制のためのオーディオ信号処理方法のいくつかのフローチャートを示す。
【図7】本明細書の実施形態に従って提供されるエコーの抑制のためのオーディオ信号処理方法のいくつかのフローチャートを示す。
【発明を実施するための形態】
【0025】
以下の説明は、当業者が本明細書の内容を製造して使用できるようにするために、本明細書の特定の応用シーン及び要件を提供する。当業者にとっては、開示される実施形態に対する様々な局所的な補正が自明であり、本明細書で定義された一般的な原理は、本明細書の精神及び範囲を逸脱することなく、他の実施形態及び応用に適用され得る。したがって、本明細書は、示された実施形態に限定されるものではなく、請求項と一致する最も広い範囲である。
【0026】
本明細書で使用される用語は、特定の例示的な実施形態を説明する目的のみに使用され、限定的なものではない。例えば、文脈で特に明記されていない限り、ここで使用される、単数形の「１」、「１つ」及び「当該」は、複数形を含むこともできる。本明細書で使用される場合、「含む」、「包含」及び／又は「含有」という用語は、関連する整数、ステップ、動作、要素及び／又は構成要素が存在するが、１つ又は複数の他の特徴、整数、ステップ、動作、要素、構成要素及び／又はグループの存在を排除するものではなく、又は当該システム／方法に他の特徴、整数、ステップ、動作、要素、構成要素及び／又はグループを追加してもよいことを意味する。
【0027】
以下の説明を考慮すると、本明細書のこれらの特徴及びその他の特徴、構造の関連要素の動作及び機能、ならびに部品の組み合わせ及び製造の経済性を著しく向上させることができる。図面を参照すると、これらはすべて本明細書の一部を形成する。しかしながら、図面は、説明及び記載の目的のためだけに使用され、本明細書の範囲を限定することを意図していないことは明確に理解すべきである。図面は比例して描かれていないことも理解すべきである。
【0028】
本明細書で使用されるフローチャートは、本明細書におけるいくつかの実施形態のシステムによって実現される動作を示す。フローチャートの動作は、順序通りに実現しなくてもよいことを明確に理解すべきである。逆に、動作は、順序を逆にしたり、同時に実現したりできる。なお、フローチャートに１つ又は複数の他の動作を追加することができる。フローチャートから１つ又は複数の動作を削除することができる。
【0029】
図１は、本明細書の実施形態に従って提供されるエコーの抑制のためのオーディオ信号処理システム１００（以下に、単にシステム１００という）の応用シーンの概略図を示す。システム１００は、電子機器２００及び制御機器４００を含むことができる。
【0030】
電子機器２００は、本明細書に記載のエコーの抑制のためのオーディオ信号処理方法を実行するデータ又は指令を記憶することができ、前記データ及び／又は指令を実行することができる。いくつかの実施形態では、電子機器２００は、ワイヤレスイヤホン、有線イヤホン、スマートウェアラブルデバイス、例えば、スマートメガネ、スマートヘルメット、スマート腕時計などの音声収集機能及び音声再生機能を有する機器であってもよい。電子機器２００は、モバイルデバイス、タブレット、ノートパソコン、自動車内蔵機器又は同様のコンテンツ、又はそれらの任意の組み合わせであってもよい。いくつかの実施形態では、モバイルデバイスは、スマートホームデバイス、スマートモバイルデバイス又は同様のデバイス、又はそれらの任意の組み合わせを含むことができる。例えば、前記スマートモバイルデバイスは、携帯電話、パーソナルデジタルアシスタント、ゲームデバイス、ナビゲーションデバイス、スーパーモバイルパーソナルコンピュータ(Ｕｌｔｒａ－ｍｏｂｉｌｅ Ｐｅｒｓｏｎａｌ Ｃｏｍｐｕｔｅｒ、ＵＭＰＣ)など、又はそれらの任意の組み合わせを含むことができる。いくつかの実施形態では、前記スマートホームデバイスは、スマートテレビ、デスクトップパソコンなど、又は任意の組み合わせを含むことができる。いくつかの実施形態では、自動車内の内蔵装置は、車載コンピュータ、車載テレビなどを含むことができる。
【0031】
制御機器４００は、電子機器２００と有線及び／又は無線オーディオ信号通信を行うリモートデバイスであってもよい。制御機器４００は、電子機器２００と通信可能に接続されている機器であってもよい。電子機器２００は、ローカルのオーディオ信号を収集して制御機器４００に出力することができる。電子機器２００は、制御機器４００が送信した遠端オーディオ信号を受信して出力することもできる。前記遠端オーディオ信号は、スピーカ信号とも呼ばれる。制御機器４００は、音声収集機能及び音声再生機能を有する機器、例えば、携帯電話、タブレット、ノートパソコン、イヤホン、スマートウェアラブルデバイス、自動車内蔵装置又は類似のコンテンツ、又はそれらの任意の組み合わせであってもよい。例えば、電子機器２００がイヤホンである場合、制御機器４００は、前記イヤホンと通信可能に接続されている端末機器、例えば、携帯電話、パソコンなどであってもよい。
【0032】
図１に示すように、電子機器２００は、マイクロフォンモジュール２４０及びスピーカ２８０を含むことができる。マイクロフォンモジュール２４０は、ローカルオーディオ信号を取得し、オーディオ情報が含まれている電子信号であるマイクロフォン信号を出力するように構成されてもよい。マイクロフォンモジュール２４０は、耳外マイクロフォンモジュールであってもよく、耳内マイクロフォンモジュールであってもよい。例えば、マイクロフォンモジュール２４０は、耳道外に設けられているマイクロフォンであってもよいし、耳道内に設けられているマイクロフォンであってもよい。マイクロフォンモジュール２４０は、少なくとも１つの第１のタイプのマイクロフォン２４２及び少なくとも１つの第２のタイプのマイクロフォン２４４を含むことができる。第１のタイプのマイクロフォン２４２は、第２のタイプのマイクロフォン２４４と異なる。第１のタイプのマイクロフォン２４２は、人体振動信号を直接収集するマイクロフォン、例えば、骨伝導マイクロフォンであってもよい。第２のタイプのマイクロフォン２４４は、空気振動信号を直接収集するマイクロフォン、例えば、気伝導マイクロフォンであってもよい。もちろん、第１のタイプのマイクロフォン２４２及び第２のタイプのマイクロフォン２４４は、他のタイプのマイクロフォンであってもよい。例えば、第１のタイプのマイクロフォン２４２は、光学式マイクロフォンであってもよく、第２のタイプのマイクロフォン２４４は、筋電信号を受信するマイクロフォンなどであってもよい。第１のタイプのマイクロフォン２４２が第２のタイプのマイクロフォン２４４と異なるため、知覚オーディオ信号の表現が異なり、対応するオーディオ信号におけるノイズ及びエコー成分が異なることになる。説明の便宜上、本開示は、以下の説明において、第１のタイプのマイクロフォン２４２の例として骨伝導マイクロフォンを使用し、第２のタイプのマイクロフォン２４４の例として気伝導マイクロフォンを使用する。
【0033】
骨伝導マイクロフォンは、光学振動センサ、加速度センサなどの振動センサを含むことができる。前記振動センサは、機械的な振動信号（例えば、ユーザ００２が話している時に皮膚や骨格に発生する振動による信号）を収集し、当該機械的な振動信号を電気信号に変換することができる。ここでいう機械的な振動信号とは、主に固体を介して伝播する振動のことである。骨伝導マイクロフォンは、前記振動センサ又は前記振動センサに接続されている振動部品によってユーザ００２の肌又は骨格に接触することにより、ユーザ００２が音を発する時に骨格や皮膚に発生する振動信号を収集し、振動信号を電気信号に変換する。いくつかの実施形態では、前記振動センサは、機械的な振動に敏感であるが、空気振動に敏感ではない装置（すなわち、前記振動センサの機械的な振動に対する応答能力が前記振動センサの空気振動に対する応答能力を上回る）であってもよい。骨伝導マイクロフォンが発声部位の振動を直接ピックアップすることができるため、骨伝導マイクロフォンは、環境ノイズの影響を低減することができる。
【0034】
気伝導マイクロフォンは、ユーザ００２が音を発する時に発生する空気振動信号を収集し、空気振動信号を電気信号に変換する。気伝導マイクロフォンは、単独の気伝導マイクロフォンであってもよいし、２つ以上の気伝導マイクロフォンからなるマイクロフォンアレイであってもよい。マイクロフォンアレイは、ビームからなるマイクロフォンアレイ又は他の同様のマイクロフォンアレイであってもよい。マイクロフォンアレイによって空間の異なる方向又は異なる位置からの音を収集することができる。
【0035】
第１のタイプのマイクロフォン２４２は、第１のオーディオ信号２４３を出力することができる。第２のタイプのマイクロフォン２４４は、第２のオーディオ信号２４５を出力することができる。前記マイクロフォン信号は、前記第１のオーディオ信号２４３及び前記第２のオーディオ信号２４５を含む。低ノイズシーンでは、第２のオーディオ信号２４５は、第１のオーディオ信号２４３よりも良好な音声品質を有する。環境ノイズが比較的大きいシーンでは、低周波数部で第１のオーディオ信号２４３の音声品質が高く、高周波数部で第２のオーディオ信号２４５の音声品質が高くなる。したがって、環境ノイズが比較的大きいシーンでは、第１のオーディオ信号２４３と第２のオーディオ信号２４５を特徴融合したオーディオ信号は、より良好な音声品質を有する。実際の使用中に、環境のノイズは常に変化し、前記低ノイズシーンと前記高ノイズシーンの間で繰り返して変換することがある。
【0036】
スピーカ２８０は、電気信号をオーディオ信号に変換することができる。スピーカ２８０は、制御機器４００からの前記スピーカ信号を受信して出力するように構成されてもよい。説明の便宜上、スピーカ２８０に入力されるオーディオ信号をスピーカ入力信号と定義する。いくつかの実施形態では、前記スピーカ入力信号は、前記スピーカ信号であってもよい。いくつかの実施形態では、電子機器２００は、前記スピーカ信号を信号処理し、信号処理されたオーディオ信号をスピーカ２８０に送信して出力することができる。この時、前記スピーカ入力信号は、電子機器２００が前記スピーカ信号を信号処理して得られるオーディオ信号であってもよい。
【0037】
前記スピーカ入力信号がスピーカ２８０を介して出力された音は、気伝導又は骨伝導によってユーザ００２に伝達されてもよい。スピーカ２８０は、人体に振動信号を伝達することにより、音を伝達するスピーカ、例えば、骨伝導スピーカであってもよいし、空気によって振動信号を伝達するスピーカ、例えば、気伝導スピーカであってもよい。骨伝導スピーカは、振動モジュールによって機械的な振動を発生し、骨格を介して前記機械的な振動を耳内に伝導する。例えば、スピーカ２８０は、直接又は特定の媒体（例えば、１つ又は複数のパネル）を介してユーザ００２の頭部に接触し、前記オーディオ信号を頭蓋骨で振動することによってユーザの聴覚神経に伝達することができる。気伝導スピーカは、振動モジュールによって空気中に振動を発生し、前記空気振動を空気を介して耳内に伝導する。スピーカ２８０は、骨伝導スピーカと気伝導スピーカとの組み合わせであってもよい。スピーカ２８０は、他のタイプのスピーカであってもよい。前記スピーカ入力信号がスピーカ２８０を介して出力された音は、マイクロフォンモジュール２４０によって収集されてエコーとなる可能性がある。前記スピーカ入力信号の強度が大きいほど、スピーカ２８０が出力する音声強度が大きく、前記エコー信号は強くなる。
【0038】
なお、マイクロフォンモジュール２４０とスピーカ２８０は、電子機器２００に一体化されていてもよいし、電子機器２００の外部機器であってもよい。
【0039】
第１のタイプのマイクロフォン２４２及び第２のタイプのマイクロフォン２４４が動作している場合、ユーザ００２が発する音だけではなく、環境ノイズも、スピーカ２８０が発する音も収集することができる。電子機器２００は、マイクロフォンモジュール２４０によってオーディオ信号を収集して前記マイクロフォン信号を生成することができる。前記マイクロフォン信号は、第１のオーディオ信号２４３及び第２のオーディオ信号２４５を含むことができる。異なるシーンでは、第１のオーディオ信号２４３と第２のオーディオ信号２４５の音声品質は異なる。音声通信の品質を確保するために、電子機器２００は、異なる応用シーンに応じて、複数のオーディオ処理モードから目標オーディオ処理モードを選択し、前記マイクロフォン信号から音声品質がより良いオーディオ信号を音源信号として選択し、前記目標オーディオ処理モードによって前記音源信号を信号処理して制御機器４００に出力することができる。前記音源信号は、前記目標オーディオ処理モードの入力信号であってもよい。いくつかの実施形態では、前記信号処理は、ノイズ信号を低減するために、ノイズ抑制を含むことができる。いくつかの実施形態では、前記信号処理は、エコー信号を低減するためのエコー抑制を含むことができる。いくつかの実施形態では、前記信号処理は、前記ノイズ抑制を含むことができるし、前記エコー抑制を含むことができる。いくつかの実施形態では、前記信号処理は、前記音源信号を直接出力することもできる。説明の便宜上、以下の説明において、前記信号処理が前記エコー抑制を含むことについて説明する。当業者であれば、他の信号処理方式はいずれも本明細書の保護範囲内にあることを理解すべきである。
【0040】
電子機器２００による前記目標オーディオ処理モードの選択は、環境ノーズのほか、前記スピーカ信号にも関係する。いくつかのシーンでは、例えば、前記スピーカ信号が比較的小さく、スピーカ２８０が出力する音も小さい場合、第１のタイプのマイクロフォン２４２が出力する第１のオーディオ信号２４３と第２のタイプのマイクロフォン２４４が出力する第２のオーディオ信号２４５を特徴融合したオーディオ信号の音声品質は、第２のタイプのマイクロフォン２４４が出力する第２のオーディオ信号２４５の音声品質より優れている。
【0041】
前記スピーカ信号が比較的大きく、スピーカ２８０が出力する音も比較的大きいなどいくつかの特別なシーンでは、第１のタイプのマイクロフォン２４２が出力する前記第１のオーディオ信号２４３に対する影響が比較的大きく、前記第１のオーディオ信号２４３におけるエコーが比較的大きい。いくつかの実施形態では、前記第１のオーディオ信号２４３におけるエコー信号がユーザ００２の音声信号を超える。特に、スピーカ２８０が骨伝導スピーカである場合、前記第１のオーディオ信号２４３におけるエコー信号がより顕著である。従来のエコー消去アルゴリズムでは、前記第１のオーディオ信号２４３におけるエコー信号を消去することが困難であり、エコー消去の効果を確保することができない。この時、第２のタイプのマイクロフォン２４４が出力する第２のオーディオ信号２４５の音声品質は、第１のタイプのマイクロフォン２４２が出力する第１のオーディオ信号２４３と第２のタイプのマイクロフォン２４４が出力する第２のオーディオ信号２４５を特徴融合したオーディオ信号の音声品質より優れている。
【0042】
したがって、電子機器２００は、前記スピーカ信号に基づいて前記複数のオーディオ処理モードから前記目標オーディオ処理モードを選択して前記マイクロフォン信号に対して前記信号処理を行うことができる。前記複数のオーディオ処理モードは、少なくとも第１のモード１及び第２のモード２を含むことができる。
【0043】
第１のモード１は、第１のオーディオ信号２４３及び第２のオーディオ信号２４５を信号処理することができる。前述したように、いくつかの実施形態では、前記信号処理は、ノイズ信号を低減するためのノイズ抑制を含むことができる。いくつかの実施形態では、前記信号処理は、エコー信号を低減するためのエコー抑制を含むことができる。いくつかの実施形態では、前記信号処理は、前記ノイズ抑制と前記エコー抑制の両方を含むことができる。説明の便宜上、以下の説明において、前記信号処理が前記エコー抑制を含むことについて説明する。当業者であれば、他の信号処理方式はいずれも本明細書の保護範囲内にあることを理解すべきである。
【0044】
第２のモード２は、第２のオーディオ信号２４５を信号処理することができる。いくつかの実施形態では、前記信号処理は、ノイズ信号を低減するためのノイズ抑制を含むことができる。いくつかの実施形態では、前記信号処理は、エコー信号を低減するためのエコー抑制を含むことができる。いくつかの実施形態では、前記信号処理は、前記ノイズ抑制と前記エコー抑制の両方を含むことができる。説明の便宜上、以下の説明において、前記信号処理が前記エコー抑制を含むことについて説明する。当業者であれば、他の信号処理方式はいずれも本明細書の保護範囲内にあることを理解すべきである。
【0045】
前記目標オーディオ処理モードは、第１のモード１及び第２のモード２の１つである。前記複数のオーディオ処理モードは、第１のオーディオ信号２４３を信号処理する処理モードなどの他のモードを含むことができる。
【0046】
したがって、前記スピーカ信号が比較的小さい場合、音声通信に適用される音声が比較的高い品質を有することを確保するために、電子機器２００は、第１のモード１を選択し、第１のオーディオ信号２４３及び第２のオーディオ信号２４５を音源信号とし、前記音源信号を信号処理し、第１の目標オーディオ２９１を生成して出力し、音声通信に適用する。前記スピーカ信号が比較的大きい場合、音声通信に適用される音声が比較的高い品質を有することを確保するために、電子機器２００は、第２のモード２を選択し、第２のオーディオ信号２４５を音源信号とし、前記音源信号を信号処理し、第２の目標オーディオ２９２を生成して出力し、音声通信に適用する。
【0047】
電子機器２００は、本明細書に記載のエコーの抑制のためのオーディオ信号処理方法のデータ又は指令を実行し、前記マイクロフォン信号及び前記スピーカ信号を取得することができ、電子機器２００は、前記スピーカ信号の信号強度に基づいて、対応する目標オーディオ処理モードを選択して前記マイクロフォン信号を信号処理することができる。具体的には、電子機器２００は、前記スピーカ信号強度に基づいて、複数のオーディオ処理モードから前記スピーカ信号強度に対応する目標オーディオ処理モードを選択し、前記第１のオーディオ信号２４３及び前記第２のオーディオ信号２４５から音声品質がより良いオーディオ信号又はそれらの組み合わせを音源信号として選択し、対応する信号処理アルゴリズムを利用して前記音源信号を信号処理（例えば、エコー消去及びノイズ低減処理）し、目標オーディオを生成して出力し、前記目標オーディオにおけるエコーを低減する。前記目標オーディオは、第１の目標オーディオ２９１と第２の目標オーディオ２９２とのうちの１つを含むことができる。電子機器２００は、前記目標オーディオを制御機器４００に出力することができる。
【0048】
以上のようにして、通信の音声品質を確保するために、電子機器２００は、前記スピーカ信号強度に基づいて、目標オーディオ処理モードを制御して選択することにより、音声品質がより良いオーディオ信号を電子機器２００の音源信号として選択し、前記音源信号を信号処理し、異なる使用シーンに対して異なる目標オーディオを取得し、異なる使用シーンでは、前記目標オーディオの音声品質が最適であることを確保することができる。
【0049】
図２は、電子機器２００の機器概略図を示す。電子機器２００は、本明細書に記載のエコーの抑制のためのオーディオ信号処理方法を実行することができる。前記エコーの抑制のためのオーディオ信号処理方法は、本明細書の他の部分で紹介される。例えば、図５～図７の説明において前記エコーの抑制のためのオーディオ信号処理方法を説明する。
【0050】
図２に示すように、電子機器２００は、マイクロフォンモジュール２４０及びスピーカ２８０を含むことができる。いくつかの実施形態では、電子機器２００は、少なくとも１つの記憶媒体２３０及び少なくとも１つのプロセッサ２２０を含むこともできる。
【0051】
記憶媒体２３０は、データ記憶装置を含むことができる。前記データ記憶装置は、非一時的な記憶媒体であってもよいが、一時的な記憶媒体であってもよい。例えば、前記データ記憶装置は、磁気ディスク、読み取り専用記憶媒体（ＲＯＭ）、又はランダムアクセス記憶媒体（ＲＡＭ）のうちの１つ又は複数を含むことができる。記憶媒体２３０は、エコーの抑制のためのオーディオ信号処理のために、前記データ記憶装置に記憶されている少なくとも１つの指令セットを含むこともできる。前記指令は、コンピュータプログラムコードであり、前記コンピュータプログラムコードは、本明細書によって提供されるエコーの抑制のためのオーディオ信号処理方法を実行するプログラム、ルーチン、オブジェクト、構成要素、データ構造、プロセス、モジュールなどを含むことができる。
【0052】
図２に示すように、前記少なくとも１つの指令セットは、前記スピーカ信号又は前記スピーカ信号及び前記マイクロフォン信号に基づいて前記スピーカ信号に対応する制御信号を生成するように構成される制御モジュール２３１によって発行される制御指令を含むことができる。前記制御信号は、第１の制御信号又は第２の制御信号を含む。ここで、前記第１の制御信号は、第１のモード１に対応する。前記第２の制御信号は、第２のモード２に対応する。前記制御信号は、任意の信号であってもよく、例えば、前記第１の制御信号は、信号１であってもよく、前記第２の制御信号は、信号２であってもよい。制御モジュール２３１が発行する制御指令は、前記スピーカ信号の信号強度又は前記スピーカ信号の信号強度及び前記マイクロフォンの評価パラメータに基づいて、対応する制御信号を生成することができる。前記制御信号と前記スピーカ信号又は前記スピーカ信号及び前記マイクロフォン信号との対応関係については後述する。制御モジュール２３１は、前記制御信号に基づいて前記制御信号に対応する目標オーディオ信号処理モードを選択することもできる。前記制御信号が前記第１の制御信号である場合、制御モジュール２３１は、第１のモード１を選択し、前記制御信号が前記第２の制御信号である場合、制御モジュール２３１は、第２のモード２を選択する。
【0053】
いくつかの実施形態では、前記少なくとも１つの指令セットは、前記制御信号に基づいて、電子機器２００の前記目標オーディオ処理モードによって前記マイクロフォン信号を信号処理する（例えば、エコー抑制、ノイズ低減処理など）ように構成されるエコー処理モジュール２３３によって発行されるエコー処理指令を含むこともできる。エコー処理モジュール２３３は、前記制御信号が前記第１の制御信号である場合、第１のモード１を採用して前記マイクロフォン信号を信号処理する。エコー処理モジュール２３３は、前記制御信号が前記第２の制御信号である場合、第２のモード２を採用して前記マイクロフォン信号を信号処理する。
【0054】
前記エコー処理モジュール２３３は、第１のアルゴリズム２３３－１及び第２のアルゴリズム２３３－８を含むことができる。前記第１のアルゴリズム２３３－１は、前記第１の制御信号及び前記第１のモード１に対応する。前記第２のアルゴリズム２３３－８は、前記第２の制御信号及び前記第２のモード２に対応する。
【0055】
第１のモード１では、電子機器２００は、第１のアルゴリズム２３３－１を採用して第１のオーディオ信号２４３及び第２のオーディオ信号２４５のそれぞれを信号処理し、前記信号処理された第１のオーディオ信号２４３と第２のオーディオ信号２４５を特徴融合し、前記第１の目標オーディオ２９１を出力する。
【0056】
図３は、本明細書の実施形態に従って提供される第１のモード１の動作概略図を示す。図３に示すように、第１のモード１では、第１のアルゴリズム２３３－１は、前記第１のオーディオ信号２４３と前記第２のオーディオ信号２４５及び前記スピーカ入力信号を受信することができる。第１のアルゴリズム２３３－１は、第１のエコー消去モジュール２３３－２を使用して前記スピーカ入力信号に基づいて前記第１のオーディオ信号２４３をエコー消去することができる。前記スピーカ入力信号は、ノイズ低減処理されたオーディオ信号であってもよい。第１のエコー消去モジュール２３３－２は、前記第１のオーディオ信号２４３及び前記スピーカ入力信号を受信し、エコー消去後の前記第１のオーディオ信号２４３を出力する。第１のエコー消去モジュール２３３－２は、シングルマイクロフォンエコー消去アルゴリズムであってもよい。
【0057】
いくつかの実施形態では、第１のアルゴリズム２３３－１は、第２のエコー消去モジュール２３３－２を使用して前記スピーカ入力信号に基づいて前記第２のオーディオ信号２４５をエコー消去することができる。第２のエコー消去モジュール２３３－３は、前記第２のオーディオ信号２４５及び前記スピーカ入力信号を受信し、エコー消去後の前記第２のオーディオ信号２４５を出力する。第２のエコー消去モジュール２３３－３は、シングルマイクロフォンエコー消去アルゴリズムであってもよいし、マルチマイクロフォンエコー消去アルゴリズムであってもよい。第１のエコー消去モジュール２３３－２と第２のエコー消去モジュール２３３－３は、同一であってもよいし、異なっていてもよい。
【0058】
いくつかの実施形態では、第１のアルゴリズム２３３－１は、第１のノイズ抑制モジュール２３３－４を使用してエコー消去後の前記第１のオーディオ信号２４３及び前記第２のオーディオ信号２４５をノイズ抑制することができる。第１のノイズ抑制モジュール２３３－４は、前記第１のオーディオ信号２４３及び前記第２のオーディオ信号２４５におけるノイズ信号を抑制するために使用される。第１のノイズ抑制モジュール２３３－４は、エコー消去後の前記第１のオーディオ信号２４３及び前記第２のオーディオ信号２４５を受信し、ノイズ抑制後の前記第１のオーディオ信号２４３及び前記第２のオーディオ信号２４５を出力する。第１のノイズ抑制モジュール２３３－４は、前記第１のオーディオ信号２４３と前記第２のオーディオ信号２４５を個別にノイズ低減してもよいし、前記第１のオーディオ信号２４３と前記第２のオーディオ信号２４５を同時にノイズ低減してもよい。
【0059】
いくつかの実施形態では、前記第１のアルゴリズム２３３－１は、特徴融合モジュール２３３－５を使用してノイズ抑制された前記第１のオーディオ信号２４３及び前記第２のオーディオ信号２４５に対して特徴融合処理を行うことができる。特徴融合モジュール２３３－５は、ノイズ低減処理された前記第１のオーディオ信号２４３及び前記第２のオーディオ信号２４５を受信する。特徴融合モジュール２３３－５は、前記第１のオーディオ信号２４３及び前記第２のオーディオ信号２４５の音声品質を分析することができる。例えば、特徴融合モジュール２３３－５は、前記第１のオーディオ信号２４３及び前記第２のオーディオ信号２４５における有効な音声信号強度、ノイズ信号強度、エコー信号強度及び信号対雑音比などを分析し、前記第１のオーディオ信号２４３及び前記第２のオーディオ信号２４５の音声品質を判断し、第１のオーディオ信号２４３と前記第２のオーディオ信号２４５を前記第１の目標オーディオ２９１に融合して出力することができる。
【0060】
いくつかの実施形態では、第１のアルゴリズム２３３－１は、第２のノイズ抑制モジュール２３３－６を使用して前記スピーカ信号をノイズ抑制することもできる。第２のノイズ抑制モジュール２３３－６は、前記スピーカ信号におけるノイズ信号を抑制するために使用される。第２のノイズ抑制モジュール２３３－６は、制御機器４００が送信した前記スピーカ信号を受信し、前記スピーカ信号における遠端ノイズ、チャンネルノイズ及び電子機器２００における電子ノイズなどのノイズ信号を除去し、ノイズ低減処理されたスピーカ処理信号を出力する。
【0061】
なお、図３は、例示的な説明にすぎない。当業者であれば、いくつかの実施形態では、第１のアルゴリズム２３３－１が特徴融合モジュール２３３－５を含むことができることを理解すべきである。別の実施形態では、第１のアルゴリズム２３３－１は、第１のエコー消去モジュール２３３－２、第２のエコー消去モジュール２３３－３、第１のノイズ抑制モジュール２３３－４及び第２のノイズ抑制モジュール２３３－６のうちのいずれか１つ又はそれらの任意の組み合わせを含むこともできる。
【0062】
第２のモード２では、電子機器２００は、第２のアルゴリズム２３３－８を採用して第２のオーディオ信号２４５を信号処理し、前記第２の目標オーディオ２９２を出力する。
【0063】
図４は、本明細書の実施形態に従って提供される第２のモード２の動作概略図を示す。図４に示すように、第２のモード２では、第２のアルゴリズム２３３－８は、前記第２のオーディオ信号２４５及び前記スピーカ入力信号を受信することができる。第２のアルゴリズム２３３－８は、第３のエコー消去モジュール２３３－９を使用して前記スピーカ入力信号に基づいて前記第２のオーディオ信号２４５をエコー消去することができる。第３のエコー消去モジュール２３３－９は、前記第２のオーディオ信号２４５及び前記スピーカ入力信号を受信し、エコー消去後の前記第２のオーディオ信号２４５を出力する。第３のエコー消去モジュール２３３－９は、第２のエコー消去モジュール２３３－３と同一であってもよいし、異なっていてもよい。
【0064】
いくつかの実施形態では、第２のアルゴリズム２３３－８は、第３のノイズ抑制モジュール２３３－１０を使用してエコー消去後の前記第２のオーディオ信号２４５をノイズ抑制することができる。第３のノイズ抑制モジュール２３３－１０は、前記第２のオーディオ信号２４５におけるノイズ信号を抑制するために使用される。第３のノイズ抑制モジュール２３３－１０は、エコー消去後の前記第２のオーディオ信号２４５を受信し、ノイズ抑制後の前記第２のオーディオ信号２４５を前記第２の目標オーディオ２９２として出力する。第３のノイズ抑制モジュール２３３－１０は、第１のノイズ抑制モジュール２３３－４と同一であってもよいし、異なっていてもよい。
【0065】
いくつかの実施形態では、第２のアルゴリズム２３３－８は、第４のノイズ抑制モジュール２３３－１１を使用して前記スピーカ信号をノイズ抑制することもできる。第４のノイズ抑制モジュール２３３－１１は、前記スピーカ信号におけるノイズ信号を抑制するために使用される。第４のノイズ抑制モジュール２３３－１１は、制御機器４００が送信した前記スピーカ信号を受信し、前記スピーカ信号における遠端ノイズ、チャンネルノイズ及び電子機器２００における電子ノイズなどのノイズ信号を除去し、ノイズ低減処理されたスピーカ処理信号を出力する。第４のノイズ抑制モジュール２３３－１１は、第２のノイズ抑制モジュール２３３－６と同一であってもよいし、異なっていてもよい。
【0066】
なお、図４は、例示的な説明にすぎない。当業者であれば、いくつかの実施形態では、第２のアルゴリズム２３３－８は、第３のエコー消去モジュール２３３－９、第３のノイズ抑制モジュール２３３－１０及び第４のノイズ抑制モジュール２３３－１１のうちのいずれか又はそれらの組み合わせを含むことができることを理解すべきである。別の実施形態では、第２のアルゴリズム２３３－８は、上記のいずれの信号処理モジュールを含まずに、前記第２のオーディオ信号２４５を直接出力することもできる。
【0067】
第１のモード１及び第２のモード２は、計算リソースを節約するために一方のみを実行することができる。第２のモード２は、第１のモード１が実行されている間、オフにしてもよい。第１のモード１は、第２のモード２が実行されている間、オフにしてもよい。第１ンモード１及び第２のモード２は、同時に実行してもよく、そのうちの一方のモードが実行されると、他方のモードは、アルゴリズムパラメータを更新してもよい。電子機器２００が第１のモード１と第２のモード２との間で切り替えられる時、第１のモード１及び第２のモード２内のパラメータの一部（例えば、ノイズ推定アルゴリズムによって得られるノイズパラメータ、人間音声推定アルゴリズムによって得られる人間音声パラメータ、信号対雑音比アルゴリズムによって得られる信号対雑音比パラメータなど）を共通化することにより、計算リソースを節約し、計算結果をより正確にすることができる。第１のモード１及び第２のモード２における第１のアルゴリズム２３３－１及び第２のアルゴリズム２３３－８は、制御モジュール２３１が発行する制御指令におけるパラメータの一部、例えば、ノイズ推定アルゴリズムによって得られるノイズパラメータ、人間音声推定アルゴリズムによって得られる人間音声パラメータ、信号対雑音比アルゴリズムによって得られる信号対雑音比パラメータなどと共通化することにより、計算リソースを節約し、計算結果をより正確にすることもできる。
【0068】
いくつかの実施形態では、前記少なくとも１つの指令セットは、前記目標オーディオに対して平滑化処理を行い、平滑化処理された前記目標オーディオを制御機器４００に出力するように構成されるマイクロフォン制御モジュール２３５によって実行されるマイクロフォン制御指令を含むこともできる。マイクロフォン制御モジュール２３５は、制御モジュール２３１によって生成された制御信号及び前記目標オーディオを受信し、前記制御信号に基づいて前記目標オーディオに対して前記平滑化処理を行うことができる。前記制御信号が前記第１の制御信号である場合、第１のモード１を実行し、第１のアルゴリズム２３３－１が出力した前記第１の目標オーディオ２９１を入力信号として使用し、前記制御信号が前記第２の制御信号である場合、第２のモード２を実行し、第２のアルゴリズム２３３－８が出力した前記第２の目標オーディオ２９２を入力信号として使用する。マイクロフォン制御モジュール２３５は、前記制御信号を前記第１の制御信号と前記第２の制御信号との間で切り替えることにより、前記目標オーディオ処理モードを第１のモード１と第２のモード２との間で切り替える場合、前記第１の目標オーディオ２９１と前記第２の目標オーディオ２９２との切り替えによる信号の不連続性を回避するために、前記目標オーディオに対して平滑化処理を行うことができる。具体的には、マイクロフォン制御モジュール２３５は、前記第１の目標オーディオ２９１及び前記第１の目標オーディオ２９１のパラメータを、前記目標オーディオが連続するように調整することができる。前記パラメータは、前記少なくとも１つの記憶媒体２３０に予め記憶されていてもよい。前記パラメータは、振幅、位相、周波数応答などであってもよい。前記調整の内容は、前記目標オーディオの音量に対する調整、ＥＱバランスの調整、残留ノイズの調整などを含むことができる。マイクロフォン制御モジュール２３５は、前記目標オーディオ処理モードを第１のモード１と第２のモード２との間で切り替える場合、前記目標オーディオを連続信号にし、ユーザ００２が両者の間の切り替えを知覚しにくくすることができる。
【0069】
いくつかの実施形態では、前記少なくとも１つの指令セットは、前記スピーカ処理信号を調整して前記スピーカ入力信号を得て、前記スピーカ入力信号をスピーカ２８０に出力して音響を出力するように構成されるスピーカ制御モジュール２３７によって実行されるスピーカ制御指令を含むこともできる。スピーカ制御モジュール２３７は、第１のアルゴリズム２３３－１及び第２のアルゴリズム２３３－８が出力する前記スピーカ処理信号及び前記制御信号を受信することができる。前記制御信号が前記第１の制御信号である場合、スピーカ制御モジュール２３７は、第１のアルゴリズム２３３－１が出力する前記スピーカ処理信号を低減又はオフにしてからスピーカ２８０に出力するように制御することにより、スピーカ２８０が出力する音響を低減し、エコーを低減し、第１のアルゴリズム２３３－１のエコー消去の効果を向上させることができる。前記制御信号が前記第２の制御信号である場合、スピーカ制御モジュール２３７は、第２のアルゴリズム２３３－８が出力する前記スピーカ処理信号を調整しなくてもよい。前記制御信号が前記第１の制御信号と前記第２の制御信号との間で切り替えられる場合、スピーカ２８が出力する音響が不連続にならないように、スピーカ制御モジュール２３７は、第１のアルゴリズム２３３－１及び第２のアルゴリズム２３３－８が出力する前記スピーカ処理信号に対して平滑化処理を行うことができる。前記第１の制御信号と第２の制御信号との間で切り替えられる場合、スピーカ制御モジュール２３７は、切り替えの連続性をできるだけ確保し、ユーザ００２が両者の間の切り替えを知覚しにくくするようにする。
【0070】
第１のモード１では、第１のアルゴリズム２３３－１は、近端マイクロフォンモジュール２４０がピックアップするユーザ００２の音声品質に偏っている。前記スピーカ処理信号が大きすぎる場合、スピーカ制御モジュール２３７によって前記スピーカ処理信号を処理して前記スピーカ入力信号を低減することにより、スピーカ２８０が出力する音響を低減し、エコーを低減して近端音声品質を確保する。第２のアルゴリズム２３３－８は、スピーカ２８０の前記スピーカ入力信号に偏っている。第１のタイプのマイクロフォン２４２が出力する前記第１のオーディオ信号２４３は、スピーカ２８０の前記スピーカ入力信号の音声品質及び理解度を確保するために使用されない。
【0071】
少なくとも１つのプロセッサ２２０は、少なくとも１つの記憶媒体２３０、マイクロフォンモジュール２４０及びスピーカ２８０と通信可能に接続されてもよい。前記通信接続とは、直接又は間接的に情報を受信できる任意の形式の接続である。少なくとも１つのプロセッサ２２０は、上記の少なくとも１つの指令セットを実行するために使用される。システム１００が実行する時、少なくとも１つのプロセッサ２２０は、前記少なくとも１つの指令セットを読み取り、前記少なくとも１つの指令セットの指示に基づいてマイクロフォンモジュール２４０及びスピーカ２８０のデータを取得し、本明細書によって提供されるエコーの抑制のためのオーディオ信号処理方法を実行する。プロセッサ２２０は、エコーの抑制のためのオーディオ信号処理方法に含まれるすべてのステップを実行することができる。プロセッサ２２０は、１つ又は複数のプロセッサの形態であってもよく、いくつかの実施形態では、プロセッサ２２０は、１つ又は複数のハードウェアプロセッサ、例えば、マイクロコントローラ、マイクロプロセッサ、縮小指令セットコンピュータ（ＲＩＳＣ）、特定用途向け集積回路（ＡＳＩＣ）、アプリケーション固有指令セットプロセッサ（ＡＳＩＰ）、中央処理ユニット（ＣＰＵ）、グラフィックス処理ユニット（ＧＰＵ）、物理処理ユニット（ＰＰＵ）、マイクロコントローラユニット、デジタル信号プロセッサ（ＤＳＰ）、フィールドプログラマブルゲートアレイ（ＦＰＧＡ）、アドバンストＲＩＳＣマシン（ＡＲＭ）、プログラマブルロジックデバイス（ＰＬＤ）、１つ又は複数の機能を実行することができる任意の回路又はプロセッサなど、又はそれらの任意の組み合わせを含むことができる。問題を説明するためだけに、本明細書では電子機器２００において１つのプロセッサ２２０のみが説明されている。しかしながら、なお、本明細書における電子機器２００は、複数のプロセッサを含むこともでき、したがって、本明細書に開示されている動作及び／又は方法ステップは、本明細書に記載されるように、１つのプロセッサによって実行されてもよいし、複数のプロセッサによって共同で実行されてもよい。例えば、本明細書において電子機器２００のプロセッサ２２０がステップＡ及びステップＢを実行する場合、ステップＡ及びステップＢは２つの異なるプロセッサ２２０によって共同で実行してもよいし、別々に実行してもよい（例えば、第１のプロセッサは、ステップＡを実行し、第２のプロセッサは、ステップＢを実行し、又は第１及び第２のプロセッサはステップＡ及びＢを共同で実行する）ことを理解すべきである。
【0072】
いくつかの実施形態では、システム１００は、前記スピーカ信号の信号強度に基づいて電子機器２００の前記目標オーディオ処理モードを選択することができる。いくつかの実施形態では、システム１００は、前記スピーカ信号の信号強度及び前記マイクロフォン信号に基づいて電子機器２００の前記目標オーディオ処理モードを選択することができる。
【0073】
図５は、本明細書の実施形態に従って提供されるエコーの抑制のためのオーディオ信号処理方法Ｐ１００のフローチャートを示す。前記方法Ｐ１００は、システム１００が前記スピーカ信号の信号強度に基づいて電子機器２００の前記目標オーディオ処理モードを選択する方法のフローチャートである。図５に示すように、前記方法Ｐ１００は、少なくとも１つのプロセッサ２２０によって実行される以下のステップを含むことができる。
【0074】
Ｓ１２０：少なくとも前記スピーカ信号に基づいて第１のモード１及び第２のモード２から電子機器２００の目標オーディオ処理モードを選択する。前述したように、前記目標オーディオ処理モードは、第１のモード１と第２のモード２とのうちの１つを含むことができる。具体的には、ステップＳ１２０は、以下のステップを含むことができる。
【0075】
Ｓ１２１：前記スピーカ信号を取得する。
【0076】
Ｓ１２２：少なくとも前記スピーカ信号強度に基づいて、前記スピーカ信号に対応する制御信号を生成する。前記制御信号は、第１の制御信号又は第２の制御信号を含む。具体的には、電子機器２００は、制御機器４００が送信する前記スピーカ信号を受信し、前記スピーカ信号強度を予め設定されたスピーカ閾値と比較し、比較結果に基づいて前記制御信号を生成することができる。ステップＳ１２２は、以下のいずれかの場合を含むことができる。
【0077】
Ｓ１２２－２：前記スピーカ信号強度が前記スピーカ閾値より低いと決定し、前記第１の制御信号を生成し、あるいは、
【0078】
Ｓ１２２－４：前記スピーカ信号強度が予め設定されたスピーカ閾値より高いと決定し、前記第２の制御信号を生成する。
【0079】
ステップＳ１２０は、以下のステップを含むこともできる。
【0080】
Ｓ１２４：前記制御信号に基づいて、前記制御信号に対応する前記目標オーディオ処理モードを選択する。ここで、前記第１の制御信号は、前記第１のモード１に対応する。前記第２の制御信号は、前記第２のモード２に対応する。前記制御信号が前記第１の制御信号である場合、第１のモード１を選択し、前記制御信号が前記第２の制御信号である場合、第２のモード２を選択する。
【0081】
前記スピーカ信号強度が前記スピーカ閾値より高い場合、第１のモード１における第１のアルゴリズム２３３－１を使用して前記第１のオーディオ信号２４３及び第２のオーディオ信号２４５を信号処理する時、比較的良好な人間音声信号を残しながら、信号におけるエコー信号を除去することができないため、得られた前記第１の目標オーディオ２９１の音声品質が比較的悪く、第２のモード２における第２のアルゴリズム２３３－８を使用して前記第２のオーディオ信号２４５を信号処理して得られる前記第２の目標オーディオ２９２の品質が比較的良い。したがって、電子機器２００は、前記スピーカ信号強度が前記スピーカ閾値より高い場合、第２のモードに対応する前記第２の制御信号を生成する。
【0082】
前記スピーカ信号強度が前記スピーカ閾値より低い場合、第１のモード１における第１のアルゴリズム２３３－１を使用して前記第１のオーディオ信号２４３及び第２のオーディオ信号２４５を信号処理する時、比較的良好な人間音声信号を残しながら、信号におけるエコー信号を除去することができるため、得られた前記第１の目標オーディオ２９１の音声品質が比較的良く、第２のモード２における第２のアルゴリズム２３３－８を使用して前記第２のオーディオ信号２４５を信号処理して得られる前記第２の目標オーディオ２９２の品質も比較的良い。したがって、電子機器２００は、前記スピーカ信号強度が前記スピーカ閾値より低い場合、第１のモード１に対応する前記第１の制御信号を生成し、第２のモード２に対応する前記第２の制御信号を生成することもできる。
【0083】
前記制御信号は制御モジュール２３１によって生成される。具体的には、電子機器２００は、前記スピーカ信号強度をリアルタイムで監視し、前記スピーカ閾値と比較することができる。電子機器２００は、前記スピーカ信号強度を定時に検出し、前記スピーカ閾値と比較することもできる。電子機器２００は、前記スピーカ信号強度が著しく変化し、変化値が予め設定された範囲を超えることを監視する場合、前記スピーカ信号を前記スピーカ閾値と比較することもできる。
【0084】
電子機器２００は、前記スピーカ信号強度が前記スピーカ閾値より高い場合、前記第２の制御信号を生成する。電子機器は、前記スピーカ信号が変化し、前記スピーカ信号強度が前記スピーカ閾値より低い場合、前記第１の制御信号を生成する。電子機器２００は、前記スピーカ信号強度が前記スピーカ閾値より低い場合、前記第１の制御信号を生成し、電子機器は、前記スピーカ信号が変化し、前記スピーカ信号強度が前記スピーカ閾値より高い場合、前記第２の制御信号を生成する。
【0085】
前記制御信号が切り替わる時にユーザ００２によって知覚されないことを確保するために、前記スピーカ閾値は範囲であってもよい。前記スピーカ閾値は、第１のスピーカ臨界値及び第２のスピーカ臨界値が存在する範囲内にあってもよい。前記第１のスピーカ臨界値は、第２のスピーカ臨界値より小さい。前記スピーカ信号強度が前記スピーカ閾値より高いということは、前記スピーカ信号強度が前記第２のスピーカ臨界値より高いということを含むことができる。前記スピーカ信号強度が前記スピーカ閾値より低いということは、前記スピーカ信号強度が前記第１のスピーカ臨界値より低いということを含むことができる。
【0086】
電子機器２００は、前記スピーカ信号強度が前記スピーカ閾値に等しい場合、前記第１の制御信号又は前記第２の制御信号を生成することができる。電子機器２００は、前記スピーカ信号強度が前記第２のスピーカ臨界値より高い場合、前記第２の制御信号を生成し、電子機器２００は、前記スピーカ信号強度が前記第１のスピーカ臨界値と前記第２のスピーカ臨界値との間に低下したら、前記第２の制御信号を生成することができる。電子機器２００は、前記スピーカ信号強度が前記第１のスピーカ臨界値より低い場合、前記第１の制御信号を生成し、電子機器２００は、前記スピーカ信号強度が前記第１のスピーカ臨界値と前記第２のスピーカ臨界値との間に増強されると、前記第１の制御信号を生成することができる。
【0087】
電子機器２００は、機械学習によって制御モデルを得て、前記制御信号を出力する制御モデルに前記スピーカ信号を入力することができる。
【0088】
前記方法Ｐ１００は、少なくとも１つのプロセッサ２２０によって実行される以下のステップを含むことができる。
【0089】
Ｓ１４０：前記目標オーディオ処理モードによって前記マイクロフォン信号を処理して前記目標オーディオを生成し、少なくとも前記マイクロフォン信号におけるエコーを低減する。具体的には、ステップＳ１４０は、以下のいずれかの場合を含むことができる。
【0090】
Ｓ１４２：前記制御信号を前記第１の制御信号として決定し、前記第１の制御信号に対応する前記第１のモード１における第１のアルゴリズム２３３－１によって、前記スピーカ入力信号に基づいて、前記第１のオーディオ信号２４３及び第２のオーディオ信号２４５に対して信号処理及び特徴融合を行い、第１の目標オーディオ２９１を生成する。具体的なプロセスは前述したように、ここでは詳しく説明しない。
【0091】
Ｓ１４４：前記制御信号を前記第２の制御信号として決定し、前記第２の制御信号に対応する第２のモード２における第２のアルゴリズム２３３－８によって、前記スピーカ入力信号に基づいて、前記第２のオーディオ信号２４５を信号処理する。具体的なプロセスは前述したように、ここでは詳しく説明しない。
【0092】
Ｓ１６０：前記目標オーディオを出力する。電子機器２００は、前記目標オーディオを直接出力することができる。電子機器２００は、前記目標オーディオが前記第１の目標オーディオ２９１と前記第２の目標オーディオ２９２との間で切り替えられる時に、ユーザ００２によって知覚されないように、前記目標オーディオに対して平滑化処理を行うこともできる。具体的には、ステップＳ１６０は、前記目標オーディオに対して平滑化処理を行って前記平滑化処理された前記目標オーディオを出力するステップを含むことができる。
【0093】
具体的には、電子機器２００は、マイクロフォン制御モジュール２３５によって前記目標オーディオに対して平滑化処理を行うことができる。前記目標オーディオが前記第１の目標オーディオ２９１と前記第２の目標オーディオ２９２との間で切り替えられる時に、マイクロフォン制御モジュール２３５は、接続箇所が滑らかに遷移するように、前記第１の目標オーディオ２９１と前記第２の目標オーディオ２９２との接続箇所に対して前記平滑化処理を行い、すなわち、第１の目標オーディオ２９１及び前記第２の目標オーディオ２９２を信号調整することができる。
【0094】
前記方法Ｐ１００は、以下のステップを含むこともできる。
【0095】
Ｓ１８０：前記制御信号に基づいて、前記スピーカ２８０の前記スピーカ入力信号の強度を制御する。具体的には、ステップＳ１８０は、スピーカ制御モジュール２３７によって実行することができる。ステップＳ１８０は、スピーカ制御モジュール２３７によって前記制御信号を前記第１の制御信号として決定することができ、スピーカ制御モジュール２３７は、前記スピーカ処理信号を処理し、スピーカ２８０に入力される前記スピーカ入力信号の強度を低減することにより、スピーカ２８０が出力する音響の強度を低減し、前記マイクロフォン入力信号におけるエコー信号を低減し、前記第１の目標オーディオの音声品質を向上させることができる。
【0096】
表１は、図５に対応する目標オーディオ処理モードの結果図を示す。表１に示すように、照合を容易にするために、シーンを４つのシーンに分けて、それぞれは、第１種：近端音声信号が閾値より小さく（例えば、ユーザ００２が音を発しない）、前記スピーカ信号が前記スピーカ閾値を超えておらず、第２種：近端音声信号が閾値より大きく（例えば、ユーザ００２が音を発する）、前記スピーカ信号が前記スピーカ閾値を超えておらず、第３種：近端音声信号が閾値より小さく（例えば、ユーザ００２が音を発しない）、前記スピーカ信号が前記スピーカ閾値を超え、及び第４種：近端音声信号が閾値より大きく（例えば、ユーザ００２が音を発する）、前記スピーカ信号が前記スピーカ閾値を超える。ここで、近端音声信号が閾値より大きいか否かは、制御モジュール２３１によって前記マイクロフォン信号に基づいて判断することができる。近端音声信号が閾値より大きいということは、ユーザ００２が発するオーディオ信号強度が予め設定された閾値を超えることであってもよい。前記４つのシーンに対応する目標オーディオ処理モードは、それぞれ第１種及び第２種が第１のモード１に対応し、第３種及び第４種が第２のモード２に対応する。
【0097】
【表1】
【0098】
前記方法Ｐ１００では、電子機器２００は、どのようなシーンにおいても電子機器２００が選択する目標オーディオ処理モードによって処理される音声品質が最適であることを確保し、通話品質を確保するために、前記スピーカ信号に基づいて電子機器２００の目標オーディオ処理モードを選択することができる。
【0099】
いくつかの実施形態では、前記目標オーディオ処理モードの選択は、前記スピーカ信号のエコーだけではなく、環境ノイズにも関係する。前記環境ノイズは、前記マイクロフォン信号における環境ノイズレベルと信号対雑音比とのうちの少なくとも１つによって評価することができる。
【0100】
図６は、本明細書の実施形態に従って提供されるエコーの抑制のためのオーディオ信号処理方法Ｐ２００のフローチャートを示す。前記方法Ｐ２００は、システム１００が前記スピーカ信号の信号強度及び前記マイクロフォン信号に基づいて電子機器２００の前記目標オーディオ処理モードを選択する方法のフローチャートである。具体的には、前記方法おＰ２００は、システム１００が前記スピーカ信号及び前記マイクロフォン信号における環境ノイズレベルと信号対雑音比とのうちの少なくとも１つに基づいて前記目標オーディオ処理モードを選択する方法のフローチャートである。前記方法Ｐ２００は、少なくとも１つのプロセッサ２２０によって実行される以下のステップを含むことができる。
【0101】
Ｓ２２０：少なくとも前記スピーカ信号に基づいて第１のモード１及び第２のモード２から電子機器２００の目標オーディオ処理モードを選択する。具体的には、ステップＳ２２０は、以下のステップを含むことができる。
【0102】
Ｓ２２２：少なくとも前記スピーカ信号強度に基づいて、前記スピーカ信号に対応する制御信号を生成する。前記制御信号は、第１の制御信号又は第２の制御信号を含む。具体的には、ステップＳ２２２は、電子機器２００が前記スピーカ信号強度及び前記マイクロフォン信号におけるノイズに基づいて、対応する制御信号を生成することであってもよい。ステップＳ２２２は、以下のステップを含むことができる。
【0103】
Ｓ２２２－２：前記スピーカ信号及び前記マイクロフォン信号の評価パラメータを取得する。ここで、前記評価パラメータは、前記マイクロフォン信号における環境ノイズ評価パラメータであってもよい。前記環境ノイズ評価パラメータは、環境ノイズレベルと信号対雑音比とのうちの１つを含むことができる。電子機器２００は、制御モジュール２３１によって前記マイクロフォン信号における環境ノイズ評価パラメータを取得することができる。具体的には、電子機器２００は、第１のオーディオ信号２４３と第２のオーディオ信号２４５とのうちの少なくとも１つに基づいて前記環境ノイズ評価パラメータを取得することができる。電子機器２００は、ノイズ推定アルゴリズムによって前記環境ノイズレベル又は前記信号対雑音比を取得することができ、本明細書はここでは詳しく説明しない。
【0104】
Ｓ２２２－４：前記スピーカ信号強度及び前記環境ノイズ評価パラメータに基づいて、前記制御信号を生成する。具体的には、電子機器２００は、前記スピーカ信号強度を予め設定されたスピーカ閾値と比較し、及び前記環境ノイズ評価パラメータを予め設定されたノイズ評価範囲と比較し、比較結果に基づいて前記制御信号を生成することができる。ステップＳ２２２－４は、以下のいずれかの場合を含むことができる。
【0105】
Ｓ２２２－５：前記スピーカ信号強度が予め設定されたスピーカ閾値より高いと決定し、前記第２の制御信号を生成する。
【0106】
Ｓ２２２－６：前記スピーカ信号強度が前記スピーカ閾値より低く、かつ前記環境ノイズ評価パラメータが予め設定されたノイズ評価範囲外にあると決定し、前記第１の制御信号を生成する。
【0107】
Ｓ２２２－７：前記スピーカ信号強度が前記スピーカ閾値より低く、かつ前記環境ノイズ評価パラメータが前記ノイズ評価範囲内にあると決定し、前記第１の制御信号又は前記第２の制御信号を生成する。
【0108】
ここで、前記環境ノイズ評価パラメータが前記ノイズ評価範囲内にあることは、前記環境ノイズレベルが予め設定された環境ノイズ閾値より低いことと、前記信号対雑音比が予め設定された信号対雑音比閾値より高いことと、のうちの少なくとも１つを含むことができる。この時の環境ノイズが比較的小さい。前記環境ノイズ評価パラメータが前記ノイズ評価範囲外にあることは、前記環境ノイズレベルが予め設定された環境ノイズ閾値より高いことと、前記信号対雑音比が予め設定された信号対雑音比閾値より低いことと、のうちの少なくとも１つを含むことができる。この時の環境ノイズが比較的大きい。ここで、前記環境ノイズ評価パラメータが前記ノイズ評価範囲外にある場合、すなわち、大きいノイズ環境では、前記第１の目標オーディオ２９１の音声品質は前記第２の目標オーディオ２９２より優れている。前記環境ノイズ評価パラメータが前記ノイズ評価範囲内にある場合、前記第１の目標オーディオ２９１の音声品質は前記第２の目標オーディオ２９２の音声品質とあまり変わらない。
【0109】
ステップＳ２２０は、以下のステップを含むこともできる。
【0110】
Ｓ２２４：前記制御信号に基づいて、前記制御信号に対応する前記目標オーディオ処理モードを選択する。ここで、前記第１の制御信号は、前記第１のモード１に対応する。前記第２の制御信号は、前記第２のモード２に対応する。前記制御信号が前記第１の制御信号である場合、第１のモード１を選択し、前記制御信号が前記第２の制御信号である場合、第２のモード２を選択する。
【0111】
前記スピーカ信号強度が前記スピーカ閾値より高い場合、第１のモード１における第１のアルゴリズム２３３－１が前記第１のオーディオ信号２４３及び第２のオーディオ信号２４５を信号処理する時、比較的良好な人間音声信号を残しながら、信号におけるエコー信号を除去することができないため、得られた前記第１の目標オーディオ２９１の音声品質が比較的悪く、第２のモード２における第２のアルゴリズム２３３－８が前記第２のオーディオ信号２４５を信号処理して得られる前記第２の目標オーディオ２９２の品質が比較的良い。したがって、電子機器２００は、前記スピーカ信号強度が前記スピーカ閾値より高い場合、前記環境ノイズがどの範囲内にあるかにかかわらず、第２のモード２に対応する前記第２の制御信号を生成する。
【0112】
前記スピーカ信号強度が前記スピーカ閾値より低い場合、第１のモード１における第１のアルゴリズム２３３－１が前記第１のオーディオ信号２４３及び第２のオーディオ信号２４５を信号処理する時、比較的良好な人間音声信号を残しながら、信号におけるエコー信号を除去することができるため、得られた前記第１の目標オーディオ２９１の音声品質が比較的良く、第２のモード２における第２のアルゴリズム２３３－８が前記第２のオーディオ信号２４５を信号処理して得られる前記第２の目標オーディオ２９２の品質も比較的良い。したがって、前記スピーカ信号強度が前記スピーカ閾値より低い場合、電子機器２００が生成する制御信号は、環境ノイズに関係する。
【0113】
前記環境ノイズレベルが前記環境ノイズ閾値より高い場合、又は前記信号対雑音比が前記信号対雑音比閾値より低い場合は、前記マイクロフォン信号における環境ノイズが比較的大きいことを表す。第１のモード１における第１のアルゴリズム２３３－１が前記第１のオーディオ信号２４３及び第２のオーディオ信号２４５を信号処理する時、比較的良好な人間音声信号を残しながら、信号におけるノイズを低減することができるため、得られた前記第１の目標オーディオ２９１の音声品質が比較的良く、第２のモード２における第２のアルゴリズム２３３－８が前記第２のオーディオ信号２４５を信号処理して得られる前記第２の目標オーディオ２９２の音声品質は、第１の目標オーディオ２９１の音声品質より悪い。したがって、電子機器２００は、前記スピーカ信号強度が前記スピーカ閾値より低く、かつ前記環境ノイズレベルが前記環境ノイズ閾値より高く又は前記信号対雑音比が前記信号対雑音比閾値より低い場合、第１のモード１に対応する前記第１の制御信号を生成する。
【0114】
なお、環境ノイズが比較的小さい場合、すなわち、環境ノイズ評価パラメータが前記ノイズ評価範囲内にある場合、第１の目標オーディオ２９１の音声品質は、第２の目標オーディオ２９２の音声品質とあまり変わらない。この時、電子機器２００は、常に前記第２の制御信号を生成し、前記第２のモード２における第２のアルゴリズム２３３－８を選択して第２のオーディオ信号２４５を信号処理し、目標オーディオ音声品質を確保した上で、計算量を減らし、リソースを節約することができる。
【0115】
前記環境ノイズレベルが前記環境ノイズ閾値より低く又は前記信号対雑音比が前記信号対雑音比閾値より高い場合は、前記マイクロフォン信号における環境ノイズが比較的小さいことを表す。第１のモード１における第１のアルゴリズム２３３－１が前記第１のオーディオ信号２４３及び第２のオーディオ信号２４５を信号処理する時に得られる前記第１の目標オーディオ２９１と、第２のモード２における第２のアルゴリズム２３３－８が前記第２のオーディオ信号２４５を信号処理する時に得られる前記第２の目標オーディオ２９２の両方の音声品質は良好である。したがって、電子機器２００は、前記スピーカ信号強度が前記スピーカ閾値より低く、かつ前記環境ノイズレベルが前記環境ノイズ閾値より低く又は前記信号対雑音比が前記信号対雑音比閾値より高い場合、前記第１の制御信号又は前記第２の制御信号を生成する。具体的には、電子機器２００は、前のシーンの制御信号に基づいて現在のシーンでの制御信号を決定することができる。つまり、前のシーンで電子機器が第１の制御信号を生成する場合、現在のシーンで電子機器も第１の制御信号を生成することにより、信号の連続性を確保する。逆も然りである。
【0116】
前記制御信号は制御モジュール２３１によって生成される。具体的には、電子機器２００は、前記スピーカ信号強度及び前記環境ノイズ評価パラメータをリアルタイムで監視し、前記スピーカ閾値及び前記環境評価範囲と比較することができる。電子機器２００は、前記スピーカ信号強度及び前記環境ノイズ評価パラメータを定時に検出し、前記スピーカ閾値及び前記ノイズ評価範囲と比較することもできる。電子機器２００は、前記スピーカ信号強度又は前記環境ノイズ評価パラメータが著しく変化し、変化値が予め設定された範囲を超えることを監視する場合、前記スピーカ信号及び前記環境ノイズ評価パラメータを前記スピーカ閾値及び前記ノイズ評価範囲と比較することもできる。
【0117】
前記制御信号が切り替わる時にユーザ００２によって知覚されないことを確保するために、前記スピーカ閾値、前記環境ノイズ閾値及び前記予め設定された信号対雑音比は範囲であってもよい。前記スピーカ閾値は、前述したように、ここでは詳しく説明しない。前記環境ノイズ閾値は、第１のノイズ臨界値及び第２のノイズ臨界値が存在する範囲内にあってもよい。前記第１のノイズ臨界値は、第２のノイズ臨界値より小さい。前記環境ノイズレベルが前記環境ノイズ閾値より高いということは、前記環境ノイズレベルが前記第２のノイズ臨界値より高いということを含むことができる。前記環境ノイズレベルが前記環境ノイズ閾値より低いということは、前記環境ノイズレベルが前記第１のノイズ臨界値より低いということを含むことができる。前記信号対雑音比閾値は、第１の信号対雑音比臨界値及び第２の信号対雑音比臨界値が存在する範囲内にあってもよい。前記第１の信号対雑音比臨界値は、第２の信号対雑音比臨界値より小さい。前記信号対雑音比が前記信号対雑音比閾値より高いということは、前記信号対雑音比が前記第２の信号対雑音比臨界値より高いということを含むことができる。前記信号対雑音比が前記信号対雑音比閾値より低いということは、前記信号対雑音比が前記第１の信号対雑音比臨界値より低いということを含むことができる。
【0118】
前記方法Ｐ２００は、少なくとも１つのプロセッサ２２０によって実行される以下のステップを含むことができる。
【0119】
Ｓ２４０：前記目標オーディオ処理モードによって前記マイクロフォン信号を処理して目標オーディオを生成することにより、少なくとも前記マイクロフォン信号におけるエコーを低減する。具体的には、ステップＳ２４０は、以下のいずれかの場合を含むことができる。
【0120】
Ｓ２４２：前記制御信号を前記第１の制御信号として決定し、前記第１のモード１を選択し、前記第１のオーディオ信号２４３及び第２のオーディオ信号２４５を信号処理し、第１の目標オーディオ２９１を生成する。具体的には、ステップＳ２４２は、ステップＳ１４２と一致してもよいが、ここでは詳しく説明しない。
【0121】
Ｓ２４４：前記制御信号を前記第２の制御信号として決定し、前記第２のモード２を選択し、前記第２のオーディオ信号２４５に対してエコー抑制を行い、第２の目標オーディオ２９２を生成する。具体的には、ステップＳ２４４は、ステップＳ１４４と一致してもよいが、ここでは詳しく説明しない。
【0122】
Ｓ２６０：前記目標オーディオを出力する。具体的には、ステップＳ２６０は、ステップＳ１６０と一致してもよいが、ここでは詳しく説明しない。
【0123】
前記方法Ｐ２００は、以下のステップを含むこともできる。
【0124】
Ｓ２８０：前記制御信号に基づいて、前記スピーカ２８０の前記スピーカ入力信号の強度を制御する。具体的には、ステップＳ２８０は、ステップＳ１８０と一致してもよいが、ここでは詳しく説明しない。
【0125】
表２は、図６に対応する目標オーディオ処理モード結果図を示す。表２に示すように、照合を容易にするために、シーンを８つのシーンに分けて、それぞれは、第１種：近端音声信号が閾値より小さく（例えば、ユーザ００２が音を発しない）、前記スピーカ信号が前記スピーカ閾値を超えておらず、環境ノイズが比較的小さく、第２種：近端音声信号が閾値より大きく（例えば、ユーザ００２が音を発する）、前記スピーカ信号が前記スピーカ閾値を超えておらず、環境ノイズが比較的小さく、第３種：近端音声信号が閾値より小さく（例えば、ユーザ００２が音を発しない）、前記スピーカ信号が前記スピーカ閾値を超え、環境ノイズが比較的小さく、及び第４種：近端音声信号が閾値より大きく（例えば、ユーザ００２が音を発する）、前記スピーカ信号が前記スピーカ閾値を超え、環境ノイズが比較的小さく、第５種：近端音声信号が閾値より小さく（例えば、ユーザ００２が音を発しない）、前記スピーカ信号が前記スピーカ閾値を超えておらず、環境ノイズが比較的大きく、第６種：近端音声信号が閾値より大きく（例えば、ユーザ００２が音を発する）、前記スピーカ信号が前記スピーカ閾値を超えておらず、環境ノイズが比較的大きく、第７種：近端音声信号が閾値より小さく（例えば、ユーザ００２が音を発しない）、前記スピーカ信号が前記スピーカ閾値を超え、環境ノイズが比較的大きく、第８種：近端音声信号が閾値より大きく（例えば、ユーザ００２が音を発する）、前記スピーカ信号が前記スピーカ閾値を超え、環境ノイズが比較的大きい。ここで、近端音声信号が閾値より大きいか否かは、制御モジュール２３１によって前記マイクロフォン信号に基づいて判断することができる。近端音声信号が閾値より大きいということは、ユーザ００２が発するオーディオ信号強度が予め設定された閾値を超えることであってもよい。前記８つのシーンに対応する目標オーディオ処理モードは、それぞれ第５種及び第６種が第１のモード１に対応し、第３種、第４種、第７種及び第８種が第２のモード２に対応し、他のシーンが第１のモード１又は第２のモード２に対応する。
【0126】
【表2】
【0127】
前記方法Ｐ２００は、スピーカ信号に基づいて電子機器２００の前記目標オーディオ処理モードを制御することができるだけではなく、近端の環境ノイズ信号に基づいて前記目標オーディオ処理モードを制御することにより、異なるシーンでは、電子機器２００が出力する音声信号の音声品質が最適であり、通話品質を確保することもできる。
【0128】
いくつかの実施形態では、前記目標オーディオ処理モードの選択は、前記スピーカ信号のエコー及び環境ノイズだけでなく、ユーザ００２の発話時の音声信号にも関係する。前記環境ノイズ信号は、前記マイクロフォン信号における環境ノイズレベルと信号対雑音比とのうちの少なくとも１つによって評価することができる。ユーザ００２の発話時の音声信号は、前記マイクロフォン信号における人間音声信号強度によって評価することができる。前記人間音声信号強度は、ノイズ推定アルゴリズムによって得られる人間音声信号強度であってもよく、前記人間音声信号強度は、ノイズ低減されて得られたオーディオ信号の強度であってもよい。
【0129】
図７は、本明細書の実施形態に従って提供されるエコーの抑制のためのオーディオ信号処理方法Ｐ３００のフローチャートを示す。前記方法Ｐ３００は、システム１００が前記スピーカ信号の信号強度及び前記マイクロフォン信号に基づいて電子機器２００の目標オーディオ処理モードを選択する方法のフローチャートである。具体的には、前記方法Ｐ３００は、システムが前記スピーカ信号、前記マイクロフォン信号における人間音声信号強度及び環境ノイズレベルと信号対雑音比とのうちの少なくとも１つに基づいて前記目標オーディオ処理モードを選択する方法のフローチャートである。前記方法Ｐ３００は、少なくとも１つのプロセッサ２２０によって実行される以下のステップを含むことができる。
【0130】
Ｓ３２０：少なくとも前記スピーカ信号に基づいて第１のモード１及び第２のモード２から電子機器２の目標オーディオ処理モードを選択する。具体的には、ステップＳ３２０は、以下のステップを含むことができる。
【0131】
Ｓ３２２：少なくとも前記スピーカ信号強度に基づいて、前記スピーカ信号に対応する制御信号を生成する。前記制御信号は、第１の制御信号又は第２の制御信号を含む。ステップＳ３２０は、電子機器２００が前記スピーカ信号強度、前記スピーカ信号におけるノイズ及び前記マイクロフォン信号における人間音声信号強度に基づいて、対応する制御信号を生成することができる。具体的には、ステップＳ３２２は、以下のステップを含むことができる。
【0132】
Ｓ３２２－２：前記スピーカ信号及び前記マイクロフォン信号の評価パラメータを取得する。ここで、前記評価パラメータは、前記マイクロフォン信号における環境ノイズ評価パラメータを含むことができ、前記マイクロフォン信号における人間音声信号強度を含むこともできる。前記環境ノイズ評価パラメータは、環境ノイズレベルと信号対雑音比とのうちの少なくとも１つを含むことができる。電子機器２００は、制御モジュール２３１によって前記マイクロフォン信号における環境ノイズ評価パラメータ及び人間音声信号強度を取得することができる。具体的には、電子機器２００は、第１のオーディオ信号２４３と第２のオーディオ信号２４５とのうちの少なくとも１つに基づいて前記評価パラメータを取得することができる。電子機器２００は、ノイズ推定アルゴリズムによって前記人間音声信号及び前記環境ノイズレベルと前記信号対雑音比を取得することができ、本明細書は、ここで詳しく説明しない。
【0133】
Ｓ３２２－４：前記スピーカ信号強度及び前記評価パラメータに基づいて、前記制御信号を生成する。具体的には、電子機器２００は、前記スピーカ信号強度を予め設定されたスピーカ閾値と比較し、前記環境ノイズ評価パラメータを予め設定されたノイズ評価範囲と比較し、及び前記人間音声信号強度を予め設定された人間音声閾値と比較し、比較結果に基づいて前記制御信号を生成することができる。ステップＳ３２２－４は、以下のいずれかの場合を含むことができる。
【0134】
Ｓ３２２－５：前記スピーカ信号強度が予め設定されたスピーカ閾値より高く、かつ前記人間音声信号強度が前記人間音声閾値を超え、前記環境ノイズ評価パラメータが予め設定されたノイズ評価範囲外にあると決定し、前記第１の制御信号を生成する。
【0135】
Ｓ３２２－６：前記スピーカ信号強度が前記スピーカ閾値より高く、かつ前記人間音声信号強度が前記人間音声閾値を超え、前記環境ノイズ評価パラメータが前記ノイズ評価範囲内にあると決定し、前記第２の制御信号を生成する。
【0136】
Ｓ３２２－７：前記スピーカ信号強度が前記スピーカ閾値より高く、かつ前記人間音声信号強度が前記人間音声閾値より低いと決定し、前記第２の制御信号を生成する。
【0137】
Ｓ３２２－８：前記スピーカ信号強度が前記スピーカ閾値より低く、かつ前記環境ノイズ評価パラメータが前記ノイズ評価範囲外にあると決定し、前記第１の制御信号を生成する。
【0138】
Ｓ３２２－９：前記スピーカ信号強度が前記スピーカ閾値より低く、かつ前記環境ノイズ評価パラメータが前記ノイズ評価範囲内にあると決定し、前記第１の制御信号又は前記第２の制御信号を生成する。
【0139】
前記環境ノイズ評価パラメータが前記ノイズ評価範囲内にあることは、前記環境ノイズレベルが予め設定された環境ノイズ閾値より低いことと、前記信号対雑音比が予め設定された信号対雑音比閾値より高いことと、のうちの少なくとも１つを含むことができる。この時の環境ノイズが比較的小さい。前記環境ノイズ評価パラメータが前記ノイズ評価範囲外にあることは、前記環境ノイズレベルが予め設定された環境ノイズ閾値より高いことと、前記信号対雑音比が予め設定された信号対雑音比閾値より低いことと、のうちの少なくとも１つを含むことができる。この時の環境ノイズが比較的大きい。ここで、前記環境ノイズ評価パラメータが前記ノイズ評価範囲外にある場合、すなわち、大きいノイズ環境では、前記第１の目標オーディオ２９１の音声品質は前記第２の目標オーディオ２９２より優れている。前記環境ノイズ評価パラメータが前記ノイズ評価範囲内にある場合、前記第１の目標オーディオ２９１の音声品質は前記第２の目標オーディオ２９２の音声品質とあまり変わらない。前記スピーカ閾値、前記環境ノイズ閾値及び前記信号対雑音比閾値は、前述したように、ここでは詳しく説明しない。
【0140】
ここで、前記人間音声信号強度が前記人間音声閾値を超えるということは、ユーザ００２が話していることを意味する。この時、ユーザ００２の音声品質を確保するために、電子機器２００は、前記第１の制御信号を生成し、前記第１の目標オーディオ２９２の音声品質を確保するように前記スピーカ信号を低減することができる。
【0141】
前記スピーカ信号、前記環境ノイズ閾値、前記信号対雑音比及び前記人間音声閾値は、電子機器２００に予め記憶されていてもよい。
【0142】
ステップＳ３２０は、以下のステップを含むこともできる。
【0143】
Ｓ３２４：前記制御信号に基づいて、前記制御信号に対応する前記目標オーディオ処理モードを選択する。ここで、前記第１の制御信号は、前記第１のモード１に対応する。前記第２の制御信号は、前記第２のモード２に対応する。前記制御信号が前記第１の制御信号である場合、第１のモード１を選択し、前記制御信号が前記第２の制御信号である場合、第２のモード２を選択する。
【0144】
前記スピーカ信号強度が前記スピーカ閾値より高く、かつ前記人間音声信号強度が前記人間音声閾値を超え、前記環境ノイズ評価パラメータが予め設定されたノイズ評価範囲外にあることは、この時にユーザ００２が話しており、エコーが大きく、ノイズも比較的大きいことが証明される。ユーザ００２の音声品質及び理解度を確保するために、電子機器２００は、スピーカ２８０に入力されるスピーカ入力信号を低減したり、オフにしたりすることができ、前記マイクロフォン信号におけるエコーを低減し、目標オーディオの音声品質を確保する。この時、第１のモード１における第１のアルゴリズム２３３－１が前記第１のオーディオ信号２４３及び第２のオーディオ信号２４５を信号処理して得られる前記第１の目標オーディオ２９１の音声品質は、第２のモード２における第２のアルゴリズム２３３－８が第２のオーディオ信号２４５を信号処理して得られる第２の目標オーディオ２９２より良い。したがって、電子機器２００は、前記スピーカ信号強度が前記スピーカ閾値より高く、かつ前記人間音声信号強度が前記人間音声閾値を超え、前記環境ノイズ評価パラメータが予め設定されたノイズ評価範囲外にある場合、第１のモード１に対応する前記第１の制御信号を生成する。このような場合、電子機器２００は、近端ユーザ００２の音声品質の理解度を確保することができる。スピーカ入力信号の一部が欠けているが、電子機器２００は、スピーカ入力信号の大部分の音声品質及び理解度を維持することにより、両方の音声通信品質を向上させることができる。
【0145】
前記スピーカ信号強度が前記スピーカ閾値より高く、かつ前記人間音声信号強度が前記人間音声閾値より低く、又は前記人間音声信号強度が前記人間音声閾値を超え、前記環境ノイズ評価パラメータが予め設定されたノイズ評価範囲内にあることは、この時にユーザ００２が話していないか、又はユーザ００２が話しているがノイズが比較的小さいことが証明される。この時、第１のモード１における第１のアルゴリズム２３３－１が前記第１のオーディオ信号２４３及び第２のオーディオ信号２４５を信号処理して得られる前記第１の目標オーディオ２９１の音声品質は、第２のモード２における第２のアルゴリズム２３３－８が第２のオーディオ信号２４５を信号処理して得られる第２の目標オーディオ２９２より悪い。したがって、電子機器２００は、前記スピーカ信号強度が前記スピーカ閾値より高く、かつ前記人間音声信号強度が前記人間音声閾値より低く、又は前記人間音声信号強度が前記人間音声閾値を超え、前記環境ノイズ評価パラメータが予め設定されたノイズ評価範囲内にある場合、第２のモード２に対応する前記第２の制御信号を生成する。
ステップＳ３２２－４におけるその他の状況は、ステップＳ２２２－４とほぼ一致するので、ここでは詳しく説明しない。
ステップＳ３２２－４におけるその他の状況は、ステップＳ２２２－４とほぼ一致するので、ここでは詳しく説明しない。
【0146】
前記制御信号は、制御モジュール２３１によって生成される。具体的には、電子機器２００は、前記スピーカ信号強度及び前記評価パラメータをリアルタイムで監視し、前記スピーカ閾値、前記ノイズ評価範囲及び前記人間音声閾値と比較することができる。電子機器２００は、前記スピーカ信号強度及び前記評価パラメータを定時に検出し、前記スピーカ閾値、前記ノイズ評価範囲及び前記人間音声閾値と比較することもできる。電子機器２００は、前記スピーカ信号強度又は前記評価パラメータが著しく変化し、変化値が予め設定された範囲を超えることを監視する場合、前記スピーカ信号及び前記評価パラメータを前記スピーカ閾値、前記評価範囲及び前記人間音声閾値と比較することもできる。
【0147】
前記方法Ｐ３００は、少なくとも１つのプロセッサ２２０によって実行される以下のステップを含むことができる。
【0148】
Ｓ３４０：前記目標オーディオ処理モードによって前記マイクロフォン信号を処理して前記目標オーディオを生成することにより、少なくとも前記マイクロフォン信号におけるエコーを低減する。具体的には、ステップＳ３４０は、以下のいずれかの場合を含むことができる。
【0149】
Ｓ３４２：前記制御信号を前記第１の制御信号として決定し、前記第１のモード１を選択し、前記第１のオーディオ信号２４３及び第２のオーディオ信号２４５を信号処理し、第１の目標オーディオ２９１を生成する。具体的には、ステップＳ３４２は、ステップＳ１４２と一致してもよいが、ここでは詳しく説明しない。
【0150】
Ｓ３４４：前記制御信号を前記第２の制御信号として決定し、前記第２のモード２を選択し、前記第２のオーディオ信号２４５を信号処理し、第２の目標オーディオ２９２を生成する。具体的には、ステップＳ３４４は、ステップＳ１４４と一致してもよいが、ここでは詳しく説明しない。
【0151】
前記方法Ｐ３００は、少なくとも１つのプロセッサ２２０によって実行される以下のステップを含むことができる。
【0152】
Ｓ３６０：前記目標オーディオを出力する。具体的には、ステップＳ３６０は、ステップＳ１６０と一致してもよいが、ここでは詳しく説明しない。
【0153】
前記方法Ｐ３００は、以下のステップを含むこともできる。
【0154】
Ｓ３８０：前記制御信号に基づいて、前記スピーカ２８０の前記スピーカ入力信号の強度を制御する。具体的には、ステップＳ３８０は、ステップＳ１８０と一致してもよいが、ここでは詳しく説明しない。
【0155】
表３は、図７に対応する目標オーディオ処理モード結果図を示す。表３に示すように、照合を容易にするために、シーンを８つのシーンに分けて、それぞれは、第１種：近端音声信号が閾値より小さく（例えば、ユーザ００２が音を発しない）、前記スピーカ信号が前記スピーカ閾値を超えておらず、環境ノイズが比較的小さく、第２種：近端音声信号が閾値より大きく（例えば、ユーザ００２が音を発する）、前記スピーカ信号が前記スピーカ閾値を超えておらず、環境ノイズが比較的小さく、第３種：近端音声信号が閾値より小さく（例えば、ユーザ００２が音を発しない）、前記スピーカ信号が前記スピーカ閾値を超え、環境ノイズが比較的小さく、及び第４種：近端音声信号が閾値より大きく（例えば、ユーザ００２が音を発する）、前記スピーカ信号が前記スピーカ閾値を超え、環境ノイズが比較的小さく、第５種：近端音声信号が閾値より小さく（例えば、ユーザ００２が音を発しない）、前記スピーカ信号が前記スピーカ閾値を超えておらず、環境ノイズが比較的大きく、第６種：近端音声信号が閾値より大きく（例えば、ユーザ００２が音を発する）、前記スピーカ信号が前記スピーカ閾値を超えておらず、環境ノイズが比較的大きく、第７種：近端音声信号が閾値より小さく（例えば、ユーザ００２が音を発しない）、前記スピーカ信号が前記スピーカ閾値を超え、環境ノイズが比較的大きく、第８種：近端音声信号が閾値より大きく（例えば、ユーザ００２が音を発する）、前記スピーカ信号が前記スピーカ閾値を超え、環境ノイズが比較的大きい。ここで、近端音声信号が閾値より大きいか否かは、制御モジュール２３１によって前記マイクロフォン信号に基づいて判断することができる。近端音声信号が閾値より大きいということは、ユーザ００２が発するオーディオ信号強度が予め設定された閾値を超えることであってもよい。前記８つのシーンに対応する目標オーディオ処理モードは、それぞれ第５種、第６種及び第８種が第１のモード１に対応し、第３種、第４種及び第７種が第２のモード２に対応し、他のシーンが第１のモード１又は第２のモード２に対応する。
【0156】
【表3】
【0157】
なお、方法Ｐ２００及び方法Ｐ３００は、異なる応用シーンに適用する。スピーカ信号が近端音声品質より重要なシーンでは、スピーカ信号の品質及びスピーカ信号の理解度を確保するために方法Ｐ２００を選択することができる。近端音声品質がスピーカ信号より重要なシーンでは、近端音声の音声品質及び理解度を確保するために方法Ｐ３００を選択することができる。
【0158】
以上のようにして、システム１００、前記方法Ｐ１００、前記方法Ｐ２００及び前記方法Ｐ３００は、異なるシーンに対して、スピーカ信号に基づいて電子機器２００の目標オーディオ処理モードを制御することにより、目標オーディオがどのようなシーンにおいても音声品質が最適になり、音声通信の品質を向上させるように、電子機器２００の音源信号を制御することができる。
【0159】
なお、環境ノイズの信号強度は周波数ごとに異なる。異なる周波数では、前記第１の目標オーディオ２９１及び前記第２の目標オーディオ２９２の音声品質も異なる。例えば、第１の周波数では、前記第１のオーディオ信号２４３及び第２のオーディオ信号２４５が第１のアルゴリズム２３３－１によって信号処理された前記第１の目標オーディオ２９１の音声品質は前記第２のオーディオ信号２４５が第２のアルゴリズム２３３－８によって信号処理された第２の目標オーディオ２９２の音声品質より優れている。前記第１の周波数以外の他の周波数では、前記第１のオーディオ信号２４３及び第２のオーディオ信号２４５が第１のアルゴリズム２３３－１によって信号処理された前記第１の目標オーディオ２９１の音声品質は前記第２のオーディオ信号２４５が第２のアルゴリズム２３３－８によって信号処理された第２の目標オーディオ２９２の音声品質に近い。この時、電子機器２００は、前記環境ノイズの周波数に基づいて前記制御信号を生成することもできる。前記第１の周波数で前記第１の制御信号を生成し、前記第１の周波数以外の他の周波数で前記第２の制御信号を生成する。
【0160】
前記環境ノイズが低周波数ノイズ（例えば、地下鉄、バスなどの場合）である場合、第１のアルゴリズム２３３－１の信号処理で第１のオーディオ信号２４３及び第２のオーディオ信号２４５によって得られる第１の目標オーディオ２９１の低周波数での音声信号の品質が悪く、すなわち、第１の目標オーディオ２９１の低周波数での音声の理解度が比較的悪く、高周波数での音声の理解度が比較的高い場合がある。この時、電子機器２００は、前記環境ノイズの周波数に基づいて目標オーディオ処理モードの選択を制御することができる。例えば、低周波数範囲において、電子機器２００は、近端ユーザ００２の音声がピックアップされることを確保し、近端音声品質を確保するように、前記方法Ｐ３００を選択して前記目標オーディオ処理モードを制御することができ、高周波数範囲において、電子機器２００は、近端ユーザ００２が前記スピーカ信号を聞き取れることを確保するために、前記方法Ｐ２００を選択して前記目標オーディオ処理モードを制御することができる。
【0161】
本明細書の他の態様は、音源信号制御に基づく少なくとも１群の実行可能な指令が記憶されている非一時的な記憶媒体であって、前記実行可能な指令がプロセッサによって実行される場合、前記実行可能な指令は、前記プロセッサが本明細書に記載のエコーの抑制のためのオーディオ信号処理方法のステップを実施するように指示する非一時的な記憶媒体を提供する。いくつかの可能な実施形態では、本明細書の各態様は、プログラムコードを含むプログラム製品の形態に実現することもできる。前記プログラム製品が電子機器２００で実行される場合、前記プログラムコードは、電子機器２００に本明細書に記載の音源信号制御に基づくステップを実行させるために使用される。上記方法を実現するためのプログラム製品は、プログラムコードを含むポータブルコンパクトディスク読み取り専用メモリ（ＣＤ－ＲＯＭ）を採用し、電子機器２００で実行することができる。しかしながら、本明細書のプログラム製品はこれに限定されておらず、本明細書では、読み取り可能な記憶媒体は、プログラムを含むか、又は記憶する任意の有形媒体であってもよく、当該プログラムは、指令実行システム（例えば、プロセッサ２２０）によって使用されるか、又はそれと組み合わせて使用することができる。前記プログラム製品は、１つ又は複数の読み取り可能な媒体の任意の組み合わせを採用することができる。読み取り可能な媒体は、読み取り可能な信号媒体又は読み取り可能な記憶媒体であってもよい。読み取り可能な記憶媒体は、例えば、電気、磁気、光、電磁気、赤外線、又は半導体のシステム、装置又はデバイス、又は任意の以上の組み合わせであってもよいが、これらに限定されない。読み取り可能な記憶媒体のより具体的な例は、１つ又は複数のワイヤを有する電気的接続、ポータブルディスク、ハードディスク、ランダムアクセスメモリ(ＲＡＭ)、読み取り専用メモリ(ＲＯＭ)、消去可能なプログラマブル読み取り専用メモリ(ＥＰＲＯＭ又はフラッシュメモリ)、光ファイバ、ポータブルコンパクトディスク読み取り専用メモリ(ＣＤ－ＲＯＭ)、光記憶デバイス、磁気記憶デバイス、又は上記の任意の適切な組み合わせを含む。前記コンピュータ読み取り可能な記憶媒体は、搬送波の一部としてベースバンドを伝搬するデータ信号を含んでもよく、読み取り可能なプログラムコードが含まれている。このように伝搬されるデータ信号は、電磁信号、光信号、又は上記の任意の適切な組み合わせを含むが、これらに限定されない様々な形態をとることができる。読み取り可能な記憶媒体はまた、指令実行システム、装置、又はデバイスによって使用されるか、又はそれらと組み合わせて使用するためのプログラムを、送信、伝搬、又は伝送することができる読み取り可能な記憶媒体以外の任意の読み取り可能な媒体であってもよい。読み取り可能な記憶媒体に含まれるプログラムコードは、無線、有線、光ケーブル、ＲＦなど、又は上記の任意の適切な組み合わせを含むが、これらに限定されない、任意の適切な媒体で伝送可能である。本明細書の操作を実行するためのプログラムコードは、Ｊａｖａ、Ｃ＋＋などのオブジェクト指向プログラミング言語と、「Ｃ」言語などの一般的な手続き型プログラミング言語や類似のプログラミング言語とを含む１つ又は複数のプログラミング言語の任意の組み合わせで記述することができる。プログラムコードは、電子機器２００上で完全に実行されてもよいし、電子機器２００上で部分的に実行されてもよいし、独立したソフトウェアパッケージとして実行されてもよいし、電子機器２００上で部分的にリモートコンピューティングデバイス上で部分的に実行されてもよいし、リモートコンピューティングデバイス上で完全に実行されてもよい。
【0162】
以上は、本明細書の特定の実施形態について説明した。他の実施形態は、添付される特許請求の範囲の範囲内にある。いくつかの場合に、特許請求の範囲に記載の動作又はステップは、実施形態における順序と異なる順序で実行されてもよく、依然として所望の結果を実現することができる。また、図面に示すプロセスは、所望の結果を達成するために、必ずしも特定の順序又は連続する順序を示すことを必要としない。いくつかの実施形態では、マルチタスク処理及び並列処理も可能であるか、又は有利であるかもしれない。
【0163】
以上のようにして、この詳細な開示内容を閲読した後、上記の詳細な開示内容は、単なる例として提示してもよく、限定的でなくてもよいことを当業者は理解することができる。本明細書では明記されていないが、当業者であれば、本明細書の要件が実施形態の様々な合理的な変更、改善及び修正を網羅することを理解することができる。これらの変更、改善及び修正は、本明細書によって提出されることを意図しており、本明細書の例示的な実施形態の精神及び範囲内にある。
【0164】
なお、本明細書のいくつかの用語は、本明細書の実施形態を説明するために使用される。例えば、「１つの実施形態」、「実施形態」及び／又は「いくつかの実施形態」とは、当該実施形態と組み合わせて説明される特定の特徴、構造又は特性が本明細書の少なくとも１つの実施形態に含まれ得ることを意味する。したがって、本明細書の各部分における「実施形態」、「１つの実施形態」又は「代替実施形態」の２つ以上の参照は必ずしも同じ実施形態を指すわけではないことを強調し、理解することができる。なお、特定の特徴、構造又は特性は、本明細書の１つ又は複数の実施形態において適切に組み合わせることができる。
【0165】
なお、本明細書の実施形態の前述の説明では、特徴の理解を助けるために、本明細書を簡略化するために、本明細書は、様々な特徴を単一の実施形態、図面又はその説明に組み合わせる。しかしながら、これらの特徴の組み合わせが必須であるということではなく、当業者であれば、本明細書を閲読する時にその特徴の一部を抽出して単独の実施形態として理解することは十分可能である。つまり、本明細書における実施形態は、複数の二次的実施形態の整合として理解することができる。各二次的実施形態の内容は、前述の１つの開示実施形態のすべての特徴より少ない場合にも成り立つ。
【0166】
本明細書で引用する各特許、特許出願、特許出願の出版物及び他の資料、例えば、文章、書籍、明細書、出版物、文書、物品などは、引用によってここに組み合わせることができる。すべての目的のために使用されるすべての内容は、それに関連するいかなる起訴文書の履歴、この文書と一致しないか、又は矛盾する可能性があるいかなる同一のもの、又は特許請求の範囲の最も広い範囲に限定的な影響を及ぼす可能性があるいかなる同一の起訴文書の履歴を除く。現在又は今後この文書に関連する。例えば、この文書の用語は、含まれるいかなる資料に関連する用語の説明、定義、及び／又はこの文書に関連する用語、説明、定義、及び／又は間に矛盾や競合がある場合に使用される。
【0167】
最後に、本明細書に開示された出願の実施形態は、本明細書の実施形態の原理を説明するものであることを理解されたい。その他の修正された実施形態も本明細書の範囲内にある。したがって、本明細書に開示される実施形態は、単なる例であり、制限するものではない。当業者であれば、本明細書中の実施形態に基づいて代替的な構成をとって本明細書中の出願を実現することができる。したがって、本明細書の実施形態は、出願中に厳密に記載された実施形態に限定されるものではない。
【図1】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】
【手続補正書】
【提出日】2023-06-01
【手続補正1】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項1】
エコーの抑制のためのオーディオ信号処理方法であって、少なくともスピーカ信号に基づいて複数のオーディオ処理モードから電子機器の目標オーディオ処理モードを選択するステップであって、前記スピーカ信号は、制御機器が前記電子機器に送信するオーディオ信号であるステップと、
前記目標オーディオ処理モードによってマイクロフォン信号を処理して目標オーディオを生成することにより、少なくとも前記目標オーディオにおけるエコーを低減するステップであって、前記マイクロフォン信号は、前記電子機器が取得するマイクロフォンモジュールの出力信号であり、前記マイクロフォンモジュールは、少なくとも１つの第１のタイプのマイクロフォン及び少なくとも１つの第２のタイプのマイクロフォンを含むステップと、
前記目標オーディオ信号を出力するステップと、を含む、
ことを特徴とするエコーの抑制のためのオーディオ信号処理方法。
【請求項2】
前記少なくとも１つの第１のタイプのマイクロフォンは、第１のオーディオ信号を出力し、及び、前記少なくとも１つの第２のタイプのマイクロフォンは、第２のオーディオ信号を出力し、
ここで、前記マイクロフォン信号は、前記第１のオーディオ信号及び前記第２のオーディオ信号を含む、
ことを特徴とする請求項１に記載のオーディオ信号処理方法。
【請求項3】
前記少なくとも１つの第１のタイプのマイクロフォンは、人体振動信号の収集に用いられ、及び、前記少なくとも１つの第２のタイプのマイクロフォンは、空気振動信号の収集に用いられる、
ことを特徴とする請求項２に記載のオーディオ信号処理方法。
【請求項4】
前記複数のオーディオ処理モードは、少なくとも、前記第１のオーディオ信号及び前記第２のオーディオ信号を信号処理する第１のモードと、
前記第２のオーディオ信号を信号処理する第２のモードと、を含む、
ことを特徴とする請求項２に記載のオーディオ信号処理方法。
【請求項5】
少なくともスピーカ信号に基づいて複数のオーディオ処理モードから電子機器の目標オーディオ処理モードを選択する前記ステップは、少なくとも前記スピーカ信号強度に基づいて、前記スピーカ信号に対応する制御信号を生成するステップであって、前記制御信号が第１の制御信号又は第２の制御信号を含むステップと、
前記制御信号に基づいて、前記制御信号に対応する目標オーディオ処理モードを選択するステップであって、ここで、前記第１のモードが前記第１の制御信号に対応し、前記第２のモードが前記第２の制御信号に対応するステップと、を含む、
ことを特徴とする請求項４に記載のオーディオ信号処理方法。
【請求項6】
少なくとも前記スピーカ信号強度に基づいて、前記スピーカ信号に対応する制御信号を生成する前記ステップは、前記スピーカ信号強度が予め設定されたスピーカ閾値より低いと決定し、前記第１の制御信号を生成するステップ、あるいは、
前記スピーカ信号強度が前記スピーカ閾値より高いと決定し、前記第２の制御信号を生成するステップを含む、
ことを特徴とする請求項５に記載のオーディオ信号処理方法。
【請求項7】
少なくとも前記スピーカ信号強度に基づいて、前記スピーカ信号に対応する制御信号を生成する前記ステップは、前記スピーカ信号強度及び前記マイクロフォン信号に基づいて、対応する制御信号を生成するステップを含む、
ことを特徴とする請求項５に記載のオーディオ信号処理方法。
【請求項8】
前記スピーカ信号強度及び前記マイクロフォン信号に基づいて、対応する制御信号を生成する前記ステップは、前記マイクロフォン信号の評価パラメータを取得するステップであって、前記評価パラメータは、環境ノイズ評価パラメータを含み、前記環境ノイズ評価パラメータは、環境ノイズレベル及び信号対雑音比の少なくとも１つを含むステップと、
前記スピーカ信号強度及び前記評価パラメータに基づいて、前記制御信号を生成するステップと、を含む、
ことを特徴とする請求項７に記載のオーディオ信号処理方法。
【請求項9】
前記スピーカ信号強度及び前記評価パラメータに基づいて、前記制御信号を生成するステップは、前記スピーカ信号強度が予め設定されたスピーカ閾値より高いと決定し、前記第２の制御信号を生成するステップと、
前記スピーカ信号強度が前記スピーカ閾値より低く、かつ前記環境ノイズ評価パラメータが予め設定されたノイズ評価範囲外にあると決定し、前記第１の制御信号を生成するステップと、
前記スピーカ信号強度が前記スピーカ閾値より低く、かつ前記環境ノイズ評価パラメータが前記ノイズ評価範囲内にあると決定し、前記第１の制御信号又は前記第２の制御信号を生成するステップとのいずれかの場合を含む、
ことを特徴とする請求項８に記載のオーディオ信号処理方法。
【請求項10】
前記環境ノイズ評価パラメータが前記ノイズ評価範囲内にあることは、前記環境ノイズレベルが予め設定された環境ノイズ閾値より低いことと、
前記信号対雑音比が予め設定された信号対雑音比閾値より高いことと、の少なくとも１つを含む、
ことを特徴とする請求項９に記載のオーディオ信号処理方法。
【請求項11】
前記評価パラメータは、人間音声信号強度をさらに含み、前記スピーカ信号強度及び前記評価パラメータに基づいて、前記制御信号を生成する前記ステップは、前記スピーカ信号強度が予め設定されたスピーカ閾値より高く、かつ前記人間音声信号強度が予め設定された人間音声閾値を超え、前記環境ノイズ評価パラメータが予め設定されたノイズ評価範囲外にあると決定し、前記第１の制御信号を生成するステップと、
前記スピーカ信号強度が前記スピーカ閾値より高く、かつ前記人間音声信号強度が前記人間音声閾値を超え、前記環境ノイズ評価パラメータが前記ノイズ評価範囲内にあると決定し、前記第２の制御信号を生成するステップと、
前記スピーカ信号強度が前記スピーカ閾値より高く、かつ前記人間音声信号強度が前記人間音声閾値より低いと決定し、前記第２の制御信号を生成するステップと、
前記スピーカ信号強度が前記スピーカ閾値より低く、かつ前記環境ノイズ評価パラメータが前記ノイズ評価範囲外にあると決定し、前記第１の制御信号を生成するステップと、
前記スピーカ信号強度が前記スピーカ閾値より低く、かつ前記環境ノイズ評価パラメータが前記ノイズ評価範囲内にあると決定し、前記第１の制御信号又は前記第２の制御信号を生成するステップとのいずれかの場合を含む、
ことを特徴とする請求項８に記載のオーディオ信号処理方法。
【請求項12】
前記環境ノイズ評価パラメータが前記ノイズ評価範囲内にあることは、前記環境ノイズレベルが予め設定された環境ノイズ閾値より低いことと、
前記信号対雑音比が予め設定された信号対雑音比閾値より高いことと、の少なくとも１つを含む、
ことを特徴とする請求項１１に記載のオーディオ信号処理方法。
【請求項13】
目標オーディオを生成する前記ステップは、前記第１のモードにおける第１のアルゴリズムにより、前記第１のオーディオ信号及び前記第２のオーディオ信号を信号処理し、第１の目標オーディオを生成するステップ、あるいは、
前記第２のモードにおける第２のアルゴリズムにより、前記第２のオーディオ信号を信号処理し、第２の目標オーディオを生成するステップを含み、
ここで、前記目標オーディオは、前記第１の目標オーディオと前記第２の目標オーディオとのうちの１つを含み、
前記目標オーディオを出力する前記ステップは、
前記目標オーディオに対して平滑化処理を行い、前記目標オーディオが前記第１の目標オーディオと前記第２の目標オーディオとの間で切り替えられる時、前記第１の目標オーディオと前記第２の目標オーディオとの接続箇所に対して前記平滑化処理を行うステップと、
前記平滑化処理された前記目標オーディオを出力するステップと、を含む、
ことを特徴とする請求項５に記載のオーディオ信号処理方法。
【請求項14】
前記方法は、前記制御信号に基づいて、前記スピーカのスピーカ入力信号の強度を制御するステップをさらに含み、具体的には、
前記制御信号を前記第１の制御信号として決定し、前記スピーカに入力される前記スピーカ入力信号の強度を低減することにより、前記スピーカが出力する音響の強度を低減するステップを含む、
ことを特徴とする請求項５に記載のオーディオ信号処理方法。
【請求項15】
エコーの抑制のためのオーディオ信号処理のシステムであって、エコーを抑制するオーディオ信号処理のための少なくとも１つの指令セットが記憶されている少なくとも１つの記憶媒体と、
前記少なくとも１つの記憶媒体と通信可能に接続されている少なくとも１つのプロセッサと、を含み、
ここで、前記少なくとも１つのプロセッサは、前記システムが動作する場合、前記少なくとも１つの指令セットを読み取り、前記少なくとも１つの指令セットの指示に基づいて請求項１～１４のいずれかに記載のエコーの抑制のためのオーディオ信号処理方法を実行する、
ことを特徴とするエコーの抑制のためのオーディオ信号処理のシステム。
【国際調査報告】