特許 7149261 リスニングルーム用に仮想会場を生成するための装置及び方法

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2022-09-28

(45)【発行日】2022-10-06

(54)【発明の名称】リスニングルーム用に仮想会場を生成するための装置及び方法

(51)【国際特許分類】

   H04S 7/00 20060101AFI20220929BHJP

   G10K 15/00 20060101ALI20220929BHJP

   H04R 3/04 20060101ALI20220929BHJP

   B60R 11/02 20060101ALI20220929BHJP

【ＦＩ】

H04S7/00 300

G10K15/00 M

G10K15/00 L

H04R3/04

B60R11/02 B

【請求項の数】 19

(21)【出願番号】P 2019508182

(86)(22)【出願日】2017-08-29

(65)【公表番号】

(43)【公表日】2019-09-19

(86)【国際出願番号】 US2017049164

(87)【国際公開番号】W WO2018044915

(87)【国際公開日】2018-03-08

【審査請求日】2020-07-29

(31)【優先権主張番号】62/380,722

(32)【優先日】2016-08-29

(33)【優先権主張国・地域又は機関】US

(73)【特許権者】

【識別番号】592051453

【氏名又は名称】ハーマン インターナショナル インダストリーズ インコーポレイテッド

(74)【代理人】

【識別番号】100078282

【弁理士】

【氏名又は名称】山本 秀策

(74)【代理人】

【識別番号】100113413

【弁理士】

【氏名又は名称】森下 夏樹

(72)【発明者】

【氏名】トレステン， クリストファー マイケル

(72)【発明者】

【氏名】ペノック， ジェイムズ ディー．

(72)【発明者】

【氏名】チョイ， ジェイソン

【審査官】大石 剛

(56)【参考文献】

【文献】米国特許出願公開第２００８／０２３２６０３（ＵＳ，Ａ１）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｈ０４Ｓ ７／００

Ｇ１０Ｋ １５／００

Ｈ０４Ｒ ３／０４

Ｂ６０Ｒ １１／０２

(57)【特許請求の範囲】

【請求項1】

車両内のリスニングルームにおいて仮想会場を生成するための装置であって、前記装置は、
車両オーディオコントローラを備え、前記車両オーディオコントローラは、
再生用オーディオソースからエンターテイメントデータを含む入力オーディオ信号を受信することと、
前記車両の前記リスニングルーム内に配置された少なくとも１つのマイクロフォンから少なくとも１つの捕捉オーディオ信号を受信することと、
前記エンターテイメントデータを再生する所望の会場を示す制御信号を受信することと、
前記入力オーディオ信号及び前記少なくとも１つの捕捉オーディオ信号のうちの少なくとも１つの残響を調整して、前記車両の前記所望の会場で前記エンターテイメントデータを再生することと、
窓、コンバーチブルトップ、及びサンルーフのうちのいずれか１つが開いている状態にあることを示す車両状態信号を受信することと、
前記車両状態信号が前記窓、前記コンバーチブルトップ、及び前記サンルーフのうちのいずれか１つが前記開いている状態にあることを示すことに応答して、前記入力オーディオ信号の前記残響を調整する前に、前記少なくとも１つの捕捉オーディオ信号を消音することと
を実行するように構成されている、装置。

【請求項2】

前記車両オーディオコントローラはさらに、前記入力オーディオ信号及び前記少なくとも１つの捕捉オーディオ信号のうちの前記少なくとも１つの前記残響を調整する前に、前記入力オーディオ信号から残響を取り除き、ドライミックス入力オーディオ信号を生成するように構成されている、請求項１に記載の装置。

【請求項3】

前記車両オーディオコントローラはさらに、前記入力オーディオ信号及び前記少なくとも１つの捕捉オーディオ信号のうちの前記少なくとも１つの前記残響を調整する前に、前記少なくとも１つの捕捉オーディオ信号を等化するように構成されている、請求項２に記載の装置。

【請求項4】

前記車両オーディオコントローラはさらに、前記少なくとも１つの捕捉オーディオ信号を等化した後で、前記残響を調整する前に、前記少なくとも１つの捕捉オーディオ信号上の残響を前記ドライミックス入力オーディオ信号とミックスするように構成されている、請求項３に記載の装置。

【請求項5】

前記車両オーディオコントローラはさらに、前記少なくとも１つの捕捉オーディオ信号上の前記残響を前記ドライミックス入力オーディオ信号とミックスして、前記少なくとも１つの捕捉オーディオ信号上に存在する車室内の環境ノイズのうちの少なくとも１つを、前記入力オーディオ信号上に存在する前記エンターテイメントデータと混合するように構成されている、請求項４に記載の装置。

【請求項6】

前記車両オーディオコントローラはさらに、前記入力オーディオ信号のみの前記残響を調整して、前記所望の会場において前記エンターテイメントデータを再生するように構成されている、請求項１に記載の装置。

【請求項7】

前記少なくとも１つの捕捉オーディオ信号は、前記車両の室内で再生されるエンターテイメントデータ、発話、及び前記車両の内部に入ってくる前記車両の外部からの環境ノイズのうちの少なくとも１つを含む、請求項１に記載の装置。

【請求項8】

前記車両オーディオコントローラはさらに、前記入力オーディオ信号及び前記少なくとも１つの捕捉オーディオ信号のうちの前記少なくとも１つを等化して、前記所望の会場内の特定の壁をシミュレートするように構成されている、請求項１に記載の装置。

【請求項9】

リスニングルームにおいて仮想会場を生成するための方法であって、前記方法は、
再生用オーディオソースからエンターテイメントデータを含む入力オーディオ信号を受信することと、
前記リスニングルーム内に配置された少なくとも１つのマイクロフォンから少なくとも１つの捕捉オーディオ信号を受信することと、
前記エンターテイメントデータを再生する所望の会場を示す制御信号を受信することと、
前記入力オーディオ信号及び前記少なくとも１つの捕捉オーディオ信号のうちの少なくとも１つの残響を調整して、前記リスニングルームの前記所望の会場で前記エンターテイメントデータを再生することと、
窓、コンバーチブルトップ、及びサンルーフのうちのいずれか１つが開いている状態にあることを示す車両状態信号を受信することと、
前記車両状態信号が前記窓、前記コンバーチブルトップ、及び前記サンルーフのうちのいずれか１つが前記開いている状態にあることを示すことに応答して、前記入力オーディオ信号の前記残響を調整する前に、前記少なくとも１つの捕捉オーディオ信号を消音することと
を含む、方法。

【請求項10】

前記入力オーディオ信号及び前記少なくとも１つの捕捉オーディオ信号のうちの前記少なくとも１つの前記残響を調整する前に、前記入力オーディオ信号から残響を取り除き、ドライミックス入力オーディオ信号を生成することをさらに含む、請求項９に記載の方法。

【請求項11】

前記入力オーディオ信号及び前記少なくとも１つの捕捉オーディオ信号のうちの前記少なくとも１つの前記残響を調整する前に、前記少なくとも１つの捕捉オーディオ信号を等化することをさらに含む、請求項１０に記載の方法。

【請求項12】

前記少なくとも１つの捕捉オーディオ信号を等化した後で、前記残響を調整する前に、前記少なくとも１つの捕捉オーディオ信号上の前記残響を前記ドライミックス入力オーディオ信号とミックスして、前記少なくとも１つの捕捉オーディオ信号上に存在する前記リスニングルーム内の環境ノイズのうちの少なくとも１つを、前記入力オーディオ信号上に存在する前記エンターテイメントデータと混合することをさらに含む、請求項１１に記載の方法。

【請求項13】

前記入力オーディオ信号及び前記少なくとも１つの捕捉オーディオ信号のうちの前記少なくとも１つを等化して、前記所望の会場内の特定の壁をシミュレートすることをさらに含む、請求項９に記載の方法。

【請求項14】

リスニングルームにおいて仮想会場を生成するようにプログラムされ、非一時的コンピュータ可読媒体に組み込まれたコンピュータプログラム製品であって、前記コンピュータプログラム製品は、
再生用オーディオソースからエンターテイメントデータを含む入力オーディオ信号を受信することと、
前記リスニングルーム内に配置された少なくとも１つのマイクロフォンから少なくとも１つの捕捉オーディオ信号を受信することと、
前記エンターテイメントデータを再生する所望の会場を示す制御信号を受信することと、
前記入力オーディオ信号及び前記少なくとも１つの捕捉オーディオ信号のうちの少なくとも１つの残響を調整して、前記所望の会場で前記エンターテイメントデータを再生することと、
窓、コンバーチブルトップ、及びサンルーフのうちのいずれか１つが開いている状態にあることを示す車両状態信号を受信することと、
前記車両状態信号が前記窓、前記コンバーチブルトップ、及び前記サンルーフのうちのいずれか１つが前記開いている状態にあることを示すことに応答して、前記入力オーディオ信号の前記残響を調整する前に、前記少なくとも１つの捕捉オーディオ信号を消音することと
を実行する命令を含む、コンピュータプログラム製品。

【請求項15】

前記入力オーディオ信号及び前記少なくとも１つの捕捉オーディオ信号のうちの前記少なくとも１つの前記残響を調整する前に、前記入力オーディオ信号から残響を取り除き、ドライミックス入力オーディオ信号を生成する命令をさらに含む、請求項１４に記載のコンピュータプログラム製品。

【請求項16】

前記入力オーディオ信号及び前記少なくとも１つの捕捉オーディオ信号のうちの前記少なくとも１つの前記残響を調整する前に、前記少なくとも１つの捕捉オーディオ信号を等化する命令をさらに含む、請求項１５に記載のコンピュータプログラム製品。

【請求項17】

前記少なくとも１つの捕捉オーディオ信号を等化した後で、前記残響を調整する前に、前記少なくとも１つの捕捉オーディオ信号上の残響を前記ドライミックス入力オーディオ信号とミックスする命令をさらに含む、請求項１６に記載のコンピュータプログラム製品。

【請求項18】

前記少なくとも１つの捕捉オーディオ信号上の前記残響を前記ドライミックス入力オーディオ信号とミックスして、前記少なくとも１つの捕捉オーディオ信号上に存在する前記リスニングルーム内の環境ノイズのうちの少なくとも１つを、前記入力オーディオ信号上に存在する前記エンターテイメントデータと混合する命令をさらに含む、請求項１７に記載のコンピュータプログラム製品。

【請求項19】

前記入力オーディオ信号及び前記少なくとも１つの捕捉オーディオ信号のうちの前記少なくとも１つを等化して、前記所望の会場内の特定の壁をシミュレートする命令をさらに含む、請求項１４に記載のコンピュータプログラム製品。

【発明の詳細な説明】

【技術分野】

【0001】

関連出願の相互参照
本出願は、２０１６年８月２９日に出願された米国仮特許出願第６２／３８０，７２２号の利益を主張し、その開示内容は、参照によりその全体が本明細書に組み込まれるものとする。

【0002】

本明細書に開示される態様は、概して、リスリングルーム用に仮想会場を生成するための装置及び方法に関する。これらの態様及び他の態様は、本明細書においてさらに詳しく論述される。

【背景技術】

【0003】

車両は、例えばスタジアム、フェスティバル、レコーディングスタジオ、コンサートホール（例えば大、中、または小規模）などのような異なる会場により提供されるリスニング環境とは大きく異なるリスニング環境を提供する。一般に、スタジアム、フェスティバル、レコーディングスタジオ、及びコンサートホールなどにおいて取り込まれたオーディオの音声記録は、車両のリスニング環境用にうまく変換されないことがある。例えば、車両内のリスニング環境は、前述の会場のリスニング環境よりもかなり小さい。さらに、車両のリスニング環境は、上記の会場の様々な壁と比較した場合、異なる寸法及び形状の様々な壁（例えば前壁、後壁、側壁、及び上壁）を提供する。車両のリスニング環境を画定する異なる寸法及び形状が原因で、他の会場で取り込まれた音声記録を車両用に変換することは困難となり得る。そのため、車両内のユーザ体験が低下する。

【発明の概要】

【課題を解決するための手段】

【0004】

少なくとも１つの実施形態では、車両内のリスニングルームにおいて仮想会場を生成するための装置が提供される。装置は、再生用オーディオソースからエンターテイメントデータを含む入力オーディオ信号を受信し、車両のリスニングルーム内に配置された少なくとも１つのマイクロフォンから少なくとも１つの捕捉オーディオ信号を受信するように構成された車両オーディオコントローラを含む。車両オーディオコントローラはさらに、エンターテイメントデータを再生する所望の会場を示す制御信号を受信し、入力オーディオ信号及び少なくとも１つの捕捉オーディオ信号のうちの少なくとも１つの残響を調整して、所望の会場でエンターテイメントデータを再生するように構成される。

【0005】

少なくとも別の実施形態では、リスニングルームにおいて仮想会場を生成するための方法が提供される。方法は、再生用オーディオソースからエンターテイメントデータを含む入力オーディオ信号を受信することと、リスニングルーム内に配置された少なくとも１つのマイクロフォンから少なくとも１つの捕捉オーディオ信号を受信することとを含む。方法はさらに、エンターテイメントデータを再生する所望の会場を示す制御信号を受信することと、入力オーディオ信号及び少なくとも１つの捕捉オーディオ信号のうちの少なくとも１つの残響を調整して、リスニングルームの所望の会場でエンターテイメントデータを再生することとを含む。

【0006】

少なくとも別の実施形態では、リスニングルームにおいて仮想会場を生成するようにプログラムされ、非一時的コンピュータ可読媒体に組み込まれたコンピュータプログラム製品が提供される。コンピュータプログラム製品は、再生用オーディオソースからエンターテイメントデータを含む入力オーディオ信号を受信し、リスニングルーム内に配置された少なくとも１つのマイクロフォンから少なくとも１つの捕捉オーディオ信号を受信する命
令を含む。コンピュータプログラム製品は、エンターテイメントデータを再生する所望の会場を示す制御信号を受信し、入力オーディオ信号及び少なくとも１つの捕捉オーディオ信号のうちの少なくとも１つの残響を調整して、所望の会場でエンターテイメントデータを再生する命令を含む。
本明細書は、例えば、以下の項目も提供する。
（項目１）
車両内のリスニングルームにおいて仮想会場を生成するための装置であって、前記装置は、
車両オーディオコントローラを備え、前記車両オーディオコントローラは、
再生用オーディオソースからエンターテイメントデータを含む入力オーディオ信号を受信し、
前記車両の前記リスニングルーム内に配置された少なくとも１つのマイクロフォンから少なくとも１つの捕捉オーディオ信号を受信し、
前記エンターテイメントデータを再生する所望の会場を示す制御信号を受信し、
前記入力オーディオ信号及び前記少なくとも１つの捕捉オーディオ信号のうちの少なくとも１つの残響を調整して、前記車両の前記所望の会場で前記エンターテイメントデータを再生する
ように構成されている、前記装置。
（項目２）
前記車両オーディオコントローラはさらに、前記入力オーディオ信号及び前記少なくとも１つの捕捉オーディオ信号のうちの前記少なくとも１つの前記残響を調整する前に、前記入力オーディオ信号から残響を取り除き、ドライミックス入力オーディオ信号を生成するように構成されている、項目１に記載の装置。
（項目３）
前記車両オーディオコントローラはさらに、前記入力オーディオ信号及び前記少なくとも１つの捕捉オーディオ信号のうちの前記少なくとも１つの前記残響を調整する前に、前記少なくとも１つの捕捉オーディオ信号を等化するように構成されている、項目２に記載の装置。
（項目４）
前記車両オーディオコントローラはさらに、前記少なくとも１つの捕捉オーディオ信号を等化した後で、前記残響を調整する前に、前記少なくとも１つの捕捉オーディオ信号上のリバーブを前記ドライミックス入力オーディオ信号とミックスするように構成されている、項目３に記載の装置。
（項目５）
前記車両オーディオコントローラはさらに、前記少なくとも１つの捕捉オーディオ信号上の前記リバーブを前記ドライミックス入力オーディオ信号とミックスして、前記少なくとも１つの捕捉オーディオ信号上に存在する車室内の環境ノイズのうちの少なくとも１つを、前記入力オーディオ信号上に存在する前記エンターテイメントデータと混合するように構成されている、項目４に記載の装置。
（項目６）
前記車両オーディオコントローラはさらに、窓、コンバーチブルトップ、及びサンルーフのうちのいずれか１つが開いていることを示す車両状態信号を受信するように構成されている、項目４に記載の装置。
（項目７）
前記車両オーディオコントローラはさらに、前記入力オーディオ信号のみの前記残響を調整して、前記所望の会場において前記エンターテイメントデータを再生するように構成されている、項目６に記載の装置。
（項目８）
前記少なくとも１つの捕捉オーディオ信号は、前記車両の室内で再生されるエンターテイメントデータ、発話、及び前記車両の内部に入ってくる前記車両の外部からの環境ノイズのうちの少なくとも１つを含む、項目１に記載の装置。
（項目９）
前記車両オーディオコントローラはさらに、前記入力オーディオ信号及び前記少なくとも１つの捕捉オーディオ信号のうちの前記少なくとも１つを等化して、前記所望の会場内の特定の壁をシミュレートするように構成されている、項目１に記載の装置。
（項目１０）
リスニングルームにおいて仮想会場を生成するための方法であって、
再生用オーディオソースからエンターテイメントデータを含む入力オーディオ信号を受信することと、
前記リスニングルーム内に配置された少なくとも１つのマイクロフォンから少なくとも１つの捕捉オーディオ信号を受信することと、
前記エンターテイメントデータを再生する所望の会場を示す制御信号を受信することと、
前記入力オーディオ信号及び前記少なくとも１つの捕捉オーディオ信号のうちの少なくとも１つの残響を調整して、前記リスニングルームの前記所望の会場で前記エンターテイメントデータを再生することと、
を含む前記方法。
（項目１１）
前記入力オーディオ信号及び前記少なくとも１つの捕捉オーディオ信号のうちの前記少なくとも１つの前記残響を調整する前に、前記入力オーディオ信号からリバーブを取り除き、ドライミックス入力オーディオ信号を生成することをさらに含む、項目１０に記載の方法。
（項目１２）
前記入力オーディオ信号及び前記少なくとも１つの捕捉オーディオ信号のうちの前記少なくとも１つの前記残響を調整する前に、前記少なくとも１つの捕捉オーディオ信号を等化することをさらに含む、項目１１に記載の方法。
（項目１３）
前記少なくとも１つの捕捉オーディオ信号を等化した後で、前記残響を調整する前に、前記少なくとも１つの捕捉オーディオ信号上の前記リバーブを前記ドライミックス入力オーディオ信号とミックスして、前記少なくとも１つの捕捉オーディオ信号上に存在する前記リスニングルーム内の環境ノイズのうちの少なくとも１つを、前記入力オーディオデータ上に存在する前記エンターテイメントデータと混合することをさらに含む、項目１２に記載の方法。
（項目１４）
前記入力オーディオ信号及び前記少なくとも１つの捕捉オーディオ信号のうちの前記少なくとも１つを等化して、前記所望の会場内の特定の壁をシミュレートすることをさらに含む、項目１０に記載の方法。
（項目１５）
リスニングルームにおいて仮想会場を生成するようにプログラムされ、非一時的コンピュータ可読媒体に組み込まれたコンピュータプログラム製品であって、
再生用オーディオソースからエンターテイメントデータを含む入力オーディオ信号を受信し、
前記リスニングルーム内に配置された少なくとも１つのマイクロフォンから少なくとも１つの捕捉オーディオ信号を受信し、
前記エンターテイメントデータを再生する所望の会場を示す制御信号を受信し、
前記入力オーディオ信号及び前記少なくとも１つの捕捉オーディオ信号のうちの少なくとも１つの残響を調整して、前記所望の会場で前記エンターテイメントデータを再生する
命令を含む、前記コンピュータプログラム製品。
（項目１６）
前記入力オーディオ信号及び前記少なくとも１つの捕捉オーディオ信号のうちの前記少なくとも１つの前記残響を調整する前に、前記入力オーディオ信号から残響を取り除き、ドライミックス入力オーディオ信号を生成する命令をさらに含む、項目１５に記載のコンピュータプログラム製品。
（項目１７）
前記入力オーディオ信号及び前記少なくとも１つの捕捉オーディオ信号のうちの前記少なくとも１つの前記残響を調整する前に、前記少なくとも１つの捕捉オーディオ信号を等化する命令をさらに含む、項目１６に記載のコンピュータプログラム製品。
（項目１８）
前記少なくとも１つの捕捉オーディオ信号を等化した後で、前記残響を調整する前に、前記少なくとも１つの捕捉オーディオ信号上の残響を前記ドライミックス入力オーディオ信号とミックスする命令をさらに含む、項目１７に記載のコンピュータプログラム製品。
（項目１９）
前記少なくとも１つの捕捉オーディオ信号上の前記リバーブを前記ドライミックス入力オーディオ信号とミックスして、前記少なくとも１つの捕捉オーディオ信号上に存在する前記リスニングルーム内の環境ノイズのうちの少なくとも１つを、前記入力オーディオデータ上に存在する前記エンターテイメントデータと混合する命令をさらに含む、項目１８に記載のコンピュータプログラム製品。
（項目２０）
前記入力オーディオ信号及び前記少なくとも１つの捕捉オーディオ信号のうちの前記少なくとも１つを等化して、前記所望の会場内の特定の壁をシミュレートする命令をさらに含む、項目１５に記載のコンピュータプログラム製品。

【0007】

本開示の実施形態は、添付の特許請求の範囲において詳細に指摘される。しかしながら、様々な実施形態の他の特徴は、添付の図面と併せて下記の発明を実施するための形態を参照することにより、より明らかとなり最もよく理解されるであろう。

【図面の簡単な説明】

【0008】

【図1】車両の概観、及び車両の対応するリスニング環境を概して示す。

【図2】一実施形態による、車両のリスニング環境内で仮想会場を生成するための方法を概して示す。

【図3】一実施形態による、車両のリスニングルーム内で仮想会場を生成するための装置を概して示す。

【図4】図３の装置を用いて、車両のリスニングルーム内で仮想会場を生成するための方法を概して示す。

【発明を実施するための形態】

【0009】

必要に応じて、本発明の詳細な実施形態が本明細書において開示されるが、開示される実施形態は、様々な形態及び代替的な形態で具現化され得る本発明の例示にすぎないことを理解されたい。図は必ずしも縮尺通りではなく、いくつかの特徴は、特定の構成要素の詳細を示すために、誇張または最小化され得る。そのため、本明細書で開示される特定の構造及び機能の詳細は、限定として解釈されるべきではなく、本発明を多様に用いるように当業者に教示する単なる代表的な基礎として解釈されるべきである。

【0010】

本開示の実施形態は概して、複数の回路または他の電気デバイスを提供する。回路及び他の電気デバイスに対する全ての言及、及びそれぞれが提供する機能には、本明細書に例示され説明されることのみを包含するように限定される意図はない。特定のラベルが、開示される様々な回路または他の電気デバイスに割り当てられ得るが、このようなラベルには、回路及び他の電気デバイスの動作範囲を限定する意図はない。このような回路及び他の電気デバイスは、所望の特定の種類の電気的実施態様に基づく任意の方法で、互いに組み合わされてもよく、及び／または分離されてもよい。本明細書で開示される任意の回路または他の電気デバイスは、任意の数のマイクロコントローラ、プロセッサ、集積回路、メモリデバイス（例えばＦＬＡＳＨ、ランダムアクセスメモリ（ＲＡＭ）、読み出し専用メモリ（ＲＯＭ）、電気的プログラマブル読み出し専用メモリ（ＥＰＲＯＭ）、電気的消去可能プログラマブル読み出し専用メモリ（ＥＥＰＲＯＭ）、またはこれらの他の好適な変形）、及び本明細書で開示される任意の動作（複数可）を実行するために互いに協働するソフトウェアを含み得ることが認識される。さらに、電気デバイスのうちの任意の１つ以上は、開示される任意の数の機能を実行するようにプログラムされた、非一時的コンピュータ可読媒体に組み込まれたコンピュータプログラムを実行するように構成され得る。

【0011】

本明細書で開示される態様は概して、車両内のリスニング環境のために、車両内でのオーディオまたはユーザ体験が様々な会場（例えばスタジアム、コンサートホール（すなわち大、小、または中規模）、フェスティバル、またはレコーディングスタジオ）のように聞こえるよう、オーディオパラメータを変更する車両オーディオ装置を提供する。例えば、車両オーディオ装置は、車両が、ユーザの選択に基づいてカーネギーホール、ヤンキースタジアムなどのように聞こえるよう、オーディオパラメータを変更し得る。さらに、車両オーディオ装置は、単に車両内のリスニング環境が実際よりも大きく聞こえるように構成され得る（例えば車両が小型車両である場合、車両オーディオ装置は、ユーザがスポーツ用多目的車両（「ＳＵＶ」）内にいるように聞こえるオーディオ体験を提供し得る）。これらの態様及び他の態様は、さらに詳しく論述される。

【0012】

図１は概して、車両１０の概観、及び車両の対応するリスニング環境１２を示す。車両１０は、車両１０のリスニング環境１２（すなわちリスニングルーム）内でオーディオを再生するように構成された車両オーディオシステム１４を含む。車両１０のリスニング環境１２は概して、前壁１６（例えば計器パネルと、前面ガラスと、計器パネルの下に内装及びプラスチックトリム（該当する場合）を含むフロアパンとを含む車両１０の領域）、後壁１８（例えば乗客座席列、ＳＵＶの場合は後部トランク区画、及び／または後面ガラスを含む車両１０の領域）、側壁２０（例えばＡピラー、Ｂピラー、Ｃピラー、及び／またはＤピラー、前部及び／または後部ドア、並びに前部及び／または後部窓を含む車両１０の領域）、及び上壁２２（すなわち天井）（例えば上部メタルパン及びヘッドライナを含む車両１０の領域）を画定する。

【0013】

車両オーディオシステム１４はまた、車両１０の内側の周りに配置された複数のマイクロフォン２４ａ～２４ｄを含み得る。例えば、車両１０のリスニング環境１２内で音声または捕捉オーディオ信号（例えば音楽、電子オーディオソースからのエンターテイメントデータを含む入力オーディオ信号上のエンターテイメントデータに対応する車両乗員から捕捉されるノイズ、発話（もしくは車両乗員の対話）、車両１０の内部に入ってくる車両１０の外部からの環境ノイズ、及び／または車室内の環境ノイズなど）を捕捉するために、各マイクロフォン２４ａ～２４ｄは、車両１０の上壁２２のヘッドライナ（図示せず）内に等距離に配置され得る。任意の数のマイクロフォン２４が、車両１０のリスニング環境１２内に配置され得ることが認識される。しかしながら、車両１０内に１つまたは２つのマイクロフォン２４のみが配置される場合、マイクロフォン２４に近い可聴音声は、マイクロフォン２４に対しより大きい残響効果を有し得るため、比較的不自然な音声が生じる。

【0014】

車両オーディオシステム１４は、任意の１つ以上のノイズ除去技術（例えば能動的ノイズ除去（ＡＮＣ）、室内ノイズ除去（ＲＮＣ）、及びエンジンオーダー除去（ＥＯＣ））を用いて、マイクロフォン２４ａ～２４ｄにより拾われるロードノイズ及びエンジンノイズ（または車両１０内で再生される入力オーディオデータと一致しない環境内のあらゆる望ましくない可聴ノイズ）の影響を最小限に抑えるように構成された車両オーディオ装置（すなわち車両オーディオコントローラ）２６を含む。様々なスピーカ２８が車両１０の周りに配置され、車両オーディオコントローラ２６により処理されたオーディオを再生し得る。１つ以上のスピーカ２８が壁１６、１８、２０、及び２２のうちの１つ以上に配置され、車室内へオーディオを伝送し得る。例えば、車両オーディオコントローラ２６は、車両１０内の壁（例えば前壁１６、後壁１８、側壁２０、及び上壁２２）の周りまたは中に配置されたスピーカ２８に信号を送信して、選択された会場に基づいて、所望の残響（すなわちリバーブ）を提供し得る。車両１０のヘッドライナ（すなわち上壁２２）内に配置されたスピーカ（複数可）２８は、選択された会場の天井のリバーブを再現することができ、後列座席（すなわち後壁１８）におけるヘッドレスト内に配置されたスピーカ（複数可）２８は、選択された会場の側壁のリバーブを再現することができ、車両１０のドア（すなわち側壁２０）内に配置されたスピーカ（複数可）２８は、選択された会場の側壁のリバーブを再現することができる。計器パネル上または内に（すなわち前壁１６に）配置されたスピーカ（複数可）２８は、選択された会場の前壁のリバーブを再現することができる。

【0015】

一般に、車両オーディオコントローラ２６がオーディオパラメータを再生して、リスニング環境内のオーディオを適合させるように、ユーザ（例えば車両１０内の運転者または乗客）は、対応会場（例えばスタジアム、コンサートホール（大、小、または中規模）、レコーディングスタジオ）を選択し得る。会場は、ヤンキースタジアム、カーネギーホールなどの特定の会場に関連し得ることが認識される。車両オーディオコントローラ２６がオーディオを再生する対応会場をユーザが選択できるように、ユーザインターフェース３０が車両オーディオコントローラ２６に電気的に接続され得る。車両オーディオコントローラ２６は、オーディオ再生の前に、オーディオソース６０（すなわちＦＭチャネル、ＡＭチャネル、ハイデフィニション（ＨＤ）局、衛星ラジオ、携帯電話、タブレットなど）からの入力オーディオ信号、及び／または捕捉オーディオ信号に加えられるリバーブの量を調整して、車両１０の実際の壁１６、１８、２０、及び２２（すなわちリスニング環境１２）に基づいたオーディオを聞いているのとは対照的に、ユーザが、選択した会場設定（例えばスタジアム、コンサートホール、レコーディングスタジオなど）にいながらオーディオを実際に聞いている感覚を提供するように構成される。例えば、車両オーディオコントローラ２６は、再生前に入力オーディオ及び／または所望の環境音声の残響効果を調整することで、対応仮想会場の様々な壁（例えば前面、側面、後面、及び上面）のうちの任意の１つ以上をシミュレートすることができ、これによりユーザには、感覚的に選択会場内のオーディオが聞こえる。

【0016】

車両オーディオコントローラ２６は、マイクロフォン２４ａ～２４ｄにより捕捉されたいずれの音声とも関係のないオーディオに対し直接残響効果を加えて、選択会場を達成または生成し得る。さらに、車両オーディオコントローラ２６は、電子オーディオソース（図示せず）からの入力オーディオ信号に対し、及びマイクロフォン２４ａ～２４ｄによる捕捉オーディオ信号に対し、残響効果を加え得る。これらの態様は、対応会場内の場所のうちの１つに実際いるような、より現実的な効果を生み出すことができる。例えば、ユーザがユーザインターフェース３０を介して大きなコンサートホール会場を選択したと仮定すると、大きいコンサートホールでのオーディオ音量は車両１０内で通常再生されるオーディオ音量よりはるかに大きくなり得るため、車両オーディオコントローラ２６は、通常よりもはるかに大きい音量でオーディオを再生し得る。さらに、ユーザは、より大きい車両１０のリスニング環境１２に該当する会場を選択することが可能であり得る。車両オーディオコントローラ２６は、これに応じて残響効果を調整し、より大きい車両１０内で再生されていると知覚されるオーディオを再生し得る。一般に、様々な会場に関連する残響態様は、会場で記録または測定され、その後、ユーザによる選択のために、車両オーディオコントローラ２６のメモリ（図示せず）に記憶され得る。一実施形態では、システム１４によりユーザは、（ユーザインターフェース３０を介して）選択会場内から特定の場所を選択することも可能となり得るため、ユーザは、選択会場からだけでなく、会場内の特定の場所からオーディオを聞くことを体験し得ることも、認識される。会場内の場所は、メインフロア、上位（すなわちラフター）、下位、中位（すなわち上位と下位の間の様々なレベル（複数可））、ステージ上、ステージ上右側または左側などに対応し得る。

【0017】

（ｉ）車両１０のいずれかの窓が開いている、（ｉｉ）車両１０のサンルーフが開いている、または（ｉｉｉ）車両１０のコンバーチブルトップが開いている時、マイクロフォン２４ａ～２４ｄにより捕捉されたいずれの入力オーディオも、車両オーディオコントローラ２６により消音され得ることが、さらに認識される。例えば、車両１０内の様々な電子コントローラ（図示せず）は、窓の状態（例えば任意の窓の開閉状態）、サンルーフの状態（例えば開閉状態）、及びコンバーチブルトップの状態（例えば開閉状態）といった車両状態を監視して、コントローラエリアネットワーク（ＣＡＮ）を介したデータ通信バスまたは他の多重化データバスにより、車両オーディオコントローラへ情報を送信し得る。ミキサ７６は、マイクロフォン２４ａの捕捉オーディオを消音し、入力オーディオ信号に残響効果を適用して、ユーザインターフェース３０を介してユーザにより選択された会場の再生用オーディオを生成し得る。例えば、窓が閉まっていることが検出された、またはコンバーチブルトップが閉まっていることが検出された場合でも、捕捉オーディオの音が大きすぎる、またはうるさすぎる場合には、ミキサ７６は、捕捉オーディオを消音し得る。

【0018】

図２は概して、一実施形態による、車両１０のリスニング環境１２内で仮想会場を生成するための方法５０を示す。

【0019】

動作５２において、車両オーディオコントローラ２６は、車両１０内に配置されたマイクロフォン２４のうちの任意の１つ以上から捕捉オーディオを受信する。

【0020】

動作５４において、車両オーディオコントローラ２６は、オーディオソース６０からの入力オーディオを処理して、所望のすなわち選択された会場の音響特性を再現する。例えば、車両オーディオコントローラ２６は、対応する残響効果を加えて、ユーザにより選択された所望の仮想会場を生成する。

【0021】

動作５６において、車両オーディオコントローラ２６は、様々なスピーカ２８を通して、対応する残響効果で処理されたオーディオを再生し、ユーザが選択会場の音響に基づいたオーディオを聞くことを可能にする。

【0022】

図３は、一実施形態による、車両１０のリスニング環境１２内で仮想会場を生成する車両オーディオコントローラ２６の詳細な実施態様を示す。車両オーディオコントローラ２６は、本明細書において開示される顕著な動作のうちのいずれかを実行するために互いに協働する任意の数のプロセッサ及びメモリを含み得ることが認識される。オーディオソース６０は、車両１０へ（すなわち車両オーディオコントローラ２６へ）入力オーディオ信号を提供するように構成される。オーディオソース６０は、ＦＭ局、ＡＭ局、ハイデフィニション（ＨＤ）オーディオ局、衛星ラジオプロバイダ、携帯電話からの入力、タブレットからの入力などのうちのいずれか１つであり得ることが認識される。ユーザは、車両オーディオコントローラ２６に配置されたソースセレクタ６２を介して、または車両１０の他の場所もしくはモバイルデバイス（図示せず）に配置され得るユーザインターフェース３０を介して、対応するオーディオソース６０を選択し得る。

【0023】

リバーブ抽出ブロック６４（すなわち抽出ブロック６４）は、入力オーディオ信号からリバーブを取り除き、ドライオーディオ信号を提供する。この動作は、選択会場の対応する残響効果を受け入れるように入力オーディオ信号を準備するために行われる。リバーブ抽出ブロック６４は、入力オーディオ信号からリバーブを完全に取り除くことができない場合があり、いくつかのリバーブ残余がまだドライオーディオ信号上に存在し得ることが認識される。ステレオ等化ブロック６６は、リバーブ抽出ブロック６４からドライオーディオ信号を受信する。一般に、ステレオ等化ブロック６６は、車両１０内の通常のステレオイコライザとして機能し、ユーザによる再生のために入力オーディオ信号を等化するように構成される。加算器６８は、ステレオ等化ブロック６６からの出力を受信する。加算器６８の関連は、下記においてより詳細に論述される。

【0024】

車両オーディオコントローラ２６は、車両１０内の対応する各マイクロフォン２４からの入力を受信するように構成される。上記のように、マイクロフォン２４により捕捉されたオーディオは、車両内の音楽、発話、及び環境ノイズに該当し得る。マイクロフォン等化ブロック７０は、マイクロフォン２４から捕捉オーディオを受信し、捕捉オーディオを等化する（すなわち様々な周波数帯域のエネルギーを強めるまたは弱める）。フィードバック等化ブロック７２は、マイクロフォン等化ブロック７０からの出力を受信する。車両オーディオコントローラ２６は、遅延ブロック７４と、オーディオミキサ７６と、スパイダリバーブブロック７８とを含む。遅延ブロック７４は、抽出ブロック６４からドライオーディオを受信し、ドライオーディオを、マイクロフォン２４からの捕捉オーディオと時間的に整合させる。この状態は、車両オーディオコントローラ２６による入力オーディオ信号の処理の遅延の原因となる。入力オーディオ信号上のエンターテイメントデータの再生が、マイクロフォン２４からの捕捉オーディオ信号と、時間的に確実に整合されていることが望ましい。入力オーディオ信号のエンターテイメントデータにあわせて車両乗員が手を叩いているまたは歌を歌っている例を考察すると、この場合、入力オーディオ信号上のエンターテイメントデータの再生を、再生に対する車両乗員の手を叩くまたは歌声の入力（マイクロフォン２４により捕捉）と、時間的に整合させることが望ましい。入力オーディオ信号のエンターテイメントデータの再生、及びマイクロフォン２４による手を叩くまたは歌声の入力（またはエンターテイメントデータと一致する車両乗員（複数可）の他の行動）を捕捉することにより、この態様はさらに、車両乗員（複数可）に対し、観客を含む会場でオーディオ再生と一致するノイズがある程度聞こえることが予想されるような、所望の会場内にいる体験を提供する。従って、マイクロフォン２４で車両１０内の環境ノイズを捕捉し、このデータを入力オーディオ信号のエンターテイメントデータと組み合わせ、その後ミックスのリバーブを調整することにより、この態様は、車両乗員の体験を向上させ、車両乗員が所望の会場内にいる感覚を提供する。

【0025】

遅延ブロック７４は、遅延を適用してもしなくてもよく、この状態は、車両オーディオコントローラ２６の処理速度に基づくことが認識される。ミキサ７６は、マイクロフォン２４により捕捉されたオーディオからのリバーブを、入力オーディオ信号上に残された任意のリバーブ残余とミックスするように構成される。ミキサ７６は、窓、コンバーチブルトップ、またはサンルーフが開いているか閉じているかを示す信号ＷＩＮＤＯＷ／ＣＯＮＶＥＲＴＩＢＬＥ＿ＳＴＡＴＵＳを受信する。窓、コンバーチブルトップ、またはサンルーフが開いており、信号にノイズが多すぎる場合、先と同様に、ミキサ７６は、マイクロフォン２４からの捕捉信号を消音し得る。同様に、ミキサ７６は、スパイダリバーブブロック７８にフィードバックされる車両１０内のノイズまたは声のデータ（すなわち複数のマイクロフォン２４からの捕捉オーディオデータ）の量と、スパイダリバーブブロック７８にフィードバックされるオーディオの量の対比を制御する。一般に、ミキサ７６は、所望の混合を達成するために、ダイレクトオーディオ（すなわちドライオーディオ）に関して、マイクロフォン２４で捕捉されたオーディオの混合を特定する。

【0026】

ユーザインターフェース３０は、車両オーディオコントローラ２６がオーディオを再生する選択会場（すなわち仮想会場）を示す制御信号を、車両オーディオコントローラ２６に提供する。上記のように、選択会場は、スタジアム、コンサートホール（例えば大、小、または中規模）、レコーディングスタジオ、及びユーザがいる車両１０のリスニング環境１２とは異なる車両１０のリスニング環境のうちのいずれか１つに対応し得る。スパイダリバーブブロック７８は、ドライオーディオと捕捉オーディオのミックスに対応する、ミキサ７６からの出力を受信する。スパイダリバーブブロック７８は一般に、複数のスパイダリバーブブロック８０ａ～８０ｎ（すなわち「８０」）と、複数の会場等化ブロック８２ａ～８２ｎ（すなわち「８２」）とを含む。一般に、各スパイダリバーブブロック８０及びその対応する会場等化ブロック８２は、ミキサ７６からの出力に対するリバーブの量を追加または調整して、選択されたすなわち所望の会場をユーザに提供する。具体的には、スパイダリバーブブロック８０は、選択会場の異なる壁の様々な残響特性を再現する。スパイダリバーブブロック７８は、指定すなわち選択された会場に対応するように残響を調整し、会場等化ブロック８２は、車両１０の壁１６、１８、２０、及び２２の明度特性を制御して、選択会場の所望の明度特性を提供する。選択会場は、スタジアム会場、大規模コンサートホール、中規模コンサートホールなどに対応し得る。例えば、ユーザがカーネギーホールにいるかのように、車両オーディオコントローラ２６がオーディオを再生することをユーザが選択した場合、スパイダリバーブブロック８０は、カーネギーホールの壁のように聞こえる車両１０の壁１６、１８、２０、及び２２からの残響効果を提供するように構成される。従って、これにより、車両１０内に実際座っていながら、カーネギーホール内でオーディオを実際に聞いている感覚が、ユーザに与えられる。車両オーディオコントローラ２６は、メモリを含み（図示せず）、メモリは、任意の数の所望の会場を記憶することができ、選択会場の様々な前壁、側壁、後壁、及び上壁と、このような壁の表面からのオーディオの反射すなわち反響の仕方とをも考慮することができる。例えば、メモリは、特定の会場の壁の特性に対応する様々な事前設定周波数値を記憶することができ、会場等化ブロック８２は、ミキサ７６及びスパイダリバーブブロック８０からのオーディオ出力の周波数レベルを増加または低減させて、ユーザが対応する会場すなわち選択会場に実際にいる感覚をさらに高めることができる。

【0027】

例えば、選択会場が概して、金属製の低い天井と、カーペットが敷き詰められた遠く離れた壁とを有するシナリオを考察する。非常に鈍く聞こえ、反射時間が遅い他の壁と比較して、天井は、非常に明度が高く速い反射特性を有し得る。スパイダリバーブブロック７８は、所望の会場を提供するために、入力オーディオ信号及び捕捉オーディオ信号の残響を調整し、対応する会場等化ブロック８２は、所望の会場での再生をシミュレートするため、及び所望の会場の壁の明度特性をシミュレートするために、入力オーディオ信号及び捕捉オーディオ信号の等化を制御する。一般に、車両１０内のスピーカ２８は、所望の会場に対応する出力を全体的に提供し、所与の壁内の対応スピーカ（複数可）はそれぞれ、所望の会場のその所与の壁に関する所望の明度特性をシミュレートするための別個の入力を受信し得る。例えば、車両１０の天井内のスピーカ２８は、等化された出力を受信して、天井から跳ね返る音声が上記の選択会場の低い天井に一致する速い反射時間を有する様子を提供し得る。同様に、特定の壁１６、１８、２０、及び２２内の対応スピーカ２８に提供される各オーディオ出力は、選択会場内の様々な壁に一致するように、異なる等化調整が行われ得る。

【0028】

スピーカ等化ブロック８４は、スパイダリバーブブロック７８からの出力を受信し、車両１０内でより均一なオーディオ反響を提供する。スピーカ等化ブロック８４は、車両１０内のスピーカ２８に関わる課題を補う。ユーザが通常モードで入力オーディオを聞くことを選択した場合、スパイダリバーブブロック７８により加えられたリバーブの量を単に取り除くために、消音ブロック８６が提供される。ユーザインターフェース３０は、選択会場を得るために加えられた残響効果を無効にする要求を示す信号を、車両オーディオコントローラ２６に送信し得る。要求に応じて、車両オーディオコントローラ２６は、消音ブロック８６を作動させて、選択会場でのオーディオの再生を単に無効にし得る。加算器６８は、スパイダリバーブブロック７８からの（すなわち消音ブロック８６からの）出力を受信し、ステレオ等化ブロック６６からの出力も受信し、２つのオーディオ入力を一緒に合わせて、デジタル版の入力を提供する。デジタルからアナログへの変換器（ＤＡＣ）８８は、加算器６８からデジタル出力を受信し、デジタル出力をアナログ出力に変換する。アナログ出力は、選択会場でユーザのために再生されるオーディオに対応する。様々な電力段（すなわち電力増幅器）９０は、アナログ出力を、スピーカ２８で再生するために、増幅させる。

【0029】

図４は概して、図３の車両オーディオコントローラ２６を用いて、車両のリスニングルーム内で仮想会場を生成するための方法１００を示す。図４に関連して記される動作は、任意の順序で実行されてもよいと認識され、様々な動作が互いに同時に実行されてもよいと考えられることが認識される。実行される動作の順序は、特定の実施態様に基づいて変わり得る。

【0030】

動作１０２において、車両オーディオコントローラ２６は、オーディオソース６０から入力オーディオ信号を受信する。上記のように、オーディオソース６０は、ＦＭ局、ＡＭ局、ハイデフィニション（ＨＤ）オーディオ局、衛星ラジオプロバイダ、携帯電話からの入力、タブレットからの入力などのうちのいずれか１つに該当し得る。一般に、入力オーディオ信号は、車両１０内の車両乗員を楽しませるために再生されるオーディオデータに対応し得る。

【0031】

動作１０４において、車両オーディオコントローラ２６は、入力オーディオ信号からリバーブを取り除き、ドライオーディオ信号を提供する。

【0032】

動作１０６において、車両オーディオコントローラ２６は、車両１０内の各マイクロフォン２４から、捕捉オーディオ信号を受信する。例えば、車両オーディオコントローラ２６は、各捕捉オーディオ信号の様々な周波数帯域のエネルギーを強めるまたは弱める。上記のように、捕捉オーディオ信号は一般に、音楽、電子オーディオソースからのエンターテイメントデータを含む入力オーディオ信号上のエンターテイメントデータに対応する車両乗員から捕捉されるノイズ、発話（もしくは車両乗員の対話）、及び／または車両１０の内部に入ってくる車両１０の外部からの環境ノイズ、車室内の環境ノイズなどに対応する。

【0033】

動作１０８において、車両オーディオコントローラ２６は、各捕捉オーディオ信号を等化する。例えば、車両オーディオコントローラ２６は、捕捉オーディオ信号の様々な周波数帯域のエネルギーを強めるまたは弱める。

【0034】

動作１１０において、車両オーディオコントローラ２６は任意で、ドライオーディオ信号上のエンターテイメントデータの再生が捕捉オーディオ信号と確実に一致するように、捕捉オーディオ信号に合わせて、ドライオーディオ信号の送信に時間遅延または遅延を採用し得る。

【0035】

動作１１２において、車両オーディオコントローラ２６は、窓、コンバーチブルトップ、及びサンルーフのうちのいずれか１つが開いているか否かを判定する。車両オーディオコントローラ２６が、窓、コンバーチブルトップ、及びサンルーフのうちのいずれか１つが閉まっていると判定した場合、方法１００は、動作１１４へ進む。車両オーディオコントローラ２６は、窓、コンバーチブルトップ、及びサンルーフのうちのいずれか１つが開いていると判断した場合、方法１００は、動作１２０へ進む。

【0036】

動作１１４において、車両オーディオコントローラ２６は、捕捉オーディオ信号上のリバーブをドライオーディオ信号とミックスさせて、捕捉オーディオ信号上のノイズ、音楽、及び／または声情報と、オーディオソース６０から受信される入力オーディオ信号上のエンターテイメントデータとの所望の混合を実現する。

【0037】

動作１１６において、車両オーディオコントローラ２６は、オーディオ再生中に車両１０内でシミュレートする所望の会場を示す制御信号を受信する。

【0038】

動作１１８において、車両オーディオコントローラ２６は、ミックスした捕捉オーディオ信号及びドライオーディオ信号のリバーブを調整して、車両１０内において、選択会場でのオーディオソース６０からの入力オーディオ信号上のエンターテイメントデータを再生する。さらに、車両オーディオコントローラ２６は、ミックスした捕捉オーディオ信号及びドライオーディオ信号の周波数を等化して、選択会場の様々な壁の所望の明度特性を提供する。

【0039】

動作１２０において、窓、コンバーチブルトップ、及びサンルーフのうちの１つが開いていると仮定すると、このような信号は保有ノイズ（例えば風、ロードノイズなどの環境ノイズ）が多すぎるため、車両オーディオコントローラ２６は、捕捉オーディオ信号を消音する。この場合、動作１１８において、車両オーディオコントローラ２６は、オーディオソース６０からの入力オーディオ信号のリバーブを単に調整して、車両１０において選択会場での入力オーディオ信号を再生し得る。

【0040】

例示的な実施形態が前述されたが、これらの実施形態に、本発明の全ての可能な形態を説明する意図はない。むしろ、本明細書で使用される言葉は、限定ではなく説明の言葉であり、本発明の趣旨及び範囲から逸脱することなく、様々な変更がなされてもよいことが理解されよう。さらに、実施形態の様々な実施の特徴を組み合わせることで、本発明のさらなる実施形態が形成され得る。

【図1】

【図2】

【図3】

【図4】