(19)【発行国】日本国特許庁(JP)
(12)【公報種別】特許公報(B2)
(11)【特許番号】
(24)【登録日】2023-12-18
(45)【発行日】2023-12-26
(54)【発明の名称】オーディオ空間化のための強調
(51)【国際特許分類】
H04S 7/00 20060101AFI20231219BHJP
H04R 3/00 20060101ALN20231219BHJP
H04R 1/10 20060101ALN20231219BHJP
【ＦＩ】
H04S7/00 320
H04R3/00 310
H04R1/10 101
【請求項の数】
20
【外国語出願】
(21)【出願番号】P 2022159452
(22)【出願日】2022-10-03
(62)【分割の表示】P 2021518505の分割
【原出願日】2019-10-04
(65)【公開番号】P2022177305
(43)【公開日】2022-11-30
【審査請求日】2022-10-03
(31)【優先権主張番号】62/742,191
(32)【優先日】2018-10-05
(33)【優先権主張国・地域又は機関】US
(31)【優先権主張番号】62/742,254
(32)【優先日】2018-10-05
(33)【優先権主張国・地域又は機関】US
(31)【優先権主張番号】62/812,546
(32)【優先日】2019-03-01
(33)【優先権主張国・地域又は機関】US
【早期審査対象出願】
(73)【特許権者】
【識別番号】514108838
【氏名又は名称】マジック リープ， インコーポレイテッド
【氏名又は名称原語表記】Ｍａｇｉｃ Ｌｅａｐ，Ｉｎｃ．
【住所又は居所原語表記】７５００ Ｗ ＳＵＮＲＩＳＥ ＢＬＶＤ，ＰＬＡＮＴＡＴＩＯＮ，ＦＬ ３３３２２ ＵＳＡ
(74)【代理人】
【識別番号】100078282
【弁理士】
【氏名又は名称】山本 秀策
(74)【代理人】
【識別番号】100113413
【弁理士】
【氏名又は名称】森下 夏樹
(74)【代理人】
【識別番号】100181674
【弁理士】
【氏名又は名称】飯田 貴敏
(74)【代理人】
【識別番号】100181641
【弁理士】
【氏名又は名称】石川 大輔
(74)【代理人】
【識別番号】230113332
【弁護士】
【氏名又は名称】山本 健策
(72)【発明者】
【氏名】サミュエル チャールズ ディッカー
【審査官】堀 洋介
(56)【参考文献】
【文献】国際公開第２０１８／１８３３９０（ＷＯ，Ａ１）
【文献】特開平０６－１３３３８９（ＪＰ，Ａ）
【文献】国際公開第２０１５／０６８５８７（ＷＯ，Ａ１）
【文献】特開平１０－１６４６９８（ＪＰ，Ａ）
【文献】特開平１０－１３６４９７（ＪＰ，Ａ）
【文献】JOT, Jean-Marc，Interactive 3D Audio Rendering in Flexible Playback Configurations，Proceedings of The 2012 Asia Pacific Signal and Information Processing Association Annual Summit and，2012年12月03日，p.1-9
(58)【調査した分野】(Int.Cl.，ＤＢ名)
Ｈ０４Ｓ １／００－ ７／００
Ｈ０４Ｒ ３／００－ ３／１４
Ｈ０４Ｒ １／１０
(57)【特許請求の範囲】
【請求項1】
オーディオ信号をウェアラブル頭部デバイスのユーザに提示する方法であって、前記方法は、
第１の入力オーディオ信号を受信することであって、前記第１の入力オーディオ信号は、前記ウェアラブル頭部デバイスのディスプレイ上に提示される仮想環境と関連付けられる、ことと、
前記第１の入力オーディオ信号を処理し、出力オーディオ信号を発生させることであって、前記出力オーディオ信号は、前記仮想環境と関連付けられ、前記第１の入力オーディオ信号を処理することは、
プリエンファシスフィルタを前記第１の入力オーディオ信号に適用し、前記第１の入力オーディオ信号の低周波数成分を減衰させ、フィルタ処理された第１の入力オーディオ信号を発生させること
を含む、ことと
を含み、
前記減衰させられた低周波数成分は、音アーチファクトの低減と関連付けられ、
前記音アーチファクトは、前記仮想環境内の仮想オブジェクト移動と関連付けられる制御信号変化によって引き起こされる、方法。
【請求項2】
前記第１の入力オーディオ信号を処理することは、利得を前記第１の入力オーディオ信号に適用することを含み、前記利得は、前記仮想環境内の場所と関連付けられる、請求項１に記載の方法。
【請求項3】
第１の利得が、前記仮想環境内の第１の場所とさらに関連付けられ、前記方法は、第２の利得を前記第１の入力オーディオ信号に適用することをさらに含み、前記第２の利得は、前記仮想環境の第２の場所と関連付けられる、請求項２に記載の方法。
【請求項4】
前記出力オーディオ信号のレベルは、前記仮想環境内の音の場所に基づく、請求項１に記載の方法。
【請求項5】
前記プリエンファシスフィルタは、一次微分フィルタを備える、請求項１に記載の方法。
【請求項6】
第２の入力オーディオ信号を受信することと、
前記第２の入力オーディオ信号を処理することであって、前記第２の入力オーディオ信号を処理することは、第２のプリエンファシスフィルタを前記第２の入力オーディオ信号に適用し、前記第２の入力オーディオ信号の低周波数成分を減衰させ、フィルタ処理された第２の入力オーディオ信号を発生させることを含む、ことと
をさらに含む、請求項１に記載の方法。
【請求項7】
ミキサを介して、前記フィルタ処理された第１の入力オーディオ信号を前記フィルタ処理された第２の入力オーディオ信号と混合することをさらに含む、請求項６に記載の方法。
【請求項8】
前記第１の入力オーディオ信号を処理することは、第１の利得および第２の利得を前記第１の入力オーディオ信号に適用することを含み、
前記第１および第２の利得は、前記仮想環境内の前記仮想オブジェクト移動と関連付けられ、
前記制御信号変化は、前記第１の利得から前記第２の利得への変化を含む、請求項１に記載の方法。
【請求項9】
前記第１の入力オーディオ信号を処理することは、デエンファシスフィルタを前記第１の入力オーディオ信号に適用することをさらに含む、請求項１に記載の方法。
【請求項10】
前記デエンファシスフィルタを前記第１の入力オーディオ信号に適用することは、前記第１の入力オーディオ信号の高周波数成分を減衰させることを含む、請求項９に記載の方法。
【請求項11】
ウェアラブルデバイスであって、
ディスプレイと、
１つ以上のスピーカと、
方法を実施するように構成される１つ以上のプロセッサと
を備え、
前記方法は、
第１の入力オーディオ信号を受信することであって、前記第１の入力オーディオ信号は、前記ディスプレイ上に提示される仮想環境と関連付けられる、ことと、
前記第１の入力オーディオ信号を処理し、出力オーディオ信号を発生させることであって、前記出力オーディオ信号は、前記仮想環境と関連付けられ、前記第１の入力オーディオ信号を処理することは、
プリエンファシスフィルタを前記第１の入力オーディオ信号に適用し、前記第１の入力オーディオ信号の低周波数成分を減衰させ、フィルタ処理された第１の入力オーディオ信号を発生させること
を含む、ことと
を含み、
前記減衰させられた低周波数成分は、音アーチファクトの低減と関連付けられ、
前記音アーチファクトは、前記仮想環境内の仮想オブジェクト移動と関連付けられる制御信号変化によって引き起こされる、ウェアラブルデバイス。
【請求項12】
前記第１の入力オーディオ信号を処理することは、利得を前記第１の入力オーディオ信号に適用することを含み、前記利得は、前記仮想環境内の場所と関連付けられる、請求項１１に記載のウェアラブルデバイス。
【請求項13】
第１の利得が、前記仮想環境内の第１の場所とさらに関連付けられ、前記方法は、第２の利得を前記第１の入力オーディオ信号に適用することをさらに含み、前記第２の利得は、前記仮想環境の第２の場所と関連付けられる、請求項１２に記載のウェアラブルデバイス。
【請求項14】
前記出力オーディオ信号のレベルは、前記仮想環境内の音の場所に基づく、請求項１１に記載のウェアラブルデバイス。
【請求項15】
前記方法は、
第２の入力オーディオ信号を受信することと、
前記第２の入力オーディオ信号を処理することであって、前記第２の入力オーディオ信号を処理することは、第２のプリエンファシスフィルタを前記第２の入力オーディオ信号に適用し、前記第２の入力オーディオ信号の低周波数成分を減衰させ、フィルタ処理された第２の入力オーディオ信号を発生させることを含む、ことと
をさらに含む、請求項１１に記載のウェアラブルデバイス。
【請求項16】
前記方法は、ミキサを介して、前記フィルタ処理された第１の入力オーディオ信号を前記フィルタ処理された第２の入力オーディオ信号と混合することをさらに含む、請求項１５に記載のウェアラブルデバイス。
【請求項17】
前記第１の入力オーディオ信号を処理することは、第１の利得および第２の利得を前記第１の入力オーディオ信号に適用することを含み、
前記第１および第２の利得は、前記仮想環境内の前記仮想オブジェクト移動と関連付けられ、
前記制御信号変化は、前記第１の利得から前記第２の利得への変化を含む、請求項１１に記載のウェアラブルデバイス。
【請求項18】
前記第１の入力オーディオ信号を処理することは、デエンファシスフィルタを前記第１の入力オーディオ信号に適用することをさらに含む、請求項１１に記載のウェアラブルデバイス。
【請求項19】
前記デエンファシスフィルタを前記第１の入力オーディオ信号に適用することは、前記第１の入力オーディオ信号の高周波数成分を減衰させることを含む、請求項１８に記載のウェアラブルデバイス。
【請求項20】
非一過性コンピュータ可読媒体であって、前記非一過性コンピュータ可読媒体は、１つ以上のプログラムを記憶しており、前記１つ以上のプログラムは、命令を備え、前記命令は、１つ以上のプロセッサとメモリとを伴う電子デバイスによって実行されると、方法を前記デバイスに実施させ、前記方法は、
第１の入力オーディオ信号を受信することであって、前記第１の入力オーディオ信号は、前記電子デバイスのディスプレイ上に提示される仮想環境と関連付けられる、ことと、
前記第１の入力オーディオ信号を処理し、出力オーディオ信号を発生させることであって、前記出力オーディオ信号は、前記仮想環境と関連付けられ、前記第１の入力オーディオ信号を処理することは、
プリエンファシスフィルタを前記第１の入力オーディオ信号に適用し、前記第１の入力オーディオ信号の低周波数成分を減衰させ、フィルタ処理された第１の入力オーディオ信号を発生させること
を含む、ことと
を含み、
前記減衰させられた低周波数成分は、音アーチファクトの低減と関連付けられ、
前記音アーチファクトは、前記仮想環境内の仮想オブジェクト移動と関連付けられる制御信号変化によって引き起こされる、非一過性コンピュータ可読媒体。
【発明の詳細な説明】
【技術分野】
【0001】
（関連出願の相互参照）
本願は、その内容が、参照することによってその全体として本明細書に組み込まれる、２０１８年１０月５日に出願された米国仮出願第６２／７４２，２５４号、２０１９年３月１日に出願された米国仮出願第６２／８１２，５４６号、および２０１８年１０月５日に出願された米国仮出願第６２／７４２，１９１号の優先権を主張する。
本願は、その内容が、参照することによってその全体として本明細書に組み込まれる、２０１８年１０月５日に出願された米国仮出願第６２／７４２，２５４号、２０１９年３月１日に出願された米国仮出願第６２／８１２，５４６号、および２０１８年１０月５日に出願された米国仮出願第６２／７４２，１９１号の優先権を主張する。
【0002】
本開示は、概して、オーディオ信号処理のためのシステムおよび方法に関し、特に、複合現実環境内でオーディオ信号を提示するためのシステムおよび方法に関する。
【背景技術】
【0003】
没入感および信憑性がある仮想環境は、ユーザの予期、例えば、仮想環境内のオブジェクトに対応するオーディオ信号が、仮想環境内のそのオブジェクトの場所と、そしてそのオブジェクトの視覚的提示と一貫するであろうという予期と一貫する様式におけるオーディオ信号の提示を要求する。仮想現実、拡張現実、および複合現実環境内で豊富かつ複雑な音景（音環境）を作成することは、それぞれ、ユーザの環境内の異なる場所／近接および／または方向から発するように現れる、多数のデジタルオーディオ信号の効率的な提示を要求する。音景は、オブジェクトの提示を含み、ユーザに相対的であり、オブジェクトおよびユーザの位置および配向は、迅速に変化し、音景がそれに応じて調節されることを要求し得る。オブジェクトおよびユーザの位置および配向を信憑性があるように反映するために音景を調節することは、オーディオ信号の急速な変化を要求し得、これは、仮想環境の没入感を損なう「クリック」音等の望ましくない音アーチファクトをもたらし得る。しかしながら、そのような音アーチファクトを低減させるためのいくつかの技法は、特に、仮想環境と相互作用するために一般的に使用されるモバイルデバイスに関して、算出的に高価であり得る。仮想環境のユーザに音景を提示するシステムおよび方法が、音アーチファクトを最小限にし、算出的に効率的なままでありながら、仮想環境の音を正確に反映することが、望ましい。
【発明の概要】
【課題を解決するための手段】
【0004】
本開示の実施例は、オーディオ信号をウェアラブル頭部デバイスのユーザに提示するためのシステムおよび方法を説明する。例示的方法によると、第１の入力オーディオ信号が、受信される。第１の入力オーディオ信号は、第１の出力オーディオ信号を発生させるように処理される。第１の出力オーディオ信号は、ウェアラブル頭部デバイスと関連付けられる１つ以上のスピーカを介して提示される。第１の入力オーディオ信号を処理するステップは、プリエンファシスフィルタを第１の入力オーディオ信号に適用するステップと、第１の入力オーディオ信号の利得を調節するステップと、デエンファシスフィルタを第１のオーディオ信号に適用するステップとを含む。プリエンファシスフィルタを第１の入力オーディオ信号に適用するステップは、第１の入力オーディオ信号の低周波数成分を減衰させるステップを含む。デエンファシスフィルタを第１の入力オーディオ信号に適用するステップは、第１の入力オーディオ信号の高周波数成分を減衰させるステップを含む。
本発明は、例えば、以下を提供する。
（項目１）
オーディオ信号をウェアラブル頭部デバイスのユーザに提示する方法であって、前記方法は、
第１の入力オーディオ信号を受信することと、
前記第１の入力オーディオ信号を処理し、第１の出力オーディオ信号を発生させることであって、前記第１の入力オーディオ信号を処理することは、
プリエンファシスフィルタを前記第１の入力オーディオ信号に適用することと、
前記第１の入力オーディオ信号の利得を調節することと、
デエンファシスフィルタを第１のオーディオ信号に適用することと
を含む、ことと、
前記ウェアラブル頭部デバイスと関連付けられる１つ以上のスピーカを介して前記第１の出力オーディオ信号を提示することと
を含み、
前記プリエンファシスフィルタを前記第１の入力オーディオ信号に適用することは、前記第１の入力オーディオ信号の低周波数成分を減衰させることを含み、
前記デエンファシスフィルタを前記第１の入力オーディオ信号に適用することは、前記第１の入力オーディオ信号の高周波数成分を減衰させることを含む、方法。
（項目２）
前記プリエンファシスフィルタは、一次微分フィルタを備える、項目１に記載の方法。
（項目３）
前記一次微分フィルタは、約６デシベルの１オクターブあたりロールオフを有する、項目２に記載の方法。
（項目４）
前記デエンファシスフィルタを前記第１の入力オーディオ信号に適用することはさらに、前記第１の入力オーディオ信号の低周波数成分の振幅を維持または増加させることを含む、項目１に記載の方法。
（項目５）
前記デエンファシスフィルタは、積分器フィルタを備える、項目１に記載の方法。
（項目６）
前記デエンファシスフィルタは、約６デシベルの１オクターブあたりブーストを伴うリーキー積分器を備える、項目１に記載の方法。
（項目７）
前記デエンファシスフィルタは、ＤＣブロッキングフィルタを備える、項目１に記載の方法。
（項目８）
第２の入力オーディオ信号を受信することをさらに含み、前記第１の入力オーディオ信号を処理し、前記第１の出力オーディオ信号を発生させることはさらに、ミキサを介して、前記第１の入力オーディオ信号を前記第２の入力オーディオ信号と混合することを含む、項目１に記載の方法。
（項目９）
前記ウェアラブル頭部デバイスの１つ以上のスピーカを介して前記第１の出力オーディオ信号を提示することは、
第１の頭部関連伝達関数（ＨＲＴＦ）を前記第１の出力オーディオ信号に適用することと、
前記第１のＨＲＴＦの出力を前記ウェアラブル頭部デバイスの１つ以上のスピーカの左スピーカに提示することと、
第２のＨＲＴＦを前記第１の出力オーディオ信号に適用することと、
前記第２のＨＲＴＦの出力を前記ウェアラブル頭部デバイスの１つ以上のスピーカの右スピーカに提示することと
を含む、項目１に記載の方法。
（項目１０）
前記第１の入力オーディオ信号を処理し、前記第１の出力オーディオ信号を発生させることはさらに、
前記プリエンファシスフィルタの出力を１つ以上のフィルタに適用することと、
前記１つ以上のフィルタの第１の出力をパンニングし、第１のパンニングされた信号、第２のパンニングされた信号、第３のパンニングされた信号、および第４のパンニングされた信号を発生させることと、
前記第１のパンニングされた信号を左バスに適用することと、
前記第２のパンニングされた信号を右バスに適用することと、
前記第３のパンニングされた信号を標準バスに適用することと、
前記第４のパンニングされた信号を拡散バスに適用することと、
前記左バス、前記右バス、前記標準バス、および前記拡散バスをバーチャライザへの入力として適用することと
を含み、
前記デエンファシスフィルタを前記第１のオーディオ信号に適用することは、前記デエンファシスフィルタを前記バーチャライザの出力に適用することを含む、項目１に記載の方法。
（項目１１）
前記第１の入力オーディオ信号を処理し、前記第１の出力オーディオ信号を発生させることはさらに、事前遅延を前記第１のパンニングされた信号および前記第２のパンニングされた信号に適用することを含む、項目１０に記載の方法。
（項目１２）
前記第１の入力オーディオ信号を処理し、前記第１の出力オーディオ信号を発生させることはさらに、非相関フィルタを前記拡散バスに適用することを含む、項目１０に記載の方法。
（項目１３）
前記第１の入力オーディオ信号を処理し、前記第１の出力オーディオ信号を発生させることはさらに、前記１つ以上のフィルタの第２の出力をクラスタ化反射モジュールへの入力として適用し、前記クラスタ化反射モジュールの出力を前記標準バスに適用することを含む、項目１０に記載の方法。
（項目１４）
前記第１の入力オーディオ信号を処理し、前記第１の出力オーディオ信号を発生させることはさらに、前記１つ以上のフィルタの第２の出力を反響モジュールへの入力として適用し、前記反響モジュールの出力を前記標準バスに適用することを含む、項目１０に記載の方法。
（項目１５）
前記１つ以上のフィルタは、距離フィルタを備える、項目１０に記載の方法。
（項目１６）
前記１つ以上のフィルタは、空気吸収フィルタを備える、項目１０に記載の方法。
（項目１７）
前記１つ以上のフィルタは、源方向性フィルタを備える、項目１０に記載の方法。
（項目１８）
前記１つ以上のフィルタは、オクルージョンフィルタを備える、項目１０に記載の方法。
（項目１９）
前記１つ以上のフィルタは、妨害フィルタを備える、項目１０に記載の方法。
（項目２０）
システムであって、
ウェアラブル頭部デバイスと、
１つ以上のスピーカと、
１つ以上のプロセッサであって、前記１つ以上のプロセッサは、方法を実行するように構成されており、前記方法は、
第１の入力オーディオ信号を受信することと、
前記第１の入力オーディオ信号を処理し、第１の出力オーディオ信号を発生させることであって、前記第１の入力オーディオ信号を処理することは、
プリエンファシスフィルタを前記第１の入力オーディオ信号に適用することと、
前記第１の入力オーディオ信号の利得を調節することと、
デエンファシスフィルタを第１のオーディオ信号に適用することと
を含む、ことと、
前記１つ以上のスピーカを介して前記第１の出力オーディオ信号を提示することと
を含み、
前記プリエンファシスフィルタを前記第１の入力オーディオ信号に適用することは、前記第１の入力オーディオ信号の低周波数成分を減衰させることを含み、
前記デエンファシスフィルタを前記第１の入力オーディオ信号に適用することは、前記第１の入力オーディオ信号の高周波数成分を減衰させることを含む、
１つ以上のプロセッサと
を備える、システム。
（項目２１）
前記プリエンファシスフィルタは、一次微分フィルタを備える、項目２０に記載のシステム。
（項目２２）
前記一次微分フィルタは、約６デシベルの１オクターブあたりロールオフを有する、項目２１に記載のシステム。
（項目２３）
前記デエンファシスフィルタを前記第１の入力オーディオ信号に適用することはさらに、前記第１の入力オーディオ信号の低周波数成分の振幅を維持または増加させることを含む、項目２０に記載のシステム。
（項目２４）
前記デエンファシスフィルタは、積分器フィルタを備える、項目２０に記載のシステム。
（項目２５）
前記デエンファシスフィルタは、約６デシベルの１オクターブあたりブーストを伴うリーキー積分器を備える、項目２０に記載のシステム。
（項目２６）
前記デエンファシスフィルタは、ＤＣブロッキングフィルタを備える、項目２０に記載のシステム。
（項目２７）
前記方法はさらに、第２の入力オーディオ信号を受信することを含み、前記第１の入力オーディオ信号を処理し、前記第１の出力オーディオ信号を発生させることはさらに、ミキサを介して、前記第１の入力オーディオ信号を前記第２の入力オーディオ信号と混合することを含む、項目２０に記載のシステム。
（項目２８）
前記ウェアラブル頭部デバイスの１つ以上のスピーカを介して前記第１の出力オーディオ信号を提示することは、
第１の頭部関連伝達関数（ＨＲＴＦ）を前記第１の出力オーディオ信号に適用することと、
前記第１のＨＲＴＦの出力を前記ウェアラブル頭部デバイスの１つ以上のスピーカの左スピーカに提示することと、
第２のＨＲＴＦを前記第１の出力オーディオ信号に適用することと、
前記第２のＨＲＴＦの出力を前記ウェアラブル頭部デバイスの１つ以上のスピーカの右スピーカに提示することと
を含む、項目２０に記載のシステム。
（項目２９）
前記第１の入力オーディオ信号を処理し、前記第１の出力オーディオ信号を発生させることはさらに、
前記プリエンファシスフィルタの出力を１つ以上のフィルタに適用することと、
前記１つ以上のフィルタの第１の出力をパンニングし、第１のパンニングされた信号、第２のパンニングされた信号、第３のパンニングされた信号、および第４のパンニングされた信号を発生させることと、
前記第１のパンニングされた信号を左バスに適用することと、
前記第２のパンニングされた信号を右バスに適用することと、
前記第３のパンニングされた信号を標準バスに適用することと、
前記第４のパンニングされた信号を拡散バスに適用することと、
前記左バス、前記右バス、前記標準バス、および前記拡散バスをバーチャライザへの入力として適用することと
を含み、
前記デエンファシスフィルタを前記第１のオーディオ信号に適用することは、前記デエンファシスフィルタを前記バーチャライザの出力に適用することを含む、項目２０に記載のシステム。
（項目３０）
前記第１の入力オーディオ信号を処理し、前記第１の出力オーディオ信号を発生させることはさらに、事前遅延を前記第１のパンニングされた信号および前記第２のパンニングされた信号に適用することを含む、項目２９に記載のシステム。
（項目３１）
前記第１の入力オーディオ信号を処理し、前記第１の出力オーディオ信号を発生させることはさらに、非相関フィルタを前記拡散バスに適用することを含む、項目２９に記載のシステム。
（項目３２）
前記第１の入力オーディオ信号を処理し、前記第１の出力オーディオ信号を発生させることはさらに、前記１つ以上のフィルタの第２の出力をクラスタ化反射モジュールへの入力として適用し、前記クラスタ化反射モジュールの出力を前記標準バスに適用することを含む、項目２９に記載のシステム。
（項目３３）
前記第１の入力オーディオ信号を処理し、前記第１の出力オーディオ信号を発生させることはさらに、前記１つ以上のフィルタの第２の出力を反響モジュールへの入力として適用し、前記反響モジュールの出力を前記標準バスに適用することを含む、項目２９に記載のシステム。
（項目３４）
前記１つ以上のフィルタは、距離フィルタを備える、項目２９に記載のシステム。
（項目３５）
前記１つ以上のフィルタは、空気吸収フィルタを備える、項目２９に記載のシステム。
（項目３６）
前記１つ以上のフィルタは、源方向性フィルタを備える、項目２９に記載のシステム。
（項目３７）
前記１つ以上のフィルタは、オクルージョンフィルタを備える、項目２９に記載のシステム。
（項目３８）
前記１つ以上のフィルタは、妨害フィルタを備える、項目２９に記載のシステム。
（項目３９）
非一過性コンピュータ可読媒体であって、前記非一過性コンピュータ可読媒体は、命令を記憶しており、前記命令は、１つ以上のプロセッサによって実行されると、前記１つ以上のプロセッサに、オーディオ信号をウェアラブル頭部デバイスのユーザに提示する方法を実施させ、前記方法は、
第１の入力オーディオ信号を受信することと、
前記第１の入力オーディオ信号を処理し、第１の出力オーディオ信号を発生させることであって、前記第１の入力オーディオ信号を処理することは、
プリエンファシスフィルタを前記第１の入力オーディオ信号に適用することと、
前記第１の入力オーディオ信号の利得を調節することと、
デエンファシスフィルタを第１のオーディオ信号に適用することと
を含む、ことと、
前記ウェアラブル頭部デバイスと関連付けられる１つ以上のスピーカを介して前記第１の出力オーディオ信号を提示することと
を含み、
前記プリエンファシスフィルタを前記第１の入力オーディオ信号に適用することは、前記第１の入力オーディオ信号の低周波数成分を減衰させることを含み、
前記デエンファシスフィルタを前記第１の入力オーディオ信号に適用することは、前記第１の入力オーディオ信号の高周波数成分を減衰させることを含む、非一過性コンピュータ可読媒体。
（項目４０）
前記プリエンファシスフィルタは、一次微分フィルタを備える、項目３９に記載の非一過性コンピュータ可読媒体。
（項目４１）
前記一次微分フィルタは、約６デシベルの１オクターブあたりロールオフを有する、項目４０に記載の非一過性コンピュータ可読媒体。
（項目４２）
前記デエンファシスフィルタを前記第１の入力オーディオ信号に適用することはさらに、前記第１の入力オーディオ信号の低周波数成分の振幅を維持または増加させることを含む、項目３９に記載の非一過性コンピュータ可読媒体。
（項目４３）
前記デエンファシスフィルタは、積分器フィルタを備える、項目３９に記載の非一過性コンピュータ可読媒体。
（項目４４）
前記デエンファシスフィルタは、約６デシベルの１オクターブあたりブーストを伴うリーキー積分器を備える、項目３９に記載の非一過性コンピュータ可読媒体。
（項目４５）
前記デエンファシスフィルタは、ＤＣブロッキングフィルタを備える、項目３９に記載の非一過性コンピュータ可読媒体。
（項目４６）
前記方法はさらに、第２の入力オーディオ信号を受信することを含み、前記第１の入力オーディオ信号を処理し、前記第１の出力オーディオ信号を発生させることはさらに、ミキサを介して、前記第１の入力オーディオ信号を前記第２の入力オーディオ信号と混合することを含む、項目３９に記載の非一過性コンピュータ可読媒体。
（項目４７）
前記ウェアラブル頭部デバイスの１つ以上のスピーカを介して前記第１の出力オーディオ信号を提示することは、
第１の頭部関連伝達関数（ＨＲＴＦ）を前記第１の出力オーディオ信号に適用することと、
前記第１のＨＲＴＦの出力を前記ウェアラブル頭部デバイスの１つ以上のスピーカの左スピーカに提示することと、
第２のＨＲＴＦを前記第１の出力オーディオ信号に適用することと、
前記第２のＨＲＴＦの出力を前記ウェアラブル頭部デバイスの１つ以上のスピーカの右スピーカに提示することと
を含む、項目３９に記載の非一過性コンピュータ可読媒体。
（項目４８）
前記第１の入力オーディオ信号を処理し、前記第１の出力オーディオ信号を発生させることはさらに、
前記プリエンファシスフィルタの出力を１つ以上のフィルタに適用することと、
前記１つ以上のフィルタの第１の出力をパンニングし、第１のパンニングされた信号、第２のパンニングされた信号、第３のパンニングされた信号、および第４のパンニングされた信号を発生させることと、
前記第１のパンニングされた信号を左バスに適用することと、
前記第２のパンニングされた信号を右バスに適用することと、
前記第３のパンニングされた信号を標準バスに適用することと、
前記第４のパンニングされた信号を拡散バスに適用することと、
前記左バス、前記右バス、前記標準バス、および前記拡散バスをバーチャライザへの入力として適用することと
を含み、
前記デエンファシスフィルタを前記第１のオーディオ信号に適用することは、前記デエンファシスフィルタを前記バーチャライザの出力に適用することを含む、項目３９に記載の非一過性コンピュータ可読媒体。
（項目４９）
前記第１の入力オーディオ信号を処理し、前記第１の出力オーディオ信号を発生させることはさらに、事前遅延を前記第１のパンニングされた信号および前記第２のパンニングされた信号に適用することを含む、項目４８に記載の非一過性コンピュータ可読媒体。
（項目５０）
前記第１の入力オーディオ信号を処理し、前記第１の出力オーディオ信号を発生させることはさらに、非相関フィルタを前記拡散バスに適用することを含む、項目４８に記載の非一過性コンピュータ可読媒体。
（項目５１）
前記第１の入力オーディオ信号を処理し、前記第１の出力オーディオ信号を発生させることはさらに、前記１つ以上のフィルタの第２の出力をクラスタ化反射モジュールへの入力として適用し、前記クラスタ化反射モジュールの出力を前記標準バスに適用することを含む、項目４８に記載の非一過性コンピュータ可読媒体。
（項目５２）
前記第１の入力オーディオ信号を処理し、前記第１の出力オーディオ信号を発生させることはさらに、前記１つ以上のフィルタの第２の出力を反響モジュールへの入力として適用し、前記反響モジュールの出力を前記標準バスに適用することを含む、項目４８に記載の非一過性コンピュータ可読媒体。
（項目５３）
前記１つ以上のフィルタは、距離フィルタを備える、項目４８に記載の非一過性コンピュータ可読媒体。
（項目５４）
前記１つ以上のフィルタは、空気吸収フィルタを備える、項目４８に記載の非一過性コンピュータ可読媒体。
（項目５５）
前記１つ以上のフィルタは、源方向性フィルタを備える、項目４８に記載の非一過性コンピュータ可読媒体。
（項目５６）
前記１つ以上のフィルタは、オクルージョンフィルタを備える、項目４８に記載の非一過性コンピュータ可読媒体。
（項目５７）
前記１つ以上のフィルタは、妨害フィルタを備える、項目４８に記載の非一過性コンピュータ可読媒体。
本発明は、例えば、以下を提供する。
（項目１）
オーディオ信号をウェアラブル頭部デバイスのユーザに提示する方法であって、前記方法は、
第１の入力オーディオ信号を受信することと、
前記第１の入力オーディオ信号を処理し、第１の出力オーディオ信号を発生させることであって、前記第１の入力オーディオ信号を処理することは、
プリエンファシスフィルタを前記第１の入力オーディオ信号に適用することと、
前記第１の入力オーディオ信号の利得を調節することと、
デエンファシスフィルタを第１のオーディオ信号に適用することと
を含む、ことと、
前記ウェアラブル頭部デバイスと関連付けられる１つ以上のスピーカを介して前記第１の出力オーディオ信号を提示することと
を含み、
前記プリエンファシスフィルタを前記第１の入力オーディオ信号に適用することは、前記第１の入力オーディオ信号の低周波数成分を減衰させることを含み、
前記デエンファシスフィルタを前記第１の入力オーディオ信号に適用することは、前記第１の入力オーディオ信号の高周波数成分を減衰させることを含む、方法。
（項目２）
前記プリエンファシスフィルタは、一次微分フィルタを備える、項目１に記載の方法。
（項目３）
前記一次微分フィルタは、約６デシベルの１オクターブあたりロールオフを有する、項目２に記載の方法。
（項目４）
前記デエンファシスフィルタを前記第１の入力オーディオ信号に適用することはさらに、前記第１の入力オーディオ信号の低周波数成分の振幅を維持または増加させることを含む、項目１に記載の方法。
（項目５）
前記デエンファシスフィルタは、積分器フィルタを備える、項目１に記載の方法。
（項目６）
前記デエンファシスフィルタは、約６デシベルの１オクターブあたりブーストを伴うリーキー積分器を備える、項目１に記載の方法。
（項目７）
前記デエンファシスフィルタは、ＤＣブロッキングフィルタを備える、項目１に記載の方法。
（項目８）
第２の入力オーディオ信号を受信することをさらに含み、前記第１の入力オーディオ信号を処理し、前記第１の出力オーディオ信号を発生させることはさらに、ミキサを介して、前記第１の入力オーディオ信号を前記第２の入力オーディオ信号と混合することを含む、項目１に記載の方法。
（項目９）
前記ウェアラブル頭部デバイスの１つ以上のスピーカを介して前記第１の出力オーディオ信号を提示することは、
第１の頭部関連伝達関数（ＨＲＴＦ）を前記第１の出力オーディオ信号に適用することと、
前記第１のＨＲＴＦの出力を前記ウェアラブル頭部デバイスの１つ以上のスピーカの左スピーカに提示することと、
第２のＨＲＴＦを前記第１の出力オーディオ信号に適用することと、
前記第２のＨＲＴＦの出力を前記ウェアラブル頭部デバイスの１つ以上のスピーカの右スピーカに提示することと
を含む、項目１に記載の方法。
（項目１０）
前記第１の入力オーディオ信号を処理し、前記第１の出力オーディオ信号を発生させることはさらに、
前記プリエンファシスフィルタの出力を１つ以上のフィルタに適用することと、
前記１つ以上のフィルタの第１の出力をパンニングし、第１のパンニングされた信号、第２のパンニングされた信号、第３のパンニングされた信号、および第４のパンニングされた信号を発生させることと、
前記第１のパンニングされた信号を左バスに適用することと、
前記第２のパンニングされた信号を右バスに適用することと、
前記第３のパンニングされた信号を標準バスに適用することと、
前記第４のパンニングされた信号を拡散バスに適用することと、
前記左バス、前記右バス、前記標準バス、および前記拡散バスをバーチャライザへの入力として適用することと
を含み、
前記デエンファシスフィルタを前記第１のオーディオ信号に適用することは、前記デエンファシスフィルタを前記バーチャライザの出力に適用することを含む、項目１に記載の方法。
（項目１１）
前記第１の入力オーディオ信号を処理し、前記第１の出力オーディオ信号を発生させることはさらに、事前遅延を前記第１のパンニングされた信号および前記第２のパンニングされた信号に適用することを含む、項目１０に記載の方法。
（項目１２）
前記第１の入力オーディオ信号を処理し、前記第１の出力オーディオ信号を発生させることはさらに、非相関フィルタを前記拡散バスに適用することを含む、項目１０に記載の方法。
（項目１３）
前記第１の入力オーディオ信号を処理し、前記第１の出力オーディオ信号を発生させることはさらに、前記１つ以上のフィルタの第２の出力をクラスタ化反射モジュールへの入力として適用し、前記クラスタ化反射モジュールの出力を前記標準バスに適用することを含む、項目１０に記載の方法。
（項目１４）
前記第１の入力オーディオ信号を処理し、前記第１の出力オーディオ信号を発生させることはさらに、前記１つ以上のフィルタの第２の出力を反響モジュールへの入力として適用し、前記反響モジュールの出力を前記標準バスに適用することを含む、項目１０に記載の方法。
（項目１５）
前記１つ以上のフィルタは、距離フィルタを備える、項目１０に記載の方法。
（項目１６）
前記１つ以上のフィルタは、空気吸収フィルタを備える、項目１０に記載の方法。
（項目１７）
前記１つ以上のフィルタは、源方向性フィルタを備える、項目１０に記載の方法。
（項目１８）
前記１つ以上のフィルタは、オクルージョンフィルタを備える、項目１０に記載の方法。
（項目１９）
前記１つ以上のフィルタは、妨害フィルタを備える、項目１０に記載の方法。
（項目２０）
システムであって、
ウェアラブル頭部デバイスと、
１つ以上のスピーカと、
１つ以上のプロセッサであって、前記１つ以上のプロセッサは、方法を実行するように構成されており、前記方法は、
第１の入力オーディオ信号を受信することと、
前記第１の入力オーディオ信号を処理し、第１の出力オーディオ信号を発生させることであって、前記第１の入力オーディオ信号を処理することは、
プリエンファシスフィルタを前記第１の入力オーディオ信号に適用することと、
前記第１の入力オーディオ信号の利得を調節することと、
デエンファシスフィルタを第１のオーディオ信号に適用することと
を含む、ことと、
前記１つ以上のスピーカを介して前記第１の出力オーディオ信号を提示することと
を含み、
前記プリエンファシスフィルタを前記第１の入力オーディオ信号に適用することは、前記第１の入力オーディオ信号の低周波数成分を減衰させることを含み、
前記デエンファシスフィルタを前記第１の入力オーディオ信号に適用することは、前記第１の入力オーディオ信号の高周波数成分を減衰させることを含む、
１つ以上のプロセッサと
を備える、システム。
（項目２１）
前記プリエンファシスフィルタは、一次微分フィルタを備える、項目２０に記載のシステム。
（項目２２）
前記一次微分フィルタは、約６デシベルの１オクターブあたりロールオフを有する、項目２１に記載のシステム。
（項目２３）
前記デエンファシスフィルタを前記第１の入力オーディオ信号に適用することはさらに、前記第１の入力オーディオ信号の低周波数成分の振幅を維持または増加させることを含む、項目２０に記載のシステム。
（項目２４）
前記デエンファシスフィルタは、積分器フィルタを備える、項目２０に記載のシステム。
（項目２５）
前記デエンファシスフィルタは、約６デシベルの１オクターブあたりブーストを伴うリーキー積分器を備える、項目２０に記載のシステム。
（項目２６）
前記デエンファシスフィルタは、ＤＣブロッキングフィルタを備える、項目２０に記載のシステム。
（項目２７）
前記方法はさらに、第２の入力オーディオ信号を受信することを含み、前記第１の入力オーディオ信号を処理し、前記第１の出力オーディオ信号を発生させることはさらに、ミキサを介して、前記第１の入力オーディオ信号を前記第２の入力オーディオ信号と混合することを含む、項目２０に記載のシステム。
（項目２８）
前記ウェアラブル頭部デバイスの１つ以上のスピーカを介して前記第１の出力オーディオ信号を提示することは、
第１の頭部関連伝達関数（ＨＲＴＦ）を前記第１の出力オーディオ信号に適用することと、
前記第１のＨＲＴＦの出力を前記ウェアラブル頭部デバイスの１つ以上のスピーカの左スピーカに提示することと、
第２のＨＲＴＦを前記第１の出力オーディオ信号に適用することと、
前記第２のＨＲＴＦの出力を前記ウェアラブル頭部デバイスの１つ以上のスピーカの右スピーカに提示することと
を含む、項目２０に記載のシステム。
（項目２９）
前記第１の入力オーディオ信号を処理し、前記第１の出力オーディオ信号を発生させることはさらに、
前記プリエンファシスフィルタの出力を１つ以上のフィルタに適用することと、
前記１つ以上のフィルタの第１の出力をパンニングし、第１のパンニングされた信号、第２のパンニングされた信号、第３のパンニングされた信号、および第４のパンニングされた信号を発生させることと、
前記第１のパンニングされた信号を左バスに適用することと、
前記第２のパンニングされた信号を右バスに適用することと、
前記第３のパンニングされた信号を標準バスに適用することと、
前記第４のパンニングされた信号を拡散バスに適用することと、
前記左バス、前記右バス、前記標準バス、および前記拡散バスをバーチャライザへの入力として適用することと
を含み、
前記デエンファシスフィルタを前記第１のオーディオ信号に適用することは、前記デエンファシスフィルタを前記バーチャライザの出力に適用することを含む、項目２０に記載のシステム。
（項目３０）
前記第１の入力オーディオ信号を処理し、前記第１の出力オーディオ信号を発生させることはさらに、事前遅延を前記第１のパンニングされた信号および前記第２のパンニングされた信号に適用することを含む、項目２９に記載のシステム。
（項目３１）
前記第１の入力オーディオ信号を処理し、前記第１の出力オーディオ信号を発生させることはさらに、非相関フィルタを前記拡散バスに適用することを含む、項目２９に記載のシステム。
（項目３２）
前記第１の入力オーディオ信号を処理し、前記第１の出力オーディオ信号を発生させることはさらに、前記１つ以上のフィルタの第２の出力をクラスタ化反射モジュールへの入力として適用し、前記クラスタ化反射モジュールの出力を前記標準バスに適用することを含む、項目２９に記載のシステム。
（項目３３）
前記第１の入力オーディオ信号を処理し、前記第１の出力オーディオ信号を発生させることはさらに、前記１つ以上のフィルタの第２の出力を反響モジュールへの入力として適用し、前記反響モジュールの出力を前記標準バスに適用することを含む、項目２９に記載のシステム。
（項目３４）
前記１つ以上のフィルタは、距離フィルタを備える、項目２９に記載のシステム。
（項目３５）
前記１つ以上のフィルタは、空気吸収フィルタを備える、項目２９に記載のシステム。
（項目３６）
前記１つ以上のフィルタは、源方向性フィルタを備える、項目２９に記載のシステム。
（項目３７）
前記１つ以上のフィルタは、オクルージョンフィルタを備える、項目２９に記載のシステム。
（項目３８）
前記１つ以上のフィルタは、妨害フィルタを備える、項目２９に記載のシステム。
（項目３９）
非一過性コンピュータ可読媒体であって、前記非一過性コンピュータ可読媒体は、命令を記憶しており、前記命令は、１つ以上のプロセッサによって実行されると、前記１つ以上のプロセッサに、オーディオ信号をウェアラブル頭部デバイスのユーザに提示する方法を実施させ、前記方法は、
第１の入力オーディオ信号を受信することと、
前記第１の入力オーディオ信号を処理し、第１の出力オーディオ信号を発生させることであって、前記第１の入力オーディオ信号を処理することは、
プリエンファシスフィルタを前記第１の入力オーディオ信号に適用することと、
前記第１の入力オーディオ信号の利得を調節することと、
デエンファシスフィルタを第１のオーディオ信号に適用することと
を含む、ことと、
前記ウェアラブル頭部デバイスと関連付けられる１つ以上のスピーカを介して前記第１の出力オーディオ信号を提示することと
を含み、
前記プリエンファシスフィルタを前記第１の入力オーディオ信号に適用することは、前記第１の入力オーディオ信号の低周波数成分を減衰させることを含み、
前記デエンファシスフィルタを前記第１の入力オーディオ信号に適用することは、前記第１の入力オーディオ信号の高周波数成分を減衰させることを含む、非一過性コンピュータ可読媒体。
（項目４０）
前記プリエンファシスフィルタは、一次微分フィルタを備える、項目３９に記載の非一過性コンピュータ可読媒体。
（項目４１）
前記一次微分フィルタは、約６デシベルの１オクターブあたりロールオフを有する、項目４０に記載の非一過性コンピュータ可読媒体。
（項目４２）
前記デエンファシスフィルタを前記第１の入力オーディオ信号に適用することはさらに、前記第１の入力オーディオ信号の低周波数成分の振幅を維持または増加させることを含む、項目３９に記載の非一過性コンピュータ可読媒体。
（項目４３）
前記デエンファシスフィルタは、積分器フィルタを備える、項目３９に記載の非一過性コンピュータ可読媒体。
（項目４４）
前記デエンファシスフィルタは、約６デシベルの１オクターブあたりブーストを伴うリーキー積分器を備える、項目３９に記載の非一過性コンピュータ可読媒体。
（項目４５）
前記デエンファシスフィルタは、ＤＣブロッキングフィルタを備える、項目３９に記載の非一過性コンピュータ可読媒体。
（項目４６）
前記方法はさらに、第２の入力オーディオ信号を受信することを含み、前記第１の入力オーディオ信号を処理し、前記第１の出力オーディオ信号を発生させることはさらに、ミキサを介して、前記第１の入力オーディオ信号を前記第２の入力オーディオ信号と混合することを含む、項目３９に記載の非一過性コンピュータ可読媒体。
（項目４７）
前記ウェアラブル頭部デバイスの１つ以上のスピーカを介して前記第１の出力オーディオ信号を提示することは、
第１の頭部関連伝達関数（ＨＲＴＦ）を前記第１の出力オーディオ信号に適用することと、
前記第１のＨＲＴＦの出力を前記ウェアラブル頭部デバイスの１つ以上のスピーカの左スピーカに提示することと、
第２のＨＲＴＦを前記第１の出力オーディオ信号に適用することと、
前記第２のＨＲＴＦの出力を前記ウェアラブル頭部デバイスの１つ以上のスピーカの右スピーカに提示することと
を含む、項目３９に記載の非一過性コンピュータ可読媒体。
（項目４８）
前記第１の入力オーディオ信号を処理し、前記第１の出力オーディオ信号を発生させることはさらに、
前記プリエンファシスフィルタの出力を１つ以上のフィルタに適用することと、
前記１つ以上のフィルタの第１の出力をパンニングし、第１のパンニングされた信号、第２のパンニングされた信号、第３のパンニングされた信号、および第４のパンニングされた信号を発生させることと、
前記第１のパンニングされた信号を左バスに適用することと、
前記第２のパンニングされた信号を右バスに適用することと、
前記第３のパンニングされた信号を標準バスに適用することと、
前記第４のパンニングされた信号を拡散バスに適用することと、
前記左バス、前記右バス、前記標準バス、および前記拡散バスをバーチャライザへの入力として適用することと
を含み、
前記デエンファシスフィルタを前記第１のオーディオ信号に適用することは、前記デエンファシスフィルタを前記バーチャライザの出力に適用することを含む、項目３９に記載の非一過性コンピュータ可読媒体。
（項目４９）
前記第１の入力オーディオ信号を処理し、前記第１の出力オーディオ信号を発生させることはさらに、事前遅延を前記第１のパンニングされた信号および前記第２のパンニングされた信号に適用することを含む、項目４８に記載の非一過性コンピュータ可読媒体。
（項目５０）
前記第１の入力オーディオ信号を処理し、前記第１の出力オーディオ信号を発生させることはさらに、非相関フィルタを前記拡散バスに適用することを含む、項目４８に記載の非一過性コンピュータ可読媒体。
（項目５１）
前記第１の入力オーディオ信号を処理し、前記第１の出力オーディオ信号を発生させることはさらに、前記１つ以上のフィルタの第２の出力をクラスタ化反射モジュールへの入力として適用し、前記クラスタ化反射モジュールの出力を前記標準バスに適用することを含む、項目４８に記載の非一過性コンピュータ可読媒体。
（項目５２）
前記第１の入力オーディオ信号を処理し、前記第１の出力オーディオ信号を発生させることはさらに、前記１つ以上のフィルタの第２の出力を反響モジュールへの入力として適用し、前記反響モジュールの出力を前記標準バスに適用することを含む、項目４８に記載の非一過性コンピュータ可読媒体。
（項目５３）
前記１つ以上のフィルタは、距離フィルタを備える、項目４８に記載の非一過性コンピュータ可読媒体。
（項目５４）
前記１つ以上のフィルタは、空気吸収フィルタを備える、項目４８に記載の非一過性コンピュータ可読媒体。
（項目５５）
前記１つ以上のフィルタは、源方向性フィルタを備える、項目４８に記載の非一過性コンピュータ可読媒体。
（項目５６）
前記１つ以上のフィルタは、オクルージョンフィルタを備える、項目４８に記載の非一過性コンピュータ可読媒体。
（項目５７）
前記１つ以上のフィルタは、妨害フィルタを備える、項目４８に記載の非一過性コンピュータ可読媒体。
【図面の簡単な説明】
【0005】
【0006】
【0007】
【0008】
【0009】
【0010】
【0011】
【0012】
【0013】
【0014】
【発明を実施するための形態】
【0015】
実施例の以下の説明では、本明細書の一部を形成し、例証として、実践され得る具体的実施例が示される、付随の図面が、参照される。他の実施例も、使用され得、構造変更が、開示される実施例の範囲から逸脱することなく、行われ得ることを理解されたい。
【0016】
例示的ウェアラブルシステム
【0017】
図９は、ユーザの頭部上に装着されるように構成される、例示的ウェアラブル頭部デバイス９００を図示する。ウェアラブル頭部デバイス９００は、頭部デバイス（例えば、ウェアラブル頭部デバイス９００）、ハンドヘルドコントローラ（例えば、下記に説明されるハンドヘルドコントローラ１０００）、および／または補助ユニット（例えば、下記に説明される補助ユニット１１００）等の１つ以上のコンポーネントを含む、より広範なウェアラブルシステムの一部であってもよい。いくつかの実施例では、ウェアラブル頭部デバイス９００は、仮想現実、拡張現実、または複合現実システムまたは用途のために使用されることができる。ウェアラブル頭部デバイス９００は、ディスプレイ９１０Ａおよび９１０Ｂ（左および右透過性ディスプレイと、直交瞳拡大（ＯＰＥ）格子セット９１２Ａ／９１２Ｂおよび射出瞳拡大（ＥＰＥ）格子セット９１４Ａ／９１４Ｂ等、ディスプレイからユーザの眼に光を結合するための関連付けられるコンポーネントとを含み得る）等の１つ以上のディスプレイと、スピーカ９２０Ａおよび９２０Ｂ（それぞれ、つるアーム９２２Ａおよび９２２Ｂ上に搭載され、ユーザの左および右耳に隣接して位置付けられ得る）等の左および右音響構造と、赤外線センサ、加速度計、ＧＰＳユニット、慣性測定ユニット（ＩＭＵ、例えば、ＩＭＵ９２６）、音響センサ（例えば、マイクロホン９５０）等の１つ以上のセンサと、直交コイル電磁受信機（例えば、左つるアーム９２２Ａに搭載されるように示される受信機９２７）と、ユーザから離れるように配向される、左および右カメラ（例えば、深度（飛行時間）カメラ９３０Ａおよび９３０Ｂ）と、ユーザに向かって配向される、左および右眼カメラ（例えば、ユーザの眼移動を検出するため）（例えば、眼カメラ９２８Ａおよび９２８Ｂ）とを含むことができる。しかしながら、ウェアラブル頭部デバイス９００は、本開示の範囲から逸脱することなく、任意の好適なディスプレイ技術およびセンサまたは他のコンポーネントの任意の好適な数、タイプ、または組み合わせを組み込むことができる。いくつかの実施例では、ウェアラブル頭部デバイス９００は、ユーザの音声によって発生されるオーディオ信号を検出するように構成される、１つ以上のマイクロホン９５０を組み込んでもよく、そのようなマイクロホンは、ユーザの口に隣接して位置付けられてもよい。いくつかの実施例では、ウェアラブル頭部デバイス９００は、他のウェアラブルシステムを含む、他のデバイスおよびシステムと通信するために、ネットワーキング特徴（例えば、Ｗｉ－Ｆｉ能力）を組み込んでもよい。ウェアラブル頭部デバイス９００はさらに、バッテリ、プロセッサ、メモリ、記憶ユニット、または種々の入力デバイス（例えば、ボタン、タッチパッド）等のコンポーネントを含んでもよい、または１つ以上のそのようなコンポーネントを含むハンドヘルドコントローラ（例えば、ハンドヘルドコントローラ１０００）または補助ユニット（例えば、補助ユニット１１００）に結合されてもよい。いくつかの実施例では、センサは、ユーザの環境に対する頭部搭載型ユニットの座標のセットを出力するように構成されてもよく、入力をプロセッサに提供し、同時位置特定およびマッピング（ＳＬＡＭ）プロシージャおよび／またはビジュアルオドメトリアルゴリズムを実施してもよい。いくつかの実施例では、ウェアラブル頭部デバイス９００は、下記にさらに説明されるように、ハンドヘルドコントローラ１０００および／または補助ユニット１１００に結合されてもよい。
【0018】
図１０は、例示的ウェアラブルシステムの例示的モバイルハンドヘルドコントローラコンポーネント２００を図示する。いくつかの実施例では、ハンドヘルドコントローラ１０００は、ウェアラブル頭部デバイス９００および／または下記に説明される補助ユニット１１００と有線または無線通信してもよい。いくつかの実施例では、ハンドヘルドコントローラ１０００は、ユーザによって保持されるべき取っ手部分１０２０と、上面１０１０に沿って配置される１つ以上のボタン１０４０とを含む。いくつかの実施例では、ハンドヘルドコントローラ１０００は、光学追跡標的としての使用のために構成されてもよく、例えば、ウェアラブル頭部デバイス９００のセンサ（例えば、カメラまたは他の光学センサ）は、ハンドヘルドコントローラ１０００の位置および／または配向を検出するように構成されることができ、これは、転じて、ハンドヘルドコントローラ１０００を保持するユーザの手の位置および／または配向を示し得る。いくつかの実施例では、ハンドヘルドコントローラ１０００は、プロセッサ、メモリ、記憶ユニット、ディスプレイ、または上記に説明されるもの等の１つ以上の入力デバイスを含んでもよい。いくつかの実施例では、ハンドヘルドコントローラ１０００は、１つ以上のセンサ（例えば、ウェアラブル頭部デバイス９００に関して上記に説明されるセンサまたは追跡コンポーネントのうちのいずれか）を含む。いくつかの実施例では、センサは、ウェアラブル頭部デバイス９００に対する、またはウェアラブルシステムの別のコンポーネントに対するハンドヘルドコントローラ１０００の位置または配向を検出することができる。いくつかの実施例では、センサは、ハンドヘルドコントローラ１０００の取っ手部分１０２０内に位置付けられてもよい、および／またはハンドヘルドコントローラに機械的に結合されてもよい。ハンドヘルドコントローラ１０００は、例えば、ボタン１９４０の押下状態、またはハンドヘルドコントローラ１０００の位置、配向、および／または運動（例えば、ＩＭＵを介して）に対応する、１つ以上の出力信号を提供するように構成されることができる。そのような出力信号は、ウェアラブル頭部デバイス９００のプロセッサへの、補助ユニット１１００への、またはウェアラブルシステムの別のコンポーネントへの入力として使用されてもよい。いくつかの実施例では、ハンドヘルドコントローラ１０００は、音（例えば、ユーザの発話、環境音）を検出し、ある場合には、検出された音に対応する信号をプロセッサ（例えば、ウェアラブル頭部デバイス９００のプロセッサ）に提供するために、１つ以上のマイクロホンを含むことができる。
【0019】
図１１は、例示的ウェアラブルシステムの例示的補助ユニット１１００を図示する。いくつかの実施例では、補助ユニット１１００は、ウェアラブル頭部デバイス９００および／またはハンドヘルドコントローラ１０００と有線または無線通信してもよい。補助ユニット１１００は、ウェアラブル頭部デバイス９００および／またはハンドヘルドコントローラ１０００（ディスプレイ、センサ、音響構造、プロセッサ、マイクロホン、および／またはウェアラブル頭部デバイス９００またはハンドヘルドコントローラ１０００の他のコンポーネントを含む）等のウェアラブルシステムの１つ以上のコンポーネントを動作させるためのエネルギーを提供するために、バッテリを含むことができる。いくつかの実施例では、補助ユニット１１００は、プロセッサ、メモリ、記憶ユニット、ディスプレイ、１つ以上の入力デバイス、および／または上記に説明されるもの等の１つ以上のセンサを含んでもよい。いくつかの実施例では、補助ユニット１１００は、補助ユニットをユーザに取り付けるためのクリップ１１１０（例えば、ユーザによって装着されるベルト）を含む。ウェアラブルシステムの１つ以上のコンポーネントを格納するために補助ユニット１１００を使用する利点は、そのように行うことが、大きいまたは重いコンポーネントが、（例えば、ウェアラブル頭部デバイス９００内に格納される場合）ユーザの頭部に搭載される、または（例えば、ハンドヘルドコントローラ１０００内に格納される場合）ユーザの手によって担持されるのではなく、大きく重い物体を支持するために比較的に良好に適しているユーザの腰部、胸部、または背部の上に担持されることを可能にし得ることである。これは、バッテリ等の比較的に重いまたは嵩張るコンポーネントに関して特に有利であり得る。
【0020】
図１２は、上記に説明される、例示的ウェアラブル頭部デバイス９００と、ハンドヘルドコントローラ１０００と、補助ユニット１１００とを含み得る等、例示的ウェアラブルシステム１２００に対応し得る、例示的機能ブロック図を示す。いくつかの実施例では、ウェアラブルシステム１２００は、仮想現実、拡張現実、または複合現実用途のために使用され得る。図１２に示されるように、ウェアラブルシステム１２００は、ここでは「トーテム」と称される（および上記に説明されるハンドヘルドコントローラ１０００に対応し得る）例示的ハンドヘルドコントローラ１２００Ｂを含むことができ、ハンドヘルドコントローラ１２００Ｂは、トーテム／ヘッドギヤ６自由度（６ＤＯＦ）トーテムサブシステム１２０４Ａを含むことができる。ウェアラブルシステム１２００はまた、（上記に説明されるウェアラブル頭部デバイス９００に対応し得る）例示的ヘッドギヤデバイス１２００Ａを含むことができ、ヘッドギヤデバイス１２００Ａは、トーテム／ヘッドギヤ６ＤＯＦヘッドギヤサブシステム１２０４Ｂを含む。実施例では、６ＤＯＦトーテムサブシステム１２０４Ａおよび６ＤＯＦヘッドギヤサブシステム１２０４Ｂは、協働し、ヘッドギヤデバイス１２００Ａに対するハンドヘルドコントローラ１２００Ｂの６つの座標（例えば、３つの平行移動方向におけるオフセットおよび３つの軸に沿った回転）を決定する。６自由度は、ヘッドギヤデバイス１２００Ａの座標系に対して表されてもよい。３つの平行移動オフセットは、そのような座標系内におけるＸ、Ｙ、およびＺオフセット、平行移動行列、またはある他の表現として表されてもよい。回転自由度は、ヨー、ピッチ、およびロール回転のシーケンス、ベクトル、回転行列、四元数、またはある他の表現として表されてもよい。いくつかの実施例では、ヘッドギヤデバイス１２００Ａ内に含まれる１つ以上の深度カメラ１２４４（および／または１つ以上の非深度カメラ）および／または１つ以上の光学標的（例えば、上記に説明されるようなハンドヘルドコントローラ１０００のボタン１０４０またはハンドヘルドコントローラ内に含まれる専用光学標的）は、６ＤＯＦ追跡のために使用されることができる。いくつかの実施例では、ハンドヘルドコントローラ１２００Ｂは、上記に説明されるようなカメラを含むことができ、ヘッドギヤデバイス１２００Ａは、カメラと併せた光学追跡のための光学標的を含むことができる。いくつかの実施例では、ヘッドギヤデバイス１２００Ａおよびハンドヘルドコントローラ１２００Ｂは、それぞれ、３つの直交して配向されるソレノイドのセットを含み、これは、３つの区別可能な信号を無線で送信および受信するために使用される。受信するために使用される、コイルのそれぞれの中で受信される３つの区別可能な信号の相対的大きさを測定することによって、ヘッドギヤデバイス１２００Ａに対するハンドヘルドコントローラ１２００Ｂの６ＤＯＦが、決定されてもよい。いくつかの実施例では、６ＤＯＦトーテムサブシステム１２０４Ａは、ハンドヘルドコントローラ１２００Ｂの高速移動に関する改良された正確度および／またはよりタイムリーな情報を提供するために有用である、慣性測定ユニット（ＩＭＵ）を含むことができる。
【0021】
拡張現実または複合現実用途を伴ういくつかの実施例では、座標をローカル座標空間（例えば、ヘッドギヤデバイス１２００Ａに対して固定される座標空間）から慣性座標空間に、または環境座標空間に変換することが、望ましくあり得る。例えば、そのような変換は、ヘッドギヤデバイス１２００Ａのディスプレイが、ディスプレイ上の固定位置および配向において（例えば、ヘッドギヤデバイス１２００Ａのディスプレイにおける同一の位置において）ではなく、仮想オブジェクトを実環境に対する予期される位置および配向において提示する（例えば、ヘッドギヤデバイス１２００Ａの位置および配向にかかわらず、前方に向いた実椅子に着座している仮想人物）ために必要であり得る。これは、仮想オブジェクトが、実環境内に存在する（かつ、例えば、ヘッドギヤデバイス１２００Ａが、偏移および回転するにつれて、実環境内に不自然に位置付けられて現れない）という錯覚を維持することができる。いくつかの実施例では、座標空間の間の補償変換が、慣性または環境座標系に対するヘッドギヤデバイス１２００Ａの変換を決定するために、（例えば、同時位置特定およびマッピング（ＳＬＡＭ）および／またはビジュアルオドメトリプロシージャを使用して）深度カメラ１２４４からの画像を処理することによって決定されることができる。図１２に示される実施例では、深度カメラ１２４４は、ＳＬＡＭ／ビジュアルオドメトリブロック１２０６に結合されることができ、画像をブロック１２０６に提供することができる。ＳＬＡＭ／ビジュアルオドメトリブロック１２０６実装は、本画像を処理し、次いで、頭部座標空間と実座標空間との間の変換を識別するために使用され得る、ユーザの頭部の位置および配向を決定するように構成される、プロセッサを含むことができる。同様に、いくつかの実施例では、ユーザの頭部姿勢および場所に関する情報の付加的源が、ヘッドギヤデバイス１２００ＡのＩＭＵ１２０９から取得される。ＩＭＵ１２０９からの情報は、ＳＬＡＭ／ビジュアルオドメトリブロック１２０６からの情報と統合され、ユーザの頭部姿勢および位置の高速調節に関する改良された正確度および／またはよりタイムリーな情報を提供することができる。
【0022】
いくつかの実施例では、深度カメラ１２４４は、ヘッドギヤデバイス１２００Ａのプロセッサ内に実装され得る、手のジェスチャトラッカ１２１１に、３Ｄ画像を供給することができる。手のジェスチャトラッカ１２１１は、例えば、深度カメラ１２４４から受信された３Ｄ画像を手のジェスチャを表す記憶されたパターンに合致させることによって、ユーザの手のジェスチャを識別することができる。ユーザの手のジェスチャを識別する他の好適な技法も、明白となるであろう。
【0023】
いくつかの実施例では、１つ以上のプロセッサ１２１６は、ヘッドギヤサブシステム１２０４Ｂ、ＩＭＵ１２０９、ＳＬＡＭ／ビジュアルオドメトリブロック１２０６、深度カメラ１２４４、マイクロホン１２５０、および／または手のジェスチャトラッカ１２１１からデータを受信するように構成されてもよい。プロセッサ１２１６はまた、制御信号を６ＤＯＦトーテムシステム１２０４Ａに送信し、それから受信することができる。プロセッサ１２１６は、ハンドヘルドコントローラ１２００Ｂがテザリングされない実施例等では、無線で、６ＤＯＦトーテムシステム１２０４Ａに結合されてもよい。プロセッサ１２１６はさらに、視聴覚コンテンツメモリ１２１８、グラフィカル処理ユニット（ＧＰＵ）１２２０、および／またはデジタル信号プロセッサ（ＤＳＰ）オーディオ空間化装置１２２２等の付加的コンポーネントと通信してもよい。ＤＳＰオーディオ空間化装置１２２２は、頭部関連伝達関数（ＨＲＴＦ）メモリ１２２５に結合されてもよい。ＧＰＵ１２２０は、画像毎に変調された光の左源１２２４に結合される、左チャネル出力と、画像毎に変調された光の右源１２２６に結合される、右チャネル出力とを含むことができる。ＧＰＵ１２２０は、立体視画像データを画像毎に変調された光の源１２２４、１２２６に出力することができる。ＤＳＰオーディオ空間化装置１２２２は、オーディオを左スピーカ１２１２および／または右スピーカ１２１４に出力することができる。ＤＳＰオーディオ空間化装置１２２２は、プロセッサ１２１６から、ユーザから仮想音源（例えば、ハンドヘルドコントローラ１２００Ｂを介して、ユーザによって移動され得る）への方向ベクトルを示す入力を受信することができる。方向ベクトルに基づいて、ＤＳＰオーディオ空間化装置１２２２は、対応するＨＲＴＦを決定することができる（例えば、ＨＲＴＦにアクセスすることによって、または複数のＨＲＴＦを補間することによって）。ＤＳＰオーディオ空間化装置１２２２は、次いで、決定されたＨＲＴＦを仮想オブジェクトによって発生された仮想音に対応するオーディオ信号等のオーディオ信号に適用することができる。これは、複合現実環境内の仮想音に対するユーザの相対的位置および配向を組み込むことによって、すなわち、その仮想音が、実環境内の実音である場合に聞こえるであろうもののユーザの予期に合致する仮想音を提示することによって、仮想音の信憑性および現実性を向上させることができる。
【0024】
図１２に示されるもの等のいくつかの実施例では、プロセッサ１２１６、ＧＰＵ１２２０、ＤＳＰオーディオ空間化装置１２２２、ＨＲＴＦメモリ１２２５、およびオーディオ／視覚的コンテンツメモリ１２１８のうちの１つ以上のものは、補助ユニット１２００Ｃ（上記に説明される補助ユニット１１００に対応し得る）内に含まれてもよい。補助ユニット１２００Ｃは、バッテリ１２２７を含み、そのコンポーネントを給電する、および／または電力をヘッドギヤデバイス１２００Ａおよび／またはハンドヘルドコントローラ１２００Ｂに供給してもよい。そのようなコンポーネントを、ユーザの腰部に搭載され得る、補助ユニット内に含むことは、ヘッドギヤデバイス１２００Ａのサイズおよび重量を限定することができ、これは、ひいては、ユーザの頭部および頸部の疲労を低減させることができる。
【0025】
図１２は、例示的ウェアラブルシステム１２００の種々のコンポーネントに対応する要素を提示するが、これらのコンポーネントの種々の他の好適な配列も、当業者に明白となるであろう。例えば、補助ユニット１２００Ｃと関連付けられるものとして図１２に提示される要素は、代わりに、ヘッドギヤデバイス１２００Ａまたはハンドヘルドコントローラ１２００Ｂと関連付けられ得る。さらに、いくつかのウェアラブルシステムは、ハンドヘルドコントローラ１２００Ｂまたは補助ユニット１２００Ｃを完全に無くしてもよい。そのような変更および修正は、開示される実施例の範囲内に含まれるものとして理解されるものである。
【0026】
オーディオ空間化
【0027】
下記に説明されるシステムおよび方法は、上記に説明されるもの等の拡張現実または複合現実システムにおいて実装されることができる。例えば、拡張現実システムの１つ以上のプロセッサ（例えば、ＣＰＵ、ＤＳＰ）が、オーディオ信号を処理するために、または下記に説明されるコンピュータ実装方法のステップを実装するために使用されることができ、拡張現実システムのセンサ（例えば、カメラ、音響センサ、ＩＭＵ、ＬＩＤＡＲ、ＧＰＳ）が、本システムのユーザまたはユーザの環境内の要素の位置および／または配向を決定するために使用されることができ、拡張現実システムのスピーカが、オーディオ信号をユーザに提示するために使用されることができる。
【0028】
上記に説明されるもの等の拡張現実または複合現実システムでは、１つ以上のプロセッサ（例えば、ＤＳＰオーディオ空間化装置１２２２）は、１つ以上のスピーカ（例えば、上記に説明される左および右スピーカ１２１２／１２１４）を介したウェアラブル頭部デバイスのユーザへの提示のために、１つ以上のオーディオ信号を処理することができる。いくつかの実施形態では、１つ以上のスピーカは、ウェアラブル頭部デバイスとは別個のユニット（例えば、ウェアラブル頭部デバイスと通信するヘッドホンの対）に属してもよい。オーディオ信号の処理は、知覚されるオーディオ信号の真正性、例えば、複合現実環境内のユーザに提示されるオーディオ信号が、オーディオ信号が実環境内で聞こえるであろう方法のユーザの予期に合致する程度と、オーディオ信号を処理する際に伴う算出オーバーヘッドとの間のトレードオフを要求する。仮想環境内でオーディオ信号を現実的に空間化することは、没入感および信憑性があるユーザ体験を作成することに対して重要であり得る。
【0029】
図１Ａは、いくつかの実施形態による、空間化システム１００Ａ（以降、「システム１００Ａ」と称される）を図示する。システム１００Ａは、１つ以上のエンコーダ１０４Ａ－Ｎと、ミキサ１０６と、１つ以上のスピーカ１０８Ａ－Ｍとを含む。システム１００Ａは、音景内に提示されるべきオブジェクトに対応する入力音／信号を空間化することによって音景（音環境）を作成し、音景を１つ以上のスピーカ１０８Ａ－Ｍを通して配信する。
【0030】
システム１００Ａは、１つ以上の入力信号１０２Ａ－Ｎを受信する。１つ以上の入力信号１０２Ａ－Ｎは、音景内に提示されるべきオブジェクトに対応するデジタルオーディオ信号を含んでもよい。いくつかの実施形態では、デジタルオーディオ信号は、オーディオデータのパルスコード変調（ＰＣＭ）波形であってもよい。入力信号の合計数（Ｎ）は、音景内に提示されるべきオブジェクトの合計数を表し得る。
【0031】
１つ以上のエンコーダ１０４Ａ－Ｎの各エンコーダは、１つ以上の入力信号１０２Ａ－Ｎの少なくとも１つの入力信号を受信し、１つ以上の利得調節信号を出力する。例えば、いくつかの実施形態では、エンコーダ１０４Ａは、入力信号１０２Ａを受信し、利得調節信号を出力する。いくつかの実施形態では、各エンコーダは、音景を配信する１つ以上のスピーカ１０８Ａ－Ｍのスピーカ毎に利得調節信号を出力する。例えば、エンコーダ１０４は、スピーカ１０８Ａ－Ｍのそれぞれに関してＭ個の利得調節信号を出力する。スピーカ１０８Ａ－Ｍは、上記に説明されるもの等の拡張現実または複合現実システムに属してもよく、例えば、スピーカ１０８Ａ－Ｍのうちの１つ以上のものは、上記に説明されるもの等のウェアラブル頭部デバイスに属してもよく、オーディオ信号を本デバイスを装着するユーザの耳に直接提示するように構成されてもよい。音景内のオブジェクトが具体的場所／近接から生じるように見せるために、１つ以上のエンコーダ１０４Ａ－Ｎの各エンコーダは、それに応じて、利得モジュールに入力される制御信号の値を設定する。
【0032】
１つ以上のエンコーダ１０４Ａ－Ｎの各エンコーダは、１つ以上の利得モジュールを含む。例えば、エンコーダ１０４Ａは、利得モジュールｇ＿Ａ１－ＡＭを含む。いくつかの実施形態では、システム１００Ａにおける１つ以上のエンコーダ１０４Ａ－Ｎの各エンコーダは、同数の利得モジュールを含んでもよい。例えば、１つ以上のエンコーダ１０４Ａ－Ｎはそれぞれ、それぞれ、Ｍ個の利得モジュールを含んでもよい。いくつかの実施形態では、エンコーダ内の利得モジュールの合計数は、音景を配信するスピーカの合計数に対応する。各利得モジュールは、１つ以上の入力信号１０２Ａ－Ｎの少なくとも１つの入力信号を受信し、入力信号の利得を調節し、利得調節信号を出力する。例えば、利得モジュールｇ＿Ａ１は、入力信号１０２Ａを受信し、入力信号１０２Ａの利得を調節し、利得調節信号を出力する。各利得モジュールは、１つ以上の制御信号ＣＴＲＬ＿Ａ１－ＮＭの制御信号の値に基づいて、入力信号の利得を調節する。例えば、利得モジュールｇ＿Ａ１は、制御信号ＣＴＲＬ＿Ａ１の値に基づいて、入力信号１０２Ａの利得を調節する。各エンコーダは、入力信号が対応する音景内に提示されるべきオブジェクトの場所／近接に基づいて、利得モジュールに入力される制御信号の値を調節する。各利得モジュールは、入力信号に、制御信号の値の関数である係数を乗算する、乗算器であってもよい。
【0033】
ミキサ１０６は、エンコーダ１０４Ａ－Ｎから利得調節信号を受信し、利得調節信号を混合し、混合された信号をスピーカ１０８Ａ－Ｍに出力する。スピーカ１０８Ａ－Ｍは、ミキサ１０６から混合された信号を受信し、音を出力する。いくつかの実施形態では、ミキサ１０６は、１つのみの入力信号（例えば、入力１０２Ａ）が、存在する場合、システム１００Ａから除去されてもよい。
【0034】
いくつかの実施形態では、本動作を実施するために、空間化システム（「空間化装置」）は、ユーザの外耳および頭部を通した、そしてその傍の音の伝搬および回折をシミュレートする頭部関連伝達関数（ＨＲＴＦ）フィルタの対を用いて、各入力信号（例えば、デジタルオーディオ信号（「源」））を処理する。ＨＲＴＦフィルタの対は、ユーザの左耳に関するＨＲＴＦフィルタと、ユーザの右耳に関するＨＲＴＦフィルタとを含む。全ての源に関する左耳ＨＲＴＦフィルタの出力は、ともに混合され、左耳スピーカを通して再生され、全ての源に関する右耳ＨＲＴＦフィルタの出力は、ともに混合され、右耳スピーカを通して再生される。
【0035】
図１Ｂは、いくつかの実施形態による、空間化システム１００Ｂ（以降、「システム１００Ｂ」と称される）を図示する。システム１００Ｂは、入力音／信号を空間化することによって音景（音環境）を作成する。図１Ｂに図示されるシステム１００Ｂは、図１Ａに図示されるシステム１００Ａに類似するが、いくつかの点において異なり得る。例えば、例示的システム１００Ａでは、ミキサ１０６の出力は、スピーカ１０８Ａ－Ｍに入力される。システム１００Ｂでは、ミキサ１０６の出力は、デコーダ１１０に入力され、デコーダ１１０の出力は、左耳スピーカ１１２Ａおよび右耳スピーカ１１２Ｂ（以降、集合的に、「スピーカ１１２」と称される）に入力される。いくつかの実施形態では、ミキサ１０６は、１つのみの入力信号（例えば、入力１０２Ａ）が、存在する場合、システム１００Ａから除去されてもよい。
【0036】
実施例では、デコーダ１１０は、左ＨＲＴＦフィルタＬ＿ＨＲＴＦ＿１－Ｍと、右ＨＲＴＦフィルタＲ＿ＨＲＴＦ＿１－Ｍとを含む。デコーダ１１０は、ミキサ１０６から混合された信号を受信し、混合された信号をフィルタ処理および合計し、フィルタ処理された信号をスピーカ１１２に出力する。例えば、デコーダ１１０は、ミキサ１０６から、音景内に提示されるべき第１のオブジェクトを表す第１の混合された信号を受信する。実施例を継続すると、デコーダ１１０は、第１の左ＨＲＴＦフィルタＬ＿ＨＲＴＦ＿１および第１の右ＨＲＴＦフィルタＲ＿ＨＲＴＦ＿１を通して第１の混合された信号を処理する。具体的には、第１の左ＨＲＴＦフィルタＬ＿ＨＲＴＦ＿１は、第１の混合された信号をフィルタ処理し、第１の左のフィルタ処理された信号を出力し、第１の右ＨＲＴＦフィルタＲ＿ＨＲＴＦ＿１は、第１の混合された信号をフィルタ処理し、第１の右のフィルタ処理された信号を出力する。デコーダ１１０は、第１の左のフィルタ処理された信号を、他の左のフィルタ処理された信号、例えば、左ＨＲＴＦフィルタＬ＿ＨＲＴＦ＿２－Ｍからの出力と合計し、左出力信号を左耳スピーカ１１２Ａに出力する。デコーダ１１０は、第１の右のフィルタ処理された信号を、他の右のフィルタ処理された信号、例えば、右ＨＲＴＦフィルタＲ＿ＨＲＴＦ＿２－Ｍからの出力と合計し、右出力信号を右耳スピーカ１１２Ｂに出力する。
【0037】
いくつかの実施形態では、デコーダ１１０は、ＨＲＴＦフィルタのバンクを含んでもよい。バンク内のＨＲＴＦフィルタはそれぞれ、ユーザの頭部に対する具体的方向をモデル化してもよい。いくつかの実施形態では、算出的に効率的なレンダリング方法が、使用されてもよく、仮想音源あたりの増分の処理費用は、最小限にされる。これらの方法は、空間関数の固定セットおよび基底フィルタの固定セットにわたるＨＲＴＦデータの分解に基づいてもよい。これらの実施形態では、ミキサ１０６からの各混合された信号は、源の方向に最も近い方向をモデル化するＨＲＴＦフィルタの入力に混合されてもよい。それらのＨＲＴＦフィルタのそれぞれに混合される信号のレベルは、源の具体的方向によって決定される。
【0038】
音景内に提示されるオブジェクトの方向および／または場所が、変化する場合、エンコーダ１０４Ａ－Ｎは、音景内にオブジェクトを適切に提示するために、利得モジュールｇ＿Ａ１－ＮＭに関する制御信号ＣＴＲＬ＿Ａ１－ＮＭの値を変化させることができる。
【0039】
いくつかの実施形態では、エンコーダ１０４Ａ－Ｎは、利得モジュールｇ＿Ａ１－ＮＭに関する制御信号ＣＴＲＬ＿Ａ１－ＮＭの値を瞬間的に変化させてもよい。しかしながら、図１Ａのシステム１００Ａおよび／または図１Ｂのシステム１００Ｂに関して、制御信号ＣＴＲＬ＿Ａ１－ＮＭの値を瞬間的に変化させることは、システム１００Ａにおけるスピーカ１０８Ａ－Ｍおよび／またはシステム１００Ｂにおけるスピーカ１１２において音アーチファクトをもたらし得る。音アーチファクトは、例えば、「クリック」音であり得る。制御信号の値を瞬間的に変化させることに起因する音アーチファクトの深刻さは、利得変化の量および利得変化の時点における入力信号の振幅の組み合わせに依存し得る。
【0040】
そのような音アーチファクトを低減させるために、いくつかの実施形態では、エンコーダ１０４Ａ－Ｎは、瞬間的にではなく、ある時間周期にわたって利得モジュールｇ＿Ａ１－ＮＭに関する制御信号ＣＴＲＬ＿Ａ１－ＮＭの値を変化させてもよい。いくつかの実施形態では、エンコーダ１０４Ａ－Ｎは、入力信号１０２Ａ－Ｎのあらゆるサンプル毎に制御信号ＣＴＲＬ＿Ａ１－ＮＭに関する新しい値を算出してもよい。制御信号ＣＴＲＬ＿Ａ１－ＮＭに関する新しい値は、以前の値とわずかにのみ異なり得る。新しい値は、線形曲線、指数関数的曲線等を辿り得る。本プロセスは、新しい方向／場所に関する要求される混合レベルに到達するまで、繰り返されてもよい。しかしながら、図１Ａのシステム１００Ａおよび／または図１Ｂのシステム１００Ｂに関して、入力信号１０２Ａ－Ｎのあらゆるサンプル毎に制御信号ＣＴＲＬ＿Ａ１－ＮＭに関する新しい値を算出することは、算出的に高価であり、時間がかかり得る。
【0041】
いくつかの実施形態では、エンコーダ１０４Ａ－Ｎは、繰り返し、例えば、いくつかのサンプル毎に、２つのサンプル毎に、４つのサンプル毎に、１０個のサンプル毎に、および同等物毎に１回ずつ、制御信号ＣＴＲＬ＿Ａ１－ＮＭに関する新しい値を算出してもよい。本プロセスは、新しい方向／場所に関する要求される混合レベルに到達するまで、繰り返されてもよい。しかしながら、図１Ａのシステム１００Ａおよび／または図１Ｂのシステム１００Ｂに関して、いくつかのサンプル毎に１回ずつ、制御信号ＣＴＲＬ＿Ａ１－ＮＭに関する新しい値を算出することは、システム１００Ａにおけるスピーカ１０８Ａ－Ｍおよび／またはシステム１００Ｂにおけるスピーカ１１２において音アーチファクトをもたらし得る。音アーチファクトは、例えば、「ジップ」音であり得る。
【0042】
音アーチファクトを低減させるために、いくつかの実施形態では、エンコーダは、ゼロクロスに関して入力信号を検索し、ゼロクロスの時点で、制御信号の値を調節してもよい。いくつかの実施形態では、エンコーダが、ゼロクロスに関して入力信号を検索し、ゼロクロスの時点で、制御信号の値を調節することは、多くの算出サイクルがかかり得る。しかしながら、入力信号が、直流（ＤＣ）バイアスを有する場合、エンコーダは、入力信号におけるゼロクロスを決して検出または決定し得ず、したがって、制御信号の値を決して調節しないであろう。したがって、ハイパスフィルタまたはＤＣブロッキングフィルタが、ＤＣバイアスを低減／除去し、信号において十分なゼロクロスが存在することを確実にするために、エンコーダの前に導入されてもよい。システム（例えば、システム１００Ａおよび／またはシステム１００Ｂ）のいくつかの実施形態では、ハイパスフィルタまたはＤＣブロッキングフィルタが、本システムにおける各エンコーダの前に導入されてもよい。いったんＤＣバイアスが、入力信号から低減／除去されると、エンコーダは、ゼロクロスに関してＤＣバイアスを伴わない入力信号を検索し、ゼロクロスの時点で、制御信号の値を調節し得る。ゼロクロスを検索することは、時間がかかり得る。本システムが、信号を変化させる他のコンポーネントまたはモジュールを含む場合、それらの他のコンポーネントまたはモジュールは、同様に、ゼロクロスに関して他のコンポーネントまたはモジュールに入力される信号を検索し、ゼロクロスの時点で、種々のコンポーネントまたはモジュールのパラメータの値を調節するであろう。
【0043】
非限定的実施例として、図２Ａは、エンコーダ２０４と、ミキサ２０６と、第１－第４のスピーカ２０８Ａ－Ｄとを含む、システム２００を図示する。例示的システム２００は、システム１００Ａに類似するが、いくつかの点において異なり得る。システム２００は、音景内に提示されるべきオブジェクトに対応する入力音／信号を空間化することによって音景（音環境）を作成し、音景を第１－第４のスピーカ２０８Ａ－Ｄを通して配信する。
【0044】
システム２００は、入力信号２０２を受信する。入力信号２０２は、音景内に提示されるべきオブジェクトに対応するデジタルオーディオ信号を含んでもよい。エンコーダ２０４は、入力信号２０２を受信し、４つの利得調節信号を出力する。エンコーダ２０４は、音景を配信する第１－第４のスピーカ２０８Ａ－Ｄのスピーカ毎に利得調節信号を出力する。音景内のオブジェクトが具体的場所／近接から生じるように見せるために、エンコーダ２０４は、それに応じて、第１－第４の利得モジュールｇ＿１－４に入力される制御信号の値を設定する。エンコーダ２０４は、第１－第４の利得モジュールｇ＿１－４を含む。利得モジュールの合計数は、音景を配信するスピーカの合計数に対応する。第１－第４の利得モジュールｇ＿１－４の各利得モジュールは、入力信号２０２を受信し、入力信号２０２の利得を調節し、利得調節信号を出力する。第１－第４の利得モジュールｇ＿１－４の各利得モジュールは、第１－第４の制御信号ＣＴＲＬ＿１－４の制御信号の値に基づいて、入力信号２０２の利得を調節する。例えば、第１の利得モジュールｇ＿１は、第１の制御信号ＣＴＲＬ＿１の値に基づいて、入力信号２０２の利得を調節する。エンコーダ２０４は、入力信号２０２が対応する音景内に提示されるべきオブジェクトの場所および／または近接に基づいて、第１－第４の利得モジュールｇ＿１－４に入力される第１－第４の制御信号ＣＴＲＬ＿１－４の値を調節する。ミキサ２０６は、エンコーダ２０４から利得調節信号を受信し、利得調節信号を混合し、混合された信号を第１－第４のスピーカ２０８Ａ－Ｄに出力する。本実施例では、１つのみの入力信号２０２および１つのみのエンコーダ２０４が、存在するため、ミキサ２０６は、いかなる利得調節信号も混合しない。第１－第４のスピーカ２０８Ａ－Ｄは、ミキサ１０６から混合された信号を受信し、音を出力する。
【0045】
図２Ｂは、第１－第４のスピーカ２０８Ａ－Ｄと、ユーザ２２０とを含む、環境２４０を図示する。スピーカ２０８Ａ－Ｄは、拡張現実システム（例えば、ウェアラブル頭部デバイスを含む）に属してもよく、ユーザ２２０は、拡張現実システムのユーザであってもよい。図２Ｃは、環境２４０内の第１の場所／近接における仮想ハチ２２２－１を図示する。仮想ハチ２２２－１は、第１－第４のスピーカ２０８Ａ－Ｄによって配信される音景内に提示されるべきオブジェクトである。仮想ハチ２２２－１は、ユーザ２２０による使用時に拡張現実システムのディスプレイにおいて視覚的に提示されてもよく、概して、音景が、仮想ハチ２２２－１の視覚的表示と一貫することが、望ましい。エンコーダ２０４は、仮想ハチ２２２－１に対応するデジタルオーディオ信号を含む、入力信号２０２を受信する。エンコーダ２０４は、仮想ハチ２２２－１の第１の場所／近接に基づいて、第１－第４の制御信号ＣＴＲＬ＿１－４の値を設定する。図２Ｄは、図２Ｃに描写される仮想ハチ２２２－１の第１の場所／近接に基づく、第１－第４の制御信号ＣＴＲＬ＿１－４の値を図示する。図２Ｄに図示されるように、ユーザ２２０に対する仮想ハチ２２２－１の第１の場所／近接に基づいて、第１および第２の制御信号ＣＴＲＬ＿１－２は、同一の非ゼロの値（例えば、０．５）を有し、第３および第４の制御信号ＣＴＲＬ＿３－４は、ゼロの値を有する。すなわち、仮想ハチ２２２－１は、ユーザ２２０の直接正面に存在するものとして音景内に提示されるべきであるため、第１および第２の制御信号ＣＴＲＬ＿１－２は、同一の非ゼロの値を有し、第３および第４の制御信号ＣＴＲＬ＿３－４は、ゼロの値を有する。
【0046】
図２Ｅは、環境２４０内の第２の場所／近接における仮想ハチ２２２－２を図示する。エンコーダ２０４は、仮想ハチ２２２－２の第２の場所／近接に基づいて、第１－第４の制御信号ＣＴＲＬ＿１－４の値を調節する。例えば、エンコーダ２０４は、仮想ハチ２２２－１が、第１の場所／近接に存在していたときの第１の制御信号ＣＴＲＬ＿１の値に対して第１の制御信号ＣＴＲＬ＿１の値を増加させ（例えば、０．７５の値）、エンコーダ２０４は、仮想ハチ２２２－１が、第１の場所／近接に存在していたときの第２の制御信号ＣＴＲＬ＿２の値に対して第２の制御信号ＣＴＲＬ＿２の値を減少させ（例えば、０．２５の値）、エンコーダ２０４は、第３－第４の制御信号ＣＴＲＬ＿３－４のいかなる調節も行わず、これは、ゼロの値のままである。
【0047】
図２Ｆは、いくつかの実施形態による、図２Ｅに描写される仮想ハチ２２２－２の第２の場所／近接に基づく、第１－第４の制御信号ＣＴＲＬ＿１－４の値を図示する。図２Ｆに図示されるように、エンコーダ２０４は、時間ｔ＿１において、第１および第２の制御信号ＣＴＲＬ＿１－２の値を瞬間的に変化させる。上記に説明されるように、時間ｔ＿１において、第１および第２の制御信号ＣＴＲＬ＿１－２の値を瞬間的に変化させることは、スピーカ２０８Ａ－Ｄにおいて望ましくない音アーチファクトをもたらし得る。音アーチファクトは、例えば、「クリック」音であり得る。
【0048】
図２Ｇは、いくつかの実施形態による、図２Ｅに描写される仮想ハチ２２２－２の第２の場所／近接に基づく、第１－第４の制御信号ＣＴＲＬ＿１－４の値を図示する。図２Ｇに図示されるように、エンコーダ２０４は、ある時間周期にわたって第１および第２の制御信号ＣＴＲＬ＿１－２の値を変化させる。本実施形態では、エンコーダ２０４は、入力信号２０２のあらゆるサンプル毎に第１および第２の制御信号ＣＴＲＬ＿１－２に関する新しい値を算出してもよい。第１および第２の制御信号ＣＴＲＬ＿１－２に関する新しい値は、以前の値とわずかにのみ異なり得る。本プロセスは、新しい方向／場所に関する要求される混合レベルに到達するまで、繰り返されてもよい。例えば、プロセスは、第１の制御信号ＣＴＲＬ＿１の値が、（例えば、０．５から０．７５に）増加され、第２の制御信号ＣＴＲＬ＿２の値が、（例えば、０．５から０．２５に）減少されるまで、繰り返されてもよい。しかしながら、上記に言及されるように、入力信号２０２のあらゆるサンプル毎に第１および第２の制御信号ＣＴＲＬ＿１－２に関する新しい値を算出することは、算出的に高価であり、時間がかかり得る。
【0049】
図２Ｈは、いくつかの実施形態による、図２Ｅに描写される仮想ハチ２２２－２の第２の場所／近接に基づく、第１－第４の制御信号ＣＴＲＬ＿１－４の値を図示する。図２Ｈに図示されるように、エンコーダ２０４は、ある時間周期にわたって第１および第２の制御信号ＣＴＲＬ＿１－２の値を変化させる。本実施形態では、エンコーダ２０４は、いくつかのサンプル毎に１回ずつ、第１および第２の制御信号ＣＴＲＬ＿１－２に関する新しい値を算出してもよい。本プロセスは、新しい方向／場所に関する要求される混合レベルに到達するまで、繰り返されてもよい。しかしながら、上記に説明されるように、いくつかのサンプル毎に１回ずつ、第１および第２の制御信号ＣＴＲＬ＿１－２に関する新しい値を算出することは、スピーカ２０８Ａ－Ｄにおいて望ましくない音アーチファクトをもたらし得る。音アーチファクトは、例えば、「ジップ」音であり得る。
【0050】
図３Ａは、いくつかの実施形態による、空間化システム３００（以降、「システム３００」と称される）を図示する。例示的システム３００は、入力音／信号を空間化することによって音景（音環境）を作成する。図３に図示されるシステム３００は、図１Ａに図示されるシステム１００Ａに類似するが、いくつかの点において異なり得る。１つ以上のエンコーダ３０４Ａ－Ｎ、ミキサ３０６、および１つ以上のスピーカ３０８Ａ－Ｍに加えて、システム３００は、１つ以上のプリエンファシスフィルタ３３２Ａ－Ｎと、１つ以上のデエンファシスフィルタ３３４Ａ－Ｍとを含む。１つ以上のプリエンファシスフィルタ３３２Ａ－Ｎおよび１つ以上のデエンファシスフィルタ３３４Ａ－Ｍの追加は、１つ以上のエンコーダ３０４Ａ－Ｎが、スピーカ３０８Ａ－Ｍにおける音アーチファクトを最小限にしながら、制御信号ＣＴＲＬ＿Ａ１－ＮＭの値を瞬間的に変化させることを可能にする。いくつかの実施形態では、１つ以上のプリエンファシスフィルタ３３２Ａ－Ｎおよび１つ以上のデエンファシスフィルタ３３４Ａ－Ｎは、雑音を低減させる。１つ以上のプリエンファシスフィルタ３３２Ａ－Ｎおよび１つ以上のデエンファシスフィルタ３３４Ａ－Ｎは、相補フィルタであってもよい。１つ以上のプリエンファシスフィルタ３３２Ａ－Ｎおよび１つ以上のデエンファシスフィルタ３３４Ａ－Ｎは、ある場合には、ＤＣが遮断される低周波数を除いて、相互に相殺してもよい。
【0051】
実施例では、１つ以上のプリエンファシスフィルタ３３２Ａ－Ｎの各プリエンファシスフィルタは、１つ以上の入力信号３０２Ａ－Ｎの少なくとも１つの入力信号を受信し、入力信号をフィルタ処理し、フィルタ処理された信号を１つ以上のエンコーダ３０４Ａ－Ｎのエンコーダに出力する。各プリエンファシスフィルタは、例えば、入力信号から低周波数エネルギーを低減させることによって、少なくとも１つの入力信号をフィルタ処理する。プリエンファシスフィルタから出力されるフィルタ処理された信号の振幅は、入力信号の振幅よりもゼロに近いものであり得る。利得変化の量および利得変化の時点における入力信号の振幅の組み合わせに依存し得る、制御信号の値を瞬間的に変化させることに起因し得る音アーチファクトの深刻さは、フィルタ処理された信号の振幅がゼロに近いことによって軽減され得る。
【0052】
実施例では、１つ以上のエンコーダ３０４Ａ－Ｎの各エンコーダは、入力信号、したがって、フィルタ処理された信号が対応する音景内に提示されるべきオブジェクトの場所／近接に基づいて、利得モジュールに入力される制御信号の値を調節することができる。各エンコーダは、スピーカ３０８Ａ－Ｍにおいて音アーチファクトをもたらすことなく、瞬間的に制御信号の値を調節し得る。これは、各利得モジュールが、入力信号を直接調節するのではなく、フィルタ処理された信号（例えば、プリエンファシスフィルタ３３２Ａ－Ｎの出力）の利得を調節するためである。
【0053】
実施例では、１つ以上のデエンファシスフィルタ３３４Ａ－Ｎの各デエンファシスフィルタは、信号、例えば、ミキサ３０６から出力される１つまたは複数の混合された信号の混合された信号を受信し、混合された信号から信号を再構成し、再構成された信号を１つ以上のスピーカ３０８Ａ－Ｍのスピーカに出力する。各デエンファシスフィルタは、例えば、信号から高周波数エネルギーを低減させることによって、信号をフィルタ処理することができる。いくつかの実施形態では、デエンファシスフィルタは、入力信号の振幅の全ての急激な変化を、波形の傾斜の変化に変えてもよい。
【0054】
制御信号の値を瞬間的に変化させることは、信号の波形の振幅の変化を引き起こし得、これは、主に、高周波数雑音を導入し得る。プリエンファシスフィルタは、少なくとも１つの入力信号の振幅を低減させる。デエンファシスフィルタは、信号の振幅の急激な変化を、低減された高周波数雑音を伴う波形の傾斜の変化に変える。
【0055】
図３Ｂは、いくつかの実施形態による、例示的プリエンファシスフィルタを図示する。プリエンファシスフィルタは、受信された信号を受信し、受信された信号をフィルタ処理し、伝送された信号を出力する。伝送された信号は、受信された信号のフィルタ処理されたバージョンである。プリエンファシスフィルタは、受信された信号の高周波数成分の振幅を維持または増幅しながら、受信された信号の低周波数成分の振幅を減少または減衰させてもよい。いくつかの実施形態では、プリエンファシスフィルタは、受信された信号の振幅をゼロにはるかに近づける。プリエンファシスフィルタは、受信された信号内に存在し得るいずれのＤＣオフセットも減衰させることに役立ち得る。いくつかの実施形態では、プリエンファシスフィルタは、ハイパスフィルタ、例えば、一次ハイパスフィルタを含んでもよい。いくつかの実施形態では、プリエンファシスフィルタは、一次微分フィルタを含んでもよい。一次微分フィルタは、減少する周波数（例えば、ナイキストからＤＣまで）を伴う約６デシベルの１オクターブあたりロールオフを有してもよい。その結果、低周波数において、受信された信号は、受信された信号のフィルタ処理されていないバージョンに対して大いに減衰され得る。
【0056】
図３Ｃは、いくつかの実施形態による、例示的デエンファシスフィルタを図示する。デエンファシスフィルタは、受信された信号を受信し、受信された信号をフィルタ処理し、伝送された信号を出力する。図３Ｃの受信された信号および伝送された信号は、必ずしも、図３Ｂの受信された信号および伝送された信号と同一ではないことに留意されたい。伝送された信号は、受信された信号のフィルタ処理されたバージョンである。デエンファシスフィルタは、受信された信号の低周波数成分の振幅を維持または増幅しながら、受信された信号の高周波数成分の振幅を減少または減衰させてもよい。いくつかの実施形態では、デエンファシスフィルタは、ローパスフィルタを含んでもよい。いくつかの実施形態では、デエンファシスフィルタは、積分器フィルタ、例えば、リーキー積分器を含んでもよい。リーキー積分器は、減少する周波数を伴う約６デシベルの１オクターブあたりブーストを有してもよい。その結果、低周波数において、受信された信号は、受信された信号のフィルタ処理されていないバージョンに対して大いに増幅され得る。いくつかの実施形態では、デエンファシスフィルタは、ＤＣブロッキングフィルタを含んでもよい。
【0057】
図３Ａに図示されるように、デエンファシスフィルタ３３４Ａ－Ｍは、ミキサ３０６と１つ以上のスピーカ３０８Ａ－Ｍとの間にあり得る。本実施形態では、デエンファシスフィルタ３３４Ａ－Ｍの数は、１つ以上のスピーカ３０８Ａ－Ｍの数と同一であり得る、ミキサ３０６の出力の数と同一であり得る。
【0058】
図４は、いくつかの実施形態による、空間化システム４００（以降、「システム４００」と称される）を図示する。システム４００は、入力音／信号を空間化することによって音景（音環境）を作成する。図４に図示されるシステム４００は、図３Ａに図示されるシステム３００に類似するが、いくつかの点において異なり得る。システム４００では、１つ以上のデエンファシスフィルタ４３４Ａ１－ＮＭは、１つ以上のエンコーダ４０４Ａ－Ｎとミキサ４０６との間にあり得る。本実施形態では、デエンファシスフィルタ４３４Ａ１－ＮＭの数は、１つ以上のエンコーダ４０４Ａ－Ｎからの出力の数と同一であり得る。
【0059】
図５は、いくつかの実施形態による、空間化システム５００（以降、「システム５００」と称される）を図示する。システム５００は、入力音／信号を空間化することによって音景（音環境）を作成する。図５に図示されるシステム５００は、図１Ｂに図示されるシステム１００Ｂに類似するが、いくつかの点において異なり得る。１つ以上のエンコーダ５０４Ａ－Ｎ、ミキサ５０６、デコーダ５１０、左耳スピーカ５１２Ａ、および右耳スピーカ５１２Ｂに加えて、システム５００は、１つ以上のプリエンファシスフィルタ５３２Ａ－Ｎと、左デエンファシスフィルタ５３４Ａと、右デエンファシスフィルタ５３４Ｂとを含む。１つ以上のプリエンファシスフィルタ５３２Ａ－Ｎおよび左および右デエンファシスフィルタ５３４Ａ－Ｂの追加は、１つ以上のエンコーダ５０４Ａ－Ｎが、左および右スピーカ５１２Ａ－Ｂにおける音アーチファクトをもたらすことなく、制御信号ＣＴＲＬ＿Ａ１－ＮＭの値を瞬間的に変化させることを可能にすることができる。いくつかの実施形態では、１つ以上のプリエンファシスフィルタ５３２Ａ－Ｎおよび左および右デエンファシスフィルタ５３４Ａ－Ｂは、雑音を低減させる。１つ以上のプリエンファシスフィルタ５３２Ａ－Ｎは、図３Ｂに図示され、上記に説明されるプリエンファシスフィルタと同一であり得る。左および右デエンファシスフィルタ５３４Ａ－Ｂは、図３Ｃに図示され、上記に説明されるデエンファシスフィルタと同一であり得る。
【0060】
図６は、いくつかの実施形態による、空間化システム６００（以降、「システム６００」と称される）を図示する。システム６００は、入力音／信号を空間化することによって音景（音環境）を作成する。図６に図示されるシステム６００は、図５に図示されるシステム５００に類似するが、いくつかの点において異なり得る。システム６００では、１つ以上のデエンファシスフィルタ６３４Ａ－Ｍは、ミキサ６０６とデコーダ６１０との間にあり得る。本実施形態では、デエンファシスフィルタ６３４Ａ－Ｍの数は、デコーダ６１０内の左および右ＨＲＴＦフィルタ対の数と同一であり得る、ミキサ６０６の出力の数と同一であり得る。
【0061】
図７は、いくつかの実施形態による、空間化システム７００（以降、「システム７００」と称される）を図示する。システム７００は、入力音／信号を空間化することによって音景（音環境）を作成する。図７に図示されるシステム７００は、図５に図示されるシステム５００に類似するが、いくつかの点において異なり得る。システム７００では、１つ以上のデエンファシスフィルタ７３４Ａ１－ＮＭは、１つ以上のエンコーダ７０４Ａ－Ｎとミキサ７０６との間にあり得る。本実施形態では、デエンファシスフィルタ７３４Ａ１－ＮＭの数は、１つ以上のエンコーダ７０４Ａ－Ｎからの出力の数と同一であり得る。
【0062】
図８は、いくつかの実施形態による、空間化システム８００（以降、「システム８００」と称される）を図示する。システム８００は、プリエンファシスフィルタ８０２と、事前処理モジュール８０４と、クラスタ化反射モジュール８１４と、反響モジュール８１６と、反響パンニングモジュール８１８と、反響オクルージョンモジュール８２０と、マルチチャネル非相関フィルタバンク８２２と、バーチャライザ８２４と、デエンファシスフィルタ８２６とを含む。
【0063】
いくつかの実施形態では、フィルタ８０６、クラスタ化反射８１４、反響モジュール８１６、反響パンニングモジュール８１８、および／または反響オクルージョンモジュール８２０は、１つ以上の制御信号の１つまたは複数の値に基づいて調節されてもよい。プリエンファシスフィルタ８０２およびデエンファシスフィルタ８２６を伴わない実施形態では、瞬間的に、および／または繰り返し制御信号の値を変化させることは、音アーチファクトをもたらし得る。プリエンファシスフィルタ８０２およびデエンファシスフィルタ８２６は、上記に説明されるもの等の音アーチファクトの深刻さを低減させ得る。
【0064】
示される実施例では、プリエンファシスフィルタ８０２は、３Ｄ源信号を受信し、３Ｄ源信号をフィルタ処理し、フィルタ処理された信号を事前処理モジュール８０４に出力する。３Ｄ源信号は、例えば、図１Ａ－１Ｂ、３Ａ、および４－７に関して上記に説明される入力信号に類似し得る。プリエンファシスフィルタ８０２は、例えば、図３Ａ－３Ｂおよび４－７に関して上記に説明されるプリエンファシスフィルタに類似し得る。
【0065】
事前処理モジュール８０４は、１つ以上のフィルタ８０６と、１つ以上の事前遅延モジュール８０８と、１つ以上のパンニングモジュール８１０と、スイッチ８１２とを含む。
【0066】
プリエンファシスフィルタ８０２から受信されたフィルタ処理された信号は、１つ以上のフィルタ８０６に入力される。１つ以上のフィルタ８０６は、例えば、距離フィルタ、空気吸収フィルタ、源方向性フィルタ、オクルージョンフィルタ、妨害フィルタ、および同等物であってもよい。１つ以上のフィルタ８０６の第１のフィルタは、信号をスイッチ８１２に出力し、１つ以上のフィルタ８０６の残りのフィルタは、個別の信号を事前遅延モジュール８０８に出力する。
【0067】
スイッチ８１２は、第１のフィルタから出力される信号を受信し、信号を第１のパンニングモジュール、第２のパンニングモジュール、または両耳間時間差（ＩＴＤ）遅延モジュールに指向する。ＩＴＤ遅延モジュールは、第１の遅延信号を第３のパンニングモジュールに出力し、第２の遅延信号を第４のパンニングモジュールに出力する。
【0068】
１つ以上の事前遅延モジュール８０８は、それぞれ、個別の信号を受信し、受信された信号を遅延させ、受信された信号の遅延バージョンを出力する。第１の事前遅延モジュールは、第１の遅延信号を第５のパンニングモジュールに出力する。残りの遅延モジュールは、遅延信号を種々の反響送信バスに出力する。
【0069】
１つ以上のパンニングモジュール８１０は、それぞれ、個別の入力信号をバスにパンニングする。第１のパンニングモジュールは、信号を拡散バスにパンニングし、第２のパンニングモジュールは、信号を標準バスにパンニングし、第３のパンニングモジュールは、信号を左バスにパンニングし、第４のパンニングモジュールは、信号を右バスにパンニングし、第５のパンニングモジュールは、信号をクラスタ化反射バスにパンニングする。
【0070】
クラスタ化反射バスは、信号をクラスタ化反射モジュール８１４に出力する。クラスタ化反射モジュール８１４は、反射のクラスタを発生させ、反射のクラスタをクラスタ化反射オクルージョンモジュールに出力する。
【0071】
種々の反響送信バスは、信号を種々の反響モジュール８１６に出力する。反響モジュール８１６は、反響を発生させ、反響を種々の反響パンニングモジュール８１８に出力する。反響パンニングモジュール８１８は、反響を種々の反響オクルージョンモジュール８２０にパンニングする。反響オクルージョンモジュール８２０は、フィルタ８０６に類似するオクルージョンおよび他の性質をモデル化し、オクルージョン化されたパンニングされた反響を標準バスに出力する。
【0072】
マルチチャネル非相関フィルタバンク８２２は、拡散バスを受信し、１つ以上の非相関フィルタを適用し、例えば、フィルタバンク８２２は、非点源の音を作成するように信号を発散し、拡散された信号を標準バスに出力する。
【0073】
バーチャライザ８２４は、左バス、右バス、および標準バスを受信し、信号をデエンファシスフィルタ８２６に出力する。バーチャライザ８２４は、例えば、図１Ｂおよび５－７に関して上記に説明されるデコーダに類似し得る。デエンファシスフィルタ８２６は、例えば、図３Ａ、３Ｃ、および４－７に関して上記に説明されるデエンファシスフィルタに類似し得る。
【0074】
本開示の種々の例示的実施形態が、本明細書に説明される。これらの実施例は、非限定的意味で参照される。それらは、本開示のより広範に適用可能な側面を例証するために提供される。種々の変更が、説明される本開示に行われてもよく、本開示の真の精神および範囲から逸脱することなく、均等物が代用されてもよい。加えて、多くの修正が、特定の状況、材料、組成物、プロセス、プロセス作用、またはステップを本開示の目的、精神、または範囲に適合させるために行われてもよい。さらに、当業者によって理解されるであろうように、本明細書に説明および図示される個々の変形例はそのそれぞれ、本開示の範囲または精神から逸脱することなく、他のいくつかの実施形態のうちのいずれかの特徴から容易に分離され得るか、またはそれと組み合わせられ得る、離散コンポーネントおよび特徴を有する。全てのそのような修正は、本開示と関連付けられる請求項の範囲内であることが意図される。
【0075】
本開示は、本主題のデバイスを使用して実施され得る方法を含む。本方法は、そのような好適なデバイスを提供する行為を含んでもよい。そのような提供は、エンドユーザによって実施されてもよい。換言すると、「提供する」行為は、単に、エンドユーザが、本主題の方法において必要なデバイスを取得する、それにアクセスする、それに接近する、それを位置付ける、それを設定する、それをアクティブ化する、それに電源を入れる、または別様にそれを提供するように作用することを要求する。本明細書に列挙される方法は、論理的に可能な列挙されたイベントの任意の順序およびイベントの列挙された順序で実行されてもよい。
【0076】
本開示の例示的側面は、材料選択および製造に関する詳細とともに、上記に記載されている。本開示の他の詳細に関して、これらは、上記に参照された特許および刊行物に関連して理解され、概して、当業者によって公知である、または理解され得る。同じことが、一般的または論理的に採用されるような付加的行為の観点から、本開示の方法ベースの側面に関しても当てはまり得る。
【0077】
加えて、本開示は、随意に、種々の特徴を組み込む、いくつかの実施例を参照して説明されているが、本開示は、本開示の各変形例に関して検討されるように説明または示されるものに限定されるものではない。種々の変更が、説明される開示に行われてもよく、均等物（本明細書に列挙されるか、またはある程度の簡潔目的のために含まれないかにかかわらず）が、本開示の真の精神および範囲から逸脱することなく代用されてもよい。加えて、値の範囲が、提供される場合、その範囲の上限と下限との間の全ての介在する値および任意の他の述べられた値または述べられた範囲内の介在値が、本開示内に包含されるものと理解されたい。
【0078】
また、説明される変形例の任意の随意の特徴は、独立して、または本明細書に説明される特徴のうちの任意の１つ以上のものと組み合わせて、記載および請求され得ることが検討される。単数形項目の言及は、存在する複数の同一項目が存在する可能性を含む。より具体的には、本明細書および本明細書に関連付けられる請求項で使用されるように、単数形「ａ」、「ａｎ」、「ｓａｉｄ」、および「ｔｈｅ」は、別様に具体的に記載されない限り、複数の言及を含む。換言すると、冠詞の使用は、上記の説明および本開示と関連付けられる請求項における本主題の項目のうちの「少なくとも１つ」を可能にする。さらに、そのような請求項は、任意の随意の要素を除外するように起草され得ることに留意されたい。したがって、本文言は、請求項の要素の列挙と関連する「単に」、「のみ」、および同等物等の排他的専門用語の使用、または「消極的」限定の使用のための先行詞としての役割を果たすことが意図される。
【0079】
そのような排他的専門用語を使用しなければ、本開示と関連付けられる請求項における用語「～を備える」は、所与の数の要素がそのような請求項で列挙されるかどうかにかかわらず、任意の付加的要素の包含を可能にするものとする、または特徴の追加は、そのような請求項に記載される要素の性質を変換すると見なされ得る。本明細書で具体的に定義される場合を除いて、本明細書で使用される全ての技術および科学用語は、請求項の正当性を維持しながら、可能な限り広い一般的に理解されている意味を与えられるべきである。
【0080】
本開示の範疇は、提供される実施例および／または本明細書に限定されるものではなく、むしろ、本開示と関連付けられる請求項の用語の範囲のみによって限定されるものとする。
【図1A】
【図1B】
【図2A】
【図2B】
【図2C】
【図2D】
【図2E】
【図2F】
【図2G】
【図2H】
【図3A】
【図3B】
【図3C】
【図4】
【図5】
【図6】
【図7】
【図8】
【図9】
【図10】
【図11】
【図12】
