特表2022-519153 | 知財ポータル「IP Force」

知財求人 - 知財ポータルサイト「IP Force」

▶ オキュラス　ブイアール，エルエルシーの特許一覧

特表2022-519153頭部伝達関数へのヘッドセットの影響を補償すること

書誌要約請求の範囲詳細な説明課題実施例実施するための形態図面の説明

目に優しい文字サイズ小中大 PDF Top

< >

1A
1B
2
3
4A
4B
4C
5
6
7A
7B
8

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公表特許公報(A)

(11)【公表番号】

(43)【公表日】2022-03-22

(54)【発明の名称】頭部伝達関数へのヘッドセットの影響を補償すること

(51)【国際特許分類】

H04S 7/00 20060101AFI20220314BHJP

H04S 1/00 20060101ALI20220314BHJP

【ＦＩ】

H04S7/00 340

H04S1/00 500

【審査請求】未請求

【予備審査請求】未請求

(21)【出願番号】P 2021531108

(86)(22)【出願日】2020-01-14

(85)【翻訳文提出日】2021-07-29

(86)【国際出願番号】 US2020013539

(87)【国際公開番号】W WO2020159697

(87)【国際公開日】2020-08-06

(31)【優先権主張番号】62/798,813

(32)【優先日】2019-01-30

(33)【優先権主張国・地域又は機関】US

(31)【優先権主張番号】16/562,616

(32)【優先日】2019-09-06

(33)【優先権主張国・地域又は機関】US

(81)【指定国・地域】

(71)【出願人】

【識別番号】515046968

【氏名又は名称】フェイスブック・テクノロジーズ・リミテッド・ライアビリティ・カンパニー

【氏名又は名称原語表記】ＦＡＣＥＢＯＯＫＴＥＣＨＮＯＬＯＧＩＥＳ，ＬＬＣ

(74)【代理人】

【識別番号】110002974

【氏名又は名称】特許業務法人ＷｏｒｌｄＩＰ

(72)【発明者】

【氏名】アロン，デイヴィッドルー

(72)【発明者】

【氏名】クエバスロドリゲス，マリア

(72)【発明者】

【氏名】メーラ，ラビッシュ

(72)【発明者】

【氏名】ロビンソン，フィリップ

【テーマコード（参考）】

5D162

【Ｆターム（参考）】

5D162AA07

5D162AA09

5D162AA18

5D162BA07

5D162CA26

5D162CC19

5D162CD07

5D162CD25

5D162DA02

5D162DA04

5D162EA05

5D162EG06

(57)【要約】

オーディオシステムが、ユーザによって装着されるヘッドセットのマイクロフォンを通してテスト音のオーディオデータをキャプチャする。テスト音は外部スピーカーによって再生され、オーディオデータは、外部スピーカーに対するヘッドセットの種々の配向についてキャプチャされるオーディオデータを含む。頭部伝達関数（ＨＲＴＦ）のセットが、ヘッドセットの種々の配向におけるテスト音のオーディオデータに少なくとも部分的に基づいて算出される。ＨＲＴＦの中間セットを作成するために、ＨＲＴＦのセットの一部分が廃棄される。ヘッドセットを装着することに部分的に基づく１つまたは複数のひずみ領域に対応する廃棄される部分。ユーザについてのＨＲＴＦの個別化されたセットを作成するために、ＨＲＴＦの中間セットのうちの少なくとも一部を使用して、廃棄される部分に対応する１つまたは複数のＨＲＴＦが生成される。
【選択図】図６

【特許請求の範囲】

【請求項1】

ユーザによって装着されるヘッドセットのマイクロフォンを通してテスト音のオーディオデータをキャプチャすることであって、前記テスト音が外部スピーカーによって再生され、前記オーディオデータが、前記外部スピーカーに対する前記ヘッドセットの種々の配向についてキャプチャされるオーディオデータを含む、オーディオデータをキャプチャすることと、
前記ヘッドセットの前記種々の配向における前記テスト音の前記オーディオデータに少なくとも部分的に基づいて、頭部伝達関数（ＨＲＴＦ：ｈｅａｄ－ｒｅｌａｔｅｄｔｒａｎｓｆｅｒｆｕｎｃｔｉｏｎ）のセットを算出することであって、ＨＲＴＦのセットが、前記ヘッドセットを装着している間のユーザに対して個別化される、頭部伝達関数（ＨＲＴＦ）のセットを算出することと、
ＨＲＴＦの中間セットを作成するためにＨＲＴＦの前記セットの一部分を廃棄することであって、前記廃棄される部分が、前記ヘッドセットを装着することに部分的に基づく１つまたは複数のひずみ領域に対応する、ＨＲＴＦの前記セットの一部分を廃棄することと、
前記ユーザについてのＨＲＴＦの個別化されたセットを作成するために、ＨＲＴＦの前記中間セットのうちの少なくとも一部を使用して、前記廃棄される部分に対応する１つまたは複数のＨＲＴＦを生成することと
を含む、方法。

【請求項2】

前記廃棄される部分が、前記１つまたは複数のひずみ領域を識別するひずみマッピングを使用して決定され、前記ひずみマッピングが、テストヘッドセットを装着している少なくとも１つのテストユーザに関して測定されるＨＲＴＦのセットと、前記テストヘッドセットを装着していない前記少なくとも１つのテストユーザに関して測定されるＨＲＴＦのセットとの間の比較に部分的に基づく、請求項１に記載の方法。

【請求項3】

前記廃棄される部分は、前記外部スピーカーからの音が前記ユーザの耳道に達するより前に前記ヘッドセットに入射した、前記ヘッドセットの配向に対応する少なくとも一部のＨＲＴＦを含む、請求項１に記載の方法。

【請求項4】

ＨＲＴＦの前記中間セットのうちの少なくとも一部を使用して、前記廃棄される部分に対応する前記１つまたは複数のＨＲＴＦを前記生成することが、
前記廃棄される部分に対応する前記１つまたは複数のＨＲＴＦを生成するためにＨＲＴＦの前記中間セットのうちの少なくとも一部を補間すること
を含む、請求項１に記載の方法。

【請求項5】

前記外部スピーカーに対する前記ヘッドセットの種々の配向について前記オーディオデータをキャプチャすることは、
仮想空間の座標においてインジケータを生成することであって、前記インジケータが、外部スピーカーに対する、前記ユーザによって装着される前記ヘッドセットの特定の配向に対応する、インジケータを生成することと、
前記ヘッドセットのディスプレイ上に、前記仮想空間中の前記座標の前記インジケータを提示することと、
前記外部スピーカーに対する前記ヘッドセットの第１の配向が前記特定の配向であると決定することと、
前記ヘッドセットが前記第１の配向にある間にテスト音を再生するように前記外部スピーカーに命令することと、
前記マイクロフォンから前記オーディオデータを取得することと
をさらに含む、請求項１に記載の方法。

【請求項6】

ＨＲＴＦシステムにＨＲＴＦの前記個別化されたセットをアップロードすることであって、前記ＨＲＴＦシステムが、テストヘッドセットを装着している少なくとも１つのテストユーザに関して測定されるＨＲＴＦのセットと、前記テストヘッドセットを装着していない前記少なくとも１つのテストユーザに関して測定されるＨＲＴＦのセットとの間の比較から生成されるひずみマッピングを更新するために、ＨＲＴＦの前記個別化されたセットのうちの少なくとも一部を使用する、ＨＲＴＦの前記個別化されたセットをアップロードすること
をさらに含む、請求項１に記載の方法。

【請求項7】

実行可能コンピュータプログラム命令を記憶する非一時的コンピュータ可読記憶媒体であって、前記命令は、
ユーザによって装着されるヘッドセットのマイクロフォンを通してテスト音のオーディオデータをキャプチャすることであって、前記テスト音が外部スピーカーによって再生され、前記オーディオデータが、前記外部スピーカーに対する前記ヘッドセットの種々の配向についてキャプチャされるオーディオデータを含む、オーディオデータをキャプチャすることと、
前記ヘッドセットの前記種々の配向における前記テスト音の前記オーディオデータに少なくとも部分的に基づいて、頭部伝達関数（ＨＲＴＦ）のセットを算出することであって、ＨＲＴＦの前記セットが、前記ヘッドセットを装着している間のユーザに対して個別化される、頭部伝達関数（ＨＲＴＦ）のセットを算出することと、
ＨＲＴＦの中間セットを作成するためにＨＲＴＦの前記セットの一部分を廃棄することであって、前記廃棄される部分が、前記ヘッドセットを装着することに部分的に基づく１つまたは複数のひずみ領域に対応する、ＨＲＴＦの前記セットの一部分を廃棄することと、
前記ユーザについてのＨＲＴＦの個別化されたセットを作成するために、ＨＲＴＦの前記中間セットのうちの少なくとも一部を使用して、前記廃棄される部分に対応する１つまたは複数のＨＲＴＦを生成することと
を含むステップを実施するために実行可能である、非一時的コンピュータ可読記憶媒体。

【請求項8】

【請求項9】

前記廃棄される部分は、前記外部スピーカーからの音が前記ユーザの耳道に達するより前に前記ヘッドセットに入射した、前記ヘッドセットの配向に対応する少なくとも一部のＨＲＴＦを含む、請求項７に記載の非一時的コンピュータ可読記憶媒体。

【請求項10】

ＨＲＴＦの前記中間セットのうちの少なくとも一部を使用して、前記廃棄される部分に対応する前記１つまたは複数のＨＲＴＦを前記生成することが、
前記廃棄される部分に対応する前記１つまたは複数のＨＲＴＦを生成するためにＨＲＴＦの前記中間セットのうちの少なくとも一部を補間すること
を含む、請求項７に記載の非一時的コンピュータ可読記憶媒体。

【請求項11】

前記外部スピーカーに対する前記ヘッドセットの種々の配向について前記オーディオデータをキャプチャすることは、
仮想空間の座標においてインジケータを生成することであって、前記インジケータが、外部スピーカーに対する、前記ユーザによって装着されるヘッドセットの特定の配向に対応する、インジケータを生成することと、
前記ヘッドセットのディスプレイ上に、前記仮想空間中の前記座標の前記インジケータを提示することと、
前記外部スピーカーに対する前記ヘッドセットの第１の配向が前記特定の配向であると決定することと、
前記ヘッドセットが前記第１の配向にある間にテスト音を再生するように前記外部スピーカーに命令することと、
前記マイクロフォンから前記オーディオデータを取得することと
をさらに含む、請求項７に記載の非一時的コンピュータ可読記憶媒体。

【請求項12】

【請求項13】

１つまたは複数のテスト音を再生するように構成された外部スピーカーと、
前記１つまたは複数のテスト音のオーディオデータをキャプチャするように構成されたマイクロフォンアセンブリと、
ユーザによって装着されるように構成され、オーディオコントローラを備えるヘッドセットと
を備えるシステムであって、前記オーディオコントローラは、
前記テスト音の前記オーディオデータと前記ヘッドセットの複数の異なる配向とに少なくとも部分的に基づいて、頭部伝達関数（ＨＲＴＦ）のセットを算出することであって、ＨＲＴＦの前記セットが、前記ヘッドセットを装着している間のユーザに対して個別化される、頭部伝達関数（ＨＲＴＦ）のセットを算出することと、
ＨＲＴＦの中間セットを作成するためにＨＲＴＦの前記セットの一部分を廃棄することであって、前記部分が、前記ヘッドセットを装着することに部分的に基づく１つまたは複数のひずみ領域に対応する、ＨＲＴＦの前記セットの一部分を廃棄することと、
前記ユーザについてのＨＲＴＦの個別化されたセットを作成するために、ＨＲＴＦの前記中間セットのうちの少なくとも一部を使用して、前記廃棄される部分に対応する１つまたは複数のＨＲＴＦを生成することと
を行うように構成された、システム。

【請求項14】

【請求項15】

前記廃棄される部分は、前記外部スピーカーからの音が前記ユーザの耳道に達するより前に前記ヘッドセットに入射した、前記ヘッドセットの配向に対応する少なくとも一部のＨＲＴＦを含む、請求項１３に記載のシステム。

【発明の詳細な説明】

【技術分野】

【0001】

関連出願の相互参照
本出願は、その全体が参照により本明細書に組み込まれる、２０１９年１月３０日に出願された米国仮出願第６２／７９８，８１３号および２０１９年９月６日に出願された米国非仮出願第１６／５６２，６１６号の利益および優先権を主張する。

【0002】

本開示は、一般に頭部伝達関数（ＨＲＴＦ：ｈｅａｄ－ｒｅｌａｔｅｄｔｒａｎｓｆｅｒｆｕｎｃｔｉｏｎ）に関し、詳細には、ＨＲＴＦへのヘッドセットの影響を補償することに関する。

【背景技術】

【0003】

従来、人に対する多くの（たとえば、典型的には１００超の）異なるソースロケーションについて、頭部伝達関数（ＨＲＴＦ）が、消音室（ｓｏｕｎｄｄａｍｐｅｎｉｎｇｃｈａｍｂｅｒ）において決定される。決定されたＨＲＴＦは、次いで、空間化されたオーディオコンテンツを人に提供するために使用され得る。その上、誤差を低減するために、各ソースロケーション（すなわち、各スピーカーが複数の個別音を生成している）について複数のＨＲＴＦを決定することは、一般的である。したがって、オーディオコンテンツの高品質空間化の場合、多くの異なるスピーカーロケーションについて決定される複数のＨＲＴＦがあるとき、ＨＲＴＦを決定するのに比較的長い時間（たとえば、１時間超）がかかる。さらに、良質のサラウンド音のために十分なＨＲＴＦを測定するためのインフラストラクチャは、かなり複雑である（たとえば、消音室、１つまたは複数のスピーカーアレイなど）。したがって、ＨＲＴＦを取得するための従来の手法は、必要とされるハードウェアリソースおよび／または時間に関して非効率的である。

【発明の概要】

【0004】

実施形態は、ユーザについてのＨＲＴＦの個別化されたセットを取得するためのシステムおよび方法に関する。一実施形態では、ＨＲＴＦシステムはひずみ領域のセットを決定し、ひずみ領域は、ヘッドセットの存在によって音が一般的にひずませられる部分ＨＲＴＦである。ＨＲＴＦシステムは、ヘッドセットを着けているテストユーザと、ヘッドセットを外しているテストユーザの両方の母集団についてのオーディオテストデータをキャプチャする。オーディオテストデータは、ＨＲＴＦのセットを決定するために使用される。テストユーザの母集団について、ヘッドセットを着けているテストユーザのＨＲＴＦのセットとヘッドセットを着けていないテストユーザのＨＲＴＦのセットとを分析し、比較することは、テストユーザの母集団について一般的であるひずんだＨＲＴＦの周波数依存領域および方向的依存領域を決定する。

【0005】

人工現実システムのオーディオシステムは、ひずみ領域をなくすことによってＨＲＴＦのセットのひずみを補償する。ユーザは、ユーザの耳道中の音をキャプチャするための手段（すなわち、マイクロフォン）を装備したヘッドセットを装着する。オーディオシステムは、外部スピーカーを通してテスト音を再生し、外部スピーカーに対する種々の方向的配向についてユーザの耳の中でテスト音がどのようにキャプチャされるかのオーディオデータを記録する。各測定された方向について、初期ＨＲＴＦが算出され、これは、ＨＲＴＦの初期セットを形成する。ひずみ領域に対応するＨＲＴＦの初期セットの部分は、廃棄される。廃棄された領域は、ヘッドセットひずみを補償するＨＲＴＦの個別化されたセットを算出するために補間される。

【0006】

上記で説明された問題は、以下の請求項のうちの少なくとも１つに従って、本発明によって解決される。

【0007】

本発明のいくつかの実装形態によれば、方法は、ユーザによって装着されるヘッドセットのマイクロフォンを通してテスト音のオーディオデータをキャプチャするステップであって、前記テスト音が外部スピーカーによって再生され、前記オーディオデータが、前記外部スピーカーに対する前記ヘッドセットの種々の配向についてキャプチャされるオーディオデータを含む、オーディオデータをキャプチャするステップと、前記ヘッドセットの種々の配向におけるテスト音の前記オーディオデータに少なくとも部分的に基づいて、頭部伝達関数（ＨＲＴＦ）のセットを算出するステップであって、ＨＲＴＦの前記セットが、前記ヘッドセットを装着している間のユーザに対して個別化される、頭部伝達関数（ＨＲＴＦ）のセットを算出するステップと、ＨＲＴＦの中間セットを作成するためにＨＲＴＦの前記セットの一部分を廃棄するステップであって、前記廃棄される部分が、前記ヘッドセットを装着することに部分的に基づく１つまたは複数のひずみ領域に対応する、ＨＲＴＦの前記セットの一部分を廃棄するステップと、前記ユーザについてのＨＲＴＦの個別化されたセットを作成するために、ＨＲＴＦの前記中間セットのうちの少なくとも一部を使用して、前記廃棄される部分に対応する１つまたは複数のＨＲＴＦを生成するステップとを含む。

【0008】

本発明の１つの可能な実装形態によれば、前記廃棄される部分は、前記１つまたは複数のひずみ領域を識別するひずみマッピングを使用して決定され、前記ひずみマッピングは、テストヘッドセットを装着している少なくとも１つのテストユーザに関して測定されるＨＲＴＦのセットと、前記テストヘッドセットを装着していない前記少なくとも１つのテストユーザに関して測定されるＨＲＴＦのセットとの間の比較に部分的に基づく。

【0009】

本発明の１つの可能な実装形態によれば、前記ひずみマッピングは、異なる物理的特性に各々関連する複数のひずみマッピングのうちの１つであり、前記方法は、前記ユーザの特性に基づくクエリを生成することであって、前記クエリが、前記ひずみマッピングに関連する特性に対応する前記ユーザの前記特性に基づいて前記ひずみマッピングを識別するために使用される、クエリを生成することをさらに含む。

【0010】

本発明の１つの可能な実装形態によれば、前記廃棄される部分は、前記外部スピーカーからの音が前記ユーザの耳道に達するより前に前記ヘッドセットに入射した、前記ヘッドセットの配向に対応する少なくとも一部のＨＲＴＦを含む。

【0011】

本発明の１つの可能な実装形態によれば、ＨＲＴＦの前記中間セットのうちの少なくとも一部を使用して、前記廃棄される部分に対応する前記１つまたは複数のＨＲＴＦを生成する前記ステップは、前記廃棄される部分に対応する前記１つまたは複数のＨＲＴＦを生成するためにＨＲＴＦの前記中間セットのうちの少なくとも一部を補間することを含む。

【0012】

本発明の１つの可能な実装形態によれば、前記外部スピーカーに対する前記ヘッドセットの種々の配向について前記オーディオデータをキャプチャする前記ステップは、仮想空間の座標においてインジケータを生成することであって、前記インジケータが、外部スピーカーに対する、前記ユーザによって装着される前記ヘッドセットの特定の配向に対応する、インジケータを生成することと、前記ヘッドセットのディスプレイ上に、前記仮想空間中の前記座標の前記インジケータを提示することと、前記外部スピーカーに対する前記ヘッドセットの第１の配向が特定の配向であると決定することと、前記ヘッドセットが第１の配向にある間にテスト音を再生するように前記外部スピーカーに命令することと、前記マイクロフォンから前記オーディオデータを取得することとをさらに含む。

【0013】

本発明の１つの可能な実装形態によれば、前記方法は、ＨＲＴＦシステムにＨＲＴＦの前記個別化されたセットをアップロードするステップであって、前記ＨＲＴＦシステムが、テストヘッドセットを装着している少なくとも１つのテストユーザに関して測定されるＨＲＴＦのセットと、前記テストヘッドセットを装着していない前記少なくとも１つのテストユーザに関して測定されるＨＲＴＦのセットとの間の比較から生成されるひずみマッピングを更新するために、ＨＲＴＦの前記個別化されたセットのうちの少なくとも一部を使用する、ＨＲＴＦの前記個別化されたセットをアップロードするステップをさらに含む。

【0014】

本発明のいくつかの実装形態によれば、実行可能コンピュータプログラム命令を記憶する非一時的コンピュータ可読記憶媒体であって、前記命令は、ユーザによって装着されるヘッドセットのマイクロフォンを通してテスト音のオーディオデータをキャプチャするステップであって、前記テスト音が外部スピーカーによって再生され、前記オーディオデータが、前記外部スピーカーに対する前記ヘッドセットの種々の配向についてキャプチャされるオーディオデータを含む、オーディオデータをキャプチャするステップと、前記ヘッドセットの前記種々の配向における前記テスト音の前記オーディオデータに少なくとも部分的に基づいて、頭部伝達関数（ＨＲＴＦ）のセットを算出するステップであって、ＨＲＴＦのセットが、前記ヘッドセットを装着している間のユーザに対して個別化される、頭部伝達関数（ＨＲＴＦ）のセットを算出するステップと、ＨＲＴＦの中間セットを作成するためにＨＲＴＦのセットの一部分を廃棄するステップであって、前記廃棄される部分が、前記ヘッドセットを装着することに部分的に基づく１つまたは複数のひずみ領域に対応する、ＨＲＴＦのセットの一部分を廃棄するステップと、前記ユーザについてのＨＲＴＦの個別化されたセットを作成するために、ＨＲＴＦの前記中間セットのうちの少なくとも一部を使用して、前記廃棄される部分に対応する１つまたは複数のＨＲＴＦを生成するステップとを含むステップを実施するために実行可能である、非一時的コンピュータ可読記憶媒体。

【0015】

【0016】

本発明の１つの可能な実装形態によれば、前記ひずみマッピングは、異なる物理的特性に各々関連する複数のひずみマッピングのうちの１つであり、方法は、前記ユーザの特性に基づくクエリを生成することであって、前記クエリが、前記ひずみマッピングに関連する特性に対応する前記ユーザの前記特性に基づいて前記ひずみマッピングを識別するために使用される、クエリを生成することをさらに含む。

【0017】

【0018】

【0019】

本発明の１つの可能な実装形態によれば、前記外部スピーカーに対する前記ヘッドセットの種々の配向について前記オーディオデータをキャプチャする前記ステップは、仮想空間の座標においてインジケータを生成することであって、前記インジケータが、外部スピーカーに対する、前記ユーザによって装着されるヘッドセットの特定の配向に対応する、インジケータを生成することと、前記ヘッドセットのディスプレイ上に、前記仮想空間中の前記座標の前記インジケータを提示することと、前記外部スピーカーに対する前記ヘッドセットの第１の配向が特定の配向であると決定することと、前記ヘッドセットが第１の配向にある間にテスト音を再生するように前記外部スピーカーに命令することと、前記マイクロフォンから前記オーディオデータを取得することとをさらに含む。

【0020】

本発明の１つの可能な実装形態によれば、前記命令は、ＨＲＴＦシステムにＨＲＴＦの前記個別化されたセットをアップロードするステップであって、前記ＨＲＴＦシステムが、テストヘッドセットを装着している少なくとも１つのテストユーザに関して測定されるＨＲＴＦのセットと、前記テストヘッドセットを装着していない前記少なくとも１つのテストユーザに関して測定されるＨＲＴＦのセットとの間の比較から生成されるひずみマッピングを更新するために、ＨＲＴＦの前記個別化されたセットのうちの少なくとも一部を使用する、ＨＲＴＦの前記個別化されたセットをアップロードするステップをさらに含む。

【0021】

本発明のいくつかの実装形態によれば、１つまたは複数のテスト音を再生するように構成された外部スピーカーと、１つまたは複数のテスト音のオーディオデータをキャプチャするように構成されたマイクロフォンアセンブリと、ユーザによって装着されるように構成され、オーディオコントローラを備えるヘッドセットとを備えるシステムであって、オーディオコントローラは、前記テスト音の前記オーディオデータと前記ヘッドセットの複数の異なる配向とに少なくとも部分的に基づいて、頭部伝達関数（ＨＲＴＦ）のセットを算出することであって、ＨＲＴＦのセットが、前記ヘッドセットを装着している間のユーザに対して個別化される、頭部伝達関数（ＨＲＴＦ）のセットを算出することと、ＨＲＴＦの中間セットを作成するためにＨＲＴＦのセットの一部分を廃棄することであって、その部分が、前記ヘッドセットを装着することに部分的に基づく１つまたは複数のひずみ領域に対応する、ＨＲＴＦのセットの一部分を廃棄することと、前記ユーザについてのＨＲＴＦの個別化されたセットを作成するために、ＨＲＴＦの前記中間セットのうちの少なくとも一部を使用して、前記廃棄される部分に対応する１つまたは複数のＨＲＴＦを生成することとを行うように構成された、システム。

【0022】

【0023】

本発明の１つの可能な実装形態によれば、前記ひずみマッピングは、異なる物理的特性に各々関連する複数のひずみマッピングのうちの１つであり、前記ヘッドセットのオーディオシステムは、サーバに、前記ユーザの特性に基づくクエリを送ることであって、前記クエリが、前記ひずみマッピングに関連する特性に対応する前記ユーザの前記特性に基づいて前記ひずみマッピングを識別するために使用される、クエリを送ることと、前記サーバから、前記ひずみマッピングを受信することとを行うようにさらに構成される。

【0024】

【0025】

本発明の１つの可能な実装形態によれば、前記オーディオコントローラが、ＨＲＴＦの前記中間セットのうちの少なくとも一部を使用して、前記廃棄される部分に対応する前記１つまたは複数のＨＲＴＦを生成することは、前記廃棄される部分に対応する前記１つまたは複数のＨＲＴＦを生成するためにＨＲＴＦの前記中間セットのうちの少なくとも一部を補間することを含む。

【0026】

本発明の１つの可能な実装形態によれば、前記ヘッドセットは、仮想空間の座標においてインジケータを生成することであって、前記インジケータが、外部スピーカーに対する、前記ユーザによって装着されるヘッドセットの特定の配向に対応する、インジケータを生成することと、前記ヘッドセットのディスプレイ上に、前記仮想空間中の前記座標の前記インジケータを提示することと、前記外部スピーカーに対する前記ヘッドセットの第１の配向が前記特定の配向であると決定することと、前記ヘッドセットが前記第１の配向にある間にテスト音を再生するように前記外部スピーカーに命令することと、前記マイクロフォンから前記オーディオデータを取得することとを行うようにさらに構成される。

【図面の簡単な説明】

【0027】

【図1A】１つまたは複数の実施形態による、ヘッドセットを装着しているテストユーザに関連するオーディオデータを取得するための音測定システム（ＳＭＳ）の図である。

【図1B】１つまたは複数の実施形態による、ヘッドセットを装着していないテストユーザに関連するオーディオデータを取得するように構成された図１ＡのＳＭＳの図である。

【図2】１つまたは複数の実施形態による、ＨＲＴＦシステムのブロック図である。

【図3】１つまたは複数の実施形態による、ひずみ領域のセットを決定するためのプロセスを示すフローチャートである。

【図4A】１つまたは複数の実施形態による、外部スピーカーと生成された仮想空間とを使用して、ヘッドセットを装着しているユーザに関連するオーディオデータを取得するための例示的な人工現実システムの図である。

【図4B】１つまたは複数の実施形態による、整合プロンプトとインジケータとがヘッドセットによって表示され、ユーザの頭部が正しい配向にない、ディスプレイの図である。

【図4C】１つまたは複数の実施形態による、ユーザの頭部が正しい配向にある、図４Ｂのディスプレイの図である。

【図5】１つまたは複数の実施形態による、ユーザについての個別化されたＨＲＴＦを決定するためのシステムのシステム環境のブロック図である。

【図6】１つまたは複数の実施形態による、ユーザについての個別化されたＨＲＴＦのセットを取得するプロセスを示すフローチャートである。

【図7A】１つまたは複数の実施形態による、アイウェアデバイスとして実装されるヘッドセットの斜視図である。

【図7B】１つまたは複数の実施形態による、ＨＭＤとして実装されるヘッドセットの斜視図である。

【図8】１つまたは複数の実施形態による、ヘッドセットとコンソールとを含むシステム環境のブロック図である。

【0028】

図は、単に説明の目的で本開示の実施形態を示す。本明細書で説明される開示の原理またはうたわれている利益から逸脱することなく、本明細書で示される構造および方法の代替実施形態が採用され得ることを、当業者は以下の説明から容易に認識されよう。

【発明を実施するための形態】

【0029】

本開示の実施形態は、人工現実システムを含むか、または人工現実システムとともに実装され得る。人工現実は、ユーザへの提示の前に何らかの様式で調整された形式の現実であり、これは、たとえば、仮想現実（ＶＲ）、拡張現実（ＡＲ）、複合現実（ＭＲ）、ハイブリッド現実、あるいはそれらの何らかの組合せおよび／または派生物を含み得る。人工現実コンテンツは、完全に生成されたコンテンツ、またはキャプチャされた（たとえば、現実世界の）コンテンツと組み合わせられた生成されたコンテンツを含み得る。人工現実コンテンツは、ビデオ、オーディオ、触覚フィードバック、またはそれらの何らかの組合せを含み得、それらのいずれも、単一のチャネルまたは複数のチャネルにおいて提示され得る（観察者に３次元効果をもたらすステレオビデオなど）。さらに、いくつかの実施形態では、人工現実は、たとえば、人工現実におけるコンテンツを作成するために使用される、および／または人工現実において別様に使用される（たとえば、人工現実におけるアクティビティを実施する）アプリケーション、製品、アクセサリ、サービス、またはそれらの何らかの組合せにも関連付けられ得る。人工現実コンテンツを提供する人工現実システムは、ヘッドセット、ホストコンピュータシステムに接続されたヘッドセット、独立型ヘッドセット、モバイルデバイスまたはコンピューティングシステム、あるいは、１人または複数の観察者に人工現実コンテンツを提供することが可能な任意の他のハードウェアプラットフォームを含む、様々なプラットフォーム上に実装され得る。

【0030】

概観
本明細書のＨＲＴＦシステムは、ヘッドセットの存在によってひずませられるＨＲＴＦの一般的な部分を決定するためにオーディオテストデータを収集するために使用される。ＨＲＴＦシステムは、ヘッドセットを装着しているテストユーザと、ヘッドセットを着けていないテストユーザの両方に関して、音響室（ａｃｏｕｓｔｉｃｃｈａｍｂｅｒ）中でテストユーザの耳道においてオーディオテストデータをキャプチャする。オーディオテストデータは、個別化されたＨＲＴＦへのヘッドセットの存在の影響を決定するために分析され、比較される。オーディオテストデータは、テストユーザの母集団について収集され、ＨＲＴＦがヘッドセットの存在によって一般的にひずませられるひずみ領域のセットを決定するために使用される。

【0031】

ヘッドセットのオーディオシステムは、ＨＲＴＦへのヘッドセットの影響を補償する個別化されたＨＲＴＦのセットをユーザについて算出するために、ＨＲＴＦシステムからの情報を使用する。ユーザはヘッドセットを装着し、オーディオシステムは、外部スピーカーから発せられるテスト音のオーディオデータをキャプチャする。外部スピーカーは、たとえば、ヘッドセットおよびオーディオシステムとは物理的に別個であり得る。オーディオシステムは、ヘッドセットの種々の配向におけるテスト音のオーディオデータに少なくとも部分的に基づいて、初期ＨＲＴＦのセットを算出する。オーディオシステムは、ＨＲＴＦの中間セットを作成するために初期ＨＲＴＦのセットの（ＨＲＴＦサーバによって決定されたひずみ領域のうちの少なくともいくつかに部分的に基づく）一部分を廃棄する。ＨＲＴＦの中間セットは、ＨＲＴＦのセットのうちの廃棄されていないＨＲＴＦから形成される。ＨＲＴＦのセットのうちの廃棄される部分は、ヘッドセットの存在によって引き起こされる１つまたは複数のひずみ領域に対応する。オーディオシステムは、セットの廃棄される部分に対応する１つまたは複数のＨＲＴＦを（たとえば、補間を介して）生成し、その１つまたは複数のＨＲＴＦは、ユーザについての個別化されたＨＲＴＦのセットを作成するために、ＨＲＴＦの中間セットのうちの少なくとも一部と組み合わせられる。個別化されたＨＲＴＦのセットは、ヘッドセットを装着することによって引き起こされるＨＲＴＦの誤差が緩和されるようにユーザに対してカスタマイズされ、それにより、ヘッドセットを着けていないユーザの実際のＨＲＴＦを模倣する。オーディオシステムは、空間化されたオーディオコンテンツをユーザに提示するために、個別化されたＨＲＴＦのセットを使用し得る。空間化されたオーディオコンテンツは、それが３次元空間中の特定のポイントに配置されたかのように提示され得るオーディオである。たとえば、仮想環境中で、ヘッドセットによって表示されている仮想オブジェクトに関連するオーディオは、その仮想オブジェクトから発生しているように思われ得る。

【0032】

このようにして、オーディオシステムは効果的に、ユーザがヘッドセットを装着していても、ユーザについてのＨＲＴＦの個別化されたセットを生成することが可能であることに留意されたい。これは、カスタマイズされた消音室中でユーザの実際のＨＲＴＦを測定する従来の方法よりもはるかに速く、容易で、安価である。

【0033】

例示的なひずみマッピングシステム
図１Ａは、１つまたは複数の実施形態による、ヘッドセット１２０を装着しているテストユーザ１１０に関連するオーディオテストデータを取得するための音測定システム（ＳＭＳ）１００の図である。音測定システム１００は、（たとえば、図２に関して以下で説明されるような）ＨＲＴＦシステムの一部である。ＳＭＳ１００は、スピーカーアレイ１３０と、バイノーラルマイクロフォン１４０ａ、１４０ｂとを含む。図示の実施形態では、テストユーザ１１０は、（たとえば、図７Ａおよび図７Ｂに関してより詳細に説明されるような）ヘッドセット１２０を装着している。ヘッドセット１１０は、テストヘッドセットと呼ばれることがある。ＳＭＳ１００は、テストユーザ１１０についてのＨＲＴＦのセットを決定するためにオーディオテストデータを測定するために使用される。ＳＭＳ１００は、音響的に処理された室（ａｃｏｕｓｔｉｃａｌｌｙｔｒｅａｔｅｄｃｈａｍｂｅｒ）中に格納される。特定の一実施形態では、ＳＭＳ１００は、約５００ヘルツ（Ｈｚ）の周波数まで無響である。

【0034】

いくつかの実施形態では、テストユーザ１１０は人間である。これらの実施形態では、多数の異なる人々についてのオーディオテストデータを収集することが有用である。人々は、異なる年齢、異なるサイズ、異なる性別の人々である、異なる毛の長さを有する、などであり得る。このようにして、オーディオテストデータは、大きい母集団にわたって収集され得る。他の実施形態では、テストユーザ１１０はマネキンである。マネキンは、たとえば、平均的な人を表す身体的特徴（たとえば、耳の形状、サイズなど）を有し得る。

【0035】

スピーカーアレイ１３０は、ＳＭＳ１００のコントローラからの命令に従ってテスト音を発する。テスト音は、ＨＲＴＦを決定するために使用され得るスピーカーによって送信される可聴信号である。テスト音は、送信の周波数、ボリューム、および長さなど、１つまたは複数の指定された特性を有し得る。テスト音は、たとえば、一定の周波数における連続正弦波、チャープ（ｃｈｉｒｐ）、何らかの他のオーディオコンテンツ（たとえば、音楽）、またはそれらの何らかの組合せを含み得る。チャープは、時間期間の間、周波数が上方または下方へスイープされる信号である。スピーカーアレイ１３０は、ターゲットエリアに音を投影するために配置される、スピーカー１５０を含む複数のスピーカーを備える。ターゲットエリアは、ＳＭＳ１００の動作中にテストユーザ１１０が位置する場所である。複数のスピーカーの各スピーカーは、ターゲットエリア中のテストユーザ１１０に対する異なるロケーション中にある。スピーカーアレイ１３０は図１ａおよび図１ｂにおいて２次元で示されているが、スピーカーアレイ１３０は他のロケーションおよび／または次元における（たとえば、３次元に広がる）スピーカーを含むこともできることに留意されたい。いくつかの実施形態では、スピーカーアレイ１３０中のスピーカーは、各スピーカー１５０間の９°～１０°の間隔で、－６６°～＋８５°の仰角で広がって配置され、完全な球体の周りで方位角の１０°ごとで広がる。すなわち、３６個の方位角および１７個の仰角が、テストユーザ１１０に関してスピーカー１５０の合計６１２個の異なる角度を作成する。いくつかの実施形態では、スピーカーアレイ１３０の１つまたは複数のスピーカーは、ターゲットエリアに対するそれらの位置を（たとえば、方位角および／または仰角において）動的に変更し得る。上記の説明において、テストユーザ１１０は静止している（すなわち、ターゲットエリア内の耳の位置は実質的に不変のままである）ことに留意されたい。

【0036】

バイノーラルマイクロフォン１４０ａ、１４０ｂ（「１４０」と総称される）は、スピーカーアレイ１３０によって発せられたテスト音をキャプチャする。キャプチャされたテスト音は、オーディオテストデータと呼ばれる。バイノーラルマイクロフォン１４０は、各々、テストユーザの耳道中に置かれる。図示のように、バイノーラルマイクロフォン１４０ａはユーザの右耳の耳道中に置かれ、マイクロフォン１４０ｂはユーザの左耳の耳道中に置かれる。いくつかの実施形態では、マイクロフォン１４０は、テストユーザ１１０によって装着されるフォームイヤプラグ中に組み込まれる。図２に関して以下で詳細に説明されるように、オーディオテストデータは、ＨＲＴＦのセットを決定するために使用され得る。たとえば、スピーカーアレイ１３０のスピーカー１５０によって発せられたテスト音は、オーディオテストデータとしてバイノーラルマイクロフォン１４０によってキャプチャされる。スピーカー１５０は、テストユーザ１１０の耳に対する特定のロケーションを有し、したがって、関連するオーディオテストデータを使用して決定され得る各耳のための特定のＨＲＴＦがある。

【0037】

図１Ｂは、１つまたは複数の実施形態による、ヘッドセットを装着していないテストユーザ１１０に関連するオーディオテストデータを取得するように構成された図１ＡのＳＭＳ１００の図である。図示の実施形態では、ＳＭＳ１００は、図１Ｂ中のテストユーザ１１０がヘッドセットを装着していないことを除いて、図１Ａに関して上記で説明された同じやり方でオーディオテストデータを収集する。したがって、収集されたオーディオテストデータは、ヘッドセット１４０を装着することによって導入されるひずみを含まないテストユーザ１１０の実際のＨＲＴＦを決定するために使用され得る。

【0038】

図２は、１つまたは複数の実施形態による、ＨＲＴＦシステム２００のブロック図である。ＨＲＴＦシステム２００は、オーディオテストデータをキャプチャし、ヘッドセットによって一般的にひずませられるＨＲＴＦの部分を決定する。ＨＲＴＦシステム２００は、音測定システム２１０とシステムコントローラ２４０とを含む。いくつかの実施形態では、システムコントローラ２４０の機能の一部または全部がＳＭＳ２１０によって共有されおよび／または実施され得る。

【0039】

ＳＭＳ２１０は、ひずみ領域のマッピングを決定するためにＨＲＴＦシステム２００によって使用されるべきオーディオテストデータをキャプチャする。特に、ＳＭＳ２１０は、テストユーザのＨＲＴＦを決定するために使用されるオーディオテストデータをキャプチャするために使用される。ＳＭＳ２１０は、スピーカーアレイ２２０とマイクロフォン２３０とを含む。いくつかの実施形態では、ＳＭＳ２１０は、図１Ａおよび図１Ｂに関して説明されたＳＭＳ１００である。キャプチャされたオーディオデータは、ＨＲＴＦデータストア２４５に記憶される。

【0040】

スピーカーアレイ２２０は、システムコントローラ２４０からの命令に従ってテスト音を発する。スピーカーアレイ１３０によって送信されたテスト音は、たとえば、チャープ（時間期間の間、周波数が上方または下方へスイープされる信号）、ＨＲＴＦ決定のために使用され得る何らかの他のオーディオ信号、またはそれらの何らかの組合せを含み得る。スピーカーアレイ２２０は、ターゲットエリア（すなわち、テストユーザが位置するロケーション）に音を投影するために配置される１つまたは複数のスピーカーを備える。いくつかの実施形態では、スピーカーアレイ２２０は複数のスピーカーを含み、複数のスピーカーの各スピーカーは、ターゲットエリア中のテストユーザに対する異なるロケーション中にある。いくつかの実施形態では、複数のスピーカーのうちの１つまたは複数のスピーカーは、ターゲットエリアに対するそれらの位置を（たとえば、方位角および／または仰角において）動的に変更し得る。いくつかの実施形態では、複数のスピーカーのうちの１つまたは複数のスピーカーは、テストユーザの頭部を回転するようにテストユーザに命令することによって、テストユーザに対するそれらの位置を（たとえば、方位角および／または仰角において）変更し得る。スピーカーアレイ１３０は、スピーカーアレイ２２０の一実施形態である。

【0041】

マイクロフォン２３０は、スピーカーアレイ２２０によって発せられたテスト音をキャプチャする。キャプチャされたテスト音は、オーディオテストデータと呼ばれる。マイクロフォン２３０は、各耳道のためのバイノーラルマイクロフォンを含み、追加のマイクロフォンを含み得る。追加のマイクロフォンは、たとえば、耳の周りのエリア中に、ヘッドセットの異なる部分に沿ってなど、置かれ得る。バイノーラルマイクロフォン１４０は、マイクロフォン２３０の一実施形態である。

【0042】

システムコントローラ２４０は、ＨＲＴＦシステム２００の制御構成要素を生成する。システムコントローラ２４０は、ＨＲＴＦデータストア２４５と、ＨＲＴＦモジュール２５０と、ひずみ識別モジュール２５５とを含む。システムコントローラ２４０のいくつかの実施形態は、本明細書で説明される構成要素以外の他の構成要素を含み得る。同様に、構成要素の機能は、ここで説明されるのと異なって分散され得る。たとえば、いくつかの実施形態では、ＨＲＴＦモジュール２５０の機能性の一部または全部は、ＳＭＳ２１０の一部であり得る。

【0043】

ＨＲＴＦデータストア２４５は、ＨＲＴＦシステム２００に関係するデータを記憶する。ＨＲＴＦデータストア２４５は、たとえば、テストユーザに関連するオーディオテストデータ、ヘッドセットを装着しているテストユーザについてのＨＲＴＦ、ヘッドセットを装着していないテストユーザについてのＨＲＴＦ、１つまたは複数のテストユーザについてのひずみ領域のセットを含むひずみマッピング、テストユーザの１つまたは複数の母集団のためのひずみ領域のセットを含むひずみマッピング、テストユーザの身体的特性に関連するパラメータ、ＨＲＴＦシステム２００に関係する他のデータ、またはそれらの何らかの組合せを記憶し得る。テストユーザの身体的特性に関連するパラメータは、性別、年齢、身長、耳の幾何学的形状、頭部の幾何学的形状、およびオーディオがユーザによってどのように知覚されるかに影響を及ぼす他の身体的特性を含み得る。

【0044】

ＨＲＴＦモジュール２５０は、スピーカーアレイ２２０のための命令を生成する。命令は、スピーカーアレイ２２０が、マイクロフォン２３０においてキャプチャされ得るテスト音を発するようなものである。いくつかの実施形態では、命令は、スピーカーアレイ２２０の各スピーカーが１つまたは複数のそれぞれのテスト音を再生するようなものである。また、各テスト音は、時間の指定された長さ、指定されたボリューム、指定された開始時間、指定された停止時間、および指定された波形（たとえば、チャープ、周波数トーンなど）のうちの１つまたは複数を有し得る。たとえば、命令は、スピーカーアレイ２２０の１つまたは複数のスピーカーが、順次、９４デシベルの音圧レベル（ｄＢＳＰＬ）の音レベルで、４８ｋＨｚのサンプリング周波数において周波数が２００Ｈｚから２０ｋＨｚに及ぶ、１秒対数正弦スイープ（１－ｓｅｃｏｎｄｌｏｇａｒｉｔｈｍｉｃｓｉｎｅｓｗｅｅｐ）を再生するようなものであり得る。いくつかの実施形態では、スピーカーアレイ２２０の各スピーカーは、ターゲットエリアに対する異なる位置に関連し、したがって、各スピーカーは、ターゲットエリアに対する特定の方位角および仰角に関連する。いくつかの実施形態では、スピーカーアレイ２２０の１つまたは複数のスピーカーは、複数の位置に関連し得る。たとえば、１つまたは複数のスピーカーは、ターゲットエリアに対する位置を変更し得る。これらの実施形態では、生成された命令は、スピーカーアレイ２２０中のスピーカーの一部または全部の動きをも制御し得る。いくつかの実施形態では、スピーカーアレイ２２０の１つまたは複数のスピーカーは、複数の位置に関連し得る。たとえば、１つまたは複数のスピーカーは、ターゲットユーザの頭部を回転するようにターゲットユーザに命令することによって、テストユーザに対する位置を変更し得る。これらの実施形態では、生成された命令はまた、テストユーザに提示され得る。ＨＲＴＦモジュール２５０は、生成された命令をスピーカーアレイ２２０および／またはＳＭＳ２１０に提供する。

【0045】

ＨＲＴＦモジュール２５０は、マイクロフォン２３０を介してキャプチャされたオーディオテストデータを使用して、テストユーザについてのＨＲＴＦを決定する。いくつかの実施形態では、知られている仰角および方位角においてスピーカーアレイ２２０のスピーカーによって再生される各テスト音について、マイクロフォン２３０は、（たとえば、マイクロフォン２３０としてバイノーラルマイクロフォンを使用して）右耳におけるテスト音のオーディオテストデータと左耳におけるオーディオテストデータとをキャプチャする。ＨＲＴＦモジュール２５０は、丁重に、右耳ＨＲＴＦと左耳ＨＲＴＦとを決定するために、右耳についてのオーディオテストデータと左耳についてのオーディオテストデータとを使用する。右耳ＨＲＴＦと左耳ＨＲＴＦとは、スピーカーアレイ２２０中のそれぞれのスピーカーの異なるロケーションに各々対応する複数の異なる方向（仰角および方位角）について決定される。

【0046】

ＨＲＴＦの各セットは、特定のテストユーザについてのキャプチャされたオーディオテストデータから算出される。いくつかの実施形態では、オーディオテストデータは頭部インパルス応答（ＨＲＩＲ：ｈｅａｄ－ｒｅｌａｔｅｄｉｍｐｕｌｓｅｒｅｓｐｏｎｓｅ）であり、ここで、テスト音はインパルスである。ＨＲＩＲは、音源（すなわち、スピーカーアレイ２２０中の特定のスピーカー）のロケーションをテストユーザの耳道のロケーション（すなわち、マイクロフォン２３０のロケーション）に関係付ける。ＨＲＴＦは、各対応するＨＲＩＲのフーリエ変換をとることによって決定される。いくつかの実施形態では、ＨＲＴＦの誤差は、自由場インパルス応答データを使用して緩和される。自由場インパルス応答データは、スピーカーアレイ２２０およびマイクロフォン２３０の個々の周波数応答を除去するためにＨＲＩＲから畳み込み解除され得る。

【0047】

ＨＲＴＦは、（たとえば、図１Ａに示されているような）ヘッドセット１２０を装着しているテストユーザと（たとえば、図１Ｂに示されているような）ヘッドセットを装着していないテストユーザの両方に関して、各方向において決定される。たとえば、（図１Ａに示されているような）ヘッドセット１２０を装着しているテストユーザに関して各仰角および方位角においてＨＲＴＦが決定され、次いで、ヘッドセット１２０が取り外され、（図１Ｂに示されているような）ヘッドセット１２０を装着していないユーザに関して各仰角および方位角においてＨＲＴＦが測定される。ヘッドセット１２０を着けている場合と着けていない場合の両方に関する、各スピーカー方向におけるオーディオテストデータが、テストユーザの母集団（たとえば、数百、数千など）についてキャプチャされ得る。テストユーザの母集団は、異なる年齢、サイズ、性別、毛の長さ、頭部の幾何学的形状、耳の幾何学的形状、ＨＲＴＦに影響を及ぼすことがある何らかの他のファクタ、またはそれらの何らかの組合せの個人を含み得る。各テストユーザについて、ヘッドセット１２０を着けている場合の個別化されたＨＲＴＦのセットと、ヘッドセット１２０を着けていない場合の個別化されたＨＲＴＦのセットとがある。

【0048】

ひずみ識別モジュール２５５は、ヘッドセットを装着しているテストユーザのＨＲＴＦのセットのうちの１つまたは複数を、ヘッドセットを装着していないテストユーザのＨＲＴＦのセットのうちの１つまたは複数と比較する。一実施形態では、比較は、スペクトル差誤差（ＳＤＥ：ｓｐｅｃｔｒａｌｄｉｆｆｅｒｅｎｃｅｅｒｒｏｒ）分析を使用するＨＲＴＦの２つのセットの評価と、両耳間時間差（ＩＴＤ：ｉｎｔｅｒａｕｒａｌｔｉｍｅｄｉｆｆｅｒｅｎｃｅ）の不一致を決定することとを伴う。

【0049】

特定のテストユーザについての、ヘッドセットを着けていない場合のＨＲＴＦのセットとヘッドセットを着けている場合のＨＲＴＦのセットとの間のＳＤＥは、以下の式に基づいて算出される。

【0050】

ここで、Ωは方向角（方位角および仰角）であり、ｆはテスト音の周波数であり、ＨＲＴＦ_ＷＯ（Ω，ｆ）は、方向Ωおよび周波数ｆについての、ヘッドセットを着けていない場合のＨＲＴＦであり、ＨＲＴＦ_{Ｈｅａｄｓｅｔ}（Ω，ｆ）は、方向Ωおよび周波数ｆについての、ヘッドセットを着けている場合のＨＲＴＦである。ＳＤＥは、特定の周波数および方向において、ヘッドセットを着けている場合および着けていない場合のＨＲＴＦの各ペアについて算出される。ＳＤＥは、各周波数および方向において両方の耳について算出される。

【0051】

一実施形態では、ＩＴＤ誤差はまた、右ＨＲＩＲと左ＨＲＩＲとの間の相関の結果が最大値に達した時間を決定することによって推定される。各測定されたテストユーザについて、ＩＴＤ誤差は、各方向についての、ヘッドセットを着けていない場合のＨＲＴＦのＩＴＤとヘッドセットを着けている場合のＨＲＴＦのＩＴＤとの間の差の絶対値として算出され得る。

【0052】

いくつかの実施形態では、ヘッドセットを装着しているテストユーザのＨＲＴＦのセットとヘッドセットを装着していないテストユーザのＨＲＴＦのセットとの比較は、追加の主観的分析を含む。一実施形態では、ヘッドセットを着けている場合と着けていない場合に関してＨＲＴＦを測定された各テストユーザは、客観的分析の結果を補強するために、隠れ基準およびアンカーをもつ複数刺激（ＭＵＳＨＲＡ：ＭｕｌｔｉｐｌｅＳｔｉｍｕｌｉｗｉｔｈＨｉｄｄｅｎＲｅｆｅｒｅｎｃｅａｎｄＡｎｃｈｏｒ）リスニングテストに参加する。特に、ＭＵＳＨＲＡテストは、ヘッドセットを着けていない場合の一般化されたＨＲＴＦのセットと、ヘッドセットを着けている場合の一般化されたＨＲＴＦのセットと、ヘッドセットを着けていない場合のＨＲＴＦのテストユーザの個別化されたセットと、ヘッドセットを着けている場合のＨＲＴＦのテストユーザの個別化されたセットとからなり、ヘッドセットを着けていない場合の個別化されたＨＲＴＦのセットは、隠れ基準であり、アンカーはない。

【0053】

ひずみ識別モジュール２５５は、テストユーザの母集団にわたる平均的な比較を決定する。平均的な比較を決定するために、各テストユーザについてのＳＤＥ_{ＷＯ－Ｈｅａｄｓｅｔ}（Ω，ｆ）が、各周波数および方向においてテストユーザの母集団にわたって平均化され、これは、

によって示される。

【0054】

ここで、Ｎは、ユーザの母集団中のテストユーザの総数である。代替実施形態では、

は、代替算出によって決定され得る。

【0055】

一実施形態では、決定は、測定された周波数のスパン（たとえば、０～１６ｋＨｚ）にわたって平均化することをさらに含み、これは、

によって示される。ＳＤＥは、概して、より高い周波数においてより高くなることがわかる。すなわち、高い周波数では波長がヘッドセットのフォームファクタに対して大きいということにより、ヘッドセットを着けている場合のＨＲＴＦはヘッドセットを着けていない場合のＨＲＴＦとは、より高い周波数においてより劇的に異なる。ＳＤＥがより高い周波数においてより大きいという一般的傾向のために、すべての周波数にわたって平均化することは、ヘッドセットによるひずみがより極端である特定の方位角および仰角の決定を可能にする。

【0056】

テストユーザの母集団にわたる平均的なＩＴＤ誤差、

が、以下の式に基づいて算出される。

【0057】

ここで、Ｎは、テストユーザの母集団中のテストユーザの総数であり、

は、ユーザｉの方向Ωにおける、ヘッドセットを着けていない場合のＨＲＴＦの最大ＩＴＤであり、

は、ユーザｉの方向Ωにおける、ヘッドセットを着けている場合のＨＲＴＦの最大ＩＴＤである。

【0058】

ひずみ識別モジュール２５５は、テストユーザの母集団にわたって一般的にひずませられるＨＲＴＦの部分に基づいて１つまたは複数のひずみ領域のセットを識別するひずみマッピングを決定する。

を使用して、ヘッドセットの存在に基づくＨＲＴＦのひずみの方向的依存が決定され得る。

の両方は、誤差の大きさが最も大きい特定の方位角および仰角を決定するために２次元でプロットされ得る。一実施形態では、最も大きい誤差をもつ方向は、ＳＤＥおよび／またはＩＴＤの特定のしきい値によって決定される。最も大きい誤差の決定された方向は、１つまたは複数のひずみ領域のセットである。

【0059】

一例では、しきい値は、４ｄＢのＳＤＥよりも大きい、反対側の方向における高い誤差である。この例では、左ＨＲＴＦについての

に基づいて、方位角［－８０°，－１０°］および仰角［－３０°，４０°］の領域と方位角［－１２０°，－１００°］および仰角［－３０°，０°］の領域とが、ＳＤＥしきい値を上回る。それにより、これらの領域はひずみ領域であると決定される。

【0060】

別の例では、しきい値は

である。この例では、方位角［－１１５°，－１００°］および仰角［－１５°，０°］、方位角［－６０°，－３０°］および仰角［０°，３０°］、方位角［３０°，６０°］および仰角［０°，３０°］、ならびに方位角［１００°，－１１５°］および仰角［－１５°，０°］の領域に対応する方向が、ＩＴＤしきい値を上回る。それにより、これらの領域はひずみ領域であると決定される。

【0061】

ＳＤＥおよびＩＴＤ分析およびしきい値は、種々のひずみ領域を決定し得る。特に、ＩＴＤ分析は、ＳＤＥ分析よりも小さいひずみ領域を生じ得る。異なる実施形態では、ＳＤＥ分析とＩＴＤ分析とは、互いから独立して使用されるか、または、一緒に使用され得る。

【0062】

ひずみマッピングはテストユーザの母集団について決定されたＨＲＴＦに基づくことに留意されたい。いくつかの実施形態では、母集団は単一のマネキンであり得る。しかし、他の実施形態では、母集団は、異なる身体的特性の大きい断面（ｃｒｏｓｓｓｅｃｔｉｏｎ）を有する複数のテストユーザを含み得る。いくつかの実施形態では、ひずみマップは、１つまたは複数の一般的な身体的特性（たとえば、年齢、性別、サイズなど）を有する母集団について決定されることに留意されたい。このようにして、ひずみ識別モジュール２５５は、１つまたは複数の特定の身体的特性に各々インデックス付けされる複数のひずみマッピングを決定し得る。たとえば、あるひずみマッピングは、ひずみ領域の第１のセットを識別する大人に固有であり得、別個のひずみマップは、ひずみ領域の第１のセットとは異なるひずみ領域の第２のセットを識別し得る子供に固有であり得る。

【0063】

ＨＲＴＦシステム２００は、１つまたは複数のヘッドセットおよび／またはコンソールと通信し得る。いくつかの実施形態では、ＨＲＴＦシステム２００は、ヘッドセットおよび／またはコンソールからひずみ領域についてのクエリを受信するように構成される。いくつかの実施形態では、クエリは、ひずみ領域のセットを決定するためにひずみ識別モジュール２５５によって使用される、ヘッドセットのユーザに関するパラメータを含み得る。たとえば、クエリは、身長、体重、年齢、性別、耳の寸法、および／または装着されているヘッドセットのタイプなど、ユーザに関する特定のパラメータを含み得る。ひずみ識別モジュール２５５は、ひずみ領域のセットを決定するためにパラメータのうちの１つまたは複数を使用することができる。すなわち、ひずみ識別モジュール２５５は、同様の特性をもつテストユーザからキャプチャされたオーディオテストデータからひずみ領域のセットを決定するために、ヘッドセットおよび／またはコンソールによって提供されるパラメータを使用する。ＨＲＴＦサーバ２００は、ひずみ領域の決定されたセットを要求元のヘッドセットおよび／またはコンソールに提供する。いくつかの実施形態では、ＨＲＴＦサーバ２００は、（たとえば、ネットワークを介して）ヘッドセットから、情報（たとえば、ユーザに関するパラメータ、個別化されたＨＲＴＦのセット、ヘッドセットおよび／またはコンソールからのユーザがヘッドセットを装着している間に測定されるＨＲＴＦ、あるいはそれらの何らかの組合せ）を受信する。ＨＲＴＦサーバ２００は、１つまたは複数のひずみマッピングを更新するためにこの情報を使用し得る。

【0064】

いくつかの実施形態では、ＨＲＴＦシステム２００は、音測定システム２１０からリモートにあり、および／または、音測定システム２１０とは別個であり得る。たとえば、音測定システム２１０は、ネットワーク（たとえば、ローカルエリアネットワーク、インターネットなど）を介してＨＲＴＦシステム２００に通信可能に結合され得る。同様に、ＨＲＴＦシステム２００は、図５および図８に関して以下でより詳細に説明されるように、ネットワークを介して他の構成要素に接続し得る。

【0065】

図３は、１つまたは複数の実施形態による、ひずみ領域のセットを取得するプロセス３００を示すフローチャートである。一実施形態では、プロセス３００は、ＨＲＴＦシステム２００によって実施される。他の実施形態では、他のエンティティ（たとえば、サーバ、ヘッドセット、他の接続されたデバイス）がプロセス３００のステップの一部または全部を実施し得る。同様に、実施形態は、異なるおよび／または追加のステップを含むか、あるいは異なる順序でステップを実施し得る。

【0066】

ＨＲＴＦシステム２００は、ヘッドセットを装着しているテストユーザについてのＨＲＴＦのセットと、ヘッドセットを装着していないテストユーザについてのＨＲＴＦのセットとを決定する３１０。オーディオテストデータは、テストユーザの耳道にあるかまたはその近くにある１つまたは複数のマイクロフォンによってキャプチャされる。オーディオテストデータは、ヘッドセットを装着しているテストユーザとヘッドセットを装着していないユーザの両方に関して、様々な配向から再生されるテスト音についてキャプチャされる。オーディオテストデータは、ヘッドセットを着けている事例とヘッドセットを着けていない事例とについてオーディオテストデータが比較され得るように、ヘッドセットを着けている場合と着けていない場合の両方に関して各配向において収集される。一実施形態では、これは、図１Ａおよび図１Ｂに関して上記で説明されたプロセスによって行われる。

【0067】

オーディオテストデータは、オーディオテストデータが測定された１つまたは複数のテストユーザを含むテストユーザの母集団にわたってキャプチャされ得ることに留意されたい。いくつかの実施形態では、テストユーザの母集団は、１人または複数の人々であり得る。１人または複数の人々は、性別、年齢、耳の幾何学的形状、頭部寸法、テストユーザについてのＨＲＴＦに影響を及ぼすことがある何らかの他のファクタ、またはそれらの何らかの組合せなど、異なる身体的特性に基づいて、母集団のサブセットにさらに分割され得る。他の実施形態では、テストユーザはマネキン頭部であり得る。いくつかの実施形態では、第１のマネキン頭部は平均的な身体的特性を有し得、他のマネキンは、異なる身体的特性を有し、その身体的特性に基づいて、同様にサブセットに再分割され得る。

【0068】

ＨＲＴＦシステム２００は、ヘッドセットを装着しているテストユーザについてのＨＲＴＦのセットと、ヘッドセットを装着していないテストユーザについてのＨＲＴＦのセットとを比較する３２０。一実施形態では、比較３２０は、図２のＨＲＴＦモジュール２５０および式（１）に関して前に説明されたように、ＳＤＥ分析および／またはＩＴＤを使用して実施される。比較３２０は、テストユーザの母集団について繰り返され得る。ＨＲＴＦのセットと、対応するオーディオテストデータとは、テストユーザの母集団の身体的特性に基づいてグループ化され得る。

【0069】

ＨＲＴＦシステム２００は、テストユーザの母集団にわたって一般的にひずませられるＨＲＴＦの部分に基づいてひずみ領域のセットを決定する３３０。いくつかの実施形態では、テストユーザの母集団は、テストユーザの前に説明された母集団のサブセットである。特に、ひずみ領域は、身体的特性に基づく１つまたは複数のパラメータを満たすテストユーザの総母集団のサブセットであるテストユーザの母集団について決定され得る。一実施形態では、ＨＲＴＦシステム２００は、図２のひずみ識別モジュール２５５ならびに式（２）および式（３）に関して前に説明されたように、ＳＤＥの平均とＩＴＤの平均とを使用して決定する３３０。

【0070】

ＨＲＴＦの個別化されたセットを算出するための例示的なシステム
オーディオシステムは、ヘッドセットの影響を補償する個別化されたＨＲＴＦのセットを決定するために、ＨＲＴＦシステムからの情報と、ヘッドセットのユーザがヘッドセットを装着している間に算出されたＨＲＴＦとを使用する。オーディオシステムは、ヘッドセットを装着しているユーザについてのオーディオデータを収集する。オーディオシステムは、ヘッドセットを装着しているユーザについてのＨＲＴＦを決定し、および／または、ＨＲＴＦ決定のために、別個のシステム（たとえば、ＨＲＴＦシステムおよび／またはコンソール）にオーディオデータを提供し得る。いくつかの実施形態では、オーディオシステムは、ＨＲＴＦシステムによって前にキャプチャされたオーディオテストデータに基づいてひずみ領域のセットを要求し、ユーザについてのＨＲＴＦの個別化されたセットを決定するためにひずみ領域のセットを使用する。

【0071】

図４Ａは、１つまたは複数の実施形態による、外部スピーカー４３０と生成された仮想空間４４０とを使用して、ヘッドセット４２０を装着しているユーザ４１０に関連するオーディオデータを取得するための例示的な人工現実システム４００の図である。人工現実システム４００によって取得されたオーディオデータは、ヘッドセット４２０の存在によってひずませられ、これは、ひずみを補償する、ユーザ４１０についてのＨＲＴＦの個別化されたセットを算出するために、オーディオシステムによって使用される。人工現実システム４００は、図１Ａ～図３において前に説明されたＳＭＳ１００、２１０など、無響室を使用しない、ユーザ４１０についての個別化されたＨＲＴＦの測定を可能にするために、人工現実を使用する。

【0072】

ユーザ４１０は、図１Ａおよび図１Ｂのテストユーザ１１０とは別の個人である。ユーザ４１０は、人工現実システム４００のエンドユーザである。ユーザ４１０は、ヘッドセット４２０によって引き起こされるＨＲＴＦのひずみを補償する個別化されたＨＲＴＦのセットを作成するために人工現実システム４００を使用し得る。ユーザ４１０は、ヘッドセット４２０と、マイクロフォン４５０ａ、４５０ｂ（「４５０」と総称される）のペアとを装着する。ヘッドセット４２０は、図７Ａおよび図７Ｂに関してより詳細に説明されるように、ヘッドセット１２０と同じタイプ、モデル、または形状であり得る。マイクロフォン４５０は、図１Ａに関して説明されたようなバイノーラルマイクロフォン１４０、または図２に関して説明されたようなマイクロフォン２３０と同じプロパティを有することができる。特に、マイクロフォン４５０は、ユーザ４１０の耳道への入口に位置するかまたはその近くに位置する。

【0073】

外部スピーカー４３０は、ユーザ４１０に音（たとえば、テスト音）を送信するように構成されたデバイスである。たとえば、外部スピーカー４３０は、スマートフォン、タブレット、ラップトップ、デスクトップコンピュータのスピーカー、スマートスピーカー、または音を再生することが可能な任意の他の電子デバイスであり得る。いくつかの実施形態では、外部スピーカー４３０は、ワイヤレス接続を介してヘッドセット４２０によって駆動される。他の実施形態では、外部スピーカー４３０はコンソールによって駆動される。一態様では、外部スピーカー４３０は、１つの位置において固定され、ＨＲＴＦを較正するために、マイクロフォン４５０が受信することができるテスト音を送信する。たとえば、外部スピーカー４３０は、ＳＭＳ１００、２１０のスピーカーアレイ１３０、２２０によって再生されるものと同じであるテスト音を再生し得る。別の態様では、外部スピーカー４３０は、ヘッドセット４２０上に提示される画像に従って、オーディオ特徴づけ構成に基づいてユーザ４１０が最適に聞くことができる周波数のテスト音を提供する。

【0074】

仮想空間４４０は、個別化されたＨＲＴＦを測定しながらユーザ４１０の頭部の配向を指示するために人工現実システム４００によって生成される。ユーザ４１０は、ヘッドセット４２０のディスプレイを通して仮想空間４４０を観察する。「仮想空間」４４０という用語は、限定するものではない。いくつかの様々な実施形態では、仮想現実空間４４０は、仮想現実、拡張現実、複合現実、または人工現実の何らかの他の形態を含み得る。

【0075】

図示の実施形態では、仮想現実空間４４０はインジケータ４６０を含む。インジケータ４６０は、ユーザ４１０の頭部の配向を指示するためにヘッドセット４２０のディスプレイ上に提示される。インジケータ４６０は、光、またはヘッドセット４２０のディスプレイ上に提示されるマーキングであり得る。ヘッドセット４２０の位置は、インジケータ４６０が所望の頭部配向と整合されるかどうかを確認するために、（図７Ａおよび図７Ｂにおいて示される）イメージングデバイスおよび／またはＩＭＵを通して追跡され得る。

【0076】

一例では、ユーザ４１０は、インジケータ４６０を観察するように促される。たとえば十字線に対するＨＭＤ４２０上に表示されるインジケータ４６０のロケーションに基づいて、インジケータ４６０が頭部配向と整合されることを確認した後に、外部スピーカー４３０はテスト音を生成する。各耳について、対応するマイクロフォン４５０ａ、４５０ｂが、受信されたテスト音をオーディオデータとしてキャプチャする。

【0077】

マイクロフォン４５０がオーディオデータを正常にキャプチャした後に、ユーザ４１０は、それらの配向を、仮想空間４４０中の異なるロケーションにおける新しいインジケータ４７０のほうへ向けるように促される。インジケータ４６０においてオーディオデータをキャプチャするプロセスが、インジケータ４７０においてオーディオデータをキャプチャするために繰り返される。インジケータ４６０、４７０は、ユーザ４１０の種々の頭部配向におけるＨＲＴＦを決定するために使用されるべきオーディオデータをキャプチャするために、仮想空間４４０中の異なるロケーションにおいて生成される。仮想空間４４０中の異なるロケーションにおける各インジケータ４６０、４７０は、異なる方向（仰角および方位角）におけるＨＲＴＦの測定を可能にする。新しいインジケータが生成され、オーディオデータをキャプチャするプロセスが、仮想空間４４０内の仰角および方位角に十分に及ぶように繰り返される。外部スピーカー４３０と、ヘッドセット４２０を介して表示される仮想空間４４０内のインジケータ４６０、４７０の表示との使用は、比較的好都合な測定、ユーザ４１０についての個別化されたＨＲＴＦの測定を可能にする。すなわち、ユーザ４１０は、無響室の必要なしに、人工現実システム４００を用いてユーザ４１０自身の自宅において、ユーザ４１０の都合の良いときにこれらのステップを実施することができる。

【0078】

図４Ｂは、１つまたは複数の実施形態による、整合プロンプト４９０とインジケータ４６０とがヘッドセットによって表示され、ユーザの頭部が正しい配向にない、ディスプレイ４８０の図である。図４Ｂに示されているように、ディスプレイ４８０は、ディスプレイ４８０の中心上に、またはディスプレイ４８０の１つまたは複数の所定のピクセルにおいて、整合プロンプト４９０を提示する。この実施形態では、整合プロンプト４９０は十字線である。ただし、より一般的には、整合プロンプト４９０は、ユーザの頭部が、表示されたインジケータ４６０に対する正しい配向にあるかどうかをユーザに示す任意のテキストおよび／またはグラフィカルインターフェースである。一態様では、整合プロンプト４９０は現在の頭部配向を反映し、インジケータ４６０はターゲット頭部配向を反映する。正しい配向は、インジケータ４６０が整合プロンプト４９０の中心にあるとき、発生する。図４Ｂに示されている例では、インジケータ４６０は、整合プロンプト４９０上にではなく、ディスプレイ４８０の左上コーナーに配置される。したがって、頭部配向は正しい配向にない。その上、インジケータ４６０と整合プロンプト４９０とは整合されていないので、ユーザの頭部が適切な配向にないことは、ユーザにとって明らかである。

【0079】

図４Ｃは、１つまたは複数の実施形態による、ユーザの頭部が正しい配向にある、図４Ｂのディスプレイの図である。図４Ｃ上のディスプレイ４８０は、インジケータ４６０が現在十字線４９０上に表示されていることを除いて、図４Ｂのディスプレイ４８０と実質的に同様である。したがって、頭部配向がインジケータ４６０と適切に整合され、ユーザのＨＲＴＦがその頭部配向について測定されると決定される。すなわち、テスト音が、外部スピーカー４３０によって再生され、マイクロフォン４５０においてオーディオデータとしてキャプチャされる。オーディオデータに基づいて、ＨＲＴＦが、現在の配向において各耳について決定される。図４Ｂおよび図４Ｃに関して説明されたプロセスは、外部スピーカー４３０に対するユーザ４１０の頭部の複数の異なる配向について繰り返される。ユーザ４１０についてのＨＲＴＦのセットは、各測定された頭部配向におけるＨＲＴＦを含む。

【0080】

図５は、１つまたは複数の実施形態による、ユーザについての個別化されたＨＲＴＦを決定するためのシステムのシステム環境５００のブロック図である。システム環境５００は、外部スピーカー５０５と、ＨＲＴＦシステム２００と、ネットワーク５１０と、ヘッドセット５１５とを備える。外部スピーカー５０５と、ＨＲＴＦシステム２００と、ヘッドセット５１５とは、すべて、ネットワーク５１０を介して接続される。

【0081】

外部スピーカー５０５は、ユーザに音を送信するように構成されたデバイスである。一実施形態では、外部スピーカー５０５は、ヘッドセット５１５からのコマンドに従って動作される。他の実施形態では、外部スピーカー５０５は外部コンソールによって動作される。外部スピーカー５０５は、１つの位置において固定され、テスト音を送信する。外部スピーカー５０５によって送信されたテスト音は、たとえば、一定の周波数における連続正弦波、またはチャープを含む。いくつかの実施形態では、外部スピーカー５０５は、図４Ａの外部スピーカー４３０である。

【0082】

ネットワーク５１０は、ヘッドセット５１５および／または外部スピーカー５０５をＨＲＴＦシステム２００に結合する。ネットワーク５１０は、追加の構成要素をＨＲＴＦシステム２００に結合し得る。ネットワーク５１０は、ワイヤレス通信システムおよび／またはワイヤード通信システムの両方を使用する、ローカルエリアネットワークおよび／またはワイドエリアネットワークの任意の組合せを含み得る。たとえば、ネットワーク５１０は、インターネット、ならびに携帯電話網を含み得る。一実施形態では、ネットワーク５１０は、標準通信技術および／またはプロトコルを使用する。したがって、ネットワーク５１０は、イーサネット、８０２．１１、ワールドワイドインターオペラビリティフォーマイクロウェーブアクセス（ＷｉＭＡＸ）、２Ｇ／３Ｇ／４Ｇモバイル通信プロトコル、デジタル加入者回線（ＤＳＬ）、非同期転送モード（ＡＴＭ）、ＩｎｆｉｎｉＢａｎｄ、ＰＣＩＥｘｐｒｅｓｓアドバンストスイッチングなどの技術を使用するリンクを含み得る。同様に、ネットワーク５１０上で使用されるネットワーキングプロトコルは、マルチプロトコルラベルスイッチング（ＭＰＬＳ）、伝送制御プロトコル／インターネットプロトコル（ＴＣＰ／ＩＰ）、ユーザデータグラムプロトコル（ＵＤＰ）、ハイパーテキストトランスポートプロトコル（ＨＴＴＰ）、簡易メール転送プロトコル（ＳＭＴＰ）、ファイル転送プロトコル（ＦＴＰ）などを含むことができる。ネットワーク５１０を介して交換されるデータは、２進形式（たとえばポータブルネットワークグラフィックス（ＰＮＧ））の画像データ、ハイパーテキストマークアップ言語（ＨＴＭＬ）、拡張可能マークアップ言語（ＸＭＬ）などを含む、技術および／またはフォーマットを使用して表され得る。さらに、リンクの全部または一部は、セキュアソケットレイヤ（ＳＳＬ）、トランスポートレイヤセキュリティ（ＴＬＳ）、仮想プライベートネットワーク（ＶＰＮ）、インターネットプロトコルセキュリティ（ＩＰｓｅｃ）など、従来の暗号化技術を使用して暗号化され得る。

【0083】

ヘッドセット５１５は、ユーザにメディアを提示する。ヘッドセット５１５によって提示されるメディアの例は、１つまたは複数の画像、ビデオ、オーディオ、またはそれらの任意の組合せを含む。ヘッドセット５１５は、ディスプレイアセンブリ５２０とオーディオシステム５２５とを備える。いくつかの実施形態では、ヘッドセット５１５は、図４Ａのヘッドセット４２０である。ヘッドセット５１５の実施形態の特定の例は、図７Ａおよび図７Ｂに関して説明される。

【0084】

ディスプレイアセンブリ５２０は、ヘッドセット５１５を装着しているユーザに視覚コンテンツを表示する。特に、ディスプレイアセンブリ５２０は、ユーザに２Ｄまたは３Ｄ画像またはビデオを表示する。ディスプレイアセンブリ５２０は、１つまたは複数のディスプレイ要素を使用してコンテンツを表示する。ディスプレイ要素は、たとえば、電子ディスプレイであり得る。様々な実施形態では、ディスプレイアセンブリ５２０は、単一のディスプレイ要素または複数のディスプレイ要素（たとえば、ユーザの各眼のためのディスプレイ）を備える。ディスプレイ要素の例は、液晶ディスプレイ（ＬＣＤ）、発光ダイオード（ＬＥＤ）ディスプレイ、マイクロ発光ダイオード（μＬＥＤ）ディスプレイ、有機発光ダイオード（ＯＬＥＤ）ディスプレイ、アクティブマトリックス有機発光ダイオードディスプレイ（ＡＭＯＬＥＤ）、導波路ディスプレイ、何らかの他のディスプレイ、またはそれらの何らかの組合せを含む。いくつかの実施形態では、ディスプレイアセンブリ５２０は、少なくとも部分的に透明である。いくつかの実施形態では、ディスプレイアセンブリ５２０は、図４Ｂおよび図４Ｃのディスプレイ４８０である。

【0085】

オーディオシステム５２５は、ヘッドセット５１５を装着しているユーザについての個別化されたＨＲＴＦのセットを決定する。一実施形態では、オーディオシステム５２５は、１つまたは複数のマイクロフォン５３０およびスピーカーアレイ５３５、ならびにオーディオコントローラ５４０を含む、ハードウェアを備える。オーディオシステム５２５のいくつかの実施形態は、図５に関して説明されるものとは異なる構成要素を有する。同様に、以下でさらに説明される機能は、ここで説明されるものとは異なる様式でオーディオシステム５２５の構成要素の間で分散され得る。いくつかの実施形態では、以下で説明される機能のうちのいくつかは、他のエンティティ（たとえば、ＨＲＴＦシステム２００）によって実施され得る。

【0086】

マイクロフォンアセンブリ５３０は、外部スピーカー５０５によって発せられたテスト音のオーディオデータをキャプチャする。ある実施形態では、マイクロフォンアセンブリ５３０は、ユーザの耳道に位置するかまたはその近くに位置する１つまたは複数のマイクロフォン５３０である。他の実施形態では、マイクロフォンアセンブリ５３０は、ヘッドセット５１５から外部にあり、ネットワーク５１０を介してヘッドセット５１５によって制御される。マイクロフォンアセンブリ５３０は、図４Ａのマイクロフォン４５０のペアであり得る。

【0087】

スピーカーアレイ５３５は、オーディオコントローラ５４０からの命令に従ってユーザのためにオーディオを再生する。スピーカーアレイ５３５によってユーザのために再生されるオーディオは、１つまたは複数のマイクロフォン５３０によるテスト音オーディオのキャプチャを容易にすることに対する命令を含み得る。スピーカーアレイ５３５は、外部スピーカー５０５とは別である。

【0088】

オーディオコントローラ５４０は、オーディオシステム５２５の構成要素を制御する。いくつかの実施形態では、オーディオコントローラ５４０は、外部スピーカー５０５をも制御し得る。オーディオコントローラ５４０は、測定モジュール５５０と、ＨＲＴＦモジュール５５５と、ひずみモジュール５６０と、補間モジュール５６５とを含む複数のモジュールを含む。代替実施形態では、オーディオコントローラ５４０のモジュールの一部または全部は、他のエンティティ（たとえば、ＨＲＴＦシステム２００）によって（完全にまたは部分的に）実施され得ることに留意されたい。オーディオコントローラ５４０は、オーディオシステム５２５の他の構成要素に結合される。いくつかの実施形態では、オーディオコントローラ５４０は、通信結合（たとえば、ワイヤードまたはワイヤレス通信結合）を介して、外部スピーカー５０５またはシステム環境５００の他の構成要素にも結合される。オーディオコントローラ５４０は、マイクロフォンアセンブリ５３０から取得されたデータまたは他の受信されたデータの初期処理を実施し得る。オーディオコントローラ５４０は、ヘッドセット５１５およびシステム環境５００中の他の構成要素に受信されたデータを通信する。

【0089】

測定モジュール５５０は、外部スピーカー５０５によって再生されたテスト音のオーディオデータのキャプチャを構成する。測定モジュール５５０は、ヘッドセット５２５を介して、特定の方向にユーザの頭部を配向するようにとの命令をユーザに提供する。測定モジュール５０５は、１つまたは複数のテスト音を再生するためにネットワーク５１０を介して外部スピーカー５０５に信号を送る。測定モジュール５５０は、テスト音のオーディオデータをキャプチャするように１つまたは複数のマイクロフォン５３０に命令する。測定モジュール５５０は、頭部配向の所定のスパンについてこのプロセスを繰り返す。いくつかの実施形態では、測定モジュール５５０は、図４Ａ～図４Ｃに関して説明されたプロセスを使用する。

【0090】

一実施形態では、測定モジュール５５０は、スピーカーアレイ５３５を使用して、特定の方向にユーザの頭部を配向するようにとの命令をユーザに送る。スピーカーアレイ５３５は、言葉の命令をもつオーディオ、または特定の頭部配向を示すための他のオーディオを再生し得る。他の実施形態では、測定モジュール５５０は、ユーザの頭部を配向するための視覚キューをユーザに提供するために、ディスプレイアセンブリ５２０を使用する。測定モジュール５５０は、図４Ａの仮想空間４４０およびインジケータ４６０など、インジケータをもつ仮想空間を生成し得る。ディスプレイアセンブリ５２０を介してユーザに提供される視覚キューは、図４８０のディスプレイ４８０上のプロンプト４９０と同様であり得る。

【0091】

測定モジュール５５０が、ユーザが所望の頭部配向を有することを確認したとき、測定モジュール５５０は、テスト音を再生するように外部スピーカー５０５に命令する。測定モジュール５５０は、周波数、長さ、タイプ（たとえば、正弦波、チャープなど）など、テスト音の特性を指定する。テスト音をキャプチャするために、測定モジュール５５０は、オーディオデータを記録するように１つまたは複数のマイクロフォン５３０に命令する。各マイクロフォンは、各マイクロフォンのそれぞれのロケーションにおいてテスト音のオーディオデータ（たとえば、ＨＲＩＲ）をキャプチャする。

【0092】

測定モジュール５５０は、複数の方位角および仰角に及ぶ頭部配向の所定のセットについて、上記で説明されたステップを通して反復する。一実施形態では、配向の所定のセットは、図１Ａに関して説明された６１２個の方向に及ぶ。別の実施形態では、配向の所定のセットは、音測定システム１００によって測定される方向のセットのサブセットに及ぶ。測定モジュール５５０によって実施されるプロセスは、ＨＲＴＦの個別化されたセットの決定のためのオーディオデータの好都合で比較的容易な測定を可能にする。

【0093】

ＨＲＴＦモジュール５５５は、ヘッドセット５１５を装着しているユーザについての、測定モジュール５５０によってキャプチャされるオーディオデータについてのＨＲＴＦの初期セットを算出する。ＨＲＴＦモジュール５５５によって決定されたＨＲＴＦの初期セットは、ヘッドセット５１５の存在によってひずませられる１つまたは複数のＨＲＴＦを含む。すなわち、１つまたは複数の特定の方向（たとえば、仰角および方位角の範囲）のＨＲＴＦは、ヘッドセットの存在によってひずませられ、したがって、そのＨＲＴＦを伴って再生される音は、（たとえば、ＶＲ体験の一部として、ユーザがヘッドセットを装着していないという印象をユーザに与えることに対して）ユーザがヘッドセットを装着しているという印象を与える。測定モジュール５５０がＨＲＩＲの形態のオーディオデータをキャプチャする一実施形態では、ＨＲＴＦモジュール５５５は、各対応するＨＲＩＲのフーリエ変換をとることによってＨＲＴＦの初期セットを決定する。いくつかの実施形態では、ＨＲＴＦの初期セット中の各ＨＲＴＦは、方向的依存、Ｈ（Ω）であり、ここで、Ωは方向である。方向は、仰角θと方位角φとをさらに備え、Ω＝（θ，φ）として表される。すなわち、各測定された方向（仰角および方位角）に対応するＨＲＴＦが算出される。他の実施形態では、各ＨＲＴＦは、周波数依存および方向的依存、Ｈ（Ω，ｆ）であり、ここで、ｆは周波数である。

【0094】

いくつかの実施形態では、ＨＲＴＦモジュール５５５は、ＨＲＴＦの初期セットを算出するために、個別化されたＨＲＴＦのセットまたはＨＲＴＦの一般化されたセットのデータを利用する。データは、いくつかの実施形態では、ヘッドセット５１５上にプリロードされ得る。他の実施形態では、データは、ＨＲＴＦシステム２００からネットワーク５１０を介してヘッドセット５１５によってアクセスされ得る。いくつかの実施形態では、ＨＲＴＦモジュール５５５は、図２のＳＭＳ２１０と実質的に同様のプロセスおよび計算を使用し得る。

【0095】

ひずみモジュール５６０は、ヘッドセット５１５の存在によってひずませられた部分を除去し、ＨＲＴＦの中間セットを作成するために、ＨＲＴＦモジュール５５５によって算出されたＨＲＴＦの初期セットを修正する。ひずみモジュール５６０は、ひずみマッピングについてのクエリを生成する。図２に関して上記で説明されたように、ひずみマッピングは、１つまたは複数のひずみ領域のセットを含む。クエリは、性別、年齢、身長、耳の幾何学的形状、頭部の幾何学的形状など、ユーザの身体的特徴に対応する１つまたは複数のパラメータを含み得る。いくつかの実施形態では、ひずみモジュール５６０は、クエリをヘッドセットのローカルストレージに送る。他の実施形態では、クエリは、ネットワークを介してＨＲＴＦシステム２００に送られる。ひずみモジュール５６０は、１つまたは複数のひずみ領域のセットを識別するひずみマッピングの一部または全部を受信する。いくつかの実施形態では、ひずみマッピングは、クエリ中のパラメータの一部または全部と共通する１つまたは複数の身体的特性を有するテストユーザの母集団に固有であり得る。１つまたは複数のひずみ領域のセットは、ヘッドセットによって一般的にひずませられるＨＲＴＦの方向（たとえば、ヘッドセットに対する方位角および仰角）を含む。

【0096】

いくつかの実施形態では、ひずみモジュール５６０は、１つまたは複数のひずみ領域のセットに対応するＨＲＴＦの初期セットの部分を廃棄し、これは、ＨＲＴＦの中間セットを生じる。いくつかの実施形態では、ひずみモジュール５６０は、１つまたは複数のひずみ領域のセットの特定の方向（すなわち、方位角および仰角）に対応する方向的依存ＨＲＴＦの部分を廃棄する。他の実施形態では、ひずみモジュール５６０は、ひずみ領域のセットの特定の方向および周波数に対応する周波数依存および方向的依存ＨＲＴＦの部分を廃棄する。

【0097】

たとえば、１つまたは複数のひずみ領域のセットは、方位角［－８０°，－１０°］および仰角［－３０°，４０°］の領域と方位角［－１２０°，－１００°］および仰角［－３０°，０°］の領域とを備える。これらの領域中に備えられる方向に対応するＨＲＴＦの初期セット中のＨＲＴＦは、ＨＲＴＦのセットから除去され、これは、ＨＲＴＦの中間セットを作成する。たとえば、ＨＲＴＦＨ（Ω＝（０°，－５０°））は、ひずみ領域のうちの１つ内にあり、ひずみモジュール５６０によってＨＲＴＦのセットから除去される。ＨＲＴＦＨ（Ω＝（０°，５０°））は、ひずみ領域のセット中に備えられる方向の外にあり、ＨＲＴＦの中間セット中に含まれる。ひずみ領域が特定の周波数をさらに備えるとき、同様のプロセスに従う。

【0098】

補間モジュール５６５は、ヘッドセット５１５の存在を補償するＨＲＴＦの個別化されたセットを生成するために、ＨＲＴＦの中間セットを使用し得る。補間モジュール５６５は、中間セットの一部または全部を補間して、補間されたＨＲＴＦのセットを生成する。たとえば、補間モジュール５６５は、廃棄された部分からある角度範囲内にあるＨＲＴＦを選択し、補間と選択されたＨＲＴＦとを使用して、補間されたＨＲＴＦのセットを生成し得る。ＨＲＴＦの中間セットと組み合わせられた補間されたＨＲＴＦのセットは、ヘッドセットひずみを緩和する個別化されたＨＲＴＦの完全セットを作り出す。

【0099】

いくつかの実施形態では、ヘッドセットによって引き起こされるひずみを補償するＨＲＴＦの生成された個別化されたセットは、記憶される。いくつかの実施形態では、ＨＲＴＦの生成された個別化されたセットは、ヘッドセットのローカルストレージ上で維持され、ユーザによって将来において使用され得る。他の実施形態では、ＨＲＴＦの生成された個別化されたセットは、ＨＲＴＦシステム２００にアップロードされる。

【0100】

ヘッドセットによって引き起こされるひずみを補償する個別化されたＨＲＴＦのセットを作り出すことは、ユーザの仮想現実体験を改善する。たとえば、ユーザは、ヘッドセット５１５を装着しており、ビデオベースの仮想現実環境を体験している。ビデオベースの仮想現実環境は、ユーザに、ビデオ品質とオーディオ品質の両方に関して現実が仮想であることを忘れさせることが意図される。ヘッドセット５１５は、ユーザがヘッドセット５１５を装着しているという、ユーザへのクエ（視覚および聴覚）を除去することによって、これを行う。ヘッドセット５１５は、ユーザのＨＲＴＦを測定するための容易で好都合なやり方を提供する。しかしながら、ユーザによって装着されているヘッドセット５１５に関して測定されるＨＲＴＦは、ヘッドセット５１５の存在によって引き起こされる固有のひずみを有する。ひずんだＨＲＴＦを使用してオーディオを再生することは、ヘッドセットが装着されているという、ユーザへの聴覚クエを維持し、ヘッドセットがユーザによって装着されていないかのようなものとなるＶＲ体験と整合しない。また、上記で例示されたように、オーディオシステム５２５は、測定されたＨＲＴＦとひずみマッピングとを使用してＨＲＴＦの個別化されたセットを生成する。オーディオシステム５２５は、次いで、オーディオ体験が、ユーザがヘッドセットを装着していないかのようなものであり、それにより、ヘッドセットがユーザによって装着されていないかのようなものとなるＶＲ体験と整合するような様式で、個別化されたＨＲＴＦを使用してユーザにオーディオコンテンツを提示することができる。

【0101】

図６は、１つまたは複数の実施形態による、ユーザについての個別化されたＨＲＴＦのセットを取得するプロセス６００を示すフローチャートである。一実施形態では、プロセス６００は、ヘッドセット５１５によって実施される。他の実施形態では、他のエンティティ（たとえば、外部スピーカー５０５、またはＨＴＲＦサーバ２００）がプロセス６００のステップの一部または全部を実施し得る。同様に、実施形態は、異なるおよび／または追加のステップを含むか、あるいは異なる順序でステップを実施し得る。

【0102】

ヘッドセット５１５は、種々の配向におけるテスト音のオーディオデータをキャプチャする６１０。ヘッドセット５１５は、ヘッドセット５１５を装着しながら特定の方向にユーザの頭部を配向するようにユーザに促す。ヘッドセット５１５は、テスト音を再生するようにスピーカー（たとえば、外部スピーカー５０５）に命令し、テスト音のオーディオデータは、ユーザの耳道においてまたはその近くで１つまたは複数のマイクロフォン（たとえば、マイクロフォン５３０）によってキャプチャされる６１０。キャプチャすること６１０は、ユーザの複数の異なる頭部配向について繰り返される。図４Ａ～図４Ｃは、オーディオデータのキャプチャ６１０の一実施形態を示す。図５の測定モジュール５５０は、いくつかの実施形態に従って、キャプチャすること６１０を実施する。

【0103】

ヘッドセット５１５は、種々の配向におけるオーディオデータに基づいてＨＲＴＦのセットを決定する６２０。いくつかの実施形態では、ＨＲＴＦモジュール（たとえば、ＨＲＴＦモジュール５５５）が、オーディオデータを使用してＨＲＴＦのセットを算出する。ヘッドセット５１５は、ヘッドセットに対する特定のロケーションから発信したオーディオデータを使用してＨＲＴＦを算出するための従来の方法を使用し得る。他の実施形態では、ヘッドセットは、ＨＲＴＦのセットを算出するために、外部デバイス（たとえば、コンソールおよび／またはＨＲＴＦシステム）にオーディオデータを提供し得る。

【0104】

ヘッドセット５１５は、ＨＲＴＦの中間セットを作成するために、ひずみ領域のセットに対応するＨＲＴＦの部分を廃棄する６３０。ヘッドセット５１５は、ひずみ領域のセットについてのクエリを生成する。いくつかの実施形態では、ヘッドセット５１５は、クエリをヘッドセット５１５のローカルストレージに送る（たとえば、ひずみ領域はプリロードされる）。他の実施形態では、ヘッドセット５１５は、ネットワーク５１０を介してＨＲＴＦシステム２００にクエリを送り、その場合、ひずみ領域は外部システム（たとえばＨＲＴＦシステム２００）によって決定される。ひずみ領域のセットは、テストユーザの母集団のＨＲＴＦに基づいて、またはマネキンに基づいて、決定され得る。クエリに応答して、ヘッドセット５１５は、ひずみ領域のセットを受信し、ひずみ領域のセット内に備えられる１つまたは複数の方向に対応するＨＲＴＦのセットの部分を廃棄する。いくつかの実施形態によれば、図５のひずみモジュール５６０が、廃棄すること６３０を実施する。

【0105】

ヘッドセット５１５は、ＨＲＴＦの中間セットのうちの少なくとも一部を使用して、ＨＲＴＦの個別化されたセットを生成する６４０。消失した部分は、ＨＲＴＦの中間セットと、いくつかの実施形態では、ひずみ領域に関連するＨＲＴＦのひずみマッピングとに基づいて、補間される。いくつかの実施形態では、図５の補間モジュール５６５が、生成すること６４０を実施する。他の実施形態では、ヘッドセット５１５が、ＨＲＴＦの個別化されたセットを生成する６４０。

【0106】

いくつかの実施形態では、ＨＲＴＦシステム２００は、プロセスのステップのうちの少なくともいくつかを実施する。すなわち、ＨＲＴＦシステム２００は、種々の配向におけるテスト音のオーディオデータをキャプチャする６１０ようにとの命令を、ヘッドセット５１５および外部スピーカー５０５に提供する。ＨＲＴＦシステム２００は、オーディオデータについてのクエリをヘッドセット５１５に送り、オーディオデータを受信する。ＨＲＴＦシステム２００は、種々の配向におけるオーディオデータに基づいてＨＲＴＦのセットを算出し６２０、ＨＲＴＦの中間セットを作成するために、ひずみ領域に対応するＨＲＴＦの部分を廃棄する６３０。ＨＲＴＦシステム２００は、ＨＲＴＦの中間セットのうちの少なくとも一部を使用して、ＨＲＴＦの個別化されたセットを生成し６４０、使用のために、ＨＲＴＦの個別化されたセットをヘッドセット５１５に提供する。

【0107】

図７Ａは、１つまたは複数の実施形態による、アイウェアデバイスとして実装されるヘッドセット７００の斜視図である。いくつかの実施形態では、アイウェアデバイスは、ニアアイディスプレイ（ＮＥＤ）である。概して、ヘッドセット７００は、コンテンツ（たとえば、メディアコンテンツ）が、図５のディスプレイアセンブリ５２０などのディスプレイアセンブリ、および／または図５のオーディオシステム５２５などのオーディオシステムを使用して提示されるように、ユーザの顔に装着され得る。しかしながら、ヘッドセット７００はまた、メディアコンテンツが異なる様式でユーザに提示されるように使用され得る。ヘッドセット７００によって提示されるメディアコンテンツの例は、１つまたは複数の画像、ビデオ、オーディオ、またはそれらの何らかの組合せを含む。ヘッドセット７００は、フレームを含み、構成要素の中でも、１つまたは複数のディスプレイ要素７２０を含むディスプレイアセンブリと、深度カメラアセンブリ（ＤＣＡ）と、オーディオシステムと、位置センサー７９０とを含み得る。図７Ａは、ヘッドセット７００上の例示的なロケーションにおけるヘッドセット７００の構成要素を示すが、構成要素は、ヘッドセット７００上の他の場所に、ヘッドセット７００とペアリングされた周辺デバイス上に、またはそれらの何らかの組合せに、位置し得る。同様に、図７Ａに示されているものよりも多いまたは少ない構成要素がヘッドセット７００上にあり得る。

【0108】

フレーム７１０は、ヘッドセット７００の他の構成要素を保持する。フレーム７１０は、１つまたは複数のディスプレイ要素７２０を保持する前面部分と、ユーザの頭部に付けるためのエンドピース（たとえば、テンプル）とを含む。フレーム７１０の前面部分は、ユーザの鼻の上をまたいでいる。エンドピースの長さは、種々のユーザにフィットするように調整可能（たとえば、調整可能なテンプルの長さ）であり得る。エンドピースはまた、ユーザの耳の後ろ側で湾曲する部分（たとえば、テンプルの先端、イヤピース）を含み得る。

【0109】

１つまたは複数のディスプレイ要素７２０は、ヘッドセット７００を装着しているユーザに光を提供する。１つまたは複数のディスプレイ要素は、図５のディスプレイアセンブリ５２０の一部であり得る。図示のように、ヘッドセットは、ユーザの各眼のためのディスプレイ要素７２０を含む。いくつかの実施形態では、ディスプレイ要素７２０は、ヘッドセット７００のアイボックスに提供される画像光を生成する。アイボックスは、ヘッドセット７００を装着している間にユーザの眼が占有する空間中のロケーションである。たとえば、ディスプレイ要素７２０は導波路ディスプレイであり得る。導波路ディスプレイは、光源（たとえば、２次元ソース、１つまたは複数の線光源、１つまたは複数の点光源など）と、１つまたは複数の導波路とを含む。光源からの光は、１つまたは複数の導波路中に内部結合され（ｉｎ－ｃｏｕｐｌｅｄ）、１つまたは複数の導波路は、ヘッドセット７００のアイボックス中に瞳孔の複製があるような様式で光を出力する。１つまたは複数の導波路からの光の内部結合（ｉｎ－ｃｏｕｐｌｉｎｇ）および／または外部結合（ｏｕｔｃｏｕｐｌｉｎｇ）が、１つまたは複数の回折格子を使用して行われ得る。いくつかの実施形態では、導波路ディスプレイは、光源からの光が１つまたは複数の導波路中に内部結合されるときにその光を走査する走査要素（たとえば、導波路、ミラーなど）を含む。いくつかの実施形態では、ディスプレイ要素７２０の一方または両方が不透明であり、ヘッドセット７００の周りのローカルエリアからの光を透過しないことに留意されたい。ローカルエリアは、ヘッドセット７００の周囲のエリアである。たとえば、ローカルエリアは、ヘッドセット７００を装着しているユーザが中にいる部屋であり得、または、ヘッドセット７００を装着しているユーザは外にいることがあり、ローカルエリアは外のエリアである。このコンテキストでは、ヘッドセット７００はＶＲコンテンツを生成する。代替的に、いくつかの実施形態では、ＡＲおよび／またはＭＲコンテンツを作り出すために、ローカルエリアからの光が１つまたは複数のディスプレイ要素からの光と組み合わせられ得るように、ディスプレイ要素７２０の一方または両方は少なくとも部分的に透明である。

【0110】

いくつかの実施形態では、ディスプレイ要素７２０は、画像光を生成せず、代わりに、ローカルエリアからの光をアイボックスに透過するレンズである。たとえば、ディスプレイ要素７２０の一方または両方は、補正なしのレンズ（非処方）であるか、または、ユーザの視力の欠損を補正するのを助けるための処方レンズ（たとえば、単焦点、二焦点、および三焦点、または累進多焦点（ｐｒｏｇｒｅｓｓｉｖｅ））であり得る。いくつかの実施形態では、ディスプレイ要素７２０は、太陽からユーザの眼を保護するために、偏光および／または色付けされ得る。

【0111】

いくつかの実施形態では、ディスプレイ要素７２０は追加の光学ブロック（図示せず）を含み得ることに留意されたい。光学ブロックは、ディスプレイ要素７２０からの光をアイボックスに向ける１つまたは複数の光学要素（たとえば、レンズ、フレネルレンズなど）を含み得る。光学ブロックは、たとえば、画像コンテンツの一部または全部における収差を補正するか、画像の一部または全部を拡大するか、あるいはそれらの何らかの組合せを行い得る。

【0112】

ＤＣＡは、ヘッドセット７００の周囲のローカルエリアの一部分についての深度情報を決定する。ＤＣＡは、１つまたは複数のイメージングデバイス７３０と、ＤＣＡコントローラ（図７Ａに図示せず）とを含み、照明器７４０をも含み得る。いくつかの実施形態では、照明器７４０は、ローカルエリアの一部分を光で照明する。光は、たとえば、赤外線（ＩＲ）における構造化光（たとえば、ドットパターン、バーなど）、飛行時間についてのＩＲフラッシュなどであり得る。いくつかの実施形態では、１つまたは複数のイメージングデバイス７３０は、照明器７４０からの光を含むローカルエリアの一部分の画像をキャプチャする。図示のように、図７Ａは、単一の照明器７４０と２つのイメージングデバイス７３０とを示す。代替実施形態では、照明器７４０がなく、少なくとも２つのイメージングデバイス７３０がある。

【0113】

ＤＣＡコントローラは、キャプチャされた画像と１つまたは複数の深度決定技法とを使用して、ローカルエリアの一部分についての深度情報を計算する。深度決定技法は、たとえば、直接飛行時間（ＴｏＦ）深度検知、間接ＴｏＦ深度検知、構造化光、パッシブステレオ分析、アクティブステレオ分析（照明器７４０からの光によってシーンに追加されたテクスチャを使用する）、シーンの深度を決定するための何らかの他の技法、またはそれらの何らかの組合せであり得る。

【0114】

オーディオシステムはオーディオコンテンツを提供する。オーディオシステムは、図５のオーディオシステム５２５の一実施形態であり得る。一実施形態では、オーディオシステムは、トランスデューサアレイと、センサーアレイと、オーディオコントローラ７５０とを含む。ただし、他の実施形態では、オーディオシステムは、異なるおよび／または追加の構成要素を含み得る。同様に、いくつかの場合には、オーディオシステムの構成要素に関して説明される機能性は、ここで説明されるものとは異なる様式で構成要素の間で分散され得る。たとえば、コントローラの機能の一部または全部が、ＨＲＴＦシステム２００など、リモートサーバによって実施され得る。

【0115】

トランスデューサアレイは、ユーザに音を提示する。トランスデューサアレイは、複数のトランスデューサを含む。トランスデューサは、スピーカー７６０または組織トランスデューサ７７０（たとえば、骨伝導トランスデューサまたは軟骨伝導トランスデューサ）であり得る。スピーカー７６０はフレーム７１０の外部に示されているが、スピーカー７６０はフレーム７１０に囲まれ得る。いくつかの実施形態では、各耳のための個々のスピーカーの代わりに、ヘッドセット７００は、提示されたオーディオコンテンツの方向性を改善するためにフレーム７１０に一体化された複数のスピーカーを備える、図５のスピーカーアレイ５３５などのスピーカーアレイを含む。組織トランスデューサ７７０は、ユーザの頭部に結合し、ユーザの組織（たとえば、骨または軟骨）を直接振動させて、音を生成する。トランスデューサの数および／またはロケーションは、図７Ａに示されているものとは異なり得る。

【0116】

センサーアレイは、ヘッドセット７００のローカルエリア内の音を検出する。センサーアレイは、複数の音響センサー７８０を含む。音響センサー７８０は、ローカルエリア（たとえば、部屋）中の１つまたは複数の音源から発せられた音をキャプチャする。各音響センサーは、音を検出し、検出された音を電子フォーマット（アナログまたはデジタル）にコンバートするように構成される。音響センサー７８０は、音響波センサー、マイクロフォン、音トランスデューサ、または音を検出するのに適した同様のセンサーであり得る。

【0117】

いくつかの実施形態では、１つまたは複数の音響センサー７８０は、各耳の耳道中に置かれ得る（たとえば、バイノーラルマイクロフォン、または図５のマイクロフォンアセンブリ５３０として働く）。いくつかの実施形態では、音響センサー７８０は、ヘッドセット７００の外面上に置かれるか、ヘッドセット７００の内面上に置かれるか、ヘッドセット７００とは別個（たとえば、何らかの他のデバイスの一部）であるか、またはそれらの何らかの組合せであり得る。音響センサー７８０の数および／またはロケーションは、図７Ａに示されているものとは異なり得る。たとえば、収集されたオーディオ情報の量ならびにその情報の感度および／または精度を増加させるために、音響検出ロケーションの数が増加され得る。音響検出ロケーションは、マイクロフォンが、ヘッドセット７００を装着しているユーザの周囲の広範囲の方向における音を検出することが可能であるように、配向され得る。

【0118】

オーディオコントローラ７５０は、センサーアレイによって検出された音を表す、センサーアレイからの情報を処理する。オーディオコントローラ７５０は、プロセッサとコンピュータ可読記憶媒体とを備え得る。オーディオコントローラ７５０は、到来方向（ＤＯＡ）推定値を生成するか、音響伝達関数（たとえば、アレイ伝達関数および／または頭部伝達関数）を生成するか、音源のロケーションを追跡するか、音源の方向にビームを形成するか、音源を分類するか、スピーカー７６０のための音フィルタを生成するか、またはそれらの何らかの組合せを行うように構成され得る。オーディオコントローラ７５０は、図５のオーディオコントローラ５４０の一実施形態である。

【0119】

位置センサー７９０は、ヘッドセット７００の動きに応答して１つまたは複数の測定信号を生成する。位置センサー７９０は、ヘッドセット７００のフレーム７１０の一部分に位置し得る。位置センサー７９０は、慣性測定ユニット（ＩＭＵ）を含み得る。位置センサー７９０の例は、１つまたは複数の加速度計、１つまたは複数のジャイロスコープ、１つまたは複数の磁力計、動きを検出する別の好適なタイプのセンサー、ＩＭＵの誤差補正のために使用されるタイプのセンサー、またはそれらの何らかの組合せを含む。位置センサー７９０は、ＩＭＵの外部に、ＩＭＵの内部に、またはそれらの何らかの組合せで位置し得る。

【0120】

いくつかの実施形態では、ヘッドセット７００は、ヘッドセット７００の位置のための同時位置特定およびマッピング（ＳＬＡＭ）と、ローカルエリアのモデルの更新とを提供し得る。たとえば、ヘッドセット７００は、カラー画像データを生成するパッシブカメラアセンブリ（ＰＣＡ）を含み得る。ＰＣＡは、ローカルエリアの一部または全部の画像をキャプチャする１つまたは複数のＲＧＢカメラを含み得る。いくつかの実施形態では、ＤＣＡのイメージングデバイス７３０の一部または全部が、ＰＣＡとしても機能し得る。ＰＣＡによってキャプチャされた画像と、ＤＣＡによって決定された深度情報とは、ローカルエリアのパラメータを決定するか、ローカルエリアのモデルを生成するか、ローカルエリアのモデルを更新するか、またはそれらの何らかの組合せを行うために使用され得る。さらに、位置センサー７９０は、部屋内のヘッドセット７００の位置（たとえば、ロケーションおよび姿勢）を追跡する。ヘッドセット７００の構成要素に関する追加の詳細は、図８に関して以下で説明される。

【0121】

図７Ｂは、１つまたは複数の実施形態による、ＨＭＤとして実装されるヘッドセット７０５の斜視図である。ＡＲシステムおよび／またはＭＲシステムについて説明する実施形態では、ＨＭＤの前側の部分は、可視帯域（約３８０ｎｍ～７５０ｎｍ）内で少なくとも部分的に透明であり、ＨＭＤの前側とユーザの眼との間にあるＨＭＤの部分は、少なくとも部分的に透明である（たとえば、部分的に透明な電子ディスプレイ）。ＨＭＤは、前面剛体７１５とバンド７７５とを含む。ヘッドセット７０５は、図７Ａを参照しながら上記で説明された同じ構成要素の多くを含むが、ＨＭＤフォームファクタと一体化するように修正される。たとえば、ＨＭＤは、ディスプレイアセンブリと、ＤＣＡと、オーディオシステム（たとえば、オーディオシステム５２５の一実施形態）と、位置センサー７９０とを含む。図７Ｂは、照明器７４０と、複数のスピーカー７６０と、複数のイメージングデバイス７３０と、複数の音響センサー７８０と、位置センサー７９０とを示す。

【0122】

図８は、１つまたは複数の実施形態による、ヘッドセット５１５を含むシステム８００である。いくつかの実施形態では、ヘッドセット５１５は、図７Ａのヘッドセット７００または図７Ｂのヘッドセット７０５であり得る。システム８００は、人工現実環境（たとえば、仮想現実環境、拡張現実環境、混合現実環境、またはそれらの何らかの組合せ）において動作し得る。図８によって示されているシステム８００は、ヘッドセット５１５と、コンソール８１５に結合された入出力（Ｉ／Ｏ）インターフェース８１０と、ネットワーク５１０と、ＨＲＴＦシステム２００とを含む。図８は、１つのヘッドセット５１５と１つのＩ／Ｏインターフェース８１０とを含む例示的なシステム８００を示しているが、他の実施形態では、任意の数のこれらの構成要素が、システム８００中に含まれ得る。たとえば、各々が、関連するＩ／Ｏインターフェース８１０を有する、複数のヘッドセットがあり得、各ヘッドセットおよびＩ／Ｏインターフェース８１０はコンソール８１５と通信する。代替構成では、異なるおよび／または追加の構成要素が、システム８００中に含まれ得る。さらに、図８に示されている構成要素のうちの１つまたは複数に関して説明される機能性は、いくつかの実施形態では、図８に関して説明されるものとは異なる様式で構成要素の間で分散され得る。たとえば、コンソール８１５の機能性の一部または全部がヘッドセット５１５によって提供され得る。

【0123】

ヘッドセット５１５は、ディスプレイアセンブリ５２０と、オーディオシステム５２５と、光学ブロック８３５と、１つまたは複数の位置センサー８４０と、深度カメラアセンブリ（ＤＣＡ）８４５とを含む。ヘッドセット５１５のいくつかの実施形態は、図８に関して説明されるものとは異なる構成要素を有する。さらに、図８に関して説明される様々な構成要素によって提供される機能性は、他の実施形態ではヘッドセット５１５の構成要素の間で別様に分散されるか、またはヘッドセット５１５からリモートにある別個のアセンブリにおいて取り込まれ得る。

【0124】

一実施形態では、ディスプレイアセンブリ５２０は、コンソール８１５から受信されたデータに従ってユーザにコンテンツを表示する。ディスプレイアセンブリ５２０は、１つまたは複数のディスプレイ要素（たとえば、ディスプレイ要素７２０）を使用してコンテンツを表示する。ディスプレイ要素は、たとえば、電子ディスプレイであり得る。様々な実施形態では、ディスプレイアセンブリ５２０は、単一のディスプレイ要素または複数のディスプレイ要素（たとえば、ユーザの各眼のためのディスプレイ）を備える。電子ディスプレイの例は、液晶ディスプレイ（ＬＣＤ）、有機発光ダイオード（ＯＬＥＤ）ディスプレイ、アクティブマトリックス有機発光ダイオードディスプレイ（ＡＭＯＬＥＤ）、導波路ディスプレイ、何らかの他のディスプレイ、またはそれらの何らかの組合せを含む。いくつかの実施形態では、ディスプレイ要素７２０は光学ブロック８３５の機能性の一部または全部をも含み得ることに留意されたい。

【0125】

光学ブロック８３５は、電子ディスプレイから受光された画像光を拡大し、画像光に関連する光学誤差を補正し、補正された画像光をヘッドセット５１５の一方または両方のアイボックスに提示する。様々な実施形態では、光学ブロック８３５は、１つまたは複数の光学要素を含む。光学ブロック８３５中に含まれる例示的な光学要素は、アパーチャ、フレネルレンズ、凸レンズ、凹レンズ、フィルタ、反射面、または画像光に影響を及ぼす任意の他の好適な光学要素を含む。その上、光学ブロック８３５は、異なる光学要素の組合せを含み得る。いくつかの実施形態では、光学ブロック８３５中の光学要素のうちの１つまたは複数は、部分反射コーティングまたは反射防止コーティングなど、１つまたは複数のコーティングを有し得る。

【0126】

光学ブロック８３５による画像光の拡大および集束は、電子ディスプレイが、物理的により小さくなり、重さが減じ、より大きいディスプレイよりも少ない電力を消費することを可能にする。さらに、拡大は、電子ディスプレイによって提示されるコンテンツの視野を増加させ得る。たとえば、表示されるコンテンツの視野は、表示されるコンテンツが、ユーザの視野のほとんどすべて（たとえば、対角約１１０度）、およびいくつかの場合にはすべてを使用して提示されるようなものである。さらに、いくつかの実施形態では、拡大の量は、光学要素を追加することまたは取り外すことによって調整され得る。

【0127】

いくつかの実施形態では、光学ブロック８３５は、１つまたは複数のタイプの光学誤差を補正するように設計され得る。光学誤差の例は、たる形ひずみまたは糸巻き形ひずみ、縦色収差、あるいは横色収差を含む。他のタイプの光学誤差は、球面収差、色収差、またはレンズ像面湾曲による誤差、非点収差、または任意の他のタイプの光学誤差をさらに含み得る。いくつかの実施形態では、表示のために電子ディスプレイに提供されるコンテンツは予歪され、光学ブロック８３５が、そのコンテンツに基づいて生成された画像光を電子ディスプレイから受光したとき、光学ブロック８３５はそのひずみを補正する。

【0128】

位置センサー８４０は、ヘッドセット５１５の位置を示すデータを生成する電子デバイスである。位置センサー８４０は、ヘッドセット５１５の動きに応答して１つまたは複数の測定信号を生成する。位置センサー７９０は、位置センサー８４０の一実施形態である。位置センサー８４０の例は、１つまたは複数のＩＭＵ、１つまたは複数の加速度計、１つまたは複数のジャイロスコープ、１つまたは複数の磁力計、動きを検出する別の好適なタイプのセンサー、またはそれらの何らかの組合せを含む。位置センサー８４０は、並進運動（前／後、上／下、左／右）を測定するための複数の加速度計と、回転運動（たとえば、ピッチ、ヨー、ロール）を測定するための複数のジャイロスコープとを含み得る。いくつかの実施形態では、ＩＭＵは、測定信号を迅速にサンプリングし、サンプリングされたデータからヘッドセット５１５の推定位置を算出する。たとえば、ＩＭＵは、加速度計から受信された測定信号を経時的に積分して速度ベクトルを推定し、その速度ベクトルを経時的に積分して、ヘッドセット５１５上の基準点の推定位置を決定する。基準点は、ヘッドセット５１５の位置を表すために使用され得る点である。基準点は、概して空間中の点として定義され得るが、実際には、基準点は、ヘッドセット５１５内の点として定義される。

【0129】

ＤＣＡ８４５は、ローカルエリアの一部分についての深度情報を生成する。ＤＣＡは、１つまたは複数のイメージングデバイスとＤＣＡコントローラとを含む。ＤＣＡ８４５は照明器をも含み得る。ＤＣＡ８４５の動作および構造は、図７Ａに関して上記で説明された。

【0130】

オーディオシステム５２５は、ヘッドセット５１５のユーザにオーディオコンテンツを提供する。オーディオシステム５２５は、１つまたは音響センサーと、１つまたは複数のトランスデューサと、オーディオコントローラ５４０とを備え得る。オーディオシステム５２５は、空間化されたオーディオコンテンツをユーザに提供し得る。いくつかの実施形態では、オーディオシステム５２５は、ネットワーク５１０を介してＨＲＴＦシステム２００にひずみマッピングを要求し得る。図５および図６に関して上記で説明されたように、オーディオシステムは、テスト音を発するように外部スピーカー５０５に命令し、マイクロフォンアセンブリを使用してテスト音のオーディオデータをキャプチャする。オーディオシステム５２５は、ヘッドセット５１５の種々の配向におけるテスト音のオーディオデータに少なくとも部分的に基づいて、初期ＨＲＴＦのセットを算出する。オーディオシステム５２５は、ＨＲＴＦの中間セットを作成するために初期ＨＲＴＦのセットの（ＨＲＴＦサーバによって決定されたひずみ領域のうちの少なくともいくつかに部分的に基づく）一部分を廃棄する。ＨＲＴＦの中間セットは、ＨＲＴＦのセットのうちの廃棄されていないＨＲＴＦから形成される。オーディオシステム５２５は、セットの廃棄される部分に対応する１つまたは複数のＨＲＴＦを（たとえば、補間を介して）生成し、その１つまたは複数のＨＲＴＦは、ユーザについての個別化されたＨＲＴＦのセットを作成するために、ＨＲＴＦの中間セットのうちの少なくとも一部と組み合わせられる。個別化されたＨＲＴＦのセットは、ヘッドセット５２５を装着することによって引き起こされるＨＲＴＦの誤差が緩和されるようにユーザに対してカスタマイズされ、それにより、ヘッドセットを着けていないユーザの実際のＨＲＴＦを模倣する。オーディオシステム５２５は、個別化されたＨＲＴＦを使用して１つまたは複数の音フィルタを生成し、音フィルタを使用して、空間化されたオーディオコンテンツをユーザに提供し得る。

【0131】

Ｉ／Ｏインターフェース８１０は、ユーザがアクション要求を送り、コンソール８１５から応答を受信することを可能にするデバイスである。アクション要求は、特定のアクションを実施するための要求である。たとえば、アクション要求は、画像データまたはビデオデータのキャプチャを開始または終了するための命令、あるいはアプリケーション内で特定のアクションを実施するための命令であり得る。Ｉ／Ｏインターフェース８１０は、１つまたは複数の入力デバイスを含み得る。例示的な入力デバイスは、キーボード、マウス、ゲームコントローラ、またはアクション要求を受信し、そのアクション要求をコンソール８１５に通信するための任意の他の好適なデバイスを含む。Ｉ／Ｏインターフェース８１０によって受信されたアクション要求は、コンソール８１５に通信され、コンソール８１５は、そのアクション要求に対応するアクションを実施する。いくつかの実施形態では、Ｉ／Ｏインターフェース８１０は、Ｉ／Ｏインターフェース８１０の初期位置に対するＩ／Ｏインターフェース８１０の推定位置を示す較正データをキャプチャするＩＭＵを含む。いくつかの実施形態では、Ｉ／Ｏインターフェース８１０は、コンソール８１５から受信された命令に従って、ユーザに触覚フィードバックを提供し得る。たとえば、アクション要求が受信されたときに触覚フィードバックが提供されるか、または、コンソール８１５がアクションを実施するときに、コンソール８１５が、Ｉ／Ｏインターフェース８１０に命令を通信して、Ｉ／Ｏインターフェース８１０が触覚フィードバックを生成することを引き起こす。

【0132】

コンソール８１５は、ＤＣＡ８４５とヘッドセット５１５とＩ／Ｏインターフェース８１０とのうちの１つまたは複数から受信された情報に従って処理するためのコンテンツをヘッドセット５１５に提供する。図８に示されている例では、コンソール８１５は、外部スピーカー５０５と、アプリケーションストア８５５と、追跡モジュール８６０と、エンジン８６５とを含む。コンソール８１５のいくつかの実施形態は、図８に関して説明されるものとは異なるモジュールまたは構成要素を有する。特に、外部スピーカー５０５は、いくつかの実施形態ではコンソール８１５から独立している。同様に、以下でさらに説明される機能は、図８に関して説明されるものとは異なる様式でコンソール８１５の構成要素の間で分散され得る。いくつかの実施形態では、コンソール８１５に関して本明細書で説明される機能性は、ヘッドセット５１５、またはリモートシステムにおいて実装され得る。

【0133】

外部スピーカー５０５は、オーディオシステム５２５からの命令に応答してテスト音を再生する。他の実施形態では、外部スピーカー５０５は、コンソール８１５から、特に、以下でより詳細に説明されるようにエンジン８６５から、命令を受信する。

【0134】

アプリケーションストア８５５は、コンソール８１５が実行するための１つまたは複数のアプリケーションを記憶する。アプリケーションは、プロセッサによって実行されたとき、ユーザへの提示のためのコンテンツを生成する命令のグループである。アプリケーションによって生成されたコンテンツは、ヘッドセット５１５またはＩ／Ｏインターフェース８１０の移動を介してユーザから受信された入力に応答したものであり得る。アプリケーションの例は、ゲームアプリケーション、会議アプリケーション、ビデオ再生アプリケーション、または他の好適なアプリケーションを含む。

【0135】

追跡モジュール８６０は、ＤＣＡ８４５からの情報、１つまたは複数の位置センサー８４０からの情報、またはそれらの何らかの組合せを使用して、ヘッドセット５１５またはＩ／Ｏインターフェース８１０の移動を追跡する。たとえば、追跡モジュール８６０は、ヘッドセット５１５からの情報に基づいて、ローカルエリアのマッピングにおいてヘッドセット５１５の基準点の位置を決定する。追跡モジュール８６０は、オブジェクトまたは仮想オブジェクトの位置をも決定し得る。さらに、いくつかの実施形態では、追跡モジュール８６０は、ヘッドセット５１５の将来のロケーションを予測するために、位置センサー８４０からのヘッドセット５１５の位置を示すデータの部分ならびにＤＣＡ８４５からのローカルエリアの表現を使用し得る。追跡モジュール８６０は、ヘッドセット５１５またはＩ／Ｏインターフェース８１０の推定または予測された将来の位置をエンジン８６５に提供する。

【0136】

エンジン８６５は、アプリケーションを実行し、追跡モジュール８６０から、ヘッドセット５１５の位置情報、加速度情報、速度情報、予測された将来の位置、またはそれらの何らかの組合せを受信する。受信された情報に基づいて、エンジン８６５は、ユーザへの提示のためにヘッドセット５１５に提供すべきコンテンツを決定する。たとえば、受信された情報が、ユーザが左を見ていることを示す場合、エンジン８６５は、仮想ローカルエリアにおいて、またはローカルエリアを追加のコンテンツで拡張するローカルエリアにおいて、ユーザの移動をミラーリングする、ヘッドセット５１５のためのコンテンツを生成する。さらに、いくつかの実施形態では、ユーザがユーザの頭部を特定の配向に配置したことを示す受信された情報に応答して、エンジン８６５は、テスト音を再生するようにとの命令を外部スピーカー５０５に提供する。さらに、エンジン８６５は、Ｉ／Ｏインターフェース８１０から受信されたアクション要求に応答して、コンソール８１５上で実行しているアプリケーション内でアクションを実施し、そのアクションが実施されたというフィードバックをユーザに提供する。提供されるフィードバックは、ヘッドセット５１５を介した視覚または可聴フィードバック、あるいはＩ／Ｏインターフェース８１０を介した触覚フィードバックであり得る。

【0137】

ネットワーク５１０は、ヘッドセット５１５および／またはコンソール８１５をＨＲＴＦシステム２００に結合する。ネットワーク５１０は、追加のまたはより少数の構成要素をＨＲＴＦシステム５１０に結合し得る。ネットワーク５１０は、図５に関してさらに詳細に説明された。

【0138】

追加の構成情報

【0139】

本開示の実施形態の上記の説明は、説明の目的で提示されており、網羅的であること、または開示される正確な形態に本開示を限定することは意図されない。当業者は、上記の開示に照らして多くの修正および変形が可能であることを諒解することができる。

【0140】

本明細書のいくつかの部分は、情報に関する動作のアルゴリズムおよび記号表現に関して本開示の実施形態について説明する。これらのアルゴリズム説明および表現は、データ処理技術分野の当業者が、他の当業者に自身の仕事の本質を効果的に伝えるために通常使用される。これらの動作は、機能的に、計算量的に、または論理的に説明されるが、コンピュータプログラムまたは等価な電気回路、マイクロコードなどによって実装されることが理解される。さらに、一般性の喪失なしに、動作のこれらの仕組みをモジュールと呼ぶことが時々好都合であることも証明された。説明される動作およびそれらの関連するモジュールは、ソフトウェア、ファームウェア、ハードウェア、またはそれらの任意の組合せにおいて具現され得る。

【0141】

本明細書で説明されるステップ、動作、またはプロセスのいずれも、１つまたは複数のハードウェアまたはソフトウェアモジュールで、単独でまたは他のデバイスとの組合せで実施または実装され得る。一実施形態では、ソフトウェアモジュールは、コンピュータプログラムコードを含んでいるコンピュータ可読媒体を備えるコンピュータプログラム製品で実装され、コンピュータプログラムコードは、説明されるステップ、動作、またはプロセスのいずれかまたはすべてを実施するためにコンピュータプロセッサによって実行され得る。

【0142】

本開示の実施形態はまた、本明細書の動作を実施するための装置に関し得る。この装置は、必要とされる目的のために特別に構築され得、および／あるいは、この装置は、コンピュータに記憶されたコンピュータプログラムによって選択的にアクティブ化または再構成される汎用コンピューティングデバイスを備え得る。そのようなコンピュータプログラムは、非一時的有形コンピュータ可読記憶媒体、または電子命令を記憶するのに好適な任意のタイプの媒体に記憶され得、それらの媒体はコンピュータシステムバスに結合され得る。さらに、本明細書で言及される任意のコンピューティングシステムは、単一のプロセッサを含み得るか、または増加された計算能力のために複数のプロセッサ設計を採用するアーキテクチャであり得る。

【0143】

本開示の実施形態はまた、本明細書で説明されるコンピューティングプロセスによって製造される製品に関し得る。そのような製品は、コンピューティングプロセスから生じる情報を備え得、その情報は、非一時的有形コンピュータ可読記憶媒体に記憶され、本明細書で説明されるコンピュータプログラム製品または他のデータ組合せの任意の実施形態を含み得る。

【0144】

最終的に、本明細書において使用される言い回しは、主に読みやすさおよび教育目的で選択されており、本明細書において使用される言い回しは、本発明の主題を定めるかまたは制限するように選択されていないことがある。したがって、本開示の範囲はこの詳細な説明によって限定されるのではなく、むしろ、本明細書に基づく出願に関して生じる請求項によって限定されることが意図される。したがって、実施形態の開示は、以下の特許請求の範囲に記載される本開示の範囲を例示するものであり、限定するものではない。

【図1A】