(19)【発行国】日本国特許庁(JP)
(12)【公報種別】公表特許公報(A)
(11)【公表番号】
(43)【公表日】2022-03-14
(54)【発明の名称】人工現実に基づくユーザグループ
(51)【国際特許分類】
G06F 3/01 20060101AFI20220307BHJP
【ＦＩ】
G06F3/01 510
【審査請求】未請求
【予備審査請求】未請求
(21)【出願番号】P 2021530093
(86)(22)【出願日】2019-12-30
(85)【翻訳文提出日】2021-07-26
(86)【国際出願番号】 US2019068878
(87)【国際公開番号】W WO2020142402
(87)【国際公開日】2020-07-09
(31)【優先権主張番号】16/239,509
(32)【優先日】2019-01-03
(33)【優先権主張国・地域又は機関】US
(81)【指定国・地域】
【公序良俗違反の表示】
（特許庁注：以下のものは登録商標）
１．ＢＬＵＥＴＯＯＴＨ
２．ＪＡＶＡＳＣＲＩＰＴ
３．Ｂｌｕ－ｒａｙ
(71)【出願人】
【識別番号】515046968
【氏名又は名称】フェイスブック・テクノロジーズ・リミテッド・ライアビリティ・カンパニー
【氏名又は名称原語表記】ＦＡＣＥＢＯＯＫ ＴＥＣＨＮＯＬＯＧＩＥＳ， ＬＬＣ
(74)【代理人】
【識別番号】110002974
【氏名又は名称】特許業務法人Ｗｏｒｌｄ ＩＰ
(72)【発明者】
【氏名】リウ， ジム シング
(72)【発明者】
【氏名】ボアン デュ シェフ デュ ボス， オリヴィエール マリー
(72)【発明者】
【氏名】ピケ コルクス， エルメス ジェルミ
(72)【発明者】
【氏名】ロバーツ， マシュー
【テーマコード（参考）】
5E555
【Ｆターム（参考）】
5E555AA62
5E555BA04
5E555BA38
5E555BA87
5E555BB38
5E555BC18
5E555BD09
5E555BE17
5E555CA42
5E555CA45
5E555CA47
5E555CB74
5E555CB82
5E555CC01
5E555CC22
5E555DA08
5E555DB03
5E555DC07
5E555DD05
5E555EA14
5E555EA22
5E555FA00
(57)【要約】
開示されるコンピュータ実装方法は、第１のユーザの第１の環境を検出する第１の人工現実デバイスから第１の入力を受信することと、第１の入力に基づいて第１の環境の第１の環境特徴を決定することとを含み得る。本方法は、第２のユーザの第２の環境を検出する第２の人工現実デバイスから第２の入力を受信することと、第２の入力に基づいて第２の環境の第２の環境特徴を決定することとを含み得る。本方法は、第１の環境特徴を第２の環境特徴と比較することと、比較に基づいて、第１のユーザと第２のユーザとをオンライン対話のためのグループに含めることとを含み得る。様々な他の方法、システム、およびコンピュータ可読媒体も開示される。
【選択図】図３
【選択図】図３
【特許請求の範囲】
【請求項1】
第１のユーザの第１の環境を検出する第１の人工現実デバイスから第１の入力を受信することと、前記第１の入力に基づいて前記第１の環境の第１の環境特徴を決定することと、
第２のユーザの第２の環境を検出する第２の人工現実デバイスから第２の入力を受信することと、
前記第２の入力に基づいて前記第２の環境の第２の環境特徴を決定することと、
前記第１の環境特徴を前記第２の環境特徴と比較することと、
前記比較に基づいて、前記第１のユーザと前記第２のユーザとをオンライン対話のためのグループに含めることと
を含む、方法。
【請求項2】
前記第１の環境特徴が前記第１のユーザの第１のロケーションに対応し、前記第２の環境特徴が前記第２のユーザの第２のロケーションに対応する、請求項１に記載の方法。
【請求項3】
前記第１の入力が、前記第１のロケーションにおける前記第１のユーザの近傍の画像データを含み、前記第２の入力が、前記第２のロケーションにおける前記第２のユーザの近傍の画像データを含み、
前記第１の環境特徴を決定することが、前記第１の入力に基づいて前記第１のロケーションを識別することを含み、
前記第２の環境特徴を決定することが、前記第２の入力に基づいて前記第２のロケーションを識別することを含む、
請求項２に記載の方法。
【請求項4】
前記第１の環境特徴を前記第２の環境特徴と比較することが、前記第１のロケーションと前記第２のロケーションとの間の距離を決定することと、
前記距離を距離しきい値と比較することと
を含み、
前記第１のユーザと前記第２のユーザとを前記グループに含めることは、前記距離が前記距離しきい値を満たすことに基づく、
請求項３に記載の方法。
【請求項5】
前記第１のロケーションが第１のエリアに対応し、前記第２のロケーションが第２のエリアに対応し、
前記第１の環境特徴を前記第２の環境特徴と比較することが、前記第１のエリアを前記第２のエリアと比較することを含み、
前記第１のユーザと前記第２のユーザとを前記グループに含めることは、前記第１のエリアが前記第２のエリアに一致することに基づく、
請求項３に記載の方法。
【請求項6】
前記第１のエリアまたは前記第２のエリアが屋内環境に対応する、請求項５に記載の方法。
【請求項7】
前記第１の入力が、第１のロケーションにおける前記第１のユーザの近傍の画像データを含み、前記第２の入力が、第２のロケーションにおける前記第２のユーザの近傍の画像データを含み、
前記第１の環境特徴を決定することが、前記第１の入力から第１のオブジェクトを認識することを含み、
前記第２の環境特徴を決定することが、前記第２の入力から第２のオブジェクトを認識することを含み、
前記第１の環境特徴を前記第２の環境特徴と比較することが、前記第１のオブジェクトを前記第２のオブジェクトと比較することを含み、
前記第１のユーザと前記第２のユーザとを前記グループに含めることは、前記第１のオブジェクトが前記第２のオブジェクトに一致することに基づく、
請求項１に記載の方法。
【請求項8】
前記第１のオブジェクトまたは前記第２のオブジェクトが仮想オブジェクトに対応する、請求項７に記載の方法。
【請求項9】
前記第１の環境特徴または前記第２の環境特徴が仮想ロケーションに対応する、請求項１に記載の方法。
【請求項10】
前記第１の環境特徴または前記第２の環境特徴を決定することが、さらに、ロケーション信号、ＧＰＳ信号、またはＷｉＦｉ信号のうちの少なくとも１つに基づく、請求項１に記載の方法。
【請求項11】
前記第１の環境特徴を決定することが、前記第１のユーザを識別することを含み、前記第２の環境特徴を決定することが、前記第２のユーザを識別することを含み、
前記第１のユーザと前記第２のユーザとを前記グループに含めることは、さらに、前記第１のユーザが、アプリケーションに関連するソーシャルネットワークにおいて前記第２のユーザに関連することに基づく、
請求項１に記載の方法。
【請求項12】
前記第１のユーザを識別すること、または前記第２のユーザを識別することが、顔認識に基づく、請求項１１に記載の方法。
【請求項13】
コンピュータ可読命令を備えるコンピュータ可読媒体であって、前記コンピュータ可読命令は、コンピューティングデバイスの少なくとも１つのプロセッサによって実行されたとき、前記コンピューティングデバイスに、請求項１から１２のいずれか一項に記載の方法を実施させる、コンピュータ可読媒体。
【請求項14】
１つまたは複数のプロセッサと、命令を備えるメモリと、
を備えるシステムであって、前記命令は、前記１つまたは複数のプロセッサによって実行されたとき、前記システムに、
第１のユーザの第１の環境を検出する第１の人工現実デバイスから第１の入力を受信することと、
前記第１の入力に基づいて前記第１の環境の第１の環境特徴を決定することと、
第２のユーザの第２の環境を検出する第２の人工現実デバイスから第２の入力を受信することと、
前記第２の入力に基づいて前記第２の環境の第２の環境特徴を決定することと、
前記第１の環境特徴を前記第２の環境特徴と比較することと、
前記比較に基づいて、前記第１のユーザと前記第２のユーザとをオンライン対話のためのグループに含めることと
を行わせる、システム。
【請求項15】
前記第１の入力が、前記第１のユーザの第１のロケーションにおける前記第１のユーザの近傍の画像データを含み、前記第２の入力が、前記第２のユーザの第２のロケーションにおける前記第２のユーザの近傍の画像データを含み、
前記第１の環境特徴を決定することが、前記第１の入力に基づいて前記第１のロケーションを識別することを含み、
前記第２の環境特徴を決定することが、前記第２の入力に基づいて前記第２のロケーションを識別することを含む、
請求項１４に記載のシステム。
【発明の詳細な説明】
【背景技術】
【0001】
ソーシャルネットワークなどのネットワークアプリケーションプラットフォームは、様々なやり方でユーザが接続し対話することを可能にし得る。たとえば、ソーシャルネットワーク上で、ユーザがコンテンツを投稿し、他のユーザがその投稿に対してコメントまたは返答することを可能にし得る。別の例として、ユーザは、ソーシャルネットワークのチャット特徴（ｆｅａｔｕｒｅ）上のダイアログに関与し得る。ユーザをリンクするこれらの対話は、ユーザグループを定義するための基礎を提供し得る。定義されると、次いで、ユーザグループのメンバーが、グループの他のメンバーを、ソーシャルネットワークからローンチされ得る、ビデオゲームなどの特定のアクティビティに招待し得る。残念ながら、オンライン対話に基づいてグループを作成することは、かなり限定され得、ユーザが現実世界においてどのように対話し、集まり得るかを十分に考慮するとは限らないことがある。
【発明の概要】
【0002】
コンピューティングハードウェアの進歩は、拡張現実（ＡＲ）デバイスまたは仮想現実（ＶＲ）デバイスなど、人工現実デバイスをユーザにとってより利用可能にした。これらの人工現実デバイスは、ユーザの周囲環境を検知および分析することが可能であり得る。人工現実デバイスを使用するときに利用可能な追加のデータとともに、ネットワークアプリケーションプラットフォーム上の共有対話を通してユーザをリンクすること以外の追加のファクタが、ユーザグループを定義するために使用され得る。以下でより詳細に説明されるように、本開示は、人工現実信号を使用してユーザグループを定義することについて説明する。
【0003】
一例では、人工現実に基づいてユーザグループを定義するためのコンピュータ実装方法は、（１）第１のユーザの第１の環境を検出する第１の人工現実デバイスから第１の入力を受信することと、（２）第１の入力に基づいて第１の環境の第１の環境特徴を決定することと、（３）第２のユーザの第２の環境を検出する第２の人工現実デバイスから第２の入力を受信することと、（４）第２の入力に基づいて第２の環境の第２の環境特徴を決定することと、（５）第１の環境特徴を第２の環境特徴と比較することと、（６）比較に基づいて、第１のユーザと第２のユーザとをオンライン対話のためのグループに含めることとを含み得る。
【0004】
いくつかの例では、第１の環境特徴は第１のユーザの第１のロケーションに対応し得、第２の環境特徴は第２のユーザの第２のロケーションに対応し得る。第１の入力は、第１のロケーションにおける第１のユーザの近傍の画像データを含み得、第２の入力は、第２のロケーションにおける第２のユーザの近傍の画像データを含み得る。第１の環境特徴を決定することは、第１の入力に基づいて第１のロケーションを識別することを含み得、第２の環境特徴を決定することは、第２の入力に基づいて第２のロケーションを識別することを含み得る。
【0005】
いくつかの例では、第１の環境特徴を第２の環境特徴と比較することは、第１のロケーションと第２のロケーションとの間の距離を決定することと、距離を距離しきい値と比較することとを含み得る。第１のユーザと第２のユーザとをグループに含めることは、距離が距離しきい値を満たすことに基づき得る。
【0006】
いくつかの例では、第１のロケーションは第１のエリアに対応し得、第２のロケーションは第２のエリアに対応し得る。第１の環境特徴を第２の環境特徴と比較することは、第１のエリアを第２のエリアと比較することを含み得、第１のユーザと第２のユーザとをグループに含めることは、第１のエリアが第２のエリアに一致することに基づき得る。いくつかの例では、第１のエリアまたは第２のエリアは屋内環境に対応し得る。
【0007】
いくつかの例では、第１の入力は、第１のロケーションにおける第１のユーザの近傍の画像データを含み得、第２の入力は、第２のロケーションにおける第２のユーザの近傍の画像データを含み得る。第１の環境特徴を決定することは、第１の入力から第１のオブジェクトを認識することを含み得、第２の環境特徴を決定することは、第２の入力から第２のオブジェクトを認識することを含み得る。第１の環境特徴を第２の環境特徴と比較することは、第１のオブジェクトを第２のオブジェクトと比較することを含み得、第１のユーザと第２のユーザとをグループに含めることは、第１のオブジェクトが第２のオブジェクトに一致することに基づき得る。いくつかの例では、第１のオブジェクトまたは第２のオブジェクトは仮想オブジェクトに対応し得る。いくつかの例では、第１の環境特徴または第２の環境特徴は仮想ロケーションに対応し得る。
【0008】
いくつかの例では、第１の環境特徴または第２の環境特徴を決定することは、さらに、ロケーション信号、ＧＰＳ信号、またはＷｉＦｉ信号のうちの少なくとも１つに基づき得る。
【0009】
いくつかの例では、第１の環境特徴を決定することは、第１のユーザを識別することを含み得、第２の環境特徴を決定することは、第２のユーザを識別することを含み得る。グループを定義することは、さらに、第１のユーザが、アプリケーションに関連するソーシャルネットワークにおいて第２のユーザに関連することに基づき得る。いくつかの例では、第１のユーザを識別すること、または第２のユーザを識別することは、顔認識に基づき得る。
【0010】
いくつかの例では、上記で説明された方法は、コンピュータ可読媒体上のコンピュータ可読命令として符号化され得る。たとえば、コンピュータ可読媒体は、コンピューティングデバイスの少なくとも１つのプロセッサによって実行されたとき、コンピューティングデバイスに、（１）第１のユーザの第１の環境を検出する第１の人工現実デバイスから第１の入力を受信することと、（２）第１の入力に基づいて第１の環境の第１の環境特徴を決定することと、（３）第２のユーザの第２の環境を検出する第２の人工現実デバイスから第２の入力を受信することと、（４）第２の入力に基づいて第２の環境の第２の環境特徴を決定することと、（５）第１の環境特徴を第２の環境特徴と比較することと、（６）比較に基づいて、第１のユーザと第２のユーザとをオンライン対話のためのグループに含めることとを行わせ得る１つまたは複数のコンピュータ実行可能命令を含み得る。
【0011】
いくつかの例では、第１の入力は、第１のユーザの第１のロケーションにおける第１のユーザの近傍の画像データを含み得、第２の入力は、第２のユーザの第２のロケーションにおける第２のユーザの近傍の画像データを含み得る。第１の環境特徴を決定することは、第１の入力に基づいて第１のロケーションを識別することを含み得、第２の環境特徴を決定することは、第２の入力に基づいて第２のロケーションを識別することを含み得る。
【0012】
いくつかの例では、第１のロケーションは第１のエリアに対応し得、第２のロケーションは第２のエリアに対応し得る。第１の環境特徴を第２の環境特徴と比較することは、第１のエリアを第２のエリアと比較することを含み得、第１のユーザと第２のユーザとをグループに含めることは、第１のエリアが第２のエリアに一致することに基づき得る。
【0013】
いくつかの例では、第１の入力は、第１のロケーションにおける第１のユーザの近傍の画像データを含み得、第２の入力は、第２のロケーションにおける第２のユーザの近傍の画像データを含み得る。第１の環境特徴を決定することは、第１の入力から第１のオブジェクトを認識することを含み得、第２の環境特徴を決定することは、第２の入力から第２のオブジェクトを認識することを含み得る。第１の環境特徴を第２の環境特徴と比較することは、第１のオブジェクトを第２のオブジェクトと比較することを含み得、第１のユーザと第２のユーザとをグループに含めることは、第１のオブジェクトが第２のオブジェクトに一致することに基づき得る。
【0014】
いくつかの例では、第１の環境特徴を決定することは、第１のユーザを識別することを含み得、第２の環境特徴を決定することは、第２のユーザを識別することを含み得、グループを定義することは、さらに、第１のユーザが、アプリケーションに関連するソーシャルネットワークにおいて第２のユーザに関連することに基づき得る。いくつかの例では、第１の環境特徴または第２の環境特徴は仮想ロケーションに対応し得る。
【0015】
さらに、人工現実に基づいてユーザグループを定義するための対応するシステムは、１つまたは複数のプロセッサと、命令を備えるメモリとを含み得、命令は、１つまたは複数のプロセッサによって実行されたとき、システムに、（１）第１のユーザの第１の環境を検出する第１の人工現実デバイスから第１の入力を受信することと、（２）第１の入力に基づいて第１の環境の第１の環境特徴を決定することと、（３）第２のユーザの第２の環境を検出する第２の人工現実デバイスから第２の入力を受信することと、（４）第２の入力に基づいて第２の環境の第２の環境特徴を決定することと、（５）第１の環境特徴を第２の環境特徴と比較することと、（６）比較に基づいて、第１のユーザと第２のユーザとをオンライン対話のためのグループに含めることとを行わせ得る。
【0016】
いくつかの例では、第１の入力は、第１のユーザの第１のロケーションにおける第１のユーザの近傍の画像データを含み得、第２の入力は、第２のユーザの第２のロケーションにおける第２のユーザの近傍の画像データを含み得る。第１の環境特徴を決定することは、第１の入力に基づいて第１のロケーションを識別することを含み得、第２の環境特徴を決定することは、第２の入力に基づいて第２のロケーションを識別することを含み得る。
【0017】
上述の実施形態のいずれかからの特徴が、本明細書で説明される一般的な原理に従って、互いと組み合わせて使用され得る。これらおよび他の実施形態、特徴、および利点は、添付の図面および特許請求の範囲とともに以下の発明を実施するための形態を読むとより十分に理解されよう。
【0018】
添付の図面は、いくつかの例示的な実施形態を示し、本明細書の一部である。以下の説明とともに、これらの図面は、本開示の様々な原理を示し、それらの原理について説明する。
【図面の簡単な説明】
【0019】
【図1】本開示の態様による、人工現実信号を使用してユーザグループを定義するための例示的なシステムのブロック図である。
【図2】本開示の態様による、例示的なネットワーク環境のブロック図である。
【図3】本開示の態様による、人工現実信号を使用してユーザグループを定義するための例示的な方法の流れ図である。
【図4A-4B】本開示の態様による、ユーザ環境の簡略図である。
【図5】本開示の態様による、例示的なＡＲシステムの図である。
【図6】本開示の態様による、例示的なＡＲシステムの図である。
【図7】本開示の態様による、例示的なＶＲシステムの図である。
【発明を実施するための形態】
【0020】
図面全体にわたって、同一の参照符号および説明は、同様であるが必ずしも同一でない要素を指示する。本明細書で説明される例示的な実施形態は、様々な修正および代替形態が可能であるが、特定の実施形態が、図面において例として示されており、本明細書で詳細に説明される。しかしながら、本明細書で説明される例示的な実施形態は、開示される特定の形態に限定されるものではない。むしろ、本開示は、添付の特許請求の範囲内に入るすべての修正、均等物、および代替形態をカバーする。
【0021】
本開示は、一般に、人工現実信号を使用してユーザグループを定義することを対象とする。以下でより詳細に説明されるように、本開示の実施形態は、ユーザの人工現実デバイスから入力を受信し、各ユーザに対してそれぞれの環境特徴を決定し得る。環境特徴は、ユーザの環境が一致するかどうかを決定するために比較され得る。環境が一致したとき、対応するユーザは一緒にグループ化され得る。
【0022】
本開示の実施形態は、人工現実デバイスからの信号を活用するように構成されない旧来のシステムに勝るいくつかの特徴および利点を提供し得る。旧来のシステムは、ユーザグループを定義するための利用可能な信号が限定され得る。たとえば、ユーザグループは、ネットワークアプリケーションプラットフォーム上で対話したユーザをリンクすることに基づいて定義され得る。人工現実デバイスは、たとえば、物理的近接に基づいてユーザをグループ化することを可能にするために追加の信号を提供し得る。
【0023】
本開示の実施形態は、人工現実デバイス入力に基づいてユーザグループを定義するための方法を提供し得る。さらに、本開示の実施形態は、人工現実体験のために必要とされるもの以上に処理要件を著しく増加させることなしに、ユーザグループを定義する、より高性能の方法を組み込むことによって、コンピュータの働きを改善し得る。その上、本開示の実施形態は、たとえば、利用可能な信号を使用して人工現実ユーザをグループ化するための直観的なやり方を提供することによって、人工現実の分野を改善し得る。これらおよび他の特徴および利点は、本明細書で説明される実施形態によって可能にされ得る。
【0024】
以下は、図１～図７を参照しながら、人工現実信号を使用してユーザグループを定義するためのシステムおよび方法の詳細な説明を提供する。図１は、人工現実に基づいてユーザグループを定義するための例示的なシステムを示す。図２は、例示的なネットワーク環境を示す。図３は、人工現実信号を使用してユーザグループを定義する例示的なプロセスを示す。図４Ａ～図４Ｂは、人工現実信号を使用してユーザがどのようにグループ化され得るかの様々な例を示す。図５は、例示的なＡＲシステムを示す。図６は、別の例示的なＡＲシステムを示す。図７は、例示的なＶＲシステムを示す。
【0025】
図１は、人工現実信号を使用してユーザグループを定義するための例示的なシステム１００のブロック図である。この図に示されているように、例示的なシステム１００は、１つまたは複数のタスクを実施するための１つまたは複数のモジュール１０２を含み得る。以下でより詳細に説明されるように、モジュール１０２は、第１の受信モジュール１０４と、第１の特徴モジュール１０６と、第２の受信モジュール１０８と、第２の特徴モジュール１１０と、比較モジュール１１２と、グループ化モジュール１１４とを含み得る。別個の要素として示されているが、図１中のモジュール１０２のうちの１つまたは複数は、単一のモジュールまたはアプリケーションの部分を表し得る。
【0026】
いくつかの実施形態では、図１中のモジュール１０２のうちの１つまたは複数は、コンピューティングデバイスによって実行されたとき、コンピューティングデバイスに１つまたは複数のタスクを実施させ得る、１つまたは複数のソフトウェアアプリケーションまたはプログラムを表し得る。たとえば、および以下でより詳細に説明されるように、モジュール１０２のうちの１つまたは複数は、図２に示されているデバイス（たとえば、コンピューティングデバイス２０２および／またはサーバ２０６）など、１つまたは複数のコンピューティングデバイスに記憶され、１つまたは複数のコンピューティングデバイス上で稼働するように構成されたモジュールを表し得る。図１中のモジュール１０２のうちの１つまたは複数は、１つまたは複数のタスクを実施するように構成された１つまたは複数の専用コンピュータのすべてまたは部分をも表し得る。
【0027】
図１に示されているように、例示的なシステム１００は、メモリ１４０など、１つまたは複数のメモリデバイスをも含み得る。メモリ１４０は、概して、データおよび／またはコンピュータ可読命令を記憶することが可能な、任意のタイプまたは形態の揮発性または不揮発性記憶デバイスまたは媒体を表す。一例では、メモリ１４０は、モジュール１０２のうちの１つまたは複数を記憶、ロード、および／または維持し得る。メモリ１４０の例は、限定はしないが、ランダムアクセスメモリ（ＲＡＭ）、読取り専用メモリ（ＲＯＭ）、フラッシュメモリ、ハードディスクドライブ（ＨＤＤ）、ソリッドステートドライブ（ＳＳＤ）、光ディスクドライブ、キャッシュ、上記のうちの１つまたは複数の変形形態または組合せ、および／あるいは任意の他の好適な記憶メモリを含む。
【0028】
図１に示されているように、例示的なシステム１００は、物理プロセッサ１３０など、１つまたは複数の物理プロセッサをも含み得る。物理プロセッサ１３０は、概して、コンピュータ可読命令を解釈および／または実行することが可能な任意のタイプまたは形態のハードウェア実装処理ユニットを表す。一例では、物理プロセッサ１３０は、メモリ１４０に記憶されたモジュール１０２のうちの１つまたは複数にアクセスし、および／またはそれらのモジュールを修正し得る。追加または代替として、物理プロセッサ１３０は、人工現実信号を使用してユーザグループを定義することを容易にするためにモジュール１０２のうちの１つまたは複数を実行し得る。物理プロセッサ１３０の例は、限定はしないが、マイクロプロセッサ、マイクロコントローラ、中央処理ユニット（ＣＰＵ）、ソフトコアプロセッサを実装するフィールドプログラマブルゲートアレイ（ＦＰＧＡ）、特定用途向け集積回路（ＡＳＩＣ）、上記のうちの１つまたは複数の部分、上記のうちの１つまたは複数の変形形態または組合せ、および／あるいは任意の他の好適な物理プロセッサを含む。
【0029】
図１に示されているように、例示的なシステム１００は１つまたは複数のセンサー１２０をも含み得、１つまたは複数のセンサー１２０は、環境データをキャプチャするための任意のタイプのセンサーであり得る。環境センサーは、たとえば、図２、図５、図６、および図７に関して、以下でさらに説明されるように、光センサー、オーディオセンサー、アンテナなどを含み得る。
【0030】
図１中の例示的なシステム１００は、様々なやり方で実装され得る。たとえば、例示的なシステム１００の全部または一部分は、図２中の例示的なネットワーク環境２００、図５中の拡張現実システム５００、図６中の拡張現実システム６００、および／または図７中の仮想現実システム７００の部分を表し得る。
【0031】
図２は、本開示の様々な態様を実装することが可能な例示的なネットワーク環境２００を示す。図２に示されているように、ネットワーク環境２００は、コンピューティングデバイス２０２と、ネットワーク２０４と、サーバ２０６とを含み得る。コンピューティングデバイス２０２は、ＡＲデバイス（たとえば、ＡＲ眼鏡）、デスクトップコンピュータ、ラップトップコンピュータ、タブレットデバイス、スマートフォン、または他のコンピューティングデバイスなど、クライアントデバイスまたはユーザデバイスであり得る。コンピューティングデバイス２０２は、１つまたは複数のプロセッサであり得る物理プロセッサ２３０と、メモリ２４０と、センサー１２０とを含み得る。いくつかの実装形態では、コンピューティングデバイス２０２は、画像をユーザのローカル環境のユーザのビュー上にオーバーレイするディスプレイを有するＡＲデバイスを表し得る。たとえば、ディスプレイは、ユーザがユーザの環境を見ることができるように、環境からの光が通過することを可能にする透明媒体を含み得る。ディスプレイは、次いで、情報をオーバーレイするために透明媒体上に描き得る。代替的に、ディスプレイは、透明媒体上におよび／またはユーザの眼上に画像を投影し得る。ディスプレイの実施形態は、以下でさらに説明される。
【0032】
サーバ２０６は、アプリケーションをホストすることが可能な１つまたは複数のサーバを表すか、または含み得る。たとえば、アプリケーションは、ネットワーク２０４とサーバ２０６とを通して複数のユーザをサポートし得る。サーバ２０６は、１つまたは複数のプロセッサを含み得る物理プロセッサ２３０と、モジュール１０２を記憶し得るメモリ２４０と、センサー１２０とを含み得る。
【0033】
コンピューティングデバイス２０２は、ネットワーク２０４を通してサーバ２０６に通信可能に結合され得る。ネットワーク２０４は、インターネットなどの任意のタイプまたは形態の通信ネットワークを表し得、ＬＡＮなどの１つまたは複数の物理接続、および／またはＷＡＮなどのワイヤレス接続を備え得る。
【0034】
図３は、人工現実信号を使用してユーザグループを定義するための例示的なコンピュータ実装方法３００の流れ図である。図３に示されているステップは、図１、図２、および図５～図７に示されている（１つまたは複数の）システムを含む、任意の好適なコンピュータ実行可能コードおよび／またはコンピューティングシステムによって実施され得る。一例では、図３に示されているステップの各々が、その構造が複数のサブステップを含みおよび／または複数のサブステップによって表される、アルゴリズムを表し得、その例が以下でより詳細に提供される。
【0035】
図３に示されているプロセスの概観として、ステップ３１０において、本明細書で説明されるシステムのうちの１つまたは複数は、第１のユーザの第１の環境を検出する第１の人工現実デバイスから第１の入力を受信し得る。ステップ３２０において、本明細書で説明されるシステムのうちの１つまたは複数は、第１の入力に基づいて第１の環境の第１の環境特徴を決定し得る。ステップ３３０において、本明細書で説明されるシステムのうちの１つまたは複数は、第２のユーザの第２の環境を検出する第２の人工現実デバイスから第２の入力を受信し得る。ステップ３４０において、本明細書で説明されるシステムのうちの１つまたは複数は、第２の入力に基づいて第２の環境の第２の環境特徴を決定し得る。ステップ３５０において、本明細書で説明されるシステムのうちの１つまたは複数は、第１の環境特徴を第２の環境特徴と比較し得る。ステップ３６０において、本明細書で説明されるシステムのうちの１つまたは複数は、比較に基づいて、第１のユーザと第２のユーザとをオンライン対話のためのグループに含め得る。
【0036】
以下でさらに詳細に説明される方法３００は、屋外ロケーションおよび／または屋内ロケーションなど、様々なロケーションにおけるユーザに適用され得る。方法３００は、屋内ロケーションのために特に有用であり得る。人工現実デバイスのユーザは、しばしば、屋外ロケーションにおける使用よりも安全であり得る、屋内ロケーションにおいて人工現実デバイスを使用し得る。さらに、人工現実デバイスは、屋内ＧＰＳ信号など、他の劣化した信号を補償することが可能であり得る追加の信号およびデータを提供し得る。図４Ａおよび図４Ｂは、ユーザ４１０Ａ～４１０Ｈを含む、屋内環境４０１の簡略化されたマップビューを示す。環境４０１は、たとえば、様々な部屋を含んでいる建築物のフロアなどの屋内ロケーションであり得る。図４Ａ中のユーザ４１０Ａ～４１０Ｅ、および図４Ｂ中のユーザ４１０Ｆ～４１０Ｈは、様々な部屋にわたって散らばり得る。ユーザ４１０Ａ～４１０Ｈの各々は、それらのユーザのそれぞれの環境を検出するためにユーザ自身のコンピューティングデバイス２０２を使用し得る。たとえば、第１の入力は、図４中のユーザ４１０Ａの近傍の画像データを含み得る。
【0037】
画像データに加えてまたは画像データの代わりに、第１の入力は、他の人工現実信号など、他のタイプのデータを含み得る。いくつかの実施形態では、「人工現実信号」という用語は、人工現実システムが周囲環境を検知するために使用し得る信号、入力などを指し得る。人工現実信号の例は、限定はしないが、画像データ、オーディオデータ、ロケーション信号、ＧＰＳ信号、Ｗｉ－Ｆｉ信号などを含む。人工現実信号の他の例は、人工現実デバイスを使用するユーザ入力、人工現実体験におけるユーザ対話から導出された信号および／またはデータ、人工現実アプリケーションデータなどを含み得る。様々な人工現実デバイスは、人工現実信号を作り出すことが可能であり得る。
【0038】
コンピューティングデバイス２０２などの本開示の実施形態は、様々なタイプの人工現実システムを含むか、またはそれらのシステムとともに実装され得る。人工現実は、ユーザへの提示の前に何らかの様式で調整された形式の現実であり、これは、たとえば、仮想現実（ＶＲ）、拡張現実（ＡＲ）、複合現実（ＭＲ）、ハイブリッド現実、あるいはそれらの何らかの組合せおよび／または派生物を含み得る。人工現実コンテンツは、完全に生成されたコンテンツ、またはキャプチャされた（たとえば、現実世界の）コンテンツと組み合わせられた生成されたコンテンツを含み得る。人工現実コンテンツは、ビデオ、オーディオ、触覚フィードバック、またはそれらの何らかの組合せを含み得、それらのいずれも、単一のチャネルまたは複数のチャネルにおいて提示され得る（観察者に３次元効果をもたらすステレオビデオなど）。加えて、いくつかの実施形態では、人工現実は、たとえば、人工現実におけるコンテンツを作り出すために使用される、および／または人工現実において（たとえば、人工現実におけるアクティビティを実施するために）別様に使用されるアプリケーション、製品、アクセサリ、サービス、またはそれらの何らかの組合せにも関連し得る。
【0039】
人工現実システムは、様々な異なるフォームファクタおよび構成において実装され得る。いくつかの人工現実システムは、ニアアイディスプレイ（ＮＥＤ）なしで働くように設計され得、その一例が図５中のＡＲシステム５００である。他の人工現実システムは、現実世界への可視性をも提供するＮＥＤを含む（たとえば、図６中のＡＲシステム６００）か、または人工現実にユーザを視覚的に没入させるＮＥＤを含み得る（たとえば、図７中のＶＲシステム７００）。いくつかの人工現実デバイスは独立型システムであり得るが、他の人工現実デバイスは、人工現実体験をユーザに提供するために外部デバイスと通信および／または協調し得る。そのような外部デバイスの例は、ハンドヘルドコントローラ、モバイルデバイス、デスクトップコンピュータ、ユーザによって装着されるデバイス、１人または複数の他のユーザによって装着されるデバイス、および／または任意の他の好適な外部システムを含む。
【0040】
図５を参照すると、ＡＲシステム５００は、概して、ユーザの身体部分（たとえば、頭部）の周りに適合するように寸法決定されたウェアラブルデバイスを表す。図５に示されているように、システム５００は、フレーム５０２と、フレーム５０２に結合され、ローカル環境を観測することによってローカル環境に関する情報を集めるように構成されたカメラアセンブリ５０４とを含み得る。カメラアセンブリ５０４はカメラ１５０に対応し得る。ＡＲシステム５００は、出力オーディオトランスデューサ５０８（Ａ）および５０８（Ｂ）ならびに入力オーディオトランスデューサ５１０など、１つまたは複数のオーディオデバイスをも含み得る。出力オーディオトランスデューサ５０８（Ａ）および５０８（Ｂ）は、オーディオフィードバックおよび／またはコンテンツをユーザに提供し得、入力オーディオトランスデューサ５１０は、ユーザの環境におけるオーディオをキャプチャし得る。
【0041】
示されているように、ＡＲシステム５００は、ユーザの眼の前に配置されるＮＥＤを必ずしも含むとは限らない。ＮＥＤをもたないＡＲシステムは、ヘッドバンド、ハット、ヘアバンド、ベルト、ウォッチ、リストバンド、アンクルバンド、リング、ネックバンド、ネックレス、胸バンド、アイウェアフレーム、および／あるいは任意の他の好適なタイプまたは形態の装置など、様々な形態をとり得る。ＡＲシステム１００はＮＥＤを含まないことがあるが、ＡＲシステム５００は、他のタイプのスクリーンまたは視覚フィードバックデバイス（たとえば、フレーム５０２の側部に組み込まれたディスプレイスクリーン）を含み得る。
【0042】
本開示で説明される実施形態は、１つまたは複数のＮＥＤを含むＡＲシステムにおいても実装され得る。たとえば、図６に示されているように、ＡＲシステム６００は、ユーザの眼の前で左ディスプレイデバイス６１５（Ａ）および右ディスプレイデバイス６１５（Ｂ）を保持するように構成されたフレーム６１０をもつアイウェアデバイス６０２を含み得る。ディスプレイデバイス６１５（Ａ）とディスプレイデバイス６１５（Ｂ）とは、画像または一連の画像をユーザに提示するために、一緒にまたは独立して働き得る。ＡＲシステム６００は、２つのディスプレイを含むが、本開示の実施形態は、単一のＮＥＤまたは３つ以上のＮＥＤをもつＡＲシステムにおいて実装され得る。ＡＲシステム６００はまた、カメラ１５０（図示せず）などの１つまたは複数のカメラアセンブリを含むか、または１つまたは複数のカメラアセンブリに結合され得る。
【0043】
いくつかの実施形態では、ＡＲシステム６００は、センサー６４０など、１つまたは複数のセンサーを含み得る。センサー６４０は、ＡＲシステム６００の動きに応答して測定信号を生成し得、フレーム６１０の実質的に任意の部分上に位置し得る。センサー６４０は、位置センサー、慣性測定ユニット（ＩＭＵ：ｉｎｅｒｔｉａｌ ｍｅａｓｕｒｅｍｅｎｔ ｕｎｉｔ）、深度カメラアセンブリ、またはそれらの任意の組合せを含み得る。いくつかの実施形態では、ＡＲシステム６００は、センサー６４０を含むことも含まないこともあり、または２つ以上のセンサーを含み得る。センサー６４０がＩＭＵを含む実施形態では、ＩＭＵは、センサー６４０からの測定信号に基づいて較正データを生成し得る。センサー６４０の例は、限定はしないが、加速度計、ジャイロスコープ、磁力計、動きを検出する他の好適なタイプのセンサー、ＩＭＵの誤差補正のために使用されるセンサー、またはそれらの何らかの組合せを含み得る。
【0044】
ＡＲシステム６００は、まとめて音響センサー６２０と呼ばれる、複数の音響センサー６２０（Ａ）～６２０（Ｊ）をもつマイクロフォンアレイをも含み得る。音響センサー６２０は、音波によって誘起された空気圧力変動を検出するトランスデューサであり得る。各音響センサー６２０は、音を検出し、検出された音を電子フォーマット（たとえば、アナログまたはデジタルフォーマット）にコンバートするように構成され得る。図６中のマイクロフォンアレイは、たとえば、１０個の音響センサー、すなわち、ユーザの対応する耳の内部に置かれるように設計され得る６２０（Ａ）および６２０（Ｂ）、フレーム６１０上の様々なロケーションに配置され得る音響センサー６２０（Ｃ）、６２０（Ｄ）、６２０（Ｅ）、６２０（Ｆ）、６２０（Ｇ）、および６２０（Ｈ）、ならびに／または、対応するネックバンド６０５上に配置され得る音響センサー６２０（Ｉ）および６２０（Ｊ）を含み得る。
【0045】
マイクロフォンアレイの音響センサー６２０の構成は変動し得る。ＡＲシステム６００は、１０個の音響センサー６２０を有するものとして図６に示されているが、音響センサー６２０の数は、１０よりも大きくまたは小さくなり得る。いくつかの実施形態では、より高い数の音響センサー６２０を使用することは、収集されるオーディオ情報の量ならびに／またはオーディオ情報の感度および正確さを増加させ得る。逆に、より低い数の音響センサー６２０を使用することは、収集されたオーディオ情報を処理するためにコントローラ６５０によって必要とされる計算電力を減少させ得る。さらに、マイクロフォンアレイの各音響センサー６２０の位置は変動し得る。たとえば、音響センサー６２０の位置は、ユーザ上の画定された位置、フレーム６１０上の画定された座標、各音響センサーに関連する配向、またはそれらの何らかの組合せを含み得る。
【0046】
音響センサー６２０（Ａ）および６２０（Ｂ）は、耳介の後ろまたは外耳内もしくは窩内など、ユーザの耳の異なる部分上に配置され得る。あるいは、耳道の内部の音響センサー６２０に加えて、耳上にまたは耳の周囲に追加の音響センサーがあり得る。ユーザの耳道の隣に音響センサーが配置されると、マイクロフォンアレイは、音がどのように耳道に到来するかに関する情報を収集することが可能になり得る。（たとえば、バイノーラルマイクロフォンとして）ユーザの頭部の両側に音響センサー６２０のうちの少なくとも２つを配置することによって、ＡＲデバイス６００は、バイノーラル聴覚をシミュレートし、ユーザの頭部の周りの３Ｄステレオ音場をキャプチャし得る。いくつかの実施形態では、音響センサー６２０（Ａ）および６２０（Ｂ）はワイヤード接続を介してＡＲシステム６００に接続され得、他の実施形態では、音響センサー６２０（Ａ）および６２０（Ｂ）はワイヤレス接続（たとえば、Ｂｌｕｅｔｏｏｔｈ接続）を介してＡＲシステム６００に接続され得る。さらに他の実施形態では、音響センサー６２０（Ａ）および６２０（Ｂ）は、ＡＲシステム６００とともにまったく使用されないことがある。
【0047】
フレーム６１０上の音響センサー６２０は、テンプルの長さに沿って、ブリッジにわたって、ディスプレイデバイス６１５（Ａ）および６１５（Ｂ）の上方にまたは下方に、あるいはそれらの何らかの組合せにおいて配置され得る。音響センサー６２０は、マイクロフォンアレイが、ＡＲシステム６００を装着しているユーザの周囲の広範囲の方向における音を検出することが可能であるように、配向され得る。いくつかの実施形態では、マイクロフォンアレイにおける各音響センサー６２０の相対位置を決定するための最適化プロセスがＡＲシステム６００の製造中に実施され得る。
【0048】
ＡＲシステム６００は、さらに、ネックバンド６０５など、外部デバイス（たとえば、ペアにされたデバイス）を含むかまたはそのデバイスに接続され得る。示されているように、ネックバンド６０５は、１つまたは複数のコネクタ６３０を介してアイウェアデバイス６０２に結合され得る。コネクタ６３０は、ワイヤードまたはワイヤレスコネクタであり得、電気的および／または非電気的（たとえば、構造的）構成要素を含み得る。いくつかの場合には、アイウェアデバイス６０２とネックバンド６０５とは、それらの間のワイヤードまたはワイヤレス接続なしに独立して動作し得る。図６は、アイウェアデバイス６０２およびネックバンド６０５上の例示的なロケーションにおけるアイウェアデバイス６０２およびネックバンド６０５の構成要素を示すが、それらの構成要素は、他の場所に位置し、ならびに／あるいはアイウェアデバイス６０２および／またはネックバンド６０５上に別様に分散され得る。いくつかの実施形態では、アイウェアデバイス６０２およびネックバンド６０５の構成要素は、アイウェアデバイス６０２、ネックバンド６０５、またはそれらの何らかの組合せとペアにされた、１つまたは複数の追加の周辺デバイス上に位置し得る。さらに、ネックバンド６０５は、概して、任意のタイプまたは形態のペアにされたデバイスを表す。したがって、ネックバンド６０５の以下の説明は、スマートウォッチ、スマートフォン、リストバンド、他のウェアラブルデバイス、ハンドヘルドコントローラ、タブレットコンピュータ、ラップトップコンピュータなど、様々な他のペアにされたデバイスにも適用され得る。
【0049】
ネックバンド６０５など、外部デバイスをＡＲアイウェアデバイスとペアリングすることは、アイウェアデバイスが、依然として、拡張能力のための十分なバッテリーおよび計算電力を提供しながら、一対の眼鏡のフォームファクタを達成することを可能にし得る。ＡＲシステム６００のバッテリー電力、計算リソース、および／または追加の特徴の一部または全部が、ペアにされたデバイスによって提供されるか、またはペアにされたデバイスとアイウェアデバイスとの間で共有され、したがって、依然として、所望の機能性を保持しながら、アイウェアデバイスの重量、熱プロファイル、およびフォームファクタを全体的に低減し得る。たとえば、ネックバンド６０５は、ユーザが、ユーザの頭の上で許容するであろうよりも重い重量負荷をユーザの肩の上で許容し得るので、通常ならばアイウェアデバイス上に含まれるであろう構成要素が、ネックバンド６０５中に含まれることを可能にし得る。ネックバンド６０５は、周辺環境に熱を発散および放散させるためのより大きい表面エリアをも有し得る。したがって、ネックバンド６０５は、通常ならばスタンドアロンアイウェアデバイス上で可能であることがあるよりも大きいバッテリーおよび計算容量を可能にし得る。ネックバンド６０５がもつ重量が、ユーザにとって、アイウェアデバイス６０２がもつ重量ほど侵襲的でないことがあるので、ユーザは、ユーザが重いスタンドアロンアイウェアデバイスを装着することを許容するであろうよりも長い時間の長さの間、より軽いアイウェアデバイスを装着し、ペアにされたデバイスを携帯または装着することを許容し、それにより、人工現実環境がユーザの日々の活動により完全に組み込まれることが可能になり得る。
【0050】
ネックバンド６０５は、アイウェアデバイス６０２と、および／または他のデバイスに通信可能に結合され得る。他のデバイスは、ＡＲシステム６００にいくつかの機能（たとえば、追跡、位置を特定すること、深度マッピング、処理、ストレージなど）を提供し得る。図６の実施形態では、ネックバンド６０５は、マイクロフォンアレイの一部である（または潜在的にそれら自体のマイクロフォンサブアレイを形成する）２つの音響センサー（たとえば、６２０（Ｉ）および６２０（Ｊ））を含み得る。ネックバンド６０５は、コントローラ６２５と電源６３５とをも含み得る。
【0051】
ネックバンド６０５の音響センサー６２０（Ｉ）および６２０（Ｊ）は、音を検出し、検出された音を電子フォーマット（たとえば、アナログまたはデジタル）にコンバートするように構成され得る。図６の実施形態では、音響センサー６２０（Ｉ）および６２０（Ｊ）は、ネックバンド６０５上に配置され、それにより、ネックバンド音響センサー６２０（Ｉ）および６２０（Ｊ）と、アイウェアデバイス６０２上に配置された他の音響センサー６２０との間の距離を増加させ得る。いくつかの場合には、マイクロフォンアレイの音響センサー６２０間の距離を増加させることは、マイクロフォンアレイを介して実施されるビームフォーミングの正確さを改善し得る。たとえば、音響センサー６２０（Ｃ）および６２０（Ｄ）によって音が検出され、音響センサー６２０（Ｃ）と音響センサー６２０（Ｄ）との間の距離が、たとえば、音響センサー６２０（Ｄ）と音響センサー６２０（Ｅ）との間の距離よりも大きい場合、検出された音の決定されたソースロケーションは、音が音響センサー６２０（Ｄ）および６２０（Ｅ）によって検出された場合よりも正確であり得る。
【0052】
ネックバンド６０５のコントローラ６２５は、ネックバンド６０５および／またはＡＲシステム６００上のセンサーによって生成された情報を処理し得る。たとえば、コントローラ６２５は、マイクロフォンアレイによって検出された音を表す、マイクロフォンアレイからの情報を処理し得る。各検出された音について、コントローラ６２５は、検出された音がマイクロフォンアレイに到来した方向を推定するために、ＤｏＡ推定を実施し得る。マイクロフォンアレイが音を検出したとき、コントローラ６２５はオーディオデータセットを情報でポピュレートし得る。ＡＲシステム６００が慣性測定ユニットを含む実施形態では、コントローラ６２５は、アイウェアデバイス６０２上に位置するＩＭＵからのすべての慣性算出および空間算出を計算し得る。コネクタ６３０は、ＡＲシステム６００とネックバンド６０５との間で、およびＡＲシステム６００とコントローラ６２５との間で情報を伝達し得る。その情報は、光データ、電気データ、ワイヤレスデータの形態、または任意の他の送信可能なデータ形態のものであり得る。ＡＲシステム６００によって生成された情報の処理をネックバンド６０５に移動することは、アイウェアデバイス６０２における重量および熱を低減し、アイウェアデバイス６０２は、ユーザにとってより快適になり得る。
【0053】
ネックバンド６０５中の電源６３５は、アイウェアデバイス６０２および／またはネックバンド６０５に電力を提供し得る。電源６３５は、限定はしないが、リチウムイオンバッテリー、リチウムポリマーバッテリー、一次リチウムバッテリー、アルカリバッテリー、または任意の他の形態の電力ストレージを含み得る。いくつかの場合には、電源６３５はワイヤード電源であり得る。アイウェアデバイス６０２上ではなくネックバンド６０５上に電源６３５を含めることは、電源６３５によって生成された重量および熱をより良く分散するのを助け得る。
【0054】
述べられたように、いくつかの人工現実システムが、人工現実を実際の現実と混合する代わりに、現実世界の、ユーザの感覚認知のうちの１つまたは複数を仮想体験と実質的に置き換え得る。このタイプのシステムの一例が、図７中のＶＲシステム７００など、ユーザの視野をほぼまたは完全にカバーする頭部装着型ディスプレイシステムである。ＶＲシステム７００は、ユーザの頭部の周りに適合するように成形された前方剛体７０２とバンド７０４とを含み得る。ＶＲシステム７００は、出力オーディオトランスデューサ７０６（Ａ）および７０６（Ｂ）をも含み得る。さらに、図７には示されていないが、前方剛体７０２は、人工現実体験を作り出すための、１つまたは複数の電子ディスプレイ、１つまたは複数の慣性測定ユニット（ＩＭＵ）、１つまたは複数のトラッキングエミッタまたは検出器、および／あるいは任意の他の好適なデバイスまたはシステムを含む、１つまたは複数の電子要素を含み得る。
【0055】
人工現実システムは、様々なタイプの視覚フィードバック機構を含み得る。たとえば、ＡＲシステム６００および／またはＶＲシステム７００におけるディスプレイデバイスが、１つまたは複数の液晶ディスプレイ（ＬＣＤ）、発光ダイオード（ＬＥＤ）ディスプレイ、有機ＬＥＤ（ＯＬＥＤ）ディスプレイ、および／または任意の他の好適なタイプのディスプレイスクリーンを含み得る。人工現実システムは、両眼のための単一のディスプレイスクリーンを含み得るか、または各眼のためのディスプレイスクリーンを提供し得、これは、可変焦点調整のためのまたはユーザの屈折誤差を補正するための追加のフレキシビリティを可能にし得る。いくつかの人工現実システムは、ユーザがディスプレイスクリーンを観察し得る１つまたは複数のレンズ（たとえば、従来の凹レンズまたは凸レンズ、フレネルレンズ、調整可能な液体レンズなど）を有する光学サブシステムをも含み得る。
【0056】
ディスプレイスクリーンを使用することに加えて、またはディスプレイスクリーンを使用する代わりに、いくつかの人工現実システムは、１つまたは複数の投影システムを含み得る。たとえば、ＡＲシステム６００および／またはＶＲシステム７００におけるディスプレイデバイスは、周辺光が通過することを可能にするクリアなコンバイナレンズなど、ディスプレイデバイスに（たとえば、導波路を使用して）光を投影するマイクロＬＥＤプロジェクタを含み得る。ディスプレイデバイスは、ユーザの瞳孔のほうへ、投影された光を屈折させ得、ユーザが、人工現実コンテンツと現実世界の両方を同時に観察することを可能にし得る。人工現実システムはまた、任意の他の好適なタイプまたは形態の画像投影システムで構成され得る。
【0057】
人工現実システムは、様々なタイプのコンピュータビジョン構成要素およびサブシステムをも含み得る。たとえば、ＡＲシステム５００、ＡＲシステム６００、および／またはＶＲシステム７００は、カメラ１５０に対応し得る２次元（２Ｄ）または３次元（３Ｄ）カメラ、飛行時間深度センサー、単一ビームまたは掃引レーザー測距器、３Ｄ ＬｉＤＡＲセンサー、および／あるいは任意の他の好適なタイプまたは形態の光センサーなど、１つまたは複数の光センサーを含み得る。人工現実システムは、ユーザのロケーションを識別するために、現実世界をマッピングするために、現実世界の周囲についてのコンテキストをユーザに提供するために、および／または様々な他の機能を実施するために、これらのセンサーのうちの１つまたは複数からのデータを処理し得る。
【0058】
人工現実システムは、１つまたは複数の入力および／または出力オーディオトランスデューサをも含み得る。図５および図７に示されている例では、出力オーディオトランスデューサ５０８（Ａ）、５０８（Ｂ）、７０６（Ａ）、および７０６（Ｂ）は、ボイスコイルスピーカー、リボンスピーカー、静電スピーカー、圧電スピーカー、骨伝導トランスデューサ、軟骨伝導トランスデューサ、および／あるいは任意の他の好適なタイプまたは形態のオーディオトランスデューサを含み得る。同様に、入力オーディオトランスデューサ５１０は、コンデンサマイクロフォン、ダイナミックマイクロフォン、リボンマイクロフォン、および／あるいは任意の他のタイプまたは形態の入力トランスデューサを含み得る。いくつかの実施形態では、単一のトランスデューサが、オーディオ入力とオーディオ出力の両方のために使用され得る。
【0059】
図５～図７には示されていないが、人工現実システムは、タクティル（ｔａｃｔｉｌｅ）（すなわち、触覚）フィードバックシステムを含み得、これは、ヘッドウェア、グローブ、ボディスーツ、ハンドヘルドコントローラ、環境デバイス（たとえば、椅子、床マットなど）、および／あるいは任意の他のタイプのデバイスまたはシステムに組み込まれ得る。触覚フィードバックシステムは、振動、力、牽引力、テクスチャ、および／または温度を含む、様々なタイプの皮膚フィードバックを提供し得る。触覚フィードバックシステムは、動きおよびコンプライアンスなど、様々なタイプの運動感覚フィードバックをも提供し得る。触覚フィードバックは、モーター、圧電アクチュエータ、流体システム、および／または様々な他のタイプのフィードバック機構を使用して実装され得る。触覚フィードバックシステムは、他の人工現実デバイスから独立して、他の人工現実デバイス内に、および／または他の人工現実デバイスとともに実装され得る。
【0060】
触覚感覚、可聴コンテンツ、および／または視覚コンテンツを提供することによって、人工現実システムは、様々なコンテキストおよび環境において、仮想体験全体を作り出すか、またはユーザの現実世界の体験を拡張し得る。たとえば、人工現実システムは、特定の環境内でのユーザの知覚、記憶、またはコグニションを支援または拡大し得る。いくつかのシステムが、現実世界における他の人々とのユーザの対話を拡張し得るか、または仮想世界における他の人々とのより没入型の対話を可能にし得る。人工現実システムは、教育目的のために（たとえば、学校、病院、政府団体、軍事団体、ビジネス企業などにおける教示またはトレーニングのために）、娯楽目的（たとえば、ビデオゲームをプレイすること、音楽を傾聴すること、ビデオコンテンツを視聴することなどを行うために）、および／またはアクセシビリティ目的のために（たとえば、補聴器、視覚補助器などとして）も使用され得る。本明細書で開示される実施形態は、これらのコンテキストおよび環境のうちの１つまたは複数における、ならびに／または他のコンテキストおよび環境における、ユーザの人工現実体験を可能にするかまたは拡張し得る。
【0061】
方法３００はユーザの人工現実体験の一部であり得、本明細書で説明される人工現実デバイスのいずれかを使用して実施され得る。図３に戻ると、ステップ３１０において、本明細書で説明されるシステムのうちの１つまたは複数は、第１のユーザの第１の環境を検出する第１の人工現実デバイスから第１の入力を受信し得る。たとえば、第１の受信モジュール１０４は、センサー１２０から第１の入力を受信し得る。
【0062】
本明細書で説明されるシステムは、様々なやり方でステップ３１０を実施し得る。一例では、サーバ２０６は、コンピューティングデバイス２０２のセンサー１２０から第１の入力を受信し得る。センサー１２０は、いくつかの例では、カメラなどの光センサーであり得る。センサー１２０は、第１のロケーションにおける第１のユーザの近傍の画像データをキャプチャしていることがある。他の例では、センサー１２０は、マイクロフォンまたはワイヤレス信号受信機などの他のタイプのセンサーを備え得る。
【0063】
図３に示されているように、ステップ３２０において、本明細書で説明されるシステムのうちの１つまたは複数は、第１の入力に基づいて第１の環境の第１の環境特徴を決定し得る。たとえば、第１の特徴モジュール１０６は、第１の入力に基づいて第１の環境特徴を決定し得る。
【0064】
いくつかの実施形態では、「環境特徴」という用語は、ユーザの環境の検出可能な特徴、特性、および／または属性を指し得る。環境特徴の例は、限定はしないが、ロケーション、エリア、認識可能なオブジェクトなどを含む。いくつかの例では、環境特徴は、ユーザの現実世界の環境に対応し得る。他の例では、環境特徴は、ユーザが対話している仮想ロケーションおよび／またはオブジェクトを指し得る。
【0065】
本明細書で説明されるシステムは、様々なやり方でステップ３２０を実施し得る。一例では、コンピューティングデバイス２０２および／またはサーバ２０６は、第１の入力に基づいて第１のユーザの第１のロケーションを決定し得る。人工現実デバイスからの利用可能な人工現実信号は、従来のコンピューティングデバイスでは実現可能でないことがあるユーザのロケーションおよび環境を決定する様々なやり方を可能にし得る。
【0066】
いくつかのＡＲシステムが、「同時ロケーションおよびマッピング」（ＳＬＡＭ：ｓｉｍｕｌｔａｎｅｏｕｓ ｌｏｃａｔｉｏｎ ａｎｄ ｍａｐｐｉｎｇ）と呼ばれる技法を使用してユーザの環境をマッピングし得る。ＳＬＡＭマッピングおよびロケーション識別技法は、環境のマップを作り出すかまたは更新しながら、同時に、マッピングされた環境内でのユーザのロケーションを追跡することができる、様々なハードウェアおよびソフトウェアツールを伴い得る。ＳＬＡＭは、マップを作り出し、マップ内のユーザの位置を決定するために、多くの異なるタイプのセンサーを使用し得る。
【0067】
ＳＬＡＭ技法は、たとえば、ユーザのロケーションを決定するための光センサーを実装し得る。ＷｉＦｉ、Ｂｌｕｅｔｏｏｔｈ、全地球測位システム（ＧＰＳ）、セルラーまたは他の通信デバイスを含む無線機も、無線トランシーバまたはトランシーバのグループ（たとえば、ＷｉＦｉルータ、またはＧＰＳ衛星のグループ）に対するユーザのロケーションを決定するために使用され得る。マイクロフォンアレイあるいは２Ｄまたは３Ｄソナーセンサーなど、音響センサーも、環境内のユーザのロケーションを決定するために使用され得る。（それぞれ、図５、図６および図７のシステム５００、６００、および７００などの）ＡＲおよびＶＲデバイスが、ユーザの現在の環境のマップを作り出すことおよび継続的に更新することなどのＳＬＡＭ動作を実施するために、これらのタイプのセンサーのいずれかまたはすべてを組み込み得る。本明細書で説明される実施形態のうちの少なくともいくつかでは、これらのセンサーによって生成されたＳＬＡＭデータは、「環境データ」と呼ばれることがあり、ユーザの現在の環境を指示し得る。このデータは、ローカルまたはリモートデータストア（たとえば、クラウドデータストア）に記憶され得、要求に応じてユーザのＡＲ／ＶＲデバイスに提供され得る。
【0068】
ユーザが所与の環境においてＡＲヘッドセットまたはＶＲヘッドセットを装着しているとき、ユーザは、他のユーザと、またはオーディオソースとして働く他の電子デバイスと対話していることがある。いくつかの場合には、オーディオソースがユーザに対してどこに位置するかを決定し、次いで、オーディオソースを、オーディオソースがオーディオソースのロケーションから来ているかのようにユーザに提示することが望ましいことがある。オーディオソースがユーザに対してどこに位置するかを決定するプロセスは、本明細書では「位置特定（ｌｏｃａｌｉｚａｔｉｏｎ）」と呼ばれることがあり、オーディオソース信号のプレイバックを、オーディオソース信号が特定の方向から来ているかのようにレンダリングするプロセスは、本明細書では「空間化（ｓｐａｔｉａｌｉｚａｔｉｏｎ）」と呼ばれることがある。
【0069】
オーディオソースの位置を特定することは、様々な異なるやり方で実施され得る。いくつかの場合には、ＡＲまたはＶＲヘッドセットは、音ソースのロケーションを決定するために到来方向（ＤＯＡ）分析を開始し得る。ＤＯＡ分析は、音が発生した方向を決定するために、ＡＲ／ＶＲデバイスにおいて、各音の強度、スペクトル、および／または到来時間を分析することを含み得る。いくつかの場合には、ＤＯＡ分析は、人工現実デバイスが位置する周囲音響環境を分析するための任意の好適なアルゴリズムを含み得る。
【0070】
たとえば、ＤＯＡ分析は、マイクロフォンから入力信号を受信し、入力信号にデジタル信号処理アルゴリズムを適用して、到来方向を推定するように設計され得る。これらのアルゴリズムは、たとえば、入力信号がサンプリングされ、サンプリングされた信号の得られた重み付けおよび遅延されたバージョンが、到来方向を決定するために一緒に平均化される、遅延和アルゴリズムを含み得る。適応フィルタを作り出すために、最小２乗平均（ＬＭＳ：ｌｅａｓｔ ｍｅａｎ ｓｑｕａｒｅｄ）アルゴリズムも実装され得る。この適応フィルタは、次いで、たとえば信号強度の差、または到来時間の差を識別するために使用され得る。これらの差は、次いで、到来方向を推定するために使用され得る。別の実施形態では、ＤＯＡは、入力信号を周波数領域にコンバートし、処理すべき時間周波数（ＴＦ）領域内の特定のビンを選択することによって決定され得る。各選択されたＴＦビンは、そのビンが、直接経路オーディオ信号をもつオーディオスペクトルの一部分を含むかどうかを決定するために、処理され得る。直接経路信号の一部分を有するビンは、次いで、マイクロフォンアレイが直接経路オーディオ信号を受信した角度を識別するために、分析され得る。決定された角度は、次いで、受信された入力信号についての到来方向を識別するために使用され得る。上記に記載されていない他のアルゴリズムも、ＤＯＡを決定するために、単独でまたは上記のアルゴリズムと組み合わせて使用され得る。
【0071】
いくつかの実施形態では、異なるユーザが、音のソースを、わずかに異なるロケーションから来るものとして知覚し得る。これは、各ユーザが一意の頭部伝達関数（ＨＲＴＦ）を有することの結果であり得、ＨＲＴＦは、耳道の長さと鼓膜の配置とを含むユーザの解剖学的構造によって規定され得る。人工現実デバイスは、ユーザが、ユーザの一意のＨＲＴＦに基づいてユーザに提示される音信号をカスタマイズするために従い得る、整合および配向ガイドを提供し得る。いくつかの実施形態では、人工現実デバイスは、ユーザの環境内の音を傾聴するための１つまたは複数のマイクロフォンを実装し得る。ＡＲまたはＶＲヘッドセットは、音についての到来方向を推定するために様々な異なるアレイ伝達関数（たとえば、上記で識別されたＤＯＡアルゴリズムのいずれか）を使用し得る。到来方向が決定されると、人工現実デバイスは、ユーザの一意のＨＲＴＦに従ってユーザに音をプレイバックし得る。したがって、アレイ伝達関数（ＡＴＦ）を使用して生成されたＤＯＡ推定は、音がそこからプレイされるべきである方向を決定するために使用され得る。プレイバック音は、さらに、ＨＲＴＦに従ってその特定のユーザがどのように音を聞くかに基づいて、改良され得る。
【0072】
ＤＯＡ推定を実施することに加えて、またはその代替として、人工現実デバイスは、他のタイプのセンサーから受信された情報に基づいて位置特定を実施し得る。これらのセンサーは、カメラ、ＩＲセンサー、熱センサー、動きセンサー、ＧＰＳ受信機、またはいくつかの場合には、ユーザの眼球運動を検出するセンサーを含み得る。たとえば、上述のように、人工現実デバイスは、ユーザがどこを見ているかを決定する眼トラッカーまたは視線検出器を含み得る。しばしば、ユーザの眼は、ほんの一時的にでも音のソースを見ることになる。ユーザの眼によって提供されるそのような手がかりは、さらに、音ソースのロケーションを決定するのを補助し得る。カメラ、熱センサー、およびＩＲセンサーなど、他のセンサーも、ユーザのロケーション、電子デバイスのロケーション、または別の音ソースのロケーションを指示し得る。上記の方法のいずれかまたはすべてが、音ソースのロケーションを決定するために個々にまたは組み合わせて使用され得、さらに、時間とともに音ソースのロケーションを更新するために使用され得る。
【0073】
いくつかの実施形態は、ユーザのためのよりカスタマイズされた出力オーディオ信号を生成するために、決定されたＤＯＡを実装し得る。たとえば、「音響伝達関数」が、音がどのように所与のロケーションから受信されたかを特徴づけるかまたは定義し得る。より詳細には、音響伝達関数は、音のソースロケーションにおける音のパラメータと、音信号がそれによって検出されるパラメータ（たとえば、マイクロフォンアレイによって検出される、またはユーザの耳によって検出される）との間の関係を定義し得る。人工現実デバイスは、デバイスの範囲内の音を検出する１つまたは複数の音響センサーを含み得る。人工現実デバイスのコントローラは、（たとえば、上記で識別された方法のいずれかを使用して）検出された音についてのＤＯＡを推定し得、検出された音のパラメータに基づいて、デバイスのロケーションに固有である音響伝達関数を生成し得る。したがって、このカスタマイズされた音響伝達関数は、音が特定のロケーションから来るものとして知覚される、空間化された出力オーディオ信号を生成するために使用され得る。
【0074】
実際、１つまたは複数の音ソースのロケーションが知られると、人工現実デバイスは、音信号を、その音ソースの方向から来ているかのように聞こえるように再レンダリング（すなわち、空間化）し得る。人工現実デバイスは、音信号の強度、スペクトル、または到来時間を改変する、フィルタまたは他のデジタル信号処理を適用し得る。デジタル信号処理は、音信号が、決定されたロケーションから発生するものとして知覚されるようなやり方で、適用され得る。人工現実デバイスは、いくつかの周波数を増幅または抑制するか、あるいは、信号が各耳に到来する時間を変え得る。いくつかの場合には、人工現実デバイスは、デバイスのロケーションおよび音信号の検出された到来方向に固有である、音響伝達関数を作り出し得る。いくつかの実施形態では、人工現実デバイスは、ステレオデバイスまたはマルチスピーカーデバイス（たとえば、サラウンド音デバイス）においてソース信号を再レンダリングし得る。そのような場合、各スピーカーに、別個で異なるオーディオ信号が送られ得る。これらのオーディオ信号の各々が、ユーザのＨＲＴＦに従って、ならびにユーザのロケーションおよび音ソースのロケーションの測定に従って、それらのオーディオ信号が音ソースの決定されたロケーションから来ているかのように聞こえるように、改変され得る。したがって、このようにして、人工現実デバイス（またはそのデバイスに関連するスピーカー）は、オーディオ信号を、特定のロケーションから発生しているかのように聞こえるように再レンダリングし得る。
【0075】
本明細書で説明される人工現実デバイスは、したがって、ロケーションなどの第１の環境特徴を決定し得る。次に図４Ａを参照すると、第１の環境特徴は、ユーザ４１０Ａのロケーションに対応し得る。上記で説明されたように、ロケーションは、人工現実信号を使用して決定され得る。ロケーションは、緯度および経度などの座標に対応し得るか、または環境４０１についてのｘ座標およびｙ座標など、局所座標系に関する座標であり得る。代替的に、ロケーションはエリアに対応し得る。たとえば、図４Ａでは、ユーザ４１０Ｃおよび４１０Ｄはエリア４３２に位置し得、ユーザ４１０Ｅは、エリア４３４に位置し得る。エリア４３２および４３４は環境４０１中の部屋に対応し得るが、他の例では、エリアは他のやり方で定義され得る。たとえば、エリアは、あらかじめ定義された境界、ユーザからの半径範囲、他の屋内環境などに対応し得る。いくつかの実施形態では、ロケーションは仮想ロケーションに対応し得る。たとえば、ユーザは、ＶＲセッション中に仮想環境と対話していることがある。
【0076】
いくつかの実施形態では、環境特徴は、認識されたオブジェクトに対応し得る。たとえば、図４Ｂでは、ユーザ４１０Ｇおよび４１０Ｆはオブジェクト４４２の近くにあり得、ユーザ４１０Ｈはオブジェクト４４４の近くにあり得る。いくつかの例では、認識されたオブジェクトは、仮想オブジェクトであり得る。
【0077】
いくつかの実施形態では、環境特徴は、第１のユーザを識別することを含み得る。たとえば、ユーザは、顔認識に基づいて識別され得る。コンピューティングデバイス２０２は、ユーザの顔の画像データをキャプチャするために配置され得る。ユーザは、ユーザに関連する一意のオブジェクトまたはテキストを認識すること、あるいはユーザがソーシャルネットワーキングサービスなどのサービスにログインすることによってなど、他のやり方で識別され得る。
【0078】
図３に戻ると、ステップ３３０において、本明細書で説明されるシステムのうちの１つまたは複数は、第２のユーザの第２の環境を検出する第２の人工現実デバイスから第２の入力を受信し得る。たとえば、第２の受信モジュール１０８は、センサー１２０から第２の入力を受信し得る。
【0079】
本明細書で説明されるシステムは、様々なやり方でステップ３３０を実施し得る。一例では、サーバ２０６は、コンピューティングデバイス２０２のセンサー１２０からセンサー入力を受信し得る。センサー１２０は、いくつかの例では、カメラなどの光センサーであり得る。センサー１２０は、第２のロケーションにおける第２のユーザの近傍の画像データをキャプチャしていることがある。他の例では、センサー１２０は、マイクロフォンまたはワイヤレス信号受信機などの他のタイプのセンサーを備え得る。上記で説明された第１の入力と同様に、第２の入力は、１つまたは複数の人工現実信号を含み得る。たとえば、第２の入力は、図４中のユーザ４１０Ｂの近傍の画像データを含み得る。いくつかの実施形態では、第２の入力は、第１の入力のデータおよび／または人工現実信号とは異なるタイプのデータおよび／または人工現実信号を含み得る。さらに、第２の入力は、第１の入力のセンサーとは異なるタイプのセンサーから送られ得る。
【0080】
図３に示されているように、ステップ３４０において、本明細書で説明されるシステムのうちの１つまたは複数は、第２の入力に基づいて第２の環境の第２の環境特徴を決定し得る。たとえば、第２の特徴モジュール１１０は、第２の入力に基づいて第２の環境特徴を決定し得る。
【0081】
本明細書で説明されるシステムは、様々なやり方でステップ３４０を実施し得る。一例では、コンピューティングデバイス２０２および／またはサーバ２０６は、第２の入力に基づいて第２のユーザの第２のロケーションを決定し得る。ステップ３４０は、任意の好適な様式で実施され得る（たとえば、ステップ３２０に関して上記で説明された任意のアルゴリズム、データまたは技法を使用する。また、いくつかの実施形態では、第２のロケーションは、第１のロケーションを決定するために使用されたやり方とは異なるやり方で、および／または第１のロケーションを決定するために使用されたデータとは異なるタイプのデータを使用して決定され得る。
【0082】
図４Ａを参照すると、第２の環境特徴は、ユーザ４１０Ｂのロケーションに対応し得る。上記で説明されたように、ロケーションは、人工現実信号を使用して決定され得る。ロケーションは、緯度および経度などの座標に対応し得るか、または環境４０１についてのｘ座標およびｙ座標など、局所座標系に関する座標であり得る。代替的に、ロケーションはエリアに対応し得る。たとえば、図４Ａでは、ユーザ４１０Ｃおよび４１０Ｄはエリア４３２に位置し得、ユーザ４１０Ｅは、エリア４３４に位置し得る。いくつかの実施形態では、ロケーションは仮想ロケーションに対応し得る。たとえば、ユーザは、ＶＲセッション中に仮想環境と対話していることがある。
【0083】
いくつかの実施形態では、環境特徴は、認識されたオブジェクトに対応し得る。ユーザの近傍にあるオブジェクトは、コンピュータビジョンまたは他の同様のオブジェクト認識方法を使用して認識され得る。たとえば、図４Ｂでは、ユーザ４１０Ｇおよび４１０Ｆはオブジェクト４４２の近くにあり得、ユーザ４１０Ｈはオブジェクト４４４の近くにあり得る。オブジェクトは物理的特徴であり得る。いくつかの例では、認識されたオブジェクトは、仮想オブジェクトであり得る。
【0084】
いくつかの実施形態では、環境特徴は、第２のユーザを識別することを含み得る。たとえば、ユーザは、顔認識に基づいて識別され得る。コンピューティングデバイス２０２は、ユーザの顔の画像データをキャプチャするために配置され得る。ユーザは、ユーザに関連する一意のオブジェクトまたはテキストを認識すること、あるいはユーザがソーシャルネットワーキングサービスなどのサービスにログインすることによってなど、他のやり方で識別され得る。
【0085】
図３に戻ると、ステップ３５０において、本明細書で説明されるシステムのうちの１つまたは複数は、第１の環境特徴を第２の環境特徴と比較し得る。たとえば、比較モジュール１１２は、第１の環境特徴を第２の環境特徴と比較し得る。
【0086】
本明細書で説明されるシステムは、様々なやり方でステップ３５０を実施し得る。一例では、比較は、第１のロケーションと第２のロケーションとの間の距離を決定することと、距離を距離しきい値と比較することとを含み得る。たとえば、図４Ａでは、ユーザ４１０Ａとユーザ４１０Ｂとの間の距離４２２、および／またはユーザ４１０Ａとユーザ４１０Ｅとの間の距離４２４が、距離しきい値と比較され得る。距離しきい値は、２０フィートなどの指定された距離、または任意の他の好適な距離に対応し得る。距離しきい値は、１～２０フィートなどの範囲、または距離の任意の他の好適な範囲に対応し得る。距離は、図４Ａの場合のように、直線距離に基づいて算出され得るか、または間接経路に基づいて算出され得る。さらに、距離は、特定のユーザ以外の基準点に基づいて算出され得る。たとえば、基準点は、すでにグループ中にいるすべてのユーザの中心点に対応し得る。代替的に、距離は、グループ中にいるかまたはグループに潜在的に加えられ得る他のユーザまでの平均距離に対応し得る。
【0087】
いくつかの例では、第１の環境特徴を第２の環境特徴と比較することは、第１のエリアを第２のエリアと比較することを含み得る。たとえば、図４Ａでは、ユーザ４１０Ｃに関連するエリア４３２が、ユーザ４１０Ｄに関連するエリア４３２と比較され得る。同様に、ユーザ４１０Ｃに関連するエリア４３２は、ユーザ４１０Ｅに関連するエリア４３４と比較され得る。
【0088】
いくつかの例では、第１の環境特徴を第２の環境特徴と比較することは、第１のオブジェクトを第２のオブジェクトと比較することを含み得る。たとえば、図４Ｂでは、ユーザ４１０Ｇに関連するオブジェクト４４２が、ユーザ４１０Ｆに関連するオブジェクト４４２と比較され得る。同様に、ユーザ４１０Ｇに関連するオブジェクト４４２は、ユーザ４１０Ｈに関連するオブジェクト４４４と比較され得る。
【0089】
図３に示されているように、ステップ３６０において、本明細書で説明されるシステムのうちの１つまたは複数は、比較に基づいて、第１のユーザと第２のユーザとをオンライン対話のためのグループに含め得る。たとえば、グループ化モジュール１１４は、第１のユーザと第２のユーザとをグループに含め得る。
【0090】
本明細書で説明されるシステムは、様々なやり方でステップ３６０を実施し得る。一例では、第１のユーザと第２のユーザとをグループに含めることは、距離が距離しきい値を満たすことに基づく。たとえば、距離しきい値が最大距離に対応する場合、最大距離よりも遠くに離れていないユーザは、グループに含められ得る。図４Ａでは、距離４２２は、最大距離よりも小さいことがある。したがって、ユーザ４１０Ａおよび４１０Ｂは、グループに含められ得る。距離４２４は、最大距離よりも大きいことがある。したがって、ユーザ４１０Ｅは、ユーザ４１０Ａおよび４１０Ｂをもつグループに含められないことがある。代替的に、距離は平均距離に対応し得る。たとえば、ユーザ４１０Ｅとユーザ４１０Ｂとの間の距離は、距離しきい値を満たし得るが、ユーザ４１０Ｅとユーザ４１０Ａおよび４１０Ｂとの間の平均距離は、距離しきい値を満たさないことがある。距離しきい値が距離の範囲に対応する場合、範囲内に入る距離は、距離しきい値を満たし得、したがって、対応するユーザが追加され得る。他の例では、ユーザ間の近接を決定する他の方法が使用され得る。
【0091】
いくつかの例では、第１のユーザと第２のユーザとをグループに含めることは、第１のエリアが第２のエリアに一致することに基づく。図４Ａでは、ユーザ４１０Ｃおよび４１０Ｄは、両方のユーザが同じエリア４３２に関連するので、一緒にグループに含められ得る。ユーザ４１０Ｅは、ユーザ４１０Ｅがエリア４３４に関連するので、ユーザ４１０Ｃおよび４１０Ｄをもつグループに含められないことがある。
【0092】
いくつかの例では、第１のユーザと第２のユーザとをグループに含めることは、第１のオブジェクトが第２のオブジェクトに一致することに基づく。第１のユーザと第２のユーザとが同じオブジェクトに極めて近接している場合、第１のユーザと第２のユーザとはまた、互いに極めて近接していることがある。図４Ｂでは、ユーザ４１０Ｇおよび４１０Ｆは、両方ともオブジェクト４４２に関連し、したがって、グループに含められ得る。オブジェクト４４４は、オブジェクト４４２とは異なり得る。したがって、ユーザ４１０Ｈは、そのグループに含められないことがある。オブジェクトは、特定の現実世界のロケーションに固定（ｐｅｇ）された仮想オブジェクトであり得る。
【0093】
いくつかの代替例では、オブジェクトは、物理的に近くないユーザが依然としてオブジェクトに基づいて一緒にグループ化され得るように、複製されるかまたは場合によっては互いに関連し得る。たとえば、オブジェクト４４４は、ユーザ４１０Ｈが、ユーザ４１０Ｇおよび４１０Ｆをもつグループに含められ得るように、複製であるかまたは場合によってはオブジェクト４４２に関連し得る。
【0094】
いくつかの例では、第１のユーザと第２のユーザとをグループに含めることは、さらに、第１のユーザが、アプリケーションに関連するソーシャルネットワークにおいて第２のユーザに関連することに基づく。たとえば、ユーザを識別した後に、ソーシャルネットワーク上で友達であるユーザが一緒にグループ化され得る。ソーシャルネットワーク上のつながりは、ユーザをグループに含めるべきかどうかを決定するための追加のファクタであり得る。たとえば、物理的に極めて近接しており、ソーシャルネットワーク上で友達でもあるユーザは、自動的に一緒にグループ化されるか、またはグループとして示唆され得る。物理的に極めて近接していることがあるが、ソーシャルネットワーク上で友達でない他のユーザは、自動的に一緒にグループ化されないことがあり、グループに含められるための追加の確認を必要とし得る。
【0095】
本明細書で説明される態様によれば、人工現実デバイスをもつユーザは、人工現実デバイスからの入力を使用して一緒にグループ化され得る。ユーザは、人工現実体験に参加していることがある。人工現実デバイスは、ユーザのロケーションアウェアネスを提供し、物理的に極めて近接して検出されたユーザを直観的に一緒にグループ化し得る。グループ化されたユーザのうちの１人は、次いで、ビデオゲームなどの別の体験に他のグループメンバーを招待し得る。グループ化されたユーザがソーシャルネットワーク上でつながっていることがあるが、近くのユーザのこの直観的なグループ化は、グループ化されたユーザ間の追加の対話を可能にし、奨励し得る。物理的近接は、グループ化されたユーザがビデオゲーム内だけでなく、現実世界でも対話することを可能にし得る。
【0096】
本明細書で説明される態様は、人工現実信号を活用することによって、追加のグループ化をさらに可能にし得る。たとえば、近接は、ユーザが特定のランドマークなどの同じオブジェクトを見ていることに基づいて決定され得る。しかしながら、本明細書で説明される態様は、近接を物理的近接以外にさらに拡大し得る。共通オブジェクトが複製され、リモートユーザにとって利用可能であり得る。たとえば、共通オブジェクトは、特定の物理的トークンのコピーであり得、それらは、それらのトークンの近くのユーザが、物理的にリモートにある場合でもグループに含められることを可能にし得る。したがって、ユーザは、仮想的に近接しており、ユーザの仮想的近接に基づいてグループ化され得る。代替的に、共通オブジェクトは仮想オブジェクトであり得る。仮想オブジェクトは、特定の現実世界のロケーションに固定され得る。たとえば、仮想バニー（ｂｕｎｎｙ）が、部屋の中のデスク上にあり得る。次いで、人工現実デバイスを使用して仮想バニーを観察する部屋の中のユーザが一緒にグループ化され得る。さらに、リモートロケーションに固定され得る仮想オブジェクトのコピーも、仮想オブジェクトコピーの近くのリモートユーザがグループ化されることを可能にし得る。したがって、本開示の態様は、ユーザ間の近接アウェアネスを改善するために人工現実信号を使用してユーザをグループ化するための追加のやり方を提供し得る。
【0097】
その上、本明細書で説明される態様は、ソーシャルネットワークシステム内のゲームセッションへのアクセスを可能にし得る。ゲームセッションは、たとえば、ウォール、ニュースフィード、タイムラインなど、ソーシャルネットワークの様々なエリア内でアクセスされ得る。ゲームセッションはまた、関係するソーシャルネットワークアプリケーション（たとえば、メッセンジャーアプリケーション）を使用してアクセスされ得る。メッセンジャーアプリケーションは、ユーザがほぼ瞬時にオンラインで通信することを可能にするアプリケーションである。プレーヤ構成要素が、クライアントデバイス上のゲームインスタンスとソーシャルネットワーキングシステムのバックエンドサーバとの間の通信を容易にする。通信情報が、ソーシャルネットワーキングシステムのソーシャルグラフに記憶されるか、またはそのソーシャルグラフから取り出され得る。ゲームインスタンスは、ソーシャルネットワーキングシステムのソーシャルネットワークアプリケーション（たとえば、ニュースフィード、メッセンジャーなど）から初期化され得、ゲームは、ソーシャルネットワークアプリケーションを出ることなしにプレイされ得る。
【0098】
様々な実施形態では、ユーザは、発見構成要素を使用して、プレイすべきゲームを識別することができる。発見構成要素は、複数のゲームをリストし得、それらのゲームを指定された順序でリストし得る。一例として、発見構成要素は、ユーザのためのゲームを、そのユーザの前の、ゲームとの対話、ソーシャルグラフ中で指示される「友達」、連絡先リスト中の連絡先、友達および／または連絡先によってプレイされるゲームなどに基づいてリストし得る。
【0099】
様々な実施形態では、ユーザは、ユーザのソーシャルネットワークニュースフィードまたはメッセンジャーアプリケーションアプリにおいて「チャレンジ」を受信し得る。一例として、ユーザは、友達または連絡先が特定のゲームにおいてハイスコアを達成したという通知を受信し得る。ユーザは、ゲームを開始するために、たとえば、その通知を「クリック」することまたは「押下」することによってチャレンジを受け入れることができる。ユーザは、特定のゲームについて異なるユーザからチャレンジを受信し得る。チャレンジを受け入れることは、ユーザと友達とを含む、特定のゲームについてのグループを定義し得る。代替的に、グループは、グループが定義され得ると、チャレンジを発行することを容易にし得、グループのユーザは、チャレンジを他のグループメンバーに発行し得る。
【0100】
本明細書で説明される態様は、グループを定義するための、ユーザの前の対話を使用すること以外の方法を提供する。ソーシャルネットワーキングシステムのユーザは、ソーシャルネットワーキングシステムの部分にアクセスするために、人工現実デバイスを使用し得る。人工現実デバイスからの人工現実信号は、ソーシャルネットワーキングシステムのユーザのグループを定義するために使用され得る。グループが定義されると、チャレンジは、自動的におよび／またはユーザの要求時にグループのメンバーに発行され得る。いくつかの実施形態では、ソーシャルネットワーキングシステムは、グループ中のユーザの対話に基づいてチャレンジを推奨し得る。
【0101】
様々な実施形態では、ユーザがゲームにおいて達成したスコアは、一部または全部の他のユーザに投稿され得る。一例として、スコアは、特定のチャレンジを送った異なるユーザと共有されるか、チャレンジを送ったすべてのユーザと共有されるか、または公的に共有され得る。ユーザがゲームをプレイした後に、ユーザのスコアは、たとえば、他のユーザにチャレンジするために他のユーザと共有され得る。様々な実施形態では、ユーザは、たとえば、別のユーザにチャレンジするために、スコアを明示的に共有することができる。いくつかの実施形態では、スコアは、たとえば、「リーダーボード」に対して、あるいは友達または連絡先へのチャレンジとして暗黙的に共有され得る。他のユーザがチャレンジを受け入れたとき、チャレンジを送ったユーザとチャレンジを受け入れたユーザとの間に通信のスレッドが作成され得る。
【0102】
実施形態は、ゲームインスタンスへの実質的に瞬時のアクセスを可能にするための、ゲーミングプラットフォームとソーシャルネットワーキングシステムとの統合を含む。システムアーキテクチャは、クライアント側プレーヤ構成要素（たとえば、ソフトウェア構成要素）を実装するクライアントデバイスを含む。プレーヤ構成要素は、クライアントデバイス上のゲームインスタンスとソーシャルネットワーキングシステムのバックエンドサーバとの間の通信を容易にすることができる。通信は、ハイスコア、ゲーム参加者識別情報、ゲーム参加者つながり、ゲームセッション詳細、ゲーム成績などを含むことができる。通信情報は、ソーシャルネットワーキングシステムのソーシャルグラフに記憶されるか、またはそのソーシャルグラフに基づき得る。
【0103】
様々な実施形態では、２人またはそれ以上のユーザ間の通信の各メッセンジャーアプリスレッドはスレッド識別子（「スレッドＩＤ」）を有し、ソーシャルネットワークの各ユーザはユーザＩＤを有し、ソーシャルネットワークページを有する企業はページＩＤを有し、アプリ（たとえば、ゲームアプリ）はアプリＩＤを有する。ユーザが、複数の他のユーザと特定のゲームをプレイすることに同時に関与し得るので、様々なＩＤの組合せが、ゲームの特定のインスタンスを識別するために、たとえば、スコア共有目的のために使用され得る。一例として、スレッドＩＤとアプリＩＤとの組合せは、スレッドにおいて通信しているユーザによってプレイされている特定のゲームを識別する。別の例として、ユーザＩＤとアプリＩＤとページＩＤとの組合せは、識別されたユーザがプレイしている、企業によってホストまたはスポンサー提供されるゲームを識別する。このおよび以下の説明は、特定の実施形態としてメッセージングアプリを使用するが、当業者は、実施形態が、他のソーシャルネットワーク会話エリア、たとえば、ウォール、ページ、ニュースフィード、タイムラインなどとともに使用するために適応され得ることを認識されよう。そのような場合、メッセージングスレッドＩＤの代わりに、何らかの他のソーシャルネットワーク内部識別子（たとえば、メッセージ識別子、会話識別子、ページ識別子など）が採用され得る。
【0104】
様々な実施形態では、これらのＩＤの一部または全部は匿名化され得る。一例として、ユーザＩＤは匿名化され得、したがって、ユーザのスコアまたはスコア更新は、公的に、あるいはソーシャルネットワークまたはメッセンジャーアプリの他のユーザに投稿され得るが、ユーザは、場合によってはユーザの友達を除いて、他人によって識別可能でないことがある。同様に、スレッドＩＤは匿名化され得、したがって、ゲーム開発者は、不当に、たとえば、ゲームに関係しないことがある広告メッセージを投稿するために実際のスレッドを使用することができない。まさにスレッドＩＤ、アプリＩＤ、ページＩＤ、およびユーザＩＤがソーシャルネットワークおよび／またはメッセンジャーアプリ内で一意であり得るように、それぞれの匿名化されたＩＤも一意であり得る。
【0105】
様々な実施形態では、ゲームインスタンスは、他のゲームインスタンスとメッセージを交換するために、メッセンジャーアプリとメッセンジャーアプリの下にある通信プロトコルとを採用し得る。例として、ゲームがスレッド中で２人の異なるユーザによってプレイされるとき、ゲームは、プレーヤの各々に対応するゲームインスタンス間で、スコア情報、カードゲームのカード、チェスゲームの手などを交換し得る。さらなる例として、２人のプレーヤが共にメッセンジャースレッド中にあるとき、一方のプレーヤは、他方のプレーヤのゲームプレイをリモートで見ることが可能であり得る。メッセンジャープラットフォームの下にある「ライブストリーム」能力は、プレイされているゲームのビデオストリームを他方のユーザに送り得る。
【0106】
様々な実施形態では、ユーザがゲームをプレイすることに関する様々なソーシャル信号が送られ得る。例として、ユーザがハイスコアラーであるとき、グリフ（ｇｌｙｐｈ）またはアイコンがユーザのプロファイル写真に追加され得る。一例として、顔認識システムが、ユーザのプロファイル写真中のユーザの顔を識別し、写真中のユーザの頭部の上にクラウンを追加し得る。修正されたプロファイル写真は、メッセンジャースレッドに限定され得るか、あるいは観察すべきソーシャルネットワークまたはメッセンジャーアプリのすべてのユーザにとって利用可能であり得る。他のソーシャル信号は、アイコン、アニメーション、音、バッジなどを含むことができる。ソーシャル信号は、スコア、チャレンジ、または他のゲーミング概念に対応することができる。
【0107】
ゲームライブラリを介してゲーム構成要素とプレーヤ構成要素との間の通信を可能にすることは、ユーザがゲームセッションを開始し、ソーシャルネットワークシステムを通して前にアクセス不可能であったゲームについてのゲーム関係データを自由に共有することを可能にすることを含む、無数のソーシャルネットワーク機能をアンロックする。ゲームインスタンスは、ソーシャルネットワーキングシステムのソーシャルプラットフォーム（たとえば、ニュースフィード、メッセージングアプリケーションなど）から初期化され得る。クライアント側プレーヤ構成要素は、クライアントデバイス上で実行しているブラウザアプリケーションを介してアクセス可能であるソーシャルネットワーキングウェブサイトの一部として、またはソーシャルネットワーキングモバイルアプリケーションの一部として実装され得る。クライアント側プレーヤは、サードパーティゲームを表す複数のウェブアドレス（たとえば、ＪａｖａＳｃｒｉｐｔライブラリを埋め込むゲームウェブページ）にアクセスすることができる。サードパーティゲーム開発者のウェブサーバは、ゲームウェブページをホストすることができる。クライアント側プレーヤ構成要素は、サードパーティゲームウェブページのＵＲＬと並行してゲーム関係ＵＲＬからスプラッシュ画面をロードし、プレーヤがゲームセッションへの実質的に瞬時のアクセスを体験することを可能にすることができる。クライアント側プレーヤ構成要素は、クライアントデバイス上にゲームウェブページを完全にロードするより前に、ゲームに関係するソーシャルネットワーク情報にさらにアクセスすることができる。
【0108】
たとえば、様々な実施形態によれば、ソーシャルネットワークの２人のユーザが物理的に近接しており、一緒にグループ化され得る。２人のユーザは、仮想雪合戦コンテキストを有するＡＲゲームなどのＡＲゲームを一緒にプレイしていることがある。ソーシャルネットワーク上で２人のユーザの一方または両方につながっていることがある、ソーシャルネットワークの第３のメンバーが、同じ物理的ロケーションに加入することによって、２人のユーザと物理的に合流し得る。様々な実施形態によれば、第３のユーザは、たとえば、人工現実信号から検出されたことによって、または２人のユーザのうちの一方が第３のユーザを招待することによってグループに追加され得る。２人のユーザは、ＡＲゲームにおける視覚通知など、第３のユーザが加入したという指示を受信し得る。さらに、グループ内で、ユーザは、ゲームについての同じ仮想コンテキストに制限されないことがある。たとえば、ユーザのうちの１人は、グループ中の他のユーザとは無関係に、仮想雪合戦コンテキストからウィザードファイアボールコンテキストにＡＲゲームを変更し得る。代替的に、ユーザは一緒に、ウィザードファイアボールコンテキストに切り替え得る。
【0109】
上記で詳述されたように、本明細書で説明および／または示されるコンピューティングデバイスおよびシステムは、本明細書で説明されるモジュール内に含まれているものなど、コンピュータ可読命令を実行することが可能な任意のタイプまたは形態のコンピューティングデバイスまたはシステムを広く表す。それらの最も基本的な構成では、（１つまたは複数の）これらのコンピューティングデバイスは、各々、少なくとも１つのメモリデバイスと少なくとも１つの物理プロセッサとを含み得る。
【0110】
いくつかの例では、「メモリデバイス」という用語は、概して、データおよび／またはコンピュータ可読命令を記憶することが可能な、任意のタイプまたは形態の揮発性または不揮発性記憶デバイスまたは媒体を指す。一例では、メモリデバイスは、本明細書で説明されるモジュールのうちの１つまたは複数を記憶、ロード、および／または維持し得る。メモリデバイスの例は、限定はしないが、ランダムアクセスメモリ（ＲＡＭ）、読取り専用メモリ（ＲＯＭ）、フラッシュメモリ、ハードディスクドライブ（ＨＤＤ）、ソリッドステートドライブ（ＳＳＤ）、光ディスクドライブ、キャッシュ、上記のうちの１つまたは複数の変形形態または組合せ、あるいは任意の他の好適な記憶メモリを含む。
【0111】
いくつかの例では、「物理プロセッサ」という用語は、概して、コンピュータ可読命令を解釈および／または実行することが可能な任意のタイプまたは形態のハードウェア実装処理ユニットを指す。一例では、物理プロセッサは、上記で説明されたメモリデバイスに記憶された１つまたは複数のモジュールにアクセスし、および／またはそれらのモジュールを変更し得る。物理プロセッサの例は、限定はしないが、マイクロプロセッサ、マイクロコントローラ、中央処理ユニット（ＣＰＵ）、ソフトコアプロセッサを実装するフィールドプログラマブルゲートアレイ（ＦＰＧＡ）、特定用途向け集積回路（ＡＳＩＣ）、上記のうちの１つまたは複数の部分、上記のうちの１つまたは複数の変形形態または組合せ、あるいは任意の他の好適な物理プロセッサを含む。
【0112】
別々の要素として示されているが、本明細書で説明および／または示されるモジュールは、単一のモジュールまたはアプリケーションの部分を表し得る。さらに、いくつかの実施形態では、これらのモジュールのうちの１つまたは複数は、コンピューティングデバイスによって実行されたとき、コンピューティングデバイスに１つまたは複数のタスクを実施させ得る、１つまたは複数のソフトウェアアプリケーションまたはプログラムを表し得る。たとえば、本明細書で説明および／または示されるモジュールのうちの１つまたは複数は、本明細書で説明および／または示されるコンピューティングデバイスまたはシステムのうちの１つまたは複数上で稼働するように記憶および構成されたモジュールを表し得る。これらのモジュールのうちの１つまたは複数は、１つまたは複数のタスクを実施するように構成された１つまたは複数の専用コンピュータのすべてまたは部分をも表し得る。
【0113】
さらに、本明細書で説明されるモジュールのうちの１つまたは複数は、データ、物理デバイス、および／または物理デバイスの表現をある形態から別の形態に変換し得る。たとえば、本明細書で具陳されるモジュールのうちの１つまたは複数は、変換されるべき入力データを受信し、入力データを変換し、ユーザ近接を識別するために変換の結果を出力し、変換の結果を使用して、ユーザグループを定義し、ユーザグループとのユーザ対話を容易にするために変換の結果を記憶し得る。追加または代替として、本明細書で具陳されるモジュールのうちの１つまたは複数は、コンピューティングデバイス上で実行すること、コンピューティングデバイスにデータを記憶すること、および／または場合によっては、コンピューティングデバイスと対話することによって、物理コンピューティングデバイスのプロセッサ、揮発性メモリ、不揮発性メモリ、および／または任意の他の部分をある形態から別の形態に変換し得る。
【0114】
いくつかの実施形態では、「コンピュータ可読媒体」という用語は、概して、コンピュータ可読命令を記憶または搬送することが可能な任意の形態のデバイス、キャリア、または媒体を指す。コンピュータ可読媒体の例は、限定はしないが、搬送波など、送信タイプ媒体、磁気記憶媒体など、非一時的タイプの媒体（たとえば、ハードディスクドライブ、テープドライブ、およびフロッピーディスク）、光記憶媒体（たとえば、コンパクトディスク（ＣＤ）、デジタルビデオディスク（ＤＶＤ）、およびＢＬＵ－ＲＡＹディスク）、電子記憶媒体（たとえば、ソリッドステートドライブおよびフラッシュメディア）、および他の配信システムを含む。
【0115】
本開示の実施形態は、人工現実システムを含むか、または人工現実システムとともに実装され得る。人工現実は、ユーザへの提示の前に何らかの様式で調整された形式の現実であり、これは、たとえば、仮想現実（ＶＲ）、拡張現実（ＡＲ）、複合現実（ＭＲ）、ハイブリッド現実、あるいはそれらの何らかの組合せおよび／または派生物を含み得る。人工現実コンテンツは、完全に生成されたコンテンツ、またはキャプチャされた（たとえば、現実世界の）コンテンツと組み合わせられた生成されたコンテンツを含み得る。人工現実コンテンツは、ビデオ、オーディオ、触覚フィードバック、またはそれらの何らかの組合せを含み得、それらのいずれも、単一のチャネルまたは複数のチャネルにおいて提示され得る（観察者に３次元効果をもたらすステレオビデオなど）。加えて、いくつかの実施形態では、人工現実は、たとえば、人工現実におけるコンテンツを作り出すために使用される、および／または人工現実において別様に使用される（たとえば、人工現実におけるアクティビティを実施する）アプリケーション、製品、アクセサリ、サービス、またはそれらの何らかの組合せにも関連し得る。人工現実コンテンツを提供する人工現実システムは、ホストコンピュータシステムに接続されたヘッドマウントディスプレイ（ＨＭＤ）、スタンドアロンＨＭＤ、モバイルデバイスまたはコンピューティングシステム、あるいは、１人または複数の観察者に人工現実コンテンツを提供することが可能な任意の他のハードウェアプラットフォームを含む、様々なプラットフォーム上に実装され得る。
【0116】
本明細書で説明および／または示されるステップのプロセスパラメータおよびシーケンスは、単に例として与えられ、必要に応じて変動させられ得る。たとえば、本明細書で示されるおよび／または説明されるステップは特定の順序で示されるかまたは説明され得るが、これらのステップは、必ずしも、示されるかまたは説明される順序で実施される必要がない。本明細書で説明および／または示される様々な例示的な方法はまた、本明細書で説明されるかまたは示されるステップのうちの１つまたは複数を省略するか、あるいは、開示されるものに加えて追加のステップを含み得る。
【0117】
先行する説明は、他の当業者が、本明細書で開示される例示的な実施形態の様々な態様を最も良く利用することを可能にするために提供された。この例示的な説明は、網羅的であること、または開示される正確な形態に限定されることは意図されない。多くの変更および変形が、本開示の趣旨および範囲から逸脱することなく可能である。本明細書で開示される実施形態は、あらゆる点で、限定的ではなく例示的であると見なされるべきである。本開示の範囲を決定する際に、添付の特許請求の範囲およびそれらの均等物の参照が行われるべきである。
【0118】
別段に記載されていない限り、本明細書および特許請求の範囲において使用される「に接続された（ｃｏｎｎｅｃｔｅｄ ｔｏ）」および「に結合された（ｃｏｕｐｌｅｄ ｔｏ）」という用語（およびそれらの派生語）は、直接接続と間接接続（すなわち、他の要素または構成要素を介したもの）の両方を許容するものとして解釈されるべきである。さらに、本明細書および特許請求の範囲において使用される「１つの（ａ）」または「１つの（ａｎ）」という用語は、「少なくとも１つの」を意味するものとして解釈されるべきである。最後に、本明細書および特許請求の範囲において使用される「含む（ｉｎｃｌｕｄｉｎｇ）」および「有する（ｈａｖｉｎｇ）」という用語（およびそれらの派生語）は、「含む、備える（ｃｏｍｐｒｉｓｉｎｇ）」という単語と交換可能であり、その単語と同じ意味を有する。
【図1】
【図2】
【図3】
【図4A-4B】
【図5】
【図6】
【図7】
【国際調査報告】