(19)【発行国】日本国特許庁(JP)
(12)【公報種別】公開特許公報(A)
(11)【公開番号】P2024107006
(43)【公開日】2024-08-08
(54)【発明の名称】動的ブラウザステージ
(51)【国際特許分類】
G06F 3/01 20060101AFI20240801BHJP
G06T 19/00 20110101ALI20240801BHJP
G09G 5/00 20060101ALI20240801BHJP
G09G 5/36 20060101ALI20240801BHJP
H04N 13/122 20180101ALN20240801BHJP
H04N 13/128 20180101ALN20240801BHJP
H04N 13/332 20180101ALN20240801BHJP
H04N 13/366 20180101ALN20240801BHJP
【ＦＩ】
G06F3/01 510
G06T19/00 600
G09G5/00 550C
G09G5/36 500
H04N13/122
H04N13/128
H04N13/332
H04N13/366
【審査請求】有
【請求項の数】1
【出願形態】ＯＬ
【外国語出願】
(21)【出願番号】P 2024076432
(22)【出願日】2024-05-09
(62)【分割の表示】P 2022529535の分割
【原出願日】2020-12-02
(31)【優先権主張番号】62/944,921
(32)【優先日】2019-12-06
(33)【優先権主張国・地域又は機関】US
(71)【出願人】
【識別番号】514108838
【氏名又は名称】マジック リープ， インコーポレイテッド
【氏名又は名称原語表記】Ｍａｇｉｃ Ｌｅａｐ，Ｉｎｃ．
【住所又は居所原語表記】７５００ Ｗ ＳＵＮＲＩＳＥ ＢＬＶＤ，ＰＬＡＮＴＡＴＩＯＮ，ＦＬ ３３３２２ ＵＳＡ
(74)【代理人】
【識別番号】100078282
【弁理士】
【氏名又は名称】山本 秀策
(74)【代理人】
【識別番号】100113413
【弁理士】
【氏名又は名称】森下 夏樹
(74)【代理人】
【識別番号】100181674
【弁理士】
【氏名又は名称】飯田 貴敏
(74)【代理人】
【識別番号】100181641
【弁理士】
【氏名又は名称】石川 大輔
(74)【代理人】
【識別番号】230113332
【弁護士】
【氏名又は名称】山本 健策
(72)【発明者】
【氏名】ジェネビーブ マック
(72)【発明者】
【氏名】アレクセイ マルチェンコ
(72)【発明者】
【氏名】アルフレッド ユー－チー ターン
(72)【発明者】
【氏名】ダミアン フランコ
(57)【要約】
【課題】動的ブラウザステージの提供。
【解決手段】本開示は、３次元（３Ｄ）コンテンツを空間３Ｄ環境内に表示するためのシステムおよび方法に関する。本システムおよび方法は、要求をウェブドメインから受信し、ある寸法の３Ｄコンテンツを空間３Ｄ環境内のある場所に表示するステップと、設置が空間３Ｄ環境の認可された部分内にあるかどうかを識別するステップと、認可された部分をサイズ変更するためのユーザ認可に基づいて、３Ｄ空間環境の認可された部分を拡張させ、３Ｄコンテンツを表示するステップと、３Ｄコンテンツを表示するステップとを含むことができる。
【選択図】図７
【解決手段】本開示は、３次元（３Ｄ）コンテンツを空間３Ｄ環境内に表示するためのシステムおよび方法に関する。本システムおよび方法は、要求をウェブドメインから受信し、ある寸法の３Ｄコンテンツを空間３Ｄ環境内のある場所に表示するステップと、設置が空間３Ｄ環境の認可された部分内にあるかどうかを識別するステップと、認可された部分をサイズ変更するためのユーザ認可に基づいて、３Ｄ空間環境の認可された部分を拡張させ、３Ｄコンテンツを表示するステップと、３Ｄコンテンツを表示するステップとを含むことができる。
【選択図】図７
【特許請求の範囲】
【請求項1】
本明細書に記載の発明。
【発明の詳細な説明】
【技術分野】
【0001】
本開示は、概して、１人またはそれを上回るユーザのための双方向仮想または拡張現実環境を促進するためのシステムおよび方法に関する。
【背景技術】
【0002】
現代のコンピューティングおよびディスプレイ技術は、いわゆる「仮想現実」、「拡張現実」、または「複合現実」体験のためのシステムの開発を促進しており、デジタル的に再現された画像またはその一部が、現実であるように見える、またはそのように知覚され得る様式でユーザに提示される。仮想現実、すなわち、「ＶＲ」シナリオは、典型的には、他の実際の実世界の視覚的入力に対する透明性を伴わずに、デジタルまたは仮想画像情報の提示を伴う。拡張現実すなわち、「ＡＲ」シナリオは、典型的には、ユーザの周囲の実際の世界の可視化に対する拡張としてのデジタルまたは仮想画像情報の提示を伴う。複合現実または「ＭＲ」は、物理的および仮想オブジェクトが、共存し、リアルタイムで相互作用する、新しい環境を生成するための実世界と仮想世界の融合に関連する。結論から述べると、ヒトの視知覚系は、非常に複雑であって、他の仮想または実世界画像要素における仮想画像要素の快適で、自然のような感覚で、かつ豊かな提示を促進する、ＶＲ、ＡＲ、またはＭＲ技術の生成は、困難である。本明細書に開示されるシステムおよび方法は、ＶＲ、ＡＲ、およびＭＲ技術に関連する種々の課題に対処する。
【発明の概要】
【課題を解決するための手段】
【0003】
本開示の実施形態は、１人またはそれを上回るユーザのための仮想または拡張現実相互作用を促進するためのデバイス、システム、および方法を対象とする。
【0004】
本開示の特徴、目的、および利点のさらなる詳細は、下記の詳細な説明、図面、および請求項に説明される。前述の一般的説明および以下の詳細な説明は両方とも、例示的かつ説明的であって、本開示の範囲に関して限定することを意図するものではない。
【0005】
いくつかの構成では、仮想コンテンツを３次元（３Ｄ）空間環境内に表示するためのディスプレイシステムは、仮想コンテンツをディスプレイシステムのユーザの眼に提示するように構成される、頭部搭載型ディスプレイと、頭部搭載型ディスプレイと通信する、回路網とを含むことができる。回路網は、３Ｄウェブベースのコンテンツにアクセスするための要求を受信し、３Ｄウェブベースのコンテンツを表示するためのユーザの３Ｄ空間環境内の場所、３Ｄコンテンツの配向、または３Ｄコンテンツの寸法のうちの少なくとも１つを含む、３Ｄウェブベースのコンテンツと関連付けられる、パラメータを識別し、パラメータに基づいて、３Ｄコンテンツがユーザの３Ｄ空間環境の認可された部分内に表示され得るかどうかを決定し、３Ｄコンテンツがユーザの３Ｄ空間環境の認可された部分内に表示され得ないことの決定に応答して、認可された部分をサイズ変更し、サイズ変更された認可された部分内における３Ｄコンテンツの表示を可能にするように構成されることができる。
【0006】
いくつかの構成では、仮想コンテンツを３次元（３Ｄ）空間環境内に表示するためのディスプレイシステムは、仮想コンテンツをディスプレイシステムのユーザの眼に提示するように構成される、頭部搭載型ディスプレイと、頭部搭載型ディスプレイと通信する、回路網とを含むことができる。回路網は、コンテンツにアクセスするための要求を受信し、第１の配向において、コンテンツをユーザの３Ｄ空間環境の認可された部分内に表示し、第２の配向において、コンテンツをユーザの３Ｄ空間環境内に表示するための要求を受信し、第２の配向において、コンテンツがユーザの３Ｄ空間環境の認可された部分内に表示され得るかどうかを決定し、第２の配向において、コンテンツがユーザの３Ｄ空間環境の認可された部分内に表示され得ないことの決定に応答して、認可された部分をサイズ変更し、第２の配向において、サイズ変更された認可された部分内にコンテンツの表示を可能にするように構成されることができる。
【0007】
いくつかの構成では、仮想コンテンツを３次元（３Ｄ）空間環境内に表示するためのディスプレイシステムは、仮想コンテンツをディスプレイシステムのユーザの眼に提示するように構成される、頭部搭載型ディスプレイと、頭部搭載型ディスプレイと通信する、回路網とを含むことができる。回路網は、３Ｄコンテンツにアクセスするための要求を受信し、３Ｄコンテンツを表示するためのユーザの３Ｄ空間環境内の場所、３Ｄコンテンツの配向、および３Ｄコンテンツの寸法のうちの少なくとも１つを含む、３Ｄコンテンツと関連付けられる、パラメータを識別し、パラメータに基づいて、３Ｄコンテンツがユーザの３Ｄ空間環境の認可された部分内に表示され得るかどうかを決定し、３Ｄコンテンツが３Ｄ空間環境の認可された部分内に表示され得ないことの決定に応答して、３Ｄコンテンツの表現を３Ｄ空間環境内の場所に表示するように構成されることができる。
【図面の簡単な説明】
【0008】
図面全体を通して、参照番号は、参照される要素間の対応を示すために再使用される。以下の図面および関連付けられる説明は、本開示の実施形態を例証するために提供され、請求項の範囲を限定するものではない。
【0009】
図面は、本開示の種々の実施形態の設計および有用性を図示する。図は、正確な縮尺で描かれておらず、類似構造または機能の要素は、図全体を通して同様の参照番号によって表されることに留意されたい。本開示の種々の実施形態の上記に列挙された利点および目的および他のものを取得する方法をより深く理解するために、上記に簡単に説明された本開示のより詳細な説明が、付随の図面に図示される、その具体的実施形態を参照して与えられるであろう。これらの図面は、本開示の典型的実施形態のみを描写し、したがって、その範囲の限定として見なされるべきではないことを理解した上で、本開示は、付随の図面の使用を通して付加的具体性および詳細とともに説明および記載されるであろう。
本発明は、例えば、以下を提供する。
（項目１）
仮想コンテンツを３次元（３Ｄ）空間環境内に表示するためのディスプレイシステムであって、前記ディスプレイシステムは、
仮想コンテンツを前記ディスプレイシステムのユーザの眼に提示するように構成される頭部搭載型ディスプレイと、
前記頭部搭載型ディスプレイと通信する回路網であって、前記回路網は、
ウェブベースである３Ｄコンテンツにアクセスするための要求を受信することと、
前記３Ｄコンテンツを表示するための前記ユーザの前記３Ｄ空間環境内の場所、前記３Ｄコンテンツの配向、または前記３Ｄコンテンツの寸法のうちの少なくとも１つを含む前記３Ｄコンテンツと関連付けられるパラメータを識別することと、
前記パラメータに基づいて、前記３Ｄコンテンツが前記ユーザの前記３Ｄ空間環境の認可された部分内に表示され得るかどうかを決定することと、
前記３Ｄコンテンツが前記３Ｄ空間環境の認可された部分内に表示され得ないことの決定に応答して、前記認可された部分を自動的にサイズ変更し、前記サイズ変更された認可された部分内への前記３Ｄコンテンツの表示を可能にすることと
を行うように構成される、回路網と
を備える、ディスプレイシステム。
（項目２）
前記回路網は、
ブラウザタイルを前記３Ｄ空間環境内に表示するように構成され、
前記３Ｄ空間環境の認可された部分は、
前記ブラウザタイルの幅を上回る幅と、
前記ブラウザタイルの高さを上回る高さと、
前記ブラウザタイルの深度を上回る深度と
を備える、項目１に記載のディスプレイシステム。
（項目３）
前記回路網は、ブラウザタイルを前記認可された部分内に表示するように構成される、項目２に記載のディスプレイシステム。
（項目４）
前記３Ｄコンテンツが前記認可された部分内に表示され得るかどうかを決定するために、前記回路網は、閾値量の前記３Ｄコンテンツが前記認可された部分内に表示され得るかどうかを決定するように構成される、項目１に記載のディスプレイシステム。
（項目５）
前記回路網は、
前記３Ｄコンテンツが前記３Ｄ空間環境の認可された部分内に表示され得ることの決定に応答して、前記３Ｄコンテンツを前記認可された部分内に表示する
ように構成される、項目１に記載のディスプレイシステム。
（項目６）
前記認可された部分をサイズ変更するために、前記回路網は、
サイズ変更認可ステータスを決定することと、
前記サイズ変更認可ステータスに基づいて、前記認可された部分をサイズ変更することと
を行うように構成される、項目１に記載のディスプレイシステム。
（項目７）
前記サイズ変更認可ステータスを決定するために、前記回路網は、ユーザ入力に基づいて、認可を識別するように構成される、項目６に記載のディスプレイシステム。
（項目８）
前記３Ｄコンテンツは、ウェブドメインと関連付けられ、前記サイズ変更認可ステータスを決定するために、前記回路網は、前記ウェブドメインが認可された要求者であるかどうかに基づいて、認可を識別するように構成される、項目６に記載のディスプレイシステム。
（項目９）
前記サイズ変更認可ステータスは、前記３Ｄコンテンツと関連付けられるウェブドメインへのアクセスの現在のセッションの間、前記認可された部分をサイズ変更するための認可を備える、項目６に記載のディスプレイシステム。
（項目１０）
前記認可された部分をサイズ変更するために、前記回路網は、
前記認可された部分の幅を少なくとも１つの方向に第１の量だけ増加させることと、
前記認可された部分の高さを少なくとも１つの方向に第２の量だけ増加させることと、
前記認可された部分の深度を少なくとも１つの方向に第３の量だけ増加させることと
を行うように構成される、項目１に記載のディスプレイシステム。
（項目１１）
前記回路網は、
前記認可された部分と関連付けられるリフレッシュ条件を決定することと、
前記認可された部分のサイズをデフォルトサイズに設定することと
を行うように構成される、項目１に記載のディスプレイシステム。
（項目１２）
前記リフレッシュ条件は、前記３Ｄコンテンツと関連付けられないウェブドメインとのユーザ相互作用と、前記３Ｄコンテンツの表示を中止するための前記ユーザからのインジケーションとのうちの少なくとも１つを含む、項目１１に記載のディスプレイシステム。
（項目１３）
仮想コンテンツを３次元（３Ｄ）空間環境内に表示するためのディスプレイシステムであって、前記ディスプレイシステムは、
仮想コンテンツを前記ディスプレイシステムのユーザの眼に提示するように構成される頭部搭載型ディスプレイと、
前記頭部搭載型ディスプレイと通信する回路網であって、前記回路網は、
コンテンツにアクセスするための要求を受信することと、
第１の配向において、コンテンツを前記ユーザの前記３Ｄ空間環境の認可された部分内に表示することと、
第２の配向において、前記コンテンツを前記ユーザの前記３Ｄ空間環境内に表示するための要求を受信することと、
前記第２の配向において、前記コンテンツが前記ユーザの前記３Ｄ空間環境の認可された部分内に表示され得るかどうかを決定することと、
前記第２の配向において、前記コンテンツが前記３Ｄ空間環境の認可された部分内に表示され得ないことの決定に応答して、前記認可された部分を自動的にサイズ変更し、前記第２の配向において、前記サイズ変更された認可された部分内に前記コンテンツの表示を可能にすることと
を行うように構成される、回路網と
を備える、ディスプレイシステム。
（項目１４）
前記コンテンツは、ウェブページを備える、項目１３に記載のディスプレイシステム。
（項目１５）
前記回路網は、
コンテンツを前記３Ｄ空間環境内の仮想ブラウザタイルの中に表示するように構成され、
前記３Ｄ空間環境の認可された部分は、
前記仮想ブラウザタイルの幅を上回る幅と、
前記仮想ブラウザタイルの高さを上回る高さと、
前記仮想ブラウザタイル深度を上回る深度と
を備える、項目１３に記載のディスプレイシステム。
（項目１６）
前記回路網は、
前記第２の配向において、前記コンテンツが前記３Ｄ空間環境の認可された部分内に表示され得ることの決定に応答して、前記第２の配向において、コンテンツを前記認可された部分内に表示する
ように構成される、項目１３に記載のディスプレイシステム。
（項目１７）
サイズ変更認可ステータスを決定するために、前記回路網は、ユーザ入力に基づいて、認可を識別するように構成される、項目１３に記載のディスプレイシステム。
（項目１８）
前記コンテンツは、ウェブドメインと関連付けられ、サイズ変更認可ステータスを決定するために、前記回路網は、前記ウェブドメインが認可された要求者であるかどうかに基づいて、認可を識別するように構成される、項目１３に記載のディスプレイシステム。
（項目１９）
前記サイズ変更認可ステータスは、前記コンテンツと関連付けられるウェブドメインへのアクセスの現在のセッションの間、前記認可された部分をサイズ変更するための認可を備える、項目１７に記載のディスプレイシステム。
（項目２０）
仮想コンテンツを３次元（３Ｄ）空間環境内に表示するためのディスプレイシステムであって、前記ディスプレイシステムは、
仮想コンテンツを前記ディスプレイシステムのユーザの眼に提示するように構成される頭部搭載型ディスプレイと、
前記頭部搭載型ディスプレイと通信する回路網であって、前記回路網は、
３Ｄコンテンツにアクセスするための要求を受信することと、
前記３Ｄコンテンツを表示するための前記ユーザの前記３Ｄ空間環境内の場所、前記３Ｄコンテンツの配向、および前記３Ｄコンテンツの寸法のうちの少なくとも１つを含む前記３Ｄコンテンツと関連付けられるパラメータを識別することと、
前記パラメータに基づいて、前記３Ｄコンテンツが前記ユーザの前記３Ｄ空間環境の認可された部分内に表示され得るかどうかを決定することと、
前記３Ｄコンテンツが前記３Ｄ空間環境の認可された部分内に表示され得ないことの決定に応答して、前記３Ｄコンテンツの表現を前記３Ｄ空間環境内の前記場所に表示することと
を行うように構成される、回路網と
を備える、ディスプレイシステム。
本発明は、例えば、以下を提供する。
（項目１）
仮想コンテンツを３次元（３Ｄ）空間環境内に表示するためのディスプレイシステムであって、前記ディスプレイシステムは、
仮想コンテンツを前記ディスプレイシステムのユーザの眼に提示するように構成される頭部搭載型ディスプレイと、
前記頭部搭載型ディスプレイと通信する回路網であって、前記回路網は、
ウェブベースである３Ｄコンテンツにアクセスするための要求を受信することと、
前記３Ｄコンテンツを表示するための前記ユーザの前記３Ｄ空間環境内の場所、前記３Ｄコンテンツの配向、または前記３Ｄコンテンツの寸法のうちの少なくとも１つを含む前記３Ｄコンテンツと関連付けられるパラメータを識別することと、
前記パラメータに基づいて、前記３Ｄコンテンツが前記ユーザの前記３Ｄ空間環境の認可された部分内に表示され得るかどうかを決定することと、
前記３Ｄコンテンツが前記３Ｄ空間環境の認可された部分内に表示され得ないことの決定に応答して、前記認可された部分を自動的にサイズ変更し、前記サイズ変更された認可された部分内への前記３Ｄコンテンツの表示を可能にすることと
を行うように構成される、回路網と
を備える、ディスプレイシステム。
（項目２）
前記回路網は、
ブラウザタイルを前記３Ｄ空間環境内に表示するように構成され、
前記３Ｄ空間環境の認可された部分は、
前記ブラウザタイルの幅を上回る幅と、
前記ブラウザタイルの高さを上回る高さと、
前記ブラウザタイルの深度を上回る深度と
を備える、項目１に記載のディスプレイシステム。
（項目３）
前記回路網は、ブラウザタイルを前記認可された部分内に表示するように構成される、項目２に記載のディスプレイシステム。
（項目４）
前記３Ｄコンテンツが前記認可された部分内に表示され得るかどうかを決定するために、前記回路網は、閾値量の前記３Ｄコンテンツが前記認可された部分内に表示され得るかどうかを決定するように構成される、項目１に記載のディスプレイシステム。
（項目５）
前記回路網は、
前記３Ｄコンテンツが前記３Ｄ空間環境の認可された部分内に表示され得ることの決定に応答して、前記３Ｄコンテンツを前記認可された部分内に表示する
ように構成される、項目１に記載のディスプレイシステム。
（項目６）
前記認可された部分をサイズ変更するために、前記回路網は、
サイズ変更認可ステータスを決定することと、
前記サイズ変更認可ステータスに基づいて、前記認可された部分をサイズ変更することと
を行うように構成される、項目１に記載のディスプレイシステム。
（項目７）
前記サイズ変更認可ステータスを決定するために、前記回路網は、ユーザ入力に基づいて、認可を識別するように構成される、項目６に記載のディスプレイシステム。
（項目８）
前記３Ｄコンテンツは、ウェブドメインと関連付けられ、前記サイズ変更認可ステータスを決定するために、前記回路網は、前記ウェブドメインが認可された要求者であるかどうかに基づいて、認可を識別するように構成される、項目６に記載のディスプレイシステム。
（項目９）
前記サイズ変更認可ステータスは、前記３Ｄコンテンツと関連付けられるウェブドメインへのアクセスの現在のセッションの間、前記認可された部分をサイズ変更するための認可を備える、項目６に記載のディスプレイシステム。
（項目１０）
前記認可された部分をサイズ変更するために、前記回路網は、
前記認可された部分の幅を少なくとも１つの方向に第１の量だけ増加させることと、
前記認可された部分の高さを少なくとも１つの方向に第２の量だけ増加させることと、
前記認可された部分の深度を少なくとも１つの方向に第３の量だけ増加させることと
を行うように構成される、項目１に記載のディスプレイシステム。
（項目１１）
前記回路網は、
前記認可された部分と関連付けられるリフレッシュ条件を決定することと、
前記認可された部分のサイズをデフォルトサイズに設定することと
を行うように構成される、項目１に記載のディスプレイシステム。
（項目１２）
前記リフレッシュ条件は、前記３Ｄコンテンツと関連付けられないウェブドメインとのユーザ相互作用と、前記３Ｄコンテンツの表示を中止するための前記ユーザからのインジケーションとのうちの少なくとも１つを含む、項目１１に記載のディスプレイシステム。
（項目１３）
仮想コンテンツを３次元（３Ｄ）空間環境内に表示するためのディスプレイシステムであって、前記ディスプレイシステムは、
仮想コンテンツを前記ディスプレイシステムのユーザの眼に提示するように構成される頭部搭載型ディスプレイと、
前記頭部搭載型ディスプレイと通信する回路網であって、前記回路網は、
コンテンツにアクセスするための要求を受信することと、
第１の配向において、コンテンツを前記ユーザの前記３Ｄ空間環境の認可された部分内に表示することと、
第２の配向において、前記コンテンツを前記ユーザの前記３Ｄ空間環境内に表示するための要求を受信することと、
前記第２の配向において、前記コンテンツが前記ユーザの前記３Ｄ空間環境の認可された部分内に表示され得るかどうかを決定することと、
前記第２の配向において、前記コンテンツが前記３Ｄ空間環境の認可された部分内に表示され得ないことの決定に応答して、前記認可された部分を自動的にサイズ変更し、前記第２の配向において、前記サイズ変更された認可された部分内に前記コンテンツの表示を可能にすることと
を行うように構成される、回路網と
を備える、ディスプレイシステム。
（項目１４）
前記コンテンツは、ウェブページを備える、項目１３に記載のディスプレイシステム。
（項目１５）
前記回路網は、
コンテンツを前記３Ｄ空間環境内の仮想ブラウザタイルの中に表示するように構成され、
前記３Ｄ空間環境の認可された部分は、
前記仮想ブラウザタイルの幅を上回る幅と、
前記仮想ブラウザタイルの高さを上回る高さと、
前記仮想ブラウザタイル深度を上回る深度と
を備える、項目１３に記載のディスプレイシステム。
（項目１６）
前記回路網は、
前記第２の配向において、前記コンテンツが前記３Ｄ空間環境の認可された部分内に表示され得ることの決定に応答して、前記第２の配向において、コンテンツを前記認可された部分内に表示する
ように構成される、項目１３に記載のディスプレイシステム。
（項目１７）
サイズ変更認可ステータスを決定するために、前記回路網は、ユーザ入力に基づいて、認可を識別するように構成される、項目１３に記載のディスプレイシステム。
（項目１８）
前記コンテンツは、ウェブドメインと関連付けられ、サイズ変更認可ステータスを決定するために、前記回路網は、前記ウェブドメインが認可された要求者であるかどうかに基づいて、認可を識別するように構成される、項目１３に記載のディスプレイシステム。
（項目１９）
前記サイズ変更認可ステータスは、前記コンテンツと関連付けられるウェブドメインへのアクセスの現在のセッションの間、前記認可された部分をサイズ変更するための認可を備える、項目１７に記載のディスプレイシステム。
（項目２０）
仮想コンテンツを３次元（３Ｄ）空間環境内に表示するためのディスプレイシステムであって、前記ディスプレイシステムは、
仮想コンテンツを前記ディスプレイシステムのユーザの眼に提示するように構成される頭部搭載型ディスプレイと、
前記頭部搭載型ディスプレイと通信する回路網であって、前記回路網は、
３Ｄコンテンツにアクセスするための要求を受信することと、
前記３Ｄコンテンツを表示するための前記ユーザの前記３Ｄ空間環境内の場所、前記３Ｄコンテンツの配向、および前記３Ｄコンテンツの寸法のうちの少なくとも１つを含む前記３Ｄコンテンツと関連付けられるパラメータを識別することと、
前記パラメータに基づいて、前記３Ｄコンテンツが前記ユーザの前記３Ｄ空間環境の認可された部分内に表示され得るかどうかを決定することと、
前記３Ｄコンテンツが前記３Ｄ空間環境の認可された部分内に表示され得ないことの決定に応答して、前記３Ｄコンテンツの表現を前記３Ｄ空間環境内の前記場所に表示することと
を行うように構成される、回路網と
を備える、ディスプレイシステム。
【0010】
【0011】
【0012】
【0013】
【0014】
【0015】
【0016】
【0017】
【0018】
【0019】
【0020】
【0021】
【0022】
【0023】
【0024】
【0025】
【0026】
【0027】
【0028】
【0029】
【0030】
【発明を実施するための形態】
【0031】
詳細な説明
Ａ．緒言
仮想および拡張現実環境は、部分的に、環境を説明する、データを使用して、コンピュータによって生成される。本データは、例えば、それを用いてユーザが感知および相互作用し得る、種々のオブジェクトを説明し得る。これらのオブジェクトの実施例は、ユーザが見るためにレンダリングおよび表示される、オブジェクトと、ユーザが聞くために再生される、オーディオと、ユーザが感じるための触覚的（または触知）フィードバックとを含む。ユーザは、種々の視覚的、聴覚的、および触覚的方法を通して、仮想および拡張現実環境を感知し、それと相互作用し得る。
Ａ．緒言
仮想および拡張現実環境は、部分的に、環境を説明する、データを使用して、コンピュータによって生成される。本データは、例えば、それを用いてユーザが感知および相互作用し得る、種々のオブジェクトを説明し得る。これらのオブジェクトの実施例は、ユーザが見るためにレンダリングおよび表示される、オブジェクトと、ユーザが聞くために再生される、オーディオと、ユーザが感じるための触覚的（または触知）フィードバックとを含む。ユーザは、種々の視覚的、聴覚的、および触覚的方法を通して、仮想および拡張現実環境を感知し、それと相互作用し得る。
【0032】
仮想または拡張現実（ＡＲ）システムは、多くの用途に有用であり得、科学的可視化、医学および軍事訓練、工学設計およびプロトタイピング、遠隔操作およびテレプレゼンス、およびパーソナルエンターテインメントの分野に及ぶ。拡張現実は、仮想現実と対照的に、物理的世界の実オブジェクトに関連して１つまたはそれを上回る仮想オブジェクトを備える。そのような体験は、拡張現実システムを用いたユーザの体験および享受性を大幅に向上させ、また、ユーザが実オブジェクトおよび仮想オブジェクトを同時に体験することを可能にする、種々の用途に関する門戸を開放する。
【0033】
しかしながら、そのようなシステムを提供する際、有意な課題が存在する。現実的拡張現実体験をユーザに提供するために、ＡＲシステムは、常時、実オブジェクトに関連して仮想オブジェクトの場所を正しく相関させるために、ユーザの物理的周囲を把握しなければならない。さらに、ＡＲシステムはユーザの頭部、身体等に関連して仮想オブジェクトを位置付ける方法を正しく把握しなければならない。これは、常時、世界に関連してユーザの位置の広範な知識を要求する。加えて、これらの機能は、有利なこととして、コスト（例えば、エネルギーコスト等）が、低く保たれながら、速度および性能が維持されるような様式において実施されるべきである。
【0034】
したがって、現実的拡張現実体験をユーザに提供するための改良されたシステムの必要がある。
Ｂ．ウェアラブルシステムの３Ｄディスプレイの実施例
Ｂ．ウェアラブルシステムの３Ｄディスプレイの実施例
【0035】
ウェアラブルシステム（本明細書では、拡張現実（ＡＲ）システムとも称される）は、２Ｄまたは３Ｄ仮想画像をユーザに提示するために構成されることができる。画像は、組み合わせまたは同等物における、静止画像、ビデオのフレーム、またはビデオであってもよい。ウェアラブルシステムの少なくとも一部は、ユーザ相互作用のために、単独で、または組み合わせて、ＶＲ、ＡＲ、またはＭＲ環境を提示し得る、ウェアラブルデバイス上に実装されることができる。ウェアラブルデバイスは、頭部搭載型デバイス（ＨＭＤ）であることができ、これは、ＡＲデバイス（ＡＲＤ）と同義的に使用される。さらに、本開示の目的のために、用語「ＡＲ」は、用語「ＭＲ」と同義的に使用される。
【0036】
図１は、人物によって視認される、ある仮想現実オブジェクトおよびある物理的オブジェクトを伴う、複合現実シナリオの例証を描写する。図１では、ＭＲ場面１００が、描写され、ＭＲ技術のユーザには、人々、木々、背景における建物、およびコンクリートプラットフォーム１２０を特徴とする、実世界公園状設定１１０が見える。これらのアイテムに加え、ＭＲ技術のユーザはまた、実世界プラットフォーム１２０上に立っているロボット像１３０と、マルハナバチの擬人化のように見える、飛んでいる漫画のようなアバタキャラクタ１４０とが「見える」と知覚するが、これらの要素は、実世界には存在しない。
【0037】
３Ｄディスプレイが、真の深度感覚、より具体的には、表面深度のシミュレートされた感覚を生成するために、ディスプレイの視野内の点毎に、その仮想深度に対応する遠近調節応答を生成することが望ましくあり得る。ディスプレイ点に対する遠近調節応答が、収束および立体視の両眼深度キューによって決定されるようなその点の仮想深度に対応しない場合、ヒトの眼は、遠近調節衝突を体験し、不安定な結像、有害な眼精疲労、頭痛、および遠近調節情報の不在下では、表面深度のほぼ完全な欠如をもたらし得る。
【0038】
ＶＲ、ＡＲ、およびＭＲ体験は、複数の深度面に対応する画像が視認者に提供されるディスプレイを有する、ディスプレイシステムによって提供されることができる。画像は、深度面毎に異なってもよく（例えば、場面またはオブジェクトの若干異なる提示を提供する）、視認者の眼によって別個に集束され、それによって、異なる深度面上に位置する場面に関する異なる画像特徴に合焦させるために要求される眼の遠近調節に基づいて、または合焦からずれている異なる深度面上の異なる画像特徴を観察することに基づいて、ユーザに深度キューを提供することに役立ち得る。本明細書のいずれかに議論されるように、そのような深度キューは、信用できる深度の知覚を提供する。
【0039】
図２は、ウェアラブルシステム２００の実施例を図示し、これは、ＡＲ／ＶＲ／ＭＲ場面を提供するように構成されることができ、本明細書に説明される例示的ウェイポイントシステムの実施形態を含むことができる。ウェアラブルシステム２００はまた、ＡＲシステム２００と称され得る。ウェアラブルシステム２００は、ディスプレイ２２０と、ディスプレイ２２０の機能をサポートするための種々の機械的および電子的モジュールおよびシステムとを含む。ディスプレイ２２０は、ユーザ、装着者、または視認者２１０によって装着可能である、フレーム２３０に結合されてもよい。ディスプレイ２２０は、ユーザ２１０の眼の正面に位置付けられることができる。ディスプレイ２２０は、ＡＲ／ＶＲ／ＭＲコンテンツをユーザに提示することができる。ディスプレイ２２０は、ユーザの頭部上に装着される、頭部搭載型ディスプレイを備えることができる。いくつかの実施形態では、スピーカ２４０が、フレーム２３０に結合され、ユーザの外耳道に隣接して位置付けられる（いくつかの実施形態では、示されない別のスピーカが、ユーザの他方の外耳道に隣接して位置付けられ、ステレオ／成形可能音制御を提供する）。ディスプレイ２２０は、環境からオーディオストリームを検出し、周囲音を捕捉するために、オーディオセンサ（例えば、マイクロホン）２３２を含むことができる。示されない１つまたはそれを上回る他のオーディオセンサが、ステレオ音受信を提供するために位置付けられることができる。ステレオ音受信は、音源の場所を決定するために使用されることができる。ウェアラブルシステム２００は、音声または発話認識をオーディオストリームに実施することができる。
【0040】
ウェアラブルシステム２００は、ユーザの周囲の環境内の世界を観察する、外向きに向いた結像システム４６４（図４に示される）を含むことができる。ウェアラブルシステム２００はまた、ユーザの眼移動を追跡することができる、内向きに向いた結像システム４６２（図４に示される）を含むことができる。内向きに向いた結像システムは、一方の眼の移動または両方の眼の移動のいずれかを追跡し得る。内向きに向いた結像システム４６２は、フレーム２３０に取り付けられてもよく、内向きに向いた結像システムによって入手された画像情報を処理し、例えば、ユーザ２１０の眼の瞳孔直径または配向、眼の移動、または眼姿勢を決定し得る、処理モジュール２６０または２７０と電気通信してもよい。
【0041】
実施例として、ウェアラブルシステム２００は、外向きに向いた結像システム４６４または内向きに向いた結像システム４６２を使用して、ユーザの姿勢の画像を入手することができる。画像は、静止画像、ビデオのフレーム、またはビデオであってもよい。
【0042】
ディスプレイ２２０は、有線導線または無線接続等によって、フレーム２３０に固定して取り付けられる、ユーザによって装着されるヘルメットまたは帽子に固定して取り付けられる、ヘッドホンに内蔵される、または別様にユーザ２１０に除去可能に取り付けられる（例えば、リュック式構成において、ベルト結合式構成において）等、種々の構成において搭載され得る、ローカルデータ処理モジュール２６０に動作可能に結合されることができる（２５０）。
【0043】
ローカル処理およびデータモジュール２６０は、ハードウェアプロセッサおよび不揮発性メモリ（例えば、フラッシュメモリ）等のデジタルメモリを備えてもよく、その両方とも、データの処理、キャッシング、および記憶を補助するために利用され得る。データは、ａ）画像捕捉デバイス（例えば、内向きに向いた結像システムおよび／または外向きに向いた結像システム内のカメラ）、オーディオセンサ（例えば、マイクロホン）、慣性測定ユニット（ＩＭＵ）、加速度計、コンパス、全地球測位システム（ＧＰＳ）ユニット、無線デバイス、またはジャイロスコープ等の（例えば、フレーム２３０に動作可能に結合される、または別様にユーザ２１０に取り付けられ得る）センサから捕捉されるデータ、またはｂ）可能性として処理または読出後にディスプレイ２２０への通過のために、遠隔処理モジュール２７０または遠隔データリポジトリ２８０を使用して入手または処理されるデータを含んでもよい。ローカル処理およびデータモジュール２６０は、これらの遠隔モジュールがローカル処理およびデータモジュール２６０へのリソースとして利用可能であるように、有線または無線通信リンク等を介して、通信リンク２６２または２６４によって遠隔処理モジュール２７０または遠隔データリポジトリ２８０に動作可能に結合されてもよい。加えて、遠隔処理モジュール２７０および遠隔データリポジトリ２８０は、相互に動作可能に結合されてもよい。
【0044】
遠隔処理モジュール２７０は、データまたは画像情報を分析および処理するように構成される、１つまたはそれを上回るプロセッサを含んでもよい。遠隔データリポジトリ２８０は、デジタルデータ記憶設備を含むことができ、これは、インターネットまたは「クラウド」リソース構成における他のネットワーキング構成を通して利用可能であってもよい。データが、記憶されることができ、算出が、ローカル処理およびデータモジュールにおいて実施され、遠隔モジュールからの完全に自律的な使用を可能にすることができる。
【0045】
ヒト視覚系は、複雑であって、深度の現実的知覚を提供することは、困難である。理論によって限定されるわけではないが、オブジェクトの視認者は、輻輳・開散運動と遠近調節の組み合わせに起因して、オブジェクトを３次元として知覚し得ると考えられる。相互に対する２つの眼の輻輳・開散運動移動（例えば、眼の視線を収束させ、オブジェクトを固視するための相互に向かった、またはそこから離れる瞳孔の回転移動）は、眼の水晶体の合焦（または「遠近調節」）と緊密に関連付けられる。正常条件下、焦点を１つのオブジェクトから異なる距離における別のオブジェクトに変化させるための眼の水晶体の焦点の変化または眼の遠近調節は、「遠近調節－輻輳・開散運動反射」として知られる関係下、輻輳・開散運動の整合変化を自動的に同一距離に生じさせるであろう。同様に、輻輳・開散運動の変化が、正常条件下、遠近調節の合致する変化を誘起するであろう。遠近調節と輻輳・開散運動との間のより良好な合致を提供するディスプレイシステムが３次元画像のより現実的かつ快適なシミュレーションを形成し得る。
【0046】
図３は、複数の深度面を使用して３次元画像をシミュレートするためのアプローチの側面を図示する。図３を参照すると、ｚ－軸上の眼３０２および３０４からの種々の距離におけるオブジェクトは、それらのオブジェクトが合焦するように、眼３０２および３０４によって遠近調節される。眼３０２および３０４は、特定の遠近調節された状態をとり、オブジェクトをｚ－軸に沿った異なる距離に合焦させる。その結果、特定の遠近調節された状態は、特定の深度面におけるオブジェクトまたはオブジェクトの一部が、眼がその深度面に対して遠近調節された状態にあるときに合焦するように、関連付けられる焦点距離を有する、深度面３０６のうちの特定の１つと関連付けられると言え得る。３次元画像が、眼３０２および３０４毎に、画像の異なる提示を提供することによって、また、深度面のそれぞれに対応する画像の異なる提示を提供することによって、シミュレートされることができる。例証を明確にするために、別個であるものとして示されるが、眼３０２および３０４の視野は、例えば、ｚ－軸に沿った距離が増加するにつれて、重複し得ることを理解されたい。加えて、例証を容易にするために、平坦であるものとして示されるが、深度面の等高線は、深度面内の全ての特徴が特定の遠近調節された状態における眼と合焦するように、物理的空間内で湾曲され得ることを理解されたい。理論によって限定されるわけではないが、ヒトの眼は、典型的には、有限数の深度面を解釈し、深度知覚を提供することができると考えられる。その結果、知覚された深度の高度に真実味のあるシミュレーションが、眼にこれらの限定数の深度面のそれぞれに対応する画像の異なる提示を提供することによって達成され得る。
Ｃ．導波管スタックアセンブリ
Ｃ．導波管スタックアセンブリ
【0047】
図４は、画像情報をユーザに出力するための導波管スタックの実施例を図示する。ウェアラブルシステム４００は、複数の導波管４３２ｂ、４３４ｂ、４３６ｂ、４３８ｂ、４４００ｂを使用して、３次元知覚を眼／脳に提供するために利用され得る、導波管のスタックまたはスタックされた導波管アセンブリ４８０を含む。ウェアラブルシステム４００は、図２のウェアラブルシステム２００に対応することができ、図４は、そのウェアラブルシステム２００のいくつかの部分をより詳細に図式的に示す。例えば、導波管アセンブリ４８０は、図２のディスプレイ２２０の中に統合されることができる。
【0048】
図４を継続して参照すると、導波管アセンブリ４８０はまた、複数の特徴４５８、４５６、４５４、４５２を導波管の間に含んでもよい。特徴４５８、４５６、４５４、４５２は、レンズであってもよい。特徴４５８、４５６、４５４、４５２は、レンズではなくてもよい。むしろ、それらは、単に、スペーサであってもよい（例えば、クラッディング層または空気間隙を形成するための構造）。
【0049】
導波管４３２ｂ、４３４ｂ、４３６ｂ、４３８ｂ、４４０ｂまたは複数のレンズ４５８、４５６、４５４、４５２は、種々のレベルの波面曲率または光線発散を用いて、画像情報を眼に送信するように構成されてもよい。各導波管レベルは、特定の深度面と関連付けられてもよく、その深度面に対応する画像情報を出力するように構成されてもよい。画像投入デバイス４２０、４２２、４２４、４２６、４２８は、それぞれ、眼４１０に向かって出力するために、各個別の導波管を横断して入射光を分散させるように構成され得る、導波管４４０ｂ、４３８ｂ、４３６ｂ、４３４ｂ、４３２ｂの中に画像情報を投入するために利用されてもよい。光は、画像投入デバイス４２０、４２２、４２４、４２６、４２８の出力表面から出射し、導波管４４０ｂ、４３８ｂ、４３６ｂ、４３４ｂ、４３２ｂの対応する入力縁の中に投入される。光の単一ビーム（例えば、コリメートされたビーム）が、各導波管の中に投入され、特定の導波管と関連付けられる深度面に対応する特定の角度（および発散量）において眼４１０に向かって指向される、クローン化されるコリメートされたビームの場全体を出力してもよい。
【0050】
画像投入デバイス４２０、４２２、４２４、４２６、４２８は、それぞれ、それぞれが対応する導波管４４０ｂ、４３８ｂ、４３６ｂ、４３４ｂ、４３２ｂの中への投入のための画像情報を生成する、離散ディスプレイであることができる。加えて、または代替として、画像投入デバイス４２０、４２２、４２４、４２６、４２８は、例えば、１つまたはそれを上回る光学導管（光ファイバケーブル等）を介して、画像情報を画像投入デバイス４２０、４２２、４２４、４２６、４２８のそれぞれに送り得る、単一の多重化されたディスプレイの出力端であることができる。
【0051】
コントローラ４６０が、スタックされた導波管アセンブリ４８０および画像投入デバイス４２０、４２２、４２４、４２６、４２８の動作を制御する。コントローラ４６０は、導波管４４０ｂ、４３８ｂ、４３６ｂ、４３４ｂ、４３２ｂへの画像情報のタイミングおよび提供を調整する、プログラミング（例えば、非一過性コンピュータ可読媒体内の命令）を含むことができる。コントローラ４６０は、単一一体型デバイスまたは有線または無線通信チャネルによって接続される分散型システムであってもよい。コントローラ４６０は、いくつかの実施形態では、処理モジュール２６０または２７０（図２に図示される）の一部であってもよい。
【0052】
導波管４４０ｂ、４３８ｂ、４３６ｂ、４３４ｂ、４３２ｂは、全内部反射（ＴＩＲ）によって各個別の導波管内で光を伝搬するように構成されてもよい。導波管４４０ｂ、４３８ｂ、４３６ｂ、４３４ｂ、４３２ｂはそれぞれ、主要上部表面および底部表面およびそれらの主要上部表面と底部表面との間に延在する縁を伴う、平面である、または別の形状（例えば、湾曲）を有してもよい。図示される構成では、導波管４４０ｂ、４３８ｂ、４３６ｂ、４３４ｂ、４３２ｂはそれぞれ、各個別の導波管内で伝搬する光を導波管から外に再指向し、画像情報を眼４１０に出力することによって、光を導波管から抽出するように構成される、光抽出光学要素４４０ａ、４３８ａ、４３６ａ、４３４ａ、４３２ａを含んでもよい。抽出された光はまた、外部結合光と称され得、光抽出光学要素はまた、外部結合光学要素と称され得る。抽出された光のビームは、導波管によって、導波管内を伝搬する光が光再指向要素に衝打する場所に出力されることができる。光抽出光学要素（４４０ａ、４３８ａ、４３６ａ、４３４ａ、４３２ａ）は、例えば、反射または回折光学特徴であってもよい。説明の容易性および図面の明確性のために、導波管４４０ｂ、４３８ｂ、４３６ｂ、４３４ｂ、４３２ｂの底部主要表面に配置されて図示されるが、光抽出光学要素４４０ａ、４３８ａ、４３６ａ、４３４ａ、４３２ａは、上部または底部主要表面に配置されてもよい、または導波管４４０ｂ、４３８ｂ、４３６ｂ、４３４ｂ、４３２ｂの容積内に直接配置されてもよい。光抽出光学要素４４０ａ、４３８ａ、４３６ａ、４３４ａ、４３２ａは、透明基板に取り付けられ、導波管４４０ｂ、４３８ｂ、４３６ｂ、４３４ｂ、４３２ｂを形成する、材料の層内に形成されてもよい。導波管４４０ｂ、４３８ｂ、４３６ｂ、４３４ｂ、４３２ｂは、材料のモノリシック片であってもよく、光抽出光学要素４４０ａ、４３８ａ、４３６ａ、４３４ａ、４３２ａは、材料のその部品の表面上および／またはその内部に形成されてもよい。
【0053】
図４を継続して参照すると、本明細書に議論されるように、各導波管４４０ｂ、４３８ｂ、４３６ｂ、４３４ｂ、４３２ｂは、光を出力し、特定の深度面に対応する画像を形成するように構成されることができる。例えば、眼の最近傍の導波管４３２ｂは、そのような導波管４３２ｂの中に投入されるにつれて、コリメートされた光を眼４１０に送達するように構成されてもよい。コリメートされた光は、光学無限遠焦点面を表し得る。次の導波管４３４ｂは、眼４１０に到達し得る前に、第１のレンズ４５２（例えば、負のレンズ）を通して通過する、コリメートされた光を送出するように構成されてもよい。第１のレンズ４５２は、眼／脳が、その次の上方の導波管４３４ｂから生じる光を光学無限遠から眼４１０に向かって内向きにより近い第１の焦点面から生じるものとして解釈するように、若干の凸面波面曲率を生成するように構成されてもよい。同様に、第３の上方の導波管４３６ｂは、眼４１０に到達する前に、その出力光を第１のレンズ４５２および第２のレンズ４５４の両方を通して通過させる。第１および第２のレンズ４５２および４５４の組み合わせられた屈折力は、眼／脳が、第３の導波管４３６ｂから生じる光が次の上方の導波管４３４ｂからの光であったよりも光学無限遠から人物に向かって内向きにさらにより近い第２の焦点面から生じるものとして解釈するように、別の漸増量の波面曲率を生成するように構成されてもよい。
【0054】
他の導波管層（例えば、導波管４３８ｂ、４４０ｂ）およびレンズ（例えば、レンズ４５６、４５８）も同様に構成され、スタック内の最高導波管４４０ｂを用いて、人物に最も近い焦点面を表す集約焦点力のために、その出力をそれと眼との間のレンズの全てを通して送出する。スタックされた導波管アセンブリ４８０の他側の世界４７０から生じる光を視認／解釈するとき、レンズ４５８、４５６、４５４、４５２のスタックを補償するために、補償レンズ層４３０が、スタックの上部に配置され、下方のレンズスタック４５８、４５６、４５４、４５２の集約力を補償してもよい。そのような構成は、利用可能な導波管／レンズ対と同じ数の知覚される焦点面を提供する。導波管の光抽出光学要素およびレンズの集束側面は両方とも、静的であってもよい（例えば、動的または電気活性ではない）。加えて、または代替として、一方または両方とも、電気活性特徴を使用して動的であってもよい。
【0055】
図４を継続して参照すると、光抽出光学要素４４０ａ、４３８ａ、４３６ａ、４３４ａ、４３２ａは、光をその個別の導波管から再指向し、かつ導波管と関連付けられる特定の深度面のための適切な発散またはコリメーション量を用いて本光を出力することの両方のために構成されてもよい。その結果、異なる関連付けられる深度面を有する導波管は、関連付けられる深度面に応じて、異なる量の発散を伴う光を出力する、異なる構成の光抽出光学要素を有してもよい。本明細書に議論されるように、光抽出光学要素４４０ａ、４３８ａ、４３６ａ、４３４ａ、４３２ａは、光を具体的角度で出力するように構成され得る、立体または表面特徴であってもよい。例えば、光抽出光学要素４４０ａ、４３８ａ、４３６ａ、４３４ａ、４３２ａは、立体ホログラム、表面ホログラム、または回折格子であってもよい。回折格子等の光抽出光学要素は、２０１５年６月２５日に公開された米国特許公開第２０１５／０１７８９３９号（参照することによってその全体として本明細書に組み込まれる）に説明される。
【0056】
いくつかの実施形態では、光抽出光学要素４４０ａ、４３８ａ、４３６ａ、４３４ａ、４３２ａは、回折パターンを形成する回折特徴、すなわち、「回折光学要素」（本明細書では、「ＤＯＥ」とも称される）である。好ましくは、ＤＯＥは、ビームの光の一部のみが、ＤＯＥの各交点で眼４１０に向かって偏向される一方、残りが、全内部反射を介して、導波管を通して移動し続けるように、比較的に低回折効率を有する。画像情報を搬送する光は、したがって、複数の場所において導波管から出射する、いくつかの関連出射ビームに分割され、その結果、導波管内でバウンスする本特定のコリメートされたビームに関して、眼３０４に向かって非常に均一パターンの出射放出となることができる。
【0057】
１つまたはそれを上回るＤＯＥは、能動的に回折する「オン」状態と有意に回折しない「オフ」状態との間で切替可能であってもよい。例えば、切替可能なＤＯＥは、微小液滴がホスト媒体内に回折パターンを備える、ポリマー分散液晶の層を備えてもよく、微小液滴の屈折率は、ホスト材料の屈折率に実質的に合致するように切り替えられることができる（その場合、パターンは、入射光を著しく回折させない）、または微小液滴は、ホスト媒体のものに合致しない屈折率に切り替えられることができる（その場合、パターンは、入射光を能動的に回折させる）。
【0058】
深度面または被写界深度の数および分布は、視認者の眼の瞳孔サイズまたは配向に基づいて、動的に変動されてもよい。被写界深度は、視認者の瞳孔サイズと反比例して変化してもよい。その結果、視認者の眼の瞳孔のサイズが減少するにつれて、被写界深度は、その平面の場所が眼の焦点深度を越えるため判別不能である１つの平面が、判別可能となり、瞳孔サイズの低減および被写界深度の相当する増加に伴って、より合焦して現れ得るように増加する。同様に、異なる画像を視認者に提示するために使用される、離間された深度面の数は、減少された瞳孔サイズに伴って減少され得る。例えば、視認者は、一方の深度面から他方の深度面への眼の遠近調節を調節することなく、第１の深度面および第２の深度面の両方の詳細を１つの瞳孔サイズにおいて明確に知覚することが可能ではない場合がある。しかしながら、これらの２つの深度面は、同時に、遠近調節を変化させることなく、別の瞳孔サイズにおいてユーザにとって十分に合焦し得る。
【0059】
ディスプレイシステムは、瞳孔サイズまたは配向の決定に基づいて、または特定の瞳孔サイズまたは配向を示す電気信号の受信に応じて、画像情報を受信する導波管の数を変動させてもよい。例えば、ユーザの眼が、２つの導波管と関連付けられる２つの深度面間を区別不能である場合、コントローラ４６０（ローカル処理およびデータモジュール２６０であり得る）は、これらの導波管のうちの１つへの画像情報の提供を停止するように構成またはプログラムされることができる。有利なこととして、これは、システムへの処理負担を低減させ、それによって、システムの応答性を増加させ得る。導波管のためのＤＯＥがオンおよびオフ状態間で切替可能である実施形態では、ＤＯＥは、導波管が画像情報を受信するとき、オフ状態に切り替えられてもよい。
【0060】
出射ビームに視認者の眼の直径未満の直径を有するという条件を満たさせることが望ましくあり得る。しかしながら、本条件を満たすことは、視認者の瞳孔のサイズの変動性に照らして、困難であり得る。本条件は、視認者の瞳孔のサイズの決定に応答して出射ビームのサイズを変動させることによって、広範囲の瞳孔サイズにわたって満たされ得る。例えば、瞳孔サイズが減少するにつれて、出射ビームのサイズもまた、減少し得る。出射ビームサイズは、可変開口を使用して変動されてもよい。
【0061】
ウェアラブルシステム４００は、世界４７０の一部を結像する、外向きに向いた結像システム４６４（例えば、デジタルカメラ）を含むことができる。世界４７０の本部分は、世界カメラの視野（ＦＯＶ）と称され得、結像システム４６４は、時として、ＦＯＶカメラとも称される。世界カメラのＦＯＶは、視認者２１０のＦＯＶと同一である場合とそうではない場合があり、これは、視認者２１０が所与の時間に知覚する、世界４７０の一部を包含する。例えば、いくつかの状況では、世界カメラのＦＯＶは、ウェアラブルシステム４００の視認者２１０の視野より大きくあり得る。視認者による視認または結像のために利用可能な領域全体は、動眼視野（ＦＯＲ）と称され得る。ＦＯＲは、装着者が、その身体、頭部、または眼を移動させ、空間内の実質的に任意の方向を知覚することができるため、ウェアラブルシステム４００を囲繞する４πステラジアンの立体角を含んでもよい。他のコンテキストでは、装着者の移動は、より抑制されてもよく、それに応じて、装着者のＦＯＲは、より小さい立体角に接し得る。外向きに向いた結像システム４６４から得られた画像は、ユーザによって行われるジェスチャ（例えば、手または指のジェスチャ）を追跡し、ユーザの正面における世界４７０内のオブジェクトを検出する等のために、使用されることができる。
【0062】
ウェアラブルシステム４００は、オーディオセンサ２３２、例えば、マイクロホンを含み、周囲音を捕捉することができる。上記に説明されるように、１つまたはそれを上回る他のオーディオセンサが、発話源の場所の決定に有用なステレオ音受信を提供するために位置付けられることができる。オーディオセンサ２３２は、別の実施例として、指向性マイクロホンを備えることができ、これはまた、オーディオ源が位置する場所に関するそのような有用な指向性情報を提供することができる。ウェアラブルシステム４００は、発話源を位置特定する際、または特定の瞬間におけるアクティブ話者を決定するため等に、外向きに向いた結像システム４６４およびオーディオセンサ２３０の両方からの情報を使用することができる。例えば、ウェアラブルシステム４００は、単独で、または話者の反射された画像（例えば、鏡に見られるように）と組み合わせて、音声認識を使用し、話者の識別を決定することができる。別の実施例として、ウェアラブルシステム４００は、指向性マイクロホンから入手された音に基づいて、環境内の話者の位置を決定することができる。ウェアラブルシステム４００は、発話認識アルゴリズムを用いて、話者の位置から生じる音を解析し、発話のコンテンツを決定し、音声認識技法を使用して、話者の識別（例えば、名称または他の人口統計情報）を決定することができる。
【0063】
ウェアラブルシステム４００はまた、眼移動および顔移動等のユーザの移動を観察する、内向きに向いた結像システム４６６（例えば、デジタルカメラ）を含むことができる。内向きに向いた結像システム４６６は、眼４１０の画像を捕捉し、眼３０４の瞳孔のサイズまたは配向を決定するために使用されてもよい。内向きに向いた結像システム４６６は、ユーザが見ている方向（例えば、眼姿勢）を決定する際に使用するため、またはユーザのバイオメトリック識別のため（例えば、虹彩識別を介して）、画像を得るために使用されることができる。少なくとも１つのカメラが、眼毎に、独立して、各眼の瞳孔サイズまたは眼姿勢を別個に決定し、それによって、各眼への画像情報の提示がその眼に対して動的に調整されることを可能にするために利用されてもよい。単一眼４１０のみの瞳孔直径または配向（例えば、対の眼あたり単一カメラのみを使用して）が、決定され、ユーザの両眼に関して類似すると仮定され得る。内向きに向いた結像システム４６６によって得られる画像は、ユーザに提示されるべきオーディオまたは視覚的コンテンツを決定するためにウェアラブルシステム４００によって使用され得る、ユーザの眼姿勢または気分を決定するために分析されてもよい。加えて、または代替として、ウェアラブルシステム４００は、ＩＭＵ、加速度計、ジャイロスコープ等のセンサを使用して、頭部姿勢（例えば、頭部位置または頭部配向）を決定してもよい。
【0064】
ウェアラブルシステム４００は、ユーザが、コマンドをコントローラ４６０に入力し、ウェアラブルシステム４００と相互作用し得る、ユーザ入力デバイス４６６を含むことができる。例えば、ユーザ入力デバイス４６６は、トラックパッド、タッチスクリーン、ジョイスティック、多自由度（ＤＯＦ）コントローラ、容量感知デバイス、ゲームコントローラ、キーボード、マウス、指向性パッド（Ｄパッド）、ワンド、触知デバイス、トーテム（例えば、仮想ユーザ入力デバイスとして機能する）等を含むことができる。マルチＤＯＦコントローラは、コントローラの一部または全部の可能性として考えられる平行移動（例えば、左／右、前方／後方、または上／下）または回転（例えば、ヨー、ピッチ、またはロール）におけるユーザ入力を感知することができる。平行移動をサポートする、マルチＤＯＦコントローラは、３ＤＯＦと称され得る一方、平行移動および回転をサポートする、マルチＤＯＦコントローラは、６ＤＯＦと称され得る。ユーザは、指（例えば、親指）を使用して、タッチセンサ式入力デバイスを押下またはその上でスワイプし、入力をウェアラブルシステム４００に提供してもよい（例えば、ユーザ入力をウェアラブルシステム４００によって提供されるユーザインターフェースに提供するために）。ユーザ入力デバイス４６６は、ウェアラブルシステム４００の使用の間、ユーザの手によって保持されてもよい。ユーザ入力デバイス４６６は、ウェアラブルシステム４００と有線または無線通信することができる。
【0065】
図５は、導波管によって出力された出射ビームの実施例を示す。１つの導波管が、図示されるが、導波管アセンブリ４８０内の他の導波管も、同様に機能してもよく、導波管アセンブリ４８０は、複数の導波管を含むことを理解されたい。光５２０が、導波管４３２ｂの入力縁４３２ｃにおいて導波管４３２ｂの中に投入され、ＴＩＲによって導波管４３２ｂ内を伝搬する。光５２０がＤＯＥ４３２ａに衝突する点において、光の一部が、出射ビーム５１０として導波管から出射することができる。出射ビーム５１０は、略平行として図示されるが、それらはまた、導波管４３２ｂと関連付けられる深度面に応じて、ある角度で眼４１０に伝搬するように再指向されてもよい（例えば、発散出射ビーム形成）。略平行出射ビームは、光を外部結合し、眼４１０から遠距離（例えば、光学無限遠）における深度面に設定されるように現れる画像を形成する光抽出光学要素を伴う、導波管を示し得ることを理解されたい。他の導波管または他の光抽出光学要素のセットが、より発散する、出射ビームパターンを出力してもよく、これは、眼４１０がより近い距離に遠近調節し、網膜上に合焦させることを要求し、光学無限遠より眼４１０に近い距離からの光として脳によって解釈されるであろう。
【0066】
図６は、導波管装置と、光を導波管装置へまたはそこから光学的に結合するための光学結合器サブシステムと、多焦点立体ディスプレイ、画像、またはライトフィールドの生成において使用される制御サブシステムとを含む、光学システムを示す、概略図である。光学システムは、導波管装置と、光を導波管装置にまたはそこから光学的に結合するための光学結合器サブシステムと、制御サブシステムとを含むことができる。光学システムは、多焦点立体、画像、またはライトフィールドを生成するために使用されることができる。光学システムは、１つまたはそれを上回る一次平面導波管６３２ａ（１つだけが図６に示される）と、一次導波管６３２ａのうちの少なくともいくつかのそれぞれと関連付けられる、１つまたはそれを上回るＤＯＥ６３２ｂとを含むことができる。平面導波管６３２ｂは、図４を参照して議論される導波管４３２ｂ、４３４ｂ、４３６ｂ、４３８ｂ、４４０ｂに類似することができる。光学システムは、分散導波管装置を採用し、光を第１の軸（図６の図では、垂直またはＹ－軸）に沿って中継し、第１の軸（例えば、Ｙ－軸）に沿って光の有効射出瞳を拡張させてもよい。分散導波管装置は、例えば、分散平面導波管６２２ｂと、分散平面導波管６２２ｂと関連付けられる少なくとも１つのＤＯＥ６２２ａ（二重破線によって図示される）とを含んでもよい。分散平面導波管６２２ｂは、少なくともいくつかの点において、それと異なる配向を有する一次平面導波管６３２ｂと類似する、または同じであり得る。同様に、少なくとも１つのＤＯＥ６２２ａは、少なくともいくつかの点において、ＤＯＥ６３２ａと類似する、または同じであり得る。例えば、分散平面導波管６２２ｂまたはＤＯＥ６２２ａは、それぞれ、一次平面導波管６３２ｂまたはＤＯＥ６３２ａと同一材料から成ってもよい。図６に示される光学ディスプレイシステム６００の実施形態は、図２に示されるウェアラブルシステム２００の中に統合されることができる。
【0067】
中継され、射出瞳が拡張された光は、分散導波管装置から１つまたはそれを上回る一次平面導波管６３２ｂの中に光学的に結合され得る。一次平面導波管６３２ｂは、好ましくは、第１の軸に直交する、第２の軸（例えば、図６の図では、水平またはＸ－軸）に沿って、光を中継することができる。着目すべきこととして、第２の軸は、第１の軸に対して非直交軸であることができる。一次平面導波管６３２ｂは、その第２の軸（例えば、Ｘ－軸）に沿って、光の有効射出瞳を拡張させる。例えば、分散平面導波管６２２ｂは、光を垂直またはＹ－軸に沿って中継および拡張させ、光を水平またはＸ－軸に沿って中継および拡張させ得る、一次平面導波管６３２ｂにその光を通過させることができる。
【0068】
光学システムは、単一モード光ファイバ６４０の近位端の中に光学的に結合され得る、１つまたはそれを上回る着色光源（例えば、赤色、緑色、および青色レーザ光）６１０を含んでもよい。光ファイバ６４０の遠位端は、圧電材料の中空管６４２を通して螺合または受容されてもよい。遠位端は、固定されない可撓性カンチレバー６４４として、管６４２から突出する。圧電管６４２は、４つの象限電極（図示せず）と関連付けられることができる。電極は、例えば、管６４２の外側、外面または外周、または直径に鍍着されてもよい。コア電極（図示せず）もまた、管６４２のコア、中心、内周、または内径に位置してもよい。
【0069】
例えば、ワイヤ６６０を介して電気的に結合される、駆動電子機器６５０は、対向する対の電極を駆動し、圧電管６４２を独立して２つの軸において屈曲させる。光ファイバ６４４の突出する遠位先端は、機械的共鳴モードを有する。共鳴の周波数は、光ファイバ６４４の直径、長さ、および材料性質に依存し得る。圧電管６４２をファイバカンチレバー６４４の第１の機械的共鳴モードの近傍で振動させることによって、ファイバカンチレバー６４４は、振動させられ、大偏向を通して掃引し得る。
【0070】
２つの軸において共振振動を刺激することによって、ファイバカンチレバー６４４の先端は、２次元（２－Ｄ）走査を充填するエリア内において２軸方向に走査される。光源６１０の強度をファイバカンチレバー６４４の走査と同期して変調させることによって、ファイバカンチレバー６４４から発せられる光が、画像を形成することができる。そのような設定の説明は、米国特許公開第２０１４／０００３７６２号（参照することによってその全体として本明細書に組み込まれる）に提供されている。
【0071】
光学結合器サブシステムのコンポーネントは、走査ファイバカンチレバー６４４から発せられる光をコリメートすることができる。コリメートされた光は、鏡面表面６４８によって、少なくとも１つの回折光学要素（ＤＯＥ）６２２ａを含有する、狭分散平面導波管６２２ｂの中に反射されることができる。コリメートされた光は、ＴＩＲによって分散平面導波管６２２ｂに沿って（図６の図に対して）垂直に伝搬し、そうすることによって、ＤＯＥ６２２ａと繰り返し交差することができる。ＤＯＥ６２２ａは、好ましくは、低回折効率を有する。これは、光の一部（例えば、１０％）をＤＯＥ６２２ａとの交点の各点においてより大きい一次平面導波管６３２ｂの縁に向かって回折させ、ＴＩＲを介して、光の一部を分散平面導波管６２２ｂの長さを辿ってそのオリジナル軌道上で継続させることができる。
【0072】
ＤＯＥ６２２ａとの交点の各点において、付加的光が、一次導波管６３２ｂの入口に向かって回折されることができる。入射光を複数の外部結合セットに分割することによって、光の射出瞳は、分散平面導波管６２２ｂ内のＤＯＥ６２２ａによって垂直に拡張されることができる。分散平面導波管６２２ｂから外部結合される、本垂直拡張された光は、一次平面導波管６３２ｂの縁に入射することができる。
【0073】
一次導波管６３２ｂに入射する光は、ＴＩＲを介して、一次導波管６３２ｂに沿って（図６の図に対して）水平に伝搬することができる。光は、複数の点においてＤＯＥ６３２ａと交差するにつれて、ＴＩＲを介して、一次導波管６３２ｂの長さの少なくとも一部に沿って水平に伝搬する。ＤＯＥ６３２ａは、有利なこととして、線形回折パターンおよび半径方向対称回折パターンの総和である、位相プロファイルを有し、光の偏向および集束の両方を生成するように設計または構成され得る。ＤＯＥ６３２ａは、有利なこととして、ビームの光の一部のみが、ＤＯＥ６３２ａの各交点で視認者の眼に向かって偏向される一方、光の残りが、ＴＩＲを介して、一次導波管６３２ｂを通して伝搬し続けるように、低回折効率（例えば、１０％）を有し得る。
【0074】
伝搬する光とＤＯＥ６３２ａとの間の交点の各点において、光の一部は、一次導波管６３２ｂの隣接面に向かって回折され、光がＴＩＲから逃散し、一次導波管６３２ｂの面から発せられることを可能にする。ＤＯＥ６３２ａの半径方向対称回折パターンは、加えて、ある焦点レベルを回折された光に付与し、個々のビームの光波面を成形（例えば、曲率を付与する）し、かつビームを設計される焦点レベルにマッチングする角度に操向することの両方を行うことができる。
【0075】
故に、これらの異なる経路は、異なる角度におけるＤＯＥ６３２ａの多重度、焦点レベル、または射出瞳において異なる充填パターンをもたらすことによって、光を一次平面導波管６３２ｂの外部で結合させることができる。射出瞳における異なる充填パターンは、有利なこととして、複数の深度面を伴うライトフィールドディスプレイを生成するために使用されることができる。導波管アセンブリ内の各層またはスタック内の層のセット（例えば、３層）が、個別の色（例えば、赤色、青色、緑色）を生成するために採用されてもよい。したがって、例えば、第１の３つの隣接する層のセットが、それぞれ、赤色、青色、および緑色光を第１の焦点深度において生成するために採用されてもよい。第２の３つの隣接する層のセットが、それぞれ、赤色、青色、および緑色光を第２の焦点深度において生成するために採用されてもよい。複数のセットが、種々の焦点深度を伴うフル３Ｄまたは４Ｄカラー画像ライトフィールドを生成するために採用されてもよい。
Ｄ．ウェアラブルシステムの他のコンポーネント
Ｄ．ウェアラブルシステムの他のコンポーネント
【0076】
多くの実装では、ウェアラブルシステムは、上記に説明されるウェアラブルシステムのコンポーネントに加えて、またはその代替として、他のコンポーネントを含んでもよい。ウェアラブルシステムは、例えば、１つまたはそれを上回る触知デバイスまたはコンポーネントを含んでもよい。触知デバイスまたはコンポーネントは、触覚をユーザに提供するように動作可能であってもよい。例えば、触知デバイスまたはコンポーネントは、仮想コンテンツ（例えば、仮想オブジェクト、仮想ツール、他の仮想構造）に触れると、圧力またはテクスチャの触覚を提供してもよい。触覚は、仮想オブジェクトが表す物理的オブジェクトの感覚を再現してもよい、または仮想コンテンツが表す想像上のオブジェクトまたはキャラクタ（例えば、ドラゴン）の感覚を再現してもよい。いくつかの実装では、触知デバイスまたはコンポーネントは、ユーザによって装着されてもよい（例えば、ユーザウェアラブルグローブ）。いくつかの実装では、触知デバイスまたはコンポーネントは、ユーザによって保持されてもよい。
【0077】
ウェアラブルシステムは、例えば、ユーザによって操作可能であって、ウェアラブルシステムへの入力またはそれとの相互作用を可能にする、１つまたはそれを上回る物理的オブジェクトを含んでもよい。これらの物理的オブジェクトは、本明細書では、トーテムと称され得る。いくつかのトーテムは、無生物オブジェクト、例えば、金属またはプラスチック片、壁、テーブルの表面の形態をとってもよいある実装では、トーテムは、実際には、任意の物理的入力構造（例えば、キー、トリガ、ジョイスティック、トラックボール、ロッカスイッチ）を有していなくてもよい。代わりに、トーテムは、単に、物理的表面を提供してもよく、ウェアラブルシステムは、ユーザにトーテムの１つまたはそれを上回る表面上にあるように見えるように、ユーザインターフェースをレンダリングしてもよい。例えば、ウェアラブルシステムは、トーテムの１つまたはそれを上回る表面上に常駐するように見えるように、コンピュータキーボードおよびトラックパッドの画像をレンダリングしてもよい。例えば、ウェアラブルシステムは、トーテムとしての役割を果たす、アルミニウムの薄い長方形プレートの表面上に見えるように、仮想コンピュータキーボードおよび仮想トラックパッドをレンダリングしてもよい。長方形プレート自体は、いずれの物理的キーまたはトラックパッドまたはセンサも有していない。しかしながら、ウェアラブルシステムは、仮想キーボードまたは仮想トラックパッドを介して行われた選択または入力として、長方形プレートを用いたユーザ操作または相互作用またはタッチを検出し得る。ユーザ入力デバイス４６６（図４に示される）は、トラックパッド、タッチパッド、トリガ、ジョイスティック、トラックボール、ロッカまたは仮想スイッチ、マウス、キーボード、多自由度コントローラ、または別の物理的入力デバイスを含み得る、トーテムの実施形態であってもよい。ユーザは、単独で、または姿勢と組み合わせて、トーテムを使用し、ウェアラブルシステムまたは他のユーザと相互作用してもよい。
【0078】
本開示のウェアラブルデバイス、ＨＭＤ、およびディスプレイシステムと使用可能な触知デバイスおよびトーテムの実施例は、米国特許公開第２０１５／００１６７７７号（参照することによってその全体として本明細書に組み込まれる）に説明される。
Ｅ．ウェブページ分解
Ｅ．ウェブページ分解
【0079】
仮想現実、拡張現実、および／または複合現実システム（以降、集合的に、「複合現実」システムと称される）では、３次元環境は、ユーザへのコンテンツの表示のために提供される。２Ｄコンテンツをブラウザ内に表示するための従来のアプローチは、３Ｄ環境内で使用されるとき、あまり良好に機能しない。これの１つの理由は、従来の２Ｄウェブブラウザでは、ディスプレイデバイスの表示エリアが、コンテンツを表示する、モニタの画面エリアに限定されるためである。結果として、従来のブラウザは、そのモニタ表示エリア内でコンテンツを編成および表示する方法のみを把握するように構成される。対照的に、３Ｄ環境は、モニタ表示エリアの厳密な範囲に限定されない。したがって、従来の２Ｄブラウザは、従来のブラウジング技術が、コンテンツを表示するために３Ｄ環境を利用するための機能性または能力を有していないため、３Ｄ環境内で使用されるとき、準最適に機能を発揮する。
【0080】
例えば、ユーザが、複合現実機器を使用しており、異なる物理的場所と関連付けられる、複数のブラウザウィンドウを設置しているときの状況を検討する。例えば、ユーザは、第１のブラウザウィンドウを第１の部屋内に開いており、第２のブラウザウィンドウを第２の部屋に存在しながら開いている場合がある。従来の２Ｄベースのブラウザは、所与のモニタエリアの表示に限定されるため、これは、従来のブラウザが、物理的に遠隔のウィンドウの概念を理解する技術さえ有しておらず、まして、本状況を複数の物理的場所に複数のウィンドウを開いた状態でハンドリングする能力など有しておらず、ユーザが、事実上、これらの複数のウィンドウを視認、ナビゲート、および使用することを不可能にすることを意味する。
【0081】
したがって、ブラウジング技術を３Ｄ環境内に実装するための改良されたアプローチの必要性が存在する。
【0082】
本開示の実装は、２Ｄウェブページを空間的に編成された３Ｄ環境内に表示されるように分解する。２Ｄウェブページは、頭部搭載型システム、モバイルデバイス（例えば、携帯電話）、タブレット、テレビ、アプリケーション、および同等物のウェブブラウザ上に生じ得る。いくつかの実装では、２Ｄウェブページは、ラップトップコンピュータ、デスクトップコンピュータ、２Ｄウェブページへのリンクを伴う、電子メールアプリケーション、２Ｄウェブページへのリンクを参照する、または含む、電子メッセージ、および同等物等の別のアプリケーションまたはデバイスから受信されてもよい。
【0083】
図７を参照すると、環境７００は、物理的環境と、下記に説明されるプロセス（例えば、ユーザの物理的環境７０５内の３Ｄ表面上に表示されるように、ウェブページからの２Ｄコンテンツを分解する、または認証、すなわち、アプリケーションのための、またはモード式ブラウザウィンドウを提供するための認証を提供する）を実装するためのシステムとを表す。環境１００の代表的物理的環境およびシステムは、ユーザ７０８によって頭部搭載型システム７６０を通して視認されるようなユーザの物理的環境７０５を含む。環境１００の代表的システムはさらに、ネットワーク７２０に動作可能に結合される、ウェブブラウザ７１０を介して、２Ｄコンテンツ（例えば、ウェブページ）にアクセスするステップを含む。ネットワーク７２０は、インターネット、内部ネットワーク、プライベートクラウドネットワーク、パブリッククラウドネットワーク等であってもよい。ウェブブラウザ７１０はまた、ネットワーク７２０を介して、プロセッサ７７０に動作可能に結合される。プロセッサ７７０は、頭部搭載型システム７６０と別個の隔離されたコンポーネントとして示されるが、代替実装では、プロセッサ７７０は、頭部搭載型システム７６０の１つまたはそれを上回るコンポーネントと統合されてもよく、および／または例えば、ネットワーク７２０等の環境１００内の他のシステムコンポーネントの中に統合され、コンピューティングネットワーク７２５および記憶デバイス７３０にアクセスしてもよい。プロセッサ７７０は、頭部搭載型システム７６０から受信されたビデオ、オーディオ、およびコンテンツ等の情報を受信および処理するためのソフトウェア７５０と、ローカル記憶デバイス７４０と、ウェブブラウザ７１０と、コンピューティングネットワーク７２５と、記憶デバイス７３０とともに構成されてもよい。ソフトウェア７５０は、ネットワーク７２０を介して、コンピューティングネットワーク７２５および記憶デバイス７３０と通信してもよい。ソフトウェア７５０は、プロセッサ７７０上にインストールされてもよい、または別の実装では、ソフトウェアの特徴および機能性は、プロセッサ７７０の中に統合されてもよい。プロセッサ７７０はまた、ユーザ７０８の近傍から外部記憶デバイス上に遠隔で記憶される情報に依拠せずに、迅速なアクセスのために、プロセッサ７７０によって使用されるための情報を記憶するためのローカル記憶デバイス７４０とともに構成されてもよい。他の実装では、プロセッサ７７０は、頭部搭載型システム７６０内に統合されてもよい。
【0084】
ユーザの物理的環境７０５は、ユーザが、動き回り、頭部搭載型システム７６０を通して、ユーザの物理的環境７０５を視認するにつれた、ユーザ７０８の物理的周囲である。例えば、図７を参照すると、ユーザの物理的環境７０５は、２つの壁（例えば、主壁７８０および側壁７８４であって、主壁および側壁は、ユーザのビューに対するものである）と、テーブル７８８とを伴う、部屋を示す。主壁７８０上には、ある２Ｄコンテンツをその上に投影するための候補表面であり得る、黒色実線によって描写され、物理的境界線を伴う、物理的表面（例えば、壁または窓に吊架される、またはそこに取り付けられる、絵画等）を示す、矩形表面７８２が存在する。側壁７８４上には、黒色実線によって描写され、物理的境界線を伴う、物理的表面（例えば、壁または窓に吊架される、またはそこに取り付けられる、絵画等）を示す、第２の矩形表面７８６が存在する。テーブル７８８上には、異なるオブジェクト、すなわち、１）ある２Ｄコンテンツが、記憶および表示され得る、仮想Ｒｏｌｏｄｅｘ７９０と、２）黒色実線によって描写され、ある２Ｄコンテンツをその上に投影するための、物理的境界線を伴う、物理的表面を表す、水平表面７９２と、３）黒色点線によって描写され、例えば、ある２Ｄコンテンツが、記憶および表示され得る、スタックされた仮想新聞を表す、仮想正方形表面７９４の複数のスタックとが存在し得る。
【0085】
ウェブブラウザ７１０はまた、インターネットからの、またはイントラネットまたはプライベートネットワーク内のブログページを表示してもよい。加えて、ウェブブラウザ７１０はまた、デジタル２Ｄコンテンツを表示する、任意の技術であってもよい。２Ｄコンテンツは、例えば、ウェブページ、ブログ、デジタル写真、ビデオ、ニュース記事、ニュース文字、または音楽を含んでもよい。２Ｄコンテンツは、ユーザ７０８によって、ネットワーク７２０を介してアクセス可能である、記憶デバイス７３０内に記憶されてもよい。いくつかの実装では、２Ｄコンテンツはまた、ストリーミングコンテンツ、例えば、ライブビデオフィードまたはライブオーディオフィードであってもよい。記憶デバイス７３０は、例えば、データベース、ファイルシステム、持続的メモリデバイス、フラッシュドライブ、キャッシュ等を含んでもよい。いくつかの実装では、２Ｄコンテンツ（例えば、ウェブページ）を含有する、ウェブブラウザ７１０は、コンピューティングネットワーク７２５を介して表示される。
【0086】
コンピューティングネットワーク７２５は、ウェブブラウザ７１０上のウェブページ内に表示するために、記憶デバイス７３０にアクセスし、２Ｄコンテンツを読み出し、記憶する。いくつかの実装では、ローカル記憶デバイス７４０は、着目２Ｄコンテンツをユーザ７０８に提供してもよい。ローカル記憶デバイス７４０は、例えば、フラッシュドライブ、キャッシュ、ハードドライブ、データベース、ファイルシステム等を含んでもよい。ローカル記憶デバイス７４０内に記憶される情報は、３Ｄ空間内で最近アクセスされた２Ｄコンテンツまたは最近表示されたコンテンツを含んでもよい。ローカル記憶デバイス７４０は、２Ｄコンテンツを分解し、２Ｄコンテンツを３Ｄ空間環境（例えば、ユーザの物理的環境７０５内の３Ｄ表面）上に表示することに役立つために、あるコンテンツをローカルでソフトウェア７５０に提供することによって、環境１００のシステムに対する性能の改良を可能にする。
【0087】
ソフトウェア７５０は、非一過性コンピュータ可読媒体内に記憶され、ユーザの物理的環境７０５内に表示されるように２Ｄコンテンツを分解する機能を実施する、ソフトウェアプログラムを含む。ソフトウェア７５０は、プロセッサ７７０上で起動されてもよく、プロセッサ７７０は、ユーザ７０８にローカルで取り付けられてもよい、またはいくつかの他の実装では、ソフトウェア７５０およびプロセッサ７７０は、頭部搭載型システム７６０内に含まれてもよい。いくつかの実装では、ソフトウェア７５０の特徴および機能の一部は、ユーザ７０８から遠隔のコンピューティングネットワーク７２５上で記憶および実行されてもよい。例えば、いくつかの実装では、２Ｄコンテンツを分解するステップは、コンピューティングネットワーク７２５上で生じてもよく、分解の結果は、記憶デバイス７３０内に記憶されてもよく、分解された２Ｄコンテンツをその上に提示するためのユーザのローカル環境の表面のインベントリ化は、プロセッサ７７０内で生じてもよく、表面のインベントリおよびマッピングが、ローカル記憶デバイス７４０内に記憶される。１つの実装では、２Ｄコンテンツを分解し、ローカル表面をインベントリ化し、２Ｄコンテンツの要素とローカル表面をマッピングし、２Ｄコンテンツの要素を表示するプロセスは全て、プロセッサ７７０およびソフトウェア７５０内でローカルで生じてもよい。
【0088】
頭部搭載型システム７６０は、ユーザインターフェースと、ユーザ感知システムと、環境感知システムと、プロセッサとを含む（全て図示せず）、仮想現実（ＶＲ）または拡張現実（ＡＲ）頭部搭載型システムであってもよい。頭部搭載型システム７６０は、ユーザ７０８に、デジタル世界と相互作用し、それを体験するためのインターフェースを提示する。そのような相互作用は、ユーザおよびデジタル世界と、環境１００とインターフェースをとる１人またはそれを上回る他のユーザと、デジタルおよび物理的世界内のオブジェクトとを伴ってもよい。
【0089】
ユーザインターフェースは、２Ｄコンテンツを受信するステップと、ユーザインターフェースを通したユーザ入力によって、２Ｄコンテンツ内の要素を選択するステップとを含んでもよい。ユーザインターフェースは、触知インターフェースデバイス、キーボード、マウス、ジョイスティック、運動捕捉コントローラ、光学追跡デバイス、およびオーディオ入力デバイスのうちの少なくとも１つ、またはそれらの組み合わせであってもよい。触知インターフェースデバイスは、ヒトが、身体感覚および移動を通して、コンピュータと相互作用することを可能にする、デバイスである。触知は、触覚フィードバックまたはコンピューティングデバイス上でアクションまたはプロセスを実施するための他の身体感覚を包含する、ヒトとコンピュータの相互作用技術のタイプを指す。いくつかの実装では、制御インターフェースは、例えば、ユーザ入力をシステムに提供し、システムが対応するコマンドを実行することによって応答することによって、ユーザが、ＭＲディスプレイシステムと相互作用し得るように、ユーザインターフェースであってもよい。
【0090】
ユーザ感知システムは、頭部搭載型システム７６０を装着しているユーザ７０８に関連する、ある特徴、特性、または情報を検出するように動作可能である、１つまたはそれを上回るセンサ７６２を含んでもよい。例えば、いくつかの実装では、センサ７６２は、例えば、以下、すなわち、縮瞳／散瞳、各瞳孔の角度測定／測位、球形度、眼形状（眼形状は、経時的に変化するため）、および他の解剖学的データのうちの１つまたはそれを上回るもの等のユーザ７０８のリアルタイム光学特性／測定を検出することが可能なカメラまたは光学検出／走査回路網を含んでもよい。本データは、ユーザの視認体験を向上させるために頭部搭載型システム７６０によって使用され得る、情報（例えば、ユーザの視覚的焦点）を提供する、またはそれを計算するために使用されてもよい。
【0091】
環境感知システムは、ユーザの物理的環境７０５からのデータを取得するための１つまたはそれを上回るセンサ７６４を含んでもよい。センサ７６４によって検出されたオブジェクトまたは情報は、頭部搭載型システム７６０への入力として提供されてもよい。いくつかの実装では、本入力は、仮想世界とのユーザ相互作用を表し得る。例えば、机（例えば、テーブル７８８）上の仮想キーボードを視認する、ユーザ（例えば、ユーザ７０８）は、その指を用いて、ユーザが仮想キーボードをタイプしているかのようにジェスチャを行ってもよい。指移動の運動は、センサ７６４によって捕捉され、頭部搭載型システム７６０に入力として提供されてもよく、入力は、仮想世界を変化させる、または新しい仮想オブジェクトを作成するために使用されてもよい。
【0092】
センサ７６４は、例えば、持続的および／または断続的に投影された赤外線構造化光を通して、例えば、概して、場面情報を解釈するための外向きに向いたカメラまたはスキャナを含んでもよい。環境感知システムは、静的オブジェクト、動的オブジェクト、人々、ジェスチャ、および種々の照明、大気、および音響条件を含む、ローカル環境を検出および検知することによって、ユーザ７０８の周囲のユーザの物理的環境７０５の１つまたはそれを上回る要素をマッピングするために使用されてもよい。したがって、いくつかの実装では、環境感知システムは、ローカルコンピューティングシステム（例えば、プロセッサ７７０）に内蔵され、１つまたはそれを上回るオブジェクトまたはセンサ７６４によって検出された情報をデジタル的に再構築するように動作可能である、画像ベースの３Ｄ再構築ソフトウェアを含んでもよい。
【0093】
一例示的実装では、環境感知システムは、以下、すなわち、運動捕捉データ（ジェスチャ認識を含む）、深度感知、顔認識、オブジェクト認識、一意のオブジェクト特徴認識、音声／オーディオ認識および処理、音響ソース位置特定、雑音低減、赤外線または類似レーザ投影、およびモノクロおよび／またはカラーＣＭＯＳセンサ（または他の類似センサ）、視野センサ、および種々の他の光学向上センサのうちの１つまたはそれを上回るものを提供する。環境感知システムは、上記に議論されるもの以外の他のコンポーネントを含んでもよいことを理解されたい。
【0094】
上記に述べられたように、プロセッサ７７０は、いくつかの実装では、頭部搭載型システム７６０の他のコンポーネントと統合される、環境１００のシステムの他のコンポーネントと統合されてもよい、または図７に示されるように、隔離されたデバイス（装着可能またはユーザ７０８と別個）であってもよい。プロセッサ７７０は、物理的有線接続を通して、または、例えば、モバイルネットワーク接続（セルラー電話およびデータネットワークを含む）、Ｗｉ－Ｆｉ、Ｂｌｕｅｔｏｏｔｈ（登録商標）、または任意の他の無線接続プロトコル等の無線接続を通して、頭部搭載型システム７６０の種々のコンポーネントに接続されてもよい。プロセッサ７７０は、メモリモジュール、統合および／または付加的グラフィック処理ユニット、無線および／または有線インターネットコネクティビティ、およびソース（例えば、コンピューティングネットワーク７２５および頭部搭載型システム７６０からのユーザ感知システムおよび環境感知システム）からのデータを画像およびオーディオデータに変換すことが可能なコーデックおよび／またはファームウェアを含んでもよく、画像／ビデオおよびオーディオは、ユーザインターフェース（図示せず）を介して、ユーザ７０８に提示されてもよい。
【0095】
プロセッサ７７０は、頭部搭載型システム７６０の種々のコンポーネントのためのデータ処理および頭部搭載型システム７６０とウェブブラウザ７１０およびコンピューティングネットワーク７２５によって表示またはアクセスされるウェブページからの２Ｄコンテンツとの間のデータ交換をハンドリングする。例えば、プロセッサ７７０は、ユーザ７０８とコンピューティングネットワーク７２５との間でデータストリーミングをバッファおよび処理し、それによって、平滑、持続的、かつ高忠実性ユーザ体験を有効にするために使用されてもよい。
【0096】
ウェブページからの２Ｄコンテンツを要素に分解し、要素を３Ｄ環境内の表面上に表示されるようにマッピングするステップは、知的および論理様式において遂行され得る。所定のルールのセットが、２Ｄコンテンツ／ウェブページ内で識別されたあるタイプの要素／コンテンツを設置すべき場所を推奨、提案、または規定するために利用可能であり得る。例えば、あるタイプの２Ｄコンテンツ要素は、１つまたはそれを上回る要素を記憶および表示するために扱いやすい、物理的または仮想オブジェクト表面にマッピングされる必要があり得る、１つまたはそれを上回るコンテンツ要素を有し得る一方、他のタイプの２Ｄコンテンツ要素は、ウェブページ内の主要なビデオまたは主要な記事等の単一オブジェクトであってもよく、その場合、単一オブジェクトは、単一オブジェクトをユーザに表示するために最も合理的である、表面にマッピングされてもよい。
【0097】
図８は、いくつかの実装による、ユーザの３Ｄ環境への２Ｄコンテンツの要素の例示的マッピングを図示する。環境８００は、ウェブブラウザ７１０によって表示またはアクセスされる、２Ｄコンテンツ（例えば、ウェブページ）と、ユーザの物理的環境７０５とを描写する。矢印頭部を伴う、点線は、ユーザの物理的環境７０５上にマッピングおよび表示される、２Ｄコンテンツ（例えば、ウェブページ）からの要素（例えば、特定のタイプのコンテンツ）を描写する。２Ｄコンテンツからのある要素は、ウェブ設計者ヒントまたは事前に定義されたブラウザルールのいずれかに基づいて、ユーザの物理的環境７０５内のある物理的または仮想オブジェクトにマッピングされる。
【0098】
実施例として、ウェブブラウザ７１０によってアクセスまたは表示される、２Ｄコンテンツは、複数のタブを有する、ウェブページであってもよく、現在のアクティブタブ８６０は、表示され、二次タブ８５０は、ウェブブラウザ７１０上に表示するために選択されるまで、現時点では、隠蔽されている。アクティブタブ８６０内に表示されるものは、典型的には、ウェブページである。本特定の実施例では、アクティブタブ８６０は、主要なビデオ８２０と、ユーザ注解２３０と、提案されるビデオ８４０とを含む、ＹＯＵＴＵＢＥ（登録商標）ページを表示する。本例示の図８に描写されるように、主要なビデオ８２０は、垂直表面７８２上に表示するためにマッピングされてもよく、ユーザ注解２３０は、水平表面７９２上に表示するためにマッピングされてもよく、提案されるビデオ８４０は、垂直表面７８２と異なる垂直表面７８６上に表示するためにマッピングされてもよい。加えて、二次タブ８５０は、仮想Ｒｏｌｏｄｅｘ７９０上および／またはマルチスタック仮想オブジェクト７９４上に表示するためにマッピングされてもよい。いくつかの実装では、二次タブ８５０内の具体的コンテンツは、マルチスタック仮想オブジェクト７９４内に記憶されてもよい。他の実装では、二次タブ８５０内に常駐するコンテンツ全体は、マルチスタック仮想オブジェクト７９４上に記憶および／または表示されてもよい。同様に、仮想Ｒｏｌｏｄｅｘ７９０は、二次タブ８５０からの具体的コンテンツを含有してもよい、または仮想Ｒｏｌｏｄｅｘ７９０は、二次タブ８５０内に常駐するコンテンツ全体を含有してもよい。
【0099】
垂直表面７８２は、窓ガラスまたは写真フレーム等、部屋（ユーザの物理的環境７０５として描写される）の主壁７８０上に既に存在し得る、任意のタイプの構造であってもよい。いくつかの実装では、垂直表面７８２は、空壁であってもよく、頭部搭載型システム７６０は、ユーザ７０８が主要なビデオ８２０を視認するために適切である、垂直表面７８２のフレームの最適サイズを決定する。垂直表面７８２のサイズの本決定は、少なくとも部分的に、ユーザ７０８の主壁７８０からの距離、主要なビデオ８２０のサイズおよび寸法、主要なビデオ８２０の品質、非被覆壁空間の量、および／または主壁７８０を見ているときのユーザの姿勢に基づいてもよい。例えば、主要なビデオ８２０の品質が、高精細である場合、垂直表面７８２のサイズは、主要なビデオ８２０の品質が垂直表面７８２によって悪影響を受けないであろうため、より大きくてもよい。しかしながら、主要なビデオ８２０のビデオ品質が、不良品質である場合、大垂直表面７８２を有することは、ビデオ品質を著しく妨害し得、その場合、本開示の方法およびシステムは、ピクシレーションからの不良ビデオ品質を最小限にするようにより小さく垂直表面７８２をサイズ変更／再定義してもよい。
【0100】
垂直表面７８６は、垂直表面７８２のように、ユーザの物理的環境７０５内の隣接する壁（例えば、側壁７８４）上の垂直表面である。いくつかの実装では、ユーザ７０８の配向に基づいて、側壁７８４および垂直表面７８６は、勾配で傾けられた表面であるように現れてもよい。勾配で傾けられた表面は、垂直および水平表面に加えた、表面の配向のタイプであり得る。ＹＯＵＴＵＢＥ（登録商標）ウェブページからの提案されるビデオ８４０は、側壁７８４上の垂直表面７８６上に設置され、本実施例では、単に、その頭部を若干右に移動させることによって、ユーザ７０８が、提案されるビデオを視認することが可能であることを可能にしてもよい。
【0101】
仮想Ｒｏｌｏｄｅｘ７９０は、頭部搭載型システム７６０によって作成され、ユーザ７０８に表示される、仮想オブジェクトである。仮想Ｒｏｌｏｄｅｘ７９０は、ユーザ７０８が、仮想ページのセットを通して、双方向に巡回させる能力を有してもよい。仮想Ｒｏｌｏｄｅｘ７９０は、ウェブページ全体を含有してもよい、または個々の記事またはビデオまたはオーディオを含有してもよい。本実施例に示されるように、仮想Ｒｏｌｏｄｅｘ７９０は、二次タブ８５０からのコンテンツの一部を含有してもよい、またはいくつかの実装では、仮想Ｒｏｌｏｄｅｘ７９０は、二次タブ８５０のページ全体を含有してもよい。ユーザ７０８は、単に、仮想Ｒｏｌｏｄｅｘ７９０内の特定のタブに合焦することによって、仮想Ｒｏｌｏｄｅｘ７９０内のコンテンツを通して、双方向に巡回させてもよく、頭部搭載型システム７６０内の１つまたはそれを上回るセンサ（例えば、センサ７６２）が、ユーザ７０８の眼焦点を検出し、仮想Ｒｏｌｏｄｅｘ７９０内のタブを通して巡回させ、故に、ユーザ７０８のための関連情報を取得する。いくつかの実装では、ユーザ７０８は、仮想Ｒｏｌｏｄｅｘ７９０からの関連情報を選定し、頭部搭載型システム７６０に、利用可能な周囲表面上またはユーザ７０８に近接近する仮想ディスプレイ（図示せず）等のさらに別の仮想オブジェクト上のいずれかに、関連情報を表示するように命令してもよい。
【0102】
マルチスタック仮想オブジェクト７９４は、仮想Ｒｏｌｏｄｅｘ７９０と同様に、１つまたはそれを上回るタブからの完全コンテンツ、またはユーザ７０８がブックマークしている、将来的閲覧のために保存している、または開いている（例えば、非アクティブタブ）、種々のウェブページまたはタブからの特定のコンテンツに及ぶ、コンテンツを含有してもよい。マルチスタック仮想オブジェクト７９４はまた、実世界の新聞のスタックに類似する。マルチスタック仮想オブジェクト７９４内の各スタックは、特定の新聞記事、ページ、雑誌記事、レシピ等に関連してもよい。当業者は、２Ｄコンテンツ要素または２Ｄコンテンツソースからのコンテンツを設置するための表面を提供する、本同一の目的を遂行するために、複数のタイプの仮想オブジェクトが存在することを理解し得る。
【0103】
当業者は、ウェブブラウザ７１０によってアクセスまたは表示される、２Ｄコンテンツが、単なるウェブページ以上のものであり得ることを理解し得る。いくつかの実装では、２Ｄコンテンツは、写真アルバムからの写真、映画からのビデオ、ＹＯＵＴＵＢＥ（登録商標）ビデオからのＴＶ番組、双方向形態等であってもよい。さらに他の実装では、２Ｄコンテンツは、電子書籍または書籍を表示する任意の電子手段であってもよい。最後に、他の実装では、２Ｄコンテンツは、２Ｄコンテンツが、概して、情報が現在提示される方法であるため、まだ説明されていない、他のタイプのコンテンツであってもよい。電子デバイスが、２Ｄコンテンツを取り込み得る場合、２Ｄコンテンツは、頭部搭載型システム７６０によって、２Ｄコンテンツを分解し、３Ｄ設定（例えば、ＡＲ）内に表示するために使用されることができる。
【0104】
いくつかの実装では、アクセスされる２Ｄコンテンツをマッピングするステップは、２Ｄコンテンツを抽出する（例えば、ブラウザから）ステップと、それを表面上に載上するステップと（コンテンツが、もはやブラウザ内になく、表面上にのみあるように）を含んでもよく、いくつかの実装では、マッピングは、コンテンツを複製する（例えば、ブラウザから）ステップと、それを表面上に載上するステップと（コンテンツが、ブラウザ上および表面上の両方にあるように）を含むことができる。
Ｆ．境界されたボリューム内のウェブコンテンツ
Ｆ．境界されたボリューム内のウェブコンテンツ
【0105】
いくつかの実装では、抽出されたウェブコンテンツは、ユーザの３Ｄ空間環境内の境界されたボリュームの中に設置されることができる。有利なこととして、コンテンツの設置を境界されたボリューム内に制限することは、ユーザが、その環境内のコンテンツの設置のより良好な制御を有することを可能にすることができる。いくつかの実施例では、コンテンツは、ウェブブラウザアプリケーションの一部であり得る、ブラウザタイルの周囲のボリュームを参照して設置されることができる。図９Ａは、３Ｄ空間のボリューム９０４内の例示的ブラウザタイル９０２を図示する。
【0106】
ブラウザタイル９０２は、ウェブページ、ウェブドメインと関連付けられるコンテンツ、または非ウェブベースのテキストまたはグラフィカル情報のいくつかまたは全て等の２Ｄコンテンツを表示することができる。例えば、ブラウザタイル９０２は、グラフィックまたはテキスト等のコンテンツにアクセスするためのグラフィカルインターフェースを含むことができる。ブラウザタイル９０２は、複数のウィンドウまたはタブ機能性、ユーザが以前に相互作用したコンテンツをナビゲートするための戻るおよび進む双方向特徴、現在視認されているコンテンツをリフレッシュするためのリフレッシュ双方向特徴、コンテンツのロードをキャンセルするためのキャンセル双方向特徴、プリセットコンテンツに戻るためのホーム双方向特徴、コンテンツのローカルまたはウェブ場所を入力するためのナビゲーション特徴、またはローカルまたはウェブベースのコンテンツを検索するための検索特徴等のウェブブラウザの１つまたはそれを上回る側面を含むことができる。いくつかの実施例では、ブラウザタイル９０２は、上記に説明されるもの等のウェブブラウザの１つまたはそれを上回る側面と併せて表示される、２Ｄコンテンツを含むことができる。
【0107】
ＡＲシステムは、ユーザが、ブラウザタイル９０２および／またはブラウザタイル９０２内に表示されるコンテンツと相互作用することを可能にし得る。例えば、ＡＲシステムは、ユーザ姿勢、ジェスチャ、またはユーザ入力デバイスの作動を通して、ブラウザタイル９０２を移動または操作させることのインジケーションを受信してもよい。ＡＲシステムは、対応して、ブラウザタイル９０２を移動または操作させることによって、応答してもよい。いくつかの実施例では、ブラウザタイル９０２を移動または操作させるための関連ユーザ姿勢は、手の運動、身体の位置付け、同等物、またはそれらのある組み合わせを含むことができる。別の実施例では、ＡＲシステムは、ユーザ姿勢またはユーザ入力デバイスの作動を通して、ブラウザタイル９０２内に表示されるコンテンツまたはブラウザタイル９０２と関連付けられる他のコンテンツを操作させることのインジケーションを受信してもよい。ＡＲシステムは、例えば、コンテンツを通したスクロール、新しいコンテンツを探すためのクリックスルー、コンテンツの選択、コンテンツの削除、コンテンツの抽出、コンテンツの入力、同等物、またはそれらのある組み合わせによって、対応して、ブラウザタイルと関連付けられるコンテンツを操作させることによって、応答してもよい。操作は、ブラウザタイル９０２内に含まれ得る、１つまたはそれを上回るブラウザ特徴と相互作用することを含むことができる。例えば、操作は、情報をアドレスまたは検索特徴の中に入力すること、コンテンツをロードする、またはロードを中止すること、または他の双方向特徴と相互作用する結果としての他の操作によって、コンテンツを探すことを含むことができる。
【0108】
ＡＲシステムは、ブラウザタイル９０２を３Ｄ空間のボリューム９０４内に表示してもよい。ボリューム９０４は、ユーザの３Ｄ環境のサブセットを含んでもよい。下記に説明されるように、ボリューム９０４は、静的または操作可能であってもよい。例えば、ボリューム９０４は、ユーザインジケーションを介して、および／またはＡＲシステムによって自動的に、拡張、低減、または別様に変換されてもよい。
【0109】
ＡＲシステムは、ブラウザタイル９０２内に表示される２Ｄコンテンツと関連付けられる、３Ｄコンテンツ９０６を表示してもよい。図９Ｂは、ボリューム９０４内に３Ｄコンテンツ９０６を伴う、例示的ブラウザタイル９０２を図示する。３Ｄコンテンツ９０６は、１つまたはそれを上回る仮想オブジェクトを含むことができる。
【0110】
いくつかの実施形態では、３Ｄコンテンツは、１つまたはそれを上回るプリズムを含んでもよく、これは、概して、複合現実コンテンツと関連付けられる、コンテナ、エリア、またはボリュームを説明し、これは、３Ｄオブジェクトの表現等の複数の仮想コンテンツアイテムを含有してもよい。プリズム内に境界されたコンテンツは、その中にコンテンツが境界される、プリズムを制御または設置することによって、ユーザの環境内で制御または設置されてもよい。仮想オブジェクトは、本明細書で使用されるように、プリズムである、またはそれを含んでもよい。プリズムの種々の特性、使用、および実装は、２０１９年６月２７日に公開された、米国特許公開第２０１９／０１９７７８５号（参照することによってその全体として本明細書に組み込まれる）に説明される。
【0111】
仮想オブジェクトは、ブラウザタイル９０２内に表示される、２Ｄコンテンツと関連付けられることができる。例えば、２Ｄコンテンツは、家具企業に関するウェブサイトであることができ、仮想オブジェクトは、ウェブサイト上に説明される、家具の３Ｄ仮想表現であることができる。いくつかの実施例では、仮想オブジェクトは、ブラウザタイル９０２上に表示されるグラフィックの場所と関連付けられる、３Ｄボリューム９０４内の場所等、ブラウザタイル９０２の近傍に表示されることができる。例えば、２Ｄコンテンツは、長椅子の２Ｄ表現を含むことができる。３Ｄコンテンツは、長椅子の３Ｄ表現を含むことができる。いくつかの実施例では、ＡＲシステムは、ブラウザタイル９０２から外に延在する、長椅子（または他の３Ｄコンテンツ）の表現等、長椅子の２Ｄ表現の正面に、またはその代わりに、長椅子の３Ｄ表現を表示してもよい。
【0112】
仮想オブジェクトの設置およびサイズは、ユーザによって変動または修正されてもよい。例えば、ＡＲシステムは、ブラウザタイル９０２に対するボリューム９０４内のデフォルト場所に基づいて、仮想オブジェクトを設置してもよい。いくつかの実施例では、ＡＲシステムは、回転、スケーリング、移動、より複雑なアニメーション、同等物、またはそれらのある組み合わせ等の変換を１つまたはそれを上回る仮想オブジェクトに適用してもよい。
【0113】
図１０Ａおよび１０Ｂに図示されるように、仮想オブジェクトのディスプレイは、３Ｄボリューム１００２の境界に制限され得る。例えば、ＡＲシステムは、ユーザまたは実行可能命令等によって、仮想オブジェクト９０６の一部をボリューム１００２の境界の外側に表示するための命令を受信し得る。ＡＲシステムは、仮想オブジェクト９０６を表示しない、または仮想オブジェクト９０６の一部を表示しないことを決定し得る。加えて、または代替として、下記に議論されるように、ＡＲシステムは、例えば、仮想オブジェクト９０６の位置、ボリューム、配向、および／または場所を調節することによって、仮想オブジェクト９０６を包含するように、３Ｄボリューム１００２をサイズ変更または再配向することができる。
【0114】
一実施例では、図１０Ａに図示されるように、仮想オブジェクト９０６Ａは、仮想オブジェクト９０６の部分１００４が、３Ｄボリューム１００２の境界の外側に該当するように設置、定寸、または配向され得る。部分１００４が、３Ｄボリューム１００２または仮想オブジェクト９０６Ａの閾値ボリュームまたは閾値パーセンテージ、または仮想オブジェクト９０６Ａまたは３Ｄボリューム１００２と関連付けられる他の閾値を超える場合、ＡＲシステムは、仮想オブジェクト９０６Ａの全体を表示しないことを決定してもよい。部分１００４が、閾値を下回る場合、ＡＲシステムは、全体または部分的に、仮想オブジェクト９０６Ａを表示することを決定してもよい。例えば、ＡＲシステムは、３Ｄボリューム１００２内に該当する、仮想オブジェクト９０６の部分１００６を表示してもよい。別の実施例では、ＡＲシステムは、３Ｄボリューム１００２の外側に該当する場合でも、仮想オブジェクト９０６Ａ全体を表示してもよい。
【0115】
別の実施例では、図１０Ｂに図示されるように、仮想オブジェクト９０６Ｂは、仮想オブジェクト９０６Ｂの中心１００８が、３Ｄボリューム１００２の外側に該当するように設置、定寸、および／または配向され得る。仮想オブジェクト９０６の中心１００８が、３Ｄボリューム１００２の外側に該当する場合、ＡＲシステムは、仮想オブジェクト９０６Ｂの全体を表示しないことを決定してもよい。別の実施例では、ＡＲシステムは、３Ｄボリューム１００２内に該当する、仮想オブジェクト９０６Ｂの一部を表示することを決定してもよい。
Ｇ．例示的な境界されたボリューム
Ｇ．例示的な境界されたボリューム
【0116】
いくつかの実施例では、ＡＲシステムは、ユーザの環境内の空間（ステージとも称される）の３Ｄボリュームを定義してもよい。図１１に図示されるように、３Ｄボリューム１１０２は、その中にコンテンツ１１０４が、作成、表示、または操作され得る、空間のエリアを含むことができる。
【0117】
いくつかの実施例では、ボリューム１１０２は、デフォルトサイズまたは形状を有してもよい。デフォルトサイズは、所定のサイズに設定されてもよい、コンテンツ１１０４のサイズに対して設定されてもよい、ユーザの環境または視野に対して設定されてもよい、または別の要因に基づいて設定されてもよい。
【0118】
例えば、デフォルトサイズは、０．７５メートル、０．８メートル、０．８６メートル、１メートル、または他のサイズの辺を有する、直方体であってもよい。別の実施例では、デフォルトサイズは、１，０００ピクセル、１，１００ピクセル、１，１２０ピクセル、１，２００ピクセル、または他のサイズの辺を有する、直方体であってもよい。有利なこととして、所定の寸法のセットに基づいてデフォルトサイズを設定することは、ボリューム１１０２をサイズ変更する必要なく、より大きいコンテンツを可能にすることができる。
【0119】
別の実施例では、デフォルトサイズは、少なくとも１次元においてコンテンツ１１０４より大きい、パーセンテージであってもよい。例えば、ボリューム１１０２は、コンテンツ１１０４より２０％広く、２０％高くてもよく、ボリューム９０４の深度（または範疇）は、ボリューム１１０２の幅と同等であってもよい。別の実施例では、ボリューム１１０２は、コンテンツ１１０４より１０％広く、同一高さであってもよい。別の実施例では、ボリューム１１０２は、コンテンツ１１０４より５０％広く、１００％高くてもよい。しかしながら、他の実施例もまた、可能性として考えられる。有利なこととして、コンテンツ１１０４のサイズに基づいて、デフォルトサイズを設定することは、コンテンツ１１０４に関連する新しいコンテンツのより小さくかつより集束された設置を可能にすることができる。例えば、コンテンツ１１０４は、ウェブドメインへのアクセスを可能にする、ブラウザタイルであることができる。ウェブドメインは、新しいコンテンツの設置を要求してもよい。ウェブドメインのサイズに対するデフォルトサイズを定義することは、ブラウザタイルの近くのウェブドメインに関連する小コンテンツの設置を可能にすることができる。
【0120】
いくつかの実施例では、デフォルトサイズは、ボリューム１１０２がユーザの視野（ＦＯＶ）のパーセンテージを充填するように、ユーザの視野に対するものであってもよい。例えば、ボリューム１１０２は、ＦＯＶの１０％、２５％、５０％、１００％、１５０％、または他のパーセンテージ量であってもよい。
【0121】
ボリューム１１０２の形状は、立方体、直方体、球体、回転楕円体、角錐、円柱、それらのある組み合わせ、同等物、または他の形状等の任意の３Ｄ形状であることができる。いくつかの実施例では、ボリューム１１０２の形状は、コンテンツ１１０４と相補的形状であってもよい。例えば、コンテンツ１１０４は、直方体形状を有する、ブラウザタイルであってもよい。ボリューム１１０２は、次いで、直方体形状を有してもよい。別の実施例では、コンテンツ１１０４は、長椅子または人物等のより複雑な幾何学的形状であってもよい。ボリューム１１０２は、コンテンツ１１０４の幾何学的形状を概略する、形状であってもよい。加えて、または代替として、ボリューム１１０２は、コンテンツ１１０４を包含するための寸法を伴う、球状または直方体形状であってもよい。
【0122】
いくつかの実施例では、ボリューム１１０２は、コンテンツ１１０４の１つまたはそれを上回る性質に基づいて、デフォルト寸法を有してもよい。例えば、コンテンツ１１０４は、ブラウザタイルであってもよい。ボリューム１１０２は、ブラウザタイルがユーザ入力を伴わずに移動しないように設計されるため、ブラウザタイルに比較的に近い、寸法を有してもよい。別の実施例では、コンテンツ１１０４は、ユーザの環境の周囲を飛行するように構成される、仮想オブジェクト（例えば、蝶）であってもよい。ボリューム１１０２は、コンテンツ１１０４が動き回ることを可能にするために、ユーザのＦＯＶの大パーセンテージを包含する、寸法を有してもよい。
【0123】
いくつかの実施例では、ボリュームは、静的ボリュームであってもよい。他の実施例では、ボリュームは、操作可能または変化可能であってもよい。図１２Ａ１および１２Ａ２に図示されるように、ボリューム１２０３は、１つまたはそれを上回るコンテンツ１２０４、１２０６の断片を包含するように拡張してもよい。図１２Ａ１は、ボリューム１２０２の斜視図１２００を図示し、図１２Ａ２は、上下図１２０１を図示し、これは、変化可能であってもよい。例えば、ボリューム１２０３の初期サイズは、ブラウザタイルに対するデフォルトサイズであってもよい。ユーザは、ブラウザタイル１２０４を使用して、ウェブドメインと相互作用してもよい。ウェブドメインは、ＡＲシステムが、関連コンテンツ１２０６をユーザの環境内に表示するように要求する、または別様に、ＡＲシステムに表示させてもよい。結果として、ＡＲシステムは、ボリューム１２０３を１つまたはそれを上回る方向において拡張させ、図１２Ａ２に示されるように、関連コンテンツ１２０６を包含し、コンテンツ１２０６を表示する、ボリューム１２０２Ｂに到達してもよい（例えば、そのようになり得る）。
【0124】
ボリュームは、定義された範囲を使用して、拡張またはサイズ変更されてもよい。図１２Ｂ１および１２Ｂ２は、範囲を使用した例示的拡張を図示する。範囲は、ブラウザタイル等のコンテンツの断片からの距離の定義された量を含むことができる。いくつかの実施例では、コンテンツの断片が、サイズ変更される場合、コンテンツの断片の周囲の１つまたはそれを上回る範囲は、同一のままであることができる一方、コンテンツの周囲のボリュームは、サイズ変更される。例えば、ＡＲシステムは、いくつかのピクセルを１つまたはそれを上回る寸法内に定義し、ユーザの環境内でボリュームをコンテンツ１２２４の周囲に追加してもよい（図１２Ｂ１における１２２４Ａおよび図１２Ｂ２における１２２４Ｂとして示される）。いくつかの実施例では、範囲は、左に１００ピクセル、右に１００ピクセル、下に１５０ピクセル、左に２５０ピクセル、および／または正面に２００ピクセルを含むことができる。しかしながら、寸法または範囲の他の組み合わせも、可能性として考えられる。範囲は、要求する当事者、ユーザ、またはＡＲシステムによって定義され得る。
【0125】
別の実施例では、ＡＲシステムは、ボリュームの１つまたはそれを上回る寸法のパーセンテージ変化を定義してもよい。例えば、ＡＲシステムは、幅を左に２０％、下に１０％、および上に５０％、または寸法またはパーセンテージの他の組み合わせだけ増加させてもよい。図１２Ｂ１および１２Ｂ２に図示される実施例では、ＡＲシステムは、定義された範囲１２２２のセットを利用して、ボリューム１２０５Ａをボリューム１２０５Ｂに拡張させる。例えば、定義された範囲１２２２は、１００ピクセル等のいくつかのピクセルであってもよい。ＡＲシステムは、最初に、コンテンツ１２２４Ａのボリュームに対応するボリューム１２０５Ａ＋コンテンツ１２２４Ａのボリュームの１つまたはそれを上回る側上の範囲をサイズ決定してもよい。コンテンツ１２２４Ａのボリュームのコンテンツ１２２４Ｂのボリュームへのサイズ変更後、ＡＲシステムは、同一範囲を保ち、ボリューム１２０５Ｂに拡張させてもよく、これは、コンテンツ１２２４Ｂのボリューム＋コンテンツ１２２４Ｂのボリュームの１つまたはそれを上回る側上の範囲を含む。いくつかの実施例では、コンテンツは、ブラウザタイルを含むことができ、サイズ変更は、ブラウザタイルまたはブラウザタイルと関連付けられるウェブページのサイズ変更に対応し得る。
【0126】
下記に議論されるように、ＡＲシステムは、ユーザ入力および第三者要求または他の要因のうちの１つまたはそれを上回るものに基づいて、ボリューム１２０５Ａの寸法を制御してもよい。例えば、ウェブドメイン等の第三者が、新しいコンテンツを表示する際に、ボリューム１２０５Ａを自動的に拡張させないように防止するために、ＡＲシステムは、許可のセットのステータスを決定してもよく、これは、ユーザ入力を含んでもよい。有利なこととして、本プロセスは、ユーザまたはＡＲシステムが、ユーザの環境内の空間の使用のより良好な制御を付与することを可能にすることができるが、依然として、第三者がコンテンツまたはボリュームのための最適化されたサイズ決定を推奨することを可能にする。
Ｈ．例示的サイズ変更認証プロセス
Ｈ．例示的サイズ変更認証プロセス
【0127】
いくつかの実施例では、ＡＲシステムは、認証プロセスを通して、ボリュームのサイズ変更を制御してもよい。図１３Ａは、認証プロセスを含み得る、例示的サイズ変更プロセス１３００を図示する、フローチャートである。図１３Ｂは、サイズ変更プロセス１３００における１つまたはそれを上回るステップの一部または結果であり得る、例示的ステップのセットを示す。
【0128】
図１３Ａを参照すると、ブロック１３０２では、ＡＲシステムは、サイズ変更要求を受信してもよい。サイズ変更要求は、アプリケーション、ウェブドメイン、第三者、または他のソースからの、図１３Ｂに示されるようなボリューム１３２４をサイズ変更するための要求を含むことができる。ボリューム１３２４をサイズ変更するステップは、１つまたはそれを上回る方向において、ボリューム１３２４の中心、ボリューム１３２４内のコンテンツ１３２２の中心、またはユーザの３Ｄ環境内の別の点等のボリューム１３２４内の点から、ボリューム１３２４を拡張または収縮させるステップを含むことができる。サイズ変更要求は、ボリューム１３２４の１つまたはそれを上回る寸法の変化のパーセンテージまたは量を含むことができる。例えば、変化量は、メートル単位の量、ピクセルの数、または他の量を含むことができる。いくつかの実施例では、変化量は、ボリューム１３２４内の追加されるコンテンツのサイズまたは設置に基づくことができる。例えば、ユーザは、ボリューム１３２４内に表示されるブラウザアプリケーションを介して、ウェブドメインと相互作用してもよい。ウェブドメインは、ユーザ相互作用に基づいて、３Ｄコンテンツをユーザの３Ｄ環境内に表示することを要求してもよい。ウェブドメインは、３Ｄボリューム１３２４が追加されるコンテンツを包含するように、ボリューム１３２４内の３Ｄコンテンツの所望のサイズおよび設置に基づいて、サイズ変更要求を送信してもよい（またはＡＲシステムは、例えば、ウェブドメインコンテンツに基づいて、サイズ変更要求を自動的に開始してもよい）。
【0129】
ブロック１３０４では、ＡＲシステムは、サイズ変更が認可されているかどうかを決定してもよい。例えば、ＡＲシステムは、ユーザが、要求されるサイズへのボリューム１３２４のサイズの変化を認可する、または認可しているかどうかを決定してもよい。ＡＲシステムは、ユーザに、要求の認可ステータスをチェックする、要求者の認可ステータスをチェックするためのプロンプトを表示することによって、それらのある組み合わせによって、または別の方法によって、本決定を行ってもよい。
【0130】
プロンプトをユーザに表示することによって、認可を決定するために、ＡＲシステムは、サイズ変更要求に関してユーザ入力を要求する、グラフィックまたはテキストをグラフィック表示してもよい。例えば、図１３Ｂに示されるように、ＡＲシステムは、ボリューム１３２４をサイズ変更するための許可を要求するためのグラフィック１３２８を出力してもよい。グラフィック１３２８は、ユーザ入力のためのテキストおよび／または１つまたはそれを上回る双方向コンポーネントを含むことができる。例えば、グラフィック１３２８は、ステージのサイズ変更を可能にするかどうかに関するユーザへのプロンプトを含むことができる。加えて、または代替として、グラフィック１３２８は、「はい」ボタンまたは「いいえ」ボタン等の１つまたはそれを上回るボタン、またはユーザ入力を承認するための他の双方向コンポーネントを含むことができる。ＡＲシステムは、加えて、または代替として、ボリューム１３２４の提案される新しいサイズを例証するために、１つまたはそれを上回る一時的線１３２６を表示してもよい。１つまたはそれを上回る一時的線１３２６は、矢印、線、または距離の他のインジケーションを含んでもよい。線１３２６は、コンテンツ１３２２の現在の境界（またはコンテンツを含有する、プリズムの現在の境界）またはステージ１３２４の現在の境界から開始し、ステージ１３２４の新しい提案される境界まで延在してもよい。いくつかの実施例では、線は、いったんユーザ入力が受信されると、除去されてもよい。一時的線に加えて、または代替として、ＡＲシステムは、例えば、ボリューム１３２４の提案される境界の輪郭を表示する、またはボリューム１３２４の提案されるサイズの追加されるボリュームに陰影を施すことによって、ボリューム１３２４の提案される境界を表示してもよい。サイズ変更が、例えば、サイズ変更要求のユーザ承認によって、認可される場合、ＡＲシステムは、ステージ１３２４をサイズ変更してもよい。サイズ変更が、認可されない場合、ＡＲシステムは、ステージをサイズ変更しなくてもよい。例えば、ＡＲシステムは、コンテンツ１３２２と同一または類似ボリュームのステージ１３２３を表示してもよい。
【0131】
要求の認可ステータスをチェックすることによって、認可を決定するために、ＡＲシステムは、ユーザが、サイズ変更を以前に認可しているかどうかを決定してもよい。例えば、ユーザは、全てのサイズ変更要求、または特定の相互作用セッションの間、いくつかのサイズ変更要求を認可している場合がある。例えば、ウェブセッションの間、ユーザは、６つの方向のそれぞれにおいて、１００ピクセルのボリューム拡張を認可している場合がある。しかしながら、ＡＲシステムは、コンテンツを設置するとき、６つの方向のそれぞれにおいて、２５ピクセルだけボリュームを拡張している場合がある。ＡＲシステムは、次いで、現在のサイズ変更要求が、６つの方向のそれぞれにおいて、元々認可された１００ピクセルの境界内に該当するかどうかを決定してもよい。サイズ変更が、以前に認可された限界内に該当する場合、ＡＲシステムは、ブロック１３０６において、ステージをサイズ変更してもよい。ＡＲシステムが、サイズ変更が限界内にないことを見出す場合、ＡＲシステムは、サイズ変更を否認する、またはユーザにサイズ変更を認可するためのプロンプトを表示してもよい。加えて、または代替として、ＡＲシステムは、サイズ変更が閾値変化（例えば、デフォルト閾値変化またはユーザ定義された閾値変化）内に該当するかどうかをチェックすることによって、認可ステータスを決定してもよい。閾値変化が、閾値量を下回る場合、ＡＲシステムは、サイズ変更を認可してもよい。閾値変化が、閾値変化を超える場合、ＡＲシステムは、サイズ変更を否認する、またはユーザにサイズ変更を認可するためのプロンプトを表示してもよい。
【0132】
要求者の認可ステータスをチェックすることによって認可を決定するために、ＡＲシステムは、ユーザが、一般に、限定された時間周期の間、および／またはある境界内で、要求者がボリューム１３２４をサイズ変更することを可能にしているかどうかを決定してもよい。例えば、要求者は、ＡＲシステムが全てのサイズ変更要求を承認するであろうような信頼された要求者であり得る。別の実施例では、要求者は、ＡＲシステムが、時間、ボリューム変化、および／または他のパラメータに関して設定された限界内でサイズ変更要求を承認するであろうような限定された認可を有することができる。例えば、ユーザが、ウェブドメイン等の要求者が、ウェブセッションの間、ボリューム１３２４をサイズ変更することを認可している場合、ＡＲシステムは、ウェブセッションの間、ボリュームをサイズ変更してもよい。しかしながら、ユーザが、ウェブドメインから離れるようにナビゲートする場合、ＡＲシステムは、ボリュームをサイズ変更しない、またはユーザにサイズ変更することを認可することをプロンプトしてもよい。
【0133】
ブロック１３０６では、ＡＲシステムは、ステージをサイズ変更してもよい。サイズ変更は、図１２Ａおよび１２Ｂに関して説明されるもの等の１つまたはそれを上回るプロセスを含むことができる。図１３Ｂを参照すると、ＡＲシステムは、パーセンテージ変化を使用して、範囲を用いて、または別の方法によって、ボリューム１３２４をサイズ変更することができる。いくつかの実施例では、ＡＲシステムは、サイズ変更に応じて、ボリューム１３２４の輪郭を表示しなくてもよい。いくつかの実施例では、ＡＲシステムは、サイズ変更に応じて、ボリューム１３２４の輪郭を表示してもよい。
【0134】
ブロック１３０８では、ＡＲシステムは、ステージをリフレッシュすべきかどうかを決定してもよい。ＡＲシステムは、１つまたはそれを上回るリフレッシュ条件に基づいて、ステージがリフレッシュされるべきであることを決定してもよい。リフレッシュ条件は、コンテンツの１つまたはそれを上回る状態、コンテンツのソース（ウェブドメインまたはアプリケーション等）、ＡＲシステム、サイズ変更認可、または他の関連条件を含むことができる。例えば、ＡＲシステムは、サイズ変更認可が終了しているかどうか、またはユーザがもはや要求者からのコンテンツと相互作用していないとき等、サイズ変更がもはや関連しないかどうかを決定してもよい。いくつかの実施例では、リフレッシュは、ユーザが、サイズ変更を要求した、ウェブドメインから離れるように移動するときに生じてもよい。例えば、ユーザは、ユーザの環境内に製品を表示するためにサイズ変更を要求した、買物サイトから、ニュースウェブサイトに切り替えてもよい。別の実施例では、リフレッシュは、ウェブセッションが終了したとき、または新しいウェブセッションが開始したときに生じてもよい。別の実施例では、リフレッシュは、アプリケーションの開始または再開に応じて、生じてもよい。別の実施例では、ステージのサイズは、ユーザが相互作用する、コンテンツまたはアプリケーションに依存する、またはそれに結び付けられ得る。ユーザが、その独自のステージサイズ要件を用いて、別のアプリケーションを開始する、またはコンテンツをロードする場合、ＡＲシステムは、ステージをリフレッシュしてもよい。ＡＲシステムが、リフレッシュが生じたことを決定する場合、ＡＲシステムは、ブロック１３１０において、ボリューム１３２４をリセットしてもよい。ＡＲシステムが、リフレッシュが生じたことを決定しない場合、ＡＲシステムは、ボリューム１３２４の現在のサイズを使用し続けてもよい。
【0135】
ブロック１３１０では、ＡＲシステムは、ボリューム１３２４を前のサイズに設定してもよい。例えば、ＡＲシステムは、ボリューム１３２４を、サイズ変更要求に先立ってＡＲシステムによって使用されていたサイズに設定することができる。いくつかの実施例では、前のサイズは、ブラウザタイルまたは他のコンテンツのサイズ＋１つまたはそれを上回る寸法におけるいくつかの範囲等のボリューム１３２４のデフォルトサイズを含むことができる。他の実施例では、前のサイズは、デフォルトサイズではない、サイズを含むことができる。
Ｉ．例示的ページ回転
Ｉ．例示的ページ回転
【0136】
いくつかの実施例では、ＡＲシステムは、ボリュームをサイズ変更して、ブラウザタイル内のウェブページの回転等のコンテンツ回転に適応してもよい。図１４Ａは、ブラウザタイル内のウェブページを回転させるための例示的回転プロセス１４００を図示し、図１４Ｂは、ブラウザタイル内のウェブページのボリューム回転サイズ変更の実施例を図示する。
【0137】
図１４Ａを参照すると、ブロック１４０２では、ＡＲシステムは、回転要求を受信してもよい。回転要求は、ユーザまたは第三者アプリケーションからの、ユーザの３Ｄ環境内に表示されるコンテンツの１つまたはそれを上回るコンポーネントを回転させるための要求を含むことができる。例えば、図１４Ｂに図示されるように、ＡＲシステムは、ウェブページ１４２８をブラウザタイル１４２４内に表示してもよい。ウェブページは、最初に、垂直配向に表示されてもよい。ユーザ、第三者、またはアプリケーションは、ウェブページが、水平配向に配向されることを要求し得る。他の実施例では、ＡＲシステムは、複数のコンテンツを表示してもよい。ＡＲシステムは、そのコンテンツの１つまたはそれを上回る断片をユーザの３Ｄ環境内で再配向または再位置特定するための要求を受信してもよい。
【0138】
図１４Ａを継続して参照すると、ブロック１４０４では、ＡＲシステムは、ユーザの３Ｄ環境内のコンテンツの新しい配向を決定することができる。例えば、ＡＲシステムは、ユーザの姿勢および／または回転要求に基づいて、新しい配向を識別することができる。任意の数の配向も、可能性として考えられる。いくつかの実施例では、新しい配向は、水平、垂直、対角線、ｘ、ｙ、またはｚ軸の周囲の回転、同等物、またはそれらのある組み合わせであってもよい。例えば、ユーザが、ブラウザタイル等のコンテンツを見ている場合、ユーザは、コンテンツがユーザの視線の方向に向いている（例えば、それと垂直である）ようなブラウザタイル配向においてコンテンツを要求し得る。別の実施例では、図１４Ｂに図示されるように、コンテンツは、ブラウザタイル１４２４内のウェブページ１４２８であることができ、ユーザは、ウェブページ１４２８を垂直配向１４０１から水平配向１４０３に再配向することを要求し得る。
【0139】
ブロック１４０６では、ＡＲシステムは、新しい配向に基づいて、新しいボリュームサイズを決定することができる。例えば、図１４Ｂ１に図示されるように、ＡＲシステムは、ボリューム１４２２Ａをサイズ変更し、新しい配向におけるページ１４２８に適応することができる。新しいボリューム１４２２Ｂは、１つまたはそれを上回る寸法において、同一、より大きい、またはより小さい長さを含むことができる。例えば、図１４Ｂ１および１４Ｂ２に示される実施例では、ボリュームの高さｈおよび幅ｗは、（例えば、ボリューム１４２２Ａおよびボリューム１４２２Ｂ内では）同一のままであり得るが、深度ｄは、ボリューム１４２２Ｂ内のページ１４２８の高さに増加され得る。しかしながら、他のサイズ変更もまた、可能性として考えられる。
【0140】
ブロック１４０８では、ＡＲシステムは、サイズ変更認可を決定することができる。サイズ変更認可は、サイズ変更要求がユーザまたはＡＲシステムによって認可されているかどうかを決定するための１つまたはそれを上回るステップを含むことができる。例えば、サイズ変更認可は、図１３Ａを参照して説明されるサイズ変更プロセス１３００の１つまたはそれを上回るステップを含むことができる。いくつかの実施例では、ＡＲシステムは、ユーザに、サイズ変更または配向が認可されているかどうかを決定するようにプロンプトを表示してもよい。ＡＲシステムが、サイズ変更が認可されていることを決定する場合、ＡＲシステムは、ブロック１４１０において、ボリュームをサイズ変更してもよい。サイズ変更が、認可されていない場合、ＡＲシステムは、ボリュームをサイズ変更しなくてもよい、または新しいコンテンツ配向を表示しなくてもよい。
【0141】
ブロック１４１０では、ＡＲシステムは、サイズ変更認可に基づいて、ボリュームをサイズ変更することができる。サイズ変更は、図１２Ａおよび１２Ｂに関して説明されるもの等の１つまたはそれを上回るプロセスを含むことができる。図１４Ｂに適用されるように、例えば、ＡＲシステムは、パーセンテージ変化を使用して、範囲を用いて、または別の方法によって、ボリューム１４２２をサイズ変更することができる。いくつかの実施例では、ＡＲシステムは、ボリューム１４２２からのサイズ変更後、ボリューム１４２２Ａの輪郭を表示しなくてもよい。いくつかの実施例では、ＡＲシステムは、所定の時間周期にわたって、および／または特定のユーザ相互作用が生じるまで等、ボリューム１４２２からのサイズ変更に応じて、ボリューム１４２２Ａの輪郭を表示してもよい。
【0142】
ブロック１４１２では、ＡＲシステムは、コンテンツを、新しい配向において、サイズ変更されたボリューム内に表示することができる。コンテンツは、コンテンツの位置がサイズ変更されたボリューム１４２２Ａ内に該当するように、要求される配向において表示されてもよい。
Ｊ．例示的コンテンツハンドリング
Ｊ．例示的コンテンツハンドリング
【0143】
いくつかの実施例では、ＡＲシステムは、そのコンテンツのいくつかまたは全てが、その中にコンテンツが設置されることを可能にされる、空間の定義されたボリュームの境界の外側に該当する、ユーザの３Ｄ環境内にコンテンツを位置付ける、または設置するための要求を受信し得る。図１５Ａは、そのようなコンテンツを設置するための例示的コンテンツハンドリングプロセス１５００を図示し、図１５Ｂは、ボリュームが、サイズ変更されるときと、ボリュームが、サイズ変更されないときの、コンテンツハンドリングの実施例を図示する。
【0144】
図１５Ａを参照すると、ブロック１５０２では、ＡＲシステムは、コンテンツ設置要求を受信してもよい。コンテンツ設置要求は、図１５Ｂに図示されるように、アプリケーション、ウェブドメイン、第三者、または他のソースからの、コンテンツ１５２６をユーザの３Ｄ環境のエリア内に設置するための要求を含むことができる。コンテンツ設置要求は、コンテンツ１５２６の座標および／または寸法を含むことができる。座標は、ボリューム１５２２、ユーザ、および／またはユーザの３Ｄ環境内の別の原点を参照することができる。いくつかの実施例では、要求は、ボリューム１５２２の外側のコンテンツ１５２６のいくつかまたは全ての設置を含むことができる。いくつかの実施例では、要求は、ボリューム１５２２の内側のコンテンツ１５２６のいくつかまたは全ての設置を含むことができる。例えば、ユーザは、ボリューム１５２２内に表示されるブラウザアプリケーションを介して、ウェブドメインと相互作用してもよい。ウェブドメインは、ユーザ相互作用に基づいて、コンテンツ１５２４をボリューム１５２２内に表示することを要求してもよい。加えて、または代替として、ウェブドメインは、ボリューム１５２２内のコンテンツ１５２４の所望のサイズおよび設置に基づいて、コンテンツ設置要求を送信してもよい。
【0145】
ブロック１５０６では、ＡＲシステムは、コンテンツの一部が、コンテンツ設置要求に基づいて、ボリュームの境界の外側に該当するであろうかどうかを決定してもよい。例えば、図１５Ｂの状況１５０１に図示されるように、ＡＲシステムは、コンテンツ１５２６を全体的にボリューム１５２２の境界の外側に設置するための要求を受信し得る。しかしながら、他の状況も、可能性として考えられる。
【0146】
別の実施例では、ＡＲシステムは、コンテンツ１５２６の一部をボリューム１５２２の境界の外側に設置するための要求を受信し得る。いくつかの実施例では、ＡＲシステムは、その部分が、ボリューム１５２２の閾値ボリュームまたは閾値パーセンテージが、またはコンテンツ１５２４、１５２６、および／または３Ｄボリューム１５２２と関連付けられる、他の閾値を超える場合、コンテンツ１５２６がボリューム１５２２の境界の外側に該当することを決定し得る。いくつかの実施例では、閾値は、ボリュームの５％、ボリュームの１０％、または任意の他のパーセンテージを含むことができる。いくつかの実施例では、閾値は、１０ピクセル、１５ピクセル、または任意の他のピクセルの数を含むことができる。ＡＲシステムが、コンテンツがボリューム境界の内側に該当することを決定する場合、ＡＲシステムは、ブロック１５１８において、コンテンツをボリューム内に表示してもよい。ＡＲシステムが、コンテンツがボリューム境界の外側に該当することを決定する場合、ＡＲシステムは、ブロック１５０８において、ボリュームをサイズ変更するかどうかを決定してもよい。
【0147】
ブロック１５０８では、ＡＲシステムは、ボリュームをサイズ変更するかどうかを決定してもよい。例えば、ＡＲシステムは、サイズ変更認可のステータスに基づいて、コンテンツをサイズ変更するかどうかを決定することができる。サイズ変更認可は、サイズ変更要求がユーザまたはＡＲシステムによって認可されているかどうかを決定するための１つまたはそれを上回るステップを含むことができる。例えば、サイズ変更認可は、図１３Ａを参照して説明される、サイズ変更プロセス１３００の１つまたはそれを上回るステップを含むことができる。いくつかの実施例では、ＡＲシステムは、サイズ変更または配向が認可されているかどうかを決定するためのプロンプトをユーザに表示してもよい。ＡＲシステムが、サイズ変更が認可されていることを決定する場合、ＡＲシステムは、ブロック１５１６において、ボリュームをサイズ変更してもよい。サイズ変更が、認可されていない場合、ＡＲシステムは、ブロック１５１０において、コンテンツをコピーするかどうかを決定してもよい。
【0148】
ブロック１５１６では、ＡＲシステムは、ボリュームをサイズ変更してもよい。サイズ変更は、図１２Ａおよび１２Ｂに関して説明されるもの等の１つまたはそれを上回るプロセスを含むことができる。図１５Ｂを参照すると、例えば、ＡＲシステムは、パーセンテージ変化を使用して、範囲を用いて、または別の方法によって、ボリューム１５２２をサイズ変更し、ボリューム１５２２Ａに拡張させることができる。いくつかの実施例では、ＡＲシステムは、ボリューム１５２２からサイズ変更後、ボリューム１５２２Ａの輪郭を表示しなくてもよい。いくつかの実施例では、ＡＲシステムは、ボリューム１５２２からサイズ変更後、ボリューム１５２２Ａの輪郭を表示してもよい。いったんＡＲシステムが、ボリュームをサイズ変更すると、ＡＲシステムは、状況１５０３において、図１５Ｂに図示されるように、サイズ変更されたボリューム１５２２Ａ内の要求される位置にコンテンツを表示してもよい。
【0149】
ブロック１５１０では、ＡＲシステムは、コンテンツをコピーするかどうかを決定してもよい。コピーが、行われ、設置されるべきかどうかを決定するために、ＡＲシステムは、ユーザがコンテンツ１５２６のコピーをボリューム１５２２の境界の外側に表示することを認可しているかどうかを決定してもよい。コピー認可は、コピーがユーザまたはＡＲシステムによって認可されているかどうかを決定するための１つまたはそれを上回るステップを含むことができる。いくつかの実施例では、ＡＲシステムは、コンテンツ１５２６をコピーし、ボリューム１５２２の外側の要求される設置に表示することが、認可されているかどうかを決定するためのプロンプトをユーザに表示してもよい。ユーザが、プロンプトに応答して、コピーの承認を示す場合、ＡＲシステムは、コピーが認可されていることを決定し、ブロック１５１４において、コンテンツのコピーをボリューム１５２２の外側に表示してもよい。ユーザが、コピーが承認されていないことを示す場合、ＡＲシステムは、ブロック１５１２において、要求される設置場所にコンテンツのコピーを表示しないことを決定してもよい。
【0150】
コンテンツのコピーは、発信側要求者と関連付けられるメタデータを含有する場合とそうではない場合があり、要求者がコピーと関連付けられる１つまたはそれを上回るパラメータを制御することを可能にする場合とそうではない場合がある、コンテンツ１５２６の視覚的表現を含むことができる。例えば、コピーは、ウェブドメイン等のコンテンツ１５２６を発信する当事者が、移動、アニメーション、または表現の他の側面を制御することを可能にせずに、コンテンツ１５２６の視覚的表現を含むことができる。別の実施例では、コピーは、要求者に接続されるメタデータ、ハイパーリンク、アニメーション、または要求者と関連付けられる、他のデータ等を含む、コンテンツ１５２６の表現を含むことができる。
【0151】
ブロック１５１２では、ＡＲシステムは、図１５Ｂの状況１５０１に図示されるように、コンテンツ１５２６のいくつかまたは全てを隠蔽する、または表示しなくてもよい。例えば、コンテンツ１５２６は、コンテンツ１５２６の中心が３Ｄボリューム１５２２の外側に該当するように設置、定寸、または配向されることができる。コンテンツ１５２６の中心が、３Ｄボリューム１５２２の外側に該当する場合、ＡＲシステムは、コンテンツ１５２６の全体を表示しないことを決定してもよい。別の実施例では、ＡＲシステムは、３Ｄボリューム１５２２内に該当する、コンテンツ１５２６の一部を表示することを決定してもよい。
Ｋ．付加的実施例
Ｋ．付加的実施例
【0152】
本明細書に説明されるシステム、方法、およびデバイスはそれぞれ、いくつかの側面を有するが、そのうちのいずれの単一の１つだけが、その望ましい属性に関与するわけではない。本開示の範囲を限定することなく、いくつかの非限定的特徴が、ここで、簡単に議論されるであろう。以下の段落は、本明細書に説明されるデバイス、システム、および方法の種々の例示的実装を説明する。
【0153】
実施例１：仮想コンテンツを３次元（３Ｄ）空間環境内に表示するためのディスプレイシステムであって、仮想コンテンツをディスプレイシステムのユーザの眼に提示するように構成される、頭部搭載型ディスプレイと、頭部搭載型ディスプレイと通信する、回路網であって、３Ｄウェブベースのコンテンツにアクセスするための要求を受信し、３Ｄウェブベースのコンテンツを表示するためのユーザの３Ｄ空間環境内の場所、３Ｄコンテンツの配向、または３Ｄコンテンツの寸法のうちの少なくとも１つを含む、３Ｄウェブベースのコンテンツと関連付けられる、パラメータを識別し、パラメータに基づいて、３Ｄコンテンツがユーザの３Ｄ空間環境の認可された部分内に表示され得るかどうかを決定し、３Ｄコンテンツが３Ｄ空間環境の認可された部分内に表示され得ないことの決定に応答して、認可された部分をサイズ変更し、サイズ変更された認可された部分内における３Ｄコンテンツの表示を可能にするように構成される、回路網とを備える、ディスプレイシステム。
【0154】
実施例２：回路網は、ブラウザタイルを３Ｄ空間環境内に表示するように構成され、３Ｄ空間環境の認可された部分は、ブラウザタイルの幅を上回る、幅と、ブラウザタイルの高さを上回る、高さと、ブラウザタイルの深度を上回る、深度とを備える、実施例１に記載のディスプレイシステム。
【0155】
実施例３：回路網は、ブラウザタイルを認可された部分内に表示するように構成される、実施例１または２のうちのいずれか１項に記載のディスプレイシステム。
【0156】
実施例４：３Ｄコンテンツが認可された部分内に表示され得るかどうかを決定するために、回路網は、閾値量の３Ｄコンテンツが認可された部分内に表示され得るかどうかを決定するように構成される、実施例１－３のうちのいずれか１項に記載のディスプレイシステム。
【0157】
実施例５：回路網は、３Ｄコンテンツが３Ｄ空間環境の認可された部分内に表示され得ることの決定に応答して、３Ｄコンテンツを認可された部分内に表示するように構成される、実施例１－４のうちのいずれか１項に記載のディスプレイシステム。
【0158】
実施例６：認可された部分をサイズ変更するために、回路網は、サイズ変更認可ステータスを決定し、サイズ変更認可ステータスに基づいて、認可された部分をサイズ変更するように構成される、実施例１－５のうちのいずれか１項に記載のディスプレイシステム。
【0159】
実施例７：サイズ変更認可ステータスを決定するために、回路網は、ユーザ入力に基づいて、認可を識別するように構成される、実施例１－６のうちのいずれか１項に記載のディスプレイシステム。
【0160】
実施例８：３Ｄウェブベースのコンテンツは、ウェブドメインと関連付けられ、サイズ変更認可ステータスを決定するために、回路網は、ウェブドメインが認可された要求者であるかどうかに基づいて、認可を識別するように構成される、実施例１－７のうちのいずれか１項に記載のディスプレイシステム。
【0161】
実施例９：サイズ変更認可ステータスは、３Ｄウェブベースのコンテンツと関連付けられるウェブドメインへのアクセスの現在のセッションの間、認可された部分をサイズ変更するための認可を備える、実施例１－８のうちのいずれか１項に記載のディスプレイシステム。
【0162】
実施例１０：認可された部分をサイズ変更するために、回路網は、認可された部分の幅を少なくとも１つの方向に第１の量だけ増加させ、認可された部分の高さを少なくとも１つの方向に第２の量だけ増加させ、認可された部分の深度を少なくとも１つの方向に第３の量だけ増加させるように構成される、実施例１－９のうちのいずれか１項に記載のディスプレイシステム。
【0163】
実施例１１：回路網は、認可された部分と関連付けられる、リフレッシュ条件を決定し、認可された部分のサイズをデフォルトサイズに設定するように構成される、実施例１－１０のうちのいずれか１項に記載のディスプレイシステム。
【0164】
実施例１２：リフレッシュ条件は、３Ｄウェブベースのコンテンツと関連付けられない、ウェブドメインとのユーザ相互作用と、３Ｄウェブベースのコンテンツの表示を中止するためのユーザからのインジケーションとのうちの少なくとも１つを含む、実施例１１に記載のディスプレイシステム。
【0165】
実施例１３：仮想コンテンツを３次元（３Ｄ）空間環境内に表示するためのディスプレイシステムであって、
【0166】
仮想コンテンツをディスプレイシステムのユーザの眼に提示するように構成される、頭部搭載型ディスプレイと、頭部搭載型ディスプレイと通信する、回路網であって、コンテンツにアクセスするための要求を受信し、第１の配向において、コンテンツをユーザの３Ｄ空間環境の認可された部分内に表示し、第２の配向において、コンテンツをユーザの３Ｄ空間環境内に表示するための要求を受信し、第２の配向において、コンテンツがユーザの３Ｄ空間環境の認可された部分内に表示され得るかどうかを決定し、第２の配向において、コンテンツがユーザの３Ｄ空間環境の認可された部分内に表示され得ないことの決定に応答して、認可された部分をサイズ変更し、第２の配向において、サイズ変更された認可された部分内にコンテンツの表示を可能にするように構成される、回路網とを備える、ディスプレイシステム。
【0167】
実施例１４：コンテンツは、ウェブページを備える、実施例１３に記載のディスプレイシステム。
【0168】
実施例１５：回路網は、コンテンツを３Ｄ空間環境内の仮想ブラウザタイルの中に表示するように構成され、３Ｄ空間環境の認可された部分は、仮想ブラウザタイルの幅を上回る、幅と、仮想ブラウザタイルの高さを上回る、高さと、仮想ブラウザタイル深度を上回る、深度とを備える、実施例１３または１４に記載のディスプレイシステム。
【0169】
実施例１６：回路網は、仮想ブラウザタイルを認可された部分内に表示するように構成される、実施例１５に記載のディスプレイシステム。
【0170】
実施例１７：コンテンツが認可された部分内に表示され得るかどうかを決定するために、回路網は、閾値量のコンテンツが認可された部分内に表示され得るかどうかを決定するように構成される、実施例１３－１６のうちのいずれか１項に記載のディスプレイシステム。
【0171】
実施例１８：回路網は、第２の配向において、コンテンツが３Ｄ空間環境の認可された部分内に表示され得ることの決定に応答して、第２の配向において、コンテンツを認可された部分内に表示するように構成される、実施例１３－１７のうちのいずれか１項に記載のディスプレイシステム。
【0172】
実施例１９：認可された部分をサイズ変更するために、回路網は、サイズ変更認可ステータスを決定し、サイズ変更認可ステータスに基づいて、認可された部分をサイズ変更するように構成される、実施例１３－１８のうちのいずれか１項に記載のディスプレイシステム。
【0173】
実施例２０：サイズ変更認可ステータスを決定するために、回路網は、ユーザ入力に基づいて、認可を識別するように構成される、実施例１３－１９のうちのいずれか１項に記載のディスプレイシステム。
【0174】
実施例２１：コンテンツは、ウェブドメインと関連付けられ、サイズ変更認可ステータスを決定するために、回路網は、ウェブドメインが認可された要求者であるかどうかに基づいて、認可を識別するように構成される、実施例１３－２０のうちのいずれか１項に記載のディスプレイシステム。
【0175】
実施例２２：サイズ変更認可ステータスは、３Ｄコンテンツと関連付けられるウェブドメインへのアクセスの現在のセッションの間、認可された部分をサイズ変更するための認可を備える、実施例１３－２１のうちのいずれか１項に記載のディスプレイシステム。
【0176】
実施例２３：認可された部分をサイズ変更するために、回路網は、認可された部分の幅を少なくとも１つの方向に第１の量だけ増加させ、認可された部分の高さを少なくとも１つの方向に第２の量だけ増加させ、認可された部分の深度を少なくとも１つの方向に第３の量だけ増加させるように構成される、実施例１３－２２のうちのいずれか１項に記載のディスプレイシステム。
【0177】
実施例２４：回路網は、認可された部分と関連付けられる、リフレッシュ条件を決定し、認可された部分のサイズをデフォルトサイズに設定するように構成される、実施例１３－２３のうちのいずれか１項に記載のディスプレイシステム。
【0178】
実施例２５：リフレッシュ条件は、コンテンツと関連付けられない、ウェブドメインとのユーザ相互作用と、コンテンツの表示を中止するためのユーザからのインジケーションとのうちの少なくとも１つを含む、実施例２４に記載のディスプレイシステム。
【0179】
実施例２６：仮想コンテンツを３次元（３Ｄ）空間環境内に表示するためのディスプレイシステムであって、仮想コンテンツをディスプレイシステムのユーザの眼に提示するように構成される、頭部搭載型ディスプレイと、頭部搭載型ディスプレイと通信する、回路網であって、３Ｄコンテンツにアクセスするための要求を受信し、３Ｄコンテンツを表示するためのユーザの３Ｄ空間環境内の場所、３Ｄコンテンツの配向、および３Ｄコンテンツの寸法のうちの少なくとも１つを含む、３Ｄコンテンツと関連付けられる、パラメータを識別し、パラメータに基づいて、３Ｄコンテンツがユーザの３Ｄ空間環境の認可された部分内に表示され得るかどうかを決定し、３Ｄコンテンツが３Ｄ空間環境の認可された部分内に表示され得ないことの決定に応答して、３Ｄコンテンツの表現を３Ｄ空間環境内の場所に表示するように構成される、回路網とを備える、ディスプレイシステム。
【0180】
実施例２７：回路網は、ブラウザタイルを３Ｄ空間環境内に表示するように構成され、３Ｄ空間環境の認可された部分は、ブラウザタイルの幅を上回る、幅と、ブラウザタイルの高さを上回る、高さと、ブラウザタイルの深度を上回る、深度とを備える、実施例２６に記載のディスプレイシステム。
【0181】
実施例２８：回路網は、ブラウザタイルを認可された部分内に表示するように構成される、実施例２６または２７のうちのいずれか１項に記載のディスプレイシステム。
【0182】
実施例２９：３Ｄコンテンツが認可された部分内に表示され得るかどうかを決定するために、回路網は、閾値量の３Ｄコンテンツが認可された部分内に表示され得るかどうかを決定するように構成される、実施例２６－２８のうちのいずれか１項に記載のディスプレイシステム。
【0183】
実施例３０：回路網は、３Ｄコンテンツが３Ｄ空間環境の認可された部分内に表示され得ることの決定に応答して、３Ｄコンテンツを認可された部分内に表示するように構成される、実施例２６－２８のうちのいずれか１項に記載のディスプレイシステム。
【0184】
上記の実施例のいずれかは、任意の好適な組み合わせにおいて組み合わせられてもよい。
Ｌ．用語
Ｌ．用語
【0185】
本明細書で議論されるシステムおよび方法の理解を促進するために、いくつかの用語が、下記に説明される。下記に説明される用語および本明細書で使用される他の用語は、提供される説明、用語の通常および慣例意味、および／または個別の用語に関する任意の他の含意される意味を含むと解釈されるべきであって、そのような構造は、用語の文脈と一致する。したがって、下記の説明は、これらの用語の意味を限定するものではなく、例示的説明を提供するのみである。
【0186】
プリズム：複合現実コンテンツと関連付けられる、コンテナ、エリア、またはボリューム。例えば、プリズムは、ユーザによって選択可能な複数の仮想コンテンツアイテムを含有してもよい。プリズムは、アプリケーションが立ち上げられると、スポーンしてもよく、次いで、兄弟または子プリズムをスポーンし、フレキシブルなレイアウトを作成してもよい。プリズム内のアプリケーションは、典型的には、第１のプリズムの近接度内にあって、ユーザによって容易に発見可能である、これらの階層プリズムが現れるであろう場所を制御するように構成されてもよい。
【0187】
プリズムは、フィードバックをユーザに提供してもよい。いくつかの実施形態では、フィードバックは、プリズムが頭部姿勢を用いて標的化されるとき、ユーザにのみ表示される、タイトルであってもよい。いくつかの実施形態では、フィードバックは、プリズムの周囲の光彩であってもよい。プリズム光彩（および／または他のプリズムフィードバック）はまた、ユーザにどのプリズムが共有されているかのフィードバックを与えるために、共有する際に使用されてもよい。
【0188】
コントローラ：トーテム等のハンドヘルドコントローラ。
【0189】
コントローラ軸：コントローラが向いている方向を定義する、コントローラから延在する軸。
【0190】
頭部姿勢：慣性測定ユニット（ＩＭＵ）、加速度計、ジャイロスコープ等のセンサを使用して決定される、頭部位置および／または頭部配向。頭部姿勢の方向に延在する、頭部姿勢光線は、仮想オブジェクトと相互作用するために使用されてもよい。例えば、ユーザが、プリズムまたはオブジェクトに向いている、またはそれを見ているとき、オブジェクトまたはプリズムは、ユーザの頭部姿勢光線によって交差される。
【0191】
焦点：双方向オブジェクトが選択されることを可能にする、プリズム等のオブジェクトの特性。
【0192】
入力焦点：オブジェクトのカーソルをアクティブシステムカーソルとしてリフレッシュおよびレンダリングさせる、プリズムまたはアプリケーション等のオブジェクトの特性。いくつかの実装では、複数の焦点オブジェクトが存在することができるが、入力焦点を伴うものは、１つのみである。
【0193】
ブラウザタイル：ウェブベースのコンテンツをナビゲートする、表示する、または別様に、それと相互作用するために使用され得る、コンテンツウィンドウのタイプ。ブラウザタイルは、操作され、それと相互作用され得る、２Ｄまたは３Ｄオブジェクトとして、ユーザの３Ｄ環境内に表示されることができる。
【0194】
３Ｄコンテンツ：ユーザの３Ｄ環境内に表示され得る、仮想オブジェクト。３Ｄコンテンツは、静的である、アニメーション化される、操作可能である、または別様に、相互作用されることができる。３Ｄコンテンツは、例えば、ブラウザタイルを使用して、ウェブドメインまたはウェブページとのユーザ相互作用によって生成される、ウェブベースのコンテンツを含むことができる。
【0195】
コンテンツボリューム（またはコンテンツステージ）：コンテンツボリュームは、その中で３Ｄコンテンツが表示または操作され得る、ユーザの環境を伴う、空間のボリュームを含むことができる。
Ｍ．他の考慮点
Ｍ．他の考慮点
【0196】
本明細書に説明される、または添付される図に描写されるプロセス、方法、およびアルゴリズムはそれぞれ、具体的かつ特定のコンピュータ命令を実行するように構成される、１つまたはそれを上回る物理的コンピューティングシステム、ハードウェアコンピュータプロセッサ、特定用途向け回路、または電子ハードウェアによって実行される、コードモジュールにおいて具現化され、それによって完全または部分的に自動化され得る。例えば、コンピューティングシステムは、具体的コンピュータ命令とともにプログラムされた汎用コンピュータ（例えば、サーバ）または専用コンピュータ、専用回路等を含むことができる。コードモジュールは、実行可能プログラムにコンパイルおよびリンクされ得る、動的リンクライブラリ内にインストールされ得る、またはインタープリタ型プログラミング言語において書き込まれ得る。いくつかの実装では、特定の動作および方法が、所与の機能に特有の回路によって実施され得る。
【0197】
さらに、本開示の機能性のある実装は、十分に数学的、コンピュータ的、または技術的に複雑であるため、（適切な特殊化された実行可能命令を利用する）特定用途向けハードウェアまたは１つまたはそれを上回る物理的コンピューティングデバイスは、例えば、関与する計算の量または複雑性に起因して、または結果を実質的にリアルタイムで提供するために、機能性を実施する必要があり得る。例えば、動画またはビデオは、多くのフレームを含み、各フレームは、数百万のピクセルを有し得、具体的にプログラムされたコンピュータハードウェアは、商業的に妥当な時間量において所望の画像処理タスクまたはアプリケーションを提供するようにビデオデータを処理する必要がある。
【0198】
コードモジュールまたは任意のタイプのデータは、ハードドライブ、ソリッドステートメモリ、ランダムアクセスメモリ（ＲＡＭ）、読取専用メモリ（ＲＯＭ）、光学ディスク、揮発性または不揮発性記憶装置、同一物の組み合わせ、または同等物を含む、物理的コンピュータ記憶装置等の任意のタイプの非一過性コンピュータ可読媒体上に記憶され得る。本方法およびモジュール（またはデータ）はまた、無線ベースおよび有線／ケーブルベースの媒体を含む、種々のコンピュータ可読伝送媒体上で生成されたデータ信号として（例えば、搬送波または他のアナログまたはデジタル伝搬信号の一部として）伝送され得、種々の形態（例えば、単一または多重化アナログ信号の一部として、または複数の離散デジタルパケットまたはフレームとして）をとり得る。開示されるプロセスまたはプロセスステップの結果は、任意のタイプの非一過性有形コンピュータ記憶装置内に持続的または別様に記憶され得る、またはコンピュータ可読伝送媒体を介して通信され得る。
【0199】
本明細書に説明される、または添付される図に描写されるフロー図における任意のプロセス、ブロック、状態、ステップ、または機能性は、プロセスにおいて具体的機能（例えば、論理または算術）またはステップを実装するための１つまたはそれを上回る実行可能命令を含む、コードモジュール、セグメント、またはコードの一部を潜在的に表すものとして理解されたい。種々のプロセス、ブロック、状態、ステップ、または機能性は、組み合わせられる、再配列される、本明細書に提供される例証的実施例に追加される、そこから削除される、修正される、または別様にそこから変更されることができる。いくつかの実施形態では、付加的または異なるコンピューティングシステムまたはコードモジュールが、本明細書に説明される機能性のいくつかまたは全てを実施し得る。本明細書に説明される方法およびプロセスはまた、いずれの特定のシーケンスにも限定されず、それに関連するブロック、ステップ、または状態は、適切な他のシーケンスで、例えば、連続して、並行して、またはある他の様式で実施されることができる。タスクまたはイベントが、開示される例示的実施形態に追加される、またはそこから除去され得る。さらに、本明細書に説明される実装における種々のシステムコンポーネントの分離は、例証目的のためであり、全ての実装においてそのような分離を要求するものとして理解されるべきではない。説明されるプログラムコンポーネント、方法、およびシステムは、概して、単一のコンピュータ製品においてともに統合される、または複数のコンピュータ製品にパッケージ化され得ることを理解されたい。多くの実装変形例が、可能である。
【0200】
本プロセス、方法、およびシステムは、ネットワーク（または分散）コンピューティング環境において実装され得る。ネットワーク環境は、企業全体コンピュータネットワーク、イントラネット、ローカルエリアネットワーク（ＬＡＮ）、広域ネットワーク（ＷＡＮ）、パーソナルエリアネットワーク（ＰＡＮ）、クラウドコンピューティングネットワーク、クラウドソースコンピューティングネットワーク、インターネット、およびワールドワイドウェブを含む。ネットワークは、有線または無線ネットワークまたは任意の他のタイプの通信ネットワークであり得る。
【0201】
本開示のシステムおよび方法は、それぞれ、いくつかの革新的側面を有し、そのうちのいかなるものも、本明細書に開示される望ましい属性に単独で関与しない、またはそのために要求されない。上記に説明される種々の特徴およびプロセスは、相互に独立して使用され得る、または種々の方法で組み合わせられ得る。全ての可能な組み合わせおよび副次的組み合わせが、本開示の範囲内に該当することが意図される。本開示に説明される実装の種々の修正が、当業者に容易に明白であり得、本明細書に定義される一般原理は、本開示の精神または範囲から逸脱することなく、他の実装に適用され得る。したがって、請求項は、本明細書に示される実装または実施形態に限定されることを意図されず、本明細書に開示される本開示、原理、および新規の特徴と一貫する最も広い範囲を与えられるべきである。
【0202】
別個の実装または実施形態の文脈において本明細書に説明されるある特徴はまた、単一の実装または実施形態における組み合わせにおいて実装されることができる。逆に、単一の実装または実施形態の文脈において説明される種々の特徴もまた、複数の実装または実施形態において別個に、または任意の好適な副次的組み合わせにおいて実装されることができる。さらに、特徴がある組み合わせにおいて作用するものとして上記に説明され、さらに、そのようなものとして最初に請求され得るが、請求される組み合わせからの１つまたはそれを上回る特徴は、いくつかの場合では、組み合わせから削除されることができ、請求される組み合わせは、副次的組み合わせまたは副次的組み合わせの変形例を対象とし得る。いかなる単一の特徴または特徴のグループも、あらゆる実施形態に必要または必須ではない。
【0203】
とりわけ、「～できる（ｃａｎ）」、「～し得る（ｃｏｕｌｄ）」、「～し得る（ｍｉｇｈｔ）」、「～し得る（ｍａｙ）」、「例えば（ｅ．ｇ．）」、および同等物等、本明細書で使用される条件文は、別様に具体的に記載されない限り、または使用されるような文脈内で別様に理解されない限り、概して、ある実施形態がある特徴、要素、またはステップを含む一方、他の実施形態がそれらを含まないことを伝えることが意図される。したがって、そのような条件文は、概して、特徴、要素、またはステップが、１つまたはそれを上回る実施形態に対していかようにも要求されること、または１つまたはそれを上回る実施形態が、著者の入力または促しの有無を問わず、これらの特徴、要素、またはステップが任意の特定の実施形態において含まれる、または実施されるべきかどうかを決定するための論理を必然的に含むことを含意することを意図するものではない。用語「～を備える（ｃｏｍｐｒｉｓｉｎｇ）」、「～を含む（ｉｎｃｌｕｄｉｎｇ）」、「～を有する（ｈａｖｉｎｇ）」、および同等物は、同義語であり、非限定的方式で包括的に使用され、付加的要素、特徴、行為、動作等を除外しない。また、用語「または」は、その包括的意味において使用され（およびその排他的意味において使用されず）、したがって、例えば、要素のリストを接続するために使用されると、用語「または」は、リスト内の要素のうちの１つ、いくつか、または全てを意味する。加えて、本願および添付される請求項で使用されるような冠詞「ａ」、「ａｎ」、および「ｔｈｅ」は、別様に規定されない限り、「１つまたはそれを上回る」または「少なくとも１つ」を意味するように解釈されるべきである。
【0204】
本明細書で使用されるように、項目のリスト「のうちの少なくとも１つ」を指す語句は、単一の要素を含む、それらの項目の任意の組み合わせを指す。ある実施例として、「Ａ、Ｂ、またはＣのうちの少なくとも１つ」は、Ａ、Ｂ、Ｃ、ＡおよびＢ、ＡおよびＣ、ＢおよびＣ、およびＡ、Ｂ、およびＣを網羅することが意図される。語句「Ｘ、Ｙ、およびＺのうちの少なくとも１つ」等の接続文は、別様に具体的に記載されない限り、概して、項目、用語等がＸ、Ｙ、またはＺのうちの少なくとも１つであり得ることを伝えるために使用されるような文脈で別様に理解される。したがって、そのような接続文は、概して、ある実施形態が、Ｘのうちの少なくとも１つ、Ｙのうちの少なくとも１つ、およびＺのうちの少なくとも１つがそれぞれ存在するように要求することを示唆することを意図するものではない。
【0205】
同様に、動作は、特定の順序で図面に描写され得るが、これは、望ましい結果を達成するために、そのような動作が示される特定の順序で、または連続的順序で実施される、または全ての図示される動作が実施される必要はないと認識されるべきである。さらに、図面は、フローチャートの形態で１つまたはそれを上回る例示的プロセスを図式的に描写し得る。しかしながら、描写されない他の動作も、図式的に図示される例示的方法およびプロセス内に組み込まれることができる。例えば、１つまたはそれを上回る付加的動作が、図示される動作のいずれかの前に、その後に、それと同時に、またはその間に実施されることができる。加えて、動作は、他の実装において再配列される、または再順序付けられ得る。ある状況では、マルチタスクおよび並列処理が、有利であり得る。さらに、上記に説明される実装における種々のシステムコンポーネントの分離は、全ての実装におけるそのような分離を要求するものとして理解されるべきではなく、説明されるプログラムコンポーネントおよびシステムは、概して、単一のソフトウェア製品においてともに統合される、または複数のソフトウェア製品にパッケージ化され得ることを理解されたい。加えて、他の実装も、以下の請求項の範囲内である。いくつかの場合では、請求項に列挙されるアクションは、異なる順序で実施され、依然として、望ましい結果を達成することができる。
【図1】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】
【図8】
【図9A】
【図9B】
【図10A】
【図10B】
【図11】
【図12A】
【図12B】
【図13A】
【図13B】
【図14A】
【図14B】
【図15A】
【図15B】
【外国語明細書】