特許 6972105 固定距離の仮想現実システムおよび拡張現実システムならびに方法

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】6972105

(24)【登録日】2021年11月5日

(45)【発行日】2021年11月24日

(54)【発明の名称】固定距離の仮想現実システムおよび拡張現実システムならびに方法

(51)【国際特許分類】

   H04N 13/344 20180101AFI20211111BHJP

   H04N 13/366 20180101ALI20211111BHJP

   H04N 13/279 20180101ALI20211111BHJP

   H04N 13/128 20180101ALI20211111BHJP

   G06F 3/0346 20130101ALI20211111BHJP

   G02B 27/02 20060101ALI20211111BHJP

   G09G 5/00 20060101ALI20211111BHJP

   G09G 5/36 20060101ALI20211111BHJP

【ＦＩ】

   H04N13/344

   H04N13/366

   H04N13/279

   H04N13/128

   G06F3/0346 425

   G06F3/0346 426

   G02B27/02 Z

   G09G5/00 550C

   G09G5/36 510V

【請求項の数】9

【全頁数】30

(21)【出願番号】特願2019-505238(P2019-505238)

(86)(22)【出願日】2017年7月31日

(65)【公表番号】特表2019-531619(P2019-531619A)

(43)【公表日】2019年10月31日

(86)【国際出願番号】US2017044762

(87)【国際公開番号】WO2018026737

(87)【国際公開日】20180208

【審査請求日】2020年7月29日

(31)【優先権主張番号】62/370,117

(32)【優先日】2016年8月2日

(33)【優先権主張国】US

【早期審査対象出願】

【前置審査】

(73)【特許権者】

【識別番号】514108838

【氏名又は名称】マジック リープ， インコーポレイテッド

【氏名又は名称原語表記】Ｍａｇｉｃ Ｌｅａｐ，Ｉｎｃ．

(74)【代理人】

【識別番号】100078282

【弁理士】

【氏名又は名称】山本 秀策

(74)【代理人】

【識別番号】100113413

【弁理士】

【氏名又は名称】森下 夏樹

(74)【代理人】

【識別番号】100181674

【弁理士】

【氏名又は名称】飯田 貴敏

(74)【代理人】

【識別番号】100181641

【弁理士】

【氏名又は名称】石川 大輔

(74)【代理人】

【識別番号】230113332

【弁護士】

【氏名又は名称】山本 健策

(72)【発明者】

【氏名】ミラー， サミュエル エー．

(72)【発明者】

【氏名】ウェルチ， ウィリアム ハドソン

【審査官】 益戸 宏

(56)【参考文献】

【文献】 米国特許出願公開第２０１６／００２６２５３（ＵＳ，Ａ１）

【文献】 特開２０１２−０９６０２７（ＪＰ，Ａ）

【文献】 国際公開第２０１５／０４８４３４（ＷＯ，Ａ１）

(58)【調査した分野】（Int.Cl.，ＤＢ名）

Ｈ０４Ｎ １３／００

Ｇ０６Ｔ １９／００

Ｇ０６Ｆ ３／０３４６

Ｇ０２Ｂ ２７／０２

Ｇ０２Ｂ ３０／００

Ｇ０９Ｇ ５／００

(57)【特許請求の範囲】

【請求項1】

固定距離ディスプレイシステムであって、
光ビームを生成するように構成される光源と、
全内部反射によって前記光ビームの少なくとも一部を伝搬するように構成される光誘導光学要素と、
ユーザの頭部姿勢を計算するための第１の値を測定するように構成される第１の慣性測定ユニットと、
前記ユーザの身体姿勢を計算するための第３の値を測定するように構成される第３の慣性測定ユニットと、
カメラと
を備え、
前記カメラは、前記固定距離ディスプレイシステムおよび前記カメラの移動から生じるドリフトを補正するためのマシンビジョンオプティカルフロー分析のための画像を捕捉するように構成され、
前記固定距離ディスプレイシステムは、前記マシンビジョンオプティカルフロー分析の結果および前記ユーザの前記身体姿勢に対する前記ユーザの前記頭部姿勢に基づいて前記ユーザの視野内に身体中心仮想ユーザインターフェースを表示するように構成され、
前記身体中心仮想ユーザインターフェースは、前記ユーザの身体に対して固定距離でかつ固定位置に表示され、
前記身体中心仮想ユーザインターフェースは、前記ユーザの頭部に対して、前記ユーザの前記頭部の移動に伴って変化する距離でかつ位置に表示され、それにより、前記ユーザの前記頭部が前記ユーザの前記身体に対して移動するとき、前記身体中心仮想ユーザインターフェースは、前記ユーザの前記視野内に移動し、
前記固定距離ディスプレイシステムは、０．２ジオプタ〜０．６ジオプタを超えない寸法を有する３次元仮想画像を表示するように構成され、前記寸法は、前記ユーザによって選ばれた公差である、システム。

【請求項2】

前記第１の慣性測定ユニットは、前記ユーザの頭部に隣接して配置される、請求項１に記載のシステム。

【請求項3】

前記ユーザの前記頭部姿勢を計算するための第２の値を測定するように構成される第２の慣性測定ユニットをさらに備える、請求項２に記載のシステム。

【請求項4】

前記第２の慣性測定ユニットは、前記ユーザの頭部に隣接して配置される、請求項３に記載のシステム。

【請求項5】

前記第３の慣性測定ユニットは、前記ユーザの腰部に隣接して配置される、請求項１に記載のシステム。

【請求項6】

前記第１の慣性測定ユニット、前記第２の慣性測定ユニット、前記第３の慣性測定ユニット、および前記カメラは、前記ユーザの前記視野を前記ユーザの身体位置に合致させるように構成される、請求項３に記載のシステム。

【請求項7】

前記身体中心仮想ユーザインターフェースは、前記固定距離で前記ユーザの前記身体の周りの弧に表示される複数のユーザインターフェースオブジェクトを備える、請求項１に記載のシステム。

【請求項8】

非一過性コンピュータ可読媒体内に具現化されるコンピュータプログラム製品であって、前記コンピュータ可読媒体は、命令のシーケンスを記憶しており、前記命令は、プロセッサによって実行されると、前記プロセッサに、固定距離ディスプレイシステム上で表示するための方法を実行させ、前記方法は、
光ビームを生成することと、
全内部反射によって、前記光ビームの少なくとも一部を伝搬することと、
頭部姿勢に関連する第１の値を測定することと、
前記第１の値に基づいて、ユーザの前記頭部姿勢を計算することと、
身体姿勢に関連する第３の値を測定することと、
前記第３の値に基づいて、前記ユーザの前記身体姿勢を計算することと、
カメラによって画像を捕捉することと、
前記固定距離ディスプレイシステムおよび前記カメラの移動から生じるドリフトを補正するために前記画像に基づいてマシンビジョンオプティカルフロー分析を実施することと、
前記ユーザの身体に対して固定距離でかつ固定位置に、前記マシンビジョンオプティカルフロー分析の結果および前記ユーザの前記身体姿勢に対する前記ユーザの前記頭部姿勢に基づいて前記ユーザの視野内に身体中心仮想ユーザインターフェースを表示することと、
０．２ジオプタ〜０．６ジオプタを超えない寸法を有する３次元仮想画像を表示することと
を含み、
前記寸法は、前記ユーザによって選ばれた公差であり、
前記身体中心仮想ユーザインターフェースは、前記ユーザの頭部に対して、前記ユーザの前記頭部の移動に伴って変化する距離でかつ位置に表示され、それにより、前記ユーザの前記頭部が前記ユーザの前記身体に対して移動するとき、前記身体中心仮想ユーザインターフェースは、前記ユーザの前記視野内に移動する、コンピュータプログラム製品。

【請求項9】

前記身体中心仮想ユーザインターフェースは、前記固定距離で前記ユーザの前記身体の周りの弧に表示される複数のユーザインターフェースオブジェクトを備える、請求項８に記載のコンピュータプログラム製品。

【発明の詳細な説明】

【技術分野】

【0001】

（関連出願の相互参照）
本願は、２０１６年８月２日に出願され“ＦＩＸＥＤ−ＤＩＳＴＡＮＣＥ ＶＩＲＴＵＡＬ ＡＮＤ ＡＵＧＭＥＮＴＥＤ ＲＥＡＬＩＴＹ ＳＹＳＴＥＭＳ ＡＮＤ ＭＥＴＨＯＤＳ”と題された米国仮出願第６２／３７０，１１７号（代理人管理番号第ＭＬ．３００４０．００）に対する優先権を主張するものである。本願は、２０１６年２月２９日に出願され“ＶＩＲＴＵＡＬ ＡＮＤ ＡＵＧＭＥＮＴＥＤ ＲＥＡＬＩＳＴＹ ＳＹＳＴＥＭＳ ＡＮＤ ＭＥＴＨＯＤＳ”と題された同時係属中の米国仮出願第６２／３０１，５０２号（代理人管理番号ＭＬ．３００５９．００）、２０１６年５月４日に出願され“ＳＥＰＡＲＡＴＥＤ ＰＵＰＩＬ ＯＰＴＩＣＡＬ ＳＹＳＴＥＭＳ ＦＯＲ ＶＩＲＴＵＡＬ ＡＮＤ ＡＵＧＭＥＮＴＥＤ ＲＥＡＬＩＴＹ ＡＮＤ ＭＥＴＨＯＤＳ ＦＯＲ ＤＩＳＰＬＡＹＩＮＧ ＩＭＡＧＥＳ ＵＳＩＮＧ ＳＡＭＥ”と題された同時係属中の米国特許出願第１５／１４６，２９６号（代理人管理番号ＭＬ．２００５８．００）に関連している。上記特許出願の内容は、全体が開示されているかのように、その全体が参照により明示的かつ完全に本明細書中に援用される。

【背景技術】

【0002】

現代のコンピューティングおよびディスプレイ技術は、デジタル的に再現された画像またはその一部が、現実であるように見える、もしくはそのように知覚され得る様式においてユーザに提示される、仮想現実（「ＶＲ」）、拡張現実（「ＡＲ」）、および複合現実（「ＭＲ」）システムの開発を促進している。仮想現実、すなわち、「ＶＲ」シナリオは、典型的には、他の実際の実世界の視覚的入力に対して透明性を伴わずに、デジタルまたは仮想画像情報の提示を伴い、拡張現実、すなわち、「ＡＲ」シナリオは、典型的には、ユーザの周囲の実際の世界の視覚化の拡張として、デジタルまたは仮想画像情報の提示を伴う。複合現実、すなわち、「ＭＲ」システムもまた、シミュレートされたオブジェクトを実世界環境の中に導入するが、これらのオブジェクトは、典型的には、ＡＲシステムにおけるよりも優れた相互作用性の程度を特徴とする。シミュレートされた要素は、多くの場合、リアルタイムで双方向性であることができる。故に、ＡＲおよびＭＲシナリオは、他の実際の実世界の視覚的入力に対して少なくとも部分的透明性を伴うデジタルまたは仮想画像情報の提示を伴う。ヒトの視知覚系は、非常に複雑であって、他の仮想または実世界画像要素間における仮想画像要素の快適で、自然のような感覚で、かつ豊かな提示を促進する、ＶＲ／ＡＲ／ＭＲ技術を生成することは、困難である。

【0003】

脳の視覚中枢はまた、両眼およびその構成要素の相互に対する運動から有益な知覚情報を得る。相互に対する両眼の輻輳・開散運動（ｖｅｒｇｅｎｃｅ）（すなわち、眼の視線を収束させ、種々の距離においてオブジェクトに固定するための相互に向かって、またはそこから離れる、瞳孔の転動）は、眼のレンズの合焦（または「遠近調節（ａｃｃｍｍｏｄａｔｉｏｎ）」）と密接に関連付けられる。正常条件下では、眼のレンズの焦点を変化させる、すなわち、眼を遠近調節させ、異なる距離におけるオブジェクトに合焦させることは、「遠近調節−輻輳・開散運動反射」として知られる関係下、自動的に、同一距離までの輻輳・開散運動における整合変化を生じさせるであろう。同様に、輻輳・開散運動の変化は、正常条件下では、遠近調節の整合変化も誘起するであろう。本反射に逆らう作用は、（従来の立体視ＶＲ／ＡＲ／ＭＲ構成の大部分におけるように）眼精疲労、頭痛、または他の形態の不快感をユーザにもたらすことが知られている。

【0004】

立体視ウェアラブル眼鏡は、概して、３次元視点がヒト視覚系によって知覚されるように、若干異なる要素提示を伴う画像を表示するように構成される、左眼および右眼のための２つのディスプレイを特徴とする。そのような構成は、画像を３次元において知覚するために克服されなければならない、輻輳・開散運動と遠近調節との間の不整合（「輻輳・開散運動−遠近調節衝突」）に起因して、多くのユーザにとって不快であることが見出されている。実際、一部のユーザは、立体視構成に耐えることが不可能である。これらの限界は、ＶＲ／ＡＲ／ＭＲシステムに適用される。故に、大部分の従来のＶＲ／ＡＲ／ＭＲシステムは、部分的には、従来のシステムが、輻輳・開散運動−遠近調節衝突を含む、ヒト知覚系の基本的側面のいくつかに対処できないため、ユーザにとって快適かつ最大限に有用となるであろう様式において、豊かな両眼のための３次元体験を提示するために最適に好適ではない。

【0005】

完全ＶＲ／ＡＲ／ＭＲシステムはまた、仮想デジタルコンテンツを種々の知覚される位置およびユーザに対する距離において表示することが可能でなければならない。ＶＲ／ＡＲ／ＭＲシステムの設計はまた、仮想デジタルコンテンツを送達する際のシステムの速度、仮想デジタルコンテンツの品質、ユーザの射出瞳距離（輻輳・開散運動−遠近調節衝突に対処する）、システムのサイズおよび可搬性、ならびに他のシステムおよび光学課題を含む、多数の他の課題を提示する。

【0006】

これらの問題（輻輳・開散運動−遠近調節衝突を含む）に対処するための１つの可能性として考えられるアプローチは、画像を複数の深度平面に投影することである。本タイプのシステムを実装するために、１つのアプローチは、多数の光学要素（例えば、光源、プリズム、格子、フィルタ、スキャン光学、ビームスプリッタ、ミラー、ハーフミラー、シャッタ、接眼レンズ等）を使用して、画像を十分に多数の（例えば、６つの）深度平面において投影することである。本アプローチに関する問題は、このように多数の構成要素を使用することが、必然的に、望ましいものより大きい形状因子を要求し、システムサイズが縮小され得る程度を限定することである。これらのシステム内の多数の光学要素もまた、より長い光学経路をもたらし、それにわたって、光およびその中に含有される情報が、劣化され得る。これらの設計問題は、煩雑なシステムをもたらし、これはまた、電力集約的でもある。本明細書に説明されるシステムおよび方法は、固定距離複合現実光学システムを提示することによって、これらの課題に対処するように構成される。

【発明の概要】

【課題を解決するための手段】

【0007】

一実施形態では、固定距離ディスプレイシステムは、光ビームを生成するように構成される、光源を含む。本システムはまた、全内部反射によって光ビームの少なくとも一部を伝搬するように構成される、光誘導光学要素を含む。本システムはさらに、ユーザの頭部姿勢を計算するための第１の値を測定するように構成される、第１の慣性測定ユニットを含む。さらに、本システムは、マシンビジョンオプティカルフロー分析のための画像を捕捉するように構成される、カメラを含む。ディスプレイシステムは、仮想画像を単一の所定の光学平面の公差範囲内にのみ表示するように構成される。

【0008】

１つ以上の実施形態では、第１の慣性測定ユニットは、ユーザの頭部に隣接して配置される。本システムはまた、ユーザの頭部姿勢を計算するための第２の値を測定するように構成される、第２の慣性測定ユニットを含んでもよい。第２の慣性測定ユニットは、ユーザの頭部に隣接して配置されてもよい。本システムはまた、ユーザの身体姿勢を計算するための第３の値を測定するように構成される、第３の慣性測定ユニットを含んでもよい。第３の慣性測定ユニットは、ユーザの腰部に隣接して配置されてもよい。第１の慣性測定ユニット、第２の慣性測定ユニット、第３の慣性測定ユニット、およびカメラは、固定距離ディスプレイシステムの視野をユーザの身体位置に合致させるように構成されてもよい。

【0009】

１つ以上の実施形態では、公差範囲は、単一の所定の光学平面の０．２ジオプタ〜０．６ジオプタ以内である。ディスプレイシステムは、３次元仮想画像を表示するように構成されてもよい。ディスプレイシステムは、０．２ジオプタ〜０．６ジオプタを超えない寸法を有する３次元仮想画像を表示するように構成されてもよい。

【0010】

別の実施形態では、ディスプレイ方法は、頭部姿勢に関連する第１の値を測定するステップを含む。本方法はまた、第１の値に基づいて、ユーザの頭部姿勢を計算するステップを含む。本方法はさらに、画像を捕捉するステップを含む。さらに、本方法は、画像に基づいて、マシンビジョンオプティカルフロー分析を実施するステップを含む。加えて、本方法は、光ビームを生成するステップを含む。本方法はまた、全内部反射によって、光ビームの少なくとも一部を伝搬するステップを含む。本方法はさらに、仮想画像を単一の所定の光学平面の公差範囲内にのみ表示するステップを含む。

【0011】

１つ以上の実施形態では、本方法はまた、頭部姿勢に関連する第２の値を測定するステップを含む。本方法はさらに、ユーザの頭部姿勢を第１の値および第２の値から計算するステップを含んでもよい。さらに、本方法は、身体姿勢に関連する第３の値を測定するステップを含んでもよい。加えて、本方法は、ユーザの身体姿勢を第３の値から計算するステップを含んでもよい。本方法はまた、第１の値、第２の値、第３の値、および画像を分析し、ユーザの視野をユーザの身体位置に合致させるステップを含んでもよい。

【0012】

１つ以上の実施形態では、公差範囲は、単一の所定の光学平面の０．２ジオプタ〜０．６ジオプタ以内である。本方法はまた、３次元仮想画像を表示するステップを含んでもよい。表示される３次元仮想画像は、０．２ジオプタ〜０．６ジオプタを超えない寸法を有してもよい。

【0013】

さらに別の実施形態では、コンピュータプログラム製品が、非一過性コンピュータ可読媒体内に具現化され、コンピュータ可読媒体は、プロセッサによって実行されると、プロセッサに、表示するための方法を実行させ、方法は、光ビームを生成するステップを含む、その上に記憶される命令のシーケンスを有する。本方法はまた、全内部反射によって、光ビームの少なくとも一部を伝搬するステップを含む。本方法はさらに、頭部姿勢に関連する第１の値を測定するステップを含む。さらに、本方法は、第１の値に基づいて、ユーザの頭部姿勢を計算するステップを含む。加えて、本方法は、画像を捕捉するステップを含む。本方法はまた、画像に基づいて、マシンビジョンオプティカルフロー分析を実施するステップを含む。本方法はさらに、仮想画像を単一の所定の光学平面の公差範囲内にのみ表示するステップを含む。

【0014】

さらに別の実施形態では、身体中心ディスプレイ方法は、頭部姿勢に関連する第１の値を測定するステップを含む。本方法はまた、第１の値に基づいて、ユーザの頭部姿勢を計算するステップを含む。本方法はさらに、身体姿勢に関連する第２の値を測定するステップを含む。さらに、本方法は、ユーザの身体姿勢を第２の値から計算するステップを含む。加えて、本方法は、頭部姿勢および身体姿勢に基づいて、単一の所定の光学平面の公差範囲内にのみ表示されるように構成される仮想画像を生成するステップを含む。本方法はまた、仮想画像を単一の所定の光学平面の公差範囲内にのみ表示するステップを含む。
本願明細書は、例えば、以下の項目も提供する。
（項目１）
固定距離ディスプレイシステムであって、
光ビームを生成するように構成される光源と、
全内部反射によって前記光ビームの少なくとも一部を伝搬するように構成される光誘導光学要素と、
ユーザの頭部姿勢を計算するための第１の値を測定するように構成される第１の慣性測定ユニットと、
マシンビジョンオプティカルフロー分析のための画像を捕捉するように構成されるカメラと
を備え、
前記ディスプレイシステムは、仮想画像を単一の所定の光学平面の公差範囲内にのみ表示するように構成される、システム。
（項目２）
前記第１の慣性測定ユニットは、前記ユーザの頭部に隣接して配置される、項目１に記載のシステム。
（項目３）
前記ユーザの頭部姿勢を計算するための第２の値を測定するように構成される第２の慣性測定ユニットをさらに備える、項目２に記載のシステム。
（項目４）
前記第２の慣性測定ユニットは、前記ユーザの頭部に隣接して配置される、項目３に記載のシステム。
（項目５）
前記ユーザの身体姿勢を計算するための第３の値を測定するように構成される第３の慣性測定ユニットをさらに備える、項目４に記載のシステム。
（項目６）
前記第３の慣性測定ユニットは、前記ユーザの腰部に隣接して配置される、項目５に記載のシステム。
（項目７）
前記第１の慣性測定ユニット、前記第２の慣性測定ユニット、前記第３の慣性測定ユニット、および前記カメラは、前記固定距離ディスプレイシステムの視野を前記ユーザの身体位置に合致させるように構成される、項目６に記載のシステム。
（項目８）
前記公差範囲は、前記単一の所定の光学平面の０．２ジオプタ〜０．６ジオプタ以内である、項目１に記載のシステム。
（項目９）
前記ディスプレイシステムは、３次元仮想画像を表示するように構成される、項目１に記載のシステム。
（項目１０）
前記ディスプレイシステムは、０．２ジオプタ〜０．６ジオプタを超えない寸法を有する３次元仮想画像を表示するように構成される、項目９に記載のシステム。
（項目１１）
ディスプレイ方法であって、
頭部姿勢に関連する第１の値を測定することと、
前記第１の値に基づいて、ユーザの頭部姿勢を計算することと、
画像を捕捉することと、
前記画像に基づいて、マシンビジョンオプティカルフロー分析を実施することと、
光ビームを生成することと、
全内部反射によって、前記光ビームの少なくとも一部を伝搬することと、
仮想画像を単一の所定の光学平面の公差範囲内にのみ表示することと
を含む、方法。
（項目１２）
前記頭部姿勢に関連する第２の値を測定することをさらに含む、項目１１に記載の方法。
（項目１３）
前記ユーザの頭部姿勢を前記第１の値および前記第２の値から計算することをさらに含む、項目１２に記載の方法。
（項目１４）
身体姿勢に関連する第３の値を測定することをさらに含む、項目１３に記載の方法。
（項目１５）
前記ユーザの身体姿勢を前記第３の値から計算することをさらに含む、項目１４に記載の方法。
（項目１６）
前記第１の値、前記第２の値、前記第３の値、および前記画像を分析し、前記ユーザの視野を前記ユーザの身体位置に合致させることをさらに含む、項目１５に記載の方法。
（項目１７）
前記公差範囲は、前記単一の所定の光学平面の０．２ジオプタ〜０．６ジオプタ以内である、項目１１に記載の方法。
（項目１８）
３次元仮想画像を表示することをさらに含む、項目１１に記載の方法。
（項目１９）
前記表示される３次元仮想画像は、０．２ジオプタ〜０．６ジオプタを超えない寸法を有する、項目１８に記載の方法。
（項目２０）
非一過性コンピュータ可読媒体内に具現化されるコンピュータプログラム製品であって、前記コンピュータ可読媒体は、その上に記憶される命令のシーケンスを有し、前記命令は、プロセッサによって実行されると、前記プロセッサに、表示するための方法を実行させ、前記方法は、
光ビームを生成することと、
全内部反射によって、前記光ビームの少なくとも一部を伝搬することと、
頭部姿勢に関連する第１の値を測定することと、
前記第１の値に基づいて、前記ユーザの頭部姿勢を計算することと、
画像を捕捉することと、
前記画像に基づいて、マシンビジョンオプティカルフロー分析を実施することと、
仮想画像を単一の所定の光学平面の公差範囲内にのみ表示することと
を含む、コンピュータプログラム製品。
（項目２１）
身体中心ディスプレイ方法であって、
頭部姿勢に関連する第１の値を測定することと、
前記第１の値に基づいて、ユーザの頭部姿勢を計算することと、
身体姿勢に関連する第２の値を測定することと、
前記ユーザの身体姿勢を前記第２の値から計算することと、
前記頭部姿勢および前記身体姿勢に基づいて、単一の所定の光学平面の公差範囲内にのみ表示されるように構成される仮想画像を生成することと、
前記仮想画像を前記単一の所定の光学平面の公差範囲内にのみ表示することと
を含む、方法。

【図面の簡単な説明】

【0015】

図面は、本発明の種々の実施形態の設計および可用性を図示する。図は、正確な縮尺で描かれておらず、類似構造または機能の要素は、図全体を通して同一参照番号によって表されることに留意されたい。本発明の種々の実施形態の前述および他の利点ならびに目的を得る方法をより深く理解するために、簡単に前述された発明を実施するための形態が、付随の図面に図示されるその具体的実施形態を参照することによって与えられるであろう。これらの図面は、本発明の典型的実施形態のみを描写し、その範囲の限定として見なされないことを理解した上で、本発明は、付随の図面の使用を通して付加的具体性および詳細とともに記載ならびに説明されるであろう。

【0016】

【図1】図１は、多平面焦点完全光学システムの焦点面を描写する、略図である。

【図2】図２は、一実施形態による、単平面焦点固定距離光学システムの焦点面を描写する、略図である。

【図3】図３および４は、２つの実施形態による、単平面焦点固定距離光学システムのユーザの個別の視野の概略図である。

【図4】図３および４は、２つの実施形態による、単平面焦点固定距離光学システムのユーザの個別の視野の概略図である。

【図5】図５は、一実施形態による、光学システムの詳細な概略図である。

【図6】図６は、一実施形態による、光学システムの光誘導光学要素の詳細な概略図である。

【図7】図７は、一実施形態による、光学システムの光誘導光学要素の詳細な斜視図である。

【図8A】図８Ａ−８Ｄおよび９Ａ−９Ｄは、種々の実施形態による、拡張現実／ユーザ識別システムの概略図である。

【図8B】図８Ａ−８Ｄおよび９Ａ−９Ｄは、種々の実施形態による、拡張現実／ユーザ識別システムの概略図である。

【図8C】図８Ａ−８Ｄおよび９Ａ−９Ｄは、種々の実施形態による、拡張現実／ユーザ識別システムの概略図である。

【図8D】図８Ａ−８Ｄおよび９Ａ−９Ｄは、種々の実施形態による、拡張現実／ユーザ識別システムの概略図である。

【図9】図８Ａ−８Ｄおよび９Ａ−９Ｄは、種々の実施形態による、拡張現実／ユーザ識別システムの概略図である。

【図10】図１０は、多平面焦点完全拡張現実システムの詳細な概略図である。

【図11】図１１および１２は、２つの実施形態による、単平面焦点固定距離拡張現実システムの詳細な概略図である。

【図12】図１１および１２は、２つの実施形態による、単平面焦点固定距離拡張現実システムの詳細な概略図である。

【図13】図１３は、一実施形態による、単平面焦点固定距離拡張現実システムのユーザの視野を図示する。

【図14】図１４は、ユーザの頭部がユーザの身体に対して回転後の、図１３に描写される実施形態による、単平面焦点固定距離拡張現実システムのユーザの視野を図示する。

【図15】図１５および１６は、２つの実施形態による、仮想オブジェクトを身体中心様式において単平面焦点固定距離拡張現実システムのユーザに表示するための方法を描写する、フローチャートである。

【図16】図１５および１６は、２つの実施形態による、仮想オブジェクトを身体中心様式において単平面焦点固定距離拡張現実システムのユーザに表示するための方法を描写する、フローチャートである。

【発明を実施するための形態】

【0017】

本発明の種々の実施形態は、単一実施形態または複数の実施形態において固定距離複合現実光学システムを実装するためのシステム、方法、および製造品を対象とする。本発明の他の目的、特徴、および利点は、発明を実施するための形態、図、および請求項に説明される。

【0018】

ここで、種々の実施形態が、当業者が本発明を実践することを可能にするように、本発明の例証的実施例として提供される、図面を参照して詳細に説明されるであろう。留意すべきこととして、以下の図および実施例は、本発明の範囲を限定することを意味するものではない。本発明のある要素が、公知の構成要素（または方法もしくはプロセス）を使用して部分的または完全に実装され得る場合、本発明の理解のために必要なそのような公知の構成要素（または方法もしくはプロセス）のそれらの一部のみが、説明され、そのような公知の構成要素（または方法もしくはプロセス）の他の部分の発明を実施するための形態は、本発明を曖昧にしないように、省略されるであろう。さらに、種々の実施形態は、例証として本明細書に参照される構成要素の現在および将来的公知の均等物を包含する。

【0019】

光学システムは、ＡＲ／ＭＲシステムから独立して実装されてもよいが、以下の多くの実施形態は、例証目的のためだけにＡＲ／ＭＲシステムに関係して説明される。
（問題およびソリューションの概要）

【0020】

仮想画像を種々の深度において生成するための１つのタイプの光学システムは、３−Ｄ体験／シナリオの品質（例えば、結像面の数）および画像の品質（例えば、画像色の数）が向上するにつれて、その数が増加し、それによって、ＶＲ／ＡＲ／ＭＲシステムの複雑性、サイズ、ならびにコストを増加させる、多数の光学構成要素（例えば、光源、プリズム、格子、フィルタ、スキャン光学、ビームスプリッタ、ミラー、ハーフミラー、シャッタ、接眼レンズ等）を含む。３−Ｄシナリオ／画質の向上に伴う光学システムのサイズの増加は、ＶＲ／ＡＲ／ＭＲシステムの最小サイズに限界を課し、光学効率が低下した煩雑なシステムをもたらす。

【0021】

以下の開示は、光学システムにより少ないコンポーネントおよび増加される効率を提供することによって、問題に対処する、眼毎の単平面焦点光学要素を使用して、３−Ｄ知覚を単一の所定の距離の周囲に作成するためのシステムおよび方法の種々の実施形態を説明する。特に、本明細書に説明されるシステムは、複合現実シナリオのために、最小限の光学システムコンポーネントのセットを利用して、仮想オブジェクトをユーザから所定の距離に表示するための光学システムを提供する。本光学システム設計は、そのようなシステムの機能を限定し、仮想オブジェクトを所定の距離に表示することによって、ＶＲ／ＡＲ／ＭＲシステムのサイズを簡略化および低減させる。
（完全拡張現実システム）

【0022】

固定距離複合現実光学システムの実施形態の詳細を説明する前に、本開示は、ここで、仮想オブジェクトがユーザの光学軸（例えば、無限遠からユーザに隣接する点まで）に沿った複数の位置に現れる、完全ＡＲシナリオを提示するように構成される、関連完全ＡＲ／ＭＲシステムの簡単な説明を提供するであろう。複合現実光学システム（完全および／または固定距離）は、ＡＲ／ＭＲシステムから独立して実装されてもよいが、以下の多くのシステムは、例証目的のためだけに、ＡＲ／ＭＲシステムに関連して説明される。種々の拡張現実ディスプレイシステムが、弁理士整理番号第ＭＬ−３００１１−ＵＳ号下で２０１４年１１月２７日に出願され、「ＶＩＲＴＵＡＬ ＡＮＤ ＡＵＧＵＭＥＮＴＥＤ ＲＥＡＬＩＴＹ ＳＹＳＴＭＳ ＡＮＤ ＭＥＴＨＯＤＳ」と題された共同所有の米国特許出願第１４／５５５，５８５号（その内容は、完全に記載される場合と同様に、参照することによって明示的かつ完全に本明細書に組み込まれる）に議論されている。

【0023】

ユーザの眼毎に完全ＡＲ／ＭＲシステムを実装するための１つの可能性として考えられるアプローチは、深度平面情報が埋設され、個別の深度平面から生じるよう現れる画像を生成する、複数の体積位相ホログラム、表面起伏ホログラム、または光誘導光学要素（「ＬＯＥ」）を使用する。言い換えると、回折パターン、すなわち、回折光学要素（「ＤＯＥ」）は、コリメートされた光（略平面波面を伴う光ビーム）がＬＯＥに沿って実質的に全内部反射されるにつれて、複数の場所において回折パターンを交差し、少なくとも部分的にユーザの眼に向かって出射するように、ＬＯＥ内に埋設される、またはその上に刻設されてもよい。ＤＯＥは、ＬＯＥからのそれを通して出射する光が接するように構成され、特定の深度平面から生じるよう現れる。コリメートされた光は、光学凝集レンズ（「コンデンサ」）を使用して、生成されてもよい。

【0024】

例えば、第１のＬＯＥは、光学無限深度平面から生じるよう現れる、コリメートされた光を眼に送達するように構成されてもよい（０ジオプトリ）。別のＬＯＥは、２メートルの距離から生じるよう現れる、コリメートされた光を送達するように構成されてもよい（１／２ジオプトリ）。さらに別のＬＯＥは、１メートルの距離から生じるよう現れる、コリメートされた光を送達するように構成されてもよい（１ジオプトリ）。スタックされたＬＯＥアセンブリを使用することによって、複数の深度平面が生成され、各ＬＯＥが特定の深度平面から生じるよう現れる画像を表示するように構成され得ることが理解され得る。スタックは、任意の数のＬＯＥを含んでもよいことを理解されたい。しかしながら、少なくともＮ個のスタックされたＬＯＥが、Ｎ個の深度平面を生成するために要求される。さらに、Ｎ、２Ｎ、または３Ｎ個のスタックされたＬＯＥが、ＲＧＢ着色画像をＮ個の深度平面において生成するために使用されてもよい。

【0025】

完全３−Ｄ ＡＲシナリオ内の仮想コンテンツをユーザに提示するために、完全ＡＲ／ＭＲシステムは、Ｚ方向における種々の深度平面から（すなわち、ユーザの眼から直交して離れるように）生じるよう現れるように、仮想コンテンツの画像をユーザの眼の中に投影する。言い換えると、仮想コンテンツは、ユーザが、非常に近くにある、または無限距離にある、もしくはその間の任意の距離にあるようにオブジェクトを知覚し得るように、ＸおよびＹ方向（すなわち、ユーザの眼の中心視覚軸に直交する８Ｄ平面）において変化し得るだけではなく、また、Ｚ方向にも変化するように現れ得る。完全ＡＲ／ＭＲシステムでは、ユーザは、複数のオブジェクトを異なる深度平面において同時に感知し得る。例えば、ユーザには、無限遠から現れ、ユーザに向かって走ってくる、仮想ドラゴンが見え得る。代替として、ユーザには、ユーザから３メートル離れた距離における仮想鳥と、ユーザから腕の長さ（約１メートル）にある仮想コーヒーカップとが同時に見え得る。

【0026】

多平面焦点完全ＡＲ／ＭＲシステムは、ユーザの眼からＺ方向に個別の固定距離に位置する複数の深度平面の一部または全部上に画像を投影させることによって、可変深度の知覚を生成する。ここで図１を参照すると、多平面焦点完全ＡＲ／ＭＲシステムは、典型的には、固定深度平面２０２（例えば、図１に示される６つの深度平面２０２）においてフレームを表示することを理解されたい。１つの例示的多平面焦点完全ＡＲ／ＭＲシステムは、Ｚ方向に６つの固定深度平面２０２を有する。６つの深度平面２０２のうちの１つ以上のものにおいて仮想コンテンツを生成する際、３−Ｄ知覚が、ユーザが１つ以上の仮想オブジェクトをユーザの眼から可変距離において知覚するように生成される。ヒトの眼が、離れて現れるオブジェクトより近い距離のオブジェクトにより敏感であることを前提として、図１に示されるように、眼により近いほど、より多くの深度平面２０２が生成される。他のシステムでは、深度平面２０２は、相互から等距離だけ離れて設置されてもよい。

【0027】

深度平面位置２０２は、典型的には、メートル単位で測定された焦点距離の逆数と等しい屈折力の単位である、ジオプトリで測定される。例えば、一システムでは、深度平面１は、１／３ジオプトリだけ離れてもよく、深度平面２は、０．３ジオプトリだけ離れてもよく、深度平面３は、０．２ジオプトリだけ離れてもよく、深度平面４は、０．１５ジオプトリだけ離れてもよく、深度平面５は、０．１ジオプトリだけ離れてもよく、深度平面６は、無限遠を表してもよい（すなわち、０ジオプトリ離れている）。他のシステムは、他の距離／ジオプトリで深度平面２０２を生成してもよいことを理解されたい。したがって、仮想コンテンツを方略的に設置された深度平面２０２に生成する際、ユーザは、仮想オブジェクトを３次元で知覚可能となる。例えば、ユーザは、深度平面１に表示されるとき、その近くにあるように第１の仮想オブジェクトを知覚し得る一方、別の仮想オブジェクトは、深度平面６における無限遠において現れる。代替として、仮想オブジェクトは、仮想オブジェクトがユーザに非常に近接して現れるまで、最初に、深度平面６で、次いで、深度平面５で表示される等となってもよい。前述の実施例は、例証目的のために大幅に簡略化されていることを理解されたい。別のシステムでは、全６つの深度平面は、ユーザから離れた特定の焦点距離に集中されてもよい。例えば、表示されるべき仮想コンテンツが、ユーザから１／２メートル離れたコーヒーカップである場合、全６つの深度平面は、コーヒーカップの種々の断面で生成され、ユーザにコーヒーカップの非常に粒度の細かい３Ｄビューを与え得る。

【0028】

一システムでは、完全ＡＲ／ＭＲシステムは、多平面焦点システムとして機能してもよい。言い換えると、６つの固定された深度平面から生じるよう現れる画像が、光源と迅速に連動して生成され、画像情報をＬＯＥ１、次いで、ＬＯＥ２、次いで、ＬＯＥ３等と迅速に伝達するように、全６つのＬＯＥが、同時に照明されてもよい。例えば、光学無限遠における空の画像を含む、所望の画像の一部が、時間１において出射されてもよく、光のコリメーションを保持するＬＯＥ１０９０（例えば、図１からの深度平面６）が、利用されてもよい。次いで、より近い木の枝の画像が、時間２において出射されてもよく、１０メートル離れた深度平面から生じるよう現れる画像を生成するように構成されるＬＯＥ１０９０（例えば、図１からの深度平面５）が、利用されてもよい。次いで、ペンの画像が、時間３において出射されてもよく、１メートル離れた深度平面から生じるよう現れる画像を生成するように構成されるＬＯＥ１０９０が、利用されてもよい。本タイプのパラダイムは、ユーザの眼および脳（例えば、視覚野）が同一画像の全部分であるよう入力を知覚するような迅速時間順次方式（例えば、３６０Ｈｚ）で繰り返されることができる。

【0029】

完全ＡＲ／ＭＲシステムは、Ｚ軸（すなわち、深度平面）に沿った種々の場所から生じるよう現れ、完全３−Ｄ体験のための画像を生成する、画像を投影することが要求される（すなわち、光ビームを発散または収束させることによって）。本願で使用されるように、「光ビーム」は、限定ではないが、光源から放出する光エネルギー（可視および非可視光エネルギーを含む）の指向性投影を含む。種々の深度平面から生じるよう現れる画像を生成することは、その画像のために、ユーザの眼の輻輳・開散運動および遠近調節に順応または同期させ、輻輳・開散運動−遠近調節衝突を最小限にする、または排除する。

【0030】

種々の深度平面から生じるよう現れる画像を投影するための完全ＡＲシナリオ機能要件は、最小複雑性、サイズ、およびコスト限界を完全ＡＲ／ＭＲシステムに課す。本明細書に説明される固定距離ＡＲ／ＭＲシステムは、システムの機能を低減させることによって、これらの限界を回避する。
（固定距離拡張現実システム）

【0031】

固定距離ＡＲ／ＭＲシステムは、部分的ＡＲ体験／シナリオのために、仮想オブジェクトをユーザから離れるＺ方向（すなわち、「深度平面」）における単一の所定の距離の近傍／それに隣接して（すなわち、約０．２ジオプタ〜約０．６ジオプタ以内に）表示するように構成される。ここで図２を参照すると、単平面焦点固定距離ＡＲ／ＭＲシステムは、典型的には、フレームを１つの固定される深度平面２０２に表示することを理解されたい。固定距離ＡＲ／ＭＲシステムのユーザのための視覚的効果は、ユーザが、表示される画像の仮想ドームを、ユーザの正面に、かつそれを中心として、提示されることである。ドーム２０６は、図３では、２−Ｄ弧として表され、表示される画像の仮想ドーム２０６は、ユーザの正面にある。ユーザは、約５０°の定常左右視野（「ＦＯＶ」）２０８を有し得るが、効果的Ｌ／Ｒ ＦＯＶは、「身体中心」システム（以下に説明される）では、図３に示されるように、頭部回転に起因して、約１８０°となるであろう。加えて、ユーザのＦＯＶは、上下頭部移動に伴って、ドーム２０６全体を網羅することができる。故に、固定距離ＡＲ／ＭＲシステムは、ユーザ２０４を囲繞するドーム２０６全体にわたって、画像情報をユーザに提示することができる。定常ユーザが身体および頭部回転の自由度を有する、別の実施形態では、効果的ＦＯＶは、図４に示されるように、球体２０９全体であることができる。図３および４は、２−Ｄにおいて固定距離ＡＲ／ＭＲシステムによって提示される画像のドーム２０６および球体２０９を表すが、ドーム２０６および球体２０９は、３次元表面であることを理解されたい。

【0032】

固定距離ＡＲ／ＭＲシステムは、眼毎に、所定の深度平面の公差範囲（例えば、約０．２ジオプタ〜約０．６ジオプタ以内）から生じるよう現れる画像を生成するための深度平面情報を内蔵する、単一体積位相ホログラム、表面起伏ホログラム、または光誘導光学要素（「ＬＯＥ」）とともに実装されることができる。固定距離ＡＲ／ＭＲシステムは、立体視技法（すなわち、眼毎に、個別の画像を所定の距離の公差範囲内のＺ方向に若干異なる距離に表示する）を使用することによって、３−Ｄ効果を生成することができる。

【0033】

ヒト視覚系は、輻輳・開散運動に対して非常に正確であるが、輻輳・開散運動−遠近調節反射関連問題が生じる前に、遠近調節（すなわち、焦点）における差異にある程度の公差を有する。特定のユーザに特有であるが、遠近調節における公差／不確実性は、典型的には、輻輳・開散運動に対して約０．２ジオプタ〜約０．６ジオプタで生じる。故に、本明細書に開示される固定距離ＡＲ／ＭＲシステムは、遠近調節における差異のヒト視覚系の公差を利用し、３−Ｄオブジェクトを、Ｚ方向における単一の所定の距離の近傍に、特に、ユーザの手の届く範囲に表示する。

【0034】

ジオプタは、ユーザの眼からの距離の逆数であるため（図１参照）、ジオプタ単位で一定である、遠近調節における公差／不確実性は、線形距離の観点から変動する。例証目的のために、ユーザから１００ｍ（＝１０ジオプタ）の第１の距離では、０．２ジオプタ（典型的公差の下限範囲）の追加は、０．８３ｍの第２の距離、すなわち、−１７ｃｍの変化をもたらすであろう。同様に、反対方向における０．２ジオプタは、１．２５ｍの距離に対応し、１．００ｍに表示される場合、０．２ジオプタの遠近調節公差内で視認されるべきコンテンツに関して、０．８３ｍ〜１．２５ｍの総範囲（言い換えると、固定距離ＡＲ／ＭＲシステムがコンテンツを０．２ジオプタの公差内の１．００ｍに表示するためには、４２ｃｍの範囲）となる。

【0035】

他方では、ユーザから０．５０ｍ（＝２０ジオプタ）の第１の距離に関して、０．６ジオプタの追加は、０．３８ｍの第２の距離、すなわち、−１２ｃｍの変化をもたらすであろう。０．５０ｍの第１の距離から離れる対応する０．６ジオプタの移動は、固定ＡＲ／ＭＲシステムがコンテンツを０．６ジオプタの公差内の０．５ｍに表示するために、０．７１ｍの距離、すなわち、２１ｃｍの変化または３３ｃｍの総範囲をもたらす。０．２ジオプタ公差を伴う１．００ｍ固定距離ＡＲ／ＭＲシステムの４２ｃｍ範囲と比較して、公差を０．６（ジオプタ公差の他方の極限）まで３倍にすることは、実際には、より近い０．５ｍの第１の距離システムに対して、コンテンツ投影の範囲を減少させた。故に、より精密な（すなわち、下限）遠近調節公差を伴う固定距離システムは、コンテンツをユーザからより離れた固定距離に表示するために、より優れた機能範囲を有するであろう。

【0036】

単一光学平面の周囲に本発明の公差範囲を採用する、固定距離ＡＲ／ＭＲシステムは、コンテンツ表示／レンダリングが、そのようなコンテンツがユーザからある範囲の所定の光学場所内に、好ましくは、より大きい距離に現れ、異なるユーザを横断して公差範囲を最大限にするであろうときのみ可能にされる場合、機能性を著しく簡略化することができる。同様に、いくつかの実施形態では、あるコンテンツは、固定距離ＡＲ／ＭＲシステムの所定の光学平面の位置を確立する屈折力が、既知である、またはユーザの特定の好ましい公差が決定される場合のみ、ある範囲内に現れるように構成されてもよい。

【0037】

表１は、いくつかの実施形態による、ジオプタ公差内でのコンテンツ表示を可能にする、ユーザから固定距離における所定の光学平面に対する範囲を描写する。表１は、コンテンツ表示のより大きな範囲を可能にするより離れた光学平面とは対照的に、ジオプタ公差にかかわらず、コンテンツがユーザ近傍光学平面（０．５ｍの所定の光学平面距離参照）に対して表示され得る、厳密な範囲を図示する。

【表1】

【0038】

いくつかの実施形態では、固定距離ＡＲ／ＭＲシステムのための公差範囲は、ある範囲内に現れないコンテンツがレンダリングされず、したがって、バッテリ寿命を節約するであろうように、レンダリングドメインを設定することができる、またはコンテンツは、所定の光学平面の公差内に留まるように、ユーザからある距離内に現れるように具体的にプログラムされることができる。

【0039】

いくつかの実施形態では、ユーザは、機能性（すなわち、事実上、コンテンツをある距離、例えば、仮想コンピュータ画面内にレンダリングする必要のみがあるであろう、固定距離ＡＲ実施形態を選定する）、または処方箋（すなわち、あるジオプタ公差を超えるとき、ユーザが不快感を体験することを認識する）のいずれかによって、公差を選んでもよい。そのような選択は、全てのユースケースに役に立つことが意図される、より複雑なＡＲ／ＭＲシステムとは対照的に、特定の設定のためにカスタマイズおよび簡略化されたＡＲデバイスを選択することに類似する。

【0040】

図５は、画像を単一深度平面において投影させるための固定距離光学システム１００の一部を描写する。システム１００は、光源１２０と、それと関連付けられた回折光学要素（図示せず）および内部結合格子１９２（「ＩＣＧ」）を有する、ＬＯＥ１９０とを含む。回折光学要素は、体積または表面起伏を含む、任意のタイプであってもよい。一実施形態では、ＩＣＧ１９２は、ＬＯＥ１９０の反射モードアルミ被覆部分であることができる。別の実施形態では、ＩＣＧ１９２は、ＬＯＥ１９０の透過回折部分であることができる。システム１００が使用されているとき、光源１２０から「仮想」光ビーム２１０は、ユーザの眼への表示のために、実質的全内部反射（「ＴＩＲ」）によって、ＩＣＧ１９２を介して、ＬＯＥ１９０に入射し、ＬＯＥ１９０に沿って伝搬する。光ビーム２１０は、非存在「仮想」オブジェクトまたはその一部の画像をシステム１００によって指向されるようにエンコードするため、「仮想」である。１つのみのビーム２１０が図５に図示されるが、画像をエンコードする多数のビームが、同一ＩＣＧ１９２を通して広範囲の角度からＬＯＥ１９０に入射し得ることを理解されたい。入射の角度の範囲は、システム１００に関して達成可能なＦＯＶに関連する。ＬＯＥの中に「入射する」または「受容される」光ビームは、限定ではないが、実質的ＴＩＲによってＬＯＥに沿って伝搬するようにＬＯＥと相互作用する、光ビームを含む。図５に描写されるシステム１００は、種々の光源１２０（例えば、ＬＥＤ、ＯＬＥＤ、レーザ、およびマスクされた広面積／広帯域エミッタ）を含むことができる。他の実施形態では、光源１２０からの光はまた、光ファイバケーブル（図示せず）を介して、ＬＯＥ１９０に送達されてもよい。

【0041】

図６に示されるように、固定距離光学システム１００内のＬＯＥ１９０の一部は、射出瞳エクスパンダ１９６（「ＥＰＥ」）として機能し、Ｙ方向における光源１２０の開口数を増加させ、それによって、システム１００の分解能を増加させることができる。光源１２０は、小径／スポットサイズの光を生成するため、ＥＰＥ１９６は、ＬＯＥ１９０から出射する光の瞳の見掛けサイズを拡張させ、システム分解能を増加させる。システム１００はさらに、ＥＰＥ１９６に加え、直交瞳エクスパンダ１９４（「ＯＰＥ」）を備え、Ｘ（ＯＰＥ）およびＹ（ＥＰＥ）方向の両方において光を拡張させてもよい。ＥＰＥ１９６およびＯＰＥ１９４についてのさらなる詳細は、前述の米国特許出願第１４／５５５，５８５号に説明されており、その内容は、参照することによって前述に組み込まれている。

【0042】

図６は、ＩＣＧ１９２、ＯＰＥ１９４、およびＥＰＥ１９６を有する、ＬＯＥ１９０を描写する。図６は、ユーザの眼からのビューに類似する、上面図からのＬＯＥ１９０を描写する。ＩＣＧ１９２、ＯＰＥ１９４、およびＥＰＥ１９６は、立体または表面リリーフを含む、任意のタイプのＤＯＥであってもよい。ＩＣＧ１９２は、ＴＩＲによる伝搬のために、仮想光ビーム２１０を光源１２０から受容するように構成される、ＤＯＥ（例えば、線形格子）である。図６に描写されるシステム１００では、光源１２０は、ＬＯＥ１９０の側面に配置される。

【0043】

ＯＰＥ１９４は、システム１００を通して伝搬する仮想光ビーム２１０が９０度側方に偏向されるであろうように、側方平面（すなわち、光経路と垂直）に傾斜される、ＤＯＥ（例えば、線形格子）である。ＯＰＥ１９４はまた、光ビーム２１０が、部分的に、ＯＰＥ１９４を通して通過し、複数（例えば、１１）のビームレット２１０’を形成するように、光経路に沿って、部分的に透過性および部分的に反射性である。描写されるシステム１００では、光経路は、Ｘ軸に沿ってあり、ＯＰＥ１９４は、ビームレット２１０’をＹ軸に対して屈曲するように構成される。

【0044】

ＥＰＥ１９６は、システム１００を通して伝搬するビームレット２１０’がＺ平面においてユーザの眼に向かって９０度偏向されるであろうように、Ｚ平面（すなわち、ＸおよびＹ方向に対して法線方向）に傾斜される、ＤＯＥ（例えば、線形格子）である。ＥＰＥ１９６はまた、ビームレット２１０’が、部分的に、ＥＰＥ１９６を通して通過し、複数（例えば、７つ）のビームレット２１０’を形成するように、光経路（Ｙ軸）に沿って部分的に透過性および部分的に反射性である。選択ビーム２１０およびビームレット２１０’のみが、明確にするために標識される。

【0045】

ＯＰＥ１９４およびＥＰＥ１９６の両方もまた、Ｚ軸に沿って少なくとも部分的に透過性であって、実世界光（例えば、実世界オブジェクトから反射する）が、Ｚ方向においてＯＰＥ１９４およびＥＰＥ１９６を通して通過し、ユーザの眼に到達することを可能にする。ＡＲ／ＭＲシステム１００に関して、ＩＣＧ１９２もまた、Ｚ軸に沿って少なくとも部分的に透過性であって、実世界光を受容する。

【0046】

図７は、ＩＣＧ１９２、ＯＰＥ１９４、およびＥＰＥ１９６を有する、ＬＯＥ１９０を含む、別の固定距離光学システム１００を描写する。システム１００はまた、仮想光ビーム２１０をＩＣＧ１９２を介してＬＯＥ１９０の中に指向するように構成される、光源１２０を含む。光ビーム２１０は、上記図６に関して説明されるように、ＯＰＥ１９４およびＥＰＥ１９６によって、ビームレット２１０’に分割される。さらに、ビームレット２１０’が、ＥＰＥ１９６を通して伝搬するにつれて、それらはまた、ＬＯＥ１９０からＥＰＥ１９６を介してユーザの眼に向かって出射する。図７に描写されるシステム１００では、光源１２０は、ＬＯＥ１９０に対して直交に配置される。選択ビーム２１０およびビームレット２１０’のみが、明確にするために標識される。固定距離複合現実光学システムは、ＡＲ／ＭＲシステムから独立して実装されてもよいが、本明細書の多くのシステムが、例証目的のためだけにＡＲ／ＭＲシステムに関連して説明される。

【0047】

ここで図８Ａ−８Ｄを参照すると、いくつかの一般的ＡＲ／ＭＲシステムコンポーネントオプションが、図示される。図８Ａに示されるように、頭部搭載型デバイスユーザ６０は、ユーザ６０の眼の正面に位置付けられるディスプレイシステム６２に結合される、フレーム６４構造を装着するように描写される。以下は、一般的ＡＲ／ＭＲシステムの可能性として考えられるコンポーネントを説明する。説明されるコンポーネントは全て、固定距離ＡＲ／ＭＲシステムを実装するために必要なわけではない。

【0048】

固定距離ＡＲ／ＭＲシステムを実装するために必要とされないが、描写される構成では、スピーカ６６が、フレーム６４に結合され、ユーザ６０の外耳道に隣接して位置付けられてもよい。代替実施形態では、別のスピーカ（図示せず）が、ユーザ６０の他の外耳道に隣接して位置付けられ、ステレオ／成形可能音制御を提供する。１つ以上の実施形態では、固定距離ＡＲ／ＭＲシステムは、有線導線または無線コネクティビティ等によって、ローカル処理およびデータモジュール７０に動作可能に結合される、ディスプレイ６２を有してもよく、これは、フレーム６４に固定して取り付けられる、図８Ｂに描写される実施形態に示されるように、ヘルメットまたは帽子８０に固定して取り付けられる、ヘッドホンに内蔵される、図８Ｃの実施形態に示されるように、リュック式構成においてユーザ６０の胴体８２に除去可能に取り付けられる、または図８Ｄの実施形態に示されるように、ベルト結合式構成においてユーザ６０の腰部８４に除去可能に取り付けられる等、種々の構成において搭載されてもよい。

【0049】

ローカル処理およびデータモジュール７０は、電力効率的プロセッサまたはコントローラと、フラッシュメモリ等のデジタルメモリとを備えてもよく、両方とも、データの処理、キャッシュ、および記憶を補助するために利用されてもよい。データは、画像捕捉デバイス（カメラ等）および慣性測定ユニット（加速度計およびジャイロスコープを含む）等のフレーム６４に動作可能に結合され得る、センサから捕捉されてもよい。固定距離ＡＲ／ＭＲシステムを実装するために必要ではない、随意のセンサは、コンパス、マイクロホン、ＧＰＳユニット、および無線デバイスを含む。代替として、または加えて、データは、遠隔処理モジュール７２および／または遠隔データリポジトリ７４を使用して、可能性として、処理または読出後、ディスプレイ６２への通過のために、入手および／または処理されてもよい。ローカル処理およびデータモジュール７０は、これらの遠隔モジュール７２、７４は、相互に動作可能に結合され、ローカル処理およびデータモジュール７０へのリソースとして利用可能であるように、有線または無線通信リンク等を介して、遠隔処理モジュール７２および遠隔データリポジトリ７４に動作可能に結合されてもよい７６、７８。

【0050】

一実施形態では、遠隔処理モジュール７２は、データおよび／または画像情報を分析および処理するように構成される、１つ以上の比較的に強力なプロセッサまたはコントローラを備えてもよい。一実施形態では、遠隔データリポジトリ７４は、比較的に大規模デジタルデータ記憶設備を備えてもよく、これは、インターネットまたは「クラウド」リソース構成における他のネットワーキング構成を通して利用可能であってもよい。一実施形態では、全てのデータは、記憶され、全ての算出は、ローカル処理およびデータモジュールにおいて実施され、任意の遠隔モジュールからの完全に自律的使用を可能にする。

【0051】

１つ以上の実施形態では、図８Ａ−８Ｄに示されるものに類似する頭部装着型固定距離ＡＲ／ＭＲシステムは、仮想画像をユーザにユーザから所定の距離の公差範囲内に表示するために使用されてもよい。以下に説明されるいくつかの実施形態は、頭部装着型システム内に実装されてもよいが、他の実施形態は、定常デバイス内に実装されてもよいことを理解されたい。例証目的のために、本開示は、主に、頭部装着型固定距離ＡＲ／ＭＲシステムに焦点を当てるであろうが、同一原理は、非頭部装着型および非ＡＲ実施形態にも同様に適用されてもよいことを理解されたい。

【0052】

１つ以上の実施形態では、固定距離ＡＲ／ＭＲシステムは、典型的には、特定のユーザの頭部にフィットされ、光学コンポーネントは、ユーザの眼に整合される。これらの構成ステップは、頭痛、吐き気、不快感等の任意の生理学的副作用を生じさせずに、ユーザが最適拡張現実体験を提供されることを確実にするために使用されてもよい。したがって、１つ以上の実施形態では、ユーザ装着型固定距離ＡＲ／ＭＲシステムは、（物理的およびデジタル的にの両方において）個々のユーザ毎に構成され、プログラムのセットは、ユーザのために具体的に較正されてもよい。他のシナリオでは、緩くフィットするＡＲデバイスが、種々のユーザによって快適に使用され得る。例えば、いくつかの実施形態では、ユーザ装着固定距離ＡＲ／ＭＲシステムは、ユーザの眼間の距離、頭部装着型ディスプレイとユーザの眼との間の距離、およびユーザの前額の曲率を把握する。これらの測定は全て、所与のユーザにフィットするようにカスタマイズされた頭部装着型固定距離ＡＲ／ＭＲシステムを提供するために使用されてもよい。他の実施形態では、そのような測定は、ＡＲディスプレイ機能を実施するために必要ではない場合がある。

【0053】

例えば、図９Ａ−９Ｄを参照すると、固定距離ＡＲ／ＭＲシステムは、ユーザ毎にカスタマイズされてもよい。ユーザの頭部形状４０２が、図９Ａに示されるように、１つ以上の実施形態では、頭部搭載ユーザ装着型ユーザ識別システムをフィットするときに考慮されてもよい。同様に、眼コンポーネント４０４（例えば、光学装置、光学装置のための構造等）が、水平および垂直の両方におけるユーザの快適性のために回転または調節される、もしくは図９Ｂに示されるようにユーザの快適性のために回転されてもよい。１つ以上の実施形態では、図９Ｃに示されるように、ユーザの頭部に対して設定された頭部の回転点が、ユーザの頭部の構造に基づいて調節されてもよい。同様に、瞳孔間距離（ＩＰＤ）（すなわち、ユーザの眼の間の距離）が、図９Ｄに示されるように、補償されてもよい。

【0054】

ここで図１０を参照すると、例示的完全ＡＲ／ＭＲシステムの種々のコンポーネントが、説明されるであろう。固定距離ＡＲ／ＭＲシステムは、完全ＡＲ／ＭＲシステムより少ないコンポーネントを有するであろうことを理解されたい。しかしながら、例示的完全ＡＲ／ＭＲシステムの説明は、固定距離ＡＲ／ＭＲシステムのコンポーネントの相互接続および機能を例証するであろう。図１０は、ＡＲ／ＭＲシステムまたはＡＲデバイスの種々のコンポーネントの基本概念を提供する。図１０は、例証目的のために、右にブロック図において頭部搭載型ＡＲ／ＭＲシステム６２の簡略化されたバージョンを示す。

【0055】

図１０を参照すると、好適なユーザディスプレイデバイス６２の一実施形態が、示され、ディスプレイレンズ１０６を備え、これは、筐体またはフレーム１０８によって、ユーザの頭部または眼に搭載されてもよい。ユーザディスプレイデバイス６２は、ユーザから離れた種々の距離に現れる３−Ｄ仮想オブジェクトをユーザに表示することを含む、種々の機能を実施するように構成される、完全ＡＲ／ＭＲシステムである。ディスプレイレンズ１０６は、筐体８４によって、ユーザの眼２０の正面に位置付けられ、投影された光３８を眼２０の中にバウンスさせ、ビーム成形を促進するように構成される一方、また、ローカル環境からの少なくとも一部の光の伝送を可能にする、１つ以上の透明ミラーを備えてもよい。描写される実施形態では、２つの広視野マシンビジョンカメラ１６が、筐体１０８に結合され、ユーザの周囲の環境を結像する。一実施形態では、これらのカメラ１６は、二重捕捉可視光／赤外線光カメラである。描写されるシステムはまた、一対の走査式レーザ成形波面（すなわち、深度のため）光プロジェクタモジュール１８（例えば、ＤＬＰ、ファイバ走査デバイス（ＦＳＤ）、ＬＣＤ等の空間光変調器）を備え、ディスプレイミラーおよび光学装置は、示されるように、光３８を眼２０の中に投影するように構成される。

【0056】

固定距離ＡＲ／ＭＲシステムを実装するために必要ではないが、描写される完全ＡＲ／ＭＲシステムはまた、ユーザの眼２０を追跡し、レンダリングおよびユーザ入力をサポートするように構成される、赤外線光源２６（発光ダイオードまたは「ＬＥＤ」等）とペアリングされる、２つの小型赤外線カメラ２４を備える。これらの赤外線カメラ２４は、また、ユーザの眼、特に、その虹彩の画像を持続的かつ動的に捕捉するように構成され、これは、ユーザ識別において利用されることができる。

【0057】

本システムはさらに、センサアセンブリ３９を特徴とし、これは、Ｘ、Ｙ、およびＺ軸加速度計能力ならびに磁気コンパスおよびＸ、Ｙ、およびＺ軸ジャイロスコープ能力を備え、好ましくは、データを２００Ｈｚ等の比較的に高周波数で提供してもよい。例示的センサアセンブリ３９は、慣性測定ユニット（「ＩＭＵ」）である。描写されるシステム６２はまた、ＡＳＩＣ（特定用途向け集積回路）、ＦＰＧＡ（フィールドプログラマブルゲートアレイ）、および／またはＡＲＭプロセッサ（高度縮小命令セットマシン）等の頭部姿勢プロセッサ３６（「画像姿勢プロセッサ」）を備え、これは、リアルタイムまたは近リアルタイムに、ユーザ頭部姿勢を捕捉デバイス１６から出力される広視野画像情報から計算するように構成されてもよい。頭部姿勢プロセッサ３６は、カメラ１６およびレンダリングするエンジン３４に動作可能に結合される（９０、９２、９４；例えば、有線または無線コネクティビティを介して）。

【0058】

また、示されるのは、デジタルおよび／またはアナログ処理を実行し、姿勢をジャイロスコープ、コンパス、および／または加速度計データをセンサアセンブリ３９から導出するように構成される、別のプロセッサ３２（「センサ姿勢プロセッサ」）である。描写されるシステムはまた、ＧＰＳ（全地球測位システム）サブシステム３７を特徴とし、姿勢および位置付けを補助する。加えて、ＧＰＳはさらに、ユーザの場所についてのクラウドベースの情報を提供してもよい。本情報は、ユーザ識別目的のために使用されてもよい。例えば、ユーザ識別アルゴリズムが、検出されたユーザ特性を２つの潜在的ユーザ識別に絞り込むことができる場合、ユーザの現在および履歴場所データが、潜在的ユーザ識別のうちの１つを排除するために使用されてもよい。

【0059】

最後に、描写されるシステムは、レンダリングエンジン３４を備え、これは、ユーザにローカルのレンダリング情報を提供し、世界のユーザのビューのために、スキャナの動作およびユーザの眼の中への結像を促進するように構成される、ソフトウェアプログラムを起動させるハードウェアを特徴とし得る。レンダリングエンジン３４は、レンダリングされた光３８が網膜走査ディスプレイに類似する様式において走査レーザ配列１８を使用して投影されるように、画像姿勢プロセッサ３６、随意の眼追跡カメラ２４、投影サブシステム１８、およびセンサ姿勢プロセッサ３２に動作可能に結合される９４、１００、１０２、１０４、１０５（すなわち、有線または無線コネクティビティを介して）。投影された光ビーム３８の波面は、投影された光３８の所望の焦点距離と一致するように屈曲または収束されてもよい。

【0060】

随意の小型赤外線眼追跡カメラ２４が、眼を追跡し、レンダリングおよびユーザ入力（例えば、ユーザが見ている場所、合焦させている深度等）をサポートするために利用されてもよい。以下に議論されるように、眼の縁が、ユーザの焦点の深度を推定するために使用されてもよい。センサアセンブリ３９内のＧＰＳ３７、ジャイロスコープ、コンパス、および加速度計が、大まかなおよび／または高速姿勢推定を提供するために利用されてもよい。カメラ１６画像およびセンサ姿勢情報は、関連付けられたクラウドコンピューティングリソースからのデータと併せて、ローカル世界をマッピングし、ユーザビューを仮想または拡張現実コミュニティおよび／またはユーザ識別システムと共有するために利用されてもよい。

【0061】

図１０において特徴とされるディスプレイシステム６２内のハードウェアの多くは、ディスプレイ１０６およびユーザの眼２０に隣接する、筐体１０８に直接結合されるように描写されるが、描写されるハードウェアコンポーネントは、例えば、図８Ｄに示されるように、ベルト搭載型コンポーネント等の他のコンポーネントに搭載される、またはその中に格納されてもよい。

【0062】

１つの完全ＡＲ／ＭＲシステムでは、図１０において特徴とされるシステム６２のコンポーネントは全て、画像姿勢プロセッサ３６、センサ姿勢プロセッサ３２、およびレンダリングエンジン３４を除き、ディスプレイ筐体１０８に直接結合され、後者の３つおよびシステム６２の残りのコンポーネント間の通信は、超広帯域等の無線通信または有線通信によって行われてもよい。描写される筐体１０８は、好ましくは、頭部搭載型かつユーザによって装着可能である。また、これは、ユーザの耳の中に挿入され、音をユーザに提供するために利用され得るもの等、スピーカを特徴としてもよい。

【0063】

図１０に描写される完全ＡＲ／ＭＲシステム６２の一般的コンポーネントを説明したが、固定距離ＡＲ／ＭＲシステム３００が、ここで、図１１を参照して説明されるであろう。固定距離ＡＲ／ＭＲシステム３００は、光を個別の光源（図示せず）から受信し、受信された光を、それぞれ、ユーザの左眼および右眼の中に指向するように構成される、一対の光誘導光学要素３０２−ｌ、３０２−ｒを含む。光源からの光は、個別の空間光変調器（図示せず）によって、３−Ｄ仮想オブジェクトに対応する画像データを含むように変調されることができる。例えば、左および右ＬＯＥ３０２−ｌ、３０２−ｒに指向される光は、２つの若干異なる視点からの同一３−Ｄ仮想オブジェクトに対応する画像データでエンコードされることができる。視点は、左および右ＬＯＥ３０２−ｌ、３０２−ｒの位置に対応し、これは、ユーザの左眼および右眼のために較正される。故に、左および右ＬＯＥ３０２−ｌ、３０２−ｒを通して送達される光は、立体視技法を使用して、３−Ｄ仮想オブジェクトの画像をユーザのために生成する。

【0064】

固定距離ＡＲ／ＭＲシステム３００は、ユーザから離れた固定距離の近傍、すなわち、ＬＯＥ３０２−ｌ、３０２−ｒの輻輳・開散運動の点に現れる、３−Ｄ仮想オブジェクトの画像を生成するように構成される。前述のように、ヒト視覚系は、約０．２ジオプタ〜約０．６ジオプタの遠近調節における公差／不確実性を有する。固定距離ＡＲ／ＭＲシステム３００は、３−Ｄ仮想オブジェクトの画像を固定距離のその公差範囲内に合焦させるように構成されるため、システムは、顕著な遠近調節および輻輳・開散運動問題を伴わずに、３−Ｄ仮想オブジェクトの画像を表示することができる。

【0065】

光源および空間光変調器は、別個のコンポーネントとして説明されるが、空間光変調器は、個別の光源の一部であることができる。別の実施形態では、単一光源および単一空間光変調器（別個または組み合わせられるかどうかにかかわらず）は、時間逐次様式において、左および右ＬＯＥ３０２−ｌ、３０２−ｒの両方のために、変調された光ビームを提供することができる。光ビームが、ＬＯＥあたり少なくとも約６０フレーム／秒のレート（例えば、単一光源実施形態に関して１２０フレーム／秒）で提供される限り、固定距離ＡＲ／ＭＲシステム３００は、最小限の運動アーチファクトを伴って平滑に移動する、３−Ｄ仮想オブジェクトをレンダリングすることができる。

【0066】

本目的のために、固定距離ＡＲ／ＭＲシステム３００はまた、システム３００の他のコンポーネントに動作可能に結合される、コントローラ３０４を含み、それらのコンポーネントを協調させる。例えば、コントローラ３０４は、３−Ｄレンダリングエンジンを含み、３−Ｄ仮想オブジェクトをレンダリングし、データを個別の光源および空間光変調器に送信するように構成される、左および右ＬＯＥ３０２−ｌ、３０２−ｒのための画像データを生成する。単一光源／空間光変調器実施形態では、コントローラ３０４は、単一光源／空間光変調器が左ＬＯＥ３０２−ｌのために構成される画像データでエンコードされた光を生成するとき、左ＬＯＥ３０２−ｌをアクティブ化し、右ＬＯＥ３０２−ｒを非アクティブ化してもよい。これは、左および右ＬＯＥ３０２−ｌ、３０２−ｒ間のクロストークおよびそれと関連付けられたアーチファクトを最小限にするであろう。コントローラ３０４は、頭部搭載型固定距離ＡＲ／ＭＲシステム３００内のプロセッサであってもよい。他の実施形態では、コントローラ３０４は、固定距離ＡＲ／ＭＲシステム３００の他のコンポーネントに無線接続される、モバイルコンピュータ（例えば、携帯電話）内またはその一部上のプロセッサであることができる。

【0067】

固定距離ＡＲ／ＭＲシステム３００はさらに、頭部搭載型固定距離ＡＲ／ＭＲシステム３００のユーザ／装着者の頭部姿勢を決定するためのデータを提供するように構成される、左および右ＩＭＵ３０６−ｌ、３０６−ｒを含む。単一ＩＭＵが、ユーザ頭部姿勢を決定するためのデータを提供可能であるが、２つのＩＭＵ３０６−ｌ、３０６−ｒは、付加的データを提供し、これは、頭部姿勢の決定を改良する。一実施形態では、いったん左および右ＩＭＵ３０６−ｌ、３０６−ｒ内のジャイロスコープが較正されると、システム３００は、ユーザの頭部および眼窩が向けられている方向を追跡可能となるであろう。固定距離ＡＲ／ＭＲシステム３００の描写される実施形態は、眼追跡カメラおよびＩＲ光を含まないが、左および右ＩＭＵ３０６−ｌ、３０６−ｒは、頭部姿勢を使用して、ユーザが見ている方向の実践的推定を提供する。

【0068】

さらに、固定距離ＡＲ／ＭＲシステム３００は、外向きに面した画像捕捉デバイス３０８（例えば、カメラ）を含み、ユーザの視野に近似する画像を捕捉する。画像捕捉デバイスは、捕捉された画像データをコントローラ３０４に送信し、これは、マシンビジョンオプティカルフローを実施し、システム３００の頭部搭載型部分に結合される、システム３００および画像捕捉デバイス３０８の移動から生じるドリフトを補正する。画像捕捉デバイス３０８は、ＣＣＤカメラ等の可視および／または赤外線光カメラであることができる。

【0069】

固定距離ＡＲ／ＭＲシステム３００は、左および右ＬＯＥ３０２−ｌ、３０２−ｒ、コントローラ３０４、左および右ＩＭＵ３０６−ｌ、３０６−ｒ、および画像捕捉デバイス３０８を使用して、ユーザが、顕著な遠近調節および輻輳・開散運動問題を伴わずに、３−Ｄ画像を視認し得るように、仮想オブジェクトの３−Ｄ画像をユーザの視野内に生成およびレンダリングすることができる。左および右ＬＯＥ３０２−ｌ、３０２−ｒは、画像を、それぞれ、左眼および右眼の中に投影する。コントローラ３０４は、画像をレンダリングする（ユーザのための３−Ｄ画像を生成するために）。左および右ＩＭＵ３０６−ｌ、３０６−ｒは、データをコントローラ３０４に提供し、これは、それを使用して、ユーザの頭部姿勢を決定する。画像捕捉デバイス３０８は、システム３００内のドリフトを補正するために使用される画像データを提供する。コントローラ３０４は、左および右ＩＭＵ３０６−ｌ、３０６−ｒおよび画像捕捉デバイス３０８によって提供されるデータを使用して、ユーザの頭部姿勢およびシステムドリフトに基づいて、ユーザの左眼および右眼のために適切な画像をレンダリングする。

【0070】

図１２に描写される別の実施形態では、固定距離ＡＲ／ＭＲシステム３００はまた、左および右ＬＯＥ３０２−ｌ、３０２−ｒと、コントローラ３０４と、左および右ＩＭＵ３０６−ｌ、３０６−ｒと、画像捕捉デバイス３０８とを含む。これらのコンポーネントは、図１１に描写される固定距離ＡＲ／ＭＲシステム３００内の同一コンポーネントに関して上記に説明されるように、動作可能に結合され、機能する。加えて、図１２に描写される固定距離ＡＲ／ＭＲシステム３００は、第３の、すなわち、「身体」ＩＭＵ３０６−ｂを含み、これは、ユーザの身体に固定される（例えば、ユーザのベルトに取り付けられる）。他の実施形態では、身体ＩＭＵ３０６−ｂは、ユーザの携帯電話またはその一部に固定されるが、身体ＩＭＵ３０６−ｂは、電話がユーザのベルト（例えば、ホルダ内）に固定される時のみアクティブである。身体ＩＭＵ３０６−ｂは、固定距離ＡＲ／ＭＲシステム３００のユーザの身体姿勢を決定するためのデータを提供するように構成される。いったん身体ＩＭＵ３０６−ｂ内のジャイロスコープが較正されると、システム３００は、ユーザの身体が向けられている方向を追跡可能となるであろう。

【0071】

コントローラ３０４は、身体ＩＭＵ３０６−ｂからのデータを使用して、「身体中心」固定距離ＡＲシナリオを生成する。例えば、コントローラ３０４は、図１３に示されるように、ユーザインターフェース５０６を、ユーザのＦＯＶ５００内であって、かつそこからの固定距離に生成することができる。単に、ユーザの頭部の運動に伴って移動する実世界場面の上にオーバーレイする、「頭部中心」ＡＲシナリオと異なり、身体中心固定距離ＡＲシナリオは、ユーザインターフェース５０６を、ユーザの身体から固定距離にあって、かつそれに対して固定点に「貼り付け」させ、ユーザの頭部がユーザの異なる部分に向かって旋回されると、その部分に、インターフェース５０６を移動させる。これは、コントローラ３０４が、身体ＩＭＵ３０６−ｂからのデータと左および右ＩＭＵ３０６−ｌ、３０６−ｒからのデータを比較し、身体姿勢に対する頭部姿勢を決定することによって遂行される。
（例示的仮想オブジェクト（ユーザインターフェース））

【0072】

図１３は、図１２に描写されるもの等の頭部搭載型固定距離ＡＲ／ＭＲシステム３００を装着するユーザのＦＯＶ５００を描写する。ユーザには、ＦＯＶ５００内において、実際の物理的建物５０２と、実際の木々の集合５０４とが見える。ユーザにはまた、ＦＯＶ５００内において、固定距離ＡＲ／ＭＲシステム３００によって生成およびレンダリングされる、ユーザインターフェース５０６が見える。ユーザインターフェース５０６は、十分な不透明度を有し、ユーザに、ユーザインターフェース５０６の背後に木５０４が見えることを可能にする。本不透明度は、ユーザインターフェース５０６を破線で描写することによって図示される。ユーザインターフェース５０６は、６つのユーザインターフェースオブジェクト５０８−１から５０８−６を含む。ＦＯＶ５００は、左５１０−ｌおよび右５１０−ｒ側において、ユーザの眼の限界によって限定される。限定されるＦＯＶ５００は、約５０°である。

【0073】

図１４は、ユーザの頭部がユーザの身体に対して約２５°左に旋回された後の、同一頭部搭載型固定距離ＡＲ／ＭＲシステム３００を装着する同一ユーザの別のＦＯＶ５００’を描写する。建物５０２および木５０４は、ＦＯＶの右側５１０−ｒに移動している。実際、建物５０２の右半分は、ＦＯＶ５００’外に移動している。頭部搭載型固定距離ＡＲ／ＭＲシステム３００は、その頭部を旋回後、身体中心ユーザインターフェース５０６を生成およびレンダリングするように構成されるため、ユーザには、ユーザインターフェース５０６の異なる部分が見える。例えば、ユーザインターフェースオブジェクト５０８−ａ、５０８−ｂおよび５０８−ｃは、図１４に描写されるＦＯＶ５００’内では、ユーザに可視であるが、図１３に描写されるＦＯＶ５００では、可視ではない。同時に、ユーザインターフェースオブジェクト５０８−４、５０８−５および５０８−６は、図１４に描写されるＦＯＶ５００’では、ユーザに不可視であるが、それらは、図１３に描写されるＦＯＶ５００では、可視である。左および右を走査する本能力は、ヒトの眼の約５０°ＦＯＶより大きい総有効ＦＯＶを可能にする。総有効ＦＯＶの増加は、左および右方向に限定されず、また、上下も含み、それによって、頭部搭載型固定距離ＡＲ／ＭＲシステム３００が仮想画像をレンダリングし得る、ドーム２０６を形成する（図３参照）。図１３および１４は、２−Ｄユーザインターフェース５０６を描写するが、仮想画像は、上記に説明されるように、立体視的にレンダリングされる３−Ｄ画像であることができることに留意されたい。

【0074】

上記に説明される固定距離ＡＲ／ＭＲシステム３００は、システム３００の複雑性、サイズ、およびコストを最小限にしながら、仮想オブジェクトを身体中心様式において表示する機能を実施することができる。光学システムコンポーネントの本経済的使用は、製造がより容易であって、使用がより快適であって、かつ典型的消費者／ユーザにより入手可能なＡＲ／ＭＲシステム（および他の光学システム）をもたらすことができる。
（仮想オブジェクトの身体中心ディスプレイ）

【0075】

固定距離ＡＲ／ＭＲシステム３００のいくつかの実施形態を説明したが、仮想オブジェクト（例えば、図１４におけるようにユーザインターフェース５０６）を身体中心様式において固定距離ＡＲ／ＭＲシステム３００のユーザに表示する方法６００が、ここで議論されるであろう。図１５に示されるように、方法は、ステップ６０２から開始し、頭部姿勢に関連する第１の値を測定する。例えば、固定距離ＡＲ／ＭＲシステム３００内の左ＩＭＵ３０６−ｌ（図１４参照）が、頭部姿勢を示すジャイロスコープデータを測定してもよい。

【0076】

ステップ６０４では、頭部姿勢は、第１の値から計算される。例えば、固定距離ＡＲ／ＭＲシステム３００内のコントローラ３０４は、頭部姿勢を測定されたジャイロスコープデータから計算してもよい。

【0077】

ステップ６０６では、身体姿勢に関連する第２の値が、測定される。例えば、固定距離ＡＲ／ＭＲシステム３００内の身体ＩＭＵ３０６−ｂ（図１４参照）は、身体姿勢を示すジャイロスコープデータを測定してもよい。

【0078】

ステップ６０８では、身体姿勢は、第２の値から計算される。例えば、固定距離ＡＲ／ＭＲシステム３００内のコントローラ３０４は、身体姿勢を測定されたジャイロスコープデータから計算してもよい。

【0079】

ステップ６１０では、単一の所定の光学平面の公差範囲内に表示されるように構成される、仮想画像が、頭部姿勢および身体姿勢に基づいて生成される。例えば、固定距離ＡＲ／ＭＲシステム３００内のコントローラ３０４の３−Ｄレンダリングエンジンはユーザの身体姿勢に対するユーザの頭部姿勢に基づいて、ユーザのＦＯＶ内に表示されるように構成される、仮想画像をレンダリングしてもよい。３−Ｄレンダリングエンジンは、ユーザの身体姿勢に対するユーザの頭部姿勢に基づいて生成された仮想画像を改変してもよい（図１３および１４を比較のこと）。仮想画像は、図１３および１４に描写されるユーザインターフェース５０６の一部であってもよい。仮想画像は、３−Ｄ画像の一部（例えば、ユーザの左眼および右眼に同時に表示されるとき、３−Ｄ画像をレンダリングするように構成される一対の画像の左画像）であってもよい。

【0080】

ステップ６１２では、生成された仮想画像は、単一の所定の光学平面の公差範囲内に表示される。前述のように、仮想画像を単一の所定の光学平面に「隣接する」ように表示することは、限定ではないが、仮想画像を単一の所定の光学平面の約０．２ジオプタ〜約０．６ジオプタ以内に表示することを含む。例えば、固定距離ＡＲ／ＭＲシステム３００内の光源、空間光変調器、および左ＬＯＥ３０２−ｌ（図１４参照）が、生成された仮想画像をユーザに表示してもよい。単一の所定の光学平面は、ユーザの左眼の輻輳・開散運動（左ＬＯＥ３０２−ｌによって放出される光の角度に基づいて）が、単一の所定の光学平面の公差範囲内の仮想画像の焦点に対応するように選択されてもよい。そのような対応は、輻輳・開散運動−遠近調節衝突に関連する問題を最小限にまたは排除する。

【0081】

図１９は、仮想オブジェクト（例えば、図１４におけるようにユーザインターフェース５０６）を身体中心様式において固定距離ＡＲ／ＭＲシステム３００のユーザに表示する別の方法６００’を描写する。ステップ６０２、６０４、６０６、６０８、および６１２は、図１８に描写される方法６００における対応するステップと同じである。

【0082】

図１９に描写される方法６００’は、随意のステップ６１４において、画像が捕捉されるため、図１８に描写される方法６００と異なる。例えば、固定距離ＡＲ／ＭＲシステム３００内の画像入手デバイス３０８（図１４参照）は、ユーザのＦＯＶに近似する画像を捕捉してもよい。

【0083】

随意のステップ６１６では、マシンビジョンオプティカルフロー分析が、捕捉された画像に基づいて実施される。オプティカルフロー分析は、システムの移動から生じるドリフトを補正する。例えば、固定距離ＡＲ／ＭＲシステム３００内のコントローラ３０４は、捕捉された画像に基づいて、マシンビジョンオプティカルフロー分析を実施してもよい。

【0084】

ステップ６１０では、単一の所定の光学平面の公差範囲内に表示されるように構成される、仮想画像は、頭部姿勢、身体姿勢、およびマシンビジョンオプティカルフロー分析の結果に基づいて生成される。例えば、固定距離ＡＲ／ＭＲシステム３００内のコントローラ３０４の３−Ｄレンダリングエンジンは、頭部姿勢、身体姿勢、およびマシンビジョンオプティカルフロー分析の結果に基づいて、ユーザのＦＯＶ内に表示されるように構成される、仮想画像をレンダリングしてもよい。３−Ｄレンダリングエンジンは、ユーザの身体姿勢に対するユーザの頭部姿勢に基づいて生成された仮想画像を改変してもよい（図１３および１４比較）。仮想画像をレンダリングする際に、マシンビジョンオプティカルフロー分析の結果を含むことは、システムドリフトを補正し、より正確にレンダリングされた仮想画像をもたらす。仮想画像は、図１３および１４に描写されるユーザインターフェース５０６の一部であってもよい。仮想画像は、３−Ｄ画像の一部（例えば、ユーザの左眼および右眼に同時に表示されるとき、３−Ｄ画像をレンダリングするように構成される一対の画像の左画像）であってもよい。

【0085】

前述の固定距離ＡＲ／ＭＲシステムは、低減された複雑性、サイズ、およびコストから利益を享受し得る、種々の一般的システムの実施例として提供される。故に、本明細書に説明される固定距離光学システムの使用は、開示される固定距離ＡＲ／ＭＲシステムに限定されず、むしろ、任意の光学システムに適用可能である。

【0086】

本発明の種々の例示的実施形態が、本明細書で説明される。非限定的な意味で、これらの実施例が参照される。それらは、本発明のより広く適用可能な側面を例証するように提供される。種々の変更が、説明される本発明に行われてもよく、本発明の真の精神および範囲から逸脱することなく、均等物が置換されてもよい。加えて、特定の状況、材料、物質組成、プロセス、プロセス行為、またはステップを本発明の目的、精神、もしくは範囲に適合させるように、多くの修正が行われてもよい。さらに、当業者によって理解されるように、本明細書で説明および例証される個々の変形例のそれぞれは、本発明の範囲または精神から逸脱することなく、他のいくつかの実施形態のうちのいずれかの特徴から容易に分離され、またはそれらと組み合わせられ得る、離散構成要素および特徴を有する。全てのそのような修正は、本開示と関連付けられる請求項の範囲内にあることを目的としている。

【0087】

本発明は、対象デバイスを使用して行われ得る方法を含む。方法は、そのような好適なデバイスを提供するという行為を含んでもよい。そのような提供は、エンドユーザによって行われてもよい。換言すれば、「提供する」行為は、単に、エンドユーザが、対象方法において必須デバイスを提供するように、取得し、アクセスし、接近し、位置付けし、設定し、起動し、電源を入れ、または別様に作用することを要求する。本明細書で記載される方法は、論理的に可能である記載された事象の任意の順番で、ならびに事象の記載された順番で実行されてもよい。

【0088】

本発明の例示的側面が、材料選択および製造に関する詳細とともに、上記で記載されている。本発明の他の詳細に関しては、これらは、上記で参照された特許および出版物と関連して理解されるとともに、概して、当業者によって公知であり得るかまたは理解され得る。一般的または論理的に採用されるような付加的な行為の観点から、本発明の方法ベースの側面に関して、同じことが当てはまり得る。

【0089】

加えて、本発明は、種々の特徴を随意的に組み込むいくつかの実施例を参照して説明されているが、本発明は、本発明の各変形例に関して考慮されるような説明および指示されるものに限定されるものではない。種々の変更が、説明される本発明に行われてもよく、本発明の真の精神および範囲から逸脱することなく、均等物（本明細書に記載されようと、いくらか簡単にするために含まれていなかろうと）が置換されてもよい。加えて、値の範囲が提供される場合、その範囲の上限と下限との間の全ての介在値、およびその規定範囲内の任意の他の規定または介在値が、本発明内に包含されることを理解されたい。

【0090】

また、説明される本発明の変形例の任意の随意的な特徴が、独立して、または本明細書で説明される特徴のうちのいずれか１つ以上のものと組み合わせて、記載および請求されてもよいことが考慮される。単数形のアイテムへの参照は、複数形の同一のアイテムが存在するという可能性を含む。より具体的には、本明細書で、および本明細書に関連付けられる請求項で使用されるように、「１つの（「ａ」、「ａｎ」）」、「該（ｓａｉｄ）」、および「該（ｔｈｅ）」という単数形は、特に規定がない限り、複数形の指示対象を含む。換言すれば、冠詞の使用は、上記の説明ならびに本開示と関連付けられる請求項において、対象アイテムの「少なくとも１つ」を可能にする。さらに、そのような請求項は、任意の随意的な要素を除外するように起草され得ることに留意されたい。したがって、この記述は、請求項の要素の記載と関連して、「単に（ｓｏｌｅｌｙ）」、「のみ（ｏｎｌｙ）」等のそのような排他的用語の使用、または「否定的」制限の使用のために、先行詞としての機能を果たすことを目的としている。

【0091】

そのような排他的用語を使用することなく、本開示と関連付けられる請求項での「備える（ｃｏｍｐｒｉｓｉｎｇ）」という用語は、所与の数の要素がそのような請求項で列挙されるか、または特徴の追加をそのような請求項に記載される要素の性質の変換として見なすことができるかにかかわらず、任意の付加的な要素を含むことを可能にするものとする。本明細書で具体的に定義される場合を除いて、本明細書で使用される全ての技術用語および科学用語は、請求項の有効性を維持しながら、可能な限り広い一般的に理解されている意味を与えられるものである。

【0092】

本発明の範疇は、提供される実施例および／または対象の明細書に限定されるものではなく、むしろ、本開示と関連付けられる請求項の言葉の範囲のみによって限定されるものである。

【0093】

前述の明細書では、本発明は、その具体的実施形態を参照して説明された。しかしながら、種々の修正および変更が、本発明のより広義の精神および範囲から逸脱することなくそこに成されてもよいことは、明白となるであろう。例えば、前述のプロセスフローは、プロセス作用の特定の順序を参照して説明される。しかしながら、説明されるプロセス作用の多くの順序は、本発明の範囲または動作に影響を及ぼすことなく、変更されてもよい。明細書および図面は、故に、限定的意味ではなく、例証的と見なされるべきである。

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8A】

【図8B】

【図8C】

【図8D】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】

【図15】

【図16】