特開2024-155937拡張現実および仮想現実アイウェアを用いた結像修正、表示、および可視化
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】公開特許公報(A)
(11)【公開番号】P2024155937
(43)【公開日】2024-10-31
(54)【発明の名称】拡張現実および仮想現実アイウェアを用いた結像修正、表示、および可視化
(51)【国際特許分類】
G09G 5/00 20060101AFI20241024BHJP
G09G 5/37 20060101ALI20241024BHJP
G06F 3/01 20060101ALI20241024BHJP
H04N 5/64 20060101ALI20241024BHJP
【ＦＩ】
G09G5/00 550C
G09G5/00 510A
G09G5/37 320
G06F3/01 510
H04N5/64 511A
【審査請求】有
【請求項の数】1
【出願形態】ＯＬ
【外国語出願】
(21)【出願番号】P 2024134294
(22)【出願日】2024-08-09
(62)【分割の表示】P 2023111338の分割
【原出願日】2017-07-24
(31)【優先権主張番号】62/440,332
(32)【優先日】2016-12-29
(33)【優先権主張国・地域又は機関】US
(31)【優先権主張番号】62/396,071
(32)【優先日】2016-09-16
(33)【優先権主張国・地域又は機関】US
(31)【優先権主張番号】62/366,599
(32)【優先日】2016-07-25
(33)【優先権主張国・地域又は機関】US
(71)【出願人】
【識別番号】514108838
【氏名又は名称】マジック リープ， インコーポレイテッド
【氏名又は名称原語表記】Ｍａｇｉｃ Ｌｅａｐ，Ｉｎｃ．
【住所又は居所原語表記】７５００ Ｗ ＳＵＮＲＩＳＥ ＢＬＶＤ，ＰＬＡＮＴＡＴＩＯＮ，ＦＬ ３３３２２ ＵＳＡ
(74)【代理人】
【識別番号】100078282
【弁理士】
【氏名又は名称】山本 秀策
(74)【代理人】
【識別番号】100113413
【弁理士】
【氏名又は名称】森下 夏樹
(74)【代理人】
【識別番号】100181674
【弁理士】
【氏名又は名称】飯田 貴敏
(74)【代理人】
【識別番号】100181641
【弁理士】
【氏名又は名称】石川 大輔
(74)【代理人】
【識別番号】230113332
【弁護士】
【氏名又は名称】山本 健策
(72)【発明者】
【氏名】ナスターシャ ユー． ロバイナ
(72)【発明者】
【氏名】ニコル エリザベス サメック
(72)【発明者】
【氏名】クリストファー エム． ハリセス
(72)【発明者】
【氏名】ロニー アボビッツ
(72)【発明者】
【氏名】マーク ベーレンロッド
(72)【発明者】
【氏名】ブライアン ロイド シュミット
(57)【要約】
【課題】拡張現実および仮想現実アイウェアを用いた結像修正、表示、および可視化の提供。
【解決手段】ディスプレイシステムは、光をユーザの眼に投影し、拡張現実画像コンテンツをユーザに表示するように構成される、頭部搭載型ディスプレイを含むことができる。本ディスプレイシステムは、ユーザを感知するように構成される、１つまたはそれを上回るユーザセンサを含むことができ、かつユーザの周囲を感知するように構成される、１つまたはそれを上回る環境センサを含むことができる。本ディスプレイシステムはまた、ディスプレイ、１つまたはそれを上回るユーザセンサ、および１つまたはそれを上回る環境センサと通信する、処理電子機器を含むことができる。
【選択図】図１２Ｂ
【解決手段】ディスプレイシステムは、光をユーザの眼に投影し、拡張現実画像コンテンツをユーザに表示するように構成される、頭部搭載型ディスプレイを含むことができる。本ディスプレイシステムは、ユーザを感知するように構成される、１つまたはそれを上回るユーザセンサを含むことができ、かつユーザの周囲を感知するように構成される、１つまたはそれを上回る環境センサを含むことができる。本ディスプレイシステムはまた、ディスプレイ、１つまたはそれを上回るユーザセンサ、および１つまたはそれを上回る環境センサと通信する、処理電子機器を含むことができる。
【選択図】図１２Ｂ
【特許請求の範囲】
【請求項1】
光をユーザの眼に投影し、拡張現実画像コンテンツを前記ユーザの視野内に表示するように構成される頭部搭載型ディスプレイシステムであって、前記視野は、中心領域と、前記中心領域を中心として配置される周辺領域とを有し、前記頭部搭載型ディスプレイシステムは、
前記ユーザの頭部上に支持されるように構成されるフレームと、
前記フレーム上に配置される頭部搭載型ディスプレイであって、前記ディスプレイは、拡張現実画像コンテンツを前記ユーザの視野に表示するように、光を前記ユーザの眼の中に投影するように構成され、前記ディスプレイの少なくとも一部分は、透明であり、かつ、前記透明である部分が、前記ユーザおよび前記頭部搭載型ディスプレイの正面の環境の一部分からの光を前記ユーザの眼に伝送し、前記ユーザおよび前記頭部搭載型ディスプレイの正面の前記環境の前記一部分のビューを提供するように、前記ユーザが前記頭部搭載型ディスプレイを装着すると、前記ユーザの眼の正面の場所に配置される、ディスプレイと、
前記ユーザを感知するように構成される１つまたは複数のユーザセンサと、
前記ユーザの周囲を感知するように構成される１つまたは複数の環境センサと、
前記ディスプレイ、前記１つまたは複数のユーザセンサ、および前記１つまたは複数の環境センサと通信する処理電子機器であって、前記処理電子機器は、
増加されたユーザ注目を伴う状況を感知することと、
前記ユーザの視野の前記周辺領域内の実または仮想周辺オブジェクトに対する前記増加された注目を感知することに少なくとも部分的に基づいて、前記周辺オブジェクト以外の前記視野の部分内の画像コンテンツを強調解除することであって、前記周辺オブジェクトに対する前記増加されたユーザ注目を感知することは、前記周辺オブジェクトに指向されたときの前記ユーザの眼の遠近調節における変動または前記ユーザが前記周辺オブジェクトに眼を細めることに少なくとも部分的に基づく、ことと
を行うように構成される、処理電子機器と
を備える、頭部搭載型ディスプレイシステム。
前記ユーザの頭部上に支持されるように構成されるフレームと、
前記フレーム上に配置される頭部搭載型ディスプレイであって、前記ディスプレイは、拡張現実画像コンテンツを前記ユーザの視野に表示するように、光を前記ユーザの眼の中に投影するように構成され、前記ディスプレイの少なくとも一部分は、透明であり、かつ、前記透明である部分が、前記ユーザおよび前記頭部搭載型ディスプレイの正面の環境の一部分からの光を前記ユーザの眼に伝送し、前記ユーザおよび前記頭部搭載型ディスプレイの正面の前記環境の前記一部分のビューを提供するように、前記ユーザが前記頭部搭載型ディスプレイを装着すると、前記ユーザの眼の正面の場所に配置される、ディスプレイと、
前記ユーザを感知するように構成される１つまたは複数のユーザセンサと、
前記ユーザの周囲を感知するように構成される１つまたは複数の環境センサと、
前記ディスプレイ、前記１つまたは複数のユーザセンサ、および前記１つまたは複数の環境センサと通信する処理電子機器であって、前記処理電子機器は、
増加されたユーザ注目を伴う状況を感知することと、
前記ユーザの視野の前記周辺領域内の実または仮想周辺オブジェクトに対する前記増加された注目を感知することに少なくとも部分的に基づいて、前記周辺オブジェクト以外の前記視野の部分内の画像コンテンツを強調解除することであって、前記周辺オブジェクトに対する前記増加されたユーザ注目を感知することは、前記周辺オブジェクトに指向されたときの前記ユーザの眼の遠近調節における変動または前記ユーザが前記周辺オブジェクトに眼を細めることに少なくとも部分的に基づく、ことと
を行うように構成される、処理電子機器と
を備える、頭部搭載型ディスプレイシステム。
【発明の詳細な説明】
【技術分野】
【0001】
（優先権主張）
本願は、２０１６年７月２５日に出願された米国仮出願第６２／３６６，５９９号、２０１６年９月１６日に出願された米国仮出願第６２／３９６，０７１号、２０１６年１２月２９日に出願された米国仮出願第６２／４４０，３３２号に対する３５ Ｕ．Ｓ．Ｃ． １１９（ｅ）のもとでの優先権の利益を主張するものである。これらの優先権ドキュメントの各々の全体の開示は、参照により本明細書中に援用される。
本願は、２０１６年７月２５日に出願された米国仮出願第６２／３６６，５９９号、２０１６年９月１６日に出願された米国仮出願第６２／３９６，０７１号、２０１６年１２月２９日に出願された米国仮出願第６２／４４０，３３２号に対する３５ Ｕ．Ｓ．Ｃ． １１９（ｅ）のもとでの優先権の利益を主張するものである。これらの優先権ドキュメントの各々の全体の開示は、参照により本明細書中に援用される。
【0002】
（参照による援用）
本願は、
２０１６年７月２５日に出願された米国仮出願第６２／３６６，５５５号、２０１６年７月２０日に出願された米国仮出願第６２／３５２，５３９号、２０１６年５月９日に出願された米国仮出願第６２／３３３，７３４号、２０１４年３月１４日に出願された米国出願第１４／２１２，９６１号、２０１４年７月１４日に出願された米国出願第１４／３３１，２１８号、２０１６年３月１６日に出願された米国出願第１５／０７２，２９０号、２０１６年２月１１日に出願された米国仮出願第６２／２９４，１４７号の各々の全体を参照により援用する。
本願は、
２０１６年７月２５日に出願された米国仮出願第６２／３６６，５５５号、２０１６年７月２０日に出願された米国仮出願第６２／３５２，５３９号、２０１６年５月９日に出願された米国仮出願第６２／３３３，７３４号、２０１４年３月１４日に出願された米国出願第１４／２１２，９６１号、２０１４年７月１４日に出願された米国出願第１４／３３１，２１８号、２０１６年３月１６日に出願された米国出願第１５／０７２，２９０号、２０１６年２月１１日に出願された米国仮出願第６２／２９４，１４７号の各々の全体を参照により援用する。
【0003】
本開示は、ディスプレイシステムに関し、より具体的には、拡張現実ディスプレイシステムに関する。
【背景技術】
【0004】
現代のコンピューティングおよびディスプレイ技術は、いわゆる「仮想現実」または「拡張現実」体験のためのシステムの発達を促進しており、デジタル的に再現された画像またはその一部が、現実であるように見える、もしくはそのように知覚され得る様式でユーザに提示される。仮想現実または「ＶＲ」シナリオは、典型的には、他の実際の実世界の視覚的入力に対する透明性を伴わずに、デジタルまたは仮想画像情報の提示を伴い、拡張現実または「ＡＲ」シナリオは、典型的には、ユーザの周囲の実際の世界の可視化に対する拡張としてのデジタルまたは仮想画像情報の提示を伴う。複合現実または「ＭＲ」シナリオは、一種のＡＲシナリオであって、典型的には、自然世界の中に統合され、それに応答する、仮想オブジェクトを伴う。例えば、ＭＲシナリオでは、ＡＲ画像コンテンツは、実世界内のオブジェクトによってブロックされて見える、または別様にそれと相互作用するように知覚され得る。
【0005】
図１Ａを参照すると、拡張現実場面１が、描写され、ＡＲ技術のユーザには、人々、木々、背景における建物、およびコンクリートプラットフォーム１１２０を特徴とする、実世界公園状設定１１００が見える。これらのアイテムに加え、ＡＲ技術のユーザはまた、これらの要素１１３０、１１１０が実世界内に存在しないにもかかわらず、実世界プラットフォーム１１２０上に立っているロボット像１１１０と、マルハナバチの擬人化のように見える、飛んでいる漫画のようなアバタキャラクタ１１３０等の「仮想コンテンツ」を「見ている」と知覚する。ヒトの視知覚系は、複雑であって、他の仮想または実世界画像要素間における仮想画像要素の快適で、自然のような感覚で、かつ豊かな提示を促進する、ＡＲ技術を生産することは、困難である。
【0006】
本明細書に開示されるシステムおよび方法は、ＡＲまたはＶＲ技術に関連する種々の課題に対処する。
【発明の概要】
【課題を解決するための手段】
【0007】
本開示は、ディスプレイシステムの種々の実施例を提供する。そのような実施例は、限定ではないが、以下の実施例を含む。
【0008】
１．光をユーザの眼に投影し、拡張現実画像コンテンツを該ユーザの視野内に表示するように構成される、ディスプレイシステムであって、
ユーザの頭部上に支持されるように構成される、フレームと、
フレーム上に配置される、頭部搭載型ディスプレイであって、該ディスプレイは、光を該ユーザの眼の中に投影し、ユーザの眼からの異なる距離から投影されるかのように、異なる発散量において拡張現実画像コンテンツをユーザの視野内に表示するように構成され、該ディスプレイの少なくとも一部は、透明部分が、ユーザの正面の環境の一部からの光をユーザの眼に伝送し、ユーザの正面の環境の該部分のビューを提供するように、透明であって、ユーザが該頭部搭載型ディスプレイを装着すると、ユーザの眼の正面の場所に配置される、頭部搭載型ディスプレイと、
ユーザの周囲を感知するように構成される、１つまたはそれを上回る環境センサと、
ディスプレイおよび１つまたはそれを上回る環境センサと通信する、処理電子機器であって、
増加されたユーザ注目を伴う状況を感知し、
少なくとも部分的に、増加された焦点の感知に基づいて、ユーザの視野内の実または仮想オブジェクトのユーザ知覚を改変する、
ように構成される、処理電子機器と、
を備える、頭部搭載型ディスプレイシステム。
２．処理電子機器は、オブジェクトを備える画像コンテンツを改変することによって、ユーザの視野内の仮想オブジェクトのユーザ知覚を改変するように構成される、実施例１に記載のディスプレイシステム。
３．処理電子機器は、オブジェクトを第１の場所から第２の場所に移動させることによって、オブジェクトのユーザ知覚を改変するように構成される、実施例１または２に記載のディスプレイシステム。
４．第１の場所は、周辺領域であって、第２の場所は、中心領域である、または第１の場所は、中心領域であって、第２の場所は、周辺領域である、実施例３に記載のディスプレイシステム。
５．画像コンテンツを改変することは、オブジェクトを備える画像コンテンツのコントラスト、不透明度、色、色飽和、カラーバランス、サイズ、明度、縁、または鮮明度のうちの少なくとも１つを改変することを含む、実施例２－４のいずれかに記載のディスプレイシステム。
６．アラートをユーザに提供するようにさらに構成される、実施例１－５のいずれかに記載のディスプレイシステム。
７．アラートは、視覚的アラートまたは聴覚的アラートである、実施例６に記載のディスプレイシステム。
８．１つまたはそれを上回る環境センサは、深度センサ、一対の両眼世界カメラ、地理位置センサ、近接度センサ、またはＧＰＳを備える、実施例１－７のいずれかに記載のディスプレイシステム。
９．ユーザを感知するように構成される、１つまたはそれを上回るユーザセンサをさらに備え、該処理電子機器は、該１つまたはそれを上回るユーザセンサと通信する、実施例１－８のいずれかに記載のディスプレイシステム。
１０．１つまたはそれを上回るユーザセンサは、１つまたはそれを上回るカメラを備える、実施例９に記載のディスプレイシステム。
１１．頭部搭載型ディスプレイは、光を導波管から抽出することによって、光を出力するように構成される、回折光学要素を備える、導波管を備え、導波管は、導波管のスタックのうちの１つであって、導波管のスタックの異なる導波管は、異なる波面発散を伴って光を出力するように構成される、実施例１－１０のいずれかに記載のディスプレイシステム。
１２．処理電子機器はさらに、状況に対するユーザ意図を判定し、少なくとも部分的に、該判定された意図に基づいて、ユーザの視野内の実または仮想オブジェクトのユーザ知覚を改変するように構成される、実施例１－１１のいずれかに記載のディスプレイシステム。
１３．処理電子機器はさらに、少なくとも部分的に、増加された焦点の感知に基づいて、状況に対するユーザ意図を判定し、ユーザの視野内の実または仮想オブジェクトのユーザ知覚を改変するように構成される、実施例１－１２のいずれかに記載のディスプレイシステム。
１４．該環境センサは、無線信号を検出するように構成される、センサを備える、実施例１－１３のいずれかに記載のディスプレイシステム。
１５．該環境センサは、自動車からのＢｌｕｅｔｏｏｔｈ（登録商標）信号を検出するように構成される、センサを備える、実施例１－１４のいずれかに記載のディスプレイシステム。
１６．増加されたユーザ注目を伴う該状況は、自動車両を運転することを含む、実施例１－１５のいずれかに記載のディスプレイシステム。
１７．該処理電子機器は、少なくとも部分的に、ユーザに関する１つまたはそれを上回るデータ記録に基づいて、ユーザの視野内の実または仮想オブジェクトのユーザ知覚を改変するように構成され、該１つまたはそれを上回るデータ記録は、該ユーザの運転記録を含む、実施例１６に記載のディスプレイシステム。
１８．処理電子機器は、背景を改変することによって、ユーザの視野内の実または仮想オブジェクトのユーザ知覚を改変するように構成される、実施例１－１７のいずれかに記載のディスプレイシステム。
１９．背景を改変することは、背景の均質性を増加させ、それによって、背景内の可視特徴を低減させることを含む、実施例１８に記載のディスプレイシステム。
２０．背景の均質性を増加させることは、背景内の特徴をウォッシュアウトまたはペイントオーバーすることを含む、実施例１９に記載のディスプレイシステム。
２１．処理電子機器は、ユーザおよび頭部搭載型ディスプレイの正面の環境内の特徴がユーザにあまり目立たないように、背景内の光の強度を増加させることによって、背景を改変するように構成される、実施例１８－２０のいずれかに記載のディスプレイシステム。
２２．処理電子機器は、ユーザおよび頭部搭載型ディスプレイの正面の環境内の特徴がユーザにあまり目立たないように、光の強度を増加させるように構成される、実施例１－２１のいずれかに記載のディスプレイシステム。
２３．ユーザの視野内のオブジェクトのユーザ知覚を改変することは、オブジェクトをハイライトすることを含む、実施例１－２２のいずれかに記載のディスプレイシステム。
２４．オブジェクトをハイライトすることは、部分的に透明な色をオブジェクトにわたって重畳することを含む、実施例２３に記載のディスプレイシステム。
２５．光を該ユーザの眼の中に指向し、画像を眼内に形成するように構成される、１つまたはそれを上回る光源をさらに備える、実施例１－２４のいずれかに記載のディスプレイシステム。
２６．透明であって、ユーザの眼の正面の場所に配置される、該ディスプレイの少なくとも該部分は、光をユーザに投影するように構成される、１つまたはそれを上回る導波管を備える、実施例１－２５のいずれかに記載のディスプレイシステム。
２７．該１つまたはそれを上回る光源は、光を該１つまたはそれを上回る導波管の中に指向するように構成される、実施例２５に記載のディスプレイシステム。
２８．該光源は、ファイバ走査プロジェクタを備える、実施例２５－２７のいずれかに記載のディスプレイシステム。
２９．該１つまたはそれを上回る環境センサは、該環境を結像するように構成される、１つまたはそれを上回る外向きに面した画像捕捉システムを備える、実施例１－２８のいずれかに記載のディスプレイシステム。
３０．該環境センサは、１つまたはそれを上回る外向きに面したカメラを備える、実施例１－２９に記載のディスプレイシステム。
３１．１つまたはそれを上回る環境センサは、距離測定システムを備える、実施例１－３０のいずれかに記載のディスプレイシステム。
３２．該距離測定システムは、レーザ測距計を備える、実施例３１に記載のディスプレイシステム。
３３．該ユーザの眼の位置および／または移動を追跡するように構成される、眼追跡システムをさらに備える、実施例１－３２のいずれかに記載のディスプレイシステム。
３４．該ユーザの眼を結像するように構成される、１つまたはそれを上回る内向きに面した画像捕捉システムをさらに備える、実施例１－３３のいずれかに記載のディスプレイシステム。
３５．頭部搭載型ディスプレイシステムは、ユーザの視野の第２の部分に提示される画像コンテンツと比較して、ユーザの視野の少なくとも第１の部分に提示される画像コンテンツを異なるように処理するように構成される、実施例１－３４のいずれかに記載のディスプレイシステム。
３６．頭部搭載型ディスプレイシステムは、ユーザの視野の中心領域に提示される画像コンテンツと比較して、ユーザの視野の該周辺領域の少なくとも一部に提示される画像コンテンツを異なるように処理するように構成される、実施例１－３５のいずれかに記載のディスプレイシステム。
３７．該ユーザ知覚を改変することは、増強または強調解除することを含む、実施例１－３７のいずれかに記載のディスプレイシステム。
３８．該処理電子機器によって提供される増強は、画像コンテンツを拡大することを含む、実施例３７に記載のディスプレイシステム。
３９．該処理電子機器によって提供される増強または強調解除は、明度を改変することを含む、実施例３７－３８のいずれかに記載のディスプレイシステム。
４０．該処理電子機器によって提供される増強は、明度を増加させることを含む、実施例３７－３９のいずれかに記載のディスプレイシステム。
４１．該処理電子機器によって提供される強調解除は、明度を減少させることを含む、実施例３７－４０のいずれかに記載のディスプレイシステム。
４２．該処理電子機器によって提供される強調解除は、明度を増加させることを含む、実施例３７－４１のいずれかに記載のディスプレイシステム。
４３．該処理電子機器によって提供される増強または強調解除は、コントラストを改変することを含む、実施例３７－４２のいずれかに記載のディスプレイシステム。
４４．該処理電子機器によって提供される増強は、コントラストを増加させることを含む、実施例３７－４３のいずれかに記載のディスプレイシステム。
４５．該処理電子機器によって提供される強調解除は、コントラストを減少させることを含む、実施例３７－４４のいずれかに記載のディスプレイシステム。
４６．該処理電子機器によって提供される増強または強調解除は、色飽和を改変することを含む、実施例３７－４５のいずれかに記載のディスプレイシステム。
４７．該処理電子機器によって提供される増強は、色飽和を増加させることを含む、実施例３７－４６のいずれかに記載のディスプレイシステム。
４８．該処理電子機器によって提供される強調解除は、色飽和を減少させることを含む、実施例３７－４７のいずれかに記載のディスプレイシステム。
４９．該処理電子機器によって提供される増強または強調解除は、鮮明度を改変することを含む、実施例３７－４８のいずれかに記載のディスプレイシステム。
５０．該処理電子機器によって提供される増強は、鮮明度を増加させることを含む、実施例３７－４９のいずれかに記載のディスプレイシステム。
５１．該処理電子機器によって提供される強調解除は、鮮明度を減少させることを含む、実施例３７－５０のいずれかに記載のディスプレイシステム。
５２．該処理電子機器によって提供される増強または強調解除は、不透明度を改変することを含む、実施例３７－５１のいずれかに記載のディスプレイシステム。
５３．該処理電子機器によって提供される増強は、不透明度を増加させることを含む、実施例３７－５２のいずれかに記載のディスプレイシステム。
５４．該処理電子機器によって提供される強調解除は、不透明度を減少させることを含む、実施例３７－５３のいずれかに記載のディスプレイシステム。
５５．該処理電子機器によって提供される強調解除は、不透明度を増加させることを含む、実施例３７－５４のいずれかに記載のディスプレイシステム。
５６．増強は、縁増強特徴を含む、実施例３７－５５のいずれかに記載のディスプレイシステム。
５７．該処理電子機器によって提供される増強または強調解除は、カラーバランスを偏移させることを含む、実施例３７－５６のいずれかに記載のディスプレイシステム。
ユーザの頭部上に支持されるように構成される、フレームと、
フレーム上に配置される、頭部搭載型ディスプレイであって、該ディスプレイは、光を該ユーザの眼の中に投影し、ユーザの眼からの異なる距離から投影されるかのように、異なる発散量において拡張現実画像コンテンツをユーザの視野内に表示するように構成され、該ディスプレイの少なくとも一部は、透明部分が、ユーザの正面の環境の一部からの光をユーザの眼に伝送し、ユーザの正面の環境の該部分のビューを提供するように、透明であって、ユーザが該頭部搭載型ディスプレイを装着すると、ユーザの眼の正面の場所に配置される、頭部搭載型ディスプレイと、
ユーザの周囲を感知するように構成される、１つまたはそれを上回る環境センサと、
ディスプレイおよび１つまたはそれを上回る環境センサと通信する、処理電子機器であって、
増加されたユーザ注目を伴う状況を感知し、
少なくとも部分的に、増加された焦点の感知に基づいて、ユーザの視野内の実または仮想オブジェクトのユーザ知覚を改変する、
ように構成される、処理電子機器と、
を備える、頭部搭載型ディスプレイシステム。
２．処理電子機器は、オブジェクトを備える画像コンテンツを改変することによって、ユーザの視野内の仮想オブジェクトのユーザ知覚を改変するように構成される、実施例１に記載のディスプレイシステム。
３．処理電子機器は、オブジェクトを第１の場所から第２の場所に移動させることによって、オブジェクトのユーザ知覚を改変するように構成される、実施例１または２に記載のディスプレイシステム。
４．第１の場所は、周辺領域であって、第２の場所は、中心領域である、または第１の場所は、中心領域であって、第２の場所は、周辺領域である、実施例３に記載のディスプレイシステム。
５．画像コンテンツを改変することは、オブジェクトを備える画像コンテンツのコントラスト、不透明度、色、色飽和、カラーバランス、サイズ、明度、縁、または鮮明度のうちの少なくとも１つを改変することを含む、実施例２－４のいずれかに記載のディスプレイシステム。
６．アラートをユーザに提供するようにさらに構成される、実施例１－５のいずれかに記載のディスプレイシステム。
７．アラートは、視覚的アラートまたは聴覚的アラートである、実施例６に記載のディスプレイシステム。
８．１つまたはそれを上回る環境センサは、深度センサ、一対の両眼世界カメラ、地理位置センサ、近接度センサ、またはＧＰＳを備える、実施例１－７のいずれかに記載のディスプレイシステム。
９．ユーザを感知するように構成される、１つまたはそれを上回るユーザセンサをさらに備え、該処理電子機器は、該１つまたはそれを上回るユーザセンサと通信する、実施例１－８のいずれかに記載のディスプレイシステム。
１０．１つまたはそれを上回るユーザセンサは、１つまたはそれを上回るカメラを備える、実施例９に記載のディスプレイシステム。
１１．頭部搭載型ディスプレイは、光を導波管から抽出することによって、光を出力するように構成される、回折光学要素を備える、導波管を備え、導波管は、導波管のスタックのうちの１つであって、導波管のスタックの異なる導波管は、異なる波面発散を伴って光を出力するように構成される、実施例１－１０のいずれかに記載のディスプレイシステム。
１２．処理電子機器はさらに、状況に対するユーザ意図を判定し、少なくとも部分的に、該判定された意図に基づいて、ユーザの視野内の実または仮想オブジェクトのユーザ知覚を改変するように構成される、実施例１－１１のいずれかに記載のディスプレイシステム。
１３．処理電子機器はさらに、少なくとも部分的に、増加された焦点の感知に基づいて、状況に対するユーザ意図を判定し、ユーザの視野内の実または仮想オブジェクトのユーザ知覚を改変するように構成される、実施例１－１２のいずれかに記載のディスプレイシステム。
１４．該環境センサは、無線信号を検出するように構成される、センサを備える、実施例１－１３のいずれかに記載のディスプレイシステム。
１５．該環境センサは、自動車からのＢｌｕｅｔｏｏｔｈ（登録商標）信号を検出するように構成される、センサを備える、実施例１－１４のいずれかに記載のディスプレイシステム。
１６．増加されたユーザ注目を伴う該状況は、自動車両を運転することを含む、実施例１－１５のいずれかに記載のディスプレイシステム。
１７．該処理電子機器は、少なくとも部分的に、ユーザに関する１つまたはそれを上回るデータ記録に基づいて、ユーザの視野内の実または仮想オブジェクトのユーザ知覚を改変するように構成され、該１つまたはそれを上回るデータ記録は、該ユーザの運転記録を含む、実施例１６に記載のディスプレイシステム。
１８．処理電子機器は、背景を改変することによって、ユーザの視野内の実または仮想オブジェクトのユーザ知覚を改変するように構成される、実施例１－１７のいずれかに記載のディスプレイシステム。
１９．背景を改変することは、背景の均質性を増加させ、それによって、背景内の可視特徴を低減させることを含む、実施例１８に記載のディスプレイシステム。
２０．背景の均質性を増加させることは、背景内の特徴をウォッシュアウトまたはペイントオーバーすることを含む、実施例１９に記載のディスプレイシステム。
２１．処理電子機器は、ユーザおよび頭部搭載型ディスプレイの正面の環境内の特徴がユーザにあまり目立たないように、背景内の光の強度を増加させることによって、背景を改変するように構成される、実施例１８－２０のいずれかに記載のディスプレイシステム。
２２．処理電子機器は、ユーザおよび頭部搭載型ディスプレイの正面の環境内の特徴がユーザにあまり目立たないように、光の強度を増加させるように構成される、実施例１－２１のいずれかに記載のディスプレイシステム。
２３．ユーザの視野内のオブジェクトのユーザ知覚を改変することは、オブジェクトをハイライトすることを含む、実施例１－２２のいずれかに記載のディスプレイシステム。
２４．オブジェクトをハイライトすることは、部分的に透明な色をオブジェクトにわたって重畳することを含む、実施例２３に記載のディスプレイシステム。
２５．光を該ユーザの眼の中に指向し、画像を眼内に形成するように構成される、１つまたはそれを上回る光源をさらに備える、実施例１－２４のいずれかに記載のディスプレイシステム。
２６．透明であって、ユーザの眼の正面の場所に配置される、該ディスプレイの少なくとも該部分は、光をユーザに投影するように構成される、１つまたはそれを上回る導波管を備える、実施例１－２５のいずれかに記載のディスプレイシステム。
２７．該１つまたはそれを上回る光源は、光を該１つまたはそれを上回る導波管の中に指向するように構成される、実施例２５に記載のディスプレイシステム。
２８．該光源は、ファイバ走査プロジェクタを備える、実施例２５－２７のいずれかに記載のディスプレイシステム。
２９．該１つまたはそれを上回る環境センサは、該環境を結像するように構成される、１つまたはそれを上回る外向きに面した画像捕捉システムを備える、実施例１－２８のいずれかに記載のディスプレイシステム。
３０．該環境センサは、１つまたはそれを上回る外向きに面したカメラを備える、実施例１－２９に記載のディスプレイシステム。
３１．１つまたはそれを上回る環境センサは、距離測定システムを備える、実施例１－３０のいずれかに記載のディスプレイシステム。
３２．該距離測定システムは、レーザ測距計を備える、実施例３１に記載のディスプレイシステム。
３３．該ユーザの眼の位置および／または移動を追跡するように構成される、眼追跡システムをさらに備える、実施例１－３２のいずれかに記載のディスプレイシステム。
３４．該ユーザの眼を結像するように構成される、１つまたはそれを上回る内向きに面した画像捕捉システムをさらに備える、実施例１－３３のいずれかに記載のディスプレイシステム。
３５．頭部搭載型ディスプレイシステムは、ユーザの視野の第２の部分に提示される画像コンテンツと比較して、ユーザの視野の少なくとも第１の部分に提示される画像コンテンツを異なるように処理するように構成される、実施例１－３４のいずれかに記載のディスプレイシステム。
３６．頭部搭載型ディスプレイシステムは、ユーザの視野の中心領域に提示される画像コンテンツと比較して、ユーザの視野の該周辺領域の少なくとも一部に提示される画像コンテンツを異なるように処理するように構成される、実施例１－３５のいずれかに記載のディスプレイシステム。
３７．該ユーザ知覚を改変することは、増強または強調解除することを含む、実施例１－３７のいずれかに記載のディスプレイシステム。
３８．該処理電子機器によって提供される増強は、画像コンテンツを拡大することを含む、実施例３７に記載のディスプレイシステム。
３９．該処理電子機器によって提供される増強または強調解除は、明度を改変することを含む、実施例３７－３８のいずれかに記載のディスプレイシステム。
４０．該処理電子機器によって提供される増強は、明度を増加させることを含む、実施例３７－３９のいずれかに記載のディスプレイシステム。
４１．該処理電子機器によって提供される強調解除は、明度を減少させることを含む、実施例３７－４０のいずれかに記載のディスプレイシステム。
４２．該処理電子機器によって提供される強調解除は、明度を増加させることを含む、実施例３７－４１のいずれかに記載のディスプレイシステム。
４３．該処理電子機器によって提供される増強または強調解除は、コントラストを改変することを含む、実施例３７－４２のいずれかに記載のディスプレイシステム。
４４．該処理電子機器によって提供される増強は、コントラストを増加させることを含む、実施例３７－４３のいずれかに記載のディスプレイシステム。
４５．該処理電子機器によって提供される強調解除は、コントラストを減少させることを含む、実施例３７－４４のいずれかに記載のディスプレイシステム。
４６．該処理電子機器によって提供される増強または強調解除は、色飽和を改変することを含む、実施例３７－４５のいずれかに記載のディスプレイシステム。
４７．該処理電子機器によって提供される増強は、色飽和を増加させることを含む、実施例３７－４６のいずれかに記載のディスプレイシステム。
４８．該処理電子機器によって提供される強調解除は、色飽和を減少させることを含む、実施例３７－４７のいずれかに記載のディスプレイシステム。
４９．該処理電子機器によって提供される増強または強調解除は、鮮明度を改変することを含む、実施例３７－４８のいずれかに記載のディスプレイシステム。
５０．該処理電子機器によって提供される増強は、鮮明度を増加させることを含む、実施例３７－４９のいずれかに記載のディスプレイシステム。
５１．該処理電子機器によって提供される強調解除は、鮮明度を減少させることを含む、実施例３７－５０のいずれかに記載のディスプレイシステム。
５２．該処理電子機器によって提供される増強または強調解除は、不透明度を改変することを含む、実施例３７－５１のいずれかに記載のディスプレイシステム。
５３．該処理電子機器によって提供される増強は、不透明度を増加させることを含む、実施例３７－５２のいずれかに記載のディスプレイシステム。
５４．該処理電子機器によって提供される強調解除は、不透明度を減少させることを含む、実施例３７－５３のいずれかに記載のディスプレイシステム。
５５．該処理電子機器によって提供される強調解除は、不透明度を増加させることを含む、実施例３７－５４のいずれかに記載のディスプレイシステム。
５６．増強は、縁増強特徴を含む、実施例３７－５５のいずれかに記載のディスプレイシステム。
５７．該処理電子機器によって提供される増強または強調解除は、カラーバランスを偏移させることを含む、実施例３７－５６のいずれかに記載のディスプレイシステム。
【0009】
１．光をユーザの眼に投影し、拡張現実画像コンテンツを該ユーザの視野内に表示するように構成される、ディスプレイシステムであって、
ユーザの頭部上に支持されるように構成される、フレームと、
フレーム上に配置される、頭部搭載型ディスプレイであって、該ディスプレイは、画像コンテンツを該ユーザの視野に提示するように、光を該ユーザの眼の中に投影するように構成され、該ディスプレイの少なくとも一部は、透明部分が、ユーザおよび頭部搭載型ディスプレイの正面の環境の一部からの光をユーザの眼に伝送し、ユーザおよび頭部搭載型ディスプレイの正面の環境の該部分のビューを提供するように、透明であって、ユーザが該頭部搭載型ディスプレイシステムを装着すると、ユーザの眼の正面の場所に配置される、頭部搭載型ディスプレイと、
ユーザの環境内のオブジェクトを結像するように構成される、１つまたはそれを上回る外向きに面したカメラと、
ユーザの眼が視認している場所を判定するように構成される、１つまたはそれを上回る眼追跡センサと、
該ディスプレイ、該外向きに面したカメラ、および該眼追跡センサと通信し、該ディスプレイ上での画像コンテンツの提示を制御する、処理電子機器であって、
画像コンテンツを該ユーザの視野に表示し、
眼が指向されているオブジェクトを判定し、
眼が指向されているオブジェクトのレンダリングの増強または眼が指向されているオブジェクトを囲繞する１つまたはそれを上回る特徴の強調解除のうちの少なくとも１つを行う、
ように構成される、処理電子機器と、
を備える、頭部搭載型ディスプレイシステム。
２．処理電子機器は、オブジェクトをディスプレイ上に表示し、オブジェクトのレンダリングを増強させるように構成される、実施例１に記載のディスプレイシステム。
３．処理電子機器は、ディスプレイ上に、オブジェクトを囲繞する該１つまたはそれを上回る特徴を表示し、ディスプレイ上にレンダリングされるような眼が指向されているオブジェクトを囲繞する該１つまたはそれを上回る特徴を強調解除するように構成される、実施例１または２に記載のディスプレイシステム。
４．オブジェクトを囲繞する該１つまたはそれを上回る特徴は、ユーザおよび頭部搭載型ディスプレイシステムの正面の環境内の実特徴を備え、処理電子機器は、眼が指向されているオブジェクトを囲繞する該１つまたはそれを上回る実特徴を強調解除するように構成される、実施例１－３のいずれかに記載のディスプレイシステム。
５．処理電子機器は、ユーザおよび頭部搭載型ディスプレイの正面の環境内の該１つまたはそれを上回る実特徴がユーザにあまり目立たないように、眼の中に指向される光の強度を増加させることによって、眼が指向されているオブジェクトを囲繞する該１つまたはそれを上回る実特徴を強調解除するように構成される、実施例４に記載のディスプレイシステム。
６．処理電子機器は、ユーザおよび頭部搭載型ディスプレイの正面の環境内の特徴がユーザにあまり目立たないように、眼の中に投影される光の強度を増加させるように構成される、実施例１－４のいずれかに記載のディスプレイシステム。
７．該強調解除は、該透明部分を通した環境のビューの明度、可視性、鮮明度、またはコントラストの減少または該透明部分を通した環境の色の改変のうちの１つまたはそれを上回るものを含む、実施例１－６のいずれかに記載のディスプレイシステム。
８．処理電子機器は、画像を該ディスプレイ上に表示すること以外によって、ユーザおよび頭部搭載型ディスプレイの正面の環境内の特徴がユーザにあまり目立たないように、眼の中に投影される光の強度を増加させるように構成される、実施例１－７のいずれかに記載のディスプレイシステム。
９．該強調解除は、不透明度を増加させ、該透明部分を通した環境のビューを減衰させることを含む、実施例１－８のいずれかに記載のディスプレイシステム。
１０．該強調解除は、画像を該ディスプレイ上に表示すること以外によって、該透明部分を通した環境のビューの明度、可視性、鮮明度、またはコントラストの減少または該透明部分を通した環境の色の改変のうちの１つまたはそれを上回るものを含む、実施例１－９のいずれかに記載のディスプレイシステム。
１１．該強調解除は、画像を該ディスプレイ上に表示すること以外によって、不透明度を増加させ、該透明部分を通した環境のビューを減衰させることを含む、実施例１－１０のいずれかに記載のディスプレイシステム。
１２．処理電子機器は、背景を改変することによって、ユーザの視野内の実または仮想オブジェクトのユーザ知覚を改変するように構成される、実施例１－１１のいずれかに記載のディスプレイシステム。
１３．背景を改変することは、背景の均質性を増加させ、それによって、背景内の可視特徴を低減させることを含む、実施例１２に記載のディスプレイシステム。
１４．背景の均質性を増加させることは、背景内の特徴をウォッシュアウトまたはペイントオーバーすることを含む、実施例１３に記載のディスプレイシステム。
１５．処理電子機器は、ユーザおよび頭部搭載型ディスプレイの正面の環境内の特徴がユーザにあまり目立たないように、背景内の光の強度を増加させることによって、背景を改変するように構成される、実施例１２－１４のいずれかに記載のディスプレイシステム。
１６．処理電子機器は、該ディスプレイによって表示される画像コンテンツのレンダリングを増強させるように構成される、実施例１－１５のいずれかに記載のディスプレイシステム。
１７．処理電子機器は、該ディスプレイによって表示される画像コンテンツのレンダリングを強調解除するように構成される、実施例１－１６のいずれかに記載のディスプレイシステム。
１８．光をユーザの眼に投影し、拡張現実画像コンテンツを該ユーザの視野内に表示するように構成される、ディスプレイシステムであって、
ユーザの頭部上に支持されるように構成される、フレームと、
フレーム上に配置される、頭部搭載型ディスプレイであって、該ディスプレイは、画像コンテンツを該ユーザの視野に提示するように、光を該ユーザの眼の中に投影するように構成され、該ディスプレイの少なくとも一部は、該透明部分が、ユーザおよび該頭部搭載型ディスプレイの正面の環境の一部からの光をユーザの眼に伝送し、ユーザおよび該頭部搭載型ディスプレイの正面の環境の該部分のビューを提供するように、透明であって、ユーザが該頭部搭載型ディスプレイシステムを装着すると、ユーザの眼の正面の場所に配置される、頭部搭載型ディスプレイと、
該ディスプレイと通信する、処理電子機器であって、
画像コンテンツを該ユーザの視野に表示し、
該ディスプレイによって表示される画像コンテンツのレンダリングの増強または画像コンテンツのレンダリングの強調解除のうちの少なくとも１つを行う、
ように構成され、
該増強は、コントラスト、色飽和、明度、縁可視性、不透明度、または鮮明度の増加、ハイライト、またはディスプレイによって表示される他の画像コンテンツに対するレンダリングされる画像コンテンツの色またはカラーバランスの改変のうちの１つまたはそれを上回るものを含み、
該強調解除は、コントラスト、色飽和、明度、縁可視性、不透明度、または鮮明度の減少、またはディスプレイによって表示される他の画像コンテンツに対するレンダリングされる画像コンテンツの色またはカラーバランスの改変のうちの１つまたはそれを上回るものを含む、
処理電子機器と、
を備える、頭部搭載型ディスプレイシステム。
１９．処理電子機器は、該ディスプレイによって表示される画像コンテンツのレンダリングを増強させるように構成される、実施例１８に記載のディスプレイシステム。
２０．処理電子機器は、該ディスプレイによって表示される画像コンテンツのレンダリングを強調解除するように構成される、実施例１８または１９に記載のディスプレイシステム。
２１．処理電子機器は、ディスプレイによって表示される周囲画像コンテンツに対して該ディスプレイによって表示される画像コンテンツのレンダリングを増強させるように構成される、実施例１８－２０のいずれかに記載のディスプレイシステム。
２２．処理電子機器は、該強調解除された画像コンテンツによって囲繞されるディスプレイによって表示される画像コンテンツに対して該ディスプレイによって表示される画像コンテンツのレンダリングを強調解除するように構成される、実施例１８－２１のいずれかに記載のディスプレイシステム。
２３．ユーザの環境内のオブジェクトを結像するように構成される、１つまたはそれを上回る外向きに面したカメラをさらに備える、実施例１８－２２のいずれかに記載のディスプレイシステム。
２４．ユーザの眼が視認している場所を判定するように構成される、１つまたはそれを上回る眼追跡センサをさらに備える、実施例１８－２３のいずれかに記載のディスプレイシステム。
２５．光をユーザの眼に投影し、拡張現実画像コンテンツを該ユーザの視野内に表示するように構成される、頭部搭載型ディスプレイシステムであって、
ユーザの頭部上に支持されるように構成される、フレームと、
フレーム上に配置される、頭部搭載型ディスプレイであって、該ディスプレイは、画像コンテンツを該ユーザの視野に提示するように、光を該ユーザの眼の中に投影するように構成され、該ディスプレイの少なくとも一部は、透明部分が、ユーザおよび該頭部搭載型ディスプレイの正面の環境の一部からの光をユーザの眼に伝送し、ユーザおよび該頭部搭載型ディスプレイの正面の環境の該部分のビューを提供するように、透明であって、ユーザが該頭部搭載型ディスプレイシステムを装着すると、ユーザの眼の正面の場所に配置される、頭部搭載型ディスプレイと、
ユーザの環境内のオブジェクトを結像するように構成される、１つまたはそれを上回る外向きに面したカメラと、
該ディスプレイおよび該外向きに面したカメラと通信する、処理電子機器であって、
画像コンテンツを該ユーザの視野に表示し、
オブジェクト認識を１つまたはそれを上回る外向きに面したカメラから受信された画像に適用することによって、ユーザの環境内の１つまたはそれを上回るオブジェクトを認識し、
該オブジェクト認識に基づいて、該ディスプレイによって表示される画像コンテンツのレンダリングの増強または画像コンテンツのレンダリングの強調解除のうちの少なくとも１つを行う、
ように構成され、
該増強は、コントラスト、色飽和、明度、縁可視性、不透明度、鮮明度、ハイライトの増加、またはレンダリングされる画像コンテンツの色またはカラーバランスの改変のうちの１つまたはそれを上回るものを含み、
該強調解除は、コントラスト、色飽和、明度、縁可視性、不透明度、または鮮明度の減少、またはレンダリングされる画像コンテンツの色またはカラーバランスの改変のうちの１つまたはそれを上回るものを含む、
処理電子機器と、
を備える、頭部搭載型ディスプレイシステム。
２６．１つまたはそれを上回る外向きに面したカメラは、該フレーム上に配置される、実施例２５に記載のディスプレイシステム。
２７．処理電子機器は、該ディスプレイによって表示される画像コンテンツのレンダリングを増強させるように構成される、実施例２５または２６に記載のディスプレイシステム。
２８．処理電子機器は、該ディスプレイによって表示される画像コンテンツのレンダリングを強調解除するように構成される、実施例２５－２７のいずれかに記載のディスプレイシステム。
２９．光をユーザの眼に投影し、拡張現実画像コンテンツを該ユーザの視野内に表示するように構成される、頭部搭載型ディスプレイシステムであって、
ユーザの頭部上に支持されるように構成される、フレームと、
フレーム上に配置される、頭部搭載型ディスプレイであって、該ディスプレイは、画像コンテンツを該ユーザの視野に提示するように、光を該ユーザの眼の中に投影するように構成され、該ディスプレイの少なくとも一部は、透明部分が、ユーザおよび該頭部搭載型ディスプレイの正面の環境の一部からの光をユーザの眼に伝送し、ユーザおよび該頭部搭載型ディスプレイの正面の環境の該部分のビューを提供するように、透明であって、ユーザが該頭部搭載型ディスプレイシステムを装着すると、ユーザの眼の正面の場所に配置される、頭部搭載型ディスプレイと、
ユーザの環境内のオブジェクトを結像するように構成される、１つまたはそれを上回る外向きに面したカメラと、
該ディスプレイおよび該外向きに面したカメラと通信する、処理電子機器であって、
画像コンテンツを該ユーザの視野に表示し、
オブジェクト認識を１つまたはそれを上回る外向きに面したカメラから受信された画像に適用することによって、ユーザの環境内の１つまたはそれを上回るオブジェクトを認識し、
該オブジェクト認識に基づいて、該透明部分を通したユーザの眼へのユーザの正面の該環境のビューの少なくとも一部を強調解除する、
ように構成される、処理電子機器と、
を備える、頭部搭載型ディスプレイシステム。
３０．該強調解除は、該透明部分を通した環境のビューの明度、可視性、鮮明度、またはコントラストの減少または該透明部分を通した環境の色の改変のうちの１つまたはそれを上回るものを含む、実施例２９に記載のディスプレイシステム。
３１．該強調解除は、不透明度を増加させ、該透明部分を通した環境のビューを減衰させることを含む、実施例２９または３０に記載のディスプレイシステム。
３２．該強調解除は、画像を該ディスプレイ上に表示すること以外によって、該透明部分を通した環境のビューの明度、可視性、鮮明度、またはコントラストの減少または該透明部分を通した環境の色の改変のうちの１つまたはそれを上回るものを含む、実施例２９－３１のいずれかに記載のディスプレイシステム。
３３．該強調解除は、画像を該ディスプレイ上に表示すること以外によって、不透明度を増加させ、該透明部分を通した環境のビューを減衰させることを含む、実施例２９－３２のいずれかに記載のディスプレイシステム。
３４．処理電子機器は、背景を改変することによって、ユーザの視野内の実または仮想オブジェクトのユーザ知覚を改変するように構成される、実施例２９－３３のいずれかに記載のディスプレイシステム。
３５．背景を改変することは、背景の均質性を増加させ、それによって、背景内の可視特徴を低減させることを含む、実施例３４に記載のディスプレイシステム。
３６．背景の均質性を増加させることは、背景内の特徴をウォッシュアウトまたはペイントオーバーすることを含む、実施例３５に記載のディスプレイシステム。
３７．処理電子機器は、ユーザおよび頭部搭載型ディスプレイの正面の環境内の特徴がユーザにあまり目立たないように、背景内の光の強度を増加させることによって、背景を改変するように構成される、実施例２９－３６のいずれかに記載のディスプレイシステム。
３８．処理電子機器は、ユーザおよび頭部搭載型ディスプレイの正面の環境内の特徴がユーザにあまり目立たないように、光の強度を増加させるように構成される、実施例２９－３７のいずれかに記載のディスプレイシステム。
３９．光をユーザの眼に投影し、拡張現実画像コンテンツを該ユーザの視野内に表示するように構成される、頭部搭載型ディスプレイシステムであって、
ユーザの頭部上に支持されるように構成される、フレームと、
ユーザの環境を感知するための１つまたはそれを上回る外向きに面したセンサと、
フレーム上に配置される、頭部搭載型ディスプレイであって、該ディスプレイは、画像コンテンツを該ユーザの視野に提示するように、光を該ユーザの眼の中に投影するように構成され、該ディスプレイの少なくとも一部は、透明部分が、ユーザおよび該頭部搭載型ディスプレイの正面の環境の一部からの光をユーザの眼に伝送し、ユーザおよび該頭部搭載型ディスプレイの正面の環境の該部分のビューを提供するように、透明であって、ユーザが該頭部搭載型ディスプレイシステムを装着すると、ユーザの眼の正面の場所に配置される、頭部搭載型ディスプレイと、
該ディスプレイおよびユーザに関するデータ記録を含む１つまたはそれを上回る記憶システムと通信する、処理電子機器であって、
画像コンテンツを該ユーザの視野に表示し、
該１つまたはそれを上回る外向きに面したセンサからの出力およびユーザに関する該１つまたはそれを上回るデータ記録に基づいて、ユーザの視野内の実または仮想オブジェクトのユーザ知覚を改変する、
ように構成される、処理電子機器と、
を備える、頭部搭載型ディスプレイシステム。
４０．該１つまたはそれを上回る外向きに面したセンサは、フレーム上に配置される、１つまたはそれを上回る外向きに面したカメラを備える、実施例３９に記載のディスプレイシステム。
４１．該１つまたはそれを上回る外向きに面したカメラは、ユーザの環境内のオブジェクトを結像するように構成され、該処理電子機器は、オブジェクト認識を１つまたはそれを上回る外向きに面したカメラから受信された画像に適用することによって、ユーザの環境内の１つまたはそれを上回るオブジェクトを認識し、該オブジェクト認識に基づいて、ユーザの視野内の実または仮想オブジェクトのユーザ知覚を改変するように構成される、実施例３９または４０に記載のディスプレイシステム。
４２．該処理電子機器は、ユーザ注目を伴う状況を感知し、状況に対するユーザ意図を判定し、少なくとも部分的に、該ユーザ意図に基づいて、ユーザの視野内の実または仮想オブジェクトのユーザ知覚を改変するように構成される、実施例３９－４１のいずれかに記載のディスプレイシステム。
４３．ユーザの視野内の実または仮想オブジェクトのユーザ知覚を改変することは、ユーザの視野内の実または仮想オブジェクトのユーザ知覚の増強または強調解除のうちの少なくとも１つを行うことを含む、実施例３９－４２のいずれかに記載のディスプレイシステム。
４４．該１つまたはそれを上回る外向きに面したカメラは、ユーザの環境内のオブジェクトを結像するように構成され、該処理電子機器は、オブジェクト認識を１つまたはそれを上回る外向きに面したカメラから受信された画像に適用することによって、ユーザの環境内の１つまたはそれを上回るオブジェクトを認識し、該オブジェクト認識に基づいて、ユーザの視野内の実または仮想オブジェクトのユーザ知覚の増強または強調解除のうちの少なくとも１つを行うように構成される、実施例３９－４３のいずれかに記載のディスプレイシステム。
４５．該データ記録は、ユーザの運転記録を含む、実施例３９－４４のいずれかに記載のディスプレイシステム。
４６．該データ記録は、ユーザが運転違反を行なったかどうかを含む、実施例４５のいずれかに記載のディスプレイシステム。
４７．該データ記録は、ユーザの年齢およびユーザが１０代のドライバであるかどうかのうちの少なくとも１つを含む、実施例４５または４６のいずれかに記載のディスプレイシステム。
４８．光をユーザの眼に投影し、拡張現実画像コンテンツを該ユーザの視野内に表示するように構成される、頭部搭載型ディスプレイシステムであって、
ユーザの頭部上に支持されるように構成される、フレームと、
フレーム上に配置される、頭部搭載型ディスプレイであって、該ディスプレイは、画像コンテンツを該ユーザの視野に提示するように、光を該ユーザの眼の中に投影するように構成され、該ディスプレイの少なくとも一部は、透明部分が、ユーザおよび該頭部搭載型ディスプレイの正面の環境の一部からの光をユーザの眼に伝送し、ユーザおよび該頭部搭載型ディスプレイの正面の環境の該部分のビューを提供するように、透明であって、ユーザが該頭部搭載型ディスプレイシステムを装着すると、ユーザの眼の正面の場所に配置される、頭部搭載型ディスプレイと、
ユーザの環境内のオブジェクトを結像するように構成される、１つまたはそれを上回る外向きに面したカメラと、
該ディスプレイおよび該外向きに面したカメラと通信する、処理電子機器であって、
画像コンテンツを該ユーザの視野に表示し、
オブジェクト認識を１つまたはそれを上回る外向きに面したカメラから受信された画像に適用することによって、ユーザの環境内の１つまたはそれを上回るオブジェクトを認識し、
該オブジェクト認識に基づいて、該透明部分を通したユーザの眼へのユーザの正面の該環境のビューの少なくとも一部をハイライトする、
ように構成される、処理電子機器と、
を備える、頭部搭載型ディスプレイシステム。
４９．オブジェクトをハイライトすることは、部分的に透明な色をオブジェクトにわたって重畳することを含む、実施例４８に記載の頭部搭載型ディスプレイシステム。
５０．オブジェクトをハイライトすることは、該１つまたはそれを上回る外向きに面したカメラからの画像を表示すること以外によって、オブジェクトをハイライトすることを含む、実施例４８または４９に記載の頭部搭載型ディスプレイシステム。
ユーザの頭部上に支持されるように構成される、フレームと、
フレーム上に配置される、頭部搭載型ディスプレイであって、該ディスプレイは、画像コンテンツを該ユーザの視野に提示するように、光を該ユーザの眼の中に投影するように構成され、該ディスプレイの少なくとも一部は、透明部分が、ユーザおよび頭部搭載型ディスプレイの正面の環境の一部からの光をユーザの眼に伝送し、ユーザおよび頭部搭載型ディスプレイの正面の環境の該部分のビューを提供するように、透明であって、ユーザが該頭部搭載型ディスプレイシステムを装着すると、ユーザの眼の正面の場所に配置される、頭部搭載型ディスプレイと、
ユーザの環境内のオブジェクトを結像するように構成される、１つまたはそれを上回る外向きに面したカメラと、
ユーザの眼が視認している場所を判定するように構成される、１つまたはそれを上回る眼追跡センサと、
該ディスプレイ、該外向きに面したカメラ、および該眼追跡センサと通信し、該ディスプレイ上での画像コンテンツの提示を制御する、処理電子機器であって、
画像コンテンツを該ユーザの視野に表示し、
眼が指向されているオブジェクトを判定し、
眼が指向されているオブジェクトのレンダリングの増強または眼が指向されているオブジェクトを囲繞する１つまたはそれを上回る特徴の強調解除のうちの少なくとも１つを行う、
ように構成される、処理電子機器と、
を備える、頭部搭載型ディスプレイシステム。
２．処理電子機器は、オブジェクトをディスプレイ上に表示し、オブジェクトのレンダリングを増強させるように構成される、実施例１に記載のディスプレイシステム。
３．処理電子機器は、ディスプレイ上に、オブジェクトを囲繞する該１つまたはそれを上回る特徴を表示し、ディスプレイ上にレンダリングされるような眼が指向されているオブジェクトを囲繞する該１つまたはそれを上回る特徴を強調解除するように構成される、実施例１または２に記載のディスプレイシステム。
４．オブジェクトを囲繞する該１つまたはそれを上回る特徴は、ユーザおよび頭部搭載型ディスプレイシステムの正面の環境内の実特徴を備え、処理電子機器は、眼が指向されているオブジェクトを囲繞する該１つまたはそれを上回る実特徴を強調解除するように構成される、実施例１－３のいずれかに記載のディスプレイシステム。
５．処理電子機器は、ユーザおよび頭部搭載型ディスプレイの正面の環境内の該１つまたはそれを上回る実特徴がユーザにあまり目立たないように、眼の中に指向される光の強度を増加させることによって、眼が指向されているオブジェクトを囲繞する該１つまたはそれを上回る実特徴を強調解除するように構成される、実施例４に記載のディスプレイシステム。
６．処理電子機器は、ユーザおよび頭部搭載型ディスプレイの正面の環境内の特徴がユーザにあまり目立たないように、眼の中に投影される光の強度を増加させるように構成される、実施例１－４のいずれかに記載のディスプレイシステム。
７．該強調解除は、該透明部分を通した環境のビューの明度、可視性、鮮明度、またはコントラストの減少または該透明部分を通した環境の色の改変のうちの１つまたはそれを上回るものを含む、実施例１－６のいずれかに記載のディスプレイシステム。
８．処理電子機器は、画像を該ディスプレイ上に表示すること以外によって、ユーザおよび頭部搭載型ディスプレイの正面の環境内の特徴がユーザにあまり目立たないように、眼の中に投影される光の強度を増加させるように構成される、実施例１－７のいずれかに記載のディスプレイシステム。
９．該強調解除は、不透明度を増加させ、該透明部分を通した環境のビューを減衰させることを含む、実施例１－８のいずれかに記載のディスプレイシステム。
１０．該強調解除は、画像を該ディスプレイ上に表示すること以外によって、該透明部分を通した環境のビューの明度、可視性、鮮明度、またはコントラストの減少または該透明部分を通した環境の色の改変のうちの１つまたはそれを上回るものを含む、実施例１－９のいずれかに記載のディスプレイシステム。
１１．該強調解除は、画像を該ディスプレイ上に表示すること以外によって、不透明度を増加させ、該透明部分を通した環境のビューを減衰させることを含む、実施例１－１０のいずれかに記載のディスプレイシステム。
１２．処理電子機器は、背景を改変することによって、ユーザの視野内の実または仮想オブジェクトのユーザ知覚を改変するように構成される、実施例１－１１のいずれかに記載のディスプレイシステム。
１３．背景を改変することは、背景の均質性を増加させ、それによって、背景内の可視特徴を低減させることを含む、実施例１２に記載のディスプレイシステム。
１４．背景の均質性を増加させることは、背景内の特徴をウォッシュアウトまたはペイントオーバーすることを含む、実施例１３に記載のディスプレイシステム。
１５．処理電子機器は、ユーザおよび頭部搭載型ディスプレイの正面の環境内の特徴がユーザにあまり目立たないように、背景内の光の強度を増加させることによって、背景を改変するように構成される、実施例１２－１４のいずれかに記載のディスプレイシステム。
１６．処理電子機器は、該ディスプレイによって表示される画像コンテンツのレンダリングを増強させるように構成される、実施例１－１５のいずれかに記載のディスプレイシステム。
１７．処理電子機器は、該ディスプレイによって表示される画像コンテンツのレンダリングを強調解除するように構成される、実施例１－１６のいずれかに記載のディスプレイシステム。
１８．光をユーザの眼に投影し、拡張現実画像コンテンツを該ユーザの視野内に表示するように構成される、ディスプレイシステムであって、
ユーザの頭部上に支持されるように構成される、フレームと、
フレーム上に配置される、頭部搭載型ディスプレイであって、該ディスプレイは、画像コンテンツを該ユーザの視野に提示するように、光を該ユーザの眼の中に投影するように構成され、該ディスプレイの少なくとも一部は、該透明部分が、ユーザおよび該頭部搭載型ディスプレイの正面の環境の一部からの光をユーザの眼に伝送し、ユーザおよび該頭部搭載型ディスプレイの正面の環境の該部分のビューを提供するように、透明であって、ユーザが該頭部搭載型ディスプレイシステムを装着すると、ユーザの眼の正面の場所に配置される、頭部搭載型ディスプレイと、
該ディスプレイと通信する、処理電子機器であって、
画像コンテンツを該ユーザの視野に表示し、
該ディスプレイによって表示される画像コンテンツのレンダリングの増強または画像コンテンツのレンダリングの強調解除のうちの少なくとも１つを行う、
ように構成され、
該増強は、コントラスト、色飽和、明度、縁可視性、不透明度、または鮮明度の増加、ハイライト、またはディスプレイによって表示される他の画像コンテンツに対するレンダリングされる画像コンテンツの色またはカラーバランスの改変のうちの１つまたはそれを上回るものを含み、
該強調解除は、コントラスト、色飽和、明度、縁可視性、不透明度、または鮮明度の減少、またはディスプレイによって表示される他の画像コンテンツに対するレンダリングされる画像コンテンツの色またはカラーバランスの改変のうちの１つまたはそれを上回るものを含む、
処理電子機器と、
を備える、頭部搭載型ディスプレイシステム。
１９．処理電子機器は、該ディスプレイによって表示される画像コンテンツのレンダリングを増強させるように構成される、実施例１８に記載のディスプレイシステム。
２０．処理電子機器は、該ディスプレイによって表示される画像コンテンツのレンダリングを強調解除するように構成される、実施例１８または１９に記載のディスプレイシステム。
２１．処理電子機器は、ディスプレイによって表示される周囲画像コンテンツに対して該ディスプレイによって表示される画像コンテンツのレンダリングを増強させるように構成される、実施例１８－２０のいずれかに記載のディスプレイシステム。
２２．処理電子機器は、該強調解除された画像コンテンツによって囲繞されるディスプレイによって表示される画像コンテンツに対して該ディスプレイによって表示される画像コンテンツのレンダリングを強調解除するように構成される、実施例１８－２１のいずれかに記載のディスプレイシステム。
２３．ユーザの環境内のオブジェクトを結像するように構成される、１つまたはそれを上回る外向きに面したカメラをさらに備える、実施例１８－２２のいずれかに記載のディスプレイシステム。
２４．ユーザの眼が視認している場所を判定するように構成される、１つまたはそれを上回る眼追跡センサをさらに備える、実施例１８－２３のいずれかに記載のディスプレイシステム。
２５．光をユーザの眼に投影し、拡張現実画像コンテンツを該ユーザの視野内に表示するように構成される、頭部搭載型ディスプレイシステムであって、
ユーザの頭部上に支持されるように構成される、フレームと、
フレーム上に配置される、頭部搭載型ディスプレイであって、該ディスプレイは、画像コンテンツを該ユーザの視野に提示するように、光を該ユーザの眼の中に投影するように構成され、該ディスプレイの少なくとも一部は、透明部分が、ユーザおよび該頭部搭載型ディスプレイの正面の環境の一部からの光をユーザの眼に伝送し、ユーザおよび該頭部搭載型ディスプレイの正面の環境の該部分のビューを提供するように、透明であって、ユーザが該頭部搭載型ディスプレイシステムを装着すると、ユーザの眼の正面の場所に配置される、頭部搭載型ディスプレイと、
ユーザの環境内のオブジェクトを結像するように構成される、１つまたはそれを上回る外向きに面したカメラと、
該ディスプレイおよび該外向きに面したカメラと通信する、処理電子機器であって、
画像コンテンツを該ユーザの視野に表示し、
オブジェクト認識を１つまたはそれを上回る外向きに面したカメラから受信された画像に適用することによって、ユーザの環境内の１つまたはそれを上回るオブジェクトを認識し、
該オブジェクト認識に基づいて、該ディスプレイによって表示される画像コンテンツのレンダリングの増強または画像コンテンツのレンダリングの強調解除のうちの少なくとも１つを行う、
ように構成され、
該増強は、コントラスト、色飽和、明度、縁可視性、不透明度、鮮明度、ハイライトの増加、またはレンダリングされる画像コンテンツの色またはカラーバランスの改変のうちの１つまたはそれを上回るものを含み、
該強調解除は、コントラスト、色飽和、明度、縁可視性、不透明度、または鮮明度の減少、またはレンダリングされる画像コンテンツの色またはカラーバランスの改変のうちの１つまたはそれを上回るものを含む、
処理電子機器と、
を備える、頭部搭載型ディスプレイシステム。
２６．１つまたはそれを上回る外向きに面したカメラは、該フレーム上に配置される、実施例２５に記載のディスプレイシステム。
２７．処理電子機器は、該ディスプレイによって表示される画像コンテンツのレンダリングを増強させるように構成される、実施例２５または２６に記載のディスプレイシステム。
２８．処理電子機器は、該ディスプレイによって表示される画像コンテンツのレンダリングを強調解除するように構成される、実施例２５－２７のいずれかに記載のディスプレイシステム。
２９．光をユーザの眼に投影し、拡張現実画像コンテンツを該ユーザの視野内に表示するように構成される、頭部搭載型ディスプレイシステムであって、
ユーザの頭部上に支持されるように構成される、フレームと、
フレーム上に配置される、頭部搭載型ディスプレイであって、該ディスプレイは、画像コンテンツを該ユーザの視野に提示するように、光を該ユーザの眼の中に投影するように構成され、該ディスプレイの少なくとも一部は、透明部分が、ユーザおよび該頭部搭載型ディスプレイの正面の環境の一部からの光をユーザの眼に伝送し、ユーザおよび該頭部搭載型ディスプレイの正面の環境の該部分のビューを提供するように、透明であって、ユーザが該頭部搭載型ディスプレイシステムを装着すると、ユーザの眼の正面の場所に配置される、頭部搭載型ディスプレイと、
ユーザの環境内のオブジェクトを結像するように構成される、１つまたはそれを上回る外向きに面したカメラと、
該ディスプレイおよび該外向きに面したカメラと通信する、処理電子機器であって、
画像コンテンツを該ユーザの視野に表示し、
オブジェクト認識を１つまたはそれを上回る外向きに面したカメラから受信された画像に適用することによって、ユーザの環境内の１つまたはそれを上回るオブジェクトを認識し、
該オブジェクト認識に基づいて、該透明部分を通したユーザの眼へのユーザの正面の該環境のビューの少なくとも一部を強調解除する、
ように構成される、処理電子機器と、
を備える、頭部搭載型ディスプレイシステム。
３０．該強調解除は、該透明部分を通した環境のビューの明度、可視性、鮮明度、またはコントラストの減少または該透明部分を通した環境の色の改変のうちの１つまたはそれを上回るものを含む、実施例２９に記載のディスプレイシステム。
３１．該強調解除は、不透明度を増加させ、該透明部分を通した環境のビューを減衰させることを含む、実施例２９または３０に記載のディスプレイシステム。
３２．該強調解除は、画像を該ディスプレイ上に表示すること以外によって、該透明部分を通した環境のビューの明度、可視性、鮮明度、またはコントラストの減少または該透明部分を通した環境の色の改変のうちの１つまたはそれを上回るものを含む、実施例２９－３１のいずれかに記載のディスプレイシステム。
３３．該強調解除は、画像を該ディスプレイ上に表示すること以外によって、不透明度を増加させ、該透明部分を通した環境のビューを減衰させることを含む、実施例２９－３２のいずれかに記載のディスプレイシステム。
３４．処理電子機器は、背景を改変することによって、ユーザの視野内の実または仮想オブジェクトのユーザ知覚を改変するように構成される、実施例２９－３３のいずれかに記載のディスプレイシステム。
３５．背景を改変することは、背景の均質性を増加させ、それによって、背景内の可視特徴を低減させることを含む、実施例３４に記載のディスプレイシステム。
３６．背景の均質性を増加させることは、背景内の特徴をウォッシュアウトまたはペイントオーバーすることを含む、実施例３５に記載のディスプレイシステム。
３７．処理電子機器は、ユーザおよび頭部搭載型ディスプレイの正面の環境内の特徴がユーザにあまり目立たないように、背景内の光の強度を増加させることによって、背景を改変するように構成される、実施例２９－３６のいずれかに記載のディスプレイシステム。
３８．処理電子機器は、ユーザおよび頭部搭載型ディスプレイの正面の環境内の特徴がユーザにあまり目立たないように、光の強度を増加させるように構成される、実施例２９－３７のいずれかに記載のディスプレイシステム。
３９．光をユーザの眼に投影し、拡張現実画像コンテンツを該ユーザの視野内に表示するように構成される、頭部搭載型ディスプレイシステムであって、
ユーザの頭部上に支持されるように構成される、フレームと、
ユーザの環境を感知するための１つまたはそれを上回る外向きに面したセンサと、
フレーム上に配置される、頭部搭載型ディスプレイであって、該ディスプレイは、画像コンテンツを該ユーザの視野に提示するように、光を該ユーザの眼の中に投影するように構成され、該ディスプレイの少なくとも一部は、透明部分が、ユーザおよび該頭部搭載型ディスプレイの正面の環境の一部からの光をユーザの眼に伝送し、ユーザおよび該頭部搭載型ディスプレイの正面の環境の該部分のビューを提供するように、透明であって、ユーザが該頭部搭載型ディスプレイシステムを装着すると、ユーザの眼の正面の場所に配置される、頭部搭載型ディスプレイと、
該ディスプレイおよびユーザに関するデータ記録を含む１つまたはそれを上回る記憶システムと通信する、処理電子機器であって、
画像コンテンツを該ユーザの視野に表示し、
該１つまたはそれを上回る外向きに面したセンサからの出力およびユーザに関する該１つまたはそれを上回るデータ記録に基づいて、ユーザの視野内の実または仮想オブジェクトのユーザ知覚を改変する、
ように構成される、処理電子機器と、
を備える、頭部搭載型ディスプレイシステム。
４０．該１つまたはそれを上回る外向きに面したセンサは、フレーム上に配置される、１つまたはそれを上回る外向きに面したカメラを備える、実施例３９に記載のディスプレイシステム。
４１．該１つまたはそれを上回る外向きに面したカメラは、ユーザの環境内のオブジェクトを結像するように構成され、該処理電子機器は、オブジェクト認識を１つまたはそれを上回る外向きに面したカメラから受信された画像に適用することによって、ユーザの環境内の１つまたはそれを上回るオブジェクトを認識し、該オブジェクト認識に基づいて、ユーザの視野内の実または仮想オブジェクトのユーザ知覚を改変するように構成される、実施例３９または４０に記載のディスプレイシステム。
４２．該処理電子機器は、ユーザ注目を伴う状況を感知し、状況に対するユーザ意図を判定し、少なくとも部分的に、該ユーザ意図に基づいて、ユーザの視野内の実または仮想オブジェクトのユーザ知覚を改変するように構成される、実施例３９－４１のいずれかに記載のディスプレイシステム。
４３．ユーザの視野内の実または仮想オブジェクトのユーザ知覚を改変することは、ユーザの視野内の実または仮想オブジェクトのユーザ知覚の増強または強調解除のうちの少なくとも１つを行うことを含む、実施例３９－４２のいずれかに記載のディスプレイシステム。
４４．該１つまたはそれを上回る外向きに面したカメラは、ユーザの環境内のオブジェクトを結像するように構成され、該処理電子機器は、オブジェクト認識を１つまたはそれを上回る外向きに面したカメラから受信された画像に適用することによって、ユーザの環境内の１つまたはそれを上回るオブジェクトを認識し、該オブジェクト認識に基づいて、ユーザの視野内の実または仮想オブジェクトのユーザ知覚の増強または強調解除のうちの少なくとも１つを行うように構成される、実施例３９－４３のいずれかに記載のディスプレイシステム。
４５．該データ記録は、ユーザの運転記録を含む、実施例３９－４４のいずれかに記載のディスプレイシステム。
４６．該データ記録は、ユーザが運転違反を行なったかどうかを含む、実施例４５のいずれかに記載のディスプレイシステム。
４７．該データ記録は、ユーザの年齢およびユーザが１０代のドライバであるかどうかのうちの少なくとも１つを含む、実施例４５または４６のいずれかに記載のディスプレイシステム。
４８．光をユーザの眼に投影し、拡張現実画像コンテンツを該ユーザの視野内に表示するように構成される、頭部搭載型ディスプレイシステムであって、
ユーザの頭部上に支持されるように構成される、フレームと、
フレーム上に配置される、頭部搭載型ディスプレイであって、該ディスプレイは、画像コンテンツを該ユーザの視野に提示するように、光を該ユーザの眼の中に投影するように構成され、該ディスプレイの少なくとも一部は、透明部分が、ユーザおよび該頭部搭載型ディスプレイの正面の環境の一部からの光をユーザの眼に伝送し、ユーザおよび該頭部搭載型ディスプレイの正面の環境の該部分のビューを提供するように、透明であって、ユーザが該頭部搭載型ディスプレイシステムを装着すると、ユーザの眼の正面の場所に配置される、頭部搭載型ディスプレイと、
ユーザの環境内のオブジェクトを結像するように構成される、１つまたはそれを上回る外向きに面したカメラと、
該ディスプレイおよび該外向きに面したカメラと通信する、処理電子機器であって、
画像コンテンツを該ユーザの視野に表示し、
オブジェクト認識を１つまたはそれを上回る外向きに面したカメラから受信された画像に適用することによって、ユーザの環境内の１つまたはそれを上回るオブジェクトを認識し、
該オブジェクト認識に基づいて、該透明部分を通したユーザの眼へのユーザの正面の該環境のビューの少なくとも一部をハイライトする、
ように構成される、処理電子機器と、
を備える、頭部搭載型ディスプレイシステム。
４９．オブジェクトをハイライトすることは、部分的に透明な色をオブジェクトにわたって重畳することを含む、実施例４８に記載の頭部搭載型ディスプレイシステム。
５０．オブジェクトをハイライトすることは、該１つまたはそれを上回る外向きに面したカメラからの画像を表示すること以外によって、オブジェクトをハイライトすることを含む、実施例４８または４９に記載の頭部搭載型ディスプレイシステム。
【0010】
５１．光をユーザの眼に投影し、拡張現実画像コンテンツを該ユーザの視野内に表示するように構成される、頭部搭載型ディスプレイシステムであって、
フレーム上に配置される、頭部搭載型ディスプレイであって、該ディスプレイは、画像コンテンツを該ユーザの視野に提示するように、光を該ユーザの眼の中に投影するように構成され、該ディスプレイの少なくとも一部は、透明部分が、ユーザおよび該頭部搭載型ディスプレイの正面の環境の一部からの光をユーザの眼に伝送し、ユーザおよび該頭部搭載型ディスプレイの正面の環境の該部分のビューを提供するように、透明であって、ユーザが該頭部搭載型ディスプレイシステムを装着すると、ユーザの眼の正面の場所に配置される、頭部搭載型ディスプレイと、
ユーザの環境内のオブジェクトを結像するように構成される、外向きに面したカメラと、
該ディスプレイおよび該外向きに面したカメラと通信し、該ディスプレイ上での画像コンテンツの提示を制御する、処理電子機器であって、
ユーザが車両を動作中であることを判定し、
ユーザの視野内のオブジェクトを増強させる、
ように構成される、処理電子機器と、
を備える、頭部搭載型ディスプレイシステム。
５２．ユーザの視野内のオブジェクトを増強させることは、オブジェクトの画像コンテンツをユーザの視野内の第１の場所から第２の場所に移動させることを含む、実施例５１に記載のディスプレイシステム。
５３．ユーザの視野内のオブジェクトを増強させることは、増強を伴わずに、オブジェクトのオリジナル色に対してオブジェクトの知覚される色を改変することを含む、実施例５１または５２に記載のディスプレイシステム。
５４．ユーザの視野内のオブジェクトを増強させることは、表示される画像コンテンツのコントラスト、色飽和、明度、縁可視性、不透明度、または鮮明度の増加のうちの１つまたはそれを上回るものを含む、実施例５１－５３のいずれかに記載のディスプレイシステム。
５５．ユーザの視野内のオブジェクトを増強させることは、部分的に透明な色をオブジェクトにわたって重畳することによって、オブジェクトをハイライトすることを含む、実施例５１－５４のいずれかに記載のディスプレイシステム。
５６．光をユーザの眼に投影し、拡張現実画像コンテンツを該ユーザの視野内に表示するように構成される、頭部搭載型ディスプレイシステムであって、
ユーザの頭部上に支持されるように構成される、フレームと、
１つまたはそれを上回るユーザ記録を含有するように構成される、データベースと、
フレーム上に配置される、頭部搭載型ディスプレイであって、該ディスプレイは、画像コンテンツを該ユーザの視野に提示するように、光を該ユーザの眼の中に投影するように構成され、該ディスプレイの少なくとも一部は、透明部分が、ユーザおよび該頭部搭載型ディスプレイの正面の環境の一部からの光をユーザの眼に伝送し、ユーザおよび該頭部搭載型ディスプレイの正面の環境の該部分のビューを提供するように、透明であって、ユーザが該頭部搭載型ディスプレイシステムを装着すると、ユーザの眼の正面の場所に配置される、頭部搭載型ディスプレイと、
該ディスプレイおよび該データベースと通信する、処理電子機器であって、ユーザの１つまたはそれを上回る記録に基づいて、表示される画像コンテンツの量を低減させるように構成される、処理電子機器と、
を備える、頭部搭載型ディスプレイシステム。
５７．１つまたはそれを上回るユーザ記録は、運転記録、事故記録、是正勧告記録、学業記録、犯罪記録、または逮捕記録のうちの少なくとも１つを含む、実施例５６に記載のディスプレイシステム。
５８．１つまたはそれを上回るユーザ記録は、ユーザの年齢を含む、実施例５６または５７に記載のディスプレイシステム。
５９．ユーザの１つまたはそれを上回る記録に基づいて、表示される画像コンテンツの量を低減させることは、表示される画像コンテンツへのユーザアクセスを選択的に有効にすることを含む、実施例５６－５８のいずれかに記載のディスプレイシステム。
６０．ユーザの１つまたはそれを上回る記録に基づいて、表示される画像コンテンツの量を低減させることは、画像コンテンツを表示しないことを含む、実施例５６－５９のいずれかに記載のディスプレイシステム。
６１．ユーザの１つまたはそれを上回る記録に基づいて、表示される画像コンテンツの量を低減させることは、画像コンテンツを実質的に表示しないことを含む、実施例５６－５９のいずれかに記載のディスプレイシステム。
６２．光をユーザの眼に投影し、拡張現実画像コンテンツを該ユーザの視野内に表示するように構成される、頭部搭載型ディスプレイシステムであって、
ユーザの頭部上に支持されるように構成される、フレームと、
フレーム上に配置される、頭部搭載型ディスプレイであって、該ディスプレイは、画像コンテンツを該ユーザの視野に提示するように、光を該ユーザの眼の中に投影するように構成され、該ディスプレイの少なくとも一部は、透明部分が、ユーザおよび該頭部搭載型ディスプレイの正面の環境の一部からの光をユーザの眼に伝送し、ユーザおよび該頭部搭載型ディスプレイの正面の環境の該部分のビューを提供するように、透明であって、ユーザが該頭部搭載型ディスプレイシステムを装着すると、ユーザの眼の正面の場所に配置される、頭部搭載型ディスプレイと、
該ディスプレイと通信する、処理電子機器であって、
少なくとも部分的に、車両のプロセッサとの確立された通信リンクに基づいて、ユーザが車両に近接していることを判定し、
確立された通信リンクに基づいて、表示される画像コンテンツの量を低減させる、
ように構成される、処理電子機器と、
を備える、頭部搭載型ディスプレイシステム。
６３．ユーザが車両に近接していることを判定することは、無線周波数信号または赤外線信号の送信および／または受信のうちの少なくとも１つを含む、実施例６２に記載の頭部搭載型ディスプレイシステム。
６４．ユーザが車両に近接していることを判定することは、無線周波数信号の送信および／または受信のうちの少なくとも１つを含む、実施例６２に記載の頭部搭載型ディスプレイシステム。
６５．ユーザが車両に近接していることを判定することは、無線信号の送信および／または受信のうちの少なくとも１つを含む、実施例６２に記載の頭部搭載型ディスプレイシステム。
６６．ユーザが車両に近接していることを判定することは、Ｂｌｕｅｔｏｏｔｈ（登録商標）信号の送信および／または受信のうちの少なくとも１つを含む、実施例６２に記載の頭部搭載型ディスプレイシステム。
６７．確立された通信リンクに基づいて、表示される画像コンテンツの量を低減させることは、任意の画像コンテンツを表示しないことを含む、実施例６２または６６のいずれかに記載の頭部搭載型ディスプレイシステム。
６８．確立された通信リンクに基づいて、表示される画像コンテンツの量を低減させることは、実質的に任意の画像コンテンツを表示しないことを含む、実施例６２または６６のいずれかに記載の頭部搭載型ディスプレイシステム。
６９．光をユーザの眼に投影し、拡張現実画像コンテンツを該ユーザの視野内に表示するように構成される、頭部搭載型ディスプレイシステムであって、
ユーザの頭部上に支持されるように構成される、フレームと、
フレーム上に配置される、頭部搭載型ディスプレイであって、該ディスプレイは、画像コンテンツを該ユーザの視野に提示するように、光を該ユーザの眼の中に投影するように構成され、該ディスプレイの少なくとも一部は、透明部分が、ユーザおよび該頭部搭載型ディスプレイの正面の環境の一部からの光をユーザの眼に伝送し、ユーザおよび該頭部搭載型ディスプレイの正面の環境の該部分のビューを提供するように、透明であって、ユーザが該頭部搭載型ディスプレイシステムを装着すると、ユーザの眼の正面の場所に配置される、頭部搭載型ディスプレイと、
ユーザの環境内のオブジェクトを結像するように構成される、外向きに面したカメラと、
オブジェクトの１つまたはそれを上回る位置を識別するように構成される、環境センサと、
該ディスプレイ、該外向きに面したカメラ、および該環境センサと通信する、処理電子機器であって、
ユーザが車両を動作中であるかどうかを判定し、
車両がオブジェクトと衝突するおよびオブジェクトが車両と衝突するリスクのうちの少なくとも１つを判定し、
判定されたリスクに基づいて、表示される画像コンテンツの量を低減させる、
ように構成される、処理電子機器と、
を備える、頭部搭載型ディスプレイシステム。
７０．衝突リスクを判定することは、環境センサによって識別されるオブジェクトの１つまたはそれを上回る位置に基づいて、オブジェクトおよび車両が近づきつつある率を判定することを含む、実施例６９に記載の頭部搭載型ディスプレイシステム。
７１．該オブジェクトの１つまたはそれを上回る位置を識別するように構成される、環境センサは、レーザ測距計、ＬＩＤＡＲ、レーダ距離計、または超音波測距デバイスのうちの少なくとも１つを備える、実施例６９または７０に記載の頭部搭載型ディスプレイシステム。
７２．光をユーザの眼に投影し、拡張現実画像コンテンツを該ユーザの視野内に表示するように構成される、頭部搭載型ディスプレイシステムであって、
フレーム上に配置される、ディスプレイであって、該ディスプレイは、画像コンテンツを該ユーザの視野に提示するように、光を該ユーザの眼の中に投影するように構成され、該ディスプレイの少なくとも一部は、透明部分が、ユーザおよび該頭部搭載型ディスプレイの正面の環境の一部からの光をユーザの眼に伝送し、ユーザおよび該頭部搭載型ディスプレイの正面の環境の該部分のビューを提供するように、透明であって、ユーザが該頭部搭載型ディスプレイシステムを装着すると、ユーザの眼の正面の場所に配置される、ディスプレイと、
ユーザの環境内のオブジェクトを結像するように構成される、外向きに面したカメラと、
該ディスプレイおよび該外向きに面したカメラと通信し、該ディスプレイ上での画像コンテンツの提示を制御する、処理電子機器であって、
ユーザが車両を動作中であることを判定し、
ユーザの眼からの異なる距離から投影されるかのように、異なる発散量において画像コンテンツを該ユーザの視野に表示し、
ユーザが車両を動作中であることの判定に基づいて、表示される画像コンテンツの量を低減させる、
ように構成される、処理電子機器と、
を備える、頭部搭載型ディスプレイシステム。
フレーム上に配置される、頭部搭載型ディスプレイであって、該ディスプレイは、画像コンテンツを該ユーザの視野に提示するように、光を該ユーザの眼の中に投影するように構成され、該ディスプレイの少なくとも一部は、透明部分が、ユーザおよび該頭部搭載型ディスプレイの正面の環境の一部からの光をユーザの眼に伝送し、ユーザおよび該頭部搭載型ディスプレイの正面の環境の該部分のビューを提供するように、透明であって、ユーザが該頭部搭載型ディスプレイシステムを装着すると、ユーザの眼の正面の場所に配置される、頭部搭載型ディスプレイと、
ユーザの環境内のオブジェクトを結像するように構成される、外向きに面したカメラと、
該ディスプレイおよび該外向きに面したカメラと通信し、該ディスプレイ上での画像コンテンツの提示を制御する、処理電子機器であって、
ユーザが車両を動作中であることを判定し、
ユーザの視野内のオブジェクトを増強させる、
ように構成される、処理電子機器と、
を備える、頭部搭載型ディスプレイシステム。
５２．ユーザの視野内のオブジェクトを増強させることは、オブジェクトの画像コンテンツをユーザの視野内の第１の場所から第２の場所に移動させることを含む、実施例５１に記載のディスプレイシステム。
５３．ユーザの視野内のオブジェクトを増強させることは、増強を伴わずに、オブジェクトのオリジナル色に対してオブジェクトの知覚される色を改変することを含む、実施例５１または５２に記載のディスプレイシステム。
５４．ユーザの視野内のオブジェクトを増強させることは、表示される画像コンテンツのコントラスト、色飽和、明度、縁可視性、不透明度、または鮮明度の増加のうちの１つまたはそれを上回るものを含む、実施例５１－５３のいずれかに記載のディスプレイシステム。
５５．ユーザの視野内のオブジェクトを増強させることは、部分的に透明な色をオブジェクトにわたって重畳することによって、オブジェクトをハイライトすることを含む、実施例５１－５４のいずれかに記載のディスプレイシステム。
５６．光をユーザの眼に投影し、拡張現実画像コンテンツを該ユーザの視野内に表示するように構成される、頭部搭載型ディスプレイシステムであって、
ユーザの頭部上に支持されるように構成される、フレームと、
１つまたはそれを上回るユーザ記録を含有するように構成される、データベースと、
フレーム上に配置される、頭部搭載型ディスプレイであって、該ディスプレイは、画像コンテンツを該ユーザの視野に提示するように、光を該ユーザの眼の中に投影するように構成され、該ディスプレイの少なくとも一部は、透明部分が、ユーザおよび該頭部搭載型ディスプレイの正面の環境の一部からの光をユーザの眼に伝送し、ユーザおよび該頭部搭載型ディスプレイの正面の環境の該部分のビューを提供するように、透明であって、ユーザが該頭部搭載型ディスプレイシステムを装着すると、ユーザの眼の正面の場所に配置される、頭部搭載型ディスプレイと、
該ディスプレイおよび該データベースと通信する、処理電子機器であって、ユーザの１つまたはそれを上回る記録に基づいて、表示される画像コンテンツの量を低減させるように構成される、処理電子機器と、
を備える、頭部搭載型ディスプレイシステム。
５７．１つまたはそれを上回るユーザ記録は、運転記録、事故記録、是正勧告記録、学業記録、犯罪記録、または逮捕記録のうちの少なくとも１つを含む、実施例５６に記載のディスプレイシステム。
５８．１つまたはそれを上回るユーザ記録は、ユーザの年齢を含む、実施例５６または５７に記載のディスプレイシステム。
５９．ユーザの１つまたはそれを上回る記録に基づいて、表示される画像コンテンツの量を低減させることは、表示される画像コンテンツへのユーザアクセスを選択的に有効にすることを含む、実施例５６－５８のいずれかに記載のディスプレイシステム。
６０．ユーザの１つまたはそれを上回る記録に基づいて、表示される画像コンテンツの量を低減させることは、画像コンテンツを表示しないことを含む、実施例５６－５９のいずれかに記載のディスプレイシステム。
６１．ユーザの１つまたはそれを上回る記録に基づいて、表示される画像コンテンツの量を低減させることは、画像コンテンツを実質的に表示しないことを含む、実施例５６－５９のいずれかに記載のディスプレイシステム。
６２．光をユーザの眼に投影し、拡張現実画像コンテンツを該ユーザの視野内に表示するように構成される、頭部搭載型ディスプレイシステムであって、
ユーザの頭部上に支持されるように構成される、フレームと、
フレーム上に配置される、頭部搭載型ディスプレイであって、該ディスプレイは、画像コンテンツを該ユーザの視野に提示するように、光を該ユーザの眼の中に投影するように構成され、該ディスプレイの少なくとも一部は、透明部分が、ユーザおよび該頭部搭載型ディスプレイの正面の環境の一部からの光をユーザの眼に伝送し、ユーザおよび該頭部搭載型ディスプレイの正面の環境の該部分のビューを提供するように、透明であって、ユーザが該頭部搭載型ディスプレイシステムを装着すると、ユーザの眼の正面の場所に配置される、頭部搭載型ディスプレイと、
該ディスプレイと通信する、処理電子機器であって、
少なくとも部分的に、車両のプロセッサとの確立された通信リンクに基づいて、ユーザが車両に近接していることを判定し、
確立された通信リンクに基づいて、表示される画像コンテンツの量を低減させる、
ように構成される、処理電子機器と、
を備える、頭部搭載型ディスプレイシステム。
６３．ユーザが車両に近接していることを判定することは、無線周波数信号または赤外線信号の送信および／または受信のうちの少なくとも１つを含む、実施例６２に記載の頭部搭載型ディスプレイシステム。
６４．ユーザが車両に近接していることを判定することは、無線周波数信号の送信および／または受信のうちの少なくとも１つを含む、実施例６２に記載の頭部搭載型ディスプレイシステム。
６５．ユーザが車両に近接していることを判定することは、無線信号の送信および／または受信のうちの少なくとも１つを含む、実施例６２に記載の頭部搭載型ディスプレイシステム。
６６．ユーザが車両に近接していることを判定することは、Ｂｌｕｅｔｏｏｔｈ（登録商標）信号の送信および／または受信のうちの少なくとも１つを含む、実施例６２に記載の頭部搭載型ディスプレイシステム。
６７．確立された通信リンクに基づいて、表示される画像コンテンツの量を低減させることは、任意の画像コンテンツを表示しないことを含む、実施例６２または６６のいずれかに記載の頭部搭載型ディスプレイシステム。
６８．確立された通信リンクに基づいて、表示される画像コンテンツの量を低減させることは、実質的に任意の画像コンテンツを表示しないことを含む、実施例６２または６６のいずれかに記載の頭部搭載型ディスプレイシステム。
６９．光をユーザの眼に投影し、拡張現実画像コンテンツを該ユーザの視野内に表示するように構成される、頭部搭載型ディスプレイシステムであって、
ユーザの頭部上に支持されるように構成される、フレームと、
フレーム上に配置される、頭部搭載型ディスプレイであって、該ディスプレイは、画像コンテンツを該ユーザの視野に提示するように、光を該ユーザの眼の中に投影するように構成され、該ディスプレイの少なくとも一部は、透明部分が、ユーザおよび該頭部搭載型ディスプレイの正面の環境の一部からの光をユーザの眼に伝送し、ユーザおよび該頭部搭載型ディスプレイの正面の環境の該部分のビューを提供するように、透明であって、ユーザが該頭部搭載型ディスプレイシステムを装着すると、ユーザの眼の正面の場所に配置される、頭部搭載型ディスプレイと、
ユーザの環境内のオブジェクトを結像するように構成される、外向きに面したカメラと、
オブジェクトの１つまたはそれを上回る位置を識別するように構成される、環境センサと、
該ディスプレイ、該外向きに面したカメラ、および該環境センサと通信する、処理電子機器であって、
ユーザが車両を動作中であるかどうかを判定し、
車両がオブジェクトと衝突するおよびオブジェクトが車両と衝突するリスクのうちの少なくとも１つを判定し、
判定されたリスクに基づいて、表示される画像コンテンツの量を低減させる、
ように構成される、処理電子機器と、
を備える、頭部搭載型ディスプレイシステム。
７０．衝突リスクを判定することは、環境センサによって識別されるオブジェクトの１つまたはそれを上回る位置に基づいて、オブジェクトおよび車両が近づきつつある率を判定することを含む、実施例６９に記載の頭部搭載型ディスプレイシステム。
７１．該オブジェクトの１つまたはそれを上回る位置を識別するように構成される、環境センサは、レーザ測距計、ＬＩＤＡＲ、レーダ距離計、または超音波測距デバイスのうちの少なくとも１つを備える、実施例６９または７０に記載の頭部搭載型ディスプレイシステム。
７２．光をユーザの眼に投影し、拡張現実画像コンテンツを該ユーザの視野内に表示するように構成される、頭部搭載型ディスプレイシステムであって、
フレーム上に配置される、ディスプレイであって、該ディスプレイは、画像コンテンツを該ユーザの視野に提示するように、光を該ユーザの眼の中に投影するように構成され、該ディスプレイの少なくとも一部は、透明部分が、ユーザおよび該頭部搭載型ディスプレイの正面の環境の一部からの光をユーザの眼に伝送し、ユーザおよび該頭部搭載型ディスプレイの正面の環境の該部分のビューを提供するように、透明であって、ユーザが該頭部搭載型ディスプレイシステムを装着すると、ユーザの眼の正面の場所に配置される、ディスプレイと、
ユーザの環境内のオブジェクトを結像するように構成される、外向きに面したカメラと、
該ディスプレイおよび該外向きに面したカメラと通信し、該ディスプレイ上での画像コンテンツの提示を制御する、処理電子機器であって、
ユーザが車両を動作中であることを判定し、
ユーザの眼からの異なる距離から投影されるかのように、異なる発散量において画像コンテンツを該ユーザの視野に表示し、
ユーザが車両を動作中であることの判定に基づいて、表示される画像コンテンツの量を低減させる、
ように構成される、処理電子機器と、
を備える、頭部搭載型ディスプレイシステム。
【0011】
前述の実施例のいずれも、以下に記載される特徴のうちの任意の１つまたはそれを上回るものを含み、以下の実施例のいずれかを生産してもよい。
７３．処理電子機器は、オブジェクトを備える画像コンテンツを改変することによって、ユーザの視野内の仮想オブジェクトのユーザ知覚を改変するように構成されてもよい、実施例１－７２のいずれかに記載のディスプレイシステム。
７４．画像コンテンツを改変することは、オブジェクトを備える画像コンテンツのコントラスト、不透明度、色、色飽和、カラーバランス、サイズ、明度、縁、または鮮明度のうちの少なくとも１つを改変することを含む、実施例７３に記載のディスプレイシステム。
７５．処理電子機器は、オブジェクトを第１の場所から第２の場所に移動させることによって、オブジェクトのユーザ知覚を改変するように構成されてもよい、実施例１－７４のいずれかに記載のディスプレイシステム。
７６．第１の場所は、周辺領域であって、第２の場所は、中心領域である、または第１の場所は、中心領域であって、第２の場所は、周辺領域である、実施例７５に記載のディスプレイシステム。
７７．アラートをユーザに提供するようにさらに構成される、実施例１－７６のいずれかに記載のディスプレイシステム。
７８．アラートは、視覚的アラートまたは聴覚的アラートである、実施例７７に記載のディスプレイシステム。
７９．１つまたはそれを上回る環境センサをさらに備える、実施例１－７８のいずれかに記載のディスプレイシステム。
８０．１つまたはそれを上回る環境センサは、深度センサ、一対の両眼世界カメラ、地理位置センサ、近接度センサ、またはＧＰＳを備える、実施例１－７９のいずれかに記載のディスプレイシステム。
８１．１つまたはそれを上回るユーザセンサをさらに備える、実施例１－７９のいずれかに記載のディスプレイシステム。
８２．１つまたはそれを上回るユーザセンサは、１つまたはそれを上回るカメラを備える、実施例１－８１のいずれかに記載のディスプレイシステム。
８３．頭部搭載型ディスプレイは、光を導波管から抽出することによって、光を出力するように構成される、回折光学要素を備える、導波管を備え、導波管は、導波管のスタックのうちの１つであって、導波管のスタックの異なる導波管は、異なる波面発散を伴って光を出力するように構成される、実施例１－８２のいずれかに記載のディスプレイシステム。
８４．処理電子機器はさらに、状況に対するユーザ意図を判定し、少なくとも部分的に、判定されたユーザ意図に基づいて、ユーザの視野内の実または仮想オブジェクトのユーザ知覚を改変するように構成される、実施例１－８３のいずれかに記載のディスプレイシステム。
８５．処理電子機器はさらに、少なくとも部分的に、増加された焦点の感知に基づいて、状況に対するユーザ意図を判定し、ユーザの視野内の実または仮想オブジェクトのユーザ知覚を改変するように構成される、実施例１－８４のいずれかに記載のディスプレイシステム。
８６．該環境センサは、無線信号を検出するように構成される、センサを備える、実施例１－８５のいずれかに記載のディスプレイシステム。
８７．該環境センサは、自動車からのＢｌｕｅｔｏｏｔｈ（登録商標）信号を検出するように構成される、センサを備える、実施例１－８６のいずれかに記載のディスプレイシステム。
８８．該処理電子機器は、ユーザが自動車両を運転中であるかどうかを判定するように構成される、実施例１－８７のいずれかに記載のディスプレイシステム。
８９．該処理電子機器は、少なくとも部分的に、ユーザに関する１つまたはそれを上回るデータ記録に基づいて、ユーザの視野内の実または仮想オブジェクトのユーザ知覚を改変するように構成され、該１つまたはそれを上回るデータ記録は、該ユーザの運転記録を含む、実施例１－８８のいずれかに記載のディスプレイシステム。
９０．処理電子機器は、背景を改変するように構成される、実施例１－８９に記載のディスプレイシステム。
９１．背景を改変することは、背景の均質性を増加させ、それによって、背景内の可視特徴を低減させることを含む、実施例９０に記載のディスプレイシステム。
９２．背景の均質性を増加させることは、背景をウォッシュアウトまたはペイントオーバーすることを含む、実施例９１に記載のディスプレイシステム。
９３．処理電子機器は、ユーザおよび頭部搭載型ディスプレイの正面の環境内の特徴がユーザにあまり目立たないように、背景内の光の強度を増加させることによって、背景を改変するように構成される、実施例１－９２のいずれかに記載のディスプレイシステム。
９４．処理電子機器は、ユーザおよび頭部搭載型ディスプレイの正面の環境内の特徴がユーザにあまり目立たないように、光の強度を増加させるように構成される、実施例１－９３のいずれかに記載のディスプレイシステム。
９５．処理電子機器は、オブジェクトをハイライトすることによって、ユーザの視野内のオブジェクトのユーザ知覚を改変するように構成される、実施例１－９４のいずれかに記載のディスプレイシステム。
９６．オブジェクトをハイライトすることは、部分的に透明な色をオブジェクトにわたって重畳することを含む、実施例９５に記載のディスプレイシステム。
９７．光を該ユーザの眼の中に指向し、画像を眼内に形成するように構成される、１つまたはそれを上回る光源をさらに備える、実施例１－９６のいずれかに記載のディスプレイシステム。
９８．該１つまたはそれを上回る光源は、光を１つまたはそれを上回る導波管の中に指向するように構成される、実施例９７に記載のディスプレイシステム。
９９．該１つまたはそれを上回る光源は、ファイバ走査プロジェクタを備える、実施例９７または９８のいずれかに記載のディスプレイシステム。
１００．透明であって、ユーザの眼の正面の場所に配置される、該ディスプレイの少なくとも該部分は、光をユーザに投影するように構成される、１つまたはそれを上回る導波管を備える、実施例１－９９のいずれかに記載のディスプレイシステム。
１０１．環境を監視するように構成される、１つまたはそれを上回るセンサをさらに備える、実施例１－１００のいずれかに記載のディスプレイシステム。
１０２．該１つまたはそれを上回るセンサは、該環境を結像するように構成される、１つまたはそれを上回る外向きに面した画像捕捉システムを備える、実施例１０１に記載のディスプレイシステム。
１０３．該該環境を結像するように構成される、１つまたはそれを上回る外向きに面した画像捕捉システムは、１つまたはそれを上回る外向きに面したカメラを備える、実施例１０２に記載のディスプレイシステム。
１０４．１つまたはそれを上回るセンサは、距離測定システムを備える、実施例１０１－１０３のいずれかに記載のディスプレイシステム。
１０５．該距離測定システムは、レーザ測距計を備える、実施例１０４に記載のディスプレイシステム。
１０６．該ユーザの眼の位置および／または移動を追跡するように構成される、眼追跡システムをさらに備える、実施例１－１０５のいずれかに記載のディスプレイシステム。
１０７．該ユーザの眼を結像するように構成される、１つまたはそれを上回る内向きに面した画像捕捉システムをさらに備える、実施例１－１０６のいずれかに記載のディスプレイシステム。
１０８．頭部搭載型ディスプレイシステムは、ユーザの視野の第２の部分に提示される画像コンテンツと比較して、ユーザの視野の少なくとも第１の部分に提示される画像コンテンツを異なるように処理するように構成される、実施例１－１０７のいずれかに記載のディスプレイシステム。
１０９．頭部搭載型ディスプレイシステムは、ユーザの視野の中心領域に提示される画像コンテンツと比較して、ユーザの視野の該周辺領域の少なくとも一部に提示される画像コンテンツを異なるように処理するように構成される、実施例１－１０８のいずれかに記載のディスプレイシステム。
１１０．該処理電子機器によって提供される増強は、画像コンテンツを拡大することを含む、実施例１－１０９のいずれかに記載のディスプレイシステム。
１１１．該処理電子機器によって提供される増強または強調解除は、明度を改変することを含む、実施例１－１１０のいずれかに記載のディスプレイシステム。
１１２．該処理電子機器によって提供される増強は、明度を増加させることを含む、実施例１－１１１のいずれかに記載のディスプレイシステム。
１１３．該処理電子機器によって提供される強調解除は、明度を減少させることを含む、実施例１－１１２のいずれかに記載のディスプレイシステム。
１１４．該処理電子機器によって提供される強調解除は、明度を増加させることを含む、実施例１－１１３のいずれかに記載のディスプレイシステム。
１１５．該処理電子機器によって提供される増強または強調解除は、コントラストを改変することを含む、実施例１－１１４のいずれかに記載のディスプレイシステム。
１１６．該処理電子機器によって提供される増強は、コントラストを増加させることを含む、実施例１－１１５のいずれかに記載のディスプレイシステム。
１１７．該処理電子機器によって提供される強調解除は、コントラストを減少させることを含む、実施例１－１１６のいずれかに記載のディスプレイシステム。
１１８．該処理電子機器によって提供される増強または強調解除は、色飽和を改変することを含む、実施例１－１１７のいずれかに記載のディスプレイシステム。
１１９．該処理電子機器によって提供される増強は、色飽和を増加させることを含む、実施例１－１１８のいずれかに記載のディスプレイシステム。
１２０．該処理電子機器によって提供される強調解除は、色飽和を減少させることを含む、実施例１－１１９のいずれかに記載のディスプレイシステム。
１２１．該処理電子機器によって提供される増強または強調解除は、鮮明度を改変することを含む、実施例１－１２０のいずれかに記載のディスプレイシステム。
１２２．該処理電子機器によって提供される増強は、鮮明度を増加させることを含む、実施例１－１２１のいずれかに記載のディスプレイシステム。
１２３．該処理電子機器によって提供される強調解除は、鮮明度を減少させることを含む、実施例１－１２２のいずれかに記載のディスプレイシステム。
１２４．該処理電子機器によって提供される増強または強調解除は、不透明度を改変することを含む、実施例１－１２３のいずれかに記載のディスプレイシステム。
１２５．該処理電子機器によって提供される増強は、不透明度を増加させることを含む、実施例１－１２４のいずれかに記載のディスプレイシステム。
１２６．該処理電子機器によって提供される強調解除は、不透明度を減少させることを含む、実施例１－１２５のいずれかに記載のディスプレイシステム。
１２７．該処理電子機器によって提供される強調解除は、不透明度を増加させることを含む、実施例１－１２６のいずれかに記載のディスプレイシステム。
１２８．増強は、縁増強特徴を含む、実施例１－１２７のいずれかに記載のディスプレイシステム。
１２９．該処理電子機器によって提供される増強または強調解除は、カラーバランスを偏移させることを含む、実施例１－１２８のいずれかに記載のディスプレイシステム。
７３．処理電子機器は、オブジェクトを備える画像コンテンツを改変することによって、ユーザの視野内の仮想オブジェクトのユーザ知覚を改変するように構成されてもよい、実施例１－７２のいずれかに記載のディスプレイシステム。
７４．画像コンテンツを改変することは、オブジェクトを備える画像コンテンツのコントラスト、不透明度、色、色飽和、カラーバランス、サイズ、明度、縁、または鮮明度のうちの少なくとも１つを改変することを含む、実施例７３に記載のディスプレイシステム。
７５．処理電子機器は、オブジェクトを第１の場所から第２の場所に移動させることによって、オブジェクトのユーザ知覚を改変するように構成されてもよい、実施例１－７４のいずれかに記載のディスプレイシステム。
７６．第１の場所は、周辺領域であって、第２の場所は、中心領域である、または第１の場所は、中心領域であって、第２の場所は、周辺領域である、実施例７５に記載のディスプレイシステム。
７７．アラートをユーザに提供するようにさらに構成される、実施例１－７６のいずれかに記載のディスプレイシステム。
７８．アラートは、視覚的アラートまたは聴覚的アラートである、実施例７７に記載のディスプレイシステム。
７９．１つまたはそれを上回る環境センサをさらに備える、実施例１－７８のいずれかに記載のディスプレイシステム。
８０．１つまたはそれを上回る環境センサは、深度センサ、一対の両眼世界カメラ、地理位置センサ、近接度センサ、またはＧＰＳを備える、実施例１－７９のいずれかに記載のディスプレイシステム。
８１．１つまたはそれを上回るユーザセンサをさらに備える、実施例１－７９のいずれかに記載のディスプレイシステム。
８２．１つまたはそれを上回るユーザセンサは、１つまたはそれを上回るカメラを備える、実施例１－８１のいずれかに記載のディスプレイシステム。
８３．頭部搭載型ディスプレイは、光を導波管から抽出することによって、光を出力するように構成される、回折光学要素を備える、導波管を備え、導波管は、導波管のスタックのうちの１つであって、導波管のスタックの異なる導波管は、異なる波面発散を伴って光を出力するように構成される、実施例１－８２のいずれかに記載のディスプレイシステム。
８４．処理電子機器はさらに、状況に対するユーザ意図を判定し、少なくとも部分的に、判定されたユーザ意図に基づいて、ユーザの視野内の実または仮想オブジェクトのユーザ知覚を改変するように構成される、実施例１－８３のいずれかに記載のディスプレイシステム。
８５．処理電子機器はさらに、少なくとも部分的に、増加された焦点の感知に基づいて、状況に対するユーザ意図を判定し、ユーザの視野内の実または仮想オブジェクトのユーザ知覚を改変するように構成される、実施例１－８４のいずれかに記載のディスプレイシステム。
８６．該環境センサは、無線信号を検出するように構成される、センサを備える、実施例１－８５のいずれかに記載のディスプレイシステム。
８７．該環境センサは、自動車からのＢｌｕｅｔｏｏｔｈ（登録商標）信号を検出するように構成される、センサを備える、実施例１－８６のいずれかに記載のディスプレイシステム。
８８．該処理電子機器は、ユーザが自動車両を運転中であるかどうかを判定するように構成される、実施例１－８７のいずれかに記載のディスプレイシステム。
８９．該処理電子機器は、少なくとも部分的に、ユーザに関する１つまたはそれを上回るデータ記録に基づいて、ユーザの視野内の実または仮想オブジェクトのユーザ知覚を改変するように構成され、該１つまたはそれを上回るデータ記録は、該ユーザの運転記録を含む、実施例１－８８のいずれかに記載のディスプレイシステム。
９０．処理電子機器は、背景を改変するように構成される、実施例１－８９に記載のディスプレイシステム。
９１．背景を改変することは、背景の均質性を増加させ、それによって、背景内の可視特徴を低減させることを含む、実施例９０に記載のディスプレイシステム。
９２．背景の均質性を増加させることは、背景をウォッシュアウトまたはペイントオーバーすることを含む、実施例９１に記載のディスプレイシステム。
９３．処理電子機器は、ユーザおよび頭部搭載型ディスプレイの正面の環境内の特徴がユーザにあまり目立たないように、背景内の光の強度を増加させることによって、背景を改変するように構成される、実施例１－９２のいずれかに記載のディスプレイシステム。
９４．処理電子機器は、ユーザおよび頭部搭載型ディスプレイの正面の環境内の特徴がユーザにあまり目立たないように、光の強度を増加させるように構成される、実施例１－９３のいずれかに記載のディスプレイシステム。
９５．処理電子機器は、オブジェクトをハイライトすることによって、ユーザの視野内のオブジェクトのユーザ知覚を改変するように構成される、実施例１－９４のいずれかに記載のディスプレイシステム。
９６．オブジェクトをハイライトすることは、部分的に透明な色をオブジェクトにわたって重畳することを含む、実施例９５に記載のディスプレイシステム。
９７．光を該ユーザの眼の中に指向し、画像を眼内に形成するように構成される、１つまたはそれを上回る光源をさらに備える、実施例１－９６のいずれかに記載のディスプレイシステム。
９８．該１つまたはそれを上回る光源は、光を１つまたはそれを上回る導波管の中に指向するように構成される、実施例９７に記載のディスプレイシステム。
９９．該１つまたはそれを上回る光源は、ファイバ走査プロジェクタを備える、実施例９７または９８のいずれかに記載のディスプレイシステム。
１００．透明であって、ユーザの眼の正面の場所に配置される、該ディスプレイの少なくとも該部分は、光をユーザに投影するように構成される、１つまたはそれを上回る導波管を備える、実施例１－９９のいずれかに記載のディスプレイシステム。
１０１．環境を監視するように構成される、１つまたはそれを上回るセンサをさらに備える、実施例１－１００のいずれかに記載のディスプレイシステム。
１０２．該１つまたはそれを上回るセンサは、該環境を結像するように構成される、１つまたはそれを上回る外向きに面した画像捕捉システムを備える、実施例１０１に記載のディスプレイシステム。
１０３．該該環境を結像するように構成される、１つまたはそれを上回る外向きに面した画像捕捉システムは、１つまたはそれを上回る外向きに面したカメラを備える、実施例１０２に記載のディスプレイシステム。
１０４．１つまたはそれを上回るセンサは、距離測定システムを備える、実施例１０１－１０３のいずれかに記載のディスプレイシステム。
１０５．該距離測定システムは、レーザ測距計を備える、実施例１０４に記載のディスプレイシステム。
１０６．該ユーザの眼の位置および／または移動を追跡するように構成される、眼追跡システムをさらに備える、実施例１－１０５のいずれかに記載のディスプレイシステム。
１０７．該ユーザの眼を結像するように構成される、１つまたはそれを上回る内向きに面した画像捕捉システムをさらに備える、実施例１－１０６のいずれかに記載のディスプレイシステム。
１０８．頭部搭載型ディスプレイシステムは、ユーザの視野の第２の部分に提示される画像コンテンツと比較して、ユーザの視野の少なくとも第１の部分に提示される画像コンテンツを異なるように処理するように構成される、実施例１－１０７のいずれかに記載のディスプレイシステム。
１０９．頭部搭載型ディスプレイシステムは、ユーザの視野の中心領域に提示される画像コンテンツと比較して、ユーザの視野の該周辺領域の少なくとも一部に提示される画像コンテンツを異なるように処理するように構成される、実施例１－１０８のいずれかに記載のディスプレイシステム。
１１０．該処理電子機器によって提供される増強は、画像コンテンツを拡大することを含む、実施例１－１０９のいずれかに記載のディスプレイシステム。
１１１．該処理電子機器によって提供される増強または強調解除は、明度を改変することを含む、実施例１－１１０のいずれかに記載のディスプレイシステム。
１１２．該処理電子機器によって提供される増強は、明度を増加させることを含む、実施例１－１１１のいずれかに記載のディスプレイシステム。
１１３．該処理電子機器によって提供される強調解除は、明度を減少させることを含む、実施例１－１１２のいずれかに記載のディスプレイシステム。
１１４．該処理電子機器によって提供される強調解除は、明度を増加させることを含む、実施例１－１１３のいずれかに記載のディスプレイシステム。
１１５．該処理電子機器によって提供される増強または強調解除は、コントラストを改変することを含む、実施例１－１１４のいずれかに記載のディスプレイシステム。
１１６．該処理電子機器によって提供される増強は、コントラストを増加させることを含む、実施例１－１１５のいずれかに記載のディスプレイシステム。
１１７．該処理電子機器によって提供される強調解除は、コントラストを減少させることを含む、実施例１－１１６のいずれかに記載のディスプレイシステム。
１１８．該処理電子機器によって提供される増強または強調解除は、色飽和を改変することを含む、実施例１－１１７のいずれかに記載のディスプレイシステム。
１１９．該処理電子機器によって提供される増強は、色飽和を増加させることを含む、実施例１－１１８のいずれかに記載のディスプレイシステム。
１２０．該処理電子機器によって提供される強調解除は、色飽和を減少させることを含む、実施例１－１１９のいずれかに記載のディスプレイシステム。
１２１．該処理電子機器によって提供される増強または強調解除は、鮮明度を改変することを含む、実施例１－１２０のいずれかに記載のディスプレイシステム。
１２２．該処理電子機器によって提供される増強は、鮮明度を増加させることを含む、実施例１－１２１のいずれかに記載のディスプレイシステム。
１２３．該処理電子機器によって提供される強調解除は、鮮明度を減少させることを含む、実施例１－１２２のいずれかに記載のディスプレイシステム。
１２４．該処理電子機器によって提供される増強または強調解除は、不透明度を改変することを含む、実施例１－１２３のいずれかに記載のディスプレイシステム。
１２５．該処理電子機器によって提供される増強は、不透明度を増加させることを含む、実施例１－１２４のいずれかに記載のディスプレイシステム。
１２６．該処理電子機器によって提供される強調解除は、不透明度を減少させることを含む、実施例１－１２５のいずれかに記載のディスプレイシステム。
１２７．該処理電子機器によって提供される強調解除は、不透明度を増加させることを含む、実施例１－１２６のいずれかに記載のディスプレイシステム。
１２８．増強は、縁増強特徴を含む、実施例１－１２７のいずれかに記載のディスプレイシステム。
１２９．該処理電子機器によって提供される増強または強調解除は、カラーバランスを偏移させることを含む、実施例１－１２８のいずれかに記載のディスプレイシステム。
【0012】
付加的実施例が、以下に提供される。
実施例セットＩＡ
１．光をユーザの眼に投影し、拡張現実画像コンテンツを表示するように構成される、頭部搭載型ディスプレイシステムであって、該ユーザの眼は、中心領域と、該中心領域を中心として配置される周辺領域を有する、視野を有し、
ユーザの頭部上に支持されるように構成される、フレームと、
フレーム上に配置される、ディスプレイであって、該ディスプレイは、画像コンテンツを該ユーザの視野の中心領域に提示するように、光を該ユーザの眼の中に投影するように構成され、該ディスプレイの少なくとも一部は、透明部分が、ユーザの正面の環境の一部からの光をユーザの眼に伝送し、ユーザの正面の環境の該部分のビューを提供するように、透明であって、ユーザが該頭部搭載型ディスプレイシステムを装着すると、ユーザの眼の正面の場所に配置される、ディスプレイと、
該ディスプレイと通信し、該ディスプレイ上での画像コンテンツの提示を制御する、処理電子機器と、
を備え、該頭部搭載型ディスプレイシステムは、ユーザの視野の中心領域に提示される画像コンテンツと比較して増強された画像コンテンツをユーザの視野の該周辺領域に提示するように構成される、頭部搭載型ディスプレイシステム。
２．光を該ユーザの眼の中に指向し、画像を眼内に形成するように構成される、１つまたはそれを上回る光源をさらに備える、実施例１に記載のシステム。
３．透明であって、ユーザの眼の正面の場所に配置される、該ディスプレイの少なくとも該部分は、光をユーザに投影するように構成される、１つまたはそれを上回る導波管を備える、実施例１または２に記載のシステム。
４．該１つまたはそれを上回る光源は、光を該１つまたはそれを上回る導波管の中に指向するように構成される、実施例３に記載のシステム。
５．該光源は、ファイバ走査プロジェクタを備える、実施例２－４のいずれかに記載のシステム。
６．環境を監視するように構成される、１つまたはそれを上回るセンサをさらに備える、前述の実施例のいずれかに記載のシステム。
７．該１つまたはそれを上回るセンサは、該環境を結像するように構成される、１つまたはそれを上回る外向きに面した画像捕捉デバイスを備える、実施例６に記載のシステム。
８．該環境を結像するように構成される、該１つまたはそれを上回る外向きに面した画像捕捉デバイスは、１つまたはそれを上回る外向きに面したカメラを備える、実施例７に記載のシステム。
９．１つまたはそれを上回るセンサは、距離測定デバイスを備える、実施例６－８のいずれかに記載のシステム。
１０．該距離測定システムは、レーザ測距計を備える、実施例９に記載のシステム。
１１．該ユーザの眼の位置および／または移動を追跡するように構成される、眼追跡デバイスをさらに備える、前述の実施例のいずれかに記載のシステム。
１２．該ユーザの眼を結像するように構成される、１つまたはそれを上回る内向きに面した画像捕捉デバイスをさらに備える、実施例１または１１に記載のシステム。
１３．頭部搭載型ディスプレイシステムは、ユーザの視野の中心領域に提示される画像コンテンツと比較して、ユーザの視野の該周辺領域の少なくとも一部に提示される画像コンテンツを異なるように処理するように構成される、前述の実施例のいずれかに記載のシステム。
１４．頭部搭載型ディスプレイシステムは、ユーザの視野の中心領域に提示される画像コンテンツと比較して、ユーザの視野の該周辺領域の少なくとも一部に提示される画像コンテンツを拡大することによって、画像コンテンツを異なるように処理するように構成される、実施例１３に記載のシステム。
１５．頭部搭載型ディスプレイシステムは、ユーザの視野の中心領域に提示される画像コンテンツと比較して、ユーザの視野の該周辺領域の少なくとも一部に提示される画像コンテンツにおける明度を増加させることによって、画像コンテンツを異なるように処理するように構成される、実施例１３－１４のいずれかに記載のシステム。
１６．頭部搭載型ディスプレイシステムは、ユーザの視野の中心領域に提示される画像コンテンツと比較して、ユーザの視野の該周辺領域の少なくとも一部に提示される画像コンテンツのコントラストを増加させることによって、画像コンテンツを異なるように処理するように構成される、実施例１３－１５のいずれかに記載のシステム。
１７．頭部搭載型ディスプレイシステムは、ユーザの視野の中心領域に提示される画像コンテンツと比較して、ユーザの視野の該周辺領域の少なくとも一部に提示される画像コンテンツの色飽和を増加させることによって、画像コンテンツを異なるように処理するように構成される、実施例１３－１６のいずれかに記載のシステム。
１８．頭部搭載型ディスプレイシステムは、ユーザの視野の中心領域に提示される画像コンテンツと比較して、ユーザの視野の該周辺領域の少なくとも一部に提示される画像コンテンツの鮮明化によって、画像コンテンツを異なるように処理するように構成される、実施例１３－１７のいずれかに記載のシステム。
１９．鮮明化は、ユーザの視野の中心領域に提示される画像コンテンツと比較して、ユーザの視野の該周辺領域の少なくとも一部に提示される画像コンテンツにおける縁増強特徴を含む、実施例１８に記載のシステム。
２０．頭部搭載型ディスプレイシステムは、ユーザの視野の中心領域に提示される画像コンテンツと比較して、ユーザの視野の該周辺領域の少なくとも一部に提示される画像コンテンツのカラーバランスを偏移させることによって、画像コンテンツを異なるように処理するように構成される、実施例１３－１９のいずれかに記載のシステム。
２１．光をユーザの眼に投影し、拡張現実画像コンテンツを表示するように構成される、頭部搭載型ディスプレイシステムであって、該ユーザの眼は、中心領域と、該中心領域を中心として配置される周辺領域を有する、視野を有し、
ユーザの頭部上に支持されるように構成される、フレームと、
フレーム上に配置される、ディスプレイであって、該ディスプレイは、画像コンテンツを該ユーザの視野の中心および周辺領域に提示するように、光を該ユーザの眼の中に投影するように構成され、該ディスプレイの少なくとも一部は、透明部分が、ユーザの正面の環境の一部からの光をユーザの眼に伝送し、ユーザの正面の環境の該部分のビューを提供するように、透明であって、ユーザが該頭部搭載型ディスプレイシステムを装着すると、ユーザの眼の正面の場所に配置される、ディスプレイと、
該ディスプレイと通信し、該ディスプレイ上での画像コンテンツの提示を制御する、処理電子機器と、
を備え、該頭部搭載型ディスプレイシステムは、ユーザの視野の周辺領域に提示される画像コンテンツと比較して強調解除された画像コンテンツをユーザの視野の中心領域に提示するように構成される、頭部搭載型ディスプレイシステム。
２２．光をユーザの眼の中に指向し、画像を該眼内に形成するように構成される、１つまたはそれを上回る光源をさらに備える、実施例２１に記載のシステム。
２３．透明であって、ユーザの眼の正面の場所に配置される、該ディスプレイの少なくとも該部分は、光をユーザに投影するように構成される、１つまたはそれを上回る導波管を備える、実施例２１または２２に記載のシステム。
２４．該１つまたはそれを上回る光源は、光を該１つまたはそれを上回る導波管の中に指向するように構成される、実施例２３に記載のシステム。
２５．該光源は、ファイバ走査プロジェクタを備える、実施例２２－２４のいずれかに記載のシステム。
２６．環境を監視するように構成される、１つまたはそれを上回るセンサをさらに備える、実施例２１－２５のいずれかに記載のシステム。
２７．該１つまたはそれを上回るセンサは、該環境を結像するように構成される、１つまたはそれを上回る外向きに面した画像捕捉デバイスを備える、実施例２６に記載のシステム。
２８．該環境を結像するように構成される、該１つまたはそれを上回る外向きに面した画像捕捉デバイスは、１つまたはそれを上回る外向きに面したカメラを備える、実施例２７に記載のシステム。
２９．１つまたはそれを上回るセンサは、距離測定デバイスを備える、実施例２６－２８のいずれかに記載のシステム。
３０．該距離測定デバイスは、レーザ測距計を備える、実施例２９に記載のシステム。
３１．該ユーザの眼の位置および／または移動を追跡するように構成される、眼追跡デバイスをさらに備える、実施例２１－３０のいずれかに記載のシステム。
３２．該ユーザの眼を結像するように構成される、１つまたはそれを上回る内向きに面した画像捕捉デバイスをさらに備える、実施例２１－３１に記載のシステム。
３３．頭部搭載型ディスプレイシステムは、ユーザの視野の周辺領域に提示される画像コンテンツと比較して、ユーザの視野の中心領域の少なくとも一部に提示される画像コンテンツを異なるように処理するように構成される、実施例２１－３２のいずれかに記載のシステム。
３４．頭部搭載型ディスプレイシステムは、ユーザの視野の周辺領域に提示される画像コンテンツと比較して、ユーザの視野の中心領域の少なくとも一部に提示される画像コンテンツをぼかすことによって、画像コンテンツを異なるように処理するように構成される、実施例３３に記載のシステム。
３５．頭部搭載型ディスプレイシステムは、ユーザの視野の周辺領域に提示される画像コンテンツと比較して、ユーザの視野の中心領域の少なくとも一部に提示される画像コンテンツを暗化または減衰させることによって、画像コンテンツを異なるように処理するように構成される、実施例３３－３４のいずれかに記載のシステム。
３６．頭部搭載型ディスプレイシステムは、ユーザの視野の周辺領域に提示される画像コンテンツと比較して、ユーザの視野の中心領域の少なくとも一部に提示される画像コンテンツのコントラストを低減させることによって、画像コンテンツを異なるように処理するように構成される、実施例３３－３５のいずれかに記載のシステム。
３７．頭部搭載型ディスプレイシステムは、ユーザの視野の周辺領域に提示される画像コンテンツと比較して、ユーザの視野の中心領域の少なくとも一部に提示される画像コンテンツの色飽和を低減させることによって、画像コンテンツを異なるように処理するように構成される、実施例３３－３６のいずれかに記載のシステム。
３８．頭部搭載型ディスプレイシステムは、ユーザの視野の周辺領域に提示される画像コンテンツと比較して、ユーザの視野の中心領域の少なくとも一部に提示される画像コンテンツの鮮明度を低減させることによって、画像コンテンツを異なるように処理するように構成される、実施例３３－３７のいずれかに記載のシステム。
３９．鮮明度を減少させることは、ユーザの視野の周辺領域に提示される画像コンテンツと比較して、ユーザの視野の中心領域の少なくとも一部に提示される画像コンテンツ内の特徴の縁を増強解除することを含む、実施例３８に記載のシステム。
４０．頭部搭載型ディスプレイシステムは、ユーザの視野の周辺領域に提示される画像コンテンツと比較して、ユーザの視野の中心領域の少なくとも一部に提示される画像コンテンツのカラーバランスを偏移させることによって、画像コンテンツを異なるように処理するように構成される、実施例３３－３９のいずれかに記載のシステム。
４１．頭部搭載型ディスプレイシステムは、ユーザの視野の周辺領域に提示される画像コンテンツと比較して、ユーザの視野の中心領域の少なくとも一部に提示される画像コンテンツを収縮させることによって、画像コンテンツを異なるように処理するように構成される、実施例３３－４０のいずれかに記載のシステム。
４２．該拡大は、少なくとも部分的に、眼の分解能に基づく、実施例１４に記載のシステム。
４３．該ぼかしは、同一色を使用して、該ユーザの視野の中心領域の少なくとも一部に提示される該画像コンテンツをぼかすことを含む、実施例３４に記載のシステム。
４４．該同一色は、該ユーザの視野の該周辺領域に提示される画像コンテンツ内の色と比較して、高コントラスト色を備える、実施例４４に記載のシステム。
４５．システムは、アラートをユーザに提供し、提示される画像が増強されたことを示すように構成される、実施例１－２０または４２のいずれかに記載のシステム。
４６．システムは、アラートをユーザに提供し、提示される画像が強調解除されたことを示すように構成される、実施例２１－４１のいずれかまたは実施例４３－４４のいずれかに記載のシステム。
４７．アラートは、視覚的アラートである、実施例４５または４６のいずれかに記載のシステム。
４８．アラートは、聴覚的アラートである、実施例４５または４６のいずれかに記載のシステム。
４９．該頭部搭載型ディスプレイシステムは、ユーザの正面の環境の少なくとも該部分の３Ｄ表現を構築し、環境の少なくとも該部分の表現を解釈するように構成され、該環境の該部分は、患者を含み、該頭部搭載型ディスプレイはさらに、患者と関連付けられた第１の構造を患者と関連付けられた第２の構造から区別するように構成される、前述の実施例のいずれかに記載のシステム。
５０．透明であって、ユーザの眼の正面の場所に配置される、該ディスプレイの少なくとも該部分は、１つまたはそれを上回る導波管を備える、前述の実施例のいずれかに記載のシステム。
５１．光を該１つまたはそれを上回る導波管の中に指向するように構成される、１つまたはそれを上回る光源を備え、導波管は、光をユーザの眼の中に指向するように構成される、実施例５０に記載のシステム。
５２．該１つまたはそれを上回る光源は、ファイバ走査プロジェクタを備える、実施例５０－５１のいずれかに記載のシステム。
５３．環境を監視するように構成される、１つまたはそれを上回るセンサをさらに備える、前述の実施例のいずれかに記載のシステム。
５４．該１つまたはそれを上回るセンサは、該環境を結像するように構成される、１つまたはそれを上回る外向きに面した画像捕捉デバイスを備える、実施例５３に記載のシステム。
５５．該環境を結像するように構成される、該１つまたはそれを上回る外向きに面した画像捕捉デバイスは、１つまたはそれを上回る外向きに面したカメラを備える、実施例５４に記載のシステム。
５６．距離測定デバイスをさらに備える、前述の実施例のいずれかに記載のシステム。
５７．該ユーザの眼の位置および／または移動を追跡するように構成される、眼追跡デバイスをさらに備える、前述の実施例のいずれかに記載のシステム。
５８．頭部搭載型ディスプレイは、ユーザの視野内のヒト組織の体積を推定するように構成される、前述の実施例のいずれかに記載のシステム。
５９．頭部搭載型ディスプレイは、環境内の２つのオブジェクト間の距離を測定するように構成される、前述の実施例のいずれかに記載のシステム。
６０．頭部搭載型ディスプレイは、ディスプレイ上に提示される第１の画像モダリティと第２の画像モダリティとの間でトグルするように構成される、前述の実施例のいずれかに記載のシステム。
６１．第１の画像モダリティは、ＭＲＩ走査を備える、実施例６０に記載のシステム。
６２．第２の画像モダリティは、超音波を備える、実施例６０－６１のいずれかに記載のシステム。
６３．第１の画像モダリティは、Ｘ線走査を備える、実施例６０－６２のいずれかに記載のシステム。
６４．超音波音波を生産するように適合される、電子エミッタをさらに備える、前述の実施例のいずれかに記載のシステム。
６５．超音波音波を電気信号に変換するように適合される、センサをさらに備える、前述の実施例のいずれかに記載のシステム。
６６．頭部搭載型ディスプレイは、ユーザが、仮想基準マーカをユーザの眼に対してユーザの正面の環境の一部上に設置することを可能にするように構成される、前述の実施例のいずれかに記載のシステム。
６７．頭部搭載型ディスプレイは、画像が環境内の実世界オブジェクトに添付されて現れるように、画像をディスプレイ上に投影するように構成される、前述の実施例のいずれかに記載のシステム。
６８．頭部搭載型ディスプレイは、仮想切断ガイドラインが切断されるべきヒト身体領域上にオーバーレイされるようにユーザに現れるように、仮想切断ガイドラインを表示するように構成される、または切断されるべき部分へのアクセスを与える、前述の実施例のいずれかに記載のシステム。
６９．仮想切断ガイドラインの見掛け場所は、患者の身体部分の位置に関連するように現れる、実施例６８に記載のシステム。
７０．頭部搭載型ディスプレイは、信号を放出し、ユーザの正面の環境の一部内のオブジェクトの位置に関するデータを取得するように構成される、前述の実施例のいずれかに記載のシステム。
７１．頭部搭載型ディスプレイは、オブジェクト場所のデータベースを使用して、ユーザの正面の環境の一部内のオブジェクトの位置を取得するように構成される、前述の実施例のいずれかに記載のシステム。
７２．頭部搭載型ディスプレイは、該オブジェクト場所のデータベースに基づいて、基準点を設定し、画像が基準点に対して固定されて現れるように、画像をユーザの眼の中に投影するように構成される、実施例７１に記載のシステム。
７３．頭部搭載型ディスプレイは、ユーザ入力に基づいて、オブジェクトの３Ｄ画像のビューを軸を中心として回転させるように構成される、前述の実施例のいずれかに記載のシステム。
７４．頭部搭載型ディスプレイは、ユーザ入力に基づいて、３Ｄオブジェクトの画像のビューを平行移動させるように構成される、前述の実施例のいずれかに記載のシステム。
７５．頭部搭載型ディスプレイは、オブジェクトの３Ｄ画像の第１のスライスを表示するように構成される、前述の実施例のいずれかに記載のシステム。
７６．頭部搭載型ディスプレイは、３Ｄ画像の第１のスライスの画像および第２のスライスの画像を通してシーケンス化するように構成される、実施例７５に記載のシステム。
７７．頭部搭載型ディスプレイは、頭部搭載型ディスプレイの第２のユーザが伝送される環境の該部分の該画像を視認し得るように、ユーザの正面の環境の一部の画像を伝送するように構成される、前述の実施例のいずれかに記載のシステム。
７８．頭部搭載型ディスプレイは、ユーザに医療手技におけるステップをアラートするように構成される、前述の実施例のいずれかに記載のシステム。
７９．頭部搭載型ディスプレイは、ユーザの医療パラメータを監視し、医療パラメータに基づいて、アラートを提供するように構成される、前述の実施例のいずれかに記載のシステム。
８０．ユーザの医療パラメータは、バイタルサインを含む、実施例７９に記載のシステム。
８１．頭部搭載型ディスプレイは、超音波を放出し、該超音波から生じる信号を測定するように構成され、頭部搭載型ディスプレイはさらに、信号に基づいて、超音波画像を形成するように構成される、前述の実施例のいずれかに記載のシステム。
８２．頭部搭載型ディスプレイは、ユーザにユーザの視野外のオブジェクトおよび／またはイベントをアラートするように構成される、前述の実施例のいずれかに記載のシステム。
８３．光を該ユーザの眼の中に指向し、画像を眼内に形成するように構成される、１つまたはそれを上回る光源をさらに備える、前述の実施例のいずれかに記載のシステム。
８４．該１つまたはそれを上回る光源は、ファイバ走査プロジェクタを備える、前述の実施例のいずれかに記載のシステム。
８５．コントラストを増加させることは、該画像コンテンツの少なくとも１つの色の明度または暗度を調節することを含む、実施例１６に記載のシステム。
８６．コントラストを増加させることは、黒色、灰色、白色、または他の色を該画像コンテンツの少なくとも１つの色に追加することを含む、実施例１６に記載のシステム。
８７．頭部搭載型ディスプレイは、ある程度の不透明度を提示される画像コンテンツの少なくとも近傍に提供するように構成される、前述の実施例のいずれかに記載のシステム。
８８．頭部搭載型ディスプレイは、第１の画像モダリティと第１の画像モダリティと異なる第２の画像モダリティを組み合わせるように構成される、前述の実施例のいずれかに記載のシステム。
８９．第１の画像モダリティおよび第２の画像モダリティはそれぞれ、ＭＲＩ、ＣＴ、ＰＥＴ、ＭＲＡ、またはＣＴＡ走査からの画像を備える、実施例８８に記載のシステム。
９０．頭部搭載型ディスプレイは、第１および第２の画像モダリティの組み合わせられた画像を患者の実際の解剖学的構造にわたって整合させるように構成される、実施例８８または８９に記載のシステム。
実施例セットＩＡ
１．光をユーザの眼に投影し、拡張現実画像コンテンツを表示するように構成される、頭部搭載型ディスプレイシステムであって、該ユーザの眼は、中心領域と、該中心領域を中心として配置される周辺領域を有する、視野を有し、
ユーザの頭部上に支持されるように構成される、フレームと、
フレーム上に配置される、ディスプレイであって、該ディスプレイは、画像コンテンツを該ユーザの視野の中心領域に提示するように、光を該ユーザの眼の中に投影するように構成され、該ディスプレイの少なくとも一部は、透明部分が、ユーザの正面の環境の一部からの光をユーザの眼に伝送し、ユーザの正面の環境の該部分のビューを提供するように、透明であって、ユーザが該頭部搭載型ディスプレイシステムを装着すると、ユーザの眼の正面の場所に配置される、ディスプレイと、
該ディスプレイと通信し、該ディスプレイ上での画像コンテンツの提示を制御する、処理電子機器と、
を備え、該頭部搭載型ディスプレイシステムは、ユーザの視野の中心領域に提示される画像コンテンツと比較して増強された画像コンテンツをユーザの視野の該周辺領域に提示するように構成される、頭部搭載型ディスプレイシステム。
２．光を該ユーザの眼の中に指向し、画像を眼内に形成するように構成される、１つまたはそれを上回る光源をさらに備える、実施例１に記載のシステム。
３．透明であって、ユーザの眼の正面の場所に配置される、該ディスプレイの少なくとも該部分は、光をユーザに投影するように構成される、１つまたはそれを上回る導波管を備える、実施例１または２に記載のシステム。
４．該１つまたはそれを上回る光源は、光を該１つまたはそれを上回る導波管の中に指向するように構成される、実施例３に記載のシステム。
５．該光源は、ファイバ走査プロジェクタを備える、実施例２－４のいずれかに記載のシステム。
６．環境を監視するように構成される、１つまたはそれを上回るセンサをさらに備える、前述の実施例のいずれかに記載のシステム。
７．該１つまたはそれを上回るセンサは、該環境を結像するように構成される、１つまたはそれを上回る外向きに面した画像捕捉デバイスを備える、実施例６に記載のシステム。
８．該環境を結像するように構成される、該１つまたはそれを上回る外向きに面した画像捕捉デバイスは、１つまたはそれを上回る外向きに面したカメラを備える、実施例７に記載のシステム。
９．１つまたはそれを上回るセンサは、距離測定デバイスを備える、実施例６－８のいずれかに記載のシステム。
１０．該距離測定システムは、レーザ測距計を備える、実施例９に記載のシステム。
１１．該ユーザの眼の位置および／または移動を追跡するように構成される、眼追跡デバイスをさらに備える、前述の実施例のいずれかに記載のシステム。
１２．該ユーザの眼を結像するように構成される、１つまたはそれを上回る内向きに面した画像捕捉デバイスをさらに備える、実施例１または１１に記載のシステム。
１３．頭部搭載型ディスプレイシステムは、ユーザの視野の中心領域に提示される画像コンテンツと比較して、ユーザの視野の該周辺領域の少なくとも一部に提示される画像コンテンツを異なるように処理するように構成される、前述の実施例のいずれかに記載のシステム。
１４．頭部搭載型ディスプレイシステムは、ユーザの視野の中心領域に提示される画像コンテンツと比較して、ユーザの視野の該周辺領域の少なくとも一部に提示される画像コンテンツを拡大することによって、画像コンテンツを異なるように処理するように構成される、実施例１３に記載のシステム。
１５．頭部搭載型ディスプレイシステムは、ユーザの視野の中心領域に提示される画像コンテンツと比較して、ユーザの視野の該周辺領域の少なくとも一部に提示される画像コンテンツにおける明度を増加させることによって、画像コンテンツを異なるように処理するように構成される、実施例１３－１４のいずれかに記載のシステム。
１６．頭部搭載型ディスプレイシステムは、ユーザの視野の中心領域に提示される画像コンテンツと比較して、ユーザの視野の該周辺領域の少なくとも一部に提示される画像コンテンツのコントラストを増加させることによって、画像コンテンツを異なるように処理するように構成される、実施例１３－１５のいずれかに記載のシステム。
１７．頭部搭載型ディスプレイシステムは、ユーザの視野の中心領域に提示される画像コンテンツと比較して、ユーザの視野の該周辺領域の少なくとも一部に提示される画像コンテンツの色飽和を増加させることによって、画像コンテンツを異なるように処理するように構成される、実施例１３－１６のいずれかに記載のシステム。
１８．頭部搭載型ディスプレイシステムは、ユーザの視野の中心領域に提示される画像コンテンツと比較して、ユーザの視野の該周辺領域の少なくとも一部に提示される画像コンテンツの鮮明化によって、画像コンテンツを異なるように処理するように構成される、実施例１３－１７のいずれかに記載のシステム。
１９．鮮明化は、ユーザの視野の中心領域に提示される画像コンテンツと比較して、ユーザの視野の該周辺領域の少なくとも一部に提示される画像コンテンツにおける縁増強特徴を含む、実施例１８に記載のシステム。
２０．頭部搭載型ディスプレイシステムは、ユーザの視野の中心領域に提示される画像コンテンツと比較して、ユーザの視野の該周辺領域の少なくとも一部に提示される画像コンテンツのカラーバランスを偏移させることによって、画像コンテンツを異なるように処理するように構成される、実施例１３－１９のいずれかに記載のシステム。
２１．光をユーザの眼に投影し、拡張現実画像コンテンツを表示するように構成される、頭部搭載型ディスプレイシステムであって、該ユーザの眼は、中心領域と、該中心領域を中心として配置される周辺領域を有する、視野を有し、
ユーザの頭部上に支持されるように構成される、フレームと、
フレーム上に配置される、ディスプレイであって、該ディスプレイは、画像コンテンツを該ユーザの視野の中心および周辺領域に提示するように、光を該ユーザの眼の中に投影するように構成され、該ディスプレイの少なくとも一部は、透明部分が、ユーザの正面の環境の一部からの光をユーザの眼に伝送し、ユーザの正面の環境の該部分のビューを提供するように、透明であって、ユーザが該頭部搭載型ディスプレイシステムを装着すると、ユーザの眼の正面の場所に配置される、ディスプレイと、
該ディスプレイと通信し、該ディスプレイ上での画像コンテンツの提示を制御する、処理電子機器と、
を備え、該頭部搭載型ディスプレイシステムは、ユーザの視野の周辺領域に提示される画像コンテンツと比較して強調解除された画像コンテンツをユーザの視野の中心領域に提示するように構成される、頭部搭載型ディスプレイシステム。
２２．光をユーザの眼の中に指向し、画像を該眼内に形成するように構成される、１つまたはそれを上回る光源をさらに備える、実施例２１に記載のシステム。
２３．透明であって、ユーザの眼の正面の場所に配置される、該ディスプレイの少なくとも該部分は、光をユーザに投影するように構成される、１つまたはそれを上回る導波管を備える、実施例２１または２２に記載のシステム。
２４．該１つまたはそれを上回る光源は、光を該１つまたはそれを上回る導波管の中に指向するように構成される、実施例２３に記載のシステム。
２５．該光源は、ファイバ走査プロジェクタを備える、実施例２２－２４のいずれかに記載のシステム。
２６．環境を監視するように構成される、１つまたはそれを上回るセンサをさらに備える、実施例２１－２５のいずれかに記載のシステム。
２７．該１つまたはそれを上回るセンサは、該環境を結像するように構成される、１つまたはそれを上回る外向きに面した画像捕捉デバイスを備える、実施例２６に記載のシステム。
２８．該環境を結像するように構成される、該１つまたはそれを上回る外向きに面した画像捕捉デバイスは、１つまたはそれを上回る外向きに面したカメラを備える、実施例２７に記載のシステム。
２９．１つまたはそれを上回るセンサは、距離測定デバイスを備える、実施例２６－２８のいずれかに記載のシステム。
３０．該距離測定デバイスは、レーザ測距計を備える、実施例２９に記載のシステム。
３１．該ユーザの眼の位置および／または移動を追跡するように構成される、眼追跡デバイスをさらに備える、実施例２１－３０のいずれかに記載のシステム。
３２．該ユーザの眼を結像するように構成される、１つまたはそれを上回る内向きに面した画像捕捉デバイスをさらに備える、実施例２１－３１に記載のシステム。
３３．頭部搭載型ディスプレイシステムは、ユーザの視野の周辺領域に提示される画像コンテンツと比較して、ユーザの視野の中心領域の少なくとも一部に提示される画像コンテンツを異なるように処理するように構成される、実施例２１－３２のいずれかに記載のシステム。
３４．頭部搭載型ディスプレイシステムは、ユーザの視野の周辺領域に提示される画像コンテンツと比較して、ユーザの視野の中心領域の少なくとも一部に提示される画像コンテンツをぼかすことによって、画像コンテンツを異なるように処理するように構成される、実施例３３に記載のシステム。
３５．頭部搭載型ディスプレイシステムは、ユーザの視野の周辺領域に提示される画像コンテンツと比較して、ユーザの視野の中心領域の少なくとも一部に提示される画像コンテンツを暗化または減衰させることによって、画像コンテンツを異なるように処理するように構成される、実施例３３－３４のいずれかに記載のシステム。
３６．頭部搭載型ディスプレイシステムは、ユーザの視野の周辺領域に提示される画像コンテンツと比較して、ユーザの視野の中心領域の少なくとも一部に提示される画像コンテンツのコントラストを低減させることによって、画像コンテンツを異なるように処理するように構成される、実施例３３－３５のいずれかに記載のシステム。
３７．頭部搭載型ディスプレイシステムは、ユーザの視野の周辺領域に提示される画像コンテンツと比較して、ユーザの視野の中心領域の少なくとも一部に提示される画像コンテンツの色飽和を低減させることによって、画像コンテンツを異なるように処理するように構成される、実施例３３－３６のいずれかに記載のシステム。
３８．頭部搭載型ディスプレイシステムは、ユーザの視野の周辺領域に提示される画像コンテンツと比較して、ユーザの視野の中心領域の少なくとも一部に提示される画像コンテンツの鮮明度を低減させることによって、画像コンテンツを異なるように処理するように構成される、実施例３３－３７のいずれかに記載のシステム。
３９．鮮明度を減少させることは、ユーザの視野の周辺領域に提示される画像コンテンツと比較して、ユーザの視野の中心領域の少なくとも一部に提示される画像コンテンツ内の特徴の縁を増強解除することを含む、実施例３８に記載のシステム。
４０．頭部搭載型ディスプレイシステムは、ユーザの視野の周辺領域に提示される画像コンテンツと比較して、ユーザの視野の中心領域の少なくとも一部に提示される画像コンテンツのカラーバランスを偏移させることによって、画像コンテンツを異なるように処理するように構成される、実施例３３－３９のいずれかに記載のシステム。
４１．頭部搭載型ディスプレイシステムは、ユーザの視野の周辺領域に提示される画像コンテンツと比較して、ユーザの視野の中心領域の少なくとも一部に提示される画像コンテンツを収縮させることによって、画像コンテンツを異なるように処理するように構成される、実施例３３－４０のいずれかに記載のシステム。
４２．該拡大は、少なくとも部分的に、眼の分解能に基づく、実施例１４に記載のシステム。
４３．該ぼかしは、同一色を使用して、該ユーザの視野の中心領域の少なくとも一部に提示される該画像コンテンツをぼかすことを含む、実施例３４に記載のシステム。
４４．該同一色は、該ユーザの視野の該周辺領域に提示される画像コンテンツ内の色と比較して、高コントラスト色を備える、実施例４４に記載のシステム。
４５．システムは、アラートをユーザに提供し、提示される画像が増強されたことを示すように構成される、実施例１－２０または４２のいずれかに記載のシステム。
４６．システムは、アラートをユーザに提供し、提示される画像が強調解除されたことを示すように構成される、実施例２１－４１のいずれかまたは実施例４３－４４のいずれかに記載のシステム。
４７．アラートは、視覚的アラートである、実施例４５または４６のいずれかに記載のシステム。
４８．アラートは、聴覚的アラートである、実施例４５または４６のいずれかに記載のシステム。
４９．該頭部搭載型ディスプレイシステムは、ユーザの正面の環境の少なくとも該部分の３Ｄ表現を構築し、環境の少なくとも該部分の表現を解釈するように構成され、該環境の該部分は、患者を含み、該頭部搭載型ディスプレイはさらに、患者と関連付けられた第１の構造を患者と関連付けられた第２の構造から区別するように構成される、前述の実施例のいずれかに記載のシステム。
５０．透明であって、ユーザの眼の正面の場所に配置される、該ディスプレイの少なくとも該部分は、１つまたはそれを上回る導波管を備える、前述の実施例のいずれかに記載のシステム。
５１．光を該１つまたはそれを上回る導波管の中に指向するように構成される、１つまたはそれを上回る光源を備え、導波管は、光をユーザの眼の中に指向するように構成される、実施例５０に記載のシステム。
５２．該１つまたはそれを上回る光源は、ファイバ走査プロジェクタを備える、実施例５０－５１のいずれかに記載のシステム。
５３．環境を監視するように構成される、１つまたはそれを上回るセンサをさらに備える、前述の実施例のいずれかに記載のシステム。
５４．該１つまたはそれを上回るセンサは、該環境を結像するように構成される、１つまたはそれを上回る外向きに面した画像捕捉デバイスを備える、実施例５３に記載のシステム。
５５．該環境を結像するように構成される、該１つまたはそれを上回る外向きに面した画像捕捉デバイスは、１つまたはそれを上回る外向きに面したカメラを備える、実施例５４に記載のシステム。
５６．距離測定デバイスをさらに備える、前述の実施例のいずれかに記載のシステム。
５７．該ユーザの眼の位置および／または移動を追跡するように構成される、眼追跡デバイスをさらに備える、前述の実施例のいずれかに記載のシステム。
５８．頭部搭載型ディスプレイは、ユーザの視野内のヒト組織の体積を推定するように構成される、前述の実施例のいずれかに記載のシステム。
５９．頭部搭載型ディスプレイは、環境内の２つのオブジェクト間の距離を測定するように構成される、前述の実施例のいずれかに記載のシステム。
６０．頭部搭載型ディスプレイは、ディスプレイ上に提示される第１の画像モダリティと第２の画像モダリティとの間でトグルするように構成される、前述の実施例のいずれかに記載のシステム。
６１．第１の画像モダリティは、ＭＲＩ走査を備える、実施例６０に記載のシステム。
６２．第２の画像モダリティは、超音波を備える、実施例６０－６１のいずれかに記載のシステム。
６３．第１の画像モダリティは、Ｘ線走査を備える、実施例６０－６２のいずれかに記載のシステム。
６４．超音波音波を生産するように適合される、電子エミッタをさらに備える、前述の実施例のいずれかに記載のシステム。
６５．超音波音波を電気信号に変換するように適合される、センサをさらに備える、前述の実施例のいずれかに記載のシステム。
６６．頭部搭載型ディスプレイは、ユーザが、仮想基準マーカをユーザの眼に対してユーザの正面の環境の一部上に設置することを可能にするように構成される、前述の実施例のいずれかに記載のシステム。
６７．頭部搭載型ディスプレイは、画像が環境内の実世界オブジェクトに添付されて現れるように、画像をディスプレイ上に投影するように構成される、前述の実施例のいずれかに記載のシステム。
６８．頭部搭載型ディスプレイは、仮想切断ガイドラインが切断されるべきヒト身体領域上にオーバーレイされるようにユーザに現れるように、仮想切断ガイドラインを表示するように構成される、または切断されるべき部分へのアクセスを与える、前述の実施例のいずれかに記載のシステム。
６９．仮想切断ガイドラインの見掛け場所は、患者の身体部分の位置に関連するように現れる、実施例６８に記載のシステム。
７０．頭部搭載型ディスプレイは、信号を放出し、ユーザの正面の環境の一部内のオブジェクトの位置に関するデータを取得するように構成される、前述の実施例のいずれかに記載のシステム。
７１．頭部搭載型ディスプレイは、オブジェクト場所のデータベースを使用して、ユーザの正面の環境の一部内のオブジェクトの位置を取得するように構成される、前述の実施例のいずれかに記載のシステム。
７２．頭部搭載型ディスプレイは、該オブジェクト場所のデータベースに基づいて、基準点を設定し、画像が基準点に対して固定されて現れるように、画像をユーザの眼の中に投影するように構成される、実施例７１に記載のシステム。
７３．頭部搭載型ディスプレイは、ユーザ入力に基づいて、オブジェクトの３Ｄ画像のビューを軸を中心として回転させるように構成される、前述の実施例のいずれかに記載のシステム。
７４．頭部搭載型ディスプレイは、ユーザ入力に基づいて、３Ｄオブジェクトの画像のビューを平行移動させるように構成される、前述の実施例のいずれかに記載のシステム。
７５．頭部搭載型ディスプレイは、オブジェクトの３Ｄ画像の第１のスライスを表示するように構成される、前述の実施例のいずれかに記載のシステム。
７６．頭部搭載型ディスプレイは、３Ｄ画像の第１のスライスの画像および第２のスライスの画像を通してシーケンス化するように構成される、実施例７５に記載のシステム。
７７．頭部搭載型ディスプレイは、頭部搭載型ディスプレイの第２のユーザが伝送される環境の該部分の該画像を視認し得るように、ユーザの正面の環境の一部の画像を伝送するように構成される、前述の実施例のいずれかに記載のシステム。
７８．頭部搭載型ディスプレイは、ユーザに医療手技におけるステップをアラートするように構成される、前述の実施例のいずれかに記載のシステム。
７９．頭部搭載型ディスプレイは、ユーザの医療パラメータを監視し、医療パラメータに基づいて、アラートを提供するように構成される、前述の実施例のいずれかに記載のシステム。
８０．ユーザの医療パラメータは、バイタルサインを含む、実施例７９に記載のシステム。
８１．頭部搭載型ディスプレイは、超音波を放出し、該超音波から生じる信号を測定するように構成され、頭部搭載型ディスプレイはさらに、信号に基づいて、超音波画像を形成するように構成される、前述の実施例のいずれかに記載のシステム。
８２．頭部搭載型ディスプレイは、ユーザにユーザの視野外のオブジェクトおよび／またはイベントをアラートするように構成される、前述の実施例のいずれかに記載のシステム。
８３．光を該ユーザの眼の中に指向し、画像を眼内に形成するように構成される、１つまたはそれを上回る光源をさらに備える、前述の実施例のいずれかに記載のシステム。
８４．該１つまたはそれを上回る光源は、ファイバ走査プロジェクタを備える、前述の実施例のいずれかに記載のシステム。
８５．コントラストを増加させることは、該画像コンテンツの少なくとも１つの色の明度または暗度を調節することを含む、実施例１６に記載のシステム。
８６．コントラストを増加させることは、黒色、灰色、白色、または他の色を該画像コンテンツの少なくとも１つの色に追加することを含む、実施例１６に記載のシステム。
８７．頭部搭載型ディスプレイは、ある程度の不透明度を提示される画像コンテンツの少なくとも近傍に提供するように構成される、前述の実施例のいずれかに記載のシステム。
８８．頭部搭載型ディスプレイは、第１の画像モダリティと第１の画像モダリティと異なる第２の画像モダリティを組み合わせるように構成される、前述の実施例のいずれかに記載のシステム。
８９．第１の画像モダリティおよび第２の画像モダリティはそれぞれ、ＭＲＩ、ＣＴ、ＰＥＴ、ＭＲＡ、またはＣＴＡ走査からの画像を備える、実施例８８に記載のシステム。
９０．頭部搭載型ディスプレイは、第１および第２の画像モダリティの組み合わせられた画像を患者の実際の解剖学的構造にわたって整合させるように構成される、実施例８８または８９に記載のシステム。
【0013】
実施例セットＩＢ
１．光をユーザの眼に投影し、拡張現実画像コンテンツを表示するように構成される、頭部搭載型ディスプレイシステムであって、該ユーザの眼は、中心領域と、該中心領域を中心として配置される周辺領域を有する、視野を有し、
ユーザの頭部上に支持されるように構成される、フレームと、
フレーム上に配置される、ディスプレイであって、該ディスプレイは、画像コンテンツを該ユーザの視野の中心領域に提示するように、光を該ユーザの眼の中に投影するように構成され、該ディスプレイの少なくとも一部は、透明部分が、ユーザの正面の環境の一部からの光をユーザの眼に伝送し、ユーザの正面の環境の該部分のビューを提供するように、透明であって、ユーザが該頭部搭載型ディスプレイシステムを装着すると、ユーザの眼の正面の場所に配置される、ディスプレイと、
該ディスプレイと通信し、該ディスプレイ上での画像コンテンツの提示を制御する、処理電子機器と、
を備え、該頭部搭載型ディスプレイシステムは、ユーザの視野の中心領域に、ユーザの視野の周辺領域に提示される画像コンテンツと比較して増強された画像コンテンツを提示するように構成される、頭部搭載型ディスプレイシステム。
２．光を該ユーザの眼の中に指向し、画像を眼内に形成するように構成される、１つまたはそれを上回る光源をさらに備える、実施例１に記載のシステム。
３．透明であって、ユーザの眼の正面の場所に配置される、該ディスプレイの少なくとも該部分は、光をユーザに投影するように構成される、１つまたはそれを上回る導波管を備える、実施例１または２に記載のシステム。
４．該１つまたはそれを上回る光源は、光を該１つまたはそれを上回る導波管の中に指向するように構成される、実施例３に記載のシステム。
５．該光源は、ファイバ走査プロジェクタを備える、実施例２－４のいずれかに記載のシステム。
６．環境を監視するように構成される、１つまたはそれを上回るセンサをさらに備える、前述の実施例のいずれかに記載のシステム。
７．該１つまたはそれを上回るセンサは、該環境を結像するように構成される、１つまたはそれを上回る外向きに面した画像捕捉デバイスを備える、実施例６に記載のシステム。
８．該環境を結像するように構成される、該１つまたはそれを上回る外向きに面した画像捕捉デバイスは、１つまたはそれを上回る外向きに面したカメラを備える、実施例７に記載のシステム。
９．１つまたはそれを上回るセンサは、距離測定デバイスを備える、実施例６－８のいずれかに記載のシステム。
１０．該距離測定デバイスは、レーザ測距計を備える、実施例９に記載のシステム。
１１．該ユーザの眼の位置および／または移動を追跡するように構成される、眼追跡デバイスをさらに備える、前述の実施例のいずれかに記載のシステム。
１２．該ユーザの眼を結像するように構成される、１つまたはそれを上回る内向きに面した画像捕捉デバイスをさらに備える、実施例１または１１に記載のシステム。
１３．頭部搭載型ディスプレイシステムは、ユーザの視野の周辺領域に提示される画像コンテンツと比較して、ユーザの視野の中心領域の少なくとも一部に提示される画像コンテンツを異なるように処理するように構成される、前述の実施例のいずれかに記載のシステム。
１４．頭部搭載型ディスプレイシステムは、ユーザの視野の周辺領域に提示される画像コンテンツと比較して、ユーザの視野の中心領域の少なくとも一部に提示される画像コンテンツを拡大することによって、画像コンテンツを異なるように処理するように構成される、実施例１３に記載のシステム。
１５．頭部搭載型ディスプレイシステムは、ユーザの視野の周辺領域に提示される画像コンテンツと比較して、ユーザの視野の中心領域の少なくとも一部に提示される画像コンテンツにおける明度を増加させることによって、画像コンテンツを異なるように処理するように構成される、実施例１３－１４のいずれかに記載のシステム。
１６．頭部搭載型ディスプレイシステムは、ユーザの視野の周辺領域に提示される画像コンテンツと比較して、ユーザの視野の中心領域の少なくとも一部に提示される画像コンテンツのコントラストを増加させることによって、画像コンテンツを異なるように処理するように構成される、実施例１３－１５のいずれかに記載のシステム。
１７．頭部搭載型ディスプレイシステムは、ユーザの視野の周辺領域に提示される画像コンテンツと比較して、ユーザの視野の中心領域の少なくとも一部に提示される画像コンテンツの色飽和を増加させることによって、画像コンテンツを異なるように処理するように構成される、実施例１３－１６のいずれかに記載のシステム。
１８．頭部搭載型ディスプレイシステムは、ユーザの視野の周辺領域に提示される画像コンテンツと比較して、ユーザの視野の中心領域の少なくとも一部に提示される画像コンテンツの鮮明化によって、画像コンテンツを異なるように処理するように構成される、実施例１３－１７のいずれかに記載のシステム。
１９．鮮明化は、ユーザの視野の周辺領域に提示される画像コンテンツと比較して、ユーザの視野の中心領域の少なくとも一部に提示される画像コンテンツにおける縁増強特徴を含む、実施例１８に記載のシステム。
２０．頭部搭載型ディスプレイシステムは、ユーザの視野の周辺領域に提示される画像コンテンツと比較して、ユーザの視野の中心領域の少なくとも一部に提示される画像コンテンツのカラーバランスを偏移させることによって、画像コンテンツを異なるように処理するように構成される、実施例１３－１９のいずれかに記載のシステム。
２１．光をユーザの眼に投影し、拡張現実画像コンテンツを表示するように構成される、頭部搭載型ディスプレイシステムであって、該ユーザの眼は、中心領域と、該中心領域を中心として配置される周辺領域を有する、視野を有し、
ユーザの頭部上に支持されるように構成される、フレームと、
フレーム上に配置される、ディスプレイであって、該ディスプレイは、画像コンテンツを該ユーザの視野の中心および周辺領域に提示するように、光を該ユーザの眼の中に投影するように構成され、該ディスプレイの少なくとも一部は、透明部分が、ユーザの正面の環境の一部からの光をユーザの眼に伝送し、ユーザの正面の環境の該部分のビューを提供するように、透明であって、ユーザが該頭部搭載型ディスプレイシステムを装着すると、ユーザの眼の正面の場所に配置される、ディスプレイと、
該ディスプレイと通信し、該ディスプレイ上での画像コンテンツの提示を制御する、処理電子機器と、
を備え、該頭部搭載型ディスプレイシステムは、ユーザの視野の中心領域に提示される画像コンテンツと比較して強調解除された画像コンテンツをユーザの視野の該周辺領域に提示するように構成される、頭部搭載型ディスプレイシステム。
２２．光をユーザの眼の中に指向し、画像を該眼内に形成するように構成される、１つまたはそれを上回る光源をさらに備える、実施例２１に記載のシステム。
２３．透明であって、ユーザの眼の正面の場所に配置される、該ディスプレイの少なくとも該部分は、光をユーザに投影するように構成される、１つまたはそれを上回る導波管を備える、実施例２１または２２に記載のシステム。
２４．該１つまたはそれを上回る光源は、光を該１つまたはそれを上回る導波管の中に指向するように構成される、実施例２３に記載のシステム。
２５．該光源は、ファイバ走査プロジェクタを備える、実施例２２－２４のいずれかに記載のシステム。
２６．環境を監視するように構成される、１つまたはそれを上回るセンサをさらに備える、実施例２１－２５のいずれかに記載のシステム。
２７．該１つまたはそれを上回るセンサは、該環境を結像するように構成される、１つまたはそれを上回る外向きに面した画像捕捉デバイスを備える、実施例２６に記載のシステム。
２８．該環境を結像するように構成される、該１つまたはそれを上回る外向きに面した画像捕捉デバイスは、１つまたはそれを上回る外向きに面したカメラを備える、実施例２７に記載のシステム。
２９．１つまたはそれを上回るセンサは、距離測定デバイスを備える、実施例２６－２８のいずれかに記載のシステム。
３０．該距離測定デバイスは、レーザ測距計を備える、実施例２９に記載のシステム。
３１．該ユーザの眼の位置および／または移動を追跡するように構成される、眼追跡デバイスをさらに備える、実施例２１－３０のいずれかに記載のシステム。
３２．該ユーザの眼を結像するように構成される、１つまたはそれを上回る内向きに面した画像捕捉デバイスをさらに備える、実施例２１－３１に記載のシステム。
３３．頭部搭載型ディスプレイシステムは、ユーザの視野の中心領域に提示される画像コンテンツと比較して、ユーザの視野の該周辺領域の少なくとも一部に提示される画像コンテンツを異なるように処理するように構成される、実施例２１－３２のいずれかに記載のシステム。
３４．頭部搭載型ディスプレイシステムは、ユーザの視野の中心領域に提示される画像コンテンツと比較して、ユーザの視野の該周辺領域の少なくとも一部に提示される画像コンテンツをぼかすことによって、画像コンテンツを異なるように処理するように構成される、実施例３３に記載のシステム。
３５．頭部搭載型ディスプレイシステムは、ユーザの視野の中心領域に提示される画像コンテンツと比較して、ユーザの視野の該周辺領域の少なくとも一部に提示される画像コンテンツを暗化または減衰させることによって、画像コンテンツを異なるように処理するように構成される、実施例３３－３４のいずれかに記載のシステム。
３６．頭部搭載型ディスプレイシステムは、ユーザの視野の中心領域に提示される画像コンテンツと比較して、ユーザの視野の該周辺領域の少なくとも一部に提示される画像コンテンツのコントラストを低減させることによって、画像コンテンツを異なるように処理するように構成される、実施例３３－３５のいずれかに記載のシステム。
３７．頭部搭載型ディスプレイシステムは、ユーザの視野の中心領域に提示される画像コンテンツと比較して、ユーザの視野の該周辺領域の少なくとも一部に提示される画像コンテンツの色飽和を低減させることによって、画像コンテンツを異なるように処理するように構成される、実施例３３－３６のいずれかに記載のシステム。
３８．頭部搭載型ディスプレイシステムは、ユーザの視野の中心領域に提示される画像コンテンツと比較して、ユーザの視野の該周辺領域の少なくとも一部に提示される画像コンテンツの鮮明度を低減させることによって、画像コンテンツを異なるように処理するように構成される、実施例３３－３７のいずれかに記載のシステム。
３９．鮮明度を減少させることは、ユーザの視野の中心領域に提示される画像コンテンツと比較して、ユーザの視野の該周辺領域の少なくとも一部に提示される画像コンテンツ内の特徴の縁を増強解除することを含む、実施例３８に記載のシステム。
４０．頭部搭載型ディスプレイシステムは、ユーザの視野の中心領域に提示される画像コンテンツと比較して、ユーザの視野の該周辺領域の少なくとも一部に提示される画像コンテンツのカラーバランスを偏移させることによって、画像コンテンツを異なるように処理するように構成される、実施例３３－３９のいずれかに記載のシステム。
４１．頭部搭載型ディスプレイシステムは、ユーザの視野の中心領域に提示される画像コンテンツと比較して、ユーザの視野の該周辺領域の少なくとも一部に提示される画像コンテンツを収縮させることによって、画像コンテンツを異なるように処理するように構成される、実施例３３－４０のいずれかに記載のシステム。
４２．該拡大は、少なくとも部分的に、眼の分解能に基づく、実施例１４に記載のシステム。
４３．該ぼかしは、同一色を使用して、該ユーザの視野の該周辺領域の少なくとも一部に提示される該画像コンテンツをぼかすことを含む、実施例３４に記載のシステム。
４４．該同一色は、ユーザの視野の中心領域に提示される該画像コンテンツ内の色と比較して高コントラスト色を備える、実施例４４に記載のシステム。
４５．システムは、アラートをユーザに提供し、提示される画像が増強されたことを示すように構成される、実施例１－２０または４２のいずれかに記載のシステム。
４６．システムは、アラートをユーザに提供し、提示される画像が強調解除されたことを示すように構成される、実施例２１－４１のいずれかまたは実施例４３－４４のいずれかに記載のシステム。
４７．アラートは、視覚的アラートである、実施例４５または４６のいずれかに記載のシステム。
４８．アラートは、聴覚的アラートである、実施例４５または４６のいずれかに記載のシステム。
４９．該頭部搭載型ディスプレイシステムは、ユーザの正面の環境の少なくとも該部分の３Ｄ表現を構築し、環境の少なくとも該部分の表現を解釈するように構成され、該環境の該部分は、患者を含み、該頭部搭載型ディスプレイはさらに、患者と関連付けられた第１の構造を患者と関連付けられた第２の構造から区別するように構成される、前述の実施例のいずれかに記載のシステム。
５０．透明であって、ユーザの眼の正面の場所に配置される、該ディスプレイの少なくとも該部分は、１つまたはそれを上回る導波管を備える、前述の実施例のいずれかに記載のシステム。
５１．光を該１つまたはそれを上回る導波管の中に指向するように構成される、１つまたはそれを上回る光源を備え、導波管は、光をユーザの眼の中に指向するように構成される、実施例５０に記載のシステム。
５２．該１つまたはそれを上回る光源は、ファイバ走査プロジェクタを備える、実施例５０－５１のいずれかに記載のシステム。
５３．環境を監視するように構成される、１つまたはそれを上回るセンサをさらに備える、前述の実施例のいずれかに記載のシステム。
５４．該１つまたはそれを上回るセンサは、該環境を結像するように構成される、１つまたはそれを上回る外向きに面した画像捕捉デバイスを備える、実施例５３に記載のシステム。
５５．該環境を結像するように構成される、該１つまたはそれを上回る外向きに面した画像捕捉デバイスは、１つまたはそれを上回る外向きに面したカメラを備える、実施例５４に記載のシステム。
５６．距離測定デバイスをさらに備える、前述の実施例のいずれかに記載のシステム。
５７．該ユーザの眼の位置および／または移動を追跡するように構成される、眼追跡デバイスをさらに備える、前述の実施例のいずれかに記載のシステム。
５８．頭部搭載型ディスプレイは、ユーザの視野内のヒト組織の体積を推定するように構成される、前述の実施例のいずれかに記載のシステム。
５９．頭部搭載型ディスプレイは、環境内の２つのオブジェクト間の距離を測定するように構成される、前述の実施例のいずれかに記載のシステム。
６０．頭部搭載型ディスプレイは、ディスプレイ上に提示される第１の画像モダリティと第２の画像モダリティとの間でトグルするように構成される、前述の実施例のいずれかに記載のシステム。
６１．第１の画像モダリティは、ＭＲＩ走査を備える、実施例６０に記載のシステム。
６２．第２の画像モダリティは、超音波を備える、実施例６０－６１のいずれかに記載のシステム。
６３．第１の画像モダリティは、Ｘ線走査を備える、実施例６０－６１のいずれかに記載のシステム。
６４．超音波音波を生産するように適合される、電子エミッタをさらに備える、前述の実施例のいずれかに記載のシステム。
６５．超音波音波を電気信号に変換するように適合される、センサをさらに備える、前述の実施例のいずれかに記載のシステム。
６６．頭部搭載型ディスプレイは、ユーザが、仮想基準マーカをユーザの眼に対してユーザの正面の環境の一部上に設置することを可能にするように構成される、前述の実施例のいずれかに記載のシステム。
６７．頭部搭載型ディスプレイは、画像が環境内の実世界オブジェクトに添付されて現れるように、画像をディスプレイ上に投影するように構成される、前述の実施例のいずれかに記載のシステム。
６８．頭部搭載型ディスプレイは、仮想切断ガイドラインが切断されるべきヒト身体領域上にオーバーレイされるようにユーザに現れるように、仮想切断ガイドラインを表示するように構成される、または切断されるべき部分へのアクセスを与える、前述の実施例のいずれかに記載のシステム。
６９．仮想切断ガイドラインの見掛け場所は、患者の身体部分の位置に関連するように現れる、実施例６８に記載のシステム。
７０．頭部搭載型ディスプレイは、信号を放出し、ユーザの正面の環境の一部内のオブジェクトの位置に関するデータを取得するように構成される、前述の実施例のいずれかに記載のシステム。
７１．頭部搭載型ディスプレイは、オブジェクト場所のデータベースを使用して、ユーザの正面の環境の一部内のオブジェクトの位置を取得するように構成される、前述の実施例のいずれかに記載のシステム。
７２．頭部搭載型ディスプレイは、該オブジェクト場所のデータベースに基づいて、基準点を設定し、画像が基準点に対して固定されて現れるように、画像をユーザの眼の中に投影するように構成される、実施例７１に記載のシステム。
７３．頭部搭載型ディスプレイは、ユーザ入力に基づいて、オブジェクトの３Ｄ画像のビューを軸を中心として回転させるように構成される、前述の実施例のいずれかに記載のシステム。
７４．頭部搭載型ディスプレイは、ユーザ入力に基づいて、３Ｄオブジェクトの画像のビューを平行移動させるように構成される、前述の実施例のいずれかに記載のシステム。
７５．頭部搭載型ディスプレイは、オブジェクトの３Ｄ画像の第１のスライスを表示するように構成される、前述の実施例のいずれかに記載のシステム。
７６．頭部搭載型ディスプレイは、３Ｄ画像の第１のスライスの画像および第２のスライスの画像を通してシーケンス化するように構成される、実施例７６に記載のシステム。
７７．頭部搭載型ディスプレイは、頭部搭載型ディスプレイの第２のユーザが伝送される環境の該部分の該画像を視認し得るように、ユーザの正面の環境の一部の画像を伝送するように構成される、前述の実施例のいずれかに記載のシステム。
７８．頭部搭載型ディスプレイは、ユーザに医療手技におけるステップをアラートするように構成される、前述の実施例のいずれかに記載のシステム。
７９．頭部搭載型ディスプレイは、ユーザの医療パラメータを監視し、医療パラメータに基づいて、アラートを提供するように構成される、前述の実施例のいずれかに記載のシステム。
８０．ユーザの医療パラメータは、バイタルサインを含む、実施例７９に記載のシステム。
８１．頭部搭載型ディスプレイは、超音波を放出し、該超音波から生じる信号を測定するように構成され、頭部搭載型ディスプレイはさらに、信号に基づいて、超音波画像を形成するように構成される、前述の実施例のいずれかに記載のシステム。
８２．頭部搭載型ディスプレイは、ユーザにユーザの視野外のオブジェクトおよび／またはイベントをアラートするように構成される、前述の実施例のいずれかに記載のシステム。
８３．光を該ユーザの眼の中に指向し、画像を眼内に形成するように構成される、１つまたはそれを上回る光源をさらに備える、前述の実施例のいずれかに記載のシステム。
８４．該１つまたはそれを上回る光源は、ファイバ走査プロジェクタを備える、前述の実施例のいずれかに記載のシステム。
８５．コントラストを増加させることは、該画像コンテンツの少なくとも１つの色の明度または暗度を調節することを含む、実施例１６に記載のシステム。
８６．コントラストを増加させることは、黒色、灰色、白色、または他の色を該画像コンテンツの少なくとも１つの色に追加することを含む、実施例１６に記載のシステム。
８７．頭部搭載型ディスプレイは、ある程度の不透明度を提示される画像コンテンツの少なくとも近傍に提供するように構成される、前述の実施例のいずれかに記載のシステム。
８８．頭部搭載型ディスプレイは、第１の画像モダリティと第１の画像モダリティと異なる第２の画像モダリティを組み合わせるように構成される、前述の実施例のいずれかに記載のシステム。
８９．第１の画像モダリティおよび第２の画像モダリティはそれぞれ、ＭＲＩ、ＣＴ、ＰＥＴ、ＭＲＡ、またはＣＴＡ走査からの画像を備える、実施例８８に記載のシステム。
９０．頭部搭載型ディスプレイは、第１および第２の画像モダリティの組み合わせられた画像を患者の実際の解剖学的構造にわたって整合させるように構成される、実施例８８または８９に記載のシステム。
１．光をユーザの眼に投影し、拡張現実画像コンテンツを表示するように構成される、頭部搭載型ディスプレイシステムであって、該ユーザの眼は、中心領域と、該中心領域を中心として配置される周辺領域を有する、視野を有し、
ユーザの頭部上に支持されるように構成される、フレームと、
フレーム上に配置される、ディスプレイであって、該ディスプレイは、画像コンテンツを該ユーザの視野の中心領域に提示するように、光を該ユーザの眼の中に投影するように構成され、該ディスプレイの少なくとも一部は、透明部分が、ユーザの正面の環境の一部からの光をユーザの眼に伝送し、ユーザの正面の環境の該部分のビューを提供するように、透明であって、ユーザが該頭部搭載型ディスプレイシステムを装着すると、ユーザの眼の正面の場所に配置される、ディスプレイと、
該ディスプレイと通信し、該ディスプレイ上での画像コンテンツの提示を制御する、処理電子機器と、
を備え、該頭部搭載型ディスプレイシステムは、ユーザの視野の中心領域に、ユーザの視野の周辺領域に提示される画像コンテンツと比較して増強された画像コンテンツを提示するように構成される、頭部搭載型ディスプレイシステム。
２．光を該ユーザの眼の中に指向し、画像を眼内に形成するように構成される、１つまたはそれを上回る光源をさらに備える、実施例１に記載のシステム。
３．透明であって、ユーザの眼の正面の場所に配置される、該ディスプレイの少なくとも該部分は、光をユーザに投影するように構成される、１つまたはそれを上回る導波管を備える、実施例１または２に記載のシステム。
４．該１つまたはそれを上回る光源は、光を該１つまたはそれを上回る導波管の中に指向するように構成される、実施例３に記載のシステム。
５．該光源は、ファイバ走査プロジェクタを備える、実施例２－４のいずれかに記載のシステム。
６．環境を監視するように構成される、１つまたはそれを上回るセンサをさらに備える、前述の実施例のいずれかに記載のシステム。
７．該１つまたはそれを上回るセンサは、該環境を結像するように構成される、１つまたはそれを上回る外向きに面した画像捕捉デバイスを備える、実施例６に記載のシステム。
８．該環境を結像するように構成される、該１つまたはそれを上回る外向きに面した画像捕捉デバイスは、１つまたはそれを上回る外向きに面したカメラを備える、実施例７に記載のシステム。
９．１つまたはそれを上回るセンサは、距離測定デバイスを備える、実施例６－８のいずれかに記載のシステム。
１０．該距離測定デバイスは、レーザ測距計を備える、実施例９に記載のシステム。
１１．該ユーザの眼の位置および／または移動を追跡するように構成される、眼追跡デバイスをさらに備える、前述の実施例のいずれかに記載のシステム。
１２．該ユーザの眼を結像するように構成される、１つまたはそれを上回る内向きに面した画像捕捉デバイスをさらに備える、実施例１または１１に記載のシステム。
１３．頭部搭載型ディスプレイシステムは、ユーザの視野の周辺領域に提示される画像コンテンツと比較して、ユーザの視野の中心領域の少なくとも一部に提示される画像コンテンツを異なるように処理するように構成される、前述の実施例のいずれかに記載のシステム。
１４．頭部搭載型ディスプレイシステムは、ユーザの視野の周辺領域に提示される画像コンテンツと比較して、ユーザの視野の中心領域の少なくとも一部に提示される画像コンテンツを拡大することによって、画像コンテンツを異なるように処理するように構成される、実施例１３に記載のシステム。
１５．頭部搭載型ディスプレイシステムは、ユーザの視野の周辺領域に提示される画像コンテンツと比較して、ユーザの視野の中心領域の少なくとも一部に提示される画像コンテンツにおける明度を増加させることによって、画像コンテンツを異なるように処理するように構成される、実施例１３－１４のいずれかに記載のシステム。
１６．頭部搭載型ディスプレイシステムは、ユーザの視野の周辺領域に提示される画像コンテンツと比較して、ユーザの視野の中心領域の少なくとも一部に提示される画像コンテンツのコントラストを増加させることによって、画像コンテンツを異なるように処理するように構成される、実施例１３－１５のいずれかに記載のシステム。
１７．頭部搭載型ディスプレイシステムは、ユーザの視野の周辺領域に提示される画像コンテンツと比較して、ユーザの視野の中心領域の少なくとも一部に提示される画像コンテンツの色飽和を増加させることによって、画像コンテンツを異なるように処理するように構成される、実施例１３－１６のいずれかに記載のシステム。
１８．頭部搭載型ディスプレイシステムは、ユーザの視野の周辺領域に提示される画像コンテンツと比較して、ユーザの視野の中心領域の少なくとも一部に提示される画像コンテンツの鮮明化によって、画像コンテンツを異なるように処理するように構成される、実施例１３－１７のいずれかに記載のシステム。
１９．鮮明化は、ユーザの視野の周辺領域に提示される画像コンテンツと比較して、ユーザの視野の中心領域の少なくとも一部に提示される画像コンテンツにおける縁増強特徴を含む、実施例１８に記載のシステム。
２０．頭部搭載型ディスプレイシステムは、ユーザの視野の周辺領域に提示される画像コンテンツと比較して、ユーザの視野の中心領域の少なくとも一部に提示される画像コンテンツのカラーバランスを偏移させることによって、画像コンテンツを異なるように処理するように構成される、実施例１３－１９のいずれかに記載のシステム。
２１．光をユーザの眼に投影し、拡張現実画像コンテンツを表示するように構成される、頭部搭載型ディスプレイシステムであって、該ユーザの眼は、中心領域と、該中心領域を中心として配置される周辺領域を有する、視野を有し、
ユーザの頭部上に支持されるように構成される、フレームと、
フレーム上に配置される、ディスプレイであって、該ディスプレイは、画像コンテンツを該ユーザの視野の中心および周辺領域に提示するように、光を該ユーザの眼の中に投影するように構成され、該ディスプレイの少なくとも一部は、透明部分が、ユーザの正面の環境の一部からの光をユーザの眼に伝送し、ユーザの正面の環境の該部分のビューを提供するように、透明であって、ユーザが該頭部搭載型ディスプレイシステムを装着すると、ユーザの眼の正面の場所に配置される、ディスプレイと、
該ディスプレイと通信し、該ディスプレイ上での画像コンテンツの提示を制御する、処理電子機器と、
を備え、該頭部搭載型ディスプレイシステムは、ユーザの視野の中心領域に提示される画像コンテンツと比較して強調解除された画像コンテンツをユーザの視野の該周辺領域に提示するように構成される、頭部搭載型ディスプレイシステム。
２２．光をユーザの眼の中に指向し、画像を該眼内に形成するように構成される、１つまたはそれを上回る光源をさらに備える、実施例２１に記載のシステム。
２３．透明であって、ユーザの眼の正面の場所に配置される、該ディスプレイの少なくとも該部分は、光をユーザに投影するように構成される、１つまたはそれを上回る導波管を備える、実施例２１または２２に記載のシステム。
２４．該１つまたはそれを上回る光源は、光を該１つまたはそれを上回る導波管の中に指向するように構成される、実施例２３に記載のシステム。
２５．該光源は、ファイバ走査プロジェクタを備える、実施例２２－２４のいずれかに記載のシステム。
２６．環境を監視するように構成される、１つまたはそれを上回るセンサをさらに備える、実施例２１－２５のいずれかに記載のシステム。
２７．該１つまたはそれを上回るセンサは、該環境を結像するように構成される、１つまたはそれを上回る外向きに面した画像捕捉デバイスを備える、実施例２６に記載のシステム。
２８．該環境を結像するように構成される、該１つまたはそれを上回る外向きに面した画像捕捉デバイスは、１つまたはそれを上回る外向きに面したカメラを備える、実施例２７に記載のシステム。
２９．１つまたはそれを上回るセンサは、距離測定デバイスを備える、実施例２６－２８のいずれかに記載のシステム。
３０．該距離測定デバイスは、レーザ測距計を備える、実施例２９に記載のシステム。
３１．該ユーザの眼の位置および／または移動を追跡するように構成される、眼追跡デバイスをさらに備える、実施例２１－３０のいずれかに記載のシステム。
３２．該ユーザの眼を結像するように構成される、１つまたはそれを上回る内向きに面した画像捕捉デバイスをさらに備える、実施例２１－３１に記載のシステム。
３３．頭部搭載型ディスプレイシステムは、ユーザの視野の中心領域に提示される画像コンテンツと比較して、ユーザの視野の該周辺領域の少なくとも一部に提示される画像コンテンツを異なるように処理するように構成される、実施例２１－３２のいずれかに記載のシステム。
３４．頭部搭載型ディスプレイシステムは、ユーザの視野の中心領域に提示される画像コンテンツと比較して、ユーザの視野の該周辺領域の少なくとも一部に提示される画像コンテンツをぼかすことによって、画像コンテンツを異なるように処理するように構成される、実施例３３に記載のシステム。
３５．頭部搭載型ディスプレイシステムは、ユーザの視野の中心領域に提示される画像コンテンツと比較して、ユーザの視野の該周辺領域の少なくとも一部に提示される画像コンテンツを暗化または減衰させることによって、画像コンテンツを異なるように処理するように構成される、実施例３３－３４のいずれかに記載のシステム。
３６．頭部搭載型ディスプレイシステムは、ユーザの視野の中心領域に提示される画像コンテンツと比較して、ユーザの視野の該周辺領域の少なくとも一部に提示される画像コンテンツのコントラストを低減させることによって、画像コンテンツを異なるように処理するように構成される、実施例３３－３５のいずれかに記載のシステム。
３７．頭部搭載型ディスプレイシステムは、ユーザの視野の中心領域に提示される画像コンテンツと比較して、ユーザの視野の該周辺領域の少なくとも一部に提示される画像コンテンツの色飽和を低減させることによって、画像コンテンツを異なるように処理するように構成される、実施例３３－３６のいずれかに記載のシステム。
３８．頭部搭載型ディスプレイシステムは、ユーザの視野の中心領域に提示される画像コンテンツと比較して、ユーザの視野の該周辺領域の少なくとも一部に提示される画像コンテンツの鮮明度を低減させることによって、画像コンテンツを異なるように処理するように構成される、実施例３３－３７のいずれかに記載のシステム。
３９．鮮明度を減少させることは、ユーザの視野の中心領域に提示される画像コンテンツと比較して、ユーザの視野の該周辺領域の少なくとも一部に提示される画像コンテンツ内の特徴の縁を増強解除することを含む、実施例３８に記載のシステム。
４０．頭部搭載型ディスプレイシステムは、ユーザの視野の中心領域に提示される画像コンテンツと比較して、ユーザの視野の該周辺領域の少なくとも一部に提示される画像コンテンツのカラーバランスを偏移させることによって、画像コンテンツを異なるように処理するように構成される、実施例３３－３９のいずれかに記載のシステム。
４１．頭部搭載型ディスプレイシステムは、ユーザの視野の中心領域に提示される画像コンテンツと比較して、ユーザの視野の該周辺領域の少なくとも一部に提示される画像コンテンツを収縮させることによって、画像コンテンツを異なるように処理するように構成される、実施例３３－４０のいずれかに記載のシステム。
４２．該拡大は、少なくとも部分的に、眼の分解能に基づく、実施例１４に記載のシステム。
４３．該ぼかしは、同一色を使用して、該ユーザの視野の該周辺領域の少なくとも一部に提示される該画像コンテンツをぼかすことを含む、実施例３４に記載のシステム。
４４．該同一色は、ユーザの視野の中心領域に提示される該画像コンテンツ内の色と比較して高コントラスト色を備える、実施例４４に記載のシステム。
４５．システムは、アラートをユーザに提供し、提示される画像が増強されたことを示すように構成される、実施例１－２０または４２のいずれかに記載のシステム。
４６．システムは、アラートをユーザに提供し、提示される画像が強調解除されたことを示すように構成される、実施例２１－４１のいずれかまたは実施例４３－４４のいずれかに記載のシステム。
４７．アラートは、視覚的アラートである、実施例４５または４６のいずれかに記載のシステム。
４８．アラートは、聴覚的アラートである、実施例４５または４６のいずれかに記載のシステム。
４９．該頭部搭載型ディスプレイシステムは、ユーザの正面の環境の少なくとも該部分の３Ｄ表現を構築し、環境の少なくとも該部分の表現を解釈するように構成され、該環境の該部分は、患者を含み、該頭部搭載型ディスプレイはさらに、患者と関連付けられた第１の構造を患者と関連付けられた第２の構造から区別するように構成される、前述の実施例のいずれかに記載のシステム。
５０．透明であって、ユーザの眼の正面の場所に配置される、該ディスプレイの少なくとも該部分は、１つまたはそれを上回る導波管を備える、前述の実施例のいずれかに記載のシステム。
５１．光を該１つまたはそれを上回る導波管の中に指向するように構成される、１つまたはそれを上回る光源を備え、導波管は、光をユーザの眼の中に指向するように構成される、実施例５０に記載のシステム。
５２．該１つまたはそれを上回る光源は、ファイバ走査プロジェクタを備える、実施例５０－５１のいずれかに記載のシステム。
５３．環境を監視するように構成される、１つまたはそれを上回るセンサをさらに備える、前述の実施例のいずれかに記載のシステム。
５４．該１つまたはそれを上回るセンサは、該環境を結像するように構成される、１つまたはそれを上回る外向きに面した画像捕捉デバイスを備える、実施例５３に記載のシステム。
５５．該環境を結像するように構成される、該１つまたはそれを上回る外向きに面した画像捕捉デバイスは、１つまたはそれを上回る外向きに面したカメラを備える、実施例５４に記載のシステム。
５６．距離測定デバイスをさらに備える、前述の実施例のいずれかに記載のシステム。
５７．該ユーザの眼の位置および／または移動を追跡するように構成される、眼追跡デバイスをさらに備える、前述の実施例のいずれかに記載のシステム。
５８．頭部搭載型ディスプレイは、ユーザの視野内のヒト組織の体積を推定するように構成される、前述の実施例のいずれかに記載のシステム。
５９．頭部搭載型ディスプレイは、環境内の２つのオブジェクト間の距離を測定するように構成される、前述の実施例のいずれかに記載のシステム。
６０．頭部搭載型ディスプレイは、ディスプレイ上に提示される第１の画像モダリティと第２の画像モダリティとの間でトグルするように構成される、前述の実施例のいずれかに記載のシステム。
６１．第１の画像モダリティは、ＭＲＩ走査を備える、実施例６０に記載のシステム。
６２．第２の画像モダリティは、超音波を備える、実施例６０－６１のいずれかに記載のシステム。
６３．第１の画像モダリティは、Ｘ線走査を備える、実施例６０－６１のいずれかに記載のシステム。
６４．超音波音波を生産するように適合される、電子エミッタをさらに備える、前述の実施例のいずれかに記載のシステム。
６５．超音波音波を電気信号に変換するように適合される、センサをさらに備える、前述の実施例のいずれかに記載のシステム。
６６．頭部搭載型ディスプレイは、ユーザが、仮想基準マーカをユーザの眼に対してユーザの正面の環境の一部上に設置することを可能にするように構成される、前述の実施例のいずれかに記載のシステム。
６７．頭部搭載型ディスプレイは、画像が環境内の実世界オブジェクトに添付されて現れるように、画像をディスプレイ上に投影するように構成される、前述の実施例のいずれかに記載のシステム。
６８．頭部搭載型ディスプレイは、仮想切断ガイドラインが切断されるべきヒト身体領域上にオーバーレイされるようにユーザに現れるように、仮想切断ガイドラインを表示するように構成される、または切断されるべき部分へのアクセスを与える、前述の実施例のいずれかに記載のシステム。
６９．仮想切断ガイドラインの見掛け場所は、患者の身体部分の位置に関連するように現れる、実施例６８に記載のシステム。
７０．頭部搭載型ディスプレイは、信号を放出し、ユーザの正面の環境の一部内のオブジェクトの位置に関するデータを取得するように構成される、前述の実施例のいずれかに記載のシステム。
７１．頭部搭載型ディスプレイは、オブジェクト場所のデータベースを使用して、ユーザの正面の環境の一部内のオブジェクトの位置を取得するように構成される、前述の実施例のいずれかに記載のシステム。
７２．頭部搭載型ディスプレイは、該オブジェクト場所のデータベースに基づいて、基準点を設定し、画像が基準点に対して固定されて現れるように、画像をユーザの眼の中に投影するように構成される、実施例７１に記載のシステム。
７３．頭部搭載型ディスプレイは、ユーザ入力に基づいて、オブジェクトの３Ｄ画像のビューを軸を中心として回転させるように構成される、前述の実施例のいずれかに記載のシステム。
７４．頭部搭載型ディスプレイは、ユーザ入力に基づいて、３Ｄオブジェクトの画像のビューを平行移動させるように構成される、前述の実施例のいずれかに記載のシステム。
７５．頭部搭載型ディスプレイは、オブジェクトの３Ｄ画像の第１のスライスを表示するように構成される、前述の実施例のいずれかに記載のシステム。
７６．頭部搭載型ディスプレイは、３Ｄ画像の第１のスライスの画像および第２のスライスの画像を通してシーケンス化するように構成される、実施例７６に記載のシステム。
７７．頭部搭載型ディスプレイは、頭部搭載型ディスプレイの第２のユーザが伝送される環境の該部分の該画像を視認し得るように、ユーザの正面の環境の一部の画像を伝送するように構成される、前述の実施例のいずれかに記載のシステム。
７８．頭部搭載型ディスプレイは、ユーザに医療手技におけるステップをアラートするように構成される、前述の実施例のいずれかに記載のシステム。
７９．頭部搭載型ディスプレイは、ユーザの医療パラメータを監視し、医療パラメータに基づいて、アラートを提供するように構成される、前述の実施例のいずれかに記載のシステム。
８０．ユーザの医療パラメータは、バイタルサインを含む、実施例７９に記載のシステム。
８１．頭部搭載型ディスプレイは、超音波を放出し、該超音波から生じる信号を測定するように構成され、頭部搭載型ディスプレイはさらに、信号に基づいて、超音波画像を形成するように構成される、前述の実施例のいずれかに記載のシステム。
８２．頭部搭載型ディスプレイは、ユーザにユーザの視野外のオブジェクトおよび／またはイベントをアラートするように構成される、前述の実施例のいずれかに記載のシステム。
８３．光を該ユーザの眼の中に指向し、画像を眼内に形成するように構成される、１つまたはそれを上回る光源をさらに備える、前述の実施例のいずれかに記載のシステム。
８４．該１つまたはそれを上回る光源は、ファイバ走査プロジェクタを備える、前述の実施例のいずれかに記載のシステム。
８５．コントラストを増加させることは、該画像コンテンツの少なくとも１つの色の明度または暗度を調節することを含む、実施例１６に記載のシステム。
８６．コントラストを増加させることは、黒色、灰色、白色、または他の色を該画像コンテンツの少なくとも１つの色に追加することを含む、実施例１６に記載のシステム。
８７．頭部搭載型ディスプレイは、ある程度の不透明度を提示される画像コンテンツの少なくとも近傍に提供するように構成される、前述の実施例のいずれかに記載のシステム。
８８．頭部搭載型ディスプレイは、第１の画像モダリティと第１の画像モダリティと異なる第２の画像モダリティを組み合わせるように構成される、前述の実施例のいずれかに記載のシステム。
８９．第１の画像モダリティおよび第２の画像モダリティはそれぞれ、ＭＲＩ、ＣＴ、ＰＥＴ、ＭＲＡ、またはＣＴＡ走査からの画像を備える、実施例８８に記載のシステム。
９０．頭部搭載型ディスプレイは、第１および第２の画像モダリティの組み合わせられた画像を患者の実際の解剖学的構造にわたって整合させるように構成される、実施例８８または８９に記載のシステム。
【0014】
実施例セットＩＩＡ
１．光をユーザの眼に投影し、拡張現実画像コンテンツを表示するように構成される、頭部搭載型ディスプレイシステムであって、該ユーザの眼は、中心領域と、該中心領域を中心として配置される周辺領域を有する、視野を有し、
ユーザの頭部上に支持されるように構成される、フレームと、
フレーム上に配置される、ディスプレイであって、該ディスプレイは、画像コンテンツを複数の深度平面上でユーザに提示するように、光を該ユーザの眼の中に投影するように構成され、該ディスプレイの少なくとも一部は、１つまたはそれを上回る導波管を備え、該１つまたはそれを上回る導波管は、透明部分が、ユーザの正面の環境の一部からの光をユーザの眼に伝送し、ユーザの正面の環境の該部分のビューを提供するように、透明であって、ユーザが該頭部搭載型ディスプレイシステムを装着すると、ユーザの眼の正面の場所に配置され、ユーザの眼の視野の中心領域は、ユーザの正面の環境内の中心領域に対応し、ユーザの眼の視野の周辺領域は、ユーザの正面の環境内の周辺領域に対応する、ディスプレイと、
少なくともユーザの正面の環境の該部分を結像するように構成される、外向きに面した画像捕捉デバイスと、
ユーザの正面の環境の少なくとも該部分内のオブジェクトまでの距離を測定するように構成される、１つまたはそれを上回るセンサと、
入力を該ユーザから受信するように構成される、１つまたはそれを上回る入力デバイスと、
該ディスプレイと通信し、該ディスプレイ上での画像コンテンツの提示を制御する、処理電子機器と、
を備え、該頭部搭載型ディスプレイシステムは、該１つまたはそれを上回る入力デバイスによって受信された入力に基づいて、ユーザの視野の周辺領域に対応する環境内のオブジェクトを選択するように構成され、該１つまたはそれを上回るセンサは、該選択後、該オブジェクトまでの距離を測定するように構成され、該外向きに面した画像捕捉デバイスは、該オブジェクトの画像を取得するように構成され、該ディスプレイは距離を測定するように構成される該１つまたはそれを上回るセンサによって測定された該距離に基づいて、該オブジェクトの増強された画像を判定された深度平面に提示するように構成され、該増強された画像は、視野の他の部分と比較して増強され、該増強された画像は、ユーザの視野の周辺領域内の場所に提示される、頭部搭載型ディスプレイシステム。
２．光を人物の眼の中に指向し、画像を眼内に形成するように構成される、１つまたはそれを上回る光源をさらに備える、実施例１に記載のシステム。
３．該１つまたはそれを上回る光源は、光を該１つまたはそれを上回る導波管の中に指向するように構成される、実施例２に記載のシステム。
４．該１つまたはそれを上回る光源は、ファイバ走査プロジェクタを備える、実施例２または３に記載のシステム。
５．該深度平面は、第１の遠深度平面と、第２の近深度平面とを備え、該第１の遠深度平面は、該頭部搭載型ディスプレイが該ユーザによって装着されるとき、該第２の近深度平面より該ユーザの眼から遠い、実施例１に記載のシステム。
６．該増強された画像は、該遠深度平面上に提示される、実施例５に記載のシステム。
７．該ディスプレイは、該眼の中に投影される光が該第２の近深度平面から画像コンテンツを提示するように発散するような屈折力を有する、光学要素を備える、実施例５または６に記載のシステム。
８．屈折力を有する、光学要素は、レンズを備える、実施例７に記載のシステム。
９．屈折力を有する、光学要素は、回折光学要素を備える、実施例７または８に記載のシステム。
１０．該頭部搭載型ディスプレイシステムは、該増強された画像コンテンツを該オブジェクトが位置する環境内の周辺領域内の場所に対応するユーザの視野の該周辺領域内の場所に提示するように構成される、実施例１に記載のシステム。
１１．該頭部搭載型ディスプレイシステムは、該増強された画像コンテンツを該オブジェクトが位置する環境内の周辺領域に対応しないユーザの視野の該周辺領域内の場所に移動させるように構成される、実施例１に記載のシステム。
１２．該１つまたはそれを上回るセンサは、該環境を結像するように構成される、１つまたはそれを上回る外向きに面した画像捕捉デバイスを備える、実施例１に記載のシステム。
１３．該環境を結像するように構成される、該１つまたはそれを上回る外向きに面した画像捕捉デバイスは、１つまたはそれを上回る外向きに面したカメラを備える、実施例１２に記載のシステム。
１４．１つまたはそれを上回るセンサは、距離測定デバイスを備える、実施例１のいずれかに記載のシステム。
１５．距離測定デバイスは、レーザ測距計を備える、実施例１４に記載のシステム。
１６．入力を該ユーザから受信するように構成される、該１つまたはそれを上回る入力デバイスは、該ユーザの眼を結像し、その移動を追跡するように配置される、内向きに面した眼追跡カメラを備える、実施例１に記載のシステム。
１７．該増強された画像を提示することは、該オブジェクトの画像が形成される該ユーザの視野の他の部分と比較して、該オブジェクトの画像を異なるように処理することを含む、前述の実施例のいずれかに記載のシステム。
１８．該画像を異なるように処理することは、該オブジェクトの画像が形成される該ユーザの視野の他の部分と比較して、該オブジェクトの画像を拡大することを含む、実施例１７に記載のシステム。
１９．該画像を異なるように処理することは、該オブジェクトの画像が形成される該ユーザの視野の他の部分と比較して、該オブジェクトの画像内の明度を増加させることを含む、実施例１７－１８のいずれかに記載のシステム。
２０．該画像を異なるように処理することは、該オブジェクトの画像が形成される該ユーザの視野の他の部分と比較して、該オブジェクトの画像のコントラストを増加させることを含む、実施例１７－１９のいずれかに記載のシステム。
２１．該画像を異なるように処理することは、該オブジェクトの画像が形成される該ユーザの視野の他の部分と比較して、該オブジェクトの画像の色飽和を増加させることを含む、実施例１７－２０のいずれかに記載のシステム。
２２．該画像を異なるように処理することは、該オブジェクトの画像が形成される該ユーザの視野の他の部分と比較して、該オブジェクトの画像を鮮明化することを含む、実施例１７－２１のいずれかに記載のシステム。
２３．該鮮明化することは、該オブジェクトの画像が形成される該ユーザの視野の他の部分と比較して、該オブジェクトの画像の縁増強特徴を含む、実施例２２に記載のシステム。
２４．該画像を異なるように処理することは、該オブジェクトの画像が形成される該ユーザの視野の他の部分と比較して、該オブジェクトの画像のカラーバランスを偏移させることを含む、実施例１７－２３のいずれかに記載のシステム。
２５．視野の該他の部分は、該視野の該周辺領域の他の部分を備える、前述の実施例のいずれかに記載のシステム。
２６．視野の該他の部分は、該視野の該中心領域の少なくとも一部を備える、前述の実施例のいずれかに記載のシステム。
２７．光をユーザの眼に投影し、拡張現実画像コンテンツを表示するように構成される、頭部搭載型ディスプレイシステムであって、該ユーザの眼は、中心領域と、該中心領域を中心として配置される周辺領域を有する、視野を有し、
ユーザの頭部上に支持されるように構成される、フレームと、
フレーム上に配置される、ディスプレイであって、該ディスプレイは、画像コンテンツを複数の深度平面上でユーザに提示するように、光を該ユーザの眼の中に投影するように構成され、該ディスプレイの少なくとも一部は、１つまたはそれを上回る導波管を備え、該１つまたはそれを上回る導波管は、透明部分が、ユーザの正面の環境の一部からの光をユーザの眼に伝送し、ユーザの正面の環境の該部分のビューを提供するように、透明であって、ユーザが該頭部搭載型ディスプレイシステムを装着すると、ユーザの眼の正面の場所に配置され、ユーザの眼の視野の中心領域は、ユーザの正面の環境内の中心領域に対応し、ユーザの眼の視野の周辺領域は、ユーザの正面の環境内の周辺領域に対応する、ディスプレイと、
ユーザの正面の環境の少なくとも該部分を結像するように構成される、外向きに面した画像捕捉デバイスと、
ユーザの正面の環境の少なくとも該部分内のオブジェクトまでの距離を測定するように構成される、１つまたはそれを上回るセンサと、
入力を該ユーザから受信するように構成される、１つまたはそれを上回る入力デバイスと、
該ディスプレイと通信し、該ディスプレイ上での画像コンテンツの提示を制御する、処理電子機器と、
を備え、該頭部搭載型ディスプレイシステムは、該１つまたはそれを上回る入力デバイスによって受信された入力に基づいて、ユーザの視野の周辺領域に対応する環境内のオブジェクトを選択するように構成され、該１つまたはそれを上回るセンサは、該選択後、該オブジェクトまでの距離を測定するように構成され、該外向きに面した画像捕捉デバイスは、該オブジェクトの画像を取得するように構成され、該ディスプレイは、該オブジェクトの画像を距離を測定するように構成される該１つまたはそれを上回るセンサによって測定された該距離に基づいて判定された深度平面に提示するように構成され、該オブジェクトの画像は、ユーザの視野の周辺領域内の場所に提示され、該ディスプレイは、該オブジェクトの画像と比較して、視野の他の部分内に形成される画像を強調解除するように構成される、頭部搭載型ディスプレイシステム。
２８．光を人物の眼の中に指向し、画像を眼内に形成するように構成される、１つまたはそれを上回る光源をさらに備える、実施例２７に記載のシステム。
２９．該１つまたはそれを上回る光源は、光を該１つまたはそれを上回る導波管の中に指向するように構成される、実施例２８に記載のシステム。
３０．該１つまたはそれを上回る光源は、ファイバ走査プロジェクタを備える、実施例２８または２９に記載のシステム。
３１．該深度平面は、第１の遠深度平面と、第２の近深度平面とを備え、該第１の遠深度平面は、該頭部搭載型ディスプレイが該ユーザによって装着されるとき、該第２の近深度平面より該ユーザの眼から遠い、実施例２７に記載のシステム。
３２．該オブジェクトの画像は、該遠深度平面上に提示される、実施例３１に記載のシステム。
３３．該ディスプレイは、該眼の中に投影される光が該第２の近深度平面から画像コンテンツを提示するように発散するような屈折力を有する、光学要素を備える、実施例３１または３２に記載のシステム。
３４．屈折力を有する、光学要素は、レンズを備える、実施例３３に記載のシステム。
３５．屈折力を有する、光学要素は、回折光学要素を備える、実施例３３または３４に記載のシステム。
３６．該頭部搭載型ディスプレイシステムは、該オブジェクトの画像を該オブジェクトが位置する環境内の周辺領域内の場所に対応するユーザの視野の該周辺領域内の場所に提示するように構成される、実施例２７に記載のシステム。
３７．該頭部搭載型ディスプレイシステムは、該オブジェクトの画像を該オブジェクトが位置する環境内の周辺領域に対応しないユーザの視野の該周辺領域内の場所に移動させるように構成される、実施例２７に記載のシステム。
３８．該１つまたはそれを上回るセンサは、該環境を結像するように構成される、１つまたはそれを上回る外向きに面した画像捕捉デバイスを備える、実施例２７に記載のシステム。
３９．該環境を結像するように構成される、該１つまたはそれを上回る外向きに面した画像捕捉デバイスは、１つまたはそれを上回る外向きに面したカメラを備える、実施例３８に記載のシステム。
４０．該１つまたはそれを上回るセンサは、距離測定デバイスを備える、実施例２７のいずれかに記載のシステム。
４１．該距離測定デバイスは、レーザ測距計を備える、実施例４０に記載のシステム。
４２．入力を該ユーザから受信するように構成される、該１つまたはそれを上回る入力デバイスは、該ユーザの眼を結像し、その移動を追跡するように配置される、内向きに面した眼追跡カメラを備える、実施例２７に記載のシステム。
４３．該頭部搭載型ディスプレイシステムは、該オブジェクトの画像と異なるように、該オブジェクトの画像が形成される場所以外の、該ユーザの視野の他の部分内に形成される画像を処理するように構成される、実施例２７－４２のいずれかに記載のシステム。
４４．該頭部搭載型ディスプレイシステムは、該オブジェクトの画像と比較して、該オブジェクトの画像が形成される場所以外の該ユーザの視野の他の部分内に形成される画像のサイズを収縮または低減させることによって、画像を異なるように処理するように構成される、実施例４３に記載のシステム。
４５．該頭部搭載型ディスプレイシステムは、該オブジェクトの画像と比較して、該オブジェクトの画像が形成される場所以外の該ユーザの視野の他の部分内に形成される画像を暗化または減衰させることによって、画像を異なるように処理するように構成される、実施例４３－４４のいずれかに記載のシステム。
４６．該頭部搭載型ディスプレイシステムは、該オブジェクトの画像と比較して、該オブジェクトの画像が形成される場所以外の該ユーザの視野の他の部分内に形成される画像のコントラストを低減させることによって、画像を異なるように処理するように構成される、実施例４３－４５のいずれかに記載のシステム。
４７．該頭部搭載型ディスプレイシステムは、該オブジェクトの画像と比較して、該オブジェクトの画像が形成される場所以外の該ユーザの視野の他の部分内に形成される画像の色飽和を減少させることによって、画像を異なるように処理するように構成される、実施例４３－４６のいずれかに記載のシステム。
４８．該頭部搭載型ディスプレイシステムは、該オブジェクトの画像と比較して、該オブジェクトの画像が形成される場所以外の該ユーザの視野の他の部分内に形成される画像の鮮明度を減少させることによって、画像を異なるように処理するように構成される、実施例４３－４７のいずれかに記載のシステム。
４９．該鮮明度を減少させることは、該オブジェクトの画像と比較して、該オブジェクトの画像が形成される場所以外の該ユーザの視野の他の部分内に形成される画像内の特徴の縁を増強解除することを含む、実施例４８に記載のシステム。
５０．該鮮明度を減少させることは、該オブジェクトの画像と比較して、該オブジェクトの画像が形成される場所以外の該ユーザの視野の他の部分内に形成される画像をぼかすことを含む、実施例４８または４９に記載のシステム。
５１．該頭部搭載型ディスプレイシステムは、該オブジェクトの画像と比較して、該オブジェクトの画像が形成される場所以外の該ユーザの視野の他の部分内に形成される画像のカラーバランスを偏移させることによって、画像を異なるように処理するように構成される、実施例４８－５０のいずれかに記載のシステム。
５２．視野の該他の部分は、該視野の該周辺領域の他の部分を備える、実施例２７－５１のいずれかに記載のシステム。
５３．視野の該他の部分は、該視野の該中心領域の少なくとも一部を備える、実施例２７－５２のいずれかに記載のシステム。
５４．該増強された画像は、該近深度平面上に提示される、実施例５に記載のシステム。
５５．該ディスプレイは、該眼の中に投影される光が画像コンテンツを該第１の遠深度平面から提示するように発散するような屈折力を有する、光学要素を備える、実施例５または５４に記載のシステム。
５６．該拡大は、少なくとも部分的に、眼の分解能に基づく、実施例１８に記載のシステム。
５７．該オブジェクトの画像は、該近深度平面上に提示される、実施例３１に記載のシステム。
５８．該ディスプレイは、該眼の中に投影される光が画像コンテンツを該第１の遠深度平面から提示するように発散するような屈折力を有する、光学要素を備える、実施例３１または５７に記載のシステム。
５９．該ぼかしは、同一色を使用して、該ユーザの視野の他の部分内に形成される該画像をぼかすことを含む、実施例５０に記載のシステム。
６０．該同一色は、該オブジェクトの画像内の色と比較して高コントラスト色を備える、実施例５９に記載のシステム。
６１．システムは、アラートをユーザに提供し、提示される画像が増強されたことを示すように構成される、実施例１－２６のいずれかまたは実施例５４－５６のいずれかに記載のシステム。
６２．システムは、アラートをユーザに提供し、提示される画像が強調解除されたことを示すように構成される、実施例２７－５３のいずれかまたは実施例５７－６０のいずれかに記載のシステム。
６３．アラートは、視覚的アラートである、実施例６１または６２のいずれかに記載のシステム。
６４．アラートは、聴覚的アラートである、実施例６１または６２のいずれかに記載のシステム。
６５．該頭部搭載型ディスプレイシステムは、ユーザの正面の環境の少なくとも該部分の３Ｄ表現を構築し、環境の少なくとも該部分の表現を解釈するように構成され、該環境の該部分は、患者を含み、該頭部搭載型ディスプレイはさらに、患者と関連付けられた第１の構造を患者と関連付けられた第２の構造から区別するように構成される、前述の実施例のいずれかに記載のシステム。
６６．透明であって、ユーザの眼の正面の場所に配置される、該ディスプレイの少なくとも該部分は、１つまたはそれを上回る導波管を備える、前述の実施例のいずれかに記載のシステム。
６７．光を該１つまたはそれを上回る導波管の中に指向するように構成される、１つまたはそれを上回る光源を備え、導波管は、光をユーザの眼の中に指向するように構成される、実施例６６に記載のシステム。
６８．該１つまたはそれを上回る光源は、ファイバ走査プロジェクタを備える、実施例６６－６７のいずれかに記載のシステム。
６９．環境を監視するように構成される、１つまたはそれを上回るセンサをさらに備える、前述の実施例のいずれかに記載のシステム。
７０．該１つまたはそれを上回るセンサは、該環境を結像するように構成される、１つまたはそれを上回る外向きに面した画像捕捉デバイスを備える、実施例６９に記載のシステム。
７１．該環境を結像するように構成される、該１つまたはそれを上回る外向きに面した画像捕捉デバイスは、１つまたはそれを上回る外向きに面したカメラを備える、実施例７０に記載のシステム。
７２．距離測定デバイスをさらに備える、前述の実施例のいずれかに記載のシステム。
７３．該ユーザの眼の位置および／または移動を追跡するように構成される、眼追跡デバイスをさらに備える、前述の実施例のいずれかに記載のシステム。
７４．頭部搭載型ディスプレイは、ユーザの視野内のヒト組織の体積を推定するように構成される、前述の実施例のいずれかに記載のシステム。
７５．頭部搭載型ディスプレイは、環境内の２つのオブジェクト間の距離を測定するように構成される、前述の実施例のいずれかに記載のシステム。
７６．頭部搭載型ディスプレイは、ディスプレイ上に提示される第１の画像モダリティと第２の画像モダリティとの間でトグルするように構成される、前述の実施例のいずれかに記載のシステム。
７７．第１の画像モダリティは、ＭＲＩ走査を備える、実施例７６に記載のシステム。
７８．第２の画像モダリティは、超音波を備える、実施例７６－７７のいずれかに記載のシステム。
７９．第１の画像モダリティは、Ｘ線走査を備える、実施例７６－７８のいずれかに記載のシステム。
８０．超音波音波を生産するように適合される、電子エミッタをさらに備える、前述の実施例のいずれかに記載のシステム。
８１．超音波音波を電気信号に変換するように適合される、センサをさらに備える、前述の実施例のいずれかに記載のシステム。
８２．頭部搭載型ディスプレイは、ユーザが、仮想基準マーカをユーザの眼に対してユーザの正面の環境の一部上に設置することを可能にするように構成される、前述の実施例のいずれかに記載のシステム。
８３．頭部搭載型ディスプレイは、画像が環境内の実世界オブジェクトに添付されて現れるように、画像をディスプレイ上に投影するように構成される、前述の実施例のいずれかに記載のシステム。
８４．頭部搭載型ディスプレイは、仮想切断ガイドラインが切断されるべきヒト身体領域上にオーバーレイされるようにユーザに現れるように、仮想切断ガイドラインを表示するように構成される、または切断されるべき部分へのアクセスを与える、前述の実施例のいずれかに記載のシステム。
８５．仮想切断ガイドラインの見掛け場所は、患者の身体部分の位置に関連するように現れる、実施例８４に記載のシステム。
８６．頭部搭載型ディスプレイは、信号を放出し、ユーザの正面の環境の一部内のオブジェクトの位置に関するデータを取得するように構成される、前述の実施例のいずれかに記載のシステム。
８７．頭部搭載型ディスプレイは、オブジェクト場所のデータベースを使用して、ユーザの正面の環境の一部内のオブジェクトの位置を取得するように構成される、前述の実施例のいずれかに記載のシステム。
８８．頭部搭載型ディスプレイは、該オブジェクト場所のデータベースに基づいて、基準点を設定し、画像が基準点に対して固定されて現れるように、画像をユーザの眼の中に投影するように構成される、実施例８７に記載のシステム。
８９．頭部搭載型ディスプレイは、ユーザ入力に基づいて、オブジェクトの３Ｄ画像のビューを軸を中心として回転させるように構成される、前述の実施例のいずれかに記載のシステム。
９０．頭部搭載型ディスプレイは、ユーザ入力に基づいて、３Ｄオブジェクトの画像のビューを平行移動させるように構成される、前述の実施例のいずれかに記載のシステム。
９１．頭部搭載型ディスプレイは、オブジェクトの３Ｄ画像の第１のスライスを表示するように構成される、前述の実施例のいずれかに記載のシステム。
９２．頭部搭載型ディスプレイは、３Ｄ画像の第１のスライスの画像および第２のスライスの画像を通してシーケンス化するように構成される、実施例９１に記載のシステム。
９３．頭部搭載型ディスプレイは、頭部搭載型ディスプレイの第２のユーザが伝送される環境の該部分の該画像を視認し得るように、ユーザの正面の環境の一部の画像を伝送するように構成される、前述の実施例のいずれかに記載のシステム。
９４．頭部搭載型ディスプレイは、ユーザに医療手技におけるステップをアラートするように構成される、前述の実施例のいずれかに記載のシステム。
９５．頭部搭載型ディスプレイは、ユーザの医療パラメータを監視し、医療パラメータに基づいて、アラートを提供するように構成される、前述の実施例のいずれかに記載のシステム。
９６．ユーザの医療パラメータは、バイタルサインを含む、実施例９５に記載のシステム。
９７．頭部搭載型ディスプレイは、超音波を放出し、該超音波から生じる信号を測定するように構成され、頭部搭載型ディスプレイはさらに、信号に基づいて、超音波画像を形成するように構成される、前述の実施例のいずれかに記載のシステム。
９８．頭部搭載型ディスプレイは、ユーザにユーザの視野外のオブジェクトおよび／またはイベントをアラートするように構成される、前述の実施例のいずれかに記載のシステム。
９９．光を該ユーザの眼の中に指向し、画像を眼内に形成するように構成される、１つまたはそれを上回る光源をさらに備える、前述の実施例のいずれかに記載のシステム。
１００．該１つまたはそれを上回る光源は、ファイバ走査プロジェクタを備える、前述の実施例のいずれかに記載のシステム。
１０１．コントラストを増加させることは、該画像コンテンツの少なくとも１つの色の明度または暗度を調節することを含む、実施例２０に記載のシステム。
１０２．コントラストを増加させることは、黒色、灰色、白色、または他の色を該画像コンテンツの少なくとも１つの色に追加することを含む、実施例２０に記載のシステム。
１０３．頭部搭載型ディスプレイは、ある程度の不透明度を提示される画像コンテンツの少なくとも近傍に提供するように構成される、前述の実施例のいずれかに記載のシステム。
１０４．頭部搭載型ディスプレイは、第１の画像モダリティと第１の画像モダリティと異なる第２の画像モダリティを組み合わせるように構成される、前述の実施例のいずれかに記載のシステム。
１０５．第１の画像モダリティおよび第２の画像モダリティはそれぞれ、ＭＲＩ、ＣＴ、ＰＥＴ、ＭＲＡ、またはＣＴＡ走査からの画像を備える、実施例１０４に記載のシステム。
１０６．頭部搭載型ディスプレイは、第１および第２の画像モダリティの組み合わせられた画像を患者の実際の解剖学的構造にわたって整合させるように構成される、実施例１０４または１０５に記載のシステム。
１．光をユーザの眼に投影し、拡張現実画像コンテンツを表示するように構成される、頭部搭載型ディスプレイシステムであって、該ユーザの眼は、中心領域と、該中心領域を中心として配置される周辺領域を有する、視野を有し、
ユーザの頭部上に支持されるように構成される、フレームと、
フレーム上に配置される、ディスプレイであって、該ディスプレイは、画像コンテンツを複数の深度平面上でユーザに提示するように、光を該ユーザの眼の中に投影するように構成され、該ディスプレイの少なくとも一部は、１つまたはそれを上回る導波管を備え、該１つまたはそれを上回る導波管は、透明部分が、ユーザの正面の環境の一部からの光をユーザの眼に伝送し、ユーザの正面の環境の該部分のビューを提供するように、透明であって、ユーザが該頭部搭載型ディスプレイシステムを装着すると、ユーザの眼の正面の場所に配置され、ユーザの眼の視野の中心領域は、ユーザの正面の環境内の中心領域に対応し、ユーザの眼の視野の周辺領域は、ユーザの正面の環境内の周辺領域に対応する、ディスプレイと、
少なくともユーザの正面の環境の該部分を結像するように構成される、外向きに面した画像捕捉デバイスと、
ユーザの正面の環境の少なくとも該部分内のオブジェクトまでの距離を測定するように構成される、１つまたはそれを上回るセンサと、
入力を該ユーザから受信するように構成される、１つまたはそれを上回る入力デバイスと、
該ディスプレイと通信し、該ディスプレイ上での画像コンテンツの提示を制御する、処理電子機器と、
を備え、該頭部搭載型ディスプレイシステムは、該１つまたはそれを上回る入力デバイスによって受信された入力に基づいて、ユーザの視野の周辺領域に対応する環境内のオブジェクトを選択するように構成され、該１つまたはそれを上回るセンサは、該選択後、該オブジェクトまでの距離を測定するように構成され、該外向きに面した画像捕捉デバイスは、該オブジェクトの画像を取得するように構成され、該ディスプレイは距離を測定するように構成される該１つまたはそれを上回るセンサによって測定された該距離に基づいて、該オブジェクトの増強された画像を判定された深度平面に提示するように構成され、該増強された画像は、視野の他の部分と比較して増強され、該増強された画像は、ユーザの視野の周辺領域内の場所に提示される、頭部搭載型ディスプレイシステム。
２．光を人物の眼の中に指向し、画像を眼内に形成するように構成される、１つまたはそれを上回る光源をさらに備える、実施例１に記載のシステム。
３．該１つまたはそれを上回る光源は、光を該１つまたはそれを上回る導波管の中に指向するように構成される、実施例２に記載のシステム。
４．該１つまたはそれを上回る光源は、ファイバ走査プロジェクタを備える、実施例２または３に記載のシステム。
５．該深度平面は、第１の遠深度平面と、第２の近深度平面とを備え、該第１の遠深度平面は、該頭部搭載型ディスプレイが該ユーザによって装着されるとき、該第２の近深度平面より該ユーザの眼から遠い、実施例１に記載のシステム。
６．該増強された画像は、該遠深度平面上に提示される、実施例５に記載のシステム。
７．該ディスプレイは、該眼の中に投影される光が該第２の近深度平面から画像コンテンツを提示するように発散するような屈折力を有する、光学要素を備える、実施例５または６に記載のシステム。
８．屈折力を有する、光学要素は、レンズを備える、実施例７に記載のシステム。
９．屈折力を有する、光学要素は、回折光学要素を備える、実施例７または８に記載のシステム。
１０．該頭部搭載型ディスプレイシステムは、該増強された画像コンテンツを該オブジェクトが位置する環境内の周辺領域内の場所に対応するユーザの視野の該周辺領域内の場所に提示するように構成される、実施例１に記載のシステム。
１１．該頭部搭載型ディスプレイシステムは、該増強された画像コンテンツを該オブジェクトが位置する環境内の周辺領域に対応しないユーザの視野の該周辺領域内の場所に移動させるように構成される、実施例１に記載のシステム。
１２．該１つまたはそれを上回るセンサは、該環境を結像するように構成される、１つまたはそれを上回る外向きに面した画像捕捉デバイスを備える、実施例１に記載のシステム。
１３．該環境を結像するように構成される、該１つまたはそれを上回る外向きに面した画像捕捉デバイスは、１つまたはそれを上回る外向きに面したカメラを備える、実施例１２に記載のシステム。
１４．１つまたはそれを上回るセンサは、距離測定デバイスを備える、実施例１のいずれかに記載のシステム。
１５．距離測定デバイスは、レーザ測距計を備える、実施例１４に記載のシステム。
１６．入力を該ユーザから受信するように構成される、該１つまたはそれを上回る入力デバイスは、該ユーザの眼を結像し、その移動を追跡するように配置される、内向きに面した眼追跡カメラを備える、実施例１に記載のシステム。
１７．該増強された画像を提示することは、該オブジェクトの画像が形成される該ユーザの視野の他の部分と比較して、該オブジェクトの画像を異なるように処理することを含む、前述の実施例のいずれかに記載のシステム。
１８．該画像を異なるように処理することは、該オブジェクトの画像が形成される該ユーザの視野の他の部分と比較して、該オブジェクトの画像を拡大することを含む、実施例１７に記載のシステム。
１９．該画像を異なるように処理することは、該オブジェクトの画像が形成される該ユーザの視野の他の部分と比較して、該オブジェクトの画像内の明度を増加させることを含む、実施例１７－１８のいずれかに記載のシステム。
２０．該画像を異なるように処理することは、該オブジェクトの画像が形成される該ユーザの視野の他の部分と比較して、該オブジェクトの画像のコントラストを増加させることを含む、実施例１７－１９のいずれかに記載のシステム。
２１．該画像を異なるように処理することは、該オブジェクトの画像が形成される該ユーザの視野の他の部分と比較して、該オブジェクトの画像の色飽和を増加させることを含む、実施例１７－２０のいずれかに記載のシステム。
２２．該画像を異なるように処理することは、該オブジェクトの画像が形成される該ユーザの視野の他の部分と比較して、該オブジェクトの画像を鮮明化することを含む、実施例１７－２１のいずれかに記載のシステム。
２３．該鮮明化することは、該オブジェクトの画像が形成される該ユーザの視野の他の部分と比較して、該オブジェクトの画像の縁増強特徴を含む、実施例２２に記載のシステム。
２４．該画像を異なるように処理することは、該オブジェクトの画像が形成される該ユーザの視野の他の部分と比較して、該オブジェクトの画像のカラーバランスを偏移させることを含む、実施例１７－２３のいずれかに記載のシステム。
２５．視野の該他の部分は、該視野の該周辺領域の他の部分を備える、前述の実施例のいずれかに記載のシステム。
２６．視野の該他の部分は、該視野の該中心領域の少なくとも一部を備える、前述の実施例のいずれかに記載のシステム。
２７．光をユーザの眼に投影し、拡張現実画像コンテンツを表示するように構成される、頭部搭載型ディスプレイシステムであって、該ユーザの眼は、中心領域と、該中心領域を中心として配置される周辺領域を有する、視野を有し、
ユーザの頭部上に支持されるように構成される、フレームと、
フレーム上に配置される、ディスプレイであって、該ディスプレイは、画像コンテンツを複数の深度平面上でユーザに提示するように、光を該ユーザの眼の中に投影するように構成され、該ディスプレイの少なくとも一部は、１つまたはそれを上回る導波管を備え、該１つまたはそれを上回る導波管は、透明部分が、ユーザの正面の環境の一部からの光をユーザの眼に伝送し、ユーザの正面の環境の該部分のビューを提供するように、透明であって、ユーザが該頭部搭載型ディスプレイシステムを装着すると、ユーザの眼の正面の場所に配置され、ユーザの眼の視野の中心領域は、ユーザの正面の環境内の中心領域に対応し、ユーザの眼の視野の周辺領域は、ユーザの正面の環境内の周辺領域に対応する、ディスプレイと、
ユーザの正面の環境の少なくとも該部分を結像するように構成される、外向きに面した画像捕捉デバイスと、
ユーザの正面の環境の少なくとも該部分内のオブジェクトまでの距離を測定するように構成される、１つまたはそれを上回るセンサと、
入力を該ユーザから受信するように構成される、１つまたはそれを上回る入力デバイスと、
該ディスプレイと通信し、該ディスプレイ上での画像コンテンツの提示を制御する、処理電子機器と、
を備え、該頭部搭載型ディスプレイシステムは、該１つまたはそれを上回る入力デバイスによって受信された入力に基づいて、ユーザの視野の周辺領域に対応する環境内のオブジェクトを選択するように構成され、該１つまたはそれを上回るセンサは、該選択後、該オブジェクトまでの距離を測定するように構成され、該外向きに面した画像捕捉デバイスは、該オブジェクトの画像を取得するように構成され、該ディスプレイは、該オブジェクトの画像を距離を測定するように構成される該１つまたはそれを上回るセンサによって測定された該距離に基づいて判定された深度平面に提示するように構成され、該オブジェクトの画像は、ユーザの視野の周辺領域内の場所に提示され、該ディスプレイは、該オブジェクトの画像と比較して、視野の他の部分内に形成される画像を強調解除するように構成される、頭部搭載型ディスプレイシステム。
２８．光を人物の眼の中に指向し、画像を眼内に形成するように構成される、１つまたはそれを上回る光源をさらに備える、実施例２７に記載のシステム。
２９．該１つまたはそれを上回る光源は、光を該１つまたはそれを上回る導波管の中に指向するように構成される、実施例２８に記載のシステム。
３０．該１つまたはそれを上回る光源は、ファイバ走査プロジェクタを備える、実施例２８または２９に記載のシステム。
３１．該深度平面は、第１の遠深度平面と、第２の近深度平面とを備え、該第１の遠深度平面は、該頭部搭載型ディスプレイが該ユーザによって装着されるとき、該第２の近深度平面より該ユーザの眼から遠い、実施例２７に記載のシステム。
３２．該オブジェクトの画像は、該遠深度平面上に提示される、実施例３１に記載のシステム。
３３．該ディスプレイは、該眼の中に投影される光が該第２の近深度平面から画像コンテンツを提示するように発散するような屈折力を有する、光学要素を備える、実施例３１または３２に記載のシステム。
３４．屈折力を有する、光学要素は、レンズを備える、実施例３３に記載のシステム。
３５．屈折力を有する、光学要素は、回折光学要素を備える、実施例３３または３４に記載のシステム。
３６．該頭部搭載型ディスプレイシステムは、該オブジェクトの画像を該オブジェクトが位置する環境内の周辺領域内の場所に対応するユーザの視野の該周辺領域内の場所に提示するように構成される、実施例２７に記載のシステム。
３７．該頭部搭載型ディスプレイシステムは、該オブジェクトの画像を該オブジェクトが位置する環境内の周辺領域に対応しないユーザの視野の該周辺領域内の場所に移動させるように構成される、実施例２７に記載のシステム。
３８．該１つまたはそれを上回るセンサは、該環境を結像するように構成される、１つまたはそれを上回る外向きに面した画像捕捉デバイスを備える、実施例２７に記載のシステム。
３９．該環境を結像するように構成される、該１つまたはそれを上回る外向きに面した画像捕捉デバイスは、１つまたはそれを上回る外向きに面したカメラを備える、実施例３８に記載のシステム。
４０．該１つまたはそれを上回るセンサは、距離測定デバイスを備える、実施例２７のいずれかに記載のシステム。
４１．該距離測定デバイスは、レーザ測距計を備える、実施例４０に記載のシステム。
４２．入力を該ユーザから受信するように構成される、該１つまたはそれを上回る入力デバイスは、該ユーザの眼を結像し、その移動を追跡するように配置される、内向きに面した眼追跡カメラを備える、実施例２７に記載のシステム。
４３．該頭部搭載型ディスプレイシステムは、該オブジェクトの画像と異なるように、該オブジェクトの画像が形成される場所以外の、該ユーザの視野の他の部分内に形成される画像を処理するように構成される、実施例２７－４２のいずれかに記載のシステム。
４４．該頭部搭載型ディスプレイシステムは、該オブジェクトの画像と比較して、該オブジェクトの画像が形成される場所以外の該ユーザの視野の他の部分内に形成される画像のサイズを収縮または低減させることによって、画像を異なるように処理するように構成される、実施例４３に記載のシステム。
４５．該頭部搭載型ディスプレイシステムは、該オブジェクトの画像と比較して、該オブジェクトの画像が形成される場所以外の該ユーザの視野の他の部分内に形成される画像を暗化または減衰させることによって、画像を異なるように処理するように構成される、実施例４３－４４のいずれかに記載のシステム。
４６．該頭部搭載型ディスプレイシステムは、該オブジェクトの画像と比較して、該オブジェクトの画像が形成される場所以外の該ユーザの視野の他の部分内に形成される画像のコントラストを低減させることによって、画像を異なるように処理するように構成される、実施例４３－４５のいずれかに記載のシステム。
４７．該頭部搭載型ディスプレイシステムは、該オブジェクトの画像と比較して、該オブジェクトの画像が形成される場所以外の該ユーザの視野の他の部分内に形成される画像の色飽和を減少させることによって、画像を異なるように処理するように構成される、実施例４３－４６のいずれかに記載のシステム。
４８．該頭部搭載型ディスプレイシステムは、該オブジェクトの画像と比較して、該オブジェクトの画像が形成される場所以外の該ユーザの視野の他の部分内に形成される画像の鮮明度を減少させることによって、画像を異なるように処理するように構成される、実施例４３－４７のいずれかに記載のシステム。
４９．該鮮明度を減少させることは、該オブジェクトの画像と比較して、該オブジェクトの画像が形成される場所以外の該ユーザの視野の他の部分内に形成される画像内の特徴の縁を増強解除することを含む、実施例４８に記載のシステム。
５０．該鮮明度を減少させることは、該オブジェクトの画像と比較して、該オブジェクトの画像が形成される場所以外の該ユーザの視野の他の部分内に形成される画像をぼかすことを含む、実施例４８または４９に記載のシステム。
５１．該頭部搭載型ディスプレイシステムは、該オブジェクトの画像と比較して、該オブジェクトの画像が形成される場所以外の該ユーザの視野の他の部分内に形成される画像のカラーバランスを偏移させることによって、画像を異なるように処理するように構成される、実施例４８－５０のいずれかに記載のシステム。
５２．視野の該他の部分は、該視野の該周辺領域の他の部分を備える、実施例２７－５１のいずれかに記載のシステム。
５３．視野の該他の部分は、該視野の該中心領域の少なくとも一部を備える、実施例２７－５２のいずれかに記載のシステム。
５４．該増強された画像は、該近深度平面上に提示される、実施例５に記載のシステム。
５５．該ディスプレイは、該眼の中に投影される光が画像コンテンツを該第１の遠深度平面から提示するように発散するような屈折力を有する、光学要素を備える、実施例５または５４に記載のシステム。
５６．該拡大は、少なくとも部分的に、眼の分解能に基づく、実施例１８に記載のシステム。
５７．該オブジェクトの画像は、該近深度平面上に提示される、実施例３１に記載のシステム。
５８．該ディスプレイは、該眼の中に投影される光が画像コンテンツを該第１の遠深度平面から提示するように発散するような屈折力を有する、光学要素を備える、実施例３１または５７に記載のシステム。
５９．該ぼかしは、同一色を使用して、該ユーザの視野の他の部分内に形成される該画像をぼかすことを含む、実施例５０に記載のシステム。
６０．該同一色は、該オブジェクトの画像内の色と比較して高コントラスト色を備える、実施例５９に記載のシステム。
６１．システムは、アラートをユーザに提供し、提示される画像が増強されたことを示すように構成される、実施例１－２６のいずれかまたは実施例５４－５６のいずれかに記載のシステム。
６２．システムは、アラートをユーザに提供し、提示される画像が強調解除されたことを示すように構成される、実施例２７－５３のいずれかまたは実施例５７－６０のいずれかに記載のシステム。
６３．アラートは、視覚的アラートである、実施例６１または６２のいずれかに記載のシステム。
６４．アラートは、聴覚的アラートである、実施例６１または６２のいずれかに記載のシステム。
６５．該頭部搭載型ディスプレイシステムは、ユーザの正面の環境の少なくとも該部分の３Ｄ表現を構築し、環境の少なくとも該部分の表現を解釈するように構成され、該環境の該部分は、患者を含み、該頭部搭載型ディスプレイはさらに、患者と関連付けられた第１の構造を患者と関連付けられた第２の構造から区別するように構成される、前述の実施例のいずれかに記載のシステム。
６６．透明であって、ユーザの眼の正面の場所に配置される、該ディスプレイの少なくとも該部分は、１つまたはそれを上回る導波管を備える、前述の実施例のいずれかに記載のシステム。
６７．光を該１つまたはそれを上回る導波管の中に指向するように構成される、１つまたはそれを上回る光源を備え、導波管は、光をユーザの眼の中に指向するように構成される、実施例６６に記載のシステム。
６８．該１つまたはそれを上回る光源は、ファイバ走査プロジェクタを備える、実施例６６－６７のいずれかに記載のシステム。
６９．環境を監視するように構成される、１つまたはそれを上回るセンサをさらに備える、前述の実施例のいずれかに記載のシステム。
７０．該１つまたはそれを上回るセンサは、該環境を結像するように構成される、１つまたはそれを上回る外向きに面した画像捕捉デバイスを備える、実施例６９に記載のシステム。
７１．該環境を結像するように構成される、該１つまたはそれを上回る外向きに面した画像捕捉デバイスは、１つまたはそれを上回る外向きに面したカメラを備える、実施例７０に記載のシステム。
７２．距離測定デバイスをさらに備える、前述の実施例のいずれかに記載のシステム。
７３．該ユーザの眼の位置および／または移動を追跡するように構成される、眼追跡デバイスをさらに備える、前述の実施例のいずれかに記載のシステム。
７４．頭部搭載型ディスプレイは、ユーザの視野内のヒト組織の体積を推定するように構成される、前述の実施例のいずれかに記載のシステム。
７５．頭部搭載型ディスプレイは、環境内の２つのオブジェクト間の距離を測定するように構成される、前述の実施例のいずれかに記載のシステム。
７６．頭部搭載型ディスプレイは、ディスプレイ上に提示される第１の画像モダリティと第２の画像モダリティとの間でトグルするように構成される、前述の実施例のいずれかに記載のシステム。
７７．第１の画像モダリティは、ＭＲＩ走査を備える、実施例７６に記載のシステム。
７８．第２の画像モダリティは、超音波を備える、実施例７６－７７のいずれかに記載のシステム。
７９．第１の画像モダリティは、Ｘ線走査を備える、実施例７６－７８のいずれかに記載のシステム。
８０．超音波音波を生産するように適合される、電子エミッタをさらに備える、前述の実施例のいずれかに記載のシステム。
８１．超音波音波を電気信号に変換するように適合される、センサをさらに備える、前述の実施例のいずれかに記載のシステム。
８２．頭部搭載型ディスプレイは、ユーザが、仮想基準マーカをユーザの眼に対してユーザの正面の環境の一部上に設置することを可能にするように構成される、前述の実施例のいずれかに記載のシステム。
８３．頭部搭載型ディスプレイは、画像が環境内の実世界オブジェクトに添付されて現れるように、画像をディスプレイ上に投影するように構成される、前述の実施例のいずれかに記載のシステム。
８４．頭部搭載型ディスプレイは、仮想切断ガイドラインが切断されるべきヒト身体領域上にオーバーレイされるようにユーザに現れるように、仮想切断ガイドラインを表示するように構成される、または切断されるべき部分へのアクセスを与える、前述の実施例のいずれかに記載のシステム。
８５．仮想切断ガイドラインの見掛け場所は、患者の身体部分の位置に関連するように現れる、実施例８４に記載のシステム。
８６．頭部搭載型ディスプレイは、信号を放出し、ユーザの正面の環境の一部内のオブジェクトの位置に関するデータを取得するように構成される、前述の実施例のいずれかに記載のシステム。
８７．頭部搭載型ディスプレイは、オブジェクト場所のデータベースを使用して、ユーザの正面の環境の一部内のオブジェクトの位置を取得するように構成される、前述の実施例のいずれかに記載のシステム。
８８．頭部搭載型ディスプレイは、該オブジェクト場所のデータベースに基づいて、基準点を設定し、画像が基準点に対して固定されて現れるように、画像をユーザの眼の中に投影するように構成される、実施例８７に記載のシステム。
８９．頭部搭載型ディスプレイは、ユーザ入力に基づいて、オブジェクトの３Ｄ画像のビューを軸を中心として回転させるように構成される、前述の実施例のいずれかに記載のシステム。
９０．頭部搭載型ディスプレイは、ユーザ入力に基づいて、３Ｄオブジェクトの画像のビューを平行移動させるように構成される、前述の実施例のいずれかに記載のシステム。
９１．頭部搭載型ディスプレイは、オブジェクトの３Ｄ画像の第１のスライスを表示するように構成される、前述の実施例のいずれかに記載のシステム。
９２．頭部搭載型ディスプレイは、３Ｄ画像の第１のスライスの画像および第２のスライスの画像を通してシーケンス化するように構成される、実施例９１に記載のシステム。
９３．頭部搭載型ディスプレイは、頭部搭載型ディスプレイの第２のユーザが伝送される環境の該部分の該画像を視認し得るように、ユーザの正面の環境の一部の画像を伝送するように構成される、前述の実施例のいずれかに記載のシステム。
９４．頭部搭載型ディスプレイは、ユーザに医療手技におけるステップをアラートするように構成される、前述の実施例のいずれかに記載のシステム。
９５．頭部搭載型ディスプレイは、ユーザの医療パラメータを監視し、医療パラメータに基づいて、アラートを提供するように構成される、前述の実施例のいずれかに記載のシステム。
９６．ユーザの医療パラメータは、バイタルサインを含む、実施例９５に記載のシステム。
９７．頭部搭載型ディスプレイは、超音波を放出し、該超音波から生じる信号を測定するように構成され、頭部搭載型ディスプレイはさらに、信号に基づいて、超音波画像を形成するように構成される、前述の実施例のいずれかに記載のシステム。
９８．頭部搭載型ディスプレイは、ユーザにユーザの視野外のオブジェクトおよび／またはイベントをアラートするように構成される、前述の実施例のいずれかに記載のシステム。
９９．光を該ユーザの眼の中に指向し、画像を眼内に形成するように構成される、１つまたはそれを上回る光源をさらに備える、前述の実施例のいずれかに記載のシステム。
１００．該１つまたはそれを上回る光源は、ファイバ走査プロジェクタを備える、前述の実施例のいずれかに記載のシステム。
１０１．コントラストを増加させることは、該画像コンテンツの少なくとも１つの色の明度または暗度を調節することを含む、実施例２０に記載のシステム。
１０２．コントラストを増加させることは、黒色、灰色、白色、または他の色を該画像コンテンツの少なくとも１つの色に追加することを含む、実施例２０に記載のシステム。
１０３．頭部搭載型ディスプレイは、ある程度の不透明度を提示される画像コンテンツの少なくとも近傍に提供するように構成される、前述の実施例のいずれかに記載のシステム。
１０４．頭部搭載型ディスプレイは、第１の画像モダリティと第１の画像モダリティと異なる第２の画像モダリティを組み合わせるように構成される、前述の実施例のいずれかに記載のシステム。
１０５．第１の画像モダリティおよび第２の画像モダリティはそれぞれ、ＭＲＩ、ＣＴ、ＰＥＴ、ＭＲＡ、またはＣＴＡ走査からの画像を備える、実施例１０４に記載のシステム。
１０６．頭部搭載型ディスプレイは、第１および第２の画像モダリティの組み合わせられた画像を患者の実際の解剖学的構造にわたって整合させるように構成される、実施例１０４または１０５に記載のシステム。
【0015】
実施例セットＩＩＢ
１．光をユーザの眼に投影し、拡張現実画像コンテンツを表示するように構成される、頭部搭載型ディスプレイシステムであって、該ユーザの眼は、中心領域と、該中心領域を中心として配置される周辺領域を有する、視野を有し、
ユーザの頭部上に支持されるように構成される、フレームと、
フレーム上に配置される、ディスプレイであって、該ディスプレイは、画像コンテンツを複数の深度平面上でユーザに提示するように、光を該ユーザの眼の中に投影するように構成され、該ディスプレイの少なくとも一部は、１つまたはそれを上回る導波管を備え、該１つまたはそれを上回る導波管は、透明部分が、ユーザの正面の環境の一部からの光をユーザの眼に伝送し、ユーザの正面の環境の該部分のビューを提供するように、透明であって、ユーザが該頭部搭載型ディスプレイシステムを装着すると、ユーザの眼の正面の場所に配置され、ユーザの眼の視野の中心領域は、ユーザの正面の環境内の中心領域に対応し、ユーザの眼の視野の周辺領域は、ユーザの正面の環境内の周辺領域に対応する、ディスプレイと、
少なくともユーザの正面の環境の該部分を結像するように構成される、外向きに面した画像捕捉デバイスと、
ユーザの正面の環境の少なくとも該部分内のオブジェクトまでの距離を測定するように構成される、１つまたはそれを上回るセンサと、
入力を該ユーザから受信するように構成される、１つまたはそれを上回る入力デバイスと、
該ディスプレイと通信し、該ディスプレイ上での画像コンテンツの提示を制御する、処理電子機器と、
を備え、該頭部搭載型ディスプレイシステムは、該１つまたはそれを上回る入力デバイスによって受信された入力に基づいて、ユーザの視野の中心領域に対応する環境内のオブジェクトを選択するように構成され、該１つまたはそれを上回るセンサは、該選択後、該オブジェクトまでの距離を測定するように構成され、該外向きに面した画像捕捉デバイスは、該オブジェクトの画像を取得するように構成され、該ディスプレイは、距離を測定するように構成される該１つまたはそれを上回るセンサによって測定された該距離に基づいて、該オブジェクトの増強された画像を判定された深度平面に提示するように構成され、該増強された画像は、視野の他の部分と比較して増強され、該増強された画像は、ユーザの視野の中心領域内の場所に提示される、頭部搭載型ディスプレイシステム。
２．光を人物の眼の中に指向し、画像を眼内に形成するように構成される、１つまたはそれを上回る光源をさらに備える、実施例１に記載のシステム。
３．該１つまたはそれを上回る光源は、光を該１つまたはそれを上回る導波管の中に指向するように構成される、実施例２に記載のシステム。
４．該１つまたはそれを上回る光源は、ファイバ走査プロジェクタを備える、実施例２または３に記載のシステム。
５．該深度平面は、第１の遠深度平面と、第２の近深度平面とを備え、該第１の遠深度平面は、該頭部搭載型ディスプレイが該ユーザによって装着されるとき、該第２の近深度平面より該ユーザの眼から遠い、実施例１に記載のシステム。
６．該増強された画像は、該遠深度平面上に提示される、実施例５に記載のシステム。
７．該ディスプレイは、該眼の中に投影される光が該第２の近深度平面から画像コンテンツを提示するように発散するような屈折力を有する、光学要素を備える、実施例５または６に記載のシステム。
８．屈折力を有する、光学要素は、レンズを備える、実施例７に記載のシステム。
９．屈折力を有する、光学要素は、回折光学要素を備える、実施例７または８に記載のシステム。
１０．該頭部搭載型ディスプレイシステムは、該増強された画像コンテンツを該オブジェクトが位置する環境内の中心領域内の場所に対応するユーザの視野の中心領域内の場所に提示するように構成される、実施例１に記載のシステム。
１１．該頭部搭載型ディスプレイシステムは、該増強された画像コンテンツを該オブジェクトが位置する環境内の中心領域に対応しないユーザの視野の中心領域内の場所に移動させるように構成される、実施例１に記載のシステム。
１２．該１つまたはそれを上回るセンサは、該環境を結像するように構成される、１つまたはそれを上回る外向きに面した画像捕捉デバイスを備える、実施例１に記載のシステム。
１３．該環境を結像するように構成される、該１つまたはそれを上回る外向きに面した画像捕捉デバイスは、１つまたはそれを上回る外向きに面したカメラを備える、実施例１２に記載のシステム。
１４．１つまたはそれを上回るセンサは、距離測定デバイスを備える、実施例１のいずれかに記載のシステム。
１５．距離測定デバイスは、レーザ測距計を備える、実施例１４に記載のシステム。
１６．入力を該ユーザから受信するように構成される、該１つまたはそれを上回る入力デバイスは、該ユーザの眼を結像し、その移動を追跡するように配置される、内向きに面した眼追跡カメラを備える、実施例１に記載のシステム。
１７．該増強された画像を提示することは、該オブジェクトの画像が形成される該ユーザの視野の他の部分と比較して、該オブジェクトの画像を異なるように処理することを含む、前述の実施例のいずれかに記載のシステム。
１８．該画像を異なるように処理することは、該オブジェクトの画像が形成される該ユーザの視野の他の部分と比較して、該オブジェクトの画像を拡大することを含む、実施例１７に記載のシステム。
１９．該画像を異なるように処理することは、該オブジェクトの画像が形成される該ユーザの視野の他の部分と比較して、該オブジェクトの画像内の明度を増加させることを含む、実施例１７－１８のいずれかに記載のシステム。
２０．該画像を異なるように処理することは、該オブジェクトの画像が形成される該ユーザの視野の他の部分と比較して、該オブジェクトの画像のコントラストを増加させることを含む、実施例１７－１９のいずれかに記載のシステム。
２１．該画像を異なるように処理することは、該オブジェクトの画像が形成される該ユーザの視野の他の部分と比較して、該オブジェクトの画像の色飽和を増加させることを含む、実施例１７－２０のいずれかに記載のシステム。
２２．該画像を異なるように処理することは、該オブジェクトの画像が形成される該ユーザの視野の他の部分と比較して、該オブジェクトの画像を鮮明化することを含む、実施例１７－２１のいずれかに記載のシステム。
２３．該鮮明化することは、該オブジェクトの画像が形成される該ユーザの視野の他の部分と比較して、該オブジェクトの画像の縁増強特徴を含む、実施例２２に記載のシステム。
２４．該画像を異なるように処理することは、該オブジェクトの画像が形成される該ユーザの視野の他の部分と比較して、該オブジェクトの画像のカラーバランスを偏移させることを含む、実施例１７－２３のいずれかに記載のシステム。
２５．視野の該他の部分は、該視野の該中心領域の他の部分を備える、前述の実施例のいずれかに記載のシステム。
２６．視野の該他の部分は、該視野の該周辺領域の少なくとも一部を備える、前述の実施例のいずれかに記載のシステム。
２７．光をユーザの眼に投影し、拡張現実画像コンテンツを表示するように構成される、頭部搭載型ディスプレイシステムであって、該ユーザの眼は、中心領域と、該中心領域を中心として配置される周辺領域を有する、視野を有し、
ユーザの頭部上に支持されるように構成される、フレームと、
フレーム上に配置される、ディスプレイであって、該ディスプレイは、画像コンテンツを複数の深度平面上でユーザに提示するように、光を該ユーザの眼の中に投影するように構成され、該ディスプレイの少なくとも一部は、１つまたはそれを上回る導波管を備え、該１つまたはそれを上回る導波管は、透明部分が、ユーザの正面の環境の一部からの光をユーザの眼に伝送し、ユーザの正面の環境の該部分のビューを提供するように、透明であって、ユーザが該頭部搭載型ディスプレイシステムを装着すると、ユーザの眼の正面の場所に配置され、ユーザの眼の視野の中心領域は、ユーザの正面の環境内の中心領域に対応し、ユーザの眼の視野の周辺領域は、ユーザの正面の環境内の周辺領域に対応する、ディスプレイと、
ユーザの正面の環境の少なくとも該部分を結像するように構成される、外向きに面した画像捕捉デバイスと、
ユーザの正面の環境の少なくとも該部分内のオブジェクトまでの距離を測定するように構成される、１つまたはそれを上回るセンサと、
入力を該ユーザから受信するように構成される、１つまたはそれを上回る入力デバイスと、
該ディスプレイと通信し、該ディスプレイ上での画像コンテンツの提示を制御する、処理電子機器と、
を備え、該頭部搭載型ディスプレイシステムは、該１つまたはそれを上回る入力デバイスによって受信された入力に基づいて、ユーザの視野の中心領域に対応する環境内のオブジェクトを選択するように構成され、該１つまたはそれを上回るセンサは、該選択後、該オブジェクトまでの距離を測定するように構成され、該外向きに面した画像捕捉デバイスは、該オブジェクトの画像を取得するように構成され、該ディスプレイは、該オブジェクトの画像を距離を測定するように構成される該１つまたはそれを上回るセンサによって測定された該距離に基づいて判定された深度平面に提示するように構成され、該オブジェクトの画像は、ユーザの視野の中心領域内の場所に提示され、該ディスプレイは、該オブジェクトの画像と比較して、視野の他の部分内に形成される画像を強調解除するように構成される、頭部搭載型ディスプレイシステム。
２８．光を人物の眼の中に指向し、画像を眼内に形成するように構成される、１つまたはそれを上回る光源をさらに備える、実施例２７に記載のシステム。
２９．該１つまたはそれを上回る光源は、光を該１つまたはそれを上回る導波管の中に指向するように構成される、実施例２８に記載のシステム。
３０．該１つまたはそれを上回る光源は、ファイバ走査プロジェクタを備える、実施例２８または２９に記載のシステム。
３１．該深度平面は、第１の遠深度平面と、第２の近深度平面とを備え、該第１の遠深度平面は、該頭部搭載型ディスプレイが該ユーザによって装着されるとき、該第２の近深度平面より該ユーザの眼から遠い、実施例２７に記載のシステム。
３２．該オブジェクトの画像は、該遠深度平面上に提示される、実施例３１に記載のシステム。
３３．該ディスプレイは、該眼の中に投影される光が該第２の近深度平面から画像コンテンツを提示するように発散するような屈折力を有する、光学要素を備える、実施例３１または３２に記載のシステム。
３４．屈折力を有する、光学要素は、レンズを備える、実施例３３に記載のシステム。
３５．屈折力を有する、光学要素は、回折光学要素を備える、実施例３３または３４に記載のシステム。
３６．該頭部搭載型ディスプレイシステムは、該オブジェクトの画像を該オブジェクトが位置する環境内の中心領域内の場所に対応するユーザの視野の中心領域内の場所に提示するように構成される、実施例２７に記載のシステム。
３７．該頭部搭載型ディスプレイシステムは、該オブジェクトの画像を該オブジェクトが位置する環境内の中心領域に対応しないユーザの視野の中心領域内の場所に移動させるように構成される、実施例２７に記載のシステム。
３８．該１つまたはそれを上回るセンサは、該環境を結像するように構成される、１つまたはそれを上回る外向きに面した画像捕捉デバイスを備える、実施例２７に記載のシステム。
３９．該環境を結像するように構成される、該１つまたはそれを上回る外向きに面した画像捕捉デバイスは、１つまたはそれを上回る外向きに面したカメラを備える、実施例３８に記載のシステム。
４０．該１つまたはそれを上回るセンサは、距離測定デバイスを備える、実施例２７のいずれかに記載のシステム。
４１．該距離測定デバイスは、レーザ測距計を備える、実施例４０に記載のシステム。
４２．入力を該ユーザから受信するように構成される、該１つまたはそれを上回る入力デバイスは、該ユーザの眼を結像し、その移動を追跡するように配置される、内向きに面した眼追跡カメラを備える、実施例２７に記載のシステム。
４３．該頭部搭載型ディスプレイシステムは、該オブジェクトの画像と異なるように、該オブジェクトの画像が形成される場所以外の、該ユーザの視野の他の部分内に形成される画像を処理するように構成される、実施例２７－４２のいずれかに記載のシステム。
４４．該頭部搭載型ディスプレイシステムは、該オブジェクトの画像と比較して、該オブジェクトの画像が形成される場所以外の該ユーザの視野の他の部分内に形成される画像のサイズを収縮または低減させることによって、画像を異なるように処理するように構成される、実施例４３に記載のシステム。
４５．該頭部搭載型ディスプレイシステムは、該オブジェクトの画像と比較して、該オブジェクトの画像が形成される場所以外の該ユーザの視野の他の部分内に形成される画像を暗化または減衰させることによって、画像を異なるように処理するように構成される、実施例４３－４４のいずれかに記載のシステム。
４６．該頭部搭載型ディスプレイシステムは、該オブジェクトの画像と比較して、該オブジェクトの画像が形成される場所以外の該ユーザの視野の他の部分内に形成される画像のコントラストを低減させることによって、画像を異なるように処理するように構成される、実施例４３－４５のいずれかに記載のシステム。
４７．該頭部搭載型ディスプレイシステムは、該オブジェクトの画像と比較して、該オブジェクトの画像が形成される場所以外の該ユーザの視野の他の部分内に形成される画像の色飽和を減少させることによって、画像を異なるように処理するように構成される、実施例４３－４６のいずれかに記載のシステム。
４８．該頭部搭載型ディスプレイシステムは、該オブジェクトの画像と比較して、該オブジェクトの画像が形成される場所以外の該ユーザの視野の他の部分内に形成される画像の鮮明度を減少させることによって、画像を異なるように処理するように構成される、実施例４３－４７のいずれかに記載のシステム。
４９．該鮮明度を減少させることは、該オブジェクトの画像と比較して、該オブジェクトの画像が形成される場所以外の該ユーザの視野の他の部分内に形成される画像内の特徴の縁を増強解除することを含む、実施例４８に記載のシステム。
５０．該鮮明度を減少させることは、該オブジェクトの画像と比較して、該オブジェクトの画像が形成される場所以外の該ユーザの視野の他の部分内に形成される画像をぼかすことを含む、実施例４８または４９に記載のシステム。
５１．該頭部搭載型ディスプレイシステムは、該オブジェクトの画像と比較して、該オブジェクトの画像が形成される場所以外の該ユーザの視野の他の部分内に形成される画像のカラーバランスを偏移させることによって、画像を異なるように処理するように構成される、実施例４８－５０のいずれかに記載のシステム。
５２．視野の該他の部分は、該視野の該中心領域の他の部分を備える、実施例２７－５１のいずれかに記載のシステム。
５３．視野の該他の部分は、該視野の該周辺領域の少なくとも一部を備える、実施例２７－５２のいずれかに記載のシステム。
５４．該増強された画像は、該近深度平面上に提示される、実施例５に記載のシステム。
５５．該ディスプレイは、該眼の中に投影される光が画像コンテンツを該第１の遠深度平面から提示するように発散するような屈折力を有する、光学要素を備える、実施例５または５４に記載のシステム。
５６．該拡大は、少なくとも部分的に、眼の分解能に基づく、実施例１８に記載のシステム。
５７．該オブジェクトの画像は、該近深度平面上に提示される、実施例３１に記載のシステム。
５８．該ディスプレイは、該眼の中に投影される光が画像コンテンツを該第１の遠深度平面から提示するように発散するような屈折力を有する、光学要素を備える、実施例３１または５７に記載のシステム。
５９．該ぼかしは、同一色を使用して、該ユーザの視野の他の部分内に形成される該画像をぼかすことを含む、実施例５０に記載のシステム。
６０．該同一色は、該オブジェクトの画像内の色と比較して高コントラスト色を備える、実施例５９に記載のシステム。
６１．システムは、アラートをユーザに提供し、提示される画像が増強されたことを示すように構成される、実施例１－２６のいずれかまたは実施例５４－５６のいずれかに記載のシステム。
６２．システムは、アラートをユーザに提供し、提示される画像が強調解除されたことを示すように構成される、実施例２７－５３のいずれかまたは実施例５７－６０のいずれかに記載のシステム。
６３．アラートは、視覚的アラートである、実施例６１または６２のいずれかに記載のシステム。
６４．アラートは、聴覚的アラートである、実施例６１または６２のいずれかに記載のシステム。
６５．該頭部搭載型ディスプレイシステムは、ユーザの正面の環境の少なくとも該部分の３Ｄ表現を構築し、環境の少なくとも該部分の表現を解釈するように構成され、該環境の該部分は、患者を含み、該頭部搭載型ディスプレイはさらに、患者と関連付けられた第１の構造を患者と関連付けられた第２の構造から区別するように構成される、前述の実施例のいずれかに記載のシステム。
６６．透明であって、ユーザの眼の正面の場所に配置される、該ディスプレイの少なくとも該部分は、１つまたはそれを上回る導波管を備える、前述の実施例のいずれかに記載のシステム。
６７．光を該１つまたはそれを上回る導波管の中に指向するように構成される、１つまたはそれを上回る光源を備え、導波管は、光をユーザの眼の中に指向するように構成される、実施例６６に記載のシステム。
６８．該１つまたはそれを上回る光源は、ファイバ走査プロジェクタを備える、実施例６６－６７のいずれかに記載のシステム。
６９．環境を監視するように構成される、１つまたはそれを上回るセンサをさらに備える、前述の実施例のいずれかに記載のシステム。
７０．該１つまたはそれを上回るセンサは、該環境を結像するように構成される、１つまたはそれを上回る外向きに面した画像捕捉デバイスを備える、実施例６９に記載のシステム。
７１．該環境を結像するように構成される、該１つまたはそれを上回る外向きに面した画像捕捉デバイスは、１つまたはそれを上回る外向きに面したカメラを備える、実施例７０に記載のシステム。
７２．距離測定デバイスをさらに備える、前述の実施例のいずれかに記載のシステム。
７３．該ユーザの眼の位置および／または移動を追跡するように構成される、眼追跡デバイスをさらに備える、前述の実施例のいずれかに記載のシステム。
７４．頭部搭載型ディスプレイは、ユーザの視野内のヒト組織の体積を推定するように構成される、前述の実施例のいずれかに記載のシステム。
７５．頭部搭載型ディスプレイは、環境内の２つのオブジェクト間の距離を測定するように構成される、前述の実施例のいずれかに記載のシステム。
７６．頭部搭載型ディスプレイは、ディスプレイ上に提示される第１の画像モダリティと第２の画像モダリティとの間でトグルするように構成される、前述の実施例のいずれかに記載のシステム。
７７．第１の画像モダリティは、ＭＲＩ走査を備える、実施例７６に記載のシステム。
７８．第２の画像モダリティは、超音波を備える、実施例７６－７７のいずれかに記載のシステム。
７９．第１の画像モダリティは、Ｘ線走査を備える、実施例７６－７８のいずれかに記載のシステム。
８０．超音波音波を生産するように適合される、電子エミッタをさらに備える、前述の実施例のいずれかに記載のシステム。
８１．超音波音波を電気信号に変換するように適合される、センサをさらに備える、前述の実施例のいずれかに記載のシステム。
８２．頭部搭載型ディスプレイは、ユーザが、仮想基準マーカをユーザの眼に対してユーザの正面の環境の一部上に設置することを可能にするように構成される、前述の実施例のいずれかに記載のシステム。
８３．頭部搭載型ディスプレイは、画像が環境内の実世界オブジェクトに添付されて現れるように、画像をディスプレイ上に投影するように構成される、前述の実施例のいずれかに記載のシステム。
８４．頭部搭載型ディスプレイは、仮想切断ガイドラインが切断されるべきヒト身体領域上にオーバーレイされるようにユーザに現れるように、仮想切断ガイドラインを表示するように構成される、または切断されるべき部分へのアクセスを与える、前述の実施例のいずれかに記載のシステム。
８５．仮想切断ガイドラインの見掛け場所は、患者の身体部分の位置に関連するように現れる、実施例８４に記載のシステム。
８６．頭部搭載型ディスプレイは、信号を放出し、ユーザの正面の環境の一部内のオブジェクトの位置に関するデータを取得するように構成される、前述の実施例のいずれかに記載のシステム。
８７．頭部搭載型ディスプレイは、オブジェクト場所のデータベースを使用して、ユーザの正面の環境の一部内のオブジェクトの位置を取得するように構成される、前述の実施例のいずれかに記載のシステム。
８８．頭部搭載型ディスプレイは、該オブジェクト場所のデータベースに基づいて、基準点を設定し、画像が基準点に対して固定されて現れるように、画像をユーザの眼の中に投影するように構成される、実施例８７に記載のシステム。
８９．頭部搭載型ディスプレイは、ユーザ入力に基づいて、オブジェクトの３Ｄ画像のビューを軸を中心として回転させるように構成される、前述の実施例のいずれかに記載のシステム。
９０．頭部搭載型ディスプレイは、ユーザ入力に基づいて、３Ｄオブジェクトの画像のビューを平行移動させるように構成される、前述の実施例のいずれかに記載のシステム。
９１．頭部搭載型ディスプレイは、オブジェクトの３Ｄ画像の第１のスライスを表示するように構成される、前述の実施例のいずれかに記載のシステム。
９２．頭部搭載型ディスプレイは、３Ｄ画像の第１のスライスの画像および第２のスライスの画像を通してシーケンス化するように構成される、実施例９１に記載のシステム。
９３．頭部搭載型ディスプレイは、頭部搭載型ディスプレイの第２のユーザが伝送される環境の該部分の該画像を視認し得るように、ユーザの正面の環境の一部の画像を伝送するように構成される、前述の実施例のいずれかに記載のシステム。
９４．頭部搭載型ディスプレイは、ユーザに医療手技におけるステップをアラートするように構成される、前述の実施例のいずれかに記載のシステム。
９５．頭部搭載型ディスプレイは、ユーザの医療パラメータを監視し、医療パラメータに基づいて、アラートを提供するように構成される、前述の実施例のいずれかに記載のシステム。
９６．ユーザの医療パラメータは、バイタルサインを含む、実施例９５に記載のシステム。
９７．頭部搭載型ディスプレイは、超音波を放出し、該超音波から生じる信号を測定するように構成され、頭部搭載型ディスプレイはさらに、信号に基づいて、超音波画像を形成するように構成される、前述の実施例のいずれかに記載のシステム。
９８．頭部搭載型ディスプレイは、ユーザにユーザの視野外のオブジェクトおよび／またはイベントをアラートするように構成される、前述の実施例のいずれかに記載のシステム。
９９．光を該ユーザの眼の中に指向し、画像を眼内に形成するように構成される、１つまたはそれを上回る光源をさらに備える、前述の実施例のいずれかに記載のシステム。
１００．該１つまたはそれを上回る光源は、ファイバ走査プロジェクタを備える、前述の実施例のいずれかに記載のシステム。
１０１．コントラストを増加させることは、該画像コンテンツの少なくとも１つの色の明度または暗度を調節することを含む、実施例２０に記載のシステム。
１０２．コントラストを増加させることは、黒色、灰色、白色、または他の色を該画像コンテンツの少なくとも１つの色に追加することを含む、実施例２０に記載のシステム。
１０３．頭部搭載型ディスプレイは、ある程度の不透明度を提示される画像コンテンツの少なくとも近傍に提供するように構成される、前述の実施例のいずれかに記載のシステム。
１０４．頭部搭載型ディスプレイは、第１の画像モダリティと第１の画像モダリティと異なる第２の画像モダリティを組み合わせるように構成される、前述の実施例のいずれかに記載のシステム。
１０５．第１の画像モダリティおよび第２の画像モダリティはそれぞれ、ＭＲＩ、ＣＴ、ＰＥＴ、ＭＲＡ、またはＣＴＡ走査からの画像を備える、実施例１０４に記載のシステム。
１０６．頭部搭載型ディスプレイは、第１および第２の画像モダリティの組み合わせられた画像を患者の実際の解剖学的構造にわたって整合させるように構成される、実施例１０４または１０５に記載のシステム。
１．光をユーザの眼に投影し、拡張現実画像コンテンツを表示するように構成される、頭部搭載型ディスプレイシステムであって、該ユーザの眼は、中心領域と、該中心領域を中心として配置される周辺領域を有する、視野を有し、
ユーザの頭部上に支持されるように構成される、フレームと、
フレーム上に配置される、ディスプレイであって、該ディスプレイは、画像コンテンツを複数の深度平面上でユーザに提示するように、光を該ユーザの眼の中に投影するように構成され、該ディスプレイの少なくとも一部は、１つまたはそれを上回る導波管を備え、該１つまたはそれを上回る導波管は、透明部分が、ユーザの正面の環境の一部からの光をユーザの眼に伝送し、ユーザの正面の環境の該部分のビューを提供するように、透明であって、ユーザが該頭部搭載型ディスプレイシステムを装着すると、ユーザの眼の正面の場所に配置され、ユーザの眼の視野の中心領域は、ユーザの正面の環境内の中心領域に対応し、ユーザの眼の視野の周辺領域は、ユーザの正面の環境内の周辺領域に対応する、ディスプレイと、
少なくともユーザの正面の環境の該部分を結像するように構成される、外向きに面した画像捕捉デバイスと、
ユーザの正面の環境の少なくとも該部分内のオブジェクトまでの距離を測定するように構成される、１つまたはそれを上回るセンサと、
入力を該ユーザから受信するように構成される、１つまたはそれを上回る入力デバイスと、
該ディスプレイと通信し、該ディスプレイ上での画像コンテンツの提示を制御する、処理電子機器と、
を備え、該頭部搭載型ディスプレイシステムは、該１つまたはそれを上回る入力デバイスによって受信された入力に基づいて、ユーザの視野の中心領域に対応する環境内のオブジェクトを選択するように構成され、該１つまたはそれを上回るセンサは、該選択後、該オブジェクトまでの距離を測定するように構成され、該外向きに面した画像捕捉デバイスは、該オブジェクトの画像を取得するように構成され、該ディスプレイは、距離を測定するように構成される該１つまたはそれを上回るセンサによって測定された該距離に基づいて、該オブジェクトの増強された画像を判定された深度平面に提示するように構成され、該増強された画像は、視野の他の部分と比較して増強され、該増強された画像は、ユーザの視野の中心領域内の場所に提示される、頭部搭載型ディスプレイシステム。
２．光を人物の眼の中に指向し、画像を眼内に形成するように構成される、１つまたはそれを上回る光源をさらに備える、実施例１に記載のシステム。
３．該１つまたはそれを上回る光源は、光を該１つまたはそれを上回る導波管の中に指向するように構成される、実施例２に記載のシステム。
４．該１つまたはそれを上回る光源は、ファイバ走査プロジェクタを備える、実施例２または３に記載のシステム。
５．該深度平面は、第１の遠深度平面と、第２の近深度平面とを備え、該第１の遠深度平面は、該頭部搭載型ディスプレイが該ユーザによって装着されるとき、該第２の近深度平面より該ユーザの眼から遠い、実施例１に記載のシステム。
６．該増強された画像は、該遠深度平面上に提示される、実施例５に記載のシステム。
７．該ディスプレイは、該眼の中に投影される光が該第２の近深度平面から画像コンテンツを提示するように発散するような屈折力を有する、光学要素を備える、実施例５または６に記載のシステム。
８．屈折力を有する、光学要素は、レンズを備える、実施例７に記載のシステム。
９．屈折力を有する、光学要素は、回折光学要素を備える、実施例７または８に記載のシステム。
１０．該頭部搭載型ディスプレイシステムは、該増強された画像コンテンツを該オブジェクトが位置する環境内の中心領域内の場所に対応するユーザの視野の中心領域内の場所に提示するように構成される、実施例１に記載のシステム。
１１．該頭部搭載型ディスプレイシステムは、該増強された画像コンテンツを該オブジェクトが位置する環境内の中心領域に対応しないユーザの視野の中心領域内の場所に移動させるように構成される、実施例１に記載のシステム。
１２．該１つまたはそれを上回るセンサは、該環境を結像するように構成される、１つまたはそれを上回る外向きに面した画像捕捉デバイスを備える、実施例１に記載のシステム。
１３．該環境を結像するように構成される、該１つまたはそれを上回る外向きに面した画像捕捉デバイスは、１つまたはそれを上回る外向きに面したカメラを備える、実施例１２に記載のシステム。
１４．１つまたはそれを上回るセンサは、距離測定デバイスを備える、実施例１のいずれかに記載のシステム。
１５．距離測定デバイスは、レーザ測距計を備える、実施例１４に記載のシステム。
１６．入力を該ユーザから受信するように構成される、該１つまたはそれを上回る入力デバイスは、該ユーザの眼を結像し、その移動を追跡するように配置される、内向きに面した眼追跡カメラを備える、実施例１に記載のシステム。
１７．該増強された画像を提示することは、該オブジェクトの画像が形成される該ユーザの視野の他の部分と比較して、該オブジェクトの画像を異なるように処理することを含む、前述の実施例のいずれかに記載のシステム。
１８．該画像を異なるように処理することは、該オブジェクトの画像が形成される該ユーザの視野の他の部分と比較して、該オブジェクトの画像を拡大することを含む、実施例１７に記載のシステム。
１９．該画像を異なるように処理することは、該オブジェクトの画像が形成される該ユーザの視野の他の部分と比較して、該オブジェクトの画像内の明度を増加させることを含む、実施例１７－１８のいずれかに記載のシステム。
２０．該画像を異なるように処理することは、該オブジェクトの画像が形成される該ユーザの視野の他の部分と比較して、該オブジェクトの画像のコントラストを増加させることを含む、実施例１７－１９のいずれかに記載のシステム。
２１．該画像を異なるように処理することは、該オブジェクトの画像が形成される該ユーザの視野の他の部分と比較して、該オブジェクトの画像の色飽和を増加させることを含む、実施例１７－２０のいずれかに記載のシステム。
２２．該画像を異なるように処理することは、該オブジェクトの画像が形成される該ユーザの視野の他の部分と比較して、該オブジェクトの画像を鮮明化することを含む、実施例１７－２１のいずれかに記載のシステム。
２３．該鮮明化することは、該オブジェクトの画像が形成される該ユーザの視野の他の部分と比較して、該オブジェクトの画像の縁増強特徴を含む、実施例２２に記載のシステム。
２４．該画像を異なるように処理することは、該オブジェクトの画像が形成される該ユーザの視野の他の部分と比較して、該オブジェクトの画像のカラーバランスを偏移させることを含む、実施例１７－２３のいずれかに記載のシステム。
２５．視野の該他の部分は、該視野の該中心領域の他の部分を備える、前述の実施例のいずれかに記載のシステム。
２６．視野の該他の部分は、該視野の該周辺領域の少なくとも一部を備える、前述の実施例のいずれかに記載のシステム。
２７．光をユーザの眼に投影し、拡張現実画像コンテンツを表示するように構成される、頭部搭載型ディスプレイシステムであって、該ユーザの眼は、中心領域と、該中心領域を中心として配置される周辺領域を有する、視野を有し、
ユーザの頭部上に支持されるように構成される、フレームと、
フレーム上に配置される、ディスプレイであって、該ディスプレイは、画像コンテンツを複数の深度平面上でユーザに提示するように、光を該ユーザの眼の中に投影するように構成され、該ディスプレイの少なくとも一部は、１つまたはそれを上回る導波管を備え、該１つまたはそれを上回る導波管は、透明部分が、ユーザの正面の環境の一部からの光をユーザの眼に伝送し、ユーザの正面の環境の該部分のビューを提供するように、透明であって、ユーザが該頭部搭載型ディスプレイシステムを装着すると、ユーザの眼の正面の場所に配置され、ユーザの眼の視野の中心領域は、ユーザの正面の環境内の中心領域に対応し、ユーザの眼の視野の周辺領域は、ユーザの正面の環境内の周辺領域に対応する、ディスプレイと、
ユーザの正面の環境の少なくとも該部分を結像するように構成される、外向きに面した画像捕捉デバイスと、
ユーザの正面の環境の少なくとも該部分内のオブジェクトまでの距離を測定するように構成される、１つまたはそれを上回るセンサと、
入力を該ユーザから受信するように構成される、１つまたはそれを上回る入力デバイスと、
該ディスプレイと通信し、該ディスプレイ上での画像コンテンツの提示を制御する、処理電子機器と、
を備え、該頭部搭載型ディスプレイシステムは、該１つまたはそれを上回る入力デバイスによって受信された入力に基づいて、ユーザの視野の中心領域に対応する環境内のオブジェクトを選択するように構成され、該１つまたはそれを上回るセンサは、該選択後、該オブジェクトまでの距離を測定するように構成され、該外向きに面した画像捕捉デバイスは、該オブジェクトの画像を取得するように構成され、該ディスプレイは、該オブジェクトの画像を距離を測定するように構成される該１つまたはそれを上回るセンサによって測定された該距離に基づいて判定された深度平面に提示するように構成され、該オブジェクトの画像は、ユーザの視野の中心領域内の場所に提示され、該ディスプレイは、該オブジェクトの画像と比較して、視野の他の部分内に形成される画像を強調解除するように構成される、頭部搭載型ディスプレイシステム。
２８．光を人物の眼の中に指向し、画像を眼内に形成するように構成される、１つまたはそれを上回る光源をさらに備える、実施例２７に記載のシステム。
２９．該１つまたはそれを上回る光源は、光を該１つまたはそれを上回る導波管の中に指向するように構成される、実施例２８に記載のシステム。
３０．該１つまたはそれを上回る光源は、ファイバ走査プロジェクタを備える、実施例２８または２９に記載のシステム。
３１．該深度平面は、第１の遠深度平面と、第２の近深度平面とを備え、該第１の遠深度平面は、該頭部搭載型ディスプレイが該ユーザによって装着されるとき、該第２の近深度平面より該ユーザの眼から遠い、実施例２７に記載のシステム。
３２．該オブジェクトの画像は、該遠深度平面上に提示される、実施例３１に記載のシステム。
３３．該ディスプレイは、該眼の中に投影される光が該第２の近深度平面から画像コンテンツを提示するように発散するような屈折力を有する、光学要素を備える、実施例３１または３２に記載のシステム。
３４．屈折力を有する、光学要素は、レンズを備える、実施例３３に記載のシステム。
３５．屈折力を有する、光学要素は、回折光学要素を備える、実施例３３または３４に記載のシステム。
３６．該頭部搭載型ディスプレイシステムは、該オブジェクトの画像を該オブジェクトが位置する環境内の中心領域内の場所に対応するユーザの視野の中心領域内の場所に提示するように構成される、実施例２７に記載のシステム。
３７．該頭部搭載型ディスプレイシステムは、該オブジェクトの画像を該オブジェクトが位置する環境内の中心領域に対応しないユーザの視野の中心領域内の場所に移動させるように構成される、実施例２７に記載のシステム。
３８．該１つまたはそれを上回るセンサは、該環境を結像するように構成される、１つまたはそれを上回る外向きに面した画像捕捉デバイスを備える、実施例２７に記載のシステム。
３９．該環境を結像するように構成される、該１つまたはそれを上回る外向きに面した画像捕捉デバイスは、１つまたはそれを上回る外向きに面したカメラを備える、実施例３８に記載のシステム。
４０．該１つまたはそれを上回るセンサは、距離測定デバイスを備える、実施例２７のいずれかに記載のシステム。
４１．該距離測定デバイスは、レーザ測距計を備える、実施例４０に記載のシステム。
４２．入力を該ユーザから受信するように構成される、該１つまたはそれを上回る入力デバイスは、該ユーザの眼を結像し、その移動を追跡するように配置される、内向きに面した眼追跡カメラを備える、実施例２７に記載のシステム。
４３．該頭部搭載型ディスプレイシステムは、該オブジェクトの画像と異なるように、該オブジェクトの画像が形成される場所以外の、該ユーザの視野の他の部分内に形成される画像を処理するように構成される、実施例２７－４２のいずれかに記載のシステム。
４４．該頭部搭載型ディスプレイシステムは、該オブジェクトの画像と比較して、該オブジェクトの画像が形成される場所以外の該ユーザの視野の他の部分内に形成される画像のサイズを収縮または低減させることによって、画像を異なるように処理するように構成される、実施例４３に記載のシステム。
４５．該頭部搭載型ディスプレイシステムは、該オブジェクトの画像と比較して、該オブジェクトの画像が形成される場所以外の該ユーザの視野の他の部分内に形成される画像を暗化または減衰させることによって、画像を異なるように処理するように構成される、実施例４３－４４のいずれかに記載のシステム。
４６．該頭部搭載型ディスプレイシステムは、該オブジェクトの画像と比較して、該オブジェクトの画像が形成される場所以外の該ユーザの視野の他の部分内に形成される画像のコントラストを低減させることによって、画像を異なるように処理するように構成される、実施例４３－４５のいずれかに記載のシステム。
４７．該頭部搭載型ディスプレイシステムは、該オブジェクトの画像と比較して、該オブジェクトの画像が形成される場所以外の該ユーザの視野の他の部分内に形成される画像の色飽和を減少させることによって、画像を異なるように処理するように構成される、実施例４３－４６のいずれかに記載のシステム。
４８．該頭部搭載型ディスプレイシステムは、該オブジェクトの画像と比較して、該オブジェクトの画像が形成される場所以外の該ユーザの視野の他の部分内に形成される画像の鮮明度を減少させることによって、画像を異なるように処理するように構成される、実施例４３－４７のいずれかに記載のシステム。
４９．該鮮明度を減少させることは、該オブジェクトの画像と比較して、該オブジェクトの画像が形成される場所以外の該ユーザの視野の他の部分内に形成される画像内の特徴の縁を増強解除することを含む、実施例４８に記載のシステム。
５０．該鮮明度を減少させることは、該オブジェクトの画像と比較して、該オブジェクトの画像が形成される場所以外の該ユーザの視野の他の部分内に形成される画像をぼかすことを含む、実施例４８または４９に記載のシステム。
５１．該頭部搭載型ディスプレイシステムは、該オブジェクトの画像と比較して、該オブジェクトの画像が形成される場所以外の該ユーザの視野の他の部分内に形成される画像のカラーバランスを偏移させることによって、画像を異なるように処理するように構成される、実施例４８－５０のいずれかに記載のシステム。
５２．視野の該他の部分は、該視野の該中心領域の他の部分を備える、実施例２７－５１のいずれかに記載のシステム。
５３．視野の該他の部分は、該視野の該周辺領域の少なくとも一部を備える、実施例２７－５２のいずれかに記載のシステム。
５４．該増強された画像は、該近深度平面上に提示される、実施例５に記載のシステム。
５５．該ディスプレイは、該眼の中に投影される光が画像コンテンツを該第１の遠深度平面から提示するように発散するような屈折力を有する、光学要素を備える、実施例５または５４に記載のシステム。
５６．該拡大は、少なくとも部分的に、眼の分解能に基づく、実施例１８に記載のシステム。
５７．該オブジェクトの画像は、該近深度平面上に提示される、実施例３１に記載のシステム。
５８．該ディスプレイは、該眼の中に投影される光が画像コンテンツを該第１の遠深度平面から提示するように発散するような屈折力を有する、光学要素を備える、実施例３１または５７に記載のシステム。
５９．該ぼかしは、同一色を使用して、該ユーザの視野の他の部分内に形成される該画像をぼかすことを含む、実施例５０に記載のシステム。
６０．該同一色は、該オブジェクトの画像内の色と比較して高コントラスト色を備える、実施例５９に記載のシステム。
６１．システムは、アラートをユーザに提供し、提示される画像が増強されたことを示すように構成される、実施例１－２６のいずれかまたは実施例５４－５６のいずれかに記載のシステム。
６２．システムは、アラートをユーザに提供し、提示される画像が強調解除されたことを示すように構成される、実施例２７－５３のいずれかまたは実施例５７－６０のいずれかに記載のシステム。
６３．アラートは、視覚的アラートである、実施例６１または６２のいずれかに記載のシステム。
６４．アラートは、聴覚的アラートである、実施例６１または６２のいずれかに記載のシステム。
６５．該頭部搭載型ディスプレイシステムは、ユーザの正面の環境の少なくとも該部分の３Ｄ表現を構築し、環境の少なくとも該部分の表現を解釈するように構成され、該環境の該部分は、患者を含み、該頭部搭載型ディスプレイはさらに、患者と関連付けられた第１の構造を患者と関連付けられた第２の構造から区別するように構成される、前述の実施例のいずれかに記載のシステム。
６６．透明であって、ユーザの眼の正面の場所に配置される、該ディスプレイの少なくとも該部分は、１つまたはそれを上回る導波管を備える、前述の実施例のいずれかに記載のシステム。
６７．光を該１つまたはそれを上回る導波管の中に指向するように構成される、１つまたはそれを上回る光源を備え、導波管は、光をユーザの眼の中に指向するように構成される、実施例６６に記載のシステム。
６８．該１つまたはそれを上回る光源は、ファイバ走査プロジェクタを備える、実施例６６－６７のいずれかに記載のシステム。
６９．環境を監視するように構成される、１つまたはそれを上回るセンサをさらに備える、前述の実施例のいずれかに記載のシステム。
７０．該１つまたはそれを上回るセンサは、該環境を結像するように構成される、１つまたはそれを上回る外向きに面した画像捕捉デバイスを備える、実施例６９に記載のシステム。
７１．該環境を結像するように構成される、該１つまたはそれを上回る外向きに面した画像捕捉デバイスは、１つまたはそれを上回る外向きに面したカメラを備える、実施例７０に記載のシステム。
７２．距離測定デバイスをさらに備える、前述の実施例のいずれかに記載のシステム。
７３．該ユーザの眼の位置および／または移動を追跡するように構成される、眼追跡デバイスをさらに備える、前述の実施例のいずれかに記載のシステム。
７４．頭部搭載型ディスプレイは、ユーザの視野内のヒト組織の体積を推定するように構成される、前述の実施例のいずれかに記載のシステム。
７５．頭部搭載型ディスプレイは、環境内の２つのオブジェクト間の距離を測定するように構成される、前述の実施例のいずれかに記載のシステム。
７６．頭部搭載型ディスプレイは、ディスプレイ上に提示される第１の画像モダリティと第２の画像モダリティとの間でトグルするように構成される、前述の実施例のいずれかに記載のシステム。
７７．第１の画像モダリティは、ＭＲＩ走査を備える、実施例７６に記載のシステム。
７８．第２の画像モダリティは、超音波を備える、実施例７６－７７のいずれかに記載のシステム。
７９．第１の画像モダリティは、Ｘ線走査を備える、実施例７６－７８のいずれかに記載のシステム。
８０．超音波音波を生産するように適合される、電子エミッタをさらに備える、前述の実施例のいずれかに記載のシステム。
８１．超音波音波を電気信号に変換するように適合される、センサをさらに備える、前述の実施例のいずれかに記載のシステム。
８２．頭部搭載型ディスプレイは、ユーザが、仮想基準マーカをユーザの眼に対してユーザの正面の環境の一部上に設置することを可能にするように構成される、前述の実施例のいずれかに記載のシステム。
８３．頭部搭載型ディスプレイは、画像が環境内の実世界オブジェクトに添付されて現れるように、画像をディスプレイ上に投影するように構成される、前述の実施例のいずれかに記載のシステム。
８４．頭部搭載型ディスプレイは、仮想切断ガイドラインが切断されるべきヒト身体領域上にオーバーレイされるようにユーザに現れるように、仮想切断ガイドラインを表示するように構成される、または切断されるべき部分へのアクセスを与える、前述の実施例のいずれかに記載のシステム。
８５．仮想切断ガイドラインの見掛け場所は、患者の身体部分の位置に関連するように現れる、実施例８４に記載のシステム。
８６．頭部搭載型ディスプレイは、信号を放出し、ユーザの正面の環境の一部内のオブジェクトの位置に関するデータを取得するように構成される、前述の実施例のいずれかに記載のシステム。
８７．頭部搭載型ディスプレイは、オブジェクト場所のデータベースを使用して、ユーザの正面の環境の一部内のオブジェクトの位置を取得するように構成される、前述の実施例のいずれかに記載のシステム。
８８．頭部搭載型ディスプレイは、該オブジェクト場所のデータベースに基づいて、基準点を設定し、画像が基準点に対して固定されて現れるように、画像をユーザの眼の中に投影するように構成される、実施例８７に記載のシステム。
８９．頭部搭載型ディスプレイは、ユーザ入力に基づいて、オブジェクトの３Ｄ画像のビューを軸を中心として回転させるように構成される、前述の実施例のいずれかに記載のシステム。
９０．頭部搭載型ディスプレイは、ユーザ入力に基づいて、３Ｄオブジェクトの画像のビューを平行移動させるように構成される、前述の実施例のいずれかに記載のシステム。
９１．頭部搭載型ディスプレイは、オブジェクトの３Ｄ画像の第１のスライスを表示するように構成される、前述の実施例のいずれかに記載のシステム。
９２．頭部搭載型ディスプレイは、３Ｄ画像の第１のスライスの画像および第２のスライスの画像を通してシーケンス化するように構成される、実施例９１に記載のシステム。
９３．頭部搭載型ディスプレイは、頭部搭載型ディスプレイの第２のユーザが伝送される環境の該部分の該画像を視認し得るように、ユーザの正面の環境の一部の画像を伝送するように構成される、前述の実施例のいずれかに記載のシステム。
９４．頭部搭載型ディスプレイは、ユーザに医療手技におけるステップをアラートするように構成される、前述の実施例のいずれかに記載のシステム。
９５．頭部搭載型ディスプレイは、ユーザの医療パラメータを監視し、医療パラメータに基づいて、アラートを提供するように構成される、前述の実施例のいずれかに記載のシステム。
９６．ユーザの医療パラメータは、バイタルサインを含む、実施例９５に記載のシステム。
９７．頭部搭載型ディスプレイは、超音波を放出し、該超音波から生じる信号を測定するように構成され、頭部搭載型ディスプレイはさらに、信号に基づいて、超音波画像を形成するように構成される、前述の実施例のいずれかに記載のシステム。
９８．頭部搭載型ディスプレイは、ユーザにユーザの視野外のオブジェクトおよび／またはイベントをアラートするように構成される、前述の実施例のいずれかに記載のシステム。
９９．光を該ユーザの眼の中に指向し、画像を眼内に形成するように構成される、１つまたはそれを上回る光源をさらに備える、前述の実施例のいずれかに記載のシステム。
１００．該１つまたはそれを上回る光源は、ファイバ走査プロジェクタを備える、前述の実施例のいずれかに記載のシステム。
１０１．コントラストを増加させることは、該画像コンテンツの少なくとも１つの色の明度または暗度を調節することを含む、実施例２０に記載のシステム。
１０２．コントラストを増加させることは、黒色、灰色、白色、または他の色を該画像コンテンツの少なくとも１つの色に追加することを含む、実施例２０に記載のシステム。
１０３．頭部搭載型ディスプレイは、ある程度の不透明度を提示される画像コンテンツの少なくとも近傍に提供するように構成される、前述の実施例のいずれかに記載のシステム。
１０４．頭部搭載型ディスプレイは、第１の画像モダリティと第１の画像モダリティと異なる第２の画像モダリティを組み合わせるように構成される、前述の実施例のいずれかに記載のシステム。
１０５．第１の画像モダリティおよび第２の画像モダリティはそれぞれ、ＭＲＩ、ＣＴ、ＰＥＴ、ＭＲＡ、またはＣＴＡ走査からの画像を備える、実施例１０４に記載のシステム。
１０６．頭部搭載型ディスプレイは、第１および第２の画像モダリティの組み合わせられた画像を患者の実際の解剖学的構造にわたって整合させるように構成される、実施例１０４または１０５に記載のシステム。
【0016】
実施例セットＩＩＩ
１．光をユーザの眼に投影し、拡張現実画像コンテンツを表示するように構成される、頭部搭載型ディスプレイシステムであって、該ユーザの眼は、中心領域と、該中心領域を中心として配置される周辺領域を有する、視野を有し、
ユーザの頭部上に支持されるように構成される、フレームと、
フレーム上に配置される、ディスプレイであって、該ディスプレイは、画像コンテンツを複数の深度平面上でユーザに提示するように、光を該ユーザの眼の中に投影するように構成され、該ディスプレイの少なくとも一部は、１つまたはそれを上回る導波管を備え、該１つまたはそれを上回る導波管は、透明部分が、ユーザの正面の環境の一部からの光をユーザの眼に伝送し、ユーザの正面の環境の該部分のビューを提供するように、透明であって、ユーザが該頭部搭載型ディスプレイシステムを装着すると、ユーザの眼の正面の場所に配置され、ユーザの眼の視野の中心領域は、ユーザの正面の環境内の中心領域に対応し、ユーザの眼の視野の周辺領域は、ユーザの正面の環境内の周辺領域に対応する、ディスプレイと、
ユーザの正面の環境の少なくとも該部分を結像するように構成される、外向きに面した画像捕捉デバイスと、
入力を該ユーザから受信するように構成される、１つまたはそれを上回る入力デバイスと、
該ディスプレイと通信し、該ディスプレイ上での画像コンテンツの提示を制御する、処理電子機器と、
を備え、
該深度平面は、第１の深度平面と、第２の深度平面とを備え、該オブジェクトまでの該距離は、該頭部搭載型ディスプレイが該ユーザによって装着されるとき、該第２の深度平面より該第１の深度平面に対応し、
該頭部搭載型ディスプレイシステムは、該１つまたはそれを上回る入力デバイスによって受信された入力に基づいて、ユーザの視野内の環境内のオブジェクトを選択するように構成され、該外向きに面した画像捕捉デバイスは、該オブジェクトの画像を取得するように構成され、該ディスプレイは、該オブジェクトの画像を該第２の深度に提示するように構成される、
平面頭部搭載型ディスプレイシステム。
２．入力を該ユーザから受信するように構成される、該１つまたはそれを上回る入力デバイスは、該ユーザの眼を結像し、その移動を追跡するように配置される、内向きに面した眼追跡カメラを備える、実施例１に記載のシステム。
３．該１つまたはそれを上回るセンサは、該環境を結像するように構成される、１つまたはそれを上回る外向きに面した画像捕捉デバイスを備える、前述の実施例のいずれかに記載のシステム。
４．該環境を結像するように構成される、該１つまたはそれを上回る外向きに面した画像捕捉デバイスは、１つまたはそれを上回る外向きに面したカメラを備える、実施例３に記載のシステム。
５．ユーザの正面の環境の少なくとも該部分内のオブジェクトまでの距離を測定するように構成される、１つまたはそれを上回るセンサをさらに備える、前述の実施例のいずれかに記載のシステム。
６．該１つまたはそれを上回るセンサは、該オブジェクトの選択後、該オブジェクトまでの距離を測定するように構成される、実施例５に記載のシステム。
７．１つまたはそれを上回るセンサは、距離測定デバイスを備える、実施例５－６のいずれかに記載のシステム。
８．距離測定デバイスは、レーザ測距計を備える、実施例７に記載のシステム。
９．該第１の深度平面は、遠深度平面を備え、該第２の深度平面は、近深度平面を備え、該遠深度平面は、該頭部搭載型ディスプレイが該ユーザによって装着されるとき、該近深度平面より該ユーザの眼から遠い、前述の実施例のいずれかに記載のシステム。
１０．該第１の深度平面は、近深度平面を備え、該第２の深度平面は、遠深度平面を備え、該遠深度平面は、該頭部搭載型ディスプレイが該ユーザによって装着されるとき、該近深度平面より該ユーザの眼から遠い、実施例１－８のいずれかに記載のシステム。
１１．該ディスプレイは、付加的画像コンテンツを該第２の深度平面に提示するように構成される、前述の実施例のいずれかに記載のシステム。
１２．該付加的画像は、選択されたオブジェクトである、実施例１１に記載のシステム。
１３．該第２の深度平面に提示される該オブジェクトの画像は、拡大される、前述の実施例のいずれかに記載のシステム。
１４．該第２の深度平面に提示される該オブジェクトの画像は、拡大されない、前述の実施例のいずれかに記載のシステム。
１５．該第２の深度平面に提示される該オブジェクトの画像は、サイズが低減される、実施例１５に記載のシステム。
１６．入力を該ユーザから受信するように構成される、該１つまたはそれを上回る入力デバイスは、頭部姿勢センサを備える、前述の実施例のいずれかに記載のシステム。
１７．該頭部姿勢センサは、加速度計またはＩＭＵを備える、実施例１６に記載のシステム。
１８．該頭部搭載型ディスプレイシステムは、該オブジェクトの画像を該中心領域内に提示するように構成される、前述の実施例のいずれかに記載のシステム。
１９．該頭部搭載型ディスプレイシステムは、該オブジェクトの画像を該周辺領域内に提示するように構成される、前述の実施例のいずれかに記載のシステム。
２０．該頭部搭載型ディスプレイシステムは、ユーザの正面の環境の少なくとも該部分の３Ｄ表現を構築し、環境の少なくとも該部分の表現を解釈するように構成され、該環境の該部分は、患者を含み、該頭部搭載型ディスプレイはさらに、患者と関連付けられた第１の構造を患者と関連付けられた第２の構造から区別するように構成される、前述の実施例のいずれかに記載のシステム。
２１．透明であって、ユーザの眼の正面の場所に配置される、該ディスプレイの少なくとも該部分は、１つまたはそれを上回る導波管を備える、前述の実施例のいずれかに記載のシステム。
２２．光を該１つまたはそれを上回る導波管の中に指向するように構成される、１つまたはそれを上回る光源を備え、導波管は、光をユーザの眼の中に指向するように構成される、実施例２１に記載のシステム。
２３．該１つまたはそれを上回る光源は、ファイバ走査プロジェクタを備える、実施例２１－２２のいずれかに記載のシステム。
２４．環境を監視するように構成される、１つまたはそれを上回るセンサをさらに備える、前述の実施例のいずれかに記載のシステム。
２５．該１つまたはそれを上回るセンサは、該環境を結像するように構成される、１つまたはそれを上回る外向きに面した画像捕捉デバイスを備える、実施例２４に記載のシステム。
２６．該環境を結像するように構成される、該１つまたはそれを上回る外向きに面した画像捕捉デバイスは、１つまたはそれを上回る外向きに面したカメラを備える、実施例２５に記載のシステム。
２７．距離測定デバイスをさらに備える、前述の実施例のいずれかに記載のシステム。
２８．該ユーザの眼の位置および／または移動を追跡するように構成される、眼追跡デバイスをさらに備える、前述の実施例のいずれかに記載のシステム。
２９．頭部搭載型ディスプレイは、ユーザの視野内のヒト組織の体積を推定するように構成される、前述の実施例のいずれかに記載のシステム。
３０．頭部搭載型ディスプレイは、環境内の２つのオブジェクト間の距離を測定するように構成される、前述の実施例のいずれかに記載のシステム。
３１．頭部搭載型ディスプレイは、ディスプレイ上に提示される第１の画像モダリティと第２の画像モダリティとの間でトグルするように構成される、前述の実施例のいずれかに記載のシステム。
３２．第１の画像モダリティは、ＭＲＩ走査を備える、実施例３１に記載のシステム。
３３．第２の画像モダリティは、超音波を備える、実施例３１－３２のいずれかに記載のシステム。
３４．第１の画像モダリティは、Ｘ線走査を備える、実施例３１－３３のいずれかに記載のシステム。
３５．超音波音波を生産するように適合される、電子エミッタをさらに備える、前述の実施例のいずれかに記載のシステム。
３６．超音波音波を電気信号に変換するように適合される、センサをさらに備える、前述の実施例のいずれかに記載のシステム。
３７．頭部搭載型ディスプレイは、ユーザが、仮想基準マーカをユーザの眼に対してユーザの正面の環境の一部上に設置することを可能にするように構成される、前述の実施例のいずれかに記載のシステム。
３８．頭部搭載型ディスプレイは、画像が環境内の実世界オブジェクトに添付されて現れるように、画像をディスプレイ上に投影するように構成される、前述の実施例のいずれかに記載のシステム。
３９．頭部搭載型ディスプレイは、仮想切断ガイドラインが切断されるべきヒト身体領域上にオーバーレイされるようにユーザに現れるように、仮想切断ガイドラインを表示するように構成される、または切断されるべき部分へのアクセスを与える、前述の実施例のいずれかに記載のシステム。
４０．仮想切断ガイドラインの見掛け場所は、患者の身体部分の位置に関連するように現れる、実施例３９に記載のシステム。
４１．頭部搭載型ディスプレイは、信号を放出し、ユーザの正面の環境の一部内のオブジェクトの位置に関するデータを取得するように構成される、前述の実施例のいずれかに記載のシステム。
４２．頭部搭載型ディスプレイは、オブジェクト場所のデータベースを使用して、ユーザの正面の環境の一部内のオブジェクトの位置を取得するように構成される、前述の実施例のいずれかに記載のシステム。
４３．頭部搭載型ディスプレイは、該オブジェクト場所のデータベースに基づいて、基準点を設定し、画像が基準点に対して固定されて現れるように、画像をユーザの眼の中に投影するように構成される、実施例４２に記載のシステム。
４４．頭部搭載型ディスプレイは、ユーザ入力に基づいて、オブジェクトの３Ｄ画像のビューを軸を中心として回転させるように構成される、前述の実施例のいずれかに記載のシステム。
４５．頭部搭載型ディスプレイは、ユーザ入力に基づいて、３Ｄオブジェクトの画像のビューを平行移動させるように構成される、前述の実施例のいずれかに記載のシステム。
４６．頭部搭載型ディスプレイは、オブジェクトの３Ｄ画像の第１のスライスを表示するように構成される、前述の実施例のいずれかに記載のシステム。
４７．頭部搭載型ディスプレイは、３Ｄ画像の第１のスライスの画像および第２のスライスの画像を通してシーケンス化するように構成される、実施例４６に記載のシステム。
４８．頭部搭載型ディスプレイは、頭部搭載型ディスプレイの第２のユーザが伝送される環境の該部分の該画像を視認し得るように、ユーザの正面の環境の一部の画像を伝送するように構成される、前述の実施例のいずれかに記載のシステム。
４９．頭部搭載型ディスプレイは、ユーザに医療手技におけるステップをアラートするように構成される、前述の実施例のいずれかに記載のシステム。
５０．頭部搭載型ディスプレイは、ユーザの医療パラメータを監視し、医療パラメータに基づいて、アラートを提供するように構成される、前述の実施例のいずれかに記載のシステム。
５１．ユーザの医療パラメータは、バイタルサインを含む、実施例５０に記載のシステム。
５２．頭部搭載型ディスプレイは、超音波を放出し、該超音波から生じる信号を測定するように構成され、頭部搭載型ディスプレイはさらに、信号に基づいて、超音波画像を形成するように構成される、前述の実施例のいずれかに記載のシステム。
５３．頭部搭載型ディスプレイは、ユーザにユーザの視野外のオブジェクトおよび／またはイベントをアラートするように構成される、前述の実施例のいずれかに記載のシステム。
５４．光を該ユーザの眼の中に指向し、画像を眼内に形成するように構成される、１つまたはそれを上回る光源をさらに備える、前述の実施例のいずれかに記載のシステム。
５５．該１つまたはそれを上回る光源は、ファイバ走査プロジェクタを備える、前述の実施例のいずれかに記載のシステム。
５６．頭部搭載型ディスプレイは、第１の画像モダリティと第１の画像モダリティと異なる第２の画像モダリティを組み合わせるように構成される、前述の実施例のいずれかに記載のシステム。
５７．第１の画像モダリティおよび第２の画像モダリティはそれぞれ、ＭＲＩ、ＣＴ、ＰＥＴ、ＭＲＡ、またはＣＴＡ走査からの画像を備える、実施例５６に記載のシステム。
５８．頭部搭載型ディスプレイは、第１および第２の画像モダリティの組み合わせられた画像を患者の実際の解剖学的構造にわたって整合させるように構成される、実施例５６または５７に記載のシステム。
１．光をユーザの眼に投影し、拡張現実画像コンテンツを表示するように構成される、頭部搭載型ディスプレイシステムであって、該ユーザの眼は、中心領域と、該中心領域を中心として配置される周辺領域を有する、視野を有し、
ユーザの頭部上に支持されるように構成される、フレームと、
フレーム上に配置される、ディスプレイであって、該ディスプレイは、画像コンテンツを複数の深度平面上でユーザに提示するように、光を該ユーザの眼の中に投影するように構成され、該ディスプレイの少なくとも一部は、１つまたはそれを上回る導波管を備え、該１つまたはそれを上回る導波管は、透明部分が、ユーザの正面の環境の一部からの光をユーザの眼に伝送し、ユーザの正面の環境の該部分のビューを提供するように、透明であって、ユーザが該頭部搭載型ディスプレイシステムを装着すると、ユーザの眼の正面の場所に配置され、ユーザの眼の視野の中心領域は、ユーザの正面の環境内の中心領域に対応し、ユーザの眼の視野の周辺領域は、ユーザの正面の環境内の周辺領域に対応する、ディスプレイと、
ユーザの正面の環境の少なくとも該部分を結像するように構成される、外向きに面した画像捕捉デバイスと、
入力を該ユーザから受信するように構成される、１つまたはそれを上回る入力デバイスと、
該ディスプレイと通信し、該ディスプレイ上での画像コンテンツの提示を制御する、処理電子機器と、
を備え、
該深度平面は、第１の深度平面と、第２の深度平面とを備え、該オブジェクトまでの該距離は、該頭部搭載型ディスプレイが該ユーザによって装着されるとき、該第２の深度平面より該第１の深度平面に対応し、
該頭部搭載型ディスプレイシステムは、該１つまたはそれを上回る入力デバイスによって受信された入力に基づいて、ユーザの視野内の環境内のオブジェクトを選択するように構成され、該外向きに面した画像捕捉デバイスは、該オブジェクトの画像を取得するように構成され、該ディスプレイは、該オブジェクトの画像を該第２の深度に提示するように構成される、
平面頭部搭載型ディスプレイシステム。
２．入力を該ユーザから受信するように構成される、該１つまたはそれを上回る入力デバイスは、該ユーザの眼を結像し、その移動を追跡するように配置される、内向きに面した眼追跡カメラを備える、実施例１に記載のシステム。
３．該１つまたはそれを上回るセンサは、該環境を結像するように構成される、１つまたはそれを上回る外向きに面した画像捕捉デバイスを備える、前述の実施例のいずれかに記載のシステム。
４．該環境を結像するように構成される、該１つまたはそれを上回る外向きに面した画像捕捉デバイスは、１つまたはそれを上回る外向きに面したカメラを備える、実施例３に記載のシステム。
５．ユーザの正面の環境の少なくとも該部分内のオブジェクトまでの距離を測定するように構成される、１つまたはそれを上回るセンサをさらに備える、前述の実施例のいずれかに記載のシステム。
６．該１つまたはそれを上回るセンサは、該オブジェクトの選択後、該オブジェクトまでの距離を測定するように構成される、実施例５に記載のシステム。
７．１つまたはそれを上回るセンサは、距離測定デバイスを備える、実施例５－６のいずれかに記載のシステム。
８．距離測定デバイスは、レーザ測距計を備える、実施例７に記載のシステム。
９．該第１の深度平面は、遠深度平面を備え、該第２の深度平面は、近深度平面を備え、該遠深度平面は、該頭部搭載型ディスプレイが該ユーザによって装着されるとき、該近深度平面より該ユーザの眼から遠い、前述の実施例のいずれかに記載のシステム。
１０．該第１の深度平面は、近深度平面を備え、該第２の深度平面は、遠深度平面を備え、該遠深度平面は、該頭部搭載型ディスプレイが該ユーザによって装着されるとき、該近深度平面より該ユーザの眼から遠い、実施例１－８のいずれかに記載のシステム。
１１．該ディスプレイは、付加的画像コンテンツを該第２の深度平面に提示するように構成される、前述の実施例のいずれかに記載のシステム。
１２．該付加的画像は、選択されたオブジェクトである、実施例１１に記載のシステム。
１３．該第２の深度平面に提示される該オブジェクトの画像は、拡大される、前述の実施例のいずれかに記載のシステム。
１４．該第２の深度平面に提示される該オブジェクトの画像は、拡大されない、前述の実施例のいずれかに記載のシステム。
１５．該第２の深度平面に提示される該オブジェクトの画像は、サイズが低減される、実施例１５に記載のシステム。
１６．入力を該ユーザから受信するように構成される、該１つまたはそれを上回る入力デバイスは、頭部姿勢センサを備える、前述の実施例のいずれかに記載のシステム。
１７．該頭部姿勢センサは、加速度計またはＩＭＵを備える、実施例１６に記載のシステム。
１８．該頭部搭載型ディスプレイシステムは、該オブジェクトの画像を該中心領域内に提示するように構成される、前述の実施例のいずれかに記載のシステム。
１９．該頭部搭載型ディスプレイシステムは、該オブジェクトの画像を該周辺領域内に提示するように構成される、前述の実施例のいずれかに記載のシステム。
２０．該頭部搭載型ディスプレイシステムは、ユーザの正面の環境の少なくとも該部分の３Ｄ表現を構築し、環境の少なくとも該部分の表現を解釈するように構成され、該環境の該部分は、患者を含み、該頭部搭載型ディスプレイはさらに、患者と関連付けられた第１の構造を患者と関連付けられた第２の構造から区別するように構成される、前述の実施例のいずれかに記載のシステム。
２１．透明であって、ユーザの眼の正面の場所に配置される、該ディスプレイの少なくとも該部分は、１つまたはそれを上回る導波管を備える、前述の実施例のいずれかに記載のシステム。
２２．光を該１つまたはそれを上回る導波管の中に指向するように構成される、１つまたはそれを上回る光源を備え、導波管は、光をユーザの眼の中に指向するように構成される、実施例２１に記載のシステム。
２３．該１つまたはそれを上回る光源は、ファイバ走査プロジェクタを備える、実施例２１－２２のいずれかに記載のシステム。
２４．環境を監視するように構成される、１つまたはそれを上回るセンサをさらに備える、前述の実施例のいずれかに記載のシステム。
２５．該１つまたはそれを上回るセンサは、該環境を結像するように構成される、１つまたはそれを上回る外向きに面した画像捕捉デバイスを備える、実施例２４に記載のシステム。
２６．該環境を結像するように構成される、該１つまたはそれを上回る外向きに面した画像捕捉デバイスは、１つまたはそれを上回る外向きに面したカメラを備える、実施例２５に記載のシステム。
２７．距離測定デバイスをさらに備える、前述の実施例のいずれかに記載のシステム。
２８．該ユーザの眼の位置および／または移動を追跡するように構成される、眼追跡デバイスをさらに備える、前述の実施例のいずれかに記載のシステム。
２９．頭部搭載型ディスプレイは、ユーザの視野内のヒト組織の体積を推定するように構成される、前述の実施例のいずれかに記載のシステム。
３０．頭部搭載型ディスプレイは、環境内の２つのオブジェクト間の距離を測定するように構成される、前述の実施例のいずれかに記載のシステム。
３１．頭部搭載型ディスプレイは、ディスプレイ上に提示される第１の画像モダリティと第２の画像モダリティとの間でトグルするように構成される、前述の実施例のいずれかに記載のシステム。
３２．第１の画像モダリティは、ＭＲＩ走査を備える、実施例３１に記載のシステム。
３３．第２の画像モダリティは、超音波を備える、実施例３１－３２のいずれかに記載のシステム。
３４．第１の画像モダリティは、Ｘ線走査を備える、実施例３１－３３のいずれかに記載のシステム。
３５．超音波音波を生産するように適合される、電子エミッタをさらに備える、前述の実施例のいずれかに記載のシステム。
３６．超音波音波を電気信号に変換するように適合される、センサをさらに備える、前述の実施例のいずれかに記載のシステム。
３７．頭部搭載型ディスプレイは、ユーザが、仮想基準マーカをユーザの眼に対してユーザの正面の環境の一部上に設置することを可能にするように構成される、前述の実施例のいずれかに記載のシステム。
３８．頭部搭載型ディスプレイは、画像が環境内の実世界オブジェクトに添付されて現れるように、画像をディスプレイ上に投影するように構成される、前述の実施例のいずれかに記載のシステム。
３９．頭部搭載型ディスプレイは、仮想切断ガイドラインが切断されるべきヒト身体領域上にオーバーレイされるようにユーザに現れるように、仮想切断ガイドラインを表示するように構成される、または切断されるべき部分へのアクセスを与える、前述の実施例のいずれかに記載のシステム。
４０．仮想切断ガイドラインの見掛け場所は、患者の身体部分の位置に関連するように現れる、実施例３９に記載のシステム。
４１．頭部搭載型ディスプレイは、信号を放出し、ユーザの正面の環境の一部内のオブジェクトの位置に関するデータを取得するように構成される、前述の実施例のいずれかに記載のシステム。
４２．頭部搭載型ディスプレイは、オブジェクト場所のデータベースを使用して、ユーザの正面の環境の一部内のオブジェクトの位置を取得するように構成される、前述の実施例のいずれかに記載のシステム。
４３．頭部搭載型ディスプレイは、該オブジェクト場所のデータベースに基づいて、基準点を設定し、画像が基準点に対して固定されて現れるように、画像をユーザの眼の中に投影するように構成される、実施例４２に記載のシステム。
４４．頭部搭載型ディスプレイは、ユーザ入力に基づいて、オブジェクトの３Ｄ画像のビューを軸を中心として回転させるように構成される、前述の実施例のいずれかに記載のシステム。
４５．頭部搭載型ディスプレイは、ユーザ入力に基づいて、３Ｄオブジェクトの画像のビューを平行移動させるように構成される、前述の実施例のいずれかに記載のシステム。
４６．頭部搭載型ディスプレイは、オブジェクトの３Ｄ画像の第１のスライスを表示するように構成される、前述の実施例のいずれかに記載のシステム。
４７．頭部搭載型ディスプレイは、３Ｄ画像の第１のスライスの画像および第２のスライスの画像を通してシーケンス化するように構成される、実施例４６に記載のシステム。
４８．頭部搭載型ディスプレイは、頭部搭載型ディスプレイの第２のユーザが伝送される環境の該部分の該画像を視認し得るように、ユーザの正面の環境の一部の画像を伝送するように構成される、前述の実施例のいずれかに記載のシステム。
４９．頭部搭載型ディスプレイは、ユーザに医療手技におけるステップをアラートするように構成される、前述の実施例のいずれかに記載のシステム。
５０．頭部搭載型ディスプレイは、ユーザの医療パラメータを監視し、医療パラメータに基づいて、アラートを提供するように構成される、前述の実施例のいずれかに記載のシステム。
５１．ユーザの医療パラメータは、バイタルサインを含む、実施例５０に記載のシステム。
５２．頭部搭載型ディスプレイは、超音波を放出し、該超音波から生じる信号を測定するように構成され、頭部搭載型ディスプレイはさらに、信号に基づいて、超音波画像を形成するように構成される、前述の実施例のいずれかに記載のシステム。
５３．頭部搭載型ディスプレイは、ユーザにユーザの視野外のオブジェクトおよび／またはイベントをアラートするように構成される、前述の実施例のいずれかに記載のシステム。
５４．光を該ユーザの眼の中に指向し、画像を眼内に形成するように構成される、１つまたはそれを上回る光源をさらに備える、前述の実施例のいずれかに記載のシステム。
５５．該１つまたはそれを上回る光源は、ファイバ走査プロジェクタを備える、前述の実施例のいずれかに記載のシステム。
５６．頭部搭載型ディスプレイは、第１の画像モダリティと第１の画像モダリティと異なる第２の画像モダリティを組み合わせるように構成される、前述の実施例のいずれかに記載のシステム。
５７．第１の画像モダリティおよび第２の画像モダリティはそれぞれ、ＭＲＩ、ＣＴ、ＰＥＴ、ＭＲＡ、またはＣＴＡ走査からの画像を備える、実施例５６に記載のシステム。
５８．頭部搭載型ディスプレイは、第１および第２の画像モダリティの組み合わせられた画像を患者の実際の解剖学的構造にわたって整合させるように構成される、実施例５６または５７に記載のシステム。
【0017】
実施例セットＩＶ
１．光をユーザの眼に投影し、拡張現実画像コンテンツを表示するように構成される、頭部搭載型ディスプレイシステムであって、該ユーザの眼は、中心領域と、該中心領域を中心として配置される周辺領域を有する、視野を有し、
ユーザの頭部上に支持されるように構成される、フレームと、
フレーム上に配置される、ディスプレイであって、該ディスプレイは、画像コンテンツを該ユーザの視野の中心領域に提示するように、光を該ユーザの眼の中に投影するように構成され、該ディスプレイの少なくとも一部は、透明部分が、ユーザの正面の環境の一部からの光をユーザの眼に伝送し、ユーザの正面の環境の該部分のビューを提供するように、透明であって、ユーザが該頭部搭載型ディスプレイシステムを装着すると、ユーザの眼の正面の場所に配置される、ディスプレイと、
環境の照明条件を捕捉するように構成される、１つまたはそれを上回る捕捉デバイスと、
該ディスプレイと通信し、該ディスプレイ上での画像コンテンツの提示を制御する、処理電子機器と、
を備え、該頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて増強される、画像コンテンツをユーザの視野に提示するように構成される、頭部搭載型ディスプレイシステム。
２．光を該ユーザの眼の中に指向し、画像を眼内に形成するように構成される、１つまたはそれを上回る光源をさらに備える、実施例１に記載のシステム。
３．透明であって、ユーザの眼の正面の場所に配置される、該ディスプレイの少なくとも該部分は、光をユーザに投影するように構成される、１つまたはそれを上回る導波管を備える、実施例１または２に記載のシステム。
４．該１つまたはそれを上回る光源は、光を該１つまたはそれを上回る導波管の中に指向するように構成される、実施例３に記載のシステム。
５．該光源は、ファイバ走査プロジェクタを備える、実施例２－４のいずれかに記載のシステム。
６．１つまたはそれを上回る捕捉デバイスは、１つまたはそれを上回る画像捕捉デバイスを備える、実施例１－５のいずれかに記載のシステム。
７．１つまたはそれを上回る画像捕捉デバイスは、１つまたはそれを上回るカメラを備える、実施例６に記載のシステム。
８．１つまたはそれを上回る捕捉デバイスは、１つまたはそれを上回る光センサを備える、実施例１－５のいずれかに記載のシステム。
９．１つまたはそれを上回る光センサは、１つまたはそれを上回る照度計を備える、実施例８に記載のシステム。
１０．１つまたはそれを上回る捕捉デバイスは、環境の輝度を測定するように構成される、前述の実施例のいずれかに記載のシステム。
１１．距離測定デバイスをさらに備える、前述の実施例のいずれかに記載のシステム。
１２．該距離測定デバイスは、レーザ測距計を備える、実施例１１に記載のシステム。
１３．該ユーザの眼の位置および／または移動を追跡するように構成される、眼追跡デバイスをさらに備える、前述の実施例のいずれかに記載のシステム。
１４．該ユーザの眼を結像するように構成される、１つまたはそれを上回る内向きに面した画像捕捉デバイスをさらに備える、実施例１－１３のいずれかに記載のシステム。
１５．頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツを拡大するように構成される、前述の実施例のいずれかに記載のシステム。
１６．該拡大は、少なくとも部分的に、眼の分解能に基づく、実施例１５に記載のシステム。
１７．頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツ内の明度を増加させるように構成される、前述の実施例のいずれかに記載のシステム。
１８．頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツ内のコントラストを増加させるように構成される、前述の実施例のいずれかに記載のシステム。
１９．頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツ内の色飽和を増加させるように構成される、前述の実施例のいずれかに記載のシステム。
２０．頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツを鮮明化するように構成される、前述の実施例のいずれかに記載のシステム。
２１．鮮明化することは、少なくとも部分的に、環境の照明条件に基づいて、縁増強特徴を画像コンテンツ内に追加することを含む、実施例２０に記載のシステム。
２２．頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツのカラーバランスを偏移させるように構成される、前述の実施例のいずれかに記載のシステム。
２３．システムは、アラートをユーザに提供し、画像コンテンツが増強されたことを示すように構成される、前述の実施例のいずれかに記載のシステム。
２４．アラートは、視覚的アラートである、実施例２３に記載のシステム。
２５．アラートは、聴覚的アラートである、実施例２３に記載のシステム。
２６．光をユーザの眼に投影し、拡張現実画像コンテンツを表示するように構成される、頭部搭載型ディスプレイシステムであって、該ユーザの眼は、中心領域と、該中心領域を中心として配置される周辺領域を有する、視野を有し、
ユーザの頭部上に支持されるように構成される、フレームと、
フレーム上に配置される、ディスプレイであって、該ディスプレイは、画像コンテンツを該ユーザの視野の中心領域に提示するように、光を該ユーザの眼の中に投影するように構成され、該ディスプレイの少なくとも一部は、透明部分が、ユーザの正面の環境の一部からの光をユーザの眼に伝送し、ユーザの正面の環境の該部分のビューを提供するように、透明であって、ユーザが該頭部搭載型ディスプレイシステムを装着すると、ユーザの眼の正面の場所に配置される、ディスプレイと、
環境の照明条件を捕捉するように構成される、１つまたはそれを上回る捕捉デバイスと、
該ディスプレイと通信し、該ディスプレイ上での画像コンテンツの提示を制御する、処理電子機器と、
を備え、該頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて強調解除される、画像コンテンツをユーザの視野に提示するように構成される、頭部搭載型ディスプレイシステム。
２７．光を該ユーザの眼の中に指向し、画像を眼内に形成するように構成される、１つまたはそれを上回る光源をさらに備える、実施例２６に記載のシステム。
２８．透明であって、ユーザの眼の正面の場所に配置される、該ディスプレイの少なくとも該部分は、光をユーザに投影するように構成される、１つまたはそれを上回る導波管を備える、実施例２６または２７に記載のシステム。
２９．該１つまたはそれを上回る光源は、光を該１つまたはそれを上回る導波管の中に指向するように構成される、実施例２８に記載のシステム。
３０．該光源は、ファイバ走査プロジェクタを備える、実施例２７－２９のいずれかに記載のシステム。
３１．１つまたはそれを上回る捕捉デバイスは、１つまたはそれを上回る画像捕捉デバイスを備える、実施例２６－３０のいずれかに記載のシステム。
３２．１つまたはそれを上回る画像捕捉デバイスは、１つまたはそれを上回るカメラを備える、実施例３１に記載のシステム。
３３．１つまたはそれを上回る捕捉デバイスは、１つまたはそれを上回る光センサを備える、実施例２６－３０のいずれかに記載のシステム。
３４．１つまたはそれを上回る光センサは、１つまたはそれを上回る照度計を備える、実施例３３に記載のシステム。
３５．１つまたはそれを上回る捕捉デバイスは、環境の輝度を測定するように構成される、実施例２６－３４のいずれかに記載のシステム。
３６．距離測定デバイスをさらに備える、実施例２６－３５のいずれかに記載のシステム。
３７．該距離測定デバイスは、レーザ測距計を備える、実施例３６に記載のシステム。
３８．該ユーザの眼の位置および／または移動を追跡するように構成される、眼追跡デバイスをさらに備える、実施例２６－３７のいずれかに記載のシステム。
３９．該ユーザの眼を結像するように構成される、１つまたはそれを上回る内向きに面した画像捕捉デバイスをさらに備える、実施例２６－３８のいずれかに記載のシステム。
４０．頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツのサイズを低減させるように構成される、実施例２６－３９のいずれかに記載のシステム。
４１．該サイズ低減は、少なくとも部分的に、眼の分解能に基づく、実施例４０に記載のシステム。
４２．頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツを暗化または減衰させるように構成される、実施例２６－４１のいずれかに記載のシステム。
４３．頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツ内のコントラストを低減させるように構成される、実施例２６－４２のいずれかに記載のシステム。
４４．頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツ内の色飽和を減少させるように構成される、実施例２６－４３のいずれかに記載のシステム。
４５．頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツの鮮明度を減少させるように構成される、実施例２６－４４のいずれかに記載のシステム。
４６．鮮明度を減少させることは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツ内の特徴の縁を増強解除することを含む、実施例４５に記載のシステム。
４７．頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツのカラーバランスを偏移させるように構成される、実施例２６－４６のいずれかに記載のシステム。
４８．頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツをぼかすように構成される、実施例２６－４７のいずれかに記載のシステム。
４９．該ぼかしは、同一色を使用して、該画像コンテンツをぼかすことを含む、実施例４８に記載のシステム。
５０．システムは、アラートをユーザに提供し、画像コンテンツが強調解除されたことを示すように構成される、実施例２６－４９のいずれかに記載のシステム。
５１．アラートは、視覚的アラートである、実施例５０に記載のシステム。
５２．アラートは、聴覚的アラートである、実施例５０に記載のシステム。
５３．該頭部搭載型ディスプレイシステムは、ユーザの正面の環境の少なくとも該部分の３Ｄ表現を構築し、環境の少なくとも該部分の表現を解釈するように構成され、該環境の該部分は、患者を含み、該頭部搭載型ディスプレイはさらに、患者と関連付けられた第１の構造を患者と関連付けられた第２の構造から区別するように構成される、前述の実施例のいずれかに記載のシステム。
５４．透明であって、ユーザの眼の正面の場所に配置される、該ディスプレイの少なくとも該部分は、１つまたはそれを上回る導波管を備える、前述の実施例のいずれかに記載のシステム。
５５．光を該１つまたはそれを上回る導波管の中に指向するように構成される、１つまたはそれを上回る光源を備え、導波管は、光をユーザの眼の中に指向するように構成される、実施例５４に記載のシステム。
５６．該１つまたはそれを上回る光源は、ファイバ走査プロジェクタを備える、実施例５４－５５のいずれかに記載のシステム。
５７．環境を監視するように構成される、１つまたはそれを上回るセンサをさらに備える、前述の実施例のいずれかに記載のシステム。
５８．該１つまたはそれを上回るセンサは、該環境を結像するように構成される、１つまたはそれを上回る外向きに面した画像捕捉デバイスを備える、実施例５７に記載のシステム。
５９．該環境を結像するように構成される、該１つまたはそれを上回る外向きに面した画像捕捉デバイスは、１つまたはそれを上回る外向きに面したカメラを備える、実施例５８に記載のシステム。
６０．距離測定デバイスをさらに備える、前述の実施例のいずれかに記載のシステム。
６１．該ユーザの眼の位置および／または移動を追跡するように構成される、眼追跡デバイスをさらに備える、前述の実施例のいずれかに記載のシステム。
６２．頭部搭載型ディスプレイは、ユーザの視野内のヒト組織の体積を推定するように構成される、前述の実施例のいずれかに記載のシステム。
６３．頭部搭載型ディスプレイは、環境内の２つのオブジェクト間の距離を測定するように構成される、前述の実施例のいずれかに記載のシステム。
６４．頭部搭載型ディスプレイは、ディスプレイ上に提示される第１の画像モダリティと第２の画像モダリティとの間でトグルするように構成される、前述の実施例のいずれかに記載のシステム。
６５．第１の画像モダリティは、ＭＲＩ走査を備える、実施例６４に記載のシステム。
６６．第２の画像モダリティは、超音波を備える、実施例６４－６５のいずれかに記載のシステム。
６７．第１の画像モダリティは、Ｘ線走査を備える、実施例６４－６６のいずれかに記載のシステム。
６８．超音波音波を生産するように適合される、電子エミッタをさらに備える、前述の実施例のいずれかに記載のシステム。
６９．超音波音波を電気信号に変換するように適合される、センサをさらに備える、前述の実施例のいずれかに記載のシステム。
７０．頭部搭載型ディスプレイは、ユーザが、仮想基準マーカをユーザの眼に対してユーザの正面の環境の一部上に設置することを可能にするように構成される、前述の実施例のいずれかに記載のシステム。
７１．頭部搭載型ディスプレイは、画像が環境内の実世界オブジェクトに添付されて現れるように、画像をディスプレイ上に投影するように構成される、前述の実施例のいずれかに記載のシステム。
７２．頭部搭載型ディスプレイは、仮想切断ガイドラインが切断されるべきヒト身体領域上にオーバーレイされるようにユーザに現れるように、仮想切断ガイドラインを表示するように構成される、または切断されるべき部分へのアクセスを与える、前述の実施例のいずれかに記載のシステム。
７３．仮想切断ガイドラインの見掛け場所は、患者の身体部分の位置に関連するように現れる、実施例７２に記載のシステム。
７４．頭部搭載型ディスプレイは、信号を放出し、ユーザの正面の環境の一部内のオブジェクトの位置に関するデータを取得するように構成される、前述の実施例のいずれかに記載のシステム。
７５．頭部搭載型ディスプレイは、オブジェクト場所のデータベースを使用して、ユーザの正面の環境の一部内のオブジェクトの位置を取得するように構成される、前述の実施例のいずれかに記載のシステム。
７６．頭部搭載型ディスプレイは、該オブジェクト場所のデータベースに基づいて、基準点を設定し、画像が基準点に対して固定されて現れるように、画像をユーザの眼の中に投影するように構成される、実施例７５に記載のシステム。
７７．頭部搭載型ディスプレイは、ユーザ入力に基づいて、オブジェクトの３Ｄ画像のビューを軸を中心として回転させるように構成される、前述の実施例のいずれかに記載のシステム。
７８．頭部搭載型ディスプレイは、ユーザ入力に基づいて、３Ｄオブジェクトの画像のビューを平行移動させるように構成される、前述の実施例のいずれかに記載のシステム。
７９．頭部搭載型ディスプレイは、オブジェクトの３Ｄ画像の第１のスライスを表示するように構成される、前述の実施例のいずれかに記載のシステム。
８０．頭部搭載型ディスプレイは、３Ｄ画像の第１のスライスの画像および第２のスライスの画像を通してシーケンス化するように構成される、実施例７９に記載のシステム。
８１．頭部搭載型ディスプレイは、頭部搭載型ディスプレイの第２のユーザが伝送される環境の該部分の該画像を視認し得るように、ユーザの正面の環境の一部の画像を伝送するように構成される、前述の実施例のいずれかに記載のシステム。
８２．頭部搭載型ディスプレイは、ユーザに医療手技におけるステップをアラートするように構成される、前述の実施例のいずれかに記載のシステム。
８３．頭部搭載型ディスプレイは、ユーザの医療パラメータを監視し、医療パラメータに基づいて、アラートを提供するように構成される、前述の実施例のいずれかに記載のシステム。
８４．ユーザの医療パラメータは、バイタルサインを含む、実施例８３に記載のシステム。
８５．頭部搭載型ディスプレイは、超音波を放出し、該超音波から生じる信号を測定するように構成され、頭部搭載型ディスプレイはさらに、信号に基づいて、超音波画像を形成するように構成される、前述の実施例のいずれかに記載のシステム。
８６．頭部搭載型ディスプレイは、ユーザにユーザの視野外のオブジェクトおよび／またはイベントをアラートするように構成される、前述の実施例のいずれかに記載のシステム。
８７．光を該ユーザの眼の中に指向し、画像を眼内に形成するように構成される、１つまたはそれを上回る光源をさらに備える、前述の実施例のいずれかに記載のシステム。
８８．該１つまたはそれを上回る光源は、ファイバ走査プロジェクタを備える、前述の実施例のいずれかに記載のシステム。
８９．コントラストを増加させることは、該画像コンテンツの少なくとも１つの色の明度または暗度を調節することを含む、実施例１８に記載のシステム。
９０．コントラストを増加させることは、黒色、灰色、白色、または他の色を該画像コンテンツの少なくとも１つの色に追加することを含む、実施例１８に記載のシステム。
９１．頭部搭載型ディスプレイは、ある程度の不透明度を提示される画像コンテンツの少なくとも近傍に提供するように構成される、前述の実施例のいずれかに記載のシステム。
９２．頭部搭載型ディスプレイは、第１の画像モダリティと第１の画像モダリティと異なる第２の画像モダリティを組み合わせるように構成される、前述の実施例のいずれかに記載のシステム。
９３．第１の画像モダリティおよび第２の画像モダリティはそれぞれ、ＭＲＩ、ＣＴ、ＰＥＴ、ＭＲＡ、またはＣＴＡ走査からの画像を備える、実施例９２に記載のシステム。
９４．頭部搭載型ディスプレイは、第１および第２の画像モダリティの組み合わせられた画像を患者の実際の解剖学的構造にわたって整合させるように構成される、実施例９２または９３に記載のシステム。
１．光をユーザの眼に投影し、拡張現実画像コンテンツを表示するように構成される、頭部搭載型ディスプレイシステムであって、該ユーザの眼は、中心領域と、該中心領域を中心として配置される周辺領域を有する、視野を有し、
ユーザの頭部上に支持されるように構成される、フレームと、
フレーム上に配置される、ディスプレイであって、該ディスプレイは、画像コンテンツを該ユーザの視野の中心領域に提示するように、光を該ユーザの眼の中に投影するように構成され、該ディスプレイの少なくとも一部は、透明部分が、ユーザの正面の環境の一部からの光をユーザの眼に伝送し、ユーザの正面の環境の該部分のビューを提供するように、透明であって、ユーザが該頭部搭載型ディスプレイシステムを装着すると、ユーザの眼の正面の場所に配置される、ディスプレイと、
環境の照明条件を捕捉するように構成される、１つまたはそれを上回る捕捉デバイスと、
該ディスプレイと通信し、該ディスプレイ上での画像コンテンツの提示を制御する、処理電子機器と、
を備え、該頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて増強される、画像コンテンツをユーザの視野に提示するように構成される、頭部搭載型ディスプレイシステム。
２．光を該ユーザの眼の中に指向し、画像を眼内に形成するように構成される、１つまたはそれを上回る光源をさらに備える、実施例１に記載のシステム。
３．透明であって、ユーザの眼の正面の場所に配置される、該ディスプレイの少なくとも該部分は、光をユーザに投影するように構成される、１つまたはそれを上回る導波管を備える、実施例１または２に記載のシステム。
４．該１つまたはそれを上回る光源は、光を該１つまたはそれを上回る導波管の中に指向するように構成される、実施例３に記載のシステム。
５．該光源は、ファイバ走査プロジェクタを備える、実施例２－４のいずれかに記載のシステム。
６．１つまたはそれを上回る捕捉デバイスは、１つまたはそれを上回る画像捕捉デバイスを備える、実施例１－５のいずれかに記載のシステム。
７．１つまたはそれを上回る画像捕捉デバイスは、１つまたはそれを上回るカメラを備える、実施例６に記載のシステム。
８．１つまたはそれを上回る捕捉デバイスは、１つまたはそれを上回る光センサを備える、実施例１－５のいずれかに記載のシステム。
９．１つまたはそれを上回る光センサは、１つまたはそれを上回る照度計を備える、実施例８に記載のシステム。
１０．１つまたはそれを上回る捕捉デバイスは、環境の輝度を測定するように構成される、前述の実施例のいずれかに記載のシステム。
１１．距離測定デバイスをさらに備える、前述の実施例のいずれかに記載のシステム。
１２．該距離測定デバイスは、レーザ測距計を備える、実施例１１に記載のシステム。
１３．該ユーザの眼の位置および／または移動を追跡するように構成される、眼追跡デバイスをさらに備える、前述の実施例のいずれかに記載のシステム。
１４．該ユーザの眼を結像するように構成される、１つまたはそれを上回る内向きに面した画像捕捉デバイスをさらに備える、実施例１－１３のいずれかに記載のシステム。
１５．頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツを拡大するように構成される、前述の実施例のいずれかに記載のシステム。
１６．該拡大は、少なくとも部分的に、眼の分解能に基づく、実施例１５に記載のシステム。
１７．頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツ内の明度を増加させるように構成される、前述の実施例のいずれかに記載のシステム。
１８．頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツ内のコントラストを増加させるように構成される、前述の実施例のいずれかに記載のシステム。
１９．頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツ内の色飽和を増加させるように構成される、前述の実施例のいずれかに記載のシステム。
２０．頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツを鮮明化するように構成される、前述の実施例のいずれかに記載のシステム。
２１．鮮明化することは、少なくとも部分的に、環境の照明条件に基づいて、縁増強特徴を画像コンテンツ内に追加することを含む、実施例２０に記載のシステム。
２２．頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツのカラーバランスを偏移させるように構成される、前述の実施例のいずれかに記載のシステム。
２３．システムは、アラートをユーザに提供し、画像コンテンツが増強されたことを示すように構成される、前述の実施例のいずれかに記載のシステム。
２４．アラートは、視覚的アラートである、実施例２３に記載のシステム。
２５．アラートは、聴覚的アラートである、実施例２３に記載のシステム。
２６．光をユーザの眼に投影し、拡張現実画像コンテンツを表示するように構成される、頭部搭載型ディスプレイシステムであって、該ユーザの眼は、中心領域と、該中心領域を中心として配置される周辺領域を有する、視野を有し、
ユーザの頭部上に支持されるように構成される、フレームと、
フレーム上に配置される、ディスプレイであって、該ディスプレイは、画像コンテンツを該ユーザの視野の中心領域に提示するように、光を該ユーザの眼の中に投影するように構成され、該ディスプレイの少なくとも一部は、透明部分が、ユーザの正面の環境の一部からの光をユーザの眼に伝送し、ユーザの正面の環境の該部分のビューを提供するように、透明であって、ユーザが該頭部搭載型ディスプレイシステムを装着すると、ユーザの眼の正面の場所に配置される、ディスプレイと、
環境の照明条件を捕捉するように構成される、１つまたはそれを上回る捕捉デバイスと、
該ディスプレイと通信し、該ディスプレイ上での画像コンテンツの提示を制御する、処理電子機器と、
を備え、該頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて強調解除される、画像コンテンツをユーザの視野に提示するように構成される、頭部搭載型ディスプレイシステム。
２７．光を該ユーザの眼の中に指向し、画像を眼内に形成するように構成される、１つまたはそれを上回る光源をさらに備える、実施例２６に記載のシステム。
２８．透明であって、ユーザの眼の正面の場所に配置される、該ディスプレイの少なくとも該部分は、光をユーザに投影するように構成される、１つまたはそれを上回る導波管を備える、実施例２６または２７に記載のシステム。
２９．該１つまたはそれを上回る光源は、光を該１つまたはそれを上回る導波管の中に指向するように構成される、実施例２８に記載のシステム。
３０．該光源は、ファイバ走査プロジェクタを備える、実施例２７－２９のいずれかに記載のシステム。
３１．１つまたはそれを上回る捕捉デバイスは、１つまたはそれを上回る画像捕捉デバイスを備える、実施例２６－３０のいずれかに記載のシステム。
３２．１つまたはそれを上回る画像捕捉デバイスは、１つまたはそれを上回るカメラを備える、実施例３１に記載のシステム。
３３．１つまたはそれを上回る捕捉デバイスは、１つまたはそれを上回る光センサを備える、実施例２６－３０のいずれかに記載のシステム。
３４．１つまたはそれを上回る光センサは、１つまたはそれを上回る照度計を備える、実施例３３に記載のシステム。
３５．１つまたはそれを上回る捕捉デバイスは、環境の輝度を測定するように構成される、実施例２６－３４のいずれかに記載のシステム。
３６．距離測定デバイスをさらに備える、実施例２６－３５のいずれかに記載のシステム。
３７．該距離測定デバイスは、レーザ測距計を備える、実施例３６に記載のシステム。
３８．該ユーザの眼の位置および／または移動を追跡するように構成される、眼追跡デバイスをさらに備える、実施例２６－３７のいずれかに記載のシステム。
３９．該ユーザの眼を結像するように構成される、１つまたはそれを上回る内向きに面した画像捕捉デバイスをさらに備える、実施例２６－３８のいずれかに記載のシステム。
４０．頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツのサイズを低減させるように構成される、実施例２６－３９のいずれかに記載のシステム。
４１．該サイズ低減は、少なくとも部分的に、眼の分解能に基づく、実施例４０に記載のシステム。
４２．頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツを暗化または減衰させるように構成される、実施例２６－４１のいずれかに記載のシステム。
４３．頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツ内のコントラストを低減させるように構成される、実施例２６－４２のいずれかに記載のシステム。
４４．頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツ内の色飽和を減少させるように構成される、実施例２６－４３のいずれかに記載のシステム。
４５．頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツの鮮明度を減少させるように構成される、実施例２６－４４のいずれかに記載のシステム。
４６．鮮明度を減少させることは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツ内の特徴の縁を増強解除することを含む、実施例４５に記載のシステム。
４７．頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツのカラーバランスを偏移させるように構成される、実施例２６－４６のいずれかに記載のシステム。
４８．頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツをぼかすように構成される、実施例２６－４７のいずれかに記載のシステム。
４９．該ぼかしは、同一色を使用して、該画像コンテンツをぼかすことを含む、実施例４８に記載のシステム。
５０．システムは、アラートをユーザに提供し、画像コンテンツが強調解除されたことを示すように構成される、実施例２６－４９のいずれかに記載のシステム。
５１．アラートは、視覚的アラートである、実施例５０に記載のシステム。
５２．アラートは、聴覚的アラートである、実施例５０に記載のシステム。
５３．該頭部搭載型ディスプレイシステムは、ユーザの正面の環境の少なくとも該部分の３Ｄ表現を構築し、環境の少なくとも該部分の表現を解釈するように構成され、該環境の該部分は、患者を含み、該頭部搭載型ディスプレイはさらに、患者と関連付けられた第１の構造を患者と関連付けられた第２の構造から区別するように構成される、前述の実施例のいずれかに記載のシステム。
５４．透明であって、ユーザの眼の正面の場所に配置される、該ディスプレイの少なくとも該部分は、１つまたはそれを上回る導波管を備える、前述の実施例のいずれかに記載のシステム。
５５．光を該１つまたはそれを上回る導波管の中に指向するように構成される、１つまたはそれを上回る光源を備え、導波管は、光をユーザの眼の中に指向するように構成される、実施例５４に記載のシステム。
５６．該１つまたはそれを上回る光源は、ファイバ走査プロジェクタを備える、実施例５４－５５のいずれかに記載のシステム。
５７．環境を監視するように構成される、１つまたはそれを上回るセンサをさらに備える、前述の実施例のいずれかに記載のシステム。
５８．該１つまたはそれを上回るセンサは、該環境を結像するように構成される、１つまたはそれを上回る外向きに面した画像捕捉デバイスを備える、実施例５７に記載のシステム。
５９．該環境を結像するように構成される、該１つまたはそれを上回る外向きに面した画像捕捉デバイスは、１つまたはそれを上回る外向きに面したカメラを備える、実施例５８に記載のシステム。
６０．距離測定デバイスをさらに備える、前述の実施例のいずれかに記載のシステム。
６１．該ユーザの眼の位置および／または移動を追跡するように構成される、眼追跡デバイスをさらに備える、前述の実施例のいずれかに記載のシステム。
６２．頭部搭載型ディスプレイは、ユーザの視野内のヒト組織の体積を推定するように構成される、前述の実施例のいずれかに記載のシステム。
６３．頭部搭載型ディスプレイは、環境内の２つのオブジェクト間の距離を測定するように構成される、前述の実施例のいずれかに記載のシステム。
６４．頭部搭載型ディスプレイは、ディスプレイ上に提示される第１の画像モダリティと第２の画像モダリティとの間でトグルするように構成される、前述の実施例のいずれかに記載のシステム。
６５．第１の画像モダリティは、ＭＲＩ走査を備える、実施例６４に記載のシステム。
６６．第２の画像モダリティは、超音波を備える、実施例６４－６５のいずれかに記載のシステム。
６７．第１の画像モダリティは、Ｘ線走査を備える、実施例６４－６６のいずれかに記載のシステム。
６８．超音波音波を生産するように適合される、電子エミッタをさらに備える、前述の実施例のいずれかに記載のシステム。
６９．超音波音波を電気信号に変換するように適合される、センサをさらに備える、前述の実施例のいずれかに記載のシステム。
７０．頭部搭載型ディスプレイは、ユーザが、仮想基準マーカをユーザの眼に対してユーザの正面の環境の一部上に設置することを可能にするように構成される、前述の実施例のいずれかに記載のシステム。
７１．頭部搭載型ディスプレイは、画像が環境内の実世界オブジェクトに添付されて現れるように、画像をディスプレイ上に投影するように構成される、前述の実施例のいずれかに記載のシステム。
７２．頭部搭載型ディスプレイは、仮想切断ガイドラインが切断されるべきヒト身体領域上にオーバーレイされるようにユーザに現れるように、仮想切断ガイドラインを表示するように構成される、または切断されるべき部分へのアクセスを与える、前述の実施例のいずれかに記載のシステム。
７３．仮想切断ガイドラインの見掛け場所は、患者の身体部分の位置に関連するように現れる、実施例７２に記載のシステム。
７４．頭部搭載型ディスプレイは、信号を放出し、ユーザの正面の環境の一部内のオブジェクトの位置に関するデータを取得するように構成される、前述の実施例のいずれかに記載のシステム。
７５．頭部搭載型ディスプレイは、オブジェクト場所のデータベースを使用して、ユーザの正面の環境の一部内のオブジェクトの位置を取得するように構成される、前述の実施例のいずれかに記載のシステム。
７６．頭部搭載型ディスプレイは、該オブジェクト場所のデータベースに基づいて、基準点を設定し、画像が基準点に対して固定されて現れるように、画像をユーザの眼の中に投影するように構成される、実施例７５に記載のシステム。
７７．頭部搭載型ディスプレイは、ユーザ入力に基づいて、オブジェクトの３Ｄ画像のビューを軸を中心として回転させるように構成される、前述の実施例のいずれかに記載のシステム。
７８．頭部搭載型ディスプレイは、ユーザ入力に基づいて、３Ｄオブジェクトの画像のビューを平行移動させるように構成される、前述の実施例のいずれかに記載のシステム。
７９．頭部搭載型ディスプレイは、オブジェクトの３Ｄ画像の第１のスライスを表示するように構成される、前述の実施例のいずれかに記載のシステム。
８０．頭部搭載型ディスプレイは、３Ｄ画像の第１のスライスの画像および第２のスライスの画像を通してシーケンス化するように構成される、実施例７９に記載のシステム。
８１．頭部搭載型ディスプレイは、頭部搭載型ディスプレイの第２のユーザが伝送される環境の該部分の該画像を視認し得るように、ユーザの正面の環境の一部の画像を伝送するように構成される、前述の実施例のいずれかに記載のシステム。
８２．頭部搭載型ディスプレイは、ユーザに医療手技におけるステップをアラートするように構成される、前述の実施例のいずれかに記載のシステム。
８３．頭部搭載型ディスプレイは、ユーザの医療パラメータを監視し、医療パラメータに基づいて、アラートを提供するように構成される、前述の実施例のいずれかに記載のシステム。
８４．ユーザの医療パラメータは、バイタルサインを含む、実施例８３に記載のシステム。
８５．頭部搭載型ディスプレイは、超音波を放出し、該超音波から生じる信号を測定するように構成され、頭部搭載型ディスプレイはさらに、信号に基づいて、超音波画像を形成するように構成される、前述の実施例のいずれかに記載のシステム。
８６．頭部搭載型ディスプレイは、ユーザにユーザの視野外のオブジェクトおよび／またはイベントをアラートするように構成される、前述の実施例のいずれかに記載のシステム。
８７．光を該ユーザの眼の中に指向し、画像を眼内に形成するように構成される、１つまたはそれを上回る光源をさらに備える、前述の実施例のいずれかに記載のシステム。
８８．該１つまたはそれを上回る光源は、ファイバ走査プロジェクタを備える、前述の実施例のいずれかに記載のシステム。
８９．コントラストを増加させることは、該画像コンテンツの少なくとも１つの色の明度または暗度を調節することを含む、実施例１８に記載のシステム。
９０．コントラストを増加させることは、黒色、灰色、白色、または他の色を該画像コンテンツの少なくとも１つの色に追加することを含む、実施例１８に記載のシステム。
９１．頭部搭載型ディスプレイは、ある程度の不透明度を提示される画像コンテンツの少なくとも近傍に提供するように構成される、前述の実施例のいずれかに記載のシステム。
９２．頭部搭載型ディスプレイは、第１の画像モダリティと第１の画像モダリティと異なる第２の画像モダリティを組み合わせるように構成される、前述の実施例のいずれかに記載のシステム。
９３．第１の画像モダリティおよび第２の画像モダリティはそれぞれ、ＭＲＩ、ＣＴ、ＰＥＴ、ＭＲＡ、またはＣＴＡ走査からの画像を備える、実施例９２に記載のシステム。
９４．頭部搭載型ディスプレイは、第１および第２の画像モダリティの組み合わせられた画像を患者の実際の解剖学的構造にわたって整合させるように構成される、実施例９２または９３に記載のシステム。
【0018】
実施例セットＩＶＡ
１．光をユーザの眼に投影し、拡張現実画像コンテンツを表示するように構成される、頭部搭載型ディスプレイシステムであって、該ユーザの眼は、中心領域と、該中心領域を中心として配置される周辺領域を有する、視野を有し、
ユーザの頭部上に支持されるように構成される、フレームと、
フレーム上に配置される、ディスプレイであって、該ディスプレイは、画像コンテンツを該ユーザの視野の中心領域に提示するように、光を該ユーザの眼の中に投影するように構成され、該ディスプレイの少なくとも一部は、透明部分が、ユーザの正面の環境の一部からの光をユーザの眼に伝送し、ユーザの正面の環境の該部分のビューを提供するように、透明であって、ユーザが該頭部搭載型ディスプレイシステムを装着すると、ユーザの眼の正面の場所に配置される、ディスプレイと、
環境の照明条件を捕捉するように構成される、１つまたはそれを上回る捕捉デバイスと、
該ディスプレイと通信し、該ディスプレイ上での画像コンテンツの提示を制御する、処理電子機器と、
を備え、該頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて増強される、画像コンテンツをユーザの視野の中心領域の一部に提示するように、光をユーザの眼の場所に投影するように構成される、頭部搭載型ディスプレイシステム。
２．明所視照明条件下、画像コンテンツは、錐体の投影された光場所の密度に基づいて反比例して増強される、実施例１に記載のシステム。
３．環境の明所視照明条件は、輝度１０ｃｄ／ｍ２～１０８ｃｄ／ｍ２を有する、実施例２に記載のシステム。
４．暗所視照明条件下、画像コンテンツは、桿体の投影された光場所の密度に基づいて反比例して増強される、実施例１に記載のシステム。
５．環境の暗所視照明条件は、輝度１０－３．５ｃｄ／ｍ２～１０－６ｃｄ／ｍ２を有する、実施例４に記載のシステム。
６．薄明視照明条件下、画像コンテンツは、少なくとも部分的に、薄明視照明条件下で費やされた時間に基づいて増強される、実施例１に記載のシステム。
７．環境の薄明視照明条件は、輝度１０－３ｃｄ／ｍ２～１００．５ｃｄ／ｍ２を有する、実施例６に記載のシステム。
８．システムは、少なくとも部分的に、薄明視照明条件下で費やされた時間に基づいて、錐体または桿体がユーザの眼内で優勢であるかどうかを判定するように構成される、実施例６または７に記載のシステム。
９．画像コンテンツは、錐体がユーザの眼内で優勢であるとき、錐体の投影された光場所の密度に基づいて反比例して増強される、実施例６－８のいずれかに記載のシステム。
１０．画像コンテンツは、桿体がユーザの眼内で優勢であるとき、ユーザの眼の桿体の投影された光場所の密度に基づいて反比例して増強される、実施例６－８のいずれかに記載のシステム。
１１．システムは、照明条件下で費やされた時間を監視するためのタイマまたはクロックを備える、前述の実施例のいずれかに記載のシステム。
１２．光を該ユーザの眼の中に指向し、画像を眼内に形成するように構成される、１つまたはそれを上回る光源をさらに備える、前述の実施例のいずれかに記載のシステム。
１３．透明であって、ユーザの眼の正面の場所に配置される、該ディスプレイの少なくとも該部分は、光をユーザに投影するように構成される、１つまたはそれを上回る導波管を備える、前述の実施例のいずれかに記載のシステム。
１４．該１つまたはそれを上回る光源は、光を該１つまたはそれを上回る導波管の中に指向するように構成される、実施例１３に記載のシステム。
１５．該光源は、ファイバ走査プロジェクタを備える、実施例１２－１４のいずれかに記載のシステム。
１６．１つまたはそれを上回る捕捉デバイスは、１つまたはそれを上回る画像捕捉デバイスを備える、実施例１－１５のいずれかに記載のシステム。
１７．１つまたはそれを上回る画像捕捉デバイスは、１つまたはそれを上回るカメラを備える、実施例１６に記載のシステム。
１８．１つまたはそれを上回る捕捉デバイスは、１つまたはそれを上回る光センサを備える、実施例１－１５のいずれかに記載のシステム。
１９．１つまたはそれを上回る光センサは、１つまたはそれを上回る照度計を備える、実施例１８に記載のシステム。
２０．１つまたはそれを上回る捕捉デバイスは、環境の輝度を測定するように構成される、前述の実施例のいずれかに記載のシステム。
２１．１つまたはそれを上回る捕捉デバイスは、ピクセルのアレイを備える、検出器アレイを備え、検出器アレイは、ピクセルにわたって光レベルを積分し、照明条件を捕捉するように構成される、前述の実施例のいずれかに記載のシステム。
２２．１つまたはそれを上回る捕捉デバイスは、瞳孔サイズを検出し、照明条件を捕捉するように構成される、１つまたはそれを上回る内向きに面したカメラを備える、前述の実施例のいずれかに記載のシステム。
２３．距離測定デバイスをさらに備える、前述の実施例のいずれかに記載のシステム。
２４．該距離測定デバイスは、レーザ測距計を備える、実施例２３に記載のシステム。
２５．該ユーザの眼の位置および／または移動を追跡するように構成される、眼追跡デバイスをさらに備える、前述の実施例のいずれかに記載のシステム。
２６．該ユーザの眼を結像するように構成される、１つまたはそれを上回る内向きに面した画像捕捉デバイスをさらに備える、実施例１－２５のいずれかに記載のシステム。
２７．頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツを拡大するように構成される、前述の実施例のいずれかに記載のシステム。
２８．該拡大は、少なくとも部分的に、眼の分解能に基づく、実施例２７に記載のシステム。
２９．頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツ内の明度を増加させるように構成される、前述の実施例のいずれかに記載のシステム。
３０．頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツ内のコントラストを増加させるように構成される、前述の実施例のいずれかに記載のシステム。
３１．頭部搭載型ディスプレイシステムは、少なくとも部分的に、眼のコントラスト感度に基づいて、コントラストを増加させるように構成される、実施例３０に記載のシステム。
３２．頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツ内の色飽和を増加させるように構成される、前述の実施例のいずれかに記載のシステム。
３３．頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツを鮮明化するように構成される、前述の実施例のいずれかに記載のシステム。
３４．鮮明化することは、少なくとも部分的に、環境の照明条件に基づいて、縁増強特徴を画像コンテンツ内に追加することを含む、実施例３３に記載のシステム。
３５．頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツのカラーバランスを偏移させるように構成される、前述の実施例のいずれかに記載のシステム。
３６．システムは、アラートをユーザに提供し、画像コンテンツが増強されたことを示すように構成される、前述の実施例のいずれかに記載のシステム。
３７．アラートは、視覚的アラートである、実施例３６に記載のシステム。
３８．アラートは、聴覚的アラートである、実施例３６に記載のシステム。
３９．該頭部搭載型ディスプレイシステムは、ユーザの正面の環境の少なくとも該部分の３Ｄ表現を構築し、環境の少なくとも該部分の表現を解釈するように構成され、該環境の該部分は、患者を含み、該頭部搭載型ディスプレイはさらに、患者と関連付けられた第１の構造を患者と関連付けられた第２の構造から区別するように構成される、前述の実施例のいずれかに記載のシステム。
４０．環境を監視するように構成される、１つまたはそれを上回るセンサをさらに備える、前述の実施例のいずれかに記載のシステム。
４１．該１つまたはそれを上回るセンサは、該環境を結像するように構成される、１つまたはそれを上回る外向きに面した画像捕捉デバイスを備える、実施例４０に記載のシステム。
４２．該環境を結像するように構成される、該１つまたはそれを上回る外向きに面した画像捕捉デバイスは、１つまたはそれを上回る外向きに面したカメラを備える、実施例４１に記載のシステム。
４３．頭部搭載型ディスプレイは、ユーザの視野内のヒト組織の体積を推定するように構成される、前述の実施例のいずれかに記載のシステム。
４４．頭部搭載型ディスプレイは、環境内の２つのオブジェクト間の距離を測定するように構成される、前述の実施例のいずれかに記載のシステム。
４５．頭部搭載型ディスプレイは、ディスプレイ上に提示される第１の画像モダリティと第２の画像モダリティとの間でトグルするように構成される、前述の実施例のいずれかに記載のシステム。
４６．第１の画像モダリティは、ＭＲＩ走査を備える、実施例４５に記載のシステム。
４７．第２の画像モダリティは、超音波を備える、実施例４５－４６のいずれかに記載のシステム。
４８．第１の画像モダリティは、Ｘ線走査を備える、実施例４５－４７のいずれかに記載のシステム。
４９．超音波音波を生産するように適合される、電子エミッタをさらに備える、前述の実施例のいずれかに記載のシステム。
５０．超音波音波を電気信号に変換するように適合される、センサをさらに備える、前述の実施例のいずれかに記載のシステム。
５１．頭部搭載型ディスプレイは、ユーザが、仮想基準マーカをユーザの眼に対してユーザの正面の環境の一部上に設置することを可能にするように構成される、前述の実施例のいずれかに記載のシステム。
５２．頭部搭載型ディスプレイは、画像が環境内の実世界オブジェクトに添付されて現れるように、画像をディスプレイ上に投影するように構成される、前述の実施例のいずれかに記載のシステム。
５３．頭部搭載型ディスプレイは、仮想切断ガイドラインが切断されるべきヒト身体領域上にオーバーレイされるようにユーザに現れるように、仮想切断ガイドラインを表示するように構成される、または切断されるべき部分へのアクセスを与える、前述の実施例のいずれかに記載のシステム。
５４．仮想切断ガイドラインの見掛け場所は、患者の身体部分の位置に関連するように現れる、実施例５３に記載のシステム。
５５．頭部搭載型ディスプレイは、信号を放出し、ユーザの正面の環境の一部内のオブジェクトの位置に関するデータを取得するように構成される、前述の実施例のいずれかに記載のシステム。
５６．頭部搭載型ディスプレイは、オブジェクト場所のデータベースを使用して、ユーザの正面の環境の一部内のオブジェクトの位置を取得するように構成される、前述の実施例のいずれかに記載のシステム。
５７．頭部搭載型ディスプレイは、該オブジェクト場所のデータベースに基づいて、基準点を設定し、画像が基準点に対して固定されて現れるように、画像をユーザの眼の中に投影するように構成される、実施例５６に記載のシステム。
５８．頭部搭載型ディスプレイは、ユーザ入力に基づいて、オブジェクトの３Ｄ画像のビューを軸を中心として回転させるように構成される、前述の実施例のいずれかに記載のシステム。
５９．頭部搭載型ディスプレイは、ユーザ入力に基づいて、３Ｄオブジェクトの画像のビューを平行移動させるように構成される、前述の実施例のいずれかに記載のシステム。
６０．頭部搭載型ディスプレイは、オブジェクトの３Ｄ画像の第１のスライスを表示するように構成される、前述の実施例のいずれかに記載のシステム。
６１．頭部搭載型ディスプレイは、３Ｄ画像の第１のスライスの画像および第２のスライスの画像を通してシーケンス化するように構成される、実施例６０に記載のシステム。
６２．頭部搭載型ディスプレイは、頭部搭載型ディスプレイの第２のユーザが伝送される環境の該部分の該画像を視認し得るように、ユーザの正面の環境の一部の画像を伝送するように構成される、前述の実施例のいずれかに記載のシステム。
６３．頭部搭載型ディスプレイは、ユーザに医療手技におけるステップをアラートするように構成される、前述の実施例のいずれかに記載のシステム。
６４．頭部搭載型ディスプレイは、医療パラメータを監視し、医療パラメータに基づいて、アラートを提供するように構成される、前述の実施例のいずれかに記載のシステム。
６５．医療パラメータは、バイタルサインを含む、実施例６４に記載のシステム。
６６．頭部搭載型ディスプレイは、超音波を放出し、該超音波から生じる信号を測定するように構成され、頭部搭載型ディスプレイはさらに、信号に基づいて、超音波画像を形成するように構成される、前述の実施例のいずれかに記載のシステム。
６７．頭部搭載型ディスプレイは、ユーザにユーザの視野外のオブジェクトおよび／またはイベントをアラートするように構成される、前述の実施例のいずれかに記載のシステム。
６８．検出器アレイは、環境を結像するように構成される、外向きに面したカメラを備える、実施例２１に記載のシステム。
６９．該頭部搭載型ディスプレイシステムは、周辺領域の一部に提示される画像コンテンツに対して増強される、画像コンテンツをユーザの視野の中心領域の一部に提示するように、光をユーザの眼の場所に投影するように構成される、前述の実施例のいずれかに記載のシステム。
７０．該頭部搭載型ディスプレイシステムは、中心領域の別の部分に提示される画像コンテンツに対して増強される、画像コンテンツをユーザの視野の中心領域の一部に提示するように、光をユーザの眼の場所に投影するように構成される、前述の実施例のいずれかに記載のシステム。
７１．前システムは、少なくとも部分的に、環境の照明条件の時間的側面に基づいて、画像コンテンツをユーザの眼内に提示する方法を判定するように構成される、述の実施例のいずれかに記載のシステム。
７２．該ディスプレイは、該画像コンテンツが異なる深度から生じるかのように該画像コンテンツを提示するように、異なる発散量において光を該ユーザの眼の中に投影するように構成される、前述の実施例のいずれかに記載のシステム。
７３．コントラストを増加させることは、該画像コンテンツの少なくとも１つの色の明度または暗度を調節することを含む、実施例３０に記載のシステム。
７４．コントラストを増加させることは、黒色、灰色、白色、または他の色を該画像コンテンツの少なくとも１つの色に追加することを含む、実施例３０に記載のシステム。
７５．頭部搭載型ディスプレイは、ある程度の不透明度を提示される画像コンテンツの少なくとも近傍に提供するように構成される、前述の実施例のいずれかに記載のシステム。
７６．頭部搭載型ディスプレイは、第１の画像モダリティと第１の画像モダリティと異なる第２の画像モダリティを組み合わせるように構成される、前述の実施例のいずれかに記載のシステム。
７７．第１の画像モダリティおよび第２の画像モダリティはそれぞれ、ＭＲＩ、ＣＴ、ＰＥＴ、ＭＲＡ、またはＣＴＡ走査からの画像を備える、実施例７６に記載のシステム。
７８．頭部搭載型ディスプレイは、第１および第２の画像モダリティの組み合わせられた画像を患者の実際の解剖学的構造にわたって整合させるように構成される、実施例７６または７７に記載のシステム。
１．光をユーザの眼に投影し、拡張現実画像コンテンツを表示するように構成される、頭部搭載型ディスプレイシステムであって、該ユーザの眼は、中心領域と、該中心領域を中心として配置される周辺領域を有する、視野を有し、
ユーザの頭部上に支持されるように構成される、フレームと、
フレーム上に配置される、ディスプレイであって、該ディスプレイは、画像コンテンツを該ユーザの視野の中心領域に提示するように、光を該ユーザの眼の中に投影するように構成され、該ディスプレイの少なくとも一部は、透明部分が、ユーザの正面の環境の一部からの光をユーザの眼に伝送し、ユーザの正面の環境の該部分のビューを提供するように、透明であって、ユーザが該頭部搭載型ディスプレイシステムを装着すると、ユーザの眼の正面の場所に配置される、ディスプレイと、
環境の照明条件を捕捉するように構成される、１つまたはそれを上回る捕捉デバイスと、
該ディスプレイと通信し、該ディスプレイ上での画像コンテンツの提示を制御する、処理電子機器と、
を備え、該頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて増強される、画像コンテンツをユーザの視野の中心領域の一部に提示するように、光をユーザの眼の場所に投影するように構成される、頭部搭載型ディスプレイシステム。
２．明所視照明条件下、画像コンテンツは、錐体の投影された光場所の密度に基づいて反比例して増強される、実施例１に記載のシステム。
３．環境の明所視照明条件は、輝度１０ｃｄ／ｍ２～１０８ｃｄ／ｍ２を有する、実施例２に記載のシステム。
４．暗所視照明条件下、画像コンテンツは、桿体の投影された光場所の密度に基づいて反比例して増強される、実施例１に記載のシステム。
５．環境の暗所視照明条件は、輝度１０－３．５ｃｄ／ｍ２～１０－６ｃｄ／ｍ２を有する、実施例４に記載のシステム。
６．薄明視照明条件下、画像コンテンツは、少なくとも部分的に、薄明視照明条件下で費やされた時間に基づいて増強される、実施例１に記載のシステム。
７．環境の薄明視照明条件は、輝度１０－３ｃｄ／ｍ２～１００．５ｃｄ／ｍ２を有する、実施例６に記載のシステム。
８．システムは、少なくとも部分的に、薄明視照明条件下で費やされた時間に基づいて、錐体または桿体がユーザの眼内で優勢であるかどうかを判定するように構成される、実施例６または７に記載のシステム。
９．画像コンテンツは、錐体がユーザの眼内で優勢であるとき、錐体の投影された光場所の密度に基づいて反比例して増強される、実施例６－８のいずれかに記載のシステム。
１０．画像コンテンツは、桿体がユーザの眼内で優勢であるとき、ユーザの眼の桿体の投影された光場所の密度に基づいて反比例して増強される、実施例６－８のいずれかに記載のシステム。
１１．システムは、照明条件下で費やされた時間を監視するためのタイマまたはクロックを備える、前述の実施例のいずれかに記載のシステム。
１２．光を該ユーザの眼の中に指向し、画像を眼内に形成するように構成される、１つまたはそれを上回る光源をさらに備える、前述の実施例のいずれかに記載のシステム。
１３．透明であって、ユーザの眼の正面の場所に配置される、該ディスプレイの少なくとも該部分は、光をユーザに投影するように構成される、１つまたはそれを上回る導波管を備える、前述の実施例のいずれかに記載のシステム。
１４．該１つまたはそれを上回る光源は、光を該１つまたはそれを上回る導波管の中に指向するように構成される、実施例１３に記載のシステム。
１５．該光源は、ファイバ走査プロジェクタを備える、実施例１２－１４のいずれかに記載のシステム。
１６．１つまたはそれを上回る捕捉デバイスは、１つまたはそれを上回る画像捕捉デバイスを備える、実施例１－１５のいずれかに記載のシステム。
１７．１つまたはそれを上回る画像捕捉デバイスは、１つまたはそれを上回るカメラを備える、実施例１６に記載のシステム。
１８．１つまたはそれを上回る捕捉デバイスは、１つまたはそれを上回る光センサを備える、実施例１－１５のいずれかに記載のシステム。
１９．１つまたはそれを上回る光センサは、１つまたはそれを上回る照度計を備える、実施例１８に記載のシステム。
２０．１つまたはそれを上回る捕捉デバイスは、環境の輝度を測定するように構成される、前述の実施例のいずれかに記載のシステム。
２１．１つまたはそれを上回る捕捉デバイスは、ピクセルのアレイを備える、検出器アレイを備え、検出器アレイは、ピクセルにわたって光レベルを積分し、照明条件を捕捉するように構成される、前述の実施例のいずれかに記載のシステム。
２２．１つまたはそれを上回る捕捉デバイスは、瞳孔サイズを検出し、照明条件を捕捉するように構成される、１つまたはそれを上回る内向きに面したカメラを備える、前述の実施例のいずれかに記載のシステム。
２３．距離測定デバイスをさらに備える、前述の実施例のいずれかに記載のシステム。
２４．該距離測定デバイスは、レーザ測距計を備える、実施例２３に記載のシステム。
２５．該ユーザの眼の位置および／または移動を追跡するように構成される、眼追跡デバイスをさらに備える、前述の実施例のいずれかに記載のシステム。
２６．該ユーザの眼を結像するように構成される、１つまたはそれを上回る内向きに面した画像捕捉デバイスをさらに備える、実施例１－２５のいずれかに記載のシステム。
２７．頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツを拡大するように構成される、前述の実施例のいずれかに記載のシステム。
２８．該拡大は、少なくとも部分的に、眼の分解能に基づく、実施例２７に記載のシステム。
２９．頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツ内の明度を増加させるように構成される、前述の実施例のいずれかに記載のシステム。
３０．頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツ内のコントラストを増加させるように構成される、前述の実施例のいずれかに記載のシステム。
３１．頭部搭載型ディスプレイシステムは、少なくとも部分的に、眼のコントラスト感度に基づいて、コントラストを増加させるように構成される、実施例３０に記載のシステム。
３２．頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツ内の色飽和を増加させるように構成される、前述の実施例のいずれかに記載のシステム。
３３．頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツを鮮明化するように構成される、前述の実施例のいずれかに記載のシステム。
３４．鮮明化することは、少なくとも部分的に、環境の照明条件に基づいて、縁増強特徴を画像コンテンツ内に追加することを含む、実施例３３に記載のシステム。
３５．頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツのカラーバランスを偏移させるように構成される、前述の実施例のいずれかに記載のシステム。
３６．システムは、アラートをユーザに提供し、画像コンテンツが増強されたことを示すように構成される、前述の実施例のいずれかに記載のシステム。
３７．アラートは、視覚的アラートである、実施例３６に記載のシステム。
３８．アラートは、聴覚的アラートである、実施例３６に記載のシステム。
３９．該頭部搭載型ディスプレイシステムは、ユーザの正面の環境の少なくとも該部分の３Ｄ表現を構築し、環境の少なくとも該部分の表現を解釈するように構成され、該環境の該部分は、患者を含み、該頭部搭載型ディスプレイはさらに、患者と関連付けられた第１の構造を患者と関連付けられた第２の構造から区別するように構成される、前述の実施例のいずれかに記載のシステム。
４０．環境を監視するように構成される、１つまたはそれを上回るセンサをさらに備える、前述の実施例のいずれかに記載のシステム。
４１．該１つまたはそれを上回るセンサは、該環境を結像するように構成される、１つまたはそれを上回る外向きに面した画像捕捉デバイスを備える、実施例４０に記載のシステム。
４２．該環境を結像するように構成される、該１つまたはそれを上回る外向きに面した画像捕捉デバイスは、１つまたはそれを上回る外向きに面したカメラを備える、実施例４１に記載のシステム。
４３．頭部搭載型ディスプレイは、ユーザの視野内のヒト組織の体積を推定するように構成される、前述の実施例のいずれかに記載のシステム。
４４．頭部搭載型ディスプレイは、環境内の２つのオブジェクト間の距離を測定するように構成される、前述の実施例のいずれかに記載のシステム。
４５．頭部搭載型ディスプレイは、ディスプレイ上に提示される第１の画像モダリティと第２の画像モダリティとの間でトグルするように構成される、前述の実施例のいずれかに記載のシステム。
４６．第１の画像モダリティは、ＭＲＩ走査を備える、実施例４５に記載のシステム。
４７．第２の画像モダリティは、超音波を備える、実施例４５－４６のいずれかに記載のシステム。
４８．第１の画像モダリティは、Ｘ線走査を備える、実施例４５－４７のいずれかに記載のシステム。
４９．超音波音波を生産するように適合される、電子エミッタをさらに備える、前述の実施例のいずれかに記載のシステム。
５０．超音波音波を電気信号に変換するように適合される、センサをさらに備える、前述の実施例のいずれかに記載のシステム。
５１．頭部搭載型ディスプレイは、ユーザが、仮想基準マーカをユーザの眼に対してユーザの正面の環境の一部上に設置することを可能にするように構成される、前述の実施例のいずれかに記載のシステム。
５２．頭部搭載型ディスプレイは、画像が環境内の実世界オブジェクトに添付されて現れるように、画像をディスプレイ上に投影するように構成される、前述の実施例のいずれかに記載のシステム。
５３．頭部搭載型ディスプレイは、仮想切断ガイドラインが切断されるべきヒト身体領域上にオーバーレイされるようにユーザに現れるように、仮想切断ガイドラインを表示するように構成される、または切断されるべき部分へのアクセスを与える、前述の実施例のいずれかに記載のシステム。
５４．仮想切断ガイドラインの見掛け場所は、患者の身体部分の位置に関連するように現れる、実施例５３に記載のシステム。
５５．頭部搭載型ディスプレイは、信号を放出し、ユーザの正面の環境の一部内のオブジェクトの位置に関するデータを取得するように構成される、前述の実施例のいずれかに記載のシステム。
５６．頭部搭載型ディスプレイは、オブジェクト場所のデータベースを使用して、ユーザの正面の環境の一部内のオブジェクトの位置を取得するように構成される、前述の実施例のいずれかに記載のシステム。
５７．頭部搭載型ディスプレイは、該オブジェクト場所のデータベースに基づいて、基準点を設定し、画像が基準点に対して固定されて現れるように、画像をユーザの眼の中に投影するように構成される、実施例５６に記載のシステム。
５８．頭部搭載型ディスプレイは、ユーザ入力に基づいて、オブジェクトの３Ｄ画像のビューを軸を中心として回転させるように構成される、前述の実施例のいずれかに記載のシステム。
５９．頭部搭載型ディスプレイは、ユーザ入力に基づいて、３Ｄオブジェクトの画像のビューを平行移動させるように構成される、前述の実施例のいずれかに記載のシステム。
６０．頭部搭載型ディスプレイは、オブジェクトの３Ｄ画像の第１のスライスを表示するように構成される、前述の実施例のいずれかに記載のシステム。
６１．頭部搭載型ディスプレイは、３Ｄ画像の第１のスライスの画像および第２のスライスの画像を通してシーケンス化するように構成される、実施例６０に記載のシステム。
６２．頭部搭載型ディスプレイは、頭部搭載型ディスプレイの第２のユーザが伝送される環境の該部分の該画像を視認し得るように、ユーザの正面の環境の一部の画像を伝送するように構成される、前述の実施例のいずれかに記載のシステム。
６３．頭部搭載型ディスプレイは、ユーザに医療手技におけるステップをアラートするように構成される、前述の実施例のいずれかに記載のシステム。
６４．頭部搭載型ディスプレイは、医療パラメータを監視し、医療パラメータに基づいて、アラートを提供するように構成される、前述の実施例のいずれかに記載のシステム。
６５．医療パラメータは、バイタルサインを含む、実施例６４に記載のシステム。
６６．頭部搭載型ディスプレイは、超音波を放出し、該超音波から生じる信号を測定するように構成され、頭部搭載型ディスプレイはさらに、信号に基づいて、超音波画像を形成するように構成される、前述の実施例のいずれかに記載のシステム。
６７．頭部搭載型ディスプレイは、ユーザにユーザの視野外のオブジェクトおよび／またはイベントをアラートするように構成される、前述の実施例のいずれかに記載のシステム。
６８．検出器アレイは、環境を結像するように構成される、外向きに面したカメラを備える、実施例２１に記載のシステム。
６９．該頭部搭載型ディスプレイシステムは、周辺領域の一部に提示される画像コンテンツに対して増強される、画像コンテンツをユーザの視野の中心領域の一部に提示するように、光をユーザの眼の場所に投影するように構成される、前述の実施例のいずれかに記載のシステム。
７０．該頭部搭載型ディスプレイシステムは、中心領域の別の部分に提示される画像コンテンツに対して増強される、画像コンテンツをユーザの視野の中心領域の一部に提示するように、光をユーザの眼の場所に投影するように構成される、前述の実施例のいずれかに記載のシステム。
７１．前システムは、少なくとも部分的に、環境の照明条件の時間的側面に基づいて、画像コンテンツをユーザの眼内に提示する方法を判定するように構成される、述の実施例のいずれかに記載のシステム。
７２．該ディスプレイは、該画像コンテンツが異なる深度から生じるかのように該画像コンテンツを提示するように、異なる発散量において光を該ユーザの眼の中に投影するように構成される、前述の実施例のいずれかに記載のシステム。
７３．コントラストを増加させることは、該画像コンテンツの少なくとも１つの色の明度または暗度を調節することを含む、実施例３０に記載のシステム。
７４．コントラストを増加させることは、黒色、灰色、白色、または他の色を該画像コンテンツの少なくとも１つの色に追加することを含む、実施例３０に記載のシステム。
７５．頭部搭載型ディスプレイは、ある程度の不透明度を提示される画像コンテンツの少なくとも近傍に提供するように構成される、前述の実施例のいずれかに記載のシステム。
７６．頭部搭載型ディスプレイは、第１の画像モダリティと第１の画像モダリティと異なる第２の画像モダリティを組み合わせるように構成される、前述の実施例のいずれかに記載のシステム。
７７．第１の画像モダリティおよび第２の画像モダリティはそれぞれ、ＭＲＩ、ＣＴ、ＰＥＴ、ＭＲＡ、またはＣＴＡ走査からの画像を備える、実施例７６に記載のシステム。
７８．頭部搭載型ディスプレイは、第１および第２の画像モダリティの組み合わせられた画像を患者の実際の解剖学的構造にわたって整合させるように構成される、実施例７６または７７に記載のシステム。
【0019】
実施例セットＩＶＢ
１．光をユーザの眼に投影し、拡張現実画像コンテンツを表示するように構成される、頭部搭載型ディスプレイシステムであって、該ユーザの眼は、中心領域と、該中心領域を中心として配置される周辺領域を有する、視野を有し、
ユーザの頭部上に支持されるように構成される、フレームと、
フレーム上に配置される、ディスプレイであって、該ディスプレイは、画像コンテンツを該ユーザの視野の該周辺領域に提示するように、光を該ユーザの眼の中に投影するように構成され、該ディスプレイの少なくとも一部は、透明部分が、ユーザの正面の環境の一部からの光をユーザの眼に伝送し、ユーザの正面の環境の該部分のビューを提供するように、透明であって、ユーザが該頭部搭載型ディスプレイシステムを装着すると、ユーザの眼の正面の場所に配置される、ディスプレイと、
環境の照明条件を捕捉するように構成される、１つまたはそれを上回る捕捉デバイスと、
該ディスプレイと通信し、該ディスプレイ上での画像コンテンツの提示を制御する、処理電子機器と、
を備え、該頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて増強される、画像コンテンツをユーザの視野の周辺領域の一部に提示するように、光をユーザの眼の場所に投影するように構成される、頭部搭載型ディスプレイシステム。
２．明所視照明条件下、画像コンテンツは、錐体の投影された光場所の密度に基づいて反比例して増強される、実施例１に記載のシステム。
３．環境の明所視照明条件は、輝度１０ｃｄ／ｍ２～１０８ｃｄ／ｍ２を有する、実施例２に記載のシステム。
４．暗所視照明条件下、画像コンテンツは、桿体の投影された光場所の密度に基づいて反比例して増強される、実施例１に記載のシステム。
５．環境の暗所視照明条件は、輝度１０－３．５ｃｄ／ｍ２～１０－６ｃｄ／ｍ２を有する、実施例４に記載のシステム。
６．薄明視照明条件下、画像コンテンツは、少なくとも部分的に、薄明視照明条件下で費やされた時間に基づいて増強される、実施例１に記載のシステム。
７．環境の薄明視照明条件は、輝度１０－３ｃｄ／ｍ２～１００．５ｃｄ／ｍ２を有する、実施例６に記載のシステム。
８．システムは、少なくとも部分的に、薄明視照明条件下で費やされた時間に基づいて、錐体または桿体がユーザの眼内で優勢であるかどうかを判定するように構成される、実施例６または７に記載のシステム。
９．画像コンテンツは、錐体がユーザの眼内で優勢であるとき、錐体の投影された光場所の密度に基づいて反比例して増強される、実施例６－８のいずれかに記載のシステム。
１０．画像コンテンツは、桿体がユーザの眼内で優勢であるとき、ユーザの眼の桿体の投影された光場所の密度に基づいて反比例して増強される、実施例６－８のいずれかに記載のシステム。
１１．システムは、照明条件下で費やされた時間を監視するためのタイマまたはクロックを備える、前述の実施例のいずれかに記載のシステム。
１２．光を該ユーザの眼の中に指向し、画像を眼内に形成するように構成される、１つまたはそれを上回る光源をさらに備える、前述の実施例のいずれかに記載のシステム。
１３．透明であって、ユーザの眼の正面の場所に配置される、該ディスプレイの少なくとも該部分は、光をユーザに投影するように構成される、１つまたはそれを上回る導波管を備える、前述の実施例のいずれかに記載のシステム。
１４．該１つまたはそれを上回る光源は、光を該１つまたはそれを上回る導波管の中に指向するように構成される、実施例１３に記載のシステム。
１５．該光源は、ファイバ走査プロジェクタを備える、実施例１２－１４のいずれかに記載のシステム。
１６．１つまたはそれを上回る捕捉デバイスは、１つまたはそれを上回る画像捕捉デバイスを備える、実施例１－１５のいずれかに記載のシステム。
１７．１つまたはそれを上回る画像捕捉デバイスは、１つまたはそれを上回るカメラを備える、実施例１６に記載のシステム。
１８．１つまたはそれを上回る捕捉デバイスは、１つまたはそれを上回る光センサを備える、実施例１－１５のいずれかに記載のシステム。
１９．１つまたはそれを上回る光センサは、１つまたはそれを上回る照度計を備える、実施例１８に記載のシステム。
２０．１つまたはそれを上回る捕捉デバイスは、環境の輝度を測定するように構成される、前述の実施例のいずれかに記載のシステム。
２１．１つまたはそれを上回る捕捉デバイスは、ピクセルのアレイを備える、検出器アレイを備え、検出器アレイは、ピクセルにわたって光レベルを積分し、照明条件を捕捉するように構成される、前述の実施例のいずれかに記載のシステム。
２２．１つまたはそれを上回る捕捉デバイスは、瞳孔サイズを検出し、照明条件を捕捉するように構成される、１つまたはそれを上回る内向きに面したカメラを備える、前述の実施例のいずれかに記載のシステム。
２３．距離測定デバイスをさらに備える、前述の実施例のいずれかに記載のシステム。
２４．該距離測定デバイスは、レーザ測距計を備える、実施例２３に記載のシステム。
２５．該ユーザの眼の位置および／または移動を追跡するように構成される、眼追跡デバイスをさらに備える、前述の実施例のいずれかに記載のシステム。
２６．該ユーザの眼を結像するように構成される、１つまたはそれを上回る内向きに面した画像捕捉デバイスをさらに備える、実施例１－２５のいずれかに記載のシステム。
２７．頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツを拡大するように構成される、前述の実施例のいずれかに記載のシステム。
２８．該拡大は、少なくとも部分的に、眼の分解能に基づく、実施例２７に記載のシステム。
２９．頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツ内の明度を増加させるように構成される、前述の実施例のいずれかに記載のシステム。
３０．頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツ内のコントラストを増加させるように構成される、前述の実施例のいずれかに記載のシステム。
３１．頭部搭載型ディスプレイシステムは、少なくとも部分的に、眼のコントラスト感度に基づいて、コントラストを増加させるように構成される、実施例３０に記載のシステム。
３２．頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツ内の色飽和を増加させるように構成される、前述の実施例のいずれかに記載のシステム。
３３．頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツを鮮明化するように構成される、前述の実施例のいずれかに記載のシステム。
３４．鮮明化することは、少なくとも部分的に、環境の照明条件に基づいて、縁増強特徴を画像コンテンツ内に追加することを含む、実施例３３に記載のシステム。
３５．頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツのカラーバランスを偏移させるように構成される、前述の実施例のいずれかに記載のシステム。
３６．システムは、アラートをユーザに提供し、画像コンテンツが増強されたことを示すように構成される、前述の実施例のいずれかに記載のシステム。
３７．アラートは、視覚的アラートである、実施例３６に記載のシステム。
３８．アラートは、聴覚的アラートである、実施例３６に記載のシステム。
３９．該頭部搭載型ディスプレイシステムは、ユーザの正面の環境の少なくとも該部分の３Ｄ表現を構築し、環境の少なくとも該部分の表現を解釈するように構成され、該環境の該部分は、患者を含み、該頭部搭載型ディスプレイはさらに、患者と関連付けられた第１の構造を患者と関連付けられた第２の構造から区別するように構成される、前述の実施例のいずれかに記載のシステム。
４０．環境を監視するように構成される、１つまたはそれを上回るセンサをさらに備える、前述の実施例のいずれかに記載のシステム。
４１．該１つまたはそれを上回るセンサは、該環境を結像するように構成される、１つまたはそれを上回る外向きに面した画像捕捉デバイスを備える、実施例４０に記載のシステム。
４２．該環境を結像するように構成される、該１つまたはそれを上回る外向きに面した画像捕捉デバイスは、１つまたはそれを上回る外向きに面したカメラを備える、実施例４１に記載のシステム。
４３．頭部搭載型ディスプレイは、ユーザの視野内のヒト組織の体積を推定するように構成される、前述の実施例のいずれかに記載のシステム。
４４．頭部搭載型ディスプレイは、環境内の２つのオブジェクト間の距離を測定するように構成される、前述の実施例のいずれかに記載のシステム。
４５．頭部搭載型ディスプレイは、ディスプレイ上に提示される第１の画像モダリティと第２の画像モダリティとの間でトグルするように構成される、前述の実施例のいずれかに記載のシステム。
４６．第１の画像モダリティは、ＭＲＩ走査を備える、実施例４５に記載のシステム。
４７．第２の画像モダリティは、超音波を備える、実施例４５－４６のいずれかに記載のシステム。
４８．第１の画像モダリティは、Ｘ線走査を備える、実施例４５－４７のいずれかに記載のシステム。
４９．超音波音波を生産するように適合される、電子エミッタをさらに備える、前述の実施例のいずれかに記載のシステム。
５０．超音波音波を電気信号に変換するように適合される、センサをさらに備える、前述の実施例のいずれかに記載のシステム。
５１．頭部搭載型ディスプレイは、ユーザが、仮想基準マーカをユーザの眼に対してユーザの正面の環境の一部上に設置することを可能にするように構成される、前述の実施例のいずれかに記載のシステム。
５２．頭部搭載型ディスプレイは、画像が環境内の実世界オブジェクトに添付されて現れるように、画像をディスプレイ上に投影するように構成される、前述の実施例のいずれかに記載のシステム。
５３．頭部搭載型ディスプレイは、仮想切断ガイドラインが切断されるべきヒト身体領域上にオーバーレイされるようにユーザに現れるように、仮想切断ガイドラインを表示するように構成される、または切断されるべき部分へのアクセスを与える、前述の実施例のいずれかに記載のシステム。
５４．仮想切断ガイドラインの見掛け場所は、患者の身体部分の位置に関連するように現れる、実施例５３に記載のシステム。
５５．頭部搭載型ディスプレイは、信号を放出し、ユーザの正面の環境の一部内のオブジェクトの位置に関するデータを取得するように構成される、前述の実施例のいずれかに記載のシステム。
５６．頭部搭載型ディスプレイは、オブジェクト場所のデータベースを使用して、ユーザの正面の環境の一部内のオブジェクトの位置を取得するように構成される、前述の実施例のいずれかに記載のシステム。
５７．頭部搭載型ディスプレイは、該オブジェクト場所のデータベースに基づいて、基準点を設定し、画像が基準点に対して固定されて現れるように、画像をユーザの眼の中に投影するように構成される、実施例５６に記載のシステム。
５８．頭部搭載型ディスプレイは、ユーザ入力に基づいて、オブジェクトの３Ｄ画像のビューを軸を中心として回転させるように構成される、前述の実施例のいずれかに記載のシステム。
５９．頭部搭載型ディスプレイは、ユーザ入力に基づいて、３Ｄオブジェクトの画像のビューを平行移動させるように構成される、前述の実施例のいずれかに記載のシステム。
６０．頭部搭載型ディスプレイは、オブジェクトの３Ｄ画像の第１のスライスを表示するように構成される、前述の実施例のいずれかに記載のシステム。
６１．頭部搭載型ディスプレイは、３Ｄ画像の第１のスライスの画像および第２のスライスの画像を通してシーケンス化するように構成される、実施例６０に記載のシステム。
６２．頭部搭載型ディスプレイは、頭部搭載型ディスプレイの第２のユーザが伝送される環境の該部分の該画像を視認し得るように、ユーザの正面の環境の一部の画像を伝送するように構成される、前述の実施例のいずれかに記載のシステム。
６３．頭部搭載型ディスプレイは、ユーザに医療手技におけるステップをアラートするように構成される、前述の実施例のいずれかに記載のシステム。
６４．頭部搭載型ディスプレイは、医療パラメータを監視し、医療パラメータに基づいて、アラートを提供するように構成される、前述の実施例のいずれかに記載のシステム。
６５．医療パラメータは、バイタルサインを含む、実施例６４に記載のシステム。
６６．頭部搭載型ディスプレイは、超音波を放出し、該超音波から生じる信号を測定するように構成され、頭部搭載型ディスプレイはさらに、信号に基づいて、超音波画像を形成するように構成される、前述の実施例のいずれかに記載のシステム。
６７．頭部搭載型ディスプレイは、ユーザにユーザの視野外のオブジェクトおよび／またはイベントをアラートするように構成される、前述の実施例のいずれかに記載のシステム。
６８．検出器アレイは、環境を結像するように構成される、外向きに面したカメラを備える、実施例２１に記載のシステム。
６９．該頭部搭載型ディスプレイシステムは、中心領域の一部に提示される画像コンテンツに対して増強される、画像コンテンツをユーザの視野の周辺領域の一部に提示するように、光をユーザの眼の場所に投影するように構成される、前述の実施例のいずれかに記載のシステム。
７０．該頭部搭載型ディスプレイシステムは、周辺領域の別の部分に提示される画像コンテンツに対して増強される、画像コンテンツをユーザの視野の周辺領域の一部に提示するように、光をユーザの眼の場所に投影するように構成される、前述の実施例のいずれかに記載のシステム。
７１．システムは、少なくとも部分的に、環境の照明条件の時間的側面に基づいて、画像コンテンツをユーザの眼内に提示する方法を判定するように構成される、前述の実施例のいずれかに記載のシステム。
７２．該ディスプレイは、該画像コンテンツが異なる深度から生じるかのように該画像コンテンツを提示するように、異なる発散量において光を該ユーザの眼の中に投影するように構成される、前述の実施例のいずれかに記載のシステム。
７３．コントラストを増加させることは、該画像コンテンツの少なくとも１つの色の明度または暗度を調節することを含む、実施例３０に記載のシステム。
７４．コントラストを増加させることは、黒色、灰色、白色、または他の色を該画像コンテンツの少なくとも１つの色に追加することを含む、実施例３０に記載のシステム。
７５．頭部搭載型ディスプレイは、ある程度の不透明度を提示される画像コンテンツの少なくとも近傍に提供するように構成される、前述の実施例のいずれかに記載のシステム。
７６．頭部搭載型ディスプレイは、第１の画像モダリティと第１の画像モダリティと異なる第２の画像モダリティを組み合わせるように構成される、前述の実施例のいずれかに記載のシステム。
７７．第１の画像モダリティおよび第２の画像モダリティはそれぞれ、ＭＲＩ、ＣＴ、ＰＥＴ、ＭＲＡ、またはＣＴＡ走査からの画像を備える、実施例７６に記載のシステム。
７８．頭部搭載型ディスプレイは、第１および第２の画像モダリティの組み合わせられた画像を患者の実際の解剖学的構造にわたって整合させるように構成される、実施例７６または７７に記載のシステム。
１．光をユーザの眼に投影し、拡張現実画像コンテンツを表示するように構成される、頭部搭載型ディスプレイシステムであって、該ユーザの眼は、中心領域と、該中心領域を中心として配置される周辺領域を有する、視野を有し、
ユーザの頭部上に支持されるように構成される、フレームと、
フレーム上に配置される、ディスプレイであって、該ディスプレイは、画像コンテンツを該ユーザの視野の該周辺領域に提示するように、光を該ユーザの眼の中に投影するように構成され、該ディスプレイの少なくとも一部は、透明部分が、ユーザの正面の環境の一部からの光をユーザの眼に伝送し、ユーザの正面の環境の該部分のビューを提供するように、透明であって、ユーザが該頭部搭載型ディスプレイシステムを装着すると、ユーザの眼の正面の場所に配置される、ディスプレイと、
環境の照明条件を捕捉するように構成される、１つまたはそれを上回る捕捉デバイスと、
該ディスプレイと通信し、該ディスプレイ上での画像コンテンツの提示を制御する、処理電子機器と、
を備え、該頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて増強される、画像コンテンツをユーザの視野の周辺領域の一部に提示するように、光をユーザの眼の場所に投影するように構成される、頭部搭載型ディスプレイシステム。
２．明所視照明条件下、画像コンテンツは、錐体の投影された光場所の密度に基づいて反比例して増強される、実施例１に記載のシステム。
３．環境の明所視照明条件は、輝度１０ｃｄ／ｍ２～１０８ｃｄ／ｍ２を有する、実施例２に記載のシステム。
４．暗所視照明条件下、画像コンテンツは、桿体の投影された光場所の密度に基づいて反比例して増強される、実施例１に記載のシステム。
５．環境の暗所視照明条件は、輝度１０－３．５ｃｄ／ｍ２～１０－６ｃｄ／ｍ２を有する、実施例４に記載のシステム。
６．薄明視照明条件下、画像コンテンツは、少なくとも部分的に、薄明視照明条件下で費やされた時間に基づいて増強される、実施例１に記載のシステム。
７．環境の薄明視照明条件は、輝度１０－３ｃｄ／ｍ２～１００．５ｃｄ／ｍ２を有する、実施例６に記載のシステム。
８．システムは、少なくとも部分的に、薄明視照明条件下で費やされた時間に基づいて、錐体または桿体がユーザの眼内で優勢であるかどうかを判定するように構成される、実施例６または７に記載のシステム。
９．画像コンテンツは、錐体がユーザの眼内で優勢であるとき、錐体の投影された光場所の密度に基づいて反比例して増強される、実施例６－８のいずれかに記載のシステム。
１０．画像コンテンツは、桿体がユーザの眼内で優勢であるとき、ユーザの眼の桿体の投影された光場所の密度に基づいて反比例して増強される、実施例６－８のいずれかに記載のシステム。
１１．システムは、照明条件下で費やされた時間を監視するためのタイマまたはクロックを備える、前述の実施例のいずれかに記載のシステム。
１２．光を該ユーザの眼の中に指向し、画像を眼内に形成するように構成される、１つまたはそれを上回る光源をさらに備える、前述の実施例のいずれかに記載のシステム。
１３．透明であって、ユーザの眼の正面の場所に配置される、該ディスプレイの少なくとも該部分は、光をユーザに投影するように構成される、１つまたはそれを上回る導波管を備える、前述の実施例のいずれかに記載のシステム。
１４．該１つまたはそれを上回る光源は、光を該１つまたはそれを上回る導波管の中に指向するように構成される、実施例１３に記載のシステム。
１５．該光源は、ファイバ走査プロジェクタを備える、実施例１２－１４のいずれかに記載のシステム。
１６．１つまたはそれを上回る捕捉デバイスは、１つまたはそれを上回る画像捕捉デバイスを備える、実施例１－１５のいずれかに記載のシステム。
１７．１つまたはそれを上回る画像捕捉デバイスは、１つまたはそれを上回るカメラを備える、実施例１６に記載のシステム。
１８．１つまたはそれを上回る捕捉デバイスは、１つまたはそれを上回る光センサを備える、実施例１－１５のいずれかに記載のシステム。
１９．１つまたはそれを上回る光センサは、１つまたはそれを上回る照度計を備える、実施例１８に記載のシステム。
２０．１つまたはそれを上回る捕捉デバイスは、環境の輝度を測定するように構成される、前述の実施例のいずれかに記載のシステム。
２１．１つまたはそれを上回る捕捉デバイスは、ピクセルのアレイを備える、検出器アレイを備え、検出器アレイは、ピクセルにわたって光レベルを積分し、照明条件を捕捉するように構成される、前述の実施例のいずれかに記載のシステム。
２２．１つまたはそれを上回る捕捉デバイスは、瞳孔サイズを検出し、照明条件を捕捉するように構成される、１つまたはそれを上回る内向きに面したカメラを備える、前述の実施例のいずれかに記載のシステム。
２３．距離測定デバイスをさらに備える、前述の実施例のいずれかに記載のシステム。
２４．該距離測定デバイスは、レーザ測距計を備える、実施例２３に記載のシステム。
２５．該ユーザの眼の位置および／または移動を追跡するように構成される、眼追跡デバイスをさらに備える、前述の実施例のいずれかに記載のシステム。
２６．該ユーザの眼を結像するように構成される、１つまたはそれを上回る内向きに面した画像捕捉デバイスをさらに備える、実施例１－２５のいずれかに記載のシステム。
２７．頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツを拡大するように構成される、前述の実施例のいずれかに記載のシステム。
２８．該拡大は、少なくとも部分的に、眼の分解能に基づく、実施例２７に記載のシステム。
２９．頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツ内の明度を増加させるように構成される、前述の実施例のいずれかに記載のシステム。
３０．頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツ内のコントラストを増加させるように構成される、前述の実施例のいずれかに記載のシステム。
３１．頭部搭載型ディスプレイシステムは、少なくとも部分的に、眼のコントラスト感度に基づいて、コントラストを増加させるように構成される、実施例３０に記載のシステム。
３２．頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツ内の色飽和を増加させるように構成される、前述の実施例のいずれかに記載のシステム。
３３．頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツを鮮明化するように構成される、前述の実施例のいずれかに記載のシステム。
３４．鮮明化することは、少なくとも部分的に、環境の照明条件に基づいて、縁増強特徴を画像コンテンツ内に追加することを含む、実施例３３に記載のシステム。
３５．頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツのカラーバランスを偏移させるように構成される、前述の実施例のいずれかに記載のシステム。
３６．システムは、アラートをユーザに提供し、画像コンテンツが増強されたことを示すように構成される、前述の実施例のいずれかに記載のシステム。
３７．アラートは、視覚的アラートである、実施例３６に記載のシステム。
３８．アラートは、聴覚的アラートである、実施例３６に記載のシステム。
３９．該頭部搭載型ディスプレイシステムは、ユーザの正面の環境の少なくとも該部分の３Ｄ表現を構築し、環境の少なくとも該部分の表現を解釈するように構成され、該環境の該部分は、患者を含み、該頭部搭載型ディスプレイはさらに、患者と関連付けられた第１の構造を患者と関連付けられた第２の構造から区別するように構成される、前述の実施例のいずれかに記載のシステム。
４０．環境を監視するように構成される、１つまたはそれを上回るセンサをさらに備える、前述の実施例のいずれかに記載のシステム。
４１．該１つまたはそれを上回るセンサは、該環境を結像するように構成される、１つまたはそれを上回る外向きに面した画像捕捉デバイスを備える、実施例４０に記載のシステム。
４２．該環境を結像するように構成される、該１つまたはそれを上回る外向きに面した画像捕捉デバイスは、１つまたはそれを上回る外向きに面したカメラを備える、実施例４１に記載のシステム。
４３．頭部搭載型ディスプレイは、ユーザの視野内のヒト組織の体積を推定するように構成される、前述の実施例のいずれかに記載のシステム。
４４．頭部搭載型ディスプレイは、環境内の２つのオブジェクト間の距離を測定するように構成される、前述の実施例のいずれかに記載のシステム。
４５．頭部搭載型ディスプレイは、ディスプレイ上に提示される第１の画像モダリティと第２の画像モダリティとの間でトグルするように構成される、前述の実施例のいずれかに記載のシステム。
４６．第１の画像モダリティは、ＭＲＩ走査を備える、実施例４５に記載のシステム。
４７．第２の画像モダリティは、超音波を備える、実施例４５－４６のいずれかに記載のシステム。
４８．第１の画像モダリティは、Ｘ線走査を備える、実施例４５－４７のいずれかに記載のシステム。
４９．超音波音波を生産するように適合される、電子エミッタをさらに備える、前述の実施例のいずれかに記載のシステム。
５０．超音波音波を電気信号に変換するように適合される、センサをさらに備える、前述の実施例のいずれかに記載のシステム。
５１．頭部搭載型ディスプレイは、ユーザが、仮想基準マーカをユーザの眼に対してユーザの正面の環境の一部上に設置することを可能にするように構成される、前述の実施例のいずれかに記載のシステム。
５２．頭部搭載型ディスプレイは、画像が環境内の実世界オブジェクトに添付されて現れるように、画像をディスプレイ上に投影するように構成される、前述の実施例のいずれかに記載のシステム。
５３．頭部搭載型ディスプレイは、仮想切断ガイドラインが切断されるべきヒト身体領域上にオーバーレイされるようにユーザに現れるように、仮想切断ガイドラインを表示するように構成される、または切断されるべき部分へのアクセスを与える、前述の実施例のいずれかに記載のシステム。
５４．仮想切断ガイドラインの見掛け場所は、患者の身体部分の位置に関連するように現れる、実施例５３に記載のシステム。
５５．頭部搭載型ディスプレイは、信号を放出し、ユーザの正面の環境の一部内のオブジェクトの位置に関するデータを取得するように構成される、前述の実施例のいずれかに記載のシステム。
５６．頭部搭載型ディスプレイは、オブジェクト場所のデータベースを使用して、ユーザの正面の環境の一部内のオブジェクトの位置を取得するように構成される、前述の実施例のいずれかに記載のシステム。
５７．頭部搭載型ディスプレイは、該オブジェクト場所のデータベースに基づいて、基準点を設定し、画像が基準点に対して固定されて現れるように、画像をユーザの眼の中に投影するように構成される、実施例５６に記載のシステム。
５８．頭部搭載型ディスプレイは、ユーザ入力に基づいて、オブジェクトの３Ｄ画像のビューを軸を中心として回転させるように構成される、前述の実施例のいずれかに記載のシステム。
５９．頭部搭載型ディスプレイは、ユーザ入力に基づいて、３Ｄオブジェクトの画像のビューを平行移動させるように構成される、前述の実施例のいずれかに記載のシステム。
６０．頭部搭載型ディスプレイは、オブジェクトの３Ｄ画像の第１のスライスを表示するように構成される、前述の実施例のいずれかに記載のシステム。
６１．頭部搭載型ディスプレイは、３Ｄ画像の第１のスライスの画像および第２のスライスの画像を通してシーケンス化するように構成される、実施例６０に記載のシステム。
６２．頭部搭載型ディスプレイは、頭部搭載型ディスプレイの第２のユーザが伝送される環境の該部分の該画像を視認し得るように、ユーザの正面の環境の一部の画像を伝送するように構成される、前述の実施例のいずれかに記載のシステム。
６３．頭部搭載型ディスプレイは、ユーザに医療手技におけるステップをアラートするように構成される、前述の実施例のいずれかに記載のシステム。
６４．頭部搭載型ディスプレイは、医療パラメータを監視し、医療パラメータに基づいて、アラートを提供するように構成される、前述の実施例のいずれかに記載のシステム。
６５．医療パラメータは、バイタルサインを含む、実施例６４に記載のシステム。
６６．頭部搭載型ディスプレイは、超音波を放出し、該超音波から生じる信号を測定するように構成され、頭部搭載型ディスプレイはさらに、信号に基づいて、超音波画像を形成するように構成される、前述の実施例のいずれかに記載のシステム。
６７．頭部搭載型ディスプレイは、ユーザにユーザの視野外のオブジェクトおよび／またはイベントをアラートするように構成される、前述の実施例のいずれかに記載のシステム。
６８．検出器アレイは、環境を結像するように構成される、外向きに面したカメラを備える、実施例２１に記載のシステム。
６９．該頭部搭載型ディスプレイシステムは、中心領域の一部に提示される画像コンテンツに対して増強される、画像コンテンツをユーザの視野の周辺領域の一部に提示するように、光をユーザの眼の場所に投影するように構成される、前述の実施例のいずれかに記載のシステム。
７０．該頭部搭載型ディスプレイシステムは、周辺領域の別の部分に提示される画像コンテンツに対して増強される、画像コンテンツをユーザの視野の周辺領域の一部に提示するように、光をユーザの眼の場所に投影するように構成される、前述の実施例のいずれかに記載のシステム。
７１．システムは、少なくとも部分的に、環境の照明条件の時間的側面に基づいて、画像コンテンツをユーザの眼内に提示する方法を判定するように構成される、前述の実施例のいずれかに記載のシステム。
７２．該ディスプレイは、該画像コンテンツが異なる深度から生じるかのように該画像コンテンツを提示するように、異なる発散量において光を該ユーザの眼の中に投影するように構成される、前述の実施例のいずれかに記載のシステム。
７３．コントラストを増加させることは、該画像コンテンツの少なくとも１つの色の明度または暗度を調節することを含む、実施例３０に記載のシステム。
７４．コントラストを増加させることは、黒色、灰色、白色、または他の色を該画像コンテンツの少なくとも１つの色に追加することを含む、実施例３０に記載のシステム。
７５．頭部搭載型ディスプレイは、ある程度の不透明度を提示される画像コンテンツの少なくとも近傍に提供するように構成される、前述の実施例のいずれかに記載のシステム。
７６．頭部搭載型ディスプレイは、第１の画像モダリティと第１の画像モダリティと異なる第２の画像モダリティを組み合わせるように構成される、前述の実施例のいずれかに記載のシステム。
７７．第１の画像モダリティおよび第２の画像モダリティはそれぞれ、ＭＲＩ、ＣＴ、ＰＥＴ、ＭＲＡ、またはＣＴＡ走査からの画像を備える、実施例７６に記載のシステム。
７８．頭部搭載型ディスプレイは、第１および第２の画像モダリティの組み合わせられた画像を患者の実際の解剖学的構造にわたって整合させるように構成される、実施例７６または７７に記載のシステム。
【0020】
実施例セットＩＶＣ
１．光をユーザの眼に投影し、拡張現実画像コンテンツを表示するように構成される、頭部搭載型ディスプレイシステムであって、該ユーザの眼は、中心領域と、該中心領域を中心として配置される周辺領域を有する、視野を有し、
ユーザの頭部上に支持されるように構成される、フレームと、
フレーム上に配置される、ディスプレイであって、該ディスプレイは、画像コンテンツを該ユーザの視野に提示するように、光を該ユーザの眼の中に投影するように構成され、該ディスプレイの少なくとも一部は、透明部分が、ユーザの正面の環境の一部からの光をユーザの眼に伝送し、ユーザの正面の環境の該部分のビューを提供するように、透明であって、ユーザが該頭部搭載型ディスプレイシステムを装着すると、ユーザの眼の正面の場所に配置される、ディスプレイと、
環境の照明条件を捕捉するように構成される、１つまたはそれを上回る捕捉デバイスと、
該ディスプレイと通信し、該ディスプレイ上での画像コンテンツの提示を制御する、処理電子機器と、
を備え、該頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツをユーザの視野の第１の部分からユーザの視野の第２の部分に提示するように構成され、環境の照明条件下、第２の部分は、第１の部分より高い視力を有するユーザの眼の場所に対応する、頭部搭載型ディスプレイシステム。
２．明所視照明条件下、第２の部分は、第１の部分より高い密度の錐体を有するユーザの眼の場所に対応する、実施例１に記載のシステム。
３．環境の明所視照明条件は、輝度１０ｃｄ／ｍ２～１０８ｃｄ／ｍ２を有する、実施例２に記載のシステム。
４．第１の部分は、周辺領域内の一部から成り、第２の部分は、中心領域内の一部から成る、実施例２または３に記載のシステム。
５．第１の部分は、中心領域内の一部から成り、第２の部分は、中心領域内の別の部分から成る、実施例２または３に記載のシステム。
６．第１の部分は、周辺領域内の一部から成り、第２の部分は、周辺領域内の別の部分から成る、実施例２または３に記載のシステム。
７．暗所視照明条件下、第２の部分は、第１の部分より高い密度の桿体を有するユーザの眼の場所に対応する、実施例１に記載のシステム。
８．環境の暗所視照明条件は、輝度１０－３．５ｃｄ／ｍ２～１０－６ｃｄ／ｍ２を有する、実施例７に記載のシステム。
９．第１の部分は、中心領域内の一部から成り、第２の部分は、周辺領域内の領域から成る、実施例７または８に記載のシステム。
１０．第１の部分は、周辺領域内の一部から成り、第２の部分は、周辺領域内の別の領域から成る、実施例７または８に記載のシステム。
１１．薄明視照明条件下、システムは、少なくとも部分的に、薄明視照明条件下で費やされた時間に基づいて、画像コンテンツを第１の部分から第２の部分に提示するように構成される、実施例１に記載のシステム。
１２．環境の薄明視照明条件は、輝度１０－３ｃｄ／ｍ２～１００．５ｃｄ／ｍ２を有する、実施例１１に記載のシステム。
１３．システムは、少なくとも部分的に、薄明視照明条件下で費やされた時間に基づいて、錐体または桿体がユーザの眼内で優勢であるかどうかを判定するように構成される、実施例１１または１２に記載のシステム。
１４．第２の部分は、錐体がユーザの眼内で優勢であるとき、第１の部分より高い密度の錐体を有するユーザの眼の場所に対応する、実施例１１－１３のいずれかに記載のシステム。
１５．第１の部分は、周辺領域内の一部から成り、第２の部分は、中心領域内の一部から成る、実施例１４に記載のシステム。
１６．第１の部分は、中心領域内の一部から成り、第２の部分は、中心領域内の別の部分から成る、実施例１４に記載のシステム。
１７．第１の部分は、周辺領域内の一部から成り、第２の部分は、周辺領域内の別の部分から成る、実施例１４に記載のシステム。
１８．第２の部分は、桿体がユーザの眼内で優勢であるとき、第１の部分より高い密度の桿体を有するユーザの眼の場所に対応する、実施例１１－１３のいずれかに記載のシステム。
１９．第１の部分は、中心領域内の一部から成り、第２の部分は、周辺領域内の一部から成る、実施例１８に記載のシステム。
２０．第１の部分は、周辺領域内の一部から成り、第２の部分は、周辺領域内の別の部分から成る、実施例１８に記載のシステム。
２１．システムは、照明条件下で費やされた時間を監視するためのタイマまたはクロックを備える、前述の実施例のいずれかに記載のシステム。
２２．光を該ユーザの眼の中に指向し、画像を眼内に形成するように構成される、１つまたはそれを上回る光源をさらに備える、前述の実施例のいずれかに記載のシステム。
２３．透明であって、ユーザの眼の正面の場所に配置される、該ディスプレイの少なくとも該部分は、光をユーザに投影するように構成される、１つまたはそれを上回る導波管を備える、前述の実施例のいずれかに記載のシステム。
２４．該１つまたはそれを上回る光源は、光を該１つまたはそれを上回る導波管の中に指向するように構成される、実施例２３に記載のシステム。
２５．該光源は、ファイバ走査プロジェクタを備える、実施例２２－２４のいずれかに記載のシステム。
２６．１つまたはそれを上回る捕捉デバイスは、１つまたはそれを上回る画像捕捉デバイスを備える、実施例１－２５のいずれかに記載のシステム。
２７．１つまたはそれを上回る画像捕捉デバイスは、１つまたはそれを上回るカメラを備える、実施例２６に記載のシステム。
２８．１つまたはそれを上回る捕捉デバイスは、１つまたはそれを上回る光センサを備える、実施例１－２５のいずれかに記載のシステム。
２９．１つまたはそれを上回る光センサは、１つまたはそれを上回る照度計を備える、実施例２８に記載のシステム。
３０．１つまたはそれを上回る捕捉デバイスは、環境の輝度を測定するように構成される、前述の実施例のいずれかに記載のシステム。
３１．１つまたはそれを上回る捕捉デバイスは、ピクセルのアレイを備える、検出器アレイを備え、検出器アレイは、ピクセルにわたって光レベルを積分し、照明条件を捕捉するように構成される、前述の実施例のいずれかに記載のシステム。
３２．１つまたはそれを上回る捕捉デバイスは、瞳孔サイズを検出し、照明条件を捕捉するように構成される、１つまたはそれを上回る内向きに面したカメラを備える、前述の実施例のいずれかに記載のシステム。
３３．距離測定デバイスをさらに備える、前述の実施例のいずれかに記載のシステム。
３４．該距離測定デバイスは、レーザ測距計を備える、実施例３３に記載のシステム。
３５．該ユーザの眼の位置および／または移動を追跡するように構成される、眼追跡デバイスをさらに備える、前述の実施例のいずれかに記載のシステム。
３６．該ユーザの眼を結像するように構成される、１つまたはそれを上回る内向きに面した画像捕捉デバイスをさらに備える、実施例１－３５のいずれかに記載のシステム。
３７．システムは、アラートをユーザに提供し、画像コンテンツが第１の部分から第２の部分に変位されたことを示すように構成される、前述の実施例のいずれかに記載のシステム。
３８．アラートは、視覚的アラートである、実施例３７に記載のシステム。
３９．アラートは、聴覚的アラートである、実施例３７に記載のシステム。
４０．該頭部搭載型ディスプレイシステムは、ユーザの正面の環境の少なくとも該部分の３Ｄ表現を構築し、環境の少なくとも該部分の表現を解釈するように構成され、該環境の該部分は、患者を含み、該頭部搭載型ディスプレイはさらに、患者と関連付けられた第１の構造を患者と関連付けられた第２の構造から区別するように構成される、前述の実施例のいずれかに記載のシステム。
４１．環境を監視するように構成される、１つまたはそれを上回るセンサをさらに備える、前述の実施例のいずれかに記載のシステム。
４２．該１つまたはそれを上回るセンサは、該環境を結像するように構成される、１つまたはそれを上回る外向きに面した画像捕捉デバイスを備える、実施例４１に記載のシステム。
４３．該環境を結像するように構成される、該１つまたはそれを上回る外向きに面した画像捕捉デバイスは、１つまたはそれを上回る外向きに面したカメラを備える、実施例４２に記載のシステム。
４４．頭部搭載型ディスプレイは、ユーザの視野内のヒト組織の体積を推定するように構成される、前述の実施例のいずれかに記載のシステム。
４５．頭部搭載型ディスプレイは、環境内の２つのオブジェクト間の距離を測定するように構成される、前述の実施例のいずれかに記載のシステム。
４６．頭部搭載型ディスプレイは、ディスプレイ上に提示される第１の画像モダリティと第２の画像モダリティとの間でトグルするように構成される、前述の実施例のいずれかに記載のシステム。
４７．第１の画像モダリティは、ＭＲＩ走査を備える、実施例４６に記載のシステム。
４８．第２の画像モダリティは、超音波を備える、実施例４６－４７のいずれかに記載のシステム。
４９．第１の画像モダリティは、Ｘ線走査を備える、実施例４６－４８のいずれかに記載のシステム。
５０．超音波音波を生産するように適合される、電子エミッタをさらに備える、前述の実施例のいずれかに記載のシステム。
５１．超音波音波を電気信号に変換するように適合される、センサをさらに備える、前述の実施例のいずれかに記載のシステム。
５２．頭部搭載型ディスプレイは、ユーザが、仮想基準マーカをユーザの眼に対してユーザの正面の環境の一部上に設置することを可能にするように構成される、前述の実施例のいずれかに記載のシステム。
５３．頭部搭載型ディスプレイは、画像が環境内の実世界オブジェクトに添付されて現れるように、画像をディスプレイ上に投影するように構成される、前述の実施例のいずれかに記載のシステム。
５４．頭部搭載型ディスプレイは、仮想切断ガイドラインが切断されるべきヒト身体領域上にオーバーレイされるようにユーザに現れるように、仮想切断ガイドラインを表示するように構成される、または切断されるべき部分へのアクセスを与える、前述の実施例のいずれかに記載のシステム。
５５．仮想切断ガイドラインの見掛け場所は、患者の身体部分の位置に関連するように現れる、実施例５４に記載のシステム。
５６．頭部搭載型ディスプレイは、信号を放出し、ユーザの正面の環境の一部内のオブジェクトの位置に関するデータを取得するように構成される、前述の実施例のいずれかに記載のシステム。
５７．頭部搭載型ディスプレイは、オブジェクト場所のデータベースを使用して、ユーザの正面の環境の一部内のオブジェクトの位置を取得するように構成される、前述の実施例のいずれかに記載のシステム。
５８．頭部搭載型ディスプレイは、該オブジェクト場所のデータベースに基づいて、基準点を設定し、画像が基準点に対して固定されて現れるように、画像をユーザの眼の中に投影するように構成される、実施例５７に記載のシステム。
５９．頭部搭載型ディスプレイは、ユーザ入力に基づいて、オブジェクトの３Ｄ画像のビューを軸を中心として回転させるように構成される、前述の実施例のいずれかに記載のシステム。
６０．頭部搭載型ディスプレイは、ユーザ入力に基づいて、３Ｄオブジェクトの画像のビューを平行移動させるように構成される、前述の実施例のいずれかに記載のシステム。
６１．頭部搭載型ディスプレイは、オブジェクトの３Ｄ画像の第１のスライスを表示するように構成される、前述の実施例のいずれかに記載のシステム。
６２．頭部搭載型ディスプレイは、３Ｄ画像の第１のスライスの画像および第２のスライスの画像を通してシーケンス化するように構成される、実施例６１に記載のシステム。
６３．頭部搭載型ディスプレイは、頭部搭載型ディスプレイの第２のユーザが伝送される環境の該部分の該画像を視認し得るように、ユーザの正面の環境の一部の画像を伝送するように構成される、前述の実施例のいずれかに記載のシステム。
６４．頭部搭載型ディスプレイは、ユーザに医療手技におけるステップをアラートするように構成される、前述の実施例のいずれかに記載のシステム。
６５．頭部搭載型ディスプレイは、医療パラメータを監視し、医療パラメータに基づいて、アラートを提供するように構成される、前述の実施例のいずれかに記載のシステム。
６６．医療パラメータは、バイタルサインを含む、実施例６５に記載のシステム。
６７．頭部搭載型ディスプレイは、超音波を放出し、該超音波から生じる信号を測定するように構成され、頭部搭載型ディスプレイはさらに、信号に基づいて、超音波画像を形成するように構成される、前述の実施例のいずれかに記載のシステム。
６８．頭部搭載型ディスプレイは、ユーザにユーザの視野外のオブジェクトおよび／またはイベントをアラートするように構成される、前述の実施例のいずれかに記載のシステム。
６９．検出器アレイは、環境を結像するように構成される、外向きに面したカメラを備える、実施例３１に記載のシステム。
７０．システムは、少なくとも部分的に、環境の照明条件の時間的側面に基づいて、画像コンテンツをユーザの眼内に提示する方法を判定するように構成される、前述の実施例のいずれかに記載のシステム。
７１．該ディスプレイは、該画像コンテンツが異なる深度から生じるかのように該画像コンテンツを提示するように、異なる発散量において光を該ユーザの眼の中に投影するように構成される、前述の実施例のいずれかに記載のシステム。
７２．頭部搭載型ディスプレイは、第１の画像モダリティと第１の画像モダリティと異なる第２の画像モダリティを組み合わせるように構成される、前述の実施例のいずれかに記載のシステム。
７３．第１の画像モダリティおよび第２の画像モダリティはそれぞれ、ＭＲＩ、ＣＴ、ＰＥＴ、ＭＲＡ、またはＣＴＡ走査からの画像を備える、実施例７２に記載のシステム。
７４．頭部搭載型ディスプレイは、第１および第２の画像モダリティの組み合わせられた画像を患者の実際の解剖学的構造にわたって整合させるように構成される、実施例７２または７３に記載のシステム。
１．光をユーザの眼に投影し、拡張現実画像コンテンツを表示するように構成される、頭部搭載型ディスプレイシステムであって、該ユーザの眼は、中心領域と、該中心領域を中心として配置される周辺領域を有する、視野を有し、
ユーザの頭部上に支持されるように構成される、フレームと、
フレーム上に配置される、ディスプレイであって、該ディスプレイは、画像コンテンツを該ユーザの視野に提示するように、光を該ユーザの眼の中に投影するように構成され、該ディスプレイの少なくとも一部は、透明部分が、ユーザの正面の環境の一部からの光をユーザの眼に伝送し、ユーザの正面の環境の該部分のビューを提供するように、透明であって、ユーザが該頭部搭載型ディスプレイシステムを装着すると、ユーザの眼の正面の場所に配置される、ディスプレイと、
環境の照明条件を捕捉するように構成される、１つまたはそれを上回る捕捉デバイスと、
該ディスプレイと通信し、該ディスプレイ上での画像コンテンツの提示を制御する、処理電子機器と、
を備え、該頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツをユーザの視野の第１の部分からユーザの視野の第２の部分に提示するように構成され、環境の照明条件下、第２の部分は、第１の部分より高い視力を有するユーザの眼の場所に対応する、頭部搭載型ディスプレイシステム。
２．明所視照明条件下、第２の部分は、第１の部分より高い密度の錐体を有するユーザの眼の場所に対応する、実施例１に記載のシステム。
３．環境の明所視照明条件は、輝度１０ｃｄ／ｍ２～１０８ｃｄ／ｍ２を有する、実施例２に記載のシステム。
４．第１の部分は、周辺領域内の一部から成り、第２の部分は、中心領域内の一部から成る、実施例２または３に記載のシステム。
５．第１の部分は、中心領域内の一部から成り、第２の部分は、中心領域内の別の部分から成る、実施例２または３に記載のシステム。
６．第１の部分は、周辺領域内の一部から成り、第２の部分は、周辺領域内の別の部分から成る、実施例２または３に記載のシステム。
７．暗所視照明条件下、第２の部分は、第１の部分より高い密度の桿体を有するユーザの眼の場所に対応する、実施例１に記載のシステム。
８．環境の暗所視照明条件は、輝度１０－３．５ｃｄ／ｍ２～１０－６ｃｄ／ｍ２を有する、実施例７に記載のシステム。
９．第１の部分は、中心領域内の一部から成り、第２の部分は、周辺領域内の領域から成る、実施例７または８に記載のシステム。
１０．第１の部分は、周辺領域内の一部から成り、第２の部分は、周辺領域内の別の領域から成る、実施例７または８に記載のシステム。
１１．薄明視照明条件下、システムは、少なくとも部分的に、薄明視照明条件下で費やされた時間に基づいて、画像コンテンツを第１の部分から第２の部分に提示するように構成される、実施例１に記載のシステム。
１２．環境の薄明視照明条件は、輝度１０－３ｃｄ／ｍ２～１００．５ｃｄ／ｍ２を有する、実施例１１に記載のシステム。
１３．システムは、少なくとも部分的に、薄明視照明条件下で費やされた時間に基づいて、錐体または桿体がユーザの眼内で優勢であるかどうかを判定するように構成される、実施例１１または１２に記載のシステム。
１４．第２の部分は、錐体がユーザの眼内で優勢であるとき、第１の部分より高い密度の錐体を有するユーザの眼の場所に対応する、実施例１１－１３のいずれかに記載のシステム。
１５．第１の部分は、周辺領域内の一部から成り、第２の部分は、中心領域内の一部から成る、実施例１４に記載のシステム。
１６．第１の部分は、中心領域内の一部から成り、第２の部分は、中心領域内の別の部分から成る、実施例１４に記載のシステム。
１７．第１の部分は、周辺領域内の一部から成り、第２の部分は、周辺領域内の別の部分から成る、実施例１４に記載のシステム。
１８．第２の部分は、桿体がユーザの眼内で優勢であるとき、第１の部分より高い密度の桿体を有するユーザの眼の場所に対応する、実施例１１－１３のいずれかに記載のシステム。
１９．第１の部分は、中心領域内の一部から成り、第２の部分は、周辺領域内の一部から成る、実施例１８に記載のシステム。
２０．第１の部分は、周辺領域内の一部から成り、第２の部分は、周辺領域内の別の部分から成る、実施例１８に記載のシステム。
２１．システムは、照明条件下で費やされた時間を監視するためのタイマまたはクロックを備える、前述の実施例のいずれかに記載のシステム。
２２．光を該ユーザの眼の中に指向し、画像を眼内に形成するように構成される、１つまたはそれを上回る光源をさらに備える、前述の実施例のいずれかに記載のシステム。
２３．透明であって、ユーザの眼の正面の場所に配置される、該ディスプレイの少なくとも該部分は、光をユーザに投影するように構成される、１つまたはそれを上回る導波管を備える、前述の実施例のいずれかに記載のシステム。
２４．該１つまたはそれを上回る光源は、光を該１つまたはそれを上回る導波管の中に指向するように構成される、実施例２３に記載のシステム。
２５．該光源は、ファイバ走査プロジェクタを備える、実施例２２－２４のいずれかに記載のシステム。
２６．１つまたはそれを上回る捕捉デバイスは、１つまたはそれを上回る画像捕捉デバイスを備える、実施例１－２５のいずれかに記載のシステム。
２７．１つまたはそれを上回る画像捕捉デバイスは、１つまたはそれを上回るカメラを備える、実施例２６に記載のシステム。
２８．１つまたはそれを上回る捕捉デバイスは、１つまたはそれを上回る光センサを備える、実施例１－２５のいずれかに記載のシステム。
２９．１つまたはそれを上回る光センサは、１つまたはそれを上回る照度計を備える、実施例２８に記載のシステム。
３０．１つまたはそれを上回る捕捉デバイスは、環境の輝度を測定するように構成される、前述の実施例のいずれかに記載のシステム。
３１．１つまたはそれを上回る捕捉デバイスは、ピクセルのアレイを備える、検出器アレイを備え、検出器アレイは、ピクセルにわたって光レベルを積分し、照明条件を捕捉するように構成される、前述の実施例のいずれかに記載のシステム。
３２．１つまたはそれを上回る捕捉デバイスは、瞳孔サイズを検出し、照明条件を捕捉するように構成される、１つまたはそれを上回る内向きに面したカメラを備える、前述の実施例のいずれかに記載のシステム。
３３．距離測定デバイスをさらに備える、前述の実施例のいずれかに記載のシステム。
３４．該距離測定デバイスは、レーザ測距計を備える、実施例３３に記載のシステム。
３５．該ユーザの眼の位置および／または移動を追跡するように構成される、眼追跡デバイスをさらに備える、前述の実施例のいずれかに記載のシステム。
３６．該ユーザの眼を結像するように構成される、１つまたはそれを上回る内向きに面した画像捕捉デバイスをさらに備える、実施例１－３５のいずれかに記載のシステム。
３７．システムは、アラートをユーザに提供し、画像コンテンツが第１の部分から第２の部分に変位されたことを示すように構成される、前述の実施例のいずれかに記載のシステム。
３８．アラートは、視覚的アラートである、実施例３７に記載のシステム。
３９．アラートは、聴覚的アラートである、実施例３７に記載のシステム。
４０．該頭部搭載型ディスプレイシステムは、ユーザの正面の環境の少なくとも該部分の３Ｄ表現を構築し、環境の少なくとも該部分の表現を解釈するように構成され、該環境の該部分は、患者を含み、該頭部搭載型ディスプレイはさらに、患者と関連付けられた第１の構造を患者と関連付けられた第２の構造から区別するように構成される、前述の実施例のいずれかに記載のシステム。
４１．環境を監視するように構成される、１つまたはそれを上回るセンサをさらに備える、前述の実施例のいずれかに記載のシステム。
４２．該１つまたはそれを上回るセンサは、該環境を結像するように構成される、１つまたはそれを上回る外向きに面した画像捕捉デバイスを備える、実施例４１に記載のシステム。
４３．該環境を結像するように構成される、該１つまたはそれを上回る外向きに面した画像捕捉デバイスは、１つまたはそれを上回る外向きに面したカメラを備える、実施例４２に記載のシステム。
４４．頭部搭載型ディスプレイは、ユーザの視野内のヒト組織の体積を推定するように構成される、前述の実施例のいずれかに記載のシステム。
４５．頭部搭載型ディスプレイは、環境内の２つのオブジェクト間の距離を測定するように構成される、前述の実施例のいずれかに記載のシステム。
４６．頭部搭載型ディスプレイは、ディスプレイ上に提示される第１の画像モダリティと第２の画像モダリティとの間でトグルするように構成される、前述の実施例のいずれかに記載のシステム。
４７．第１の画像モダリティは、ＭＲＩ走査を備える、実施例４６に記載のシステム。
４８．第２の画像モダリティは、超音波を備える、実施例４６－４７のいずれかに記載のシステム。
４９．第１の画像モダリティは、Ｘ線走査を備える、実施例４６－４８のいずれかに記載のシステム。
５０．超音波音波を生産するように適合される、電子エミッタをさらに備える、前述の実施例のいずれかに記載のシステム。
５１．超音波音波を電気信号に変換するように適合される、センサをさらに備える、前述の実施例のいずれかに記載のシステム。
５２．頭部搭載型ディスプレイは、ユーザが、仮想基準マーカをユーザの眼に対してユーザの正面の環境の一部上に設置することを可能にするように構成される、前述の実施例のいずれかに記載のシステム。
５３．頭部搭載型ディスプレイは、画像が環境内の実世界オブジェクトに添付されて現れるように、画像をディスプレイ上に投影するように構成される、前述の実施例のいずれかに記載のシステム。
５４．頭部搭載型ディスプレイは、仮想切断ガイドラインが切断されるべきヒト身体領域上にオーバーレイされるようにユーザに現れるように、仮想切断ガイドラインを表示するように構成される、または切断されるべき部分へのアクセスを与える、前述の実施例のいずれかに記載のシステム。
５５．仮想切断ガイドラインの見掛け場所は、患者の身体部分の位置に関連するように現れる、実施例５４に記載のシステム。
５６．頭部搭載型ディスプレイは、信号を放出し、ユーザの正面の環境の一部内のオブジェクトの位置に関するデータを取得するように構成される、前述の実施例のいずれかに記載のシステム。
５７．頭部搭載型ディスプレイは、オブジェクト場所のデータベースを使用して、ユーザの正面の環境の一部内のオブジェクトの位置を取得するように構成される、前述の実施例のいずれかに記載のシステム。
５８．頭部搭載型ディスプレイは、該オブジェクト場所のデータベースに基づいて、基準点を設定し、画像が基準点に対して固定されて現れるように、画像をユーザの眼の中に投影するように構成される、実施例５７に記載のシステム。
５９．頭部搭載型ディスプレイは、ユーザ入力に基づいて、オブジェクトの３Ｄ画像のビューを軸を中心として回転させるように構成される、前述の実施例のいずれかに記載のシステム。
６０．頭部搭載型ディスプレイは、ユーザ入力に基づいて、３Ｄオブジェクトの画像のビューを平行移動させるように構成される、前述の実施例のいずれかに記載のシステム。
６１．頭部搭載型ディスプレイは、オブジェクトの３Ｄ画像の第１のスライスを表示するように構成される、前述の実施例のいずれかに記載のシステム。
６２．頭部搭載型ディスプレイは、３Ｄ画像の第１のスライスの画像および第２のスライスの画像を通してシーケンス化するように構成される、実施例６１に記載のシステム。
６３．頭部搭載型ディスプレイは、頭部搭載型ディスプレイの第２のユーザが伝送される環境の該部分の該画像を視認し得るように、ユーザの正面の環境の一部の画像を伝送するように構成される、前述の実施例のいずれかに記載のシステム。
６４．頭部搭載型ディスプレイは、ユーザに医療手技におけるステップをアラートするように構成される、前述の実施例のいずれかに記載のシステム。
６５．頭部搭載型ディスプレイは、医療パラメータを監視し、医療パラメータに基づいて、アラートを提供するように構成される、前述の実施例のいずれかに記載のシステム。
６６．医療パラメータは、バイタルサインを含む、実施例６５に記載のシステム。
６７．頭部搭載型ディスプレイは、超音波を放出し、該超音波から生じる信号を測定するように構成され、頭部搭載型ディスプレイはさらに、信号に基づいて、超音波画像を形成するように構成される、前述の実施例のいずれかに記載のシステム。
６８．頭部搭載型ディスプレイは、ユーザにユーザの視野外のオブジェクトおよび／またはイベントをアラートするように構成される、前述の実施例のいずれかに記載のシステム。
６９．検出器アレイは、環境を結像するように構成される、外向きに面したカメラを備える、実施例３１に記載のシステム。
７０．システムは、少なくとも部分的に、環境の照明条件の時間的側面に基づいて、画像コンテンツをユーザの眼内に提示する方法を判定するように構成される、前述の実施例のいずれかに記載のシステム。
７１．該ディスプレイは、該画像コンテンツが異なる深度から生じるかのように該画像コンテンツを提示するように、異なる発散量において光を該ユーザの眼の中に投影するように構成される、前述の実施例のいずれかに記載のシステム。
７２．頭部搭載型ディスプレイは、第１の画像モダリティと第１の画像モダリティと異なる第２の画像モダリティを組み合わせるように構成される、前述の実施例のいずれかに記載のシステム。
７３．第１の画像モダリティおよび第２の画像モダリティはそれぞれ、ＭＲＩ、ＣＴ、ＰＥＴ、ＭＲＡ、またはＣＴＡ走査からの画像を備える、実施例７２に記載のシステム。
７４．頭部搭載型ディスプレイは、第１および第２の画像モダリティの組み合わせられた画像を患者の実際の解剖学的構造にわたって整合させるように構成される、実施例７２または７３に記載のシステム。
【0021】
実施例セットＩＶＤ
１．光をユーザの眼に投影し、拡張現実画像コンテンツを表示するように構成される、頭部搭載型ディスプレイシステムであって、該ユーザの眼は、中心領域と、該中心領域を中心として配置される周辺領域を有する、視野を有し、
ユーザの頭部上に支持されるように構成される、フレームと、
フレーム上に配置される、ディスプレイであって、該ディスプレイは、画像コンテンツを該ユーザの視野に提示するように、光を該ユーザの眼の中に投影するように構成され、該ディスプレイの少なくとも一部は、透明部分が、ユーザの正面の環境の一部からの光をユーザの眼に伝送し、ユーザの正面の環境の該部分のビューを提供するように、透明であって、ユーザが該頭部搭載型ディスプレイシステムを装着すると、ユーザの眼の正面の場所に配置される、ディスプレイと、
環境の照明条件を捕捉するように構成される、１つまたはそれを上回る捕捉デバイスと、
該ディスプレイと通信し、該ディスプレイ上での画像コンテンツの提示を制御する、処理電子機器と、
を備え、該頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツをユーザの視野の一部に提示するように、光をユーザの眼の場所に投影するように構成される、頭部搭載型ディスプレイシステム。
２．明所視照明条件下、投影された光場所は、錐体の投影された光場所の密度に基づく、実施例１に記載のシステム。
３．環境の明所視照明条件は、輝度１０ｃｄ／ｍ２～１０８ｃｄ／ｍ２を有する、実施例２に記載のシステム。
４．ユーザの視野の一部は、中心領域を備える、実施例２－３のいずれかに記載のシステム。
５．投影された光場所は、中心窩から０～５度ずれた範囲内にある、実施例２－４のいずれかに記載のシステム。
６．暗所視照明条件下、投影された光場所は、桿体の投影された光場所の密度に基づく、実施例１に記載のシステム。
７．環境の暗所視照明条件は、輝度１０－３．５ｃｄ／ｍ２～１０－６ｃｄ／ｍ２を有する、実施例６に記載のシステム。
８．ユーザの視野の一部は、周辺領域を備える、実施例６－７のいずれかに記載のシステム。
９．投影された光場所は、中心窩から１５～２０度ずれた範囲内にある、実施例６－８のいずれかに記載のシステム。
１０．投影された光場所は、中心窩から２５～３５度ずれた範囲内にある、実施例６－８のいずれかに記載のシステム。
１１．薄明視照明条件下、投影された光場所は、少なくとも部分的に、薄明視照明条件下で費やされた時間に基づく、実施例１に記載のシステム。
１２．環境の薄明視照明条件は、輝度１０－３ｃｄ／ｍ２～１００．５ｃｄ／ｍ２を有する、実施例１１に記載のシステム。
１３．システムは、少なくとも部分的に、薄明視照明条件下で費やされた時間に基づいて、錐体または桿体がユーザの眼内で優勢であるかどうかを判定するように構成される、実施例１１または１２に記載のシステム。
１４．投影された光場所は、錐体がユーザの眼内で優勢であるとき、錐体の投影された光場所の密度に基づく、実施例１１－１３のいずれかに記載のシステム。
１５．ユーザの視野の一部は、中心領域を備える、実施例１４に記載のシステム。
１６．投影された光場所は、中心窩から０～５度ずれた範囲内にある、実施例１４に記載のシステム。
１７．投影された光場所は、桿体がユーザの眼内で優勢であるとき、ユーザの眼の桿体の投影された光場所の密度に基づく、実施例１１－１３のいずれかに記載のシステム。
１８．ユーザの視野の一部は、周辺領域を備える、実施例１７に記載のシステム。
１９．投影された光場所は、中心窩から１５～２０度ずれた範囲内にある、実施例１７に記載のシステム。
２０．投影された光場所は、中心窩から２５～３５度ずれた範囲内にある、実施例１７に記載のシステム。
２１．システムは、照明条件下で費やされた時間を監視するためのタイマまたはクロックを備える、前述の実施例のいずれかに記載のシステム。
２２．光を該ユーザの眼の中に指向し、画像を眼内に形成するように構成される、１つまたはそれを上回る光源をさらに備える、前述の実施例のいずれかに記載のシステム。
２３．透明であって、ユーザの眼の正面の場所に配置される、該ディスプレイの少なくとも該部分は、光をユーザに投影するように構成される、１つまたはそれを上回る導波管を備える、前述の実施例のいずれかに記載のシステム。
２４．該１つまたはそれを上回る光源は、光を該１つまたはそれを上回る導波管の中に指向するように構成される、実施例２３に記載のシステム。
２５．該光源は、ファイバ走査プロジェクタを備える、実施例２２－２４のいずれかに記載のシステム。
２６．１つまたはそれを上回る捕捉デバイスは、１つまたはそれを上回る画像捕捉デバイスを備える、実施例１－２５のいずれかに記載のシステム。
２７．１つまたはそれを上回る画像捕捉デバイスは、１つまたはそれを上回るカメラを備える、実施例２６に記載のシステム。
２８．１つまたはそれを上回る捕捉デバイスは、１つまたはそれを上回る光センサを備える、実施例１－２５のいずれかに記載のシステム。
２９．１つまたはそれを上回る光センサは、１つまたはそれを上回る照度計を備える、実施例２８に記載のシステム。
３０．１つまたはそれを上回る捕捉デバイスは、環境の輝度を測定するように構成される、前述の実施例のいずれかに記載のシステム。
３１．１つまたはそれを上回る捕捉デバイスは、ピクセルのアレイを備える、検出器アレイを備え、検出器アレイは、ピクセルにわたって光レベルを積分し、照明条件を捕捉するように構成される、前述の実施例のいずれかに記載のシステム。
３２．１つまたはそれを上回る捕捉デバイスは、瞳孔サイズを検出し、照明条件を捕捉するように構成される、１つまたはそれを上回る内向きに面したカメラを備える、前述の実施例のいずれかに記載のシステム。
３３．距離測定デバイスをさらに備える、前述の実施例のいずれかに記載のシステム。
３４．該距離測定デバイスは、レーザ測距計を備える、実施例３３に記載のシステム。
３５．該ユーザの眼の位置および／または移動を追跡するように構成される、眼追跡デバイスをさらに備える、前述の実施例のいずれかに記載のシステム。
３６．該ユーザの眼を結像するように構成される、１つまたはそれを上回る内向きに面した画像捕捉デバイスをさらに備える、実施例１－３５のいずれかに記載のシステム。
３７．システムは、アラートをユーザに提供し、画像コンテンツが提示されたことを示すように構成される、前述の実施例のいずれかに記載のシステム。
３８．アラートは、視覚的アラートである、実施例３７に記載のシステム。
３９．アラートは、聴覚的アラートである、実施例３７に記載のシステム。
４０．該頭部搭載型ディスプレイシステムは、ユーザの正面の環境の少なくとも該部分の３Ｄ表現を構築し、環境の少なくとも該部分の表現を解釈するように構成され、該環境の該部分は、患者を含み、該頭部搭載型ディスプレイはさらに、患者と関連付けられた第１の構造を患者と関連付けられた第２の構造から区別するように構成される、前述の実施例のいずれかに記載のシステム。
４１．環境を監視するように構成される、１つまたはそれを上回るセンサをさらに備える、前述の実施例のいずれかに記載のシステム。
４２．該１つまたはそれを上回るセンサは、該環境を結像するように構成される、１つまたはそれを上回る外向きに面した画像捕捉デバイスを備える、実施例４１に記載のシステム。
４３．該環境を結像するように構成される、該１つまたはそれを上回る外向きに面した画像捕捉デバイスは、１つまたはそれを上回る外向きに面したカメラを備える、実施例４２に記載のシステム。
４４．頭部搭載型ディスプレイは、ユーザの視野内のヒト組織の体積を推定するように構成される、前述の実施例のいずれかに記載のシステム。
４５．頭部搭載型ディスプレイは、環境内の２つのオブジェクト間の距離を測定するように構成される、前述の実施例のいずれかに記載のシステム。
４６．頭部搭載型ディスプレイは、ディスプレイ上に提示される第１の画像モダリティと第２の画像モダリティとの間でトグルするように構成される、前述の実施例のいずれかに記載のシステム。
４７．第１の画像モダリティは、ＭＲＩ走査を備える、実施例４６に記載のシステム。
４８．第２の画像モダリティは、超音波を備える、実施例４６－４７のいずれかに記載のシステム。
４９．第１の画像モダリティは、Ｘ線走査を備える、実施例４６－４８のいずれかに記載のシステム。
５０．超音波音波を生産するように適合される、電子エミッタをさらに備える、前述の実施例のいずれかに記載のシステム。
５１．超音波音波を電気信号に変換するように適合される、センサをさらに備える、前述の実施例のいずれかに記載のシステム。
５２．頭部搭載型ディスプレイは、ユーザが、仮想基準マーカをユーザの眼に対してユーザの正面の環境の一部上に設置することを可能にするように構成される、前述の実施例のいずれかに記載のシステム。
５３．頭部搭載型ディスプレイは、画像が環境内の実世界オブジェクトに添付されて現れるように、画像をディスプレイ上に投影するように構成される、前述の実施例のいずれかに記載のシステム。
５４．頭部搭載型ディスプレイは、仮想切断ガイドラインが切断されるべきヒト身体領域上にオーバーレイされるようにユーザに現れるように、仮想切断ガイドラインを表示するように構成される、または切断されるべき部分へのアクセスを与える、前述の実施例のいずれかに記載のシステム。
５５．仮想切断ガイドラインの見掛け場所は、患者の身体部分の位置に関連するように現れる、実施例５４に記載のシステム。
５６．頭部搭載型ディスプレイは、信号を放出し、ユーザの正面の環境の一部内のオブジェクトの位置に関するデータを取得するように構成される、前述の実施例のいずれかに記載のシステム。
５７．頭部搭載型ディスプレイは、オブジェクト場所のデータベースを使用して、ユーザの正面の環境の一部内のオブジェクトの位置を取得するように構成される、前述の実施例のいずれかに記載のシステム。
５８．頭部搭載型ディスプレイは、該オブジェクト場所のデータベースに基づいて、基準点を設定し、画像が基準点に対して固定されて現れるように、画像をユーザの眼の中に投影するように構成される、実施例５７に記載のシステム。
５９．頭部搭載型ディスプレイは、ユーザ入力に基づいて、オブジェクトの３Ｄ画像のビューを軸を中心として回転させるように構成される、前述の実施例のいずれかに記載のシステム。
６０．頭部搭載型ディスプレイは、ユーザ入力に基づいて、３Ｄオブジェクトの画像のビューを平行移動させるように構成される、前述の実施例のいずれかに記載のシステム。
６１．頭部搭載型ディスプレイは、オブジェクトの３Ｄ画像の第１のスライスを表示するように構成される、前述の実施例のいずれかに記載のシステム。
６２．頭部搭載型ディスプレイは、３Ｄ画像の第１のスライスの画像および第２のスライスの画像を通してシーケンス化するように構成される、実施例６１に記載のシステム。
６３．頭部搭載型ディスプレイは、頭部搭載型ディスプレイの第２のユーザが伝送される環境の該部分の該画像を視認し得るように、ユーザの正面の環境の一部の画像を伝送するように構成される、前述の実施例のいずれかに記載のシステム。
６４．頭部搭載型ディスプレイは、ユーザに医療手技におけるステップをアラートするように構成される、前述の実施例のいずれかに記載のシステム。
６５．頭部搭載型ディスプレイは、医療パラメータを監視し、医療パラメータに基づいて、アラートを提供するように構成される、前述の実施例のいずれかに記載のシステム。
６６．医療パラメータは、バイタルサインを含む、実施例６５に記載のシステム。
６７．頭部搭載型ディスプレイは、超音波を放出し、該超音波から生じる信号を測定するように構成され、頭部搭載型ディスプレイはさらに、信号に基づいて、超音波画像を形成するように構成される、前述の実施例のいずれかに記載のシステム。
６８．頭部搭載型ディスプレイは、ユーザにユーザの視野外のオブジェクトおよび／またはイベントをアラートするように構成される、前述の実施例のいずれかに記載のシステム。
６９．検出器アレイは、環境を結像するように構成される、外向きに面したカメラを備える、実施例３１に記載のシステム。
７０．システムは、少なくとも部分的に、環境の照明条件の時間的側面に基づいて、画像コンテンツをユーザの眼内に提示する方法を判定するように構成される、前述の実施例のいずれかに記載のシステム。
７１．該頭部搭載型ディスプレイシステムは、少なくとも部分的に、光受容体の投影された光場所の密度に基づいて、画像コンテンツをユーザの視野の一部に提示するように、光をユーザの眼の場所に投影するように構成される、前述の実施例のいずれかに記載のシステム。
７２．該ディスプレイは、該画像コンテンツが異なる深度から生じるかのように該画像コンテンツを提示するように、異なる発散量において光を該ユーザの眼の中に投影するように構成される、前述の実施例のいずれかに記載のシステム。
７３．頭部搭載型ディスプレイは、第１の画像モダリティと第１の画像モダリティと異なる第２の画像モダリティを組み合わせるように構成される、前述の実施例のいずれかに記載のシステム。
７４．第１の画像モダリティおよび第２の画像モダリティはそれぞれ、ＭＲＩ、ＣＴ、ＰＥＴ、ＭＲＡ、またはＣＴＡ走査からの画像を備える、実施例７３に記載のシステム。
７５．頭部搭載型ディスプレイは、第１および第２の画像モダリティの組み合わせられた画像を患者の実際の解剖学的構造にわたって整合させるように構成される、実施例７３または７４に記載のシステム。
１．光をユーザの眼に投影し、拡張現実画像コンテンツを表示するように構成される、頭部搭載型ディスプレイシステムであって、該ユーザの眼は、中心領域と、該中心領域を中心として配置される周辺領域を有する、視野を有し、
ユーザの頭部上に支持されるように構成される、フレームと、
フレーム上に配置される、ディスプレイであって、該ディスプレイは、画像コンテンツを該ユーザの視野に提示するように、光を該ユーザの眼の中に投影するように構成され、該ディスプレイの少なくとも一部は、透明部分が、ユーザの正面の環境の一部からの光をユーザの眼に伝送し、ユーザの正面の環境の該部分のビューを提供するように、透明であって、ユーザが該頭部搭載型ディスプレイシステムを装着すると、ユーザの眼の正面の場所に配置される、ディスプレイと、
環境の照明条件を捕捉するように構成される、１つまたはそれを上回る捕捉デバイスと、
該ディスプレイと通信し、該ディスプレイ上での画像コンテンツの提示を制御する、処理電子機器と、
を備え、該頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツをユーザの視野の一部に提示するように、光をユーザの眼の場所に投影するように構成される、頭部搭載型ディスプレイシステム。
２．明所視照明条件下、投影された光場所は、錐体の投影された光場所の密度に基づく、実施例１に記載のシステム。
３．環境の明所視照明条件は、輝度１０ｃｄ／ｍ２～１０８ｃｄ／ｍ２を有する、実施例２に記載のシステム。
４．ユーザの視野の一部は、中心領域を備える、実施例２－３のいずれかに記載のシステム。
５．投影された光場所は、中心窩から０～５度ずれた範囲内にある、実施例２－４のいずれかに記載のシステム。
６．暗所視照明条件下、投影された光場所は、桿体の投影された光場所の密度に基づく、実施例１に記載のシステム。
７．環境の暗所視照明条件は、輝度１０－３．５ｃｄ／ｍ２～１０－６ｃｄ／ｍ２を有する、実施例６に記載のシステム。
８．ユーザの視野の一部は、周辺領域を備える、実施例６－７のいずれかに記載のシステム。
９．投影された光場所は、中心窩から１５～２０度ずれた範囲内にある、実施例６－８のいずれかに記載のシステム。
１０．投影された光場所は、中心窩から２５～３５度ずれた範囲内にある、実施例６－８のいずれかに記載のシステム。
１１．薄明視照明条件下、投影された光場所は、少なくとも部分的に、薄明視照明条件下で費やされた時間に基づく、実施例１に記載のシステム。
１２．環境の薄明視照明条件は、輝度１０－３ｃｄ／ｍ２～１００．５ｃｄ／ｍ２を有する、実施例１１に記載のシステム。
１３．システムは、少なくとも部分的に、薄明視照明条件下で費やされた時間に基づいて、錐体または桿体がユーザの眼内で優勢であるかどうかを判定するように構成される、実施例１１または１２に記載のシステム。
１４．投影された光場所は、錐体がユーザの眼内で優勢であるとき、錐体の投影された光場所の密度に基づく、実施例１１－１３のいずれかに記載のシステム。
１５．ユーザの視野の一部は、中心領域を備える、実施例１４に記載のシステム。
１６．投影された光場所は、中心窩から０～５度ずれた範囲内にある、実施例１４に記載のシステム。
１７．投影された光場所は、桿体がユーザの眼内で優勢であるとき、ユーザの眼の桿体の投影された光場所の密度に基づく、実施例１１－１３のいずれかに記載のシステム。
１８．ユーザの視野の一部は、周辺領域を備える、実施例１７に記載のシステム。
１９．投影された光場所は、中心窩から１５～２０度ずれた範囲内にある、実施例１７に記載のシステム。
２０．投影された光場所は、中心窩から２５～３５度ずれた範囲内にある、実施例１７に記載のシステム。
２１．システムは、照明条件下で費やされた時間を監視するためのタイマまたはクロックを備える、前述の実施例のいずれかに記載のシステム。
２２．光を該ユーザの眼の中に指向し、画像を眼内に形成するように構成される、１つまたはそれを上回る光源をさらに備える、前述の実施例のいずれかに記載のシステム。
２３．透明であって、ユーザの眼の正面の場所に配置される、該ディスプレイの少なくとも該部分は、光をユーザに投影するように構成される、１つまたはそれを上回る導波管を備える、前述の実施例のいずれかに記載のシステム。
２４．該１つまたはそれを上回る光源は、光を該１つまたはそれを上回る導波管の中に指向するように構成される、実施例２３に記載のシステム。
２５．該光源は、ファイバ走査プロジェクタを備える、実施例２２－２４のいずれかに記載のシステム。
２６．１つまたはそれを上回る捕捉デバイスは、１つまたはそれを上回る画像捕捉デバイスを備える、実施例１－２５のいずれかに記載のシステム。
２７．１つまたはそれを上回る画像捕捉デバイスは、１つまたはそれを上回るカメラを備える、実施例２６に記載のシステム。
２８．１つまたはそれを上回る捕捉デバイスは、１つまたはそれを上回る光センサを備える、実施例１－２５のいずれかに記載のシステム。
２９．１つまたはそれを上回る光センサは、１つまたはそれを上回る照度計を備える、実施例２８に記載のシステム。
３０．１つまたはそれを上回る捕捉デバイスは、環境の輝度を測定するように構成される、前述の実施例のいずれかに記載のシステム。
３１．１つまたはそれを上回る捕捉デバイスは、ピクセルのアレイを備える、検出器アレイを備え、検出器アレイは、ピクセルにわたって光レベルを積分し、照明条件を捕捉するように構成される、前述の実施例のいずれかに記載のシステム。
３２．１つまたはそれを上回る捕捉デバイスは、瞳孔サイズを検出し、照明条件を捕捉するように構成される、１つまたはそれを上回る内向きに面したカメラを備える、前述の実施例のいずれかに記載のシステム。
３３．距離測定デバイスをさらに備える、前述の実施例のいずれかに記載のシステム。
３４．該距離測定デバイスは、レーザ測距計を備える、実施例３３に記載のシステム。
３５．該ユーザの眼の位置および／または移動を追跡するように構成される、眼追跡デバイスをさらに備える、前述の実施例のいずれかに記載のシステム。
３６．該ユーザの眼を結像するように構成される、１つまたはそれを上回る内向きに面した画像捕捉デバイスをさらに備える、実施例１－３５のいずれかに記載のシステム。
３７．システムは、アラートをユーザに提供し、画像コンテンツが提示されたことを示すように構成される、前述の実施例のいずれかに記載のシステム。
３８．アラートは、視覚的アラートである、実施例３７に記載のシステム。
３９．アラートは、聴覚的アラートである、実施例３７に記載のシステム。
４０．該頭部搭載型ディスプレイシステムは、ユーザの正面の環境の少なくとも該部分の３Ｄ表現を構築し、環境の少なくとも該部分の表現を解釈するように構成され、該環境の該部分は、患者を含み、該頭部搭載型ディスプレイはさらに、患者と関連付けられた第１の構造を患者と関連付けられた第２の構造から区別するように構成される、前述の実施例のいずれかに記載のシステム。
４１．環境を監視するように構成される、１つまたはそれを上回るセンサをさらに備える、前述の実施例のいずれかに記載のシステム。
４２．該１つまたはそれを上回るセンサは、該環境を結像するように構成される、１つまたはそれを上回る外向きに面した画像捕捉デバイスを備える、実施例４１に記載のシステム。
４３．該環境を結像するように構成される、該１つまたはそれを上回る外向きに面した画像捕捉デバイスは、１つまたはそれを上回る外向きに面したカメラを備える、実施例４２に記載のシステム。
４４．頭部搭載型ディスプレイは、ユーザの視野内のヒト組織の体積を推定するように構成される、前述の実施例のいずれかに記載のシステム。
４５．頭部搭載型ディスプレイは、環境内の２つのオブジェクト間の距離を測定するように構成される、前述の実施例のいずれかに記載のシステム。
４６．頭部搭載型ディスプレイは、ディスプレイ上に提示される第１の画像モダリティと第２の画像モダリティとの間でトグルするように構成される、前述の実施例のいずれかに記載のシステム。
４７．第１の画像モダリティは、ＭＲＩ走査を備える、実施例４６に記載のシステム。
４８．第２の画像モダリティは、超音波を備える、実施例４６－４７のいずれかに記載のシステム。
４９．第１の画像モダリティは、Ｘ線走査を備える、実施例４６－４８のいずれかに記載のシステム。
５０．超音波音波を生産するように適合される、電子エミッタをさらに備える、前述の実施例のいずれかに記載のシステム。
５１．超音波音波を電気信号に変換するように適合される、センサをさらに備える、前述の実施例のいずれかに記載のシステム。
５２．頭部搭載型ディスプレイは、ユーザが、仮想基準マーカをユーザの眼に対してユーザの正面の環境の一部上に設置することを可能にするように構成される、前述の実施例のいずれかに記載のシステム。
５３．頭部搭載型ディスプレイは、画像が環境内の実世界オブジェクトに添付されて現れるように、画像をディスプレイ上に投影するように構成される、前述の実施例のいずれかに記載のシステム。
５４．頭部搭載型ディスプレイは、仮想切断ガイドラインが切断されるべきヒト身体領域上にオーバーレイされるようにユーザに現れるように、仮想切断ガイドラインを表示するように構成される、または切断されるべき部分へのアクセスを与える、前述の実施例のいずれかに記載のシステム。
５５．仮想切断ガイドラインの見掛け場所は、患者の身体部分の位置に関連するように現れる、実施例５４に記載のシステム。
５６．頭部搭載型ディスプレイは、信号を放出し、ユーザの正面の環境の一部内のオブジェクトの位置に関するデータを取得するように構成される、前述の実施例のいずれかに記載のシステム。
５７．頭部搭載型ディスプレイは、オブジェクト場所のデータベースを使用して、ユーザの正面の環境の一部内のオブジェクトの位置を取得するように構成される、前述の実施例のいずれかに記載のシステム。
５８．頭部搭載型ディスプレイは、該オブジェクト場所のデータベースに基づいて、基準点を設定し、画像が基準点に対して固定されて現れるように、画像をユーザの眼の中に投影するように構成される、実施例５７に記載のシステム。
５９．頭部搭載型ディスプレイは、ユーザ入力に基づいて、オブジェクトの３Ｄ画像のビューを軸を中心として回転させるように構成される、前述の実施例のいずれかに記載のシステム。
６０．頭部搭載型ディスプレイは、ユーザ入力に基づいて、３Ｄオブジェクトの画像のビューを平行移動させるように構成される、前述の実施例のいずれかに記載のシステム。
６１．頭部搭載型ディスプレイは、オブジェクトの３Ｄ画像の第１のスライスを表示するように構成される、前述の実施例のいずれかに記載のシステム。
６２．頭部搭載型ディスプレイは、３Ｄ画像の第１のスライスの画像および第２のスライスの画像を通してシーケンス化するように構成される、実施例６１に記載のシステム。
６３．頭部搭載型ディスプレイは、頭部搭載型ディスプレイの第２のユーザが伝送される環境の該部分の該画像を視認し得るように、ユーザの正面の環境の一部の画像を伝送するように構成される、前述の実施例のいずれかに記載のシステム。
６４．頭部搭載型ディスプレイは、ユーザに医療手技におけるステップをアラートするように構成される、前述の実施例のいずれかに記載のシステム。
６５．頭部搭載型ディスプレイは、医療パラメータを監視し、医療パラメータに基づいて、アラートを提供するように構成される、前述の実施例のいずれかに記載のシステム。
６６．医療パラメータは、バイタルサインを含む、実施例６５に記載のシステム。
６７．頭部搭載型ディスプレイは、超音波を放出し、該超音波から生じる信号を測定するように構成され、頭部搭載型ディスプレイはさらに、信号に基づいて、超音波画像を形成するように構成される、前述の実施例のいずれかに記載のシステム。
６８．頭部搭載型ディスプレイは、ユーザにユーザの視野外のオブジェクトおよび／またはイベントをアラートするように構成される、前述の実施例のいずれかに記載のシステム。
６９．検出器アレイは、環境を結像するように構成される、外向きに面したカメラを備える、実施例３１に記載のシステム。
７０．システムは、少なくとも部分的に、環境の照明条件の時間的側面に基づいて、画像コンテンツをユーザの眼内に提示する方法を判定するように構成される、前述の実施例のいずれかに記載のシステム。
７１．該頭部搭載型ディスプレイシステムは、少なくとも部分的に、光受容体の投影された光場所の密度に基づいて、画像コンテンツをユーザの視野の一部に提示するように、光をユーザの眼の場所に投影するように構成される、前述の実施例のいずれかに記載のシステム。
７２．該ディスプレイは、該画像コンテンツが異なる深度から生じるかのように該画像コンテンツを提示するように、異なる発散量において光を該ユーザの眼の中に投影するように構成される、前述の実施例のいずれかに記載のシステム。
７３．頭部搭載型ディスプレイは、第１の画像モダリティと第１の画像モダリティと異なる第２の画像モダリティを組み合わせるように構成される、前述の実施例のいずれかに記載のシステム。
７４．第１の画像モダリティおよび第２の画像モダリティはそれぞれ、ＭＲＩ、ＣＴ、ＰＥＴ、ＭＲＡ、またはＣＴＡ走査からの画像を備える、実施例７３に記載のシステム。
７５．頭部搭載型ディスプレイは、第１および第２の画像モダリティの組み合わせられた画像を患者の実際の解剖学的構造にわたって整合させるように構成される、実施例７３または７４に記載のシステム。
【0022】
実施例セットＩＶＥ
１．光をユーザの眼に投影し、拡張現実画像コンテンツを表示するように構成される、頭部搭載型ディスプレイシステムであって、該ユーザの眼は、中心領域と、該中心領域を中心として配置される周辺領域を有する、視野を有し、
ユーザの頭部上に支持されるように構成される、フレームと、
フレーム上に配置される、ディスプレイであって、該ディスプレイは、画像コンテンツを該ユーザの視野の中心領域に提示するように、光を該ユーザの眼の中に投影するように構成され、該ディスプレイの少なくとも一部は、透明部分が、ユーザの正面の環境の一部からの光をユーザの眼に伝送し、ユーザの正面の環境の該部分のビューを提供するように、透明であって、ユーザが該頭部搭載型ディスプレイシステムを装着すると、ユーザの眼の正面の場所に配置される、ディスプレイと、
環境の照明条件を捕捉するように構成される、１つまたはそれを上回る捕捉デバイスと、
該ディスプレイと通信し、該ディスプレイ上での画像コンテンツの提示を制御する、処理電子機器と、
を備え、該頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて強調解除される、画像コンテンツをユーザの視野の中心領域の一部に提示するように、光をユーザの眼の場所に投影するように構成される、頭部搭載型ディスプレイシステム。
２．明所視照明条件下、画像コンテンツは、錐体の投影された光場所の密度に基づいて、強調解除される、実施例１に記載のシステム。
３．環境の明所視照明条件は、輝度１０ｃｄ／ｍ２～１０８ｃｄ／ｍ２を有する、実施例２に記載のシステム。
４．暗所視照明条件下、画像コンテンツは、桿体の投影された光場所の密度に基づいて、強調解除される、実施例１に記載のシステム。
５．環境の暗所視照明条件は、輝度１０－３．５ｃｄ／ｍ２～１０－６ｃｄ／ｍ２を有する、実施例４に記載のシステム。
６．薄明視照明条件下、画像コンテンツは、少なくとも部分的に、薄明視照明条件下で費やされた時間に基づいて、強調解除される、実施例１に記載のシステム。
７．環境の薄明視照明条件は、輝度１０－３ｃｄ／ｍ２～１００．５ｃｄ／ｍ２を有する、実施例６に記載のシステム。
８．システムは、少なくとも部分的に、薄明視照明条件下で費やされた時間に基づいて、錐体または桿体がユーザの眼内で優勢であるかどうかを判定するように構成される、実施例６または７に記載のシステム。
９．画像コンテンツは、錐体がユーザの眼内で優勢であるとき、錐体の投影された光場所の密度に基づいて、強調解除される、実施例６－８のいずれかに記載のシステム。
１０．画像コンテンツは、桿体がユーザの眼内で優勢であるとき、ユーザの眼の桿体の投影された光場所の密度に基づいて、強調解除される、実施例６－８のいずれかに記載のシステム。
１１．システムは、照明条件下で費やされた時間を監視するためのタイマまたはクロックを備える、前述の実施例のいずれかに記載のシステム。
１２．光を該ユーザの眼の中に指向し、画像を眼内に形成するように構成される、１つまたはそれを上回る光源をさらに備える、前述の実施例のいずれかに記載のシステム。
１３．透明であって、ユーザの眼の正面の場所に配置される、該ディスプレイの少なくとも該部分は、光をユーザに投影するように構成される、１つまたはそれを上回る導波管を備える、前述の実施例のいずれかに記載のシステム。
１４．該１つまたはそれを上回る光源は、光を該１つまたはそれを上回る導波管の中に指向するように構成される、実施例１３に記載のシステム。
１５．該光源は、ファイバ走査プロジェクタを備える、実施例１２－１４のいずれかに記載のシステム。
１６．１つまたはそれを上回る捕捉デバイスは、１つまたはそれを上回る画像捕捉デバイスを備える、実施例１－１５のいずれかに記載のシステム。
１７．１つまたはそれを上回る画像捕捉デバイスは、１つまたはそれを上回るカメラを備える、実施例１６に記載のシステム。
１８．１つまたはそれを上回る捕捉デバイスは、１つまたはそれを上回る光センサを備える、実施例１－１５のいずれかに記載のシステム。
１９．１つまたはそれを上回る光センサは、１つまたはそれを上回る照度計を備える、実施例１８に記載のシステム。
２０．１つまたはそれを上回る捕捉デバイスは、環境の輝度を測定するように構成される、前述の実施例のいずれかに記載のシステム。
２１．１つまたはそれを上回る捕捉デバイスは、ピクセルのアレイを備える、検出器アレイを備え、検出器アレイは、ピクセルにわたって光レベルを積分し、照明条件を捕捉するように構成される、前述の実施例のいずれかに記載のシステム。
２２．１つまたはそれを上回る捕捉デバイスは、瞳孔サイズを検出し、照明条件を捕捉するように構成される、１つまたはそれを上回る内向きに面したカメラを備える、前述の実施例のいずれかに記載のシステム。
２３．距離測定デバイスをさらに備える、前述の実施例のいずれかに記載のシステム。
２４．該距離測定デバイスは、レーザ測距計を備える、実施例２３に記載のシステム。
２５．該ユーザの眼の位置および／または移動を追跡するように構成される、眼追跡デバイスをさらに備える、前述の実施例のいずれかに記載のシステム。
２６．該ユーザの眼を結像するように構成される、１つまたはそれを上回る内向きに面した画像捕捉デバイスをさらに備える、実施例１－２５のいずれかに記載のシステム。
２７．頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツのサイズを低減させるように構成される、前述の実施例のいずれかに記載のシステム。
２８．該サイズの低減は、少なくとも部分的に、眼の分解能に基づく、実施例２７に記載のシステム。
２９．頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツ内の明度を減少させるように構成される、前述の実施例のいずれかに記載のシステム。
３０．頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツ内のコントラストを減少させるように構成される、前述の実施例のいずれかに記載のシステム。
３１．頭部搭載型ディスプレイシステムは、少なくとも部分的に、眼のコントラスト感度に基づいて、コントラストを減少させるように構成される、実施例３０に記載のシステム。
３２．頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツ内の色飽和を減少させるように構成される、前述の実施例のいずれかに記載のシステム。
３３．頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツの鮮明度を低減させるように構成される、前述の実施例のいずれかに記載のシステム。
３４．鮮明化することは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツ内の特徴の縁を強調解除することを含む、実施例３３に記載のシステム。
３５．頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツのカラーバランスを偏移させるように構成される、前述の実施例のいずれかに記載のシステム。
３６．システムは、アラートをユーザに提供し、画像コンテンツが強調解除されたことを示すように構成される、前述の実施例のいずれかに記載のシステム。
３７．アラートは、視覚的アラートである、実施例３６に記載のシステム。
３８．アラートは、聴覚的アラートである、実施例３６に記載のシステム。
３９．該頭部搭載型ディスプレイシステムは、ユーザの正面の環境の少なくとも該部分の３Ｄ表現を構築し、環境の少なくとも該部分の表現を解釈するように構成され、該環境の該部分は、患者を含み、該頭部搭載型ディスプレイはさらに、患者と関連付けられた第１の構造を患者と関連付けられた第２の構造から区別するように構成される、前述の実施例のいずれかに記載のシステム。
４０．環境を監視するように構成される、１つまたはそれを上回るセンサをさらに備える、前述の実施例のいずれかに記載のシステム。
４１．該１つまたはそれを上回るセンサは、該環境を結像するように構成される、１つまたはそれを上回る外向きに面した画像捕捉デバイスを備える、実施例４０に記載のシステム。
４２．該環境を結像するように構成される、該１つまたはそれを上回る外向きに面した画像捕捉デバイスは、１つまたはそれを上回る外向きに面したカメラを備える、実施例４１に記載のシステム。
４３．頭部搭載型ディスプレイは、ユーザの視野内のヒト組織の体積を推定するように構成される、前述の実施例のいずれかに記載のシステム。
４４．頭部搭載型ディスプレイは、環境内の２つのオブジェクト間の距離を測定するように構成される、前述の実施例のいずれかに記載のシステム。
４５．頭部搭載型ディスプレイは、ディスプレイ上に提示される第１の画像モダリティと第２の画像モダリティとの間でトグルするように構成される、前述の実施例のいずれかに記載のシステム。
４６．第１の画像モダリティは、ＭＲＩ走査を備える、実施例４５に記載のシステム。
４７．第２の画像モダリティは、超音波を備える、実施例４５－４６のいずれかに記載のシステム。
４８．第１の画像モダリティは、Ｘ線走査を備える、実施例４５－４７のいずれかに記載のシステム。
４９．超音波音波を生産するように適合される、電子エミッタをさらに備える、前述の実施例のいずれかに記載のシステム。
５０．超音波音波を電気信号に変換するように適合される、センサをさらに備える、前述の実施例のいずれかに記載のシステム。
５１．頭部搭載型ディスプレイは、ユーザが、仮想基準マーカをユーザの眼に対してユーザの正面の環境の一部上に設置することを可能にするように構成される、前述の実施例のいずれかに記載のシステム。
５２．頭部搭載型ディスプレイは、画像が環境内の実世界オブジェクトに添付されて現れるように、画像をディスプレイ上に投影するように構成される、前述の実施例のいずれかに記載のシステム。
５３．頭部搭載型ディスプレイは、仮想切断ガイドラインが切断されるべきヒト身体領域上にオーバーレイされるようにユーザに現れるように、仮想切断ガイドラインを表示するように構成される、または切断されるべき部分へのアクセスを与える、前述の実施例のいずれかに記載のシステム。
５４．仮想切断ガイドラインの見掛け場所は、患者の身体部分の位置に関連するように現れる、実施例５３に記載のシステム。
５５．頭部搭載型ディスプレイは、信号を放出し、ユーザの正面の環境の一部内のオブジェクトの位置に関するデータを取得するように構成される、前述の実施例のいずれかに記載のシステム。
５６．頭部搭載型ディスプレイは、オブジェクト場所のデータベースを使用して、ユーザの正面の環境の一部内のオブジェクトの位置を取得するように構成される、前述の実施例のいずれかに記載のシステム。
５７．頭部搭載型ディスプレイは、該オブジェクト場所のデータベースに基づいて、基準点を設定し、画像が基準点に対して固定されて現れるように、画像をユーザの眼の中に投影するように構成される、実施例５６に記載のシステム。
５８．頭部搭載型ディスプレイは、ユーザ入力に基づいて、オブジェクトの３Ｄ画像のビューを軸を中心として回転させるように構成される、前述の実施例のいずれかに記載のシステム。
５９．頭部搭載型ディスプレイは、ユーザ入力に基づいて、３Ｄオブジェクトの画像のビューを平行移動させるように構成される、前述の実施例のいずれかに記載のシステム。
６０．頭部搭載型ディスプレイは、オブジェクトの３Ｄ画像の第１のスライスを表示するように構成される、前述の実施例のいずれかに記載のシステム。
６１．頭部搭載型ディスプレイは、３Ｄ画像の第１のスライスの画像および第２のスライスの画像を通してシーケンス化するように構成される、実施例６０に記載のシステム。
６２．頭部搭載型ディスプレイは、頭部搭載型ディスプレイの第２のユーザが伝送される環境の該部分の該画像を視認し得るように、ユーザの正面の環境の一部の画像を伝送するように構成される、前述の実施例のいずれかに記載のシステム。
６３．頭部搭載型ディスプレイは、ユーザに医療手技におけるステップをアラートするように構成される、前述の実施例のいずれかに記載のシステム。
６４．頭部搭載型ディスプレイは、医療パラメータを監視し、医療パラメータに基づいて、アラートを提供するように構成される、前述の実施例のいずれかに記載のシステム。
６５．医療パラメータは、バイタルサインを含む、実施例６４に記載のシステム。
６６．頭部搭載型ディスプレイは、超音波を放出し、該超音波から生じる信号を測定するように構成され、頭部搭載型ディスプレイはさらに、信号に基づいて、超音波画像を形成するように構成される、前述の実施例のいずれかに記載のシステム。
６７．頭部搭載型ディスプレイは、ユーザにユーザの視野外のオブジェクトおよび／またはイベントをアラートするように構成される、前述の実施例のいずれかに記載のシステム。
６８．検出器アレイは、環境を結像するように構成される、外向きに面したカメラを備える、実施例２１に記載のシステム。
６９．該頭部搭載型ディスプレイシステムは、周辺領域の一部に提示される画像コンテンツに対して強調解除される、画像コンテンツをユーザの視野の中心領域の一部に提示するように、光をユーザの眼の場所に投影するように構成される、前述の実施例のいずれかに記載のシステム。
７０．該頭部搭載型ディスプレイシステムは、中心領域の別の部分に提示される画像コンテンツに対して強調解除される、画像コンテンツをユーザの視野の中心領域の一部に提示するように、光をユーザの眼の場所に投影するように構成される、前述の実施例のいずれかに記載のシステム。
７１．システムは、少なくとも部分的に、環境の照明条件の時間的側面に基づいて、画像コンテンツをユーザの眼内に提示する方法を判定するように構成される、前述の実施例のいずれかに記載のシステム。
７２．該ディスプレイは、該画像コンテンツが異なる深度から生じるかのように該画像コンテンツを提示するように、異なる発散量において光を該ユーザの眼の中に投影するように構成される、前述の実施例のいずれかに記載のシステム。
７３．頭部搭載型ディスプレイは、ある程度の不透明度を提示される画像コンテンツの少なくとも近傍に提供するように構成される、前述の実施例のいずれかに記載のシステム。
７４．頭部搭載型ディスプレイは、第１の画像モダリティと第１の画像モダリティと異なる第２の画像モダリティを組み合わせるように構成される、前述の実施例のいずれかに記載のシステム。
７５．第１の画像モダリティおよび第２の画像モダリティはそれぞれ、ＭＲＩ、ＣＴ、ＰＥＴ、ＭＲＡ、またはＣＴＡ走査からの画像を備える、実施例７４に記載のシステム。
７６．頭部搭載型ディスプレイは、第１および第２の画像モダリティの組み合わせられた画像を患者の実際の解剖学的構造にわたって整合させるように構成される、実施例７４または７５に記載のシステム。
１．光をユーザの眼に投影し、拡張現実画像コンテンツを表示するように構成される、頭部搭載型ディスプレイシステムであって、該ユーザの眼は、中心領域と、該中心領域を中心として配置される周辺領域を有する、視野を有し、
ユーザの頭部上に支持されるように構成される、フレームと、
フレーム上に配置される、ディスプレイであって、該ディスプレイは、画像コンテンツを該ユーザの視野の中心領域に提示するように、光を該ユーザの眼の中に投影するように構成され、該ディスプレイの少なくとも一部は、透明部分が、ユーザの正面の環境の一部からの光をユーザの眼に伝送し、ユーザの正面の環境の該部分のビューを提供するように、透明であって、ユーザが該頭部搭載型ディスプレイシステムを装着すると、ユーザの眼の正面の場所に配置される、ディスプレイと、
環境の照明条件を捕捉するように構成される、１つまたはそれを上回る捕捉デバイスと、
該ディスプレイと通信し、該ディスプレイ上での画像コンテンツの提示を制御する、処理電子機器と、
を備え、該頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて強調解除される、画像コンテンツをユーザの視野の中心領域の一部に提示するように、光をユーザの眼の場所に投影するように構成される、頭部搭載型ディスプレイシステム。
２．明所視照明条件下、画像コンテンツは、錐体の投影された光場所の密度に基づいて、強調解除される、実施例１に記載のシステム。
３．環境の明所視照明条件は、輝度１０ｃｄ／ｍ２～１０８ｃｄ／ｍ２を有する、実施例２に記載のシステム。
４．暗所視照明条件下、画像コンテンツは、桿体の投影された光場所の密度に基づいて、強調解除される、実施例１に記載のシステム。
５．環境の暗所視照明条件は、輝度１０－３．５ｃｄ／ｍ２～１０－６ｃｄ／ｍ２を有する、実施例４に記載のシステム。
６．薄明視照明条件下、画像コンテンツは、少なくとも部分的に、薄明視照明条件下で費やされた時間に基づいて、強調解除される、実施例１に記載のシステム。
７．環境の薄明視照明条件は、輝度１０－３ｃｄ／ｍ２～１００．５ｃｄ／ｍ２を有する、実施例６に記載のシステム。
８．システムは、少なくとも部分的に、薄明視照明条件下で費やされた時間に基づいて、錐体または桿体がユーザの眼内で優勢であるかどうかを判定するように構成される、実施例６または７に記載のシステム。
９．画像コンテンツは、錐体がユーザの眼内で優勢であるとき、錐体の投影された光場所の密度に基づいて、強調解除される、実施例６－８のいずれかに記載のシステム。
１０．画像コンテンツは、桿体がユーザの眼内で優勢であるとき、ユーザの眼の桿体の投影された光場所の密度に基づいて、強調解除される、実施例６－８のいずれかに記載のシステム。
１１．システムは、照明条件下で費やされた時間を監視するためのタイマまたはクロックを備える、前述の実施例のいずれかに記載のシステム。
１２．光を該ユーザの眼の中に指向し、画像を眼内に形成するように構成される、１つまたはそれを上回る光源をさらに備える、前述の実施例のいずれかに記載のシステム。
１３．透明であって、ユーザの眼の正面の場所に配置される、該ディスプレイの少なくとも該部分は、光をユーザに投影するように構成される、１つまたはそれを上回る導波管を備える、前述の実施例のいずれかに記載のシステム。
１４．該１つまたはそれを上回る光源は、光を該１つまたはそれを上回る導波管の中に指向するように構成される、実施例１３に記載のシステム。
１５．該光源は、ファイバ走査プロジェクタを備える、実施例１２－１４のいずれかに記載のシステム。
１６．１つまたはそれを上回る捕捉デバイスは、１つまたはそれを上回る画像捕捉デバイスを備える、実施例１－１５のいずれかに記載のシステム。
１７．１つまたはそれを上回る画像捕捉デバイスは、１つまたはそれを上回るカメラを備える、実施例１６に記載のシステム。
１８．１つまたはそれを上回る捕捉デバイスは、１つまたはそれを上回る光センサを備える、実施例１－１５のいずれかに記載のシステム。
１９．１つまたはそれを上回る光センサは、１つまたはそれを上回る照度計を備える、実施例１８に記載のシステム。
２０．１つまたはそれを上回る捕捉デバイスは、環境の輝度を測定するように構成される、前述の実施例のいずれかに記載のシステム。
２１．１つまたはそれを上回る捕捉デバイスは、ピクセルのアレイを備える、検出器アレイを備え、検出器アレイは、ピクセルにわたって光レベルを積分し、照明条件を捕捉するように構成される、前述の実施例のいずれかに記載のシステム。
２２．１つまたはそれを上回る捕捉デバイスは、瞳孔サイズを検出し、照明条件を捕捉するように構成される、１つまたはそれを上回る内向きに面したカメラを備える、前述の実施例のいずれかに記載のシステム。
２３．距離測定デバイスをさらに備える、前述の実施例のいずれかに記載のシステム。
２４．該距離測定デバイスは、レーザ測距計を備える、実施例２３に記載のシステム。
２５．該ユーザの眼の位置および／または移動を追跡するように構成される、眼追跡デバイスをさらに備える、前述の実施例のいずれかに記載のシステム。
２６．該ユーザの眼を結像するように構成される、１つまたはそれを上回る内向きに面した画像捕捉デバイスをさらに備える、実施例１－２５のいずれかに記載のシステム。
２７．頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツのサイズを低減させるように構成される、前述の実施例のいずれかに記載のシステム。
２８．該サイズの低減は、少なくとも部分的に、眼の分解能に基づく、実施例２７に記載のシステム。
２９．頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツ内の明度を減少させるように構成される、前述の実施例のいずれかに記載のシステム。
３０．頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツ内のコントラストを減少させるように構成される、前述の実施例のいずれかに記載のシステム。
３１．頭部搭載型ディスプレイシステムは、少なくとも部分的に、眼のコントラスト感度に基づいて、コントラストを減少させるように構成される、実施例３０に記載のシステム。
３２．頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツ内の色飽和を減少させるように構成される、前述の実施例のいずれかに記載のシステム。
３３．頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツの鮮明度を低減させるように構成される、前述の実施例のいずれかに記載のシステム。
３４．鮮明化することは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツ内の特徴の縁を強調解除することを含む、実施例３３に記載のシステム。
３５．頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツのカラーバランスを偏移させるように構成される、前述の実施例のいずれかに記載のシステム。
３６．システムは、アラートをユーザに提供し、画像コンテンツが強調解除されたことを示すように構成される、前述の実施例のいずれかに記載のシステム。
３７．アラートは、視覚的アラートである、実施例３６に記載のシステム。
３８．アラートは、聴覚的アラートである、実施例３６に記載のシステム。
３９．該頭部搭載型ディスプレイシステムは、ユーザの正面の環境の少なくとも該部分の３Ｄ表現を構築し、環境の少なくとも該部分の表現を解釈するように構成され、該環境の該部分は、患者を含み、該頭部搭載型ディスプレイはさらに、患者と関連付けられた第１の構造を患者と関連付けられた第２の構造から区別するように構成される、前述の実施例のいずれかに記載のシステム。
４０．環境を監視するように構成される、１つまたはそれを上回るセンサをさらに備える、前述の実施例のいずれかに記載のシステム。
４１．該１つまたはそれを上回るセンサは、該環境を結像するように構成される、１つまたはそれを上回る外向きに面した画像捕捉デバイスを備える、実施例４０に記載のシステム。
４２．該環境を結像するように構成される、該１つまたはそれを上回る外向きに面した画像捕捉デバイスは、１つまたはそれを上回る外向きに面したカメラを備える、実施例４１に記載のシステム。
４３．頭部搭載型ディスプレイは、ユーザの視野内のヒト組織の体積を推定するように構成される、前述の実施例のいずれかに記載のシステム。
４４．頭部搭載型ディスプレイは、環境内の２つのオブジェクト間の距離を測定するように構成される、前述の実施例のいずれかに記載のシステム。
４５．頭部搭載型ディスプレイは、ディスプレイ上に提示される第１の画像モダリティと第２の画像モダリティとの間でトグルするように構成される、前述の実施例のいずれかに記載のシステム。
４６．第１の画像モダリティは、ＭＲＩ走査を備える、実施例４５に記載のシステム。
４７．第２の画像モダリティは、超音波を備える、実施例４５－４６のいずれかに記載のシステム。
４８．第１の画像モダリティは、Ｘ線走査を備える、実施例４５－４７のいずれかに記載のシステム。
４９．超音波音波を生産するように適合される、電子エミッタをさらに備える、前述の実施例のいずれかに記載のシステム。
５０．超音波音波を電気信号に変換するように適合される、センサをさらに備える、前述の実施例のいずれかに記載のシステム。
５１．頭部搭載型ディスプレイは、ユーザが、仮想基準マーカをユーザの眼に対してユーザの正面の環境の一部上に設置することを可能にするように構成される、前述の実施例のいずれかに記載のシステム。
５２．頭部搭載型ディスプレイは、画像が環境内の実世界オブジェクトに添付されて現れるように、画像をディスプレイ上に投影するように構成される、前述の実施例のいずれかに記載のシステム。
５３．頭部搭載型ディスプレイは、仮想切断ガイドラインが切断されるべきヒト身体領域上にオーバーレイされるようにユーザに現れるように、仮想切断ガイドラインを表示するように構成される、または切断されるべき部分へのアクセスを与える、前述の実施例のいずれかに記載のシステム。
５４．仮想切断ガイドラインの見掛け場所は、患者の身体部分の位置に関連するように現れる、実施例５３に記載のシステム。
５５．頭部搭載型ディスプレイは、信号を放出し、ユーザの正面の環境の一部内のオブジェクトの位置に関するデータを取得するように構成される、前述の実施例のいずれかに記載のシステム。
５６．頭部搭載型ディスプレイは、オブジェクト場所のデータベースを使用して、ユーザの正面の環境の一部内のオブジェクトの位置を取得するように構成される、前述の実施例のいずれかに記載のシステム。
５７．頭部搭載型ディスプレイは、該オブジェクト場所のデータベースに基づいて、基準点を設定し、画像が基準点に対して固定されて現れるように、画像をユーザの眼の中に投影するように構成される、実施例５６に記載のシステム。
５８．頭部搭載型ディスプレイは、ユーザ入力に基づいて、オブジェクトの３Ｄ画像のビューを軸を中心として回転させるように構成される、前述の実施例のいずれかに記載のシステム。
５９．頭部搭載型ディスプレイは、ユーザ入力に基づいて、３Ｄオブジェクトの画像のビューを平行移動させるように構成される、前述の実施例のいずれかに記載のシステム。
６０．頭部搭載型ディスプレイは、オブジェクトの３Ｄ画像の第１のスライスを表示するように構成される、前述の実施例のいずれかに記載のシステム。
６１．頭部搭載型ディスプレイは、３Ｄ画像の第１のスライスの画像および第２のスライスの画像を通してシーケンス化するように構成される、実施例６０に記載のシステム。
６２．頭部搭載型ディスプレイは、頭部搭載型ディスプレイの第２のユーザが伝送される環境の該部分の該画像を視認し得るように、ユーザの正面の環境の一部の画像を伝送するように構成される、前述の実施例のいずれかに記載のシステム。
６３．頭部搭載型ディスプレイは、ユーザに医療手技におけるステップをアラートするように構成される、前述の実施例のいずれかに記載のシステム。
６４．頭部搭載型ディスプレイは、医療パラメータを監視し、医療パラメータに基づいて、アラートを提供するように構成される、前述の実施例のいずれかに記載のシステム。
６５．医療パラメータは、バイタルサインを含む、実施例６４に記載のシステム。
６６．頭部搭載型ディスプレイは、超音波を放出し、該超音波から生じる信号を測定するように構成され、頭部搭載型ディスプレイはさらに、信号に基づいて、超音波画像を形成するように構成される、前述の実施例のいずれかに記載のシステム。
６７．頭部搭載型ディスプレイは、ユーザにユーザの視野外のオブジェクトおよび／またはイベントをアラートするように構成される、前述の実施例のいずれかに記載のシステム。
６８．検出器アレイは、環境を結像するように構成される、外向きに面したカメラを備える、実施例２１に記載のシステム。
６９．該頭部搭載型ディスプレイシステムは、周辺領域の一部に提示される画像コンテンツに対して強調解除される、画像コンテンツをユーザの視野の中心領域の一部に提示するように、光をユーザの眼の場所に投影するように構成される、前述の実施例のいずれかに記載のシステム。
７０．該頭部搭載型ディスプレイシステムは、中心領域の別の部分に提示される画像コンテンツに対して強調解除される、画像コンテンツをユーザの視野の中心領域の一部に提示するように、光をユーザの眼の場所に投影するように構成される、前述の実施例のいずれかに記載のシステム。
７１．システムは、少なくとも部分的に、環境の照明条件の時間的側面に基づいて、画像コンテンツをユーザの眼内に提示する方法を判定するように構成される、前述の実施例のいずれかに記載のシステム。
７２．該ディスプレイは、該画像コンテンツが異なる深度から生じるかのように該画像コンテンツを提示するように、異なる発散量において光を該ユーザの眼の中に投影するように構成される、前述の実施例のいずれかに記載のシステム。
７３．頭部搭載型ディスプレイは、ある程度の不透明度を提示される画像コンテンツの少なくとも近傍に提供するように構成される、前述の実施例のいずれかに記載のシステム。
７４．頭部搭載型ディスプレイは、第１の画像モダリティと第１の画像モダリティと異なる第２の画像モダリティを組み合わせるように構成される、前述の実施例のいずれかに記載のシステム。
７５．第１の画像モダリティおよび第２の画像モダリティはそれぞれ、ＭＲＩ、ＣＴ、ＰＥＴ、ＭＲＡ、またはＣＴＡ走査からの画像を備える、実施例７４に記載のシステム。
７６．頭部搭載型ディスプレイは、第１および第２の画像モダリティの組み合わせられた画像を患者の実際の解剖学的構造にわたって整合させるように構成される、実施例７４または７５に記載のシステム。
【0023】
実施例セットＩＶＦ
１．光をユーザの眼に投影し、拡張現実画像コンテンツを表示するように構成される、頭部搭載型ディスプレイシステムであって、該ユーザの眼は、中心領域と、該中心領域を中心として配置される周辺領域を有する、視野を有し、
ユーザの頭部上に支持されるように構成される、フレームと、
フレーム上に配置される、ディスプレイであって、該ディスプレイは、画像コンテンツを該ユーザの視野の該周辺領域に提示するように、光を該ユーザの眼の中に投影するように構成され、該ディスプレイの少なくとも一部は、透明部分が、ユーザの正面の環境の一部からの光をユーザの眼に伝送し、ユーザの正面の環境の該部分のビューを提供するように、透明であって、ユーザが該頭部搭載型ディスプレイシステムを装着すると、ユーザの眼の正面の場所に配置される、ディスプレイと、
環境の照明条件を捕捉するように構成される、１つまたはそれを上回る捕捉デバイスと、
該ディスプレイと通信し、該ディスプレイ上での画像コンテンツの提示を制御する、処理電子機器と、
を備え、該頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて強調解除される、画像コンテンツをユーザの視野の周辺領域の一部に提示するように、光をユーザの眼の場所に投影するように構成される、頭部搭載型ディスプレイシステム。
２．明所視照明条件下、画像コンテンツは、錐体の投影された光場所の密度に基づいて、強調解除される、実施例１に記載のシステム。
３．環境の明所視照明条件は、輝度１０ｃｄ／ｍ２～１０８ｃｄ／ｍ２を有する、実施例２に記載のシステム。
４．暗所視照明条件下、画像コンテンツは、桿体の投影された光場所の密度に基づいて、強調解除される、実施例１に記載のシステム。
５．環境の暗所視照明条件は、輝度１０－３．５ｃｄ／ｍ２～１０－６ｃｄ／ｍ２を有する、実施例４に記載のシステム。
６．薄明視照明条件下、画像コンテンツは、少なくとも部分的に、薄明視照明条件下で費やされた時間に基づいて、強調解除される、実施例１に記載のシステム。
７．環境の薄明視照明条件は、輝度１０－３ｃｄ／ｍ２～１００．５ｃｄ／ｍ２を有する、実施例６に記載のシステム。
８．システムは、少なくとも部分的に、薄明視照明条件下で費やされた時間に基づいて、錐体または桿体がユーザの眼内で優勢であるかどうかを判定するように構成される、実施例６または７に記載のシステム。
９．画像コンテンツは、錐体がユーザの眼内で優勢であるとき、錐体の投影された光場所の密度に基づいて、強調解除される、実施例６－８のいずれかに記載のシステム。
１０．画像コンテンツは、桿体がユーザの眼内で優勢であるとき、ユーザの眼の桿体の投影された光場所の密度に基づいて、強調解除される、実施例６－８のいずれかに記載のシステム。
１１．システムは、照明条件下で費やされた時間を監視するためのタイマまたはクロックを備える、前述の実施例のいずれかに記載のシステム。
１２．光を該ユーザの眼の中に指向し、画像を眼内に形成するように構成される、１つまたはそれを上回る光源をさらに備える、前述の実施例のいずれかに記載のシステム。
１３．透明であって、ユーザの眼の正面の場所に配置される、該ディスプレイの少なくとも該部分は、光をユーザに投影するように構成される、１つまたはそれを上回る導波管を備える、前述の実施例のいずれかに記載のシステム。
１４．該１つまたはそれを上回る光源は、光を該１つまたはそれを上回る導波管の中に指向するように構成される、実施例１３に記載のシステム。
１５．該光源は、ファイバ走査プロジェクタを備える、実施例１２－１４のいずれかに記載のシステム。
１６．１つまたはそれを上回る捕捉デバイスは、１つまたはそれを上回る画像捕捉デバイスを備える、実施例１－１５のいずれかに記載のシステム。
１７．１つまたはそれを上回る画像捕捉デバイスは、１つまたはそれを上回るカメラを備える、実施例１６に記載のシステム。
１８．１つまたはそれを上回る捕捉デバイスは、１つまたはそれを上回る光センサを備える、実施例１－１５のいずれかに記載のシステム。
１９．１つまたはそれを上回る光センサは、１つまたはそれを上回る照度計を備える、実施例１８に記載のシステム。
２０．１つまたはそれを上回る捕捉デバイスは、環境の輝度を測定するように構成される、前述の実施例のいずれかに記載のシステム。
２１．１つまたはそれを上回る捕捉デバイスは、ピクセルのアレイを備える、検出器アレイを備え、検出器アレイは、ピクセルにわたって光レベルを積分し、照明条件を捕捉するように構成される、前述の実施例のいずれかに記載のシステム。
２２．１つまたはそれを上回る捕捉デバイスは、瞳孔サイズを検出し、照明条件を捕捉するように構成される、１つまたはそれを上回る内向きに面したカメラを備える、前述の実施例のいずれかに記載のシステム。
２３．距離測定デバイスをさらに備える、前述の実施例のいずれかに記載のシステム。
２４．該距離測定デバイスは、レーザ測距計を備える、実施例２３に記載のシステム。
２５．該ユーザの眼の位置および／または移動を追跡するように構成される、眼追跡デバイスをさらに備える、前述の実施例のいずれかに記載のシステム。
２６．該ユーザの眼を結像するように構成される、１つまたはそれを上回る内向きに面した画像捕捉デバイスをさらに備える、実施例１－２５のいずれかに記載のシステム。
２７．頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツのサイズを低減させるように構成される、前述の実施例のいずれかに記載のシステム。
２８．該サイズの低減は、少なくとも部分的に、眼の分解能に基づく、実施例２７に記載のシステム。
２９．頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツ内の明度を減少させるように構成される、前述の実施例のいずれかに記載のシステム。
３０．頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツ内のコントラストを減少させるように構成される、前述の実施例のいずれかに記載のシステム。
３１．頭部搭載型ディスプレイシステムは、少なくとも部分的に、眼のコントラスト感度に基づいて、コントラストを減少させるように構成される、実施例３０に記載のシステム。
３２．頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツ内の色飽和を減少させるように構成される、前述の実施例のいずれかに記載のシステム。
３３．頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツの鮮明度を低減させるように構成される、前述の実施例のいずれかに記載のシステム。
３４．鮮明化することは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツ内の特徴の縁を強調解除することを含む、実施例３３に記載のシステム。
３５．頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツのカラーバランスを偏移させるように構成される、前述の実施例のいずれかに記載のシステム。
３６．システムは、アラートをユーザに提供し、画像コンテンツが強調解除されたことを示すように構成される、前述の実施例のいずれかに記載のシステム。
３７．アラートは、視覚的アラートである、実施例３６に記載のシステム。
３８．アラートは、聴覚的アラートである、実施例３６に記載のシステム。
３９．該頭部搭載型ディスプレイシステムは、ユーザの正面の環境の少なくとも該部分の３Ｄ表現を構築し、環境の少なくとも該部分の表現を解釈するように構成され、該環境の該部分は、患者を含み、該頭部搭載型ディスプレイはさらに、患者と関連付けられた第１の構造を患者と関連付けられた第２の構造から区別するように構成される、前述の実施例のいずれかに記載のシステム。
４０．環境を監視するように構成される、１つまたはそれを上回るセンサをさらに備える、前述の実施例のいずれかに記載のシステム。
４１．該１つまたはそれを上回るセンサは、該環境を結像するように構成される、１つまたはそれを上回る外向きに面した画像捕捉デバイスを備える、実施例４０に記載のシステム。
４２．該環境を結像するように構成される、該１つまたはそれを上回る外向きに面した画像捕捉デバイスは、１つまたはそれを上回る外向きに面したカメラを備える、実施例４１に記載のシステム。
４３．頭部搭載型ディスプレイは、ユーザの視野内のヒト組織の体積を推定するように構成される、前述の実施例のいずれかに記載のシステム。
４４．頭部搭載型ディスプレイは、環境内の２つのオブジェクト間の距離を測定するように構成される、前述の実施例のいずれかに記載のシステム。
４５．頭部搭載型ディスプレイは、ディスプレイ上に提示される第１の画像モダリティと第２の画像モダリティとの間でトグルするように構成される、前述の実施例のいずれかに記載のシステム。
４６．第１の画像モダリティは、ＭＲＩ走査を備える、実施例４５に記載のシステム。
４７．第２の画像モダリティは、超音波を備える、実施例４５－４６のいずれかに記載のシステム。
４８．第１の画像モダリティは、Ｘ線走査を備える、実施例４５－４７のいずれかに記載のシステム。
４９．超音波音波を生産するように適合される、電子エミッタをさらに備える、前述の実施例のいずれかに記載のシステム。
５０．超音波音波を電気信号に変換するように適合される、センサをさらに備える、前述の実施例のいずれかに記載のシステム。
５１．頭部搭載型ディスプレイは、ユーザが、仮想基準マーカをユーザの眼に対してユーザの正面の環境の一部上に設置することを可能にするように構成される、前述の実施例のいずれかに記載のシステム。
５２．頭部搭載型ディスプレイは、画像が環境内の実世界オブジェクトに添付されて現れるように、画像をディスプレイ上に投影するように構成される、前述の実施例のいずれかに記載のシステム。
５３．頭部搭載型ディスプレイは、仮想切断ガイドラインが切断されるべきヒト身体領域上にオーバーレイされるようにユーザに現れるように、仮想切断ガイドラインを表示するように構成される、または切断されるべき部分へのアクセスを与える、前述の実施例のいずれかに記載のシステム。
５４．仮想切断ガイドラインの見掛け場所は、患者の身体部分の位置に関連するように現れる、実施例５３に記載のシステム。
５５．頭部搭載型ディスプレイは、信号を放出し、ユーザの正面の環境の一部内のオブジェクトの位置に関するデータを取得するように構成される、前述の実施例のいずれかに記載のシステム。
５６．頭部搭載型ディスプレイは、オブジェクト場所のデータベースを使用して、ユーザの正面の環境の一部内のオブジェクトの位置を取得するように構成される、前述の実施例のいずれかに記載のシステム。
５７．頭部搭載型ディスプレイは、該オブジェクト場所のデータベースに基づいて、基準点を設定し、画像が基準点に対して固定されて現れるように、画像をユーザの眼の中に投影するように構成される、実施例５６に記載のシステム。
５８．頭部搭載型ディスプレイは、ユーザ入力に基づいて、オブジェクトの３Ｄ画像のビューを軸を中心として回転させるように構成される、前述の実施例のいずれかに記載のシステム。
５９．頭部搭載型ディスプレイは、ユーザ入力に基づいて、３Ｄオブジェクトの画像のビューを平行移動させるように構成される、前述の実施例のいずれかに記載のシステム。
６０．頭部搭載型ディスプレイは、オブジェクトの３Ｄ画像の第１のスライスを表示するように構成される、前述の実施例のいずれかに記載のシステム。
６１．頭部搭載型ディスプレイは、３Ｄ画像の第１のスライスの画像および第２のスライスの画像を通してシーケンス化するように構成される、実施例６０に記載のシステム。
６２．頭部搭載型ディスプレイは、頭部搭載型ディスプレイの第２のユーザが伝送される環境の該部分の該画像を視認し得るように、ユーザの正面の環境の一部の画像を伝送するように構成される、前述の実施例のいずれかに記載のシステム。
６３．頭部搭載型ディスプレイは、ユーザに医療手技におけるステップをアラートするように構成される、前述の実施例のいずれかに記載のシステム。
６４．頭部搭載型ディスプレイは、医療パラメータを監視し、医療パラメータに基づいて、アラートを提供するように構成される、前述の実施例のいずれかに記載のシステム。
６５．医療パラメータは、バイタルサインを含む、実施例６４に記載のシステム。
６６．頭部搭載型ディスプレイは、超音波を放出し、該超音波から生じる信号を測定するように構成され、頭部搭載型ディスプレイはさらに、信号に基づいて、超音波画像を形成するように構成される、前述の実施例のいずれかに記載のシステム。
６７．頭部搭載型ディスプレイは、ユーザにユーザの視野外のオブジェクトおよび／またはイベントをアラートするように構成される、前述の実施例のいずれかに記載のシステム。
６８．検出器アレイは、環境を結像するように構成される、外向きに面したカメラを備える、実施例２１に記載のシステム。
６９．該頭部搭載型ディスプレイシステムは、中心領域の一部に提示される画像コンテンツに対して強調解除される、画像コンテンツをユーザの視野の周辺領域の一部に提示するように、光をユーザの眼の場所に投影するように構成される、前述の実施例のいずれかに記載のシステム。
７０．該頭部搭載型ディスプレイシステムは、周辺領域の別の部分に提示される画像コンテンツに対して強調解除される、画像コンテンツをユーザの視野の周辺領域の一部に提示するように、光をユーザの眼の場所に投影するように構成される、前述の実施例のいずれかに記載のシステム。
７１．システムは、少なくとも部分的に、環境の照明条件の時間的側面に基づいて、画像コンテンツをユーザの眼内に提示する方法を判定するように構成される、前述の実施例のいずれかに記載のシステム。
７２．該ディスプレイは、該画像コンテンツが異なる深度から生じるかのように該画像コンテンツを提示するように、異なる発散量において光を該ユーザの眼の中に投影するように構成される、前述の実施例のいずれかに記載のシステム。
７３．頭部搭載型ディスプレイは、ある程度の不透明度を提示される画像コンテンツの少なくとも近傍に提供するように構成される、前述の実施例のいずれかに記載のシステム。
７４．頭部搭載型ディスプレイは、第１の画像モダリティと第１の画像モダリティと異なる第２の画像モダリティを組み合わせるように構成される、前述の実施例のいずれかに記載のシステム。
７５．第１の画像モダリティおよび第２の画像モダリティはそれぞれ、ＭＲＩ、ＣＴ、ＰＥＴ、ＭＲＡ、またはＣＴＡ走査からの画像を備える、実施例７４に記載のシステム。
７６．頭部搭載型ディスプレイは、第１および第２の画像モダリティの組み合わせられた画像を患者の実際の解剖学的構造にわたって整合させるように構成される、実施例７４または７５に記載のシステム。
１．光をユーザの眼に投影し、拡張現実画像コンテンツを表示するように構成される、頭部搭載型ディスプレイシステムであって、該ユーザの眼は、中心領域と、該中心領域を中心として配置される周辺領域を有する、視野を有し、
ユーザの頭部上に支持されるように構成される、フレームと、
フレーム上に配置される、ディスプレイであって、該ディスプレイは、画像コンテンツを該ユーザの視野の該周辺領域に提示するように、光を該ユーザの眼の中に投影するように構成され、該ディスプレイの少なくとも一部は、透明部分が、ユーザの正面の環境の一部からの光をユーザの眼に伝送し、ユーザの正面の環境の該部分のビューを提供するように、透明であって、ユーザが該頭部搭載型ディスプレイシステムを装着すると、ユーザの眼の正面の場所に配置される、ディスプレイと、
環境の照明条件を捕捉するように構成される、１つまたはそれを上回る捕捉デバイスと、
該ディスプレイと通信し、該ディスプレイ上での画像コンテンツの提示を制御する、処理電子機器と、
を備え、該頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて強調解除される、画像コンテンツをユーザの視野の周辺領域の一部に提示するように、光をユーザの眼の場所に投影するように構成される、頭部搭載型ディスプレイシステム。
２．明所視照明条件下、画像コンテンツは、錐体の投影された光場所の密度に基づいて、強調解除される、実施例１に記載のシステム。
３．環境の明所視照明条件は、輝度１０ｃｄ／ｍ２～１０８ｃｄ／ｍ２を有する、実施例２に記載のシステム。
４．暗所視照明条件下、画像コンテンツは、桿体の投影された光場所の密度に基づいて、強調解除される、実施例１に記載のシステム。
５．環境の暗所視照明条件は、輝度１０－３．５ｃｄ／ｍ２～１０－６ｃｄ／ｍ２を有する、実施例４に記載のシステム。
６．薄明視照明条件下、画像コンテンツは、少なくとも部分的に、薄明視照明条件下で費やされた時間に基づいて、強調解除される、実施例１に記載のシステム。
７．環境の薄明視照明条件は、輝度１０－３ｃｄ／ｍ２～１００．５ｃｄ／ｍ２を有する、実施例６に記載のシステム。
８．システムは、少なくとも部分的に、薄明視照明条件下で費やされた時間に基づいて、錐体または桿体がユーザの眼内で優勢であるかどうかを判定するように構成される、実施例６または７に記載のシステム。
９．画像コンテンツは、錐体がユーザの眼内で優勢であるとき、錐体の投影された光場所の密度に基づいて、強調解除される、実施例６－８のいずれかに記載のシステム。
１０．画像コンテンツは、桿体がユーザの眼内で優勢であるとき、ユーザの眼の桿体の投影された光場所の密度に基づいて、強調解除される、実施例６－８のいずれかに記載のシステム。
１１．システムは、照明条件下で費やされた時間を監視するためのタイマまたはクロックを備える、前述の実施例のいずれかに記載のシステム。
１２．光を該ユーザの眼の中に指向し、画像を眼内に形成するように構成される、１つまたはそれを上回る光源をさらに備える、前述の実施例のいずれかに記載のシステム。
１３．透明であって、ユーザの眼の正面の場所に配置される、該ディスプレイの少なくとも該部分は、光をユーザに投影するように構成される、１つまたはそれを上回る導波管を備える、前述の実施例のいずれかに記載のシステム。
１４．該１つまたはそれを上回る光源は、光を該１つまたはそれを上回る導波管の中に指向するように構成される、実施例１３に記載のシステム。
１５．該光源は、ファイバ走査プロジェクタを備える、実施例１２－１４のいずれかに記載のシステム。
１６．１つまたはそれを上回る捕捉デバイスは、１つまたはそれを上回る画像捕捉デバイスを備える、実施例１－１５のいずれかに記載のシステム。
１７．１つまたはそれを上回る画像捕捉デバイスは、１つまたはそれを上回るカメラを備える、実施例１６に記載のシステム。
１８．１つまたはそれを上回る捕捉デバイスは、１つまたはそれを上回る光センサを備える、実施例１－１５のいずれかに記載のシステム。
１９．１つまたはそれを上回る光センサは、１つまたはそれを上回る照度計を備える、実施例１８に記載のシステム。
２０．１つまたはそれを上回る捕捉デバイスは、環境の輝度を測定するように構成される、前述の実施例のいずれかに記載のシステム。
２１．１つまたはそれを上回る捕捉デバイスは、ピクセルのアレイを備える、検出器アレイを備え、検出器アレイは、ピクセルにわたって光レベルを積分し、照明条件を捕捉するように構成される、前述の実施例のいずれかに記載のシステム。
２２．１つまたはそれを上回る捕捉デバイスは、瞳孔サイズを検出し、照明条件を捕捉するように構成される、１つまたはそれを上回る内向きに面したカメラを備える、前述の実施例のいずれかに記載のシステム。
２３．距離測定デバイスをさらに備える、前述の実施例のいずれかに記載のシステム。
２４．該距離測定デバイスは、レーザ測距計を備える、実施例２３に記載のシステム。
２５．該ユーザの眼の位置および／または移動を追跡するように構成される、眼追跡デバイスをさらに備える、前述の実施例のいずれかに記載のシステム。
２６．該ユーザの眼を結像するように構成される、１つまたはそれを上回る内向きに面した画像捕捉デバイスをさらに備える、実施例１－２５のいずれかに記載のシステム。
２７．頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツのサイズを低減させるように構成される、前述の実施例のいずれかに記載のシステム。
２８．該サイズの低減は、少なくとも部分的に、眼の分解能に基づく、実施例２７に記載のシステム。
２９．頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツ内の明度を減少させるように構成される、前述の実施例のいずれかに記載のシステム。
３０．頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツ内のコントラストを減少させるように構成される、前述の実施例のいずれかに記載のシステム。
３１．頭部搭載型ディスプレイシステムは、少なくとも部分的に、眼のコントラスト感度に基づいて、コントラストを減少させるように構成される、実施例３０に記載のシステム。
３２．頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツ内の色飽和を減少させるように構成される、前述の実施例のいずれかに記載のシステム。
３３．頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツの鮮明度を低減させるように構成される、前述の実施例のいずれかに記載のシステム。
３４．鮮明化することは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツ内の特徴の縁を強調解除することを含む、実施例３３に記載のシステム。
３５．頭部搭載型ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツのカラーバランスを偏移させるように構成される、前述の実施例のいずれかに記載のシステム。
３６．システムは、アラートをユーザに提供し、画像コンテンツが強調解除されたことを示すように構成される、前述の実施例のいずれかに記載のシステム。
３７．アラートは、視覚的アラートである、実施例３６に記載のシステム。
３８．アラートは、聴覚的アラートである、実施例３６に記載のシステム。
３９．該頭部搭載型ディスプレイシステムは、ユーザの正面の環境の少なくとも該部分の３Ｄ表現を構築し、環境の少なくとも該部分の表現を解釈するように構成され、該環境の該部分は、患者を含み、該頭部搭載型ディスプレイはさらに、患者と関連付けられた第１の構造を患者と関連付けられた第２の構造から区別するように構成される、前述の実施例のいずれかに記載のシステム。
４０．環境を監視するように構成される、１つまたはそれを上回るセンサをさらに備える、前述の実施例のいずれかに記載のシステム。
４１．該１つまたはそれを上回るセンサは、該環境を結像するように構成される、１つまたはそれを上回る外向きに面した画像捕捉デバイスを備える、実施例４０に記載のシステム。
４２．該環境を結像するように構成される、該１つまたはそれを上回る外向きに面した画像捕捉デバイスは、１つまたはそれを上回る外向きに面したカメラを備える、実施例４１に記載のシステム。
４３．頭部搭載型ディスプレイは、ユーザの視野内のヒト組織の体積を推定するように構成される、前述の実施例のいずれかに記載のシステム。
４４．頭部搭載型ディスプレイは、環境内の２つのオブジェクト間の距離を測定するように構成される、前述の実施例のいずれかに記載のシステム。
４５．頭部搭載型ディスプレイは、ディスプレイ上に提示される第１の画像モダリティと第２の画像モダリティとの間でトグルするように構成される、前述の実施例のいずれかに記載のシステム。
４６．第１の画像モダリティは、ＭＲＩ走査を備える、実施例４５に記載のシステム。
４７．第２の画像モダリティは、超音波を備える、実施例４５－４６のいずれかに記載のシステム。
４８．第１の画像モダリティは、Ｘ線走査を備える、実施例４５－４７のいずれかに記載のシステム。
４９．超音波音波を生産するように適合される、電子エミッタをさらに備える、前述の実施例のいずれかに記載のシステム。
５０．超音波音波を電気信号に変換するように適合される、センサをさらに備える、前述の実施例のいずれかに記載のシステム。
５１．頭部搭載型ディスプレイは、ユーザが、仮想基準マーカをユーザの眼に対してユーザの正面の環境の一部上に設置することを可能にするように構成される、前述の実施例のいずれかに記載のシステム。
５２．頭部搭載型ディスプレイは、画像が環境内の実世界オブジェクトに添付されて現れるように、画像をディスプレイ上に投影するように構成される、前述の実施例のいずれかに記載のシステム。
５３．頭部搭載型ディスプレイは、仮想切断ガイドラインが切断されるべきヒト身体領域上にオーバーレイされるようにユーザに現れるように、仮想切断ガイドラインを表示するように構成される、または切断されるべき部分へのアクセスを与える、前述の実施例のいずれかに記載のシステム。
５４．仮想切断ガイドラインの見掛け場所は、患者の身体部分の位置に関連するように現れる、実施例５３に記載のシステム。
５５．頭部搭載型ディスプレイは、信号を放出し、ユーザの正面の環境の一部内のオブジェクトの位置に関するデータを取得するように構成される、前述の実施例のいずれかに記載のシステム。
５６．頭部搭載型ディスプレイは、オブジェクト場所のデータベースを使用して、ユーザの正面の環境の一部内のオブジェクトの位置を取得するように構成される、前述の実施例のいずれかに記載のシステム。
５７．頭部搭載型ディスプレイは、該オブジェクト場所のデータベースに基づいて、基準点を設定し、画像が基準点に対して固定されて現れるように、画像をユーザの眼の中に投影するように構成される、実施例５６に記載のシステム。
５８．頭部搭載型ディスプレイは、ユーザ入力に基づいて、オブジェクトの３Ｄ画像のビューを軸を中心として回転させるように構成される、前述の実施例のいずれかに記載のシステム。
５９．頭部搭載型ディスプレイは、ユーザ入力に基づいて、３Ｄオブジェクトの画像のビューを平行移動させるように構成される、前述の実施例のいずれかに記載のシステム。
６０．頭部搭載型ディスプレイは、オブジェクトの３Ｄ画像の第１のスライスを表示するように構成される、前述の実施例のいずれかに記載のシステム。
６１．頭部搭載型ディスプレイは、３Ｄ画像の第１のスライスの画像および第２のスライスの画像を通してシーケンス化するように構成される、実施例６０に記載のシステム。
６２．頭部搭載型ディスプレイは、頭部搭載型ディスプレイの第２のユーザが伝送される環境の該部分の該画像を視認し得るように、ユーザの正面の環境の一部の画像を伝送するように構成される、前述の実施例のいずれかに記載のシステム。
６３．頭部搭載型ディスプレイは、ユーザに医療手技におけるステップをアラートするように構成される、前述の実施例のいずれかに記載のシステム。
６４．頭部搭載型ディスプレイは、医療パラメータを監視し、医療パラメータに基づいて、アラートを提供するように構成される、前述の実施例のいずれかに記載のシステム。
６５．医療パラメータは、バイタルサインを含む、実施例６４に記載のシステム。
６６．頭部搭載型ディスプレイは、超音波を放出し、該超音波から生じる信号を測定するように構成され、頭部搭載型ディスプレイはさらに、信号に基づいて、超音波画像を形成するように構成される、前述の実施例のいずれかに記載のシステム。
６７．頭部搭載型ディスプレイは、ユーザにユーザの視野外のオブジェクトおよび／またはイベントをアラートするように構成される、前述の実施例のいずれかに記載のシステム。
６８．検出器アレイは、環境を結像するように構成される、外向きに面したカメラを備える、実施例２１に記載のシステム。
６９．該頭部搭載型ディスプレイシステムは、中心領域の一部に提示される画像コンテンツに対して強調解除される、画像コンテンツをユーザの視野の周辺領域の一部に提示するように、光をユーザの眼の場所に投影するように構成される、前述の実施例のいずれかに記載のシステム。
７０．該頭部搭載型ディスプレイシステムは、周辺領域の別の部分に提示される画像コンテンツに対して強調解除される、画像コンテンツをユーザの視野の周辺領域の一部に提示するように、光をユーザの眼の場所に投影するように構成される、前述の実施例のいずれかに記載のシステム。
７１．システムは、少なくとも部分的に、環境の照明条件の時間的側面に基づいて、画像コンテンツをユーザの眼内に提示する方法を判定するように構成される、前述の実施例のいずれかに記載のシステム。
７２．該ディスプレイは、該画像コンテンツが異なる深度から生じるかのように該画像コンテンツを提示するように、異なる発散量において光を該ユーザの眼の中に投影するように構成される、前述の実施例のいずれかに記載のシステム。
７３．頭部搭載型ディスプレイは、ある程度の不透明度を提示される画像コンテンツの少なくとも近傍に提供するように構成される、前述の実施例のいずれかに記載のシステム。
７４．頭部搭載型ディスプレイは、第１の画像モダリティと第１の画像モダリティと異なる第２の画像モダリティを組み合わせるように構成される、前述の実施例のいずれかに記載のシステム。
７５．第１の画像モダリティおよび第２の画像モダリティはそれぞれ、ＭＲＩ、ＣＴ、ＰＥＴ、ＭＲＡ、またはＣＴＡ走査からの画像を備える、実施例７４に記載のシステム。
７６．頭部搭載型ディスプレイは、第１および第２の画像モダリティの組み合わせられた画像を患者の実際の解剖学的構造にわたって整合させるように構成される、実施例７４または７５に記載のシステム。
【0024】
実施例セットＶ
１．光をユーザの眼に投影し、拡張現実画像コンテンツを表示するように構成される、医療処置および／または診断において使用するための頭部搭載型ディスプレイシステムであって、該ユーザの眼は、中心領域と、該中心領域を中心として配置される周辺領域を有する、視野を有し、
ユーザの頭部上に支持されるように構成される、フレームと、
フレーム上に配置される、ディスプレイであって、該ディスプレイは、光を複数の深度平面上において該ユーザの眼の中に投影するように構成され、該ディスプレイの少なくとも一部は、透明部分が、ユーザの正面の環境の一部からの光をユーザの眼に伝送し、ユーザの正面の環境の該部分のビューを提供するように、透明であって、ユーザが該頭部搭載型ディスプレイを装着すると、ユーザの眼の正面の場所に配置される、ディスプレイと、
該ディスプレイと通信し、該ディスプレイ上での画像コンテンツの提示を制御する、処理電子機器と、
を備える、頭部搭載型ディスプレイ。
２．該頭部搭載型ディスプレイシステムは、ユーザの正面の環境の少なくとも該部分の３Ｄ表現を構築し、環境の少なくとも該部分の表現を解釈するように構成され、該環境の該部分は、患者を含み、該頭部搭載型ディスプレイはさらに、患者と関連付けられた第１の構造を患者と関連付けられた第２の構造から区別するように構成される、実施例１に記載のシステム。
３．透明であって、ユーザの眼の正面の場所に配置される、該ディスプレイの少なくとも該部分は、１つまたはそれを上回る導波管を備える、前述の実施例のいずれかに記載のシステム。
４．光を該１つまたはそれを上回る導波管の中に指向するように構成される、１つまたはそれを上回る光源を備え、導波管は、光をユーザの眼の中に指向するように構成される、実施例３に記載のシステム。
５．該１つまたはそれを上回る光源は、ファイバ走査プロジェクタを備える、実施例３－４のいずれかに記載のシステム。
６．環境を監視するように構成される、１つまたはそれを上回るセンサをさらに備える、前述の実施例のいずれかに記載のシステム。
７．該１つまたはそれを上回るセンサは、該環境を結像するように構成される、１つまたはそれを上回る外向きに面した画像捕捉デバイスを備える、実施例６に記載のシステム。
８．該環境を結像するように構成される、該１つまたはそれを上回る外向きに面した画像捕捉デバイスは、１つまたはそれを上回る外向きに面したカメラを備える、実施例７に記載のシステム。
９．距離測定デバイスをさらに備える、前述の実施例のいずれかに記載のシステム。
１０．該ユーザの眼の位置および／または移動を追跡するように構成される、眼追跡デバイスをさらに備える、前述の実施例のいずれかに記載のシステム。
１１．頭部搭載型ディスプレイは、ユーザの視野内のヒト組織の体積を推定するように構成される、前述の実施例のいずれかに記載のシステム。
１２．頭部搭載型ディスプレイは、環境内の２つのオブジェクト間の距離を測定するように構成される、前述の実施例のいずれかに記載のシステム。
１３．頭部搭載型ディスプレイは、ディスプレイ上に提示される第１の画像モダリティと第２の画像モダリティとの間でトグルするように構成される、前述の実施例のいずれかに記載のシステム。
１４．第１の画像モダリティは、ＭＲＩ走査を備える、実施例１３に記載のシステム。
１５．第２の画像モダリティは、超音波を備える、実施例１３－１４のいずれかに記載のシステム。
１６．第１の画像モダリティは、Ｘ線走査を備える、実施例１３－１５のいずれかに記載のシステム。
１７．超音波音波を生産するように適合される、電子エミッタをさらに備える、前述の実施例のいずれかに記載のシステム。
１８．超音波音波を電気信号に変換するように適合される、センサをさらに備える、前述の実施例のいずれかに記載のシステム。
１９．頭部搭載型ディスプレイは、ユーザが、仮想基準マーカをユーザの眼に対してユーザの正面の環境の一部上に設置することを可能にするように構成される、前述の実施例のいずれかに記載のシステム。
２０．頭部搭載型ディスプレイは、画像が環境内の実世界オブジェクトに添付されて現れるように、画像をディスプレイ上に投影するように構成される、前述の実施例のいずれかに記載のシステム。
２１．頭部搭載型ディスプレイは、仮想切断ガイドラインが切断されるべきヒト身体領域上にオーバーレイされるようにユーザに現れるように、仮想切断ガイドラインを表示するように構成される、または切断されるべき部分へのアクセスを与える、前述の実施例のいずれかに記載のシステム。
２２．仮想切断ガイドラインの見掛け場所は、患者の身体部分の位置に関連するように現れる、実施例２１に記載のシステム。
２３．頭部搭載型ディスプレイは、信号を放出し、ユーザの正面の環境の一部内のオブジェクトの位置に関するデータを取得するように構成される、前述の実施例のいずれかに記載のシステム。
２４．頭部搭載型ディスプレイは、オブジェクト場所のデータベースを使用して、ユーザの正面の環境の一部内のオブジェクトの位置を取得するように構成される、前述の実施例のいずれかに記載のシステム。
２５．頭部搭載型ディスプレイは、該オブジェクト場所のデータベースに基づいて、基準点を設定し、画像が基準点に対して固定されて現れるように、画像をユーザの眼の中に投影するように構成される、実施例２４に記載のシステム。
２６．頭部搭載型ディスプレイは、ユーザ入力に基づいて、オブジェクトの３Ｄ画像のビューを軸を中心として回転させるように構成される、前述の実施例のいずれかに記載のシステム。
２７．頭部搭載型ディスプレイは、ユーザ入力に基づいて、３Ｄオブジェクトの画像のビューを平行移動させるように構成される、前述の実施例のいずれかに記載のシステム。
２８．頭部搭載型ディスプレイは、オブジェクトの３Ｄ画像の第１のスライスを表示するように構成される、前述の実施例のいずれかに記載のシステム。
２９．頭部搭載型ディスプレイは、３Ｄ画像の第１のスライスの画像および第２のスライスの画像を通してシーケンス化するように構成される、実施例２８に記載のシステム。
３０．頭部搭載型ディスプレイは、頭部搭載型ディスプレイの第２のユーザが伝送される環境の該部分の該画像を視認し得るように、ユーザの正面の環境の一部の画像を伝送するように構成される、前述の実施例のいずれかに記載のシステム。
３１．頭部搭載型ディスプレイは、ユーザに医療手技におけるステップをアラートするように構成される、前述の実施例のいずれかに記載のシステム。
３２．頭部搭載型ディスプレイは、ユーザの医療パラメータを監視し、医療パラメータに基づいて、アラートを提供するように構成される、前述の実施例のいずれかに記載のシステム。
３３．ユーザの医療パラメータは、バイタルサインを含む、実施例３２に記載のシステム。
３４．頭部搭載型ディスプレイは、超音波を放出し、該超音波から生じる信号を測定するように構成され、頭部搭載型ディスプレイはさらに、信号に基づいて、超音波画像を形成するように構成される、前述の実施例のいずれかに記載のシステム。
３５．頭部搭載型ディスプレイは、ユーザにユーザの視野外のオブジェクトおよび／またはイベントをアラートするように構成される、前述の実施例のいずれかに記載のシステム。
３６．光を該ユーザの眼の中に指向し、画像を眼内に形成するように構成される、１つまたはそれを上回る光源をさらに備える、前述の実施例のいずれかに記載のシステム。
３７．該１つまたはそれを上回る光源は、ファイバ走査プロジェクタを備える、前述の実施例のいずれかに記載のシステム。
３８．頭部搭載型ディスプレイは、エネルギーを患者に向かって放出し、返されるエネルギーを感知するように構成される、前述の実施例のいずれかに記載のシステム。
３９．エネルギーは、超音波を備える、実施例３８に記載のシステム。
４０．頭部搭載型ディスプレイは、第１の画像モダリティと第１の画像モダリティと異なる第２の画像モダリティを組み合わせるように構成される、前述の実施例のいずれかに記載のシステム。
４１．第１の画像モダリティおよび第２の画像モダリティはそれぞれ、ＭＲＩ、ＣＴ、ＰＥＴ、ＭＲＡ、またはＣＴＡ走査からの画像を備える、実施例４０に記載のシステム。
４２．頭部搭載型ディスプレイは、第１および第２の画像モダリティの組み合わせられた画像を患者の実際の解剖学的構造にわたって整合させるように構成される、実施例４０または４１に記載のシステム。
本発明は、例えば、以下を提供する。
（項目１）
光をユーザの眼に投影し、拡張現実画像コンテンツを前記ユーザの視野内に表示するように構成される、頭部搭載型ディスプレイシステムであって、前記頭部搭載型ディスプレイシステムは、
ユーザの頭部上に支持されるように構成されるフレームと、
前記フレーム上に配置される頭部搭載型ディスプレイであって、前記ディスプレイは、光を前記ユーザの眼の中に投影し、前記ユーザの眼からの異なる距離から投影されるかのように、異なる発散量において拡張現実画像コンテンツをユーザの視野内に表示するように構成され、前記ディスプレイの少なくとも一部分は、前記透明部分が、前記ユーザおよび前記頭部搭載型ディスプレイの正面の環境の一部分からの光をユーザの眼に伝送し、前記ユーザおよび前記頭部搭載型ディスプレイの正面の環境の前記一部分のビューを提供するように、透明であり、かつ、前記ユーザが前記頭部搭載型ディスプレイデバイスを装着すると、前記ユーザの眼の正面の場所に配置される、頭部搭載型ディスプレイと、
前記ユーザを感知するように構成される、１つまたはそれを上回るユーザセンサと、
前記ユーザの周囲を感知するように構成される、１つまたはそれを上回る環境センサと、
前記ディスプレイ、前記１つまたはそれを上回るユーザセンサ、および前記１つまたはそれを上回る環境センサと通信する処理電子機器であって、前記処理電子機器は、
増加されたユーザ注目を伴う状況を感知することと、
少なくとも部分的に、前記増加された焦点の感知に基づいて、前記ユーザの視野内の実または仮想オブジェクトのユーザ知覚を改変することと
を行うように構成される、処理電子機器と
を備える、頭部搭載型ディスプレイシステム。
（項目２）
前記処理電子機器は、前記オブジェクトを備える画像コンテンツを改変することによって、前記ユーザの視野内の実または仮想オブジェクトのユーザ知覚を改変するように構成される、項目１に記載のディスプレイシステム。
（項目３）
画像コンテンツを改変することは、前記オブジェクトの画像コンテンツを第１の場所から第２の場所に移動させることを含む、項目２に記載のディスプレイシステム。
（項目４）
前記第１の場所は、周辺領域であり、前記第２の場所は、中心領域である、または前記第１の場所は、前記中心領域であり、前記第２の場所は、前記周辺領域である、項目３に記載のディスプレイシステム。
（項目５）
画像コンテンツを改変することは、前記オブジェクトを備える画像コンテンツのコントラスト、不透明度、色、色飽和、カラーバランス、サイズ、背景、明度、縁、または鮮明度のうちの少なくとも１つを改変することを含む、項目２に記載のディスプレイシステム。
（項目６）
前記１つまたはそれを上回る環境センサは、深度センサ、一対の両眼世界カメラ、地理位置センサ、近接度センサ、またはＧＰＳを備える、項目１－７のいずれかに記載のディスプレイシステム。
（項目７）
前記１つまたはそれを上回るユーザセンサは、１つまたはそれを上回るカメラを備える、項目１－６のいずれかに記載のディスプレイシステム。
（項目８）
前記処理電子機器はさらに、少なくとも部分的に、前記増加された焦点の感知に基づいて、前記状況に対するユーザ意図を判定し、前記ユーザの視野内の実または仮想オブジェクトのユーザ知覚を改変するように構成される、項目１－７のいずれかに記載のディスプレイシステム。
（項目９）
増加されたユーザ注目を伴う前記状況は、自動車両を運転することを含む、項目１－８のいずれかに記載のディスプレイシステム。
（項目１０）
前記環境センサは、無線信号を検出するように構成されるセンサを備える、項目９に記載のディスプレイシステム。
（項目１１）
前記環境センサは、自動車からのＢｌｕｅｔｏｏｔｈ（登録商標）信号を検出するように構成されるセンサを備える、項目１０に記載のディスプレイシステム。
（項目１２）
前記処理電子機器は、少なくとも部分的に、前記ユーザに関する１つまたはそれを上回るデータ記録に基づいて、前記ユーザの視野内の実または仮想オブジェクトのユーザ知覚を改変するように構成され、前記１つまたはそれを上回るデータ記録は、前記ユーザの運転記録を含む、項目９に記載のディスプレイシステム。
（項目１３）
光をユーザの眼に投影し、拡張現実画像コンテンツを表示するように構成される頭部搭載型ディスプレイシステムであって、前記ユーザの眼は、中心領域と、前記中心領域を中心として配置される周辺領域を有する、視野を有し、前記頭部搭載型ディスプレイシステムは、
ユーザの頭部上に支持されるように構成されるフレームと、
前記フレーム上に配置される頭部搭載型ディスプレイであって、前記ディスプレイは、画像コンテンツを前記ユーザの視野の中心領域に提示するように、光を前記ユーザの眼の中に投影するように構成され、前記ディスプレイの少なくとも一部分は、前記透明部分が、前記ユーザおよび前記頭部搭載型ディスプレイの正面の環境の一部分からの光をユーザの眼に伝送し、前記ユーザおよび前記頭部搭載型ディスプレイの正面の環境の前記一部分のビューを提供するように、透明であり、かつ、前記ユーザが前記頭部搭載型ディスプレイデバイスを装着すると、前記ユーザの眼の正面の場所に配置される、頭部搭載型ディスプレイと、
前記ディスプレイと通信し、前記ディスプレイ上での画像コンテンツの提示を制御する、処理電子機器と
を備え、
前記頭部搭載型ディスプレイシステムは、前記ユーザの視野の中心領域に、前記ユーザの視野の周辺領域に提示される画像コンテンツと比較して増強された画像コンテンツを提示するように構成される、頭部搭載型ディスプレイシステム。
（項目１４）
前記環境を監視するように構成される１つまたはそれを上回るセンサをさらに備える、項目１０に記載のシステム。
（項目１５）
前記１つまたはそれを上回るセンサは、前記環境を結像するように構成される１つまたはそれを上回る外向きに面した画像捕捉デバイスを備える、項目１１に記載のシステム。（項目１６）
１つまたはそれを上回るセンサは、距離測定デバイスを備える、項目１１または１２に記載のシステム。
（項目１７）
前記ユーザの眼の位置および／または移動を追跡するように構成される眼追跡デバイスをさらに備える、項目１０－１３のいずれかに記載のシステム。
（項目１８）
前記頭部搭載型ディスプレイデバイスは、前記ユーザの視野の周辺領域に提示される画像コンテンツと比較して、前記ユーザの視野の中心領域の少なくとも一部分に提示される画像コンテンツを異なるように処理するように構成される、項目１０－１５のいずれかに記載のシステム。
（項目１９）
前記頭部搭載型ディスプレイデバイスは、前記ユーザの視野の周辺領域に提示される画像コンテンツと比較して、前記ユーザの視野の中心領域の少なくとも一部分に提示される画像コンテンツを拡大することによって、画像コンテンツを異なるように処理するように構成される、項目１６に記載のシステム。
（項目２０）
前記頭部搭載型ディスプレイデバイスは、前記ユーザの視野の周辺領域に提示される画像コンテンツと比較して、前記ユーザの視野の中心領域の少なくとも一部分に提示される画像コンテンツにおける明度を増加させることによって、画像コンテンツを異なるように処理するように構成される、項目１６または１７に記載のシステム。
１．光をユーザの眼に投影し、拡張現実画像コンテンツを表示するように構成される、医療処置および／または診断において使用するための頭部搭載型ディスプレイシステムであって、該ユーザの眼は、中心領域と、該中心領域を中心として配置される周辺領域を有する、視野を有し、
ユーザの頭部上に支持されるように構成される、フレームと、
フレーム上に配置される、ディスプレイであって、該ディスプレイは、光を複数の深度平面上において該ユーザの眼の中に投影するように構成され、該ディスプレイの少なくとも一部は、透明部分が、ユーザの正面の環境の一部からの光をユーザの眼に伝送し、ユーザの正面の環境の該部分のビューを提供するように、透明であって、ユーザが該頭部搭載型ディスプレイを装着すると、ユーザの眼の正面の場所に配置される、ディスプレイと、
該ディスプレイと通信し、該ディスプレイ上での画像コンテンツの提示を制御する、処理電子機器と、
を備える、頭部搭載型ディスプレイ。
２．該頭部搭載型ディスプレイシステムは、ユーザの正面の環境の少なくとも該部分の３Ｄ表現を構築し、環境の少なくとも該部分の表現を解釈するように構成され、該環境の該部分は、患者を含み、該頭部搭載型ディスプレイはさらに、患者と関連付けられた第１の構造を患者と関連付けられた第２の構造から区別するように構成される、実施例１に記載のシステム。
３．透明であって、ユーザの眼の正面の場所に配置される、該ディスプレイの少なくとも該部分は、１つまたはそれを上回る導波管を備える、前述の実施例のいずれかに記載のシステム。
４．光を該１つまたはそれを上回る導波管の中に指向するように構成される、１つまたはそれを上回る光源を備え、導波管は、光をユーザの眼の中に指向するように構成される、実施例３に記載のシステム。
５．該１つまたはそれを上回る光源は、ファイバ走査プロジェクタを備える、実施例３－４のいずれかに記載のシステム。
６．環境を監視するように構成される、１つまたはそれを上回るセンサをさらに備える、前述の実施例のいずれかに記載のシステム。
７．該１つまたはそれを上回るセンサは、該環境を結像するように構成される、１つまたはそれを上回る外向きに面した画像捕捉デバイスを備える、実施例６に記載のシステム。
８．該環境を結像するように構成される、該１つまたはそれを上回る外向きに面した画像捕捉デバイスは、１つまたはそれを上回る外向きに面したカメラを備える、実施例７に記載のシステム。
９．距離測定デバイスをさらに備える、前述の実施例のいずれかに記載のシステム。
１０．該ユーザの眼の位置および／または移動を追跡するように構成される、眼追跡デバイスをさらに備える、前述の実施例のいずれかに記載のシステム。
１１．頭部搭載型ディスプレイは、ユーザの視野内のヒト組織の体積を推定するように構成される、前述の実施例のいずれかに記載のシステム。
１２．頭部搭載型ディスプレイは、環境内の２つのオブジェクト間の距離を測定するように構成される、前述の実施例のいずれかに記載のシステム。
１３．頭部搭載型ディスプレイは、ディスプレイ上に提示される第１の画像モダリティと第２の画像モダリティとの間でトグルするように構成される、前述の実施例のいずれかに記載のシステム。
１４．第１の画像モダリティは、ＭＲＩ走査を備える、実施例１３に記載のシステム。
１５．第２の画像モダリティは、超音波を備える、実施例１３－１４のいずれかに記載のシステム。
１６．第１の画像モダリティは、Ｘ線走査を備える、実施例１３－１５のいずれかに記載のシステム。
１７．超音波音波を生産するように適合される、電子エミッタをさらに備える、前述の実施例のいずれかに記載のシステム。
１８．超音波音波を電気信号に変換するように適合される、センサをさらに備える、前述の実施例のいずれかに記載のシステム。
１９．頭部搭載型ディスプレイは、ユーザが、仮想基準マーカをユーザの眼に対してユーザの正面の環境の一部上に設置することを可能にするように構成される、前述の実施例のいずれかに記載のシステム。
２０．頭部搭載型ディスプレイは、画像が環境内の実世界オブジェクトに添付されて現れるように、画像をディスプレイ上に投影するように構成される、前述の実施例のいずれかに記載のシステム。
２１．頭部搭載型ディスプレイは、仮想切断ガイドラインが切断されるべきヒト身体領域上にオーバーレイされるようにユーザに現れるように、仮想切断ガイドラインを表示するように構成される、または切断されるべき部分へのアクセスを与える、前述の実施例のいずれかに記載のシステム。
２２．仮想切断ガイドラインの見掛け場所は、患者の身体部分の位置に関連するように現れる、実施例２１に記載のシステム。
２３．頭部搭載型ディスプレイは、信号を放出し、ユーザの正面の環境の一部内のオブジェクトの位置に関するデータを取得するように構成される、前述の実施例のいずれかに記載のシステム。
２４．頭部搭載型ディスプレイは、オブジェクト場所のデータベースを使用して、ユーザの正面の環境の一部内のオブジェクトの位置を取得するように構成される、前述の実施例のいずれかに記載のシステム。
２５．頭部搭載型ディスプレイは、該オブジェクト場所のデータベースに基づいて、基準点を設定し、画像が基準点に対して固定されて現れるように、画像をユーザの眼の中に投影するように構成される、実施例２４に記載のシステム。
２６．頭部搭載型ディスプレイは、ユーザ入力に基づいて、オブジェクトの３Ｄ画像のビューを軸を中心として回転させるように構成される、前述の実施例のいずれかに記載のシステム。
２７．頭部搭載型ディスプレイは、ユーザ入力に基づいて、３Ｄオブジェクトの画像のビューを平行移動させるように構成される、前述の実施例のいずれかに記載のシステム。
２８．頭部搭載型ディスプレイは、オブジェクトの３Ｄ画像の第１のスライスを表示するように構成される、前述の実施例のいずれかに記載のシステム。
２９．頭部搭載型ディスプレイは、３Ｄ画像の第１のスライスの画像および第２のスライスの画像を通してシーケンス化するように構成される、実施例２８に記載のシステム。
３０．頭部搭載型ディスプレイは、頭部搭載型ディスプレイの第２のユーザが伝送される環境の該部分の該画像を視認し得るように、ユーザの正面の環境の一部の画像を伝送するように構成される、前述の実施例のいずれかに記載のシステム。
３１．頭部搭載型ディスプレイは、ユーザに医療手技におけるステップをアラートするように構成される、前述の実施例のいずれかに記載のシステム。
３２．頭部搭載型ディスプレイは、ユーザの医療パラメータを監視し、医療パラメータに基づいて、アラートを提供するように構成される、前述の実施例のいずれかに記載のシステム。
３３．ユーザの医療パラメータは、バイタルサインを含む、実施例３２に記載のシステム。
３４．頭部搭載型ディスプレイは、超音波を放出し、該超音波から生じる信号を測定するように構成され、頭部搭載型ディスプレイはさらに、信号に基づいて、超音波画像を形成するように構成される、前述の実施例のいずれかに記載のシステム。
３５．頭部搭載型ディスプレイは、ユーザにユーザの視野外のオブジェクトおよび／またはイベントをアラートするように構成される、前述の実施例のいずれかに記載のシステム。
３６．光を該ユーザの眼の中に指向し、画像を眼内に形成するように構成される、１つまたはそれを上回る光源をさらに備える、前述の実施例のいずれかに記載のシステム。
３７．該１つまたはそれを上回る光源は、ファイバ走査プロジェクタを備える、前述の実施例のいずれかに記載のシステム。
３８．頭部搭載型ディスプレイは、エネルギーを患者に向かって放出し、返されるエネルギーを感知するように構成される、前述の実施例のいずれかに記載のシステム。
３９．エネルギーは、超音波を備える、実施例３８に記載のシステム。
４０．頭部搭載型ディスプレイは、第１の画像モダリティと第１の画像モダリティと異なる第２の画像モダリティを組み合わせるように構成される、前述の実施例のいずれかに記載のシステム。
４１．第１の画像モダリティおよび第２の画像モダリティはそれぞれ、ＭＲＩ、ＣＴ、ＰＥＴ、ＭＲＡ、またはＣＴＡ走査からの画像を備える、実施例４０に記載のシステム。
４２．頭部搭載型ディスプレイは、第１および第２の画像モダリティの組み合わせられた画像を患者の実際の解剖学的構造にわたって整合させるように構成される、実施例４０または４１に記載のシステム。
本発明は、例えば、以下を提供する。
（項目１）
光をユーザの眼に投影し、拡張現実画像コンテンツを前記ユーザの視野内に表示するように構成される、頭部搭載型ディスプレイシステムであって、前記頭部搭載型ディスプレイシステムは、
ユーザの頭部上に支持されるように構成されるフレームと、
前記フレーム上に配置される頭部搭載型ディスプレイであって、前記ディスプレイは、光を前記ユーザの眼の中に投影し、前記ユーザの眼からの異なる距離から投影されるかのように、異なる発散量において拡張現実画像コンテンツをユーザの視野内に表示するように構成され、前記ディスプレイの少なくとも一部分は、前記透明部分が、前記ユーザおよび前記頭部搭載型ディスプレイの正面の環境の一部分からの光をユーザの眼に伝送し、前記ユーザおよび前記頭部搭載型ディスプレイの正面の環境の前記一部分のビューを提供するように、透明であり、かつ、前記ユーザが前記頭部搭載型ディスプレイデバイスを装着すると、前記ユーザの眼の正面の場所に配置される、頭部搭載型ディスプレイと、
前記ユーザを感知するように構成される、１つまたはそれを上回るユーザセンサと、
前記ユーザの周囲を感知するように構成される、１つまたはそれを上回る環境センサと、
前記ディスプレイ、前記１つまたはそれを上回るユーザセンサ、および前記１つまたはそれを上回る環境センサと通信する処理電子機器であって、前記処理電子機器は、
増加されたユーザ注目を伴う状況を感知することと、
少なくとも部分的に、前記増加された焦点の感知に基づいて、前記ユーザの視野内の実または仮想オブジェクトのユーザ知覚を改変することと
を行うように構成される、処理電子機器と
を備える、頭部搭載型ディスプレイシステム。
（項目２）
前記処理電子機器は、前記オブジェクトを備える画像コンテンツを改変することによって、前記ユーザの視野内の実または仮想オブジェクトのユーザ知覚を改変するように構成される、項目１に記載のディスプレイシステム。
（項目３）
画像コンテンツを改変することは、前記オブジェクトの画像コンテンツを第１の場所から第２の場所に移動させることを含む、項目２に記載のディスプレイシステム。
（項目４）
前記第１の場所は、周辺領域であり、前記第２の場所は、中心領域である、または前記第１の場所は、前記中心領域であり、前記第２の場所は、前記周辺領域である、項目３に記載のディスプレイシステム。
（項目５）
画像コンテンツを改変することは、前記オブジェクトを備える画像コンテンツのコントラスト、不透明度、色、色飽和、カラーバランス、サイズ、背景、明度、縁、または鮮明度のうちの少なくとも１つを改変することを含む、項目２に記載のディスプレイシステム。
（項目６）
前記１つまたはそれを上回る環境センサは、深度センサ、一対の両眼世界カメラ、地理位置センサ、近接度センサ、またはＧＰＳを備える、項目１－７のいずれかに記載のディスプレイシステム。
（項目７）
前記１つまたはそれを上回るユーザセンサは、１つまたはそれを上回るカメラを備える、項目１－６のいずれかに記載のディスプレイシステム。
（項目８）
前記処理電子機器はさらに、少なくとも部分的に、前記増加された焦点の感知に基づいて、前記状況に対するユーザ意図を判定し、前記ユーザの視野内の実または仮想オブジェクトのユーザ知覚を改変するように構成される、項目１－７のいずれかに記載のディスプレイシステム。
（項目９）
増加されたユーザ注目を伴う前記状況は、自動車両を運転することを含む、項目１－８のいずれかに記載のディスプレイシステム。
（項目１０）
前記環境センサは、無線信号を検出するように構成されるセンサを備える、項目９に記載のディスプレイシステム。
（項目１１）
前記環境センサは、自動車からのＢｌｕｅｔｏｏｔｈ（登録商標）信号を検出するように構成されるセンサを備える、項目１０に記載のディスプレイシステム。
（項目１２）
前記処理電子機器は、少なくとも部分的に、前記ユーザに関する１つまたはそれを上回るデータ記録に基づいて、前記ユーザの視野内の実または仮想オブジェクトのユーザ知覚を改変するように構成され、前記１つまたはそれを上回るデータ記録は、前記ユーザの運転記録を含む、項目９に記載のディスプレイシステム。
（項目１３）
光をユーザの眼に投影し、拡張現実画像コンテンツを表示するように構成される頭部搭載型ディスプレイシステムであって、前記ユーザの眼は、中心領域と、前記中心領域を中心として配置される周辺領域を有する、視野を有し、前記頭部搭載型ディスプレイシステムは、
ユーザの頭部上に支持されるように構成されるフレームと、
前記フレーム上に配置される頭部搭載型ディスプレイであって、前記ディスプレイは、画像コンテンツを前記ユーザの視野の中心領域に提示するように、光を前記ユーザの眼の中に投影するように構成され、前記ディスプレイの少なくとも一部分は、前記透明部分が、前記ユーザおよび前記頭部搭載型ディスプレイの正面の環境の一部分からの光をユーザの眼に伝送し、前記ユーザおよび前記頭部搭載型ディスプレイの正面の環境の前記一部分のビューを提供するように、透明であり、かつ、前記ユーザが前記頭部搭載型ディスプレイデバイスを装着すると、前記ユーザの眼の正面の場所に配置される、頭部搭載型ディスプレイと、
前記ディスプレイと通信し、前記ディスプレイ上での画像コンテンツの提示を制御する、処理電子機器と
を備え、
前記頭部搭載型ディスプレイシステムは、前記ユーザの視野の中心領域に、前記ユーザの視野の周辺領域に提示される画像コンテンツと比較して増強された画像コンテンツを提示するように構成される、頭部搭載型ディスプレイシステム。
（項目１４）
前記環境を監視するように構成される１つまたはそれを上回るセンサをさらに備える、項目１０に記載のシステム。
（項目１５）
前記１つまたはそれを上回るセンサは、前記環境を結像するように構成される１つまたはそれを上回る外向きに面した画像捕捉デバイスを備える、項目１１に記載のシステム。（項目１６）
１つまたはそれを上回るセンサは、距離測定デバイスを備える、項目１１または１２に記載のシステム。
（項目１７）
前記ユーザの眼の位置および／または移動を追跡するように構成される眼追跡デバイスをさらに備える、項目１０－１３のいずれかに記載のシステム。
（項目１８）
前記頭部搭載型ディスプレイデバイスは、前記ユーザの視野の周辺領域に提示される画像コンテンツと比較して、前記ユーザの視野の中心領域の少なくとも一部分に提示される画像コンテンツを異なるように処理するように構成される、項目１０－１５のいずれかに記載のシステム。
（項目１９）
前記頭部搭載型ディスプレイデバイスは、前記ユーザの視野の周辺領域に提示される画像コンテンツと比較して、前記ユーザの視野の中心領域の少なくとも一部分に提示される画像コンテンツを拡大することによって、画像コンテンツを異なるように処理するように構成される、項目１６に記載のシステム。
（項目２０）
前記頭部搭載型ディスプレイデバイスは、前記ユーザの視野の周辺領域に提示される画像コンテンツと比較して、前記ユーザの視野の中心領域の少なくとも一部分に提示される画像コンテンツにおける明度を増加させることによって、画像コンテンツを異なるように処理するように構成される、項目１６または１７に記載のシステム。
【図面の簡単な説明】
【0025】
【0026】
【0027】
【0028】
【0029】
【0030】
【0031】
【0032】
【0033】
【0034】
【0035】
【0036】
【0037】
【0038】
【0039】
【0040】
【0041】
【0042】
【0043】
【0044】
【0045】
【0046】
【0047】
【0048】
【0049】
【0050】
【0051】
【発明を実施するための形態】
【0052】
眼は、環境から反射および放出される光を収集および感知し、周囲のオブジェクトの形状、特徴、および場所等の有用な情報を提供する、複雑な器官である。眼を用いてオブジェクトを知覚する能力を改善することは、広範囲の試行を追求することに役立ち得る。増強された視覚が特に有益であり得る、一実施例は、外科手術、診断、および／または処置等の医療タスクを実施する際の外科医等の医療従事者のためのものである。増強された視覚はまた、自動車両または他の車両を動作させる等の集中を要求する日々のタスクにとっても有用であり得る。
【0053】
任意の所与の瞬時における人物が有する世界またはその周囲環境のビューは、領域および周辺領域を有する、視野中心によって特徴付けられる。本視野は、人物が動き回る、その頭部を移動させる、またはその眼もしくは視線を移動させるにつれて変化し得る。図１Ｂは、中心および周辺領域を含む、そのような視野１７５５を示す。図１Ｂはまた、動眼視野１７６５を示し、これは、例えば、その頭部を旋回させる、またはその視線を再指向することによって、人物６０によって知覚可能な人物６０の周囲の環境の一部を備える。人物６０の眼の視野１７５５の中心部分は、中心視野１７４５と称され得る。視野１７５５内であるが、中心視野１７４５外の領域は、周辺視野と称され得る。
【0054】
中心視野は、人物に、環境ビューの中心領域内のオブジェクトの対応するビューを提供するであろう。同様に、周辺視野は、人物に、環境ビューの周辺領域内のオブジェクトの対応するビューを提供するであろう。この場合、中心と見なされるものと周辺と見なされるものは、人物が見ている方向、故に、その視野の関数である。
【0055】
図１Ｃ－１および１Ｃ－２は、中心視野および周辺視野が含み得る、場面の部分の第１の人物の視点を図示する。例えば、図１Ｃ－１は、人物にその視野１７５５内で見えるものの実施例を図示する。視野１７５５は、オブジェクト１７２１、１７２２を含んでもよい。図１Ｃ－２に示されるように、中心視野１７４５は、オブジェクト１７２１を含む一方、図１Ｃ－１に示される他のオブジェクト１７２２は、周辺視野（例えば、陰影領域）内にある。
【0056】
図１Ｄに示されるように、ヒトの眼１１００の概略断面図が、角膜４２、虹彩４４、レンズ、すなわち、「水晶体」４６、強膜４８、脈絡膜層５０、黄斑５２、網膜５４、および脳までの視神経経路５６を特徴として描写される。角膜４２および水晶体４６は、光を網膜５４に向かって屈折および合焦させる。黄斑５２は、網膜５４の中心である。黄斑５２の中心には、「中心窩」と称される、網膜５４の一部がある。網膜５４は、錐体および桿体として知られる光受容体細胞を含有する。網膜５４の内側表面の近傍には、視覚的情報を受信し、錐体および桿体から脳に伝送する、神経節細胞がある。視覚的情報は、画像を形成するための情報を含むことができる。
【0057】
中心窩は、網膜５４の任意の他の部分より多くの光受容体（視度あたり約１２０錐体）を含有する。図１Ｅは、網膜の中心（例えば、光学軸から眼のレンズを通して網膜の中心まで測定される）からの角度の関数としてプロットされる、典型的ヒトの眼内の錐体および桿体の相対的密度を図示する。図１Ｅは、錐体１８５２の相対的密度が網膜の中心（例えば、中心窩）において最高であって、その中心から数度後、劇的に減少することを示す。対照的に、中心内には、実質的に桿体が存在しないが、桿体１８５６の密度は、中心から数度後、劇的に増加し、網膜にわたって減少する。
【0058】
図１Ｆは、網膜を横断して同一角度スペクトルにわたる錐体および桿体の相対的分解能を示す。図１Ｆに示されるように、錐体の密度と同様に、錐体１８４２の分解能は、中心窩において最高であって、中心窩からの角度が増加するにつれて減少する。桿体の密度と同様に、桿体１８４６の分解能は、次第に衰える前に、最初に増加する。
【0059】
中心窩は、眼の中心に位置するため、中心視野は、中心窩上にある。錐体は、概して、色（例えば、ｌ－錐体または長波長に敏感な錐体は、赤色波長のために使用され得、ｍ－錐体または中波長に敏感な錐体は、緑色波長のために使用され得、ｓ－錐体または短波長に敏感な錐体は、青色波長のために使用され得る）および空間分解能に関与する。桿体は、色に敏感ではなく、概して、基本空間分解能に関与する（例えば、形状および移動の検出のため）。中心窩は、最高密度の錐体を含有するため、人物の中心視野内に位置するオブジェクトのための高分解能を提供する。中心窩から離れるように移動すると、錐体密度は、減少し、人物の周辺視野内に位置するオブジェクトのための分解能も同様である（例えば、近周辺視野から遠周辺視野に）。中心窩からの錐体密度の減少のため、周辺視野は、概して、中心視野のものと比較して、劣った画質と関連付けられ得る。しかしながら、眼を中心視野（例えば、図１Ｂにおける１７４５）内のオブジェクトに心合させ、また、周辺視野内のオブジェクトを見ることを可能にすることが望ましくあり得る。
【0060】
故に、本明細書に説明されるディスプレイシステムの種々の実施形態は、有利には、ユーザの周辺視野内の１つまたはそれを上回るオブジェクトの改善されたユーザビューを提供し得る。例えば、ある実施形態は、ユーザが、ユーザの中心視野内の１つのオブジェクトに合焦し、同時に、増加された可視性を伴って、ユーザの周辺視野内に位置する別のオブジェクトを視認することを可能にし得る。実施例として、典型的外科手術設定では、外科医は、患者または手術台からある距離に位置する医療画像のいずれかに合焦される。外科医は、患者および医療画像のうちの一方が、外科医の中心視野内にあって、他方が、外科医の周辺視野内のより低い分解能（またはさらに可能性として、外科医の視野外）にあるように、その２つの間を往復してその眼（および／または頭部）を移動させ得る。本明細書に説明される種々の実施形態では、ディスプレイシステムは、外科医に、患者および医療画像の両方を同時に、かつ十分な視力（例えば、十分な分解能）を伴って見えるように、画像コンテンツを提示し得る。例えば、いくつかの実施形態は、増強される、すなわち、患者のより近くに移動される、医療画像の拡張または仮想画像を提示するように構成されることができる。いくつかのそのような実施形態は、患者と医療画像との間で注意を偏移させるために費やされる時間を短縮させ、したがって、より多くの時間が、患者を観察し、医療的注意を提供することに費やされることを可能にし得る。本明細書に説明される種々の実施形態はまた、有利には、ユーザの中心視野内の１つまたはそれを上回るオブジェクトの改善されたユーザビューを提供し得る。例えば、いくつかの実施形態は、灰色背景を提供し、外科手術部位および／または医療画像に対して、手術室の残りを強調解除するように構成されることができる。
【0061】
３つの異なるタイプの視覚、すなわち、明所視、薄明視、および暗所視が、存在する。明所視、薄明視、および暗所視は、それぞれ、比較的に明るい（例えば、いくつかのインスタンスでは、１０～１０８ｃｄ／ｍ２）、中間（例えば、いくつかのインスタンスでは、１０－３ｃｄ／ｍ２～１００．５ｃｄ／ｍ２）、および低光（例えば、いくつかのインスタンスでは、１０－３．５ｃｄ／ｍ２～１０－６ｃｄ／ｍ２）条件下における眼の視覚である。例えば、周囲光輝度に応じて、錐体、桿体、または両方が、活性化され得る。錐体および桿体は、異なる照明条件の間、活性化されにつれて、反比例して関連され得る。図１Ｇに示されるように、錐体は、高光条件下で活性化される一方、桿体は、低光条件の間に活性化される。したがって、明所視のために、錐体が、主に、使用され、暗所視のために、桿体が、主に、使用される。薄明視は、錐体および桿体の両方を利用する。視力は、錐体および／または桿体の分解能または密度に依存し得るため、視力はまた、照明レベルの関数であり得る。故に、本明細書に説明される種々の実施形態は、１つまたはそれを上回る捕捉デバイス（例えば、１つまたはそれを上回るカメラ、光センサ、照度計等）を含み、照明条件を捕捉してもよく、および／または少なくとも部分的に、照明条件に基づいて、画像コンテンツの少なくとも一部を提示または修正（例えば、増強、強調解除、移動等）してもよい。
【0062】
明所視が、薄明視に変わるにつれて、桿体が、より活性となるが、必ずしも、線形関係によってではない。例えば、関係は、暗環境内で費やされた時間に依存し得る。環境が暗いほど、錐体の活性から桿体の活性により高速で遷移し得る。暗所視が、薄明視に変わるにつれて、その反対のことが、生じ得る。時間、輝度レベル、および輝度レベル変化を監視することによって、利用されている錐体および／または桿体の量が、判定されることができる。故に、本明細書に説明される種々の実施形態は、１つまたはそれを上回るタイミングデバイス（例えば、１つまたはそれを上回るクロックまたはタイマ）を含み、時間を監視してもよく、および／または少なくとも部分的に、照明条件に、および／または少なくとも部分的に、照明条件下における時間に基づいて、画像コンテンツの少なくとも一部を提示または修正（例えば、増強、強調解除、移動等）してもよい。
【0063】
医療コンテキストに限定されないが、本明細書に説明されるある実施形態は、医療結像、表示、および可視化のために実装されてもよい。例えば、健康医療サービス専門家は、それらが提供する医療サービスと関連して、その物理的および精神的能力に関する大きな需要を受けている。そのような専門家は、例えば、医師、外科医、看護師、技術者、歯科医、眼科医、ホーム医療サービス提供者、臨床医、および／または他の健康医療提供者を含むことができる。多くの状況では、健康医療の需要は、迅速応答および精密なアクションを要求する。医療コンテキスト外の専門家（例えば、運動選手、機械工、およびシェフ）もまた、本明細書に説明される種々の実施形態から利点を享受し得る。さらに、情報を複数の場所から要求しながら、手の使用を要求する、職業および趣味を伴う者も、本明細書に開示される方法およびシステムから利点を享受し得る。さらに、本明細書に説明される種々の実施形態は、自動車両または他の車両を動作させる等のユーザ注目および集中を要求し得る、日々のアクティビティ、例えば、タスクにおいても使用されることができる。
【0064】
有利には、いくつかの実施形態では、本明細書に開示される拡張現実（ＡＲ）ディスプレイシステムは、健康医療提供者をその業務において補助するように構成されてもよい（例えば、ユーザの周辺および／または中心視野内の１つまたはそれを上回るオブジェクトの増強されたユーザビューを提供するため）。ＡＲシステムは、依然として、ユーザがその周囲の世界を見えることを可能にしながら、仮想コンテンツをユーザまたは視認者に表示し得る。好ましくは、本コンテンツは、例えば、アイウェアの一部として、画像情報をユーザの眼に投影する、頭部搭載型ディスプレイ上に表示される。加えて、ディスプレイはまた、周囲環境からの光をユーザの眼に伝送し、その周囲環境のビューをもたらしてもよい。本明細書で使用されるように、「頭部搭載型」ディスプレイは、視認者の頭部上に搭載され得る、ディスプレイであることを理解されたい。
【0065】
本明細書に説明されるような頭部搭載型拡張現実ディスプレイシステムまたはデバイスを装着する人物は、外部環境内のオブジェクトが直接視認され得るように、外部環境内のそれらのオブジェクトからの光が透明光学を通してユーザの眼に通過することを可能にする、透明光学、例えば、ウィンドウ、レンズ、導波管等を通して、外部世界または環境のビューを提供されてもよい。頭部搭載型拡張現実ディスプレイを装着する人物は、頭部搭載型ディスプレイの透明要素を通して外部世界を直接視認するとき、図１Ｂに示されるような視野を有する。ＡＲシステムは、加えて、例えば、変調された光源からの光をユーザの眼の中に投影させることによって、画像を頭部搭載型ディスプレイを装着するユーザに提示してもよい。これらの画像は、これらの「仮想」画像が、頭部搭載型ディスプレイの透明要素を通して眼に通過し、オブジェクトの画像を網膜上に形成する、外部世界内のオブジェクトからの光からではなく、ディスプレイによって生成されるため、「仮想」画像と称され得る。
【0066】
さらに以下に議論されるように、多くのＶＲ、ＡＲ、およびＭＲディスプレイデバイスは、画像情報を表示するとき、遠近調節－輻輳・開散運動（ｖｅｒｇｅｎｃｅ）不整合に悩まされる。そのような不整合は、ユーザに不快感を生じさせ得、デバイスの長期装着を実行不可能にし得る。有利には、本明細書における実施形態による、ディスプレイデバイスは、とりわけ、ユーザにおける遠近調節と輻輳・開散運動との間の正しい整合を提供することによって、デバイスの長期装着を可能にする。その結果、デバイスのユーザは、２５％を超える、２０％を超える、１５％を超える、１０％を超える、または５％を超える持続時間にわたってデバイスを除去せずに、３時間またはそれを上回る、４時間またはそれを上回る、５時間またはそれを上回る、６時間またはそれを上回る持続時間にわたって、もしくは１日中、実質的に持続的にデバイスを装着および使用することが可能となり得る。いくつかの実施形態では、ディスプレイデバイスは、前述の持続時間にわたって実質的に持続的に拡張現実画像を表示してもよい。
【0067】
本明細書に開示されるディスプレイシステムの装着能力および装着能力の長期性質は、（センサ系コンポーネントを含む）ディスプレイシステムのユーザに対する近接近度と結合され、有利には、医療手技および処置の前、間、および後、ディスプレイシステムまたはデバイスの使用を促進する。いくつかの実施形態では、ディスプレイシステムは、ユーザの視野内の実世界オブジェクト（例えば、ユーザの正面の環境内の有形オブジェクト等）の画像を提供するように構成されてもよい。ある実施形態では、ディスプレイシステムは、視認者のために、実世界オブジェクトの画像を増強された画像としてレンダリングすることができる。増強された画像は、例えば、頭部搭載型ディスプレイを装着するユーザの正面の環境内の実際の実世界オブジェクトの画像に対して、および／またはディスプレイによって提供される他の画像ならびに／もしくは頭部搭載型ディスプレイを装着するユーザの正面の環境内の他のオブジェクトに対して、拡大、ユーザの視野内の場所、深度平面配分、色飽和、コントラスト、明度、鮮明度、測定割合、ホワイトバランス、陰影、ハイライト、ユーザに対する画像配向、色または陰影バランス、および／または明確性を改善した、光源によって眼の中に投影される画像を含んでもよい。例えば、ディスプレイシステムは、実世界内のオブジェクトを識別し、オブジェクトの拡大された画像を表示するように構成されてもよい。種々の実施形態では、ディスプレイシステムは、画像の他の部分または頭部搭載型ディスプレイの透明光学要素（ウィンドウ、レンズ、導波管）を通して前方の環境内のオブジェクトを視認しているユーザの視野内の他のオブジェクトと比較して、画像の一部を拡大するように構成されてもよい。
【0068】
いくつかの実施形態では、ディスプレイシステムは、オブジェクトがユーザからであるように現れる、近似距離を判定するように構成されてもよい。ある実施形態では、ディスプレイシステムは、少なくとも部分的に、近似判定距離に基づいて、オブジェクトの画像を被写界深度にレンダリングすることができる。ディスプレイシステムは、眼毎に、視覚的コンテンツを表示してもよく、視覚的コンテンツの場所、コンテンツが表示される深度平面、視覚的コンテンツへの露光の持続時間等を含む、種々の視覚的パラメータを変動させてもよいことを理解されたい。視覚的コンテンツおよびこれらの視覚的パラメータを変動させることによって、実世界オブジェクトは、ディスプレイシステムによって、本明細書に説明されるような種々の様式においてレンダリングされることができる。いくつかの実施形態では、ディスプレイシステムは、環境内の他のオブジェクトおよび／または周囲環境に関する視覚的コンテンツの種々の視覚的パラメータを改変してもよい。
【0069】
ヒト視覚系は、受動センサタイプのシステムではない。すなわち、環境を能動的に走査するように構成される。画像を捕捉するためのフラットベッドスキャナの使用または紙から点字を読み取る指の使用に幾分類似する様式において、眼の光受容体は、刺激の一定状態に一定に応答するのではなく、刺激の変化に応答して発火する。
【0070】
脳の視覚野は、本明細書に議論されるように、相互に対する両眼およびその構成要素の運動から貴重な知覚情報を得る。さらに、眼を格納する、頭部の移動もまた、オブジェクトの可視化に重要な影響を及ぼす。ヒトは、その頭部を移動させ、その周囲の世界を可視化する。多くの場合、着目オブジェクトに対して、非常に一定した頭部の再位置付けおよび再配向の状態にある。さらに、大部分の人々は、その眼視線が、特定のオブジェクトに合焦させるために中心から約２０度を上回って移動する必要があるとき、その頭部を移動させることを好む（例えば、人々は、典型的には、「眼の隅から」物を見ることを好まない）。ヒトはまた、典型的には、音に連動してその頭部を走査または移動させ、オーディオ信号捕捉を改善し、頭部に対する耳の幾何学形状を利用する。ヒトの視覚系は、頭部の運動および眼の輻輳・開散運動距離の関数として、異なる距離におけるオブジェクトの相対運動に関連する、「頭部運動視差」と呼ばれるものから優れた深度のキューを得る（例えば、人物が、その頭部を横方向に移動させ、オブジェクトへの固視を維持する場合、そのオブジェクトからより遠いアイテムも、頭部と同一方向に移動するであろう。そのオブジェクトの正面のアイテムは、頭部運動と反対に移動するであろう。これらは、人物に対する環境内の空間的場所に位置するものの場所に関する非常に顕著なキューであって、おそらく、立体視と同等に優れている）。頭部運動はまた、当然ながら、オブジェクトを見渡すためにも利用される。
【0071】
しかしながら、ユーザによる頭部移動への依拠は、ユーザが高レベルの合焦、集中、および／または注意を要求する状況（例えば、外科手術の間または車を運転中）では、不利であり得る。そのような状況では、ユーザは拡大される、より中心に置く、例えば、その中心視野により近づける、もしくは光学軸および／または中心窩により近づける、または本明細書に説明されるような他の方法において等、画像をより便宜的に提示（例えば、ユーザのためにパーソナライズされる）または増強させることが有利であることを見出し得る。ユーザはまた、可能性として、サイズが低減される、または周縁に移動される等、強調解除されたコンテンツから注意を逸らさせることが有利であることを見出し得る。
【0072】
いくつかの実施形態では、ディスプレイシステムが画像を複数の深度平面上に表示する能力は、有利には、直接ユーザ入力または脳活動を測定するための複雑な外部計器を要求せずに、有利には、視認者が感知または反応している複数の画像のうちの画像を判定するために適用されてもよい。例えば、実世界画像が、ディスプレイシステムの異なる深度平面上にレンダリングされてもよく、ユーザの眼の遠近調節および／または輻輳・開散運動が、測定されてもよい（例えば、ディスプレイデバイス上の眼追跡カメラを使用して）。視認者によって知覚される異なる深度平面上の画像は、眼に異なる遠近調節および／または輻輳・開散運動状態をとらせるであろうことを理解されたい。その結果、ユーザによって知覚される画像が、１）ユーザの眼の遠近調節および／または輻輳・開散運動状態を判定し、２）その遠近調節および／または輻輳・開散運動状態と表示されている画像または画像の深度平面を合致させることによって、推測され得る。ユーザの測定された遠近調節および／または輻輳・開散運動状態に対応する画像は、次いで、ユーザによって知覚された画像であると解釈される。いくつかの実施形態では、画像は、広く異なる深度平面（例えば、無限遠およびディスプレイシステムによって出力される最近傍深度平面）上に表示され、画像間の遠近調節および／または輻輳・開散運動状態における予期される差異を増加させてもよい。いくつかの実施形態では、ユーザが画像を固視する持続時間（例えば、ユーザの眼が特定の遠近調節および／または輻輳・開散運動状態をとる時間の量）もまた、測定され、ユーザが能動的に特定の画像を知覚しているかどうか、もしくは遠近調節および／または輻輳・開散運動状態の変化が、例えば、不随意の反射の結果であるかどうかを推測してもよい。ユーザ知覚を検出するためのそのようなスキームは、限定ではないが、闘争、優勢および／または抑制、後方マスキング、ならびに前方マスキングに関連する試験を含む、種々の知覚試験のために利用されてもよいことを理解されたい。
【0073】
前述のように、動眼視野は、ユーザによって知覚可能なユーザの周囲の環境の一部を備える。故に、頭部搭載型拡張現実デバイス（ＡＲＤ）を装着するユーザに関して、動眼視野は、装着者が、その身体、頭部、または眼を移動させ、空間内の実質的に任意の方向を知覚することができるため、装着者を囲繞する４πステラジアン立体角の実質的に全てを含み得る。他のコンテキストでは、ユーザの移動は、より狭められ得、故に、ユーザの動眼視野は、より小さい立体角に対し得る。
【0074】
図１Ｂでは、動眼視野１７６５は、オブジェクト（例えば、オブジェクト１７２１、１７２２、１７２７）のグループを含有することができ、これは、ＡＲシステムを装着するユーザによって知覚されることができる。いくつかの実施形態では、オブジェクト１７２９は、頭部搭載型ディスプレイの透明光学を通して見ると、ユーザの視野外にあり得るが、それにもかかわらず、潜在的に、ＡＲシステム上の少なくとも１つのセンサ（例えば、カメラ）によって知覚され（その場所および視野に応じて）、ユーザ６０のために表示され得る。
【0075】
ＡＲシステムは、仮想要素を頭部搭載型ディスプレイの透明光学を通して視認される既存の物理的オブジェクトに追加し、それによって、物理的オブジェクトとのユーザ相互作用を可能にすることができる。例えば、ＡＲシステムは、手術室内の医療モニタと関連付けられた仮想メニューを追加してもよく、仮想メニューは、ユーザに、ＡＲシステムを使用して、医療結像機器または投薬制御をオンもしくは調節するためのオプションを与えてもよい。
【0076】
故に、ディスプレイは、ユーザの正面の環境内のオブジェクトの仮想画像に加え、付加的仮想画像コンテンツを装着者に提示してもよい。仮想オブジェクトは、例えば、コマンドを入力するための端末、ファイルまたはディレクトリにアクセスするためのファイルマネージャ、アイコン、メニュー、オーディオまたはビデオストリーミングのためのアプリケーション、オペレーティングシステムからの通知等、例えば、オペレーティングシステムオブジェクトを含んでもよい。仮想オブジェクトはまた、例えば、アバタ、ゲーム内の仮想オブジェクト、グラフィックまたは画像等、アプリケーション内のオブジェクトを含んでもよい。いくつかの仮想オブジェクトは、オペレーティングシステムオブジェクトおよびアプリケーション内のオブジェクトの両方であることができる。
【0077】
視野１７５５は、複数のオブジェクト（例えば、オブジェクト１７２１、１７２２）を含有することができる。視野１７５５は、ＡＲシステムのサイズまたは光学特性、例えば、光がユーザの正面の実世界からユーザの眼に通過する、頭部搭載型ディスプレイの透明ウィンドウまたはレンズのクリア開口サイズに依存し得る。いくつかの実施形態では、ユーザ６０の姿勢（例えば、頭部姿勢、身体姿勢、および／または眼姿勢）が変化するにつれて、視野１７５５は、対応して変化することができ、視野１７５５内のオブジェクトもまた、変化し得る。本明細書に説明されるように、ＡＲシステムは、動眼視野１７６５内のオブジェクトならびに視野１７５５内のオブジェクトを監視または結像する、カメラ等のセンサを含んでもよい。いくつかのそのような実施形態では、ＡＲシステムは、ユーザに、ユーザの視野１７５５内で生じる、および／または外側ユーザの視野内であるが、動眼視野１７６５内で生じる、気付いていないオブジェクトまたはイベントをアラートしてもよい。いくつかの実施形態では、ＡＲシステムはまた、ユーザ６０が注意を向けているものと向けていないものを区別することができる。
【0078】
図２は、ウェアラブルディスプレイシステム８０の実施例を図示する。ディスプレイシステム８０は、ディスプレイ６２と、そのディスプレイ６２の機能をサポートするための種々の機械的および電子的モジュールならびにシステムとを含む。ディスプレイ６２は、フレーム６４に結合されてもよく、これは、ディスプレイシステムユーザまたは視認者６０によって装着可能であって、ディスプレイ６２をユーザ６０の眼の正面に位置付けるように構成される。ディスプレイ６２は、いくつかの実施形態では、アイウェアと見なされ得る。いくつかの実施形態では、スピーカ６６が、フレーム６４に結合され、ユーザ６０の外耳道に隣接して位置付けられる（いくつかの実施形態では、示されない別のスピーカが、ユーザの他の外耳道に隣接して位置付けられ、ステレオ／調節可能音制御を提供する）。いくつかの実施形態では、ディスプレイシステムはまた、１つまたはそれを上回るマイクロホン６７または他のデバイスを含み、音を検出してもよい。いくつかの実施形態では、マイクロホンは、ユーザが、入力またはコマンド（例えば、音声メニューコマンドの選択、自然言語質問等）をシステム８０に提供することを可能にするように構成され、および／または他の人物（例えば、類似ディスプレイシステムの他のユーザ）とのオーディオ通信を可能にしてもよい。マイクロホンはさらに、周辺センサとして構成され、オーディオデータを持続的に収集してもよい（例えば、ユーザおよび／または環境から受動的に収集するため）。そのようなオーディオデータは、荒い息づかい等のユーザ音または近傍イベントを示す大騒動等の環境音を含んでもよい。ディスプレイシステムはまた、周辺センサ３０ａを含んでもよく、これは、フレーム６４と別個であって、ユーザ６０の身体（例えば、ユーザ６０の頭部、胴体、四肢等上）に取り付けられてもよい。周辺センサ３０ａは、本明細書にさらに説明されるように、いくつかの実施形態では、ユーザ６０に関するデータを入手するように構成されてもよい。
【0079】
図２を継続して参照すると、ディスプレイ６２は、有線導線または無線コネクティビティ等の通信リンク６８によって、ローカルデータ処理モジュール７０に動作可能に結合され、これは、フレーム６４に固定して取り付けられる、ユーザによって装着されるヘルメットまたは帽子に固定して取り付けられる、ヘッドホン内に内蔵される、または別様に、ユーザ６０に除去可能に取り付けられる（例えば、リュック式構成、ベルト結合式構成において）等、種々の構成において搭載されてもよい。同様に、センサ３０ａは、通信リンク３０ｂ、例えば、有線導線または無線コネクティビティによって、ローカルプロセッサおよびデータモジュール７０に動作可能に結合されてもよい。ローカル処理およびデータモジュール７０は、ハードウェアプロセッサと、不揮発性メモリ（例えば、フラッシュメモリまたはハードディスクドライブ）等のデジタルメモリとを備えてもよく、両方とも、データの処理、キャッシュ、および記憶を補助するために利用されてもよい。データは、ａ）画像捕捉デバイス（カメラ等）、マイクロホン、慣性測定ユニット、加速度計、コンパス、ＧＰＳユニット、無線デバイス、ジャイロスコープ、深度センサ、対の両眼世界カメラ、地理位置センサ、近接度センサ、および／または本明細書に開示される他のセンサ等のセンサ（例えば、フレーム６４に動作可能に結合される、または別様に、ユーザ６０に取り付けられてもよい）から捕捉され、および／またはｂ）可能性として、処理または読出後、ディスプレイ６２への通過のために、遠隔処理モジュール７２および／または遠隔データリポジトリ７４（仮想コンテンツに関連するデータを含む）を使用して、入手および／または処理される、データを含む。ローカル処理およびデータモジュール７０は、これらの遠隔モジュール７２、７４が、相互に動作可能に結合され、ローカル処理およびデータモジュール７０へのリソースとして利用可能であるように、有線または無線通信リンク等を介して、通信リンク７６、７８によって、遠隔処理モジュール７２および遠隔データリポジトリ７４に動作可能に結合されてもよい。いくつかの実施形態では、ローカル処理およびデータモジュール７０は、画像捕捉デバイス、マイクロホン、慣性測定ユニット、加速度計、コンパス、ＧＰＳユニット、無線デバイス、ジャイロスコープ、深度センサ、対の両眼世界カメラ、地理位置センサ、近接度センサ等のうちの１つまたはそれを上回るものを含んでもよい。いくつかの他の実施形態では、これらのセンサのうちの１つまたはそれを上回るものは、フレーム６４に取り付けられてもよい、または有線または無線通信経路によってローカル処理およびデータモジュール７０と通信する、独立型構造であってもよい。
【0080】
図２を継続して参照すると、いくつかの実施形態では、遠隔処理モジュール７２は、データおよび／または画像情報を分析および処理するように構成される、１つまたはそれを上回るプロセッサを備えてもよい。いくつかの実施形態では、遠隔データリポジトリ７４は、デジタルデータ記憶設備を備えてもよく、これは、インターネットまたは「クラウド」リソース構成における他のネットワーキング構成を通して利用可能であってもよい。いくつかの実施形態では、遠隔データリポジトリ７４は、１つまたはそれを上回る遠隔サーバを含んでもよく、これは、情報、例えば、拡張現実コンテンツを生成するための情報をローカル処理およびデータモジュール７０および／または遠隔処理モジュール７２に提供する。いくつかの実施形態では、全てのデータは、記憶および全ての算出は、ローカル処理およびデータモジュール内で実施され、遠隔モジュールからの完全に自律的使用を可能にする。
【0081】
「３次元」または「３－Ｄ」であるような画像の知覚は、画像の若干異なる提示を視認者の各眼に提供することによって達成されてもよい。図３は、ユーザのための３次元画像をシミュレートするための従来のディスプレイシステムを図示する。眼４、６毎に１つの２つの明確に異なる画像５、７が、ユーザに出力される。画像５、７は、視認者の視線と平行な光学またはｚ－軸に沿って、距離１０だけ眼４、６から離間される。画像５、７は、平坦であって、眼４、６は、単一遠近調節状態をとることによって、画像に合焦させ得る。そのようなシステムは、ヒト視覚系が、画像５、７を組み合わせ、組み合わせられた画像のための深度および／またはスケールの知覚を提供することに依拠する。
【0082】
しかしながら、ヒト視覚系は、より複雑であって、深度の現実的知覚の提供は、より困難であることを理解されるであろう。例えば、従来の「３－Ｄ」ディスプレイシステムの多くの視認者は、そのようなシステムを不快であると見出す、または深度の感覚を全く知覚しない場合がある。理論によって限定されるわけではないが、オブジェクトの視認者は、輻輳・開散運動と遠近調節の組み合わせに起因して、オブジェクトを「３次元」であると知覚し得ると考えられる。相互に対する２つの眼の輻輳・開散運動移動（すなわち、瞳孔が、相互に向かって、またはそこから離れるように移動し、眼の視線を収束させ、オブジェクトを固視するような眼の回転）は、眼のレンズおよび瞳孔の合焦（または「遠近調節」）と緊密に関連付けられる。通常条件下、焦点を１つのオブジェクトから異なる距離における別のオブジェクトに変化させるための眼のレンズの焦点の変化または眼の遠近調節は、「遠近調節－輻輳・開散運動反射」ならびに散瞳または縮瞳として知られる関係下、輻輳・開散運動の整合変化を自動的に同一距離に生じさせるであろう。同様に、輻輳・開散運動の変化は、通常条件下、レンズ形状および瞳孔サイズの遠近調節の整合変化を誘起するであろう。本明細書に記載されるように、多くの立体視、すなわち、「３－Ｄ」ディスプレイシステムは、３次元視点がヒト視覚系によって知覚されるように、若干異なる提示（したがって、若干異なる画像）を使用して、場面を各眼に表示する。しかしながら、そのようなシステムは、それらが、とりわけ、単に、場面の異なる提示を提供するが、眼が全ての画像情報を単一遠近調節状態で視認する状態では、「遠近調節－輻輳・開散運動反射」に反発するため、多くの視認者にとって不快である。遠近調節と輻輳・開散運動との間のより良好な整合を提供する、ディスプレイシステムは、３次元画像のより現実的かつ快適なシミュレーションを形成し、増加された持続時間の装着、ひいては、診断および療法プロトコルへのコンプライアンスに寄与し得る。
【0083】
図４は、複数の深度平面を使用して３次元画像をシミュレートするためのアプローチの側面を図示する。図４を参照すると、ｚ－軸上の眼４、６から種々の距離におけるオブジェクトは、それらのオブジェクトが合焦するように、眼４、６によって遠近調節される。眼（４および６）は、特定の遠近調節状態をとり、オブジェクトをｚ－軸に沿って異なる距離に合焦させる。その結果、特定の遠近調節状態は、眼がその深度平面のための遠近調節状態にあるとき、特定の深度平面内のオブジェクトまたはオブジェクトの一部が合焦するように、関連付けられた焦点距離を有する、深度平面１４の特定のうちの１つと関連付けられると言え得る。いくつかの実施形態では、３次元画像は、眼４、６毎に画像の異なる提示を提供することによって、また、深度平面のそれぞれに対応する画像の異なる提示を提供することによって、シミュレートされてもよい。例証を明確にするために、別個であるように示されるが、眼４、６の視野は、例えば、ｚ－軸に沿った距離が増加するにつれて、重複し得ることを理解されるであろう。加えて、例証の容易性のために、平坦であるように示されるが、深度平面の輪郭は、深度平面内の全ての特徴が特定の遠近調節状態において眼と合焦するように、物理的空間内で湾曲されてもよいことを理解されるであろう。
【0084】
オブジェクトと眼４または６との間の距離もまた、その眼によって視認されるように、オブジェクトからの光の発射量を変化させ得る。図５Ａ－５Ｃは、距離と光線の発散との間の関係を図示する。オブジェクトと眼４との間の距離は、減少距離Ｒ１、Ｒ２、およびＲ３の順序で表される。図５Ａ－５Ｃに示されるように、光線は、オブジェクトまでの距離が減少するにつれてより発散する。距離が増加するにつれて、光線は、よりコリメートされる。換言すると、点（オブジェクトまたはオブジェクトの一部）によって生成されるライトフィールドは、点がユーザの眼から離れている距離の関数である、球状波面曲率を有すると言え得る。曲率が増加すると、オブジェクトと眼４の間の距離が減少する。その結果、異なる深度平面では、光線の発散の程度もまたは、異なり、発散の程度は、深度平面と視認者の眼４との間の距離の減少に伴って増加する。単眼４のみが、図５Ａ－５Ｃおよび本明細書における他の図では、例証を明確にするために図示されるが、眼４に関する議論は、視認者の両眼４および６に適用され得ることを理解されるであろう。
【0085】
理論によって限定されるわけではないが、ヒトの眼は、典型的には、有限数の深度平面を解釈し、深度知覚を提供することができると考えられる。その結果、知覚された深度の高度に真実味のあるシミュレーションが、眼にこれらの限定数の深度平面のそれぞれに対応する画像（例えば、場面）の異なる提示を提供することによって達成され得る。異なる提示は、視認者の眼によって別個に合焦され、それによって、異なる深度平面上に位置する場面のための異なる画像特徴に合焦させるために要求される眼の遠近調節に基づいて、および／または焦点外にある異なる深度平面上の異なる画像特徴の観察に基づいて、ユーザに深度キューを提供することに役立ち得る。
【0086】
図６は、画像情報をユーザに出力するための導波管スタックの実施例を図示する。ディスプレイシステム１０００は、複数の導波管１８２、１８４、１８６、１８８、１９０を使用して３次元知覚を眼／脳に提供するために利用され得る、導波管のスタックまたはスタックされた導波管アセンブリ１７８を含む。いくつかの実施形態では、ディスプレイシステム１０００は、図２のシステム８０であって、図６は、そのシステム８０のいくつかの部分をより詳細に図式的に示す。例えば、導波管アセンブリ１７８は、図２のディスプレイ６２の一部であってもよい。ディスプレイシステム１０００は、いくつかの実施形態では、ライトフィールドディスプレイと見なされ得ることを理解されるであろう。
【0087】
図６を継続して参照すると、導波管アセンブリ１７８はまた、複数の特徴１９８、１９６、１９４、１９２を導波管間に含んでもよい。いくつかの実施形態では、特徴１９８、１９６、１９４、１９２は、１つまたはそれを上回るレンズであってもよい。導波管１８２、１８４、１８６、１８８、１９０および／または複数のレンズ１９８、１９６、１９４、１９２は、種々のレベルの波面曲率または光線発散を用いて画像情報を眼に送信するように構成されてもよい。各導波管レベルは、特定の深度平面と関連付けられてもよく、その深度平面に対応する画像情報を出力するように構成されてもよい。画像投入デバイス２００、２０２、２０４、２０６、２０８は、導波管のための光源として機能してもよく、画像情報を導波管１８２、１８４、１８６、１８８、１９０の中に投入するために利用されてもよく、それぞれ、本明細書に説明されるように、眼４に向かって出力のために各個別の導波管を横断して入射光を分散させるように構成されてもよい。光は、画像投入デバイス２００、２０２、２０４、２０６、２０８の出力表面３００、３０２、３０４、３０６、３０８から出射し、導波管１８２、１８４、１８６、１８８、１９０の対応する入力表面３８２、３８４、３８６、３８８、３９０の中に投入される。いくつかの実施形態では、入力表面３８２、３８４、３８６、３８８、３９０はそれぞれ、対応する導波管の縁であってもよい、または対応する導波管の主要表面の一部（すなわち、世界１４４または視認者の眼４に直接面する導波管表面のうちの１つ）であってもよい。いくつかの実施形態では、光の単一ビーム（例えば、コリメートされたビーム）が、各導波管の中に投入され、クローン化されたコリメートビームの全体場を出力してもよく、これは、特定の導波管と関連付けられた深度平面に対応する特定の角度（および発散量）において眼４に向かって指向される。いくつかの実施形態では、画像投入デバイス２００、２０２、２０４、２０６、２０８のうちの単一の１つは、複数（例えば、３つ）の導波管１８２、１８４、１８６、１８８、１９０と関連付けられ、その中に光を投入してもよい。
【0088】
いくつかの実施形態では、画像投入デバイス２００、２０２、２０４、２０６、２０８はそれぞれ、それぞれ対応する導波管１８２、１８４、１８６、１８８、１９０の中への投入のために画像情報を生産する、離散ディスプレイである。いくつかの他の実施形態では、画像投入デバイス２００、２０２、２０４、２０６、２０８は、例えば、画像情報を１つまたはそれを上回る光学導管（光ファイバケーブル等）を介して画像投入デバイス２００、２０２、２０４、２０６、２０８のそれぞれに送り得る、単一の多重化されたディスプレイの出力端である。画像投入デバイス２００、２０２、２０４、２０６、２０８によって提供される画像情報は、異なる波長または色（例えば、本明細書に議論されるように、異なる原色）の光を含んでもよいことを理解されたい。
【0089】
いくつかの実施形態では、導波管１８２、１８４、１８６、１８８、１９０の中に投入される光は、光プロジェクタシステム２０００によって提供され、これは、光モジュール２０４０を備え、これは、発光ダイオード（ＬＥＤ）等の光エミッタを含んでもよい。光モジュール２０４０からの光は、ビームスプリッタ２０５０を介して、光変調器２０３０、例えば、空間光変調器によって指向および修正されてもよい。光変調器２０３０は、導波管１８２、１８４、１８６、１８８、１９０の中に投入される光の知覚される強度を変化させるように構成されてもよい。光変調器２０３０は、導波管１８２、１８４、１８６、１８８、１９０の中に投入される光の知覚される強度を変化させるように構成されてもよい。空間光変調器の実施例は、シリコン上液晶（ＬＣＯＳ）ディスプレイを含む、液晶ディスプレイ（ＬＣＤ）を含む。
【0090】
いくつかの実施形態では、ディスプレイシステム１０００は、光を種々のパターン（例えば、ラスタ走査、螺旋走査、リサジューパターン等）で１つまたはそれを上回る導波管１８２、１８４、１８６、１８８、１９０の中に、最終的には、視認者の眼４に投影するように構成される、１つまたはそれを上回る走査ファイバを備える、走査ファイバディスプレイであってもよい。いくつかの実施形態では、図示される画像投入デバイス２００、２０２、２０４、２０６、２０８は、光を１つまたは複数の導波管１８２、１８４、１８６、１８８、１９０の中に投入するように構成される、単一走査ファイバまたは走査ファイバの束を図式的に表し得る。いくつかの他の実施形態では、図示される画像投入デバイス２００、２０２、２０４、２０６、２０８は、複数の走査ファイバまたは走査ファイバの複数の束を図式的に表し得、それぞれ、光を導波管１８２、１８４、１８６、１８８、１９０のうちの関連付けられた１つの中に投入するように構成される。１つまたはそれを上回る光ファイバは、光を光モジュール２０４０から１つまたはそれを上回る導波管１８２、１８４、１８６、１８８、１９０に透過するように構成されてもよいことを理解されたい。１つまたはそれを上回る介在光学構造が、走査ファイバまたは複数のファイバと、１つまたはそれを上回る導波管１８２、１８４、１８６、１８８、１９０との間に提供され、例えば、走査ファイバから出射する光を１つまたはそれを上回る導波管１８２、１８４、１８６、１８８、１９０の中に再指向してもよいことを理解されたい。
【0091】
コントローラ２１０は、画像投入デバイス２００、２０２、２０４、２０６、２０８、光源２０４０、および光変調器２０３０の動作を含む、スタックされた導波管アセンブリ１７８のうちの１つまたはそれを上回るものの動作を制御する。いくつかの実施形態では、コントローラ２１０は、ローカルデータ処理モジュール７０の一部である。コントローラ２１０は、例えば、本明細書に開示される種々のスキームのいずれかに従って、導波管１８２、１８４、１８６、１８８、１９０への画像情報のタイミングおよび提供を調整する、プログラミング（例えば、非一過性媒体内の命令）を含む。いくつかの実施形態では、コントローラは、単一一体型デバイスまたは有線もしくは無線通信チャネルによって接続される分散型システムであってもよい。コントローラ２１０は、いくつかの実施形態では、処理モジュール７０または７２（図２）の一部であってもよい。
【0092】
図６を継続して参照すると、導波管１８２、１８４、１８６、１８８、１９０は、全内部反射（ＴＩＲ）によって各個別の導波管内で光を伝搬するように構成されてもよい。導波管１８２、１８４、１８６、１８８、１９０はそれぞれ、主要な上部および底部表面ならびにそれらの主要上部表面と底部表面との間に延在する縁を伴う、平面である、または別の形状（例えば、湾曲）を有してもよい。図示される構成では、導波管１８２、１８４、１８６、１８８、１９０はそれぞれ、各個別の導波管内で伝搬する光を導波管から再指向し、画像情報を眼４に出力することによって、光を導波管から抽出するように構成される、外部結合光学要素２８２、２８４、２８６、２８８、２９０を含んでもよい。抽出された光はまた、外部結合光と称され得、外部結合光学要素光はまた、光抽出光学要素と称され得る。抽出された光のビームは、導波管によって、導波管内を伝搬する光が光抽出光学要素に衝打する場所において出力される。外部結合光学要素２８２、２８４、２８６、２８８、２９０は、例えば、本明細書にさらに議論されるような回折光学特徴を含む、格子であってもよい。説明の容易性および図面の明確性のために、導波管１８２、１８４、１８６、１８８、１９０の底部主要表面に配置されて図示されるが、いくつかの実施形態では、外部結合光学要素２８２、２８４、２８６、２８８、２９０は、本明細書にさらに議論されるように、上部および／または底部主要表面に配置されてもよい、ならびに／もしくは導波管１８２、１８４、１８６、１８８、１９０の体積内に直接配置されてもよい。いくつかの実施形態では、外部結合光学要素２８２、２８４、２８６、２８８、２９０は、透明基板に取り付けられ、導波管１８２、１８４、１８６、１８８、１９０を形成する、材料の層内に形成されてもよい。いくつかの他の実施形態では、導波管１８２、１８４、１８６、１８８、１９０は、材料のモノリシック部品であってもよく、外部結合光学要素２８２、２８４、２８６、２８８、２９０は、材料のその部品の表面上および／またはその内部に形成されてもよい。
【0093】
図６を継続して参照すると、本明細書に議論されるように、各導波管１８２、１８４、１８６、１８８、１９０は、光を出力し、特定の深度平面に対応する画像を形成するように構成される。例えば、眼の最近傍の導波管１８２は、眼４にコリメートされた光（そのような導波管１８２の中に投入された）を送達するように構成されてもよい。コリメートされた光は、光学無限遠焦点面を表し得る。次の上方の導波管１８４は、眼４に到達し得る前に、第１のレンズ１９２（例えば、負のレンズ）を通して通過する、コリメートされた光を送出するように構成されてもよい。そのような第１のレンズ３５０は、眼／脳が、その次の上方の導波管１８４から生じる光を光学無限遠から眼４に向かって内向きにより近い第１の焦点面から生じるように解釈するように、若干の凸面波面曲率を生成するように構成されてもよい。同様に、第３の上方の導波管１８６は、眼４に到達する前に、その出力光を第１の１９２および第２の１９４レンズの両方を通して通過させる。第１の１９２および第２の１９４レンズの組み合わせられた屈折力は、眼／脳が、第３の導波管１８６から生じる光が次の上方の導波管１８４からの光であった光学無限遠から人物に向かって内向きにさらに近い第２の焦点面から生じるように解釈するように、別の漸増量の波面曲率を生成するように構成されてもよい。
【0094】
他の導波管層１８８、１９０およびレンズ１９６、１９８も同様に構成され、スタック内の最高導波管１９０は、人物に最も近い焦点面を表す集約焦点力のために、その出力をそれと眼との間のレンズの全てを通して送出する。スタックされた導波管アセンブリ１７８の他側の世界１４４から生じる光を視認／解釈するとき、レンズ１９８、１９６、１９４、１９２のスタックを補償するために、補償レンズ層１８０が、スタックの上部に配置され、下方のレンズスタック１９８、１９６、１９４、１９２の集約力を補償してもよい。そのような構成は、利用可能な導波管／レンズ対と同じ数の知覚される焦点面を提供する。導波管の外部結合光学要素およびレンズの集束側面は両方とも、静的であってもよい（すなわち、動的または電気活性ではない）。いくつかの代替実施形態では、一方または両方とも、電気活性特徴を使用して動的であってもよい。
【0095】
いくつかの実施形態では、導波管１８２、１８４、１８６、１８８、１９０のうちの２つまたはそれを上回るものは、同一の関連付けられた深度平面を有してもよい。例えば、複数の導波管１８２、１８４、１８６、１８８、１９０が、同一深度平面に設定される画像を出力するように構成されてもよい、または導波管１８２、１８４、１８６、１８８、１９０の複数のサブセットが、深度平面毎に１つのセットを伴う、同一の複数の深度平面に設定される画像を出力するように構成されてもよい。これは、それらの深度平面において拡張された視野を提供するようにタイル化された画像を形成する利点を提供し得る。
【0096】
図６を継続して参照すると、外部結合光学要素２８２、２８４、２８６、２８８、２９０は、導波管と関連付けられた特定の深度平面のために、光をその個別の導波管から再指向し、かつ本光を適切な量の発散またはコリメーションを伴って出力するように構成されてもよい。その結果、異なる関連付けられた深度平面を有する導波管は、外部結合光学要素２８２、２８４、２８６、２８８、２９０の異なる構成を有してもよく、これは、関連付けられた深度平面に応じて、異なる量の発散を伴う光を出力する。いくつかの実施形態では、光抽出光学要素２８２、２８４、２８６、２８８、２９０は、体積または表面特徴であってもよく、これは、具体的角度で光を出力するように構成されてもよい。例えば、光抽出光学要素２８２、２８４、２８６、２８８、２９０は、体積ホログラム、表面ホログラム、および／または回折格子であってもよい。いくつかの実施形態では、特徴１９８、１９６、１９４、１９２は、レンズではなくてもよい。むしろ、それらは、単に、スペーサ（例えば、クラッディング層および／または空隙を形成するための構造）であってもよい。
【0097】
いくつかの実施形態では、外部結合光学要素２８２、２８４、２８６、２８８、２９０は、回折パターンまたは「回折光学要素」（また、本明細書では、「ＤＯＥ」とも称される）を形成する、回折特徴である。好ましくは、ＤＯＥは、ビームの光の一部のみがＤＯＥの各交差点を用いて眼４に向かって偏向される一方、残りが全内部反射を介して、導波管を通して移動し続けるように、十分に低回折効率を有する。画像情報を搬送する光は、したがって、様々な場所において導波管から出射する、いくつかの関連出射ビームに分割され、その結果、導波管内でバウンスする本特定のコリメートされたビームに関して、眼４に向かって非常に均一パターンの出射放出となる。
【0098】
いくつかの実施形態では、１つまたはそれを上回るＤＯＥは、能動的に回折する「オン」状態と有意に回折しない「オフ」状態との間で切替可能であってもよい。例えば、切替可能なＤＯＥは、ポリマー分散液晶の層を備えてもよく、その中で微小液滴は、ホスト媒体中に回折パターンを備え、微小液滴の屈折率は、ホスト材料の屈折率に実質的に整合するように切り替えられてもよい（その場合、パターンは、入射光を著しく回折させない）、または微小液滴は、ホスト媒体のものに整合しない屈折率に切り替えられてもよい（その場合、パターンは、入射光を能動的に回折させる）。
【0099】
いくつかの実施形態では、カメラアセンブリ５００（例えば、可視光および赤外線光カメラを含む、デジタルカメラ）が、提供され、眼４および／または眼４の周囲の組織の画像を捕捉し、例えば、ユーザ入力を検出してもよい。本明細書で使用されるように、カメラは、任意の画像捕捉デバイスであってもよい。いくつかの実施形態では、カメラアセンブリ５００は、画像捕捉デバイスと、光（例えば、赤外線光）を眼に投影し、次いで、眼によって反射され、画像捕捉デバイスによって検出され得る、光源とを含んでもよい。いくつかの実施形態では、カメラアセンブ５００は、フレーム６４（図２）に取り付けられてもよく、カメラアセンブリ５００からの画像情報を処理し得る、処理モジュール７０および／または７２と電気通信してもよい。いくつかの実施形態では、１つのカメラアセンブリ５００が、眼毎に利用され、各眼を別個に監視してもよい。
【0100】
ここで図７を参照すると、導波管によって出力された出射ビームの実施例が、示される。１つの導波管が図示されるが、導波管アセンブリ１７８（図６）内の他の導波管も同様に機能し得、導波管アセンブリ１７８は、複数の導波管を含むことを理解されたい。光４００が、導波管１８２の入力表面３８２において導波管１８２の中に投入され、ＴＩＲによって導波管１８２内を伝搬する。光４００がＤＯＥ２８２上に衝突する点では、光の一部は、導波管から出射ビーム４０２として出射する。出射ビーム４０２は、略平行として図示されるが、本明細書に議論されるように、また、導波管１８２と関連付けられた深度平面に応じて、ある角度（例えば、発散出射ビーム形成）において眼４に伝搬するように再指向されてもよい。略平行出射ビームは、眼４からの遠距離（例えば、光学無限遠）における深度平面に設定されるように現れる画像を形成するように光を外部結合する、外部結合光学要素を伴う導波管を示し得ることを理解されたい。他の導波管または他の外部結合光学要素のセットは、より発散する、出射ビームパターンを出力してもよく、これは、眼４がより近い距離に遠近調節し、網膜に合焦させることを要求し、光学無限遠より眼４に近い距離からの光として脳によって解釈されるであろう。
【0101】
いくつかの実施形態では、フルカラー画像が、原色、例えば、３つまたはそれを上回る原色のそれぞれに画像をオーバーレイすることによって、各深度平面において形成されてもよい。図８は、スタックされた導波管アセンブリの実施例を図示し、各深度平面は、複数の異なる原色を使用して形成される画像を含む。図示される実施形態は、深度平面１４ａ－１４ｆを示すが、より多いまたはより少ない深度もまた、検討される。各深度平面は、第１の色Ｇの第１の画像、第２の色Ｒの第２の画像、および第３の色Ｂの第３の画像を含む、それと関連付けられた３つまたはそれを上回る原色画像を有してもよい。異なる深度平面は、文字Ｇ、Ｒ、およびＢに続くジオプタに関する異なる数字によって図に示される。単なる実施例として、これらの文字のそれぞれに続く数字は、ジオプタ（１／ｍ）、すなわち、視認者からの深度平面の逆距離を示し、図中の各ボックスは、個々の原色画像を表す。いくつかの実施形態では、異なる波長の光の眼の集束における差異を考慮するために、異なる原色に関する深度平面の正確な場所は、変動してもよい。例えば、所与の深度平面に関する異なる原色画像は、ユーザからの異なる距離に対応する深度平面上に設置されてもよい。そのような配列は、視力およびユーザ快適性を増加させ得、および／または色収差を減少させ得る。
【0102】
いくつかの実施形態では、各原色の光は、単一専用導波管によって出力されてもよく、その結果、各深度平面は、それと関連付けられた複数の導波管を有してもよい。そのような実施形態では、文字Ｇ、Ｒ、またはＢを含む、図中の各ボックスは、個々の導波管を表すものと理解され得、３つの導波管は、深度平面毎に提供されてもよく、３つの原色画像が、深度平面毎に提供される。各深度平面と関連付けられた導波管は、本図面では、説明を容易にするために相互に隣接して示されるが、物理的デバイスでは、導波管は全て、レベル毎に１つの導波管を伴うスタックで配列されてもよいことを理解されたい。いくつかの他の実施形態では、複数の原色が、例えば、単一導波管のみが深度平面毎に提供され得るように、同一導波管によって出力されてもよい。
【0103】
図８を継続して参照すると、いくつかの実施形態では、Ｇは、緑色であって、Ｒは、赤色であって、Ｂは、青色である。いくつかの他の実施形態では、マゼンタ色およびシアン色を含む、光の他の波長と関連付けられた他の色も、赤色、緑色、もしくは青色のうちの１つまたはそれを上回るものに加えて使用されてもよい、またはそれらに取って代わってもよい。いくつかの実施形態では、特徴１９８、１９６、１９４、および１９２は、視認者の眼への周囲環境からの光を選択的に遮断するように構成される、能動または受動光学フィルタであってもよい。
【0104】
本開示全体を通した所与の光の色の言及は、視認者によってその所与の色であるように知覚される、光の波長の範囲内の１つまたはそれを上回る波長の光を包含するものと理解されるであろうことを認識されたい。例えば、赤色光は、約６２０～７８０ｎｍの範囲内の１つまたはそれを上回る波長の光を含んでもよく、緑色光は、約４９２～５７７ｎｍの範囲内の１つまたはそれを上回る波長の光を含んでもよく、青色光は、約４３５～４９３ｎｍの範囲内の１つまたはそれを上回る波長の光を含んでもよい。
【0105】
いくつかの実施形態では、光源２０４０（図６）は、視認者の視覚的知覚範囲外の１つまたはそれを上回る波長、例えば、赤外線および／または紫外線波長の光を放出するように構成されてもよい。加えて、ディスプレイ１０００の導波管の内部結合、外部結合、および他の光再指向構造は、例えば、結像および／または他の用途のために、本光をディスプレイからユーザの眼４に向かって指向および放出するように構成されてもよい。
【0106】
ここで図９Ａを参照すると、いくつかの実施形態では、導波管に衝突する光は、その光を導波管の中に内部結合するために再指向される必要があり得る。内部結合光学要素が、光をその対応する導波管の中に再指向および内部結合するために使用されてもよい。図９Ａは、それぞれ、内部結合光学要素を含む、複数またはセット１２００のスタックされた導波管の実施例の断面側面図を図示する。導波管はそれぞれ、１つもしくはそれを上回る異なる波長または１つもしくはそれを上回る異なる波長範囲の光を出力するように構成されてもよい。スタック１２００は、スタック１７８（図６）に対応してもよく、スタック１２００の図示される導波管は、複数の導波管１８２、１８４、１８６、１８８、１９０の一部に対応してもよいが、画像投入デバイス２００、２０２、２０４、２０６、２０８のうちの１つまたはそれを上回るものからの光が、光が内部結合のために再指向されることを要求する位置から導波管の中に投入されることを理解されたい。
【0107】
スタックされた導波管の図示されるセット１２００は、導波管１２１０、１２２０、および１２３０を含む。各導波管は、関連付けられた内部結合光学要素（導波管上の光入力面積とも称され得る）を含み、例えば、内部結合光学要素１２１２は、導波管１２００の主要表面（例えば、上側主要表面）上に配置され、内部結合光学要素１２２４は、導波管１２２０の主要表面（例えば、上側主要表面）上に配置され、内部結合光学要素１２３２は、導波管１２３０の主要表面（例えば、上側主要表面）上に配置される。いくつかの実施形態では、内部結合光学要素１２１２、１２２２、１２３２のうちの１つまたはそれを上回るものは、個別の導波管１２１０、１２２０、１２３０の底部主要表面上に配置されてもよい（特に、１つまたはそれを上回る内部結合光学要素は、反射性偏向光学要素である）。図示されるように、内部結合光学要素１２１２、１２２２、１２３２は、その個別の導波管１２１０、１２２０、１２３０の上側主要表面（または次の下側導波管の上部）上に配置されてもよく、特に、それらの内部結合光学要素は、透過性偏向光学要素である。いくつかの実施形態では、内部結合光学要素１２１２、１２２２、１２３２は、個別の導波管１２１０、１２２０、１２３０の本体内に配置されてもよい。いくつかの実施形態では、本明細書に議論されるように、内部結合光学要素１２１２、１２２２、１２３２は、他の光の波長を透過しながら、１つまたはそれを上回る光の波長を選択的に再指向するような波長選択的である。その個別の導波管１２１０、１２２０、１２３０の片側または角に図示されるが、内部結合光学要素１２１２、１２２２、１２３２は、いくつかの実施形態では、その個別の導波管１２１０、１２２０、１２３０の他の面積内に配置されてもよいことを理解されたい。
【0108】
図示されるように、内部結合光学要素１２１２、１２２２、１２３２は、相互から側方にオフセットされてもよい。いくつかの実施形態では、各内部結合光学要素は、その光が別の内部結合光学要素を通して通過せずに、光を受光するようにオフセットされてもよい。例えば、各内部結合光学要素１２１２、１２２２、１２３２は、図６に示されるように、光を異なる画像投入デバイス２００、２０２、２０４、２０６、および２０８から受光するように構成されてもよく、光を内部結合光学要素１２１２、１２２２、１２３２の他のものから実質的に受光しないように、他の内部結合光学要素１２１２、１２２２、１２３２から分離されてもよい（例えば、側方に離間される）。
【0109】
各導波管はまた、関連付けられた光分散要素を含み、例えば、光分散要素１２１４は、導波管１２１０の主要表面（例えば、上部主要表面）上に配置され、光分散要素１２２４は、導波管１２２０の主要表面（例えば、上部主要表面）上に配置され、光分散要素１２３４は、導波管１２３０の主要表面（例えば、上部主要表面）上に配置される。いくつかの他の実施形態では、光分散要素１２１４、１２２４、１２３４は、それぞれ、関連付けられた導波管１２１０、１２２０、１２３０の底部主要表面上に配置されてもよい。いくつかの他の実施形態では、光分散要素１２１４、１２２４、１２３４は、それぞれ、関連付けられた導波管１２１０、１２２０、１２３０の上部および底部両方の主要表面上に配置されてもよい、または光分散要素１２１４、１２２４、１２３４は、それぞれ、異なる関連付けられた導波管１２１０、１２２０、１２３０内の上部および底部主要表面の異なるもの上に配置されてもよい。
【0110】
導波管１２１０、１２２０、１２３０は、例えば、材料のガス、液体、および／または固体層によって離間ならびに分離されてもよい。例えば、図示されるように、層１２１８ａは、導波管１２１０および１２２０を分離してもよく、層１２１８ｂは、導波管１２２０および１２３０を分離してもよい。いくつかの実施形態では、層１２１８ａおよび１２１８ｂは、低屈折率材料（すなわち、導波管１２１０、１２２０、１２３０の直近のものを形成する材料より低い屈折率を有する材料）から形成される。好ましくは、層１２１８ａ、１２１８ｂを形成する材料の屈折率は、導波管１２１０、１２２０、１２３０を形成する材料の屈折率を０．０５もしくはそれを上回って、または０．１０もしくはそれを下回る。有利には、より低い屈折率層１２１８ａ、１２１８ｂは、導波管１２１０、１２２０、１２３０を通して光の全内部反射（ＴＩＲ）（例えば、各導波管の上部および底部主要表面間のＴＩＲ）を促進する、クラッディング層として機能してもよい。いくつかの実施形態では、層１２１８ａ、１２１８ｂは、空気から形成される。図示されないが、導波管の図示されるセット１２００の上部および底部は、直近クラッディング層を含んでもよいことを理解されたい。
【0111】
好ましくは、製造および他の考慮点を容易にするために、導波管１２１０、１２２０、１２３０を形成する材料は、類似または同一であって、層１２１８ａ、１２１８ｂを形成する材料は、類似または同一である。いくつかの実施形態では、導波管１２１０、１２２０、１２３０を形成する材料は、１つまたはそれを上回る導波管間で異なってもよい、および／または層１２１８ａ、１２１８ｂを形成する材料は、依然として、前述の種々の屈折率関係を保持しながら、異なってもよい。
【0112】
図９Ａを継続して参照すると、光線１２４０、１２４２、１２４４が、導波管のセット１２００に入射する。光線１２４０、１２４２、１２４４は、１つまたはそれを上回る画像投入デバイス２００、２０２、２０４、２０６、２０８（図６）によって導波管１２１０、１２２０、１２３０の中に投入されてもよいことを理解されたい。
【0113】
いくつかの実施形態では、光線１２４０、１２４２、１２４４は、異なる色に対応し得る、異なる性質、例えば、異なる波長または異なる波長範囲を有する。内部結合光学要素１２１２、１２２２、１２３２はそれぞれ、光がＴＩＲによって導波管１２１０、１２２０、１２３０のうちの個別の１つを通して伝搬するように、入射光を偏向させる。
【0114】
例えば、内部結合光学要素１２１２は、第１の波長または波長範囲を有する、光線１２４０を偏向させるように構成されてもよい。同様に、伝送される光線１２４２は、第２の波長または波長範囲の光を選択的に偏向させるように構成される、内部結合光学要素１２２２に衝突し、それによって偏向される。同様に、光線１２４４は、第３の波長または波長範囲の光を選択的に偏向させるように構成される、内部結合光学要素１２３２によって偏向される。
【0115】
図９Ａを継続して参照すると、偏向された光線１２４０、１２４２、１２４４は、対応する導波管１２１０、１２２０、１２３０を通して伝搬するように偏向される。すなわち、各導波管の内部結合光学要素１２１２、１２２２、１２３２は、光をその対応する導波管１２１０、１２２０、１２３０の中に偏向させ、光を対応する導波管の中に内部結合する。光線１２４０、１２４２、１２４４は、光をＴＩＲによって個別の導波管１２１０、１２２０、１２３０を通して伝搬させる角度で偏向される。光線１２４０、１２４２、１２４４は、導波管の対応する光分散要素１２１４、１２２４、１２３４に衝突するまで、ＴＩＲによって個別の導波管１２１０、１２２０、１２３０を通して伝搬する。
【0116】
ここで図９Ｂを参照すると、図９Ａの複数のスタックされた導波管の実施例の斜視図が、図示される。前述のように、内部結合された光線１２４０、１２４２、１２４４は、それぞれ、内部結合光学要素１２１２、１２２２、１２３２によって偏向され、次いで、それぞれ、導波管１２１０、１２２０、１２３０内でＴＩＲによって伝搬する。光線１２４０、１２４２、１２４４は、次いで、それぞれ、光分散要素１２１４、１２２４、１２３４に衝突する。光分散要素１２１４、１２２４、１２３４は、それぞれ、外部結合光学要素１２５０、１２５２、１２５４に向かって伝搬するように、光線１２４０、１２４２、１２４４を偏向させる。
【0117】
いくつかの実施形態では、光分散要素１２１４、１２２４、１２３４は、直交瞳エクスパンダ（ＯＰＥ）である。いくつかの実施形態では、ＯＰＥは、光を外部結合光学要素１２５０、１２５２、１２５４に偏向または分散させることと、また、外部結合光学要素に伝搬するにつれて、本光のビームまたはスポットサイズを増加させることの両方を行う。いくつかの実施形態では、例えば、ビームサイズがすでに所望のサイズである場合、光分散要素１２１４、１２２４、１２３４は、省略されてもよく、内部結合光学要素１２１２、１２２２、１２３２は、光を直接外部結合光学要素１２５０、１２５２、１２５４に偏向させるように構成されてもよい。例えば、図９Ａを参照すると、光分散要素１２１４、１２２４、１２３４は、それぞれ、外部結合光学要素１２５０、１２５２、１２５４と置換されてもよい。いくつかの実施形態では、外部結合光学要素１２５０、１２５２、１２５４は、光を視認者の眼４（図７）内に指向する、射出瞳（ＥＰ）または射出瞳エクスパンダ（ＥＰＥ）である。
【0118】
故に、図９Ａおよび９Ｂを参照すると、いくつかの実施形態では、導波管のセット１２００は、原色毎に、導波管１２１０、１２２０、１２３０と、内部結合光学要素１２１２、１２２２、１２３２と、光分散要素（例えば、ＯＰＥ）１２１４、１２２４、１２３４と、外部結合光学要素（例えば、ＥＰ）１２５０、１２５２、１２５４とを含む。導波管１２１０、１２２０、１２３０は、各１つの間に空隙／クラッディング層を伴ってスタックされてもよい。内部結合光学要素１２１２、１２２２、１２３２は、入射光をその導波管の中に再指向または偏向させる（異なる内部結合光学要素は、異なる波長の光を受光する）。光は、次いで、個別の導波管１２１０、１２２０、１２３０内でＴＩＲをもたらすであろう、角度で伝搬する。示される実施例では、光線１２４０（例えば、青色光）は、先に説明された様式において、第１の内部結合光学要素１２１２によって偏向され、次いで、導波管を辿ってバウンスし続け、光分散要素（例えば、ＯＰＥ）１２１４、次いで、外部結合光学要素（例えば、ＥＰ）１２５０と相互作用する。光線１２４２および１２４４（例えば、それぞれ、緑色および赤色光）は、導波管１２１０を通して通過し、光線１２４２は、内部結合光学要素１２２２に衝突し、それによって偏向される。光線１２４２は、次いで、ＴＩＲを介して、導波管１２２０を辿ってバウンスし、その光分散要素（例えば、ＯＰＥ）１２２４、次いで、外部結合光学要素（例えば、ＥＰ）１２５２に進む。最後に、光線１２４４（例えば、赤色光）は、導波管１２２０を通して通過し、導波管１２３０の光内部結合光学要素１２３２に衝突する。光内部結合光学要素１２３２は、光線が、ＴＩＲによって、光分散要素（例えば、ＯＰＥ）１２３４に、次いで、ＴＩＲによって、外部結合光学要素（例えば、ＥＰ）１２５４に伝搬するように、光線１２４４を偏向させる。外部結合光学要素１２５４は、次いで、最後に、光線１２４４を視認者に外部結合し、視認者はまた、他の導波管１２１０、１２２０から外部結合された光も受光する。
【0119】
図９Ｃは、図９Ａおよび９Ｂの複数のスタックされた導波管の実施例の上下平面図を図示する。図示されるように、導波管１２１０、１２２０、１２３０は、各導波管の関連付けられた光分散要素１２１４、１２２４、１２３４および関連付けられた外部結合光学要素１２５０、１２５２、１２５４とともに、垂直に整合されてもよい。しかしながら、本明細書に議論されるように、内部結合光学要素１２１２、１２２２、１２３２は、垂直に整合されない。むしろ、内部結合光学要素は、好ましくは、非重複する（例えば、上下図に見られるように、側方に離間される）。本明細書でさらに議論されるように、本非重複空間配列は、１対１ベースで異なるリソースから異なる導波管の中への光の投入を促進し、それによって、具体的光源が具体的導波管に一意に結合されることを可能にする。いくつかの実施形態では、非重複の空間的に分離される内部結合光学要素を含む、配列は、偏移瞳システムと称され得、これらの配列内の内部結合光学要素は、サブ瞳に対応し得る。
【0120】
ここで、ユーザセンサ２４、２８、３０、３２、および環境センサ３４を備える、拡張現実ディスプレイシステムの種々のコンポーネントの実施例の概略図を示す、図１０Ａを参照する。いくつかの実施形態では、拡張現実ディスプレイシステムは、複合現実ディスプレイシステムであってもよい。示されるように、ユーザセンサ２４、２８、３０、３２は、ユーザの状態に関するデータを検出するように構成されてもよく、環境センサ３４は、ユーザの外部のパラメータに関するデータを収集するように構成されてもよい。いくつかの実施形態では、ディスプレイシステムは、ユーザに送達されるＡＲコンテンツに関連する、および／またはそれを特徴付けるデータ（例えば、ＡＲコンテンツの時間、場所、色構成、音量等）を記憶するように構成されてもよい。
【0121】
ユーザセンサが、最初に、議論されるであろう。図示されるように、拡張現実ディスプレイシステム２０１０は、種々のユーザセンサを含んでもよい。拡張現実ディスプレイシステム２０１０は、図２のシステム８０に対応してもよく、視認者結像システム２２を含んでもよい。システム２２は、ユーザ（例えば、ユーザの眼２００１、２００２および／または周囲組織）に指向され、それを監視するように構成される、光源２６（例えば、赤外線光源）とペアリングされる、カメラ２４（例えば、赤外線、ＵＶ、および／または可視光カメラ）を含んでもよい。カメラ２４および光源２６は、ローカル処理モジュール７０に動作可能に結合されてもよい。そのようなカメラ２４は、個別の眼の瞳孔（瞳孔サイズを含む）もしくは虹彩、および／または眼瞼もしくは眉毛等の眼を囲繞する組織の配向、形状、および対称性のうちの１つまたはそれを上回るものを監視し、本明細書に開示される種々の分析を行うように構成されてもよい。いくつかの実施形態では、眼の虹彩および／または網膜の結像が、ユーザのセキュアな識別のために使用されてもよい。
【0122】
図１０Ａを継続して参照すると、カメラ２４はさらに、中心窩または眼底の特徴等の網膜特徴の場所に基づく診断目的および／または配向追跡のために、個別の眼の網膜を結像するように構成されてもよい。虹彩および網膜結像または走査は、例えば、ユーザデータと特定のユーザを正しく関連付けるために、および／またはプライベート情報を適切なユーザに提示するために、ユーザのセキュアな識別のために実施されてもよい。いくつかの実施形態では、カメラ２４に加え、またはその代替として、１つまたはそれを上回るカメラ２８が、ユーザの状況の種々の他の側面を検出および／または監視するように構成されてもよい。例えば、１つまたはそれを上回るカメラ２８は、内向きに面し、ユーザの眼以外の特徴の形状、位置、移動、色、および／または他の性質、例えば、１つまたはそれを上回る顔特徴（例えば、顔の表情、随意的移動、不随意的チック）を監視するように構成されてもよい。別の実施例では、１つまたはそれを上回るカメラ２８は、下向きに面し、ユーザの腕、手、脚、足、および／または胴体の位置、移動、および／または他の特徴もしくは性質を監視するように構成されてもよい。
【0123】
いくつかの実施形態では、本明細書に開示されるように、ディスプレイシステム２０１０は、ファイバスキャナ（例えば、図６における画像投入デバイス２００、２０２、２０４、２０６、２０８）を通して、光ビームをユーザの網膜を横断して可変に投影させ、画像を形成する、空間光変調器を含んでもよい。いくつかの実施形態では、ファイバスキャナは、カメラ２４または２８と併せて、またはその代わりに使用され、例えば、ユーザの眼を追跡または結像してもよい。例えば、光を出力するように構成される走査ファイバの代替として、またはそれに加え、健康システムは、別個の受光デバイスを有し、ユーザの眼から反射された光を受光し、その反射された光と関連付けられたデータを収集してもよい。
【0124】
図１０Ａを継続して参照すると、カメラ２４、２８および光源２６は、フレーム６４上に搭載されてもよく、これはまた、導波管スタック２００５、２００６を保持してもよい。いくつかの実施形態では、ディスプレイシステム２０１０のセンサおよび／または他の電子デバイス（例えば、カメラ２４、２８および光源２６）は、通信リンク７６、７０を通して、ローカル処理およびデータモジュール７０と通信するように構成されてもよい。
【0125】
いくつかの実施形態では、ユーザに関するデータの提供に加え、カメラ２４および２８の一方または両方が、眼を追跡し、ユーザ入力を提供するために利用されてもよい。例えば、視認者結像システム２２は、本明細書に開示される種々の試験および分析においてユーザ応答を提供するため等、仮想メニュー上のアイテムを選択し、および／または他の入力をディスプレイシステム２０１０に提供するために利用されてもよい。
【0126】
いくつかの実施形態では、ディスプレイシステム２０１０は、１つまたはそれを上回る加速度計、ジャイロスコープ、ジェスチャセンサ、歩行センサ、平衡センサ、および／またはＩＭＵセンサ等の運動センサ３２を含んでもよい。センサ３０は、音と、検出された音の強度およびタイプ、複数の信号の存在、および／または信号場所を含む、それらの音の種々の性質とを検出するように構成される、１つまたはそれを上回る内向きに指向される（ユーザに指向される）マイクロホンを含んでもよい。
【0127】
センサ３０は、フレーム６４に接続されるように図式的に図示される。本接続は、フレーム６４への物理的取付の形態をとってもよく、ユーザの耳にわたって延在する、フレーム６４のつるの端部を含む、フレーム６４上の任意の場所であってもよいことを理解されたい。例えば、センサ３０は、フレーム６４とユーザとの間の接触点における、フレーム６４のつるの端部に搭載されてもよい。いくつかの他の実施形態では、センサ３０は、フレーム６４から延在し、ユーザ６０（図９Ｄ）に接触してもよい。さらに他の実施形態では、センサ３０は、フレーム６４に物理的に取り付けられなくてもよい。むしろ、センサ３０は、周辺センサ３０ａ（図２）の形態をとってもよく、これは、フレーム６４から離間されてもよい。
【0128】
いくつかの実施形態では、ディスプレイシステム２０１０はさらに、オブジェクト、刺激、人々、動物、場所、またはユーザの周囲の世界の他の側面を検出するように構成される、１つまたはそれを上回る環境センサ３４を含んでもよい。例えば、環境センサ３４は、１つまたはそれを上回るカメラ、高度計、気圧計、化学センサ、湿度センサ、温度センサ、外部マイクロホン、光センサ（例えば、照度計）、タイミングデバイス（例えば、クロックまたはカレンダ）、タイミングデバイス（例えば、クロックまたはカレンダ）、またはその任意の組み合わせまたは副次的組み合わせを含んでもよい。いくつかの実施形態では、複数の（例えば、２つの）マイクロホンが、離間され、音源場所判定を促進してもよい。環境感知カメラを含む、種々の実施形態では、カメラは、例えば、ユーザの通常の視野の少なくとも一部に類似する画像を捕捉するように外向きに面して（例えば、前向きに）位置してもよい。環境センサはさらに、レーザ、可視光、不可視波長の光、音（例えば、可聴音、超音波、または他の周波数）等の信号を受信するように構成される、放出デバイスを含んでもよい。いくつかの実施形態では、１つまたはそれを上回る環境センサ（例えば、カメラまたは光センサ）は、環境の周囲光（例えば、輝度）を測定するように構成されてもよい（例えば、環境の照明条件を捕捉するため）。歪みゲージ、カーブフィーラ、または同等物等の物理的接触センサもまた、環境センサとして含まれてもよい。
【0129】
いくつかの実施形態では、ディスプレイシステム２０１０はさらに、ＧＰＳ場所データ、天候データ、日付および時間、または他の利用可能な環境データ等の他の環境入力を受信するように構成されてもよく、これは、インターネット、衛星通信、または他の好適な有線または無線データ通信方法から受信されてもよい。処理モジュール７０は、花粉数、母集団統計、空気汚染、環境毒素、スマートサーモスタットからの情報、生活様式統計、または他のユーザ、建物、もしくは保健医療提供者との近接度等のユーザの場所を特徴付けるさらなる情報にアクセスするように構成されてもよい。いくつかの実施形態では、場所を特徴付ける情報は、クラウドベースまたは他の遠隔データベースを使用してアクセスされてもよい。処理モジュール７０は、そのようなデータを取得し、および／または環境センサの任意の１つまたは組み合わせからのデータをさらに分析するように構成されてもよい。
【0130】
ディスプレイシステム２０１０は、長期間にわたって、上記に説明されるセンサおよび／または入力のいずれかを通して取得されるデータを収集および記憶するように構成されてもよい。デバイスにおいて受信されたデータは、ローカル処理モジュール７０および／または遠隔（例えば、図２に示されるように、遠隔処理モジュール７２または遠隔データリポジトリ７４）で処理および／または記憶されてもよい。いくつかの実施形態では、日付および時間、ＧＰＳ場所、または他のグローバルデータ等の付加的データは、直接、ローカル処理モジュール７０において受信されてもよい。画像、他の視覚的コンテンツ、または聴覚的コンテンツ等のシステムによってユーザに送達されているコンテンツに関するデータも同様に、ローカル処理モジュール７０において受信されてもよい。
【0131】
図１０Ｂは、別の例示的拡張現実ディスプレイシステムを示す。いくつかの実施形態では、ディスプレイシステム２０１０は、超音波を伝送および受信し、超音波情報に基づいて、患者の画像を提示してもよい。図１０Ａと同様に、図１０Ｂにおける実施例は、環境３４およびユーザ２４、２８、３０、３２センサを備える。加えて、図１０Ｂに示されるように、ディスプレイシステム２０１０はさらに、直接音響エネルギーを患者の身体に指向するように構成される、１つまたはそれを上回る外向きに面した超音波プローブ１０８１を含むことができる。１つまたはそれを上回るプローブ１０８１は、超音波をユーザの身体の種々の領域に伝送し、かつユーザの身体の種々の領域から反射された超音波を受信するように構成されてもよい。例えば、１つまたはそれを上回るプローブ１０８１は、超音波エネルギーを患者の身体に放出するように構成される、超音波送信機１０７７と、患者の身体の種々の構造から反射および／または後方散乱された超音波エネルギーを受信するように構成される、超音波受信機１０７９とに接続されてもよい。いくつかの実施形態では、１つまたはそれを上回るプローブ１０８１は、超音波送信機および受信機の両方を組み合わせる、超音波送受信機１０７５に接続されてもよい。種々の実施形態は、反射された情報に基づいて、患者の画像を提示してもよい。いくつかの実施形態では、ディスプレイシステム２０１０は、反射された超音波に基づいて、患者の組織密度を判定するように構成されてもよい。いくつかの実施形態では、ディスプレイシステム２０１０は、反射された超音波に基づいて、血流（例えば、血管を通る血流の速度）をマッピングするように構成されてもよい。
【0132】
増強された視野
本明細書に開示されるように、外向きに面したカメラおよび／または光センサ等のユーザおよび／または環境センサを組み込む、ディスプレイシステムは、有利には、例えば、ユーザの周辺視野（例えば、ユーザの視野の周辺領域）内の環境の画像コンテンツの改善されたユーザビューを提供し得る。例えば、ある実施形態は、ユーザが、ユーザの中心視野（例えば、ユーザの視野の中心領域）内の１つのオブジェクトに合焦し、同時に、増加された可視性を伴って、ユーザの周辺視野内に位置する別のオブジェクトを視認することを可能にしてもよい。
本明細書に開示されるように、外向きに面したカメラおよび／または光センサ等のユーザおよび／または環境センサを組み込む、ディスプレイシステムは、有利には、例えば、ユーザの周辺視野（例えば、ユーザの視野の周辺領域）内の環境の画像コンテンツの改善されたユーザビューを提供し得る。例えば、ある実施形態は、ユーザが、ユーザの中心視野（例えば、ユーザの視野の中心領域）内の１つのオブジェクトに合焦し、同時に、増加された可視性を伴って、ユーザの周辺視野内に位置する別のオブジェクトを視認することを可能にしてもよい。
【0133】
種々の実施形態では、ユーザの視野の中心領域は、中心窩の中心（または瞳孔の中心からの光学軸）から０～１５度、１～１５度、２～１５度、５～１５度、０～１２度、１～１２度、２～１２度、５～１２度、０～１０度、１～１０度、２～１０度、５～１０度の範囲（半角において）、これらの範囲の任意の組み合わせ、または中心窩の中心から０～１５度の任意の値によって形成される任意の範囲（例えば、中心窩の中心から０～７度、１～７度、２～７度等）内のエリアを含んでもよい。
【0134】
ユーザの視野の周辺領域は、中心領域の対応するエリア外の視野の外側エリアを含んでもよい。例えば、ユーザの視野の周辺領域は、中心窩の中心（または瞳孔の中心からの光学軸）から１６～６０度、１８～６０度、２０～６０度、２５～６０度、３０～６０度、３５～６０度、４０～６０度、４５～６０度、５０～６０度、５５～６０度の範囲（半角において）、これらの範囲の任意の組み合わせ、または中心窩の中心から１６～６０度の任意の値によって形成される任意の範囲（例えば、中心窩の中心から１６～５０度、２０～５０度、１６～５５度、３０～５５度等）内の視野のエリアを含んでもよい。
【0135】
いくつかの実施形態では、ユーザの視野の中心領域は、ユーザの視野の１～５パーセント、１～１０パーセント、５～１０パーセント、１～１５パーセント、５～１５パーセント、５～２０パーセント、１０～２０パーセント、５～２５パーセント、１０～２５パーセント、これらの範囲の任意の組み合わせ、またはユーザの視野の０～２５パーセントの任意の値によって形成される任意の範囲（例えば、ユーザの視野の１～１７パーセント、３～１８パーセント、７～２５パーセント、１５～２５パーセント等）を含んでもよい。
【0136】
ユーザの視野の周辺領域は、ユーザの視野の残りのパーセントを含んでもよい。例えば、ユーザの視野の周辺領域は、ユーザの視野の７５～９９．９パーセント、７５～９９パーセント、７５～９５パーセント、７５～９０パーセント、８０～９９．９パーセント、８０～９９パーセント、８０～９５パーセント、８０～９０パーセント、これらの範囲の任意の組み合わせ、またはユーザの視野の７５～９９．９パーセントの任意の値によって形成される任意の範囲（例えば、ユーザの視野の７７～９８パーセント、７５～８５パーセント、８５～９５パーセント等）を含んでもよい。
【0137】
ここで図１１Ａを参照すると、ディスプレイシステムを使用して、例えば、ユーザの周辺視野内の環境の画像コンテンツの少なくとも一部のユーザビューを改善する、例示的方法３０００が、図示される。ディスプレイシステムは、それぞれ、図２、６、および１０Ａ－１０Ｂにおける、ディスプレイシステム８０、１０００、または２０１０を含んでもよい。ディスプレイシステムは、例えば、画像コンテンツをユーザの眼に投影する、頭部搭載型ディスプレイデバイスを含んでもよい。
【0138】
いくつかの実施形態では、頭部搭載型ディスプレイデバイスは、ディスプレイを使用して、ユーザに拡張現実画像コンテンツを提示するように構成される。ある実施形態では、ディスプレイは、頭部搭載型ディスプレイのフレーム上に配置される。本明細書に説明されるように、ディスプレイは、ユーザの眼の正面の場所に配置される、１つまたはそれを上回る透明導波管を含むことができる。故に、ユーザは、ディスプレイを通して見ることが可能であり得る。頭部搭載型ディスプレイデバイスを装着するユーザの正面の環境内のオブジェクトからの光は、ユーザの正面の環境の画像またはその少なくとも一部がユーザの眼の網膜上に形成されるように、ディスプレイを通して、例えば、１つまたはそれを上回る透明導波管を通して、ユーザ眼の中に伝送される。ユーザの視覚は、中心領域と、周辺領域とを有する、視野によって特徴付けられ得る。周辺領域は、中心領域の周囲またはそれを中心として配置されることができる。中心領域および周辺領域は、本明細書に議論されるように、それぞれ、中心視野および周辺視野に対応することができる。ユーザの視野の中心領域は、例えば、ユーザの視線が直接正面に指向される場合、ユーザの直接正面の環境の一部を含み得る。同様に、ユーザの眼の視野の周辺領域は、そのような実施例では、ユーザの正面の環境内の周辺領域に対応することができる。ユーザの視線の正面の環境の部分の中心内のオブジェクトは、中心場内に含まれ得る一方、ユーザの視線の正面の環境の部分の周縁内のオブジェクトは、周辺場内に含まれ得る。例えば、ユーザは、外科手術を視認し得、ユーザは、外科手術部位等の手術されている患者に注意が向けている。患者、特に、外科手術部位は、例えば、ユーザの視野のユーザの中心領域に対応し得る。同様に、本実施例では、ユーザには、視野の周辺領域内に、医療スタッフの他のメンバ、外科手術部位を囲繞する患者の解剖学的構造、外科手術オブジェクト（例えば、器具）をその上に伴う、テーブルおよび／またはトレイ等の手術室内の家具、他の外科手術および／または診断機器、手術室の壁および／または床、ならびに／もしくは環境の周辺領域（例えば、場面）内の光および他のアイテムが見える。
【0139】
ブロック３０１０では、ディスプレイシステムまたはデバイスは、環境の１つまたはそれを上回る画像を捕捉するように構成されてもよい。例えば、本明細書に説明されるように、種々の実施形態は、外向きに面し、ユーザの通常の視野の少なくとも一部に類似する画像を捕捉する、１つまたはそれを上回る画像捕捉デバイス（例えば、ビデオカメラ）等の１つまたはそれを上回る環境センサ３４を含んでもよい。言い換えると、外向きに面した画像捕捉デバイスは、環境のユーザのビューに対応する画像を捕捉してもよい。そのようなカメラは、例えば、ユーザの正面の環境の画像を捕捉するように、正面に面してもよい。しかしながら、これらのカメラは、種々の実施形態では、少なくとも部分的に、直接正面に面した方向に対して傾斜または角度付けられてもよい。これらのカメラはまた、個々におよび／またはともに、ユーザの眼の視野より大きいまたはより小さくあり得る、視野を有してもよい。
【0140】
故に、本明細書に議論されるように、頭部搭載型ディスプレイデバイスは、ユーザの正面の環境の一部を結像または走査するように構成され得る、外向きに面した画像捕捉デバイスを含むことができる。いくつかの実施形態では、外向きに面したカメラは、ユーザの動眼視野内であるが、ユーザの視野内ではない、オブジェクトまたは画像等、ユーザの正面ではない、ユーザの環境の部分を走査するように構成される。ある場合には、例えば、頭部搭載型ディスプレイシステムは、ユーザの正面の環境の部分に向かってより指向される１つまたはそれを上回るビデオカメラおよびユーザの側面の環境の部分に向かってより指向される１つまたはそれを上回るビデオカメラ等、複数のカメラを含むことができる。ある場合には、頭部搭載型ディスプレイシステムは、ユーザの背後の環境の部分に向かって指向される１つまたはそれを上回るカメラを含むことができる。ある実施形態では、外向きに面したカメラは、長期間にわたって、病院、手術室、または他の環境内のアクティビティ等のビデオを捕捉するように持続的に動作するように構成されることができる。いくつかの構成では、外向きに面したカメラは、環境内のオブジェクト等、ユーザがその視線を指向している対象を判定することができる。いくつかの実施形態では、頭部搭載型ディスプレイデバイスは、１つまたはそれを上回る捕捉デバイスを含み、環境に関する情報を捕捉してもよい。例えば、カメラまたは光センサ（例えば、照度計）が、環境の光条件を捕捉するために使用されてもよい。
【0141】
ブロック３０２０では、種々の実施形態は、環境の画像を処理してもよい。例えば、画像は、図２に示されるローカル処理およびデータモジュール７０または遠隔処理モジュール７２を使用して処理されてもよい。いくつかのそのような実施形態では、処理電子機器が、ディスプレイ６２と通信し、ディスプレイへの画像コンテンツの提示を制御してもよい。ディスプレイは、図６に示される導波管アセンブリ１７８を含み、光をユーザの眼の中に投影し、１つまたはそれを上回る外向きに面したビデオカメラからの環境の画像等の画像を視認するために提示してもよい。本明細書に説明されるように、導波管アセンブリ１７８はまた、透明導波管アセンブリを通してユーザの眼の網膜に伝搬する環境内のオブジェクトからの光を介して、頭部搭載型ディスプレイデバイスを装着するユーザの正面の環境の一部の直接ビューを提供するように、光学的に透過性、例えば、透明であることができる。
【0142】
図１１Ａを継続して参照すると、ブロック３０３０では、ディスプレイシステムは、例えば、周辺視野内の環境の少なくとも一部の可視性を改善するように構成されてもよい（例えば、環境の一部の拡張現実画像を提示することによって、環境の画像コンテンツの少なくとも一部の可視性を増加させるため）。いくつかの実施形態は、眼内の光受容体細胞密度に対して画像修正を提供してもよい（例えば、中心視覚のための中心窩内の最高錐体密度および周辺視覚のための中心窩から離れるように錐体密度の減少）。図１Ｅおよび１Ｆに図示されるように、眼内の錐体密度に基づいて、視力は、概して、中心窩（例えば、眼の中心）において最高であって、中心窩から離れるように移動して低下する。例えば、視力は、眼の中心（例えば、光学軸から眼のレンズを通して網膜の中心まで測定される）から２．５度ずつ眼の中心（例えば、本光学軸）から約３０度まで離れるにつれて約５０％減少し得る。さらにより高い角度（例えば、本光学軸に対して）の光線に関して、視力の低下は、はるかに大きくなり得る（例えば、双曲線関数）。最高錐体密度および視力を有する、中心窩は、中心視野内で視認するために使用される。中心窩から離れるように移動すると、錐体密度および視力が低下するにつれて、視認は、中心視野から周辺視野に移動する。
【0143】
したがって、概して、ユーザの中心視野内のオブジェクトよりユーザの周辺視野内のオブジェクトの詳細を区別することが困難である。また、概して、ユーザの近周辺視野内のオブジェクトよりユーザの遠周辺視野のオブジェクトの詳細を区別することが困難である。分解能の観点から、眼によって分解され得る、２点の区別のための最小距離（例えば、２つの特徴を区別するための最小間隔）は、中心窩からの距離に伴って増加する（および空間分解能が減少する）。したがって、一般に、視野の中心からより遠くで眼に提示される画像コンテンツは、それらが見えるために、より大きくある必要があり得る。加えて、眼からより遠いオブジェクトも、より大きくある必要があり得る（例えば、拡大される）。本明細書に説明されるように、画像コンテンツは、これらの関係のうちの１つまたはそれを上回るものに基づいて修正されてもよい。
【0144】
種々の実施形態では、ディスプレイシステムは、コンテンツがユーザによって別様に（例えば、増強されない場合に）知覚されるであろう状態に関連して増強される（例えば、１つまたはそれを上回る点において）、画像コンテンツを、例えば、ユーザの周辺視野に提示するように構成されてもよい。いくつかの実施形態では、ディスプレイシステムは、ユーザの中心視野に提示される画像コンテンツと比較して増強される、画像コンテンツを、例えば、ユーザの周辺視野に提示するように構成されてもよい。種々の実施形態では、実世界コンテンツを含み得る、ユーザによって知覚されるコンテンツは、１つまたはそれを上回る拡張画像を使用することによって、および／または実際の実世界コンテンツと組み合わせた１つまたはそれを上回る拡張画像を使用することによって、増強されて現れることができる。いくつかの実施形態では、ディスプレイシステムは、程度の不透明度（例えば、３０％、４０％、５０％、６０％、７０％、８０％、９０％、９５％等）を有する、１つまたはそれを上回る拡張画像を提示することができる。ある程度の不透明度を有する、提示される画像は、いくつかのインスタンスでは、実際の実世界コンテンツの一部を曖昧にすることができる。いくつかの実施形態では、増強された画像コンテンツは、１つまたはそれを上回る仮想画像として、眼に提示されることができる（例えば、実際の実世界コンテンツは、不透明度または実質的不透明度（例えば、９８％、９９％、または１００％不透明度）によって曖昧にされる）。いくつかの実施形態では、増強の程度は、少なくとも部分的に、視野の中心および／または中心窩からの距離、眼からの距離、および／または２点区別のための最小距離、および／または眼の空間分解能との反比例関係、および／または錐体密度との反比例関係、桿体密度、神経節細胞密度、および／または眼の視力に基づいてもよい。例えば、中心窩から離れるように移動すると、２点区別のための最小距離は、増加する一方、細胞密度および／または眼の視力は、減少する。いくつかのそのような実施形態では、近周辺領域（例えば、中心領域に最も近い）に提示される画像コンテンツより多くの増強が、遠周辺領域（例えば、中心領域から最も遠く、細胞密度および視力は、減少し、２点区別のための最小距離は、増加する）に提示される画像コンテンツに提供されてもよい。
【0145】
実施例として、ユーザの周辺視野に提示される画像コンテンツは、サイズが増強されてもよい。例えば、いくつかの実施形態では、画像コンテンツは、ディスプレイシステムを使用せずに視認されるとき（例えば、拡大されない場合）のコンテンツと比較して、拡大されてもよい。別の実施例として、ディスプレイシステムは、ユーザの中心視野に提示される画像コンテンツと比較して、ユーザの周辺視野に提示される画像コンテンツの少なくとも一部を拡大するように構成されてもよい。周辺視野に提示される画像コンテンツは、拡大されてもよいため、ある実施形態は、そのような画像コンテンツの可視性を増加させ得る。拡大の量は、少なくとも部分的に、眼からの距離、視野の中心からの距離（例えば、中心窩からの距離）、および／または２点区別のための最小距離、および／または眼の空間分解能との反比例関係、および／または細胞密度および／または眼の視力との反比例関係に基づいてもよい。例えば、より多くの拡大が、遠周辺領域に提示される画像コンテンツに提供されてもよく、より少ない拡大が、近周辺領域に提示される画像コンテンツに提供されてもよい。
【0146】
別の実施例として、ユーザの周辺視野に提示される画像コンテンツは、コンテンツを強化せずに（例えば、光強度を増加させずに）コンテンツが現れるであろう状態に関連して、および／またはユーザの中心視野に提示される画像コンテンツと比較して、光強度または明度を改変（例えば、増加）させることによって、増強されてもよい。いくつかのそのような実施形態では、１つまたはそれを上回る光源が、画像コンテンツの光強度または明度を増加させるために使用されてもよい。一般に、より明るい画像は、より容易に見え得る。周辺視野に提示される画像コンテンツは、より明るくあり得るため、ある実施形態は、そのような画像コンテンツの可視性を増加させ得る。いくつかの実施形態では、より多くの光強度または明度が、遠周辺領域に提示される画像コンテンツに提供されてもよく、より少ない強度または明度が、近周辺領域に提示される画像コンテンツに提供されてもよい。いくつかの実施形態では、光強度は、少なくとも部分的に、眼からの距離および／または細胞密度（例えば、桿体密度）および／または眼の視力との反比例関係（例えば、視野の中心または中心窩からの距離に伴って）に基づいてもよい。
【0147】
別の実施例として、ユーザの周辺視野に提示される画像コンテンツは、コントラストを増加させずにコンテンツが現れるであろう状態に関連して、および／またはユーザの中心視野に提示される画像コンテンツと比較して、コントラストを増加させることによって、増強されてもよい。コントラストの増加は、コントラスト比の比較によって示され得る。いくつかのそのような実施形態では、コントラスト比は、最明色と最暗色の輝度間の比率に基づいてもよい。いくつかの実施形態では、増加量は、コントラスト比が眼がコントラストを区別するための閾値を上回るようなものであってもよい。例えば、網膜は、静的コントラスト比約１００：１を有し得、最大約１０６：１まで拡大し得る。故に、種々の実施形態は、提示される画像の少なくとも一部内のコントラスト比を約１００：１、１０３：１、１０４：１、１０５：１、または１０６：１、もしくはこれらの値の任意の組み合わせ間の任意の範囲まで増加させてもよい。コントラスト比の増加量は、ユーザの周辺視野に提示されるであるう画像コンテンツおよび／またはユーザの中心視野に提示される画像コンテンツ内の既存のコントラスト比に基づいてもよい。
【0148】
コントラストの増加は、隣接する色（例えば、高コントラスト色）の明度および／または暗度を調節することによって提供されてもよい。いくつかの実施形態では、黒色（例えば、値０）を白色（例えば、８ビットグレースケールにおいて値２５５）の隣に提供することが、使用されてもよい。例えば、黒色オブジェクトまたは背景に隣接する灰色オブジェクトは、白色オブジェクトまたは背景に隣接する場合よりも明るく現れ得る。いくつかの実施形態では、提示される画像コンテンツは、実際の実世界コンテンツと組み合わせて、調節を伴わずにコンテンツが現れるであろう状態と比較して、および／またはユーザの視野の他の部分に提示される画像コンテンツと比較して、調節されたコントラスト比を提供する、拡張画像を含んでもよい。いくつかの実施例では、隣接する色の明度および／または暗度は、少なくとも１つの色の明度および／または暗度を調節する（例えば、オブジェクトの色の明度および／または暗度、少なくとも２つの隣接するオブジェクトの色、背景の色、オブジェクトの色および背景の色、オブジェクトの一部の色、オブジェクトの２つの隣接する部分の色等を調節する）ことによって、調節されてもよい。いくつかのインスタンスでは、色の明度および／または暗度は、実際の実世界コンテンツとともに視認されると、実および付加的色の組み合わせが調節されたコントラスト比を提供するように、付加的色または複数の色（例えば、黒色、灰色、白色、または他の色等）をオブジェクトまたは背景に提供することによって、調節されてもよい。いくつかのインスタンスでは、色の明度および／または暗度は、曖昧にされた実際の実世界コンテンツとともに視認されると、組み合わせが調節されたコントラスト比を提供するように、ある程度の不透明度（例えば、３０％、４０％、５０％、６０％、７０％、８０％、９０％、９５％等）を有する１つまたはそれを上回る拡張画像を提供することによって、調節されてもよい。
【0149】
いくつかの実施形態では、提示される画像コンテンツは、調節を伴わずにコンテンツが現れるであろう状態と比較して、および／またはユーザの視野の他の部分に提示される画像コンテンツと比較して、調節されたコントラスト比を伴う、仮想画像（例えば、実際の実世界コンテンツの一部は、不透明度または実質的不透明度によって曖昧にされる）を含んでもよい。いくつかの実施例では、隣接する色の明度および／または暗度は、少なくとも１つの色の明度および／または暗度を調節する（例えば、オブジェクトの色の明度および／または暗度、少なくとも２つの隣接するオブジェクトの色、背景の色、オブジェクトの色および背景の色、オブジェクトの一部の色、オブジェクトの２つの隣接する部分の色等を調節する）ことによって、調節されてもよい。色の明度および／または暗度は、黒色、灰色、白色、または他の色を色に加算することによって、もしくは黒色、灰色、白色、または他の色を色から減算することによって、調節されてもよい。色の明度および／または暗度は、加えて、または代替として、色を黒色、灰色、白色、または他の色で代用することによって、調節されてもよい。
【0150】
より多くのコントラストを伴う画像は、より容易に見られ得るため、周辺視野に提示されるより高いコントラスト比を伴う画像コンテンツは、そのような画像コンテンツの可視性を増加させ得る。実施例として、外科医が、外科手術部位（例えば、外科医の中心視野内）を視認し得る間、患者が、他の場所（例えば、外科医の周辺視野内）で出血し始め得る。いくつかの実施形態は、赤色血液が外科医に「飛び出す」ように、周辺エリア内のコントラスト比を増加させることができる。例えば、本明細書に説明されるように、いくつかの実施形態は、ユーザによって知覚される周辺エリアが増強されるように、拡張画像を提示し、付加的赤色を提供することができる。別の実施例として、いくつかの実施形態は、血液を囲繞する背景を血液との大コントラストを生産する色で輪郭を描いてもよい。別の実施例として、いくつかの実施形態は、増加されたコントラスト比を伴う周辺エリアの仮想画像（例えば、実際の血液および血液を囲繞するエリアと比較して高コントラストまたは増加されたコントラストを生産する、血液および血液を囲繞するエリアのグラフィック画像）を提示することができる。外科医は、外科手術部位および付加的出血場所の両方に目を配ることができる。いくつかの実施形態では、コントラスト増加量は、少なくとも部分的に、本明細書に説明されるように、細胞密度（眼の神経節細胞密度、錐体密度、および／または桿体密度）との反比例関係に基づいてもよい。例えば、より多くのコントラストが、遠周辺領域に提示される画像コンテンツに提供されてもよく、より少ないコントラストが、近周辺領域に提示される画像コンテンツに提供されてもよい。
【0151】
別の実施例として、ユーザの周辺視野に提示される画像コンテンツは、増強された色または色飽和を伴わずにコンテンツが現れるであろう状態に関連して、および／またはユーザの中心視野に提示される画像コンテンツと比較して、色または色飽和によって増強されてもよい。いくつかのそのような実施形態では、１つまたはそれを上回る光源が、画像コンテンツ内の色飽和を増加させるために使用されてもよい。一般に、より高い色飽和を伴う画像は、より容易に見え得る。周辺視野に提示される画像コンテンツは、中心視野に提示される画像コンテンツと比較して、より高い色飽和または色飽和の増加を有し得るため、ある実施形態は、そのような画像コンテンツの可視性を増加させ得る。いくつかの実施形態では、色飽和の量は、少なくとも部分的に、本明細書に説明されるように、眼からの距離、視野の中心（または中心窩）からの距離、および／または細胞密度および／または眼の視力との反比例関係に基づいてもよい。例えば、より多くの色飽和が、遠周辺領域に提示される画像コンテンツに提供されてもよく、より少ない色飽和が、近周辺領域に提示される画像コンテンツに提供されてもよい（例えば、錐体密度内の反比例に基づいて）。
【0152】
例えば、増強を伴わずにコンテンツが現れるであろう状態に関連して、および／またはユーザの中心視野に提示される画像コンテンツと比較して、網膜によって感知され得る周辺画像を増強させるような様式においてユーザの周辺視野に提供される、画像コンテンツの処理の他の実施例も、可能性として考えられる。例えば、ユーザの周辺視野に提示される画像コンテンツは、カラーバランス（例えば、赤色／緑色バランス）、および／またはホワイトバランス（例えば、色温度）を偏移させることによって、増強されてもよい。一般に、色は、異なる光源（例えば、蝋燭光対蛍光オフィス光）下、異なる色に隣接して、および／または異なる背景に対して、異なるように現れる。視覚系は、色および強度の変動を遠近調節するための信号の眼の感覚応答および脳の解釈に基づき得る。白色が、正しく知覚される場合、他の色もまた、正しく知覚されることができる。故に、いくつかの実施形態は、カラーバランスを偏移させることによって、増強されてもよい。
【0153】
さらに、特殊効果もまた、周辺視野または視界に提供される画像コンテンツを増強させるために使用されてもよい。例えば、いくつかの実施形態は、鮮明化を伴わずにコンテンツが現れるであろう状態に関連して、および／またはユーザの中心視野に提示される画像コンテンツと比較して、ユーザの周辺視野に提示される画像コンテンツを鮮明化するように構成されてもよい。例えば、画像コンテンツは、縁拡張を含んでもよい。いくつかのそのような実施形態では、ディスプレイシステムは、環境内の縁を識別するように構成される、縁検出器または処理電子機器を含んでもよい。例えば、構成される縁検出器または処理電子機器は、色の急変を検出することによって、強度の急変を検出することによって、および／またはｋ－平均法クラスタリングアルゴリズムを適用することによって、縁を識別するように構成されてもよい。提示される画像コンテンツは、アウトライン、輪郭、背景、および／またはコントラスト技法を含め、ある縁、形状、および／または特徴を増強させることによって、鮮明化されてもよい。別の実施例として、提示される画像コンテンツは、提示される画像コンテンツの少なくとも近傍において、ユーザが、主に、提示される画像コンテンツを視認するように（例えば、周囲実世界コンテンツが強調解除される）ように、背景（例えば、いくつかのインスタンスでは、周囲バックスクリーン）に対して提示されてもよい。いくつかのインスタンスでは、背景は、ある程度の不透明度を、および／またはいくつかのインスタンスでは、不透明度または実質的不透明度を提供されることができる。他の実施例として、ユーザの周辺視野に提示される画像コンテンツは、露光、明るさ、陰影、ハイライト、フリッピング（例えば、反転）、直線化、回転、画像部分の測定（例えば、体積を含む）、および／または他の技法の使用に基づいて、増強されてもよい。いくつかの実施形態では、画像コンテンツは、より便宜的にユーザに提示されてもよい。例えば、画像は、頭部と整合されるとき、視認がより容易であり得る。故に、いくつかの実施形態は、ユーザの頭部姿勢に基づいて、画像コンテンツを直線化および／または回転させることによって、画像コンテンツを増強させてもよい。故に、ユーザの周辺視野に提示される画像コンテンツは、ユーザの中心視野に提示される画像コンテンツと比較して、異なるように処理される画像であってもよい。
【0154】
増強を伴わずにコンテンツが現れるであろう状態に関連して、および／またはユーザの中心視野に提示される画像コンテンツと比較して増強される、画像コンテンツをユーザの周辺視野に提示する代わりに（またはそれと組み合わせて）、種々の実施形態は、強調解除を伴わずにコンテンツが現れるであろう状態に関連して、および／またはユーザの周辺視野に提示される画像コンテンツと比較して強調解除される、画像コンテンツをユーザの中心視野に提示するように構成されてもよいことを理解されるであろう。実施例として、ユーザの中心視野に提示される画像コンテンツは、ユーザの周辺視野に提示される画像コンテンツと比較して、サイズを低減させる（例えば、収縮させる）、ぼかす、暗化／減衰させる、コントラストを低減させる、色飽和を減少させる、鮮明度を減少させる、曖昧にする、および／または縁を増強解除することによって、強調解除されてもよい。ぼかしの一実施例は、画像コンテンツをユーザの中心視野に実質的に同一色で提示することを含む。画像は、例えば、青色または緑色等の類似色のトーン内で変動を含んでもよい。したがって、画像は、中心場では、モノトーンで現れ得、中心場内の画像は、判別可能なままである。ユーザは、周辺視野内のオブジェクトのビューを増強させながら、依然として、中心視野内のコンテンツを視認可能であり得る（例えば、オブジェクトの縁によって）。ユーザの中心視野に提示される画像コンテンツはまた、露光、明るさ、陰影、ハイライト、フリッピング（例えば、反転）、直線化、回転、画像部分の測定（例えば、体積を含む）、カラーバランス（またはホワイトバランス）の偏移、および／または他の技法の使用に基づいて、強調解除されてもよい。明るさ、露光、陰影、ハイライト等の使用またはこれらの任意の組み合わせは、いくつかのインスタンスでは、コントラストを増加させることに役立ち得る。故に、ユーザの中心視野に提示される画像コンテンツは、ユーザの周辺視野に提示される画像コンテンツと比較して、異なるように処理される画像であってもよい。あるタイプの画像処理は、例えば、画像処理の当業者に公知の一般的技法を含むことができる。いくつかの実施形態は、種々の増強および／または強調解除技法の組み合わせを使用してもよい。
【0155】
画像が増強または強調解除されると、ある実施形態は、修正のインジケータをユーザに提供してもよい。いくつかのインスタンスでは、提示される画像自体が、アラートを提供し、修正された画像コンテンツにユーザの注意を引いてもよい（例えば、高速サイズ成長、提示される画像内の高コントラスト、１つの色での画像コンテンツのぼかし、フラッシュ等）。他の実施例として、いくつかの実施形態は、視覚的（例えば、ポップアップアラートまたは点滅光）または聴覚的アラート（例えば、ベルまたは音声）をユーザに提供してもよい。
【0156】
ある構成では、増強の程度は、種々の要因に基づくことができる。例えば、増強の程度は、ユーザからのオブジェクトの距離によって判定されることができる。いくつかの実施形態では、増強の程度は、少なくとも部分的に、オブジェクトから受光された光の量またはディスプレイ内の他の近傍オブジェクトから受光された光の量に基づくことができる。
【0157】
本明細書に説明されるある実施例は、ユーザの周辺視野に提示される画像コンテンツの増強および／またはユーザの中心視野に提示される画像コンテンツの強調解除（例えば、ユーザの周辺視野内の環境の画像コンテンツの可視性を増加させるため）を開示するが、種々の実施形態は、本明細書に説明される増強および／または強調解除技法を使用して、ユーザの中心視野に提示される画像コンテンツを増強させ、および／またはユーザの周辺視野に提示される画像コンテンツを強調解除してもよい（例えば、ユーザの中心視野内の環境の画像コンテンツの可視性を増加させるため）。例えば、放射線技師または他の医療従事者は、その中心視野内でＸ線または蛍光で結像されるコンテンツ（例えば、染色された細胞、腫瘍、アミロイドプラーク等）を視認し得る。いくつかの実施形態は、ユーザの中心視野に提示される画像コンテンツのコントラストを増加させる、光強度を増加させる、サイズを増加させる、背景を曖昧にする等、および／またはユーザの周辺視野に提示される画像コンテンツのコントラストを減少させる、光強度を減少させる、サイズを低減させる、ぼかす、暗化させる、曖昧にする等を行ってもよい。いくつかの実施形態はまた、本明細書に説明されるように、画像コンテンツのカラーバランス（例えば、赤色／緑色バランス）を偏移させてもよい。そのような実施例では、Ｘ線または蛍光で結像されるコンテンツ内の詳細は、より容易に見られ得る。別の実施例として、いくつかの実施形態は、ユーザが外科手術部位の増強されたビューを有し得る（例えば、視覚的混雑を除去する）ように、ぼかされた背景（例えば、ユーザの周辺視野内）に対しアクティブな外科手術部位（例えば、ユーザの中心視野内）のビューを提供してもよい。さらに別の実施例として、いくつかの実施形態は、アクティブな外科手術部位が可視であって、実世界の残りが曖昧にされるように、背景内のコンテンツを曖昧にしてもよい（例えば、背景の一部が、ある程度の不透明度を有する、または不透明度／実質的不透明度を有する）。
【0158】
さらに、付加的「仮想」画像コンテンツが、周辺および／または中心視野に提示されることができる。そのような付加的、すなわち、「拡張」コンテンツはまた、テキスト、矢印、ユーザコマンド、複製画像等をさらに含むことができる。ある場合には、そのような付加的、すなわち、「拡張」コンテンツは、Ｘ線、ＣＴ、ＭＲＩ、ＰＥＴ、超音波画像、または結像技術からの他の画像等の２次元（２Ｄ）または３次元（３Ｄ）画像等の画像を備えることができる。そのような付加的画像コンテンツはまた、診断監視デバイスまたは他の器具ならびに他のソースからからのデータを含むことができる。
【0159】
ここで図１１Ｂを参照すると、ディスプレイシステムを使用して、環境の画像コンテンツの少なくとも一部のユーザビューを改善する、別の例示的方法３５００が、図示される。ディスプレイシステムは、それぞれ、図２、６、および１０Ａ－１０Ｂにおけるディスプレイシステム８０、１０００、または２０１０を含んでもよい。ディスプレイシステムは、例えば、画像コンテンツをユーザの眼に投影する、頭部搭載型ディスプレイデバイスを含んでもよい。
【0160】
ブロック３５１０では、ディスプレイシステムは、環境の条件を捕捉するように構成されてもよい。本明細書に説明されるように、いくつかの実施形態は、１つまたはそれを上回る捕捉デバイスを含み、環境の条件を捕捉してもよい。一実施例として、ディスプレイシステムは、１つまたはそれを上回るカメラまたは光センサ（例えば、照度計）を含み、環境の照明条件を感知してもよい。１つまたはそれを上回るカメラまたは光センサは、周囲光の輝度を測定してもよい。
【0161】
ブロック３５２０では、種々の実施形態は、少なくとも部分的に、条件に基づいて、環境の画像コンテンツの少なくとも一部を修正してもよい。例えば、種々の実施形態は、環境内の照明条件に基づいて、画像コンテンツを修正してもよい。
【0162】
本明細書に説明されるように、錐体は、概して、色および空間分解能に関与する。桿体は、色に敏感ではなく、概して、基本空間分解能に関与する。錐体は、明るい光条件下で最も活性化する一方、桿体は、低光条件下でより活性化する。したがって、照明条件（例えば、輝度）が減少するにつれて、錐体の分解能もまた、減少する。
【0163】
故に、いくつかの実施形態は、少なくとも部分的に、照明条件との反比例関係に基づいて、画像コンテンツを提示してもよい。いくつかの実施例では、ユーザに提示される画像コンテンツは、本明細書に説明される技法を用いて増強されてもよい。増強の程度は、少なくとも部分的に、環境の輝度との反比例関係に基づいてもよい。例えば、本明細書に説明されるような拡大、増加された明度、増加されたコントラスト、または他のタイプの増強、もしくはそれらの組み合わせ等のより多くの増強が、より低い照明条件を伴う環境内の画像コンテンツに提供されてもよい。本明細書に説明されるように、画像コンテンツの異なる部分はまた、少なくとも部分的に、照明条件に基づいて、強調解除されてもよい。有利には、本明細書に説明されるある実施形態は、照明条件に基づいて、本明細書に説明されるような種々の増強／強調解除技法のうちの１つまたはそれを上回るものを通して、画像コンテンツを増強させてもよい。例えば、暗環境内のディスプレイに提示される画像コンテンツの明度を増加させることによって、ユーザは、ディスプレイを通して視認されている実世界環境の可視性が減少され得る。故に、種々の実施形態は、照明条件に基づいて、画像コンテンツを増強させる（例えば、サイズを増加させる、コントラストを増加させる、色飽和を増加させる、鮮明度を増加させる、背景を組み込む等、明度を増加させる以外）、または強調解除する（例えば、サイズを低減させる、ぼかす、コントラストを低減させる、色飽和を減少させる、鮮明度を減少させる、曖昧にする等）ための他の技法のうちの１つまたはそれを上回るものを利用してもよい。ある場合には、より多くの増強または強調解除が、より低い照明条件を伴う環境下の画像コンテンツに提供されてもよい。
【0164】
ある実施形態はまた、有利には、環境の照明条件下の視機能に基づいて、画像コンテンツを増強させてもよい（例えば、図１Ｇ参照）。例えば、種々の実施形態は、異なる照明条件のために、ユーザの眼内の錐体および／または桿体の使用における変動を活用してもよい。いくつかのそのような実施形態では、ディスプレイシステムは、少なくとも部分的に、ユーザが、明所視、薄明視、または暗所視を使用するかどうかに基づいて増強される、画像コンテンツをユーザの視野の中心または周辺領域の一部に提示するように、光をユーザの眼の場所に投影するように構成されてもよい。明所視、薄明視、および暗所視は、それぞれ、比較的に明るい、中間、および低光条件下における眼の視覚である。明所視のために、錐体が、主に、使用され、暗所視のために、桿体が、主に、使用される。薄明視は、錐体および桿体の両方を利用する。本明細書に説明されるように、対応する照明条件は、明所視、薄明視、または暗所視照明条件と称され得る。ある照明条件下では、錐体活性が眼内で桿体活性より優勢であるとき、いくつかの実施形態は、本明細書に説明されるように、対応する錐体密度に基づいて、画像コンテンツを増強させてもよい。いくつかのそのようなインスタンスでは、画像コンテンツは、錐体の密度に基づいて、反比例して増強されてもよい。例えば、より多くの増強（例えば、サイズ、コントラスト、色飽和、鮮明度等のより多くの増加）が、より低い錐体密度を有する眼の場所に提示される画像コンテンツに提供されてもよい。加えて、ある照明条件下、桿体活性が眼内で錐体活性より優勢であるとき、いくつかの実施形態は、本明細書に説明されるように、対応する桿体密度に基づいて、画像コンテンツを増強させてもよい。いくつかのそのようなインスタンスでは、画像コンテンツは、桿体の密度に基づいて、反比例して増強されてもよい。例えば、より多くの増強（例えば、サイズ、コントラスト、色飽和、鮮明度等のより多くの増加）が、より低い桿体密度を有する眼の場所に提示される画像コンテンツに提供されてもよい。
【0165】
本明細書に説明されるように、いくつかの実施形態は、１つまたはそれを上回る捕捉デバイスを含み、環境に関する情報を捕捉してもよい。例えば、画像捕捉デバイス（例えば、カメラ）が、環境の光条件（例えば、輝度）を捕捉するために使用されてもよい。別の実施例として、ピクセルのアレイ（例えば、光センサのアレイ、検出器、またはアクティブセンサエリア）を備える、検出器アレイが、環境の照明条件を捕捉するために使用されてもよい（例えば、ピクセルにわたって光レベルを積分し、環境の照明条件を捕捉することによって）。さらに別の実施例として、１つまたはそれを上回る捕捉デバイスは、内向きに面した画像捕捉デバイスまたは眼追跡デバイスを含み、瞳孔サイズを検出してもよい。輝度に応じて、瞳孔サイズは、変化し得る。低光条件に関して、瞳孔は、膨張し得る一方、高光条件に関して、瞳孔は、収縮し得る。故に、いくつかの実施形態は、少なくとも部分的に、瞳孔サイズに基づいて、照明条件を判定してもよい。いくつかの実施形態は、１つまたはそれを上回るタイミングデバイス（例えば、クロックまたはタイマ）を含み、照明条件下で費やされた時間を監視してもよい。タイミングデバイスのうちの１つまたはそれを上回るものは、処理電子機器（例えば、図２に示されるローカル処理およびデータモジュール７０または遠隔処理モジュール７２）等のデバイスの電子機器内に組み込まれる、タイミングデバイス（例えば、クロック）を含んでもよい。
【0166】
明所視照明条件下、輝度は、１０ｃｄ／ｍ２を上回るまたはそれと等しい、１２ｃｄ／ｍ２を上回るまたはそれと等しい、１５ｃｄ／ｍ２を上回るまたはそれと等しい、２０ｃｄ／ｍ２を上回るまたはそれと等しい、５０ｃｄ／ｍ２を上回るまたはそれと等しい、もしくはその間の任意の値を上回るまたはそれと等しくあり得る（例えば、１０．５ｃｄ／ｍ２を上回るまたはそれと等しい、１３ｃｄ／ｍ２を上回るまたはそれと等しい等）。輝度範囲は、１０ｃｄ／ｍ２～１０８ｃｄ／ｍ２、１２ｃｄ／ｍ２～１０８ｃｄ／ｍ２、１５ｃｄ／ｍ２～１０８ｃｄ／ｍ２、１０ｃｄ／ｍ２～１０７ｃｄ／ｍ２、１２ｃｄ／ｍ２～１０７ｃｄ／ｍ２、１５ｃｄ／ｍ２～１０７ｃｄ／ｍ２、１０ｃｄ／ｍ２～１０６ｃｄ／ｍ２、または１０ｃｄ／ｍ２～１０８ｃｄ／ｍ２（例えば、１０．５ｃｄ／ｍ２～１０８ｃｄ／ｍ２、１０．５ｃｄ／ｍ２～１０７ｃｄ／ｍ２等）の任意の値によって形成される任意の範囲であり得る。
【0167】
いくつかのそのような照明条件下では、錐体が活性化されるため、画像コンテンツは、錐体の投影された光場所の密度に基づいて、反比例して増強されてもよい（例えば、拡大される、明度が増加される、コントラストが増加される、色飽和が増加される、鮮明度が増加される等）。例えば、より少ない錐体密度を伴う（例えば、中心窩からより遠い）投影された光場所（例えば、中心または周辺視野に対応する）では、より多くの増強（例えば、サイズ、コントラスト、色飽和、鮮明度等のより多くの増加）が、必要とされ得る。
【0168】
暗所視照明条件下、輝度は、１０－３．５ｃｄ／ｍ２未満またはそれと等しい、１０－３．６ｃｄ／ｍ２未満またはそれと等しい、１０－３．７ｃｄ／ｍ２未満またはそれと等しい、１０－３．８ｃｄ／ｍ２未満またはそれと等しい、１０－４ｃｄ／ｍ２未満またはそれと等しい、１０－４．５ｃｄ／ｍ２未満またはそれと等しい、もしくは１０－３．５ｃｄ／ｍ２未満の任意の値未満またはそれと等しくあり得る（例えば、１０－３．９ｃｄ／ｍ２未満またはそれと等しい、１０－５ｃｄ／ｍ２未満またはそれと等しい等）。輝度範囲は、１０－３．５ｃｄ／ｍ２～１０－６ｃｄ／ｍ２、１０－３．６ｃｄ／ｍ２～１０－６ｃｄ／ｍ２、１０－３．７ｃｄ／ｍ２～１０－６ｃｄ／ｍ２、１０－３．８ｃｄ／ｍ２～１０－６ｃｄ／ｍ２、１０－４ｃｄ／ｍ２～１０－６ｃｄ／ｍ２、１０－４．５ｃｄ／ｍ２～１０－６ｃｄ／ｍ２、１０－３．５ｃｄ／ｍ２～１０－５ｃｄ／ｍ２、１０－３．６ｃｄ／ｍ２～１０－５ｃｄ／ｍ２、１０－３．６ｃｄ／ｍ２～１０－５ｃｄ／ｍ２、１０－４ｃｄ／ｍ２～１０－５ｃｄ／ｍ２、または１０－３．５ｃｄ／ｍ２～１０－６ｃｄ／ｍ２の任意の値によって形成される任意の範囲の（例えば、１０－３．９ｃｄ／ｍ２～１０－６ｃｄ／ｍ２、１０－４．２ｃｄ／ｍ２～１０－６ｃｄ／ｍ２、１０－５ｃｄ／ｍ２～１０－６ｃｄ／ｍ２等）であり得る。
【0169】
いくつかのそのような照明条件下では、桿体が、活性化されるため、画像コンテンツは、桿体の投影された光場所の密度に基づいて、反比例して増強されてもよい。より少ない桿体密度（およびより多くの錐体密度）を伴う投影された光場所（例えば、中心視野内に対応する）では、より多くの増強（例えば、サイズ、コントラスト、色飽和、鮮明度等のより多くの増加）が、例えば、桿体および／または錐体を「覚醒」させるために必要とされ得る。例えば、桿体および錐体は、差異に基づいて、活性化され得る。移動または形状上の縁は、桿体によって検出され得る、差異であり得る。任意のそのような差異の提示は、桿体を覚醒させ、可能性として、桿体をより敏感にし、画像を検出することができる。錐体は、色に関与するが、暗所視のために活性化されないため、暗所視の間の、例えば、中心領域内における錐体への色またはコントラストが増強された画像（例えば、増加された色飽和またはコントラストを伴う画像）の提示は、いくつかの実施形態では、錐体を活性化し得る。さらに、桿体密度は、中心窩の中心から約１８度でピークとなり、中心窩の中心から約３０度でより小さいピークを伴い得る。いくつかの実施形態では、増強は、少なくとも部分的に、これらのピークのうちの１つからの距離に基づいてもよい。例えば、これらのピークのうちの１つからより遠い投影された光場所（例えば、周辺視野内に対応する）では、より多くの増強が、必要とされ得る。
【0170】
薄明視照明条件下、輝度は、１０－３ｃｄ／ｍ２～１００．５ｃｄ／ｍ２、１０－２．９ｃｄ／ｍ２～１００．５ｃｄ／ｍ２、１０－２．８ｃｄ／ｍ２～１００．５ｃｄ／ｍ２、１０－３ｃｄ／ｍ２～１００．４５ｃｄ／ｍ２、１０－２．９ｃｄ／ｍ２～１００．４５ｃｄ／ｍ２、１０－２．８ｃｄ／ｍ２～１００．４５、または１０－３ｃｄ／ｍ２～１００．５ｃｄ／ｍ２の任意の値によって形成される任意の範囲のであり得る（例えば、１０－２．９ｃｄ／ｍ２～１００．４ｃｄ／ｍ２、１０－２．８ｃｄ／ｍ２～１００．４ｃｄ／ｍ２、１０－２ｃｄ／ｍ２～１００．４ｃｄ／ｍ２等）。
【0171】
いくつかのそのような照明条件下では、錐体および桿体の両方が、使用され得る。照明条件が暗いほど（例えば、明所視から薄明視に進む）、より多くの桿体（およびより少ない錐体）が、活性化され得る。加えて、いくつかのそのようなインスタンスでは、薄明視照明条件下で費やされた時間が長いほど、より多くの桿体（およびより少ない錐体）が、活性化され得る。照明条件がより明るいほど（例えば、暗所視から薄明視に進む）、より多くの錐体（およびより少ない桿体）が、活性化され得る。いくつかのそのようなインスタンスでは、薄明視照明条件下で費やされた時間が長いほど、より多くの錐体（およびより少ない桿体）が、活性化され得る。時間（例えば、リアルタイムで）および輝度レベルを監視することによって、ある実施形態は、活性である錐体および桿体の量および／または錐体または桿体がユーザの眼内で優勢であるかどうかを判定することができる。概して、環境がより暗いほど、桿体が錐体より優勢により高速に遷移し得る。また、輝度の変化が大きい（例えば、より暗いまたはより明るい）ほど、桿体または錐体は、より迅速に活性化され得る。
【0172】
故に、いくつかの実施形態では、画像コンテンツは、少なくとも部分的に、照明条件、かつ少なくとも部分的に、照明条件（例えば、薄明視照明条件）下で費やされた時間に基づいて、増強されてもよい。錐体が優勢であるとき、画像コンテンツは、例えば、明所視条件におけるように、錐体の投影された光場所の密度に基づいて反比例して増強されてもよい。例えば、より多くの増強（例えば、サイズ、コントラスト、色飽和、鮮明度等のより多くの増加）が、より低い錐体密度を有する眼の場所に提示される画像コンテンツに提供されてもよい。桿体が優勢であるとき、画像コンテンツは、例えば、暗所視条件におけるように、桿体の投影された光場所の密度に基づいて反比例して増強されてもよい。例えば、より多くの増強（例えば、サイズ、コントラスト、色飽和、鮮明度等のより多くの増加）が、より低い桿体密度を有する眼の場所に提示される画像コンテンツに提供されてもよい。
【0173】
加えて、増強は、少なくとも部分的に、活性光受容体（例えば、明所視のための錐体、暗所視のための桿体、および薄明視のための錐体および／または桿体）の分解能に基づいてもよい。画像コンテンツの２つの点の分解は、眼の空間および／またはコントラスト感度（または空間分解能）に依存し得る。加えて、眼が感知し得る、最小空間距離および／または最小コントラストは、輝度レベルに依存し得る。例えば、眼が感知し得る、最小空間距離および／または最小コントラストは、暗環境と比較して、良好に照明された環境に関しては、より小さくなり得る。故に、種々の実施形態は、少なくとも部分的に、所与の照明条件に関する眼の分解能に基づいて眼によって分解されるために、画像コンテンツを増強させてもよい。例えば、画像コンテンツは、少なくとも活性錐体および／または桿体の最小空間分解能を満たす程度まで、拡大されてもよい。別の実施例として、画像コンテンツは、少なくとも活性錐体および／または桿体の最小コントラスト感度を満たす程度まで、増加されたコントラストを有してもよい。いくつかの実施形態は、増強させるための１つを上回る技法を利用してもよい（例えば、拡大する、明度を増加させる、コントラストを増加させる、色飽和を増加させる、鮮明度を増加させる、背景を追加する等）。
【0174】
種々の実施形態は、環境の照明条件下の視機能に基づいて、および／または活性光受容体の分解能に基づいて、画像コンテンツを強調解除するための１つまたはそれを上回る技法を利用してもよいことを理解されるであろう（例えば、サイズを低減させる、ぼかす、暗化／減衰させる、コントラストを低減させる、色飽和を減少させる、鮮明度を減少させる、曖昧にする等）。例えば、より高い輝度レベル（例えば、より低い輝度レベルと比較して）では、錐体が、より敏感であり得る。いくつかのそのような場合では、高錐体密度を有する光投影された場所に対応するユーザの視野の一部に提示される画像コンテンツは、強調解除され、依然として、検出されることができる。故に、明所視照明条件下では、いくつかの実施形態は、ユーザが、依然として、中心視野に提示される強調解除された画像コンテンツを視認可能でありながら、周辺視野に提示される画像コンテンツをより良好に視認可能であり得るように、中心視野に提示される画像コンテンツを強調解除してもよい。より低い輝度レベル（例えば、より高い輝度レベルと比較して）では、桿体が、より敏感であり得る。いくつかのそのような場合では、高桿体密度を有する光投影された場所に対応するユーザの視野の一部に提示される画像コンテンツは、強調解除され、依然として、検出されることができる。故に、暗所視照明条件下では、いくつかの実施形態は、ユーザが、依然として、周辺視野に提示される強調解除された画像コンテンツを視認可能でありながら、中心視野に提示される画像コンテンツをより良好に視認可能であり得るように、周辺視野に提示される画像コンテンツを強調解除してもよい。加えて、薄明視照明条件下では、いくつかの実施形態は、錐体または桿体がユーザの眼内で優勢であるかどうかを判定し（例えば、少なくとも部分的に、照明条件下で費やされた時間に基づいて）、適宜、画像コンテンツを提示してもよい。例えば、いくつかの実施形態は、例えば、明所視条件下におけるように、錐体が優勢であるときの錐体の密度に基づいて、画像コンテンツを強調解除することができる。いくつかの実施形態は、例えば、暗所視条件下におけるように、桿体が優勢であるときの桿体の密度に基づいて、画像コンテンツを強調解除することができる。さらに、本明細書に説明されるようないくつかの実施形態は、有利には、ユーザに、視覚的または聴覚的アラートを介して、増強／強調解除された画像コンテンツをアラートしてもよい。
【0175】
画像修正
ここで図１２Ａおよび１２Ｂを参照すると、ユーザおよび／または環境センサを組み込む、ディスプレイシステムは、有利には、環境内のオブジェクトの画像修正を提供することができる。言い換えると、ある実施形態は、ユーザが、より良好な可視性を伴って、ユーザの視野内に位置するオブジェクトを視認することを可能にし得る。
ここで図１２Ａおよび１２Ｂを参照すると、ユーザおよび／または環境センサを組み込む、ディスプレイシステムは、有利には、環境内のオブジェクトの画像修正を提供することができる。言い換えると、ある実施形態は、ユーザが、より良好な可視性を伴って、ユーザの視野内に位置するオブジェクトを視認することを可能にし得る。
【0176】
図１２Ａおよび１２Ｂは、ディスプレイシステムを使用したユーザの視野内のオブジェクトの画像修正の例示的方法４０００を図示する。ディスプレイシステムは、それぞれ、図２、６、および１０Ａ－１０Ｂにおけるディスプレイシステム８０、１０００、または２０１０を含んでもよい。図１１Ａのブロック３０１０および３０２０と同様に、ディスプレイシステムは、ブロック４０１０に示されるように、１つまたはそれを上回る環境の画像を捕捉するように構成されてもよく、ブロック４０２０に示されるように、環境の画像を処理してもよい。いくつかの実施形態では、捕捉デバイスは、環境に関する他の情報を捕捉してもよい（例えば、カメラまたは光センサが、環境の照明条件（例えば、平均明度）を捕捉するために使用されることができる）。
【0177】
ブロック４０３０では、種々の実施形態は、環境内の着目オブジェクトを判定してもよい。いくつかの実施形態では、着目オブジェクトは、ユーザの周辺視野内のオブジェクトであってもよい。一般に、ユーザは、典型的には、その注意をユーザの中心視野内のオブジェクトまたは複数のオブジェクトに集中させるであろう。いくつかのそのような実施形態では、ディスプレイシステムは、ユーザの周辺視野内に位置する、ユーザが着目するオブジェクトを自動的に判定してもよい。
【0178】
種々の実施形態は、例えば、ユーザが着目し得る、ユーザの周辺視野内の環境の少なくとも一部を識別してもよい（例えば、１つまたはそれを上回るオブジェクト、１つまたはそれを上回るオブジェクトの一部、またはオブジェクトの少なくともの一部およびその近接環境の一部）。いくつかの実施形態では、ディスプレイシステムは、ユーザを監視し、ユーザが視認することに着目する環境の部分を判定することによって、環境の一部を自動的に識別してもよい。ユーザがある視認方向において合焦する、時間および／または労力は、ユーザの着目レベルとして解釈され得る。例えば、ユーザの周辺視野内の特定の領域に着目するユーザは、複数の機会において、その頭部および／または眼をある方向に向かって指向し得、および／またはその方向を視認することにより長い時間周期を費やし得る。別の実施例として、環境の特定の部分に着目するユーザは、ある方向において観察するとき、例えば、その方向に位置する、低分解能を有し得るオブジェクトを視認しようとする際、その眼を細めて、労力／着目を示し得る。ユーザはまた、遠近調節することに苦労し得る。眼内のレンズの遠近調節の測定は、したがって、ユーザが、オブジェクトを見ようと試みるが、ある程度の困難を有するかどうかを確認するために監視されてもよい。
【0179】
故に、図１０Ａ－１０Ｂに示されるように、ディスプレイシステムは、入力をユーザから受信するように構成される、１つまたはそれを上回る入力デバイスを含んでもよい。入力デバイスは、眼位置、移動、視線、または瞳孔サイズを検出するため等、眼追跡のための内向きに面したカメラ２４、２８および／またはセンサを含んでもよい。内向きに面したカメラ２４、２８および／またはセンサはさらに、眼瞼位置、周囲眼組織位置、顔筋移動（例えば、顔筋を収縮または圧縮させる、眼を細める等）、または他の顔位置もしくは移動等の他の顔インジケータを監視するように構成されてもよい。本明細書に説明されるようなセンサおよび／またはカメラ（例えば、加速度計、ジャイロスコープ、ＩＭＵ、および／またはカメラ２４、２８、３０、３２、３４等の頭部姿勢センサ）が、頭部が位置付けられる方向（例えば、水平に対して直線または傾斜）等のユーザの頭部姿勢を判定するために使用されてもよい。そのような情報のうちの１つまたはそれを上回るもの（例えば、眼追跡、顔インジケータ、および／または頭部姿勢に関する情報）を外向きに面したカメラ３４からのユーザ環境に関する情報と併せて使用することによって、ローカル処理およびデータモジュール７０（および／または図２からの遠隔処理モジュール７２）は、ユーザの周辺視野内の着目領域を判定するように構成されてもよい。
【0180】
いくつかの実施形態では、ディスプレイシステムは、ユーザが着目領域を能動的に示すことによって、ユーザの周辺視野内の環境の一部を識別してもよい。例えば、内向きに面したセンサおよび／またはカメラ２４、２８は、検出システムを含み、あるユーザ眼ベースのコマンドを検出してもよい。例えば、いくつかの実施形態は、視線、眼を細めること、もしくは１つまたはそれを上回るウィンクまたは瞬目のパターンを伴う、ユーザコマンドを用いて、着目領域を選択してもよい。他の実施例として、ディスプレイシステムは、物理的ユーザインターフェース（例えば、タッチパッド等のタッチセンサ、マウス、ポインティングデバイス、もしくはディスプレイシステムの表面上の１つまたはそれを上回るボタン）、仮想ユーザインターフェース（例えば、仮想タッチパッド、仮想マウス、仮想ポインティングデバイス、もしくは仮想タッチスクリーン上の１つまたはそれを上回るアイコン）、オーディオ認識システム（例えば、音声コマンド、溜息、欠伸等を検出するための１つまたはそれを上回るマイクロホン）、ジェスチャ認識システム（例えば、ジェスチャを識別するためのビデオカメラおよび処理電子機器）、および／または移動認識システム（例えば、運動検出器）を含み、ユーザが着目領域を選択することを可能にしてもよい。
【0181】
いくつかの実施形態は、１つまたはそれを上回るインジケータまたはデバイスアラート（例えば、フラッシュ光またはポップアップアラートもしくはオーディオ信号の使用）を含み、周辺視野内の状況（例えば、周辺領域内の気付かれていない出血）にユーザの注意を引いてもよい。それに応答して、ユーザは、ユーザの周辺視野内の関連部分の画像を増強させるかどうかを能動的に選択してもよい。いくつかのそのような実施形態では、ユーザは、瞬間中心視野から視線を離さずに、周辺視野と相互作用してもよい（音声コマンドまたは手を振ることで周縁内のポップアップアラートを閉じる等）。
【0182】
種々の実施形態では、ユーザの周辺視野内の環境の識別された部分は、１つまたはそれを上回る物理的オブジェクト、１つまたはそれを上回る物理的オブジェクトの一部、もしくは物理的オブジェクトの少なくとも一部およびその近傍環境の一部を含んでもよい。例えば、識別された部分は、近傍テーブル上の１つまたはそれを上回るツールを含んでもよい。別の実施例として、オブジェクトは、手術室内の物理的画面上に提示される、事前に記録されたまたはリアルタイムの医療画像を含んでもよい。医療画像は、データファイル、コンピュータ断層撮影（ＣＴ）走査（またはコンピュータ軸方向断層撮影（ＣＡＴ）走査として知られる）、磁気共鳴結像（ＭＲＩ）、電子放出断層撮影（ＰＥＴ）走査、超音波結像、Ｘ線の情報を含んでもよい。いくつかのそのような実施例では、環境の一部は、必ずしも、画面上に画像全体を含まず、画像の一部を構成し得る。さらに、ディスプレイシステムは、環境の１つを上回る非隣接部分（例えば、外科医の左側の医療画像および外科医の右側の異なる医療画像）を識別するように構成されてもよい。
【0183】
種々の実施形態では、１つまたはそれを上回る外向きに面したセンサ３４は、環境の識別された部分内の着目オブジェクトまでの距離を測定するように構成されてもよい。１つまたはそれを上回るセンサ３４は、距離測定デバイス（例えば、レーザ測距計）を含んでもよい。着目オブジェクトまでの距離は、オブジェクトの画像コンテンツを提示する、深度平面を判定するために使用されてもよい。
【0184】
図１２Ａを参照すると、ブロック４０４０では、ディスプレイシステムは、オブジェクトの画像に対応する環境の画像の一部を修正するように構成されてもよい。ブロック４０４１に示されるように、ディスプレイシステムは、オブジェクトの増強された画像（例えば、少なくとも部分的に、オブジェクトまでの距離、および／または２点区別のための最小距離、および／または眼の空間分解能との反比例関係に基づいて判定された深度平面において拡大された画像）を提示してもよい、またはブロック４０４２に示されるように、ディスプレイシステムは、オブジェクトの画像を異なる場所に提示してもよい。図１２Ｂは、いくつかのそのような実施形態の例示的用途を示す。図１２Ｂでは、外科医は、その中心視野内で患者に手術し得る。手術台からある程度離れた距離にあるのは、医療画像４０４５（例えば、心臓モニタ上の心電図）であってもよい。いくつかの実施形態は、図１２Ｂにおける４０４１によって示されるように、有利には、増強された医療画像を提示してもよい（例えば、本実施例では、サイズが増強される）。いくつかのインスタンスでは、増強された画像は、実際の医療画像と実質的に同一場所に現れ得る（明確にするために、増強された画像は、図１２Ｂでは、同一場所に示されていない）。例えば、医療画像は、その実際の場所またはそれを中心として留まり得るが、増強されて現れ得る（例えば、その実際のサイズより大きいまたはより小さい）。外科医が、増強された医療画像を見るとき、外科医は、より良好な可視性を伴って、医療画像を見ることが可能であり得る。いくつかの実施形態は、図１２Ｂにおける４０４２によって示されるように、有利には、医療画像の場所を変化させてもよい。例えば、外科医の周辺視野内にあった医療画像は、外科医が持続的に頭部姿勢を調節する必要がないように、患者のより近くに変位されてもよい。このように、外科医は、患者および医療画像の両方を同時に見ることが可能であり得る。種々の実施形態はまた、付加的画像をユーザに提示してもよい。例えば、図１２Ｂに示されるように、付加的ＡＲ画像４０４７が、提供されてもよい（例えば、患者の近くに提示される心臓の３Ｄ画像）。
【0185】
図１２Ａのブロック４０４１に戻って参照すると、本明細書に説明されるように、オブジェクトの画像は、オブジェクトの対応する深度平面と同一深度平面またはオブジェクトに対応する深度平面に近い深度平面上で増強されてもよい。例えば、いくつかの実施形態では、ディスプレイシステムは、着目オブジェクトの増強された画像を、少なくとも部分的に、オブジェクトまでの距離に基づいて判定された深度平面に提示するように構成されてもよい。画像が投影される深度平面は、ユーザから実世界内のオブジェクトまでの距離と正確に一致しなくてもよい。代わりに、ある場合には、利用可能である、すなわち、頭部搭載型ディスプレイデバイスが画像を提供するように構成される、１つまたはそれを上回る他の深度平面より少なくとも近い近接深度平面等、ユーザからの実世界内のオブジェクトの距離に近い、深度平面が、選択される。ユーザの周辺視野内の着目オブジェクトの画像は、増強されるため、ユーザは、ユーザの視野をそのオブジェクトに向かって再指向する必要なく、そのオブジェクトのより良好な可視性を有し得る。図１２Ｂに示される実施例では、オブジェクト４０４５の画像４０４１は、拡大されるが、オブジェクト４０４５の画像４０４１は、他の方法で増強されてもよい。
【0186】
種々の方法が、ユーザから実世界内のオブジェクトまでの距離を測定するために使用されることができる。例えば、米国仮出願第６２／２９４，１４７号は、物理的測定を行う１つの方法を説明する。いくつかの実施形態では、頭部搭載型ディスプレイデバイスは、環境内のオブジェクトまでの距離を測定するように構成される、１つまたはそれを上回るセンサを含んでもよい。そのようなセンサは、例えば、レーザ測距計（例えば、ＬＩＤＡＲ）、レーダ距離計、超音波測距デバイス（例えば、ソナーまたはエコー音を使用する）等の距離測定デバイスまたは測距デバイスであり得る。三角測量等の他の方法もまた、可能性として、使用されてもよい。本明細書に説明されるように、オブジェクトの画像は、頭部搭載型ディスプレイ上に表示され、ユーザに、オブジェクトの画像が実場所と同一場所に現れる効果をもたらすことができる。本効果は、結像されるオブジェクトがオブジェクトの実際の場所と同一距離に位置して現れるように提示され得る、深度平面を判定することによって、達成されることができる。頭部搭載型ディスプレイが提供する深度平面は、オブジェクトまでの距離に正確に合致する必要はなくてもよい。その距離に近似する深度平面が、選択されてもよい。または、おそらく、最も好適な深度平面は、頭部搭載型ディスプレイデバイスによって提供され得る他の深度平面よりユーザからオブジェクトまでの距離に近い、頭部搭載型ディスプレイデバイスによって提供され得る、深度平面である。いくつかの実施形態では、例えば、ディスプレイデバイスは、少なくとも２つの深度平面、すなわち、遠深度平面と、近深度平面とを含む。最も好適な深度平面は、オブジェクトからユーザまでの距離に応じて選択されてもよい。例えば、オブジェクトからユーザまでの距離が、特定の頭部搭載型ディスプレイによって提供される第２の深度平面ではなく、第１の深度平面により近い場合、そのオブジェクトの画像は、第１の深度平面上に提示されてもよい。いくつかの実施形態では、遠深度平面は、ユーザから閾値距離より遠くに現れる、オブジェクトの画像を表示してもよく、近深度平面は、閾値距離より近くに現れる、オブジェクトの画像を表示してもよい。種々の実施形態では、２つのみを上回る深度平面が、画像を提示するために利用可能である。再び、上記に説明されるように、そのような実施形態では、最も好適な深度平面は、実世界内のオブジェクトに対応する深度平面により近いように選択されてもよい。
【0187】
いくつかの実施形態では、ディスプレイシステムは、少なくとも部分的に、オブジェクトまでの距離、および／または２点区別のための最小距離、および／または眼の空間分解能との反比例関係に基づいて、オブジェクトの画像コンテンツを拡大し、その拡大された画像を深度平面上に提示するように構成されてもよい。ある実施形態では、ディスプレイシステムは、拡大（または増強）を伴わずにオブジェクトが現れるであろう状態に関連して、拡大された（または増強された）オブジェクトの画像を提示してもよい。いくつかの実施形態では、画像の拡大（または増強）は、実世界内の周囲オブジェクトおよび／またはディスプレイ上に提示される他の画像に関連することができる。
【0188】
ここで図１２Ａにおけるブロック４０４２を参照すると、本明細書に説明されるように、ディスプレイシステムは、着目オブジェクトの画像をオブジェクトと異なる場所に提示してもよい。いくつかの実施例では、ディスプレイシステムは、オブジェクトの画像を、ブロック４０４２ａに示されるように、オブジェクトまでの距離に対応する同一深度平面における異なる場所に、またはブロック４０４２ｂに示されるように、オブジェクトまでの距離に対応する深度平面と異なる深度平面に提示してもよい。例えば、ブロック４０４２ａは、図１２Ｃを参照して図示され得る。図１２Ｃは、片眼６からの図４からの深度平面を示す。着目オブジェクトは、元々、場所Ａ（例えば、ユーザから１０フィート）における深度平面４１００と関連付けられ得る。図１２Ｃに示されるように、ディスプレイシステムは、オブジェクトの画像を、場所Ａから側方に変位されるが、同一深度平面４１００にある、場所Ａ’に提示してもよい（例えば、光線が発出するオブジェクトがユーザから１０フィートに位置するかのように、またはいくつかの実施形態では、光の光線を網膜の中に投影する）。実施例として、医療画像は、外科医の視野のほぼ外側（例えば、周辺視野内）に位置してもよい。いくつかの実施形態では、医療画像は、医療画像が外科医の中心視野のより近くに現れるように、側方に変位された場所に提示されてもよい。いくつかのそのような実施形態では、外科医は、医療画像が側方に変位された場所に提示されない場合より良好な可視性を伴って、医療画像を見ることが可能であり得る。
【0189】
ブロック４０４２ｂもまた、図１２Ｃを参照して図示され得る。前述のように、着目オブジェクトは、元々、場所Ａにおける深度平面４１００と関連付けられ得る。図１２Ｃに示されるように、ディスプレイシステムは、オブジェクトの画像を、場所Ａと関連付けられた深度平面と異なる深度平面４２００である、場所Ａ’’に提示してもよい。実施例として、場所Ａに位置する医療画像は、患者および／または外科手術部位（例えば、場所Ｂにおける）と関連付けられた深度平面４２００により近い、異なる深度平面４２００に提示されてもよい。
【0190】
種々の実施形態では、医療画像を、同一ではないにしても、より近い深度平面上に提示することによって、患者と関連付けられた深度平面は、外科医における遠近調節を容易にし得る（例えば、医療画像の遠近調節状態を患者のものにより近づける）。加えて、外科医は、医療画像が異なる場所に提示されない場合より良好な可視性を伴って、医療画像を見ることが可能であり得る。例えば、医療画像は、患者に隣接して提示されてもよい。別の実施例として、医療画像は、患者上に重畳されてもよい。いくつかのインスタンスでは、患者上に重畳された画像は、外科手術の間、ガイドを外科医に提供し得る。
【0191】
いくつかの実施形態では、着目オブジェクトの画像は、眼６により近いまたはそこからより遠い深度平面に提示されてもよい。例えば、深度平面は、遠深度平面４１００および近深度平面４２００を含んでもよい。遠深度平面４１００は、近深度平面４２００よりユーザの眼６から遠くあり得る。本明細書に説明されるように、種々の実施形態は、着目オブジェクトまでの距離を判定するように構成される、１つまたはそれを上回る外向きに面したセンサ３４を含んでもよい。着目オブジェクトまでの距離は、近深度平面４２００より遠深度平面４１００に対応し得る。いくつかのインスタンスでは、オブジェクトの画像は、近深度平面４２００に提示されてもよい。近深度平面４２００に提示されるオブジェクトの画像は、ある場合には、ユーザの中心視野にまたはそこに近接して提示されてもよい。提示される画像は、拡大（または別様に増強）される場合とそうではない場合がある。いくつかの他の実施形態では、着目オブジェクトは、遠深度平面４１００より近深度平面４２００に対応し得、オブジェクトの画像は、遠深度平面４１００に提示されてもよい（例えば、注意散漫または着目オブジェクト近傍の乱雑を導入する、あまりに多くの結像される詳細によって生じる視覚的混雑を低減させるため）。さらに、いくつかの実施形態では、オブジェクトの画像は、オブジェクトと対応する深度平面と同一深度平面において側方に変位されてもよい（例えば、周辺視野から中心視野に側方に変位される）。いくつかの実施形態は、オブジェクトの対応する深度平面と同一深度平面において側方に変位される、増強された画像を提示してもよい。一実施例として、ユーザの周辺視野内のボトルのラベルの拡大された画像が、実際のラベル貼付されたボトルの上方に側方に変位されて提示されてもよい。
【0192】
着目オブジェクトのための画像は、拡大および／または場所以外の（またはそれと組み合わせた）側面に基づいて、修正されてもよいことを理解されるであろう。例えば、オブジェクトの画像に対応する環境の画像の部分（例えば、周辺視野内）は、修正を伴わずにオブジェクトが現れるであろう状態に関連して、および／または環境の画像の別の部分（例えば、修正された画像または中心視野内の環境の画像の一部に近接するもの等、周辺視野内の環境の画像の別の部分）と比較して増強されるように、強度／明度、コントラスト、色飽和、鮮明度、縁拡張、背景の組込、カラーバランス、および／またはホワイトバランスにおいて修正されてもよい。オブジェクトの画像に対応する環境の画像の一部はまた、露光、明るさ、陰影、ハイライト、フリッピング、直線化、回転、画像部分の測定、および／または他のアプローチの使用に基づいて、増強されてもよい。故に、種々の実施形態では、オブジェクトの画像に対応する環境の画像の一部は、環境の画像の別の部分と比較して異なるように処理されてもよい。提示される画像コンテンツは、付加的拡張コンテンツである、および／または付加的拡張コンテンツ（例えば、テキスト、矢印、ユーザコマンド、複製画像、操作され得る器官等のオブジェクトの３Ｄ－画像等）をさらに含むことができる。
【0193】
また、着目オブジェクトに対応する環境の画像またはビューの一部を修正する代わりに、またはそれに加え、環境の別の部分は、環境の画像またはビューもしくはディスプレイによって表示される他の画像を収縮させる、ぼかす、暗化／減衰させる、コントラストを低減させる、色飽和を減少させる、鮮明度を減少させる、縁を増強解除する、曖昧にする等によって、強調解除されてもよいことを理解されるであろう。例えば、そのような画像コンテンツは、ぼかされ、視覚的混雑または乱雑を低減させてもよい。いくつかの実施形態は、画像の隣接する部分を実質的に全て同一色（例えば、モノトーン）で提示することによって、コンテンツをぼかしてもよい。いくつかのそのようなインスタンスでは、色は、着目オブジェクトに対応する画像の部分内の色と高コントラストを伴う、色であってもよい。環境またはディスプレイによって表示される他の画像の強調解除された画像またはビューもまた、露光、明るさ、陰影、ハイライト、フリッピング（例えば、反転）、直線化または直線化の低減、回転、画像部分の測定（例えば、体積を含む）、カラーバランス（またはホワイトバランス）の偏移、および／または別様に、着目オブジェクトの画像に対応する環境の画像の部分と比較して異なるように処理される画像に基づいて、遂行されてもよい。
【0194】
さらに、着目されていると判定されたオブジェクトは、ユーザの中心視野内のオブジェクトに対応し得、オブジェクトの画像に対応する環境の画像の部分は、本明細書に説明されるように、増強および／または場所が移動されてもよいことを理解されるであろう。さらに、環境の画像の別の部分は、本明細書に説明されるように、強調解除されてもよい。
【0195】
さらに別の実施例として、いくつかの実施形態は、オブジェクトの画像をユーザの中心視野からユーザの中心視野内の別の場所に提示してもよい。遠深度平面からの画像コンテンツは、ユーザの中心視野内の増加された可視性のために、近深度平面にもたらされてもよい。また、近深度平面に対応する画像コンテンツは、遠深度平面にもたらされ、例えば、ユーザの近視野内の乱雑および／または視覚的混雑を低減させてもよい。いくつかの実施形態はまた、オブジェクトの画像をユーザの中心視野からユーザの周辺視野に提示してもよい（例えば、視覚的混雑を低減させるため）。
【0196】
図１２Ａを継続して参照すると、ブロック４０５０では、いくつかの実施形態は、オブジェクトの修正された画像に近接する環境の画像の一部を修正するように構成されてもよい。例えば、いくつかの実施形態は、オブジェクトの修正された画像に近接する環境の画像の側面を強調解除してもよい（例えば、サイズを低減させる、色飽和を減少させる、強度を減少させる、コンテンツの画像をぼかし、画像コンテンツを暗化／減衰させる、色または色相を変化させる等）（例えば、注意を逸らす視覚的詳細または視覚的混雑を低減させるため）。別の実施例として、いくつかの実施形態は、オブジェクトの修正された画像に近接する環境の画像の一部を調節し、任意の下層画像を被覆してもよい。例えば、オブジェクトの修正された画像が、異なる場所に変位される、および／または拡大された画像である場合、ある実施形態は、修正された画像の真下の領域を調節し、二重画像の提示を防止してもよい。いくつかのインスタンスでは、環境の画像はまた、オブジェクトの修正された画像を囲繞する境界を含むように修正されてもよい。境界の提供は、ユーザが、自身が実際の世界内に存在するようなオブジェクトの画像ではなく、オブジェクトの修正された画像（例えば、拡張仮想画像）を視認していることを把握することに役立ち得る。図１２Ｂにさらに示されるように、付加的拡張現実画像（例えば、事前に計画された外科手術ガイド、命令等）が、オブジェクトの修正された画像の近傍に提示されてもよい。
【0197】
本明細書に説明されるように、ディスプレイデバイスは、ユーザの周囲の環境内のオブジェクトの画像をハイライトするように構成されることができる。そのようなオブジェクトは、ユーザの視野内等のユーザの種々の感知領域内に現れてもよい。そのようなインスタンスでは、オブジェクトは、ユーザの中心視野または周辺視野内にあってもよい。代替として、オブジェクトは、ユーザの動眼視野内であるが、ユーザの視野視野外にあってもよい。例えば、いくつかの実施形態では、ユーザの視野外のオブジェクトの画像をユーザの視野の中にもたらすことは、ユーザにアラートするために有用であり得る。外科手術の場合、注意を外科手術部位上に集中するとき、外科医の視野内にない画面は、患者のバイタルサインを含んでもよい。そのようなバイタルサインが、あるレベルに到達すると、外科医は、頭部搭載型ディスプレイデバイスディスプレイ上の画面の画像を提供することによって、アラートされてもよい。本画面は、頭部搭載型ディスプレイデバイス上に設置されたビデオカメラによって結像されてもよい。本カメラ（または複数のカメラ）は、正面に指向されるカメラまたは可能性としてさらに側方指向されるカメラもしくは背面に指向されるカメラであってもよい。別の実施例として、アラートは、アイコン（例えば、画像のコピー）またはオーディオを含み、潜在的状況を外科医に示してもよい。さらに別の実施例として、アイコン（例えば、心臓または温度計）が、ディスプレイ上に現れ、外科医に患者のあるバイタルサイン（例えば、心拍数または温度）をチェックすることをリマインドしてもよい。小アイコンは、より少ない注意散漫を提供し得る。外科医は、次いで、その頭部を移動させ、実際のオブジェクトを視認すること、またはオブジェクトをＡＲ画像として視認することのいずれかを選定してもよい。
【0198】
別の実施例として、緊急の場合（例えば、空港では）、着目オブジェクトは、除細動器であってもよい。ディスプレイデバイスは、ネットワークシステムまたはオブジェクト認識アルゴリズムを通して、除細動器を位置特定し、その場所への一般的方向（例えば、視覚的、聴覚的、テキスト等）を提供してもよい。外向きに面したカメラが除細動器を位置特定した（例えば、ユーザの動眼視野内）後、ディスプレイデバイスは、除細動器の増強された画像（例えば、その拡大された画像）を除細動器へのより精密な方向（例えば、矢印、テキスト等）等の付加的拡張画像とともに提示してもよい。さらに、除細動器を使用するとき、ディスプレイデバイスは、指示書の増強された画像を患者の隣に提示してもよい。付加的コンテンツもまた、患者の近傍に提示されてもよい（例えば、除細動器パッドを設置すべき場所）。多数の他の実施例も、可能性として考えられる。前述のように、ネットワークシステムとの通信は、本実施例では、除細動器の場所等の付加的情報を提供するために有用であり得る。処理電子機器等によって提供されるパターン認識が、外向きに面したカメラによって捕捉された画像を処理し、例えば、本実施例では、除細動器等のオブジェクトの場所を判定する、またはそれを識別するために使用されてもよい。
【0199】
照明条件に基づく画像修正のさらなる実施形態
本明細書に説明されるように、ある実施形態は、少なくとも部分的に、照明条件に基づいて、環境の画像コンテンツの少なくとも一部を修正してもよい（例えば、図１１Ｂ参照）。また、本明細書に説明されるように、種々の実施形態は、環境内の着目オブジェクトを識別し、オブジェクトに対応する環境の画像の一部を修正してもよい（例えば、図１２Ａ－１２Ｂに示されるように、オブジェクトの増強された画像を提示する、またはオブジェクトの画像を異なる場所に提示する）。画像の一部は、少なくとも部分的に、照明条件に基づいて、修正されてもよい。
本明細書に説明されるように、ある実施形態は、少なくとも部分的に、照明条件に基づいて、環境の画像コンテンツの少なくとも一部を修正してもよい（例えば、図１１Ｂ参照）。また、本明細書に説明されるように、種々の実施形態は、環境内の着目オブジェクトを識別し、オブジェクトに対応する環境の画像の一部を修正してもよい（例えば、図１２Ａ－１２Ｂに示されるように、オブジェクトの増強された画像を提示する、またはオブジェクトの画像を異なる場所に提示する）。画像の一部は、少なくとも部分的に、照明条件に基づいて、修正されてもよい。
【0200】
画像コンテンツが異なる場所に提示される、いくつかの実施形態では、ディスプレイシステムは、少なくとも部分的に、環境の照明条件に基づいて、画像コンテンツをユーザの視野の第１の部分からユーザの視野の第２の部分に提示するように構成されてもよい。環境の照明条件下、第２の部分は、第１の部分より高い視力を有する、ユーザの眼の投影された光場所に対応し得る。画像コンテンツをより高い視力を有するユーザの眼の投影された光場所に対応する場所に移動させることによって、本明細書に説明されるある実施形態は、画像コンテンツの明度を増加させる必要なく、画像コンテンツをディスプレイに提示し得る。有利には、暗環境内のいくつかのそのような実施形態の使用は、自然暗環境内でディスプレイを通して実世界を視認するユーザの能力を維持し得る。
【0201】
明所視照明条件下、錐体が、活性化されるため、第２の部分は、第１の部分より高い錐体の密度を有する、ユーザの眼の投影された光場所に対応し得る。例えば、第１の部分は、周辺領域の一部を備え得、第２の部分は、中心領域内の一部を備え得る。別の実施例として、第１の部分は、中心領域内の一部を備え得、第２の部分は、中心領域内の別の部分（例えば、中心窩により近いユーザの眼の投影された光場所に対応する）を備え得る。さらに別の実施例として、第１の部分は、周辺領域内の一部を備え得、第２の部分は、周辺領域内の別の部分（例えば、中心窩により近いユーザの眼の投影された光場所に対応する）を備え得る。第２の部分は、いくつかのインスタンスでは、錐体が最適視認のための最高視力を有する、中心窩におけるユーザの眼の投影された光場所に対応し得る。いくつかの実施例では、第２の部分は、中心窩の中心から０～１０度、１～１０度、２～１０度、０～８度、１～８度、２～８度、０～５度、１～５度、２～５度、または０～１０度の任意の値によって形成される中心窩の中心から任意の範囲の（例えば、中心窩の中心から１～４度、１～６度、２～７度等）の範囲内にある、ユーザの眼の投影された光場所に対応し得る。
【0202】
暗所視照明条件下、桿体が、活性化されるため、第２の部分は、第１の部分より高い桿体の密度を有する、ユーザの眼の投影された光場所に対応し得る。例えば、人物は、薄暗い光の中では、そらし目を使用して、詳細を見ようとし得る。中心窩には、桿体が実質的に存在しないため、人物は、着目オブジェクトに集中しながら、視線を周辺視覚に変化させることができる。故に、第１の部分は、中心領域内の一部を備え得、第２の部分は、周辺領域内の一部を備え得る。
【0203】
本明細書に説明されるように、桿体密度は、中心窩の中心から約１８度でピークとなり、中心窩の中心から約３０度でより小さいピークを伴い得る。いくつかの実施例では、第１の部分は、周辺領域内の一部を備え得、第２の部分は、周辺領域内の別の部分（例えば、桿体密度ピークのうちの１つにより近いユーザの眼の投影された光場所に対応する）を備え得る。いくつかのインスタンスでは、第２の部分は、最適視認のための桿体密度ピークのうちの１つにおけるユーザの眼の投影された光場所に対応し得る。いくつかの実施例では、第２の部分は、中心窩の中心から１０～２５度、１２～２２度、１５～２０度、または中心窩の中心から１０～２５度の任意の値によって形成される任意の範囲の（例えば、中心窩の中心から１３～２３度、１４～２２度、１６～２０度等）の範囲内にある、ユーザの眼の投影された光場所に対応し得る。いくつかの実施例では、第２の部分は、中心窩の中心から２０～４０度、２２～３８度、２５～３５度、または中心窩の中心から２０～４０度の任意の値によって形成される任意の範囲（例えば、中心窩の中心から２３～３７度、２６～３２度、２７～３３度等）の範囲内にある、ユーザの眼の投影された光場所に対応し得る。
【0204】
薄明視照明条件下、錐体および桿体の両方が、使用されることができる。いくつかの実施形態では、薄明視照明条件下、デバイスは、少なくとも部分的に、照明条件に、かつ少なくとも部分的に、照明条件下で費やされた時間に基づいて、画像コンテンツを第１の部分から第２の部分に提示するように構成されてもよい。照明条件が暗いほど、より多くの桿体（およびより少ない錐体）が、活性化され得る。加えて、薄明視照明条件下で費やされた時間が長いほど、より多くの桿体（およびより少ない錐体）が、活性化され得る。時間（例えば、リアルタイムで）および輝度レベルを監視することによって、ある実施形態は、使用されている錐体および桿体の量と、錐体または桿体がユーザの眼内で優勢であるかどうかとを判定することができる。概して、環境が暗いほど、桿体が錐体より優勢により高速に遷移する。
【0205】
錐体がユーザの眼内で優勢であるとき、第２の部分は、例えば、明所視条件下におけるように、第１の部分より高い錐体の密度を有する、ユーザの眼の投影された光場所に対応し得る。例えば、第１の部分は、周辺領域内の一部を備え得、第２の部分は、中心領域内の一部を備え得る。別の実施例として、第１の部分は、中心領域内の一部を備え得、第２の部分は、中心領域内の別の部分（例えば、中心窩により近いユーザの眼の投影された光場所に対応する）を備え得る。さらに別の実施例として、第１の部分は、周辺領域内の一部を備え得、第２の部分は、周辺領域内の別の部分（例えば、中心窩により近いユーザの眼の投影された光場所に対応する）を備え得る。いくつかのインスタンスでは、第２の部分は、例えば、明所視条件に関して本明細書に説明されるように、錐体が最適視認のための最高視力を有する中心窩における、ユーザの眼の投影された光場所に対応し得る。
【0206】
桿体がユーザの眼内で優勢であるとき、第２の部分は、例えば、暗所視条件におけるように、第１の部分より高い桿体の密度を有する、ユーザの眼の投影された光場所に対応し得る。例えば、第１の部分は、中心領域内の一部を備え得、第２の部分は、周辺領域内の一部を備え得る。いくつかの実施例では、第１の部分は、周辺領域内の一部を備え得、第２の部分は、周辺領域内の別の部分（例えば、暗所視条件に関して説明されるように、桿体密度ピークにより近い、またはそのうちの１つにおける、ユーザの眼の投影された光場所に対応する）を備え得る。
【0207】
ディスプレイシステムは、画像コンテンツをユーザの視野の第１の部分からユーザの視野の第２の部分に提示するように構成され得るため、いくつかの実施形態は、有利には、ユーザに、視覚的または聴覚的アラートを介して、変化された画像コンテンツをアラートしてもよい。
【0208】
いくつかの実施形態は、必ずしも、画像コンテンツを１つの場所から別の場所に移動させなくてもよく、本明細書に説明される類似原理を使用して、少なくとも部分的に、環境の照明条件に、かつ少なくとも部分的に、光受容体の投影された光場所の密度（例えば、照明条件における最適視認のため）に基づいて、拡張画像コンテンツを提示するための場所を判定してもよいことを理解されるであろう。
【0209】
例えば、明所視照明条件下、画像コンテンツは、錐体の投影された光場所の密度に基づいて、ユーザの視野の一部に提示されてもよい。画像コンテンツは、比較的に高密度の錐体を有するユーザの眼の場所に対応する、ユーザの視野の一部に提示されてもよい。いくつかのインスタンスでは、光は、画像コンテンツをユーザの視野の中心領域に提示するように、ユーザの眼の場所に投影されてもよい。いくつかのインスタンスでは、投影された光場所は、中心窩にまたはそれに近接してあってもよい。
【0210】
別の実施例として、暗所視照明条件下、画像コンテンツは、本明細書に説明されるように、桿体の投影された光場所の密度に基づいて、ユーザの視野の一部に提示されてもよい。画像コンテンツは、比較的に高密度の桿体を有するユーザの眼の場所に対応する、ユーザの視野の一部に提示されてもよい。いくつかのインスタンスでは、光は、画像コンテンツをユーザの視野の周辺領域に提示するように、ユーザの眼の場所に投影されてもよい。いくつかのインスタンスでは、投影された光場所は、桿体密度ピークのうちの１つにまたはそれに近接してあってもよい。
【0211】
さらに別の実施例として、薄明視照明条件下、ある実施形態は、照明条件下、錐体または桿体がユーザの眼内で優勢であるかどうかを判定するように構成されてもよい。本明細書に説明されるように、本判定は、照明条件下で費やされた時間に基づいてもよい。錐体がユーザの眼内で優勢であるとき、画像コンテンツは、明所視条件に関して説明されるような場所に提示されてもよい。桿体がユーザの眼内で優勢であるとき、画像コンテンツは、暗所視条件に関して説明されるような場所に提示されてもよい。また、本明細書に説明されるように、いくつかの実施形態は、有利には、ユーザに、視覚的または聴覚的アラートを介して、提示される拡張画像コンテンツをアラートしてもよい。
【0212】
医療結像、ディスプレイ、および可視化のための例示的ディスプレイシステム
多くの個人は、その人生におけるある時点において、診断および処置を要求する医学的状態または疾患を体験する。これらの状態は、とりわけ、例えば、心疾患、癌、脊柱疾患、および整形外科的傷害を含む、多数の形態をとり得る。有利には、いくつかの実施形態では、本明細書に開示される拡張現実（ＡＲ）ディスプレイシステムは、医療専門家のその患者の査定および処置を補助するように構成されてもよく、任意の治療段階において、それを行なってもよい。ＡＲディスプレイシステムは、医療結像、医療表示、および／または医療可視化が有用である、任意の好適なコンテキストにおいて使用されてもよい。例えば、ＡＲディスプレイシステムは、緊急処置室、手術室、医院、医師のオフィス、患者の自宅、および同等物において使用されてもよい。いくつかの実施形態では、ＡＲディスプレイシステムは、結像し、画像を表示し、画像を操作し、疾患および異常を診断し、処置オプションを提供し、ある健康問題を防止し、および／または医療手技の間、補助を提供するように構成されてもよい。ＡＲディスプレイシステムは、任意の好適な様式において、１人またはそれを上回る医療専門家を補助もしくは補完してもよいことを理解されるであろう。医療コンテキストでは、自宅における患者およびユーザもまた、種々の実施形態から利点を享受し得る。
多くの個人は、その人生におけるある時点において、診断および処置を要求する医学的状態または疾患を体験する。これらの状態は、とりわけ、例えば、心疾患、癌、脊柱疾患、および整形外科的傷害を含む、多数の形態をとり得る。有利には、いくつかの実施形態では、本明細書に開示される拡張現実（ＡＲ）ディスプレイシステムは、医療専門家のその患者の査定および処置を補助するように構成されてもよく、任意の治療段階において、それを行なってもよい。ＡＲディスプレイシステムは、医療結像、医療表示、および／または医療可視化が有用である、任意の好適なコンテキストにおいて使用されてもよい。例えば、ＡＲディスプレイシステムは、緊急処置室、手術室、医院、医師のオフィス、患者の自宅、および同等物において使用されてもよい。いくつかの実施形態では、ＡＲディスプレイシステムは、結像し、画像を表示し、画像を操作し、疾患および異常を診断し、処置オプションを提供し、ある健康問題を防止し、および／または医療手技の間、補助を提供するように構成されてもよい。ＡＲディスプレイシステムは、任意の好適な様式において、１人またはそれを上回る医療専門家を補助もしくは補完してもよいことを理解されるであろう。医療コンテキストでは、自宅における患者およびユーザもまた、種々の実施形態から利点を享受し得る。
【0213】
いくつかの実施形態では、ディスプレイシステムは、「接眼」ディスプレイ、例えば、ユーザの眼に近接し、その正面に位置付けられ得る、ディスプレイであってもよい。ディスプレイは、例えば、網膜を横断して種々のパターンで変動する焦点距離を伴って、強度変調された光のビームを走査することによって、画像を直接ユーザの眼の中に投影する、３次元立体ディスプレイであってもよい。走査パターンは、とりわけ、ラスタ、スパイラル、および／またはリサジューを含んでもよい。そのような種々のパターンを眼に投影するために、ディスプレイは、１つまたはそれを上回る走査ファイバを含む、走査ファイバディスプレイを備えてもよい。ディスプレイは、コリメートおよび発散ビームの両方を眼に生成することによって、画像を種々の深度に生産してもよく、これは、有利には、オブジェクトを視認者に表示するとき、より正常な遠近調節を可能にすることができる。いくつかの実施形態では、画像の深度または焦点距離は、光学要素、機械的構造、処理アルゴリズム、または任意のそれらの組み合わせによって、調節されてもよい。ディスプレイは、視認者が、透明ウィンドウ、レンズ、および／または他の透明光学を通して、正面の環境を見ることを可能にし、また、その環境のビューに、光を眼の中に指向し、そのような付加的、すなわち、「拡張」画像の形成を可能にする、光源を備える、ディスプレイによって提示される画像を追加し得る、拡張現実ディスプレイを備えてもよい。
【0214】
以下に議論されるように、付加的画像は、Ｘ線、ＣＴ、ＰＥＴ、またはＭＲＩ走査、超音波画像等の医療画像を含んでもよい。いくつかの実施形態では、医療画像のコントラストレベルは、調節されることができる。例えば、医療画像は、グレースケールであることができ、グレースケールのレベルは、組織タイプに固有であり得る。時として、医療画像のレベル数は、ヒトの眼が区別し得るものを上回り得る。例えば、８ビット画像は、２５６レベルを有することができ、これは、ヒトの眼が区別し得るものを上回り得る。いくつかの実施形態は、ヒトの眼によって区別され得るように、コントラストレベルを調節することができる。
【0215】
付加的画像はまた、例えば、医療計器または他のソースからの医療データまたは他の情報を備えてもよい。いくつかの実施形態では、ディスプレイシステム内に含まれる画像処理および／またはマシンビジョン技術は、形状を輪郭付けし、および／またはその体積の変化を測定し、ならびに／もしくはそのような画像または他の信号もしくはデータに基づいて、流体流量を測定するように構成されてもよい。他のタイプの情報もまた、表示されることができる。ディスプレイシステムは、そのような結像および感知されるデータのリアルタイムおよび／または後処理のために構成されてもよい。これは、有利には、ディスプレイシステムが、例えば、命令、測定、計算、および他の可視画像等の関連情報とともに、リアルタイム画像および／または視認後画像を拡張させることを可能にすることができる。
【0216】
本明細書に説明されるように、ディスプレイシステムは、１つまたはそれを上回る外向きに面したカメラを含んでもよい。いくつかの実施形態では、マシンビジョンは、ユーザの環境からの視覚的コンテンツを分析するために使用されてもよく、例えば、他の特徴またはコンポーネントの中でもとりわけ、色センサ、深度センサ、パターン認識装置、縁検出器、および／または世界カメラのうちの１つまたはそれを上回るものを含んでもよい。これらの１つまたはそれを上回るカメラからの画像は、ディスプレイ上に提示されてもよい。上記および本明細書のいずれかに議論されるように、ディスプレイ技術は、ユーザに、コンテンツが明確に見え、本明細書に議論されるように、種々の場合において地面を根拠とし得るように、深度平面、離散コンテンツ視認、および画像設置を使用してもよい（ピクセルスティック）。
【0217】
そのようなシステムは、加えて、例えば、画像センサ、加速度計、ジャイロスコープ、温度センサ、電極、圧力センサ等の１つまたはそれを上回るセンサを含んでもよい。いくつかの実施形態では、ディスプレイシステムは、高度計、気圧計、化学センサ、湿度／温度センサ、マイクロホン、スピーカ、ＧＰＳシステム、天候マップ、カレンダ、および／または他の情報源を含んでもよく、それぞれ、ユーザが、そのデバイス上で見て、それと相互作用する、コンテンツのタイプに寄与し得る。
【0218】
システムは、加えて、１つまたはそれを上回るレコーダおよび／または１つまたはそれを上回る他の外部入力ならびに／もしくは出力を含んでもよい。前述のように、マシンビジョンは、ディスプレイシステムが、マシンビジョンシステムの種々の入力（例えば、センサ）に対応する入力を受信し、それらをユーザの視野内に表示することを可能にし得る。画像および他の情報は、記憶および／または他のユーザに通過されてもよい。
【0219】
いくつかの実施形態では、結果は、同時にまたは履歴データの比較を通してのいずれかにおいて、収集および／または分析されてもよい。いくつかの実施形態では、ディスプレイシステムは、マシンビジョン技術を含み、医学的状態を診断してもよい。いくつかの実施形態では、例えば、外向きに面したカメラは、患者の状態に関する情報を集めるために使用されてもよい。また、いくつかの実施形態では、超音波、Ｘ線、ＭＲＩ、ＰＥＴ、ＣＴ、結像が、分析され、診断を提供してもよい。いくつかの実施形態では、例えば、デバイスは、超音波を超音波放出源としての変換器から出力し、返される超音波を測定し、組織密度を応答として判定し、患者についての情報を取得してもよい。例えば、図１０Ｂを参照されたい。故に、いくつかの実施形態では、頭部搭載型ディスプレイデバイスは、超音波源を含んでもよい。頭部搭載型ディスプレイはまた、放出される超音波からの戻り信号を受信、測定、および／または解釈するように構成される、受信機を含んでもよい。いくつかの実施形態は、受信された信号の測定および／または解釈の一部として、ドップラー効果または飛行時間を使用する。ある実施形態では、ディスプレイシステムは、超音波音波を電気信号に変換するように適合される、センサを備える。処理電子機器が、本明細書に開示されるように、そのような信号を処理するために使用されてもよい。いくつかの実施形態では、ソースおよび／または受信機は、１つまたはそれを上回る変換器を備えることができる。いくつかの実施形態では、ソースおよび／または受信機の１つまたはそれを上回る変換器は、ディスプレイシステム上に搭載されることができる。いくつかの実施形態では、ディスプレイデバイスは、伝搬媒体（例えば、空気、皮膚、液体、ゲル等）を通して伝搬するように、超音波を放出するように構成される。他の入力はまた、インポートされたデータ、例えば、画像、患者履歴ファイル、緊急医療記録、または外科手術症例メモを含んでもよく、これは、後に使用され、診断に役立てることができる。いくつかの実施形態では、デバイスは、パターン認識および処理電子機器を使用して、例えば、測定（例えば、病変長、超音波からの飛行時間データ）を実施し、患者の状態を評価してもよい。ある実施形態では、母集団標準が、デバイスによって行われるリアルタイム測定および／または観察と比較するために使用され得るように、記憶されることができる。そのような比較によって受信された情報を使用することによって、ある実施形態は、異常を画像データから識別することができる。そのような診断および／または判定は、放出、応答、測定、および／または分析プロセスのうちの１つまたはそれを上回るものを採用してもよい。そのような診断はまた、ある健康問題が生じないように防止するためにも使用されることができる。いくつかの実施形態では、集められた情報（例えば、履歴ベースの反応、母集団標準等）は、オブジェクト（例えば、骨構造）のより正確な表現および／または画像を形成する際に使用されることができる。収集および／または分析されるデータに応答して、ディスプレイシステムは、いくつかの実施形態では、情報キューを提供する、アラートを送信する、または他の応答を開始するように構成されてもよい。ディスプレイシステムの感知および表示能力は、任意の好適な様式において（例えば、センサおよび／または他のデバイスを用いて）、研究者、臨床医、患者、消費者、および同等物によって使用される任意の医療および消費者用途において有用性を有するように修正されてもよいことを理解されるであろう。
【0220】
１つまたはそれを上回る内向きに面したカメラは、ユーザの入力を検出するように構成されることができる。いくつかの実施形態では、１つまたはそれを上回る内向きに面したカメラは、眼移動、周囲眼組織を追跡する、および／またはユーザの瞳孔を追跡するように構成されてもよい。内向きに面したカメラは、ユーザの入力を検出するように構成される、網膜カメラを含んでもよい。いくつかのインスタンスでは、フィードバックが、ユーザパフォーマンスを査定し、適宜、コンテンツ（例えば、色、サイズ、場所等）を表示するために使用されることができる。例えば、目を細めることまたは眼瞼の下垂は、ユーザ疲労の兆候を示し得る。いくつかの実施形態のディスプレイシステムは、あるコンテンツをズームインし、および／またはコントラストを増加させ、ユーザをタスクに再従事させることによって、ディスプレイコンテンツを自動的に調節するように構成されることができる。別の実施例として、いくつかの実施形態では、瞳孔がオブジェクトに合焦されたままである時間は、測定されてもよく、ユーザの着目レベルとして解釈されてもよい。ディスプレイシステムは、ジェスチャ認識を含んでもよい。１つまたはそれを上回る外向きに面したカメラは、例えば、マシンビジョン、縁検出、オブジェクト認識、および／または慣性測定ユニット（ＩＭＵ）等を使用し、ユーザのジェスチャ、頭部姿勢、移動パターン等を理解してもよい。いくつかの実施形態では、ディスプレイシステムは、例えば、１つまたはそれを上回る信号、１つまたはそれを上回る信号の場所、オーディオ（例えば、音声）入力、および／または雑音の強度を認識可能なマイクロホンを含んでもよい。いくつかの実施形態では、ディスプレイシステムは、オーディオフィードバックを、例えば、ユーザに提供するためのスピーカを含んでもよい。
【0221】
患者医療走査からの３Ｄ仮想画像の生成
前述のように、ディスプレイシステムは、種々の医療結像モダリティ（例えば、ＣＴ、ＭＲＩ、ＰＥＴ、および／または超音波等）と組み合わせられ、例えば、骨、器官、軟骨、血液、癌性組織等を含む、種々の解剖学的特徴を可視化してもよい。例えば、いくつかの実施形態では、ディスプレイシステムは、組織体積（例えば、腫瘍体積）を測定し、健康対非健康組織の程度（例えば、健康対非健康組織の比率またはパーセンテージを取得する）を測定するように構成されてもよい。いくつかの実施形態では、可視化される組織の種々の側面が、分析および表示されてもよい。１つまたはそれを上回る医療結像モダリティと組み合わせられると、ディスプレイシステムは、有利には、医療用途のために、１つまたはそれを上回る３Ｄデータセットからのオブジェクトの３Ｄ仮想画像を生成し、それらをユーザに表示してもよい。これは、例えば、より現実的画像、視認者のためのより正確かつ自然な視認体験（例えば、オブジェクト画像が３Ｄで現れるため）、および医療手技における改善された正確度を可能にすることができる。例えば、いくつかのそのような組み合わせられた実施形態では、医師は、より精密な術前計画および手術のために、ディスプレイシステムを使用してもよい。手技精度の増加は、有利には、患者回復時間を低減させ、かつより多くの周囲健康組織を保存し得る。
前述のように、ディスプレイシステムは、種々の医療結像モダリティ（例えば、ＣＴ、ＭＲＩ、ＰＥＴ、および／または超音波等）と組み合わせられ、例えば、骨、器官、軟骨、血液、癌性組織等を含む、種々の解剖学的特徴を可視化してもよい。例えば、いくつかの実施形態では、ディスプレイシステムは、組織体積（例えば、腫瘍体積）を測定し、健康対非健康組織の程度（例えば、健康対非健康組織の比率またはパーセンテージを取得する）を測定するように構成されてもよい。いくつかの実施形態では、可視化される組織の種々の側面が、分析および表示されてもよい。１つまたはそれを上回る医療結像モダリティと組み合わせられると、ディスプレイシステムは、有利には、医療用途のために、１つまたはそれを上回る３Ｄデータセットからのオブジェクトの３Ｄ仮想画像を生成し、それらをユーザに表示してもよい。これは、例えば、より現実的画像、視認者のためのより正確かつ自然な視認体験（例えば、オブジェクト画像が３Ｄで現れるため）、および医療手技における改善された正確度を可能にすることができる。例えば、いくつかのそのような組み合わせられた実施形態では、医師は、より精密な術前計画および手術のために、ディスプレイシステムを使用してもよい。手技精度の増加は、有利には、患者回復時間を低減させ、かつより多くの周囲健康組織を保存し得る。
【0222】
実施例として、全摘出等の侵襲的外科手術介入は、大部分の良性脳腫瘍のための標準的処置を担っている。１つまたはそれを上回る結像モダリティと組み合わせて、ディスプレイシステムを使用した、腫瘍場所の正確な術前走査および計画は、より局所化された腫瘍切除および健康な周囲組織のより多くの温存を可能にし得る。別の実施例として、本明細書に説明されるシステムは、関節障害を診断するために使用されてもよい。例えば、生成された関節画像において、医師は、ズームし、関節の内側の流体を視認可能であり得る。医師は、関節痛と診断し得る。例えば、医師は、流体サンプルを採取してもよく、これは、流体中のバクテリアを露見させ得る（関節痛が感染症に起因し得ることを示す）。いくつかの実施形態では、ディスプレイシステムは、画像および／または画像との医師の相互作用に基づいて、流体サンプルが採取されることを推奨するように構成されてもよい。
【0223】
上記に説明されるように、ディスプレイシステムは、ＣＴ、ＭＲＩ、ＰＥＴ、超音波、またはそのような結像モダリティの組み合わせ（例えば、ＭＲＩおよびＰＥＴ、ＣＴおよびＰＥＴ、ＭＲＩおよび超音波、および／または任意の他の好適な組み合わせ）等の患者走査モダリティと組み合わせられ、種々の３Ｄ仮想画像を生成してもよい。ディスプレイデバイスを伴わない状況では、医師は、これまで、２Ｄ画像を視認し、真の３Ｄ画像をその想像上に「構築」していた。本明細書に説明されるディスプレイシステムは、有利には、患者の解剖学的構造のように見える、または患者の実際の解剖学的構造のレンダリングである、３Ｄ画像をレンダリングするように構成されてもよい。これらの３Ｄ画像は、医学的状態を診断するために、かつ学生が異なる視点からのこれらの２Ｄ画像をその頭の中で３Ｄモデルにレンダリングすることが困難であり得る、教育目的のために有益であり得る。
【0224】
いくつかの実施形態では、ディスプレイシステムは、人工知能を含み、患者走査モダリティから生成された画像を分析してもよい。このように、とりわけ、癌、糖尿病、または鬱血性心不全等の疾患が、例えば、機械学習技術を使用して、早期に診断され得る。いくつかの実施形態では、ディスプレイシステムは、母集団標準が識別された母集団の１つまたはそれを上回るデータベースをダウンロードする、またはそれにアクセスすることができる。母集団標準は、画像と比較され、例えば、病気の診断、症状の分析、および／または治療薬の処方を補助することができる。
【0225】
３Ｄ仮想画像操作および相互作用
前述のように、ディスプレイシステムは、例えば、複数の深度平面および導波管スタックを使用して、３次元画像を表示してもよい。これは、ユーザに、適切な遠近調節および輻輳・開散運動を用いて、眼からの種々の距離にあるかのようにレンダリングされるオブジェクトの画像に合焦する能力を与え得る。
前述のように、ディスプレイシステムは、例えば、複数の深度平面および導波管スタックを使用して、３次元画像を表示してもよい。これは、ユーザに、適切な遠近調節および輻輳・開散運動を用いて、眼からの種々の距離にあるかのようにレンダリングされるオブジェクトの画像に合焦する能力を与え得る。
【0226】
いくつかの実施形態では、ユーザは、遠隔装置または指を使用して、ディスプレイフィールド内の仮想コンテンツを操作する必要がない。代わりに、上記に説明されるように、ディスプレイデバイスは、眼移動、周囲眼組織を追跡する、瞳孔を追跡する、および同等物が可能な１つまたはそれを上回る内向きに面したカメラを含んでもよい。いくつかの実施形態では、ディスプレイシステムは、網膜カメラを含み、ユーザ入力を検出する。瞳孔がオブジェクトに合焦したままである時間は、ユーザの着目レベルとして解釈されることができる。いくつかの実施形態では、眼追跡技術は、ユーザが、眼の視線、眼を細めること、および／または１回またはそれを上回る瞬目を用いて、ならびに／もしくは他の方法において、仮想コンテンツを操作することを可能にすることができる。ある実施形態では、ディスプレイデバイスは、遠近調節および／または輻輳・開散運動における変動を検出することができる。本情報は、ユーザが画像を視認することに苦労していることを識別するために使用されることができる。いくつかの構成では、ディスプレイデバイスは、本情報を使用して、画像の一部を選択し、増強させる（例えば、拡大する）ことができる。マイクロホンおよび／またはスピーカ入力も、仮想コンテンツを操作するために使用されることができる。
【0227】
様々な３Ｄ視覚的操作が、可能性として考えられ、そのような操作は、多くの用途を有する。例えば、いくつかの実施形態では、ユーザは、仮想解剖学的画像をセグメント化し（例えば、白質または腫瘍の周囲に輪郭を描く）、身体部分を抽出し、身体部分の一部を抽出し、組織層を選択し、走査内のある解剖学的構造に合焦させ（例えば、骨のみを示し、軟質組織を示さない）、ズームし、平行移動させ、回転させ、および／または再位置付けし、それを修正し、および／またはそれを精密に検査することが可能であり得る。いくつかの実施形態は、医療結像結果から集められた情報を使用して、異なる組織タイプをカテゴリ化および／またはセグメント化することができる。例えば、種々のインスタンスでは、画像のグレースケールの類似値は、類似組織タイプを示す。故に、同一組織タイプを備えるエリアは、識別されることができる。いくつかの構成では、例えば、ｋ平均法クラスタリングが、ある組織または共通特徴を共有する組織を識別、ハイライト、および／またはセグメントするために使用されることができる。例えば、いくつかの実施形態は、ユーザが、組織の選択されたセクションを「オフ」にする（例えば、暗くする）ことを可能にする。例えば、血液および血管のみが示されることが所望される場合、他の組織およびセクションは、表示される必要はない。これ等の仮想画像操作は、例えば、脊柱外科手術の場合、特に有益であり得、本明細書に説明される画像操作は、ユーザが、切開およびその器具の軌道を正確に計画することを可能にし得る。別の実施例として、ユーザは、心臓の仮想画像を回転させ、閉塞された動脈がより良好に見え得る。ユーザは、その好みに合わせて、心臓の画像を拡大または移動させてもよい。ＭＲＩ、ＣＴ、ＰＥＴ結像モダリティを使用して、いくつかの実施形態では、ディスプレイシステムは、迅速、効率的、かつ低侵襲的視覚的参照のために、異常の場所（例えば、閉塞された動脈の場所）を仮想３Ｄ画像内に表示するように構成されてもよく、これは、有利には、より高速の手技および医師がより多くの情報を持つことにつながり得る。３Ｄ視覚的操作の使用はまた、例えば、他の医療用途の中でもとりわけ、ステント留置、除去のための腫瘍の位置特定、生検サンプルの採取のために有益であり得る。
【0228】
いくつかの実施形態では、３Ｄ視覚的操作特徴は、並置された３Ｄおよび２Ｄ画像の一部を画面上で操作することによって（例えば、横並、重畳等）、埋込計画のために使用されてもよい。正確な２Ｄおよび３Ｄ画像は、有利には、ユーザが、特に、脊柱のような重要なエリアにおいて、インプラントをより安全に位置付けることを可能にし得る。別の実施例として、３Ｄ視覚的操作特徴は、より正確な整形外科的インプラント留置および計画を可能にし得る。例えば、患者の腰／膝／脚の、医療結像の規格である、医用におけるデジタル画像と通信（ＤＩＣＯＭ）に基づく、画像セットの３Ｄレンダリングおよび／または操作が、参照され、２Ｄ ＣＴ画像を用いた計画と比較して、脚長、オフセット、および使用されるべき寛骨臼カップのバージョンをより良好に計画し、腰に埋め込まれるための人工コンポーネントをより正確に選択し得る。ディスプレイシステムは、有利には、ユーザが、その術前計画を３Ｄで見て、より詳しい情報が与えられた状態に保つことを可能にし得る。前述はまた、インプラント除去計画ならびに他の医療手技に適用されてもよい。いくつかの実施形態では、ディスプレイシステムは、ユーザインターフェースを含んでもよい。例えば、いくつかの実施形態では、ユーザインターフェースは、メニューのように使用され、インプラントサイズ、位置、傾斜、バージョン、回転、平行移動、留置方略、および／または同等物を調節することができる。
【0229】
前述のように、ディスプレイシステムは、血液循環を含む、医学的状態、解剖学的および生理学的移動、および／または身体の内側の相互作用をリアルタイムで（および／または後処理を介して）診断するために使用されてもよい。実施例として、糖尿病合併症は、多くの場合、神経損傷および血液循環不良を含む。これらの問題は、迅速に悪化し、処置することが困難になり得る、皮膚潰瘍を足に被らせ得る。非治癒潰瘍は、爪先、足、または脚の一部の切断を要求し得る。慎重な足の治療が、概して、したがって、潰瘍を防止するために重要である。本明細書に説明されるディスプレイシステムは、センサまたは結像システム（例えば、超音波結像）を含むことができ、データを評価するための処理電子機器は、循環を監視し、ユーザが、潰瘍形成前または後に、循環不良をタイムリーに識別することを可能にするように構成されてもよい。例えば、ディスプレイシステムは、患者内の血流集中のためのＭＲＩ走査および／または血液のリアルタイム血流のための超音波に依拠することができる。いくつかの実施形態では、ディスプレイシステムを使用した循環不良の早期検出は、有利には、医師が、医療循環関連合併症が発症する（例えば、糖尿病または喫煙から）前に、循環増強補助剤を処方することを可能にし得る。
【0230】
画像スライシング
上記に説明されるように、ディスプレイシステムは、ユーザが、種々の患者走査モダリティ（例えば、ＭＲＩ、ＣＴ、ＰＥＴ等）のスライスを通してナビゲートし、各スライスが明確に見え得るように、画像を１つまたはそれを上回る深度平面として提供するように構成されてもよい。いくつかの実施形態では、ディスプレイシステムは、ユーザが、画像に適切に合焦し、それによって、疲労および／または眼精疲労を低減させることを可能にする、深度平面を用いて構成されてもよい、および／またはそれを使用するように構成されてもよい。異なる深度平面から生じるかのように異なる深度と関連付けられた異なる画像コンテンツの提示は、適切な遠近調節および輻輳・開散運動を助長し、それによって、眼精疲労および／または疲労を低減させることができる。付加的利点は、ユーザが、可能性として、患者走査の各スライスまたは少なくとも複数のスライスを通して「スライス毎」に通過させることによって、画像を操作可能であり得ることである。ユーザは、例えば、別個のスライスを、異なる時間、可能性として、異なる深度平面および／またはスライス角度において視認してもよい。ユーザは、スライスを順序通りまたは順序から外れて視認してもよい。いくつかの実施形態では、１つを上回る患者走査が、ディスプレイシステムに提示されることができる。ユーザは、１つまたはそれを上回る患者走査の種々のスライスを通して、ナビゲートおよびトグル可能であり得る。ユーザは、ある場合には、ユーザが３Ｄ画像の２Ｄスライスを通してスクロールすることが可能な３Ｄ画像を提示されてもよい。本特徴は、例えば、より正確なインプラントの位置付けを可能にし得る。本「スライス毎」アプローチは、例えば、複数の組織層を横断して腫瘍を視認する際、または種々の脳異常を視認するために有益であり得るが、任意の好適な用途が、理解される。
上記に説明されるように、ディスプレイシステムは、ユーザが、種々の患者走査モダリティ（例えば、ＭＲＩ、ＣＴ、ＰＥＴ等）のスライスを通してナビゲートし、各スライスが明確に見え得るように、画像を１つまたはそれを上回る深度平面として提供するように構成されてもよい。いくつかの実施形態では、ディスプレイシステムは、ユーザが、画像に適切に合焦し、それによって、疲労および／または眼精疲労を低減させることを可能にする、深度平面を用いて構成されてもよい、および／またはそれを使用するように構成されてもよい。異なる深度平面から生じるかのように異なる深度と関連付けられた異なる画像コンテンツの提示は、適切な遠近調節および輻輳・開散運動を助長し、それによって、眼精疲労および／または疲労を低減させることができる。付加的利点は、ユーザが、可能性として、患者走査の各スライスまたは少なくとも複数のスライスを通して「スライス毎」に通過させることによって、画像を操作可能であり得ることである。ユーザは、例えば、別個のスライスを、異なる時間、可能性として、異なる深度平面および／またはスライス角度において視認してもよい。ユーザは、スライスを順序通りまたは順序から外れて視認してもよい。いくつかの実施形態では、１つを上回る患者走査が、ディスプレイシステムに提示されることができる。ユーザは、１つまたはそれを上回る患者走査の種々のスライスを通して、ナビゲートおよびトグル可能であり得る。ユーザは、ある場合には、ユーザが３Ｄ画像の２Ｄスライスを通してスクロールすることが可能な３Ｄ画像を提示されてもよい。本特徴は、例えば、より正確なインプラントの位置付けを可能にし得る。本「スライス毎」アプローチは、例えば、複数の組織層を横断して腫瘍を視認する際、または種々の脳異常を視認するために有益であり得るが、任意の好適な用途が、理解される。
【0231】
患者上方の画像ディスプレイ
いくつかの実施形態では、ディスプレイシステムは、２Ｄおよび／または３Ｄ画像を患者の解剖学的構造の上方に表示してもよい。例えば、図１２Ｂを参照されたい。いくつかの実施形態では、２Ｄおよび／または３Ｄ仮想画像は、世界（例えば、環境、不動患者等）を根拠としてもよい。仮想画像を患者の適切な解剖学的構造部位の上方に表示するために、ディスプレイシステム上の１つまたはそれを上回る外向きに面したカメラが、患者の解剖学的構造の種々の側面を結像するように構成されてもよく、処理電子機器が、画像処理を用いて、それを認識するように構成されてもよい。例えば、ディスプレイシステムは、上記に説明される結像モダリティ（例えば、ＣＴ、ＰＥＴ、ＭＲＩ等）のうちの１つまたはそれを上回るものの補助の有無にかかわらず、種々の系（例えば、循環系、大脳辺縁系、神経系システム）、器官（例えば、肝臓、胃、心臓、肺、脳、胆嚢、膵臓、盲腸、腎臓等）、四肢（例えば、腕、脚）、組織（例えば、骨、筋肉、脂肪等）、または任意の他の好適な解剖学的特徴もしくは属性を識別可能であり得る。いくつかの実施形態では、ディスプレイシステムは、各身体部分、器官等が位置する場所を把握し、解剖学的構造、環境等に従って、仮想画像を正確に設置するように構成されてもよい。例えば、いくつかの実施形態では、ディスプレイシステムは、縁検出（例えば、１つまたはそれを上回るカメラまたは結像デバイスおよび／または処理電子機器のうちの１つまたはそれを上回るものと統合される）を含み、仮想画像を患者に対して（例えば、器官または関連する解剖学的構造の上方に）正しく位置付けてもよい。いくつかの実施形態では、１人またはそれを上回るユーザが、仮想画像をその視点の仮想画像に対して（例えば、各ユーザが立っている／画像を視認している場所から）視認してもよい。
いくつかの実施形態では、ディスプレイシステムは、２Ｄおよび／または３Ｄ画像を患者の解剖学的構造の上方に表示してもよい。例えば、図１２Ｂを参照されたい。いくつかの実施形態では、２Ｄおよび／または３Ｄ仮想画像は、世界（例えば、環境、不動患者等）を根拠としてもよい。仮想画像を患者の適切な解剖学的構造部位の上方に表示するために、ディスプレイシステム上の１つまたはそれを上回る外向きに面したカメラが、患者の解剖学的構造の種々の側面を結像するように構成されてもよく、処理電子機器が、画像処理を用いて、それを認識するように構成されてもよい。例えば、ディスプレイシステムは、上記に説明される結像モダリティ（例えば、ＣＴ、ＰＥＴ、ＭＲＩ等）のうちの１つまたはそれを上回るものの補助の有無にかかわらず、種々の系（例えば、循環系、大脳辺縁系、神経系システム）、器官（例えば、肝臓、胃、心臓、肺、脳、胆嚢、膵臓、盲腸、腎臓等）、四肢（例えば、腕、脚）、組織（例えば、骨、筋肉、脂肪等）、または任意の他の好適な解剖学的特徴もしくは属性を識別可能であり得る。いくつかの実施形態では、ディスプレイシステムは、各身体部分、器官等が位置する場所を把握し、解剖学的構造、環境等に従って、仮想画像を正確に設置するように構成されてもよい。例えば、いくつかの実施形態では、ディスプレイシステムは、縁検出（例えば、１つまたはそれを上回るカメラまたは結像デバイスおよび／または処理電子機器のうちの１つまたはそれを上回るものと統合される）を含み、仮想画像を患者に対して（例えば、器官または関連する解剖学的構造の上方に）正しく位置付けてもよい。いくつかの実施形態では、１人またはそれを上回るユーザが、仮想画像をその視点の仮想画像に対して（例えば、各ユーザが立っている／画像を視認している場所から）視認してもよい。
【0232】
いくつかの実施形態では、２Ｄおよび／または３Ｄ画像は、上記に説明されるように、操作されてもよい。例えば、外科医は、外科手術（または任意の他の手技）の間、画像を操作し、より良好な可視化を提供可能であり得る。いくつかの実施例として、画像は、医師が、外科手術に先立って、および／または外科手術の間、仮想画像を回転させ、動脈内の閉塞または脊椎円板への損傷をより良好に見ることを可能にするように構成されてもよい。
【0233】
いくつかの実施形態では、上記に説明されるように、ユーザは、別個のコンピュータ画面を見る必要なく、かつ手ジェスチャまたは遠隔制御を使用する必要なく、２Ｄおよび／または３Ｄ画像を操作してもよい。これは、特に、手技の間の滅菌性が重要である場合、外科医にとって有益であり得る。例えば、いくつかの実施形態では、ディスプレイシステムは、ユーザが、その眼または口頭（例えば、音声）通信を使用して、例えば、仮想画像上の照明、仮想画像と環境との間のコントラスト、画像の配向、画像のサイズ、または任意の他の好適な特徴を含む、仮想画像の種々の特徴を調節することを可能にするように構成されてもよい。いくつかの実施形態では、１人またはそれを上回るユーザが、同時に、同一画像を視認および操作してもよい。ある場合には、１人のユーザが、仮想画像を操作する場合、他の視認者には、その仮想画像が操作された通りに見える。ある場合には、しかしながら、異なるユーザは、他の視認者の仮想画像のビューに影響を及ぼさずに、独立して、仮想画像を操作することができる。
【0234】
いくつかの実施形態では、例えば、乳房、前立腺、および心臓等の軟組織器官の画像は、患者の上方で視認および操作され、ユーザが、付随し得る手技を可視化し、および／または他の器官、腫瘍場所、正しい解剖学的構造等との空間関係等の重要な情報を提供することに役立ち得る。別の実施例として、破損または断裂椎骨の１つまたはそれを上回る画像が、患者の解剖学的構造の上方で視認および操作され、脊柱損傷に関連するより正確な測定および診断を可能にし得るが、任意のタイプの骨破損／断裂が、理解される。例えば、距離および角度の測定が、取得されてもよい。有利には、ディスプレイシステムは、ユーザが、破損骨を理論的に再整合させ、画像を実際の解剖学的構造にわたって重畳させ、手技および／または予期される外科手術転帰をシミュレートすることを可能にするように構成されてもよい。例えば、脊柱外科医は、外科手術を開始する前またはその後の任意の時間に、その標的転帰をその患者の破損椎骨にわたって重畳させることが可能であり得る。別の実施例として、美容整形手術を検討している患者は、その新しい見た目を「試す」手段として、拡張をその実際の解剖学的構造にわたって重畳させ得る。いくつかの実施形態では、仮想コンテンツはまた、ユーザがメニューを使用して仮想コンテンツ（例えば、サイズ、位置、形状等）を操作し得る、メニューから成ってもよい。いくつかの実施形態では、本特徴は、ユーザが、手術し得る椎骨を見ることを可能にし得る。破損または断裂骨に関して、例えば、Ｘ線、ＭＲＩ等の好適な結像モダリティからの画像および処理電子機器を介した好適な画像処理を提供して、ディスプレイシステムは、画像から、骨を検出し、次いで、異常を検出し、測定を取得してもよい。ディスプレイシステムはまた、シミュレートされた正しい骨整合（術前計画を用いて）を患者の解剖学的構造にわたって投影し、ユーザが破損を修復することを補助するように構成されてもよい。別の実施例として、ディスプレイシステムは、ユーザが、骨セメントが１つまたはそれを上回る椎骨の中に注入される、断裂椎骨のための疼痛軽減手技である、椎骨形成術を行うことを補助するために使用されてもよい。ディスプレイシステムの結像は、有利には、椎骨内へのより精密なセメント留置を可能にし得る。
【0235】
患者にわたる拡張および／または仮想コンテンツの表示は、画像の組み合わせ（例えば、患者走査の組み合わせ）として表示されてもよい。例えば、いくつかの実施形態は、医療画像と異なる診断モダリティを整合させ（例えば、画像間位置合わせ）、組み合わせられた情報をユーザに提供するように構成されてもよい。いくつかのインスタンスでは、ＭＲＩ、ＣＴ、ＰＥＴ、単一光子放射断層撮影（ＳＰＥＣＴ）、磁気共鳴血管画像（ＭＲＡ）、コンピュータ断層血管造影法（ＣＴＡ）等からの１つまたはそれを上回る画像は、組み合わせられてもよい（例えば、重畳される）。一実施例として、ＭＲＩおよびＰＥＴ画像は、１つの画像内にオーバーレイされた解剖学的情報および代謝活性を表示してもよい。そのような組み合わせられた情報は、ユーザが、異常をより迅速かつ正確に診断することを補助することができる。種々の実施形態は、アルゴリズムを含み、複数の結像モダリティをユーザが視認するための組み合わせられた仮想視覚的画像の中に調和させ、いくつかのインスタンスでは、操作することができる。いくつかの実施形態では、組み合わせられた画像はまた、本明細書に説明されるように、患者の実際の解剖学的構造と整合されることができる。
【0236】
いくつかの実施形態では、ディスプレイシステムは、ユーザが画面と外科手術部位との間を往復して見る必要がないように、仮想画像を患者のユーザの視野内に人間工学的に投影してもよい（例えば、画像ナビゲーションのため、または患者目印を求め、患者の実際の解剖学的構造に位置合わせするため）。例えば、画像は、患者の解剖学的構造の直上に投影され、図１２Ｂに示されるように、手技の容易性および効率を増加させてもよい。これは、治療奉仕者（例えば、医師）が、より多くの注意および時間を患者に向けることを可能にすることができる。他の実施形態では、画像は、患者の解剖学的構造（例えば、実際の患者の解剖学的構造上の位置合わせ点表示）上に投影されてもよく、したがって、医師は、解剖学的構造をプローブ／位置合わせすべき箇所を把握する。
【0237】
いくつかの実施形態では、ディスプレイシステムは、ユーザが、手動全膝置換を行うことを補助するように構成されてもよく、これは、例えば、大腿部における５箇所の切断と、脛骨における１箇所の切断とを含み得る。大腿部における５箇所の切断のために、残りの４箇所の切断は、最初の切断に基づいてもよい。本理由から、最初の切断のために、切断ブロックを正確に位置付けることが、重要であり得る。ディスプレイシステムは、有利には、リアルタイム位置付け補助を提供し、術前計画に従って、手動切除ブロックを位置付けてもよい。種々の実施形態は、ディスプレイシステムが膝の解剖学的構造を認識するように構成され得るため、仮想コンテンツの位置付けを補助するために使用されてもよい。いくつかの実施形態はまた、切断ブロックの位置付けのために使用されてもよい。例えば、いくつかの実施形態では、切断ガイドラインは、膝に対するユーザの位置が非関連であるように、世界（例えば、膝）を根拠としてもよい。いくつかの実施形態では、仮想コンテンツは、基準点（例えば、膝）から投影されてもよい。縁検出または他の画像処理技法も、例えば、ディスプレイシステムが適切な設置のために患者の骨の縁を認識し得るように、使用されてもよい。縁検出の別の実施例は、外科手術ツール先端（例えば、メス、ドリル先端等）の縁を認識するデバイスに適用されてもよい。
【0238】
いくつかの実施形態は、有利には、仮想コンテンツを関連解剖学的特徴等の患者の解剖学的構造の上方に表示し（例えば、オブジェクト／解剖学的構造を認識することによって）、切開ガイドラインを、ユーザではなく、患者を根拠としてもよい。いくつかの実施形態では、切開ガイドラインは、より精密な切開のために、患者にわたって投影されてもよく、これは、回復時間を短縮させ得る。例えば、いくつかの実施形態では、仮想画像コンテンツは、患者の解剖学的構造の１つまたはそれを上回る部分の上方に表示される、もしくはその上に重畳され、切断すべき場所を示してもよく、異なる切断のためのラベル（例えば、５ｍｍポート、５ｍｍアシスタントポート、１０ｍｍカメラポート等）を含んでもよい。他の用途もまた、可能性として考えられる。
【0239】
リアルタイム仮想結像およびディスプレイ
ディスプレイシステムの種々の実施形態は、ユーザに、実オブジェクトのリアルタイム３Ｄ画像を提供することができる。前述のように、画像のための信号は、外向きに面したビデオカメラ、および／または電磁波または音波等の他のエネルギー源を利用して、ヒト身体の一部等の標的をプローブする、器具もしくはセンサから受信されてもよい。いくつかの実施形態では、ディスプレイシステムは、超音速または超音波情報に基づいて、オブジェクトの画像を提示してもよい。例えば、図１０Ｂを参照されたい。超音波を生成する超音波源は、それらの超音波を結像されるべきオブジェクト上に指向するために配置されてもよい。超音波に敏感な変換器は、オブジェクトに指向された後、受信された超音波を検出および測定してもよい。本オブジェクトは、患者であってもよく、これらの超音波は、ヒト身体の解剖学的構造および／または生理学を結像するために採用されてもよい。例えば、いくつかの実施形態では、ディスプレイデバイスは、超音波技術を使用して、人物の血管を通る血流を感知することができる。ディスプレイデバイスは、したがって、人物の血流を結像するように構成されてもよい。その結果、ディスプレイは、潜在的に、ユーザが、人物に物理的に接触せずに、個人の脈を見るおよび／または測定することを可能にし得る。前述のように、ディスプレイデバイスは、３Ｄであるようにユーザに現れる、画像を提示するように構成されてもよい。本画像は、ある場合には、リアルタイム画像であってもよく、および／または患者上にオーバーレイされて現れてもよい。加えて、前述のように、ユーザは、潜在的に、画像を操作し、例えば、レンダリングされる画像の所望のビューを選択することができる。
ディスプレイシステムの種々の実施形態は、ユーザに、実オブジェクトのリアルタイム３Ｄ画像を提供することができる。前述のように、画像のための信号は、外向きに面したビデオカメラ、および／または電磁波または音波等の他のエネルギー源を利用して、ヒト身体の一部等の標的をプローブする、器具もしくはセンサから受信されてもよい。いくつかの実施形態では、ディスプレイシステムは、超音速または超音波情報に基づいて、オブジェクトの画像を提示してもよい。例えば、図１０Ｂを参照されたい。超音波を生成する超音波源は、それらの超音波を結像されるべきオブジェクト上に指向するために配置されてもよい。超音波に敏感な変換器は、オブジェクトに指向された後、受信された超音波を検出および測定してもよい。本オブジェクトは、患者であってもよく、これらの超音波は、ヒト身体の解剖学的構造および／または生理学を結像するために採用されてもよい。例えば、いくつかの実施形態では、ディスプレイデバイスは、超音波技術を使用して、人物の血管を通る血流を感知することができる。ディスプレイデバイスは、したがって、人物の血流を結像するように構成されてもよい。その結果、ディスプレイは、潜在的に、ユーザが、人物に物理的に接触せずに、個人の脈を見るおよび／または測定することを可能にし得る。前述のように、ディスプレイデバイスは、３Ｄであるようにユーザに現れる、画像を提示するように構成されてもよい。本画像は、ある場合には、リアルタイム画像であってもよく、および／または患者上にオーバーレイされて現れてもよい。加えて、前述のように、ユーザは、潜在的に、画像を操作し、例えば、レンダリングされる画像の所望のビューを選択することができる。
【0240】
前述のように、ディスプレイデバイスは、オブジェクトの複数の画像および／または走査（例えば、Ｘ線画像、ＣＴ、ＰＥＴ、またはＭＲＩ走査等）からのデータを組み合わせ、オブジェクトの３Ｄ画像をレンダリングすることができる。ある場合には、３Ｄ画像は、同一結像モダリティ内の複数の画像から、または同一タイプの走査（例えば、超音波またはＸ線）から取得されるデータから作成される。いくつかのインスタンスでは、複数のモダリティからの情報（例えば、超音波に加え、ＭＲＩ走査データ）が、組み合わせられ、３Ｄ画像をレンダリングすることができる。前述のように、ディスプレイデバイスは、ユーザの視野内のオブジェクトまたは複数のオブジェクトのタイプを検出するように構成されてもよい。いくつかの実施形態では、ディスプレイデバイスは、ユーザの所望または必要性に好適であろう、画像モダリティを判定することができる。例えば、医療手技の間、頸部を結像するとき、ディスプレイデバイスは、３Ｄリアルタイム画像をユーザに提供することが外科手術の間の使用のための最良モダリティであることを自動的に検出するように構成されてもよい。ディスプレイシステムはまた、超音波、Ｘ線、ＭＲＩ等を使用して、ユーザの視野（例えば、中心視野）内の特定の解剖学的特徴を結像すべきかどうか等、モダリティを選択するように構成されてもよい。画像モダリティは、ある設計のために、自動的におよび／または事前に判定されることができる。本画像は、ある場合には、リアルタイム画像であってもよい。いくつかの実施形態では、ディスプレイデバイスは、前の結像モダリティ（例えば、ＭＲＩ）に基づいて、オブジェクトの３Ｄレンダリングを構築してもよく、新しいデータ（例えば、超音波）に基づいて、３Ｄレンダリングをリアルタイムで更新することができる。Ｘ線もまた、例えば、血管造影法およびステント留置等において、リアルタイムで使用されることができる。
【0241】
上記に説明されるように、ディスプレイデバイスは、特定のオブジェクトの画像が表す、身体部分を自動的に判定するように構成されてもよい。例えば、ディスプレイデバイスは、異なる器官、骨、または他の解剖学的部分を判別可能であることができる。別の実施例として、ディスプレイデバイスは、癌組織と健康組織を判別可能であることができる。いくつかの実施形態では、ディスプレイデバイスは、固有の品質（例えば、組織密度、吸収率、減衰）および結像の間の得られた影響（例えば、画像のグレースケール）に基づいて、近隣組織の境界を判別することができる。別の実施例として、ディスプレイデバイスは、破損骨、腫瘍、および／またはポリープ等の身体中の異常を判別可能であることができる。
【0242】
いくつかの実施形態では、ディスプレイデバイスは、オブジェクトに追加またはそこから除去された物質量を検出および測定することができる。例えば、いくつかの実施形態では、ディスプレイデバイスは、外科手術の間に除去された癌組織の量を自動的に確認することができ（例えば、切断ツールの角度および／または軌道に基づいて）、除去されるべき残っている癌性組織の量を判定することができる。ある実施形態では、ディスプレイデバイスは、手技が不完全である場合（例えば、全ての癌組織が除去されていない場合）、フィードバック（例えば、視覚的、聴覚的等）をユーザに提供することができる。
【0243】
ディスプレイデバイスは、種々の外部デバイスと連動するように構成されることができる。いくつかの実施形態では、ディスプレイデバイスは、データを外部デバイスから受信し、それをユーザに表示することができる。例えば、いくつかの実施形態では、医師は、癌性ポリープのために、内視鏡を使用して、鼻腔を視認してもよい。この場合、ディスプレイデバイスは、結像データを内視鏡から受信し、内視鏡画像をユーザのためにディスプレイ上にレンダリングし、および／または内視鏡の位置を追跡する（例えば、内視鏡に取り付けられる６ＤＯＦデバイスを使用して）ように構成されることができる。いくつかの実施形態では、画像は、他のタスクを実施（例えば、医療手術を実施）しながら、オーバーレイされた画像を見ることの困難を低減または最小限にするように、ディスプレイ上の便宜的場所に投影されることができる。ディスプレイデバイスは、リアルタイム画像をレンダリングし、および／または鼻腔ポリープを除去するための手技が進行するにつれて、更新を医師に提供し得る。別の実施例では、ディスプレイデバイスのある実施形態は、患者の血管系の一部を結像することができる。そのような結像は、ディスプレイデバイスを通して、ユーザの患者のビューにわたる重畳として、リアルタイムで表示され得る。本リアルタイム画像は、外科手術部位または患者の身体の関連部分に対して（例えば、それに隣接して）並置されてもよい。これは、例えば、手技（例えば、ある投薬量の薬物の送達、外科手術ナビゲーション等）を実施する際、ユーザを補助し得る。類似実施例では、妊婦の腹部または中央部の上方の胎児の超音波画像が、医療従事者のディスプレイによって、眼の中に投影され、超音波のリアルタイム３Ｄ画像を提供することができる。前述のように、いくつかの実施形態では、ユーザは、例えば、本明細書に説明されるように、眼移動、表情、指移動、または他の信号を使用したコマンドを用いて、オーバーレイされた画像を操作することができる。ある場合には、ユーザは、任意の軸（またはそれらの組み合わせ）を中心として回転させる、またはそれに沿って平行移動させることによって、オブジェクトを操作することができる。したがって、いくつかの実施形態では、ユーザは、６自由度を使用して、画像を操作することができる。
【0244】
仮想コンテンツの共有
ある実施形態では、ディスプレイデバイスによって受信された情報は、そのようなデバイスの他のユーザまたは非ユーザに伝送されることができる。いくつかの実施形態では、ディスプレイデバイスは、オブジェクトの画像（例えば、ディスプレイデバイス上の外向きに面したカメラまたは他のセンサもしくは結像システムを使用して）をレンダリングし、本画像を複数のユーザに同時に提供することができる。ある場合には、画像は、例えば、Ｘ線、ＭＲＩ、ＣＴ技術から集められたもののような２Ｄ走査からコンパイルされた３Ｄ画像であってもよい。いくつかの実施形態では、各ディスプレイデバイスは、各ユーザがオブジェクトをオブジェクトに対して異なる位置から視認しているかのように、同一オブジェクトの画像を各ユーザに提示することができる。例えば、医師のグループは、画像がピクセルスティックを介して地面を根拠とされるであろうため、立っている場所からの視点から、そのデバイスのそれぞれにおいて、患者走査の仮想画像、解剖学的構造等を視認することができる。これは、複数の意見、教育／訓練補助、専門家助言、外科手術計画等を有することによって、診断を補助するであろう。いくつかの構成では、ユーザは、オブジェクトを視認している場所から、仮想場所をオブジェクトに対して選択することができる。例えば、ユーザは、ユーザが外科手術のために存在していない場合でも、手術を実施している外科医の直接背後またはその近傍からであるように、外科手術を視認し得る。さらに、そのような実施形態では、ユーザの仮想場所は、異なる視認角度を達成するように、ユーザの方向に変化され得る。種々の実施形態では、したがって、頭部搭載型ディスプレイは、相互に通信する、または他のコンポーネントを含む場合とそうではない場合がある、ネットワークに接続されてもよい。ユーザのディスプレイデバイスから取得される画像ならびに他の情報は、非ユーザにも同様に電子的に伝送され得る。例えば、１つまたはそれを上回る頭部搭載型ディスプレイ上に搭載される１つまたはそれを上回るカメラは、環境内のオブジェクトおよび場所のデータベースを構築するように、環境（例えば、手術室）を結像し、環境内のオブジェクト（手術台、器具、患者、周囲の人々等）の場所に関する情報を集めることができる（可能性として、測距計または距離測定システムを使用して）。例えば、頭部搭載型ディスプレイデバイスの既知の位置（例えば、ＧＰＳを使用して）およびオブジェクトから頭部搭載型ディスプレイまでの距離を用いて、３Ｄ空間（例えば、ｘ、ｙ、ｚ座標）内のオブジェクトの場所が、把握され、データベース内に記憶されることができる。異なる頭部搭載型デバイスは、疎点のマップを送信し、環境の３Ｄマップを構築することができる。データベースは、環境内でより多くの時間が費やされるほど成長する。ある場合には、縁検出は、オブジェクト、例えば、手術台、器具トレイ、機器、または患者を判定することができる。
ある実施形態では、ディスプレイデバイスによって受信された情報は、そのようなデバイスの他のユーザまたは非ユーザに伝送されることができる。いくつかの実施形態では、ディスプレイデバイスは、オブジェクトの画像（例えば、ディスプレイデバイス上の外向きに面したカメラまたは他のセンサもしくは結像システムを使用して）をレンダリングし、本画像を複数のユーザに同時に提供することができる。ある場合には、画像は、例えば、Ｘ線、ＭＲＩ、ＣＴ技術から集められたもののような２Ｄ走査からコンパイルされた３Ｄ画像であってもよい。いくつかの実施形態では、各ディスプレイデバイスは、各ユーザがオブジェクトをオブジェクトに対して異なる位置から視認しているかのように、同一オブジェクトの画像を各ユーザに提示することができる。例えば、医師のグループは、画像がピクセルスティックを介して地面を根拠とされるであろうため、立っている場所からの視点から、そのデバイスのそれぞれにおいて、患者走査の仮想画像、解剖学的構造等を視認することができる。これは、複数の意見、教育／訓練補助、専門家助言、外科手術計画等を有することによって、診断を補助するであろう。いくつかの構成では、ユーザは、オブジェクトを視認している場所から、仮想場所をオブジェクトに対して選択することができる。例えば、ユーザは、ユーザが外科手術のために存在していない場合でも、手術を実施している外科医の直接背後またはその近傍からであるように、外科手術を視認し得る。さらに、そのような実施形態では、ユーザの仮想場所は、異なる視認角度を達成するように、ユーザの方向に変化され得る。種々の実施形態では、したがって、頭部搭載型ディスプレイは、相互に通信する、または他のコンポーネントを含む場合とそうではない場合がある、ネットワークに接続されてもよい。ユーザのディスプレイデバイスから取得される画像ならびに他の情報は、非ユーザにも同様に電子的に伝送され得る。例えば、１つまたはそれを上回る頭部搭載型ディスプレイ上に搭載される１つまたはそれを上回るカメラは、環境内のオブジェクトおよび場所のデータベースを構築するように、環境（例えば、手術室）を結像し、環境内のオブジェクト（手術台、器具、患者、周囲の人々等）の場所に関する情報を集めることができる（可能性として、測距計または距離測定システムを使用して）。例えば、頭部搭載型ディスプレイデバイスの既知の位置（例えば、ＧＰＳを使用して）およびオブジェクトから頭部搭載型ディスプレイまでの距離を用いて、３Ｄ空間（例えば、ｘ、ｙ、ｚ座標）内のオブジェクトの場所が、把握され、データベース内に記憶されることができる。異なる頭部搭載型デバイスは、疎点のマップを送信し、環境の３Ｄマップを構築することができる。データベースは、環境内でより多くの時間が費やされるほど成長する。ある場合には、縁検出は、オブジェクト、例えば、手術台、器具トレイ、機器、または患者を判定することができる。
【0245】
種々のインスタンスでは、ディスプレイデバイスは、空間関係を割り当てる、および／または計算するための参照点を実世界内に設定することができる。例えば、ディスプレイデバイスは、手術室内の着目点（例えば、患者の胸部または膝）を識別し、着目点に関連して、ある構成において、測定を判定可能であり得る。そのオブジェクト（例えば、膝インプラントの３Ｄグラフィックレンダリング）と関連付けられた画像コンテンツは、同様に手術室内のユーザおよび他のオブジェクトに対するそのオブジェクトの位置を把握して提示されることができる。そのような画像コンテンツは、参照点またはオブジェクトに対して固定されることができる。例えば、膝インプラントの３Ｄグラフィックは、膝が移動される場合でも、膝の上方に固定されることができる。また、そのような頭部搭載型ディスプレイを装着する異なる視認者にもまた、参照点（例えば、膝）に対して固定される画像コンテンツ（例えば、３Ｄグラフィック）が見えるが、異なる視認者が、異なる場所に位置し、および／または異なるように配向されるため、異なる視点からの３Ｄ画像コンテンツであり得る、画像コンテンツが見える。また、図１２Ｂと、心臓のグラフィックが、患者の上方の具体的場所の上方に固定され、ある場合には、患者が移動する場合、患者とともに移動し得る、患者の上方に配置される心臓のグラフィックとを参照されたい。前述のように、場所のデータベースを組み立てるために、ディスプレイデバイスのいくつかの実施形態は、信号を放出し（例えば、疎点マッピングにおけるように）、実世界内の空間位置および／または移動に関するデータを取得することができる。事実上、頭部搭載型ディスプレイデバイスは、環境内のオブジェクトを結像し、その場所をデータベース内に記録することができ、場所（例えば、患者の膝または胸部）のそのデータベース内の場所は、１つまたはそれを上回る表示される画像の場所および配向が基準のフレームに対するその選択された視点／場所に基づいて判定される、基準のフレームとして使用されることができる。オブジェクトに対して異なる場所、故に、視点を伴う、異なるユーザにはまた、その場所に応じて、異なる画像コンテンツまたはそのビューが見える。
【0246】
同様に、いくつかの実施形態では、複数のユーザが、共通仮想オブジェクトを操作し得る。例えば、いくつかの実施形態では、他の仮想ユーザとともに外科手術を視認するユーザは、オブジェクトの特定の着目領域を示し得る（例えば、ハイライト、拡大することによって）。そのようなインジケーションは、同時におよび／または自動的に、他のユーザの各ディスプレイ上にも表示され得る。このように、１人のユーザは、有利には、他のユーザとの視覚的信号を通して、精密なオブジェクトについて通信し得る。いくつかの実施形態では、ユーザは、回転または平行移動等によって、表示されるオブジェクトを操作してもよい。そのような操作は、他のユーザのディスプレイ上に表示され、したがって、２人またはそれを上回るユーザが、３Ｄであるように現れる、結像されるオブジェクトについて議論する、方法を容易にし得る。同様に、ディスプレイデバイスは、ユーザが、音声チャット、テキストによって等、他の媒体を使用して、または別様に、通信することを可能にするように構成されることができる。いくつかの実施形態では、ディスプレイデバイスは、手技（例えば、外科手術）を実施するとき、ユーザが行なっている段階を検出するように構成され得る。例えば、ある実施形態は、医師の次に生じるであろう外科手術における段階を検出し得、今後の段階を手術室内の他のユーザに表示し得る。同様に、ディスプレイデバイスは、外科手術の特定の段階を通して医師を補助するために、コンテンツ（例えば、ビデオ、オーディオ、画像、テキスト等）を提示し得る。
【0247】
画像下治療
ある実施形態では、ディスプレイデバイスは、医療従事者が、画像下治療用の画像を視認および解釈することを補助することができる。例えば、いくつかの実施形態では、デバイスは、１つまたはそれを上回る結像モダリティ（例えば、ＣＴ、Ｘ線、ＭＲＩ等）を使用して、手技の前または間、画像をディスプレイ上にレンダリングするように構成されることができる。種々の方法（例えば、機械学習、手動アルゴリズム）を使用して、いくつかの実施形態では、ディスプレイデバイスは、非健康または異常走査または画像と比較して、正常または健康患者、組織、器官、解剖学的構造等の走査または画像を適切に識別するように訓練されることができる。故に、種々の実施形態では、ディスプレイデバイスは、患者画像（例えば、走査）が異常であるかどうかを自動的に判定し、潜在的に、画像の医療および／または病理学的有意性を判定し、そこから結論または診断を引き出すことができる。例えば、ある実施形態では、デバイスは、断裂骨、腫瘍等の脳走査内の異常、およびＸ線に基づく余剰歯、または画像に基づく腫瘍増殖の場所を認識することができる。
ある実施形態では、ディスプレイデバイスは、医療従事者が、画像下治療用の画像を視認および解釈することを補助することができる。例えば、いくつかの実施形態では、デバイスは、１つまたはそれを上回る結像モダリティ（例えば、ＣＴ、Ｘ線、ＭＲＩ等）を使用して、手技の前または間、画像をディスプレイ上にレンダリングするように構成されることができる。種々の方法（例えば、機械学習、手動アルゴリズム）を使用して、いくつかの実施形態では、ディスプレイデバイスは、非健康または異常走査または画像と比較して、正常または健康患者、組織、器官、解剖学的構造等の走査または画像を適切に識別するように訓練されることができる。故に、種々の実施形態では、ディスプレイデバイスは、患者画像（例えば、走査）が異常であるかどうかを自動的に判定し、潜在的に、画像の医療および／または病理学的有意性を判定し、そこから結論または診断を引き出すことができる。例えば、ある実施形態では、デバイスは、断裂骨、腫瘍等の脳走査内の異常、およびＸ線に基づく余剰歯、または画像に基づく腫瘍増殖の場所を認識することができる。
【0248】
いくつかの実施形態では、ディスプレイデバイスは、表面上（例えば、毛髪、膝の縁等の場所）および／または皮膚下（例えば、骨、器官、または血管）の身体部分の縁を検出することができる。ディスプレイデバイスは、外科手術を実施しながら、身体部分の画像をユーザのディスプレイ上にレンダリング可能であり得る。ユーザは、仮想マーカ（例えば、基準マーカ）をオブジェクトの画像にわたって設置し、例えば、放射処置を受けるべき部分、外科手術切断のための場所等を示すことが可能であり得る。ユーザ（例えば、医師）は、仮想マーカの場所を判定してもよいが、ディスプレイシステムのある実施形態は、基準マーカを識別および／または設置することができる。頭部搭載型ディスプレイデバイスと関連付けられた処理電子機器は、パターン認識を使用して、構造の場所および基準マーカを設置すべき場所を識別することができる。さらなる実施例として、ディスプレイデバイスは、造影剤が患者の中に注入され、ＭＲＩまたはＸ線を用いて走査された後、血管内の閉塞物の３Ｄ画像をディスプレイ上にレンダリングすることができる。前述のように、ディスプレイシステムは、閉塞物の異なる部分と関連付けられた複数の深度を表示する（例えば、異なるスライスとして）。スライスとしての３Ｄ画像の提示は、医師が正確な術前決定を行うことを補助することができる。そのような画像はまた、外科手術後、外科手術およびその後の患者の進行度を評価するために有用であって、後続保険医療決定を行うために使用されてもよい。
【0249】
故に、ディスプレイデバイスは、オブジェクトの３Ｄ画像をレンダリングすることによって、種々の医療手技の前、間、および／または後に、ユーザ（例えば、医師、看護師、技術者、学生）を補助することができる。ある場合には、そのような画像は、患者に対して並置される、例えば、外科手術または処置部位もしくは診断試験が行われている場所の近傍の場所に隣接して、またはその上に重畳されてもよい。いくつかの実施形態では、本レンダリングは、複数のタイプの走査（例えば、超音波に加え、ＭＲＩ）からの情報に基づき、手技の間、リアルタイムで提供されることができる。１つの用途は、肺動静脈奇形または血管異常（例えば、脳内）のためのものである。別の用途は、バルーンが、動脈または血管の狭窄／詰まりを取り除くために、血管内に挿入および膨張される、バルーン血管形成術を可視化するためのものである。別の用途は、ステントが、挿入され、閉塞されている導管を開放し、胆汁を肝臓から排出することを可能にする、胆管ドレナージおよびステント留置のためのものである。別の実施例は、内出血の場合であって、その場合、デバイスは、内出血のエリアを位置特定し、および／またはユーザが、ゲル、発泡体、またはコイル等の凝固物質を挿入することを補助するように構成され得る。別の用途は、抗癌剤が直接癌腫瘍の部位に送達される、化学塞栓術のためのものである。ディスプレイデバイスはまた、患者内の適切な場所における胃瘻管の挿入（または挿入の仮想練習）において有用であり得る。
【0250】
ディスプレイデバイスはまた、ユーザが他の手技を実施または準備することを補助し得る。１つのそのような用途は、血管形成術または血栓溶解が、腎不全の際、閉塞されたグラフトを開放するために使用される、血液透析アクセスを維持することである。別の用途は、放射エネルギーが、癌性腫瘍を蒸解および死滅させるために使用される、高周波アブレーションである。別の用途は、カテーテルが、ステントを位置付け、詰まった血管または他の通路を開放する、ステントの留置である。別の用途は、医師が、人工チャネルを流入門脈と流出肝静脈との間の肝臓内に留置する、救命手技である、経頸静脈的肝内門脈大循環短絡術（ＴＩＰＳ）である。さらなる実施例として、デバイスは、ユーザが、医師が筋腫に供給する血液を遮断し、したがって、筋腫を収縮および死滅させる、子宮筋腫閉塞を行うことを支援し得る。本手技では、医師は、カテーテルを大腿動脈内に留置し、造影剤をカテーテルの中に注入し、カテーテルを動脈を通して誘導し、血液を筋腫に供給している動脈を見出す。同様に、デバイスは、有利には、医療手技に備えて、その間、または後、改善された可視化のために、３Ｄ画像のビューを提供することができる。
【0251】
コンピュータビジョンおよびオブジェクト検出
オブジェクトは、種々の技法を使用して検出されることができる。例えば、オブジェクトは、コンピュータビジョン技法を使用して検出されることができる。例えば、ディスプレイデバイスは、外向きに面した結像システムによって入手された画像を分析し、場面再構成、イベント検出、ビデオ追跡、オブジェクト認識、オブジェクト姿勢推定、学習、インデックス化、運動推定、または画像復元等を実施することができる。１つまたはそれを上回るコンピュータビジョンアルゴリズムが、これらのタスクを実施するために使用されてもよい。コンピュータビジョンアルゴリズムの非限定的実施例は、スケール不変特徴変換（ＳＩＦＴ）、スピードアップロバスト特徴（ＳＵＲＦ）、配向ＦＡＳＴおよび回転ＢＲＩＥＦ（ＯＲＢ）、バイナリロバスト不変スケーラブルキーポイント（ＢＲＩＳＫ）、高速網膜キーポイント（ＦＲＥＡＫ）、Ｖｉｏｌａ－Ｊｏｎｅｓアルゴリズム、Ｅｉｇｅｎｆａｃｅｓアプローチ、Ｌｕｃａｓ－Ｋａｎａｄｅアルゴリズム、Ｈｏｒｎ－Ｓｃｈｕｎｋアルゴリズム、Ｍｅａｎ－ｓｈｉｆｔアルゴリズム、視覚的同時位置推定およびマッピング（ｖＳＬＡＭ）技法、シーケンシャルベイズ推定器（例えば、カルマンフィルタ、拡張カルマンフィルタ等）、バンドル調節、適応閾値化（および他の閾値化技法）、反復最近傍点（ＩＣＰ）、セミグローバルマッチング（ＳＧＭ）、セミグローバルブロックマッチング（ＳＧＢＭ）、特徴点ヒストグラム、種々の機械学習アルゴリズム（例えば、サポートベクトルマシン、ｋ最近傍アルゴリズム、単純ベイズ、ニューラルネットワーク（畳み込みまたは深層ニューラルネットワークを含む）、または他の教師あり／教師なしモデル等）等を含む。
オブジェクトは、種々の技法を使用して検出されることができる。例えば、オブジェクトは、コンピュータビジョン技法を使用して検出されることができる。例えば、ディスプレイデバイスは、外向きに面した結像システムによって入手された画像を分析し、場面再構成、イベント検出、ビデオ追跡、オブジェクト認識、オブジェクト姿勢推定、学習、インデックス化、運動推定、または画像復元等を実施することができる。１つまたはそれを上回るコンピュータビジョンアルゴリズムが、これらのタスクを実施するために使用されてもよい。コンピュータビジョンアルゴリズムの非限定的実施例は、スケール不変特徴変換（ＳＩＦＴ）、スピードアップロバスト特徴（ＳＵＲＦ）、配向ＦＡＳＴおよび回転ＢＲＩＥＦ（ＯＲＢ）、バイナリロバスト不変スケーラブルキーポイント（ＢＲＩＳＫ）、高速網膜キーポイント（ＦＲＥＡＫ）、Ｖｉｏｌａ－Ｊｏｎｅｓアルゴリズム、Ｅｉｇｅｎｆａｃｅｓアプローチ、Ｌｕｃａｓ－Ｋａｎａｄｅアルゴリズム、Ｈｏｒｎ－Ｓｃｈｕｎｋアルゴリズム、Ｍｅａｎ－ｓｈｉｆｔアルゴリズム、視覚的同時位置推定およびマッピング（ｖＳＬＡＭ）技法、シーケンシャルベイズ推定器（例えば、カルマンフィルタ、拡張カルマンフィルタ等）、バンドル調節、適応閾値化（および他の閾値化技法）、反復最近傍点（ＩＣＰ）、セミグローバルマッチング（ＳＧＭ）、セミグローバルブロックマッチング（ＳＧＢＭ）、特徴点ヒストグラム、種々の機械学習アルゴリズム（例えば、サポートベクトルマシン、ｋ最近傍アルゴリズム、単純ベイズ、ニューラルネットワーク（畳み込みまたは深層ニューラルネットワークを含む）、または他の教師あり／教師なしモデル等）等を含む。
【0252】
これらのコンピュータビジョン技法のうちの１つまたはそれを上回るものはまた、他の環境センサ（例えば、マイクロホン、温度センサ、光センサ、タイミングデバイス、物理的接触センサ等）から入手されたデータとともに、オブジェクトの存在を検出するために使用されることができる。
【0253】
オブジェクトは、１つまたはそれを上回る基準に基づいて検出されてもよい。これらの基準は、ユーザ（または別の人物）によって定義されてもよい。例えば、ユーザは、ユーザの環境（例えば、手術室）内の心臓モニタを可能性として考えられる着目オブジェクトとして設定してもよい。ユーザは、心臓モニタの信号がある値未満になる際または心臓モニタがビープ音を発するときの基準を定義してもよい。したがって、デバイスが、コンピュータビジョンアルゴリズムを使用して、および／または１つまたはそれを上回る環境センサから受信されたデータを使用して、心臓モニタが基準を満たすことを検出すると、デバイスは、次いで、心臓モニタの存在（例えば、アラートとしてのアイコン）を信号伝達する、および／または自動的に、心臓モニタの増強されたビュー（例えば、心臓モニタの拡大された画像）を提供することができる。
【0254】
図１３Ａは、複合現実（「ＭＲ」）環境７００の実施例のブロック図である。ＭＲ環境７００は、入力（例えば、ユーザのウェアラブルシステムからの視覚的入力７０２、手術室カメラ等の定常入力７０４、種々のセンサからの感覚入力７０６、ジェスチャ、トーテム、眼追跡、ユーザ入力デバイス５０４からのユーザ入力等）を１つまたはそれを上回るユーザウェアラブルシステム（例えば、ウェアラブルシステム８０またはディスプレイシステム６２）または定常手術室システム（例えば、手術室カメラ等）から受信するように構成されてもよい。ウェアラブルシステムは、種々のセンサ（例えば、加速度計、ジャイロスコープ、温度センサ、移動センサ、深度センサ、ＧＰＳセンサ、内向きに面した結像システム、外向きに面した結像システム等）を使用して、ユーザの環境の場所および種々の他の属性を判定することができる。本情報はさらに、画像または種々のキューを異なる視点から提供し得る、手術室内の定常カメラからの情報で補完されてもよい。カメラ（手術室カメラおよび／または外向きに面した結像システムのカメラ等）によって入手された画像データは、マッピング点のセットにまとめられてもよい。
【0255】
１つまたはそれを上回るオブジェクト認識装置７０８は、受信されたデータ（例えば、点の集合）を通してクローリングし、点を認識またはマッピングし、画像にタグ付けし、マップデータベース７１０を用いて、意味論情報をオブジェクトに結び付けることができる。マップデータベース７１０は、種々の点経時的に収集される種々の点と、その対応するオブジェクトとを備えてもよい。種々のデバイスおよびマップデータベースは、ネットワーク（例えば、ＬＡＮ、ＷＡＮ等）を通して、相互に接続され、クラウドにアクセスすることができる。
【0256】
マップデータベース内の本情報および点の集合に基づいて、オブジェクト認識装置７０８ａ－７０８ｎは、オブジェクトを認識し、オブジェクトを意味論情報で補完し、生命をオブジェクトに与えてもよい。例えば、オブジェクト認識装置が、点のセットがドアであることを認識する場合、システムは、いくつかの意味論情報（例えば、ドアが、ヒンジを有し、ヒンジを中心として９０度移動を有する）を結び付けてもよい。オブジェクト認識装置が、点のセットが鏡であることを認識する場合、システムは、鏡が手術室内のオブジェクトの画像を反射させ得る反射表面を有するという、意味論情報を結び付けてもよい。経時的に、マップデータベースは、システム（ローカルで常駐し得る、または無線ネットワークを通してアクセス可能であり得る）が世界からのより多くのデータを蓄積するにつれて成長する。いったんオブジェクトが認識されると、情報は、１つまたはそれを上回るウェアラブルシステムに伝送されてもよい。例えば、ＭＲ環境７００は、Ｃａｌｉｆｏｒｎｉａにおける場所についての情報を含んでもよい。環境７００は、Ｎｅｗ Ｙｏｒｋにおける１人またはそれを上回るユーザに伝送されてもよい。ＦＯＶカメラおよび他の入力から受信されたデータに基づいて、オブジェクト認識装置および他のソフトウェアコンポーネントは、場面が世界の異なる部分に存在し得る第２のユーザに正確に「パス」され得るように、種々の画像から収集される点をマッピングする、オブジェクトを認識すること等を行うことができる。環境７００はまた、位置特定目的のために、トポロジマップを使用してもよい。
【0257】
図１３Ｂは、認識されるオブジェクトに関連して仮想コンテンツをレンダリングする方法８００の実施例のプロセスフロー図である。方法８００は、仮想場面がウェアラブルシステムのユーザに表され得る方法を説明する。ユーザは、場面から地理的に遠隔に存在してもよい。例えば、ユーザは、Ｎｅｗ Ｙｏｒｋに存在し得るが、Ｃａｌｉｆｏｒｎｉａの現在の状況の場面を視認することを所望し得る、またはＣａｌｉｆｏｒｎｉａに住んでいる友人と散歩に行くことを所望し得る。
【0258】
ブロック８１０では、ＡＲシステムは、ユーザの環境に関する入力をユーザおよび他のユーザから受信してもよい。これは、種々の入力デバイスを通して達成され、その知識は、マップデータベース内にすでに所有されている場合もある。ユーザのＦＯＶカメラ、センサ、ＧＰＳ、眼追跡等が、ブロック８１０において、情報をシステムに伝達する。システムは、ブロック８２０において、本情報に基づいて、疎点を判定してもよい。疎点は、ユーザの周囲内の種々のオブジェクトの配向および位置を表示および理解する際に使用され得る、姿勢データ（例えば、頭部姿勢、眼姿勢、身体姿勢、または手ジェスチャ）を判定する際に使用されてもよい。オブジェクト認識装置７０８ａ－７０８ｎは、ブロック８３０において、これらの収集される点を通してクローリングし、マップデータベースを使用して、１つまたはそれを上回るオブジェクトを認識してもよい。本情報は、次いで、ブロック８４０において、ユーザの個々のウェアラブルシステムに伝達されてもよく、所望の仮想場面が、ブロック８５０において、適宜、ユーザに表示されてもよい。例えば、所望の仮想場面（例えば、ＣＡにおけるユーザ）は、Ｎｅｗ Ｙｏｒｋにおける種々のオブジェクトおよびユーザの他の周囲に関連して、適切な配向、位置等に表示されてもよい。
【0259】
図１３Ｃは、ウェアラブルシステムの別の実施例のブロック図である。本実施例では、ウェアラブルシステム９００は、マップを備え、これは、世界に関するマップデータを含んでもよい。マップは、部分的に、ウェアラブルシステム上にローカルで常駐してもよく、部分的に、有線または無線ネットワークによってアクセス可能なネットワーク化された記憶場所（例えば、クラウドシステム内）に常駐してもよい。姿勢プロセス９１０が、ウェアラブルコンピューティングアーキテクチャ（例えば、処理モジュール２６０またはコントローラ４６０）上で実行され、マップからのデータを利用して、ウェアラブルコンピューティングハードウェアまたはユーザの位置および配向を判定してもよい。姿勢データは、システムを体験し、世界内で動作するにつれて、オンザフライで収集されるデータから算出されてもよい。データは、画像、センサ（概して、加速度計およびジャイロスコープコンポーネントを備える、慣性測定ユニット等）からのデータ、および実または仮想環境内のオブジェクトに関連する表面情報を備えてもよい。
【0260】
疎点表現は、同時位置特定およびマッピング（入力が画像／視覚専用である構成を指す、ＳＬＡＭまたはＶ－ＳＬＡＭ）プロセスの出力であってもよい。システムは、世界内の種々のコンポーネントの場所だけではなく、世界が構成される内容も見出すように構成されることができる。姿勢は、マップへの取込およびマップからのデータの使用を含む、多くの目標を達成する、構築ブロックであり得る。
【0261】
疎点位置は、多焦点ＡＲ、ＶＲ、またはＭＲ体験を生産するために補完されてもよい。概して、深度マップ情報を指す、稠密表現が、少なくとも部分的に、本間隙を充填するために利用されてもよい。そのような情報は、深度情報が三角測量または飛行時間感知等の技法を使用して判定される、ステレオ９４０と称されるプロセスから算出されてもよい。画像情報およびアクティブパターン（アクティブプロジェクタを使用して作成される赤外線パターン等）は、ステレオプロセス９４０への入力としての役割を果たし得る。有意な量の深度マップ情報は、ともに融合されてもよく、このうちの一部は、表面表現を用いて要約されてもよい。例えば、数学的に定義可能な表面は、ゲームエンジンのような他の処理デバイスへの効率的（例えば、大点群に対して）かつ要約しやすい入力であり得る。したがって、立体視プロセス（例えば、深度マップ）９４０の出力は、融合プロセス９３０において組み合わせられてもよい。姿勢は同様に、本融合プロセス９３０への入力でもあり得、融合９３０の出力は、マップ取込プロセス９２０への入力となる。サブ表面は、トポグラフィマッピング等において、相互に接続し、より大きい表面を形成し得、マップは、マップは、点および表面の大規模ハイブリッドとなる。
【0262】
複合現実プロセス９６０における種々の側面を解決するために、種々の入力が、利用されてもよい。例えば、図１３Ｃに描写される実施形態では、ゲームパラメータが、システムのユーザが、手術室の周囲の種々の場所における１人またはそれを上回る仮想医師とともに、外科手術を実施していることを判定するために入力されてもよい。仮想医師は、手術室内の種々の条件に反応してもよい。世界マップは、複合現実への別の貴重な入力である、そのようなオブジェクトが相互に対して存在する場所に関する情報を含んでもよい。世界に対する姿勢は、同様に、入力となり、ほぼあらゆる双方向システムに重要な役割を果たす。
【0263】
ユーザからの制御または入力は、ウェアラブルシステム９００への別の入力である。本明細書に説明されるように、ユーザ入力は、視覚的入力、ジェスチャ、トーテム、オーディオ入力、感覚入力等を含むことができる。動き回るまたはゲームをプレーするために、例えば、ユーザは、ウェアラブルシステム９００に、行うことを所望する対象に関して命令する必要があり得る。単に、空間内で自ら移動するだけではなく、利用され得る種々の形態のユーザ制御が、存在する。トーテム（例えば、ユーザ入力デバイス）または外科手術器具等のオブジェクトが、ユーザによって保持され、システムによって追跡されてもよい。システムは、好ましくは、ユーザがアイテムを保持していることを把握し、ユーザがアイテムと行う相互作用の種類を理解するように構成されるであろう（例えば、トーテムまたはオブジェクトが、一対の外科手術用鋏である場合、システムは、場所および配向と、ユーザがＩＭＵ等のセンサを装備し得るハンドルを握っているかどうか（そのようなアクティビティがカメラのいずれかの視野内にないときでも、生じている状況を判定することを補助し得る）とを理解するように構成されてもよい。）
【0264】
手ジェスチャ追跡または認識もまた、入力情報を提供してもよい。ウェアラブルシステム９００は、ボタン押下のため、左または右、停止、握持、保持等をジェスチャするために、手のジェスチャを追跡および解釈するように構成されてもよい。例えば、１つの構成では、ユーザは、非ゲーム環境において、電子メールもしくはカレンダを捲る、もしくは別の人物またはプレーヤと「フィストバンプ」を行うことを所望し得る。ウェアラブルシステム９００は、最小量の手ジェスチャを活用するように構成されてもよく、これは、動的である場合とそうではない場合がある。例えば、ジェスチャは、停止を示すために手を広げる、ＯＫを示すために親指を上げる、ＯＫではないことを示すために親指を下げる、または指向性コマンドを示すために左右もしくは上下に手をフリップする等、単純な静的ジェスチャであってもよい。
【0265】
眼追跡は、別の入力である（例えば、ユーザが見ている場所を追跡し、ディスプレイ技術を制御し、具体的深度または範囲にレンダリングする）。眼の輻輳・開散運動は、三角測量を使用して判定されてもよく、次いで、その特定の人物のために開発された輻輳・開散運動／遠近調節モデルを使用して、遠近調節が、判定されてもよい。
【0266】
カメラシステムに関して、図１３Ｃに示される例示的ウェアラブルシステム９００は、３つの対のカメラ、すなわち、ユーザの顔の側面に配列される相対的広ＦＯＶまたは受動ＳＬＡＭ対のカメラ、ユーザの正面に配向され、ステレオ結像プロセス９４０をハンドリングし、また、手ジェスチャおよびユーザの顔の正面のトーテム／オブジェクト追跡を捕捉する、異なる対のカメラを含むことができる。ＦＯＶカメラおよびステレオプロセス９４０のための対のカメラは、１つまたはそれを上回る外向きに面した結像センサ３４（図１０Ａに示される）の一部であってもよい。ウェアラブルシステム９００は、眼ベクトルおよび他の情報を三角測量するためにユーザの眼に向かって配向される、眼追跡カメラ（図１０Ａに示されるユーザセンサ２４、２８、３０、３２のうちの１つまたはそれを上回るものであってもよい）を含むことができる。ウェアラブルシステム９００はまた、１つまたはそれを上回るテクスチャ化された光プロジェクタ（赤外線（ＩＲ）プロジェクタ等）を備え、テクスチャを場面の中に投入してもよい。
【0267】
別の実施例として、着目オブジェクトは、除細動器であってもよい。ユーザは、除細動器が一般にどのようなものであるかを説明してもよい、または具体的除細動器を説明してもよい。いくつかのインスタンスでは、デバイスは、除細動器の写真を含む、内部または外部システムにアクセスしてもよい。したがって、デバイスが、コンピュータビジョンアルゴリズムを使用して、および／または１つまたはそれを上回る環境センサから受信されたデータを使用して、除細動器を検出すると、デバイスは、次いで、除細動器の存在を信号伝達し、除細動器の場所の増強されたビューを自動的に提供することができる。種々の実施形態では、デバイスはまた、将来的使用のために、除細動器の画像および／またはその場所をメモリ内に記憶することができる。
【0268】
そのようなアルゴリズムおよび方法ならびに類似のものは、本明細書に説明される種々の用途および／または実施形態のいずれかに適用されてもよい。
【0269】
機械学習
種々の機械学習アルゴリズムは、いくつかの実施形態では、可能性として考えられる着目オブジェクト（例えば、ある値を下回る信号を有する心臓モニタ）を検出するために実装されることができる。いったん訓練されると、機械学習アルゴリズムは、デバイスによって記憶されることができる。機械学習アルゴリズムのいくつかの実施例は、回帰アルゴリズム（例えば、通常の最小２乗回帰等）、インスタンスベースのアルゴリズム（例えば、学習ベクトル量子化等）、決定ツリーアルゴリズム（例えば、分類および回帰ツリー等）、Ｂａｙｅｓｉａｎアルゴリズム（例えば、Ｎａｉｖｅ Ｂａｙｅｓ等）、クラスタ化アルゴリズム（例えば、ｋ－平均クラスタ化等）、関連付けルール学習アルゴリズム（例えば、アプリオリアルゴリズム等）、人工ニューラルネットワークアルゴリズム（例えば、Ｐｅｒｃｅｐｔｒｏｎ等）、ディープ学習アルゴリズム（例えば、ディープＢｏｌｔｚｍａｎｎマシン、またはディープニューラルネットワーク等）、次元削減アルゴリズム（例えば、主成分分析等）、アンサンブルアルゴリズム（例えば、スタック汎化等）、および／または他の機械学習アルゴリズムを含む、教師ありまたは教師なし機械学習アルゴリズムを含むことができる。いくつかの実施形態では、個々のモデルは、個々のデータセットのためにカスタマイズされることができる。例えば、ウェアラブルデバイスは、基本モデルを生成または記憶することができる。基本モデルは、データタイプ（例えば、特定のユーザ）、データセット（例えば、取得される付加的画像のセット）、条件付き状況、または他の変形例に特有の付加的モデルを生成する開始点として使用されてもよい。いくつかの実施形態では、ウェアラブルデバイスは、複数の技法を利用し、集約されたデータの分析のためのモデルを生成するように構成されてもよい。他の技法は、事前に定義された閾値またはデータ値を使用することを含んでもよい。
種々の機械学習アルゴリズムは、いくつかの実施形態では、可能性として考えられる着目オブジェクト（例えば、ある値を下回る信号を有する心臓モニタ）を検出するために実装されることができる。いったん訓練されると、機械学習アルゴリズムは、デバイスによって記憶されることができる。機械学習アルゴリズムのいくつかの実施例は、回帰アルゴリズム（例えば、通常の最小２乗回帰等）、インスタンスベースのアルゴリズム（例えば、学習ベクトル量子化等）、決定ツリーアルゴリズム（例えば、分類および回帰ツリー等）、Ｂａｙｅｓｉａｎアルゴリズム（例えば、Ｎａｉｖｅ Ｂａｙｅｓ等）、クラスタ化アルゴリズム（例えば、ｋ－平均クラスタ化等）、関連付けルール学習アルゴリズム（例えば、アプリオリアルゴリズム等）、人工ニューラルネットワークアルゴリズム（例えば、Ｐｅｒｃｅｐｔｒｏｎ等）、ディープ学習アルゴリズム（例えば、ディープＢｏｌｔｚｍａｎｎマシン、またはディープニューラルネットワーク等）、次元削減アルゴリズム（例えば、主成分分析等）、アンサンブルアルゴリズム（例えば、スタック汎化等）、および／または他の機械学習アルゴリズムを含む、教師ありまたは教師なし機械学習アルゴリズムを含むことができる。いくつかの実施形態では、個々のモデルは、個々のデータセットのためにカスタマイズされることができる。例えば、ウェアラブルデバイスは、基本モデルを生成または記憶することができる。基本モデルは、データタイプ（例えば、特定のユーザ）、データセット（例えば、取得される付加的画像のセット）、条件付き状況、または他の変形例に特有の付加的モデルを生成する開始点として使用されてもよい。いくつかの実施形態では、ウェアラブルデバイスは、複数の技法を利用し、集約されたデータの分析のためのモデルを生成するように構成されてもよい。他の技法は、事前に定義された閾値またはデータ値を使用することを含んでもよい。
【0270】
基準は、閾値条件を含むことができる。環境センサによって入手されたデータの分析が、閾値条件を超えたことを示す場合、デバイスは、着目オブジェクトの存在を検出し得る。閾値条件は、定量的および／または定質的測定を伴ってもよい。例えば、閾値条件は、着目オブジェクトの尤度と関連付けられたスコアまたはパーセンテージを含むことができる。デバイスは、環境センサのデータから計算されたスコアと閾値スコアを比較することができる。スコアが、閾値レベルより高い場合、デバイスは、着目オブジェクトの存在を検出し得る。他の実施形態では、デバイスは、スコアが閾値より低い場合、着目オブジェクトの存在を信号伝達してもよい。
【0271】
閾値条件はまた、「Ａ」、「Ｂ」、「Ｃ」、「Ｄ」等の文字グレードを含んでもよい。各グレードは、状況の深刻度を表し得る。例えば、「Ａ」は、最も深刻であり得る（例えば、心臓モニタがピーブ音を発する）一方、「Ｄ」は、最も深刻ではないものであり得る。デバイスが、ユーザの環境内のイベントが十分に深刻であることを判定すると（閾値条件と比較して）、デバイスは、着目オブジェクトまたはイベントの存在を示し、措置を講じてもよい（例えば、アラートまたは着目オブジェクト／イベントの増強されたビューを提供する）。
【0272】
閾値条件は、ユーザの物理的環境内のオブジェクト（または人々）に基づいて判定されてもよい。例えば、閾値条件は、患者の血液損失、患者の心拍数、または他の生理学的パラメータに基づいてもよい。図２および１０Ａ－１０Ｂを参照して説明されるように、デバイスは、患者のデータを環境センサ（例えば、外科手術部位を結像する、外向きに面したカメラ）または外部ソース（例えば、心電図または心臓モニタによって監視されるＥＣＧデータ等）から入手することができる。
【0273】
閾値条件はまた、ユーザの環境内の実世界オブジェクトまたはユーザに表示されている仮想オブジェクトに基づいて、判定されてもよい。一実施例として、閾値条件は、オブジェクトとのユーザの相互作用（例えば、ユーザがオブジェクトを一瞥した回数、ユーザがオブジェクトを鑑賞している持続時間等）に基づいてもよい。例えば、閾値条件は、ユーザの眼追跡に基づいて、判定されてもよい。
【0274】
いくつかの実施形態では、閾値条件、機械学習アルゴリズム、またはコンピュータビジョンアルゴリズムは、具体的コンテキストのために特殊であってもよい。例えば、外科手術コンテキストでは、コンピュータビジョンアルゴリズムは、ある外科手術イベントを検出するために特殊であってもよい。別の実施例として、デバイスは、顔または身体認識アルゴリズムを実行し、ユーザの環境内の人物（例えば、患者または他の医療従事者）を検出してもよい。
【0275】
そのようなアルゴリズムおよび方法ならびに類似のものは、本明細書に説明される種々の用途および／または実施形態のいずれかに適用されてもよい。
【0276】
ユーザ意図に基づく知覚改変
種々の実施形態では、ディスプレイシステムは、有利には、少なくとも部分的に、ユーザ意図に基づいて、実または仮想コンテンツのユーザ知覚を改変してもよい。例えば、ある実施形態は、ユーザが、画像コンテンツを増強させる（または強調解除する）、および／または画像コンテンツを異なる場所に提示することによって、状況またはタスクに合焦することを可能にし得る。
種々の実施形態では、ディスプレイシステムは、有利には、少なくとも部分的に、ユーザ意図に基づいて、実または仮想コンテンツのユーザ知覚を改変してもよい。例えば、ある実施形態は、ユーザが、画像コンテンツを増強させる（または強調解除する）、および／または画像コンテンツを異なる場所に提示することによって、状況またはタスクに合焦することを可能にし得る。
【0277】
ここで図１４を参照すると、少なくとも部分的に、ユーザ意図および／または知覚されたユーザ意図に基づいて、ディスプレイシステムを使用して、実または仮想オブジェクトのユーザ知覚を改変する例示的方法５０００が、図示される。知覚されたユーザ意図の判定は、例えば、ユーザの環境内の１つまたはそれを上回るオブジェクトを結像し、ユーザの眼が視認している場所を判定し、および／またはユーザの眼が指向されているオブジェクトを判定すること含んでもよい。ディスプレイシステムは、それぞれ、図２、６、および１０Ａ－１０Ｂにおけるディスプレイシステム８０、１０００、または２０１０等の本明細書に説明されるディスプレイシステムのいずれかを含んでもよい。ディスプレイシステムはまた、本明細書に説明される特徴のいずれかを含んでもよい。例えば、本明細書に説明されるように、いくつかの実施形態では、頭部搭載型ディスプレイデバイスは、ディスプレイを使用して、ユーザに拡張現実画像コンテンツを提示するように構成されることができる。頭部搭載型ディスプレイは、ユーザの頭部上に搭載可能であることができる。ある実施形態では、ディスプレイは、例えば、アイウェアの一部として、フレーム（例えば、図２および１０Ａ－１０Ｂにおけるフレーム６４）上に配置されることができる。
【0278】
頭部搭載型ディスプレイは、依然として、ユーザが、実世界を見て、それと相互作用することを可能にすることを可能にしながら、仮想画像コンテンツをユーザの眼に投影することができる。例えば、ディスプレイは、ユーザの眼の正面の場所に配置される、１つまたはそれを上回る透明導波管（例えば、図６における導波管アセンブリ１７８および／または図９Ａ－９Ｃにおける導波管スタック１２００）を含むことができる。ディスプレイは、ユーザが、ディスプレイを通して見ることを可能にすることができる。ディスプレイは、環境の画像がユーザの網膜上に形成され得るように、実世界環境からの光をユーザの眼に伝送してもよい。ディスプレイはまた、例えば、変調された光源からの光を投影させることによって、拡張および／または仮想画像コンテンツをユーザの眼に投影することができる。例えば、導波管アセンブリ内の導波管は、画像情報とともに投入されてもよく、画像情報をユーザの眼に指向することができる。
【0279】
いくつかの実施形態では、導波管は、異なる波面発散を伴って、画像情報を送信するように構成されることができる。頭部搭載型ディスプレイは、ユーザの眼からの異なる距離から投影されるかのように、異なる発散量において光をユーザの眼に投影し、拡張現実画像コンテンツをユーザに表示するように構成されることができる。故に、導波管は、光が、画像コンテンツを異なる深度（例えば、異なる深度平面上）から提供し、例えば、快適な３次元深度知覚を提供することを補助し得るように、１つまたはそれを上回る深度平面と関連付けられることができる。いくつかの実施形態では、導波管は、導波管からの光（例えば、導波管内を伝搬する光）をユーザの眼（例えば、図７）の中に再指向するように構成される、１つまたはそれを上回る光学要素（例えば、図６における外部結合光学要素２８２、２８４、２８６、２８８、２９０）を含んでもよい。いくつかのインスタンスでは、１つまたはそれを上回る光学要素は、光を導波管から抽出するように構成される、１つまたはそれを上回る回折光学要素を含むことができる。しかしながら、設計は、導波管および／または回折光学要素の使用に限定される必要はない。なお、種々の実施形態では、頭部搭載型ディスプレイは、光をユーザの眼に投影し、拡張現実画像コンテンツをユーザに表示するように構成されることができる。
【0280】
ユーザの視覚は、中心領域と、周辺領域とを有する、視野によって特徴付けられ得る。周辺領域は、中心領域の周囲またはそれを中心として配置されることができる。中心領域および周辺領域は、本明細書に議論されるように、それぞれ、中心視野および周辺視野に対応し得る。
【0281】
ディスプレイシステムまたはデバイスは、ユーザを感知するように構成される、１つまたはそれを上回るユーザセンサ（例えば、図１０Ａおよび１０Ｂにおけるユーザセンサ２４、２８、３０、３２）を含む、および／またはそれに結合されることができる。いくつかの実施形態では、１つまたはそれを上回るユーザセンサは、ディスプレイシステムのフレーム上に配置される。１つまたはそれを上回るユーザセンサは、１つまたはそれを上回る内向きに面したおよび／または下向きに面したセンサを含むことができる。１つまたはそれを上回るユーザセンサは、ユーザの眼が視認している場所を判定するように構成されることができる。ユーザセンサの実施例は、カメラ等の画像捕捉デバイスを含むことができる。本明細書に説明されるように、そのようなセンサは、ユーザの眼、顔特徴、および／または腕、手、脚部等の他の身体部分を監視することを含む、ユーザを監視することができる。１つまたはそれを上回るユーザセンサは、例えば、眼および／または顔を結像する、内向きに面したカメラを備えてもよく、眼追跡を提供してもよい。他のタイプの眼追跡デバイスもまた、使用されることができる。ユーザセンサ（例えば、眼追跡センサ）は、ディスプレイシステムのディスプレイ上への画像コンテンツの提示を制御することを補助するように構成されることができる。画像コンテンツの提示の制御は、例えば、感覚画像を処理電子機器に送信することを含んでもよく、これは、次いで、画像コンテンツの提示、表示される画像コンテンツ、画像の場所および特性、例えば、コントラスト、鮮明度、明度、色、カラーバランス、色飽和、不透明度等を制御する。
【0282】
ディスプレイシステムまたはデバイスはまた、ユーザの周囲を感知するように構成される１つまたはそれを上回る環境センサ（例えば、図１０Ａおよび１０Ｂにおける環境センサ３４）、を含む、および／またはそれに結合されることができる。１つまたはそれを上回る環境センサは、１つまたはそれを上回る外向きに面したセンサを含むことができる。１つまたはそれを上回る環境センサは、ユーザの環境内の１つまたはそれを上回るオブジェクトを結像するように構成されることができる。環境センサの実施例は、深度センサ、一対の両眼世界カメラ等の１つまたはそれを上回るカメラ、地理位置センサ、近接度センサ、ＧＰＳ等を含むことができる。１つまたはそれを上回る環境センサはまた、環境内の音を感知するように構成される、マイクロホン（例えば、図２におけるマイクロホン６７）を含むことができる。本明細書に説明されるように、環境センサは、ユーザの環境内のオブジェクト、運動、および／または音を検出および／または監視し、例えば、ユーザが注意を向ける、および／または相互作用し得る対象を判定することに役立ち得る。そのようなセンサは、ユーザが着手し得るアクションのインジケーションおよび／またはアクションに着手するユーザの意図を提供することができる。また、本明細書に説明されるように、いくつかの実施形態は、１つまたはそれを上回る光センサを含み、例えば、環境の光条件を判定してもよい。
【0283】
種々の実施形態は、ディスプレイ、１つまたはそれを上回るユーザセンサ、および／または１つまたはそれを上回る環境センサと通信する、処理電子機器を有する、１つまたはそれを上回るプロセッサ（例えば、図２におけるローカル処理およびデータモジュール７０および／または遠隔処理モジュール７２）を含む、および／またはそれに結合されることができる。いくつかの実施形態では、本明細書に説明されるように、処理電子機器はまた、ネットワークシステムと通信することができる。処理電子機器は、１つまたはそれを上回るユーザおよび／または環境センサから取得される情報を分析し、例えば、ユーザに表示する画像コンテンツに関する命令をディスプレイに提供するように構成されることができる。例えば、処理電子機器は、図１４に示される例示的方法５０００を実施するように構成されることができる。処理電子機器は、増加されたユーザ注目を伴う状況を感知し、随意に、状況に対するユーザ意図を判定し、少なくとも部分的に、ユーザの増加された注目および／またはユーザ意図に基づいて、ユーザの視野内の画像コンテンツ（例えば、実または仮想オブジェクト）のユーザ知覚を改変するように構成されることができる。さらなる実施例として、処理電子機器は、これは、ユーザの眼が指向されているオブジェクトを判定するように構成されることができる。いくつかの実施形態では、処理電子機器は、眼が指向されている１つを上回るオブジェクト（例えば、中心視野および／または周辺視野内）を判定するように構成される。ユーザの眼が指向されているオブジェクトの判定は、オブジェクト認識を１つまたはそれを上回る環境センサ（例えば、外向きに面したカメラ）から受信された画像に適用することによって、ユーザの環境内の１つまたはそれを上回るオブジェクトを認識することを含んでもよい。ユーザのビューが特に指向されているオブジェクトの識別は、ユーザが増加された注目を有することの判定を促進し得、および／またはユーザ意図を判定することを補助し得る。また、または代替として、ユーザが見ているオブジェクトの識別は、処理電子機器が、例えば、そのオブジェクトの知覚を増強させることによって、および／または他のオブジェクトの知覚を強調解除することによって、そのオブジェクトをより容易に視認させることを可能にし得る。オブジェクト認識は、単に、オブジェクトの存在を判定する、および／またはオブジェクトを周囲特徴から隔離することを含んでもよい。オブジェクト認識は、代替として、または加えて、オブジェクトの内容および／またはオブジェクトの特性もしくは機能の認識等、オブジェクトと何らかの意味を関連付けることを含んでもよい。例えば、オブジェクト認識は、単に、あるオブジェクトが背景と別個の前景に存在することを判定してもよい。しかしながら、別の実施例では、オブジェクト認識は、加えて、本オブジェクトが、人物顔、心臓モニタ、ハンドルであること等、オブジェクトの内容を判定し、可能性として、特性および／または意味とそのオブジェクトを関連付けることを含んでもよい。より高性能レベルの分析は、複数のオブジェクトの判定を結合し、環境のより高度な理解を発展させることであってもよい。例えば、処理電子機器が、メス、心拍数モニタ、および台の上の腹臥位の人物を認識する場合、結論は、ユーザが手術室内に存在することであり得る。ユーザの正面および中心におけるハンドル、ダッシュボード、フロントガラス、および／またはフロントガラスをわずかに越えた車のボンネット等の他のオブジェクト認識および／または入力の組み合わせ、ならびに可能性として、Ｂｌｕｅｔｏｏｔｈ（登録商標）信号の受信等の他の入力信号は、ユーザが、車両の運転席に存在し、可能性として、自動車両を運転または出発させる準備ができていることを示し得る。
【0284】
故に、ブロック５０１０では、処理電子機器は、随意に、ユーザ注目を伴う状況を感知するように構成されることができる。前述のように、ユーザ注目を伴う状況の感知は、１つまたはそれを上回るオブジェクトを、例えば、１つまたはそれを上回るユーザおよび／または環境センサによって提供される情報から検出することを含むことができる。ユーザ注目を伴う状況の感知は、（少なくとも、概して）ユーザの眼が指向されているオブジェクトを判定することを含むことができる。処理電子機器は、本明細書に説明されるもの等（例えば、上記参照）のコンピュータビジョンおよびオブジェクト検出技法のいずれかを使用して、オブジェクトを検出するように構成されてもよい。ユーザ注目を伴う状況の感知はまた、１つまたはそれを上回る運動または音を、例えば、１つまたはそれを上回るユーザおよび／または環境センサによって提供される情報から検出することを含むことができる。ユーザ注目を伴う状況の感知はまた、無線またはＲＦ信号（例えば、車によって放出されるＢｌｕｅｔｏｏｔｈ（登録商標）信号）等の１つまたはそれを上回る他のタイプの信号を検出することを含むことができる。異なる部屋室内で放出される無線信号はまた、ユーザが特定の部屋に存在することを知らせることができ、ユーザが着手し得るアクションのインジケーションを提供し得る。ユーザ注目を伴う状況の感知はさらに、１つまたはそれを上回る検出されたオブジェクト、運動、および／または音が、アクションまたはユーザ注目を伴う状況等の特定の状況と関連付けられるかどうかを判定することを含むことができる。代替として、または加えて、ユーザ注目を伴う状況の感知は、着目される種々のユーザ注目を伴う状況を提供し、例えば、それらの状況と関連付けられたあるオブジェクト、運動、および／または音に関して、１つまたはそれを上回るユーザおよび／または環境センサによって提供される情報内で検索することを含んでもよい。
【0285】
実施例として、頭部搭載型ディスプレイデバイスを装着するユーザが、手術室に入室し得る。ユーザおよび／または環境センサのうちの１つまたはそれを上回るものによって捕捉される画像は、手術室および／または関連付けられたオブジェクト（例えば、手術台、ガントリ、トレイ、外科手術器具、心臓モニタ、患者、医療アシスタント等）の画像を含んでもよい。処理電子機器は、外科医が、その眼を、例えば、外科手術器具に指向していることを判定し得る。外科医は、外科手術器具をその手に有し得る。外科手術器具は、患者に作用し得る。検出されたオブジェクト、検出された特定の状況（例えば、患者に接近する外科手術器具）、および／または外科医がその眼を指向している場所に基づいて、処理電子機器は、ユーザが、これから始まる外科手術に関わることを感知し得る。
【0286】
上記に説明されるように、ディスプレイシステムまたはデバイスの種々の設計は、あるコンテキストのために構成されてもよく、それらのコンテキストにおけるある状況を感知することができる。例えば、医療従事者のために構成されるディスプレイシステムまたはデバイスは、医療コンテキスト（例えば、医療診断または手技）における状況を感知するように構成されてもよい。いくつかのインスタンスでは、ディスプレイシステムまたはデバイスは、特定のユーザのためにカスタマイズされる場合とそうではない場合がある。機械学習アルゴリズムは、本明細書に説明されるように、いくつかの実施形態では、使用されることができる。
【0287】
ユーザ注目を伴う状況が、感知された後、処理電子機器は、ブロック５０２０に進むことができる。いくつかの実施形態では、処理電子機器はまた、ユーザ注目を伴う他の状況を感知することに進むことができる。
【0288】
ブロック５０２０では、処理電子機器は、随意に、状況に対するユーザ意図を判定するように構成されることができる。ユーザ意図の判定は、作用するためのユーザの意図を示す、１つまたはそれを上回るオブジェクト、運動、および／または音（例えば、１つまたはそれを上回るユーザおよび／または環境センサによって提供される情報から）を検出することを含むことができる。代替として、または加えて、ユーザ意図の判定は、例えば、データベース内の作用するためのユーザの意図を示す、種々の可能性として考えられるオブジェクト、運動、および／または音を提供し、例えば、それらのオブジェクト、運動、および／または音に関して、１つまたはそれを上回るユーザおよび／または環境センサによって提供される情報内を検索することを含むことができる。いくつかの設計に関して、および／またはいくつかの状況では、ディスプレイシステムまたはデバイスは、ユーザ意図が判定されるまで、検出されたオブジェクト、運動、および／または音に基づいて、作用する場合とそうではない場合がある。
【0289】
実施例として、ユーザは、外科手術アシスタントと短く会話し得る。マイクロホンが、外科医とアシスタントとの間の会話を捕捉してもよい。オーディオデータは、これから始まる外科手術を確認し得るが、行われるべき任意のアクションをトリガしなくてもよい。ユーザは、次いで、患者に近づき、外科手術器具を取り上げてもよい。そのようなアクションを１つまたはそれを上回るユーザおよび／または環境センサによって提供される情報から判定することに基づいて、処理電子機器は、手術を開始するユーザ意図を判定し得る。そのようなアクションは、処理電子機器がブロック５０３０に進むことをトリガし得る。本明細書に説明されるように、いくつかの設計は、特定のユーザのためにカスタマイズされてもよい。例えば、特定の外科医は、外科手術を実施する前に、ある習慣、儀式、または手技を有し得（例えば、「始めます」と言う）、そのような習慣、手技、または儀式は、ディスプレイシステムまたはデバイス上に記憶されてもよい。
【0290】
ユーザ意図が判定された後、処理電子機器は、ブロック５０３０に従って、実施を継続することができる。いくつかの実施形態では、処理電子機器はまた、感知される状況における他のユーザ意図の判定を継続することができる。
【0291】
ブロック５０３０では、処理電子機器は、可能性として、少なくとも部分的に、ユーザ意図および／またはユーザ注目等に基づいて、例えば、ユーザの視野内の実または仮想オブジェクトのユーザ知覚を改変するように構成されることができる。そのような実または仮想オブジェクトは、アイウェアを通して眼に伝送する、光が反射または放出される、頭部搭載型ディスプレイの正面のユーザの環境内の実オブジェクト、またはディスプレイによって表示される仮想コンテンツを備えてもよい。処理電子機器は、例えば、本明細書に説明される画像修正技法のいずれかを使用して、仮想オブジェクトを備える仮想画像コンテンツを改変することによって、実または仮想コンテンツのユーザ知覚を改変するように構成されることができる。実または仮想コンテンツのユーザ知覚の改変は、眼が指向されているオブジェクトのレンダリングの増強または眼が指向されているオブジェクト（例えば、実または仮想オブジェクト）を囲繞する１つまたはそれを上回る特徴の強調解除のうちの少なくとも１つを含んでもよい。実施例として、ディスプレイシステムまたはデバイスは、例えば、処理電子機器によって提供される命令を介して画像コンテンツを異なる場所に提示するように構成されることができる。いくつかのインスタンスでは、ユーザの周辺視野内の実または仮想オブジェクトは、例えば、より容易な視認のために、ユーザの中心視野内に提示または再レンダリングされてもよい。代替として、ユーザの中心視野内の実または仮想オブジェクトは、ユーザの周辺視野に再レンダリングまたは提示され、例えば、乱雑を除去してもよい。ユーザの周辺視野内の実または仮想オブジェクトはまた、ユーザの周辺視野の別の領域内に提示またはレンダリングされてもよい（例えば、遠周辺視野から近周辺視野またはその逆もしくは遠中心視野から近中心視野またはその逆）。いくつかのインスタンスでは、ディスプレイシステムまたはデバイスは、例えば、処理電子機器によって提供される命令を介して、画像コンテンツを第１の深度平面から第２の深度平面（例えば、より遠い深度平面からより近い深度平面またはその逆）に提示するように構成されることができる。また、本明細書に説明されるように、画像コンテンツは、同一深度平面上で側方に変位されてもよい（例えば、ユーザのより近いまたはより遠い中心視野に側方に変位される）。
【0292】
別の実施例として、ディスプレイシステムまたはデバイスは、例えば、処理電子機器によって提供される命令を介して、本明細書に説明される技法増強（または強調解除）のいずれかを使用して、画像コンテンツを修正するように構成されることができる。例えば、処理電子機器は、画像コンテンツ（実または仮想オブジェクトを備える画像コンテンツ等）のコントラスト、不透明度、色、色飽和、カラーバランス、サイズ、背景、明度、縁可視性、鮮明度等の１つまたはそれを上回る画像属性を改変（例えば、増加、減少）させるように構成されることができる。画像コンテンツの強調は、画像コンテンツの１つまたはそれを上回る画像属性のあるもの（例えば、明度、鮮明度、コントラスト等）を増加させることを含んでもよい。例えば、画像コンテンツの強調は、画像コンテンツの色を改変する、画像コンテンツの不透明度を増加させることを含んでもよい。画像コンテンツの強調解除は、該１つまたはそれを上回る画像属性（例えば、明度、鮮明度、コントラスト等）のあるものを減少させることを含んでもよい。例えば、画像コンテンツの強調解除は、画像コンテンツの色を改変する、画像コンテンツの不透明度を減少させることを含んでもよい。ある場合には、オブジェクトを囲繞する特徴は、強調解除され、オブジェクトをより顕著にしてもよい。オブジェクトを囲繞する特徴の強調解除は、周囲画像コンテンツの１つまたはそれを上回る画像属性のあるものを減少させることを含んでもよい。例えば、周囲特徴の強調解除は、周囲仮想画像コンテンツを強調解除し、および／または周囲仮想画像コンテンツの不透明度を増加させ、それによって、ユーザの頭部搭載型ディスプレイの正面の周囲環境のビューを減衰させることを含んでもよい。
【0293】
いくつかの設計では、画像コンテンツは、ユーザから異なる深度（例えば、異なる深度平面）において生じるかのように、画像コンテンツを表示することによって、強調（例えば、増強）または強調解除されることができる。例えば、画像コンテンツの強調は、画像コンテンツをより近い深度上に表示し、および／または周囲画像コンテンツをより遠い深度に表示することを含んでもよい。画像コンテンツの強調解除は、画像コンテンツをより遠い深度に表示し、および／または周囲画像コンテンツをより近い深度に表示することを含んでもよい。知覚される深度は、可能性として、少なくとも部分的に、光の発散を変動させることによって提供されてもよい。いくつかのインスタンスでは、画像コンテンツは、コンテンツが別様にユーザによって知覚されるであろう状態（例えば、増強または強調解除されない場合）と比較して、および／またはユーザの視野内の他のオブジェクトと組み合わせて、増強または強調解除されることができる。例えば、ユーザの周辺視野内の画像コンテンツおよび／またはオブジェクトは、ユーザの中心視野内の画像コンテンツおよび／またはオブジェクトに対して強調解除されてもよい。本明細書に説明されるように、拡張または強調解除の程度は、少なくとも部分的に、中心視野または中心窩からの距離、２点区別のための最小距離、眼の空間分解能、錐体密度、桿体密度、照明条件等のうちの１つまたはそれを上回るものに基づくことができる。
【0294】
増強の他の実施例は、ハイライトを含む。例えば、黄色ハイライトが外向きに面したカメラおよびディスプレイを使用して再レンダリングされる、環境内のオブジェクトの画像等の仮想オブジェクトにわたって重畳されてもよい。別の実施例は、黄色ハイライトを透過ディスプレイを通して見える実オブジェクトの正面に重畳することである。黄色ハイライトは、透過ディスプレイを通して見えるオブジェクト（例えば、速度制限標識）をウォッシュアウトするように、明るすぎ得ず、透過ディスプレイを通したオブジェクトのビューを補完するために十分であり得るが、黄色仮想コンテンツ（ハイライト）と実オブジェクトである速度制限標識の組み合わせは、ユーザの注意を速度制限標識に向け得る。
【0295】
さらに、ある実施形態は、ユーザ注目を伴う所与の状況に関して、ブロック５０２０および５０３０を繰り返し、状況における他のユーザ意図を判定し、それらの他のユーザ意図に基づいて、画像コンテンツのユーザ知覚を改変することができる。
【0296】
実施例として、外科手術の実施を開始するユーザ意図に基づいて、灰色背景が、ユーザが外科手術部位上に合焦し、外科手術部位に対して手術室の残りを強調解除することに役立つように提供されることができる。十分に強度のある灰色光は、背景特徴を別様に構成するであろう、実オブジェクトまたはユーザおよび頭部搭載型ディスプレイの正面の環境内の特徴が、ユーザにあまり目立たないように、眼の中に投影されることができる。本灰色背景はまた、注意を逸らす詳細を低減または除去するように、均質であることができる。他の画像／他の仮想画像コンテンツ等の背景内の他の画像コンテンツの投影も同様に、低減または除去されることができる。このように、背景内の特徴は、そのような特徴が外科手術部位上で外科手術を実施するユーザに注意散漫とならないように十分にウォッシュアウトまたはペイントオーバーされることができる。外科手術の間の別のユーザ意図は、周辺に位置する心臓モニタ上の医療画像の視認を含んでもよい（例えば、眼追跡に基づいて）。そのようなユーザ意図に基づいて、ある実施形態は、より容易な視認のために、医療画像の画像を外科手術部位のより近くに提示することができる。
【0297】
本明細書に説明される種々の実施例は、医療コンテキストにおけるものである。種々の実施形態はまた、例えば、日々のアクティビティおよびタスクを含む、他のコンテキストにも適用されることができる。一実施例は、車両（例えば、車、タクシー、バス、オートバイ、電車、建設車両、トラクタ、農業機器、船舶、航空機等）を動作させることを含み、これは、ユーザ注目および集中がオペレータおよびオペレータの周囲の者にとって有用であり得る。例えば、一時停止標識、交通信号、横断歩道、および他の交通特徴を強調させることによって、拡張現実拡張は、運転手に、そうでなければ見えないまたは気付かない場合がある状況をアラートし、それによって、安全性を改善することができる。
【0298】
図１４を継続して参照すると、ブロック５０１０では、処理電子機器は、ユーザ注目を伴う状況を感知してもよい。ユーザ注目を伴う状況の感知は、ユーザの眼が指向されているオブジェクトを判定することを含んでもよい。これは、ユーザの眼が指向されているオブジェクトの判定は、ユーザの眼が視認している場所を判定するように構成される、眼追跡センサから受信された感覚情報の一部に基づいてもよい。例えば、頭部搭載型ディスプレイデバイスを装着するユーザが、その家から出て、車両（例えば、車）に向かって歩き得る。ユーザおよび／または環境センサのうちの１つまたはそれを上回るものによって捕捉された画像は、建物の内側の画像、ドアとの相互作用、屋外の画像、および／または車両を含んでもよい。そのような画像は、行われるべき任意のアクションをトリガする場合とそうではない場合がある。ユーザは、次いで、車両ドアを開放し得る。１つまたはそれを上回るユーザまたは環境センサによって提供される情報に基づいて、処理電子機器は、ユーザ注目を伴う状況を感知し得る。ディスプレイシステムは、オブジェクトを結像してもよく、オブジェクト認識が、使用され、それらのオブジェクトと、可能性として、それらのオブジェクトの移動とを識別してもよい。ディスプレイシステムは、例えば、オブジェクト認識を使用して、運転手が、車両を始動させる、すなわち、車両のギア（例えば、ドライブまたはバック）を入れていることを識別してもよい。ディスプレイシステムは、無線インターネット（例えば、ＷｉＦｉ）、Ｂｌｕｅｔｏｏｔｈ（登録商標）、および／または他の情報収集システムを取得してもよい。ディスプレイシステムは、Ｂｌｕｅｔｏｏｔｈ（登録商標）接続を通して、車両に接続（例えば、それと「ペアリングされる」）されてもよく、これは、ユーザが車両内に存在する（または少なくとも車両に近接している）ことのインジケーションであり得る。ディスプレイシステムは、ディスプレイシステムが本特定の車両と以前にペアリングしたことがあるかどうかを検出することが可能であり得る。ディスプレイシステムは、単に、無線信号（例えば、Ｂｌｕｅｔｏｏｔｈ（登録商標））または他の無線もしくはＲＦ信号等の他の信号を検出し、ユーザが車の中に存在する、またはそこに近接していることを判定してもよい。ディスプレイシステムは、例えば、ユーザのビューおよびビュー内のオブジェクトを認識することによって、ユーザが、車を運転しようとしている、または車を運転中であることを判定してもよい。他のタイプのセンサもまた、運転手が運転中である、または運転する意図があることを判定するために使用されてもよい。車のナビゲーションシステムまたは他の制御システム（例えば、ヒータおよび／またはクーラ）への音声コマンド、車をロックする音、またはエンジンをかける音等のオーディオの感知は、ユーザが車の運転を開始しようとしていることを示し得る。ＧＰＳまたは加速度計からの加速および／または運動データも、車両が静止または運動中であるかどうかを判定するために使用されてもよい。ハンドルまたは運転手側からフロントガラスを通したビューを示す、頭部搭載型ディスプレイの外向きに面したカメラからの画像と結合される、オーディオ入力（エンジン開始の音）等の入力の組み合わせは、ユーザが運転しようとしている、または運転中であることを示し得る。
【0299】
処理電子機器は、ユーザが車の運転に関わっていることを判定し、および／または運転と関連付けられた状況、例えば、ユーザが急停止しようとしていることを識別してもよい。１つまたはそれを上回るユーザおよび／または環境センサは、前方の車両が、徐々に減速しつつある、または急停止したこと等を検出してもよい。測距計（レーザ測距計）、ＬＩＤＡＲ、レーダ、超音波測距デバイス、または他の位置感知システム等のオブジェクトの位置を判定する、センサは、位置および／または位置の変化を判定可能であり得る。オブジェクトおよびユーザまたはユーザの車両が徐々に近づいている率が、判定された環境センサによって識別されるオブジェクトの１つまたはそれを上回る位置（例えば、位置の変化）に基づいて、判定されてもよい。ユーザまたはユーザの車両がオブジェクトと衝突する、またはオブジェクトがユーザまたはユーザの車両と衝突するリスクのうちの少なくとも１つが、確認されてもよい。ディスプレイシステムは、画像コンテンツを表示する、および／または必要に応じて、オブジェクトまたは画像コンテンツを増強ならびに／もしくは強調解除することができる。例えば、仮想一時停止、警告、またはアラート標識が、表示されてもよく、かつ増強されてもよく、および／または他のオブジェクトもしくは画像コンテンツは、強調解除されることができる。加えて、表示される画像コンテンツの量は、判定されたリスクに基づいて、低減されることができる。例えば、画像コンテンツは、ある場合には、全くまたは実質的に全く表示されず、注意散漫の尤度を低減させ、ユーザが状況（措置が講じられない、例えば、ブレーキが踏まれない、車がオブジェクトから離れるように操向されない場合の可能性として考えられる衝突）に注目することを可能にしてもよい。
【0300】
いくつかの実施形態では、処理電子機器は、自動的に受信された信号に基づいて、状況が注目を伴うことを判定してもよい。例えば、処理電子機器は、両手が車のハンドル上にあることがユーザ注目を伴う状況を示すことを判定し得る。眼追跡センサまたはカメラ等の内向きに面したセンサ等の１つまたはそれを上回るセンサは、少なくとも、視線方向の変化の最小頻度を検出してもよい。センサは、例えば、眼を細めること、閾値音量を上回る発話、ユーザの身体（例えば、ハンドルをきつく握持する）によって付与される閾値レベルを上回る圧力に起因する皮膚色の変化、および／または例えば、１つまたはそれを上回る環境または内向きに指向されるセンサによって判定されるような心拍数の上昇等、ユーザによる注目を示し得る、ユーザによるアクションを検出するように構成されてもよい。さらなる実施例として、ディスプレイシステムのセンサは、ユーザが車両（例えば、車、建設車両）の１つまたはそれを上回る特定の制御を握持していることを検出し得、これは、状況が増加されたユーザ注目を伴うことを示し得る。
【0301】
ブロック５０１０の一部として、ディスプレイシステムは、ユーザ注目を感知する際、車両の動作を囲繞する１つまたはそれを上回る条件を考慮可能であり得る。ディスプレイシステムは、ユーザについてのデータ記録等の情報を記憶する、メモリ記憶デバイス（例えば、ハードドライブ、ＲＡＭ）を含んでもよい。ディスプレイシステムの１つまたはそれを上回るセンサはまた、ユーザの１つまたはそれを上回る特性を感知可能であり得る。メモリデバイスは、ユーザの年齢、ユーザのサイズおよび／または身長、ユーザの識別、ユーザの運転証明書（例えば、運転免許証、仮免許証、限定使用許可）、ユーザの運転記録（例えば、是正勧告／違反切符、逮捕、および／または免許の停止、制限、ならびに／もしくは取消の回数および／または原因）、実績記録（例えば、学業ＧＰＡ、犯罪記録）、および／またはユーザの能力（例えば、物理的および／または精神学的病気もしくは限界の有無）等のユーザの１つまたはそれを上回るデータ記録および／または特性を保持してもよい。
【0302】
１つまたはそれを上回るセンサは、上記に列挙されたもの等のユーザの特性および／または１つまたはそれを上回る特性に関連するデータを検出するように構成されてもよい。外向きに面したカメラを含む、他の実施例は、ユーザの運転証明書（例えば、仮免許証）を走査し、ユーザ位置および／または配向（例えば、ユーザが運転手席に存在するかどうか）を検出し、および／またはユーザの物理的および／または精神的特性（例えば、身長、体重等）を感知してもよい。処理電子機器は、潜在的に、これらの要因のうちの１つまたはそれを上回るものが注目を伴う状況を示すことを判定してもよく、より完全に以下に説明されるように、システムアプリケーション（例えば、電子メール、テキスト等）へのユーザアクセス許可を調節してもよい。
【0303】
ブロック５０２０では、処理電子機器は、随意に、状況に対するユーザ意図を判定するように構成されることができる。例えば、ユーザは、車内に着座し得る。そのような情報は、行われるべき任意のアクションをトリガする場合とそうではない場合がある。いくつかの実施形態では、１つまたはそれを上回るセンサは、あるオブジェクトの存在およびユーザとの相対的位置を検出および／または検索し、ユーザが車両を動作させる（例えば、車を運転する）位置に存在するかどうかを確認してもよい。例えば、処理電子機器は、ユーザが運転手席に存在することを示す、オブジェクトの存在および相対的位置を判定してもよい（例えば、運転手側ドアおよび／またはユーザの左側のサイドミラー、ユーザの右側の助手席、ユーザの正面のダッシュボードおよびハンドル、ユーザの右上のバックミラー等）。処理電子機器は、１つまたはそれを上回るセンサが運転を開始しようとしている意図と一致する情報を提供するとき（例えば、ユーザがエンジンをかける、エンジンの音、ユーザが車をドライブまたはバックに入れる、ユーザが後方、バックミラー、またはバックカメラ画像を凝視する等）、ユーザがそのような状態であることを判定し得る。
【0304】
ブロック５０３０では、処理電子機器は、少なくとも部分的に、増加されたユーザ注目および／または少なくとも部分的に、ユーザ意図に基づいて、例えば、ユーザの視野内の実または仮想オブジェクト（頭部搭載型ディスプレイの正面の環境内の実オブジェクトまたは仮想コンテンツ等）のユーザ知覚を改変するように構成されることができる。種々のディスプレイシステムは、例えば、１つまたはそれを上回るセンサを介して、ユーザに強調することが有用であり得るオブジェクトを持続的に監視することができる。例えば、ディスプレイシステムまたはデバイスは、交通標識、道路標識、横断歩道、および／または他のオブジェクト（例えば、交通信号、一時停止標識、速度制限標識等）を検索し、拡張または仮想コンテンツをユーザの視野に追加してもよい。例えば、標識は、増強および／または再レンダリング、可能性として、増強されてもよく、可能性として、中心視野のより近くに提示され、運転手がより安全に運転することに役立ち得る。前述のように、標識は、色ハイライトで強調されてもよい。ディスプレイシステムはまた、例えば、アラート（例えば、電子メール、電話呼、テキストまたは他のメッセージ、ソーシャルメディア通知）、オーディオおよび／またはビデオ提示、および／または周辺音等の注意散漫となるものを強調解除してもよい。注意散漫となるものの強調解除は、注意散漫となるものへのアクセスを限定または除去することを含んでもよい。例えば、あるソフトウェアアプリケーション（例えば、「アプリ」）、インターネット、および／または他の通信サービス（例えば、電子メール、電話）の機能性ならびに／もしくはそこへのアクセスは、あるアクション（例えば、車両を動作させる）の間および／またはある状況下（例えば、ある年齢を下回るオペレータ）では、低減、制限、または禁止されてもよい。注意散漫となるものの強調解除は、（例えば、ディスプレイシステム上に表示することからの）視覚的刺激を調光もしくは除去する、および／または聴覚的刺激（例えば、歌、トーン、音声）の音量を低下もしくは静穏にすることを含んでもよい。仮想コンテンツは、したがって、ある場合には、除去または低減され得る一方、他の仮想コンテンツは、ある場合には、追加され得る。故に、ディスプレイシステムは、車両（例えば、車）の動作の安全性を増強させるように構成され得る。
図１４におけるブロック図は、ユーザ注目を伴う状況を感知し、ユーザ意図を判定することを参照するが、これらのいずれかまたは両方とも、随意に、含まれてもよい、または両方とも、除外されてもよい。
図１４におけるブロック図は、ユーザ注目を伴う状況を感知し、ユーザ意図を判定することを参照するが、これらのいずれかまたは両方とも、随意に、含まれてもよい、または両方とも、除外されてもよい。
【0305】
いくつかの設計では、処理電子機器は、自動車両の動作の間に許可される複数のアプリケーション（例えば、システムアプリケーション、第三者アプリケーション）および／または許可されない複数のアプリケーションを判定してもよい。処理電子機器は、前述の１つまたはそれを上回る要因（例えば、ユーザ特性、環境読取値）に基づいて、利用可能である、および／または低減されたアクセス／機能性を有する、アプリケーションを判定してもよい。例えば、ある年齢を下回る、ある年齢を上回る、または車両を動作させる許可証明書を有していない、ユーザは、ディスプレイシステムのアプリケーションへの制限されるアクセスを有し得る。１つまたはそれを上回るセンサは、運動中の車または人々のようなオブジェクト等の運動を検出するように構成されてもよい。実施例として、検出された運動に基づいて、処理電子機器は、急停止する車両、減速車両、自転車、および／または歩行者の存在を判定するように構成されてもよい。そのような潜在的に危険な状況では、関連コンテンツは、増強されて（および／または周囲等のあまり関連しない詳細は、強調解除される）、運転手が事故を回避することに役立ち得る。着目オブジェクト、例えば、車両、自転車、歩行者は、例えば、高コントラストを提供する色で明るく再レンダリングされ得る。アラームはまた、アイウェアが状況を検出することに基づいて、発報してもよい。他の背景特徴は、例えば、明るい色の光を眼内に投影し、実環境内のそれらの特徴または特徴仮想コンテンツの特徴をウォッシュアウトまたはペイントオーバーすることによって、強調解除されてもよい。均質領域が、注意散漫詳細を低減させるために提供されてもよい。他の実施例も、可能性として考えられる。
【0306】
種々の実施形態はまた、本明細書に説明されるような他の特徴を含んでもよい。例えば、ディスプレイシステムまたはデバイスは、アラートをユーザに提供し、例えば、画像コンテンツの変化を示してもよい。アラートは、視覚的アラート（例えば、ポップアップ、アイコン、点滅光等）、感覚的アラート（例えば、振動）、および／または聴覚的アラート（例えば、ベル、音楽、音声等）を含んでもよい。
【0307】
故に、設計に応じて、頭部搭載型ディスプレイデバイスは、ユーザの環境内のオブジェクトを結像するように構成される、１つまたはそれを上回る外向きに面したカメラと、該ディスプレイおよび該外向きに面したカメラと通信する、処理電子機器とを備えてもよい。処理電子機器は、画像コンテンツをユーザの視野に表示し、オブジェクト認識を１つまたはそれを上回る外向きに面したカメラから受信された画像に適用することによって、ユーザの環境内の１つまたはそれを上回るオブジェクトを認識し、該オブジェクト認識に基づいて、画像コンテンツのレンダリングの増強またはディスプレイによって表示される画像コンテンツのレンダリングの強調解除のうちの少なくとも１つを行うように構成されてもよい。増強は、コントラスト、色飽和、明度、縁可視性、不透明度、鮮明度の増加、またはレンダリングされる画像コンテンツの色またはカラーバランスの改変のうちの１つまたはそれを上回るものを含んでもよい。強調解除は、コントラスト、色飽和、明度、縁可視性、不透明度、または鮮明度の減少、またはレンダリングされる画像コンテンツの色またはカラーバランスの改変のうちの１つまたはそれを上回るものを含んでもよい。１つまたはそれを上回る外向きに面したカメラは、フレーム上に配置されてもよい。
【0308】
いくつかの設計では、頭部搭載型ディスプレイデバイスは、ユーザの環境内のオブジェクトを結像するように構成される、１つまたはそれを上回る外向きに面したカメラと、ディスプレイおよび外向きに面したカメラと通信する、処理電子機器とを備える。処理電子機器は、画像コンテンツをユーザの視野に表示し、オブジェクト認識を１つまたはそれを上回る外向きに面したカメラから受信された画像に適用することによって、ユーザの環境内の１つまたはそれを上回るオブジェクトを認識し、該オブジェクト認識に基づいて、該透明部分を通したユーザの眼へのユーザの正面の環境のビューの少なくとも一部を強調解除するように構成されてもよい。強調解除は、透明部分を通した環境のビューの明度、可視性、鮮明度、またはコントラストの低減、または該透明部分を通した環境の色の改変のうちの１つまたはそれを上回るものを含んでもよい。強調解除は、該１つまたはそれを上回る外向きに面したカメラからの画像を表示すること以外によって、不透明度または明度を増加させ、該透明部分を通した環境のビューを減衰させることを含んでもよい。
【0309】
また、いくつかの頭部搭載型ディスプレイ設計では、処理電子機器は、ディスプレイと通信してもよく、処理電子機器は、画像コンテンツをユーザの視野に表示し、ディスプレイによって表示される画像コンテンツのレンダリングの増強または画像コンテンツのレンダリングの強調解除のうちの少なくとも１つを行うように構成される。増強は、コントラスト、色飽和、明度、縁可視性、不透明度、鮮明度の増加、またはディスプレイによって表示される他の画像コンテンツに対するレンダリングされる画像コンテンツの色またはカラーバランスの改変のうちの１つまたはそれを上回るものを含んでもよい。強調解除は、コントラスト、色飽和、明度、縁可視性、不透明度、または鮮明度の減少、またはディスプレイによって表示される他の画像コンテンツに対するレンダリングされる画像コンテンツの色またはカラーバランスの改変のうちの１つまたはそれを上回るものを含んでもよい。故に、処理電子機器は、ディスプレイによって表示される画像コンテンツのレンダリングを増強させるように構成されることができる。代替として、または加えて、処理電子機器は、該ディスプレイによって表示される画像コンテンツのレンダリングを強調解除するように構成される。処理電子機器は、ディスプレイによって表示される周囲画像コンテンツに対して、該ディスプレイによって表示される画像コンテンツのレンダリングを増強させるように構成されることができる。処理電子機器は、強調解除された画像コンテンツによって囲繞されるディスプレイによって表示される画像コンテンツに対して、ディスプレイによって表示される画像コンテンツのレンダリングを強調解除するように構成されることができる。
【0310】
また、頭部搭載型ディスプレイデバイスの設計に応じて、デバイスは、ユーザの環境内のオブジェクトを結像するように構成される、１つまたはそれを上回る外向きに面したカメラと、ユーザの眼が視認している場所を判定するように構成される、１つまたはそれを上回る眼追跡センサと、ディスプレイ、外向きに面したカメラ、および眼追跡センサと通信し、該ディスプレイ上での画像コンテンツの提示を制御する、処理電子機器とを含んでもよい。処理電子機器は、画像コンテンツを該ユーザの視野に表示し、眼が指向されているオブジェクトを判定し、眼が指向されているオブジェクトのレンダリングの増強または眼が指向されているオブジェクトを囲繞するディスプレイ上の画像内の１つまたはそれを上回る特徴の強調解除のうちの少なくとも１つを行うように構成されてもよい。ディスプレイデバイスは、したがって、ユーザが合焦しているオブジェクトを識別することができ、ディスプレイ上にレンダリングされるようなそのオブジェクトを増強させ、および／またはディスプレイ上にレンダリングされる他のオブジェクトを強調解除することができる。処理電子機器は、ディスプレイ上に、ユーザが合焦しているオブジェクトを囲繞する１つまたはそれを上回る特徴を表示するが、ディスプレイ上にレンダリングされるような眼が指向されているオブジェクトを囲繞する該１つまたはそれを上回る特徴を強調解除するように構成されることができる。
前述のように、オブジェクト認識は、単に、オブジェクトおよび背景を判別することを含んでもよい。他の形態のオブジェクト認識は、オブジェクトの内容と、それと関連付けられた機能および／または特性とを識別することを含んでもよい。
前述のように、オブジェクト認識は、単に、オブジェクトおよび背景を判別することを含んでもよい。他の形態のオブジェクト認識は、オブジェクトの内容と、それと関連付けられた機能および／または特性とを識別することを含んでもよい。
【0311】
様々な他の変形例および設計も、可能性として考えられる。例えば、ディスプレイシステムは、ユーザの環境内のオブジェクトを結像するように構成される、外向きに面したカメラを含んでもよい。ディスプレイシステムはさらに、本明細書（例えば、上記）に説明されるディスプレイおよび／または外向きに面したカメラと通信する、処理電子機器を含んでもよい。処理電子機器は、ユーザが車両（例えば、車）を動作中であることを判定するように構成されてもよい。処理電子機器は、ユーザの視野内のオブジェクトを増強させるように構成されてもよい。ユーザの視野内のオブジェクトを増強させることは、オブジェクトの画像コンテンツをユーザの視野内の第１の場所から第２の場所に移動させることを含んでもよい。代替として、または加えて、ユーザの視野内のオブジェクトを増強させることは、増強を伴わずに、オブジェクトのオリジナル色に対してオブジェクトの知覚される色を改変することを含んでもよい。ユーザの視野内のオブジェクトを増強させることは、表示される画像コンテンツのコントラスト、色飽和、明度、縁可視性、不透明度、または鮮明度の増加のうちの１つまたはそれを上回るものを含んでもよい。ユーザの視野内のオブジェクトを増強させることは、部分的に透明な色をオブジェクトにわたって重畳することによって、オブジェクトをハイライトすることを含んでもよい。
強調解除もまた、潜在的に、提供されてもよい。そのような環境内の実オブジェクトの強調解除は、実オブジェクトがあまり可視ではないように、十分な明度の光を眼の中に指向することを含んでもよい。仮想オブジェクトの強調解除は、表示される仮想画像コンテンツのコントラスト、色飽和、明度、縁可視性、不透明度、または鮮明度を低減させることを含んでもよい。
強調解除もまた、潜在的に、提供されてもよい。そのような環境内の実オブジェクトの強調解除は、実オブジェクトがあまり可視ではないように、十分な明度の光を眼の中に指向することを含んでもよい。仮想オブジェクトの強調解除は、表示される仮想画像コンテンツのコントラスト、色飽和、明度、縁可視性、不透明度、または鮮明度を低減させることを含んでもよい。
【0312】
設計に応じて、頭部搭載型ディスプレイデバイスは、１つまたはそれを上回るユーザ記録（例えば、実績記録）を含有するように構成される、データベースを含んでもよい。ディスプレイデバイスはまた、１つまたはそれを上回るユーザ記録に基づいて、表示される画像コンテンツの量を低減させるように構成される、処理電子機器を含んでもよい。処理電子機器は、１つまたはそれを上回るユーザ記録に基づいて、１つまたはそれを上回るシステムおよび／またはユーザアプリケーションへのユーザアクセスを可能にする場合とそうではない場合がある。そのようなアプリケーションの実施例は、電子メール、テキスト、電話コール、ソーシャルメディア接続等を含んでもよい。処理電子機器は、１つまたはそれを上回るユーザ記録に基づいて、画像コンテンツの指定される量が表示されることを可能にしてもよい。例えば、アクセス証明書の判定がない場合、ユーザは、使用されることができるアプリケーションが制限され得る。代替として、または加えて、アクセス証明書の判定がない場合、画像コンテンツの指定される量は、表示されないように制限され得る。ユーザアクセス証明書に基づいて、表示される画像コンテンツの量は、低減されてもよい。１つまたはそれを上回るユーザ記録は、限定ではないが、運転記録、事故記録、是正勧告記録、学業記録、犯罪記録、または逮捕記録のうちの少なくとも１つを含んでもよい。代替として、または加えて、記録は、ユーザの年齢の記録を含んでもよい。１つまたはそれを上回るユーザ記録に基づいて、表示される画像コンテンツの量を低減させることは、表示される画像コンテンツへのユーザアクセスを選択的に有効にすることを含んでもよい（例えば、あるアプリケーションまたは仮想コンテンツへのユーザアクセスを可能にするが、その他は可能にしない）。ある場合には、表示される画像コンテンツの量を低減させることは、画像コンテンツを全くまたは画像コンテンツを実質的に全く表示しないことを含んでもよい。
【0313】
ディスプレイデバイスは、少なくとも部分的に、車両のプロセッサとの確立された通信リンクに基づいて、ユーザが車両に近接していることを判定するように構成される、処理電子機器を含んでもよい。処理電子機器は、確立された通信リンクに基づいて、表示される画像コンテンツの量を低減させるように構成されてもよい。ユーザが車両に近接していることを判定することは、ユーザが車両内に存在し、および／またはユーザが車両を動作中であることを判定することを含んでもよい。ユーザが車両を動作中であることを判定することは、ユーザが車両（例えば、車、ボート）を運転中であることを判定することを含んでもよい。処理電子機器は、部分的に、環境のセンサ、例えば、無線受信機、光学受信機のうちの１つによって受信された信号に基づいて、ユーザが車両に近接していることを判定してもよい。ユーザが車両に近接していることを判定することは、無線周波数信号の受信および／または送信もしくは赤外線信号の送信のうちの少なくとも１つを含んでもよい。処理電子機器はまた、通信リンクの確立とともに、１つまたはそれを上回る外向きに面した画像センサ（例えば、カメラ）のうちの１つによって受信された画像を使用して、ユーザが車両に近接していることを判定してもよい。確立された通信リンクに基づいて、表示される画像コンテンツの量を低減させることは、任意の画像コンテンツを表示しない、または実質的に任意の画像コンテンツを表示しないことを含んでもよい。
【0314】
ディスプレイデバイスの設計に従って、ディスプレイデバイスは、ユーザの環境内のオブジェクトを結像するように構成される、外向きに面したセンサ（例えば、カメラ）を含んでもよい。ディスプレイデバイスは、オブジェクトの１つまたはそれを上回る位置を識別するように構成される、１つまたはそれを上回る環境センサを含んでもよい。ディスプレイデバイス内の処理電子機器は、ユーザが車両を動作中であるかどうかを判定するように構成されてもよい。処理電子機器は、車両がオブジェクトと衝突するおよびオブジェクトが車両と衝突するリスクのうちの少なくとも１つを判定するように構成されてもよい。代替として、または加えて、処理電子機器は、ユーザが車両内に存在すると判定される間、表示される画像コンテンツの量を低減させるように構成されることができる。設計に応じて、処理電子機器は、判定された衝突リスクに基づいて、表示される画像コンテンツの量を低減させるように構成されることができる。衝突リスクを判定することは、１つまたはそれを上回る環境センサによって識別されるオブジェクトの１つまたはそれを上回る位置に基づいて、オブジェクトおよび車両が近づきつつある率を判定することを含んでもよい。
【0315】
ディスプレイの設計に従って、デバイスは、ユーザの環境内のオブジェクトを結像するように構成される、外向きに面したカメラと、ディスプレイおよび外向きに面したカメラと通信し、ディスプレイ上への画像コンテンツの提示を制御する、処理電子機器とを含んでもよい。処理電子機器は、ユーザが車両を動作中であることを判定し、ユーザの眼からの異なる距離から投影されるかのように、異なる発散量において画像コンテンツをユーザの視野に表示し、ユーザが車両を動作中であることの判定に基づいて、表示される画像コンテンツの量を低減させるように構成される。
故に、設計における様々な変形例が、可能性として考えられる。いくつかの設計では、例えば、１つまたはそれを上回るアプリケーション（例えば、ユーザアプリケーション、システムアプリケーション）の機能性および／またはそこへのアクセスならびに／もしくは表示される画像コンテンツの量は、アクセス管理システムによって管理されてもよい。アクセス管理システムは、１つまたはそれを上回るアプリケーションが使用され得る前に、および／または画像コンテンツが表示され得る前に、ログインおよび／またはパスワードを要求するように構成されてもよい。加えて、または代替として、アクセス管理システムは、システム設定に基づいて、ユーザへのアクセスを限定してもよい。アクセス管理システムは、異なるアクセス許可のセット（例えば、使用され得るアプリケーション、表示されるであろう画像コンテンツ）を与えるように構成されてもよい。アクセス許可は、「ホワイトリスト」（例えば、アプリケーションおよび／または表示される画像コンテンツが可能にされるリスト）および／または「ブラックリスト」（例えば、制限されるアプリケーションおよび／または表示される画像コンテンツのリスト）として提供されてもよい。設計に従って、アクセス管理システムは、変更されることができない、アクセス許可を有してもよい。アクセス許可は、より上位のアクセス許可によって上書きされてもよい。例えば、両親は、子供のアクセス許可を上書きしてもよい。代替として、アクセス許可は、上書き不能であってもよい。設計に応じて、緊急上書きは、あるアプリケーションおよび／または画像コンテンツへのユーザアクセス（例えば、限定されたアクセス）を可能にしてもよい。アクセス管理システムは、少なくとも部分的に、動作中の車両のタイプに基づいて、あるアプリケーションおよび／または画像コンテンツへのアクセスを付与してもよい。例えば、車の運転の間、可能にされないであろう、ある機能性は、ユーザがボートを運転するためには提供され得る。アクセス管理システムは、ユーザ記録（例えば、年齢、運転記録、学業平均値（ＧＰＡ）、犯罪記録、ＤＷＤ逮捕等）に基づいて、ユーザ特有のアクセス許可を付与してもよい。アクセス管理システムは、限定ではないが、車両タイプ、ユーザ、デバイス、地方管轄権の法律、上書き制御ポリシ、場所の人口密度、ユーザアクティビティの程度（例えば、ユーザが車を運転する代わりに、車内に着座している）等を含む、種々の要因に基づいて、アプリケーションおよび／または画像コンテンツへのアクセスを付与する場合とそうではない場合がある。
故に、設計における様々な変形例が、可能性として考えられる。いくつかの設計では、例えば、１つまたはそれを上回るアプリケーション（例えば、ユーザアプリケーション、システムアプリケーション）の機能性および／またはそこへのアクセスならびに／もしくは表示される画像コンテンツの量は、アクセス管理システムによって管理されてもよい。アクセス管理システムは、１つまたはそれを上回るアプリケーションが使用され得る前に、および／または画像コンテンツが表示され得る前に、ログインおよび／またはパスワードを要求するように構成されてもよい。加えて、または代替として、アクセス管理システムは、システム設定に基づいて、ユーザへのアクセスを限定してもよい。アクセス管理システムは、異なるアクセス許可のセット（例えば、使用され得るアプリケーション、表示されるであろう画像コンテンツ）を与えるように構成されてもよい。アクセス許可は、「ホワイトリスト」（例えば、アプリケーションおよび／または表示される画像コンテンツが可能にされるリスト）および／または「ブラックリスト」（例えば、制限されるアプリケーションおよび／または表示される画像コンテンツのリスト）として提供されてもよい。設計に従って、アクセス管理システムは、変更されることができない、アクセス許可を有してもよい。アクセス許可は、より上位のアクセス許可によって上書きされてもよい。例えば、両親は、子供のアクセス許可を上書きしてもよい。代替として、アクセス許可は、上書き不能であってもよい。設計に応じて、緊急上書きは、あるアプリケーションおよび／または画像コンテンツへのユーザアクセス（例えば、限定されたアクセス）を可能にしてもよい。アクセス管理システムは、少なくとも部分的に、動作中の車両のタイプに基づいて、あるアプリケーションおよび／または画像コンテンツへのアクセスを付与してもよい。例えば、車の運転の間、可能にされないであろう、ある機能性は、ユーザがボートを運転するためには提供され得る。アクセス管理システムは、ユーザ記録（例えば、年齢、運転記録、学業平均値（ＧＰＡ）、犯罪記録、ＤＷＤ逮捕等）に基づいて、ユーザ特有のアクセス許可を付与してもよい。アクセス管理システムは、限定ではないが、車両タイプ、ユーザ、デバイス、地方管轄権の法律、上書き制御ポリシ、場所の人口密度、ユーザアクティビティの程度（例えば、ユーザが車を運転する代わりに、車内に着座している）等を含む、種々の要因に基づいて、アプリケーションおよび／または画像コンテンツへのアクセスを付与する場合とそうではない場合がある。
【0316】
加えて、本明細書に説明される、ならびに／または図に描写されるプロセス、方法、およびアルゴリズムはそれぞれ、具体的かつ特定のコンピュータ命令を実行するように構成される、１つまたはそれを上回る物理的コンピューティングシステム、ハードウェアコンピュータプロセッサ、特定用途向け回路、および／もしくは電子ハードウェアによって実行される、コードモジュールにおいて具現化され、それによって完全もしくは部分的に自動化され得ることを理解されたい。例えば、コンピューティングシステムは、具体的コンピュータ命令とともにプログラムされた汎用コンピュータ（例えば、サーバ）または専用コンピュータ、専用回路等を含むことができる。コードモジュールは、実行可能プログラムにコンパイルおよびリンクされる、動的リンクライブラリ内にインストールされ得る、または解釈されるプログラミング言語において書き込まれ得る。いくつかの実装では、特定の動作および方法が、所与の機能に特有の回路によって実施され得る。
【0317】
さらに、本開示の機能性のある実装は、十分に数学的、コンピュータ的、または技術的に複雑であるため、（適切な特殊化された実行可能命令を利用する）特定用途向けハードウェアまたは１つもしくはそれを上回る物理的コンピューティングデバイスは、例えば、関与する計算の量もしくは複雑性に起因して、または結果を実質的にリアルタイムで提供するために、機能性を実施する必要があり得る。例えば、ビデオは、多くのフレームを含み、各フレームは、数百万のピクセルを有し得、具体的にプログラムされたコンピュータハードウェアは、商業的に妥当な時間量において所望の画像処理タスクおよび用途を提供するようにビデオデータを処理する必要がある。
【0318】
コードモジュールまたは任意のタイプのデータは、ハードドライブ、ソリッドステートメモリ、ランダムアクセスメモリ（ＲＡＭ）、読取専用メモリ（ＲＯＭ）、光学ディスク、揮発性もしくは不揮発性記憶装置、同一物の組み合わせ、および／または同等物を含む、物理的コンピュータ記憶装置等の任意のタイプの非一過性コンピュータ可読媒体上に記憶され得る。いくつかの実施形態では、非一過性コンピュータ可読媒体は、ローカル処理およびデータモジュール７０、遠隔処理モジュール７２、および遠隔データリポジトリ７４のうちの１つまたはそれを上回るものの一部であってもよい。本方法およびモジュール（またはデータ）はまた、無線ベースおよび有線／ケーブルベースの媒体を含む、種々のコンピュータ可読伝送媒体上で生成されたデータ信号として（例えば、搬送波または他のアナログもしくはデジタル伝搬信号の一部として）伝送され得、種々の形態（例えば、単一もしくは多重化アナログ信号の一部として、または複数の離散デジタルパケットもしくはフレームとして）をとり得る。開示されるプロセスまたはプロセスステップの結果は、任意のタイプの非一過性有形コンピュータ記憶装置内に持続的もしくは別様に記憶され得る、またはコンピュータ可読伝送媒体を介して通信され得る。
【0319】
本明細書に説明される、および／または添付される図に描写されるフロー図における任意のプロセス、ブロック、状態、ステップ、もしくは機能性は、プロセスにおいて具体的機能（例えば、論理もしくは算術）またはステップを実装するための１つもしくはそれを上回る実行可能命令を含む、コードモジュール、セグメント、またはコードの一部を潜在的に表すものとして理解されたい。種々のプロセス、ブロック、状態、ステップ、または機能性は、組み合わせられる、再配列される、追加される、削除される、修正される、または別様に本明細書に提供される例証的実施例から変更されてもよい。いくつかの実施形態では、付加的または異なるコンピューティングシステムもしくはコードモジュールが、本明細書に説明される機能性のいくつかまたは全てを実施し得る。本明細書に説明される方法およびプロセスはまた、任意の特定のシーケンスに限定されず、それに関連するブロック、ステップ、または状態は、適切な他のシーケンスで、例えば、連続して、並行して、またはある他の様式で実施されることができる。タスクまたはイベントが、開示される例示的実施形態に追加される、またはそれから除去され得る。さらに、本明細書に説明される実装における種々のシステムコンポーネントの分離は、例証を目的とし、全ての実施形態においてそのような分離を要求するものとして理解されるべきではない。説明されるプログラムコンポーネント、方法、およびシステムは、概して、単一のコンピュータ製品においてともに統合される、または複数のコンピュータ製品にパッケージ化され得ることを理解されたい。
【0320】
前述の明細書では、本発明は、その具体的実施形態を参照して説明された。しかしながら、種々の修正および変更が、本発明のより広義の精神および範囲から逸脱することなくそこに行われ得ることが明白となるであろう。明細書および図面は、故に、限定的意味ではなく、例証的と見なされるべきである。
【0321】
実際、本開示のシステムおよび方法は、それぞれ、いくつかの革新的側面を有し、そのうちのいかなるものも、本明細書に開示される望ましい属性に単独で関与しない、またはそのために要求されないことを理解されたい。上記に説明される種々の特徴およびプロセスは、相互に独立して使用され得る、または種々の方法で組み合わせられ得る。全ての可能な組み合わせおよび副次的組み合わせが、本開示の範囲内に該当することが意図される。
【0322】
別個の実施形態の文脈において本明細書に説明されるある特徴はまた、単一の実施形態における組み合わせにおいて実装されてもよい。逆に、単一の実施形態の文脈において説明される種々の特徴もまた、複数の実施形態において別個に、または任意の好適な副次的組み合わせにおいて実装されてもよい。さらに、特徴がある組み合わせにおいて作用するものとして上記に説明され、さらに、そのようなものとして最初に例示され得るが、例示される組み合わせからの１つまたはそれを上回る特徴は、いくつかの場合では、組み合わせから削除されてもよく、例示される組み合わせは、副次的組み合わせまたは副次的組み合わせの変形例を対象とし得る。いかなる単一の特徴または特徴のグループも、あらゆる実施形態に必要もしくは必須ではない。
【0323】
とりわけ、「～できる（ｃａｎ）」、「～し得る（ｃｏｕｌｄ）」、「～し得る（ｍｉｇｈｔ）」、「～し得る（ｍａｙ）」、「例えば（ｅ．ｇ．）」、および同等物等、本明細書で使用される条件文は、別様に具体的に記載されない限り、または使用されるような文脈内で別様に理解されない限り、概して、ある実施形態がある特徴、要素、および／またはステップを含む一方、他の実施形態がそれらを含まないことを伝えることが意図されることを理解されたい。したがって、そのような条件文は、概して、特徴、要素、および／もしくはステップが、１つもしくはそれを上回る実施形態に対していかようにも要求されること、または１つもしくはそれを上回る実施形態が、著者の入力または促しの有無を問わず、これらの特徴、要素、および／もしくはステップが任意の特定の実施形態において含まれる、もしくは実施されるべきかどうかを決定するための論理を必然的に含むことを示唆することを意図されない。用語「～を備える」、「～を含む」、「～を有する」、および同等物は、同義語であり、非限定的方式で包括的に使用され、付加的要素、特徴、行為、動作等を除外しない。また、用語「または」は、その包括的意味において使用され（およびその排他的意味において使用されず）、したがって、例えば、要素のリストを接続するために使用されると、用語「または」は、リスト内の要素のうちの１つ、いくつか、または全てを意味する。加えて、本願および添付される実施例で使用されるような冠詞「ａ」、「ａｎ」、および「ｔｈｅ」は、別様に規定されない限り、「１つまたはそれを上回る」または「少なくとも１つ」を意味するように解釈されるべきである。同様に、動作は、特定の順序で図面に描写され得るが、これは、望ましい結果を達成するために、そのような動作が示される特定の順序で、もしくは連続的順序で実施される、または全ての図示される動作が実施される必要はないと認識されるべきである。さらに、図面は、フローチャートの形態で１つまたはそれを上回る例示的プロセスを図式的に描写し得る。しかしながら、描写されない他の動作も、図式的に図示される例示的方法およびプロセス内に組み込まれることができる。例えば、１つまたはそれを上回る付加的動作が、図示される動作のいずれかの前に、その後に、それと同時に、またはその間に実施されることができる。加えて、動作は、他の実装において再配列される、または再順序付けられ得る。ある状況では、マルチタスクおよび並列処理が、有利であり得る。さらに、上記に説明される実施形態における種々のシステムコンポーネントの分離は、全ての実施形態におけるそのような分離を要求するものとして理解されるべきではなく、説明されるプログラムコンポーネントおよびシステムは、概して、単一のソフトウェア製品においてともに統合される、または複数のソフトウェア製品にパッケージ化され得ることを理解されたい。加えて、他の実装も、以下の実施例の範囲内である。いくつかの場合では、実施例に列挙されるアクションは、異なる順序で実施され、依然として、望ましい結果を達成することができる。
【0324】
故に、本開示は、本明細書に示される実施形態または実施例に限定されることを意図するものではなく、本明細書に開示される本開示、原理、および新規の特徴と一貫する最も広い範囲を与えられるべきである。例えば、本開示内の多くの実施例は、医療分野における医療用途に対して提供されるが、ある本明細書に説明される実施形態は、様々な他の用途のため、および／または多数の他の状況において実装されてもよい。
【図1A】
【図1B】
【図1C】
【図1D】
【図1E】
【図1F】
【図1G】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】
【図8】
【図9A】
【図9B】
【図9C】
【図10A】
【図10B】
【図11A】
【図11B】
【図12A】
【図12B】
【図12C】
【図13A】
【図13B】
【図13C】
【図14】
【外国語明細書】