ホーム > 特許ランキング > Ａｐｐｌｅ Ｉｎｃ．
知財求人 - 知財ポータルサイト「IP Force」
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】公開特許公報(A)
(11)【公開番号】P2024023307
(43)【公開日】2024-02-21
(54)【発明の名称】追加のディスプレイを有するデバイスの管理
(51)【国際特許分類】
G09G 5/00 20060101AFI20240214BHJP
G09G 5/10 20060101ALI20240214BHJP
G09G 5/37 20060101ALI20240214BHJP
G02B 27/02 20060101ALI20240214BHJP
H04N 5/64 20060101ALI20240214BHJP
G06T 19/00 20110101ALI20240214BHJP
【ＦＩ】
G09G5/00 550H
G09G5/00 550C
G09G5/00 510G
G09G5/10 B
G09G5/37 200
G09G5/00 520V
G02B27/02 Z
H04N5/64 511A
G06T19/00 600
【審査請求】有
【請求項の数】15
【出願形態】ＯＬ
【外国語出願】
(21)【出願番号】P 2023194270
(22)【出願日】2023-11-15
(62)【分割の表示】P 2021559557の分割
【原出願日】2020-08-31
(31)【優先権主張番号】62/907,207
(32)【優先日】2019-09-27
(33)【優先権主張国・地域又は機関】US
(31)【優先権主張番号】63/067,461
(32)【優先日】2020-08-19
(33)【優先権主張国・地域又は機関】US
【公序良俗違反の表示】
（特許庁注：以下のものは登録商標）
１．ツイッター
(71)【出願人】
【識別番号】503260918
【氏名又は名称】アップル インコーポレイテッド
【氏名又は名称原語表記】Ａｐｐｌｅ Ｉｎｃ．
【住所又は居所原語表記】Ｏｎｅ Ａｐｐｌｅ Ｐａｒｋ Ｗａｙ，Ｃｕｐｅｒｔｉｎｏ， Ｃａｌｉｆｏｒｎｉａ ９５０１４， Ｕ．Ｓ．Ａ．
(74)【代理人】
【識別番号】100094569
【弁理士】
【氏名又は名称】田中 伸一郎
(74)【代理人】
【識別番号】100103610
【弁理士】
【氏名又は名称】▲吉▼田 和彦
(74)【代理人】
【識別番号】100067013
【弁理士】
【氏名又は名称】大塚 文昭
(74)【代理人】
【識別番号】100139712
【弁理士】
【氏名又は名称】那須 威夫
(74)【代理人】
【識別番号】100121979
【弁理士】
【氏名又は名称】岩崎 吉信
(72)【発明者】
【氏名】チャルマーズ デヴィン ウィリアムズ
(72)【発明者】
【氏名】リンドマイヤー ウィリアム ディー
(72)【発明者】
【氏名】ルター グレゴリー エル
(72)【発明者】
【氏名】モアザン－トンプソン ジョナサン シー
(72)【発明者】
【氏名】ナイル ラフル
(57)【要約】
【課題】１つ以上のディスプレイ間で仮想オブジェクトを管理するための１つ以上の技術を提供する。
【解決手段】一部の実施形態によれば、仮想オブジェクトを表示するための例示的な技術が説明される。一部の実施形態によれば、方向情報に基づいてディスプレイ間でオブジェクトを遷移させるための例示的な技術が説明される。一部の実施形態によれば、オブジェクトの修正された表現を表示するための例示的な技術が説明される。一部の実施形態によれば、１つ以上のプロセスに関連するデータに基づいて１つ以上のディスプレイを管理するための例示的な技術が説明される。
【選択図】図１Ａ
【解決手段】一部の実施形態によれば、仮想オブジェクトを表示するための例示的な技術が説明される。一部の実施形態によれば、方向情報に基づいてディスプレイ間でオブジェクトを遷移させるための例示的な技術が説明される。一部の実施形態によれば、オブジェクトの修正された表現を表示するための例示的な技術が説明される。一部の実施形態によれば、１つ以上のプロセスに関連するデータに基づいて１つ以上のディスプレイを管理するための例示的な技術が説明される。
【選択図】図１Ａ
【特許請求の範囲】
【請求項1】
１つ以上のプロセッサと、メモリと、１つ以上の画像センサと、視野全体に広がり、第１の解像度を有する一次ディスプレイ、及び前記一次ディスプレイに物理的及び電子的に結合されており、前記第１の解像度よりも低い第２の解像度を有する二次ディスプレイを含むヘッドマウントディスプレイ（ＨＭＤ）デバイスとを有するシステムにおいて、仮想オブジェクトを表示する方法であって、
前記二次ディスプレイを介して仮想オブジェクトの第１の部分を表示することと、
前記一次ディスプレイを介して前記仮想オブジェクトの第２の部分を表示することであって、前記一次ディスプレイを介して前記仮想オブジェクトの前記第２の部分を表示することは、
前記仮想オブジェクトの前記第２の部分が前記一次ディスプレイのエッジから所定の距離内にあるという判定に従って、前記仮想オブジェクトの前記第２の部分に視覚効果を適用することを含む、ことと、を含む、方法。
前記二次ディスプレイを介して仮想オブジェクトの第１の部分を表示することと、
前記一次ディスプレイを介して前記仮想オブジェクトの第２の部分を表示することであって、前記一次ディスプレイを介して前記仮想オブジェクトの前記第２の部分を表示することは、
前記仮想オブジェクトの前記第２の部分が前記一次ディスプレイのエッジから所定の距離内にあるという判定に従って、前記仮想オブジェクトの前記第２の部分に視覚効果を適用することを含む、ことと、を含む、方法。
【請求項2】
前記仮想オブジェクトの前記第２の部分が前記一次ディスプレイの前記エッジから所定の距離内にないという判定に従って、前記仮想オブジェクトの前記第２の部分に前記視覚効果を適用することを放棄することを更に含む、請求項１に記載の方法。
【請求項3】
前記仮想オブジェクトの前記第１の部分は第１の視覚的外観を有し、
前記仮想オブジェクトの前記第２の部分に前記視覚効果を適用した後、前記仮想オブジェクトの前記第２の部分は、前記第１の視覚的外観と同じ第２の視覚的外観を有する、請求項１又は２に記載の方法。
前記仮想オブジェクトの前記第２の部分に前記視覚効果を適用した後、前記仮想オブジェクトの前記第２の部分は、前記第１の視覚的外観と同じ第２の視覚的外観を有する、請求項１又は２に記載の方法。
【請求項4】
前記一次ディスプレイを介して、前記視覚効果が適用されていない前記仮想オブジェクトの第３の部分を同時に表示することであって、前記仮想オブジェクトの前記第３の部分は、前記視覚効果が適用されておらず、また前記仮想オブジェクトの前記第２の部分よりもぼかしが少ない、ことを更に含む、請求項１から３のいずれか一項に記載の方法。
【請求項5】
前記仮想オブジェクトの前記第１の部分は、前記仮想オブジェクトの前記第２の部分と視覚的に区別される、請求項１から４のいずれか一項に記載の方法。
【請求項6】
前記視覚効果を前記仮想オブジェクトの前記第２の部分に適用することは、
前記仮想オブジェクトの前記第２の部分をぼかすことを含む、請求項１から５のいずれか一項に記載の方法。
前記仮想オブジェクトの前記第２の部分をぼかすことを含む、請求項１から５のいずれか一項に記載の方法。
【請求項7】
前記仮想オブジェクトの前記第２の部分をぼかした後、前記仮想オブジェクトの前記第２の部分は、前記仮想オブジェクトの前記第１の部分のぼかし量に基づくぼかし量を含む、請求項６に記載の方法。
【請求項8】
前記仮想オブジェクトの前記第２の部分をぼかすことは、前記仮想オブジェクトと前記二次ディスプレイとの間の対応する距離に基づいて、前記仮想オブジェクトの前記第２の部分のぼかし量を変更することを含む、請求項６又は７に記載の方法。
【請求項9】
前記仮想オブジェクトの前記第２の部分は、前記１つ以上の画像センサを介して検出された前記ＨＭＤデバイスを通して見ている瞳孔の特徴に基づいてぼかされる、請求項６から８のいずれか一項に記載の方法。
【請求項10】
前記仮想オブジェクトの前記第２の部分を適用することは、
前記仮想オブジェクトの前記第２の部分をフェードさせることを含む、請求項１から９のいずれか一項に記載の方法。
前記仮想オブジェクトの前記第２の部分をフェードさせることを含む、請求項１から９のいずれか一項に記載の方法。
【請求項11】
前記仮想オブジェクトの前記第２の部分は、前記二次ディスプレイの検出されたぼかしに比例してフェードされる、請求項１０に記載の方法。
【請求項12】
前記仮想オブジェクトの前記第２の部分は、第１の色から第２の色にフェードされる、請求項１０又は１１に記載の方法。
【請求項13】
前記第１の色は黒であり、前記第２の色は白である、請求項１２に記載の方法。
【請求項14】
前記仮想オブジェクトの前記第２の部分を表示することは、
前記仮想オブジェクトの前記第２の部分の角を丸めることを含む、請求項１から１３のいずれか一項に記載の方法。
前記仮想オブジェクトの前記第２の部分の角を丸めることを含む、請求項１から１３のいずれか一項に記載の方法。
【請求項15】
前記角はフェードされる、請求項１から１４のいずれか一項に記載の方法。
【請求項16】
１つ以上の画像センサと、
視野全体に広がり、第１の解像度を有する一次ディスプレイと、
前記一次ディスプレイに物理的及び電子的に結合されており、前記第１の解像度よりも低い第２の解像度を有する二次ディスプレイと、
１つ以上のプロセッサと、
前記１つ以上のプロセッサによって実行されるように構成された１つ以上のプログラムを記憶するメモリとを備え、前記１つ以上のプログラムは、
前記二次ディスプレイを介して仮想オブジェクトの第１の部分を表示し、
前記一次ディスプレイを介して前記仮想オブジェクトの第２の部分を表示する、命令を含み、前記一次ディスプレイを介して前記仮想オブジェクトの前記第２の部分を表示することは、
前記仮想オブジェクトの前記第２の部分が前記一次ディスプレイのエッジから所定の距離内にあるという判定に従って、前記仮想オブジェクトの前記第２の部分に視覚効果を適用することを含む、ヘッドマウントディスプレイ（ＨＭＤ）デバイス。
視野全体に広がり、第１の解像度を有する一次ディスプレイと、
前記一次ディスプレイに物理的及び電子的に結合されており、前記第１の解像度よりも低い第２の解像度を有する二次ディスプレイと、
１つ以上のプロセッサと、
前記１つ以上のプロセッサによって実行されるように構成された１つ以上のプログラムを記憶するメモリとを備え、前記１つ以上のプログラムは、
前記二次ディスプレイを介して仮想オブジェクトの第１の部分を表示し、
前記一次ディスプレイを介して前記仮想オブジェクトの第２の部分を表示する、命令を含み、前記一次ディスプレイを介して前記仮想オブジェクトの前記第２の部分を表示することは、
前記仮想オブジェクトの前記第２の部分が前記一次ディスプレイのエッジから所定の距離内にあるという判定に従って、前記仮想オブジェクトの前記第２の部分に視覚効果を適用することを含む、ヘッドマウントディスプレイ（ＨＭＤ）デバイス。
【請求項17】
ヘッドマウントディスプレイ（ＨＭＤ）デバイスの１つ以上のプロセッサによって実行されるように構成された１つ以上のプログラムを記憶する非一時的なコンピュータ可読記憶媒体であって、
前記ＨＭＤデバイスは、１つ以上のセンサと、視野全体に広がり、第１の解像度を有する一次ディスプレイと、前記一次ディスプレイに物理的及び電子的に結合されており、前記第１の解像度よりも低い第２の解像度を有する二次ディスプレイとを有し、前記１つ以上のプログラムは、
前記二次ディスプレイを介して仮想オブジェクトの第１の部分を表示し、
前記一次ディスプレイを介して前記仮想オブジェクトの第２の部分を表示する、命令を含み、前記一次ディスプレイを介して前記仮想オブジェクトの前記第２の部分を表示することは、
前記仮想オブジェクトの前記第２の部分が前記一次ディスプレイのエッジから所定の距離内にあるという判定に従って、前記仮想オブジェクトの前記第２の部分に視覚効果を適用することを含む、非一時的なコンピュータ可読記憶媒体。
前記ＨＭＤデバイスは、１つ以上のセンサと、視野全体に広がり、第１の解像度を有する一次ディスプレイと、前記一次ディスプレイに物理的及び電子的に結合されており、前記第１の解像度よりも低い第２の解像度を有する二次ディスプレイとを有し、前記１つ以上のプログラムは、
前記二次ディスプレイを介して仮想オブジェクトの第１の部分を表示し、
前記一次ディスプレイを介して前記仮想オブジェクトの第２の部分を表示する、命令を含み、前記一次ディスプレイを介して前記仮想オブジェクトの前記第２の部分を表示することは、
前記仮想オブジェクトの前記第２の部分が前記一次ディスプレイのエッジから所定の距離内にあるという判定に従って、前記仮想オブジェクトの前記第２の部分に視覚効果を適用することを含む、非一時的なコンピュータ可読記憶媒体。
【請求項18】
１つ以上のプロセッサと、
二次ディスプレイを介して仮想オブジェクトの第１の部分を表示する手段と、
一次ディスプレイを介して前記仮想オブジェクトの第２の部分を表示する手段とを備え、前記一次ディスプレイを介して前記仮想オブジェクトの前記第２の部分を表示することは、
前記仮想オブジェクトの前記第２の部分が前記一次ディスプレイのエッジから所定の距離内にあるという判定に従って、前記仮想オブジェクトの前記第２の部分に視覚効果を適用することを含む、システム。
二次ディスプレイを介して仮想オブジェクトの第１の部分を表示する手段と、
一次ディスプレイを介して前記仮想オブジェクトの第２の部分を表示する手段とを備え、前記一次ディスプレイを介して前記仮想オブジェクトの前記第２の部分を表示することは、
前記仮想オブジェクトの前記第２の部分が前記一次ディスプレイのエッジから所定の距離内にあるという判定に従って、前記仮想オブジェクトの前記第２の部分に視覚効果を適用することを含む、システム。
【請求項19】
１つ以上のプロセッサと、メモリと、１つ以上の画像センサと、視野全体に広がり、第１の解像度を有する一次ディスプレイ、前記一次ディスプレイに物理的及び電子的に結合されており、前記第１の解像度よりも低い第２の解像度を有する二次ディスプレイ、及び三次ディスプレイを含むヘッドマウントディスプレイ（ＨＭＤ）デバイスとを有するシステムにおいて、
前記ＨＭＤデバイスの前記一次ディスプレイ及び前記ＨＭＤデバイスの前記二次ディスプレイの視野外にあるオブジェクトの位置に対応する方向情報を受信することと、
前記方向情報の受信に応じて、
前記二次ディスプレイを介して前記オブジェクトの方向情報を表示することが許可されているという判定に従って、前記二次ディスプレイを介して方向情報の第１の表現を表示し、
前記三次ディスプレイを介して前記オブジェクトの方向情報を表示することが許可されているという判定に従って、前記三次ディスプレイを介して方向情報の第２の表現を表示することとを含み、
前記第１の表現は、ＣＧＲ環境内の仮想オブジェクトであり、
前記第２の表現は、前記ＣＧＲ環境内の仮想オブジェクトではない、方法。
前記ＨＭＤデバイスの前記一次ディスプレイ及び前記ＨＭＤデバイスの前記二次ディスプレイの視野外にあるオブジェクトの位置に対応する方向情報を受信することと、
前記方向情報の受信に応じて、
前記二次ディスプレイを介して前記オブジェクトの方向情報を表示することが許可されているという判定に従って、前記二次ディスプレイを介して方向情報の第１の表現を表示し、
前記三次ディスプレイを介して前記オブジェクトの方向情報を表示することが許可されているという判定に従って、前記三次ディスプレイを介して方向情報の第２の表現を表示することとを含み、
前記第１の表現は、ＣＧＲ環境内の仮想オブジェクトであり、
前記第２の表現は、前記ＣＧＲ環境内の仮想オブジェクトではない、方法。
【請求項20】
前記オブジェクトは、物理的環境に位置する物理的オブジェクトである、請求項１９に記載の方法。
【請求項21】
前記オブジェクトは、仮想環境に位置する仮想オブジェクトである、請求項１９に記載の方法。
【請求項22】
方向情報の前記第１の表現は、前記二次ディスプレイを介して表示される前記オブジェクトの第１の表現であり、前記方法は、
前記二次ディスプレイを介して方向情報の前記第１の表現を表示している間、前記オブジェクトが前記ＨＭＤデバイスの前記一次ディスプレイの前記視野内にあることを検出することと、
前記オブジェクトが前記一次ディスプレイの前記視野内にあることを検出したことに応じて、前記一次ディスプレイを介して前記オブジェクトの第２の表現を表示することとを更に含み、
前記二次ディスプレイを介して表示される前記オブジェクトの前記第１の表現は、前記オブジェクトの第１のモデルに基づいて表示され、
前記一次ディスプレイを介して表示される前記オブジェクトの前記第２の表現は、前記オブジェクトの第２のモデルに基づいて表示され、前記オブジェクトの前記第２のモデルは、前記オブジェクトの前記第１のモデルよりも多くの視覚的特徴を含む、請求項１９から２１のいずれか一項に記載の方法。
前記二次ディスプレイを介して方向情報の前記第１の表現を表示している間、前記オブジェクトが前記ＨＭＤデバイスの前記一次ディスプレイの前記視野内にあることを検出することと、
前記オブジェクトが前記一次ディスプレイの前記視野内にあることを検出したことに応じて、前記一次ディスプレイを介して前記オブジェクトの第２の表現を表示することとを更に含み、
前記二次ディスプレイを介して表示される前記オブジェクトの前記第１の表現は、前記オブジェクトの第１のモデルに基づいて表示され、
前記一次ディスプレイを介して表示される前記オブジェクトの前記第２の表現は、前記オブジェクトの第２のモデルに基づいて表示され、前記オブジェクトの前記第２のモデルは、前記オブジェクトの前記第１のモデルよりも多くの視覚的特徴を含む、請求項１９から２１のいずれか一項に記載の方法。
【請求項23】
前記一次ディスプレイは導波路ディスプレイであり、前記二次ディスプレイは有機発光ダイオードディスプレイであり、前記三次ディスプレイは複数の発光ダイオードである、請求項１９から２２のいずれか一項に記載の方法。
【請求項24】
前記第１の表現は静的表現であり、
前記第２の表現は動的表現である、請求項１９から２３のいずれか一項に記載の方法。
前記第２の表現は動的表現である、請求項１９から２３のいずれか一項に記載の方法。
【請求項25】
前記第１の表現及び前記第２の表現のうちの１つ以上は勾配を含む、請求項１９から２４のいずれか一項に記載の方法。
【請求項26】
前記一次ディスプレイは前記二次ディスプレイと重なる、請求項１９から２５のいずれか一項に記載の方法。
【請求項27】
前記二次ディスプレイを介して前記第１の表現を表示している間、前記一次ディスプレイを介して、方向情報の前記第１の表現及び方向情報の前記第２の表現とは異なる前記オブジェクトの表現を表示することを更に含む、請求項１９から２６のいずれか一項に記載の方法。
【請求項28】
前記ＨＭＤデバイスの前記一次ディスプレイ及び前記ＨＭＤデバイスの前記二次ディスプレイの視野内にあるオブジェクトの位置に対応する方向情報を受信することと、
前記ＨＭＤデバイスの前記一次ディスプレイ及び前記ＨＭＤデバイスの前記二次ディスプレイの前記視野内にある前記オブジェクトの前記位置に対応する前記方向情報を受信したことに応じて、前記一次ディスプレイを介して前記オブジェクトの第５の表現を表示せずに、前記二次ディスプレイを介して前記オブジェクトの第４の表現を表示することと、
前記オブジェクトと対話するための要求を受信することと、
前記オブジェクトと対話するための前記要求を受信したことに応じて、
前記一次ディスプレイを介して前記オブジェクトの前記第５の表現を表示ことと、
前記二次ディスプレイを介して前記オブジェクトの前記第４の表現を表示することを停止することと、を更に含む、請求項１９から２７のいずれか一項に記載の方法。
前記ＨＭＤデバイスの前記一次ディスプレイ及び前記ＨＭＤデバイスの前記二次ディスプレイの前記視野内にある前記オブジェクトの前記位置に対応する前記方向情報を受信したことに応じて、前記一次ディスプレイを介して前記オブジェクトの第５の表現を表示せずに、前記二次ディスプレイを介して前記オブジェクトの第４の表現を表示することと、
前記オブジェクトと対話するための要求を受信することと、
前記オブジェクトと対話するための前記要求を受信したことに応じて、
前記一次ディスプレイを介して前記オブジェクトの前記第５の表現を表示ことと、
前記二次ディスプレイを介して前記オブジェクトの前記第４の表現を表示することを停止することと、を更に含む、請求項１９から２７のいずれか一項に記載の方法。
【請求項29】
前記第１の表現及び前記第２の表現が表示されている間、
前記第１の表現は、前記二次ディスプレイを介して、前記一次ディスプレイに対する対応する方向にある第１の位置に表示され、
前記第２の表現は、前記三次ディスプレイを介して、前記一次ディスプレイに対する対応する前記方向にある第２の位置に表示されない、請求項１９から２８のいずれか一項に記載の方法。
前記第１の表現は、前記二次ディスプレイを介して、前記一次ディスプレイに対する対応する方向にある第１の位置に表示され、
前記第２の表現は、前記三次ディスプレイを介して、前記一次ディスプレイに対する対応する前記方向にある第２の位置に表示されない、請求項１９から２８のいずれか一項に記載の方法。
【請求項30】
前記三次ディスプレイは前記二次ディスプレイの第１の部分を囲む、請求項１９から２９のいずれか一項に記載の方法。
【請求項31】
前記三次ディスプレイは、前記二次ディスプレイの第２の部分を囲まないが、前記二次ディスプレイの前記第１の部分を囲む、請求項３０に記載の方法。
【請求項32】
ヘッドマウントディスプレイ（ＨＭＤ）デバイスであって、
１つ以上の画像センサと、
視野全体に広がり、第１の解像度を有する一次ディスプレイと、
前記一次ディスプレイに物理的及び電子的に結合されており、前記第１の解像度よりも低い第２の解像度を有する二次ディスプレイと、
三次ディスプレイと、
１つ以上のプロセッサと、
前記１つ以上のプロセッサによって実行されるように構成された１つ以上のプログラムを記憶するメモリとを備え、前記１つ以上のプログラムは、
前記ＨＭＤデバイスの前記一次ディスプレイ及び前記ＨＭＤデバイスの前記二次ディスプレイの視野外にあるオブジェクトの位置に対応する方向情報を受信し、
前記方向情報の受信に応じて、
前記二次ディスプレイを介して前記オブジェクトの方向情報を表示することが許可されているという判定に従って、前記二次ディスプレイを介して方向情報の第１の表現を表示し、
前記三次ディスプレイを介して前記オブジェクトの方向情報を表示することが許可されているという判定に従って、前記三次ディスプレイを介して方向情報の第２の表現を表示する、命令を含み、
前記第１の表現は、ＣＧＲ環境内の仮想オブジェクトであり、
前記第２の表現は、前記ＣＧＲ環境内の仮想オブジェクトではない、ＨＭＤデバイス。
１つ以上の画像センサと、
視野全体に広がり、第１の解像度を有する一次ディスプレイと、
前記一次ディスプレイに物理的及び電子的に結合されており、前記第１の解像度よりも低い第２の解像度を有する二次ディスプレイと、
三次ディスプレイと、
１つ以上のプロセッサと、
前記１つ以上のプロセッサによって実行されるように構成された１つ以上のプログラムを記憶するメモリとを備え、前記１つ以上のプログラムは、
前記ＨＭＤデバイスの前記一次ディスプレイ及び前記ＨＭＤデバイスの前記二次ディスプレイの視野外にあるオブジェクトの位置に対応する方向情報を受信し、
前記方向情報の受信に応じて、
前記二次ディスプレイを介して前記オブジェクトの方向情報を表示することが許可されているという判定に従って、前記二次ディスプレイを介して方向情報の第１の表現を表示し、
前記三次ディスプレイを介して前記オブジェクトの方向情報を表示することが許可されているという判定に従って、前記三次ディスプレイを介して方向情報の第２の表現を表示する、命令を含み、
前記第１の表現は、ＣＧＲ環境内の仮想オブジェクトであり、
前記第２の表現は、前記ＣＧＲ環境内の仮想オブジェクトではない、ＨＭＤデバイス。
【請求項33】
ヘッドマウントディスプレイ（ＨＭＤ）デバイスの１つ以上のプロセッサによって実行されるように構成された１つ以上のプログラムを記憶する非一時的なコンピュータ可読記憶媒体であって、
前記ＨＭＤデバイスは、１つ以上のセンサと、視野全体に広がり、第１の解像度を有する一次ディスプレイと、前記一次ディスプレイに物理的及び電子的に結合されており、前記第１の解像度よりも低い第２の解像度を有する二次ディスプレイと、三次ディスプレイとを有し、前記１つ以上のプログラムは、
前記ＨＭＤデバイスの前記一次ディスプレイ及び前記ＨＭＤデバイスの前記二次ディスプレイの視野外にあるオブジェクトの位置に対応する方向情報を受信し、
前記方向情報の受信に応じて、
前記二次ディスプレイを介して前記オブジェクトの方向情報を表示することが許可されているという判定に従って、前記二次ディスプレイを介して方向情報の第１の表現を表示し、
前記三次ディスプレイを介して前記オブジェクトの方向情報を表示することが許可されているという判定に従って、前記三次ディスプレイを介して方向情報の第２の表現を表示する、命令を含み、
前記第１の表現は、ＣＧＲ環境内の仮想オブジェクトであり、
前記第２の表現は、前記ＣＧＲ環境内の仮想オブジェクトではない、非一時的なコンピュータ可読記憶媒体。
前記ＨＭＤデバイスは、１つ以上のセンサと、視野全体に広がり、第１の解像度を有する一次ディスプレイと、前記一次ディスプレイに物理的及び電子的に結合されており、前記第１の解像度よりも低い第２の解像度を有する二次ディスプレイと、三次ディスプレイとを有し、前記１つ以上のプログラムは、
前記ＨＭＤデバイスの前記一次ディスプレイ及び前記ＨＭＤデバイスの前記二次ディスプレイの視野外にあるオブジェクトの位置に対応する方向情報を受信し、
前記方向情報の受信に応じて、
前記二次ディスプレイを介して前記オブジェクトの方向情報を表示することが許可されているという判定に従って、前記二次ディスプレイを介して方向情報の第１の表現を表示し、
前記三次ディスプレイを介して前記オブジェクトの方向情報を表示することが許可されているという判定に従って、前記三次ディスプレイを介して方向情報の第２の表現を表示する、命令を含み、
前記第１の表現は、ＣＧＲ環境内の仮想オブジェクトであり、
前記第２の表現は、前記ＣＧＲ環境内の仮想オブジェクトではない、非一時的なコンピュータ可読記憶媒体。
【請求項34】
１つ以上のプロセッサと、
ヘッドマウントディスプレイ（ＨＭＤ）デバイスの一次ディスプレイ及び前記ＨＭＤデバイスの二次ディスプレイの視野外にあるオブジェクトの位置に対応する方向情報を受信する手段と、
前記方向情報の受信に応じて、
前記二次ディスプレイを介して前記オブジェクトの方向情報を表示することが許可されているという判定に従って、前記二次ディスプレイを介して方向情報の第１の表現を表示し、
前記三次ディスプレイを介して前記オブジェクトの方向情報を表示することが許可されているという判定に従って、前記三次ディスプレイを介して方向情報の第２の表現を表示する手段と、を備え、
前記第１の表現は、ＣＧＲ環境内の仮想オブジェクトであり、
前記第２の表現は、前記ＣＧＲ環境内の仮想オブジェクトではない、システム。
ヘッドマウントディスプレイ（ＨＭＤ）デバイスの一次ディスプレイ及び前記ＨＭＤデバイスの二次ディスプレイの視野外にあるオブジェクトの位置に対応する方向情報を受信する手段と、
前記方向情報の受信に応じて、
前記二次ディスプレイを介して前記オブジェクトの方向情報を表示することが許可されているという判定に従って、前記二次ディスプレイを介して方向情報の第１の表現を表示し、
前記三次ディスプレイを介して前記オブジェクトの方向情報を表示することが許可されているという判定に従って、前記三次ディスプレイを介して方向情報の第２の表現を表示する手段と、を備え、
前記第１の表現は、ＣＧＲ環境内の仮想オブジェクトであり、
前記第２の表現は、前記ＣＧＲ環境内の仮想オブジェクトではない、システム。
【請求項35】
１つ以上のプロセッサと、メモリと、１つ以上の画像センサと、視野全体に広がり、第１の解像度を有する一次ディスプレイ、及び前記一次ディスプレイに物理的及び電子的に結合されており、前記第１の解像度よりも低い第２の解像度を有する二次ディスプレイを含むヘッドマウントディスプレイ（ＨＭＤ）デバイスとを有するシステムにおいて、
第１の位置でコンピュータ生成現実（ＣＧＲ）環境内のオブジェクトを検出することと、
前記第１の位置で前記ＣＧＲ環境内の前記オブジェクトを検出したことに応じて、
前記第１の位置が、前記ＨＭＤデバイスの前記一次ディスプレイの前記視野外の第１の所定の距離内にあるという判定に従って、前記ＨＭＤデバイスの前記二次ディスプレイを介して、前記オブジェクトの第１の実際の表現と視覚的に区別される前記オブジェクトの第１の修正された表現を表示することと、を含む、方法。
第１の位置でコンピュータ生成現実（ＣＧＲ）環境内のオブジェクトを検出することと、
前記第１の位置で前記ＣＧＲ環境内の前記オブジェクトを検出したことに応じて、
前記第１の位置が、前記ＨＭＤデバイスの前記一次ディスプレイの前記視野外の第１の所定の距離内にあるという判定に従って、前記ＨＭＤデバイスの前記二次ディスプレイを介して、前記オブジェクトの第１の実際の表現と視覚的に区別される前記オブジェクトの第１の修正された表現を表示することと、を含む、方法。
【請求項36】
第１の修正された表現は、前記第１の実際の表現の視覚的コンテンツとは異なる視覚的コンテンツを有する、請求項３５に記載の方法。
【請求項37】
前記第１の修正された表現は、前記第１の位置と前記ＨＭＤデバイスの前記一次ディスプレイの前記視野との間の前記距離に基づくサイズを有する、請求項３５又は３６に記載の方法。
【請求項38】
前記第１の修正された表現は、前記オブジェクトの前記サイズに基づく輝度を有する、請求項３５から３７のいずれか一項に記載の方法。
【請求項39】
前記第１の修正された表現は、前記第１の実際の表現のぼかしよりも高いぼかしを有する、請求項３５から３８のいずれか一項に記載の方法。
【請求項40】
前記第１の修正された表現を表示することは、アニメーションを表示することを含む、請求項３５から３９のいずれか一項に記載の方法。
【請求項41】
前記第１の位置で前記ＣＧＲ環境内の前記オブジェクトを検出したことに応じて、
前記第１の位置が、前記一次ディスプレイの前記視野及び前記二次ディスプレイの視野内にあるという判定に従って、
前記一次ディスプレイを介して、前記オブジェクトの第１の部分の第２の実際の表現を表示することと、
前記一次ディスプレイを介して前記オブジェクトの前記第１の部分の前記第２の実際の表現を表示している間、前記二次ディスプレイを介して、前記オブジェクトの第２の部分の第２の修正された表現を表示することと、を更に含む、請求項３５から４０のいずれか一項に記載の方法。
前記第１の位置が、前記一次ディスプレイの前記視野及び前記二次ディスプレイの視野内にあるという判定に従って、
前記一次ディスプレイを介して、前記オブジェクトの第１の部分の第２の実際の表現を表示することと、
前記一次ディスプレイを介して前記オブジェクトの前記第１の部分の前記第２の実際の表現を表示している間、前記二次ディスプレイを介して、前記オブジェクトの第２の部分の第２の修正された表現を表示することと、を更に含む、請求項３５から４０のいずれか一項に記載の方法。
【請求項42】
前記第２の実際の表現は、前記第２の修正された表現よりも高い解像度で表示される、請求項３５から４１のいずれか一項に記載の方法。
【請求項43】
前記第２の実際の表現は、前記一次ディスプレイのエッジに隣接して表示される、請求項３５から４２のいずれか一項に記載の方法。
【請求項44】
前記一次ディスプレイを介して前記第２の実際の表現を表示することは、前記第２の実際の表現に視覚効果を適用することを含み、
前記視覚効果を適用した後の前記オブジェクトの前記第２の実際の表現は、前記視覚効果を適用する前の前記オブジェクトの前記第２の実際の表現のぼかしよりも大きいぼかしを有する、請求項３５から４３のいずれか一項に記載の方法。
前記視覚効果を適用した後の前記オブジェクトの前記第２の実際の表現は、前記視覚効果を適用する前の前記オブジェクトの前記第２の実際の表現のぼかしよりも大きいぼかしを有する、請求項３５から４３のいずれか一項に記載の方法。
【請求項45】
前記第１の位置で前記ＣＧＲ環境内の前記オブジェクトを検出したことに応じて、
前記第１の位置が、前記ＨＭＤデバイスの前記一次ディスプレイの前記視野外の、前記第１の所定の距離とは異なる第２の所定の距離内にあるという判定に従って、
前記一次ディスプレイを介して、前記オブジェクトを位置特定するための方向情報に対応する表現を表示することを更に含み、前記オブジェクトを位置特定するための前記方向情報に対応する前記表現は、前記実際の表現とは異なる、請求項３５から４４のいずれか一項に記載の方法。
前記第１の位置が、前記ＨＭＤデバイスの前記一次ディスプレイの前記視野外の、前記第１の所定の距離とは異なる第２の所定の距離内にあるという判定に従って、
前記一次ディスプレイを介して、前記オブジェクトを位置特定するための方向情報に対応する表現を表示することを更に含み、前記オブジェクトを位置特定するための前記方向情報に対応する前記表現は、前記実際の表現とは異なる、請求項３５から４４のいずれか一項に記載の方法。
【請求項46】
前記第１の位置で前記ＣＧＲ環境内の前記オブジェクトを検出したことに応じて、
前記第１の位置が、前記一次ディスプレイの前記視野内にあり、前記二次ディスプレイの前記視野内にないという判定に従って、
前記一次ディスプレイを介して前記第１の実際の表現を表示することと、
前記二次ディスプレイを介して前記第１の修正された表現を表示することを放棄することと、を更に含む、請求項３５から４５のいずれか一項に記載の方法。
前記第１の位置が、前記一次ディスプレイの前記視野内にあり、前記二次ディスプレイの前記視野内にないという判定に従って、
前記一次ディスプレイを介して前記第１の実際の表現を表示することと、
前記二次ディスプレイを介して前記第１の修正された表現を表示することを放棄することと、を更に含む、請求項３５から４５のいずれか一項に記載の方法。
【請求項47】
ヘッドマウントディスプレイ（ＨＭＤ）デバイスであって、
１つ以上の画像センサと、
視野全体に広がり、第１の解像度を有する一次ディスプレイと、
前記一次ディスプレイに物理的及び電子的に結合されており、前記第１の解像度よりも低い第２の解像度を有する二次ディスプレイと、
１つ以上のプロセッサと、
前記１つ以上のプロセッサによって実行されるように構成された１つ以上のプログラムを記憶するメモリとを備え、前記１つ以上のプログラムは、
第１の位置でコンピュータ生成現実（ＣＧＲ）環境内のオブジェクトを検出し、
前記第１の位置で前記ＣＧＲ環境内の前記オブジェクトを検出したことに応じて、
前記第１の位置が、前記ＨＭＤデバイスの前記一次ディスプレイの前記視野外の第１の所定の距離内にあるという判定に従って、前記ＨＭＤデバイスの前記二次ディスプレイを介して、前記オブジェクトの第１の実際の表現と視覚的に区別される前記オブジェクトの第１の修正された表現を表示する、命令を含む、ＨＭＤデバイス。
１つ以上の画像センサと、
視野全体に広がり、第１の解像度を有する一次ディスプレイと、
前記一次ディスプレイに物理的及び電子的に結合されており、前記第１の解像度よりも低い第２の解像度を有する二次ディスプレイと、
１つ以上のプロセッサと、
前記１つ以上のプロセッサによって実行されるように構成された１つ以上のプログラムを記憶するメモリとを備え、前記１つ以上のプログラムは、
第１の位置でコンピュータ生成現実（ＣＧＲ）環境内のオブジェクトを検出し、
前記第１の位置で前記ＣＧＲ環境内の前記オブジェクトを検出したことに応じて、
前記第１の位置が、前記ＨＭＤデバイスの前記一次ディスプレイの前記視野外の第１の所定の距離内にあるという判定に従って、前記ＨＭＤデバイスの前記二次ディスプレイを介して、前記オブジェクトの第１の実際の表現と視覚的に区別される前記オブジェクトの第１の修正された表現を表示する、命令を含む、ＨＭＤデバイス。
【請求項48】
ヘッドマウントディスプレイ（ＨＭＤ）デバイスの１つ以上のプロセッサによって実行されるように構成された１つ以上のプログラムを記憶する非一時的なコンピュータ可読記憶媒体であって、
前記ＨＭＤデバイスは、１つ以上のセンサと、視野全体に広がり、第１の解像度を有する一次ディスプレイと、前記一次ディスプレイに物理的及び電子的に結合されており、前記第１の解像度よりも低い第２の解像度を有する二次ディスプレイとを有し、前記１つ以上のプログラムは、
第１の位置でコンピュータ生成現実（ＣＧＲ）環境内のオブジェクトを検出し、
前記第１の位置で前記ＣＧＲ環境内の前記オブジェクトを検出したことに応じて、
前記第１の位置が、前記ＨＭＤデバイスの前記一次ディスプレイの前記視野外の第１の所定の距離内にあるという判定に従って、前記ＨＭＤデバイスの前記二次ディスプレイを介して、前記オブジェクトの第１の実際の表現と視覚的に区別される前記オブジェクトの第１の修正された表現を表示する、命令を含む、非一時的なコンピュータ可読記憶媒体。
前記ＨＭＤデバイスは、１つ以上のセンサと、視野全体に広がり、第１の解像度を有する一次ディスプレイと、前記一次ディスプレイに物理的及び電子的に結合されており、前記第１の解像度よりも低い第２の解像度を有する二次ディスプレイとを有し、前記１つ以上のプログラムは、
第１の位置でコンピュータ生成現実（ＣＧＲ）環境内のオブジェクトを検出し、
前記第１の位置で前記ＣＧＲ環境内の前記オブジェクトを検出したことに応じて、
前記第１の位置が、前記ＨＭＤデバイスの前記一次ディスプレイの前記視野外の第１の所定の距離内にあるという判定に従って、前記ＨＭＤデバイスの前記二次ディスプレイを介して、前記オブジェクトの第１の実際の表現と視覚的に区別される前記オブジェクトの第１の修正された表現を表示する、命令を含む、非一時的なコンピュータ可読記憶媒体。
【請求項49】
１つ以上のプロセッサと、
第１の位置でコンピュータ生成現実（ＣＧＲ）環境内のオブジェクトを検出する手段と、
前記第１の位置で前記ＣＧＲ環境内の前記オブジェクトを検出したことに応じて、
前記第１の位置が、前記ＨＭＤデバイスの一次ディスプレイの前記視野外の第１の所定の距離内にあるという判定に従って、前記ＨＭＤデバイスの二次ディスプレイを介して、前記オブジェクトの第１の実際の表現と視覚的に区別される前記オブジェクトの第１の修正された表現を表示する手段と、を備えるシステム。
第１の位置でコンピュータ生成現実（ＣＧＲ）環境内のオブジェクトを検出する手段と、
前記第１の位置で前記ＣＧＲ環境内の前記オブジェクトを検出したことに応じて、
前記第１の位置が、前記ＨＭＤデバイスの一次ディスプレイの前記視野外の第１の所定の距離内にあるという判定に従って、前記ＨＭＤデバイスの二次ディスプレイを介して、前記オブジェクトの第１の実際の表現と視覚的に区別される前記オブジェクトの第１の修正された表現を表示する手段と、を備えるシステム。
【請求項50】
１つ以上のプロセッサと、メモリと、１つ以上の画像センサと、視野全体に広がり、第１の解像度を有する一次ディスプレイ、前記一次ディスプレイに物理的及び電子的に結合されており、前記第１の解像度よりも低い第２の解像度を有する二次ディスプレイ、及び三次ディスプレイを含むヘッドマウントディスプレイ（ＨＭＤ）デバイスとを有するシステムにおいて、
プロセスのステータスの変化に対応する情報を受信することと、
前記プロセスの前記変更ステータスに対応する情報を受信したことに応じて、
第１の基準が満たされているという判定に従って、前記ＨＭＤデバイスの前記二次ディスプレイを介して、前記プロセスの前記ステータスに対応する第１の表現を表示ことと、
第２の基準が満たされているという判定に従って、前記ＨＭＤデバイスの前記三次ディスプレイを介して、前記プロセスの前記ステータスに対応する第２の表現を表示することと、を含み、前記第２の表現は前記第１の表現とは異なる、方法。
プロセスのステータスの変化に対応する情報を受信することと、
前記プロセスの前記変更ステータスに対応する情報を受信したことに応じて、
第１の基準が満たされているという判定に従って、前記ＨＭＤデバイスの前記二次ディスプレイを介して、前記プロセスの前記ステータスに対応する第１の表現を表示ことと、
第２の基準が満たされているという判定に従って、前記ＨＭＤデバイスの前記三次ディスプレイを介して、前記プロセスの前記ステータスに対応する第２の表現を表示することと、を含み、前記第２の表現は前記第１の表現とは異なる、方法。
【請求項51】
前記第１の表現を表示している間、前記二次ディスプレイを介して第１の仮想オブジェクトを同時に表示することを更に含み、
前記第１の表現は、前記二次ディスプレイを介して表示される前記第１の仮想オブジェクトの少なくとも一部を囲む、請求項５０に記載の方法。
前記第１の表現は、前記二次ディスプレイを介して表示される前記第１の仮想オブジェクトの少なくとも一部を囲む、請求項５０に記載の方法。
【請求項52】
前記第１の表現及び前記第２の表現のうちの１つ以上は、前記一次ディスプレイを介して提示される第３の表現に関連付けられている、請求項５０又は５１に記載の方法。
【請求項53】
前記第１の表現を表示している間、前記二次ディスプレイを介して第２の仮想オブジェクトを同時に表示することを更に含み、前記第１の表現は、前記二次ディスプレイを介して表示される前記第２の仮想オブジェクトの少なくとも一部を強調表示する、請求項５０から５２のいずれか一項に記載の方法。
【請求項54】
前記第１の表現及び前記第２の表現のうちの１つ以上は、進捗インジケータを含む、請求項５０から５３のいずれか一項に記載の方法。
【請求項55】
前記進捗インジケータは、前記ＨＭＤデバイスに関連するメトリックの変化を示すように更新される、請求項５４に記載の方法。
【請求項56】
前記第１の表現はアプリケーションアイコンを含む、請求項５０から５５のいずれか一項に記載の方法。
【請求項57】
前記プロセスはアプリケーションに関連付けられ、前記アプリケーションアイコンは、前記プロセスに基づいて更新されるステータスインジケータを含む、請求項５６に記載の方法。
【請求項58】
前記第１の表現及び前記第２の表現のうちの１つ以上は、前記１つ以上のセンサのうちの１つ以上に基づいて表示される、請求項５０から５７のいずれか一項に記載の方法。
【請求項59】
前記１つ以上のセンサは心拍数センサを含み、
前記情報は、心拍数センサを介して検出されたデータに対応し、
前記１つ以上のセンサのうちの少なくとも１つに基づいて前記第１の表現及び前記第２の表現のうちの１つ以上を表示することは、心拍数センサを介して検出されたアニメーションベースのデータを表示することを含む、請求項５８に記載の方法。
前記情報は、心拍数センサを介して検出されたデータに対応し、
前記１つ以上のセンサのうちの少なくとも１つに基づいて前記第１の表現及び前記第２の表現のうちの１つ以上を表示することは、心拍数センサを介して検出されたアニメーションベースのデータを表示することを含む、請求項５８に記載の方法。
【請求項60】
前記情報は、アプリケーションに対応するアラートに対応し、
前記第１の表現及び前記第２の表現のうちの１つ以上は、前記アプリケーションに対応する前記アラートに基づいて提示される、請求項５０から５９のいずれか一項に記載の方法。
前記第１の表現及び前記第２の表現のうちの１つ以上は、前記アプリケーションに対応する前記アラートに基づいて提示される、請求項５０から５９のいずれか一項に記載の方法。
【請求項61】
前記情報は、カレンダーイベントに対応するアラートに対応し、
前記第１の表現及び前記第２の表現のうちの１つ以上は、前記カレンダーイベントに対応する前記アラートに基づいて提示される、請求項５０から６０のいずれか一項に記載の方法。
前記第１の表現及び前記第２の表現のうちの１つ以上は、前記カレンダーイベントに対応する前記アラートに基づいて提示される、請求項５０から６０のいずれか一項に記載の方法。
【請求項62】
前記情報は、顔認識アルゴリズムを介して取得されたデータに対応し、
前記第１の表現及び前記第２の表現のうちの１つ以上は、顔認識アルゴリズムを介して取得された前記データに基づいて提示される、請求項５０から６１のいずれか一項に記載の方法。
前記第１の表現及び前記第２の表現のうちの１つ以上は、顔認識アルゴリズムを介して取得された前記データに基づいて提示される、請求項５０から６１のいずれか一項に記載の方法。
【請求項63】
前記情報は、アプリケーションの状態に対応し、
前記第１の表現及び前記第２の表現のうちの１つ以上は、前記アプリケーションの前記状態に基づいて提示される、請求項５０から６２のいずれか一項に記載の方法。
前記第１の表現及び前記第２の表現のうちの１つ以上は、前記アプリケーションの前記状態に基づいて提示される、請求項５０から６２のいずれか一項に記載の方法。
【請求項64】
前記情報は、前記検出されたユーザの姿勢に対応し、
前記第１の表現及び前記第２の表現のうちの１つ以上は、前記ＨＭＤデバイスを装着しているユーザの検出された姿勢に基づいて提示される、請求項５０から６３のいずれか一項に記載の方法。
前記第１の表現及び前記第２の表現のうちの１つ以上は、前記ＨＭＤデバイスを装着しているユーザの検出された姿勢に基づいて提示される、請求項５０から６３のいずれか一項に記載の方法。
【請求項65】
前記第１の表現は、ユーザの検出された目の位置に基づいて表示される、請求項５０から６４のいずれか一項に記載の方法。
【請求項66】
ヘッドマウントディスプレイ（ＨＭＤ）デバイスであって、
１つ以上の画像センサと、
視野全体に広がり、第１の解像度を有する一次ディスプレイと、
前記一次ディスプレイに物理的及び電子的に結合されており、前記第１の解像度よりも低い第２の解像度を有する二次ディスプレイと、
三次ディスプレイと、
１つ以上のプロセッサと、
前記１つ以上のプロセッサによって実行されるように構成された１つ以上のプログラムを記憶するメモリとを備え、前記１つ以上のプログラムは、
プロセスのステータスの変化に対応する情報を受信し、
前記プロセスの前記変更ステータスに対応する情報を受信したことに応じて、
第１の基準が満たされているという判定に従って、前記ＨＭＤデバイスの前記二次ディスプレイを介して、前記プロセスの前記ステータスに対応する第１の表現を表示し、
第２の基準が満たされているという判定に従って、前記ＨＭＤデバイスの前記三次ディスプレイを介して、前記プロセスの前記ステータスに対応する第２の表現を表示する、命令を含み、前記第２の表現は前記第１の表現とは異なる、ＨＭＤデバイス。
１つ以上の画像センサと、
視野全体に広がり、第１の解像度を有する一次ディスプレイと、
前記一次ディスプレイに物理的及び電子的に結合されており、前記第１の解像度よりも低い第２の解像度を有する二次ディスプレイと、
三次ディスプレイと、
１つ以上のプロセッサと、
前記１つ以上のプロセッサによって実行されるように構成された１つ以上のプログラムを記憶するメモリとを備え、前記１つ以上のプログラムは、
プロセスのステータスの変化に対応する情報を受信し、
前記プロセスの前記変更ステータスに対応する情報を受信したことに応じて、
第１の基準が満たされているという判定に従って、前記ＨＭＤデバイスの前記二次ディスプレイを介して、前記プロセスの前記ステータスに対応する第１の表現を表示し、
第２の基準が満たされているという判定に従って、前記ＨＭＤデバイスの前記三次ディスプレイを介して、前記プロセスの前記ステータスに対応する第２の表現を表示する、命令を含み、前記第２の表現は前記第１の表現とは異なる、ＨＭＤデバイス。
【請求項67】
ヘッドマウントディスプレイ（ＨＭＤ）デバイスの１つ以上のプロセッサによって実行されるように構成された１つ以上のプログラムを記憶する非一時的なコンピュータ可読記憶媒体であって、
前記ＨＭＤデバイスは、１つ以上のセンサと、視野全体に広がり、第１の解像度を有する一次ディスプレイと、前記一次ディスプレイに物理的及び電子的に結合されており、前記第１の解像度よりも低い第２の解像度を有する二次ディスプレイと、三次ディスプレイとを有し、前記１つ以上のプログラムは、
プロセスのステータスの変化に対応する情報を受信し、
前記プロセスの前記変更ステータスに対応する情報を受信したことに応じて、
第１の基準が満たされているという判定に従って、前記ＨＭＤデバイスの二次ディスプレイを介して、前記プロセスの前記ステータスに対応する第１の表現を表示し、
第２の基準が満たされているという判定に従って、前記ＨＭＤデバイスの前記三次ディスプレイを介して、前記プロセスの前記ステータスに対応する第２の表現を表示する、命令を含み、前記第２の表現は前記第１の表現とは異なる、非一時的なコンピュータ可読記憶媒体。
前記ＨＭＤデバイスは、１つ以上のセンサと、視野全体に広がり、第１の解像度を有する一次ディスプレイと、前記一次ディスプレイに物理的及び電子的に結合されており、前記第１の解像度よりも低い第２の解像度を有する二次ディスプレイと、三次ディスプレイとを有し、前記１つ以上のプログラムは、
プロセスのステータスの変化に対応する情報を受信し、
前記プロセスの前記変更ステータスに対応する情報を受信したことに応じて、
第１の基準が満たされているという判定に従って、前記ＨＭＤデバイスの二次ディスプレイを介して、前記プロセスの前記ステータスに対応する第１の表現を表示し、
第２の基準が満たされているという判定に従って、前記ＨＭＤデバイスの前記三次ディスプレイを介して、前記プロセスの前記ステータスに対応する第２の表現を表示する、命令を含み、前記第２の表現は前記第１の表現とは異なる、非一時的なコンピュータ可読記憶媒体。
【請求項68】
１つ以上のプロセッサと、
プロセスのステータスの変化に対応する情報を受信する手段と、
前記プロセスの前記変更ステータスに対応する情報を受信したことに応じて、
第１の基準が満たされているという判定に従って、前記ＨＭＤデバイスの二次ディスプレイを介して、前記プロセスの前記ステータスに対応する第１の表現を表示し、
第２の基準が満たされているという判定に従って、前記ＨＭＤデバイスの前記三次ディスプレイを介して、前記プロセスの前記ステータスに対応する第２の表現を表示する手段と、を備え、前記第２の表現は前記第１の表現とは異なる、システム。
プロセスのステータスの変化に対応する情報を受信する手段と、
前記プロセスの前記変更ステータスに対応する情報を受信したことに応じて、
第１の基準が満たされているという判定に従って、前記ＨＭＤデバイスの二次ディスプレイを介して、前記プロセスの前記ステータスに対応する第１の表現を表示し、
第２の基準が満たされているという判定に従って、前記ＨＭＤデバイスの前記三次ディスプレイを介して、前記プロセスの前記ステータスに対応する第２の表現を表示する手段と、を備え、前記第２の表現は前記第１の表現とは異なる、システム。
【発明の詳細な説明】
【技術分野】
【0001】
本開示は、概して、コンピュータ生成現実環境に関し、より具体的には、コンピュータ生成現実環境で使用するための追加のディスプレイを有するデバイスを管理する方法及び技術に関する。
【0002】
（関連出願の相互参照）
本出願は、２０２０年８月１９日に出願された「追加のディスプレイを有するデバイスの管理」という名称の米国仮特許出願第６３／０６７４６１号、及び２０１９年９月２７日に出願された「ＴＥＣＨＮＩＱＵＥＳ ＦＯＲ ＭＡＮＡＧＩＮＧ ＤＥＶＩＣＥＳ ＨＡＶＩＮＧ ＡＤＤＩＴＩＶＥ ＤＩＳＰＬＡＹＳ ＦＯＲ ＵＳＥ ＩＮ Ａ ＣＯＭＰＵＴＥＲ－ＧＥＮＥＲＡＴＥＤ ＲＥＡＬＩＴＹ ＥＮＶＩＲＯＮＭＥＮＴ」という名称の米国仮特許出願第６２／９０７２０７号に対する優先権を主張する。前述の出願の内容は、参照によりその全体が本明細書に組み込まれる。
本出願は、２０２０年８月１９日に出願された「追加のディスプレイを有するデバイスの管理」という名称の米国仮特許出願第６３／０６７４６１号、及び２０１９年９月２７日に出願された「ＴＥＣＨＮＩＱＵＥＳ ＦＯＲ ＭＡＮＡＧＩＮＧ ＤＥＶＩＣＥＳ ＨＡＶＩＮＧ ＡＤＤＩＴＩＶＥ ＤＩＳＰＬＡＹＳ ＦＯＲ ＵＳＥ ＩＮ Ａ ＣＯＭＰＵＴＥＲ－ＧＥＮＥＲＡＴＥＤ ＲＥＡＬＩＴＹ ＥＮＶＩＲＯＮＭＥＮＴ」という名称の米国仮特許出願第６２／９０７２０７号に対する優先権を主張する。前述の出願の内容は、参照によりその全体が本明細書に組み込まれる。
【背景技術】
【0003】
ユーザは、ヘッドマウントディスプレイ（ＨＭＤ）デバイスなどのウェアラブルデバイスを使用して、コンピュータ生成現実環境と対話することが多い。ウェアラブルデバイスの使用は、多くの場合、ウェアラブルデバイスのバッテリ寿命によって制限される。したがって、ウェアラブルデバイスのバッテリ寿命を節約するために電力使用量を管理するには、１つ以上の技術が必要である。
【発明の概要】
【0004】
一部の実施形態によれば、方法は、１つ以上のプロセッサと、メモリと、１つ以上の画像センサと、ヘッドマウントディスプレイ（ＨＭＤ）デバイスとを有するシステムにおいて実行され、ＨＭＤデバイスは、視野全体に広がり、第１の解像度を有する一次ディスプレイと、一次ディスプレイに物理的及び電子的に結合されており、第１の解像度よりも低い第２の解像度を有する二次ディスプレイとを含む。この方法は、二次ディスプレイを介して仮想オブジェクトの第１の部分を表示することと、一次ディスプレイを介して仮想オブジェクトの第２の部分を表示することとを含み、ここで一次ディスプレイを介して仮想オブジェクトの第２の部分を表示することは、仮想オブジェクトの第２の部分が一次ディスプレイのエッジから所定の距離内にあるという判定に従って、仮想オブジェクトの第２の部分に視覚効果を適用することを含む。
【0005】
一部の実施形態によれば、ヘッドマウントディスプレイ（ＨＭＤ）デバイスは、１つ以上の画像センサと、視野全体に広がり、第１の解像度を有する一次ディスプレイと、一次ディスプレイに物理的及び電子的に結合されており、第１の解像度よりも低い第２の解像度を有する二次ディスプレイとを含む。ＨＭＤデバイスはまた、１つ以上のプロセッサと、１つ以上のプロセッサによって実行されるように構成された１つ以上のプログラムを記憶するメモリとを含む。１つ以上のプログラムは、二次ディスプレイを介して仮想オブジェクトの第１の部分を表示し、一次ディスプレイを介して仮想オブジェクトの第２の部分を表示する命令を含み、ここで一次ディスプレイを介して仮想オブジェクトの第２の部分を表示することは、仮想オブジェクトの第２の部分が一次ディスプレイのエッジから所定の距離内にあるという判定に従って、仮想オブジェクトの第２の部分に視覚効果を適用することを含む。
【0006】
一部の実施形態によれば、非一時的なコンピュータ可読記憶媒体は、電子デバイスの１つ以上のプロセッサによって実行されるように構成された１つ以上のプログラムを記憶し、電子デバイスは、１つ以上のセンサと、視野全体に広がり、第１の解像度を有する一次ディスプレイと、一次ディスプレイに物理的及び電子的に結合されており、第１の解像度よりも低い第２の解像度を有する二次ディスプレイとを有する。１つ以上のプログラムは、二次ディスプレイを介して仮想オブジェクトの第１の部分を表示し、一次ディスプレイを介して仮想オブジェクトの第２の部分を表示する命令を含み、ここで一次ディスプレイを介して仮想オブジェクトの第２の部分を表示することは、仮想オブジェクトの第２の部分が一次ディスプレイのエッジから所定の距離内にあるという判定に従って、仮想オブジェクトの第２の部分に視覚効果を適用することを含む。
【0007】
一部の実施形態によれば、非一時的なコンピュータ可読記憶媒体は、電子デバイスの１つ以上のプロセッサによって実行されるように構成された１つ以上のプログラムを記憶し、電子デバイスは、１つ以上のセンサと、視野全体に広がり、第１の解像度を有する一次ディスプレイと、一次ディスプレイに物理的及び電子的に結合されており、第１の解像度よりも低い第２の解像度を有する二次ディスプレイとを有する。１つ以上のプログラムは、二次ディスプレイを介して仮想オブジェクトの第１の部分を表示し、一次ディスプレイを介して仮想オブジェクトの第２の部分を表示する命令を含み、ここで一次ディスプレイを介して仮想オブジェクトの第２の部分を表示することは、仮想オブジェクトの第２の部分が一次ディスプレイのエッジから所定の距離内にあるという判定に従って、仮想オブジェクトの第２の部分に視覚効果を適用することを含む。
【0008】
一部の実施形態によれば、システムは１つ以上のプロセッサを含む。システムはまた、二次ディスプレイを介して仮想オブジェクトの第１の部分を表示する手段と、一次ディスプレイを介して仮想オブジェクトの第２の部分を表示する手段とを含み、ここで一次ディスプレイを介して仮想オブジェクトの第２の部分を表示することは、仮想オブジェクトの第２の部分が一次ディスプレイのエッジから所定の距離内にあるという判定に従って、仮想オブジェクトの第２の部分に視覚効果を適用することを含む。
【0009】
一部の実施形態によれば、方法は、１つ以上のプロセッサと、メモリと、１つ以上の画像センサと、ヘッドマウントディスプレイ（ＨＭＤ）デバイスとを有するシステムにおいて実行され、ＨＭＤデバイスは、視野全体に広がり、第１の解像度を有する一次ディスプレイと、一次ディスプレイに物理的及び電子的に結合されており、第１の解像度よりも低い第２の解像度を有する二次ディスプレイと、三次ディスプレイとを含む。この方法は、ＨＭＤデバイスの一次ディスプレイ及びＨＭＤデバイスの二次ディスプレイの視野外にあるオブジェクトの位置に対応する方向情報を受信することを含む。この方法はまた、一次ディスプレイ及び二次ディスプレイの視野外にあるオブジェクトの位置に対応する方向情報を受信したことに応じて、オブジェクトの方向情報を二次ディスプレイを介して表示することが許可されたときに満たされる基準を含む第１の基準が満たされているという判定に従って、二次ディスプレイを介して、方向情報の第１の表現を表示することと、オブジェクトの方向情報を三次ディスプレイを介して表示することが許可されたときに満たされる基準を含む第２の基準が満たされているという判定に従って、三次ディスプレイを介して方向情報の第２の表現を表示することと、を含み、ここで、第１の表現は、ＣＧＲ環境内の仮想オブジェクトであり、第２の表現は、ＣＧＲ環境内の仮想オブジェクトではない。
【0010】
一部の実施形態によれば、ヘッドマウントディスプレイ（ＨＭＤ）デバイスは、１つ以上の画像センサと、視野全体に広がり、第１の解像度を有する一次ディスプレイと、一次ディスプレイに物理的及び電子的に結合されており、第１の解像度よりも低い第２の解像度を有する二次ディスプレイと、三次ディスプレイとを含む。ＨＭＤデバイスはまた、１つ以上のプロセッサと、１つ以上のプロセッサによって実行されるように構成された１つ以上のプログラムを記憶するメモリとを含む。１つ以上のプログラムは、ＨＭＤデバイスの一次ディスプレイ及びＨＭＤデバイスの二次ディスプレイの視野外にあるオブジェクトの位置に対応する方向情報を受信するための命令を含む。１つ以上のプログラムはまた、一次ディスプレイ及び二次ディスプレイの視野外にあるオブジェクトの位置に対応する方向情報を受信したことに応じて、オブジェクトの方向情報を二次ディスプレイを介して表示することが許可されたときに満たされる基準を含む第１の基準が満たされているという判定に従って、二次ディスプレイを介して、方向情報の第１の表現を表示し、オブジェクトの方向情報を三次ディスプレイを介して表示することが許可されたときに満たされる基準を含む第２の基準が満たされているという判定に従って、三次ディスプレイを介して方向情報の第２の表現を表示するための命令を含み、ここで、第１の表現は、ＣＧＲ環境内の仮想オブジェクトであり、第２の表現は、ＣＧＲ環境内の仮想オブジェクトではない。
【0011】
一部の実施形態によれば、非一時的なコンピュータ可読記憶媒体は、電子デバイスの１つ以上のプロセッサによって実行されるように構成された１つ以上のプログラムを記憶し、電子デバイスは、１つ以上のセンサと、視野全体に広がり、第１の解像度を有する一次ディスプレイと、一次ディスプレイに物理的及び電子的に結合されており、第１の解像度よりも低い第２の解像度を有する二次ディスプレイと、三次ディスプレイとを有する。１つ以上のプログラムは、ＨＭＤデバイスの一次ディスプレイ及びＨＭＤデバイスの二次ディスプレイの視野外にあるオブジェクトの位置に対応する方向情報を受信するための命令を含む。１つ以上のプログラムはまた、一次ディスプレイ及び二次ディスプレイの視野外にあるオブジェクトの位置に対応する方向情報を受信したことに応じて、オブジェクトの方向情報を二次ディスプレイを介して表示することが許可されたときに満たされる基準を含む第１の基準が満たされているという判定に従って、二次ディスプレイを介して、方向情報の第１の表現を表示し、オブジェクトの方向情報を三次ディスプレイを介して表示することが許可されたときに満たされる基準を含む第２の基準が満たされているという判定に従って、三次ディスプレイを介して方向情報の第２の表現を表示するための命令を含み、ここで、第１の表現は、ＣＧＲ環境内の仮想オブジェクトであり、第２の表現は、ＣＧＲ環境内の仮想オブジェクトではない。
【0012】
一部の実施形態によれば、非一時的なコンピュータ可読記憶媒体は、電子デバイスの１つ以上のプロセッサによって実行されるように構成された１つ以上のプログラムを記憶し、電子デバイスは、１つ以上のセンサと、視野全体に広がり、第１の解像度を有する一次ディスプレイと、一次ディスプレイに物理的及び電子的に結合されており、第１の解像度よりも低い第２の解像度を有する二次ディスプレイと、三次ディスプレイとを有する。１つ以上のプログラムは、ＨＭＤデバイスの一次ディスプレイ及びＨＭＤデバイスの二次ディスプレイの視野外にあるオブジェクトの位置に対応する方向情報を受信するための命令を含む。１つ以上のプログラムはまた、一次ディスプレイ及び二次ディスプレイの視野外にあるオブジェクトの位置に対応する方向情報を受信したことに応じて、オブジェクトの方向情報を二次ディスプレイを介して表示することが許可されたときに満たされる基準を含む第１の基準が満たされているという判定に従って、二次ディスプレイを介して、方向情報の第１の表現を表示し、オブジェクトの方向情報を三次ディスプレイを介して表示することが許可されたときに満たされる基準を含む第２の基準が満たされているという判定に従って、三次ディスプレイを介して方向情報の第２の表現を表示するための命令を含み、ここで、第１の表現は、ＣＧＲ環境内の仮想オブジェクトであり、第２の表現は、ＣＧＲ環境内の仮想オブジェクトではない。
【0013】
一部の実施形態によれば、システムは１つ以上のプロセッサを含む。システムはまた、ヘッドマウントディスプレイ（ＨＭＤ）デバイスの一次ディスプレイ及びＨＭＤデバイスの二次ディスプレイの視野外にあるオブジェクトの位置に対応する方向情報を受信する手段を含む。システムは、一次ディスプレイ及び二次ディスプレイの視野外にあるオブジェクトの位置に対応する方向情報を受信したことに応じて、オブジェクトの方向情報を二次ディスプレイを介して表示することが許可されたときに満たされる基準を含む第１の基準が満たされているという判定に従って、二次ディスプレイを介して、方向情報の第１の表現を表示し、オブジェクトの方向情報を三次ディスプレイを介して表示することが許可されたときに満たされる基準を含む第２の基準が満たされているという判定に従って、三次ディスプレイを介して方向情報の第２の表現を表示する手段を更に含み、ここで、第１の表現は、ＣＧＲ環境内の仮想オブジェクトであり、第２の表現は、ＣＧＲ環境内の仮想オブジェクトではない。
【0014】
一部の実施形態によれば、方法は、１つ以上のプロセッサと、メモリと、１つ以上の画像センサと、ヘッドマウントディスプレイ（ＨＭＤ）デバイスとを有するシステムにおいて実行され、ＨＭＤデバイスは、視野全体に広がり、第１の解像度を有する一次ディスプレイと、一次ディスプレイに物理的及び電子的に結合されており、第１の解像度よりも低い第２の解像度を有する二次ディスプレイとを含む。この方法は、第１の位置でコンピュータ生成現実（ＣＧＲ）環境内のオブジェクトを検出することと、第１の位置でＣＧＲ環境内のオブジェクトを検出したことに応じて、第１の位置が、ＨＭＤデバイスの一次ディスプレイの視野外の第１の所定の距離内にあるという判定に従って、ＨＭＤデバイスの二次ディスプレイを介して、オブジェクトの第１の実際の表現と視覚的に区別されるオブジェクトの第１の修正された表現を表示することとを含む。
【0015】
一部の実施形態によれば、ヘッドマウントディスプレイ（ＨＭＤ）デバイスは、１つ以上の画像センサと、視野全体に広がり、第１の解像度を有する一次ディスプレイと、一次ディスプレイに物理的及び電子的に結合されており、第１の解像度よりも低い第２の解像度を有する二次ディスプレイとを含む。ＨＭＤデバイスはまた、１つ以上のプロセッサと、１つ以上のプロセッサによって実行されるように構成された１つ以上のプログラムを記憶するメモリとを含む。１つ以上のプログラムは、第１の位置でコンピュータ生成現実（ＣＧＲ）環境内のオブジェクトを検出し、第１の位置でＣＧＲ環境内のオブジェクトを検出したことに応じて、第１の位置が、ＨＭＤデバイスの一次ディスプレイの視野外の第１の所定の距離内にあるという判定に従って、ＨＭＤデバイスの二次ディスプレイを介して、オブジェクトの第１の実際の表現と視覚的に区別されるオブジェクトの第１の修正された表現を表示するための命令を含む。
【0016】
一部の実施形態によれば、非一時的なコンピュータ可読記憶媒体は、電子デバイスの１つ以上のプロセッサによって実行されるように構成された１つ以上のプログラムを記憶し、電子デバイスは、１つ以上のセンサと、視野全体に広がり、第１の解像度を有する一次ディスプレイと、一次ディスプレイに物理的及び電子的に結合されており、第１の解像度よりも低い第２の解像度を有する二次ディスプレイとを有する。１つ以上のプログラムは、第１の位置でコンピュータ生成現実（ＣＧＲ）環境内のオブジェクトを検出し、第１の位置でＣＧＲ環境内のオブジェクトを検出したことに応じて、第１の位置が、ＨＭＤデバイスの一次ディスプレイの視野外の第１の所定の距離内にあるという判定に従って、ＨＭＤデバイスの二次ディスプレイを介して、オブジェクトの第１の実際の表現と視覚的に区別されるオブジェクトの第１の修正された表現を表示するための命令を含む。
【0017】
一部の実施形態によれば、非一時的なコンピュータ可読記憶媒体は、電子デバイスの１つ以上のプロセッサによって実行されるように構成された１つ以上のプログラムを記憶し、電子デバイスは、１つ以上のセンサと、視野全体に広がり、第１の解像度を有する一次ディスプレイと、一次ディスプレイに物理的及び電子的に結合されており、第１の解像度よりも低い第２の解像度を有する二次ディスプレイとを有する。１つ以上のプログラムは、第１の位置でコンピュータ生成現実（ＣＧＲ）環境内のオブジェクトを検出し、第１の位置でＣＧＲ環境内のオブジェクトを検出したことに応じて、第１の位置が、ＨＭＤデバイスの一次ディスプレイの視野外の第１の所定の距離内にあるという判定に従って、ＨＭＤデバイスの二次ディスプレイを介して、オブジェクトの第１の実際の表現と視覚的に区別されるオブジェクトの第１の修正された表現を表示するための命令を含む。
【0018】
一部の実施形態によれば、システムは１つ以上のプロセッサを含む。システムはまた、第１の位置でコンピュータ生成現実（ＣＧＲ）環境内のオブジェクトを検出する手段を含む。システムは、第１の位置でＣＧＲ環境内のオブジェクトを検出したことに応じて、第１の位置が、ＨＭＤデバイスの一次ディスプレイの視野外の第１の所定の距離内にあるという判定に従って、ＨＭＤデバイスの二次ディスプレイを介して、オブジェクトの第１の実際の表現と視覚的に区別されるオブジェクトの第１の修正された表現を表示する手段を更に含む。
【0019】
一部の実施形態によれば、方法は、１つ以上のプロセッサと、メモリと、１つ以上の画像センサと、ヘッドマウントディスプレイ（ＨＭＤ）デバイスとを有するシステムにおいて実行され、ＨＭＤデバイスは、視野全体に広がり、第１の解像度を有する一次ディスプレイと、一次ディスプレイに物理的及び電子的に結合されており、第１の解像度よりも低い第２の解像度を有する二次ディスプレイと、三次ディスプレイとを含む。この方法は、ＨＭＤデバイスの一次ディスプレイ及びＨＭＤデバイスの二次ディスプレイの視野外にあるオブジェクトの位置に対応する方向情報を受信することを含む。プロセスの変更ステータスに対応する情報を受信したことに応じて、この方法はまた、第１の基準が満たされているという判定に従って、ＨＭＤデバイスの二次ディスプレイを介して、プロセスのステータスに対応する第１の表現を表示することと、第２の基準が満たされているという判定に従って、ＨＭＤデバイスの三次ディスプレイを介して、プロセスのステータスに対応する第２の表現を表示することと、を含み、ここで第２の表現は第１の表現とは異なる。
【0020】
一部の実施形態によれば、ヘッドマウントディスプレイ（ＨＭＤ）デバイスは、１つ以上の画像センサと、視野全体に広がり、第１の解像度を有する一次ディスプレイと、一次ディスプレイに物理的及び電子的に結合されており、第１の解像度よりも低い第２の解像度を有する二次ディスプレイと、三次ディスプレイとを含む。ＨＭＤデバイスはまた、１つ以上のプロセッサと、１つ以上のプロセッサによって実行されるように構成された１つ以上のプログラムを記憶するメモリとを含む。１つ以上のプログラムは、プロセスのステータスの変化に対応する情報を受信するための命令を含む。プロセスの変更ステータスに対応する情報を受信したことに応じて、１つ以上のプログラムはまた、第１の基準が満たされているという判定に従って、ＨＭＤデバイスの二次ディスプレイを介して、プロセスのステータスに対応する第１の表現を表示し、第２の基準が満たされているという判定に従って、ＨＭＤデバイスの三次ディスプレイを介して、プロセスのステータスに対応する第２の表現を表示することを含み、ここで第２の表現は第１の表現とは異なる。
【0021】
一部の実施形態によれば、非一時的なコンピュータ可読記憶媒体は、電子デバイスの１つ以上のプロセッサによって実行されるように構成された１つ以上のプログラムを記憶し、電子デバイスは、１つ以上のセンサと、視野全体に広がり、第１の解像度を有する一次ディスプレイと、一次ディスプレイに物理的及び電子的に結合されており、第１の解像度よりも低い第２の解像度を有する二次ディスプレイと、三次ディスプレイとを有する。１つ以上のプログラムは、プロセスのステータスの変化に対応する情報を受信するための命令を含む。プロセスの変更ステータスに対応する情報を受信したことに応じて、１つ以上のプログラムはまた、第１の基準が満たされているという判定に従って、ＨＭＤデバイスの二次ディスプレイを介して、プロセスのステータスに対応する第１の表現を表示し、第２の基準が満たされているという判定に従って、ＨＭＤデバイスの三次ディスプレイを介して、プロセスのステータスに対応する第２の表現を表示することを含み、ここで第２の表現は第１の表現とは異なる。
【0022】
一部の実施形態によれば、非一時的なコンピュータ可読記憶媒体は、電子デバイスの１つ以上のプロセッサによって実行されるように構成された１つ以上のプログラムを記憶し、電子デバイスは、１つ以上のセンサと、視野全体に広がり、第１の解像度を有する一次ディスプレイと、一次ディスプレイに物理的及び電子的に結合されており、第１の解像度よりも低い第２の解像度を有する二次ディスプレイと、三次ディスプレイとを有する。１つ以上のプログラムは、プロセスのステータスの変化に対応する情報を受信するための命令を含む。プロセスの変更ステータスに対応する情報を受信したことに応じて、１つ以上のプログラムはまた、第１の基準が満たされているという判定に従って、ＨＭＤデバイスの二次ディスプレイを介して、プロセスのステータスに対応する第１の表現を表示し、第２の基準が満たされているという判定に従って、ＨＭＤデバイスの三次ディスプレイを介して、プロセスのステータスに対応する第２の表現を表示することを含み、ここで第２の表現は第１の表現とは異なる。
【0023】
一部の実施形態によれば、システムは１つ以上のプロセッサを含む。システムはまた、ヘッドマウントディスプレイ（ＨＭＤ）デバイスの一次ディスプレイ及びＨＭＤデバイスの二次ディスプレイの視野外にあるオブジェクトの位置に対応する方向情報を受信する手段を含む。システムは、プロセスの変更ステータスに対応する情報を受信したことに応じて、第１の基準が満たされているという判定に従って、ＨＭＤデバイスの二次ディスプレイを介して、プロセスのステータスに対応する第１の表現を表示し、第２の基準が満たされているという判定に従って、ＨＭＤデバイスの三次ディスプレイを介して、プロセスのステータスに対応する第２の表現を表示する手段を更に含み、ここで第２の表現は第１の表現とは異なる。
【0024】
これらの機能を実行するための実行可能命令は、任意選択で、非一時的なコンピュータ可読記憶媒体又は１つ以上のプロセッサによって実行されるように構成された他のコンピュータプログラム製品内に含まれる。これらの機能を実行するための実行可能命令は、任意選択で、一時的なコンピュータ可読記憶媒体又は１つ以上のプロセッサによって実行されるように構成された他のコンピュータプログラム製品内に含まれる。
以下の説明では、その一部を形成し、本開示のいくつかの例を示す添付図面を参照する。本開示の範囲から逸脱することなく、他の例を利用することができ、構造上及び動作上の変更を行うことができることが理解される。異なる図で同じ参照記号が使用されている場合は、類似又は同一の項目を示す。
以下の説明では、その一部を形成し、本開示のいくつかの例を示す添付図面を参照する。本開示の範囲から逸脱することなく、他の例を利用することができ、構造上及び動作上の変更を行うことができることが理解される。異なる図で同じ参照記号が使用されている場合は、類似又は同一の項目を示す。
【図面の簡単な説明】
【0025】
【図1A】様々なコンピュータ生成現実技術で使用するための例示的なシステムを示す図である。
【図1B】様々なコンピュータ生成現実技術で使用するための例示的なシステムを示す図である。
【図2A】様々なコンピュータ生成現実環境で使用するための追加のディスプレイを有するデバイスを含む例示的なシステムを示す図である。
【図2B】様々なコンピュータ生成現実環境で使用するための追加のディスプレイを有するデバイスを含む例示的なシステムを示す図である。
【図3】一部の実施形態による例示的な仮想オブジェクトを示す図である。
【図4】一部の実施形態による、仮想オブジェクトを表示するための例示的な技術を示す図である。
【図5】一部の実施形態による、仮想オブジェクトを表示するための追加のディスプレイを有するデバイス上の例示的な領域を示す図である。
【図6A】一部の実施形態による、仮想オブジェクトを表示するための例示的な技術を示す図である。
【図6B】一部の実施形態による、仮想オブジェクトを表示するための例示的な技術を示す図である。
【図6C】一部の実施形態による、仮想オブジェクトを表示するための例示的な技術を示す図である。
【図7】一部の実施形態による、仮想オブジェクトを表示する方法を示す流れ図である。
【図8A】一部の実施形態による、仮想オブジェクトを表示するための例示的な技術を示す図である。
【図8B】一部の実施形態による、仮想オブジェクトを表示するための例示的な技術を示す図である。
【図9A】一部の実施形態による、仮想オブジェクトを表示するための例示的な技術を示す図である。
【図9B】一部の実施形態による、仮想オブジェクトを表示するための例示的な技術を示す図である。
【図10A】一部の実施形態による、仮想オブジェクトを表示するための例示的な技術を示す図である。
【図10B】一部の実施形態による、仮想オブジェクトを表示するための例示的な技術を示す図である。
【図11A】一部の実施形態による、仮想オブジェクトを表示するための例示的な技術を示す図である。
【図11B】一部の実施形態による、仮想オブジェクトを表示するための例示的な技術を示す図である。
【図12A】一部の実施形態による、仮想オブジェクトを表示するための例示的な技術を示す図である。
【図12B】一部の実施形態による、仮想オブジェクトを表示するための例示的な技術を示す図である。
【図13A】一部の実施形態による、仮想オブジェクトを表示するための例示的な技術を示す図である。
【図13B】一部の実施形態による、仮想オブジェクトを表示するための例示的な技術を示す図である。
【図14A】一部の実施形態による、仮想オブジェクトを表示するための例示的な技術を示す図である。
【図14B】一部の実施形態による、仮想オブジェクトを表示するための例示的な技術を示す図である。
【図15】一部の実施形態による、方向情報に基づいてディスプレイ間でオブジェクトを遷移させる方法を示す流れ図である。
【図16】一部の実施形態による、オブジェクトの修正された表現を表示する方法を示す流れ図である。
【図17A】一部の実施形態による、１つ以上のプロセスに関連するデータに基づいて１つ以上のディスプレイを管理するための例示的な技術を示す図である。
【図17B】一部の実施形態による、１つ以上のプロセスに関連するデータに基づいて１つ以上のディスプレイを管理するための例示的な技術を示す図である。
【図18】一部の実施形態による、１つ以上のプロセスに関連するデータに基づいて１つ以上のディスプレイを管理するための例示的な技術を示す図である。
【図19A】一部の実施形態による、１つ以上のプロセスに関連するデータに基づいて１つ以上のディスプレイを管理するための例示的な技術を示す図である。
【図19B】一部の実施形態による、１つ以上のプロセスに関連するデータに基づいて１つ以上のディスプレイを管理するための例示的な技術を示す図である。
【図20A】一部の実施形態による、１つ以上のプロセスに関連するデータに基づいて１つ以上のディスプレイを管理するための例示的な技術を示す図である。
【図20B】一部の実施形態による、１つ以上のプロセスに関連するデータに基づいて１つ以上のディスプレイを管理するための例示的な技術を示す図である。
【図20C】一部の実施形態による、１つ以上のプロセスに関連するデータに基づいて１つ以上のディスプレイを管理するための例示的な技術を示す図である。
【図20D】一部の実施形態による、１つ以上のプロセスに関連するデータに基づいて１つ以上のディスプレイを管理するための例示的な技術を示す図である。
【図21A】一部の実施形態による、１つ以上のプロセスに関連するデータに基づいて１つ以上のディスプレイを管理するための例示的な技術を示す図である。
【図21B】一部の実施形態による、１つ以上のプロセスに関連するデータに基づいて１つ以上のディスプレイを管理するための例示的な技術を示す図である。
【図21C】一部の実施形態による、１つ以上のプロセスに関連するデータに基づいて１つ以上のディスプレイを管理するための例示的な技術を示す図である。
【図21D】一部の実施形態による、１つ以上のプロセスに関連するデータに基づいて１つ以上のディスプレイを管理するための例示的な技術を示す図である。
【図22A】一部の実施形態による、１つ以上のプロセスに関連するデータに基づいて１つ以上のディスプレイを管理するための例示的な技術を示す図である。
【図22B】一部の実施形態による、１つ以上のプロセスに関連するデータに基づいて１つ以上のディスプレイを管理するための例示的な技術を示す図である。
【図23A】一部の実施形態による、１つ以上のプロセスに関連するデータに基づいて１つ以上のディスプレイを管理するための例示的な技術を示す図である。
【図23B】一部の実施形態による、１つ以上のプロセスに関連するデータに基づいて１つ以上のディスプレイを管理するための例示的な技術を示す図である。
【図24A】一部の実施形態による、１つ以上のプロセスに関連するデータに基づいて１つ以上のディスプレイを管理するための例示的な技術を示す図である。
【図24B】一部の実施形態による、１つ以上のプロセスに関連するデータに基づいて１つ以上のディスプレイを管理するための例示的な技術を示す図である。
【図24C】一部の実施形態による、１つ以上のプロセスに関連するデータに基づいて１つ以上のディスプレイを管理するための例示的な技術を示す図である。
【図24D】一部の実施形態による、１つ以上のプロセスに関連するデータに基づいて１つ以上のディスプレイを管理するための例示的な技術を示す図である。
【図25】一部の実施形態による、１つ以上のプロセスに関連するデータに基づいて１つ以上のディスプレイを管理する方法を示す流れ図である。
【発明を実施するための形態】
【0026】
様々なコンピュータ生成現実技術に関連してそのようなシステムを使用するための電子システム及び技術の様々な例が説明される。
【0027】
物理的環境（又は実環境）とは、電子システムの助けを借りずに、人々が感知及び／又は対話することができる物理的世界を指す。物理的な公園などの物理的環境には、物理的な樹木、物理的な建物、及び物理的な人などの物理的物品（又は物理的オブジェクト又は実際のオブジェクト）が含まれる。人々は、視覚、触覚、聴覚、味覚、及び嗅覚などを通じて、物理的環境を直接感知し、及び／又はそれと対話することができる。
【0028】
対照的に、コンピュータ生成現実（ＣＧＲ）環境は、人々が電子システムを介して感知及び／又は対話する、全体的又は部分的にシミュレートされた環境を指す。ＣＧＲでは、人の物理的な動きのサブセット又はその表現が追跡され、それに応じて、ＣＧＲ環境内でシミュレートされた１つ以上の仮想オブジェクトの１つ以上の特性は、少なくとも１つの物理法則に適合するように調整される。例えば、ＣＧＲシステムは、人の頭部の回転を検出し、それに応じて、そのようなビュー及び音が物理的環境においてどのように変化するかと同様の方法で、人に提示されるグラフィカルコンテンツ及び音場を調整することができる。状況によっては（例えば、アクセシビリティの理由で）、ＣＧＲ環境内の仮想オブジェクトの特性に対する調整は、物理的な動きの表現（例えば、音声コマンド）に応じて行われてもよい。
【0029】
人は、視覚、聴覚、触覚、味覚及び嗅覚を含む感覚のいずれかを使用して、ＣＧＲオブジェクトを感知し、及び／又はそれと対話することができる。例えば、人は、３Ｄ空間内のポイントオーディオソースの知覚を提供する、３Ｄ又は空間オーディオ環境を作り出すオーディオオブジェクトを感知し、及び／又はそれと対話することができる。別の例では、オーディオオブジェクトは、コンピュータ生成オーディオの有無にかかわらず、物理的環境からの周囲音を選択的に組み込むオーディオ透過性を可能にすることができる。一部のＣＧＲ環境では、人は、オーディオオブジェクトのみを感知し、及び／又はそれと対話することができる。
【0030】
ＣＧＲの例としては、仮想現実及び複合現実が挙げられる。
【0031】
仮想現実（ＶＲ）環境（又は仮想環境）とは、１つ以上の感覚に対するコンピュータ生成感覚入力に完全に基づくように設計されたシミュレートされた環境を指す。ＶＲ環境は、人が感知及び／又は対話することができる複数の仮想オブジェクトを含む。例えば、木、建物、及び人を表すアバターのコンピュータ生成画像は、仮想オブジェクトの例である。人は、コンピュータ生成環境内における人の存在のシミュレーションを通じて、及び／又はコンピュータ生成環境内における人の物理的な動きのサブセットのシミュレーションを通じて、ＶＲ環境内の仮想オブジェクトを感知し、及び／又はそれと対話することができる。
【0032】
コンピュータ生成感覚入力に完全に基づくように設計されたＶＲ環境とは対照的に、複合現実（ＭＲ）環境は、コンピュータ生成感覚入力（例えば、仮想オブジェクト）を含むことに加えて、物理的環境からの感覚入力又はその表現を組み込むように設計されたシミュレートされた環境を指す。仮想連続体において、ＭＲ環境は、一方の端における完全に物理的な環境と他方の端におけるＶＲ環境との間の任意の場所であるが、これらを含まない。
【0033】
一部のＭＲ環境では、コンピュータ生成感覚入力は、物理的環境からの感覚入力の変化に応答する場合がある。また、ＭＲ環境を提示するための一部の電子システムは、仮想オブジェクトが実際のオブジェクト（すなわち、物理的環境からの物理的物品又はその表現）と対話することを可能にするために、物理的環境に対する位置及び／又は向きを追跡することができる。例えば、システムは、仮想の木が物理的な地面に対して静止して見えるように、移動を考慮することができる。
【0034】
ＭＲの例には、拡張現実及び拡張仮想が含まれる。
【0035】
拡張現実（ＡＲ）環境は、１つ以上の仮想オブジェクトが物理的環境上又はその表現上に重ね合わされたシミュレートされた環境を指す。例えば、ＡＲ環境を提示するための電子システムは、人が物理的環境を直接見ることができる透明又は半透明ディスプレイを有してもよい。システムは、透明又は半透明ディスプレイ上に仮想オブジェクトを提示するように構成されてもよく、それによって、人は、システムを使用して、物理的環境上に重ね合わされた仮想オブジェクトを知覚する。あるいは、システムは、不透明ディスプレイと、物理的環境の表現である、物理的環境の画像又はビデオをキャプチャする１つ以上の撮像センサとを有してもよい。システムは、画像又はビデオを仮想オブジェクトと合成し、その合成物を不透明ディスプレイ上に提示する。人は、システムを使用して、物理的環境の画像又はビデオを介して物理的環境を間接的に見て、物理的環境上に重ね合わされた仮想オブジェクトを知覚する。本明細書で使用される場合、不透明ディスプレイ上に示される物理的環境のビデオは、「パススルービデオ」と呼ばれ、システムが、１つ以上の画像センサを使用して物理的環境の画像をキャプチャし、そしてこれらの画像を使用して、不透明ディスプレイ上にＡＲ環境を提示することを意味する。更に代替的に、システムは、仮想オブジェクトを、例えば、ホログラムとして又は物理的表面上に物理的環境に投影する投影システムを有してもよく、それによって、人は、システムを使用して、物理的環境上に重ね合わされた仮想オブジェクトを知覚する。
【0036】
ＡＲ環境はまた、物理的環境の表現がコンピュータ生成感覚情報によって変換されるシミュレートされた環境を指す。例えば、パススルービデオを提供する際に、システムは、１つ以上のセンサ画像を変換して、撮像センサによってキャプチャされた視点とは異なる選択された視点（例えば、視点）を適用することができる。別の例として、物理的環境の表現は、その一部をグラフィカルに修正（例えば、拡大）することによって変換することができ、その結果、修正された部分は、最初にキャプチャされた画像の写実的なバージョンではなく、代表的なバージョンである可能性がある。更なる例として、物理的環境の表現は、その一部をグラフィカルに除去又は曖昧化することによって変換することができる。
【0037】
拡張仮想（ＡＶ）環境とは、仮想環境又はコンピュータ生成環境が物理的環境からの１つ以上の感覚入力を組み込んだシミュレートされた環境を指す。感覚入力は、物理的環境の１つ以上の特性の表現であり得る。例えば、ＡＶ公園には仮想の木及び仮想の建物があり得るが、顔のある人々は、物理的な人々を撮影した画像から写実的に再現される。別の例として、仮想オブジェクトは、１つ以上の撮像センサによって撮像された物理的物品の形状又は色を採用してもよい。更なる例として、仮想オブジェクトは、物理的環境における太陽の位置と一致する影を採用することができる。
【0038】
人が様々なＣＧＲ環境を感知し、及び／又はそれと対話することを可能にする様々なタイプの電子システムがある。例としては、ヘッドマウントシステム、投影ベースシステム、ヘッドアップディスプレイ（ＨＵＤ）、統合表示機能を有する車両フロントガラス、統合表示機能を有する窓、人の目の上に配置されるように設計されたレンズとして形成されたディスプレイ（例えば、コンタクトレンズと同様のもの）、ヘッドホン／イヤホン、スピーカーアレイ、入力システム（例えば、触覚フィードバックを有する又は有さないウェアラブル又はハンドヘルドコントローラ）、スマートフォン、タブレット、及びデスクトップ／ラップトップコンピュータが挙げられる。ヘッドマウントシステムは、１つ以上のスピーカー及び一体型不透明ディスプレイを有してもよい。あるいは、ヘッドマウントシステムは、外部の不透明ディスプレイ（例えば、スマートフォン）を受け入れるように構成されてもよい。ヘッドマウントシステムは、物理的環境の画像又はビデオをキャプチャするための１つ以上の撮像センサ、及び／又は物理的環境のオーディオをキャプチャするための１つ以上のマイクロフォンを組み込むことができる。ヘッドマウントシステムは、不透明ディスプレイではなく、透明又は半透明ディスプレイを有してもよい。透明又は半透明ディスプレイは、画像を表す光が人の目に向けられる媒体を有してもよい。ディスプレイは、デジタル光投影、ＯＬＥＤ、ＬＥＤ、ｕＬＥＤ、液晶オンシリコン、レーザ走査光源、又はこれらの技術の任意の組み合わせを利用することができる。媒体は、光導波路、ホログラム媒体、光結合器、光反射器、又はこれらの任意の組み合わせであってもよい。一例では、透明又は半透明ディスプレイは、選択的に不透明になるように構成されてもよい。投影ベースシステムは、グラフィカル画像を人の網膜上に投影する網膜投影技術を採用することができる。投影システムはまた、仮想オブジェクトを、例えばホログラムとして又は物理的表面上に、物理的環境に投影するように構成されてもよい。
【0039】
【0040】
一部の例において、図１Ａに示されるように、システム１００は、デバイス１００ａを含む。デバイス１００ａは、プロセッサ１０２、ＲＦ回路１０４、メモリ１０６、画像センサ１０８、向きセンサ１１０、マイクロフォン１１２、位置センサ１１６、スピーカー１１８、ディスプレイ１２０、及びタッチ感知表面１２２などの様々な構成要素を含む。これらの構成要素は、任意選択で、デバイス１００ａの通信バス１５０を介して通信する。
【0041】
一部の例では、システム１００の要素は、基地局デバイス（例えば、リモートサーバ、モバイルデバイス、又はラップトップなどのコンピューティングデバイス）に実装され、システム１００の他の要素は、ユーザが装着するように設計されたヘッドマウントディスプレイ（ＨＭＤ）デバイスに実装され、ＨＭＤデバイスは、基地局デバイスと通信する。一部の例では、デバイス１００ａは、基地局デバイス又はＨＭＤデバイスに実装される。
【0042】
図１Ｂに示すように、一部の例では、システム１００は、有線接続又は無線接続などを介して通信する２つ（又はそれより多く）のデバイスを含む。第１のデバイス１００ｂ（例えば、基地局デバイス）は、プロセッサ１０２、ＲＦ回路１０４、及びメモリ１０６を含む。これらの構成要素は、任意選択で、デバイス１００ｂの通信バス１５０を介して通信する。第２のデバイス１００ｃ（例えば、ヘッドマウントデバイス）は、プロセッサ１０２、ＲＦ回路１０４、メモリ１０６、画像センサ１０８、向きセンサ１１０、マイクロフォン１１２、位置センサ１１６、スピーカー１１８、ディスプレイ１２０、及びタッチ感知表面１２２などの様々な構成要素を含む。これらの構成要素は、任意選択で、デバイス１００ｃの通信バス１５０を介して通信する。
【0043】
一部の例では、システム１００はモバイルデバイスである。一部の例では、システム１００はＨＭＤデバイスである。一部の例では、システム１００はウェアラブルＨＵＤデバイスである。
【0044】
システム１００は、プロセッサ１０２及びメモリ１０６を含む。プロセッサ１０２は、１つ以上の汎用プロセッサ、１つ以上のグラフィックプロセッサ、及び／又は１つ以上のデジタル信号プロセッサを含む。一部の例において、メモリ１０６は、以下に説明する技術を実行するためにプロセッサ１０２によって実行されるように構成されたコンピュータ可読命令を記憶する１つ以上の非一時的なコンピュータ可読記憶媒体（例えば、フラッシュメモリ、ランダムアクセスメモリ）である。
【0045】
システム１００は、ＲＦ回路１０４を含む。ＲＦ回路１０４は、任意選択で、電子デバイス、インターネット、イントラネット及び／又はセルラーネットワーク及び無線ローカルエリアネットワーク（ＬＡＮ）などの無線ネットワークなどのネットワークと通信するための回路を含む。ＲＦ回路１０４は、任意選択で、Ｂｌｕｅｔｏｏｔｈ（登録商標）などの近距離通信及び／又は短距離通信を使用して通信するための回路を含む。
【0046】
システム１００は、ディスプレイ１２０を含む。一部の例では、ディスプレイ１２０は、第１のディスプレイ（例えば、左眼表示パネル）及び第２のディスプレイ（例えば、右眼表示パネル）を含み、各ディスプレイは、ユーザの対応する目に画像を表示する。対応する画像は、第１のディスプレイ及び第２のディスプレイ上に同時に表示される。任意選択で、対応する画像は、同じ仮想オブジェクト及び／又は異なる視点からの同じ物理的オブジェクトの表現を含み、結果として、ディスプレイ上のオブジェクトの深さの錯覚をユーザに提供する視差効果をもたらす。一部の例では、第１のディスプレイは、一次ディスプレイ及び二次ディスプレイなどの複数の他のディスプレイ（例えば、サブディスプレイ）を含むことができる。一部の実施形態では、一次ディスプレイは、システム１００が動作しているとき、二次ディスプレイとは異なる解像度を有する。一部の例では、ディスプレイ１２０は、単一のディスプレイ（例えば、第１のディスプレイ又は第２のディスプレイ）を含む。一部の例では、単一のディスプレイは、一次ディスプレイ及び二次ディスプレイなどの複数の他のディスプレイ（例えば、サブディスプレイ）を含む。対応する画像は、ユーザの各目に対して、単一のディスプレイの第１の領域及び第２の領域上に同時に表示される。任意選択で、対応する画像は、同じ仮想オブジェクト及び／又は異なる視点からの同じ物理的オブジェクトの表現を含み、結果として、単一のディスプレイ上のオブジェクトの深さの錯覚をユーザに提供する視差効果をもたらす。
【0047】
一部の例では、システム１００は、タップ入力及びスワイプ入力などのユーザ入力を受信するためのタッチ感知表面１２２を含む。一部の例では、ディスプレイ１２０及びタッチ感知表面１２２は、タッチ感知ディスプレイを形成する。
【0048】
システム１００は画像センサ１０８を含む。画像センサ１０８は、任意選択で、電荷結合素子（ＣＤＤ）センサ、及び／又は実環境から物理的オブジェクトの画像を取得するように動作可能な相補型金属－酸化物－半導体（ＣＭＯＳ）センサなどの１つ以上の可視光画像センサを含む。画像センサはまた、任意選択で、実環境からの赤外光を検出するための、パッシブＩＲセンサ又はアクティブＩＲセンサなどの１つ以上の赤外線（ＩＲ）センサを含む。例えば、アクティブＩＲセンサは、赤外光を実環境に放出するためのＩＲドットエミッタなどのＩＲエミッタを含む。画像センサ１０８はまた、任意選択で、実環境における物理的オブジェクトの動きをキャプチャするように構成された１つ以上のイベントカメラを含む。画像センサ１０８はまた、任意選択で、システム１００からの物理的オブジェクトの距離を検出するように構成された１つ以上の深度センサを含む。一部の例では、システム１００は、ＣＣＤセンサ、イベントカメラ、及び深度センサを組み合わせて使用して、システム１００の周囲の物理的環境を検出する。一部の例では、画像センサ１０８は、第１の画像センサ及び第２の画像センサを含む。第１の画像センサ及び第２の画像センサは、任意選択で、２つの異なる視点から実環境内の物理的オブジェクトの画像をキャプチャするように構成される。一部の例では、システム１００は、画像センサ１０８を使用して、手のジェスチャなどのユーザ入力を受信する。一部の例では、システム１００は、画像センサ１０８を使用して、実環境におけるシステム１００及び／又はディスプレイ１２０の位置及び向きを検出する。例えば、システム１００は、画像センサ１０８を使用して、実環境における１つ以上の固定オブジェクトに対するディスプレイ１２０の位置及び向きを追跡する。
【0049】
一部の例では、システム１００は、マイクロフォン１１２を含む。システム１００は、マイクロフォン１１２を使用して、ユーザ及び／又はユーザの実環境からの音を検出する。一部の例では、マイクロフォン１１２は、周囲ノイズを識別するために、又は実環境の空間内の音源を位置を特定するためになど、任意選択でタンデムで動作するマイクロフォンのアレイ（複数のマイクロフォンを含む）を含む。
【0050】
システム１００は、システム１００及び／又はディスプレイ１２０の向き及び／又は動きを検出するための向きセンサ１１０を含む。例えば、システム１００は、向きセンサ１１０を使用して、実環境内の物理的オブジェクトに対してなど、システム１００及び／又はディスプレイ１２０の位置及び／又は向きの変化を追跡する。向きセンサ１１０は、任意選択で、１つ以上のジャイロスコープ及び／又は１つ以上の加速度計を含む。
【0051】
図２Ａはデバイス２０２を示す。一部の実施形態では、デバイス２０２は、１つ以上数のプロセッサ（例えば、プロセッサ１０２）、メモリ（例えば、メモリ１０６）、カメラセンサ（例えば、画像センサ１０８）又は運動センサ（例えば、向きセンサ１１０）などのシステム１００の１つ以上の構成要素を含むことができる。例えば、デバイス２０２は、図１Ａに示されるシステム１００のデバイス１００ａの一実施形態であり得る。あるいは、一部の実施形態では、デバイス２０２は、図１Ｂに示される第２のデバイス１００ｃの一実施形態であり得る。
【0052】
図２Ａに示されるように、デバイス２０２は、第１のディスプレイ（例えば、デバイス２０２の左眼表示パネル）及び第２のディスプレイ（例えば、デバイス２０２の右眼表示パネル）を含むウェアラブルデバイスである。第１のディスプレイ及び第２のディスプレイはそれぞれ、二次ディスプレイ２０６によって囲まれている一次ディスプレイ２０４を含む。図２Ａに示されるように、二次ディスプレイ２０６は、一次ディスプレイ２０４の少なくとも一部を囲む。一部の実施形態では、二次ディスプレイ２０６は、第１又は第２のディスプレイ全体にわたって延びる。一部の実施形態では、一次ディスプレイ２０４は、二次ディスプレイ２０６の一部（例えば、中央）のみと重なる。
【0053】
一部の実施形態では、一次ディスプレイ２０４及び二次ディスプレイ２０６は、２つの異なるタイプのディスプレイである。一部の実施形態では、一次ディスプレイ２０４は、導波路ディスプレイである。一部の実施形態では、二次ディスプレイ２０６は、有機発光ダイオードディスプレイである。
【0054】
図２Ａにおいて、一次ディスプレイ２０４は、二次ディスプレイ２０６に物理的に結合（例えば、接続、取り付け）されているだけでなく、二次ディスプレイ２０６にも電子的に結合（例えば、接続、取り付け）されている。一部の実施形態では、一次ディスプレイ２０４と二次ディスプレイ２０６との間に１つ以上の領域又は追加のディスプレイを配置することができる。
【0055】
図２Ａにおいて、一次ディスプレイ２０４及び二次ディスプレイ２０６は、楕円形のディスプレイとして示されている。しかしながら、一次ディスプレイ２０４及び二次ディスプレイ２０６は、長方形の形状（例えば、長方形プリズム）などの様々な形状を有することができることを認識されたい。また、一部の実施形態では、一次ディスプレイ２０４の形状は、二次ディスプレイ２０６の形状とは異なっていてもよい。一部の実施形態では、一次ディスプレイ２０４及び／又は二次ディスプレイ２０６が長方形の形状である場合、デバイス２０２は、視覚効果（例えば、一次ディスプレイ及び／又は二次ディスプレイの角をぼかす、フェードさせる）を一次ディスプレイ２０４及び／又は二次ディスプレイ２０６に適用することができ、その結果、一次ディスプレイ２０４及び／又は二次ディスプレイ２０６は丸く見える。
【0056】
図２Ａに示されるように、エッジ２０８は、一次ディスプレイ２０４と二次ディスプレイ２０６との間に画定される。一部の実施形態では、エッジ２０８は透明及び／又は半透明である。一部の実施形態では、エッジ２０８は、一次ディスプレイ２０４のエッジ又は二次ディスプレイ２０６のエッジである。一部の実施形態では、エッジ２０８は、一次ディスプレイ２０４と二次ディスプレイ２０６との間の物理的境界である。
【0057】
一部の実施形態では、一次ディスプレイ２０４は、二次ディスプレイ２０６の最大潜在解像度よりも高い最大解像度で動作することができる。より高い解像度で動作できるディスプレイは、通常、より多くのエネルギーを必要とするため、デバイス２０２は、一次ディスプレイ２０４を介して仮想オブジェクト（又はＣＧＲオブジェクト）を表示する場合、二次ディスプレイ２０６を介して同じオブジェクトを表示する場合よりも、より多くのエネルギーを使用できる。したがって、デバイス２０２は、一次ディスプレイ２０４に１つ以上の仮想オブジェクトを表示する代わりに、二次ディスプレイ２０６に１つ以上の仮想オブジェクトを表示するという判定に基づいてバッテリ寿命を保持することができる。
【0058】
図２Ａに示されるように、デバイス２０２は、二次ディスプレイ２０６の周りに配置されたフレーム２１０を含む。フレーム２１０は、発光ダイオード（ＬＥＤ）などの三次ディスプレイを含む。あるいは、一部の実施形態では、フレーム２１０は、三次ディスプレイを含まない。
【0059】
以下に説明するように、一部の実施形態では、デバイス２０２は、１つ以上のＬＥＤを発光させる。一部の実施形態では、ＬＥＤは、ユーザの鼻の近くに位置する二次２０６の内部を取り囲んでいない。
【0060】
図２Ｂにおいて、デバイス２０２は、ユーザ２５０の鼻がデバイス２０２のブリッジ２１４の下に位置するように、ユーザ２５０によって装着されていると示されている。以下に説明するように、デバイス２０２は、ユーザ２５０がＣＧＲ環境を見ることを可能にする。
【0061】
図２Ｂは、物理的環境内に立っているユーザ２５０を示し、ユーザ２５０の目がユーザ２５０の瞳孔２１６が一次ディスプレイ２０４の一部と位置合わせされるような位置にある。それにより、図２Ｂにおいて、ユーザ２５０の中心視野又は視線は、一次ディスプレイ２０４の視野の一部と位置合わせされ、これは、一次ディスプレイ２０４に表示されたオブジェクトがユーザの中心視野に表示されることを示す。
【0062】
更に、図２Ｂは、二次ディスプレイ２０６の視野の一部と位置合わせされたユーザ２５０の周辺視野を示し、これは、二次ディスプレイ２０６に表示されたオブジェクトがユーザの周辺視野に表示されることを示す。以下に説明するように、一部の実施形態では、１つ以上のＬＥＤが発光しているとき、光は、ユーザ２５０の周辺視野の外部又はエッジに表示される。一部の実施形態では、デバイス２０２の１つ以上のセンサは、瞳孔２１６を含めて、ユーザの目の動きを追跡することができる。一部の実施形態では、デバイス２０２は、動きの追跡を使用して、以下に説明する１つ以上の技術を調整又は修正する。
【0063】
図３は、一部の実施形態による例示的な仮想オブジェクトを示す。特に、図３は、単色（例えば、黒、青）で陰影を付けられた鉛筆３０２として仮想オブジェクトを示す。鉛筆３０２は、異なる部分３０２ａ～３０２ｃを有する。
【0064】
図４は、鉛筆３０２の一部を表示するデバイス２０２を示す。特に、図４において、鉛筆３０２は、一次ディスプレイ２０４及び二次ディスプレイ２０６の視野外にある位置から落下していると示されている。具体的には、図４において、鉛筆３０２は、鉛筆３０２の部分３０２ａ及び３０２ｂが一次ディスプレイ２０４の視野内にあり、鉛筆３０２の部分３０２ｃが二次ディスプレイ２０６の視野内にあるが、図４において破線で示されている鉛筆３０２の部分が、一次ディスプレイ２０４及び二次ディスプレイ２０６の視野外にある位置にあると示されている。
【0065】
図４に示されるように、部分３０２ａ及び３０２ｂと比較すると、部分３０２ｃはぼかしている。ここで、部分３０２ｃのぼかしは、部分３０２ｃが図３で示されたよりも薄く陰影を付けられていることによって示される。対照的に、部分３０２ａ及び３０２ｂは、ぼかしをほとんど又は全く含まず、これは、部分３０２ａ～３０２ｂが、図３で示されたのと同じ色で陰影を付けられていることによって示される。部分３０２ｃは、部分３０２ｃが二次ディスプレイ２０６を介して表示されているため、部分３０２ａ及び３０２ｂよりも多くのぼかしを有し、二次ディスプレイは、部分３０２ａ～３０２ｂを表示している一次ディスプレイ２０４の最大解像度よりも低い最大解像度を有することができる。
【0066】
デバイス２０２がユーザによって装着されているとき、ユーザの中心視野と周辺視野との間のエッジは、通常、領域４０４の近くにある。図４に示されるように、領域４０４は、部分３０２ｂ及び３０２ｃのセクションを表示する一次ディスプレイ２０４及び二次ディスプレイ２０６の領域に対応する。
【0067】
３０２ｃの部分は、部分３０２ｂと比較してぼかしているため、領域４０４及び／又はユーザの中心視野と周辺視野との間のエッジにおいてハードクリッピングが発生する可能性がある。一部の実施形態では、ハードクリッピングは、あるディスプレイ上に表示されたオブジェクトの一部と別のディスプレイ上に表示されたオブジェクトの一部との間に視覚的歪みがある場合に発生する。以下で更に説明するように、ハードクリッピングは、オブジェクトがあるディスプレイから別のディスプレイに遷移するときに発生する可能性がある。
【0068】
一部の実施形態では、領域４０４におけるハードクリッピングは、意図しない視覚効果である。特に、ハードクリッピングは、デバイス２０２によって表示されるユーザインタフェースがデバイス２０２を装着しているユーザの気を散らす原因となる可能性がある。例えば、オブジェクトがユーザの中心視野に出入りするときに、ユーザインタフェースは、デバイス２０２を装着しているユーザの気を散らす可能性がある。
【0069】
図５は、一部の実施形態による、追加のディスプレイを有するデバイス上の例示的な領域を示す。以下で更に説明するように、ハードクリッピングは、デバイス上の１つ以上の例示的な領域の間で発生する可能性がある。一次ディスプレイ２０４の視野は通常、ユーザの中心視野にあり、二次ディスプレイ２０６の視野はユーザの周辺視野にあるため、一次ディスプレイ２０４と二次ディスプレイ２０６との間で遷移するオブジェクトのハードクリッピングを低減することにより、ユーザの中心及び／又は周辺視野内の高周波ノイズ（例えば、雪視症、オブジェクトのランダム及び／又は突然の変動、オブジェクト間の不規則な動き又は空間的関係））が低減される。高周波ノイズは、ユーザがユーザの周辺視野内のオブジェクトを不必要に見る原因となる可能性があるため、ユーザの中心及び／又は周辺視野内の高周波ノイズを低減することは有利である。したがって、高周波ノイズは、ユーザの中心視野内のオブジェクトに焦点を合わせるユーザの能力に影響を与える可能性があり、これは、ユーザの目の動きに基づいて追跡及び／又は正確な判定を行うデバイス２０２の能力に影響を与える可能性がある。
【0070】
図５は、一次ディスプレイ２０４の例示的な第１の領域５０４ａ及び例示的な第２の領域５０４ｂを有するデバイス２０２を示す。第１の領域５０４ａは、一次ディスプレイ２０４のエッジ２０８から、一次ディスプレイ２０４のエッジ２０８からの距離５１０ａまで、一次ディスプレイ２０４の領域にわたって延びる。一部の実施形態では、図４に示される領域４０４の少なくとも一部は、図５に示される第１の領域５０４ａの一部と重なる。一部の実施形態では、ユーザがデバイス２０２を装着しているとき、ユーザの中心及び周辺視野のエッジの少なくとも一部は、第１の領域５０４ａの一部にある。
【0071】
第２の領域５０４ｂは、一次ディスプレイ２０４の中央から、一次ディスプレイ２０４のエッジ２０８に向かう距離５１０ｂまで一次ディスプレイ２０４の領域にわたって延びる。一部の実施形態では、図４に示される領域４０４のいかなる部分も、図５に示される第１の領域５０４ｂの一部と重ならない。一部の実施形態では、ユーザがデバイス２０２を装着しているとき、ユーザの中心及び周辺視野のエッジのいかなる部分も、第１の領域５０４ａの一部に存在しない。
【0072】
一部の実施形態では、第１の領域５０４ａ及び／又は第２の領域５０４ｂは、図５によって示されていない一次ディスプレイ２０４の他の領域にわたって延びるか、又は、図５によって示されている領域にわたって延びていない。一部の実施形態では、第１の領域５０４ａ及び／又は第２の領域５０４ｂは、一次ディスプレイ２０４全体にわたって延びる。
【0073】
図６Ａ～図６Ｃ及び図７は、一部の実施形態による、仮想オブジェクトを表示するための例示的な技術を示す。特に、図６Ａ～図６Ｃ及び図７において、以下に説明する例示的な技術及びプロセスは、例えば、上記の図４に示されるように、異なる解像度を有するディスプレイ間（例えば、一次ディスプレイ２０４と二次ディスプレイ２０６との間）でオブジェクトが遷移する場合に、オブジェクトのハードクリッピング（例えば、オブジェクトがあるディスプレイから別のディスプレイに遷移するときの突然の変化）を低減することができる。上記のように、一次ディスプレイ２０４と二次ディスプレイ２０６との間で遷移するオブジェクトのハードクリッピングを低減することにより、ユーザの中心及び／又は周辺視野内の高周波ノイズが低減される。高周波ノイズは、ユーザの目の動きに基づいて追跡及び／又は正確な判定を行うデバイス２０２の能力に影響を与える可能性があるため、ユーザの中心及び／又は周辺視野内の高周波ノイズを低減することは有利である。
【0074】
図６Ａは、デバイス２０２及び鉛筆３０２を含む環境を示す。図６Ａにおいて、ユーザ２５０は、図２Ｂに関連して上述したように、デバイス２０２を装着している。しかしながら、説明を容易にするために、ユーザ２５０は図６Ａには示されていない。
【0075】
図６Ａは、一次ディスプレイ２０４及び二次ディスプレイ２０６の視野外にある位置から落下する鉛筆３０２を表示するデバイス２０２を示す。図６Ａ～６Ｃにおいて、破線で表される鉛筆３０２の部分は、ユーザがデバイス２０２を装着している間に一次ディスプレイ２０４及び／又は二次ディスプレイ２０６を通して見ても見えない３０２の部分に対応する。
【0076】
図６Ａに示されるように、鉛筆３０２は、一次ディスプレイ２０４及び二次ディスプレイ２０６の視野外にある位置から、二次ディスプレイ２０６の視野内にあり、一次ディスプレイ２０４の視野外にある位置に落下した。図６Ａにおいて、部分３０２ａは、二次ディスプレイ２０６を介して提示される。一部の実施形態では、デバイス２０２は、部分３０２ａの仮想表現を生成し、そして二次ディスプレイ２０６を介して仮想表現を表示する。
【0077】
図６Ａにおいて、デバイス２０２は、二次ディスプレイ２０６の最大解像度に対応する解像度で提示される部分３０２ａの仮想表現を表示する。図６Ａに示されるように、図３の部分３０２ａと比較すると、部分３０２ａはぼかしている（例えば、そのより薄い陰影で示される）。一部の実施形態では、図６Ａに表示される部分３０２ａの仮想表現は、ぼかしの変化を作り出すための視覚効果が適用されていない。
【0078】
図６Ａに示されるものに続くある期間、鉛筆３０２が落下し続けるにつれて、図６Ｂは、一次ディスプレイ２０４の特定の領域（例えば、以下の図５で説明される領域５０４ａ）内に落ちた部分３０２ａを示す。二次ディスプレイ２０６を介して鉛筆３０２を表示している間（例えば、二次ディスプレイ２０６の視野内で）、鉛筆３０２は、図６Ｂに示されるように、一次ディスプレイ２０４のエッジ２０８から距離５１０ａ以内の位置に落下した（例えば、一次ディスプレイ２０４内に移動している）と判定される。この判定に基づいて、デバイス２０２は、図６Ｂに示されるように、鉛筆３０２の部分３０２ａに視覚効果を適用することによって仮想表現を生成し、そして仮想表現を一次ディスプレイ２０４に表示する。
【0079】
ここで、部分３０２ａに対応する仮想表現は、部分３０２ａに視覚効果を適用することによってぼかされる。図６Ｂに示されるように、視覚効果を適用すると、部分３０２ａは（例えば、示されるような明るい色から暗い色への）勾配として表示され、ユーザの中心及び周辺視野（及び／又は図４で説明された領域４０４）のエッジにおいてより滑らかな遷移が提供される。一部の実施形態では、視覚効果を部分３０２ａに適用した後、部分３０２ａに対応する仮想表現はフェードされる。一部の実施形態では、仮想表現は、視覚効果を部分３０２ａに適用した後、二次ディスプレイ２０６の検出されたぼかし量（又は二次ディスプレイ２０６の少なくとも１つの領域のぼかし量）に反比例してフェードされる。一部の実施形態では、仮想表現は、視覚効果を部分３０２ａに適用した後の勾配を含まない。他の実施形態では、視覚効果を適用することは、部分３０２ａにぼかし機能を適用することを含む。一部の実施形態では、エッジ２０８で部分３０２ａに適用されるぼかし量は、二次ディスプレイ２０６のぼかしに一致するように選択することができる。そうすることで、エッジ２０８の両側における仮想オブジェクト３０２の外観は、同一又は類似している可能性があり、それによって上述したハードクリッピング効果が低減される。部分５０４ａ内の部分３０２ａ（又は他の仮想コンテンツ）に適用されるぼかし量は、エッジ２０８からの距離に基づいて減少させることができ、エッジ２０８からの距離Ｄ１にはぼかしが適用されない。ぼかしは、エッジ２０８からの距離に応じて線形又は非線形に減少させることができる。
【0080】
図６Ｂに示されるように、部分３０２ｂは、二次ディスプレイ２０６の視野内にも移動した。したがって、部分３０２ａに対応する仮想表現を一次ディスプレイ２０４に表示することに加えて、デバイス２０２はまた、鉛筆３０２の部分３０２ｂに対応する仮想表現を表示する。一部の実施形態では、デバイス２０２は、図６Ａにおいて部分３０２ａに対応する仮想表現を表示することに関して上述した技術を用いて、部分３０２ｂに対応する仮想表現を表示する。
【0081】
特に、図６Ｂに示されるように、部分３０２ａ及び３０２ｂに対応する仮想表現はぼかしており、このぼかしは、鉛筆３０２のそれぞれの部分に対応するそれぞれの仮想表現の陰影の違いによって表される。図６Ｂにおいて、部分３０２ｂに対応する仮想表現は、部分３０２ａに対応する仮想表現よりも多くのぼかしを有する。
【0082】
図６Ｂにおいて、部分３０２ｂに対応する仮想表現は、一次ディスプレイ２０４よりもぼかした低解像度ディスプレイである二次ディスプレイ２０６を介して表示されるため、ぼかしている。一方、デバイス２０２が、一次ディスプレイ２０４を介して部分３０２ａに対応する仮想表現を表示する前に部分３０２ａに視覚効果を適用したため、部分３０２ａに対応する仮想表現はぼかしている。したがって、視覚効果が適用された部分３０２ａに対応する仮想表現は、視覚効果が適用されていない部分３０２ａに対応する仮想表現よりも、部分３０２ｂに対応する仮想表現により類似している（例えば、より近いぼかし値を有する）。
【0083】
一部の実施形態では、デバイス２０２は、部分３０２ａの仮想表現が、二次ディスプレイ２０６に表示される部分３０２ｂに対応する仮想表現と視覚的に一致するように見えるように（例えば、部分３０２ｂに視覚効果が適用されていない場合）、部分３０２ａに視覚効果を適用する。二次ディスプレイ２０６は一次ディスプレイ２０４よりも低い解像度を有するため、デバイス２０２は、視覚効果を部分３０２ａに適用して、部分３０２ａに対応する仮想表現の視覚的外観を部分３０２ｂに対応する仮想表現の視覚的外観と一致させる。
【0084】
一部の実施形態では、デバイス２０２は、視覚効果を部分３０２に適用して、より低い解像度を有するディスプレイ（例えば、二次ディスプレイ）を介して図６Ａの部分３０２ａに対応する仮想表現を表示することから、より高い解像度を有するディスプレイ（例えば、一次ディスプレイ２０４）を介して、図６Ｂの部分３０２ａに対応する仮想表現を表示することへの遷移を滑らかにする。
【0085】
図６Ｃに示されるように、鉛筆３０２は、一次ディスプレイ２０４及び二次ディスプレイ２０６の視野内にある新しい位置に落下した。図６Ｃに示されるように、部分３０２ａは、距離５１０ａの外側にある一次ディスプレイ２０４のエッジ２０８からの距離（例えば、距離５１０ａと距離５１０ｂの合計である距離）である。部分３０２ａは、一次ディスプレイ２０４のエッジ２０８から距離５１０ａの外側にあるため、部分３０２ａは、一次ディスプレイ２０４の第１の領域の外側にある一次ディスプレイ２０４の第２の領域（例えば、図５の領域５０４ｂ）に入った。したがって、第２の領域５０４ｂ（図５に示される）にある部分３０２ａの仮想表現には視覚効果は適用されない。一部の実施形態では、視覚効果（又は第１の領域に適用された視覚効果とは異なる視覚効果）は、一次ディスプレイ２０４の第２の領域５０４ｂ内の仮想オブジェクトの部分の表現に適用されない。一部の実施形態では、部分３０２ａがユーザの中心視野内にあり、デバイス２０２が、視覚効果が適用されていない仮想オブジェクト（例えば、又は特定の視覚オブジェクト）によってユーザが気が散る可能性が高いと判断したため、視覚効果は適用されない。図６Ｃに示されるように、デバイス２０２は、図６Ａの部分３０２ａの仮想表現の表示に関して上述した技術を使用して、二次ディスプレイ２０６の視野内にある鉛筆３０２の新しい部分である部分３０２ｃの仮想表現を表示する。更に、図６Ｃにおいて、デバイス２０２は、部分３０２ｂが一次ディスプレイ２０４のエッジ２０８から距離５１０ａ内にあるため、視覚効果が適用された部分３０２ｂの仮想表現を表示する（例えば、図６Ｃの部分３０２ａに関して上述したものと同様の技術を使用する）。
【0086】
一部の実施形態では、オブジェクト（例えば、鉛筆３０２）全体が一次ディスプレイの視野内にある場合（例えば、オブジェクトのいかなる部分も二次ディスプレイの視野内にない）、図５に関して上述した第２の領域５０４ｂに表示された仮想オブジェクトの表現の一部を含めて、仮想オブジェクトの表現のいかなる部分にも視覚効果は適用されない。
【0087】
一部の実施形態では、デバイス２０２は、異なる仮想オブジェクトを異なるように表示することを判定することができる。一部の実施形態では、デバイス２０２は、視覚効果を１つの仮想オブジェクトに適用する一方で、別の仮想オブジェクトに視覚効果を適用しないことができる。一部の実施形態では、デバイス２０２は、仮想オブジェクトに異なる視覚効果を適用することができる。一部の実施形態では、デバイス２０２は、異なる判定を使用して、視覚効果を仮想オブジェクトの異なるセットに適用する。一部の実施形態では、デバイス２０２は、仮想オブジェクトがディスプレイの領域に入ったという判定に基づいて１つのタイプの仮想オブジェクトに視覚効果を適用することができるが、別のタイプの仮想オブジェクトが領域に入ったという判定に基づいて、別のタイプの仮想オブジェクトに視覚効果を適用することを放棄することができる。
【0088】
一部の実施形態では、図６Ａ～図６Ｃに記載されている動作は、逆に記載することができる（例えば、図６Ｃ～図６Ａ）。例えば、仮想オブジェクトは、上述したものと同様の技術を使用して、一次ディスプレイ２０４及び／又は二次ディスプレイ２０６の視野内にあることから、一次ディスプレイ２０４及び二次ディスプレイ２０６の視野外にあることへと遷移することができる。
【0089】
図７は、一部の実施形態による、仮想オブジェクトを表示する方法７００を示す流れ図である。一部の実施形態では、この方法は、システム１００（図１Ａ及び図１Ｂ）によって実行される。一部の実施形態では、この方法は、デバイス２０２（図２Ａ）によって実行される。一部の実施形態では、この方法は、デバイス２０２又はシステム１００とは異なる第３のデバイス又はシステムによって実行される。一部の実施形態では、この方法は、システム１００、デバイス２０２、及び第３のデバイス又はシステムのうちの１つ以上の組み合わせによって実行される。
【0090】
ブロック７０２において、仮想オブジェクトの第１の部分は、二次ディスプレイを介して表示される。例えば、図６Ｃを参照して上述したように、仮想オブジェクト３０２の第１の部分３０２ｃは、二次ディスプレイ２０６を介して表示される。一部の実施形態では、第１の時点で、一次ディスプレイ（例えば、一次ディスプレイ２０４）上に仮想オブジェクトを表示することなく、仮想オブジェクトは、二次ディスプレイ（例えば、二次ディスプレイ２０６）上に提示される。一部の実施形態では、仮想オブジェクトが二次ディスプレイ上に提示されるが、仮想オブジェクトが一次ディスプレイに提示されていない場合、仮想オブジェクトは二次ディスプレイの視野内にあり、仮想オブジェクトは一次ディスプレイの視野内にない。
【0091】
図７を参照すると、ブロック７０４において、仮想オブジェクトの第２の部分は一次ディスプレイを介して表示される。例えば、図６Ｃを参照して上述したように、仮想オブジェクト３０２の第２の部分３０２ｂは、一次ディスプレイ２０４を介して表示される。一部の実施形態では、デバイスが仮想オブジェクトから所定の距離内に移動したときに、仮想オブジェクトの第２の部分は、一次ディスプレイを介して表示される。一部の実施形態では、仮想オブジェクトが一次ディスプレイのエッジから所定の距離内に、又は一次ディスプレイの視野（例えば、視野のエッジ）から所定の距離内に移動するとき、仮想オブジェクトの第２の部分は一次ディスプレイを介して表示される。
【0092】
図７を参照すると、仮想オブジェクトの第２の部分を表示する（ブロック７０４）ことの一部として、ブロック７０６において、仮想オブジェクトの第２の部分が一次ディスプレイのエッジから所定の距離内にあるという判定に従って、視覚効果が仮想オブジェクトの第２の部分に適用される。例えば、図６Ｃを参照して上述したように、仮想オブジェクト３０２の第２の部分３０２ｂを表示することの一部として、第２の部分３０２ｂが一次ディスプレイ２０４のエッジから所定の距離５１０ａ内にあるという判定に従って、視覚効果が仮想オブジェクト３０２の第２の部分３０２ｂに適用される。
【0093】
一部の実施形態では、１つ以上の仮想オブジェクトの部分が一次ディスプレイの第１の領域にある間に、視覚効果は１つ以上の仮想オブジェクトの部分に適用される。例えば、図６Ｃに関連して上述したように、第２の部分３０２ｂは、図５に示されている領域５０４ａに表示されている間に視覚効果が適用される。一部の実施形態では、領域５０４ａは、二次ディスプレイのエッジに隣接する一次ディスプレイのエッジから所定の距離内にある。
【0094】
一部の実施形態では、適用される視覚効果の量は、特定の領域内の２つ以上の仮想オブジェクトに対して同じであり得る。あるいは、一部の実施形態では、特定の仮想オブジェクトに適用される視覚効果の量は動的である。例えば、適用される視覚効果の量は、デバイスを装着しているユーザに関連する１つ以上の検出された特性に基づくか、又は１つ以上のユーザ設定に基づくことができる。一部の実施形態では、ユーザ特性は、異なる時点でのユーザの瞳孔サイズ、瞳孔方向、瞳孔位置、眼球優位性、まばたき速度などを含み得る。
【0095】
一部の実施形態では、適用される視覚効果の量は、仮想オブジェクトの１つ以上の特性に依存する。例えば、一部の実施形態では、適用される視覚効果の量は、仮想オブジェクトのサイズ、動き（例えば、速度、加速度）、色などに依存する。一部の実施形態では、適用される視覚効果の量は、より低い速度で移動している仮想オブジェクトに対してはより少なく、より速い速度で移動している仮想オブジェクトに対してはより多い。
【0096】
一部の実施形態では、適用される視覚効果の量は、デバイスの速度又は加速度など、デバイスの１つ以上の特性に依存する。一部の実施形態では、適用される視覚効果の量は、デバイスがより低い速度で移動しているときはより少なく、デバイスがより速い速度で移動しているときはより多い。
【0097】
一部の実施形態では、視覚効果は、仮想オブジェクトが一次ディスプレイのある領域に表示されるときにその一部に適用されるが、視覚効果は、一次ディスプレイの別の領域に表示される仮想オブジェクトの別の部分には適用されない。例えば、図６Ｃに関連して上述したように、部分３０２ａは、図５に示される領域５０４ｂに表示されている間、視覚効果が適用されない。
【0098】
一部の実施形態では、仮想オブジェクトの第２の部分に視覚効果を適用することは、仮想オブジェクトの第２の部分をぼかすことを含む。一部の実施形態では、仮想オブジェクトの第２の部分に視覚効果を適用する前に、仮想オブジェクトの第２の部分は、既に第１のぼかした外観を含む視覚的外観を有する。一部の実施形態では、仮想オブジェクトの第２の部分に視覚効果を適用した後、仮想オブジェクトの第２の部分は、第１のぼかした外観とは異なる（例えば、よりぼかした）第２のぼかした外観を含む後続の視覚的外観を有する。
【0099】
一部の実施形態では、仮想オブジェクトの第２の部分は、１つ以上の画像センサを介して検出された、一次及び／又は二次ディスプレイの一部と位置合わせされた瞳孔の特性に基づいてぼかされる。一部の実施形態では、仮想オブジェクトの一部は、検出された瞳孔の１つ以上の特性に応じてぼかされるか、又はフェードされるが、仮想オブジェクトの別の部分はそうではない。一部の実施形態では、仮想オブジェクトの一部のぼかし又はフェードは、検出された瞳孔が一次ディスプレイのエッジから更に離れているときに増加する。
【0100】
一部の実施形態では、仮想オブジェクトの第２の部分をぼかした後、仮想オブジェクトの第２の部分は、仮想オブジェクトの第１の部分のぼかし量に基づくぼかし量を含む。一部の実施形態では、ぼかし量（例えば、仮想オブジェクトの部分の）は、仮想オブジェクトの第１の部分のぼかしと一致する。一部の実施形態では、仮想オブジェクトの第２の部分をぼかすことの一部として、仮想オブジェクトの第２の部分のぼかし量は、仮想オブジェクトと二次ディスプレイとの間の対応する距離に基づいて（例えば、オブジェクトとデバイス２０２との間の距離が変化するにつれて連続的に）変化する。
【0101】
一部の実施形態では、視覚効果を仮想オブジェクトの第２の部分に適用することの一部として、仮想オブジェクトの第２の部分はフェード（例えば、フェードイン又はフェードアウト）される。一部の実施形態では、仮想オブジェクトの第２の部分をフェードさせることは、第２の領域に隣接する一次ディスプレイ及び／又は仮想オブジェクトのエッジをフェザリングすることを含む。
【0102】
一部の実施形態では、仮想オブジェクトの第２の部分に視覚効果を適用する前に、仮想オブジェクトの第２の部分は既に、第１のフェードされた外観を含む視覚的外観を有する。一部の実施形態では、仮想オブジェクトの第２の部分に視覚効果を適用した後、仮想オブジェクトの第２の部分は、第１のフェードされた外観とは異なる（例えば、よりフェードされた）第２のフェードされた外観を含む後続の視覚的外観を有する。
【0103】
一部の実施形態では、仮想オブジェクトの第２の部分は、二次ディスプレイ（例えば、ディスプレイ２０６）（例えば、二次ディスプレイの少なくとも１つの領域）のぼかしに比例してフェードされる。一部の実施形態では、仮想オブジェクトの第２の部分は、二次ディスプレイのぼかしに反比例するレベルまでフェードアウトされる。
【0104】
一部の実施形態では、仮想オブジェクトの第２の部分は、第１の色から第２の色にフェードされる。一部の実施形態では、仮想オブジェクトの第２の部分に勾配が適用されるように、仮想オブジェクトの第２の部分はフェードされる。一部の実施形態では、勾配が仮想オブジェクトの第２の部分に適用される場合、仮想オブジェクトの第２の部分は、勾配（例えば、第１の色から第２の色に遷移する勾配）を含む。
【0105】
一部の実施形態では、視覚効果を仮想オブジェクトの第２の部分に適用することの一部として、仮想オブジェクトの第２の部分の角は丸められる。一部の実施形態では、一次ディスプレイと二次ディスプレイ（及び／又は第１の領域）との間のエッジは、丸められるか、又は丸められて表示されるように修正される。一部の実施形態では、角は、フェードされるか、又は特定の視覚効果が適用される（例えば、角をフェードさせる視覚効果は角に適用されるが、仮想オブジェクトの第２の部分の他の部分はフェードされないか、又は特定の視覚効果が適用されない）。一部の実施形態では、角がフェードされると、角に勾配が適用される。
【0106】
再び図７を参照すると、第２の部分を表示する（ブロック７０４）ことの一部として、仮想オブジェクトの第２の部分が一次ディスプレイのエッジから所定の距離内にないという判定に従って、仮想オブジェクトの第２の部分に視覚効果を適用することは放棄される。例えば、一次ディスプレイ２０４を介して仮想オブジェクト３０２の第２の部分３０２ｃを表示することについて図６Ｃを参照して上述したように、仮想オブジェクト３０２の第２の部分３０２ｃが一次ディスプレイ２０４のエッジから所定の距離５１０ａ内にないという判定に従って、仮想オブジェクト３０２の第２の部分３０２ｃに視覚効果を適用することは放棄される。
【0107】
図８Ａ～図８Ｂ、図９Ａ～図９Ｂ、図１０Ａ～図１０Ｂ、図１１Ａ～図１１Ｂ、図１２Ａ～図１２Ｂ、図１３Ａ～図１３Ｂ、及び図１４Ａ～図１４Ｂは、一部の実施形態による、ディスプレイ間でオブジェクトを遷移させるための例示的な技術を示す。他の利点の中でも、以下に説明する技術及びプロセスは、デバイス２０２が情報を提示する（例えば、図２Ｂのユーザ２５０に情報を提示する）能力を最大化し続けながら、デバイス２０２のバッテリ寿命を節約するのに役立つ。デバイス２０２は、情報の提示を一次ディスプレイ２０４から二次ディスプレイ２０６及び三次ディスプレイ（例えば、フレーム２１０の周りのＬＥＤ）のうちの１つ以上にインテリジェントにシフトすることによって、バッテリ寿命を節約する。二次ディスプレイ２０６及び三次ディスプレイが一次ディスプレイ２０４の解像度よりも低い最大解像度を有することができるため、情報をシフトすることによって、バッテリ寿命が維持される。したがって、二次ディスプレイ２０６及び三次ディスプレイは、情報を表示するために一次ディスプレイ２０４よりも少ないエネルギーを使用することができる。
【0108】
以下に説明するように、図８Ａ、９Ａ、１０Ａ、１１Ａ、１２Ａ、１３Ａ、及び１４Ａは、ユーザ２５０がデバイス２０２を装着している間にオブジェクト８０６と対話する例示的なシナリオを示す。しかしながら、この特定のシナリオは、例示的な目的のためにのみ提供される。以下に説明する技術又は同様の技術は、様々な他のシナリオにも効果的に適用することができる。
【0109】
上記のように、図８Ａは、ユーザ２５０がデバイス２０２を装着しているシナリオを示す。このシナリオでは、デバイス２０２は、一組のキーのようなオブジェクト８０６から距離８０４ａ離れて配置される。一部の実施形態では、オブジェクト８０６は、ユーザ２５０がいる物理的環境内に位置する物理的物品又は物理的オブジェクトである。一部の実施形態では、オブジェクト８０６は、デバイス２０２を介してユーザ２５０に表示されているＣＧＲ環境内に位置する仮想オブジェクトである。
【0110】
一部の実施形態では、オブジェクト８０６は、ユーザ２５０及び／又はデバイス２０２が静止しているか、又は代替的に非静止である間に移動する。
【0111】
一部の実施形態では、環境は、オブジェクト８０６以外の１つ以上のオブジェクトを含む。一部の実施形態では、デバイス２０２は、オブジェクト８０６が図８Ａに示される環境にあることを検出する。一部の実施形態では、デバイス２０２は、オブジェクトが有用又は重要なオブジェクト（例えば、環境内の他のオブジェクトよりも有用又は重要である）であると判定する。一部の実施形態では、デバイス２０２は、１つ以上のアルゴリズム及び／又は１つ以上のユーザ選好を使用して、オブジェクトがユーザ又は特定のオブジェクトに対応するアプリケーション（例えば、デバイス２０２と通信するアプリケーション）にとって有用又は重要であるか否かを判定することができる。一部の実施形態では、デバイス２０２は、オブジェクトに関する要求又は通知を受信し、そして要求又は通知に基づいて、オブジェクトが有用又は重要であるか否かに基づいてこの判定を行う。
【0112】
図８Ｂは、図８Ａに示されるシナリオに対応する時点でのデバイス２０２を示す。デバイス２０２は、（上記の図２Ａに記載された１つ以上の構成要素に加えて）一次ディスプレイ２０４及び二次ディスプレイ２０６を含む。図８Ｂにおいて、一次ディスプレイ２０４及び二次ディスプレイ２０６は、デバイス２０２（方向情報）に対するオブジェクト８０６の位置に対応する方向情報に関連する視覚情報を表示（又は提示）していない。一部の実施形態では、デバイス２０２がオブジェクト８０６から遠すぎる（又は距離８０４ａが所定の閾値距離を超える）ため、少なくとも一部の視覚情報は、一次ディスプレイ２０４及び／又は二次ディスプレイ２０６を介して表示されない。
【0113】
図８Ｂに示されるように、デバイス２０２は、ＬＥＤ８１０ａ～８１０ｆ及び８１２ａ～８１２ｆ（ＬＥＤ）を更に含む。図８Ｂにおいて、ＬＥＤは発光していない（例えば、方向情報を示すために発光している）。一部の実施形態では、デバイス２０２がオブジェクト８０６から遠すぎる（又は距離８０４ａが所定の閾値距離を超える）ため、１つ以上のＬＥＤは発光していない。
【0114】
【0115】
図９Ｂは、図９Ａに示されるシナリオに対応する時点でのデバイス２０２を示す。図９Ａ及び図９Ｂを参照して、デバイス２０２がオブジェクト８０６から距離８０４ｂ離れているとき、デバイス２０２が方向情報を受信すると仮定する。方向情報の受信に応じて、デバイス２０２は、オブジェクト８０６が、方向情報が１つ以上のＬＥＤを介して表示され得る（例えば、そのように構成され、そのように判定される）タイプのオブジェクトであると判定する。一部の実施形態では、デバイス２０２が、オブジェクト８０６から距離８０４ｂ離れている（又は距離８０４ｂが所定の閾値距離（例えば、方向情報を表示するための最大距離に対応する閾値距離）未満であるため、デバイス２０２はこの判定を行う。
【0116】
図９Ｂに示されるように、デバイス２０２がオブジェクト８０６から距離８０４ｂ離れている（又は、そのオブジェクト８０６が、方向情報が１つ以上のＬＥＤを介して表示され得るタイプのオブジェクトである）ため、デバイス２０２は、方向情報を示すために、ＬＥＤ８１２ａ～８１２ｆをあるパターンで発光させる。図９Ｂに示されるように、ＬＥＤ８１２ａ～８１２ｆは、デバイス２０２のフレーム２１０上に配置されるように、下向きよりも上向きの方向でデバイス２０２の右側にある。したがって、ＬＥＤ８１２ａ～８１２ｆは、オブジェクト８０６がデバイス２０２の前及び右にあることを示し、これは、図９Ａにおけるデバイス２０２とオブジェクト８０６との間の経路の一般的な方向と一致する。
【0117】
図９Ｂにおいて、ＬＥＤ８１２ａ及び８１２ｆはハッチングされており、一方、ＬＥＤ８１２ｂ～８１２ｅは、光の勾配場を示すために実線である。ここで、光の勾配場は、方向性プルの弱い点（例えば、ハッチングされたＬＥＤ８１２ａ、８１２ｆ）から、オブジェクト８０６とデバイス２０２との間の方向性情報の方向性プルの強い点（例えば、実線のＬＥＤ８１２ｂ～８１２ｅ）を示すことができる。特に、勾配場は、より多くの方向情報をユーザに提供することができ、これは、ユーザがオブジェクト８０６に向かってより効率的にナビゲートするのを助けることができる。
【0118】
一部の実施形態では、方向情報は、所定の閾値距離以上の距離（例えば、距離８０４ｂ以上の距離）で、一次ディスプレイ２０４及び／又は二次ディスプレイ２０６ではなく、ＬＥＤを介して表示される。一部の実施形態では、一次ディスプレイ２０４及び／又は二次ディスプレイ２０６の代わりにＬＥＤを介して方向情報を表示することはバッテリ電力を保持するため、方向情報は一次ディスプレイ２０４及び／又は二次ディスプレイ２０６ではなく、ＬＥＤを介して表示される。
【0119】
一部の実施形態では、方向情報は、デバイス２０２がオブジェクト８０６から特定の距離離れているときに、表示することが許可されている情報のタイプに基づいて、一次ディスプレイ２０４及び／又は二次ディスプレイ２０６ではなく、ＬＥＤを介して表示される。一部の実施形態では、デバイス２０２は、デバイス２０２がオブジェクト８０６から更に離れている（又はオブジェクトから第１のセットの距離内にある）ときに、オブジェクトの外観（例えば、点滅するＬＥＤ）に基づかない方向情報を表示する。一部の実施形態では、デバイス２０２は、デバイス２０２がオブジェクトにより近いときに（又は、オブジェクトから第１のセットの距離とは異なる第２のセットの距離内にあるとき）、オブジェクトの外観（例えば、一次ディスプレイ２０４及び／又は二次ディスプレイ２０６を介して表示されるオブジェクト又はプロキシオブジェクトの視覚的表現）に基づく方向情報を表示する。一部の実施形態では、デバイス２０２は、オブジェクトの外観に基づく方向情報と、オブジェクトの外観に基づかない方向情報とを表示することができる（例えば、デバイス２０２が、オブジェクトから第１のセットの距離と第２のセットの距離との間にある、オブジェクトから第３のセットの距離内にあるとき。一部の実施形態では、方向情報は、オブジェクトが一次ディスプレイ２０４及び／又は二次ディスプレイ２０６のＦＯＶ内にあるか否かに基づいて、一次ディスプレイ２０４及び／又は二次ディスプレイ２０６ではなく、ＬＥＤを介して表示される。一部の実施形態では、方向情報は、オブジェクトが一次ディスプレイ２０４及び／又は二次ディスプレイ２０６のＦＯＶの外側の特定の距離にあるとき、一次ディスプレイ２０４及び／又は二次ディスプレイ２０６ではなく、ＬＥＤを介して表示される。
【0120】
図１０Ａは、図９Ａの位置から図１０Ａの位置に移動したオブジェクト８０６及び／又はデバイス２０２を示す。特に、図１０Ａにおいて、デバイス２０２は、オブジェクト８０６から距離８０４ｃに配置され、ここで、距離８０４ｃは、図９Ａの距離８０４ｂとは異なる。
【0121】
図１０Ｂは、図１０Ａに示されるシナリオに対応する時点でのデバイス２０２を示す。図１０Ａ及び図１０Ｂを参照して、デバイス２０２が方向情報を受信すると仮定する。方向情報の受信に応じて、図９Ａ及び図９Ｂに関して上述したものと同様の技術を使用して、デバイス２０２は、オブジェクト８０６が、方向情報がＬＥＤを介して表示され得るタイプのオブジェクトであると判定する（例えば、デバイス２０２がオブジェクト８０６から距離８０４ｃ離れているため）。次に、この判定に基づいて、デバイス２０２は、ＬＥＤ８１２ｄ～８１２ｆに方向情報に対応する光を放出させ、ＬＥＤ８１２ａ～８１２ｃに発光を停止させる。ここで、デバイス２０２の更新されたＬＥＤは、新たに受信された方向情報を示す（例えば、下にあるオブジェクト８０６の位置及びデバイス２０２の位置の左側への相対経路の方向情報を示す）。
【0122】
図１０Ｂに示されるように、デバイス２０２は、図９Ｂで発光していたＬＥＤの数から、発光するＬＥＤの数を減らす。一部の実施形態では、デバイス２０２が図９Ｂの場合よりもオブジェクト８０６に近い場合（例えば、一部の実施形態では、ユーザ２５０がオブジェクトにより近い場合、より少ないＬＥＤがより良い方向情報を提供することができる）。一部の実施形態では、デバイス２０２とオブジェクト８０６との間に物理的及び／又は仮想構造又はオブジェクトが存在する場合、デバイス２０２は、ユーザ２５０がデバイス２０２とオブジェクト８０６との間の物理的及び／又は仮想構造又はオブジェクトの周囲をナビゲートできるように、デバイス２０２の複数のＬＥＤ（及び／又は一次ディスプレイ２０４及び／又は二次ディスプレイ２０６）を連続して更新する（例えば、あるパターンで発光するＬＥＤ）。
【0123】
図１１Ａは、図１０Ａの位置から図１１Ａの位置に移動したオブジェクト８０６及び／又はデバイス２０２を示す。特に、図１１Ａにおいて、デバイス２０２は、オブジェクト８０６から距離８０４ｄに配置され、ここで、距離８０４ｄは、図１０Ａの距離８０４ｃとは異なる。
【0124】
図１１Ｂは、図１１Ａに示されるシナリオに対応する時点でのデバイス２０２を示す。図１１Ａ及び図１１Ｂを参照して、デバイス２０２が（図１０Ｂにおける、オブジェクトト８０６から距離８０４ｃ離れたデバイス２０２とは対照的に）オブジェクト８０６からの距離８０４ｄにおいてより近い（例えば、所定の閾値距離のセット内にある）ため、デバイス２０２がＬＥＤだけでなく二次ディスプレイ２０６も更新すると仮定する。一部の実施形態では、オブジェクト８０６が二次ディスプレイ２０６のＦＯＶ内にあるため、デバイス２０２は、ＬＥＤだけでなく二次ディスプレイ２０６も更新する。
【0125】
また、デバイス２０２が方向情報を受信すると仮定する。方向情報の受信に応じて、図９Ａ及び図９Ｂに関して上述したものと同様の技術を使用して、デバイス２０２は、オブジェクト８０６が、方向情報がＬＥＤ８１２ｅを介して表示され得るタイプのオブジェクトであると判定する（例えば、デバイス２０２がオブジェクト８０６から距離８０４ｄ離れているため）。この判定に基づいて、デバイス２０２は、図９Ｂ及び図１０Ｂに関連して上述した１つ以上の技術を使用して、ＬＥＤ８１２ｅに方向情報に対応する光を放出させ、ＬＥＤ８１２ｄ及び８１２ｆに発光を停止させる。
【0126】
デバイス２０２が、オブジェクト８０６が、方向情報が二次ディスプレイ２０６を介して表示され得るタイプのオブジェクトであると判定した場合、デバイス２０２は、二次ディスプレイ２０６を介して方向情報を表示する。ここで、デバイス２０２は、オブジェクト８０６から距離８０４ｄ離れているため、この判定を行う。
【0127】
一部の実施形態では、デバイス２０２は、オブジェクト８０６から距離８０４ｄ離れており、及び／又はオブジェクト８０６は、一次ディスプレイ２０４の視野外の所定の閾値距離内にあるため、デバイス２０２は、二次ディスプレイ２０６に、オブジェクト８０６の修正された表現８２６ａを表示させる。ここで、修正された表現８２６ａは、プロキシオブジェクトの表現又はオブジェクト８０６の記号表現であり、オブジェクト８０６と視覚的に区別可能である。図１１Ｂに示されるように、修正された表現８２６ａは、二次ディスプレイ２０６のエッジにある複数のピクセルのブロブである。
【0128】
一部の実施形態では、デバイス２０２がオブジェクト８０６から距離８０４ｄ離れているとき、オブジェクト８０６は、二次ディスプレイ２０６の視野内にある。一部の実施形態では、オブジェクト８０６は、修正された表現８２６ａが表示される二次ディスプレイ２０６上の位置に対応する二次ディスプレイ２０６の視野内の位置にある。
【0129】
一部の実施形態では、デバイス２０２がオブジェクト８０６から距離８０４ｄ離れているとき、オブジェクト８０６は、二次ディスプレイ２０６の視野外にある。したがって、一部の実施形態では、オブジェクト８０６が二次ディスプレイ２０６の視野外にあるときに、デバイス２０２は、二次ディスプレイ２０６を介して修正された表現８２６ａを表示する。一部の実施形態では、オブジェクト８０６が二次ディスプレイ２０６の視野外にあるときに二次ディスプレイ２０６上の対応する位置に修正された表現８２６ａを表示することは、デバイス２０２のディスプレイの視野外にあるオブジェクトを位置特定ための方向情報を提供する。
【0130】
図１１Ｂにおいて、修正された表現８２６ａは、オブジェクト８０６の実際の表現に類似していない。一部の実施形態では、修正された表現８２６ａは、オブジェクト８０６のサイズ、形状、色、テクスチャ、ぼかしなどの２つ以上の特徴を有さないため、オブジェクト８０６に類似していない。
【0131】
修正された表現８２６ａは、オブジェクト（例えば、図８Ａに関連して上述したような有用又は重要であるオブジェクト）が、ユーザの周辺視野（例えば、二次ディスプレイ２０６を介して提示又は表示される視覚情報を受信するユーザの周辺視野）内又は外にあることを示す。修正された表現８２６ａはまた、デバイス２０２の位置に対するオブジェクトの位置の一般的な方向を示すことができる。一部の実施形態では、一般的な方向は、修正されたオブジェクト表現８２６ａを二次ディスプレイ２０６上の特定の位置に配置することによって示される。
【0132】
一部の実施形態では、修正された表現８２６ａは静的（例えば、移動しない、脈動しない、アニメーション化しない）であるが、１つ以上のＬＥＤから発する光は静的ではない（例えば、移動する、脈動する、アニメーション化する）、又はその逆である。一部の実施形態では、修正された表現８２６ａ及びＬＥＤ８１２ａ～８１２ｌは両方とも静的である（例えば、又は静的ではない）。
【0133】
図１２Ａは、図１１Ａの位置から図１２Ａの位置に移動したオブジェクト８０６及び／又はデバイス２０２を示す。特に、図１２Ａにおいて、デバイス２０２は、オブジェクト８０６から距離８０４ｅに配置され、ここで、距離８０４ｅは、図１１Ａの距離８０４ｄとは異なる。
【0134】
図１２Ｂは、図１２Ｂに示されるシナリオに対応する時点でのデバイス２０２を示す。図１２Ａ及び図１２Ｂを参照して、デバイス２０２が新しい方向情報を受信すると仮定する。ここで、新しい方向情報に基づいて、デバイス２０２は、一次ディスプレイ２０４及び二次ディスプレイ２０６を更新して方向情報の表現を表示し、ＬＥＤを介して方向情報を表示することを放棄する。
【0135】
一部の実施形態では、デバイス２０２がオブジェクト８０６から距離８０４ｅ離れているため、デバイス２０２は、オブジェクト８０６が、方向情報がＬＥＤ８１２ａ～８１２ｌを介して表示され得るタイプのオブジェクトではないと判定する。例えば、デバイス２０２は、距離８０４ｅが、デバイス２０２がオブジェクト８０６に近すぎる距離であると判定することができる。一部の実施形態では、デバイス２０２は、方向情報又は方向情報の１つ以上のタイプ（例えば、表現８２８）が一次ディスプレイ２０４及び／又は二次ディスプレイ２０６を介して表示されると、ＬＥＤを介して方向情報を表示することを停止する。
【0136】
一部の実施形態では、方向情報の受信に応じて、デバイス２０２は、図１１Ｂで上述したのと同様の技術を使用して、オブジェクト８０６が、オブジェクトの方向情報が二次ディスプレイ５１２を介して表示され得るタイプのオブジェクトであると判定する（例えば、デバイス２０２がオブジェクト８０６から距離８０４ｅ離れており、及び／又はオブジェクト８０６が一次ディスプレイ２０４の視野外の所定の閾値距離内にあるため）。この判定のために、デバイス２０２は、二次ディスプレイ２０６に修正された表現８２６ｂを表示させる。
【0137】
図１２Ｂにおいて、デバイス２０２が図１１Ｂの場合よりも図１２Ｂのオブジェクト８０６に近いため、修正された表現８２６ｂは修正された表現８２６ａよりも大きい。図１２Ｂに示されるように、修正された表現８２６ｂは、図１１Ａに示されるような修正された表現８２６ａの位置よりも一次ディスプレイ２０４に近い二次ディスプレイ２０６上の新しい位置に表示される。オブジェクト８０６が一次ディスプレイ２０４の視野により近いため、修正された表現８２６ｂは新しい位置に表示される。
【0138】
一部の実施形態では、修正された表現８２６ｂは、修正された表現８２６ａが占めていた二次ディスプレイ２０６の一部を占める。一部の実施形態では、修正された表現８２６ｂは、修正された表現８２６ａから（例えば、アニメーションを介して）成長する。一部の実施形態では、デバイス２０２は、オブジェクト８０６のサイズに基づく輝度で、修正された表現８２６ｂ及び／又は修正された表現８２６ａを表示する。例えば、デバイス２０２は、小さなオブジェクトの修正された表現の輝度よりも低い又は暗い輝度で、大きなオブジェクトの修正された表現を表示する。
【0139】
一部の実施形態では、方向情報の受信に応じて、デバイス２０２は、オブジェクト８０６が、オブジェクトの方向情報が一次ディスプレイ２０４を介して表示され得るタイプのオブジェクトであると判定する。図１２Ｂにおいて、デバイス２０２は、距離８０４ｅがオブジェクト８０６に十分に近いという判定に基づいてこの判定を行う。この判定に基づいて、デバイス２０２は、表現８２８を一次ディスプレイ２０４を介して表示させる。
【0140】
図１２Ｂにおいて、表現８２８は、オブジェクト８０６の位置を指す矢印である。一部の実施形態では、デバイス２０２は、表現８２８を表示して、ユーザ２５０が（例えば、静止して立っている状態でユーザ２５０の頭を動かすことによって）一次ディスプレイ２０４の視野を調整できることを示し、それによりオブジェクト８０６は一次ディスプレイ２０４の視野内に位置することができる。一部の実施形態では、デバイス２０２は、表現８２８をアニメーション化させる。一部の実施形態では、デバイス２０２は、表現８２８（又は表現８２８に対応する表現）を二次ディスプレイ２０６を介して表示させる。
【0141】
図１３Ａは、図１２Ａの位置から図１３Ａの位置に移動したオブジェクト８０６及び／又はデバイス２０２を示す。特に、図１３Ａにおいて、デバイス２０２は、オブジェクト８０６から距離８０４ｆに配置され、ここで、距離８０４ｆは、図１２Ａの距離８０４ｅとは異なる。更に、図１３Ａに示されるように、オブジェクト８０６は、デバイス２０２の一次ディスプレイ２０４の視野内にある。
【0142】
図１３Ｂは、図１３Ａに示されるシナリオに対応する時点でのデバイス２０２を示す。図１３Ａ及び図１３Ｂを参照して、デバイス２０２が新しい方向情報を受信すると仮定する。デバイス２０２がオブジェクト８０６から距離８０４ｆ離れており、及び／又はオブジェクト８０６の少なくとも一部が一次ディスプレイの視野内及び二次ディスプレイの視野内にあるため、デバイス２０２は、一次ディスプレイ２０４を介してオブジェクト８０６の一部の実際の表現を表示し、二次ディスプレイ２０６を介してオブジェクト８０６の修正された表現８２６ｃを表示する。一部の実施形態では、オブジェクトの一部の実際の表現はオブジェクト８０６に類似している（例えば、オブジェクト８０６に類似している２つ以上の特徴を有する）が、修正された表現はそれに類似していない。一部の実施形態では、オブジェクトの一部の実際の表現は、オブジェクトの第１のモデルを使用して表示されるが、修正された表現は、オブジェクトの第２のモデルを使用して表示される。一部の実施形態では、オブジェクトの第２のモデルがオブジェクトの第１のモデルよりも単純であるため、オブジェクトの第１のモデルは、オブジェクトの第２のモデルとは異なる。一部の実施形態では、第２のモデルが第１のモデルよりも詳細が少ない（例えば、ポリゴンが少ない３次元モデル）ため、オブジェクトの第２のモデルは、オブジェクトの第１のモデルよりも単純である。
【0143】
一部の実施形態では、図７で上述したものと同様の技術を使用して（例えば、一次ディスプレイ２０４と二次ディスプレイ２０６との間で遷移するオブジェクト８０６のクリッピングを低減するために）、オブジェクト８０６の一部の仮想表現に視覚効果を適用することによって、修正された表現８２６ｂの一部は一次ディスプレイ２０４内に移動する。一部の実施形態では、図７で上述したものと同様の技術を使用して、デバイス２０２は、一次ディスプレイ２０４を介して表示されるオブジェクト８０６の一部の実際の表現を遷移させるときに、修正された表現８２６ｂ又は８２６ｃを、二次ディスプレイ２０６上のオブジェクト８０６の実際の部分の表現に置き換える。
【0144】
図１４Ａは、図１３Ａの位置から図１４Ａの位置に移動したオブジェクト８０６及び／又はデバイス２０２を示す。特に、図１４Ａにおいて、デバイス２０２は、オブジェクト８０６から距離８０４ｇに配置され、ここで、距離８０４ｇは、図１３Ａの距離８０４ｆとは異なる。更に、図１４Ａに示されるように、オブジェクト８０６の全体は、デバイス２０２の一次ディスプレイ２０４の視野内にある。
【0145】
図１４Ｂは、図１４Ａに示されるシナリオに対応する時点でのデバイス２０２を示す。図１４Ａ及び図１４Ｂを参照すると、デバイス２０２は、一次ディスプレイ２０４を介して表示されるオブジェクト８０６（又は、一部の実施形態では、オブジェクト８０６の一部）の実際の表現を表示し、二次ディスプレイ２０６を介してオブジェクト８０６の修正された表現を表示することを停止する。一部の実施形態では、デバイス２０２が、一次ディスプレイ２０４の視野内にあり、二次ディスプレイ２０６の視野内にないため、デバイス２０２は、一次ディスプレイ２０４を介してオブジェクト８０６の実際の表現を生じさせ、二次ディスプレイ２０６を介してオブジェクト８０６の修正された表現を表示することを停止する。
【0146】
一部の実施形態では、図１３Ｂ及び１４Ｂにおいて、デバイス２０２は、一次ディスプレイ２０４を介してオブジェクト８０６の実際の表現を表示する代わりに、二次ディスプレイ２０６を介してオブジェクト８０６のプロキシ表現を表示することができる。一部の実施形態では、二次ディスプレイ２０６は、二次ディスプレイ２０６が一次ディスプレイ２０４の大部分（又は全体）を覆うように、一次ディスプレイ２０４と重なることができる。したがって、これらの実施形態一部では、オブジェクト８０６のプロキシ表現は、デバイス２０２がオブジェクト８０６と対話する要求を受信するまで、一次ディスプレイ２０４の一部の上に二次ディスプレイ２０６を介して示すことができる。例えば、オブジェクト８０６と対話する要求は、入力（例えば、音声入力、物理的入力）がオブジェクト８０６に向けられると判定されたとき、及び／又は、オブジェクト８０６の１つ以上の構成要素及び／又はオブジェクト８０６に関連付けられたオブジェクトが（例えば、間接的に又は直接に）関与する操作を実行するためにプロセスが開始されたときに受信することができる。一部の実施形態では、オブジェクト８０６と対話する要求を受信したことに応じて、デバイス２０２は、二次ディスプレイ２０６を介してオブジェクト８０６のプロキシ表現を表示することを停止し、一次ディスプレイ２０４を介してオブジェクト８０６の実際の表現を表示する。したがって、デバイス２０２が二次ディスプレイ２０６よりも一次ディスプレイ２０４を介してオブジェクトを表示するためにより多くのバッテリ電力を使用する実施形態では、オブジェクト８０６と対話することができるとの判定がなされるまで、一次ディスプレイ２０４がオブジェクト８０６の表現を表示するために使用されないため、デバイス２０２のバッテリ電力は節約される。
【0147】
一部の実施形態では、図１３Ｂ及び１４Ｂにおいて、デバイス２０２は、一次ディスプレイ２０４を介してオブジェクト８０６の実際の表現を表示する代わりに、オブジェクト８０６のプロキシ表現を表示することができる。一部の実施形態では、オブジェクト８０６のプロキシ表現は、オブジェクト８０６の実際の表現よりも視覚的詳細が少なく、及び／又は表示するのに必要な電力が少ない。一部の実施形態では、一次ディスプレイ２０４を介してオブジェクト８０６のプロキシ表現を表示している間、デバイス２０２は、オブジェクト８０６と対話する要求を受信する。例えば、オブジェクト８０６と対話する要求は、入力（例えば、音声入力、物理的入力）がオブジェクト８０６に向けられると判定されたとき、及び／又は、オブジェクト８０６の１つ以上の構成要素及び／又はオブジェクト８０６に関連付けられたオブジェクトが関与する操作を実行するためにプロセスが開始されたときに受信することができる。一部の実施形態では、オブジェクト８０６と対話する要求を受信したことに応じて、デバイス２０２は、オブジェクト８０６のプロキシ表現の表示を、オブジェクト８０６の実際の表現に置き換える。したがって、一部の実施形態では、オブジェクト８０６と対話することができるとの判定がなされた後にのみオブジェクト８０６の実際の表現が表示されるため、バッテリ電力が節約され、及び／又はデバイス２０２によって実行されるプロセスの数が減少する。一部の実施形態では、オブジェクト８０６のプロキシ表現及び／又はオブジェクト８０６の実際の表現が表示されている間、ＬＥＤは非アクティブである（又はデバイス２０２の一部として含まれていない）。
【0148】
図１５は、一部の実施形態による、方向情報に基づいてディスプレイ間でオブジェクトを遷移させる方法を示す流れ図である。一部の実施形態では、この方法は、システム１００（図１Ａ及び図１Ｂ）によって実行される。一部の実施形態では、この方法は、デバイス２０２（図２Ａ）によって実行される。一部の実施形態では、この方法は、デバイス２０２又はシステム１００とは異なる第３のデバイス又はシステムによって実行される。一部の実施形態では、この方法は、システム１００、デバイス２０２、及び第３のデバイス又はシステムのうちの１つ以上の組み合わせによって実行される。
【0149】
ブロック１５０２において、デバイスの一次ディスプレイ（例えば、２０４）及びデバイスの二次ディスプレイの視野外にあるオブジェクトの位置（例えば、北、南、東、西、右、左、後、前、他の基本方位、又はそれらの任意の組み合わせ）に対応する方向情報例えば、８０４ａ～８０４ｄ）が受信される。一部の実施形態では、オブジェクトは、物理的環境内の物理的オブジェクト又は物品であり、一部の実施形態では、オブジェクトは、仮想環境内の仮想オブジェクトである。
【0150】
一部の実施形態では、一次ディスプレイ、二次ディスプレイ、及び／又は三次ディスプレイは、異なるタイプのディスプレイである。一部の実施形態では、一次ディスプレイは導波路ディスプレイである。一部の実施形態では、二次ディスプレイは、有機発光ダイオードディスプレイである。一部の実施形態では、三次ディスプレイは、複数の発光ダイオードである。
【0151】
ブロック１５０４及び１５０６において、一次ディスプレイ及び二次ディスプレイの視野外にあるオブジェクトの位置に対応する方向情報を受信したことに応じて、そして第１の基準が満たされているという判定に従って、方向情報の第１の表現は二次ディスプレイを介して表示される。
【0152】
一部の実施形態では、第１の基準は、オブジェクトが、オブジェクトの方向情報が二次ディスプレイに表示され得るタイプのオブジェクトである場合に満たされる基準を含む。一部の実施形態では、オブジェクトがある部分（例えば、一次ディスプレイ、二次ディスプレイ、デバイスのフレーム）から所定の距離離れているか、又はその横にある場合、オブジェクトの方向情報を二次ディスプレイを介して表示することが許可される。一部の実施形態では、アプリケーション又はアプリケーションに対応するオブジェクトから方向情報が受信された場合に、オブジェクトの方向情報を二次ディスプレイを介して表示することが許可され、また、オブジェクトが二次ディスプレイを介して表示されることを可能にする１つ以上の特性又は特徴（例えば、サイズ、形状、距離）を有する場合、オブジェクトは、二次ディスプレイを介して表示されるようにアプリケーション（又は他のプロセス）によって構成される）。一部の実施形態では、オブジェクトが特定の位置又は方向にない場合、オブジェクトの方向情報を二次ディスプレイを介して表示することが許可され、又は、オブジェクトにより、オブジェクトの表現がデバイスの一部（例えば、デバイスのフレームの内側、デバイスのブリッジの近く、ユーザの鼻の近く）に隣接して表示される。
【0153】
ブロック１５０４及び１５０８において、一次ディスプレイ及び二次ディスプレイの視野外にあるオブジェクトの位置に対応する方向情報を受信したことに応じて、そして第２の基準が満たされているという判定に従って、方向情報（例えば、８０４ｂ～８０４ｄ）の第２の表現（例えば、８１２ａ～８１２ｇ）は三次ディスプレイを介して表示される。
【0154】
一部の実施形態では、第２の基準は、オブジェクトが、オブジェクトの方向情報が三次ディスプレイに表示され得るタイプのオブジェクトである場合に満たされる基準を含む。一部の実施形態では、アプリケーション又はアプリケーションに対応するオブジェクトから方向情報が受信されたとき、オブジェクトがデバイスの一部（例えば、一次ディスプレイ、二次ディスプレイ、フレーム）から所定の距離離れているか、又はその横にある場合、オブジェクトの方向情報を三次ディスプレイを介して表示することが許可され、又は、オブジェクトが、三次ディスプレイを介して表示されることを可能にする１つ以上の特性又は特徴（例えば、サイズ、形状、距離）を有する場合、オブジェクトが特定の位置又は方向にない場合、又は、オブジェクトにより、オブジェクトの表現がデバイスの一部（例えば、デバイスのフレームの内側、デバイスのブリッジの近く、ユーザの鼻の近く）に隣接して、又は三次ディスプレイの一部に表示される場合、オブジェクトは、三次ディスプレイを介して表示されるようにアプリケーション（又は他のプロセス）によって構成される。
【0155】
一部の実施形態では、第１の表現は仮想オブジェクトであり（例えば、第１の表現はオブジェクトの修正された表現である）、第２の表現はＣＧＲ環境内の仮想オブジェクトではない。一部の実施形態では、仮想オブジェクトの第１の修正された表現は、オブジェクトの実際の表現と視覚的に区別することができる。例えば、第１の修正された表現は、実際のオブジェクトに類似していないか、又は似ていない視覚的外観を有することができるが、オブジェクトの実際の表現は、実際のオブジェクトに類似しているか、又は似ている視覚的外観を有することができる。一部の実施形態では、デバイスは、画像認識技術を使用して、オブジェクトの修正された表現を処理するときに実際のオブジェクトを識別することができないが、オブジェクトの実際の表現を処理するときに実際のオブジェクトを識別することができる。一部の実施形態では、第１の修正された表現は、実際のオブジェクトに似ていない（例えば、色、形状、テクスチャ、サイズ、輝度、太さ、フェードなどの２つ以上の同じ特徴を有さない）表現であり得るが、実際の表現は、実際のオブジェクトに似ている表現である。
【0156】
一部の実施形態では、第１の表現は静的表現である。例えば、静的表現は、一定期間にわたって移動しない、又はアニメーション化されない表現である（例えば、変化しない、脈動しない、所定のシーケンス又はパターンにないなど）。一部の実施形態では、第２の表現は動的表現である。例えば、動的表現は、一定期間にわたって移動する、又はアニメーション化される表現である（例えば、脈動する、所定のシーケンス又はパターンで表示される、一定期間にわたって色が変化する）。一部の実施形態では、第１の表現は、第２の表現とは異なる色である。一部の実施形態では、第１の表現は、第２の表現とは異なるサイズである。一部の実施形態では、第１の表現は表示されないが、第２の表現は表示され、その逆も同様である。一部の実施形態では、第１の表現及び第２の表現の少なくとも１つは、勾配（例えば、方向を示す勾配場（例えば、実線及びハッチングされたＬＥＤ））を含む。
【0157】
一部の実施形態では、一次ディスプレイ及び二次ディスプレイは、オブジェクトの異なる表現を表示することができる。一部の実施形態では、方向情報の第１の表現は、二次ディスプレイを介して表示されるオブジェクトの第１の表現である。一部の実施形態では、方向情報の第１の表現が二次ディスプレイを介して表示されている間、オブジェクトは、ＨＭＤデバイスの一次ディスプレイの視野内で検出される。一部の実施形態では、オブジェクトが一次ディスプレイの視野内にあることを検出したことに応じて、オブジェクトの第２の表現は一次ディスプレイを介して表示される。一部の実施形態では、二次ディスプレイを介して表示されるオブジェクトの第１の表現は、オブジェクトの第１のモデルに基づいて表示される。一部の実施形態では、一次ディスプレイを介して表示されるオブジェクトの第２の表現は、オブジェクトの第２のモデルに基づいて表示される。一部の実施形態では、オブジェクトの第２のモデルは、オブジェクトの第１のモデルよりも単純である（例えば、より多くの視覚的特徴、より多くの視覚的詳細を有する）。
【0158】
一部の実施形態では、三次ディスプレイは、二次ディスプレイの第１の部分を囲む。一部の実施形態では、三次ディスプレイは、二次ディスプレイの第１の部分を囲むが、二次ディスプレイの第２の部分を囲まない。一部の実施形態では、一次ディスプレイは二次ディスプレイと重なる。
【0159】
一部の実施形態では、方向情報の第１及び第２の表現とは異なるオブジェクトの表現は、一次ディスプレイを介して表示され、第１の表現は、二次ディスプレイを介して表示される。一部の実施形態では、方向情報の表現は、オブジェクトの位置に関連付けられている。例えば、方向情報の表現は、オブジェクトの位置に対するデバイスの位置を示すことができる。
【0160】
一部の実施形態では、オブジェクトの表現は、オブジェクトと対話するまで、一次ディスプレイを介して表示されない場合がある。一部の実施形態では、ＨＭＤデバイスの一次ディスプレイ及びＨＭＤデバイスの二次ディスプレイの視野内にあるオブジェクトの位置に対応する方向情報が受信される。一部の実施形態では、ＨＭＤデバイスの一次ディスプレイ及びＨＭＤデバイスの二次ディスプレイの視野内にあるオブジェクトの位置に対応する方向情報を受信したことに応じて、一次ディスプレイを介してオブジェクトの第５の表現を表示せずに、オブジェクトの第４の表現は、二次ディスプレイを介して表示される。一部の実施形態では、オブジェクトと対話する（例えば、オブジェクトを選択する、オブジェクトが関与するプロセスを開始する）要求が受信される。一部の実施形態では、オブジェクトと対話する要求を受信したことに応じて、オブジェクトの第５の表現は一次ディスプレイを介して表示され、オブジェクトの第４の表現は二次ディスプレイを介しての表示を停止する。
【0161】
一部の実施形態では、オブジェクトと対話する要求が受信される。一部の実施形態では、オブジェクトの表現は、オブジェクトと対話する要求を受信したことに応じて、一次ディスプレイを介して表示される。
【0162】
一部の実施形態では、第１の表現及び第２の表現が表示されている間、第１の表現は、二次ディスプレイを介して、一次ディスプレイに対する対応する方向にある第１の位置に表示され、第２の表現は、三次ディスプレイを介して、一次ディスプレイに対する対応する方向にある第２の位置に表示されない。
【0163】
図１６は、一部の実施形態による、オブジェクトの修正された表現を表示する方法を示す流れ図である。一部の実施形態では、この方法は、システム１００（図１Ａ及び図１Ｂ）によって実行される。一部の実施形態では、この方法は、デバイス２０２（図２Ａ）によって実行される。一部の実施形態では、この方法は、デバイス２０２又はシステム１００とは異なる第３のデバイス又はシステムによって実行される。一部の実施形態では、この方法は、システム１００、デバイス２０２、及び第３のデバイス又はシステムのうちの１つ以上の組み合わせによって実行される。
【0164】
ブロック１６０２において、第１の位置（又はある位置）でコンピュータ生成現実（ＣＧＲ）環境内のオブジェクト（例えば、仮想オブジェクト、物理的オブジェクトの表現である仮想オブジェクト、物理的環境内の物理的オブジェクト）が検出される。一部の実施形態では、オブジェクトは重要又は有用であると判定される。例えば、オブジェクトは、オブジェクトに関連するユーザ入力を受信することによって、オブジェクトに関連するユーザ対話を受信することによって、オブジェクトを重要又は有用として識別するデータを受信することによって、重要又は有用であると判定することができる。一部の実施形態では、オブジェクトを重要又は有用として識別するデータは、デバイス２０２と通信しているか、又はそれによって実行されている１つ以上のアプリケーションから受信される。
【0165】
ブロック１６０４及び１６０６において、第１の位置でＣＧＲ環境内のオブジェクトを検出したことに応じて、そして、第１の位置がデバイスの一次ディスプレイの視野外の第１の所定の距離内にあるという判定に従って、仮想オブジェクトの第１の修正された表現が表示される。
【0166】
仮想オブジェクトの第１の修正された表現は、オブジェクトの実際の表現と視覚的に区別することができる。例えば、第１の修正された表現は、実際のオブジェクトに類似していないか、又は似ていない視覚的外観を有することができるが、オブジェクトの実際の表現は、実際のオブジェクトに類似しているか、又は似ている視覚的外観を有することができる。一部の実施形態では、デバイスは、画像認識技術を使用して、オブジェクトの修正された表現を処理するときに実際のオブジェクトを識別できない場合があるが、オブジェクトの実際の表現を処理するときに実際のオブジェクトを識別することができる。一部の実施形態では、第１の修正された表現は、実際のオブジェクトに似ていない（例えば、色、形状、テクスチャ、サイズ、輝度、太さ、フェードなどの２つ以上の同じ特徴を有さない）表現であり得るが、実際の表現は実際のオブジェクトに似ている表現である。
【0167】
一部の実施形態では、第１の修正された表現は、第１の実際の表現の視覚的コンテンツとは異なる視覚的コンテンツ（例えば、表示された表現を表すデータ）を有する。一部の実施形態では、オブジェクトの修正された表現は、実際のオブジェクトの構造とは異なる構造を有し、オブジェクトの実際の表現は、オブジェクトと同じ構造を有する。例えば、実際のオブジェクトが木である場合、オブジェクトの実際の表現は視覚的に木のように見えるが、第１の修正された表現は、木の形をしていないピクセルのブロブのように見える。
【0168】
一部の実施形態では、第１の修正された表現は、第１の位置とデバイスの一次ディスプレイの視野との間の距離に基づくサイズを有する。一部の実施形態では、オブジェクトの位置が一次ディスプレイの外側の第１の距離にある場合、第１の修正された表現は第１のサイズである。一部の実施形態では、オブジェクトの位置が一次ディスプレイの外側の第２の距離にある場合、第１の修正された表現は第２のサイズである。一部の実施形態では、第１の距離が第２の距離よりも一次ディスプレイに近い場合、第１のサイズで表示される第１の修正された表現は、第２のサイズで表示される第１の修正された表現よりも大きい。一部の実施形態では、オブジェクトが、第１の位置よりもデバイスの一次ディスプレイの視野に近い位置で検出された場合に、第１の修正された表現のサイズが増大する。
【0169】
一部の実施形態では、第１の修正された表現は、オブジェクトのサイズに基づく輝度（例えば、より大きなオブジェクトがより暗くなるようにされる）を有する。一部の実施形態では、オブジェクトが第１のサイズである場合、第１の修正された表現は第１の輝度を有する。一部の実施形態では、オブジェクトが第２のサイズである場合、第１の修正された表現は第２の輝度を有する。一部の実施形態では、オブジェクトの第１のサイズがオブジェクトの第２のサイズよりも小さい場合、第１の輝度で表示される第１の修正された表現は、第２の輝度で表示される第１の修正された表現よりも明るい。
【0170】
一部の実施形態では、第１の修正された表現は、デバイスを介して表示される別のオブジェクトに対するオブジェクトのサイズに基づく輝度を有する。例えば、第１の修正された表現の輝度は、オブジェクトのサイズが別のオブジェクトのサイズよりも大きくなるにつれて増加することができ、その逆も同様である。一部の実施形態では、オブジェクトのサイズが別のオブジェクトのサイズに実質的に等しい場合、オブジェクトの修正された表現の輝度は、別のオブジェクトの表現の輝度に等しくなり得る。したがって、一部の実施形態では、ユーザが環境全体を移動するにつれて、オブジェクトの修正された表現の輝度は、環境内の他のオブジェクトに基づいて変化することができる。
【0171】
一部の実施形態では、第１の修正された表現は、第１の実際の表現のぼかしよりも高いぼかしを有する。一部の実施形態では、第１の修正された表現は、第１の実際の表現よりもフェードされる。
【0172】
一部の実施形態では、第１の修正された表現を表示することの一部として、アニメーションを表示することができる。例えば、アニメーションは、脈動するアニメーション、第１の修正された表現をシフト又は移動するアニメーション、オブジェクトの第１の実際の表現を第１の修正された表現に変換するアニメーション、第１の修正された表現をフェードイン又はフェードアウトするアニメーションなどであり得る。
【0173】
一部の実施形態では、オブジェクトの第１の部分の第２の実際の表現は、第１の位置でＣＧＲ環境内のオブジェクトを検出したことに応じて、そして第１の位置が一次ディスプレイの視野及び二次ディスプレイの視野内にあるという判定に従って、一次ディスプレイを介して表示される。例えば、図１３Ｂに示されるように、オブジェクトの第１の部分の第２の実際の表現（例えば、８０６）は、デバイスが二次ディスプレイの視野内の閾値距離内にある場合、一次ディスプレイを介して表示することができる。
【0174】
一次ディスプレイを介して、オブジェクトの第１の部分の第２の実際の表現を表示している間、オブジェクトの第２の部分の第２の修正された表現は、二次ディスプレイを介して表示される。例えば、図１３Ｂに示されるように、第２の修正された表現（例えば、８２６ｃ）は、二次ディスプレイを介して表示される。
【0175】
一部の実施形態では、オブジェクトの第２の部分は、オブジェクトの第１の部分とは異なるオブジェクトの部分である。一部の実施形態では、オブジェクトの第１の部分は、一次ディスプレイの視野内にあるが、二次ディスプレイの視野内にはない。一部の実施形態では、オブジェクトの第２の部分は、二次ディスプレイの視野内にあるが、一次ディスプレイの視野内にはない。一部の実施形態では、第２の実際の表現は、第２の修正された表現よりも高い解像度で表示される。一部の実施形態では、第２の実際の表現は、二次ディスプレイに隣接する一次ディスプレイのエッジに隣接して表示される。一部の実施形態では、第２の修正された表現は、一次ディスプレイに隣接する二次ディスプレイのエッジに隣接して表示される。
【0176】
一部の実施形態では、一次ディスプレイを介してオブジェクトの第２の実際の表現を表示することの一部として、視覚効果が、オブジェクトの第２の実際の表現に適用される。一部の実施形態では、視覚効果が適用された後のオブジェクトの第２の実際の表現は、視覚効果が適用される前のオブジェクトの第２の実際の表現のぼかしよりも大きいぼかしを有する。一部の実施形態では、一次ディスプレイを介して表示されるオブジェクトの第１の部分の第２の実際の表現、及び二次ディスプレイを介して表示されるオブジェクトの第２の部分の第２の修正された表現のうちの１つ以上は、図７に関連して上述した１つ以上の技術を使用して表示される。
【0177】
一部の実施形態では、オブジェクトを位置特定するための方向情報に対応する表現は、第１の位置でＣＧＲ環境内のオブジェクトを検出したことに応じて、そして第１の位置がデバイスの一次ディスプレイの視野外の第２の所定の距離内にあるという判定に従って、一次ディスプレイを介して表示される。例えば、図１２Ａ及び１２Ｂに示されるように、図１１Ａにおいてユーザ２５０とオブジェクト８０６が互いに距離８０４ｄ離れていることとは異なり、ユーザ２５０とオブジェクト８０６との間の距離が互いに離れている距離８０４ｅである場合、オブジェクトを位置特定するための方向情報に対応する表現（例えば、８２８）は、一次ディスプレイを介して表示される。
【0178】
一部の実施形態では、オブジェクトを位置特定するための方向情報に対応する表現は、実際の表現とは異なる。オブジェクトを位置特定するための方向情報に対応する表現は、オブジェクトの位置、デバイスへのオブジェクトの近さ、デバイスがオブジェクトから離れて移動しているか又はオブジェクトに接近して移動しているかのインジケーションを提供することができる。
【0179】
一部の実施形態では、一次ディスプレイを介してオブジェクトの位置に対応する表現を表示している間、オブジェクトの修正された表現は、二次ディスプレイを介して表示される。
【0180】
一部の実施形態では、第１の位置でオブジェクトを検出したことに応じて、そして第１の位置が一次ディスプレイの視野内にあり、二次ディスプレイの視野内にないという判定に従って、第１の実際の表現（例えば、８０６）は、一次ディスプレイを介して表示されるが、第１の修正された表現は、二次ディスプレイを介しての表示を停止する。一部の実施形態では、オブジェクトの第１の実際の表現の一部が表示される。一部の実施形態では、オブジェクト全体が表示される。
【0181】
図１７Ａ～図１７Ｂ、図１８及び図２５は、一部の実施形態による、１つ以上のプロセスに関連するデータに基づいて１つ以上のディスプレイを管理するための例示的な技術を示す。図１７Ａにおいて、デバイス２０２は、図２Ａ～図２Ｂ及び図８Ａで上述したように、１つ以上の構成要素を有すると示されている。
【0182】
図１７Ａは、複数のアプリケーションアイコンを表示するデバイス２０２を示す。複数のアプリケーションアイコンは、メッセージングアプリケーションアイコン１７０２ａ、健康アプリケーションアイコン１７０２ｂ、電話アプリケーションアイコン１７０２ｃ、及び電子メールアプリケーションアイコン１７０２ｄを含む。
【0183】
図１７Ａを参照し、デバイス２０２が、メッセージングアイコン１７０２ａに対応するメッセージングアプリケーションを介して新しいメッセージを受信すると仮定する。新しいメッセージの受信に応じて、デバイス２０２は、新しいメッセージに関連する情報が特定のディスプレイ（例えば、一次ディスプレイ２０４、二次ディスプレイ２０６、ＬＥＤなど）を介して表示されるか否かを判定することができる。
【0184】
一部の実施形態では、新しいメッセージの受信に応じて、デバイス２０２は、新しいメッセージに関連する情報が二次ディスプレイ２０６を介して表示されることが許可（又は構成）されると判定する。図１７Ｂに示されるように、デバイス２０２は、この判定のために、メッセージステータスインジケータ１７０２ａ１を含めるようにメッセージングアプリケーションアイコン１７０２ａを更新する。図１７Ｂに示されるように、メッセージステータスインジケータ１７０２ａ１は、メッセージングアイコン１７０２ａに隣接する「１」であり、１つの追加の新規又は未読メッセージが受信されたことを示す。未読メッセージには、ユーザ対話を受信していないメッセージ、例えば、聞いていないボイスメールメッセージ、未読のテキスト又は電子メールメッセージ、まだ開いていないアプリケーションからの通知又はアラート、削除されていない通知又はアラートなどが含まれる場合がある。
【0185】
一部の実施形態では、新しいメッセージの受信に応じて、デバイス２０２は、新しいメッセージに関連する情報が、ＬＥＤなどの三次ディスプレイを介して表示されることが許可（又は構成）されると判定する。図１７Ｂに示されるように、デバイス２０２は、この判定のためにＬＥＤを発光させる。一部の実施形態では、デバイス２０２は、ＬＥＤの一部のみを発光させる。
【0186】
１つ以上の他のタイプのアラート、通知、センサデータ、アプリケーションからの要求又はデータ、着信電話などを受信することができる。一部の実施形態では、デバイス２０２は、図１７Ａ～図１７Ｂで受信された新しいメッセージに関して上述したように、それらの受信に応じて同様の動作を実行する。例えば、デバイス２０２は、心拍数センサ（又は個人データ又は健康データを検出する１つ以上の他のセンサ）によって検出された健康データが閾値レベルより上又は下であり、そのデータに関連する情報がＬＥＤを介して表示されることが許可されていると判定した場合、ＬＥＤを発光させることができる。
【0187】
デバイス２０２はまた、１つ以上のメッセージ、アラート、通知、センサデータ、アプリケーションからの要求又はデータ、着信電話などの受信に応じて他の動作を実行することができる。例えば、図１８に示されるように、デバイス２０２は、新しいメッセージに関連する情報が二次ディスプレイ２０６を介して表示されることが許可されているという判定に基づいて、二次ディスプレイ２０６の少なくとも一部にわたって色を表示する。一部の実施形態では、一次ディスプレイ２０４の一部は、この判定のために更新される。
【0188】
一部の実施形態では、デバイス２０２は、１つ以上のディスプレイを介してアニメーションを表示することができる。一部の実施形態では、アニメーションは、１つ以上の脈動する色、１つ以上の移動するオブジェクト、形状を変えるか又は１つ以上の他のオブジェクトに遷移する１つ以上のオブジェクトなどを含むことができる。例えば、デバイス２０２は、ユーザの健康データが閾値レベルより上／下であり、健康データに関連する情報が対応するディスプレイ上に表示されることが許可されているという判定に基づいて、脈動する色のアニメーションを一次ディスプレイ２０４及び／又は二次ディスプレイ２０６上に表示することができる。
【0189】
【0190】
図１９Ａは、複数のオブジェクトト１９１０ａ～１９１０ｄの表現を含むＣＧＲ環境を表示するデバイス２０２を示す。オブジェクト１９１０ａ～１９１０ｄは、一次ディスプレイ２０４及び二次ディスプレイ２０６の視野内にある自動車である。ここで、オブジェクト１９１０ａ～１９１０ｄは、デバイス２０２の一次２０４及び二次ディスプレイ２０６を通して見られる、物理的環境内の物理的な自動車を表す。一部の実施形態では、オブジェクト１９１０ａ～１９１０ｄは、デバイス２０２の一次２０４及び二次ディスプレイ２０６によって表示される仮想オブジェクトを表す。
【0191】
図１９Ａを参照して、デバイス２０２が、オブジェクト１９１０ａがデバイス２０２のユーザに関連付けられていることを示すデータをアプリケーションから受信すると仮定する。例えば、図１９Ａにおいて、アプリケーションは、カーシェアリングアプリケーション、タクシーアプリケーション、車位置アプリケーションなどであり得る。一部の実施形態では、デバイス２０２は、１つ以上のユーザ設定、メモリに記憶されたデータ、１つ以上の機械学習アルゴリズムなどを使用して専用アプリケーションからデータを受信することなく、オブジェクト１９１０ａがデバイス２０２のユーザに関連付けられていると判定する。
【0192】
アプリケーションからデータを受信したことに応じて、デバイス２０２は、アプリケーションからのデータに関連する情報が特定のディスプレイを介して表示されるか否かを判定することができる。一部の実施形態では、アプリケーションからデータを受信したことに応じて、デバイス２０２は、データに関連する情報が二次ディスプレイ２０６を介して表示されることが許可されていると判定する。図１９Ｂに示されるように、この判定に基づいて、デバイス２０２は、二次ディスプレイ２０６上のオブジェクト１９１０ａの周りにインジケータ１９１２を表示する。
【0193】
インジケータ１９１２は、オブジェクト１９１０ａをオブジェクト１９１０ｂ～１９１０ｄから視覚的に区別するために、オブジェクト１９１０ａの周りに表示される。一部の実施形態では、デバイス２０２は、他の方法でオブジェクト１９１０ａを他のオブジェクトから視覚的に区別させる。例えば、デバイス２０２は、オブジェクト１９１０ｂ～１９１０ｄの表示を停止し、オブジェクト１９１０ｂ～１９１０ｄを最小化し、オブジェクト１９１０ａを拡大し、オブジェクト１９１０ａを強調表示することなどができる。
【0194】
一部の実施形態では、アプリケーションからデータを受信したことに応じて、デバイス２０２は、データに関連する情報がＬＥＤを介して表示されることが許可されていると判定する。図１９Ｂに示されるように、デバイス２０２は、この判定に基づいて、１つ以上のＬＥＤを発光させる。
【0195】
【0196】
図２０Ａは、時間２００２の表現を含むＣＧＲ環境を表示するデバイス２０２を示す。時間２００２の表現は、一次ディスプレイ２０４を介して表示され、プロセスが６０秒の残り時間を有することを示す。一部の実施形態では、時間２００２の表現は、タイマーアプリケーション、配信アプリケーション、ワークアウトアプリケーション、会議アプリケーション、生産性アプリケーションなどに関連するプロセスを表す。一部の実施形態では、時間２００２の表現が一次ディスプレイ２０４を介して表示されることが許可されているという判定がなされたため、時間２００２の表現は、一次ディスプレイ２０４を介して表示される。
【0197】
時間２００２の表現と同時に、時間２００４の表現は、二次ディスプレイ２００６を介して表示される。時間の表現２００４は、６０秒の残り時間を示すために二次ディスプレイ２０６全体を覆う色付きオーバーレイを含む。一部の実施形態では、時間２００４の表現は、時間２００２の表現によって表される時間を示す。言い換えれば、一部の実施形態では、１つのディスプレイを介して表示される表現は、別のディスプレイを介して表示される表現に対応するか、又はそれを表すことができる。
【0198】
一部の実施形態では、時間２００４の表現が二次ディスプレイ２０６を介して表示されることが許可されているという判定がなされたため、時間２００２の表現は、二次ディスプレイ２０６を介して表示される。
【0199】
図２０Ａに示されるように、時間２００４の表現は、タイマー又はプロセスの開始時間と比較した場合の残り時間のパーセンテージを示す。例えば、プロセスが開始されて６０秒で終了すると仮定した場合、表現２００４は、残り時間のパーセンテージが１００％であることを示す。
【0200】
時間２００２の表現及び時間２００４の表現と同時に、デバイス２０２は、図２０Ａに示されるように、ＬＥＤを発光させる。時間２００４の表現と同様に、ＬＥＤは、時間２００２の表現によって表される時間を示し、したがって、時間２００２の表現に対応する。ここで、プロセスが開始されて６０秒で終了すると仮定した場合、残り時間のパーセンテージが１００％であるため、すべてのＬＥＤが発光している。
【0201】
図２０Ｂに示されるように、デバイス２０２が、プロセスの残り時間が３０秒であるというインジケーションを受信すると仮定する。インジケーションの受信に応じて、デバイス２０２は、時間２００２の表現及び時間２００４の表現を更新する。図２０Ｂにおいて、時間２００４の表現は、二次ディスプレイ２０６の領域のほぼ半分を覆う色付きオーバーレイを含む。一部の実施形態では、図２０Ｂの表現２００４は、残り時間（例えば、３０秒）が、プロセスが設定された元の時間（例えば、図２０Ａの６０秒）の５０％であることを表す。更に、デバイス２０２はまた、残り時間が元の時間の少なくとも５０％であることに応じて、ＬＥＤの半分（例えば、８１０ａ～８１０ｌ及び８１２ａ～８１２ｌ）の発光を停止させる。
【0202】
図２０Ｃ～図２０Ｄに示されるように、残り時間はそれぞれ１５秒と５秒である。図２０Ｃ～図２０Ｄに示されるように、デバイス２０２は、プロセスの残り時間（例えば、図２０Ｃの１５秒及び図２０Ｄの５秒）に基づいて、一次ディスプレイ２０４、二次ディスプレイ２０６、及びＬＥＤ（例えば、８１０ａ～８１０ｌ及び８１２ａ～８１２ｌ）を更新し続ける。
【0203】
しかしながら、図２０Ａ～図２０Ｃとは対照的に、デバイス２０２は、図２０Ｄにおいて、ＬＥＤの予想される部分より多くの部分（例えば、１／１２より多くの部分）を発光させる。ここで、デバイス２０２は、すべてのＬＥＤを発光させて、残り時間が所定の最小時間未満であることのインジケーションを提供する。
【0204】
一部の実施形態では、デバイス２０２は、残り時間がゼロに近づくにつれて、１つ以上のＬＥＤ及び／又は二次ディスプレイ２０６をアニメーション化させる（例えば、脈動させる、明るくさせる）。一部の実施形態では、二次ディスプレイ２０６及び／又はＬＥＤは、所定の時間が残っている場合、異なる色及び／又は色合いに変化する。例えば、二次ディスプレイ２０６は、所定の時間が残っている場合に半透明から赤色に変化することができる。一部の実施形態では、１つ以上のＬＥＤ及び／又は二次ディスプレイ２０６はアニメーション化するが、１つ以上の他のディスプレイはアニメーション化しない。一部の実施形態では、二次ディスプレイ２０６は、一次ディスプレイ２０４と重なることができ、その結果、二次ディスプレイ２０６の重なり部分に示されるアニメーションは、デバイス２０２のディスプレイの中央（例えば、ユーザの瞳孔の周りに対応する領域）に示される。
【0205】
【0206】
図２１Ａは、デバイス２１０２ａ及びデバイス２１０２ｂを含むＣＧＲ環境を表示するデバイス２０２を示す。図２１Ａに示されるように、デバイス２１０２ａ及びデバイス２１０２ｂは、一次ディスプレイ２０４及び二次ディスプレイ２０６の視野内にある。
【0207】
図２１Ａに示されるように、ユーザインタフェース（ＵＩ）要素２１１０は、デバイス２１０２ａ上に表示される。例えば、ＵＩ要素２１１０は、１つ以上のアイコン、ファイル、アプリケーションショートカット、文字などであり得る。
【0208】
図２１Ｂを参照すると、デバイス２０２は、ＵＩ要素２１１０上のドラッグアンドドロップ入力２１５０を検出する。ＵＩ要素２１１０上のドラッグアンドドロップ入力２１５０を検出したことに応じて、デバイス２０２は、ドラッグアンドドロップ入力のステータスに関連する情報がＬＥＤを介して表示され得るか否かを判定する。図２１Ｂに示されるように、デバイス２０２は、この判定のためにＬＥＤを発光させる。
【0209】
図２１Ｂを参照して、デバイス２０２がドラッグアンドドロップ入力２１５０の動きを検出すると仮定する。ドラッグアンドドロップ入力２１５０の動きを検出したことに応じて、デバイス２０２は、デバイス２１０２ａ上の位置からデバイス２１０２ｂ上の位置に移動するＵＩ要素２１１０を表示する。
【0210】
【0211】
図２１Ｃを参照して、デバイス２０２がＵＩ要素２１１０が選択されていないことを検出すると仮定する。ＵＩ要素２１１０が選択されていないことを検出したことに応じて、デバイス２０２は、図２１Ｄに示されるように、ＬＥＤを発光させることを放棄する。一部の実施形態では、ＵＩ要素２１１０が選択されていないことを検出したことに応じて、デバイス２０２は、１つ以上のＬＥＤを異なるように発光させる。例えば、デバイス２０２は、ＵＩ要素２１１０が選択されている間に、１つ以上のＬＥＤに、以前に図２１Ｃで放出した色とは異なる色の光を放出させることができる。
【0212】
一部の実施形態では、１つ以上のＬＥＤを異なるように発光させることは、ユーザ動作の完了又は効果を示す。例えば、デバイス２０２は、ユーザがメディアファイルをデバイス２１０２ａからデバイス２１０２ｂにドラッグした後に再生されるメディアファイルのリズムに従って、ＬＥＤを異なるように発光させることができる。
【0213】
一部の実施形態では、デバイス２０２は、ドラッグアンドドロップ入力２１５０に関して（例えば、図２１Ａ～図２１Ｄにおいて）上述した技術を実行して、他のユーザ対話及び／又はアプリケーションの状態を示す。例えば、一部の実施形態では、デバイス２０２は、ドラッグ、リリース、コピー、編集、クリッピング、又は移動操作が検出されたときに、上記の技術を実行する。一部の実施形態では、デバイス２０２がファイルのダウンロードに関連する状態、メディアの再生に関連する状態、運動ルーチンの完了に関連する状態、定期的な目標（例えば、健康目標、生産性目標）の完了に関連する状態など、アプリケーション又はプロセスの状態に関するデータを受信するときに、デバイス２０２は上記の技術を実行する。
【0214】
【0215】
図２２Ａは、人２２０２を含むＣＧＲ環境を表示するデバイス２０２を示す。人２２０２は、一次ディスプレイ２０４及び二次ディスプレイ２０６の視野内にあり、それらを通して見られる。
【0216】
図２２Ａに示されるように、人２２０２は眉をひそめている。図２２Ａを参照して、デバイス２０２が、１つ以上の顔認識アルゴリズムなどの１つ以上のアルゴリズムによって処理される、人２２０２の気分を表すデータを受信すると仮定する。一部の実施形態では、１つ以上のアルゴリズムは、人２２０２が眉をひそめていると判定し、この判定を表すデータを送信することができる。
【0217】
人２２０２が眉をひそめていることを表すデータを受信したことに応じて、デバイス２０２は、そのデータに関連する情報がＬＥＤを介して表示されることが許可されていると判定する。一部の実施形態では、この判定に従って、デバイス２０２は、ＬＥＤを第１の状態で発光させる。例えば、図２２Ａは、ＬＥＤが第１の状態（例えば、ＬＥＤが充填されている）にあることを示す。一部の実施形態では、デバイス２０２は、図２２Ａに実線で示されているＬＥＤの一部のみを更新する。
【0218】
一部の実施形態では、デバイス２０２は、（例えば、データが二次ディスプレイ２０６を介して表示されることが許可されているという判定に従って）人２２Ａの気分を示唆する状態で色付きオーバーレイで二次ディスプレイ２０６を更新する。
【0219】
図２２Ｂは、人２２０４を含むＣＧＲ環境を表示するデバイス２０２を示す。図２２Ｂに示されるように、人２２０４は、図２２Ａの人２２０２とは対照的に微笑んでいる。図２２Ｂを参照して、デバイス２０２が、１つ以上の顔認識アルゴリズムなどの１つ以上のアルゴリズムによって処理される、人２２０４の気分を表すデータを受信すると仮定する。
【0220】
人２２０４の気分を表すデータを受信したことに応じて、デバイス２０２は、そのデータに関連する情報がＬＥＤを介して表示されることが許可されていると判定する。一部の実施形態では、この判定に従って、デバイス２０２は、第１の状態とは対照的に、第２の状態でＬＥＤを発光させる。例えば、図２２Ｂは、ＬＥＤがハッチングされていることを示すことによって、ＬＥＤが第２の状態にあることを示す。ここで、デバイス２０２は、データがユーザの異なる気分を表すため、第２の状態において第１の状態とは異なるようにＬＥＤを発光させる。
【0221】
一部の実施形態では、他の気分（例えば、悲しい、満足しているなど）を表すデータ又は他のタイプのデータは、図２２Ａ～図２２Ｂに関連して上述したものと同様の技術を使用して表示することができる。例えば、他のタイプのデータは、金融市場の状態、天気予報、評価（例えば、レストランの評価、映画の評価など）を含むことができる。
【0222】
【0223】
図２３Ａは、二次ディスプレイ２０６を介して表示される進捗インジケータの表現２３０２を含むＣＧＲ環境を表示するデバイス２０２を示す。一部の実施形態では、表現２３０２は、追跡されている１つ以上のメトリックを示す。例えば、メトリックは、取られた（又は目標を達成するために残された）ステップ数、ダウンロード速度、一定期間にわたるワークアウトの数、及び／又は任意の他のメトリックであり得る。一部の実施形態では、表現２３０２は、歩行アプリケーション、トレーニングアプリケーション、筋力トレーニングアプリケーションなどの１つ以上の健康アプリケーションから受信したデータに対応する。
【0224】
一部の実施形態では、デバイス２０２は、進捗インジケータに関連する情報がＬＥＤを介して表示されることが許可されているという判定に基づいて、ＬＥＤに進捗インジケータを表す光を放出させる。例えば、図２３Ａに示されるように、ＬＥＤ８１０ａ及び８１０ｈ～８１０ｌは発光しており、ＬＥＤ８１０ａ及び８１０ｈ～８１０ｌは、表現２３０２の長さ及び位置に対応する。ＬＥＤ８１０ａ及び８１０ｈ～８１０ｌは進捗インジケータのレベルを示す。
【0225】
一部の実施形態では、図２３Ａに示されるように、ＬＥＤ８１２ａ、８１２ｈ、８１２ｉ、８１２ｌは発光する。ＬＥＤ８１２ａ、８１２ｈ、８１２ｉ、８１２ｌは、表現２３０２の長さに沿ってデバイス２０２の右側にある。ＬＥＤ８１２ａ、８１２ｈ、８１２ｉ、８１２ｌはまた、進捗インジケータのレベルを示す。特に、デバイス２０２のＬＥＤ８１２ｊ及び８１２ｋは、デバイス２０２を装着しているユーザの鼻から特定の距離内にあるため、発光しない。
【0226】
図２３Ｂを参照すると、デバイス２０２は、二次ディスプレイ２０６及びＬＥＤを介して表現２３０２を更新して、追跡されたメトリックの進捗が達成されたことを示す。特に、ＬＥＤ８１２ｊ及び８１２ｋは、デバイス２０２を装着しているユーザの鼻から特定の距離内にあるため、発光しないままである。
【0227】
図２４Ａ～図２４Ｄは、一部の実施形態による、１つ以上のプロセスに関連するデータに基づいて１つ以上のディスプレイを管理するための例示的な技術を示す。図２４Ａ～図２４Ｄは、デバイス２０２が、ＬＥＤ８１０ａ～２１０ｌ及び８１２ａ～８１２ｌの１つ以上を、デバイス２０２を装着しているユーザの両目の周りに時計回りのパターンで順次に発光させるシナリオを示す。一部の実施形態では、パターンは、ユーザへの方向を示すことができ、また、図８Ａ～図８Ｂ、図９Ａ～図９Ｂ、図１０Ａ～図１０Ｂ、図１１Ａ～図１１Ｂ、図１２Ａ～図１２Ｂ、図１３Ａ～図１３Ｂ、図１４Ａ～図１４Ｂ、図１５、及び図１６に関連して上述した例に加えて置き換えるか又は使用することができる。
【0228】
例えば、ＬＥＤはパターンを放出することができ、この場合、ＬＥＤは順次にオン及びオフになり、これは、円の周りを移動する点に類似する。円は、時計回り又は反時計回りの方向にデバイス２０２を装着しているユーザの１つ以上の目の周りでアニメーション化することができる。一部の実施形態では、ユーザの両目の周りにパターンを描くとき、デバイス２０２は、図２４Ｂ～図２４Ｃに示されるように、デバイス２０２の右側と左側のＬＥＤの間を遷移し、デバイス２０２は、シーケンス内のＬＥＤの一部（例えば、８１０ｇ及び８１０ｈ）をスキップする。
【0229】
図２５は、一部の実施形態による、１つ以上のプロセスに関連するデータに基づいて１つ以上のディスプレイを管理する方法を示す流れ図である。一部の実施形態では、この方法は、システム１００（図１Ａ及び図１Ｂ）によって実行される。一部の実施形態では、この方法は、デバイス２０２（図２Ａ）によって実行される。一部の実施形態では、この方法は、デバイス２０２又はシステム１００とは異なる第３のデバイス又はシステムによって実行される。一部の実施形態では、この方法は、システム１００、デバイス２０２、及び第３のデバイス又はシステムのうちの１つ以上の組み合わせによって実行される。
【0230】
ブロック２５０２において、プロセスのステータスの変化に対応する情報が受信される。一部の実施形態では、情報は、１つ以上の機能、プロセス、アプリケーション、センサなどからの１つ以上の通知、アラート、及び／又は１つ以上の出力であり得る。一部の実施形態では、センサは、１つ以上の健康センサ、心拍数センサ、歩数計、熱センサなどを含むことができる。
【0231】
一部の実施形態では、情報は、１つ以上の環境因子又は１つ以上のアプリケーションからのデータに基づいて計算される。例えば、図２０Ａ～図２０Ｄにおいて、デバイス２０２は、上記のようにプロセスの開始又は終了を計算することができる。一部の実施形態では、環境因子は、天候、環境内の１つ以上のユーザ又はデバイスの特性などに対応するデータを含むことができる。
【0232】
図２５を参照すると、ブロック２５０４及び２５０６において、プロセスの変更ステータスに対応する情報を受信したことに応じて、そして第１の基準が満たされているという判定に従って、プロセスのステータスに対応する第１の表現は、二次ディスプレイを介して表示される。例えば、表現は、図１７Ｂの表現ステータスインジケータ１７０２ａ１、図１８の二次ディスプレイ２０６全体に表示される色付きオーバーレイ、図１９Ｂのインジケータ１９１２、図２０Ａ～図２０Ｄの表現２００４、図２３Ａ～図２３Ｂの進捗インジケータの表現２３０２などの１つ以上の表現を含むことができる。
【0233】
一部の実施形態では、第１の基準は、図８Ａ～図８Ｂ、図９Ａ～図９Ｂ、図１０Ａ～図１０Ｂ、図１１Ａ～図１１Ｂ、図１２Ａ～図１２Ｂ、図１３Ａ～図１３Ｂ、図１４Ａ～図１４Ｂ、図１５及び図１６に関連して上述したように、オブジェクトの方向情報を二次ディスプレイを介して表示することが許可されているという判定がなされたときに満たされる基準を含む。
【0234】
図２５を参照すると、ブロック２５０４及び２５０６において、プロセスのステータスの変化に対応する情報の受信に応じて、そして第２の基準が満たされているという判定に従って、プロセスのステータスに対応する第２の表現が表示される。例えば、図１７Ａ～図１７Ｂ、図１８、図１９Ａ～図１９Ｂ、図２０Ａ～図２０Ｄ、図２１Ａ～図２１Ｄ、図２２Ａ～図２２Ｂ、図２３Ａ～図２３Ｂ、及び図２４Ａ～図２４Ｄの８１０ａ～８１０ｌ及び８１２ａ～８１２ｌである。
【0235】
一部の実施形態では、第２の基準は、図８Ａ～図８Ｂ、図９Ａ～図９Ｂ、図１０Ａ～図１０Ｂ、図１１Ａ～図１１Ｂ、図１２Ａ～図１２Ｂ、図１３Ａ～図１３Ｂ、図１４Ａ～図１４Ｂ、図１５及び図１６に関連して上述したように、オブジェクトを三次ディスプレイを介して表示することが許可されているという判定がなされたときに満たされる基準を含む。
【0236】
一部の実施形態では、第２の表現は、第１の表現とは異なる。一部の実施形態では、第１の表現は仮想オブジェクトであり、第２の表現は仮想オブジェクトではない。
【0237】
一部の実施形態では、第１の表現及び第２の表現のうちの１つ以上は、一次ディスプレイを介して提示される第３の表現に関連付けられる（例えば、同じアプリケーションの１つ以上のプロセスに対応する）。例えば、図２０Ａ～図２０Ｄにおいて、二次ディスプレイ及びＬＥＤ（例えば、三次ディスプレイ）を介して表示される表現２００４は両方とも、一次ディスプレイ２０４を介して表示される時間２００２の表現に関連付けられる。
【0238】
一部の実施形態では、第１の表現を提示している間、第２の仮想オブジェクトが第１の表現と同時に表示される。一部の実施形態では、第１の表現は、二次ディスプレイを介して表示される第２の仮想又は物理的オブジェクトの少なくとも一部を強調表示する。例えば、図１９Ｂにおいて、インジケータ１９１２は、二次ディスプレイ２０６を介して表示されるオブジェクト１９１０ａを強調表示（又は括弧）する。
【0239】
一部の実施形態では、第１の表現及び第２の表現のうちの１つ以上は、進捗インジケータを含む。一部の実施形態では、進捗インジケータは、図２３Ａ～図２３Ｂの表現２３０２に関して上述したように、デバイスに関連するメトリックの変化を示すように更新される。
【0240】
一部の実施形態では、第１の表現は、アプリケーションアイコンを含む。一部の実施形態では、プロセスは、プロセスに基づいて更新されるステータスインジケータを含むアプリケーションに関連付けられる。例えば、図１７Ａ～図１７Ｂにおいて、メッセージングアプリケーションに関連するデータの受信に応じて、ステータスインジケータ１７０２ａ１が表示される。
【0241】
一部の実施形態では、第１の表現及び第２の表現のうちの１つ以上は、１つ以上のセンサに基づいて表示される。一部の実施形態では、１つ以上のセンサは、心拍数センサを含む。一部の実施形態では、受信された情報は、心拍数センサを介して検出されたデータに対応する。一部の実施形態では、１つ以上のセンサのうちの少なくとも１つに基づいて第１の表現（例えば、図１８の２０６）及び第２の表現のうちの１つ以上を表示することの一部として、心拍数センサを介して検出されたデータに基づいてアニメーションが表示される。
【0242】
一部の実施形態では、受信された情報は、アプリケーションに対応するアラートに対応する。一部の実施形態では、第１の表現及び第２の表現のうちの１つ以上は、例えば、図１８に関連して上述したように、アプリケーションに対応するアラートに基づいて提示される。
【0243】
一部の実施形態では、受信された情報は、カレンダーイベントに対応するアラートに対応する。一部の実施形態では、第１の表現及び第２の表現のうちの１つ以上は、例えば図１８に関連して上述したように、カレンダーイベントに対応するアラートに基づいて提示される。
【0244】
一部の実施形態では、受信された情報は、顔認識アルゴリズムを介して取得されたデータに対応する。一部の実施形態では、第１の表現及び第２の表現のうちの１つ以上は、例えば図２２Ａ及び図２２ＢのＬＥＤに関して上述したように、顔認識アルゴリズムを介して取得されたデータに基づいて提示される。
【0245】
一部の実施形態では、受信された情報は、アプリケーションの状態に対応する。一部の実施形態では、第１の表現及び第２の表現のうちの１つ以上は、アプリケーションの状態に基づいて提示される。例えば、図２１Ａ～図２１Ｄにおいて、ＬＥＤは、ドラッグアンドドロップ入力２１５０が検出されたか否かに基づいて更新される。
【0246】
一部の実施形態では、受信された情報は、ユーザの検出された姿勢に対応する。一部の実施形態では、第１の表現及び第２の表現のうちの１つ以上は、デバイスを装着しているユーザの検出された姿勢に基づいて提示される。一部の実施形態では、第１の表現は、ユーザの検出された目の位置に基づいて表示される。例えば、表現は、ユーザの現在の姿勢又は目の位置を表す線であり得る。一部の実施形態では、ユーザの姿勢又は目の位置の変化を検出したことに応じて、線は、新しい姿勢（又は、代替的に、姿勢の変化）又は目の位置を示すように更新される。一部の実施形態では、線は、二次ディスプレイを介してのみ表示される。一部の実施形態では、ＬＥＤは、新しい姿勢（又は、代替的に、姿勢の変化）又は目の位置を示す様々な組み合わせで発光することができる。
【0247】
上記のように、本技術の一態様は、様々なソースから入手可能なデータを収集及び使用して、追加のディスプレイを有するデバイス（例えば、追加のディスプレイを有するデバイス）の専門リソース管理を提供して、ユーザのためにバッテリ寿命を節約し、デバイスのユーザに専門コンテンツを提供することである。本開示は、いくつかの例において、この収集されたデータが、特定の人を一意に識別するか、又は特定の人に連絡又は位置特定するために使用できる個人情報データを含み得ることを企図している。そのような個人情報データには、人口統計データ、位置ベースのデータ、電話番号、電子メールアドレス、ツイッターＩＤ、自宅の住所、ユーザの健康若しくはフィットネスのレベルに関連するデータ若しくは記録（例えば、バイタルサイン測定値、投薬情報、運動情報）、生年月日、又は任意の他の識別情報若しくは個人情報が含まれる。
【0248】
本開示は、本技術におけるそのような個人情報データの使用がユーザの利益のために使用できることを認識する。例えば、個人情報データを使用して、ユーザのデバイスのバッテリ寿命を節約することができる。したがって、例えば、そのような個人情報データの使用は、システムがリソースを適切に管理してデバイスのバッテリ寿命を節約するのに役立つ。更に、ユーザに利益をもたらす個人情報データの他の使用も、本開示によって企図される。例えば、健康及びフィットネスデータは、ユーザの全体的な健康に関する洞察を提供するために使用され得るか、又は技術を使用して健康目標を追求する個人への肯定的なフィードバックとして使用され得る。
【0249】
本開示は、そのような個人情報データの収集、分析、開示、転送、保管、又は他の使用に責任を負う事業体が、確立されたプライバシーポリシー及び／又はプライバシー慣行に従うことを企図している。特に、そのような事業体は、個人情報データのプライバシー及びセキュリティを維持するための業界又は政府の要件を満たす、又は超えると一般に認識されているプライバシーポリシー及び慣行を実施し、一貫して使用すべきである。そのようなポリシーは、ユーザが簡単に入手できる必要があり、またデータの収集及び／又は使用が変更された場合に更新する必要がある。ユーザからの個人情報は、事業体の合法的かつ合理的な使用のために収集されるべきであり、それらの合法的な使用以外に、共有又は販売されるべきではない。更に、そのような収集／共有は、ユーザのインフォームドコンセントを受け取った後に行われるべきである。更に、そのような事業体は、そのような個人情報データへのアクセスを保護及び確保し、個人情報データへのアクセスを有する他の人が、プライバシーポリシー及び手順を遵守することを保証するために、あらゆる必要な措置を講じることを考慮するべきである。更に、そのような事業体は、広く受け入れられているプライバシーポリシー及び慣行を遵守することを証明するために、サードパーティによる評価を受けることができる。更に、ポリシー及び慣行は、収集及び／又はアクセスされる特定のタイプの個人情報データに適合させ、また、管轄区域固有の考慮事項を含めて、適用可能な法律及び基準に適合させるべきである。例えば、米国では、特定の健康データの収集又はアクセスは、医療保険の携行性と責任に関する法律（ＨＩＰＡＡ）などの連邦法及び／又は州法によって規制される場合があり、一方、他の国の健康データは、他の規制及びポリシーの対象となる可能性があり、それに応じて対処する必要がある。したがって、国ごとに異なる個人データタイプに対して異なるプライバシー慣行を維持する必要がある。
【0250】
上記にもかかわらず、本開示はまた、ユーザが個人情報データの使用又は個人情報データへのアクセスを選択的にブロックする例も企図している。即ち、本開示はそのような個人情報データへのアクセスを防止又はブロックするためにハードウェア及び／又はソフトウェア要素を提供することができることを企図している。例えば、低電力デバイスのリソースを管理する場合、本技術は、ユーザが、サービスの登録中又はその後いつでも、個人情報データの収集への参加を「オプトイン」又は「オプトアウト」することを選択できるように構成することができる。別の例では、ユーザは、専門リソース管理のために、瞳孔位置、瞳孔拡張、及び／又まばたき速度などの視線追跡データを提供しないことを選択することができる。更に別の例では、ユーザは、視線追跡データが維持される時間の長さを制限するか、又はベースライン視線追跡プロファイルの開発を完全に禁止するかを選択することができる。「オプトイン」及び「オプトアウト」の選択肢を提供することに加えて、本開示は、個人情報のアクセス又は使用に関する通知を提供することを企図している。例えば、ユーザは、アプリをダウンロードするときに、自分の個人情報データがアクセスされることを通知され、その後、個人情報データがアプリによってアクセスされる直前に再度通知される場合がある。
【0251】
更に、本開示の意図は、個人情報データが、意図しない若しくは不正なアクセス又は使用のリスクを最小限に抑える方法で管理及び処理されるべきであるということである。データの収集を制限し、不要になったデータを削除することで、リスクを最小限に抑えることができる。更に、特定の健康関連アプリケーションを含めて、適用可能な場合には、データの匿名化を使用してユーザのプライバシーを保護することができる。匿名化は、必要に応じて、特定の識別子（例えば、生年月日など）を削除すること、記憶されたデータの量又は特異性を制御すること（例えば、位置データを、住所レベルではなく都市レベルで収集する）、データがどのように記憶されるかを制御すること（例えば、ユーザ間でデータを集約する）、及び／又は他の方法によって、容易にすることができる。
【0252】
したがって、本開示は、１つ以上の様々な開示された例を実施するために個人情報データの使用を広くカバーするが、本開示はまた、そのような個人情報データにアクセスする必要なしに様々な例を実施することもできることを企図している。即ち、本技術の様々な例は、そのような個人情報データのすべて又は一部が欠如しているために動作不能になることはない。例えば、低電力デバイスのリソースを管理することができ、また、ユーザに関連付けられたデバイスによって要求されているコンテンツ、デバイスを制御するシステムに利用可能な他の非個人情報、又は公開されている情報などの非個人情報データ又は必要最小限の個人情報に基づいて好みを推測することにより、コンテンツ（例えば、ステータス更新及び／又はオブジェクト）を選択してユーザに配信することができる。
【図1A】
【図1B】
【図2A】
【図2B】
【図3】
【図4】
【図5】
【図6A】
【図6B】
【図6C】
【図7】
【図8A】
【図8B】
【図9A】
【図9B】
【図10A】
【図10B】
【図11A】
【図11B】
【図12A】
【図12B】
【図13A】
【図13B】
【図14A】
【図14B】
【図15】
【図16】
【図17A】
【図17B】
【図18】
【図19A】
【図19B】
【図20A】
【図20B】
【図20C】
【図20D】
【図21A】
【図21B】
【図21C】
【図21D】
【図22A】
【図22B】
【図23A】
【図23B】
【図24A】
【図24B】
【図24C】
【図24D】
【図25】
【手続補正書】
【提出日】2023-12-15
【手続補正1】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項1】
１つ以上のプロセッサと、メモリと、１つ以上の画像センサと、視野全体に広がり、第１の解像度を有する一次ディスプレイ、及び前記一次ディスプレイに物理的及び電子的に結合されており、前記第１の解像度よりも低い第２の解像度を有する二次ディスプレイを含むヘッドマウントディスプレイ（ＨＭＤ）デバイスとを有するシステムにおいて、
第１の位置でコンピュータ生成現実（ＣＧＲ）環境内のオブジェクトを検出することと、
前記第１の位置で前記ＣＧＲ環境内の前記オブジェクトを検出したことに応じて、
前記第１の位置が、前記ＨＭＤデバイスの前記一次ディスプレイの前記視野外の第１の所定の距離内にあるという判定に従って、前記ＨＭＤデバイスの前記二次ディスプレイを介して、前記オブジェクトの第１の実際の表現と視覚的に区別される前記オブジェクトの第１の修正された表現を表示することと、を含む、方法。
第１の位置でコンピュータ生成現実（ＣＧＲ）環境内のオブジェクトを検出することと、
前記第１の位置で前記ＣＧＲ環境内の前記オブジェクトを検出したことに応じて、
前記第１の位置が、前記ＨＭＤデバイスの前記一次ディスプレイの前記視野外の第１の所定の距離内にあるという判定に従って、前記ＨＭＤデバイスの前記二次ディスプレイを介して、前記オブジェクトの第１の実際の表現と視覚的に区別される前記オブジェクトの第１の修正された表現を表示することと、を含む、方法。
【請求項2】
第１の修正された表現は、前記第１の実際の表現の視覚的コンテンツとは異なる視覚的コンテンツを有する、請求項１に記載の方法。
【請求項3】
前記第１の修正された表現は、前記第１の位置と前記ＨＭＤデバイスの前記一次ディスプレイの前記視野との間の前記距離に基づくサイズを有する、請求項１又は２に記載の方法。
【請求項4】
前記第１の修正された表現は、前記オブジェクトの前記サイズに基づく輝度を有する、請求項１から３のいずれか一項に記載の方法。
【請求項5】
前記第１の修正された表現は、前記第１の実際の表現のぼかしよりも高いぼかしを有する、請求項１から４のいずれか一項に記載の方法。
【請求項6】
前記第１の修正された表現を表示することは、アニメーションを表示することを含む、請求項１から５のいずれか一項に記載の方法。
【請求項7】
前記第１の位置で前記ＣＧＲ環境内の前記オブジェクトを検出したことに応じて、
前記第１の位置が、前記一次ディスプレイの前記視野及び前記二次ディスプレイの視野内にあるという判定に従って、
前記一次ディスプレイを介して、前記オブジェクトの第１の部分の第２の実際の表現を表示することと、
前記一次ディスプレイを介して前記オブジェクトの前記第１の部分の前記第２の実際の表現を表示している間、前記二次ディスプレイを介して、前記オブジェクトの第２の部分の第２の修正された表現を表示することと、を更に含む、請求項１から６のいずれか一項に記載の方法。
前記第１の位置が、前記一次ディスプレイの前記視野及び前記二次ディスプレイの視野内にあるという判定に従って、
前記一次ディスプレイを介して、前記オブジェクトの第１の部分の第２の実際の表現を表示することと、
前記一次ディスプレイを介して前記オブジェクトの前記第１の部分の前記第２の実際の表現を表示している間、前記二次ディスプレイを介して、前記オブジェクトの第２の部分の第２の修正された表現を表示することと、を更に含む、請求項１から６のいずれか一項に記載の方法。
【請求項8】
前記第２の実際の表現は、前記第２の修正された表現よりも高い解像度で表示される、請求項７に記載の方法。
【請求項9】
前記第２の実際の表現は、前記一次ディスプレイのエッジに隣接して表示される、請求項７又は８に記載の方法。
【請求項10】
前記一次ディスプレイを介して前記第２の実際の表現を表示することは、前記第２の実際の表現に視覚効果を適用することを含み、
前記視覚効果を適用した後の前記オブジェクトの前記第２の実際の表現は、前記視覚効果を適用する前の前記オブジェクトの前記第２の実際の表現のぼかしよりも大きいぼかしを有する、請求項７から９のいずれか一項に記載の方法。
前記視覚効果を適用した後の前記オブジェクトの前記第２の実際の表現は、前記視覚効果を適用する前の前記オブジェクトの前記第２の実際の表現のぼかしよりも大きいぼかしを有する、請求項７から９のいずれか一項に記載の方法。
【請求項11】
前記第１の位置で前記ＣＧＲ環境内の前記オブジェクトを検出したことに応じて、
前記第１の位置が、前記ＨＭＤデバイスの前記一次ディスプレイの前記視野外の、前記第１の所定の距離とは異なる第２の所定の距離内にあるという判定に従って、
前記一次ディスプレイを介して、前記オブジェクトを位置特定するための方向情報に対応する表現を表示することを更に含み、前記オブジェクトを位置特定するための前記方向情報に対応する前記表現は、前記実際の表現とは異なる、請求項１から１０のいずれか一項に記載の方法。
前記第１の位置が、前記ＨＭＤデバイスの前記一次ディスプレイの前記視野外の、前記第１の所定の距離とは異なる第２の所定の距離内にあるという判定に従って、
前記一次ディスプレイを介して、前記オブジェクトを位置特定するための方向情報に対応する表現を表示することを更に含み、前記オブジェクトを位置特定するための前記方向情報に対応する前記表現は、前記実際の表現とは異なる、請求項１から１０のいずれか一項に記載の方法。
【請求項12】
前記第１の位置で前記ＣＧＲ環境内の前記オブジェクトを検出したことに応じて、
前記第１の位置が、前記一次ディスプレイの前記視野内にあり、前記二次ディスプレイの前記視野内にないという判定に従って、
前記一次ディスプレイを介して前記第１の実際の表現を表示することと、
前記二次ディスプレイを介して前記第１の修正された表現を表示することを放棄することと、を更に含む、請求項１から１１のいずれか一項に記載の方法。
前記第１の位置が、前記一次ディスプレイの前記視野内にあり、前記二次ディスプレイの前記視野内にないという判定に従って、
前記一次ディスプレイを介して前記第１の実際の表現を表示することと、
前記二次ディスプレイを介して前記第１の修正された表現を表示することを放棄することと、を更に含む、請求項１から１１のいずれか一項に記載の方法。
【請求項13】
請求項１から１２のいずれか一項に記載の方法をコンピュータに実行させるコンピュータプログラム。
【請求項14】
請求項１３に記載のコンピュータプログラムを記憶するメモリと、
前記メモリに記憶された前記コンピュータプログラムを実行する機能を有する１つ以上のプロセッサと、を備えるヘッドマウントディスプレイ（ＨＭＤ）デバイスであって、
１つ以上の画像センサと、
視野全体に広がり、第１の解像度を有する一次ディスプレイと、
前記一次ディスプレイに物理的及び電子的に結合されており、前記第１の解像度よりも低い第２の解像度を有する二次ディスプレイと、通信を行うヘッドマウントディスプレイ（ＨＭＤ）デバイス。
前記メモリに記憶された前記コンピュータプログラムを実行する機能を有する１つ以上のプロセッサと、を備えるヘッドマウントディスプレイ（ＨＭＤ）デバイスであって、
１つ以上の画像センサと、
視野全体に広がり、第１の解像度を有する一次ディスプレイと、
前記一次ディスプレイに物理的及び電子的に結合されており、前記第１の解像度よりも低い第２の解像度を有する二次ディスプレイと、通信を行うヘッドマウントディスプレイ（ＨＭＤ）デバイス。
【請求項15】
１つ以上の画像センサと、
視野全体に広がり、第１の解像度を有する一次ディスプレイと、
前記一次ディスプレイに物理的及び電子的に結合されており、前記第１の解像度よりも低い第２の解像度を有する二次ディスプレイと、通信を行うように構成されているヘッドマウントディスプレイ（ＨＭＤ）デバイスであって、
請求項１から１２のいずれか一項に記載の方法を実行する手段を備えるヘッドマウントディスプレイ（ＨＭＤ）デバイス。
視野全体に広がり、第１の解像度を有する一次ディスプレイと、
前記一次ディスプレイに物理的及び電子的に結合されており、前記第１の解像度よりも低い第２の解像度を有する二次ディスプレイと、通信を行うように構成されているヘッドマウントディスプレイ（ＨＭＤ）デバイスであって、
請求項１から１２のいずれか一項に記載の方法を実行する手段を備えるヘッドマウントディスプレイ（ＨＭＤ）デバイス。
【外国語明細書】