特許 7665074 仮想環境内で仮想オブジェクトを提示するためのデバイス、方法、及びグラフィカルユーザインタフェース

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2025-04-10

(45)【発行日】2025-04-18

(54)【発明の名称】仮想環境内で仮想オブジェクトを提示するためのデバイス、方法、及びグラフィカルユーザインタフェース

(51)【国際特許分類】

   G06F 3/0481 20220101AFI20250411BHJP

   G06F 3/01 20060101ALI20250411BHJP

【ＦＩ】

G06F3/0481

G06F3/01 510

【請求項の数】 20

【外国語出願】

(21)【出願番号】P 2024070736

(22)【出願日】2024-04-24

(65)【公開番号】P2024157550

(43)【公開日】2024-11-07

【審査請求日】2024-05-20

(31)【優先権主張番号】63/498,239

(32)【優先日】2023-04-25

(33)【優先権主張国・地域又は機関】US

(31)【優先権主張番号】18/429,294

(32)【優先日】2024-01-31

(33)【優先権主張国・地域又は機関】US

(31)【優先権主張番号】18/429,301

(32)【優先日】2024-01-31

(33)【優先権主張国・地域又は機関】US

(73)【特許権者】

【識別番号】503260918

【氏名又は名称】アップル インコーポレイテッド

【氏名又は名称原語表記】Ａｐｐｌｅ Ｉｎｃ．

【住所又は居所原語表記】Ｏｎｅ Ａｐｐｌｅ Ｐａｒｋ Ｗａｙ，Ｃｕｐｅｒｔｉｎｏ， Ｃａｌｉｆｏｒｎｉａ ９５０１４， Ｕ．Ｓ．Ａ．

(74)【代理人】

【識別番号】110003281

【氏名又は名称】弁理士法人大塚国際特許事務所

(72)【発明者】

【氏名】カルデロン， タイラー アール．

(72)【発明者】

【氏名】セグイン， ショーン エル．

(72)【発明者】

【氏名】パズミノ， ロレーナ エス．

(72)【発明者】

【氏名】シャリフィアン， アリヤン

【審査官】槙 俊秋

(56)【参考文献】

【文献】欧州特許出願公開第０４１５５８６７（ＥＰ，Ａ１）

【文献】米国特許出願公開第２０１０／０２９３５０４（ＵＳ，Ａ１）

【文献】米国特許出願公開第２０２２／０２５３１２５（ＵＳ，Ａ１）

【文献】米国特許出願公開第２０２３／０１００６８９（ＵＳ，Ａ１）

【文献】米国特許出願公開第２０２３／００９４５２２（ＵＳ，Ａ１）

【文献】米国特許出願公開第２０２１／０１５８６２４（ＵＳ，Ａ１）

【文献】米国特許出願公開第２０１８／０２７５７５３（ＵＳ，Ａ１）

【文献】米国特許出願公開第２０１８／００７７３８３（ＵＳ，Ａ１）

【文献】国際公開第２０２２／２０８７９７（ＷＯ，Ａ１）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｇ０６Ｆ ３／０１－３／０４８９５

(57)【特許請求の範囲】

【請求項1】

第１の電子デバイスのディスプレイ及び１つ以上の入力デバイスと通信を行う、前記第１の電子デバイスにおいて、
前記ディスプレイを介して、前記第１の電子デバイス上で実行中のアプリケーションの第１のユーザインタフェースを含むコンピュータ生成環境を提示している間に、第２の電子デバイスから、前記第２の電子デバイスの第２のユーザインタフェースを表す表示データを受信することと、
前記表示データを受信したことに応じて、前記ディスプレイを介して、前記表示データに基づいて前記第２の電子デバイスの前記第２のユーザインタフェースの表現を提示することと、
前記アプリケーションの前記第１のユーザインタフェース及び前記第２の電子デバイスの前記第２のユーザインタフェースの前記表現を提示している間に、ユーザ入力に対応する個別のイベントを検出することと、
前記個別のイベントを検出したことに応じて、
前記個別のイベントが検出されたときに前記第１の電子デバイスのユーザの視線が前記第２の電子デバイスの前記第２のユーザインタフェースの前記表現に向けられているとの判定に従って、前記第２の電子デバイスに、前記個別のイベントに基づいて前記第２の電子デバイスの前記第２のユーザインタフェースに向けられた第１の動作を実行させることと、
前記視線が前記第１の電子デバイス上で実行中の前記アプリケーションの前記第１のユーザインタフェースに向けられているとの判定に従って、前記個別のイベントに基づいて前記第１のユーザインタフェースに向けられた第２の動作を実行することと、
を含む、方法。

【請求項2】

前記個別のイベントを検出することは、前記第２の電子デバイスと通信を行う１つ以上の入力デバイスを介して受信された個別の入力の指示を検出することを含む、請求項１に記載の方法。

【請求項3】

前記個別の入力の指示を検出したことに応じて、
前記指示が検出されたときに前記視線が前記第２の電子デバイスの前記第２のユーザインタフェースの前記表現に向けられているとの判定に従って、前記視線のロケーションに関する視線データを前記第２の電子デバイスに送信することを更に含み、前記第２の電子デバイスは、前記個別の入力に対応する入力データを前記第１の電子デバイスに送信することなく、前記視線の前記ロケーションに関する前記視線データに従って前記第１の動作を実行する、
請求項２に記載の方法。

【請求項4】

前記個別の入力の指示を検出したことに応じて、
前記指示が検出されたときに前記視線が前記第２の電子デバイスの前記第２のユーザインタフェースの前記表現に向けられているとの判定に従って、前記視線のロケーションに関する視線データを、前記第２の電子デバイスであって、前記視線の前記ロケーションに関する前記視線データに従って前記第１の動作を実行する、前記第２の電子デバイスに送信することと、
前記第１の動作が前記第２の電子デバイスにおいて実行される際に従う前記第２の電子デバイスからの前記個別の入力に対応する入力データを受信することと、
を更に含む、請求項２に記載の方法。

【請求項5】

前記個別の入力の指示を検出したことに応じて、
前記指示が検出されたときに前記視線が第１の電子デバイス上で実行中の前記アプリケーションの前記第１のユーザインタフェースに向けられているとの判定に従って、前記個別の入力に対応する入力データを前記第２の電子デバイスに送信することなく、前記個別の入力に従って前記第１のユーザインタフェースに向けられた前記第２の動作を実行すること、
を更に含む、請求項２に記載の方法。

【請求項6】

前記個別のイベントを検出することは、前記第１の電子デバイスの前記１つ以上の入力デバイスを介して、前記個別の入力を検出することを含む、請求項１に記載の方法。

【請求項7】

前記個別の入力を検出したことに応じて、
前記個別の入力が検出されたときに前記視線が前記第２の電子デバイスの前記第２のユーザインタフェースの前記表現に向けられているとの判定に従って、前記個別の入力に対応する入力データを前記第２の電子デバイスに送信すること、
を更に含む、請求項６に記載の方法。

【請求項8】

前記個別の入力を検出したことに応じて、
前記個別の入力が検出されたときに前記視線が前記第１の電子デバイス上で実行中の前記アプリケーションの前記第１のユーザインタフェースに向けられているとの判定に従って、前記個別の入力に対応する入力データを前記第２の電子デバイスに送信することなく、前記個別の入力に従って前記第１のユーザインタフェースに向けられた前記第２の動作を実行すること、
を更に含む、請求項６に記載の方法。

【請求項9】

前記第２の電子デバイスに前記第１の動作を実行させることは、前記個別のイベントが検出されたときに前記視線が前記第２の電子デバイスの前記第２のユーザインタフェースの前記表現に向けられたことを示す情報を含む視線データを前記第２の電子デバイスに送信することを含む、請求項１に記載の方法。

【請求項10】

前記情報は、前記第２のユーザインタフェースの前記表現内の前記視線のロケーションに対応するポジション情報を含む、請求項９に記載の方法。

【請求項11】

前記第２の電子デバイスが前記第２のユーザインタフェースを表示していない、請求項１に記載の方法。

【請求項12】

前記第２の電子デバイスに前記第２のユーザインタフェースに向けられた前記第１の動作を実行させることは、前記第２のユーザインタフェースの視覚的外観を更新することを含み、前記方法が、
前記第２の電子デバイスに前記第２のユーザインタフェースに向けられた前記第１の動作を実行させた後に、前記第２の電子デバイスから、前記第２の電子デバイスの前記第２のユーザインタフェースの前記視覚的外観に対する１つ以上の更新を表す更新された表示データを受信することと、
前記更新された表示データを受信したことに応じて、前記更新された表示データに基づいて前記第２のユーザインタフェースの前記表現の表示を更新することと、を更に含む、請求項１に記載の方法。

【請求項13】

方法であって、前記第２の電子デバイスが前記第２のユーザインタフェースを表示しており、前記方法が、
前記第２の電子デバイスから、前記第２の電子デバイスの前記第２のユーザインタフェースを表す前記表示データを受信する前に、前記ディスプレイを介して、前記コンピュータ生成環境に、前記第２の電子デバイスの表現に関連付けられた第１のアフォーダンスを提示することと、
前記第１のアフォーダンスを含む前記コンピュータ生成環境を提示している間に、前記１つ以上の入力デバイスを介して、前記第１のアフォーダンスの選択に対応する入力を受信することと、
前記入力を受信したことに応じて、前記コンピュータ生成環境において、前記表示データに基づいて前記第２の電子デバイスの前記第２のユーザインタフェースの前記表現を提示することと、を更に含む、請求項１に記載の方法。

【請求項14】

前記入力を受信したことに応じて、前記第２の電子デバイスに、第２のユーザインタフェースの表示を停止させること、
を更に含む、請求項１３に記載の方法。

【請求項15】

前記コンピュータ生成環境において前記第２の電子デバイスの前記表現に関連付けられた前記第１のアフォーダンスを表示する前に、前記第１の電子デバイスが前記第２の電子デバイスと通信するように、前記第１の電子デバイスと前記第２の電子デバイスとをペアリングすること、
を更に含む、請求項１３に記載の方法。

【請求項16】

前記コンピュータ生成環境を提示している間に、前記第１の電子デバイスのユーザからの前記第１の電子デバイスの関連付け解除を検出することと、
前記第１の電子デバイスの前記ユーザからの関連付け解除を検出したことに応じて、
前記第２の電子デバイスに、前記関連付け解除の指示であって、前記第２の電子デバイスに前記第２のユーザインタフェースを表示させる、指示を送信することと、
を更に含む、請求項１に記載の方法。

【請求項17】

前記第１の電子デバイスと前記第１の電子デバイスの前記ユーザとの再関連付けを検出することと、
前記第１の電子デバイスと前記ユーザとの前記再関連付けを検出したことに応じて、
前記コンピュータ生成環境を提示することと、
前記再関連付けの指示を前記第２の電子デバイスに送信することと、
前記コンピュータ生成環境を提示している間に、前記第２のユーザインタフェースの現在の状態を表す更新された表示データを前記第２の電子デバイスから受信することと、
前記更新された表示データを受信したことに応じて、
前記第２のユーザインタフェースの前記現在の状態に基づいて、前記コンピュータ生成環境において前記第２のユーザインタフェースの前記表現を再表示することと、
を更に含む、請求項１６に記載の方法。

【請求項18】

前記コンピュータ生成環境を提示している間に、第３の電子デバイスのユーザとの通信セッションに参加するための招待を受信することと、
前記招待を受信したことに応じて、
前記招待が前記第１の電子デバイスの前記ユーザによって受け入れられたという判定に従って、前記第３の電子デバイスの前記ユーザに対応するアバターと前記第１のユーザインタフェースとを同時に表示することを含む、前記第３の電子デバイスの前記ユーザとの前記通信セッションに入ることと、
を更に含む、請求項１に記載の方法。

【請求項19】

電子デバイスであって、
１つ以上のプロセッサと、
メモリと、
１つ以上のプログラムと、を備え、前記１つ以上のプログラムが、前記メモリに記憶され、前記１つ以上のプロセッサによって実行されるように構成されており、前記１つ以上のプログラムが、請求項１から１８のいずれか１項に記載の方法を実行するための命令を含む、電子デバイス。

【請求項20】

１つ以上のプログラムを記憶している非一時的コンピュータ可読記憶媒体であって、前記１つ以上のプログラムが、命令を含み、前記命令が、電子デバイスの１つ以上のプロセッサによって実行されると、前記電子デバイスに、請求項１から１８のいずれか１項に記載の方法を実行させる、非一時的コンピュータ可読記憶媒体。

【発明の詳細な説明】

【関連出願へのクロスリファレンス】

【0001】

（関連出願の相互参照）
本出願は、２０２３年４月２５日に出願された米国仮特許出願第６３／４９８，２３９号、２０２４年１月３１日に出願された米国特許出願第１８／４２９，２９４号、及び２０２４年１月３１日に出願された米国特許出願第１８／４２９，３０１号の利益を主張し、その内容は全ての目的のためにその全体が参照により本明細書に組み込まれる。

【技術分野】

【0002】

本発明は、概して、電子デバイスのユーザインタフェースの表現を表示し、電子デバイスのユーザインタフェースの表現との対話を容易にするシステム及び方法に関する。

【背景技術】

【0003】

携帯電話、タブレット、タッチパッド、ポータブル又はデスクトップコンピュータ、ポータブルメディアプレーヤ、及びウェアラブルデバイスなど、多くのタイプのコンピューティングシステムが利用可能である。コンピューティングシステムは、ユーザ対話を可能にするためのディスプレイ又はタッチスクリーンを含み得る。しかしながら、これらのコンピューティングシステムは、ディスプレイ又はタッチスクリーンの物理的制約によって制限される。

【発明の概要】

【0004】

本開示の一部の例は、３次元環境における電子デバイスのユーザインタフェースの表現の表示及びそれとの対話を容易にするためのシステム及び方法を対象とする。一部の例では、ユーザインタフェースの表現は、３次元環境内の電子デバイスの仮想拡張ディスプレイ内に表示される。一部の例では、第１の電子デバイスは、第１の電子デバイスのディスプレイ及び１つ以上の入力デバイスと通信していてもよい。一部の例では、第１の電子デバイスは、１つ以上の入力デバイスを介して、第１の電子デバイスを取り囲む現実世界環境の少なくとも一部をキャプチャし、現実世界環境は、第２の電子デバイスの第１のユーザインタフェースの第１の表現を表示するように構成されたディスプレイを有する第２の電子デバイスを含む。一部の例では、第２の電子デバイスは第１の電子デバイスと通信している。一部の例では、第１の電子デバイスは、ディスプレイを介して、現実世界環境のキャプチャされた部分の表現と、第２の電子デバイスの表現に関連付けられた第１のアフォーダンスとを含むコンピュータ生成環境を提示する。一部の例では、第１のアフォーダンスは、第１の電子デバイスのディスプレイの所定の領域に表示される。一部の例では、現実世界環境のキャプチャされた部分の表現及び第１のアフォーダンスを含むコンピュータ生成環境を提示している間に、第１の電子デバイスは、１つ以上の入力デバイスを介して、第１のアフォーダンスの選択に対応する入力を受信する。一部の例では、入力を受信したことに応じて、第１の電子デバイスは、コンピュータ生成環境において、第１のユーザインタフェースの第１の表現とは異なる、第２の電子デバイスの第２のユーザインタフェースの第２の表現を提示する。一部の例では、第２のユーザインタフェースの第２の表現は、コンピュータ生成環境における仮想拡張ディスプレイに表示される。

【0005】

一部の例では、第２のユーザインタフェースの第２の表現を含むコンピュータ生成環境を提示している間に、第１の電子デバイスは、第２の電子デバイスの１つ以上の入力デバイスを介して受信された第１の個別の入力の第１の指示を検出する。一部の例では、第１の指示を検出したことに応じて、第１の電子デバイスのユーザの視線が第１のユーザインタフェースの第１の表現に向けられているという判定に従って、第２の電子デバイスに、第１の個別の入力に従って第１のユーザインタフェースに向けられた第１の動作を実行させる。一部の例では、視線が第２のユーザインタフェースの第２の表現に向けられているとの判定に従って、第１の個別の入力に従って第２のユーザインタフェースの第２の表現に向けられた第２の動作を実行する。

【0006】

これらの例の全説明は、「図面」及び「詳細な説明」に記載され、この「発明の概要」は、本開示の範囲をいかなるように限定するものでもないことを理解されたい。

【図面の簡単な説明】

【0007】

本明細書で説明する様々な例の理解を向上させるために、以下の図面と共に以下の「発明を実施するための形態」を参照すべきである。類似の参照番号は、図面全体を通して対応する部分を指す。

【0008】

【図1】本開示の一部の例による、拡張現実環境を提示する電子デバイスを示す。

【0009】

【図2】本開示の実施形態によるシステム又はデバイスの例示的なアーキテクチャのブロック図を示す。

【0010】

【図3A】本開示の一部の例による、３次元環境において電子デバイスのユーザインタフェースの表現の表示を開始するための例示的な対話を示す。

【図3B】本開示の一部の例による、３次元環境において電子デバイスのユーザインタフェースの表現の表示を開始するための例示的な対話を示す。

【図3C】本開示の一部の例による、３次元環境において電子デバイスのユーザインタフェースの表現の表示を開始するための例示的な対話を示す。

【図3D】本開示の一部の例による、３次元環境において電子デバイスのユーザインタフェースの表現の表示を開始するための例示的な対話を示す。

【図3E】本開示の一部の例による、３次元環境において電子デバイスのユーザインタフェースの表現の表示を開始するための例示的な対話を示す。

【図3F】本開示の一部の例による、３次元環境において電子デバイスのユーザインタフェースの表現の表示を開始するための例示的な対話を示す。

【図3G】本開示の一部の例による、３次元環境において電子デバイスのユーザインタフェースの表現の表示を開始するための例示的な対話を示す。

【図3H】本開示の一部の例による、３次元環境において電子デバイスのユーザインタフェースの表現の表示を開始するための例示的な対話を示す。

【図3I】本開示の一部の例による、３次元環境において電子デバイスのユーザインタフェースの表現の表示を開始するための例示的な対話を示す。

【0011】

【図4A】本開示の一部の例による、３次元環境において第２の電子デバイスのユーザインタフェースの表現との対話を容易にする第１の電子デバイスの例を示す。

【図4B】本開示の一部の例による、３次元環境において第２の電子デバイスのユーザインタフェースの表現との対話を容易にする第１の電子デバイスの例を示す。

【図4C】本開示の一部の例による、３次元環境において第２の電子デバイスのユーザインタフェースの表現との対話を容易にする第１の電子デバイスの例を示す。

【図4D】本開示の一部の例による、３次元環境において第２の電子デバイスのユーザインタフェースの表現との対話を容易にする第１の電子デバイスの例を示す。

【図4E】本開示の一部の例による、３次元環境において第２の電子デバイスのユーザインタフェースの表現との対話を容易にする第１の電子デバイスの例を示す。

【図4F】本開示の一部の例による、３次元環境において第２の電子デバイスのユーザインタフェースの表現との対話を容易にする第１の電子デバイスの例を示す。

【図4G】本開示の一部の例による、３次元環境において第２の電子デバイスのユーザインタフェースの表現との対話を容易にする第１の電子デバイスの例を示す。

【図4H】本開示の一部の例による、３次元環境において第２の電子デバイスのユーザインタフェースの表現との対話を容易にする第１の電子デバイスの例を示す。

【図4I】本開示の一部の例による、３次元環境において第２の電子デバイスのユーザインタフェースの表現との対話を容易にする第１の電子デバイスの例を示す。

【図4J】本開示の一部の例による、３次元環境において第２の電子デバイスのユーザインタフェースの表現との対話を容易にする第１の電子デバイスの例を示す。

【図4K】本開示の一部の例による、３次元環境において第２の電子デバイスのユーザインタフェースの表現との対話を容易にする第１の電子デバイスの例を示す。

【図4L】本開示の一部の例による、３次元環境において第２の電子デバイスのユーザインタフェースの表現との対話を容易にする第１の電子デバイスの例を示す。

【図4M】本開示の一部の例による、３次元環境において第２の電子デバイスのユーザインタフェースの表現との対話を容易にする第１の電子デバイスの例を示す。

【図4N】本開示の一部の例による、３次元環境において第２の電子デバイスのユーザインタフェースの表現との対話を容易にする第１の電子デバイスの例を示す。

【図4O】本開示の一部の例による、３次元環境において第２の電子デバイスのユーザインタフェースの表現との対話を容易にする第１の電子デバイスの例を示す。

【0012】

【図5A】本開示の一部の例による、マルチユーザ通信セッション内の電子デバイスのユーザインタフェースの表現との例示的な対話を示す。

【図5B】本開示の一部の例による、マルチユーザ通信セッション内の電子デバイスのユーザインタフェースの表現との例示的な対話を示す。

【図5C】本開示の一部の例による、マルチユーザ通信セッション内の電子デバイスのユーザインタフェースの表現との例示的な対話を示す。

【図5D】本開示の一部の例による、マルチユーザ通信セッション内の電子デバイスのユーザインタフェースの表現との例示的な対話を示す。

【図5E】本開示の一部の例による、マルチユーザ通信セッション内の電子デバイスのユーザインタフェースの表現との例示的な対話を示す。

【図5F】本開示の一部の例による、マルチユーザ通信セッション内の電子デバイスのユーザインタフェースの表現との例示的な対話を示す。

【図5G】本開示の一部の例による、マルチユーザ通信セッション内の電子デバイスのユーザインタフェースの表現との例示的な対話を示す。

【0013】

【図6A】本開示の一部の例による、第２の電子デバイスのユーザインタフェースの表現と第１の電子デバイスのユーザインタフェースとの対話を容易にする第１の電子デバイスの例を示す。

【図6B】本開示の一部の例による、第２の電子デバイスのユーザインタフェースの表現と第１の電子デバイスのユーザインタフェースとの対話を容易にする第１の電子デバイスの例を示す。

【図6C】本開示の一部の例による、第２の電子デバイスのユーザインタフェースの表現と第１の電子デバイスのユーザインタフェースとの対話を容易にする第１の電子デバイスの例を示す。

【図6D】本開示の一部の例による、第２の電子デバイスのユーザインタフェースの表現と第１の電子デバイスのユーザインタフェースとの対話を容易にする第１の電子デバイスの例を示す。

【図6E】本開示の一部の例による、第２の電子デバイスのユーザインタフェースの表現と第１の電子デバイスのユーザインタフェースとの対話を容易にする第１の電子デバイスの例を示す。

【図6F】本開示の一部の例による、第２の電子デバイスのユーザインタフェースの表現と第１の電子デバイスのユーザインタフェースとの対話を容易にする第１の電子デバイスの例を示す。

【図6G】本開示の一部の例による、第２の電子デバイスのユーザインタフェースの表現と第１の電子デバイスのユーザインタフェースとの対話を容易にする第１の電子デバイスの例を示す。

【図6H】本開示の一部の例による、第２の電子デバイスのユーザインタフェースの表現と第１の電子デバイスのユーザインタフェースとの対話を容易にする第１の電子デバイスの例を示す。

【図6I】本開示の一部の例による、第２の電子デバイスのユーザインタフェースの表現と第１の電子デバイスのユーザインタフェースとの対話を容易にする第１の電子デバイスの例を示す。

【図6J】本開示の一部の例による、第２の電子デバイスのユーザインタフェースの表現と第１の電子デバイスのユーザインタフェースとの対話を容易にする第１の電子デバイスの例を示す。

【図6K】本開示の一部の例による、第２の電子デバイスのユーザインタフェースの表現と第１の電子デバイスのユーザインタフェースとの対話を容易にする第１の電子デバイスの例を示す。

【0014】

【図7A】本開示の一部の例による、３次元環境における電子デバイスのユーザインタフェースの表現の表示及びそれとの対話を容易にするための例示的なプロセスを示す流れ図である。

【図7B】本開示の一部の例による、３次元環境における電子デバイスのユーザインタフェースの表現の表示及びそれとの対話を容易にするための例示的なプロセスを示す流れ図である。

【0015】

【図8】本開示の一部の例による、３次元環境における２つの電子デバイス間のユーザインタフェースの表現の表示及び対話を容易にするための例示的なプロセスを示す流れ図である。

【発明を実施するための形態】

【0016】

本開示の一部の例は、３次元環境における電子デバイスのユーザインタフェースの表現の表示及びそれとの対話を容易にするためのシステム及び方法を対象とする。一部の例では、ユーザインタフェースの表現は、３次元環境内の電子デバイスの仮想拡張ディスプレイ内に表示される。一部の例では、第１の電子デバイスは、第１の電子デバイスのディスプレイ及び１つ以上の入力デバイスと通信していてもよい。一部の例では、第１の電子デバイスは、１つ以上の入力デバイスを介して、第１の電子デバイスを取り囲む現実世界環境の少なくとも一部をキャプチャし、現実世界環境は、第２の電子デバイスの第１のユーザインタフェースの第１の表現を表示するように構成されたディスプレイを有する第２の電子デバイスを含む。一部の例では、第２の電子デバイスは第１の電子デバイスと通信している。一部の例では、第１の電子デバイスは、ディスプレイを介して、現実世界環境のキャプチャされた部分の表現と、第２の電子デバイスの表現に関連付けられた第１のアフォーダンスとを含むコンピュータ生成環境を提示する。一部の例では、第１のアフォーダンスは、第１の電子デバイスのディスプレイの所定の領域に表示される。一部の例では、現実世界環境のキャプチャされた部分の表現及び第１のアフォーダンスを含むコンピュータ生成環境を提示している間に、第１の電子デバイスは、１つ以上の入力デバイスを介して、第１のアフォーダンスの選択に対応する入力を受信する。一部の例では、入力を受信したことに応じて、第１の電子デバイスは、コンピュータ生成環境において、第１のユーザインタフェースの第１の表現とは異なる、第２の電子デバイスの第２のユーザインタフェースの第２の表現を提示する。一部の例では、第２のユーザインタフェースの第２の表現は、コンピュータ生成環境における仮想拡張ディスプレイに表示される。

【0017】

一部の例では、第２のユーザインタフェースの第２の表現を含むコンピュータ生成環境を提示している間に、第１の電子デバイスは、第２の電子デバイスの１つ以上の入力デバイスを介して受信された第１の個別の入力の第１の指示を検出する。一部の例では、第１の指示を検出したことに応じて、第１の電子デバイスのユーザの視線が第１のユーザインタフェースの第１の表現に向けられているという判定に従って、第２の電子デバイスに、第１の個別の入力に従って第１のユーザインタフェースに向けられた第１の動作を実行させる。一部の例では、視線が第２のユーザインタフェースの第２の表現に向けられているとの判定に従って、第１の個別の入力に従って第２のユーザインタフェースの第２の表現に向けられた第２の動作を実行する。

【0018】

一部の例では、現実世界の電子デバイスのユーザインタフェースを表示するように構成された３次元（例えば、コンピュータ生成）環境において仮想拡張ディスプレイを表示することは、３次元環境における１つ以上のユーザインタフェースオブジェクトとの対話を含み得る。例えば、３次元環境における仮想拡張ディスプレイの表示の開始は、３次元環境に表示された１つ以上の仮想オプション／アフォーダンスとの対話を含むことができる。一部の例では、ユーザの視線は、３次元環境において仮想拡張ディスプレイの表示を開始するときに、選択の対象となる１つ以上の仮想オプション／アフォーダンスを識別するための入力として、電子デバイスによってトラッキングされてもよい。例えば、視線を使用して、別の選択入力を使用する選択の対象となる１つ以上の仮想オプション／アフォーダンスを識別することができる。一部の例では、仮想オプション／アフォーダンスは、電子デバイスと通信している入力デバイスを介して検出されるハンドトラッキング入力を使用して選択されてもよい。一部の例では、３次元環境内に表示されるオブジェクトは、入力デバイスを介して検出される移動入力に従って、３次元環境内で移動及び／又は向き変更されてもよい。

【0019】

図１は、本開示の一部の例による拡張現実（ＸＲ）環境（例えば、コンピュータ生成環境）を提示する電子デバイス１０１を示す。一部の例では、電子デバイス１０１は、タブレットコンピュータ、ラップトップコンピュータ、スマートフォン、又はヘッドマウントディスプレイなどのハンドヘルド又はモバイルデバイスである。電子デバイス１０１の例は、図２のアーキテクチャブロック図を参照して以下に説明される。図１に示すように、電子デバイス１０１、テーブル１０６、コンピュータ１１５、及びフロアランプ１３２は、物理環境１００内に位置する。物理環境は、物理的表面（例えば、床、壁）又は物理的オブジェクト（例えば、テーブル、ランプなど）などの物理的特徴を含んでもよい。一部の例では、電子デバイス１０１は、テーブル１０６、コンピュータ１１５、及びフロアランプ１３２（電子デバイス１０１の視野内に示される）を含む物理環境１００の画像をキャプチャするように構成され得る。一部の例では、トリガに応じて、電子デバイス１０１は、物理環境１００内に存在しないが、現実世界テーブル１０６のコンピュータ生成表現１０６’の上部に配置された（例えば、固定された）コンピュータ生成環境内に表示される仮想オブジェクト１０４（例えば、２次元仮想コンテンツ）を、（例えば、図１に示される矩形によって表される）コンピュータ生成環境内に表示するように構成され得る。例えば、仮想オブジェクト１０４は、物理環境１００内のテーブル１０６の平面を検出したこと（又は何らかの他のトリガ）に応じて、電子デバイス１０１を介して表示される現実世界コンピュータ１１５のコンピュータ生成表現１０６’の隣のコンピュータ生成環境内のテーブルのコンピュータ生成表現１１５’の表面上に表示され得る。

【0020】

仮想オブジェクト１０４は、代表的な仮想オブジェクトであり、１つ以上の（例えば、２次元又は３次元オブジェクトなどの様々な次元の）異なる仮想オブジェクトが、２次元又は３次元コンピュータ生成環境に含まれ、レンダリングされ得ることを理解されたい。例えば、仮想オブジェクトは、コンピュータ生成環境内に表示されるアプリケーション又はユーザインタフェースを表すことができる。一部の例では、仮想オブジェクトは、アプリケーションに対応する、及び／又はコンピュータ生成環境においてユーザインタフェースを介して表示されるコンテンツを表すことができる。一部の例では、ユーザインタフェースは、物理環境１００内のコンピュータ１１５（の、例えば、ディスプレイな）を介して表示されるようにも構成されたユーザインタフェースである。一部の例では、仮想オブジェクト１０４は、ユーザが仮想オブジェクト１０４に仮想的にタッチ、タップ、移動、回転、又は他の方法で対話し得るように、対話型であり、ユーザ入力に応答するように任意選択的に構成される。加えて、本明細書で説明する３Ｄ環境（又は３Ｄ仮想オブジェクト）は、電子デバイスにおいて投影又は提示される３Ｄ環境（又は３次元仮想オブジェクト）の表現であり得ることを理解されたい。

【0021】

以下の説明では、表示生成構成要素及び１つ以上の入力デバイスと通信する電子デバイスについて説明する。電子デバイスは、任意選択的に、タッチ感知面、物理キーボード、マウス、ジョイスティック、ハンドトラッキングデバイス、アイトラッキングデバイス、スタイラスなどの１つ以上の他の物理ユーザインタフェースデバイスと通信することを理解されたい。更に、上述したように、説明した電子デバイス、ディスプレイ、及びタッチ感知面は、任意選択的に、２つ以上のデバイスに分散されることを理解されたい。したがって、本開示で使用する場合、電子デバイス上に又は電子デバイスにより表示された情報を任意選択的に使用して、別のディスプレイデバイス（タッチ感知式又は非タッチ感知式）上の表示用電子デバイスにより出力された情報を説明する場合がある。同様に、本開示で使用されるように、電子デバイス（例えば、電子デバイスのタッチ感知面上で受信されたタッチ入力、又はスタイラスの表面上で受信されたタッチ入力）で受信された入力は、電子デバイスが入力情報を受信する別個の入力デバイスで受信された入力を記述するために任意選択的に使用される。

【0022】

そのデバイスは、一般的に、描画アプリケーション、プレゼンテーションアプリケーション、ワードプロセッシングアプリケーション、ウェブサイト作成アプリケーション、ディスクオーサリングアプリケーション、スプレッドシートアプリケーション、ゲームアプリケーション、電話アプリケーション、ビデオ会議アプリケーション、電子メールアプリケーション、インスタントメッセージングアプリケーション、トレーニングサポートアプリケーション、写真管理アプリケーション、デジタルカメラアプリケーション、デジタルビデオカメラアプリケーション、ウェブブラウジングアプリケーション、デジタル音楽再生アプリケーション、テレビチャンネル閲覧アプリケーション、及び／又はデジタルビデオ再生アプリケーションのうちの１つ以上など、様々なアプリケーションをサポートする。

【0023】

図２は、本開示の例によるシステム又はデバイス２００の例示的なアーキテクチャのブロック図を示す。一部の例では、システム２００は、携帯電話（例えば、スマートフォン）、タブレットコンピュータ、ラップトップコンピュータ、デスクトップコンピュータ、ヘッドマウントディスプレイ、別のデバイスと通信する補助デバイスなどのモバイルデバイスである。システム２００は、任意選択的に、様々なセンサ（例えば、１つ以上のハンドトラッキングセンサ（単数又は複数）、１つ以上のロケーションセンサ（単数又は複数）、１つ以上の画像センサ（単数又は複数）、１つ以上のタッチ感知面（単数又は複数）、１つ以上の動き及び／又は向きセンサ（単数又は複数）、１つ以上のアイトラッキングセンサ（単数又は複数）、１つ以上のマイクロフォン（単数又は複数）又は他の音声センサ（単数又は複数）など）、１つ以上の表示生成構成要素（単数又は複数）、１つ以上のスピーカ（単数又は複数）、１つ以上のプロセッサ（単数又は複数）、１つ以上のメモリ、及び／又は通信回路を含む。システム２００の上述の構成要素間の通信には、任意選択的に、１つ以上の通信バスが使用される。

【0024】

一部の例では、図２に示すように、システム／デバイス２００は、複数のデバイス間で分割され得る。例えば、第１のデバイス２３０は、プロセッサ（単数又は複数）２１８Ａ、１つ以上のメモリ２２０Ａ、通信回路２２２Ａ、タッチ感知面（単数又は複数）２１６Ａ、及び通信バス２０８Ａを介して任意選択的に通信する表示生成構成要素（単数又は複数）又はディスプレイ（単数又は複数）２１４Ａを任意選択的に含む。第２のデバイス２４０（例えば、電子デバイス１０１に対応する）は、任意選択的に、様々なセンサ（例えば、１つ以上のハンドトラッキングセンサ（単数又は複数）２０２、１つ以上のロケーションセンサ（単数又は複数）２０４、１つ以上の画像センサ（単数又は複数）２０６、１つ以上のタッチ感知面（単数又は複数）２１６Ｂ、１つ以上の動き及び／又は向きセンサ（単数又は複数）２１０、１つ以上のアイトラッキングセンサ（単数又は複数）２１２、１つ以上のマイクロフォン（単数又は複数）２１３又は他の音声センサ（単数又は複数）など）、１つ以上の表示生成構成要素（単数又は複数）２１４Ｂ、１つ以上のスピーカ（単数又は複数）２１６、１つ以上のプロセッサ２１８Ｂ、１つ以上のメモリ２２０Ｂ、及び／又は通信回路２２２Ｂを含む。デバイス２４０の上述の構成要素間の通信のために、１つ以上の通信バス２０８Ｂが任意選択的に使用される。第１のデバイス２３０及び第２のデバイス２４０は、任意選択的に、２つのデバイス間のワイヤード接続又はワイヤレス接続を介して（例えば、通信回路構成２２２Ａ～２２２Ｂを介して）通信する。

【0025】

通信回路２２２Ａ、２２２Ｂは、任意選択的に、電子デバイス、インターネット、イントラネット、ワイヤードネットワーク及び／又はワイヤレスネットワークなどのネットワーク、セルラーネットワーク、及びワイヤレスローカルエリアネットワーク（ＬＡＮ）と通信するための回路を含む。通信回路２２２Ａ、２２２Ｂは、任意選択的に、近距離ワイヤレス通信（ＮＦＣ）及び／又はＢｌｕｅｔｏｏｔｈ（登録商標）などの短距離通信を使用して通信するための回路を含む。

【0026】

プロセッサ（単数又は複数）２１８Ａ、２１８Ｂは、１つ以上の汎用プロセッサ、１つ以上のグラフィックスプロセッサ、及び／又は１つ以上のデジタル信号プロセッサを含む。一部の例では、メモリ２２０Ａ、２２０Ｂは、後述する技術、プロセス、及び／又は方法を実行するためにプロセッサ（単数又は複数）２１８Ａ、２１８Ｂによって実行されるように構成されたコンピュータ可読命令を記憶する非一時的コンピュータ可読記憶媒体（例えば、フラッシュメモリ、ランダムアクセスメモリ、又は他の揮発性若しくは不揮発性メモリ若しくはストレージ）である。一部の例では、メモリ２２０Ａ、２２０Ｂは、２つ以上の非一時的コンピュータ可読記憶媒体を含むことができる。非一時的コンピュータ可読記憶媒体は、命令実行システム、装置、若しくはデバイスによって又は関連して使用されるコンピュータ実行可能命令を、有形に格納又は記憶することができる任意の（信号以外の）媒体であり得る。いくつかの実施形態では、記憶媒体は、一時的コンピュータ可読記憶媒体である。いくつかの実施形態では、記憶媒体は、非一時的コンピュータ可読記憶媒体である。非一時的コンピュータ可読記憶媒体は、それらに限定されるものではないが、磁気記憶装置、光学記憶装置、及び／又は半導体記憶装置を含むことができる。そのような記憶装置の例としては、磁気ディスク、ＣＤ、ＤＶＤ、又はＢｌｕ－ｒａｙ技術に基づく光学ディスク、並びにフラッシュ、ソリッドステートドライブなどの永続性ソリッドステートメモリなどが挙げられる。

【0027】

一部の例では、表示生成構成要素（単数又は複数）２１４Ａ、２１４Ｂは、単一のディスプレイ（例えば、液晶ディスプレイ（ＬＣＤ）、有機発光ダイオード（ＯＬＥＤ）、又は他のタイプのディスプレイ）を含む。一部の例では、表示生成構成要素（単数又は複数）２１４Ａ、２１４Ｂは、複数のディスプレイを含む。一部の例では、表示生成構成要素（単数又は複数）２１４Ａ、２１４Ｂは、タッチ機能を有するディスプレイ（例えば、タッチスクリーン）、プロジェクタ、ホログラフィックプロジェクタ、網膜プロジェクタなどを含むことができる一部の例では、デバイス２４０は、タップ入力及びスワイプ入力又は他のジェスチャなどのユーザ入力を受信するためのタッチ感知面（単数又は複数）２１６Ｂを含む。一部の例では、表示生成構成要素（単数又は複数）２１４Ａ、２１４Ｂ及びタッチ感知面２１６Ａ、２１６Ｂは、タッチ感知ディスプレイ（例えば、デバイス２３０、２４０と一体化されたタッチスクリーン、又はデバイス２３０、２４０と通信するデバイス２３０、２４０の外部のタッチスクリーン）を形成する。

【0028】

デバイス２４０は、任意選択的に、画像センサ（単数又は複数）２０６を含む。画像センサ（単数又は複数）２０６は、任意選択的に、現実世界環境から物理的オブジェクトの画像を取得するように動作可能な電荷結合素子（ＣＣＤ）センサ、及び／又は相補型金属酸化膜半導体（ＣＭＯＳ）センサなどの、１つ以上の可視光画像センサを含む。画像センサ（単数又は複数）２０６はまた、任意選択的に、現実世界環境からの赤外光を検出するための、パッシブ又はアクティブＩＲセンサなどの、１つ以上の赤外線（ＩＲ）センサを含む。例えば、能動型ＩＲセンサは、赤外光を現実世界環境内に放射するためのＩＲエミッタを含む。画像センサ（単数又は複数）２０６はまた、任意選択的に、現実世界環境内の物理的オブジェクトの移動をキャプチャするように構成された１つ以上のカメラを含む。画像センサ（単数又は複数）２０６は、任意選択的に、デバイス２４０からの物理的オブジェクトの距離を検出するように構成された１つ以上の奥行きセンサを含む。一部の例では、１つ以上の奥行きセンサからの情報は、デバイスが、現実世界環境内のオブジェクトを識別し、それを現実世界環境内の他のオブジェクトから区別することを可能にすることができる。一部の例では、１つ以上の奥行きセンサは、デバイスが、現実世界環境内のオブジェクトのテクスチャ及び／又はトポグラフィを判定することを可能にすることができる。

【0029】

一部の例では、デバイス２４０は、ＣＣＤセンサ、イベントカメラ、及び奥行きセンサを組み合わせて使用して、デバイス２４０の周囲の物理環境を検出する。一部の例では、画像センサ（単数又は複数）２０６は、第１の画像センサと第２の画像センサとを含む。第１の画像センサ及び第２の画像センサは協働し、任意選択的に、現実世界環境内の物理的オブジェクトの異なる情報をキャプチャするように構成される。一部の例では、第１の画像センサは可視光画像センサであり、第２の画像センサは奥行きセンサである。一部の例では、デバイス２４０は、画像センサ（単数又は複数）２０６を使用して、現実世界環境内のデバイス２４０及び／又は表示生成構成要素（単数又は複数）２１４のポジション及び向きを検出する。例えば、デバイス２４０は、画像センサ（単数又は複数）２０６を使用して、現実世界環境内の１つ以上の固定オブジェクトに対する表示生成構成要素（単数又は複数）２１４Ｂのポジション及び向きをトラッキングする。

【0030】

一部の例では、デバイス２４０は、マイクロフォン（単数又は複数）２１３又は他の音声センサを含む。デバイス２４０は、マイクロフォン（単数又は複数）２１３を使用して、ユーザ及び／又はユーザの現実世界環境からの音を検出する。一部の例において、マイクロフォン（単数又は複数）２１３は、任意選択的に、周囲雑音を特定するために、又は現実世界環境の空間内の音源の位置を特定するなどのために、協調して動作する（複数のマイクロフォンを含む）マイクロフォンの配列を含む。

【0031】

デバイス２４０は、任意選択的に、デバイス２４０及び／又は表示生成構成要素（単数又は複数）２１４Ｂのロケーションを検出するように構成されたロケーションセンサ（単数又は複数）２０４を含む。例えば、ロケーションセンサ（単数又は複数）２０４は、１つ以上の衛星からデータを受信し、物理的世界におけるデバイスの絶対ポジションをデバイス２４０が判定することを可能にするＧＰＳ受信機を含み得る。

【0032】

デバイス２４０は、デバイス２４０及び／又は表示生成構成要素（単数又は複数）２１４Ｂの向き及び／又は移動を検出する向きセンサ（単数又は複数）２１０を含む。例えば、デバイス２４０は、向きセンサ２１０を使用して、現実世界環境における物理的オブジェクトなどに関する、デバイス２４０及び／又は表示生成構成要素２１４Ｂのポジション及び／又は向きの変化をトラッキングする。向きセンサ（単数又は複数）２１０は、任意選択的に、１つ以上のジャイロスコープ及び／又は１つ以上の加速度計を含む。

【0033】

一部の例では、デバイス２４０は、任意選択的に、ハンドトラッキングセンサ（単数又は複数）２０２及び／又はアイトラッキングセンサ（単数又は複数）２１２を含む。ハンドトラッキングセンサ（単数又は複数）２０２は、拡張現実環境に対する、表示生成構成要素（単数又は複数）２１４Ｂに対する、及び／又は別の定義された座標系に対する、ユーザの手の１つ以上の部分のポジション／ロケーション、及び／又はユーザの手の１つ以上の部分の動きをトラッキングするように構成される。アイトラッキングセンサ（単数又は複数）２１２は、現実世界若しくは拡張現実環境に対する、及び／又は表示生成構成要素（単数又は複数）２１４Ｂに対するユーザの視線（より一般的には、眼、顔、又は頭部）のポジション及び移動をトラッキングするように構成される。一部の例では、ハンドトラッキングセンサ（単数又は複数）２０２及び／又はアイトラッキングセンサ（単数又は複数）２１２は、表示生成構成要素（単数又は複数）２１４Ｂと共に実装される。一部の例では、ハンドトラッキングセンサ（単数又は複数）２０２及び／又はアイトラッキングセンサ（単数又は複数）２１２は、表示生成構成要素（単数又は複数）２１４Ｂとは別個に実装される。

【0034】

一部の例では、ハンドトラッキングセンサ（単数又は複数）２０２は、（例えば、人間のユーザの）１つ以上の手を含む現実世界から３次元情報をキャプチャする画像センサ（単数又は複数）２０６（例えば、１つ以上のＩＲカメラ、３Ｄカメラ、奥行きカメラなど）を使用できる。いくつかの例では、手は、指及びそれらのそれぞれのポジションを区別するのに十分な解像度で分解され得る。一部の例では、１つ以上の画像センサ（単数又は複数）２０６は、画像センサ（単数又は複数）２０６の視野と、画像センサによってキャプチャされた指／手のポジション、向き、及び／又は移動が（例えば、ユーザの静止している手又は現実世界環境内の他の人の他の手と区別するための）入力として使用される対話空間とを画定するように、ユーザに対して配置される。入力（例えば、ジェスチャ、タッチ、タップなど）のために指／手をトラッキングすることは、ユーザが任意の種類のビーコン、センサ、又は他のマーカにタッチしたり、保持したり、装着したりする必要がないという点で有利であり得る。

【0035】

一部の例では、アイトラッキングセンサ（単数又は複数）２１２は、少なくとも１つのアイトラッキングカメラ（例えば、赤外線（ＩＲ）カメラ）及び／又はユーザの眼に向かって光を放射する照明源（例えば、ＩＲ光源、ＬＥＤなど）を含む。アイトラッキングカメラは、光源からの反射ＩＲ光を眼から直接的又は間接的に受け取るように、ユーザの眼に向けられてもよい。一部の例では、両眼は、それぞれのアイトラッキングカメラ及び照明源によって別個にトラッキングされ、焦点／視線は、両眼のトラッキングから判定することができる。一部の例では、一方の眼（例えば、利き眼）が、個別のアイトラッキングカメラ／照明源（単数又は複数）によってトラッキングされる。

【0036】

システム２００は、図２の構成要素及び構成に限定されず、複数の構成においてより少ない、代替的な、又は追加の構成要素を含むことができる。一部の例では、システム２００は単一のデバイスに実装することができる。システム２００を使用する人は、本明細書では、任意選択的に、システムのユーザ（例えば、及び／又はデバイスのユーザ）と呼ばれる。次に、３次元環境において見える物理的電子デバイスに関連付けられた仮想拡張ディスプレイの表示を開始することを含む例示的な対話に注意を向ける。以下で説明するように、３次元環境は、第１の電子デバイスを使用して表示し得、第１の電子デバイスとは異なる第２の電子デバイスを、３次元環境に含まれる物理環境内に位置し得、第１の電子デバイスは、第２の電子デバイスの仮想拡張ディスプレイを提示するように構成される。一部の例では、仮想拡張ディスプレイの表示を開始し、以下に説明される３次元環境における仮想拡張ディスプレイとの対話を容易にするプロセスは、デバイス２３０及び２４０のプロセッサ２１８Ａ、２１８Ｂによって実行することができる。

【0037】

図３Ａ～図３Ｉは、本開示の一部の例による、３次元環境において電子デバイスのユーザインタフェースの表現の表示を開始するための例示的な対話を示す。一部の例では、第１の電子デバイス３０１は、３次元環境３５０を提示し得る。第１の電子デバイス３０１は、上述した電子デバイス１０１又は２４０と同様であってもよく、及び／又は、例えば、ヘッドアップディスプレイ（ＨＵＤ）、ヘッドマウントディスプレイ（ＨＭＤ）、一体化された表示能力を有するウィンドウ、又は人の眼に配置されるように設計されたレンズとして形成されたディスプレイ（例えば、コンタクトレンズと同様）などの、３次元環境を生成及び提示するように構成されたヘッドマウントシステム／デバイス及び／又は投影ベースシステム／デバイス（ホログラムベースシステム／デバイスを含む）であってもよい。図３Ａ～図３Ｉの例では、３次元環境３５０が、第１の電子デバイスの視点（例えば、電子デバイス３０１のユーザに関連付けられた視点）から見たＸ軸、Ｙ軸、及びＺ軸によって定義され得るように、ユーザは任意選択的に第１の電子デバイス３０１を装着している。したがって、本明細書で使用される場合、第１の電子デバイス３０１は、第１の電子デバイス３０１がロール方向、ピッチ方向、及び／又はヨー方向に移動され得るように、ユーザ（例えば、ユーザの頭部）の動きに基づいて６自由度で移動可能であるように構成される。

【0038】

図３Ａに示すように、第１の電子デバイス３０１は、テーブル３０６（例えば、図１の現実世界テーブル１０６に対応する）、第２の電子デバイス３１５、及び１つ以上の物理入力デバイス３３１／３３２を含む物理環境内に配置されてもよい。したがって、第１の電子デバイス３０１を使用して提示される３次元環境３５０は、任意選択的に、テーブル３０６’の表現、第２の電子デバイス３１５’の表現、及び１つ以上の物理入力デバイス３３１’／３３２’の１つ以上の表現などの、電子デバイス３０１を取り囲む物理環境のキャプチャされた部分を含む。一部の例では、第２の電子デバイス３１５’は、上述のデバイス２３０と同様であってもよく、及び／又はデスクトップコンピュータ、ラップトップコンピュータ、タブレットコンピュータ、若しくは他のモバイルコンピューティングデバイスであってもよい。一部の例では、１つ以上の物理入力デバイスは、第２の電子デバイス３１５’と通信する（例えば、第２の電子デバイス３１５’と一体化されるか、又はワイヤード若しくはワイヤレス通信手段を介して第２の電子デバイス３１５’と通信する）キーボード３３１’及びマウス３３２’（又はトラックパッド）を含んでもよい。図３Ａの入力デバイス（例えば、キーボード３３１’及びマウス３３２’）は単に代表的なものであり、追加の、より少ない、又は異なる入力デバイスが第２の電子デバイス３１５’と通信してもよいことを理解されたい。一部の例では、表現は、第１の電子デバイス３０１の透明又は半透明のディスプレイを通して見られる物理環境の部分を含むことができる。

【0039】

一部の例では、図３Ａに示すように、３次元環境３５０内の第２の電子デバイス３１５’は、１つ以上のユーザインタフェースを表示するように構成される。例えば、図３Ａに示されるように、第２の電子デバイス３１５’は、ディスプレイ３１４’の表現として３次元環境３５０内で見えるディスプレイを含む。一部の例では、ディスプレイ３１４’は、第１のユーザインタフェース（例えば、「ウィンドウＡ」）を表示しており、これは、第１のユーザインタフェース３１１’の表現として３次元環境３５０において見える。一部の例では、第１のユーザインタフェース３１１’は、図３Ａに示されるように、検索バー３１３’の表現として３次元環境３５０において見える検索バーを含むウェブブラウジングアプリケーション（例えば、「ブラウザ」）のユーザインタフェースである。加えて、図３Ａに示されるように、第１のユーザインタフェース３１１’は、第２の電子デバイス３１５’にローカルなアプリケーション、画像、又は他のファイルに対応する複数のアイコンを含むドック３０９’の表現として３次元環境３５０において見えるドックと共に表示されてもよい。最後に、図３Ａに示されるように、一部の例では、第２の電子デバイス３１５’は、ディスプレイ３１４’のユーザインタフェース要素に向けられた入力を提供するためにマウス３３２’を介して制御可能な（例えば、ユーザインタフェース要素に向けられた選択入力及び関連入力を提供するためにマウス３３２’を介して移動可能及び／又はマウス３３２’を介して制御可能な）カーソル３１２’の表現として３次元環境３５０において見えるカーソル（例えば、又は他のポインタオブジェクト）を表示してもよい。

【0040】

一部の例では、現実世界環境における第２の電子デバイスとの慣習的な対話を表す完全に機能的な作業環境を３次元で提供することが有利であり得る。したがって、３次元環境において第２の電子デバイスの１つ以上のユーザインタフェースの表現を含むように構成された仮想拡張ディスプレイを提供することは、第２の電子デバイスの物理的ディスプレイ（例えば、ディスプレイ３１４’）の制約なしに第２の電子デバイスの１つ以上のユーザインタフェースと対話するのに特に有用であり得る。例えば、本明細書で説明されるように、仮想拡張ディスプレイは、第２の電子デバイスの物理的ディスプレイの寸法を超えるサイズで第２の電子デバイスの１つ以上のユーザインタフェースを表示することを提供することができる（例えば、ユーザインタフェースを拡大するか、又は第２の電子デバイスのディスプレイに対応する領域を超えてユーザインタフェースの表示のための複数の領域を提供する）。一部の例では、第２の電子デバイスの１つ以上のオブジェクト（例えば、３次元グラフィカルデータに対応するオブジェクト）を３次元で提示することが有利であり得る。例えば、２次元コンテンツは３次元で閲覧又は編集することができるが、第２の電子デバイスのディスプレイは２次元に限定される。そのような例では、３次元環境で表示するためのコンテンツを作成するユーザは、仮想拡張ディスプレイを介してコンテンツを３次元で見ることができる。一部の例では、本明細書でより詳細に説明するように、第２の電子デバイスと通信する物理入力デバイスを介して検出された入力に基づいて、仮想拡張ディスプレイのコンテンツとの対話を容易にすることが有利であり得る。

【0041】

一部の例では、第１の電子デバイス３０１は、３次元環境３５０内の第２の電子デバイス３１５’に関連付けられた仮想拡張ディスプレイの表示を開始するために、第２の電子デバイス３１５’とのペアリングを提供し得る。例えば、図３Ｂに示すように、第１の電子デバイス３０１は、第１の電子デバイス３０１を１つ以上の他の電子デバイスとペアリングすることを提供する個別のアプリケーション（例えば、第１の電子デバイス３０１上で実行されるペアリングアプリケーション又は設定アプリケーション）に関連付けられたユーザインタフェースオブジェクト３１７を表示してもよい。一部の例では、図３Ｂに示すように、ユーザインタフェースオブジェクト３１７は、「デバイス１」に対応する第１の指示３１７－１を含む。一部の例では、デバイス１は、図３Ｂにおいて第１の電子デバイス３１５と現在ペアリングされていない第２の電子デバイス３０１’に対応する。一部の例では、第２の電子デバイス３０１’が第１の電子デバイス３１５の閾値距離（例えば、０．１、０．２５、０．５、１、２、３、５、１０、１５、２０ｍなど）内にあるため、第１の指示３１７－１は、ユーザインタフェースオブジェクト３１７に含まれる。一部の例では、第２の電子デバイス３１５’が第１の電子デバイス３０１又は第１の電子デバイス３０１のユーザの視野内に見える（例えば、第２の電子デバイス３１５’が、ユーザの現在の視点から３次元環境３５０内に見える物理環境の一部に位置する）ので、第１の指示３１７－１は、ユーザインタフェースオブジェクト３１７に含まれる。一部の例では、第１の指示３１７－１は、第１の電子デバイス３０１が第２の電子デバイス３１５’に関連付けられた仮想拡張ディスプレイを提示することを可能にするために、第２の電子デバイス３１５’を第１の電子デバイス３０１とペアリングするためのプロセスを開始するように選択可能である。

【0042】

一部の例では、図３Ｂに示すように、第１の電子デバイス３０１は、第１の指示３１７－１に向けられた選択入力３７１Ａを検出する。例えば、図３Ｂでは、第１の電子デバイス３０１は、任意選択的にユーザの視線が第１の指示３１７－１に向けられている間に、エアピンチジェスチャ（例えば、ユーザの手の人差し指と親指が一緒になって接触する）、タップ又はタッチ入力（例えば、手の人差し指によって提供される）、口頭コマンド、又は他の入力を検出する。一部の例では、以下で説明するように、第１の指示３１７－１の選択を検出したことに応じて、第１の電子デバイス３０１は、第２の電子デバイス３１５’を第１の電子デバイス３０１とペアリングするためのプロセスを開始する。

【0043】

一部の例では、第２の電子デバイス３１５’を第１の電子デバイス３０１とペアリングするためのプロセスを開始することは、ペアリングの要求を第２の電子デバイス３１５’に（例えば、第２の電子デバイス３１５’に直接、又はサーバ（例えば、第２の電子デバイス３１５’と通信しているワイヤレス通信端末）を介して間接的に）送信することを含む。一部の例では、ペアリングの要求を受信したことに応じて、第２の電子デバイス３１５’は、第１の電子デバイス３０１を第２の電子デバイス３１５’とペアリングするために、データを（例えば、直接的又は間接的に）第１の電子デバイス３０１に送信／出力する。例えば、図３Ｂに示すように、第２の電子デバイス３１５’は、ディスプレイ３１４’上に表示されたコンテンツの表現を送信し得、それにより、第１の電子デバイス３０１は、受信した表現を第１の電子デバイス３０１によってキャプチャされた画像の一部と照合することによって、第２の電子デバイス３１５’を視覚的に識別し得る。別の例では、図３Ｃに示すように、第２の電子デバイス３１５’は、ディスプレイ３１４’を介して一意の識別子を表示し、この一意の識別子は、第２の電子デバイス３１５’に関連付けられ、第１の電子デバイス３０１によって検出可能な一意の識別子３２１’の表現として３次元環境３５０内で見える。図３Ｃに示すように、一意の識別子３２１’は、任意選択的に、第１の電子デバイス３１５の１つ以上の画像センサ又はカメラを介して検出可能な第２の電子デバイス３０１’の識別データを記憶する、ＱＲコード（登録商標）、バーコード、又は他の機械可読コードなどの機械可読画像である。一部の例では、一意の識別子３２１’は、任意選択的に、一意の識別子３２１’が第１の電子デバイス３０１によって検出可能であるが、第１の電子デバイス３０１のユーザには見えないことを可能にする頻度で表示される。一部の例では、図３Ｃに示されるように、第２の電子デバイス３１５’が一意の識別子３２１’を表示するとき、第２の電子デバイス３１５’は、第１の電子デバイス３０１のユーザに一意の識別子３２１’を特定するよう促すための指示を第１の電子デバイス３０１に送信する。例えば、図３Ｃに示すように、この指示は、第１の電子デバイス３０１が一意の識別子３２１’に含まれる識別データをスキャン／アクセスし得るように、第１の電子デバイス３０１のユーザに、第２の電子デバイス３１５’上に表示される一意の識別子３２１’（例えば、「デバイス１上のコードをスキャン」）に注意（例えば、視線を含む）を向けるように促すメッセージ要素３２０を第１の電子デバイス３０１に表示させる。一部の例では、第１の電子デバイス３０１が一意の識別子３２１’をスキャンするように、ユーザの注意が一意の識別子３２１’に向けられる（及び／又は、一意の識別子３２１’は、１、２、３、５、１０、３０、４５、６０秒などの閾値時間量を超えてユーザの視野内に留まる）と、第１の電子デバイス３０１は、第１の電子デバイス３１５を第２の電子デバイス３０１’とペアリングさせる確認データを第２の電子デバイス３１５’に送信する。

【0044】

追加的に又は代替的に、一部の例では、第２の電子デバイス３１５’は、第１の電子デバイス３０１を第２の電子デバイス３１５’とペアリングするために、第１の電子デバイス３０１によって検出可能な音声を出力する。例えば、図３Ｃに示すように、第２の電子デバイス３１５’は、第１の電子デバイス３０１によって検出可能な周波数で出力され得る（例えば、第１の電子デバイス３０１のユーザに可聴であってもなくてもよい）音声３２２を出力する。一部の例では、音声３２２が第１の電子デバイス３０１によって検出されると、第１の電子デバイス３０１は、第１の電子デバイス３０１を第２の電子デバイス３１５’とペアリングさせる確認データを第２の電子デバイス３１５’に送信する。追加的に又は代替的に、一部の例では、第２の電子デバイス３１５’は、第１の電子デバイス３０１を第２の電子デバイス３１５’とペアリングするために第１の電子デバイス３０１によって検出可能な赤外光３２６を、ディスプレイ３１４’などを介して放射する。一部の例では、赤外光３２６は、第１の電子デバイス３０１のユーザに見えない場合がある。一部の例では、赤外光３２６が第１の電子デバイス３０１によって（例えば、１つ以上の赤外線センサ又は他の画像センサを介して）検出されると、第１の電子デバイス３０１は、第１の電子デバイス３０１を第２の電子デバイス３１５’とペアリングさせる確認データを第２の電子デバイス３１５’に送信する。

【0045】

一部の例では、図３Ｄに示されるように、第２の電子デバイス３１５’は、第１の電子デバイス３０１を第２の電子デバイス３０１’とペアリングするために第２の電子デバイス３１５’によって検出可能な入力を提供するように第１の電子デバイス３０１のユーザに促す要求を第１の電子デバイス３１５に送信する。例えば、図３Ｄに示されるように、要求は、第１の電子デバイス３０１に、１つ以上の入力デバイス３３１’／３３２’を介して入力を提供するように第１の電子デバイス３０１のユーザに促す命令要素３２０Ａ及び／又は命令要素３２０Ｂを表示させる。一例として、図３Ｄでは、命令要素３２０Ａは、第１の電子デバイス３０１のユーザに、第２の電子デバイス３１５’と通信しているキーボード３３１’に向けられた選択入力を提供するように促す命令（例えば、「キーボード上のキーを押下」）を含む。一部の例では、ユーザは、キーボード３３１’上の特定のキーを選択するように促される。一部の例では、図３Ｄに示されるように、命令要素３２０Ｂは、第１の電子デバイス３０１のユーザに、第２の電子デバイス３１５’と通信しているマウス３３２’に向けられた選択入力を提供するように促す命令（例えば、「マウスをクリック」）を含む。

【0046】

図３Ｄでは、第２の電子デバイス３１５’は、キーボード３３１’に向けられた選択入力３７３Ａ及び／又はマウス３３２’に向けられた選択入力３７３Ｂを検出する。例えば、第２の電子デバイス３１５’は、第１の電子デバイス３０１のユーザによって提供される、キーボード３３１’上のキーの押下及び／又はマウス３３２’上のボタンの押下（又はマウス３３２’のタッチ感知面上のタップ）を検出する。一部の例では、図３Ｅに示すように、選択入力３７３Ａ及び／又は選択入力３７３Ｂを検出したことに応じて、第２の電子デバイス３１５’は、選択入力３７３Ａ及び／又は選択入力３７３Ｂが検出されたという確認を提供する。例えば、図３Ｅに示すように、第２の電子デバイス３１５’は、ディスプレイ３１４’を介して確認メッセージを表示し、この確認メッセージは、３次元環境３５０において確認メッセージ３２３’として見ることができ、上述の入力が成功裏に検出されたこと（例えば、「入力検出」）を示し、これにより、第１の電子デバイス３０１が第２の電子デバイス３１５’とペアリングされることが可能になる。

【0047】

一部の例では、第１の電子デバイス３０１は、１つ以上の基準が満たされているという判定に従って、上述の例に従って、第２の電子デバイス３１５’を第１の電子デバイス３０１とペアリングするためのプロセスを開始する。一部の例では、１つ以上の基準は、第２の電子デバイス３１５’が仮想拡張ディスプレイを介してユーザインタフェースを表示するための状態にあるという判定に従って満たされる基準を含む。一部の例では、１つ以上の基準は、第２の電子デバイス３１５’が第１の電子デバイス３０１の１つ以上のセンサによって検出されたという判定に従って（例えば、第２の電子デバイスが第１の電子デバイスの１つ以上の画像センサ又はカメラによってキャプチャされたときに）満たされる基準を含む。一部の例では、１つ以上の基準は、第２の電子デバイス３１５’が第１の電子デバイス３０１と通信することができるように構成されているという判定に従って（例えば、ワイヤード又はワイヤレス通信チャンネルが確立されると）満たされる基準を含む。一部の例では、１つ以上の基準は、第２の電子デバイス３１５’が適格な電子デバイスである（例えば、一部の電子デバイスは、拡張仮想ディスプレイのコンテキストにおいて動作する能力を有し得るが、他の電子デバイスは有し得ない）という判定に従って満たされる基準を含む。一部の例では、１つ以上の基準は、第１の電子デバイス３０１及び第２の電子デバイス３１５’が同じユーザに属し、及び／又は電子デバイスにログインされた同じユーザアカウントに関連付けられている場合など、第１及び第２の電子デバイスが情報（例えば、プライバシー設定、ユーザ情報、ユーザデータなど）を共有することを許可されているという判定に従って満たされる基準を含む。一部の例では、第１の電子デバイス３０１が第２の電子デバイス３１５’とペアリングされるためには、上記の基準の一部又は全部が満たされなければならない。

【0048】

一部の例では、第１の電子デバイス３０１は、上述した例示的なプロセスに従うことなく、第２の電子デバイス３１５’とペアリングされ得る。例えば、図３Ｂでは、第１の指示３１７－１の選択を検出したことに応じて、第１の電子デバイス３０１は、第２の電子デバイス３１５’とペアリングする要求を送信し、上記の１つ以上の基準が満たされる場合、第１の電子デバイス３０１は、第２の電子デバイス３１５’と自動的にペアリングする。一部の例では、第１の電子デバイス３０１及び第２の電子デバイス３１５’は、Ｂｌｕｅｔｏｏｔｈ（登録商標）、Ｗｉ－Ｆｉなどの任意の適切な通信手段を介してペアリングされてもよい。

【0049】

一部の例では、図３Ｆに示されるように、第１の電子デバイス３０１が上述のように第２の電子デバイス３１５’とペアリングされている場合、第１の電子デバイス３０１は、第１の電子デバイス３０１が第２の電子デバイス３１５’とペアリングされていること（例えば、「デバイス１ペアリング済み」）を第１の電子デバイス３０１のユーザに警告するメッセージ要素３２０（例えば、通知）を表示する。一部の例では、第１の電子デバイス３０１が第２の電子デバイス３１５’とペアリングされた後、第１の電子デバイス３０１は、第２の電子デバイス３１５’に関連付けられた仮想拡張ディスプレイを表示するためのプロセスを開始する。例えば、図３Ｇでは、第１の電子デバイス３０１が第２の電子デバイス３１５’と通信しており、第２の電子デバイス３１５’が第１の電子デバイス３０１のユーザの視野内にある間、第１の電子デバイス３０１は、３次元環境３５０内に第１のアフォーダンス３１９を表示し、第１のアフォーダンス３１９は、第２の電子デバイス３１５’の仮想拡張ディスプレイを表示するために選択可能である。一部の例では、図３Ｇに示すように、第１のアフォーダンス３１９は、第２の電子デバイス３１５’のディスプレイの縁部に近接して（例えば、ディスプレイの縁部の閾値距離（例えば、１、２、３、５、８、１０、１５、２０、３０ｃｍなど）内に）提示されてもよい。例えば、図３Ｇに示すように、第１のアフォーダンス３１９は、３次元環境３５０内の第２の電子デバイス３１５’の上に（例えば、第２の電子デバイス３１５’のディスプレイ３１４’の角の閾値距離内に）提示される。一部の例では、第１のアフォーダンス３１９は、第２の電子デバイス３１５’のディスプレイ３１４’と同じ平面に現れるように、３次元環境３５０内のある奥行きに提示されてもよい。

【0050】

一部の例では、第１のアフォーダンス３１９は、３次元環境３５０内で異なって配置されてもよい。例えば、第１のアフォーダンス３１９は、第２の電子デバイス３１５’の上、付近、下、若しくは前に、及び／又は３次元環境３５０内の他のロケーション（例えば、第２の電子デバイスから規定の距離だけ離れた位置）に提示されてもよい。追加的に又は代替的に、一部の例では、第１のアフォーダンスは、（例えば、３次元環境３５０における第２の電子デバイス３１５’のロケーションに関係なく）第１の電子デバイス３０１のディスプレイの規定の領域に表示されてもよい。例えば、図３Ｇに示されるように、第１のアフォーダンスは、複数のシステムオプション３１８内に第１のシステムオプション３１８Ａとして表示されてもよい。一部の例では、図３Ｇに示すように、複数のシステムオプション３１８は、第１の電子デバイス３０１のディスプレイの上縁部に沿って中央に表示される。一部の例では、第１のシステムオプション３１８Ａ以外の複数のシステムオプション３１８は、表示設定（例えば、輝度レベル及び／又は没入コンテンツレベル）及び／又は音声設定（例えば、音量レベル）などの第１の電子デバイス３０１の１つ以上の設定にアクセスするために、及び／又はホームユーザインタフェースなどを介して第１の電子デバイス３０１の１つ以上のアプリケーションにアクセスするために選択可能である。

【0051】

一部の例では、第２の電子デバイス３１５’は、ディスプレイ３１４’を介して、第２の電子デバイス３１５による仮想拡張ディスプレイの表示を開始するために（例えば、キーボード３３１’、マウス３３２’、第１の電子デバイス３０１の入力などを使用して）選択可能なアフォーダンスを提示してもよい。例えば、第２の電子デバイス３１５’は、仮想拡張ディスプレイを表示する要求を第１の電子デバイス３０１に第２の電子デバイス３１５’に送信させるために選択可能な設定又は他のアプリケーション内で、第１のアフォーダンス３１９と異なる、類似する、又は同一のアフォーダンスを提供してもよい。

【0052】

一部の例では、図３Ｇに示すように、第１の電子デバイス３０１を取り囲む物理環境は、コーヒーテーブル３０８の上に配置された第３の電子デバイス３２５を含んでもよい。例えば、第３の電子デバイス３２５’の表現及びコーヒーテーブル３０８’の表現は、図３Ｇに示すように、３次元環境３５０において見える。一部の例では、第３の電子デバイス３２５は、セルラー電子デバイス又はタブレットコンピュータなどのモバイル電子デバイスであってもよい。図３Ｇに示すように、第３の電子デバイス３２５は、任意選択的に、第１の電子デバイス３０１とペアリングされない。代替的に、図３Ｇにおいて、第３の電子デバイス３２５は、任意選択的に第１の電子デバイス３０１とペアリングされるが、拡張仮想ディスプレイのコンテキストにおいて動作する能力を有していなくてもよい。したがって、図３Ｇに示すように、第３の電子デバイス３２５’の表現は、第３の電子デバイス３２５の拡張仮想ディスプレイを表示するために選択可能なアフォーダンス（例えば、第３の電子デバイス３２５’の表現に近接して、又は複数のシステムオプション３１８の中のいずれか）と共に表示されない。

【0053】

図３Ｈにおいて、第１の電子デバイス３０１は、上述した第１のシステムオプション３１８Ａに向けられた選択入力３７１Ｂを検出する。例えば、第１の電子デバイス３０１は、第１のシステムオプション３１８Ａの選択に対応するエアピンチジェスチャ、タップ又はタッチジェスチャ、口頭コマンド、視線滞留などを検出する。一部の例では、図３Ｉに示すように、仮想拡張ディスプレイを開始するための第１のシステムオプション３１８Ａ、第１のアフォーダンス３１９、又は他のアフォーダンスの選択を検出したことに応じて、第１の電子デバイス３０１は、３次元環境３５０内の第２の電子デバイス３１５’に関連付けられている（例えば、上述した第３の電子デバイス３２５’に関連付けられていない）仮想拡張ディスプレイ３０４を提示する。

【0054】

一部の例では、図３Ｉに示すように、仮想拡張ディスプレイ３０４は、第２の電子デバイス３１５’のための第２の（例えば、仮想）ディスプレイとして機能する。例えば、図３Ｉに示すように、仮想拡張ディスプレイは、第２の電子デバイス３１５’のディスプレイ３１４’上に表示されるドック３０９’’の表現を含む。一部の例では、本明細書で説明するように、仮想拡張ディスプレイ３０４は、ディスプレイ３１４’上に表示されてもされなくてもよい、第２の電子デバイス３１５’の１つ以上のユーザインタフェース（例えば、アプリケーションウィンドウ）、コンテンツ、及び／又は他のユーザインタフェース要素を表示するように構成される。加えて、一部の例では、カーソル３１２’は、第２の電子デバイス３１５’のディスプレイ３１４’と仮想拡張ディスプレイ３０４との間で移動可能であるように、マウス３３２’を介して制御可能である。一部の例では、本明細書で後述するように、キーボード３３１’及び／又はマウス３３２’を介して検出されたユーザ入力は、第１の電子デバイス３０１のユーザの視線のロケーション（位置）に応じて、ディスプレイ３１４’のユーザインタフェース又は仮想拡張ディスプレイ３０４のユーザインタフェースに向けられてもよい。次に、３次元環境における電子デバイスのための仮想拡張ディスプレイとの例示的な対話に注意を向ける。

【0055】

一部の例では、第１の電子デバイス３０１が３次元環境３５０において仮想拡張ディスプレイ３０４を提示するとき、第２の電子デバイス３１５’のディスプレイ３１４’はオフにされてもよい（例えば、第２の電子デバイス３１５’がディスプレイ３１４’を介してユーザインタフェースをもはや表示しないように、第２の電子デバイス３１５’が低電力モード若しくはスリープ状態に入る、又は電源が切られている）。例えば、第１の電子デバイス３０１が第２の電子デバイス３１５’とペアリングされた後、及び第１の電子デバイス３０１が仮想拡張ディスプレイ３０４を生成して３次元環境３５０に表示した後、第２の電子デバイス３１５’は（例えば、自動的に）ディスプレイ３１４’の電源を切る。一部の例では、第２の電子デバイス３１５’のディスプレイ３１４’は、第１の電子デバイス３０１が、第１の電子デバイス３０１と第２の電子デバイス３１５’とをペアリングするための上述したプロセスを開始するときにオフにされ得る。そのようなシナリオでは、第２の電子デバイス３１５’のディスプレイ３１４’は、ペアリングプロセスのために（例えば、一意の識別子３２１’及び／又は確認メッセージ３２３’を表示するために）電源をオンにされ得る。

【0056】

図４Ａ～図４Ｏは、本開示の一部の例による、３次元環境において第２の電子デバイスのユーザインタフェースの表現との対話を容易にする第１の電子デバイスの例を示す。一部の例では、図４Ａに示すように、第１の電子デバイス４０１を使用して３次元環境４５０を提示し得る。一部の例では、第１の電子デバイス４０１は、任意選択的に、上述の第１の電子デバイス３０１に対応する。一部の例では、３次元環境４５０は、第１の電子デバイス４０１が位置する物理環境のキャプチャされた部分を含む。例えば、３次元環境４５０は、図４Ａに示すように、テーブル（例えば、テーブル４０６’の表現）を任意選択的に含む。加えて、３次元環境４５０は、第２の電子デバイス（例えば、第２の電子デバイス４１５’の表現）と、（例えば、物理環境内のテーブルの上に配置された）第２の電子デバイスと通信している１つ以上の物理入力デバイス（例えば、１つ以上の入力デバイス４３１’／４３２’の１つ以上の表現）とを含む。一部の例では、３次元環境４５０は、任意選択的に、上述の３次元環境３５０に対応する。一部の例では、第２の電子デバイス４１５’は、上述の第２の電子デバイス３１５’に対応する。一部の例では、１つ以上の入力デバイス４３１’／４３２’は、上述の１つ以上の入力デバイス３３１’／３３２’に対応する。一部の例では、物理環境の表現は、第１の電子デバイス４０１の透明又は半透明のディスプレイを通して見られる物理環境の部分を含むことができる。

【0057】

同様に上述したように、一部の例では、第１の電子デバイス４０１は、第２の電子デバイス４１５’と通信する。加えて、一部の例では、図４Ａに示すように、第１の電子デバイス４０１は、第２の電子デバイス４１５’に関連付けられた仮想拡張ディスプレイ４０４を提示している。例えば、図４Ａである。仮想拡張ディスプレイ４０４は、第２の電子デバイス４１５’の物理的ディスプレイ（例えば、ディスプレイ４１４’の表現）に対する第２の（例えば、仮想）ディスプレイとして機能する。一部の例では、仮想拡張ディスプレイ４０４は、上述の仮想拡張ディスプレイ３０４に対応する。一部の例では、図４Ａに示すように、第２の電子デバイス４１５’のディスプレイ４１４’は、第１のユーザインタフェース（例えば、第１のユーザインタフェース４１１’の表現）を表示しており、仮想拡張ディスプレイ４０４は、第２の電子デバイス４１５’のディスプレイ４１４’上に表示されるように構成された第２のユーザインタフェース４２５を表示している。一部の例では、第１のユーザインタフェース４１１’及び第２のユーザインタフェース４２５は、個別のアプリケーション（例えば、第２の電子デバイス５１４’上で動作しているウェブブラウジングアプリケーション（「ブラウザ」））に関連付けられてもよい。例えば、第１のユーザインタフェース４１１’は、個別のアプリケーションの第１のウィンドウ（例えば、「ウィンドウＡ」）であり、第２のユーザインタフェース４２５は、個別のアプリケーションの第２のウィンドウ（例えば、「ウィンドウＢ」）である。加えて、図４Ａに示すように、第２の電子デバイス４１５’のディスプレイ４１４’は、ドック（例えば、ドック４０９’の表現）を表示しており、仮想拡張ディスプレイ４０４は、ドック４０９’’の表現を表示している。一部の例では、ドック４０９’は、上述のドック３０９’に対応する。一部の例では、図４Ａに示すように、第２の電子デバイス４１５’のディスプレイ４１４’は、マウス４３２’を使用して制御可能なカーソル（例えば、カーソル４１２’の表現）を含む。一部の例では、カーソル４１２’は、上述のカーソル３１２’に対応する。

【0058】

一部の例では、図４Ａに示すように、第１のユーザインタフェース４１１’は、検索クエリをウェブブラウザに提供するためのテキストを入力するために選択可能なテキスト入力フィールド（例えば、テキスト入力フィールド４１３’の表現）を含む。加えて、図４Ａに示されるように、第２のユーザインタフェース４２５は、ウェブブラウザによって提供される（例えば、ＵＲＬ「ｗｗｗ．Ｓｅａｒｃｈ．ｃｏｍ」に関連付けられた）複数の検索結果を含む。例えば、図４Ａにおいて、第２のユーザインタフェース４２５は、第１のウェブサイト（例えば、「ｗｗｗ．ＵＲＬ１．ｃｏｍ」）に関連付けられた第１の検索結果４２６Ａ（例えば、「検索結果Ａ」）と、第２のウェブサイト（例えば、「ｗｗｗ．ＵＲＬ２．ｃｏｍ」）に関連付けられた第２の検索結果４２６Ｂ（例えば、「検索結果Ｂ」）と、第３のウェブサイトに関連付けられた第３の検索結果４２６Ｃ（例えば、「検索結果Ｃ」）とを含む。一部の例では、複数の検索結果４２６は、それぞれのソース（例えば、ウェブサイト）を介してコンテンツ（例えば、テキスト、画像、ビデオ、音楽など）にアクセスするために選択可能である。

【0059】

一部の例では、第１の電子デバイス４０１は、第２の電子デバイス４１５’によって（例えば、直接的に又はサーバを介して間接的に）第１の電子デバイス４０１に送信された画像データ（例えば、ピクセル又は表示データ）に基づいて、仮想拡張ディスプレイ４０４内に第２のユーザインタフェース４２５を表示する。例えば、上述したように、第２のユーザインタフェース４２５は、第２の電子デバイス４１５’のディスプレイ４１４’上に表示されるように構成される（例えば、第２のユーザインタフェース４２５は、第２の電子デバイス４１５’のユーザインタフェースである）。したがって、一部の例では、第１の電子デバイス４０１は、第２の電子デバイス４１５’によって提供される画像データに基づいて、上述の第２のユーザインタフェース４２５のコンテンツを含む第２のユーザインタフェース４２５をレンダリング（例えば、生成）する。例えば、画像データは、第２のユーザインタフェース４２５の外観、第２のユーザインタフェース４２５のコンテンツの特性（例えば、コンテンツが選択可能、スクロール可能などの対話型であるかどうか）、及び／又は第２のユーザインタフェース４２５及びそのコンテンツの品質（例えば、精細度などの画質）に対応する情報を含む。一部の例では、第２の電子デバイス４０１’によって第１の電子デバイス４１５に送信された画像データは、第１の電子デバイス４１５によって仮想拡張ディスプレイ４０４に表示される、第２の電子デバイス４０１’によって生成された画像を含む。

【0060】

一部の例では、１つ以上の入力デバイス４３１’／４３２’を介して検出されたユーザ入力は、３次元環境４５０における第１の電子デバイス４０１のユーザの視線のロケーションに基づいて、第１の電子デバイス４０１によって選択的にルーティングされてもよい。本明細書で使用される場合、第１の電子デバイス４０１のユーザは、第２の電子デバイス４１５’のユーザであってもよい。図４Ｂでは、ユーザの視線４２７がディスプレイ４１４’の第１のユーザインタフェース４１１’に向けられている間に、第２の電子デバイス４１５’は、第２の電子デバイス４１５’と通信しているマウス４３２’を介して入力４７３Ａを検出する。例えば、図４Ｂに示すように、第２の電子デバイス４１５’は、テーブル４０６’の表面上のマウス４３２’の移動を検出する。

【0061】

一部の例では、上述したように、第１の電子デバイス４０１は、視線４２７のロケーションに基づいてユーザ入力の適用可能性を制御する。例えば、入力４７３Ａを検出したことに応じて、第２の電子デバイス４１５’は、（例えば、カーソル４１２’を移動させる要求に対応する）マウス４３２’の移動に対応する情報を含む入力データを（例えば、直接的に又はサーバを介して間接的に）第１の電子デバイス４０１に送信する。一部の例では、第１の電子デバイス４０１が第２の電子デバイス４１５’によって提供された入力データを受信すると、第１の電子デバイス４０１は、３次元環境４５０におけるユーザの視線４２７のロケーションを判定する。上述し、図４Ｂに示すように、入力４７３Ａがマウス４３２’を介して提供されると、視線４２７は、ディスプレイ４１４’上に表示された第１のユーザインタフェース４１１’に向けられる。したがって、第１の電子デバイス４０１は、マウス４３２’を介して検出された入力４７３Ａを第２の電子デバイス４１５’にルーティングする。例えば、図４Ｂでは、第１の電子デバイス４０１は、入力４７３Ａに従って第２の電子デバイス４１５’のディスプレイ４１４’内でカーソル４１２’を第２の電子デバイス４１５’に移動させるための１つ以上のコマンド／命令を含む出力データを第２の電子デバイス４１５’に送信する。したがって、図４Ｃでは、第２の電子デバイス４１５’は、マウス４３２’の移動に従って、ディスプレイ４１４’内のカーソル４１２’を第１のユーザインタフェース４１１’の新しいロケーションに移動させる。

【0062】

図４Ｃでは、ユーザの視線４２７が第１のユーザインタフェース４１１’内のテキスト入力フィールド４１３’に向けられている間に、第２の電子デバイス４１５’は、マウス４３２’を介して選択入力４７３Ｂを検出する。例えば、図４Ｃに示すように、カーソル４１２’がテキスト入力フィールド４１３’の上に位置している間に、第２の電子デバイス４１５’は、マウス４３２’のボタンのクリック又は押下（又はマウス４３２’のタッチ感知面のタップ）を検出する。一部の例では、同様に上述したように、選択入力４７３Ｂを検出したことに応じて、第２の電子デバイス４１５’は、第１の電子デバイス４０１が選択入力４７３Ｂをどこにルーティングするかを判定し得るように、入力データを第１の電子デバイス４０１に送信する。同様に上述したように、第１の電子デバイス４０１は、３次元環境における視線４２７のロケーションに基づいて、選択入力４７３Ｂをどこに向けるべきかを判定する。図４Ｃでは、視線４２７が第１のユーザインタフェース４１１’内のテキスト入力フィールド４１３’に向けられているので（又は、一部の例では、視線４２７が第１のユーザインタフェース４１１’、ディスプレイ４１４’などに向けられているので）、第１の電子デバイス４０１は、上述したように、第２の電子デバイス４１５’に選択入力４７３Ｂを第１のユーザインタフェース４１１’、特にマウス４３２’を介して制御可能なカーソル４１２’のロケーションに向けさせる。したがって、図４Ｄに示されるように、第２の電子デバイス４１５’は、第１のユーザインタフェース４１１’内のテキスト入力フィールド４１３’を選択することを含む、カーソル４１２’のロケーションにおける選択を実行する。図４Ｄに示すように、一部の例では、テキスト入力フィールド４１３’が選択されると、第２の電子デバイス４１５’は、テキスト入力フィールド４１３’にテキストが入力され得ることを示すテキストカーソル（例えば、テキストカーソル４２８’の表現）をテキスト入力フィールド４１３’に表示する。

【0063】

一部の例では、図４Ｃにおいて、視線４２７ｉとして代替的に表されるユーザの視線が、代替的に、第１のユーザインタフェース４１１’（又は、一部の例では、ディスプレイ４１４’）にも第２のユーザインタフェース４２５（又は、一部の例では、仮想拡張ディスプレイ４０４）にも向けられていなかった場合、第１の電子デバイス４０１及び第２の電子デバイス４１５’は、選択入力４７３Ｂに応じて動作を任意選択的に実行しない。例えば、第１の電子デバイス４０１が、マウス４３２’上で検出された選択に対応する第２の電子デバイス４１５’によって提供された入力データを受信すると、第１の電子デバイス４０１は、ユーザの視線４２７ｉが第１のユーザインタフェース４１１’及び第２のユーザインタフェース４２５から離れるように向けられていると判定し、選択に応じて任意の動作を実行することを取り止める命令を第２の電子デバイス４１５’に送信する。或いは、一部の例では、図４Ｄに示すように、図４Ｃの選択入力４７３Ｂが第２の電子デバイス４０１’によって検出されたときに、ユーザの視線４２７ｉが第１のユーザインタフェース４１１’にも第２のユーザインタフェース４２５にも向けられていない場合、第１の電子デバイス４１５は、入力を３次元環境４５０内の現在アクティブなユーザインタフェースにルーティングさせる入力ラッチ動作を実装する。例えば、入力は、視線４２７ｉが第１のユーザインタフェース４１１’及び第２のユーザインタフェース４２５から離れるように向けられている間に、選択入力４７３Ｂが検出される前に視線４２７が向けられていた最後のユーザインタフェースに自動的にルーティングされる。この例によれば、視線４２７は、図４Ｃにおいて選択入力４７３Ｂが検出される前に図４Ｂにおいて第１のユーザインタフェース４１１’に最後に向けられていたので、入力は第１のユーザインタフェース４１１’にラッチされ、これにより、第１の電子デバイス４０１は、図４Ｄに示すように、及び同様に上述したように、選択入力４７３Ｂを第１のユーザインタフェース４１１’にルーティングする（例えば、テキスト入力フィールド４１３’を選択する）。

【0064】

図４Ｄにおいて、テキストカーソル４２８’がテキスト入力フィールド４１３’に表示されている間に、及びユーザの視線４２７が第１のユーザインタフェース４１１’に向けられている間に、第２の電子デバイス４１５’は、第２の電子デバイス４１５’と通信しているキーボード４３１’を介して一連の１つ以上の入力４７３Ｃを検出する。例えば、図４Ｄにおいて、第２の電子デバイス４１５’は、キーボード４３１’の１つ以上のキーの選択を検出する。一部の例では、同様に上述したように、一連の１つ以上の入力４７３Ｃを検出したことに応じて、第２の電子デバイス４１５’は、キーボード４３１’の１つ以上のキーの選択に対応する情報を含む入力データを第１の電子デバイス４０１に送信する。一部の例では、同様に上述したように、第１の電子デバイス４０１が第２の電子デバイス４１５’によって提供された入力データを受信すると、第１の電子デバイス４０１は、３次元環境４５０内の視線４２７のロケーションに基づいてキーボード入力をどこにルーティングするかを判定する。図４Ｄでは、一連の１つ以上の入力４７３Ｃが第２の電子デバイス４１５’によって検出されたときに視線４２７が第１のユーザインタフェース４１１’に向けられているので、第１の電子デバイス４０１は、（例えば、１つ以上のコマンド／命令を含む出力データを介して）第２の電子デバイス４１５’に一連の１つ以上の入力４７３Ｃを第１のユーザインタフェース４１１’、特にテキスト入力フィールド４１３’に向けさせる。したがって、図４Ｅに示すように、テキストカーソル４２８’がテキスト入力フィールド４１３’内でアクティブであり、一連の１つ以上の入力４７３Ｃが第１のユーザインタフェース４１１’に向けられているので、第２の電子デバイス４１５’は、キーボード４３１’の１つ以上のキーの選択に従って、テキスト入力フィールド４１３’内のテキストカーソル４２８’のロケーションにテキスト（例えば、「ａｐａｒｔｍｅｎ」を綴るテキスト４２９’の表現）を表示する。

【0065】

一部の例では、カーソル４１２’は、第２の電子デバイス４１５’の物理的ディスプレイ４１４’と３次元環境４５０内の仮想拡張ディスプレイ４０４との間で移動可能であるように構成可能である。一部の例では、カーソル４１２’は、カーソル４１２’を制御するマウス４３２’の移動に基づいて、第２の電子デバイス４１５’の物理的ディスプレイ４１４’と仮想拡張ディスプレイ４０４との間で移動されてもよい。例えば、図４Ｆにおいて、第２の電子デバイス４１５’は、マウス４３２’の移動（例えば、テーブル４０６’の上部を右方向に横切る動き）に対応する移動入力４７３Ｄを検出する。加えて、一部の例では、カーソル４１２’は、ユーザの視線４２７のロケーションに基づいて、第２の電子デバイス４１５’の物理的ディスプレイ４１４’と仮想拡張ディスプレイ４０４との間で移動されてもよい。例えば、図４Ｆでは、マウス４３２’の移動が第２の電子デバイス４１５’によって検出されている間に、視線４２７は第２のユーザインタフェース４２５に向けられている。

【0066】

一部の例では、カーソル４１２’は、マウス４３２’の移動が移動閾値を超えたという判定に従って、第２の電子デバイス４１５’のディスプレイ４１４’と仮想拡張ディスプレイ４０４との間で移動される。例えば、マウス４３２’の移動は、マウス４３２’の移動の速度又は加速度が速度又は加速度閾値を超える場合、移動閾値を超える。一部の例では、マウス４３２’の移動が、ディスプレイの境界の閾値距離（例えば、０．５、１、１．５、２、３、５、１０、１５、２５ｃｍなど）を超える、任意選択で仮想拡張ディスプレイ４０４の方向へのカーソル４１２’の移動に対応する場合、マウス４３２’の移動は移動閾値を超える。例えば、図４Ｆでは、第２の電子デバイス４１５’によって検出されたマウス４３２’の移動は、第２の電子デバイス４１５’のディスプレイ４１４’の境界の閾値距離未満のカーソル４１２’の移動に対応する。したがって、図４Ｇに示すように、カーソル４１２’の表示は、第２の電子デバイス４１５’のディスプレイ４１４’内（例えば、ディスプレイ４１４’の右境界又はその付近）に維持される。例えば、第２の電子デバイス４１５’は、ディスプレイ４１４’の境界の閾値距離未満のカーソル４１２’の移動に対応する情報を含む入力データを第１の電子デバイス４０１に送信し、これは、第１の電子デバイス４０１に出力データを第２の電子デバイス４１５’に送信させ、これは、（例えば、マウス４３２’の移動に従ってカーソル４１２’を右方向に移動させるにもかかわらず）第２の電子デバイス４１５’にディスプレイ４１４’上のカーソル４１２’の表示を維持させる。他の例では、第２の電子デバイス４１５’は、カーソル４１２’の移動が移動閾値を超えないと判定されたとき、入力データを第１の電子デバイス４０１に送信することを取り止めることができ、カーソル４１２’の移動が移動閾値を超えるときのみ、入力データを送信し得る。

【0067】

図４Ｇでは、カーソル４１２’が第２の電子デバイス４１５’のディスプレイ４１４’上に表示されている間に、第２の電子デバイス４１５’は、マウス４３２’の更なる移動を検出する。例えば、図４Ｇに示されるように、第２の電子デバイス４１５’は、任意選択的に、ユーザの視線４２７が依然として仮想拡張ディスプレイ４０４の第２のユーザインタフェース４２５に向けられている間に、ディスプレイ４１４’上で右方向への、上述のディスプレイ４１４’の境界の閾値距離を超えるカーソル４１２’の移動に対応する移動入力４７３Ｅを検出する。代替的に、図４Ｇでは、視線４２７が第２のユーザインタフェース４２５に向けられている間に、第２の電子デバイス４１５’は、マウス４３２’を介した選択入力を検出する。例えば、第２の電子デバイス４１５’は、マウス４３２’上のボタンのクリック又は押下（例えば、又はマウス４３２’のタッチ感知面上のタップ）を検出する。

【0068】

一部の例では、図４Ｈに示すように、ディスプレイ４１４’の境界の閾値距離を超えて、任意選択的に仮想拡張ディスプレイ４０４の方向へのカーソル４１２’の移動に対応するマウス４３２’の移動を検出したことに応じて、第１の電子デバイス４０１は、３次元環境４５０内の仮想拡張ディスプレイ４０４内にカーソル４１２’を表示する。例えば、第１の電子デバイス４０１は、第２の電子デバイス４１５’にディスプレイ４１４’上のカーソル４１２’の表示を停止させ、マウス４３２’の移動に基づくロケーションで仮想拡張ディスプレイ４０４内にカーソル４１２’を再表示する（例えば、第１の電子デバイス４０１は、第２の電子デバイス４１５’によって提供されるマウス４３２’の移動に対応する情報を含む入力データに基づいて、第２のユーザインタフェース４２５内にカーソル４１２’を表示する）。一部の例では、第１の電子デバイス３０１は、第２の電子デバイス４１５’によって判定されたマウス４３２’の移動に基づいて仮想拡張ディスプレイ４０４内のロケーションにカーソル４１２’を示す、第２の電子デバイス４１５’から受信された画像データ（例えば、上述した）に基づいて、仮想拡張ディスプレイ４０４内にカーソル４１２’を表示する。

【0069】

代替的に、図４Ｈでは、ユーザの視線４２７が第２のユーザインタフェース４２５に向けられている間に第２の電子デバイス４１５’がマウス４３２’を介して選択入力を検出したことに応じて、第１の電子デバイス４０１は、カーソル４１２’を第２のユーザインタフェース４２５に移動させる。別の例では、視線４２７がカーソル４１２’によって現在対象となっているものとは異なるインタフェース（例えば、第２のユーザインタフェース４２５）又はディスプレイ（例えば、仮想拡張ディスプレイ４０４）に向けられている間に、又は視線４２７がカーソル４１２’から閾値距離であるロケーション（同じ又は異なるインタフェース、ディスプレイなどの中）に向けられている間に、第２の電子デバイス４１５’が図４Ｆの移動入力４７３Ｄを検出したことに応じて、第１の電子デバイス４０１は、視線４２７に基づくロケーションにカーソル４１２’を移動させてもよい。例えば、同様に上述したように、第１の電子デバイス４０１は、第２の電子デバイス４１５’にディスプレイ４１４’上のカーソル４１２’の表示を停止させ、仮想拡張ディスプレイ４０４内の視線４２７のロケーションに基づくロケーションにカーソル４１２’を再表示する。図４Ｈに示すように、第１の電子デバイス４０１は、任意選択的に、第２のユーザインタフェース４２５内の視線４２７のロケーションに（例えば、第１の検索結果４２６Ａ上に）カーソル４１２’を表示する。一部の例では、同様に上述したように、第１の電子デバイス４０１は、第２の電子デバイス４１５’によって提供されるカーソル４１２’に対応する画像データに基づいて、仮想拡張ディスプレイ４０４内にカーソル４１２’をレンダリングして表示する。

【0070】

一部の例では、第２の電子デバイス４０１’と通信しているキーボード４３１’及び／又はマウス４３２’を介して検出された入力は、第１の電子デバイス４１５において３次元環境４５０に表示される仮想拡張ディスプレイ４０４と対話するために、第１の電子デバイス４０１によってルーティングされてもよい。一部の例では、同様に上述したように、入力は、３次元環境４５０におけるユーザの視線４２７のロケーションに基づいてルーティングされる。図４Ｈにおいて、カーソル４１２’が第１の電子デバイス４１５の第２のユーザインタフェース４２５に表示されている間に、第２の電子デバイス４０１’は、マウス４３２’を介して選択入力４７３Ｆを検出する。例えば、図４Ｈでは、第２の電子デバイス４１５’は、マウス４３２’上のボタンのクリック又は押下（又はマウス４３２’のタッチ感知面のタップ）を検出する。

【0071】

一部の例では、図４Ｉに示すように、マウス４３２’上の選択入力４７３Ｆを検出したことに応じて、第１の電子デバイス４０１は、第２のユーザインタフェース４２５内のカーソル４１２’のロケーションに基づいて選択動作を実行する。例えば、図４Ｉに示すように、選択入力４７３Ｆが検出されたときにカーソル４１２’が第２のユーザインタフェース４２５内の第１の検索結果４２６Ａ上に位置し、視線４２７が第２のユーザインタフェース４２５に向けられているので、第１の電子デバイス４０１は、第１の検索結果４２６Ａに関連付けられたコンテンツ（例えば、ウェブサイト「ｗｗｗ．ＵＲＬ１．ｃｏｍ」からアクセス可能な「ウェブサイト１コンテンツ」）を表示することを含む第１の検索結果４２６Ａを選択する。具体的には、本明細書で上述したように、第２の電子デバイス４１５’は、選択入力４７３Ｆに対応する情報を含む入力データを第１の電子デバイス４０１に送信し、入力データを検出したことに応じて、３次元環境４５０における視線４２７のロケーションを判定する。図４Ｉでは、図４Ｈで選択入力４７３Ｆが検出されたときに視線４２７が第２のユーザインタフェース４２５に向けられたので、第１の電子デバイス４０１は、選択入力を仮想拡張ディスプレイ４０４に向ける、すなわち、第２のユーザインタフェース４２５内のカーソル４１２’のロケーションで選択を実行する。第２の電子デバイス４１５が仮想拡張ディスプレイ４０４のコンテンツを生成する他の例では、第２の電子デバイス４１５は、入力データを第１の電子デバイスに送信することを取り止めてもよく、代わりに、第２のユーザインタフェース４２５内のカーソル４１２’のロケーションで選択を実行してもよい。第１の電子デバイス４０１は、選択入力４７３Ｆに基づいて第２の電子デバイス４１５’によって判定されたものに基づいて仮想拡張ディスプレイ４０４のコンテンツに対する変更を示す、第２の電子デバイス４１５’から受信された画像データ（例えば、上述した）に基づいて、仮想拡張ディスプレイ４０４のコンテンツに対する任意の結果として生じる更新を表示し得る。

【0072】

図４Ｉにおいて、第２の電子デバイス４１５’は、マウス４３２’を介して移動入力４７３Ｇを検出する。例えば、図４Ｉにおいて、第２の電子デバイス４１５’は、カーソル４１２’が第１の電子デバイス４０１の第２のユーザインタフェース４２５内に表示されている間に、テーブル４０６’の表面を右方向に横切るマウス４３２’の移動を検出する。一部の例では、図４Ｊに示すように、第２の電子デバイス４１５’においてマウス４３２’の移動を検出したことに応じて、第１の電子デバイス４１５は、第２の電子デバイス４０１’において検出されたマウス４３２’の移動に従って、第２のユーザインタフェース４２５内のカーソル４１２’を移動させる。例えば、移動入力４７３Ｇを検出したことに応じて、第２の電子デバイス４１５’は、マウス４３２’の移動に対応する情報（例えば、移動の方向及び／又は移動の距離若しくは速度）を含む入力データを第１の電子デバイス４０１に送信する。一部の例では、本明細書で同様に論じられるように、第１の電子デバイス４０１が第２の電子デバイス４１５’によって提供される入力データを受信すると、第１の電子デバイス４０１は、移動入力４７３Ｇが第２の電子デバイス４１５’において検出されたときのユーザの視線４２７のロケーションを判定する。図４Ｊでは、視線４２７が仮想拡張ディスプレイ４０４内の第２のユーザインタフェース４２５に向けられたので、第１の電子デバイス４０１は、入力データに従って第２のユーザインタフェース４２５内でカーソル４１２’を移動させる。一部の例では、第１の電子デバイス３０１は、第２の電子デバイス４１５’によって判定されたマウス４３２’の移動に基づいて仮想拡張ディスプレイ４０４内の更新されたポジションを有するカーソル４１２’を示す、第２の電子デバイス４１５’から受信された画像データ（例えば、上述）に基づいて、仮想拡張ディスプレイ４０４内の第２のユーザインタフェース４２５内のカーソル４１２’の移動を表示する（例えば、カーソル４１２’が表示されるポジションを変更する）。

【0073】

図４Ｊでは、第１の電子デバイス４０１が第２のユーザインタフェース４２５内にカーソル４１２’を表示している間に、第２の電子デバイス４１５’は、マウス４３２’を介して選択入力４７３Ｈを検出する。例えば、同様に上述したように、第２の電子デバイス４１５’は、マウス４３２’上のボタンのクリック又は押下（又はマウス４３２’のタッチ感知面のタップ）を検出する。一部の例では、図４Ｋに示すように、第２の電子デバイス４１５’が選択入力４７３Ｈを検出したことに応じて、第１の電子デバイス４０１は、カーソル４１２’のロケーションに基づいて第２のユーザインタフェース４２５において選択動作を実行する。例えば、上述したのと同様に、第２の電子デバイス４１５’が図４Ｊの選択入力４７３Ｈを検出したときにユーザの視線４２７が第２のユーザインタフェース４２５に向けられているので、第１の電子デバイス４０１は、検出された選択入力４７３Ｈに従って選択入力を第２のユーザインタフェース４２５に向け、特に、第２のユーザインタフェース４２５のテキスト入力フィールド４１６の選択を実行する。一部の例では、同様に上述したように、第２の電子デバイス４１５’は、代わりに、第２のユーザインタフェース４２５のテキスト入力フィールド４１６の選択を実行し、仮想拡張ディスプレイ４０４のための更新された画像データを第１の電子デバイス４０１に提供してもよい。図４Ｋに示されるように、一部の例では、テキスト入力フィールド４１６を選択することは、キーボード入力に応じてテキストがテキスト入力フィールドに入力され得ることを示すテキストカーソル４２８をテキスト入力フィールド４１６内に表示することを含む。

【0074】

図４Ｋでは、第１の電子デバイス４０１がテキスト入力フィールド４１６にテキストカーソル４２８を表示している間に、第２の電子デバイス４１５’は、キーボード４３１’を介して一連の１つ以上の選択入力４７３Ｉを検出する。例えば、図４Ｋでは、第２の電子デバイス４１５’は、キーボード４３１’の１つ以上のキーの１つ以上の選択又は押下を検出する。一部の例では、図４Ｌに示すように、第２の電子デバイス４１５’が一連の１つ以上の選択入力４７３Ｉを検出したことに応じて、第１の電子デバイス４０１は、キーボード４３１’を介して検出された一連の１つ以上の選択入力４７３Ｉに従ってテキスト入力フィールド４１６にテキスト４４９を入力する。例えば、図４Ｌにおいて、第１の電子デバイス４０１は、キーボード４３１’の選択されたキーに従って、テキスト入力フィールド４１６内のテキストカーソル４２８のロケーションに、「ｒｅｓｔａｕｒａ」を綴るテキスト４４９を表示する。特に、本明細書で上述したのと同様に、一連の１つ以上の選択入力４７３Ｉが第２の電子デバイス４１５’によって検出されたときに視線４２７が第２のユーザインタフェース４２５に向けられたので、第１の電子デバイス４０１は、第２の電子デバイス４１５’によって提供されたキーボード４３１’の選択されたキーに対応する情報を含む入力データに従ってテキスト４４９を表示する。一部の例では、同様に上述したように、第２の電子デバイス４１５’は、代わりに、キーボード４３１’を介して検出された一連の１つ以上の選択入力４７３Ｉに従って、テキスト４４９をテキスト入力フィールド４１６に入力してもよい。これらの例では、第１の電子デバイス４１５’は、第２の電子デバイス４１５’から受信された「ｒｅｓｔａｕｒａ」を示す画像データに基づいて、テキスト入力フィールド４１６内に「ｒｅｓｔａｕｒａ」を綴るテキスト４４９を表示し得る。

【0075】

図４Ｌでは、第１の電子デバイス４０１が第２のユーザインタフェース４２５のテキスト入力フィールド４１６にテキスト４４９を表示している間に、第２の電子デバイス４１５’は、キーボード４３１’を介して更なる選択入力４７３Ｊを検出する。例えば、図４Ｌにおいて、第２の電子デバイス４１５’は、キーボード４３１’上の１つ以上の追加のキーの選択を検出する。図４Ｌに示すように、第２の電子デバイス４１５’は、ユーザの視線４２７が第２の電子デバイス４１５’のディスプレイ４１４’上の第１のユーザインタフェース４１１’に向けられている間に、キーボード４３１’を介して選択入力４７３Ｊを検出する。

【0076】

一部の例では、図４Ｍに示すように、第２の電子デバイス４１５’がキーボード４３１’を介して選択入力４７３Ｊを検出したことに応じて、第１の電子デバイス４０１は、視線４２７のロケーションに基づいて、選択入力４７３Ｊを第２の電子デバイス４１５’の第１のユーザインタフェース４１１’にルーティングする。例えば、本明細書で上述したのと同様に、第１の電子デバイス４０１は、選択入力４７３Ｊが図４Ｌのキーボード４３１’上で検出されたときに視線４２７がディスプレイ４１４’に向けられていると判定し、第２の電子デバイス４１５’にキーボード４３１’の選択されたキーに従ってテキスト入力フィールド４１３’内のテキスト４２９’を更新させる出力データを第２の電子デバイス４１５’に送信する。図４Ｍに示されるように、第１のユーザインタフェース４１１’内のテキスト４２９’は、テキスト入力フィールド４１３’内のテキストカーソル４２８’のロケーションにテキスト「ａｐａｒｔｍｅｎｔｓ ｆｏ」を含むように更新される。更に、図４Ｍに示されるように、第１の電子デバイス４０１は、キーボード４３１’の選択されたキーに従って、第２のユーザインタフェース４２５内のテキスト入力フィールド４１６内のテキスト４４９を更新することを取り止める。

【0077】

加えて、一部の例では、図４Ｍに示すように、第２の電子デバイス４１５’が選択入力４７３Ｊに従って第１のユーザインタフェース４１１’内のテキスト４２９’を更新すると、カーソル４１２’は、任意選択的に３次元環境４５０内の視線４２７のロケーションに基づいて、第１のユーザインタフェース４１１’内に再表示される。例えば、図４Ｍでは、第１の電子デバイス４０１は、第２のユーザインタフェース４１１内のカーソル４１２’の表示を停止し、第２の電子デバイス４１５’にデータ（例えば、出力データ）を送信して、第２の電子デバイス４１５’に、３次元環境４５０内の（例えば、テキスト入力フィールド４１３’上の）視線４２７のロケーションに対応する第１のユーザインタフェース４２５’のロケーションにカーソル４１２’を再表示させる。一部の例では、本明細書で上述したように、カーソル４１２’がディスプレイ４１４’上の第１のユーザインタフェース４１１’内に位置し（例えば、表示され）、視線４２７が第２の電子デバイス４１５’のディスプレイ４１４’に向けられている間に、カーソル４１２’は、上述した方法のうちの１つ以上でディスプレイ４１４’（例えば、第１のユーザインタフェース４１１’及び／又はドック４０９’）のユーザインタフェース要素と対話するようにマウス４３２’を介して制御可能である。

【0078】

一部の例では、第１の電子デバイス４０１のユーザからの第１の電子デバイス４０１の関連付け解除は、第２の電子デバイス４１５’のディスプレイ４１４’を、第１のユーザインタフェース４１１’及び第２のユーザインタフェース４２５のための唯一のディスプレイとして再構成させる。例えば、図４Ｍにおいて、第１の電子デバイス４０１は、矢印４７５Ａによって表されるように、ユーザの頭部からの第１の電子デバイス４０１の取り外しを（例えば、図２の向きセンサ２１０を介して）検出する。一部の例では、ユーザからの第１の電子デバイス４０１の関連付け解除は、（例えば、第１の電子デバイス４０１のディスプレイがもはやユーザの眼の上又は眼の前に配置されないように）ユーザを取り囲む物理環境を第１の電子デバイス４０１のディスプレイを介してもはや見えなくさせる。一部の例では、第１の電子デバイス４０１の関連付け解除は、第１の電子デバイス４０１の電源が切られている又はスリープ状態の開始に対応し、これは、任意選択的に、第１の電子デバイス４０１のディスプレイに動作を停止又は一時停止させる。

【0079】

一部の例では、図４Ｎに示されるように、第１の電子デバイス４０１のユーザからの第１の電子デバイス４０１の関連付け解除を検出したことに応じて、第１の電子デバイス４０１は、３次元環境４５０の提示を停止する。例えば、図４Ｎに示されるように、全ての仮想オブジェクトは、第１の電子デバイス４０１、すなわち仮想拡張ディスプレイ４０４によって表示されることを停止する。加えて、図４Ｎに示されるように、一部の例では、第１の電子デバイス４０１がもはやユーザによって使用されていないとき、現実世界環境４００内の第２の電子デバイス４１５のディスプレイ４１４は、ディスプレイ４１４及び仮想拡張ディスプレイ４０４にわたって以前に表示された全てのウィンドウ、アプリケーション、ファイル、及び他のユーザインタフェース要素のための唯一の利用可能なディスプレイとして再構成される。例えば、図４Ｎに示すように、第１のユーザインタフェース４１１及び第２のユーザインタフェース４２５は、仮想拡張ディスプレイ４０４が上記で概説したように第２のユーザインタフェース４２５のための表示手段としてもはや利用可能ではないので、第２の電子デバイス４１５のディスプレイ４１４上に同時に表示される。一部の例では、第１の電子デバイス４０１のユーザからの第１の電子デバイス４０１の関連付け解除を検出したことに応じて、第１の電子デバイス４０１上で実行される（第２の電子デバイス４１５上で実行されない）アプリケーションに関連付けられたインタフェースは、ディスプレイ４１４上に表示されなくてもよい。他の例では、（第２の電子デバイス４１５ではなく）第１の電子デバイス４０１上で実行されるアプリケーションに関連付けられたインタフェースは、（例えば、第２の電子デバイス４１５’の表示能力に基づいて）第１の電子デバイス４０１のユーザからの第１の電子デバイス４０１の関連付け解除を検出したことに応じて、ディスプレイ４１４上に表示されてもよい。

【0080】

特に、一部の例では、第１の電子デバイス４０１がユーザから関連付け解除されると、第１の電子デバイス４０１は、第２のユーザインタフェース４２５の表示の状態に対応する情報を含むコンテキストデータを第２の電子デバイス４１５に送信する。例えば、図４Ｎにおいて、第２のユーザインタフェース４２５の表示の状態に対応する情報は、第２のユーザインタフェース４２５の外観に関する詳細、図示されるようなテキスト「ｒｅｓｔａｕｒａ」などの第２のユーザインタフェース４２５に含まれるコンテンツ、及び／又は第２のユーザインタフェース４２５の表示モード（例えば、第２のユーザインタフェース４２５が仮想拡張ディスプレイ４０４上に拡張フルスクリーンモードで表示されるかどうか）を含む。図４Ｎに示されるように、第１の電子デバイス４０１がもはや使用されていない後に第２のユーザインタフェース４２５が第２の電子デバイス４１５のディスプレイ４１４上に表示されるとき、第２のユーザインタフェース４２５は、第１の電子デバイス４０１によって提供されるコンテキストデータに従って（例えば、ディスプレイ４１４が唯一のディスプレイとして再構成されるときにテキスト「ｒｅｓｔａｕｒａ」が第２のユーザインタフェース４２５内に依然として表示されるように）表示される。第２の電子デバイス４１５が仮想拡張ディスプレイ４０４のコンテンツを生成し、第２のユーザインタフェース４２５の表示の状態に対応する情報を含むコンテキストデータを管理する他の例では、第１の電子デバイス４０１は、コンテキストデータを第２の電子デバイス４１５に送信することを取り止めてもよく、代わりに、第１の電子デバイス４０１がユーザから関連付け解除されたという指示を送信してもよい。

【0081】

一部の例では、第１の電子デバイス４０１のディスプレイが動作している（例えば、電源オン、又はスリープ状態から起動されている）ように第１の電子デバイス４０１がユーザに再関連付けられた場合、第１の電子デバイス４０１は、第１の電子デバイス４０１における仮想拡張ディスプレイ４０４の以前の表示に基づいて仮想拡張ディスプレイ４０４を再表示する。図４Ｎでは、矢印４７５Ｂによって表されるように、ユーザは、第１の電子デバイス４０１をユーザの頭部上に戻す。例えば、ユーザは、第１の電子デバイス４０１のディスプレイをユーザの眼の上及び／又は前に配置して、現実世界環境４００が第１の電子デバイス４０１のディスプレイを介してもう一度見えるようにする。

【0082】

一部の例では、図４Ｏに示すように、第１の電子デバイス４０１がユーザと再関連付けられると、第１の電子デバイス４０１は３次元環境４５０を再表示する。加えて、図４Ｏに示すように、第１の電子デバイス４０１は、仮想拡張ディスプレイ４０４が第２の電子デバイス４１５’のための第２の（例えば、仮想）ディスプレイとして復元されるので、第２のユーザインタフェース４２５を含む仮想拡張ディスプレイ４０４を再表示する。例えば、図４Ｏに示すように、第２の電子デバイス４１５’は、第２のユーザインタフェース４２５の表示を停止し、第１の電子デバイスは、図４Ｍにおいて第１の電子デバイス４０１がユーザから関連付け解除される前の第２のユーザインタフェース４２５の表示状態に従って、仮想拡張ディスプレイ４０４内に第２のユーザインタフェース４２５を表示する。

【0083】

加えて、一部の例では、図４Ｏに示されるように、第２のユーザインタフェース４２５が第１の電子デバイス４０１において仮想拡張ディスプレイ４０４に再表示されるとき、第２のユーザインタフェース４２５は、第２のユーザインタフェース４２５が第１の電子デバイス４０１において最後に表示されて以来、第２のユーザインタフェース４２５のコンテンツに対する更新を含む、第２のユーザインタフェース４２５の提示に対する任意の更新を含む。例えば、図４Ｏでは、第２のユーザインタフェース４２５が図４Ｍで第１の電子デバイス４０１に最後に表示されてから（例えば、キーボード４３１’を介した選択入力を検出したことに応じて）、テキスト「ｒｅｓｔａｕｒａｎｔｓ」が第２のユーザインタフェース４２５において更新されている。したがって、図４Ｏに示すように、第２のユーザインタフェース４２５が第１の電子デバイス４０１において仮想拡張ディスプレイ４０４に再表示されるとき、第２のユーザインタフェース４２５は、上述の更新されたテキストを含む。

【0084】

一部の例では、仮想拡張ディスプレイ４０４は、第１の電子デバイス４１５がユーザに再関連付けられたとき、再関連付けが関連付け解除の閾値時間量内に行われた場合、第２の電子デバイス４０１’の第２のディスプレイとして再構成される。例えば、仮想拡張ディスプレイ４０４は、ユーザが最初に第１の電子デバイス４０１を自分の頭部から（例えば、及び／又は眼から離して）取り外した後、ユーザが第１の電子デバイス４０１を取り外してから１、２、５、１０、１５、２０、３０、６０、８０、１００、１２０分など以内に第１の電子デバイス４０１を自分の頭部に（例えば、眼の上又は前に）置いた場合、第２の電子デバイス４１５’のコンテンツ（例えば、ユーザインタフェース）を表示するように構成されたままである。一部の例では、ユーザからの第１の電子デバイス４０１の関連付け解除の閾値時間量内に再関連付けが発生しない場合、第１の電子デバイス４０１は、仮想拡張ディスプレイ４０４内に第２のユーザインタフェース４２５を再表示することを取り止める。一部の例では、第１の電子デバイス４０１はまた、仮想拡張ディスプレイ４０４を再表示することを取り止める。いくつかのそのような例では、仮想拡張ディスプレイ４０４は、図３Ｇの第１のアフォーダンス３１９と同様のアフォーダンスを使用するなどして、仮想拡張ディスプレイ４０４を再起動することによって再表示されてもよい。

【0085】

一部の例では、第２の電子デバイス４１５によって最初に検出された入力は、入力が第２の電子デバイス４１５に向けられるべきであるという判定に従って（例えば、視線４２７がディスプレイ４１４’、ディスプレイ４１４’のインタフェース、仮想拡張ディスプレイ４０４、又は仮想拡張ディスプレイ４０４のインタフェースに向けられていることに基づいて）、第１の電子デバイス４０１に送信されなくてもよいことに留意されたい。これらの例では、第１の電子デバイス４０１は、断続的に、周期的に、又は任意の他の所望の間隔で、ユーザ入力の現在の宛先を示す情報を第２の電子デバイス４１５’に送信し得る。現在の宛先が第２の電子デバイス４１５’である場合、第２の電子デバイス４１５’は、検出された入力を第１の電子デバイス４０１に送信することを取り止めてもよく、代わりに、入力をローカルに処理してもよい。現在の宛先が第１の電子デバイス４０１（又は第２の電子デバイス４１５’以外の任意のデバイス）である場合、第２の電子デバイス４１５’は、検出された入力に対応する情報を含む入力データを（例えば、直接的に又はサーバを介して間接的に）第１の電子デバイス４０１に送信し得る。

【0086】

一部の例では、第１のユーザインタフェース４１１’及び／又は第２のユーザインタフェース４２５は、追加的に又は代替的に、第１の電子デバイス４０１によって検出される入力を介して対話されてもよいことに留意されたい。例えば、第１のユーザインタフェース４１１’及び／又は第２のユーザインタフェース４２５の個々の要素（例えば、テキスト入力フィールド４１３’／４１６など）は、入力をルーティングするための上述の視線ベースのルールに従って、声又は手に基づく入力を介して、例えば、エアピンチ入力（例えば、ユーザの手の人差し指と親指が一緒になって接触する）又はエアタップ若しくはタッチジェスチャ（例えば、手の人差し指によって提供される）を介して選択されてもよい。加えて、一部の例では、仮想拡張ディスプレイ４０４自体が、第１の電子デバイス４０１によって検出される手に基づく入力を介して対話されてもよい。例えば、第１の電子デバイス４０１は、（例えば、エアピンチ入力などを介して）仮想拡張ディスプレイ４０４の選択を検出し、続いてユーザの手の移動を検出したことに応じて、３次元環境４５０内で仮想拡張ディスプレイ４０４を再配置し得る。別の例として、第１の電子デバイス４０１は、第２のユーザインタフェース４２５のサイズが３次元環境４５０において増減され得るように、及び／又は追加のユーザインタフェースが仮想拡張ディスプレイ４０４に表示され得るように、３次元環境４５０内で仮想拡張ディスプレイ４０４を拡大縮小してもよい。入力が仮想拡張ディスプレイ４０４のコンテンツ（例えば、第２のユーザインタフェース４２５）ではなく仮想拡張ディスプレイ４０４自体に向けられるそのような例では、入力は、第２の電子デバイス３０１’ではなく第１の電子デバイス４１５によって（例えば、上述の手に基づく入力は、第２の電子デバイス４１５’とは独立して第１の電子デバイス３０１によって検出されるため）応答される。

【0087】

一部の例では、１つ以上の物理入力デバイス（例えば、マウス３３２’、４３２’及びキーボード３３１’、４３１’などの物理入力デバイス）は、追加的に又は代替的に、第１の電子デバイス（例えば、第１の電子デバイス３０１又は４０１）と通信可能に結合されてもよい（例えば、ワイヤード又はワイヤレスで）ことにも留意されたい。これらの例では、物理入力デバイスからの入力は、上述したのと同じ方法で適切なデバイス又はインタフェースにルーティングされ得る。しかしながら、これらの例では、物理入力デバイスからの入力は、適切なデバイス又はインタフェースにルーティングされる前に、第２の電子デバイス（例えば、第２の電子デバイス３１５’又は４１５’）によって最初に検出され、第１の電子デバイスに送信される必要はない。

【0088】

したがって、上記で概説したように、電子デバイスと通信している物理入力デバイス上で検出された入力を介して対話され得る３次元環境内の電子デバイスのための拡張仮想ディスプレイを提供することは、利点として、ユーザが別個の入力手段を利用することを必要とせずに、電子デバイスのディスプレイ及び拡張仮想ディスプレイとのシームレスで効率的な対話を容易にする。上記のシステム及び方法の別の利点は、第１の物理的電子デバイスの入力デバイス（例えば、キーボード、マウス、トラックパッドなど）のセットと、第２の物理的電子デバイスの入力デバイス（例えば、アイトラッキングセンサ、ハンドトラッキングセンサ、向きセンサなど）のセットとのシームレスな統合であり、これは、入力デバイスの両方のセットにおいて受信された入力が、３次元環境内の同じ１つ以上のユーザインタフェースに向けられることを可能にする。次に、リアルタイムマルチユーザ通信セッション内の仮想拡張ディスプレイの画像との例示的な対話に注意を向ける。

【0089】

図５Ａ～図５Ｇは、本開示の一部の例による、マルチユーザ通信セッション内の電子デバイスのユーザインタフェースの表現との例示的な対話を示す。一部の例では、図５Ａに示すように、第１の電子デバイス５０１を使用して３次元環境５５０を提示し得る。一部の例では、第１の電子デバイス５０１は、任意選択的に、上述の第１の電子デバイス４０１／３０１に対応する。一部の例では、３次元環境５５０は、第１の電子デバイス５０１が位置する物理環境のキャプチャされた部分を含む。例えば、３次元環境５５０は、図５Ａに示すように、テーブル（例えば、テーブル５０６’の表現）を任意選択的に含む。加えて、３次元環境５５０は、第２の電子デバイス（例えば、第２の電子デバイス５１５’の表現）と、（例えば、物理環境内のテーブルの上に配置された）第２の電子デバイスと通信している１つ以上の物理入力デバイス（例えば、１つ以上の入力デバイス５３１’／５３２’の１つ以上の表現）とを含む。一部の例では、３次元環境５５０は、任意選択的に、上述の３次元環境４５０／３５０に対応する。一部の例では、第２の電子デバイス５１５’は、上述の第２の電子デバイス４１５’／３１５’に対応する。一部の例では、１つ以上の入力デバイス５３１’／５３２’は、上述の１つ以上の入力デバイス４３１’／４３２’及び／又は３３１’／３３２’に対応する。一部の例では、物理環境の表現は、第１の電子デバイス５０１の透明又は半透明のディスプレイを通して見られる物理環境の部分を含むことができる。

【0090】

一部の例では、本明細書で上述したのと同様に、第１の電子デバイス５０１が第２の電子デバイス５１５’のための仮想拡張ディスプレイを表示するように構成可能であり得るように、第１の電子デバイス５０１は、第２の電子デバイス５１５’と通信し得る。例えば、図５Ａに示すように、３次元環境５５０は、第２の電子デバイス５１５’で表示される第１のアフォーダンス５１９を含む。一部の例では、第１のアフォーダンス５１９は、上述した第１のアフォーダンス３１９に対応する。図５Ａでは、第１のアフォーダンス５１９が第１の電子デバイス５０１のユーザによって選択されていないので、第１の電子デバイス５０１は、第２の電子デバイス５１５’のための仮想拡張ディスプレイを表示していない。

【0091】

加えて、一部の例では、図５Ａに示すように、３次元環境５５０は、マルチユーザ通信セッションにおいて、第１の電子デバイス５１５及び第２の電子デバイス５０１’とは異なる第３の電子デバイスに参加するための招待に対応する招待要素５３５を含む。例えば、第１の電子デバイス５０１は、マルチユーザ通信セッションにおいて第３の電子デバイスのユーザに参加するように第１の電子デバイス５０１のユーザを招待する第３の電子デバイス（図示せず）からの指示を検出したことに応じて、招待要素５３５を表示する。一部の例では、図５Ａに示すように、招待要素５３５は、マルチユーザ通信セッションに参加する招待を受け入れるために選択可能な第１のオプション５３７－１と、マルチユーザ通信セッションに参加する招待を拒否するために選択可能な第２のオプション５３７－２とを含む（例えば、３次元環境５５０における招待要素５３５の表示を停止することを含む）。

【0092】

図５Ａにおいて、招待要素５３５を３次元環境５５０に表示している間に、第１の電子デバイス５０１は、招待要素５３５の第１のオプション５３７－１に向けられた選択入力５７１Ａを検出する。例えば、第１の電子デバイス５０１は、第１の電子デバイス５０１の１つ以上のセンサを介して、ユーザの手によって実行されるエアピンチジェスチャ、手によって実行されるタップ又はタッチジェスチャ、口頭コマンド、第１のオプション５３７－１に向けられた視線滞留などを検出する。一部の例では、図５Ｂに示すように、第１のオプション５３７－１の選択を検出したことに応じて、第１の電子デバイス５０１は、以下で説明するように、マルチユーザ通信セッションにおいて第３の電子デバイスに参加する。

【0093】

一部の例では、第１の電子デバイス５０１が第３の電子デバイス（図示せず）とのマルチユーザ通信セッションに参加するとき、第１の電子デバイス５０１及び第３の電子デバイスは、１つ以上の共有仮想オブジェクト（例えば、画像、ビデオ、音声などのコンテンツ、アプリケーションのユーザインタフェースの表現など）を含む共有３次元環境を提示するように構成される。本明細書で使用される場合、「共有３次元環境」という用語は、コンテンツ、アプリケーション、データなどが２つ以上の電子デバイスのユーザに共有及び／又は提示され得る、２つ以上の電子デバイスにおいて独立して提示され、表示され、及び／又は見える３次元環境を指す。一部の例では、第１の電子デバイス５０１が第２の電子デバイスとマルチユーザ通信セッションにある間、１つの電子デバイスのユーザに対応するアバターが、他の電子デバイスを介して表示される３次元環境内に任意選択的に表示される。例えば、図５Ｂに示すように、第１の電子デバイス５０１において、第３の電子デバイスのユーザに対応するアバター５３６が３次元環境５５０に表示される。

【0094】

一部の例では、共有３次元環境の一部としてのアバター５３６の提示は、任意選択的に、第３の電子デバイスのユーザの声に対応するオーディオエフェクトを伴う。例えば、第１の電子デバイス５０１を使用して３次元環境５５０内に表示されるアバター５３６は、任意選択的に、第３の電子デバイスのユーザの声に対応するオーディオエフェクトを伴う。いくつかのそのような例では、第３の電子デバイスのユーザが話すとき、ユーザの声は、第３の電子デバイスによって（例えば、マイクロフォンを介して）検出され、第１の電子デバイス５０１に（例えば、直接又はサーバ（例えば、ワイヤレス通信端末）を介して）送信されてもよく、それにより、第３の電子デバイスのユーザの検出された声は、３次元環境５５０内の第１の電子デバイス５０１のユーザに音声として（例えば、スピーカ（単数又は複数）２１６を使用して）提示されてもよい。一部の例では、第３の電子デバイスのユーザの声に対応するオーディオエフェクトは、（例えば、第１の電子デバイス５０１のスピーカから出力されているにもかかわらず）第１の電子デバイス５０１のユーザには３次元環境５５０内のアバター５３６のロケーションから発するように見えるように、空間化されてもよい。一部の例では、第３の電子デバイスのユーザの声に対応するオーディオエフェクトは、代替的に、第１の電子デバイス５０１においてモノラル又はステレオで提示されてもよい。

【0095】

一部の例では、第１の電子デバイス５０１及び第３の電子デバイスがマルチユーザ通信セッションにある間、アバター５３６は、第３の電子デバイスを取り囲む物理環境における第３の電子デバイス（及び／又は第３の電子デバイスのユーザ）の向きに対応する及び／又は基づく個別の向きで３次元環境５５０内に表示される。例えば、図５Ｂでは、３次元環境５５０において、アバター５３６は、任意選択的に、第１の電子デバイス５０１のユーザの視点の方を向いている。マルチユーザ通信セッション内で、特定のユーザが物理環境内で電子デバイス（及び／又はユーザ自身）を移動させると、ユーザの視点は移動に従って変化し、したがって、３次元環境内のユーザのアバターの向きも変化し得る。例えば、図５Ｂを参照すると、第３の電子デバイスのユーザが、第３の電子デバイスが左に（例えば、反時計回りに）（例えば、対応する量）回転されるように、３次元環境において左向きを見る場合、第１の電子デバイス５０１のユーザは、第３の電子デバイスの移動に従って、第３の電子デバイスのユーザに対応するアバター５３６が第１の電子デバイス５０１のユーザの視点に対して右に（例えば、時計回りに）回転するのを見ることになる。

【0096】

加えて、一部の例では、第１の電子デバイス５０１及び第３の電子デバイスがマルチユーザ通信セッションにある間、共有３次元環境の視野及び／又は共有３次元環境内のユーザの視点のロケーションは、任意選択的に、（例えば、電子デバイスのユーザによる）電子デバイスの移動に従って変化する。例えば、通信セッション中に、（例えば、第１の電子デバイス５０１のユーザが第１の電子デバイス５０１を取り囲む物理環境内で前方に移動したために）第１の電子デバイス５０１がテーブル５０６’及び／又はアバター５３６の表現に近づくように移動された場合、３次元環境５５０の視野はそれに応じて変化し、テーブル５０６’の表現、第２の電子デバイス５１５’の表現及びアバター５３６が視野内でより大きく見えるようになる。一部の例では、第１の電子デバイス５０１による３次元環境５５０内の視点の変更及び／又は３次元環境５５０内の仮想オブジェクトとの対話が、第３の電子デバイスにおいて３次元環境内に示されるものに任意選択的に影響を及ぼさず、逆もまた同様であるように、各ユーザは、共有３次元環境と独立して対話し得る。

【0097】

一部の例では、アバター５３６は、第３の電子デバイスのユーザの表現（例えば、全身レンダリング）である。一部の例では、アバター５３６は、第３の電子デバイスのユーザの一部分の表現（例えば、頭部、顔、頭及び胴体などのレンダリング）である。一部の例では、アバター５３６は、３次元環境５５０に表示される、第３の電子デバイスのユーザを表す、ユーザ個人化された、ユーザ選択された、及び／又はユーザ作成された表現である。図５Ｂに示すアバター５３６は、第３の電子デバイスのユーザの全身表現に対応するが、上述したもののうちの１つなどの代替アバターが提供されてもよいことを理解されたい。

【0098】

一部の例では、第１の電子デバイス５０１及び第３の電子デバイスがマルチユーザ通信セッションにある間、１つの電子デバイスにおいて１人のユーザによって視聴されるコンテンツは、マルチユーザ通信セッションにおいて別の電子デバイスにおいて別のユーザと共有され得る。いくつかのそのような例では、コンテンツは、共有３次元環境において両方のユーザによって（例えば、それぞれの電子デバイスを介して）体験（例えば、閲覧及び／又は対話）され得る（例えば、コンテンツは、３次元環境において共有されるコンテンツである）。例えば、図５Ｃでは、第１の電子デバイス５０１は、コンテンツ（例えば、「コンテンツＡ」）を第１の電子デバイス５０１のユーザと共有するための第３の電子デバイスのユーザ（例えば、「ユーザ１」）からの要求に対応する視覚的指示５３９を表示している。図５Ｃに示すように、視覚的指示５３９は、第１の電子デバイス５０１のユーザとコンテンツを共有するための第３の電子デバイスのユーザからの要求を承認するために選択可能な選択可能オプション５３９－１を任意選択的に含む。一部の例では、第１の電子デバイス５０１は、上述の共有要求に対応するデータを検出したことに応じて、３次元環境５５０内に視覚的指示５３９を表示する。

【0099】

加えて、一部の例では、共有３次元環境は、マルチユーザ通信セッションにおける１人のユーザにプライベートな非共有コンテンツを含む。例えば、図５Ｂ～図５Ｃにおいて、第３の電子デバイスは、第３の電子デバイスにおいて３次元環境内にプライベートアプリケーションウィンドウを表示していてもよく、これは、任意選択的に、マルチユーザ通信セッションにおいて第１の電子デバイス５０１と第３の電子デバイスとの間で共有されないオブジェクトである。一部の例では、プライベートアプリケーションウィンドウは、第３の電子デバイス上で動作している個別のアプリケーション（例えば、仮想拡張ディスプレイアプリケーション、メディアプレーヤアプリケーション、ウェブブラウジングアプリケーション、メッセージングアプリケーションなど）に関連付けられてもよい。プライベートアプリケーションウィンドウは第１の電子デバイス５０１と共有されないので、第１の電子デバイス５０１は、任意選択的に、図５Ｂ～図５Ｃに示すように、３次元環境５５０内にプライベートアプリケーションウィンドウ５０４’’の表現を表示する。図５Ｂ～図５Ｃに示すように、一部の例では、プライベートアプリケーションウィンドウ５０４’’の表現は、第１の電子デバイス５０１のユーザがプライベートアプリケーションウィンドウのコンテンツを見ることを防止する、プライベートアプリケーションウィンドウのフェード、遮蔽、変色、及び／又は半透明の表現であってもよい。

【0100】

図５Ｃでは、３次元環境５５０内に視覚的指示５３９を表示している間に、第１の電子デバイス５０１は、視覚的指示５３９の選択可能オプション５３９－１に向けられた選択入力５７１Ｂを検出する。例えば、同様に上述したように、第１の電子デバイス５０１は、エアピンチジェスチャ、タップ又はタッチジェスチャ、口頭コマンド、選択可能オプション５３９－１に向けられた視線滞留などを検出する。図５Ｃなどの一部の例では、第１の電子デバイス５０１とコンテンツを共有する要求は、第１の電子デバイス５０１のユーザとプライベートアプリケーションウィンドウ５０４”（３次元環境５５０で見える）を共有する要求に対応する。

【0101】

一部の例では、図５Ｄに示すように、選択可能オプション５３９－１の選択を検出したことに応じて、第１の電子デバイス５０１は、コンテンツを第１の電子デバイス５０１と共有するための第３の電子デバイスからの要求を承認する。一部の例では、第１の電子デバイス５０１と共有されるコンテンツは、上述のプライベートアプリケーションウィンドウのコンテンツに対応するので、第１の電子デバイス５０１は、３次元環境５５０におけるプライベートアプリケーションウィンドウ５０４’’の表現の表示を停止する。また、図５Ｄに示すように、コンテンツが第１の電子デバイス５０１と共有される場合、第１の電子デバイス５０１は、共有されたコンテンツに対応する画像５０４を３次元環境５５０に表示する。一部の例では、図５Ｄに示すように、第１の電子デバイス５０１が３次元環境５５０において画像５０４を表示するとき、第３の電子デバイスのユーザに対応するアバター５３６のポジションは、３次元環境５５０において任意選択的に変化する。例えば、アバター５３６は、図５Ｄに示すように、アバター５３６が３次元環境５５０内の画像５０４のコンテンツの方を向くように、第１の電子デバイス５０１のユーザの視点に隣接する（例えば、その右側の）ロケーションに移動される。

【0102】

一部の例では、画像５０４は、第１の電子デバイス５０１及び第２の電子デバイス５１５’とは異なる第４の電子デバイスの仮想拡張ディスプレイの画像に対応する。例えば、仮想拡張ディスプレイは、上述した電子デバイス４０１と４１５との間の通信と同様に、第３の電子デバイスと通信している第４の電子デバイスのための第２のディスプレイである。一部の例では、第３の電子デバイスは、第３の電子デバイスにおいて３次元環境内に仮想拡張ディスプレイを表示しており、第３の電子デバイスのユーザからのユーザ入力を検出したことに応じて、上述のように、仮想拡張ディスプレイの画像を第１の電子デバイス５０１のユーザと共有する要求を（例えば、アプリケーション共有アプリケーションを介して）送信した。図５Ｄに示されるように、仮想拡張ディスプレイの画像５０４は、ユーザインタフェース５４０を含む。例えば、仮想拡張ディスプレイの画像が第１の電子デバイス５０１と共有される前に、ユーザインタフェース５４０は、第３の電子デバイスにおいて仮想拡張ディスプレイに表示されていた。一部の例では、図５Ｄにおいて、ユーザインタフェース５４０は音楽プレーヤアプリケーションのユーザインタフェースである。例えば、図５Ｄに示されるように、ユーザインタフェース５４０は、第１の音楽アルバムの第１の表現５４１－１及び第２の音楽アルバムの第２の表現５４１－２を含み、各々が、第４の電子デバイス及び／又は第３の電子デバイス上での消費に利用可能な音楽トラックの選択可能な指示を含む。

【0103】

一部の例では、第１の電子デバイス５０１のユーザは、第１の電子デバイス５０１と第３の電子デバイスとの間で共有される画像５０４のコンテンツを見ることができるが、第１の電子デバイス５０１は、ユーザインタフェース５４０との対話など、画像５０４のコンテンツとの直接的なユーザ対話を任意選択的に制限及び／又は防止する。特に、一部の例では、第１の電子デバイス５０１のユーザは、仮想拡張ディスプレイ自体が真の共有体験であるのではなく、仮想拡張ディスプレイの画像のみが第１の電子デバイス５０１と共有されるので、画像５０４のコンテンツと対話するための入力を提供することができない。したがって、上述したように、仮想拡張ディスプレイは第３の電子デバイスによって任意選択的に共有されているので、第３の電子デバイスのユーザは、第３の電子デバイスにおいてユーザインタフェース５４０と対話し得、これにより、画像５０４が３次元環境５５０において更新されるが、第１の電子デバイス５０１のユーザは、以下で説明するように、これを行うことができない場合がある。

【0104】

図５Ｅでは、仮想拡張ディスプレイの画像５０４が第１の電子デバイス５１５において３次元環境５５０に表示されている間に、第２の電子デバイス５０１’は、第２の電子デバイス５１５’と通信しているマウス５３２’を介して選択入力５７３を検出する。例えば、第２の電子デバイス５１４’は、マウス５３２’上のボタンの押下又はクリック（又はマウス５３２’のタッチ感知面上のタップ）を検出する。加えて、図５Ｅに示されるように、第２の電子デバイス５１４’は、第１の電子デバイス５０１のユーザの視線５２７が３次元環境５５０内の画像５０４のユーザインタフェース５４０に向けられている間に選択入力５７３を検出する。

【0105】

一部の例では、図５Ｆに示すように、第１の電子デバイス５０１が画像５０４のユーザインタフェース５４０に向けられた視線４２７を検出している間に、第２の電子デバイス５１４’がマウス５３２’を介して選択入力５７３を検出したことに応じて、第１の電子デバイス５０１は、画像５０４に向けられた動作を実行することを取り止める。例えば、画像５０４の仮想拡張ディスプレイは、上述したように第２の電子デバイス５１４’の拡張ディスプレイではないため、マウス５３２’を介して検出された入力は、第１の電子デバイス５０１によって画像５０４に向けられていると解釈されない。むしろ、一部の例では、第２の電子デバイス５１４’によって検出される選択入力５７３は、第２の電子デバイス５１４’に対してローカルのままである（例えば、第２の電子デバイス５１４’は、上述のように入力データを第１の電子デバイス５０１に送信することなく、選択入力５７３に従って選択動作を実行する）。

【0106】

図５Ｆでは、３次元環境５５０において仮想拡張ディスプレイの画像５０４を表示している間に、第１の電子デバイス５０１は、画像５０４内のユーザインタフェース５４０の第１の表現５４１－１に向けられた選択入力５７１Ｃを検出する。例えば、本明細書で上述したのと同様に、第１の電子デバイス５０１は、エアピンチジェスチャ、エアタップ又はタッチジェスチャ、口頭コマンド、第１の表現５４１－１に向けられた視線滞留などを検出する。一部の例では、画像５０４内の第１の表現５４１－１の選択を検出したことに応じて、第１の電子デバイス５０１は、図５Ｇに示すように、第１の表現５４１－１に向けられた選択動作を実行することを取り止める。例えば、図５Ｇに示すように、選択入力５７１Ｃに応じて、第１のアルバム（例えば、「アルバムＡ」）に関連付けられた音楽トラックがユーザインタフェース５４０に表示されるように、画像５０４は更新されない。

【0107】

一部の例では、同様に上述したように、画像５０４の仮想拡張ディスプレイは、第１の電子デバイス５０１と第３の電子デバイスとの間の真の共有体験ではないので（例えば、仮想拡張ディスプレイが第１の電子デバイス５０１のユーザと共有されず、むしろ仮想拡張ディスプレイの画像であるので）、ユーザインタフェース５４０を含む画像５０４に向けられた第１の電子デバイス５０１によって検出されたユーザ入力は、画像５０４をユーザ入力に基づいて更新させない。したがって、図５Ｇに示すように、画像５０４は、３次元環境５５０において変化しないままである。したがって、上記で概説したように、第１の電子デバイス５０１及び第３の電子デバイスがマルチユーザ通信セッションにおいて通信可能にリンクされている間に、第３の電子デバイスにおいて表示される仮想拡張ディスプレイの画像が第１の電子デバイス５０１と共有される場合、第１の電子デバイス５０１のユーザによって提供される入力は、画像（例えば、画像５０４）のコンテンツを入力に従って更新させない場合がある。

【0108】

一部の例では、画像５０４のコンテンツではなく、画像５０４自体に向けられた対話が提供されてもよい。例えば、第１の電子デバイス５０１のユーザが、（例えば、画像５０４内でユーザインタフェース５４０を移動させるための入力とは対照的に）３次元環境５５０内で画像５０４を移動させるための入力を提供する場合、第１の電子デバイス５０１は、入力に従って画像５０４を移動させることができる。同様に、第１の電子デバイス５０１のユーザが３次元環境５５０内で画像５０４を拡大縮小するための入力を提供する場合（例えば、画像５０４内のユーザインタフェース５４０のサイズを変更するのとは対照的に）、第１の電子デバイス５０１は入力に従って画像５０４を拡大縮小してもよい。一部の例では、第３の電子デバイスのユーザが画像５０４自体のコンテンツを共有する場合、そのような共有コンテンツは、第１の電子デバイス５０１のユーザによって対話されるように構成されてもよい。例えば、図５Ｃにおいて、第１の電子デバイス５０１のユーザと共有されているコンテンツがユーザインタフェース５４０自体である場合、第１の電子デバイス５０１は、図５Ｄのユーザインタフェース５４０に対応する共有アプリケーションウィンドウを表示し、共有アプリケーションウィンドウのコンテンツ（例えば、第１の表現５４１－１及び／又は第２の表現５４１－２など）に向けられた入力は、第１の電子デバイス５０１によって作用される。

【0109】

本明細書に示され説明される例は単なる例示であり、仮想オブジェクト及び要素と対話するために、３次元環境内に追加及び／又は代替の要素が提供されてもよいことが理解される。本明細書に示され説明される様々なユーザインタフェース要素及びオブジェクトの各々の外観、形状、形態、及びサイズは例示的なものであり、代替的な外観、形状、形態、及び／又はサイズが提供されてもよいことを理解されたい。例えば、仮想拡張ディスプレイ（例えば、仮想拡張ディスプレイ３０４／４０４）及び／又はユーザインタフェース（例えば、ユーザインタフェース４１１、４２５、及び／又は５４０）を表す仮想オブジェクトは、円形、三角形などの矩形以外の形状で提供されてもよい。一部の例では、本明細書に記載の様々な選択可能なアフォーダンス（例えば、第１のアフォーダンス３１９／５１９、及び／又はオプション５３７－１／５３７－２又は５３９－１）は、ユーザの口頭コマンド（例えば、「オプション選択」又は「仮想オブジェクト選択」口頭コマンド）を介して口頭で選択されてもよい。追加的又は代替的に、一部の例では、本明細書に記載される様々なオプション、ユーザインタフェース要素、制御要素などは、電子デバイス（単数又は複数）と通信する１つ以上の別個の入力デバイスを介して受信されるユーザ入力を介して選択及び／又は操作され得る。例えば、選択入力は、電子デバイス（単数又は複数）と通信するマウス、トラックパッド、キーボードなどの物理入力デバイスを介して受信され得る。

【0110】

加えて、単一のインタフェースのみが、物理的及び仮想拡張ディスプレイ内に示されているが、任意の数のインタフェースが、各ディスプレイ内に含まれてもよいことを理解されたい。更に、単一の電子デバイス（例えば、第２の電子デバイス３１５／４１５）に対して単一の仮想拡張ディスプレイ（例えば、仮想拡張ディスプレイ３０４／４０４）のみが示されているが、任意の数の他の電子デバイスの各々に対して任意の数の仮想拡張ディスプレイが提示され得ることを理解されたい。これらの例では、電子デバイスのいずれかによって検出された入力は、上述したのと同じ方法で適切な電子デバイス又はインタフェースにルーティングされてもよい。

【0111】

一部の例では、仮想拡張ディスプレイを表示することに加えて、第１の電子デバイスは、図６Ａ～図６Ｋを参照してより詳細に説明するように、第１の電子デバイス上で実行中のアプリケーションに対応する１つ以上の追加の仮想オブジェクト又はウィンドウを表示してもよい。例えば、第１の電子デバイス４１５は、図４Ａで第２の電子デバイス４０１’のウェブブラウジングアプリケーションのための第２のユーザインタフェース４２５を含む仮想拡張ディスプレイ４０４を表示することに加えて、第１の電子デバイス４１５（第２の電子デバイス４０１’ではない）で実行されるテキスト文書編集アプリケーションに対応する仮想ウィンドウを更に表示し得る。これらの例では、第１の電子デバイス４０１、第２の電子デバイス４１５’、又は他の結合された電子デバイスによって検出された入力は、上述したのと同じ方法で適切なデバイス、アプリケーション、及び／又は、及び／又はインタフェースにルーティングされ得る。

【0112】

図６Ａ～図６Ｋは、本開示の一部の例による、第２の電子デバイスのユーザインタフェースの表現と第１の電子デバイスのユーザインタフェースとの対話を容易にする第１の電子デバイスの例を示す。一部の例では、図６Ａに示されるように、３次元環境６５０は、第１の電子デバイス６０１を使用して提示され得る。一部の例では、第１の電子デバイス６０１は、任意選択的に、上述の第１の電子デバイス３０１／４０１／５０１に対応する。一部の例では、３次元環境６５０は、第１の電子デバイス４０１が位置する物理環境のキャプチャされた部分を含む。例えば、３次元環境６５０は、図６Ａに示すように、テーブル（例えば、テーブル６０６’の表現）を任意選択的に含む。加えて、３次元環境６５０は、第２の電子デバイス（例えば、第２の電子デバイス６１５’の表現）と、（例えば、物理環境内のテーブルの上に配置された）第２の電子デバイスと通信している１つ以上の物理入力デバイス（例えば、１つ以上の入力デバイス６３１’／６３２’の１つ以上の表現）とを含む。一部の例では、３次元環境６５０は、任意選択的に、上述の３次元環境３５０／４５０／５５０に対応する。一部の例では、第２の電子デバイス６１５’は、上述の第２の電子デバイス３１５’／４１５’／５１５’に対応する。一部の例では、１つ以上の入力デバイス６３１’／６３２’は、上述の１つ以上の入力デバイス３３１’／３３２’、４３１’／４３２’、５３１’／５３２’に対応する。一部の例では、物理環境の表現は、第１の電子デバイス６０１の透明又は半透明のディスプレイを通して見られる物理環境の部分を含むことができる。

【0113】

同様に上述したように、一部の例では、第１の電子デバイス６０１は、第２の電子デバイス６１５’と通信する。加えて、一部の例では、図６Ａに示すように、第１の電子デバイス６０１は、第２の電子デバイス６１５’に関連付けられた仮想ディスプレイ６０４を提示している。例えば、図６Ａである。仮想ディスプレイ６０４は、第２の電子デバイス６１５’の物理的ディスプレイ（例えば、ディスプレイ６１４’の表現）に対する（例えば、仮想）ディスプレイとして機能する。一部の例では、仮想ディスプレイ６０４は、上述した仮想拡張ディスプレイ３０４／４０４／５０４の１つ以上の特性を有する。一部の例では、図６Ａに示すように、仮想ディスプレイ６０４が３次元環境６５０に表示されている間に、第２の電子デバイス６１５’のディスプレイ６１４’は、任意選択的に電源オフされる（例えば、第２の電子デバイス６１５’は、低電力モード若しくはスリープ状態にあるか、又は電源が切られている）。

【0114】

一部の例では、図６Ａに示すように、仮想ディスプレイ６０４は、任意選択的に、第２の電子デバイス６１５’の（例えば、物理的）ディスプレイ６１４’上に表示されるように構成された（例えば、又は現在表示されている）ユーザインタフェースの表現であるユーザインタフェース６２５を含む。一部の例では、図６Ａに示すように、ユーザインタフェース６２５は、ウェブブラウザによって提供される（例えば、ＵＲＬ「ｗｗｗ．Ｓｅａｒｃｈ．ｃｏｍ」に関連付けられた）複数の検索結果を含む。例えば、図６Ａにおいて、ユーザインタフェース６２５は、第１のウェブサイト（例えば、「ｗｗｗ．ＵＲＬ１．ｃｏｍ」）に関連付けられた第１の検索結果６２６Ａ（例えば、「検索結果Ａ」）と、第２のウェブサイト（例えば、「ｗｗｗ．ＵＲＬ２．ｃｏｍ」）に関連付けられた第２の検索結果６２６Ｂ（例えば、「検索結果Ｂ」）と、第３のウェブサイトに関連付けられた第３の検索結果６２６Ｃ（例えば、「検索結果Ｃ」）とを含む。一部の例では、複数の検索結果６２６は、それぞれのソース（例えば、ウェブサイト）を介してコンテンツ（例えば、テキスト、画像、ビデオ、音楽など）にアクセスするために選択可能である。一部の例では、ユーザインタフェース６２５は、上述の第２のユーザインタフェース４２５に対応する。加えて、図６Ａに示すように、仮想ディスプレイ６０４は、第２の電子デバイス６１５’の（例えば、物理的な）ディスプレイ６１４’上に表示されるように構成されたドック（図示せず）に対応するドック６０９”（例えば、上述のドック３０９／／４０９’／５０９／など）の表現を含む。一部の例では、図６Ａに示すように、仮想ディスプレイ６０４はまた、第２の電子デバイス６１５’のディスプレイ６１４’上に表示されるように構成され、マウス６３２’を使用して制御可能なカーソル（例えば、カーソル６１２’の表現）を含む。一部の例では、カーソル６１２’は、上述のカーソル３１２’／４１２’／５１２’に対応する。

【0115】

一部の例では、同様に上述したように、第１の電子デバイス６０１は、第２の電子デバイス６１５’によって（例えば、直接的に又はサーバを介して間接的に）第１の電子デバイス６０１に送信された画像データに基づいて、仮想ディスプレイ６０４内にユーザインタフェース６２５を表示する。例えば、上述したように、ユーザインタフェース６２５は、第２の電子デバイス６１５’のディスプレイ６１４’上に表示されるように構成される（例えば、ユーザインタフェース６２５は、第２の電子デバイス６１５’のユーザインタフェースである）。したがって、一部の例では、第１の電子デバイス６０１は、第２の電子デバイス６１５’によって提供される画像データに基づいて、上述のユーザインタフェース６２５のコンテンツを含むユーザインタフェース６２５をレンダリング（例えば、生成）する。例えば、画像データは、ユーザインタフェース６２５の外観、ユーザインタフェース６２５のコンテンツの特性（例えば、コンテンツが選択可能、スクロール可能などの対話型であるかどうか）、及び／又はユーザインタフェース６２５及びそのコンテンツの品質（例えば、精細度などの画質）に対応する情報を含む。一部の例では、第２の電子デバイス６０１’によって第１の電子デバイス６１５に送信される画像データは、第１の電子デバイス６１５によって仮想ディスプレイ６０４に表示される、第２の電子デバイス６０１’によって生成された画像を含む。

【0116】

一部の例では、第１の電子デバイス６０１は、仮想ディスプレイ６０４と同時に、第１の電子デバイス６０１上で（例えば、ローカルに）実行されるアプリケーションに関連付けられたコンテンツを表示するように構成される。一部の例では、以下で説明するように、第１の電子デバイス６０１は、仮想ディスプレイ６０４のコンテンツ及び第１の電子デバイス６０１上でローカルに実行されるアプリケーションのコンテンツとの対話を容易にするように構成される。図６Ａでは、第１の電子デバイス６０１は、３次元環境６５０内の個別のアプリケーションに関連付けられたユーザインタフェースオブジェクト６２４を表示している。一部の例では、図６Ａに示すように、ユーザインタフェースオブジェクト６２４は、３次元環境６５０内の個別のアプリケーションに対応するコンテンツ（例えば、「コンテンツＡ」）を表示するために選択可能な選択可能オプション６２３Ａを含む。一部の例では、コンテンツは、ユーザインタフェース、ビデオ、画像、３次元オブジェクト（例えば、モデル）などを含む。

【0117】

一部の例では、図６Ａに示すように、第１の電子デバイス６０１は、選択可能オプション６２３Ａに向けられた選択入力６７２Ａを検出する。例えば、図６Ａでは、第１の電子デバイス６０１は、（例えば、カメラ又は他のハンドトラッキングセンサなどの１つ以上のセンサを介して）エアピンチジェスチャ、エアタップ又はタッチジェスチャを、任意選択的にユーザの視線が選択可能オプション６２３Ａに向けられている間に、口頭コマンド、視線滞留などを検出する。

【0118】

一部の例では、図６Ｂに示すように、選択入力６７２Ａを検出したことに応じて、第１の電子デバイス６０１は、上述した個別のアプリケーション（例えば、第１の電子デバイス６０１上で実行されるビデオ再生アプリケーション）に関連付けられたビデオコンテンツ（図６Ａに示すコンテンツＡ）を表示する。例えば、図６Ｂに示されるように、第１の電子デバイス６０１は、３次元環境６５０においてビデオコンテンツ（例えば、映画、テレビ番組、ビデオクリップ、音楽ビデオなど）を表示している仮想アプリケーションウィンドウ６５６（例えば、ビデオ再生ユーザインタフェース）を表示する。図６Ｂに示されるように、仮想アプリケーションウィンドウ６５６は、仮想アプリケーションウィンドウ６５６に表示されているビデオコンテンツの再生を制御するための再生コントロール６４５（例えば、他の可能性の中でも、再生／一時停止ボタン、巻き戻しボタン、及び早送りボタンを含む）を含む。一部の例では、図６Ｂに示すように、仮想アプリケーションウィンドウ６５６は、３次元環境６５０内で仮想アプリケーションウィンドウ６５６の移動を開始するためにユーザ入力を介して選択可能なグラバーアフォーダンス６３５（例えば、ハンドルバーアフォーダンス）と共に表示される。

【0119】

一部の例では、本明細書で上述したのと同様に、第１の電子デバイス６０１は、第２の電子デバイス６１５’と通信して、第１の電子デバイス６０１のユーザの視線のロケーションに基づくユーザ入力に応じて、仮想ディスプレイ６０４のコンテンツ及び／又は仮想アプリケーションウィンドウ６５６のコンテンツとの対話を容易にし、調整する。例えば、図６Ｃに示すように、第１の電子デバイス６０１は、（例えば、アイトラッキングセンサ及び／又は画像センサを介して）ユーザの視線６２７が仮想ディスプレイ６０４に向けられていることを検出する。特に、図６Ｃでは、第１の電子デバイス６０１は、視線６２７が仮想ディスプレイ６０４のコンテンツに対応する特定のロケーションに向けられていることを検出する。

【0120】

図６Ｃでは、第１の電子デバイス６０１が、ユーザの視線６２７が３次元環境６５０内の仮想ディスプレイ６０４に向けられていることを検出している間に、第２の電子デバイス６１５’は、第２の電子デバイス６１５’と通信しているマウス６３２’上の選択入力６７３Ａを検出する。例えば、図６Ｃでは、第２の電子デバイス６１５’は、マウス６３２’のボタン又はタッチ感知面のクリック、タップ、又はタッチを検出する。同様に上述したように、視線６２７が３次元環境６５０内の仮想ディスプレイ６０４に向けられているので、選択入力６７３Ａを検出したことに応じて、第２の電子デバイス６１５’は、選択入力６７３Ａを第２の電子デバイス６１５’に対してローカルに維持する。例えば、第１の電子デバイス６０１は、３次元環境６０２における視線６２７のロケーションに対応する情報を含む視線データを第２の電子デバイス６１５’に（例えば、連続的に、周期的に、及び／又は第２の電子デバイス６１５’からの要求に応じて）通信（例えば、送信）する。

【0121】

一部の例では、視線６２７が仮想ディスプレイ６０４（例えば、特にユーザインタフェース６２５）に向けられているという判定に従って、第１の電子デバイス６０１は、第２の電子デバイス６１５’に選択入力６７３Ａに従った動作を実行させる。例えば、図６Ｃでは、第２の電子デバイス６１５’は、ユーザインタフェース６２５内のカーソル６１２’のロケーションで選択を実行する。特に、図６Ｃに示されるように、第２の電子デバイス６１５’は、ユーザインタフェース６２５内のカーソル６１２’のロケーションに基づいて第２の検索結果６２６Ｂを選択する（例えば、アクティブ化する）。図６Ｃの例では、ユーザインタフェース６２５は第２の電子デバイス６１５’の（例えば、物理的な）ディスプレイ上に表示されていないが、選択動作を実行することは、（例えば、ユーザインタフェース６２５が第２の電子デバイス６１５’のディスプレイ上に表示されたかのように）ユーザインタフェース６２５を表す画像データを更新することを含むことを理解されたい。一部の例では、第２の電子デバイス６１５’が選択動作を実行すると、第２の電子デバイス６１５’は、更新された画像データを第１の電子デバイス６０１に送信し、これにより、第１の電子デバイス６０１は、選択動作の実行に基づいて３次元環境６５０内の仮想ディスプレイ６０４の表現を更新する。例えば、図６Ｄに示すように、第１の電子デバイス６０１は、ユーザインタフェース６２５の更新された表現を含むように仮想ディスプレイ６０４の表示を更新する。特に、図６Ｄに示されるように、ユーザインタフェース６２５は、図６Ｃにおける第２の検索結果６２６Ｂの選択の結果を含むように、すなわち、第２の検索結果６２６Ｂに関連付けられたウェブサイト（例えば、「ｗｗｗ．ＵＲＬ２．ｃｏｍ」）からのウェブサイトコンテンツ（例えば、テキスト入力フィールド６１６における「ウェブサイトコンテンツ」）を表示するように更新される。

【0122】

図６Ｅでは、第１の電子デバイス６０１は、ユーザの視線６２７が３次元環境６５０内の仮想アプリケーションウィンドウ６５６に向けられていることを検出する。特に、図６Ｅに示されるように、第１の電子デバイス６０１は、視線６２７が再生コントロール６４５（例えば、再生コントロール６４５の一時停止ボタン）に向けられていることを検出する。図６Ｅでは、第１の電子デバイス６０１が仮想アプリケーションウィンドウ６５６に向けられた視線６２７を検出している間に、第２の電子デバイス６１５’は、上述したのと同様に、第２の電子デバイス６１５’と通信しているマウス６３２’を介して選択入力６７３Ｂを検出する。

【0123】

一部の例では、上述したのと同様に、視線６２７が３次元環境６５０内の仮想アプリケーションウィンドウ６５６に向けられているので、選択入力６７３Ｂを検出したことに応じて、第２の電子デバイス６１５’は、選択入力６７３Ｂに対応する入力データを第１の電子デバイス６０１に送信する。例えば、第２の電子デバイス６１５’は、同様に上述したように、第１の電子デバイス６０１によって第２の電子デバイス６１５’に通信（例えば、送信）された視線データに基づいて、入力データを第１の電子デバイス６０１に送信する。

【0124】

一部の例では、視線６２７が仮想アプリケーションウィンドウ６５６（例えば、特に再生コントロール６４５）に向けられているとの判定に従って、第１の電子デバイス６０１は、選択入力６７３Ｂに従って動作を実行する。例えば、図６Ｅにおいて、第１の電子デバイス６０１は、仮想アプリケーションウィンドウ６５６内の視線６２７のロケーションで選択を実行する。具体的には、図６Ｅに示すように、第１の電子デバイス６０１は、仮想アプリケーションウィンドウ６５６内の視線６２７のロケーションに基づいて（例えば、本明細書で上述したように、ユーザインタフェース６２５内のカーソル６１２’のロケーションに基づくのではなく）、再生コントロール６４５の一時停止ボタンを選択する（例えば、アクティブ化する）。他の例では、選択入力６７３Ｂは、カーソル６１２’のロケーションに従って実行されてもよい。一部の例では、図６Ｆに示されるように、第１の電子デバイス６０１が再生コントロール６４５の一時停止ボタンを選択すると、第１の電子デバイス６０１は、３次元環境６５０内の仮想アプリケーションウィンドウ６５６内のビデオコンテンツの再生を一時停止する。加えて、図６Ｆに示されるように、第１の電子デバイス６０１は、任意選択的に、仮想アプリケーションウィンドウ６５６内の再生コントロール６４５内の一時停止ボタンを再生ボタンに更新する。一部の例では、第１の電子デバイス６０１が仮想アプリケーションウィンドウ６５６に向けられた選択動作を実行するとき、第１の電子デバイス６０１は、仮想アプリケーションウィンドウ６５６内の再生コントロール６４５の一時停止ボタンの選択に対応する出力データを第２の電子デバイス６１５’に送信することを取り止める。

【0125】

図６Ｇでは、視線６２７が３次元環境６５０内の仮想ディスプレイ６０４に向けられている間に、第１の電子デバイス６０１は、第１の電子デバイス６０１の１つ以上の入力デバイスを介して、仮想ディスプレイ６０４のコンテンツに向けられた選択入力６７２Ｂを検出する。例えば、図６Ｇに示すように、第１の電子デバイス６０１は、視線６２７が仮想ディスプレイ６０４内のユーザインタフェース６２５のテキスト入力フィールド６１６に向けられている間に、エアピンチジェスチャ、タップ又はタッチジェスチャ、口頭コマンドなどを検出する。

【0126】

一部の例では、視線６２７が仮想ディスプレイ６０４に向けられている間に選択入力６７２Ｂを検出したことに応じて、第１の電子デバイス６０１は、選択入力６７２Ｂに対応する入力データを第２の電子デバイス６１５’に送信する。一部の例では、第２の電子デバイス６１５’は、選択入力６７２Ｂに対応する入力データに基づいて、ユーザインタフェース６２５に向けられた動作を実行する。例えば、第１の電子デバイス６０１は、第２の電子デバイス６１５’に、図６Ｇの視線６２７のロケーションに基づいてテキスト入力フィールド６１６に向けられた選択動作を実行させる。一部の例では、上述したのと同様に、第２の電子デバイス６１５’が選択動作を実行すると、第２の電子デバイス６１５’は、更新された画像データを第１の電子デバイス６０１に送信し、第１の電子デバイス６０１に、選択動作の実行に基づいて３次元環境６５０内の仮想ディスプレイ６０４の表現を更新させる。例えば、図６Ｈに示すように、第１の電子デバイス６０１は、ユーザインタフェース６２５の更新された表現を含むように仮想ディスプレイ６０４の表示を更新する。特に、図６Ｈに示されるように、テキスト入力フィールド６１６は、テキストカーソル６２８を含み、もはや図６Ｇからのテキスト「ｗｗｗ．ＵＲＬ２．ｃｏｍ」を含まない。加えて、図６Ｈに示されるように、カーソル６１２’のロケーションは、本明細書で同様に論じられるように、ユーザインタフェース６２５内の視線６２７のロケーションに対応するように任意選択的に更新される。

【0127】

図６Ｈでは、視線６２７が仮想ディスプレイ６０４に向けられたままである間に、第２の電子デバイス６１５’は、第２の電子デバイス６１５’と通信しているキーボード６３１’の１つ以上のキーを介して選択入力６７３Ｃを検出する。例えば、本明細書で同様に説明されるように、第２の電子デバイス６１５’は、第１の電子デバイス６０１が仮想ディスプレイ６０４内のユーザインタフェース６２５に向けられた視線６２７を検出している間に、キーボード６３１’の１つ以上のキーの１つ以上の押下又はタップを検出する。

【0128】

一部の例では、同様に上述したように、視線６２７が３次元環境６５０内の仮想ディスプレイ６０４に向けられているので、選択入力６７３Ｃを検出したことに応じて、第２の電子デバイス６１５’は、（例えば、選択入力６７３Ｃに対応する入力データを第１の電子デバイス６０１に送信することなく）選択入力６７３Ｃを第２の電子デバイス６１５’に対してローカルに維持する。例えば、図６Ｈにおいて、第２の電子デバイス６１５’は、同様に上述したように、選択入力６７３Ｃに従ってユーザインタフェース６２５に向けられた動作を実行する。一部の例では、第２の電子デバイス６１５’が選択入力６７３Ｃに従って動作を実行すると、第２の電子デバイス６１５’は、その動作に基づいてユーザインタフェース６２５を表す画像データ（例えば、ピクセル又は表示データ）を更新し、更新された画像データを第１の電子デバイス６０１に送信して、第１の電子デバイス６０１に仮想ディスプレイ６０４内のユーザインタフェース６２５の表現を更新させる。例えば、図６Ｉに示すように、第１の電子デバイス６０１は、テキスト入力フィールド６１６が、キーボード６３１’の選択されたキーに基づいてテキストカーソル６２８のロケーションに入力されたテキスト６４９（例えば、「ｗｗｗ．ＵＲＬ４．ｃｏｍ」）を含むように更新されるように、仮想ディスプレイ６０４内のユーザインタフェース６２５を更新する。図６Ｉでは、視線６２７が３次元環境６５０内の仮想ディスプレイ６０４に向けられている間に、第１の電子デバイス６０１は、第１の電子デバイス６０１のユーザによって提供される選択入力６７２Ｃを検出する。例えば、図６Ｉに示すように、視線６２７がテキスト入力フィールド６１６内のオプション６５１（例えば、入力又は検索オプション）に向けられている間に、第１の電子デバイス６０１は、第１の電子デバイス６０１の１つ以上のセンサ又は入力デバイスを介して、本明細書で同様に説明されるように、エアピンチジェスチャ、タップ又はタッチジェスチャ、口頭コマンド、視線滞留などを検出する。一部の例では、同様に上述したように、選択入力６７２Ｃが検出されたときに視線６２７が仮想ディスプレイ６０４に向けられているので、第１の電子デバイス６０１は、選択入力６７２Ｃに対応する入力データを第２の電子デバイス６１５’に送信し、これにより、第２の電子デバイス６１５’は、視線６２７のロケーションに基づいてユーザインタフェース６２５に向けられた動作を実行する。特に、図６Ｉでは、第２の電子デバイス６１５’は、視線６２７のロケーションに基づいて（例えば、ユーザインタフェース６２５内の視線６２７のロケーションに対応する情報を含む上述の視線データに従って）オプション６５１に向けられた選択動作を実行する。

【0129】

一部の例では、本明細書で同様に説明されるように、第２の電子デバイス６１５’がオプション６５１を対象とする選択動作を実行すると、第２の電子デバイス６１５’は、ユーザインタフェース６２５を表す画像データを更新し、更新された画像データを第１の電子デバイス６０１に送信する。一部の例では、図６Ｊに示されるように、第２の電子デバイス６１５’から更新された画像データを受信したことに応じて、第１の電子デバイス６０１は、３次元環境６５０内の仮想ディスプレイ６０４に表示されるユーザインタフェース６２５の表示を更新する。具体的には、図６Ｊに示すように、図６Ｉのオプション６５１を選択すると、第２の電子デバイス６１５’は、ウェブサイト「ｗｗｗ．ＵＲＬ４．ｃｏｍ」にナビゲートし、ウェブサイトからのコンテンツ（例えば、「ＵＲＬ４ウェブサイトコンテンツ」）を表示し、これは、３次元環境６５０内の仮想ディスプレイ６０４内のユーザインタフェース６２５の更新された表現に反映される。加えて、一部の例では、本明細書で上述したように、第１の電子デバイス６０１は、図６Ｉにおいて選択入力６７２Ｃが検出されたときにカーソル６１２’のロケーションが視線６２７のロケーションに移動されるように、更新された画像データに基づいてユーザインタフェース６２５内のカーソル６１２’のロケーションを更新する。

【0130】

図６Ｊでは、視線６２７が３次元環境６５０内の仮想アプリケーションウィンドウ６５６に向けられている間に、第１の電子デバイス６０１は、上述したのと同様に選択入力６７２Ｄを検出する。具体的には、図６Ｊに示すように、第１の電子デバイス６０１は、視線６２７が仮想アプリケーションウィンドウ６５６内の再生コントロール６４５（例えば、再生コントロール６４５内の再生ボタン）に向けられている間に、選択入力６７２Ｄ（例えば、エアピンチジェスチャ、エアタップ又はタッチジェスチャ、口頭コマンドなど）を検出する。

【0131】

一部の例では、図６Ｋに示すように、図６Ｊにおいて選択入力６７２Ｄが検出されたときに視線６２７が仮想アプリケーションウィンドウ６５６に向けられたので、第１の電子デバイス６０１は、選択入力６７２Ｄに従って仮想アプリケーションウィンドウ６５６に向けられた動作を実行する。例えば、図６Ｋに示すように、第１の電子デバイス６０１は、再生コントロール６４５の再生ボタンを選択し、これにより、仮想アプリケーションウィンドウ６５６に表示されたビデオコンテンツは、３次元環境６５０における再生を再開する。加えて、図６Ｋに示すように、第１の電子デバイス６０１は、上述と同様に、再生コントロール６４５において、再生ボタンを一時停止ボタンに置き換える。

【0132】

一部の例では、本明細書で同様に説明されるように、第１の電子デバイス６０１が上述の選択動作を実行するとき、第１の電子デバイス６０１は、選択動作に対応する出力データを第２の電子デバイス６１５’に送信することを取り止める。特に、図６Ｊの選択入力６７２Ｄに対応する入力データは、上述したように第１の電子デバイス６０１に対してローカルに維持され、選択入力６７２Ｄに応じた選択動作の結果も、第１の電子デバイス６０１に対してローカルに維持される。したがって、上述したように、第２の電子デバイスと通信する物理入力デバイス又は第１の電子デバイスと通信する入力デバイス上で検出された入力を介して対話し得る３次元環境内の第２の電子デバイスのための仮想ディスプレイを提供することは、利点として、ユーザが別個の入力手段を利用することを必要とせずに、第２の電子デバイスの仮想ディスプレイ及び第１の電子デバイス上で実行されるアプリケーションとのシームレスで効率的な対話を容易にする。上記のシステム及び方法の別の利点は、第１の物理的電子デバイスの入力デバイス（例えば、キーボード、マウス、トラックパッドなど）のセットと、第２の物理的電子デバイスの入力デバイス（例えば、アイトラッキングセンサ、ハンドトラッキングセンサ、向きセンサなど）のセットとのシームレスな統合であり、これは、入力デバイスの両方のセットにおいて受信された入力が、３次元環境内の同じ１つ以上のユーザインタフェースに向けられることを可能にし、これは、ユーザ－デバイス対話を向上させる。

【0133】

図７Ａ～図７Ｂは、本開示の一部の例による、３次元環境における電子デバイスのユーザインタフェースの表現の表示及びそれとの対話を容易にするための例示的なプロセスを示す流れ図である。一部の例では、プロセス７００は、第１の電子デバイスのディスプレイ及び１つ以上の入力デバイスと通信する第１の電子デバイスにおいて開始する。一部の例では、第１の電子デバイスは、任意選択的に、図２のデバイス２４０に類似又は対応するヘッドマウントディスプレイである。図７Ａに示すように、一部の例では、７０２において、第１の電子デバイスは、１つ以上の入力デバイスを介して、第２の電子デバイスの第１のユーザインタフェースの第１の表現を表示するように構成されたディスプレイを有する第２の電子デバイスを含む現実世界環境の少なくとも一部をキャプチャする。例えば、図４Ａに示すように、第１の電子デバイス４０１は、ディスプレイ４１４を有する第２の電子デバイス４１５を含む第１の電子デバイス４０１を取り囲む物理環境の一部をキャプチャし、ディスプレイ４１４は、第１のユーザインタフェース４１１を表示している。一部の例では、第２の電子デバイスは、任意選択的に、図２のデバイス２３０に類似又は対応するコンピュータ（例えば、ラップトップコンピュータ、デスクトップコンピュータ、又はタブレットコンピュータ）である。

【0134】

一部の例では、７０４において、第１の電子デバイスは、ディスプレイを介して、現実世界環境のキャプチャされた部分の表現と、第２の電子デバイスの表現に関連付けられた第１のアフォーダンスとを含むコンピュータ生成環境を提示する。例えば、図３Ｇに示すように、第１の電子デバイス３０１は、第２の電子デバイス３１５’の表現、第２の電子デバイス３１５’が配置されたテーブル３０６’の表現、並びに第２の電子デバイス３１５’に関連付けられた第１のアフォーダンス３１９及び／又はシステムオプション３１８Ａを含む３次元環境３５０を提示する。一部の例では、７０６において、第１の電子デバイスは、現実世界環境のキャプチャされた部分の表現及び第１のアフォーダンスを含むコンピュータ生成環境を提示している間に、第１の電子デバイスは、１つ以上の入力デバイスを介して、第１のアフォーダンスの選択に対応する入力を受信する。例えば、図３Ｈに示すように、第１の電子デバイス３０１は、第１の電子デバイス３０１のディスプレイの所定の領域に表示されたシステムオプション３１８Ａに向けられた選択入力３７１Ｂ（例えば、エアピンチジェスチャ）を検出する。

【0135】

一部の例では、７０８において、入力を受信したことに応じて、第１の電子デバイスは、コンピュータ生成環境において、第１のユーザインタフェースの第１の表現とは異なる、第２の電子デバイスの第２のユーザインタフェースの第２の表現を提示する。例えば、図４Ａに示すように、第１の電子デバイス４０１は、３次元環境４５０において第２の電子デバイス４１５’のディスプレイ４１４’上に表示されるように構成された第２のユーザインタフェース４２５を任意選択的に含む仮想拡張ディスプレイ４０４を表示する。一部の例では、図７Ｂに示すように、７１０において、第２のユーザインタフェースの第２の表現を含むコンピュータ生成環境を提示している間に、第１の電子デバイスは、第２の電子デバイスの１つ以上の入力デバイスを介して受信された第１の個別の入力の第１の指示を検出する。例えば、図４Ｂに示すように、第１の電子デバイス４０１は、第２の電子デバイス４１５’と通信しているマウス４３２’を介して検出される移動入力４７３Ａに対応する情報を含む入力データを受信する。

【0136】

一部の例では、７１２において、第１の指示を検出したことに応じて、６１４において、第１の電子デバイスのユーザの視線が第１のユーザインタフェースの第１の表現に向けられているという判定に従って、第１の電子デバイスは、第１の個別の入力に従って第１のユーザインタフェースに向けられた第１の動作を第２の電子デバイスに実行させる。例えば、図４Ｂにおいて、移動入力４７３Ａがマウス４３２’を介して第２の電子デバイス４１５’によって検出されると、第１の電子デバイス４０１のユーザの視線４２７は第１のユーザインタフェース４１１’に向けられ、これにより、第１の電子デバイス４０１は移動入力４７３Ａを第２の電子デバイス４１５’にルーティングし、これにより、第２の電子デバイス４１５’は、図４Ｃに示すように、第１のユーザインタフェース４１１’内のカーソル４１２’を移動させる。代替的に、一部の例では、移動入力４７３Ａがマウス４３２’を介して第２の電子デバイス４１５’によって検出される前に、第１の電子デバイス４０１は、入力が第１のユーザインタフェース４１１’に向けられるべきであるという指示を第２の電子デバイス４１５’に送信してもよく、これにより、第２の電子デバイス４１５’は、移動入力４７３Ａに対応する情報を第１の電子デバイス４０１に送信することなく、移動入力４７３Ａをローカルに処理する。一部の例では、７１６において、視線が第２のユーザインタフェースの第２の表現に向けられているという判定に従って、第１の電子デバイスは、第１の個別の入力に従って、第２のユーザインタフェースの第２の表現に向けられた第２の動作を実行する。例えば、図４Ｉにおいて、移動入力４７３Ｇがマウス４３２’を介して第２の電子デバイス４１５’によって検出されると、第１の電子デバイス４０１のユーザの視線４２７は、仮想拡張ディスプレイ４０４の第２のユーザインタフェース４２５に向けられ、これにより、図４Ｊに示すように、第１の電子デバイス４０１は、移動入力４７３Ｇに従って第２のユーザインタフェース４２５内でカーソル４１２’を移動させる。

【0137】

プロセス７００は一例であり、より多くの、より少ない、又は異なる動作が、同じ又は異なる順序で実行され得ることが理解される。更に、上述したプロセス７００における動作は、任意選択的に、汎用プロセッサ（例えば、図２に関して説明したように、）又は特定用途向けチップなどの情報処理装置内の１つ以上の機能モジュールを実行することによって、及び／又は図２の他の構成要素によって実装される。

【0138】

図８は、本開示の一部の例による、３次元環境における２つの電子デバイス間のユーザインタフェースの表現の表示及び対話を容易にするための例示的なプロセスを示す流れ図である。一部の例では、プロセス８００は、第１の電子デバイスのディスプレイ及び１つ以上の入力デバイスと通信する第１の電子デバイスにおいて開始する。一部の例では、第１の電子デバイスは、任意選択的に、図２のデバイス２４０に類似又は対応するヘッドマウントディスプレイである。図８に示すように、一部の例では、８０２において、ディスプレイを介して、第１の電子デバイス上で実行されるアプリケーションの第１のユーザインタフェースを含むコンピュータ生成環境を提示している間に、第１の電子デバイスは、第２の電子デバイスから、第２の電子デバイスの第２のユーザインタフェースを表す表示データを受信する。例えば、図６Ａに同様に示されるように、第１の電子デバイス６０１は、第１の電子デバイス６０１のユーザの視野内に位置する第２の電子デバイス６１５’からユーザインタフェース６２５を表す画像データを受信する。一部の例では、第２の電子デバイスは、任意選択的に、図２のデバイス２３０に類似又は対応するコンピュータ（例えば、ラップトップコンピュータ、デスクトップコンピュータ、又はタブレットコンピュータ）である。

【0139】

一部の例では、８０４において、表示データを受信したことに応じて、第１の電子デバイスは、ディスプレイを介して、表示データに基づいて第２の電子デバイスの第２のユーザインタフェースの表現を提示する。例えば、図６Ｃに示すように、第１の電子デバイス６０１は、ユーザインタフェース６２５の表現を含む仮想ディスプレイ６０４を、第１の電子デバイス６０１上で実行中のアプリケーションに関連付けられた仮想アプリケーションウィンドウ６５６と同時に表示する。一部の例では、８０６において、アプリケーションの第１のユーザインタフェース及び第２の電子デバイスの第２のユーザインタフェースの表現を提示している間に、第１の電子デバイス６０１は、ユーザ入力に対応する個別のイベントを検出する。例えば、図６Ｅに示すように、第２の電子デバイス６１５’は、第２の電子デバイス６０１’と通信している物理マウス６３２’を介して選択入力６７３Ｂを検出するか、又は図６Ｇに示すように、第１の電子デバイス６０１は、第１の電子デバイス６１５の１つ以上のセンサを介して選択入力６７２Ｂを検出する。

【0140】

一部の例では、８０８において、個別のイベントを検出したことに応じて、８１０において、個別のイベントが検出されたときに第１の電子デバイスのユーザの視線が第２の電子デバイスの第２のユーザインタフェースの表現に向けられているという判定に従って、第１の電子デバイスは、個別のイベントに基づいて第２の電子デバイスの第２のユーザインタフェースに向けられた第１の動作を第２の電子デバイスに実行させる。例えば、図６Ｇにおいて、選択入力６７２Ｂが第１の電子デバイス６０１によって検出されると、第１の電子デバイス６０１は、仮想ディスプレイ６０４内のユーザインタフェース６２５に向けられた視線６２７を検出する。したがって、図６Ｈに示すように、第１の電子デバイス６０１は、第２の電子デバイス６１５’に、３次元環境６５０内の仮想ディスプレイ６０４内に表示されるユーザインタフェース６２５の表現内に示される視線６２７のロケーションに基づいて、ユーザインタフェース６２５のテキスト入力フィールド６１６を選択させる。

【0141】

一部の例では、８１２において、個別のイベントが検出されたときに、第１の電子デバイス上で実行中のアプリケーションの第１のユーザインタフェースに視線が向けられているという判定に従って、第１の電子デバイスは、個別のイベントに基づいて、第１のユーザインタフェースに向けられた第２の動作（例えば、上記の第１の動作とは異なる）を実行する。例えば、図６Ｅにおいて、選択入力６７３Ｂが第２の電子デバイス６０１’によってマウス６３２’を介して検出されると、第１の電子デバイス６１５は、仮想アプリケーションウィンドウ６５６に向けられた視線６２７を検出する。したがって、図６Ｆに示すように、第１の電子デバイス６０１は、図６Ｅの第２の電子デバイス６１５’から受信した選択入力６７３Ｂに対応する入力データに従って、視線６２７のロケーションに基づいて仮想アプリケーションウィンドウ６５６の再生コントロール６４５内の一時停止オプションを選択する。

【0142】

プロセス８００は一例であり、より多くの、より少ない、又は異なる動作が、同じ又は異なる順序で実行され得ることが理解される。更に、上述したプロセス８００における動作は、任意選択的に、汎用プロセッサ（例えば、図２に関して説明したように、）又は特定用途向けチップなどの情報処理装置内の１つ以上の機能モジュールを実行することによって、及び／又は図２の他の構成要素によって実装される。

【0143】

したがって、上記によれば、本開示の一部の例は、第１の電子デバイスのディスプレイ及び１つ以上の入力デバイスと通信する第１の電子デバイスにおいて、１つ以上の入力デバイスを介して、第２の電子デバイスの第１のユーザインタフェースの第１の表現を表示するように構成されたディスプレイを有する第２の電子デバイスを含む現実世界環境の少なくとも一部分をキャプチャすることと、ディスプレイを介して、現実世界環境のキャプチャされた部分の表現と、第２の電子デバイスの表現に関連付けられた第１のアフォーダンスとを含むコンピュータ生成環境を提示することと、現実世界環境のキャプチャされた部分の表現及び第１のアフォーダンスを含むコンピュータ生成環境を提示している間に、１つ以上の入力デバイスを介して、第１のアフォーダンスの選択に対応する入力を受信することと、入力を受信したことに応じて、コンピュータ生成環境において、第１のユーザインタフェースの第１の表現とは異なる、第２の電子デバイスの第２のユーザインタフェースの第２の表現を提示することと、第２のユーザインタフェースの第２の表現を含むコンピュータ生成環境を提示している間に、第２の電子デバイスの１つ以上の入力デバイスを介して受信された第１の個別の入力の第１の指示を検出することと、第１の指示を検出したことに応じて、第１の電子デバイスのユーザの視線が第１のユーザインタフェースの第１の表現に向けられているという判定に従って、第２の電子デバイスに、第１の個別の入力に従って第１のユーザインタフェースに向けられた第１の動作を実行させ、視線が第２のユーザインタフェースの第２の表現に向けられているという判定に従って、第１の個別の入力に従って第２のユーザインタフェースの第２の表現に向けられた第２の動作を実行させることと、を含む、方法を対象とする。

【0144】

追加的又は代替的に、一部の例では、第１のアフォーダンスは、コンピュータ生成環境内の第２の電子デバイスの表現とは別個のディスプレイの所定の領域に表示される。追加的に又は代替的に、一部の例では、本方法は、指示を検出したことに応じて、ユーザの視線が、第１のユーザインタフェースの第１の表現又は第２のユーザインタフェースの第２の表現を含まないコンピュータ生成環境内の個別のロケーションに向けられているという判定に従って、第１のユーザインタフェースの第１の表現又は第２のユーザインタフェースの第２の表現を任意の動作を実行することを取り止めることを更に含む。追加的に又は代替的に、一部の例では、本方法は、第２のユーザインタフェースの第２の表現を含むコンピュータ生成環境を提示している間に、第２の電子デバイスの１つ以上の入力デバイスを介して受信された第２の個別の入力の第２の指示を検出することであって、第１の指示を検出した後、第２の指示を検出する前に入力の指示が検出されなかった、検出することと、第２の指示を検出したことに応じて、第１のユーザインタフェースの第１の表現又は第２のユーザインタフェースの第２の表現を含まないコンピュータ生成環境内の個別のロケーションにユーザの視線が向けられたとの判定に従って、第２の個別の入力に従って第１のユーザインタフェースの第１の表現に視線が向けられたとの判定に従って、第１の指示が検出されたときに視線が第１のユーザインタフェースの第１の表現に向けられていたという判定に従って、第２の電子デバイスに、第２の個別の入力に従って第１のユーザインタフェースに向けられた第３の動作を実行させ、第１の指示が検出されたときに視線が第２のユーザインタフェースの第２の表現に向けられていたという判定に従って、第２の個別の入力に従って第２のユーザインタフェースの第２の表現に向けられた第４の動作を実行することと、を更に含む。

【0145】

追加的に又は代替的に、一部の例では、本方法は、第２のユーザインタフェースの第２の表現を含むコンピュータ生成環境を提示している間に、第１の電子デバイスの１つ以上の入力デバイスを介して、個別の入力を検出することと、個別の入力を検出したことに応じて、視線が第１のユーザインタフェースの第１の表現に向けられているとの判定に従って、第２の電子デバイスに、個別の入力に従って第１のユーザインタフェースに向けられた第３の動作を実行させ、視線が第２のユーザインタフェースの第２の表現に向けられているとの判定に従って、個別の入力に従って第２のユーザインタフェースの第２の表現に向けられた第４の動作を実行させることと、を更に含む。追加的又は代替的に、一部の例では、第１のユーザインタフェースの第１の表現は、第２の電子デバイスの１つ以上の入力デバイスのうちの１つ以上を介して制御可能なカーソルを含む。追加的に又は代替的に、一部の例では、第１の個別の入力は、カーソルの移動に対応し、第１の指示を検出したことに応じて、視線が第２のユーザインタフェースの第２の表現に向けられているという判定に従って、第２のユーザインタフェースの第２の表現に向けられた第４の動作を実行することは、カーソルの移動に従って第１のユーザインタフェースの第１の表現から第２のユーザインタフェースの第２の表現にカーソルを移動させることを含む。追加的又は代替的に、一部の例では、１つ以上の入力デバイスのうちの１つ以上は、タッチ感知面を有する第１の入力デバイスを含み、第１の個別の入力は、１つ以上の基準を満たすタッチ感知面上の接触の移動を含む。

【0146】

追加的又は代替的に、一部の例では、１つ以上の基準は、接触の移動がタッチ感知面からの接触のリフトオフを含むときに満たされる基準を含む。追加的又は代替的に、一部の例では、１つ以上の基準は、タッチ感知面上の接触の移動が閾値移動を超えるときに満たされる基準を含む。追加的又は代替的に、一部の例では、現実世界環境は、第３の電子デバイスを更に含む。一部の例では、本方法は、第１の指示を検出したことに応じて、第３の電子デバイスが関与する任意の動作を実行することを取り止めることを更に含む。追加的又は代替的に、一部の例では、本方法は、コンピュータ生成環境において第２の電子デバイスの表現に関連付けられた第１のアフォーダンスを表示する前に、第１の電子デバイスが第２の電子デバイスと通信するように、第１の電子デバイスと第２の電子デバイスとをペアリングすることを更に含む。追加的に又は代替的に、一部の例では、第１の電子デバイスと第２の電子デバイスとをペアリングすることは、第１の電子デバイスの１つ以上の入力デバイスを介して、第１の電子デバイスを第２の電子デバイスと通信させる第２の電子デバイスのディスプレイを介して表示される画像をスキャンすることを含む。追加的又は代替的に、一部の例では、第１の電子デバイスと第２の電子デバイスとをペアリングすることは、第１の電子デバイスの１つ以上の入力デバイスを介して、第１の電子デバイスを第２の電子デバイスと通信させる第２の電子デバイスから出力される個別の音声を検出することを含む。追加的に又は代替的に、一部の例では、第１の電子デバイスと第２の電子デバイスとをペアリングすることは、第１の電子デバイスを第２の電子デバイスと通信させる第２の電子デバイスの１つ以上の入力デバイスを介して受信された入力の指示を検出することを含む。

【0147】

追加的に又は代替的に、一部の例では、本方法は、第２のユーザインタフェースの第２の表現を含むコンピュータ生成環境を提示している間に、第１の電子デバイスのユーザからの第１の電子デバイスの関連付け解除を検出することと、ユーザからの第１の電子デバイスの関連付け解除を検出したことに応じて、第２のユーザインタフェースの第２の表現の状態を示すデータを含む関連付け解除の指示を第２の電子デバイスに送信することと、を更に含み、指示は、第２の電子デバイスに第１のユーザインタフェース及び第２のユーザインタフェースを同時に表示させる。追加的に又は代替的に、一部の例では、本方法は、第１の電子デバイスと第１の電子デバイスのユーザとの再関連付けを検出することと、第１の電子デバイスとユーザとの再関連付けを検出したことに応じて、コンピュータ生成環境を提示し、再関連付けの指示を第２の電子デバイスに送信することと、コンピュータ生成環境を提示している間に、第２の電子デバイスから、第２のユーザインタフェースの現在の状態を示すデータを受信することと、データを受信したことに応じて、第２のユーザインタフェースの現在の状態に基づいて、コンピュータ生成環境において第２のユーザインタフェースの第２の表現を再表示することと、を更に含む。追加的に又は代替的に、一部の例では、第１の電子デバイスはヘッドマウントディスプレイを含み、第２の電子デバイスはラップトップコンピュータ、デスクトップコンピュータ、又はタブレットコンピュータである。追加的又は代替的に、一部の例では、本方法は、コンピュータ生成環境を提示している間に、第３の電子デバイスのユーザとの通信セッションに参加するための招待を受信することと、招待を受信したことに応じて、招待が第１の電子デバイスのユーザによって受け入れられたという判定に従って、第３の電子デバイスのユーザとの通信セッションに入り、第３の電子デバイスのユーザに対応するアバターと第１のユーザインタフェースの第１の表現とを同時に表示することと、を更に含む。

【0148】

追加的又は代替的に、一部の例では、本方法は、第３の電子デバイスのユーザに対応するアバター及び第１のユーザインタフェースの第１の表現を含むコンピュータ生成環境を提示している間に、第１の電子デバイスとコンテンツを共有する要求に対応する指示を第３の電子デバイスから受信することと、指示を受信したことに応じて、要求が第１の電子デバイスのユーザによって受け入れられたという判定に従って、コンテンツに対応する第３のユーザインタフェースの第３の表現をコンピュータ生成環境に表示することと、を更に含み、第３のユーザインタフェースは、第３の電子デバイス上に表示されるように構成される。追加的に又は代替的に、一部の例では、本方法は、第３のユーザインタフェースの第３の表現を含むコンピュータ生成環境を提示している間に、第１の電子デバイスの１つ以上の入力デバイスを介して、第３のユーザインタフェースの第３の表現に向けられた入力を検出することと、入力を検出したことに応じて、入力に従って第３のユーザインタフェースの第３の表現に向けられた動作を実行することを取り止めることと、を更に含む。

【0149】

本開示の一部の例は、第１の電子デバイスのディスプレイ及び１つ以上の入力デバイスと通信する第１の電子デバイスにおいてディスプレイを介して、第１の電子デバイス上で実行されるアプリケーションの第１のユーザインタフェースを含むコンピュータ生成環境を提示している間に、第２の電子デバイスから、第２の電子デバイスの第２のユーザインタフェースを表す表示データを受信することと、表示データを受信したことに応じて、ディスプレイを介して、表示データに基づいて第２の電子デバイスの第２のユーザインタフェースの表現を提示することと、アプリケーションの第１のユーザインタフェース及び第２の電子デバイスの第２のユーザインタフェースの表現を提示している間に、ユーザ入力に対応する個別のイベントを検出することと、個別のイベントを検出したことに応じて、個別のイベントが検出されたときに第１の電子デバイスのユーザの視線が第２の電子デバイスの第２のユーザインタフェースの表現に向けられているという判定に従って、個別のイベントに基づいて第２の電子デバイスの第２のユーザインタフェースに向けられた第１の動作を第２の電子デバイスに実行させ、視線が第１の電子デバイス上で実行中のアプリケーションの第１のユーザインタフェースに向けられているという判定に従って、個別のイベントに基づいて第１のユーザインタフェースに向けられた第２の動作を第２の電子デバイスに実行させることと、を含む、方法を対象とする。

【0150】

追加的又は代替的に、一部の例では、個別のイベントを検出することは、第２の電子デバイスと通信している１つ以上の入力デバイスを介して受信された個別の入力の指示を検出することを含む。追加的に又は代替的に、一部の例では、本方法は、個別の入力の指示を検出したことに応じて、指示が検出されたときに視線が第２の電子デバイスの第２のユーザインタフェースの表現に向けられているという判定に従って、視線のロケーションに関する視線データを第２の電子デバイスに送信することを更に含み、第２の電子デバイスは、個別の入力に対応する入力データを第１の電子デバイスに送信することなく、視線のロケーションに関するデータに従って第１の動作を実行する。追加的に又は代替的に、一部の例では、本方法は、個別の入力の指示を検出したことに応じて、指示が検出されたときに視線が第２の電子デバイスの第２のユーザインタフェースの表現に向けられているという判定に従って、視線のロケーションに関する視線データを、第２の電子デバイスであって、第２の電子デバイスは、視線のロケーションに関するデータに従って第１の動作を実行する、第２の電子デバイスに送信することと、個別の入力に対応する入力データを第２の電子デバイスから受信することと、を更に含み、それに従って第１の動作が第２の電子デバイスにおいて実行される。追加的に又は代替的に、一部の例では、本方法は、個別の入力の指示を検出したことに応じて、指示が検出されたときに第１の電子デバイス上で実行中のアプリケーションの第１のユーザインタフェースに視線が向けられているという判定に従って、個別の入力に対応する入力データを第２の電子デバイスに送信することなく、個別の入力に従って第１のユーザインタフェースに向けられた第２の動作を実行することを更に含む。

【0151】

追加的又は代替的に、一部の例では、個別のイベントを検出することは、第１の電子デバイスの１つ以上の入力デバイスを介して、個別の入力を検出することを含む。追加的に又は代替的に、一部の例では、本方法は、個別の入力を検出したことに応じて、個別の入力が検出されたときに視線が第２の電子デバイスの第２のユーザインタフェースの表現に向けられているという判定に従って、個別の入力に対応する入力データを第２の電子デバイスに送信することを更に含む。追加的に又は代替的に、一部の例では、本方法は、個別の入力を検出したことに応じて、個別の入力が検出されたときに視線が第１の電子デバイス上で実行中のアプリケーションの第１のユーザインタフェースに向けられているという判定に従って、個別の入力に対応する入力データを第２の電子デバイスに送信することなく、個別の入力に従って第１のユーザインタフェースに向けられた第２の動作を実行することを更に含む。追加的に又は代替的に、一部の例では、第２の電子デバイスに第１の動作を実行させることは、個別のイベントが検出されたときに視線が第２の電子デバイスの第２のユーザインタフェースの表現に向けられたことを示す情報を含む視線データを第２の電子デバイスに送信することを含む。追加的又は代替的に、一部の例では、情報は、第２のユーザインタフェースの表現内の視線のロケーションに対応するポジション情報を含む。追加的又は代替的に、一部の例では、第２の電子デバイスは、第２のユーザインタフェースを表示していない。

【0152】

追加的に又は代替的に、一部の例では、第２の電子デバイスに第２のユーザインタフェースに向けられた第１の動作を実行させることは、第２のユーザインタフェースの外観を更新することを含む。追加的に又は代替的に、一部の例では、本方法は、第２の電子デバイスに第２のユーザインタフェースに向けられた第１の動作を実行させた後に、第２の電子デバイスの第２のユーザインタフェースの外観に対する１つ以上の更新を表す更新された表示データを第２の電子デバイスから受信することと、更新された表示データを受信したことに応じて、更新された表示データに基づいて第２のユーザインタフェースの表現の表示を更新することと、を更に含む。追加的又は代替的に、一部の例では、第２の電子デバイスは、第２のユーザインタフェースを表示している。追加的又は代替的に、一部の例では、本方法は、第２の電子デバイスから、第２の電子デバイスの第２のユーザインタフェースを表す表示データを受信する前に、ディスプレイを介して、コンピュータ生成環境に、第２の電子デバイスの表現に関連付けられた第１のアフォーダンスを提示することと、第１のアフォーダンスを含むコンピュータ生成環境を提示している間に、１つ以上の入力デバイスを介して、第１のアフォーダンスの選択に対応する入力を受信することと、入力を受信したことに応じて、コンピュータ生成環境において、表示データに基づいて、第２の電子デバイスの第２のユーザインタフェースの表現を提示することと、を更に含む。追加的又は代替的に、一部の例では、本方法は、入力を受信したことに応じて、第２の電子デバイスに第２のユーザインタフェースの表示を停止させることを更に含む。追加的又は代替的に、一部の例では、本方法は、コンピュータ生成環境において第２の電子デバイスの表現に関連付けられた第１のアフォーダンスを表示する前に、第１の電子デバイスが第２の電子デバイスと通信するように、第１の電子デバイスと第２の電子デバイスとをペアリングすることを更に含む。

【0153】

追加的に又は代替的に、一部の例では、本方法は、コンピュータ生成環境を提示している間に、第１の電子デバイスのユーザからの第１の電子デバイスの関連付け解除を検出することと、ユーザからの第１の電子デバイスの関連付け解除を検出したことに応じて、関連付け解除の指示を第２の電子デバイスに送信することと、を更に含み、指示は、第２の電子デバイスに第２のユーザインタフェースを表示させる。追加的に又は代替的に、一部の例では、本方法は、第１の電子デバイスと第１の電子デバイスのユーザとの再関連付けを検出することと、第１の電子デバイスとユーザとの再関連付けを検出したことに応じて、コンピュータ生成環境を提示し、再関連付けの指示を第２の電子デバイスに送信することと、コンピュータ生成環境を提示している間に、第２の電子デバイスから、第２のユーザインタフェースの現在の状態を表す更新された表示データを受信することと、更新された表示データを受信したことに応じて、第２のユーザインタフェースの現在の状態に基づいて、コンピュータ生成環境において第２のユーザインタフェースの表現を再表示することと、を更に含む。追加的又は代替的に、一部の例では、本方法は、コンピュータ生成環境を提示している間に、第３の電子デバイスのユーザとの通信セッションに参加するための招待を受信することと、招待を受信したことに応じて、招待が第１の電子デバイスのユーザによって受け入れられたという判定に従って、第３の電子デバイスのユーザとの通信セッションに入り、第３の電子デバイスのユーザに対応するアバターと第１のユーザインタフェースの第１の表現とを同時に表示することと、を更に含む。追加的に又は代替的に、一部の例では、本方法は、第３の電子デバイスのユーザに対応するアバター及び第１の電子デバイス上で実行中のアプリケーションの第１のユーザインタフェースを含むコンピュータ生成環境を提示している間に、第１の電子デバイスとコンテンツを共有する要求に対応する指示を第３の電子デバイスから受信することと、指示を受信したことに応じて、要求が第１の電子デバイスのユーザによって受け入れられたという判定に従って、第３の電子デバイス上に表示されるように構成される、第３のユーザインタフェースのコンテンツに対応する表現をコンピュータ生成環境に表示することと、を更に含む。

【0154】

本開示の一部の例は、１つ以上のプロセッサと、メモリと、１つ以上のプログラムと、を備え、１つ以上のプログラムが、メモリに記憶され、１つ以上のプロセッサによって実行されるように構成されており、１つ以上のプログラムが、上記のいずれかに記載の方法のいずれかを実行する命令を含む、電子デバイスを対象とする。

【0155】

本開示の一部の例は、１つ以上のプログラムを記憶している非一時的コンピュータ可読記憶媒体であって、１つ以上のプログラムが、命令を含み、命令が、電子デバイスの１つ以上のプロセッサによって実行されると、電子デバイスに、上記のいずれかに記載の方法を実行させる、非一時的コンピュータ可読記憶媒体を対象とする。

【0156】

本開示の一部の例は、１つ以上のプロセッサと、メモリと、上記の方法のいずれかを実行するための手段とを備える電子デバイスを対象とする。

【0157】

本開示の一部の例は、電子デバイスにおいて使用するための情報処理装置を対象とし、情報処理装置は、上記の方法のいずれかを実行するための手段を備える。

【0158】

以上の記載は、説明の目的で、特定の実施例を参照して記載されたものである。しかしながら、上記の例示的な論考は、網羅的であること、又は開示される厳密な形態に本発明を限定することを意図するものではない。上記の教示を考慮して、多くの修正及び変形が可能である。実施例は、本発明の原理及びその実際の用途を最もよく説明し、それにより、他の当業者が本発明及び企図される特定の用途に適した様々な修正を伴う様々な記載された実施例を最もよく使用することを可能にするために選択及び記載された。

【図1】

【図2】

【図3A】

【図3B】

【図3C】

【図3D】

【図3E】

【図3F】

【図3G】

【図3H】

【図3I】

【図4A】

【図4B】

【図4C】

【図4D】

【図4E】

【図4F】

【図4G】

【図4H】

【図4I】

【図4J】

【図4K】

【図4L】

【図4M】

【図4N】

【図4O】

【図5A】

【図5B】

【図5C】

【図5D】

【図5E】

【図5F】

【図5G】

【図6A】

【図6B】

【図6C】

【図6D】

【図6E】

【図6F】

【図6G】

【図6H】

【図6I】

【図6J】

【図6K】

【図7A】

【図7B】

【図8】