特表 2024-537657 メディア及び三次元環境と相互作用するためのデバイス、方法、及びグラフィカルユーザインタフェース

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公表特許公報(A)

(11)【公表番号】

(43)【公表日】2024-10-16

(54)【発明の名称】メディア及び三次元環境と相互作用するためのデバイス、方法、及びグラフィカルユーザインタフェース

(51)【国際特許分類】

   G06F 3/0484 20220101AFI20241008BHJP

   G06F 3/01 20060101ALI20241008BHJP

   G06F 3/0482 20130101ALI20241008BHJP

   G06F 3/0483 20130101ALI20241008BHJP

   G06F 3/04842 20220101ALI20241008BHJP

   G06F 3/0346 20130101ALI20241008BHJP

   G06T 19/00 20110101ALI20241008BHJP

【ＦＩ】

G06F3/0484

G06F3/01

G06F3/0482

G06F3/0483

G06F3/01 570

G06F3/04842

G06F3/0346 423

G06T19/00 600

【審査請求】有

【予備審査請求】未請求

(21)【出願番号】P 2024515963

(86)(22)【出願日】2022-09-24

(85)【翻訳文提出日】2024-03-18

(86)【国際出願番号】 US2022044637

(87)【国際公開番号】W WO2023049418

(87)【国際公開日】2023-03-30

(31)【優先権主張番号】63/248,222

(32)【優先日】2021-09-24

(33)【優先権主張国・地域又は機関】US

(31)【優先権主張番号】17/952,206

(32)【優先日】2022-09-23

(33)【優先権主張国・地域又は機関】US

(31)【優先権主張番号】63/409,695

(32)【優先日】2022-09-23

(33)【優先権主張国・地域又は機関】US

(81)【指定国・地域】

【公序良俗違反の表示】

（特許庁注：以下のものは登録商標）

１．ＢＬＵＥＴＯＯＴＨ

２．ＦＩＲＥＷＩＲＥ

３．ＴＨＵＮＤＥＲＢＯＬＴ

４．ＺＩＧＢＥＥ

５．ツイッター

(71)【出願人】

【識別番号】503260918

【氏名又は名称】アップル インコーポレイテッド

【氏名又は名称原語表記】Ａｐｐｌｅ Ｉｎｃ．

【住所又は居所原語表記】Ｏｎｅ Ａｐｐｌｅ Ｐａｒｋ Ｗａｙ，Ｃｕｐｅｒｔｉｎｏ， Ｃａｌｉｆｏｒｎｉａ ９５０１４， Ｕ．Ｓ．Ａ．

(74)【代理人】

【識別番号】110003281

【氏名又は名称】弁理士法人大塚国際特許事務所

(72)【発明者】

【氏名】パストラーナ ヴィセンテ， イスラエル

(72)【発明者】

【氏名】アポダカ， グレゴリー エム．

(72)【発明者】

【氏名】ベーゼル， ベンジャミン エイチ．

(72)【発明者】

【氏名】チウ， シ‐サン

(72)【発明者】

【氏名】クラーク， グラハム アール．

(72)【発明者】

【氏名】ホルダー， ウェスリー エム．

(72)【発明者】

【氏名】リン， チア ヤン

(72)【発明者】

【氏名】マンザリ， ジョニー ビー．

(72)【発明者】

【氏名】オルソン， アール エム．

(72)【発明者】

【氏名】オーウェン， ジェームス ジェイ．

(72)【発明者】

【氏名】ラヴァズ， ジョナサン

(72)【発明者】

【氏名】エスタニー ロドリゲス， ミケル

(72)【発明者】

【氏名】サラン， ヴィーダント

(72)【発明者】

【氏名】シュミドチェン， ブライス エル．

(72)【発明者】

【氏名】ソレンティーノ サード， ウィリアム エー．

(72)【発明者】

【氏名】ウェインステイン， マイケル アイ．

【テーマコード（参考）】

5B050

5B087

5E555

【Ｆターム（参考）】

5B050BA09

5B050BA13

5B050CA07

5B050CA08

5B050DA01

5B050DA10

5B050EA07

5B050EA12

5B050EA18

5B050EA19

5B050FA02

5B050FA09

5B050GA08

5B087AE09

5B087BC06

5B087DD03

5B087DE06

5E555AA24

5E555AA27

5E555AA64

5E555BA04

5E555BB04

5E555BC17

5E555BE16

5E555BE17

5E555CA12

5E555CA42

5E555CB12

5E555CB17

5E555CB19

5E555CB55

5E555CB65

5E555CB66

5E555CB76

5E555CC23

5E555DA08

5E555DA09

5E555DB20

5E555DB53

5E555DB57

5E555DC02

5E555DC09

5E555DC11

5E555DC13

5E555DC24

5E555DC26

5E555DC30

5E555DC36

5E555DC43

5E555DC82

5E555EA07

5E555FA00

(57)【要約】

本開示は、概して、メディアアイテムを視聴し、メディアアイテムと相互作用するためのユーザインタフェースを含む、電子デバイスのためのユーザインタフェースに関する。本開示はまた、いくつかの実施形態による、拡張現実（ＸＲ）体験をユーザに提供するユーザインタフェースに関する。本明細書で説明されるシステム、方法、及びグラフィカルユーザインタフェース（ＧＵＩ）は、複数の方法での仮想／拡張現実環境とのユーザインタフェース相互作用を対象とする。いくつかの実施形態では、表示されたコンテンツの１つ以上の視覚特性は、ユーザの視線が向けられている場所に基づいて修正される。

【特許請求の範囲】

【請求項1】

方法であって、
表示生成構成要素及び１つ以上の入力デバイスと通信しているコンピュータシステムにおいて、
前記表示生成構成要素を介して、第１のメディアアイテムの表現を含む複数のメディアアイテムの表現を含むメディアライブラリユーザインタフェースを表示することと、
前記メディアライブラリユーザインタフェースを表示している間に、
第１の時点で、前記１つ以上の入力デバイスを介して、前記メディアライブラリユーザインタフェース内の第１のポジションに対応するユーザ視線を検出し、
前記メディアライブラリユーザインタフェース内の前記第１のポジションに対応する前記ユーザ視線を検出したことに応じて、前記第１のメディアアイテムの前記表現の外観を、前記表示生成構成要素を介して、第１の方式で表示されることから、前記第１の方式とは異なる第２の方式で表示されることに変更し、
前記第１の時点の後の第２の時点で、前記１つ以上の入力デバイスを介して、前記第１のポジションとは異なる前記メディアライブラリユーザインタフェース内の第２のポジションに対応するユーザ視線を検出し、
前記メディアライブラリユーザインタフェース内の前記第２のポジションに対応する前記ユーザ視線を検出したことに応じて、前記表示生成構成要素を介して、前記第２の方式とは異なる第３の方式で前記第１のメディアアイテムの前記表現を表示することと、を含む、方法。

【請求項2】

前記表示生成構成要素を介して、前記第１のメディアアイテムとは異なる第２のメディアアイテムの表現を含む前記複数のメディアアイテムの表現を含む前記メディアライブラリユーザインタフェースを表示することと、
前記第２のメディアアイテムの前記表現を含む前記メディアライブラリユーザインタフェースを表示している間に、
前記１つ以上の入力デバイスを介して、前記メディアライブラリユーザインタフェース内の第３のポジションに対応するユーザ視線を検出し、
前記メディアライブラリユーザインタフェース内の前記第３のポジションに対応する前記ユーザ視線を検出したことに応じて、前記第２のメディアアイテムの前記表現の外観を、第４の方式で表示されることから、前記第４の方式とは異なる第５の方式で表示されることに変更することと、
を更に含む、請求項１に記載の方法。

【請求項3】

前記第１のメディアアイテムは、第１の要素及び第２の要素を含む複数の要素を含み、
前記第１のメディアアイテムの前記表現を前記第１の方式で表示することは、前記第１の要素及び前記第２の要素を第１の二次元平面内に表示することを含み、
前記第１のメディアアイテムの前記表現を前記第２の方式で表示することは、前記第１の二次元平面の外側に延びる第３の次元に沿って前記第１の要素と前記第２の要素とを分離すること、
を含む、請求項１又は２に記載の方法。

【請求項4】

前記第１のメディアアイテムの前記表現を前記第１の方式で表示することは、ユーザに対する第１のポジションに前記第１のメディアアイテムの前記表現を表示することを含み、
前記第１のメディアアイテムの前記表現を前記第２の方式で表示することは、前記第１のポジションよりも前記ユーザから更に離れた、前記ユーザに対する第２のポジションに前記第１のメディアアイテムの前記表現を表示すること、
を含む、請求項１～３のいずれか一項に記載の方法。

【請求項5】

前記第１のメディアアイテムは、ビデオコンテンツを含み、
前記第１のメディアアイテムの前記表現を前記第１の方式で表示することは、前記第１のメディアアイテムの前記ビデオコンテンツの静的表現を表示することを含み、
前記第１のメディアアイテムの前記表現を前記第２の方式で表示することは、前記第１のメディアアイテムの前記ビデオコンテンツの再生を表示すること、
を含む、請求項１～４のいずれか一項に記載の方法。

【請求項6】

前記第２の方式とは異なる前記第３の方式で前記第１のメディアアイテムの前記表現を表示することは、前記第１のメディアアイテムの前記ビデオコンテンツの第２の静的表現を表示すること、
を含む、請求項５に記載の方法。

【請求項7】

前記第１のメディアアイテムの前記表現を前記第２の方式で表示することは、前記第１のメディアアイテムの前記ビデオコンテンツにローパスフィルタを適用することを含む、請求項５又は６に記載の方法。

【請求項8】

前記第１のメディアアイテムの前記表現を前記第２の方式で表示している間に、前記第１のメディアアイテムの前記ビデオコンテンツの再生を表示し、前記第１のメディアアイテムのオーディオコンテンツを第１の音量レベルで出力することを含むことと、
前記メディアライブラリユーザインタフェースを表示している間に、前記１つ以上の入力デバイスを介して、前記第１のメディアアイテムの選択に対応する１つ以上のユーザ入力を検出することと、
前記第１のメディアアイテムの選択に対応する前記１つ以上のユーザ入力を検出したことに応じて、
前記第１のメディアアイテムのオーディオコンテンツを、前記第１の音量レベルよりも大きい第２の音量レベルで出力することと、
を更に含む、請求項５～７のいずれか一項に記載の方法。

【請求項9】

前記第１のメディアアイテムの前記ビデオコンテンツの再生を表示することは、前記メディアライブラリユーザインタフェース内の前記第１のポジションに対応する前記ユーザ視線を検出したことに応じて実行される、請求項５～８のいずれか一項に記載の方法。

【請求項10】

前記第１のメディアアイテムは、第１の要素及び第２の要素を含む複数の要素を含み、前記方法は、
前記メディアライブラリユーザインタフェース内の前記第１のポジションに対応する前記ユーザ視線を検出し続けている間に、
前記表示生成構成要素を介して、前記ユーザの視点が前記第１のメディアアイテムに対してシフトするにつれて、前記第２の要素に対して移動する前記第１の要素を表示することを更に含む、請求項１～９のいずれか一項に記載の方法。

【請求項11】

前記１つ以上の入力デバイスを介して、前記メディアライブラリユーザインタフェース内の前記第１のポジションに対応するユーザ視線を検出することと、
前記メディアライブラリユーザインタフェース内の前記第１のポジションに対応する前記ユーザ視線を検出し続けている間に、前記１つ以上の入力デバイスを介して、１つ以上のユーザジェスチャを検出することと、
前記メディアライブラリユーザインタフェース内の前記第１のポジションに対応する前記ユーザ視線を検出し続けている間に前記１つ以上のユーザジェスチャを検出したことに応じて、前記第１のメディアアイテムの前記表現の外観を、前記表示生成構成要素を介して、第７の方式で表示されることから、前記第７の方式とは異なる第８の方式で表示されることに変更することと、
を更に含む、請求項１～１０のいずれか一項に記載の方法。

【請求項12】

前記１つ以上のユーザジェスチャは、ピンチジェスチャを含む、
請求項１１に記載の方法。

【請求項13】

前記第１のメディアアイテムは、第１の要素及び第２の要素を含む複数の要素を含み、
前記第７の方式で前記第１のメディアアイテムの前記表現を表示することは、
前記第１の要素を第１のポジションに表示することと、
前記第１のポジションよりも前記コンピュータシステムのユーザに近い第２のポジションに前記第２の要素を表示することと、を含み、
前記１つ以上のユーザジェスチャは、第１のジェスチャを含み、
前記方法が、
前記メディアライブラリユーザインタフェース内の前記第１のポジションに対応する前記ユーザ視線を検出し続けている間に前記第１のジェスチャを検出したことに応じて、前記第１の要素に対して前記第２の要素を移動させて、前記第１の要素と前記第２の要素との間の距離を減少させることを更に含む、
請求項１１又は１２に記載の方法。

【請求項14】

前記１つ以上のユーザジェスチャは、前記第１のジェスチャに続いて実行される第２のジェスチャを含み、
前記方法が、
前記メディアライブラリユーザインタフェース内の前記第１のポジションに対応する前記ユーザ視線を検出し続けている間に前記第２のジェスチャを検出したことに応じて、前記第１の要素に対して前記第２の要素を移動させて、前記第１の要素と前記第２の要素との間の距離を増加させることを更に含む、
請求項１３に記載の方法。

【請求項15】

前記１つ以上のユーザジェスチャは、前記第１のジェスチャに続いて実行される第３のジェスチャを含み、
前記第３のジェスチャは、前記第１のメディアアイテムのユーザ選択を示し、
前記方法が、
前記第３のジェスチャを検出したことに応じて、前記第１の要素と前記第２の要素との間の前記距離を増加させることを更に含む、
請求項１３又は１４に記載の方法。

【請求項16】

前記メディアライブラリユーザインタフェースを表示することは、前記第１のメディアアイテムの前記表現と同時に、前記第１のメディアアイテムの表現とは異なる第２のメディアアイテムの表現を表示することを含み、
前記１つ以上のユーザジェスチャは、前記第１のメディアアイテムの選択に対応する第１の選択ジェスチャを含み、
前記方法が、
前記第１のメディアアイテムの選択に対応する前記第１の選択ジェスチャを検出したことに応じて、前記第２のメディアアイテムの前記表現を視覚的に不明瞭にすることを更に含む、
請求項１１～１５のいずれか一項に記載の方法。

【請求項17】

前記メディアライブラリユーザインタフェース内の前記第１のポジションに対応する前記ユーザ視線を検出している間に
前記１つ以上の入力デバイスを介して、１つ以上のユーザジェスチャの第２のセットを検出することと、
１つ以上のユーザジェスチャの前記第２のセットを検出したことに応じて、１つ以上のユーザジェスチャの前記第２のセットに基づいて前記第１のメディアアイテムの前記表現の視覚的コンテンツをシフトすることと、
を更に含む、請求項１～１６のいずれか一項に記載の方法。

【請求項18】

前記メディアライブラリユーザインタフェースを表示している間に、
前記１つ以上の入力デバイスを介して、ピンチジェスチャ及びドラッグジェスチャを含む１つ以上のユーザジェスチャの第３のセットを検出することと、
１つ以上のユーザジェスチャの前記第３のセットを検出したことに応じて、前記メディアライブラリユーザインタフェースのスクロールを表示することと、
を更に含む、請求項１～１７のいずれか一項に記載の方法。

【請求項19】

前記メディアライブラリユーザインタフェースを表示している間に、前記１つ以上の入力デバイスを介して、前記第１のメディアアイテムの選択に対応する１つ以上のユーザ入力を検出することと、
前記第１のメディアアイテムの選択に対応する前記１つ以上のユーザ入力を検出したことに応じて、前記表示生成構成要素を介して、前記メディアライブラリユーザインタフェースとは異なる選択されたメディアユーザインタフェース内に前記第１のメディアアイテムを表示することと、
前記選択されたメディアユーザインタフェース内に前記第１のメディアアイテムを表示している間に、前記１つ以上の入力デバイスを介して、ピンチジェスチャ及びドラッグジェスチャを含む１つ以上のユーザジェスチャの第４のセットを検出することと、
１つ以上のユーザジェスチャの前記第４のセットを検出したことに応じて、
前記選択されたメディアユーザインタフェース内の前記第１のメディアアイテムの表示を中止し、
前記表示生成構成要素を介して、前記選択されたメディアユーザインタフェース内に前記第１のメディアアイテムとは異なる第２のメディアアイテムを表示することと、
を更に含む、請求項１～１８のいずれか一項に記載の方法。

【請求項20】

前記メディアライブラリユーザインタフェースを表示している間に、前記１つ以上の入力デバイスを介して、前記第１のメディアアイテムの選択に対応する１つ以上のユーザ入力を検出することと、
前記第１のメディアアイテムの選択に対応する前記１つ以上のユーザ入力を検出したことに応じて、前記表示生成構成要素を介して、前記メディアライブラリユーザインタフェースとは異なる選択されたメディアユーザインタフェース内に前記第１のメディアアイテムを表示することと、
前記選択されたメディアユーザインタフェース内に前記第１のメディアアイテムを表示している間に、前記１つ以上の入力デバイスを介して、ピンチジェスチャ及びドラッグジェスチャを含む１つ以上のユーザジェスチャの第５のセットを検出することと、
１つ以上のユーザジェスチャの前記第５のセットを検出したことに応じて、
前記選択されたメディアユーザインタフェースの表示を中止し、
前記表示生成構成要素を介して、前記メディアライブラリユーザインタフェースを表示することと、
を更に含む、請求項１～１９のいずれか一項に記載の方法。

【請求項21】

前記メディアライブラリユーザインタフェースを表示している間に、前記１つ以上の入力デバイスを介して、前記第１のメディアアイテムの選択に対応する１つ以上のユーザ入力を検出することと、
前記第１のメディアアイテムの選択に対応する前記１つ以上のユーザ入力を検出したことに応じて、前記表示生成構成要素を介して、前記メディアライブラリユーザインタフェースとは異なる選択されたメディアユーザインタフェース内に前記第１のメディアアイテムを表示することと、
前記選択されたメディアユーザインタフェース内に前記第１のメディアアイテムを表示している間に、前記１つ以上の入力デバイスを介して、ピンチジェスチャ及びドラッグジェスチャを含む１つ以上のユーザジェスチャの第６のセットを検出することと、
１つ以上のユーザジェスチャの前記第６のセットを検出したことに応じて、
前記ドラッグジェスチャが第１の方向に対応するという判定に従って、
前記選択されたメディアユーザインタフェース内の前記第１のメディアアイテムの表示を中止し、
前記表示生成構成要素を介して、前記選択されたメディアユーザインタフェース内に前記第１のメディアアイテムとは異なる第２のメディアアイテムを表示することと、
前記ドラッグジェスチャが前記第１の方向とは異なる第２の方向に対応するという判定に従って、
前記選択されたメディアユーザインタフェースの表示を中止し、
前記表示生成構成要素を介して、前記メディアライブラリユーザインタフェースを表示することと、
を更に含む、請求項１～２０のいずれか一項に記載の方法。

【請求項22】

前記メディアライブラリユーザインタフェースを表示している間に、前記１つ以上の入力デバイスを介して、前記第１のメディアアイテムの選択に対応する１つ以上のユーザ入力を検出することと、
前記第１のメディアアイテムの選択に対応する前記１つ以上のユーザ入力を検出したことに応じて、前記表示生成構成要素を介して、前記メディアライブラリユーザインタフェースとは異なる選択されたメディアユーザインタフェース内に前記第１のメディアアイテムを表示することと、
前記選択されたメディアユーザインタフェース内に前記第１のメディアアイテムを表示している間に、
ユーザの手が第１の状態にあるという判定に従って、前記表示生成構成要素を介して、ユーザインタフェースコントロールの第１のセットを表示し、
前記ユーザの前記手が前記第１の状態とは異なる第２の状態にあるという判定に従って、ユーザインタフェースコントロールの前記第１のセットを表示することを取り止めることと、
を更に含む、請求項１～２１のいずれか一項に記載の方法。

【請求項23】

前記メディアライブラリユーザインタフェースを表示している間に、前記１つ以上の入力デバイスを介して、前記第１のメディアアイテムの選択に対応する１つ以上のユーザジェスチャの第７のセットを検出することと、
１つ以上のユーザジェスチャの前記第７のセットを検出したことに応じて、
照明効果の第１のセットを表示することから、照明効果の前記第１のセットとは異なる照明効果の第２のセットを表示することに遷移させることであって、
照明効果の前記第１のセットを表示することに続いて、前記表示生成構成要素を介して、照明効果の中間セットであって、前記照明効果の中間セットは、照明効果の前記第１のセット及び照明効果の前記第２のセットとは異なる、照明効果の中間セットを表示し、
前記照明効果の中間セットを表示することに続いて、前記表示生成構成要素を介して、照明効果の前記第２のセットを表示することを含む、ことと、
を更に含む、請求項１～２２のいずれか一項に記載の方法。

【請求項24】

前記表示生成構成要素を介して、前記メディアライブラリユーザインタフェースとは異なる選択されたメディアユーザインタフェース内に前記第１のメディアアイテムを表示することと、
前記選択されたメディアユーザインタフェース内に前記第１のメディアアイテムを表示している間に、前記１つ以上の入力デバイスを介して、前記選択されたメディアユーザインタフェースを閉じるためのユーザ要求に対応する１つ以上のユーザジェスチャの第８のセットを検出することと、
１つ以上のユーザジェスチャの前記第８のセットを検出したことに応じて、
照明効果の第３のセットを表示することから、照明効果の前記第３のセットとは異なる照明効果の第４のセットを表示することに遷移させることであって、
照明効果の前記第３のセットを表示することに続いて、前記表示生成構成要素を介して、照明効果の第２の中間セットであって、照明効果の前記第２の中間セットは、照明効果の前記第３のセット及び照明効果の前記第４のセットとは異なる、照明効果の第２の中間セットを表示し、
照明効果の前記第２の中間セットを表示することに続いて、前記表示生成構成要素を介して、照明効果の前記第４のセットを表示することを含む、ことと、
を更に含む、請求項１～２３のいずれか一項に記載の方法。

【請求項25】

前記表示生成構成要素を介して、
前記メディアライブラリユーザインタフェースとは異なる選択されたメディアユーザインタフェース内の前記第１のメディアアイテムと、
視覚的コンテンツをナビゲートするためのナビゲーションユーザインタフェース要素と、を同時に表示することを更に含む、請求項１～２４のいずれか一項に記載の方法。

【請求項26】

前記ナビゲーションユーザインタフェース要素は、選択されると、１つ以上のそれぞれのメディアアイテムに関連付けられたそれぞれの機能を実行する１つ以上の選択可能なコントロールを含む、請求項２５に記載の方法。

【請求項27】

前記メディアライブラリユーザインタフェースを表示している間に、前記１つ以上の入力デバイスを介して、前記第１のメディアアイテムの選択に対応する１つ以上のユーザ入力を検出することと、
前記第１のメディアアイテムの選択に対応する前記１つ以上のユーザ入力を検出したことに応じて、
第１の基準のセットが満たされたという判定に従って、前記表示生成構成要素を介して、前記第１のメディアアイテムを第１の角度サイズで表示し、
前記第１の基準のセットが満たされていないという判定に従って、前記表示生成構成要素を介して、前記第１のメディアアイテムを前記第１の角度サイズとは異なる第２の角度サイズで表示することと、
を更に含む、請求項１～２６のいずれか一項に記載の方法。

【請求項28】

前記表示生成構成要素を介して、前記第１のメディアアイテムであって、前記第１のメディアアイテムは、前記第１のメディアアイテムに適用されるビネッティングを伴って表示される、前記第１のメディアアイテムを表示すること、
を更に含む、請求項１～２７のいずれか一項に記載の方法。

【請求項29】

前記１つ以上の入力デバイスを介して、前記メディアライブラリユーザインタフェース内の前記第１のポジションに対応するユーザ視線を検出することと、
前記メディアライブラリユーザインタフェース内の前記第１のポジションに対応する前記ユーザ視線を検出し続けている間に、前記１つ以上の入力デバイスを介して、前記第１のメディアアイテムの選択に対応する選択ジェスチャを検出することと、
前記メディアライブラリユーザインタフェース内の前記第１のポジションに対応する前記ユーザ視線を検出し続けている間に、前記第１のメディアアイテムの前記選択に対応する前記選択ジェスチャを検出したことに応じて、
前記選択ジェスチャが第１のタイプの選択ジェスチャに対応するという判定に従って、前記表示生成構成要素を介して、前記第１のメディアアイテムを第９の方式で表示し、
前記選択ジェスチャが前記第１のタイプの選択ジェスチャとは異なる第２のタイプの選択ジェスチャに対応するという判定に従って、前記表示生成構成要素を介して、前記第９の方式とは異なる第１０の方式で前記第１のメディアアイテムを表示することと、
を更に含む、請求項１～２８のいずれか一項に記載の方法。

【請求項30】

表示生成構成要素及び１つ以上の入力デバイスと通信しているコンピュータシステムの１つ以上のプロセッサによって実行されるように構成された１つ以上のプログラムを記憶する非一時的コンピュータ可読記憶媒体であって、前記１つ以上のプログラムは、請求項１～２９のいずれか一項に記載の方法を実行するための命令を含む、非一時的コンピュータ可読記憶媒体。

【請求項31】

表示生成構成要素及び１つ以上の入力デバイスと通信しているコンピュータシステムであって、前記コンピュータシステムは、
１つ以上のプロセッサと、
前記１つ以上のプロセッサによって実行されるように構成された１つ以上のプログラムを記憶するメモリと、を備え、前記１つ以上のプログラムは、請求項１～２９のいずれか一項に記載の方法を実行するための命令を含む、コンピュータシステム。

【請求項32】

表示生成構成要素及び１つ以上の入力デバイスと通信しているコンピュータシステムであって、前記コンピュータシステムは、
請求項１～２９のいずれか一項に記載の方法を実行するための手段を備える、コンピュータシステム。

【請求項33】

表示生成構成要素及び１つ以上の入力デバイスと通信しているコンピュータシステムの１つ以上のプロセッサによって実行されるように構成された１つ以上のプログラムを記憶する非一時的コンピュータ可読記憶媒体であって、前記１つ以上のプログラムは、
前記表示生成構成要素を介して、第１のメディアアイテムの表現を含む複数のメディアアイテムの表現を含むメディアライブラリユーザインタフェースを表示し、
前記メディアライブラリユーザインタフェースを表示している間に、
第１の時点で、前記１つ以上の入力デバイスを介して、前記メディアライブラリユーザインタフェース内の第１のポジションに対応するユーザ視線を検出し、
前記メディアライブラリユーザインタフェース内の前記第１のポジションに対応する前記ユーザ視線を検出したことに応じて、前記第１のメディアアイテムの前記表現の外観を、前記表示生成構成要素を介して、第１の方式で表示されることから、前記第１の方式とは異なる第２の方式で表示されることに変更し、
前記第１の時点の後の第２の時点で、前記１つ以上の入力デバイスを介して、前記第１のポジションとは異なる前記メディアライブラリユーザインタフェース内の第２のポジションに対応するユーザ視線を検出し、
前記メディアライブラリユーザインタフェース内の前記第２のポジションに対応する前記ユーザ視線を検出したことに応じて、前記表示生成構成要素を介して、前記第２の方式とは異なる第３の方式で前記第１のメディアアイテムの前記表現を表示する、命令を含む、非一時的コンピュータ可読記憶媒体。

【請求項34】

表示生成構成要素及び１つ以上の入力デバイスと通信しているコンピュータシステムであって、前記コンピュータシステムは、
１つ以上のプロセッサと、
前記１つ以上のプロセッサによって実行されるように構成された１つ以上のプログラムを記憶するメモリと、を備え、前記１つ以上のプログラムは、
前記表示生成構成要素を介して、第１のメディアアイテムの表現を含む複数のメディアアイテムの表現を含むメディアライブラリユーザインタフェースを表示し、
前記メディアライブラリユーザインタフェースを表示している間に、
第１の時点で、前記１つ以上の入力デバイスを介して、前記メディアライブラリユーザインタフェース内の第１のポジションに対応するユーザ視線を検出し、
前記メディアライブラリユーザインタフェース内の前記第１のポジションに対応する前記ユーザ視線を検出したことに応じて、前記第１のメディアアイテムの前記表現の外観を、前記表示生成構成要素を介して、第１の方式で表示されることから、前記第１の方式とは異なる第２の方式で表示されることに変更し、
前記第１の時点の後の第２の時点で、前記１つ以上の入力デバイスを介して、前記第１のポジションとは異なる前記メディアライブラリユーザインタフェース内の第２のポジションに対応するユーザ視線を検出し、
前記メディアライブラリユーザインタフェース内の前記第２のポジションに対応する前記ユーザ視線を検出したことに応じて、前記表示生成構成要素を介して、前記第２の方式とは異なる第３の方式で前記第１のメディアアイテムの前記表現を表示する、命令を含む、コンピュータシステム。

【請求項35】

表示生成構成要素及び１つ以上の入力デバイスと通信しているコンピュータシステムであって、前記コンピュータシステムは、
前記表示生成構成要素を介して、第１のメディアアイテムの表現を含む複数のメディアアイテムの表現を含むメディアライブラリユーザインタフェースを表示するための手段と、
前記メディアライブラリユーザインタフェースを表示している間に、
第１の時点で、前記１つ以上の入力デバイスを介して、前記メディアライブラリユーザインタフェース内の第１のポジションに対応するユーザ視線を検出し、
前記メディアライブラリユーザインタフェース内の前記第１のポジションに対応する前記ユーザ視線を検出したことに応じて、前記第１のメディアアイテムの前記表現の外観を、前記表示生成構成要素を介して、第１の方式で表示されることから、前記第１の方式とは異なる第２の方式で表示されることに変更し、
前記第１の時点の後の第２の時点で、前記１つ以上の入力デバイスを介して、前記第１のポジションとは異なる前記メディアライブラリユーザインタフェース内の第２のポジションに対応するユーザ視線を検出し、
前記メディアライブラリユーザインタフェース内の前記第２のポジションに対応する前記ユーザ視線を検出したことに応じて、前記表示生成構成要素を介して、前記第２の方式とは異なる第３の方式で前記第１のメディアアイテムの前記表現を表示するための手段と、を備える、コンピュータシステム。

【請求項36】

表示生成構成要素及び１つ以上の入力デバイスと通信しているコンピュータシステムの１つ以上のプロセッサによって実行されるように構成された１つ以上のプログラムを備えるコンピュータプログラム製品であって、前記１つ以上のプログラムは、
前記表示生成構成要素を介して、第１のメディアアイテムの表現を含む複数のメディアアイテムの表現を含むメディアライブラリユーザインタフェースを表示し、
前記メディアライブラリユーザインタフェースを表示している間に、
第１の時点で、前記１つ以上の入力デバイスを介して、前記メディアライブラリユーザインタフェース内の第１のポジションに対応するユーザ視線を検出し、
前記メディアライブラリユーザインタフェース内の前記第１のポジションに対応する前記ユーザ視線を検出したことに応じて、前記第１のメディアアイテムの前記表現の外観を、前記表示生成構成要素を介して、第１の方式で表示されることから、前記第１の方式とは異なる第２の方式で表示されることに変更し、
前記第１の時点の後の第２の時点で、前記１つ以上の入力デバイスを介して、前記第１のポジションとは異なる前記メディアライブラリユーザインタフェース内の第２のポジションに対応するユーザ視線を検出し、
前記メディアライブラリユーザインタフェース内の前記第２のポジションに対応する前記ユーザ視線を検出したことに応じて、前記表示生成構成要素を介して、前記第２の方式とは異なる第３の方式で前記第１のメディアアイテムの前記表現を表示する、命令を含む、コンピュータプログラム製品。

【請求項37】

方法であって、
表示生成構成要素及び１つ以上の入力デバイスと通信しているコンピュータシステムにおいて、
前記表示生成構成要素を介して、第１のズームレベルでユーザインタフェースを表示することと、
前記ユーザインタフェースを表示している間に、前記１つ以上の入力デバイスを介して、ズームインユーザコマンドに対応する１つ以上のユーザ入力を検出することと、
前記ズームインユーザコマンドに対応する前記１つ以上のユーザ入力を検出したことに応じて、
ユーザ視線が前記ユーザインタフェース内の第１のポジションに対応するという判定に従って、前記表示生成構成要素を介して、前記第１のズームレベルよりも大きい第２のズームレベルで前記ユーザインタフェースを表示することであって、前記第２のズームレベルで前記ユーザインタフェースを表示することは、前記第１のポジションに基づいて選択された第１のズーム中心を使用して前記ユーザインタフェースをズームすることを含み、
前記ユーザ視線が前記第１のポジションとは異なる前記ユーザインタフェース内の第２のポジションに対応するという判定に従って、前記表示生成構成要素を介して、前記第１のズームレベルよりも大きい第３のズームレベルで前記ユーザインタフェースを表示することであって、前記第３のズームレベルで前記ユーザインタフェースを表示することは、前記第２のポジションに基づいて選択された第２のズーム中心を使用して前記ユーザインタフェースをズームすることを含み、前記第２のズーム中心は、前記第１のズーム中心とは異なるロケーションにある、ことと、を含む、方法。

【請求項38】

前記ズームインユーザコマンドに対応する前記１つ以上のユーザ入力は、
第１のピンチジェスチャと、
前記第１のピンチジェスチャに続いて発生する第２のピンチジェスチャと、
を含む、請求項３７に記載の方法。

【請求項39】

前記ズームインユーザコマンドに対応する前記１つ以上のユーザ入力は、両手ピンチ解除ジェスチャを含む、
請求項３７又は３８に記載の方法。

【請求項40】

前記ズームインユーザコマンドに対応する前記１つ以上のユーザ入力を検出したことに応じて、
前記ユーザインタフェースが第１のタイプの第１のメディアアイテムを表示しているという判定に従って、前記第１のサイズで第１のメディアアイテムを表示することと、
前記ユーザインタフェースが前記第１のタイプとは異なる第２のタイプの第２のメディアアイテムを表示しているという判定に従って、前記第１のサイズよりも大きい第２のサイズで前記第２のメディアアイテムを表示することと、
を更に含む、請求項３７～３９のいずれか一項に記載の方法。

【請求項41】

前記ズームインユーザコマンドに対応する前記１つ以上のユーザ入力を検出したことに応じて、
前記ユーザインタフェースが第１のタイプの第１のメディアアイテムを表示しているという判定に従って、前記第１のメディアアイテムを平坦なオブジェクトとして表示することと、
前記ユーザインタフェースが第２のタイプの第２のメディアアイテムを表示しているという判定に従って、前記第２のメディアアイテムを湾曲したオブジェクトとして表示することと、
を更に含む、請求項３７～４０のいずれか一項に記載の方法。

【請求項42】

前記第１のズームレベルで前記ユーザインタフェースを表示することは、第１のサイズで第１のメディアアイテムの表現を表示することを含み、
三次元環境は、前記ユーザインタフェースを少なくとも部分的に取り囲み、前記ユーザインタフェースの背後の背景コンテンツを含み、
前記方法は、前記ズームインユーザコマンドに対応する前記１つ以上のユーザ入力を検出したことに応じて、
前記第１のメディアアイテムの前記表現を、前記第１のサイズで表示されることから、前記第１のサイズよりも大きい第２のサイズで表示されることに遷移させることと、
前記第１のメディアアイテムに対する前記背景コンテンツの視覚的強調を低減させることと、を更に含む、
請求項３７～４１のいずれか一項に記載の方法。

【請求項43】

前記第１のズームレベルで前記ユーザインタフェースを表示することは、第１のサイズで第１のメディアアイテムの表現を表示することを含み、
前記方法が、
前記ズームインユーザコマンドに対応する前記１つ以上のユーザ入力を検出したことに応じて、
前記第１のメディアアイテムの前記表現を、前記第１のサイズで表示されることから、前記第１のサイズよりも大きい第２のサイズで表示されることに遷移させることと、
前記ユーザインタフェースから延びる光スピル効果を表示することと、を更に含む、
請求項３７～４２のいずれか一項に記載の方法。

【請求項44】

前記ユーザインタフェースを前記第１のズームレベルで表示することは、第１のサイズで第１のメディアアイテムを表示することを含み、
前記第２のズームレベルで前記ユーザインタフェースを表示することは、
前記第１のサイズよりも大きい第２のサイズで前記第１のメディアアイテムを表示することと、
前記第２のサイズが所定の閾値サイズよりも大きいという判定に従って、前記第１のメディアアイテムの少なくとも第１の縁部にぼかし効果が適用された前記第１のメディアアイテムを表示することと、
前記第２のサイズが前記所定の閾値サイズよりも大きくないという判定に従って、前記第１のメディアアイテムのいずれの縁部にも前記ぼかし効果を適用することなく、前記第１のメディアアイテムを表示することと、
を含む、請求項３７～４３のいずれか一項に記載の方法。

【請求項45】

前記ユーザインタフェースは、第１のメディアアイテムの表現及び第２のメディアアイテムの表現を含む、メディアライブラリ内の複数のメディアアイテムの表現を含むメディアライブラリユーザインタフェースであり、
前記第１のズームレベルで前記ユーザインタフェースを表示することは、
第１のサイズでの前記第１のメディアアイテムの前記表現と、
第２のサイズでの前記第２のメディアアイテムの前記表現と、を同時に表示することを含み、
前記第２のズームレベルで前記ユーザインタフェースを表示することは、
前記第１のサイズよりも大きい第３のサイズでの前記第１のメディアアイテムの前記表現と、
前記第２のサイズよりも大きい第４のサイズでの前記第２のメディアアイテムの前記表現と、を同時に表示することを含む、
請求項３７～４４のいずれか一項に記載の方法。

【請求項46】

前記第１のズームレベルで前記ユーザインタフェースを表示することは、第１のサイズで前記ユーザインタフェースを表示することを含み、
前記方法が、
前記ズームインユーザコマンドに対応する前記１つ以上のユーザ入力を検出したことに応じて、
前記ユーザインタフェースが第１のユーザインタフェースであるという判定に従って、前記第１のサイズよりも大きい第２のサイズで前記ユーザインタフェースを表示することと、
前記ユーザインタフェースが前記第１のユーザインタフェースとは異なる第２のユーザインタフェースであるという判定に従って、前記ユーザインタフェースを前記第１のサイズに維持することと、を更に含む、
請求項３７～４５のいずれか一項に記載の方法。

【請求項47】

表示生成構成要素及び１つ以上の入力デバイスと通信しているコンピュータシステムの１つ以上のプロセッサによって実行されるように構成された１つ以上のプログラムを記憶する非一時的コンピュータ可読記憶媒体であって、前記１つ以上のプログラムは、請求項３７～４６のいずれか一項に記載の方法を実行するための命令を含む、非一時的コンピュータ可読記憶媒体。

【請求項48】

表示生成構成要素及び１つ以上の入力デバイスと通信しているコンピュータシステムであって、前記コンピュータシステムは、
１つ以上のプロセッサと、
前記１つ以上のプロセッサによって実行されるように構成された１つ以上のプログラムを記憶するメモリと、を備え、前記１つ以上のプログラムは、請求項３７～４６のいずれか一項に記載の方法を実行するための命令を含む、コンピュータシステム。

【請求項49】

表示生成構成要素及び１つ以上の入力デバイスと通信しているコンピュータシステムであって、前記コンピュータシステムは、
請求項３７～４６のいずれか一項に記載の方法を実行するための手段を備える、コンピュータシステム。

【請求項50】

表示生成構成要素及び１つ以上の入力デバイスと通信しているコンピュータシステムの１つ以上のプロセッサによって実行されるように構成された１つ以上のプログラムを記憶する非一時的コンピュータ可読記憶媒体であって、前記１つ以上のプログラムは、
前記表示生成構成要素を介して、第１のズームレベルでユーザインタフェースを表示し、
前記ユーザインタフェースを表示している間に、前記１つ以上の入力デバイスを介して、ズームインユーザコマンドに対応する１つ以上のユーザ入力を検出し、
前記ズームインユーザコマンドに対応する前記１つ以上のユーザ入力を検出したことに応じて、
ユーザ視線が前記ユーザインタフェース内の第１のポジションに対応するという判定に従って、前記表示生成構成要素を介して、前記第１のズームレベルよりも大きい第２のズームレベルで前記ユーザインタフェースを表示し、前記第２のズームレベルで前記ユーザインタフェースを表示することは、前記第１のポジションに基づいて選択された第１のズーム中心を使用して前記ユーザインタフェースをズームすることを含み、
前記ユーザ視線が前記第１のポジションとは異なる前記ユーザインタフェース内の第２のポジションに対応するという判定に従って、前記表示生成構成要素を介して、前記第１のズームレベルよりも大きい第３のズームレベルで前記ユーザインタフェースを表示し、前記第３のズームレベルで前記ユーザインタフェースを表示することは、前記第２のポジションに基づいて選択された第２のズーム中心を使用して前記ユーザインタフェースをズームすることを含み、前記第２のズーム中心は、前記第１のズーム中心とは異なるロケーションにある、命令を含む、非一時的コンピュータ可読記憶媒体。

【請求項51】

表示生成構成要素及び１つ以上の入力デバイスと通信しているコンピュータシステムであって、前記コンピュータシステムは、
１つ以上のプロセッサと、
前記１つ以上のプロセッサによって実行されるように構成された１つ以上のプログラムを記憶するメモリと、を備え、前記１つ以上のプログラムは、
前記表示生成構成要素を介して、第１のズームレベルでユーザインタフェースを表示し、
前記ユーザインタフェースを表示している間に、前記１つ以上の入力デバイスを介して、ズームインユーザコマンドに対応する１つ以上のユーザ入力を検出し、
前記ズームインユーザコマンドに対応する前記１つ以上のユーザ入力を検出したことに応じて、
ユーザ視線が前記ユーザインタフェース内の第１のポジションに対応するという判定に従って、前記表示生成構成要素を介して、前記第１のズームレベルよりも大きい第２のズームレベルで前記ユーザインタフェースを表示し、前記第２のズームレベルで前記ユーザインタフェースを表示することは、前記第１のポジションに基づいて選択された第１のズーム中心を使用して前記ユーザインタフェースをズームすることを含み、
前記ユーザ視線が前記第１のポジションとは異なる前記ユーザインタフェース内の第２のポジションに対応するという判定に従って、前記表示生成構成要素を介して、前記第１のズームレベルよりも大きい第３のズームレベルで前記ユーザインタフェースを表示し、前記第３のズームレベルで前記ユーザインタフェースを表示することは、前記第２のポジションに基づいて選択された第２のズーム中心を使用して前記ユーザインタフェースをズームすることを含み、前記第２のズーム中心は、前記第１のズーム中心とは異なるロケーションにある、命令を含む、コンピュータシステム。

【請求項52】

表示生成構成要素及び１つ以上の入力デバイスと通信しているコンピュータシステムであって、前記コンピュータシステムは、
前記表示生成構成要素を介して、第１のズームレベルでユーザインタフェースを表示するための手段と、
前記ユーザインタフェースを表示している間に、前記１つ以上の入力デバイスを介して、ズームインユーザコマンドに対応する１つ以上のユーザ入力を検出するための手段と、
前記ズームインユーザコマンドに対応する前記１つ以上のユーザ入力を検出したことに応じて、
ユーザ視線が前記ユーザインタフェース内の第１のポジションに対応するという判定に従って、前記表示生成構成要素を介して、前記第１のズームレベルよりも大きい第２のズームレベルで前記ユーザインタフェースを表示し、前記第２のズームレベルで前記ユーザインタフェースを表示することは、前記第１のポジションに基づいて選択された第１のズーム中心を使用して前記ユーザインタフェースをズームすることを含み、
前記ユーザ視線が前記第１のポジションとは異なる前記ユーザインタフェース内の第２のポジションに対応するという判定に従って、前記表示生成構成要素を介して、前記第１のズームレベルよりも大きい第３のズームレベルで前記ユーザインタフェースを表示し、前記第３のズームレベルで前記ユーザインタフェースを表示することは、前記第２のポジションに基づいて選択された第２のズーム中心を使用して前記ユーザインタフェースをズームすることを含み、前記第２のズーム中心は、前記第１のズーム中心とは異なるロケーションにある、手段と、を備える、コンピュータシステム。

【請求項53】

表示生成構成要素及び１つ以上の入力デバイスと通信しているコンピュータシステムの１つ以上のプロセッサによって実行されるように構成された１つ以上のプログラムを備えるコンピュータプログラム製品であって、前記１つ以上のプログラムは、
前記表示生成構成要素を介して、第１のズームレベルでユーザインタフェースを表示し、
前記ユーザインタフェースを表示している間に、前記１つ以上の入力デバイスを介して、ズームインユーザコマンドに対応する１つ以上のユーザ入力を検出し、
前記ズームインユーザコマンドに対応する前記１つ以上のユーザ入力を検出したことに応じて、
ユーザ視線が前記ユーザインタフェース内の第１のポジションに対応するという判定に従って、前記表示生成構成要素を介して、前記第１のズームレベルよりも大きい第２のズームレベルで前記ユーザインタフェースを表示し、前記第２のズームレベルで前記ユーザインタフェースを表示することは、前記第１のポジションに基づいて選択された第１のズーム中心を使用して前記ユーザインタフェースをズームすることを含み、
前記ユーザ視線が前記第１のポジションとは異なる前記ユーザインタフェース内の第２のポジションに対応するという判定に従って、前記表示生成構成要素を介して、前記第１のズームレベルよりも大きい第３のズームレベルで前記ユーザインタフェースを表示し、前記第３のズームレベルで前記ユーザインタフェースを表示することは、前記第２のポジションに基づいて選択された第２のズーム中心を使用して前記ユーザインタフェースをズームすることを含み、前記第２のズーム中心は、前記第１のズーム中心とは異なるロケーションにある、命令を含む、コンピュータプログラム製品。

【請求項54】

方法であって、
表示生成構成要素及び１つ以上の入力デバイスと通信しているコンピュータシステムにおいて、
前記１つ以上の入力デバイスを介して、第１のメディアアイテムの選択に対応する１つ以上のユーザ入力を検出することと、
前記第１のメディアアイテムの選択に対応する前記１つ以上のユーザ入力を検出したことに応じて、
前記第１のメディアアイテムが個別のタイプの深度情報を含むメディアアイテムであるという判定に従って、前記表示生成構成要素を介して、前記第１のメディアアイテムを第１の方式で表示し、
前記第１のメディアアイテムが前記個別のタイプの深度情報を含まないメディアアイテムであるという判定に従って、前記表示生成構成要素を介して、前記第１の方式とは異なる第２の方式で前記第１のメディアアイテムを表示することと、を含む、方法。

【請求項55】

前記第１のメディアアイテムを前記第１の方式で表示することは、前記第１のメディアアイテムを取り囲む第１のタイプの境界を有する前記第１のメディアアイテムを表示することを含み、
前記第２の方式で前記第１のメディアアイテムを表示することは、前記第１のメディアアイテムを取り囲む前記第１の境界とは異なる第２のタイプの境界を有する前記第１のメディアアイテムを表示することを含む、
請求項５４に記載の方法。

【請求項56】

前記第１のメディアアイテムが前記第１の方式で表示されたときに、前記第１のメディアアイテムを少なくとも部分的に取り囲むコンテンツは、第１の外観を有し、
前記第１のメディアアイテムが前記第２の方式で表示されたときに、前記第１のメディアアイテムを少なくとも部分的に取り囲む前記コンテンツは、前記第１の外観とは異なる第２の外観を有する、
請求項５４又は５５に記載の方法。

【請求項57】

前記第１のメディアアイテムを前記第１の方式で表示することは、
前記第１のメディアアイテムから延びる光線のセットを表示することを含む、請求項５４～５６のいずれか一項に記載の方法。

【請求項58】

前記光線のセットの１つ以上の視覚特性は、前記第１のメディアアイテムの前記縁部における１つ以上の色に基づいて決定される、請求項５７に記載の方法。

【請求項59】

前記光線のセットは、第１の長さを有する第１の光線と、前記第１の長さとは異なる第２の長さを有する第２の光線と、を含む、請求項５７又は５８に記載の方法。

【請求項60】

前記第１のメディアアイテムは、前記個別のタイプの深度情報を含み、前記第１のメディアアイテムは、前記コンピュータシステムによってキャプチャされた、請求項５４～５９のいずれか一項に記載の方法。

【請求項61】

前記第１のメディアアイテムを前記第１の方式で表示することは、照明効果の第１のセットを用いて前記第１のメディアアイテムを表示することを含み、
前記第２の方式で前記第１のメディアアイテムを表示することは、照明効果の第２のセットを用いて前記第１のメディアアイテムを表示することを含む、
請求項５４～６０のいずれか一項に記載の方法。

【請求項62】

照明効果の前記第１のセットは、前記第１のメディアアイテムの前記縁部における色の第１のセットに基づいて、かつ前記第１のメディアアイテムの前記縁部の内側の色の第２のセットに基づいて決定され、前記色の第１のセットは、照明効果の前記第１のセットを決定する際に前記色の第２のセットよりも大きい重みを与えられ、
照明効果の前記第２のセットは、前記第１のメディアアイテムの前記縁部における色の第３のセットに基づいて、かつ前記第１のメディアアイテムの前記縁部の内側の色の第４のセットに基づいて決定され、前記色の第３のセットは、照明効果の前記第２のセットを決定する際に前記色の第４のセットよりも大きい重みを与えられる、
請求項６１に記載の方法。

【請求項63】

照明効果の前記第１のセット及び照明効果の前記第２のセットは、
前記第１のメディアアイテムの前に放出される光と、
前記第１のメディアアイテムの背後に放出される光と、
を含む、請求項６１又は６２に記載の方法。

【請求項64】

前記第１のメディアアイテムを前記第１の方式で表示することは、
前記第１のメディアアイテムがビデオであるという判定に従って、照明効果の第３のセットを用いて前記第１のメディアアイテムを表示することと、
前記第１のメディアアイテムが静止画像であるという判定に従って、照明効果の第４のセットを用いて前記第１のメディアアイテムを表示することと、を含み、
前記第１のメディアアイテムを前記第２の方式で表示することは、
前記第１のメディアアイテムがビデオであるという判定に従って、照明効果の第５のセットを用いて前記第１のメディアアイテムを表示することと、
前記第１のメディアアイテムが静止画像であるという判定に従って、照明効果の第６のセットを用いて前記第１のメディアアイテムを表示することと、を含む、
請求項６１～６３のいずれか一項に記載の方法。

【請求項65】

前記第１のメディアアイテムは、ビデオであり、
前記ビデオ内の個別の再生時間における照明効果の前記第１のセットは、前記ビデオ内の前記個別の再生時間を含む、前記ビデオ内の複数の再生時間からの前記ビデオからのコンテンツに基づいて生成される照明効果を含む、
請求項６１～６４のいずれか一項に記載の方法。

【請求項66】

前記第１のメディアアイテムを前記第１の方式で表示することは、前記第１のメディアアイテムの１つ以上の縁部を視覚的に歪ませることを含む、請求項５４～６５のいずれか一項に記載の方法。

【請求項67】

前記第１のメディアアイテムを前記第１の方式で表示している間に、
前記１つ以上の入力デバイスを介して、前記第１のメディアアイテム内の第１のポジションに対応するユーザ視線を検出することと、
前記第１のメディアアイテム内の前記第１のポジションに対応する前記ユーザ視線を検出したことに応じて、前記第１のメディアアイテムの少なくとも一部を後方に移動して表示することと、
を更に含む、請求項５４～６６のいずれか一項に記載の方法。

【請求項68】

前記第１のメディアアイテムを前記第１の方式で表示することは、前記第１のメディアアイテムの１つ以上の縁部をぼかすことを含む、請求項５４～６７のいずれか一項に記載の方法。

【請求項69】

前記第１のメディアアイテムを前記第１の方式で表示することは、
前記第１のメディアアイテムから延びる光スピル照明効果の第１のセットを用いて前記第１のメディアアイテムを表示することと、
前記第１のセットの光スピル照明効果と同時に、１つ以上の追加の照明効果を表示することと、を含み、
前記第１のメディアアイテムを前記第２の方式で表示することは、
前記１つ以上の追加の照明効果を適用することなく、前記第１のメディアアイテムから延びる光スピル照明効果の第２のセットを用いて前記第１のメディアアイテムを表示することを含む、
請求項５４～６８のいずれか一項に記載の方法。

【請求項70】

前記第１のメディアアイテムを前記第１の方式で表示することは、前記第１のメディアアイテムを、連続的な縁部を有する三次元形状内に表示することを含む、請求項５４～６９のいずれか一項に記載の方法。

【請求項71】

連続的な縁部を有する前記三次元形状は、湾曲した前面及び湾曲した背面を含む、請求項５４～７０のいずれか一項に記載の方法。

【請求項72】

連続的な縁部を有する前記三次元形状は、１つ以上の屈折縁部から放出される光に屈折特性を適用する前記１つ以上の屈折縁部を有する、請求項５４～７１のいずれか一項に記載の方法。

【請求項73】

前記第１のメディアアイテムが個別のタイプの深度情報を含むメディアアイテムであるという前記判定は、前記第１のメディアアイテムが２つの異なるカメラから同時にキャプチャされたメディアを含む立体視メディアアイテムであるという判定である、請求項５４～７２のいずれか一項に記載の方法。

【請求項74】

前記第１のメディアアイテムを前記第１の方式で表示することは、前記第１のメディアアイテムの前記外側境界の外側に１つ以上のコントロールを表示すること、
を含む、請求項５４～７３のいずれか一項に記載の方法。

【請求項75】

表示生成構成要素及び１つ以上の入力デバイスと通信しているコンピュータシステムの１つ以上のプロセッサによって実行されるように構成された１つ以上のプログラムを記憶する非一時的コンピュータ可読記憶媒体であって、前記１つ以上のプログラムは、請求項５４～７４のいずれか一項に記載の方法を実行するための命令を含む、非一時的コンピュータ可読記憶媒体。

【請求項76】

表示生成構成要素及び１つ以上の入力デバイスと通信しているコンピュータシステムであって、前記コンピュータシステムは、
１つ以上のプロセッサと、
前記１つ以上のプロセッサによって実行されるように構成された１つ以上のプログラムを記憶するメモリと、を備え、前記１つ以上のプログラムは、請求項５４～７４のいずれか一項に記載の方法を実行するための命令を含む、コンピュータシステム。

【請求項77】

表示生成構成要素及び１つ以上の入力デバイスと通信しているコンピュータシステムであって、前記コンピュータシステムは、
請求項５４～７４のいずれか一項に記載の方法を実行するための手段を備える、コンピュータシステム。

【請求項78】

表示生成構成要素及び１つ以上の入力デバイスと通信しているコンピュータシステムの１つ以上のプロセッサによって実行されるように構成された１つ以上のプログラムを記憶する非一時的コンピュータ可読記憶媒体であって、前記１つ以上のプログラムは、
前記１つ以上の入力デバイスを介して、第１のメディアアイテムの選択に対応する１つ以上のユーザ入力を検出し、
前記第１のメディアアイテムの選択に対応する前記１つ以上のユーザ入力を検出したことに応じて、
前記第１のメディアアイテムが個別のタイプの深度情報を含むメディアアイテムであるという判定に従って、前記表示生成構成要素を介して、前記第１のメディアアイテムを第１の方式で表示し、
前記第１のメディアアイテムが前記個別のタイプの深度情報を含まないメディアアイテムであるという判定に従って、前記表示生成構成要素を介して、前記第１の方式とは異なる第２の方式で前記第１のメディアアイテムを表示する、命令を含む、非一時的コンピュータ可読記憶媒体。

【請求項79】

表示生成構成要素及び１つ以上の入力デバイスと通信しているコンピュータシステムであって、前記コンピュータシステムは、
１つ以上のプロセッサと、
前記１つ以上のプロセッサによって実行されるように構成された１つ以上のプログラムを記憶するメモリと、を備え、前記１つ以上のプログラムは、
前記１つ以上の入力デバイスを介して、第１のメディアアイテムの選択に対応する１つ以上のユーザ入力を検出し、
前記第１のメディアアイテムの選択に対応する前記１つ以上のユーザ入力を検出したことに応じて、
前記第１のメディアアイテムが個別のタイプの深度情報を含むメディアアイテムであるという判定に従って、前記表示生成構成要素を介して、前記第１のメディアアイテムを第１の方式で表示し、
前記第１のメディアアイテムが前記個別のタイプの深度情報を含まないメディアアイテムであるという判定に従って、前記表示生成構成要素を介して、前記第１の方式とは異なる第２の方式で前記第１のメディアアイテムを表示する、命令を含む、コンピュータシステム。

【請求項80】

表示生成構成要素及び１つ以上の入力デバイスと通信しているコンピュータシステムであって、前記コンピュータシステムは、
前記１つ以上の入力デバイスを介して、第１のメディアアイテムの選択に対応する１つ以上のユーザ入力を検出するための手段と、
前記第１のメディアアイテムの選択に対応する前記１つ以上のユーザ入力を検出したことに応じて、
前記第１のメディアアイテムが個別のタイプの深度情報を含むメディアアイテムであるという判定に従って、前記表示生成構成要素を介して、前記第１のメディアアイテムを第１の方式で表示し、
前記第１のメディアアイテムが前記個別のタイプの深度情報を含まないメディアアイテムであるという判定に従って、前記表示生成構成要素を介して、前記第１の方式とは異なる第２の方式で前記第１のメディアアイテムを表示するための手段と、を備える、コンピュータシステム。

【請求項81】

表示生成構成要素及び１つ以上の入力デバイスと通信しているコンピュータシステムの１つ以上のプロセッサによって実行されるように構成された１つ以上のプログラムを備えるコンピュータプログラム製品であって、前記１つ以上のプログラムは、
前記１つ以上の入力デバイスを介して、第１のメディアアイテムの選択に対応する１つ以上のユーザ入力を検出し、
前記第１のメディアアイテムの選択に対応する前記１つ以上のユーザ入力を検出したことに応じて、
前記第１のメディアアイテムが個別のタイプの深度情報を含むメディアアイテムであるという判定に従って、前記表示生成構成要素を介して、前記第１のメディアアイテムを第１の方式で表示し、
前記第１のメディアアイテムが前記個別のタイプの深度情報を含まないメディアアイテムであるという判定に従って、前記表示生成構成要素を介して、前記第１の方式とは異なる第２の方式で前記第１のメディアアイテムを表示する、命令を含む、コンピュータプログラム製品。

【請求項82】

方法であって、
表示生成構成要素と通信するコンピュータシステムにおいて、
前記表示生成構成要素を介して、ユーザインタフェースであって、
立体視メディアアイテムの第１の表現であって、前記立体視メディアアイテムの前記第１の表現は、少なくとも第１の縁部を含む、立体視メディアアイテムの第１の表現と、
視覚効果であって、前記視覚効果は、前記立体視メディアアイテムの少なくとも第１の部分を不明瞭にし、前記立体視メディアアイテムの前記第１の表現の少なくとも前記第１の縁部から前記立体視メディアアイテムの前記第１の表現の内部に向かって内側に延びる、視覚効果と、を含む、ユーザインタフェースを表示することを含む、方法。

【請求項83】

前記立体視メディアアイテムは、カメラのセットからキャプチャされ、前記カメラのセットのうちの第１のカメラは、物理的環境の第１の透視図をキャプチャし、前記カメラのセットのうちの第２のカメラは、前記物理的環境の第２の透視図をキャプチャし、前記第２の透視図は、前記第１の透視図とは異なり、前記立体視メディアアイテムの前記第１の表現を表示することは、
前記表示生成構成要素を介して、前記物理的環境の前記第１の透視図をユーザの第２の目ではなく前記ユーザの第１の目に表示することと、
前記表示生成構成要素を介して、前記第２の透視図を前記ユーザの前記第１の目ではなく前記ユーザの前記第２の目に表示することと、を含む、請求項８２に記載の方法。

【請求項84】

前記立体視メディアアイテムの前記第１の表現を表示している間に、ユーザの視点の第１の変化を検出することと、
前記ユーザの前記視点の前記第１の変化を検出したことに応じて、前記ユーザの前記視点の前記第１の変化に基づいて、前記立体視メディアアイテムの前記第１の表現の前記外観を変更することと、
を更に含む、請求項８２又は８３に記載の方法。

【請求項85】

前記立体視メディアアイテムの前記第１の表現の前記外観を変更する前に、前記視覚効果は、前記立体視メディアアイテムの前記第１の表現の前記第１の部分を不明瞭にし、
前記立体視メディアアイテムの前記第１の表現の前記外観を変更することは、前記視覚効果が、前記第１の部分とは異なる前記立体視メディアアイテムの前記第１の表現の第２の部分を不明瞭にするように、前記視覚効果を修正すること、
を含む、請求項８４に記載の方法。

【請求項86】

前記立体視メディアアイテムの前記第１の表現の前記外観を変更することは、
第１の方式で、ユーザの右目ではなく前記ユーザの左目に表示される前記立体視メディアアイテムの前記第１の表現の前記外観を変更することと、
前記ユーザの前記左目ではなく前記ユーザの前記右目に表示される前記第１の立体視メディアアイテムの前記第１の表現の前記外観を、第２の方式であって、前記第２の方式は、前記第１の方式とは異なる、第２の方式で変更することと、を含む、請求項８４又は８５に記載の方法。

【請求項87】

前記視覚効果は、前記視覚効果が前記立体視メディアアイテムの前記第１の表現の少なくとも前記第１の縁部から前記立体視メディアアイテムの前記第１の表現の前記内部に向かって内側に延びるにつれて、複数の値にわたって減少する視覚特性を有する、請求項８２～８６のいずれか一項に記載の方法。

【請求項88】

前記立体視メディアの前記第１の表現は、前記立体視メディアアイテムの前記第１の表現の前記第１の縁部におけるコンテンツを含み、前記視覚効果は、前記立体視メディアアイテムの前記第１の表現の前記第１の縁部における前記コンテンツのぼかしである、請求項８７に記載の方法。

【請求項89】

前記視覚効果は、前記立体視メディアアイテムの前記第１の表現の前記第１の縁部及び第２の縁部上に表示され、前記方法は、
前記立体視メディアアイテムの前記第１の表現を表示している間に、ユーザの前記視点の第２の変化であって、前記ユーザの前記視点の前記第２の変化は、前記立体視メディアアイテムの前記第１の表現の前記表示に対する前記ユーザの前記視点の前記角度の変化を含む、ユーザの前記視点の第２の変化を検出することと、
前記ユーザの前記視点の前記第２の変化を検出したことに応じて、
前記ユーザの前記視点の前記第２の変化が第１の方向であるという判定に従って、前記立体視メディアアイテムの前記第１の表現の少なくとも前記第２の縁部上の前記視覚効果の前記サイズを増大させ、
前記ユーザの前記視点の前記第２の変化が前記第１の方向とは異なる第２の方向であるという判定に従って、前記立体視メディアアイテムの前記第１の表現の少なくとも前記第１の縁部上の前記視覚効果の前記サイズを増大させることと、を更に含む、請求項８２～８８のいずれか一項に記載の方法。

【請求項90】

前記ユーザインタフェースを表示することは、ぼかし領域を表示することを含み、前記立体視メディアアイテムは、第１の複数の縁部を含み、
前記立体視メディアアイテムの前記第１の複数の縁部が第１のコンテンツを含むという判定に従って、前記ぼかし領域は、前記第１のコンテンツのぼかし表現を含み、前記第１のコンテンツの前記ぼかし表現は、前記第１のコンテンツの外挿に基づき、
前記立体視メディアアイテムの前記第１の複数の縁部が第２のコンテンツを含むという判定に従って、前記ぼかし領域は、前記第２のコンテンツのぼかし表現を含み、前記第２のコンテンツの前記ぼかし表現は、前記第２のコンテンツの外挿に基づく、請求項８２～８９のいずれか一項に記載の方法。

【請求項91】

前記立体視メディアアイテムの前記第１の表現は、ビネット効果を伴って表示される、請求項８２～９０のいずれか一項に記載の方法。

【請求項92】

前記ユーザインタフェースを表示することは、仮想ポータルを表示することを含み、前記立体視メディアアイテムの前記第１の表現は、前記仮想ポータル内に表示される、請求項８２～９１のいずれか一項に記載の方法。

【請求項93】

前記立体視メディアアイテムの前記第１の表現は、前景部分及び背景部分を含み、前記方法は、
前記立体視メディアアイテムの前記第１の表現を表示している間に、ユーザの前記視点の第３の変化を検出することと、
前記ユーザの前記視点の前記第３の変化を検出したことに応じて、前記表示生成構成要素を介して、前記ユーザの前記視点の前記第３の変化に基づいて、前記立体視メディアアイテムの前記第１の表現の前記前景部分を、前記立体視メディアアイテムの前記第１の表現の前記背景部分に対して移動させて表示することと、を更に含む、請求項９２に記載の方法。

【請求項94】

前記仮想ポータルを表示することは、ユーザの第１の視点から第１の距離だけ離れた物理的環境の第１の表現内の第１のロケーションに前記仮想ポータルの第１の部分を表示することを含み、前記立体視メディアアイテムの前記第１の表現を表示することは、前記ユーザの前記第１の視点から第２の距離だけ離れた前記物理的環境の前記第１の表現内の第２のロケーションに前記立体視メディアアイテムの前記第１の表現を表示することを含み、前記第２の距離は、前記第１の距離よりも大きい、請求項９１～９３のいずれか一項に記載の方法。

【請求項95】

前記仮想ポータルは、ある量の厚さを有する三次元仮想オブジェクトであり、ユーザに表示される前記厚さの量は、前記仮想ポータルの前記ディスプレイに対する前記ユーザの前記視点の角度に直接相関する、請求項９１～９４のいずれか一項に記載の方法。

【請求項96】

前記立体視メディアアイテムの前記第１の表現を表示することは、前記立体視メディアアイテムの前記第１の表現の前記第１の縁部において鏡面反射効果を表示することを含む、請求項８２～９５のいずれか一項に記載の方法。

【請求項97】

前記立体視メディアアイテムの前記第１の表現は、前記物理的環境の第２の表現内の第１のロケーションに表示され、前記第１のロケーションは、ユーザの第１の視点から第１の距離だけ離れており、前記方法は、
前記物理的環境の前記第２の表現内の前記第１のロケーションに前記立体視メディアアイテムの前記第１の表現を表示している間に、没入型外観で前記立体視メディアアイテムを表示する要求を検出することと、
前記没入型外観で前記立体視メディアアイテムの前記第１の表現を表示する前記要求を検出したことに応じて、
前記物理的環境の前記第２の表現内の第２のロケーションであって、前記第２のロケーションは、前記ユーザの前記第１の視点から第２の距離だけ離れており、前記第２の距離は、前記第１の距離よりも短い、第２のロケーションから、前記立体視メディアアイテムの前記第１の表現を表示し、
前記物理的環境の前記第２の表現内の前記第１のロケーションと前記物理的環境の前記第２の表現内の前記第２のロケーションとの間の前記経路に平行である前記立体視メディアアイテムの前記第１の表現の平面に沿って前記立体視メディアアイテムの前記第１の表現の前記サイズを増大させることと、を更に含む、請求項８２～９６のいずれか一項に記載の方法。

【請求項98】

前記立体視メディアアイテムの前記第１の表現に含まれるコンテンツは、前記空間メディアがキャプチャされたときにキャプチャされた前記オブジェクトのスケールに対して所定の関係を有する個別のスケールで表示され、前記立体視メディアアイテムの前記第１の表現は、前記没入型外観で表示される、請求項９７に記載の方法。

【請求項99】

前記没入型外観を有する前記立体視メディアアイテムの前記第１の表現を表示する前記要求を検出する前に、前記立体視メディアアイテムの前記第１の表現を表示することは、非没入型外観を有する前記立体視メディアアイテムの前記第１の表現を表示することを含み、
前記立体視メディアアイテムの前記第１の表現は、前記没入型外観で表示されたときに、ユーザの第２の視点の第１の角度範囲を占有し、
前記立体視メディアアイテムの前記第１の表現は、前記非没入型外観で表示されたときに、前記ユーザの前記第２の視点の第２の角度範囲であって、前記第２の角度範囲は、前記第１の角度範囲よりも小さい、第２の角度範囲を占有する、請求項９７又は９８に記載の方法。

【請求項100】

前記立体視メディアアイテムは、第２の複数の縁部を含み、前記方法は、
前記立体視メディアアイテムの前記第１の表現が前記没入型外観で表示されている間に、
前記立体視メディアアイテムの前記第２の複数の縁部が第３のコンテンツを含むという判定に従って、前記立体視メディアアイテムの前記第１の表現の前記第１の縁部において、前記第３のコンテンツの表現であって、前記第３のコンテンツの前記表現は、前記第３のコンテンツの外挿に基づく、前記第３のコンテンツの表現を表示することと、
前記立体視メディアアイテムの前記第２の複数の縁部が第４のコンテンツを含むという判定に従って、前記立体視メディアアイテムの前記第１の表現の前記第１の縁部において、前記第４のコンテンツの表現であって、前記第４のコンテンツの前記表現は、前記第４のコンテンツの外挿に基づく、前記第４のコンテンツの表現を表示することと、を更に含む、請求項９７～９９のいずれか一項に記載の方法。

【請求項101】

非立体視メディアアイテムであって、前記非立体視メディアアイテムは、前記視覚効果なしに表示される、非立体視メディアアイテムの表現を表示すること、
を更に含む、請求項８２～１００のいずれか一項に記載の方法。

【請求項102】

前記立体視メディアアイテムの第１の表現とは異なる第２の立体視メディアアイテムの第２の表現であって、前記第２の立体視メディアアイテムの前記第２の表現は、第２の視覚効果とともに表示され、前記第２の視覚効果は、前記第２の立体視メディアアイテムの前記第２の表現の少なくとも第１の部分を不明瞭にし、前記第２の立体視メディアアイテムの前記第２の表現の少なくとも第１の縁部から前記第２の立体視メディアアイテムの前記第２の表現の内部に向かって内側に延びる、第２の立体視メディアアイテムの第２の表現を表示すること、
を更に含む、請求項８２～１０１のいずれか一項に記載の方法。

【請求項103】

表示生成構成要素と通信しているコンピュータシステムの１つ以上のプロセッサによって実行されるように構成された１つ以上のプログラムを記憶する非一時的コンピュータ可読記憶媒体であって、前記１つ以上のプログラムは、請求項８２～１０２のいずれか一項に記載の方法を実行するための命令を含む、非一時的コンピュータ可読記憶媒体。

【請求項104】

表示生成構成要素と通信しているように構成されたコンピュータシステムであって、前記コンピュータシステムが、
１つ以上のプロセッサと、
前記１つ以上のプロセッサによって実行されるように構成された１つ以上のプログラムを記憶するメモリと、を備え、前記１つ以上のプログラムは、請求項８２～１０２のいずれか一項に記載の方法を実行するための命令を含む、コンピュータシステム。

【請求項105】

表示生成構成要素と通信しているように構成されたコンピュータシステムであって、
請求項８２～１０２のいずれか一項に記載の方法を実行するための手段を備える、コンピュータシステム。

【請求項106】

表示生成構成要素と通信するコンピュータシステムの１つ以上のプロセッサによって実行されるように構成された１つ以上のプログラムを備えるコンピュータプログラム製品であって、前記１つ以上のプログラムは、請求項８２～１０２のいずれか一項に記載の方法を実行するための命令を含む、コンピュータプログラム製品。

【請求項107】

表示生成構成要素と通信するコンピュータシステムの１つ以上のプロセッサによって実行されるように構成された１つ以上のプログラムを記憶する非一時的コンピュータ可読記憶媒体であって、前記１つ以上のプログラムが、
前記表示生成構成要素を介して、ユーザインタフェースであって、
立体視メディアアイテムの第１の表現であって、前記立体視メディアアイテムの前記第１の表現は、少なくとも第１の縁部を含む、立体視メディアアイテムの第１の表現と、
視覚効果であって、前記視覚効果は、前記立体視メディアアイテムの少なくとも第１の部分を不明瞭にし、前記立体視メディアアイテムの前記第１の表現の少なくとも前記第１の縁部から前記立体視メディアアイテムの前記第１の表現の内部に向かって内側に延びる、視覚効果と、を含む、ユーザインタフェースを表示する、命令を含む、非一時的コンピュータ可読記憶媒体。

【請求項108】

表示生成構成要素と通信しているように構成されたコンピュータシステムであって、
１つ以上のプロセッサと、
前記１つ以上のプロセッサによって実行されるように構成された１つ以上のプログラムを記憶するメモリと、を備え、前記１つ以上のプログラムは、
前記表示生成構成要素を介して、ユーザインタフェースであって、
立体視メディアアイテムの第１の表現であって、前記立体視メディアアイテムの前記第１の表現は、少なくとも第１の縁部を含む、立体視メディアアイテムの第１の表現と、
視覚効果であって、前記視覚効果は、前記立体視メディアアイテムの少なくとも第１の部分を不明瞭にし、前記立体視メディアアイテムの前記第１の表現の少なくとも前記第１の縁部から前記立体視メディアアイテムの前記第１の表現の内部に向かって内側に延びる、視覚効果と、を含む、ユーザインタフェースを表示する、命令を含む、コンピュータシステム。

【請求項109】

表示生成構成要素及び１つ以上の入力デバイスと通信しているように構成されたコンピュータシステムであって、
前記表示生成構成要素を介して、ユーザインタフェースであって、
立体視メディアアイテムの第１の表現であって、前記立体視メディアアイテムの前記第１の表現は、少なくとも第１の縁部を含む、立体視メディアアイテムの第１の表現と、
視覚効果であって、前記視覚効果は、前記立体視メディアアイテムの少なくとも第１の部分を不明瞭にし、前記立体視メディアアイテムの前記第１の表現の少なくとも前記第１の縁部から前記立体視メディアアイテムの前記第１の表現の内部に向かって内側に延びる、視覚効果と、を含む、ユーザインタフェースを表示するための手段を備える、コンピュータシステム。

【請求項110】

表示生成構成要素と通信しているコンピュータシステムの１つ以上のプロセッサによって実行されるように構成された１つ以上のプログラムを備えるコンピュータプログラム製品であって、前記１つ以上のプログラムが、
前記表示生成構成要素を介して、ユーザインタフェースであって、
立体視メディアアイテムの第１の表現であって、前記立体視メディアアイテムの前記第１の表現は、少なくとも第１の縁部を含む、立体視メディアアイテムの第１の表現と、
視覚効果であって、前記視覚効果は、前記立体視メディアアイテムの少なくとも第１の部分を不明瞭にし、前記立体視メディアアイテムの前記第１の表現の少なくとも前記第１の縁部から前記立体視メディアアイテムの前記第１の表現の内部に向かって内側に延びる、視覚効果と、を含む、ユーザインタフェースを表示する、命令を含む、コンピュータプログラム製品。

【発明の詳細な説明】

【技術分野】

【0001】

（関連出願の相互参照）
本出願は、２０２２年９月２３日に出願された「ＤＥＶＩＣＥＳ，ＭＥＴＨＯＤＳ，ＡＮＤ ＧＲＡＰＨＩＣＡＬ ＵＳＥＲ ＩＮＴＥＲＦＡＣＥＳ ＦＯＲ ＩＮＴＥＲＡＣＴＩＮＧ ＷＩＴＨ ＭＥＤＩＡ ＡＮＤ ＴＨＲＥＥ－ＤＩＭＥＮＳＩＯＮＡＬ ＥＮＶＩＲＯＮＭＥＮＴＳ」と題する米国特許出願第１７／９５２，２０６号、及び２０２２年９月２３日に出願された「ＤＥＶＩＣＥＳ，ＭＥＴＨＯＤＳ，ＡＮＤ ＧＲＡＰＨＩＣＡＬ ＵＳＥＲ ＩＮＴＥＲＦＡＣＥＳ ＦＯＲ ＩＮＴＥＲＡＣＴＩＮＧ ＷＩＴＨ ＭＥＤＩＡ ＡＮＤ ＴＨＲＥＥ－ＤＩＭＥＮＳＩＯＮＡＬ ＥＮＶＩＲＯＮＭＥＮＴＳ」と題する米国仮特許出願第６３／４０９，６９５号、及び２０２１年９月２４日に出願された「ＤＥＶＩＣＥＳ，ＭＥＴＨＯＤＳ，ＡＮＤ ＧＲＡＰＨＩＣＡＬ ＵＳＥＲ ＩＮＴＥＲＦＡＣＥＳ ＦＯＲ ＩＮＴＥＲＡＣＴＩＮＧ ＷＩＴＨ ＭＥＤＩＡ ＡＮＤ ＴＨＲＥＥ－ＤＩＭＥＮＳＩＯＮＡＬ ＥＮＶＩＲＯＮＭＥＮＴＳ」と題する米国仮特許出願第６３／２４８，２２２号の優先権を主張する。これらの出願のそれぞれの内容は、全体が、参照により本明細書に組み込まれる。

【0002】

本開示は、概して、仮想現実体験及び複合現実体験を提供する電子デバイスを含むがこれらに限定されない、表示生成構成要素と、コンピュータ生成体験を提供する１つ以上の入力デバイスと、通信しているコンピュータシステムに関する。

【背景技術】

【0003】

拡張現実のためのコンピュータシステムの開発は、近年顕著に進んでいる。例示的な拡張現実環境は、物理的世界を置換又は強化する少なくともいくつかの仮想要素を含む。コンピュータシステム及び他の電子コンピューティングデバイス用のカメラ、コントローラ、ジョイスティック、タッチ感知面、及びタッチスクリーンディスプレイなどの入力デバイスが、仮想／拡張現実環境と相互作用するために使用される。例示的な仮想要素は、デジタル画像などの仮想オブジェクト、ビデオ、テキスト、アイコン、並びにボタン及び他のグラフィックなど制御要素を含む。

【発明の概要】

【0004】

少なくともいくつかの仮想要素を含むメディアアイテム及び環境（例えばアプリケーション、拡張現実環境、複合現実環境、及び仮想現実環境）と相互作用するいくつかの方法及びインタフェースは、煩雑で、非効率で、限定されたものである。例えば、仮想オブジェクトに関連付けられたアクションを実行するのに不十分なフィードバックしか提供しないシステム、拡張現実環境において所望の結果を達成するために一連の入力を必要とするシステム、及び仮想オブジェクトの操作が複雑で、エラーを起こしやすいシステムは、ユーザに対して大きな認知負担を引き起こし、仮想／拡張現実環境での体験を損なう。加えて、それらの方法は必要以上に時間がかかり、それによって、コンピュータシステムのエネルギーを浪費する。この後者の考慮事項は、バッテリ動作式デバイスにおいて特に重要である。

【0005】

したがって、コンピュータシステムとの相互作用をユーザにとってより効率的かつ直感的にするコンピュータ生成体験をユーザに提供するための改善された方法及びインタフェースを有するコンピュータシステムが必要とされている。そのような方法及びインタフェースは、メディアアイテムと相互作用し、拡張現実体験をユーザに提供するための従来の方法を任意選択的に補完するか、又は置換する。このような方法及びインタフェースは、提供された入力とその入力に対するデバイス応答との間の接続をユーザが理解することを補助することにより、ユーザからの入力の数、程度及び／又は種類を低減し、それによって、より効率的なヒューマンマシンインタフェースを生成する。

【0006】

コンピュータシステムのユーザインタフェースに関連付けられた上記の欠点及び他の問題は、開示されるシステムによって低減又は解消される。いくつかの実施形態では、コンピュータシステムは、関連付けられたディスプレイを備えたデスクトップコンピュータである。いくつかの実施形態では、コンピュータシステムは、ポータブルデバイスである（例えばノートブックコンピュータ、タブレットコンピュータ、又はハンドヘルドデバイスである）。いくつかの実施形態では、コンピュータシステムは、パーソナル電子デバイス（例えば腕時計やヘッドマウントデバイスなどのウェアラブル電子デバイス）である。いくつかの実施形態では、コンピュータシステムは、タッチパッドを有する。いくつかの実施形態では、コンピュータシステムは、１つ以上のカメラを有する。いくつかの実施形態では、コンピュータシステムは、タッチ感知ディスプレイ（「タッチスクリーン」又は「タッチスクリーンディスプレイ」としても知られる）を有する。いくつかの実施形態では、コンピュータシステムは、１つ以上のアイトラッキングコンポーネントを有する。いくつかの実施形態では、コンピュータシステムは、１つ以上のハンドトラッキングコンポーネントを有する。いくつかの実施形態では、コンピュータシステムは、表示生成構成要素に加えて１つ以上の出力デバイスを有し、出力デバイスは、１つ以上の触知出力ジェネレータ及び／又は１つ以上のオーディオ出力デバイスを含む。いくつかの実施形態では、コンピュータシステムは、グラフィカルユーザインタフェース（ＧＵＩ）、１つ以上のプロセッサ、メモリ、及び複数の機能を実行するためのメモリに記憶された１つ以上のモジュール、プログラム、又は命令セットを有する。いくつかの実施形態では、ユーザは、タッチ感知面上のスタイラス及び／又は指の接触及びジェスチャ、カメラ及び他の移動センサによってキャプチャされたときのＧＵＩ（及び／又はコンピュータシステム）又はユーザの身体に対する空間内のユーザの目及び手の移動、並びに１つ以上のオーディオ入力デバイスによってキャプチャされたときの音声入力を通じてＧＵＩと相互作用する。いくつかの実施形態では、相互作用を通じて実行される機能は、任意選択的に、画像編集、描画、プレゼンティング、ワードプロセッシング、スプレッドシートの作成、ゲームプレイ、電話をかけること、ビデオ会議、電子メール送信、インスタントメッセージング、トレーニングサポート、デジタル写真撮影、デジタルビデオ撮影、ウェブブラウジング、デジタル音楽の再生、メモ取り、及び／又はデジタルビデオの再生を含む。それらの機能を実行する実行可能命令は任意選択で、一次的コンピュータ可読記憶媒体及び／又は非一時的コンピュータ可読記憶媒体、あるいは１つ以上のプロセッサによって実行されるように構成された他のコンピュータプログラム製品に含まれる。

【0007】

三次元環境内でメディアアイテムと相互作用するための改善された方法及びインタフェースを有する電子デバイスが必要とされている。そのような方法及びインタフェースは、三次元環境内でメディアアイテムと相互作用するための従来の方法を補完するか又は置換することができる。そのような方法及びインタフェースは、ユーザからの入力の数、程度、及び／又は種類を削減し、より効率的なヒューマンマシンインタフェースを生成する。バッテリ動作式コンピューティングデバイスの場合、そのような方法及びインタフェースは、電力を節約し、バッテリ充電の間隔を長くする。そのような方法及びインタフェースはまた、デバイスの操作性を向上させ、例えば、不必要な及び／又は無関係な受信された入力の数を低減し、改善された視覚的フィードバックをユーザに提供することによって、ユーザデバイスインタフェースをより効率的にする。

【0008】

いくつかの実施形態によれば、方法が記載される。本方法は、表示生成構成要素及び１つ以上の入力デバイスと通信しているコンピュータシステムにおいて、表示生成構成要素を介して、第１のメディアアイテムの表現を含む複数のメディアアイテムの表現を含むメディアライブラリユーザインタフェースを表示することと、メディアライブラリユーザインタフェースを表示している間に、第１の時点で、１つ以上の入力デバイスを介して、メディアライブラリユーザインタフェース内の第１のポジションに対応するユーザ視線を検出し、メディアライブラリユーザインタフェース内の第１のポジションに対応するユーザ視線を検出したことに応じて、第１のメディアアイテムの表現の外観を、表示生成構成要素を介して、第１の方式で表示されることから、第１の方式とは異なる第２の方式で表示されることに変更し、第１の時点の後の第２の時点で、１つ以上の入力デバイスを介して、第１のポジションとは異なるメディアライブラリユーザインタフェース内の第２のポジションに対応するユーザ視線を検出し、メディアライブラリユーザインタフェース内の第２のポジションに対応するユーザ視線を検出したことに応じて、表示生成構成要素を介して、第２の方式とは異なる第３の方式で第１のメディアアイテムの表現を表示することと、を含む。

【0009】

いくつかの実施形態によれば、非一時的コンピュータ可読記憶媒体が記載される。いくつかの実施形態では、非一時的コンピュータ可読記憶媒体は、表示生成構成要素及び１つ以上の入力デバイスと通信しているコンピュータシステムの１つ以上のプロセッサによって実行されるように構成された１つ以上のプログラムを記憶し、１つ以上のプログラムは、表示生成構成要素を介して、第１のメディアアイテムの表現を含む複数のメディアアイテムの表現を含むメディアライブラリユーザインタフェースを表示し、メディアライブラリユーザインタフェースを表示している間に、第１の時点で、１つ以上の入力デバイスを介して、メディアライブラリユーザインタフェース内の第１のポジションに対応するユーザ視線を検出し、メディアライブラリユーザインタフェース内の第１のポジションに対応するユーザ視線を検出したことに応じて、第１のメディアアイテムの表現の外観を、表示生成構成要素を介して、第１の方式で表示されることから、第１の方式とは異なる第２の方式で表示されることに変更し、第１の時点の後の第２の時点で、１つ以上の入力デバイスを介して、第１のポジションとは異なるメディアライブラリユーザインタフェース内の第２のポジションに対応するユーザ視線を検出し、メディアライブラリユーザインタフェース内の第２のポジションに対応するユーザ視線を検出したことに応じて、表示生成構成要素を介して、第２の方式とは異なる第３の方式で第１のメディアアイテムの表現を表示する、命令を含む。

【0010】

いくつかの実施形態によれば、一時的コンピュータ可読記憶媒体が記載される。いくつかの実施形態では、一時的コンピュータ可読記憶媒体は、表示生成構成要素及び１つ以上の入力デバイスと通信しているコンピュータシステムの１つ以上のプロセッサによって実行されるように構成された１つ以上のプログラムを記憶し、１つ以上のプログラムは、表示生成構成要素を介して、第１のメディアアイテムの表現を含む複数のメディアアイテムの表現を含むメディアライブラリユーザインタフェースを表示し、メディアライブラリユーザインタフェースを表示している間に、第１の時点で、１つ以上の入力デバイスを介して、メディアライブラリユーザインタフェース内の第１のポジションに対応するユーザ視線を検出し、メディアライブラリユーザインタフェース内の第１のポジションに対応するユーザ視線を検出したことに応じて、第１のメディアアイテムの表現の外観を、表示生成構成要素を介して、第１の方式で表示されることから、第１の方式とは異なる第２の方式で表示されることに変更し、第１の時点の後の第２の時点で、１つ以上の入力デバイスを介して、第１のポジションとは異なるメディアライブラリユーザインタフェース内の第２のポジションに対応するユーザ視線を検出し、メディアライブラリユーザインタフェース内の第２のポジションに対応するユーザ視線を検出したことに応じて、表示生成構成要素を介して、第２の方式とは異なる第３の方式で第１のメディアアイテムの表現を表示する、命令を含む。

【0011】

いくつかの実施形態によれば、コンピュータシステムが記載される。いくつかの実施形態では、コンピュータシステムは、表示生成構成要素及び１つ以上の入力デバイスと通信し、１つ以上のプロセッサと、１つ以上のプロセッサによって実行されるように構成された１つ以上のプログラムを記憶するメモリと、を備え、１つ以上のプログラムは、第１のメディアアイテムの表現を含む複数のメディアアイテムの表現を含むメディアライブラリユーザインタフェースを、表示生成構成要素を介して表示し、メディアライブラリユーザインタフェースを表示している間に、第１の時点で、１つ以上の入力デバイスを介して、メディアライブラリユーザインタフェース内の第１のポジションに対応するユーザ視線を検出し、メディアライブラリユーザインタフェース内の第１のポジションに対応するユーザ視線を検出したことに応じて、第１のメディアアイテムの表現の外観を、表示生成構成要素を介して、第１の方式で表示されることから、第１の方式とは異なる第２の方式で表示されることに変更し、第１の時点の後の第２の時点で、１つ以上の入力デバイスを介して、第１のポジションとは異なるメディアライブラリユーザインタフェース内の第２のポジションに対応するユーザ視線を検出し、メディアライブラリユーザインタフェース内の第２のポジションに対応するユーザ視線を検出したことに応じて、表示生成構成要素を介して、第２の方式とは異なる第３の方式で第１のメディアアイテムの表現を表示する、命令を含む。

【0012】

いくつかの実施形態では、コンピュータシステムが説明される。いくつかの実施形態では、コンピュータシステムは、表示生成構成要素及び１つ以上の入力デバイスと通信し、表示生成構成要素を介して、第１のメディアアイテムの表現を含む複数のメディアアイテムの表現を含むメディアライブラリユーザインタフェースを表示するための手段と、メディアライブラリユーザインタフェースを表示している間に、第１の時点で、１つ以上の入力デバイスを介して、メディアライブラリユーザインタフェース内の第１のポジションに対応するユーザ視線を検出し、メディアライブラリユーザインタフェース内の第１のポジションに対応するユーザ視線を検出したことに応じて、第１のメディアアイテムの表現の外観を、表示生成構成要素を介して、第１の方式で表示されることから、第１の方式とは異なる第２の方式で表示されることに変更し、第１の時点の後の第２の時点で、１つ以上の入力デバイスを介して、第１のポジションとは異なるメディアライブラリユーザインタフェース内の第２のポジションに対応するユーザ視線を検出し、メディアライブラリユーザインタフェース内の第２のポジションに対応するユーザ視線を検出したことに応じて、表示生成構成要素を介して、第２の方式とは異なる第３の方式で第１のメディアアイテムの表現を表示するための手段と、を備える。

【0013】

いくつかの実施形態では、コンピュータプログラム製品が説明される。いくつかの実施形態では、コンピュータプログラム製品は、表示生成構成要素及び１つ以上の入力デバイスと通信しているコンピュータシステムの１つ以上のプロセッサによって実行されるように構成された１つ以上のプログラムを記憶し、１つ以上のプログラムは、表示生成構成要素を介して、第１のメディアアイテムの表現を含む複数のメディアアイテムの表現を含むメディアライブラリユーザインタフェースを表示し、メディアライブラリユーザインタフェースを表示している間に、第１の時点で、１つ以上の入力デバイスを介して、メディアライブラリユーザインタフェース内の第１のポジションに対応するユーザ視線を検出し、メディアライブラリユーザインタフェース内の第１のポジションに対応するユーザ視線を検出したことに応じて、第１のメディアアイテムの表現の外観を、表示生成構成要素を介して、第１の方式で表示されることから、第１の方式とは異なる第２の方式で表示されることに変更し、第１の時点の後の第２の時点で、１つ以上の入力デバイスを介して、第１のポジションとは異なるメディアライブラリユーザインタフェース内の第２のポジションに対応するユーザ視線を検出し、メディアライブラリユーザインタフェース内の第２のポジションに対応するユーザ視線を検出したことに応じて、表示生成構成要素を介して、第２の方式とは異なる第３の方式で第１のメディアアイテムの表現を表示する、命令を含む。

【0014】

いくつかの実施形態によれば、方法が記載される。本方法は、表示生成構成要素及び１つ以上の入力デバイスと通信しているコンピュータシステムにおいて、表示生成構成要素を介して、第１のズームレベルでユーザインタフェースを表示することと、ユーザインタフェースを表示している間に、１つ以上の入力デバイスを介して、ズームインユーザコマンドに対応する１つ以上のユーザ入力を検出することと、ズームインユーザコマンドに対応する１つ以上のユーザ入力を検出したことに応じて、ユーザ視線がユーザインタフェース内の第１のポジションに対応するという判定に従って、表示生成構成要素を介して、第１のズームレベルよりも大きい第２のズームレベルでユーザインタフェースを表示することであって、第２のズームレベルでユーザインタフェースを表示することは、第１のポジションに基づいて選択された第１のズーム中心を使用してユーザインタフェースをズームすることを含み、ユーザ視線が第１のポジションとは異なるユーザインタフェース内の第２のポジションに対応するという判定に従って、表示生成構成要素を介して、第１のズームレベルよりも大きい第３のズームレベルでユーザインタフェースを表示することであって、第３のズームレベルでユーザインタフェースを表示することは、第２のポジションに基づいて選択された第２のズーム中心を使用してユーザインタフェースをズームすることを含み、第２のズーム中心は、第１のズーム中心とは異なるロケーションにある、ことと、を含む。

【0015】

いくつかの実施形態によれば、非一時的コンピュータ可読記憶媒体が記載される。いくつかの実施形態では、非一時的コンピュータ可読記憶媒体は、表示生成構成要素及び１つ以上の入力デバイスと通信しているコンピュータシステムの１つ以上のプロセッサによって実行されるように構成された１つ以上のプログラムを記憶し、１つ以上のプログラムは、表示生成構成要素を介して、第１のズームレベルでユーザインタフェースを表示し、ユーザインタフェースを表示している間に、１つ以上の入力デバイスを介して、ズームインユーザコマンドに対応する１つ以上のユーザ入力を検出し、ズームインユーザコマンドに対応する１つ以上のユーザ入力を検出したことに応じて、ユーザ視線がユーザインタフェース内の第１のポジションに対応するという判定に従って、表示生成構成要素を介して、第１のズームレベルよりも大きい第２のズームレベルでユーザインタフェースを表示し、第２のズームレベルでユーザインタフェースを表示することは、第１のポジションに基づいて選択された第１のズーム中心を使用してユーザインタフェースをズームすることを含み、ユーザ視線が第１のポジションとは異なるユーザインタフェース内の第２のポジションに対応するという判定に従って、表示生成構成要素を介して、第１のズームレベルよりも大きい第３のズームレベルでユーザインタフェースを表示し、第３のズームレベルでユーザインタフェースを表示することは、第２のポジションに基づいて選択された第２のズーム中心を使用してユーザインタフェースをズームすることを含み、第２のズーム中心は、第１のズーム中心とは異なるロケーションにある、命令を含む。

【0016】

いくつかの実施形態によれば、一時的コンピュータ可読記憶媒体が記載される。いくつかの実施形態では、一時的コンピュータ可読記憶媒体は、表示生成構成要素及び１つ以上の入力デバイスと通信しているコンピュータシステムの１つ以上のプロセッサによって実行されるように構成された１つ以上のプログラムを記憶し、１つ以上のプログラムは、表示生成構成要素を介して、第１のズームレベルでユーザインタフェースを表示し、ユーザインタフェースを表示している間に、１つ以上の入力デバイスを介して、ズームインユーザコマンドに対応する１つ以上のユーザ入力を検出し、ズームインユーザコマンドに対応する１つ以上のユーザ入力を検出したことに応じて、ユーザ視線がユーザインタフェース内の第１のポジションに対応するという判定に従って、表示生成構成要素を介して、第１のズームレベルよりも大きい第２のズームレベルでユーザインタフェースを表示し、第２のズームレベルでユーザインタフェースを表示することは、第１のポジションに基づいて選択された第１のズーム中心を使用してユーザインタフェースをズームすることを含み、ユーザ視線が第１のポジションとは異なるユーザインタフェース内の第２のポジションに対応するという判定に従って、表示生成構成要素を介して、第１のズームレベルよりも大きい第３のズームレベルでユーザインタフェースを表示し、第３のズームレベルでユーザインタフェースを表示することは、第２のポジションに基づいて選択された第２のズーム中心を使用してユーザインタフェースをズームすることを含み、第２のズーム中心は、第１のズーム中心とは異なるロケーションにある、命令を含む。

【0017】

いくつかの実施形態によれば、コンピュータシステムが記載される。いくつかの実施形態では、コンピュータシステムは、表示生成構成要素及び１つ以上の入力デバイスと通信し、コンピュータシステムは、１つ以上のプロセッサと、１つ以上のプロセッサによって実行されるように構成された１つ以上のプログラムを記憶するメモリと、を備え、１つ以上のプログラムは、表示生成構成要素を介して、第１のズームレベルでユーザインタフェースを表示し、ユーザインタフェースを表示している間に、１つ以上の入力デバイスを介して、ズームインユーザコマンドに対応する１つ以上のユーザ入力を検出し、ズームインユーザコマンドに対応する１つ以上のユーザ入力を検出したことに応じて、ユーザ視線がユーザインタフェース内の第１のポジションに対応するという判定に従って、表示生成構成要素を介して、第１のズームレベルよりも大きい第２のズームレベルでユーザインタフェースを表示し、第２のズームレベルでユーザインタフェースを表示することは、第１のポジションに基づいて選択された第１のズーム中心を使用してユーザインタフェースをズームすることを含み、ユーザ視線が第１のポジションとは異なるユーザインタフェース内の第２のポジションに対応するという判定に従って、表示生成構成要素を介して、第１のズームレベルよりも大きい第３のズームレベルでユーザインタフェースを表示し、第３のズームレベルでユーザインタフェースを表示することは、第２のポジションに基づいて選択された第２のズーム中心を使用してユーザインタフェースをズームすることを含み、第２のズーム中心は、第１のズーム中心とは異なるロケーションにある、命令を含む。

【0018】

いくつかの実施形態では、コンピュータシステムが説明される。いくつかの実施形態では、コンピュータシステムは、表示生成構成要素及び１つ以上の入力デバイスと通信し、コンピュータシステムは、表示生成構成要素を介して、第１のズームレベルでユーザインタフェースを表示するための手段と、ユーザインタフェースを表示している間に、１つ以上の入力デバイスを介して、ズームインユーザコマンドに対応する１つ以上のユーザ入力を検出するための手段と、ズームインユーザコマンドに対応する１つ以上のユーザ入力を検出したことに応じて、ユーザ視線がユーザインタフェース内の第１のポジションに対応するという判定に従って、表示生成構成要素を介して、第１のズームレベルよりも大きい第２のズームレベルでユーザインタフェースを表示し、第２のズームレベルでユーザインタフェースを表示することは、第１のポジションに基づいて選択された第１のズーム中心を使用してユーザインタフェースをズームすることを含み、ユーザ視線が第１のポジションとは異なるユーザインタフェース内の第２のポジションに対応するという判定に従って、表示生成構成要素を介して、第１のズームレベルよりも大きい第３のズームレベルでユーザインタフェースを表示し、第３のズームレベルでユーザインタフェースを表示することは、第２のポジションに基づいて選択された第２のズーム中心を使用してユーザインタフェースをズームすることを含み、第２のズーム中心は、第１のズーム中心とは異なるロケーションにある、手段と、を備える。

【0019】

いくつかの実施形態では、コンピュータプログラム製品が説明される。いくつかの実施形態では、コンピュータプログラム製品は、表示生成構成要素及び１つ以上の入力デバイスと通信しているコンピュータシステムの１つ以上のプロセッサによって実行されるように構成された１つ以上のプログラムを含み、１つ以上のプログラムは、表示生成構成要素を介して、第１のズームレベルでユーザインタフェースを表示し、ユーザインタフェースを表示している間に、１つ以上の入力デバイスを介して、ズームインユーザコマンドに対応する１つ以上のユーザ入力を検出し、ズームインユーザコマンドに対応する１つ以上のユーザ入力を検出したことに応じて、ユーザ視線がユーザインタフェース内の第１のポジションに対応するという判定に従って、表示生成構成要素を介して、第１のズームレベルよりも大きい第２のズームレベルでユーザインタフェースを表示し、第２のズームレベルでユーザインタフェースを表示することは、第１のポジションに基づいて選択された第１のズーム中心を使用してユーザインタフェースをズームすることを含み、ユーザ視線が第１のポジションとは異なるユーザインタフェース内の第２のポジションに対応するという判定に従って、表示生成構成要素を介して、第１のズームレベルよりも大きい第３のズームレベルでユーザインタフェースを表示し、第３のズームレベルでユーザインタフェースを表示することは、第２のポジションに基づいて選択された第２のズーム中心を使用してユーザインタフェースをズームすることを含み、第２のズーム中心は、第１のズーム中心とは異なるロケーションにある、命令を含む。

【0020】

いくつかの実施形態によれば、方法が記載される。本方法は、表示生成構成要素及び１つ以上の入力デバイスと通信しているコンピュータシステムにおいて、１つ以上の入力デバイスを介して、第１のメディアアイテムの選択に対応する１つ以上のユーザ入力を検出することと、第１のメディアアイテムの選択に対応する１つ以上のユーザ入力を検出したことに応じて、第１のメディアアイテムが個別のタイプの深度情報を含むメディアアイテムであるという判定に従って、表示生成構成要素を介して、第１のメディアアイテムを第１の方式で表示し、第１のメディアアイテムが個別のタイプの深度情報を含まないメディアアイテムであるという判定に従って、表示生成構成要素を介して、第１の方式とは異なる第２の方式で第１のメディアアイテムを表示することと、を含む。

【0021】

いくつかの実施形態によれば、非一時的コンピュータ可読記憶媒体が記載される。いくつかの実施形態では、非一時的コンピュータ可読記憶媒体は、表示生成構成要素及び１つ以上の入力デバイスと通信しているコンピュータシステムの１つ以上のプロセッサによって実行されるように構成された１つ以上のプログラムを記憶し、１つ以上のプログラムは、１つ以上の入力デバイスを介して、第１のメディアアイテムの選択に対応する１つ以上のユーザ入力を検出し、第１のメディアアイテムの選択に対応する１つ以上のユーザ入力を検出したことに応じて、第１のメディアアイテムが個別のタイプの深度情報を含むメディアアイテムであるという判定に従って、表示生成構成要素を介して、第１のメディアアイテムを第１の方式で表示し、第１のメディアアイテムが個別のタイプの深度情報を含まないメディアアイテムであるという判定に従って、表示生成構成要素を介して、第１の方式とは異なる第２の方式で第１のメディアアイテムを表示する、命令を含む。

【0022】

いくつかの実施形態によれば、一時的コンピュータ可読記憶媒体が記載される。いくつかの実施形態では、一時的コンピュータ可読記憶媒体は、表示生成構成要素及び１つ以上の入力デバイスと通信しているコンピュータシステムの１つ以上のプロセッサによって実行されるように構成された１つ以上のプログラムを記憶し、１つ以上のプログラムは、１つ以上の入力デバイスを介して、第１のメディアアイテムの選択に対応する１つ以上のユーザ入力を検出し、第１のメディアアイテムの選択に対応する１つ以上のユーザ入力を検出したことに応じて、第１のメディアアイテムが個別のタイプの深度情報を含むメディアアイテムであるという判定に従って、表示生成構成要素を介して、第１のメディアアイテムを第１の方式で表示し、第１のメディアアイテムが個別のタイプの深度情報を含まないメディアアイテムであるという判定に従って、表示生成構成要素を介して、第１の方式とは異なる第２の方式で第１のメディアアイテムを表示する、命令を含む。

【0023】

いくつかの実施形態によれば、コンピュータシステムが記載される。いくつかの実施形態では、コンピュータシステムは、表示生成構成要素及び１つ以上の入力デバイスと通信し、コンピュータシステムは、１つ以上のプロセッサと、１つ以上のプロセッサによって実行されるように構成された１つ以上のプログラムを記憶するメモリと、を備え、１つ以上のプログラムは、１つ以上の入力デバイスを介して、第１のメディアアイテムの選択に対応する１つ以上のユーザ入力を検出し、第１のメディアアイテムの選択に対応する１つ以上のユーザ入力を検出したことに応じて、第１のメディアアイテムが個別のタイプの深度情報を含むメディアアイテムであるという判定に従って、表示生成構成要素を介して、第１のメディアアイテムを第１の方式で表示し、第１のメディアアイテムが個別のタイプの深度情報を含まないメディアアイテムであるという判定に従って、表示生成構成要素を介して、第１の方式とは異なる第２の方式で第１のメディアアイテムを表示する、命令を含む。

【0024】

いくつかの実施形態では、コンピュータシステムが説明される。いくつかの実施形態では、コンピュータシステムは、表示生成構成要素及び１つ以上の入力デバイスと通信し、コンピュータシステムは、１つ以上の入力デバイスを介して、第１のメディアアイテムの選択に対応する１つ以上のユーザ入力を検出するための手段と、第１のメディアアイテムの選択に対応する１つ以上のユーザ入力を検出したことに応じて、第１のメディアアイテムが個別のタイプの深度情報を含むメディアアイテムであるという判定に従って、表示生成構成要素を介して、第１のメディアアイテムを第１の方式で表示し、第１のメディアアイテムが個別のタイプの深度情報を含まないメディアアイテムであるという判定に従って、表示生成構成要素を介して、第１の方式とは異なる第２の方式で第１のメディアアイテムを表示するための手段と、を備える。

【0025】

いくつかの実施形態では、コンピュータプログラム製品が説明される。いくつかの実施形態では、コンピュータプログラム製品は、表示生成構成要素及び１つ以上の入力デバイスと通信しているコンピュータシステムの１つ以上のプロセッサによって実行されるように構成された１つ以上のプログラムを記憶し、１つ以上のプログラムは、１つ以上の入力デバイスを介して、第１のメディアアイテムの選択に対応する１つ以上のユーザ入力を検出し、第１のメディアアイテムの選択に対応する１つ以上のユーザ入力を検出したことに応じて、第１のメディアアイテムが個別のタイプの深度情報を含むメディアアイテムであるという判定に従って、表示生成構成要素を介して、第１のメディアアイテムを第１の方式で表示し、第１のメディアアイテムが個別のタイプの深度情報を含まないメディアアイテムであるという判定に従って、表示生成構成要素を介して、第１の方式とは異なる第２の方式で第１のメディアアイテムを表示する、命令を含む。

【0026】

いくつかの実施形態では、表示生成構成要素と通信するコンピュータシステムにおいて実行される方法が説明される。本方法は、表示生成構成要素を介して、ユーザインタフェースであって、立体視メディアアイテムの第１の表現であって、立体視メディアアイテムの第１の表現は、少なくとも第１の縁部を含む、立体視メディアアイテムの第１の表現と、視覚効果であって、視覚効果は、立体視メディアアイテムの少なくとも第１の部分を不明瞭にし、立体視メディアアイテムの第１の表現の少なくとも第１の縁部から立体視メディアアイテムの第１の表現の内部に向かって内側に延びる、視覚効果と、を含む、ユーザインタフェースを表示することを含む。

【0027】

いくつかの実施形態では、非一時的コンピュータ可読記憶媒体が説明される。非一時的コンピュータ可読記憶媒体は、コンピュータシステムの１つ以上のプロセッサによって実行されるように構成された１つ以上のプログラムを記憶し、コンピュータシステムは、表示生成構成要素と通信し、１つ以上のプログラムは、表示生成構成要素を介して、ユーザインタフェースであって、立体視メディアアイテムの第１の表現であって、立体視メディアアイテムの第１の表現は、少なくとも第１の縁部を含む、立体視メディアアイテムの第１の表現と、視覚効果であって、視覚効果は、立体視メディアアイテムの少なくとも第１の部分を不明瞭にし、立体視メディアアイテムの第１の表現の少なくとも第１の縁部から立体視メディアアイテムの第１の表現の内部に向かって内側に延びる、視覚効果と、を含む、ユーザインタフェースを表示する、命令を含む。

【0028】

いくつかの実施形態では、一時的コンピュータ可読記憶媒体が説明される。一時的コンピュータ可読記憶媒体は、コンピュータシステムの１つ以上のプロセッサによって実行されるように構成された１つ以上のプログラムを記憶し、コンピュータシステムは、表示生成構成要素と通信し、１つ以上のプログラムは、表示生成構成要素を介して、ユーザインタフェースであって、立体視メディアアイテムの第１の表現であって、立体視メディアアイテムの第１の表現は、少なくとも第１の縁部を含む、立体視メディアアイテムの第１の表現と、視覚効果であって、視覚効果は、立体視メディアアイテムの少なくとも第１の部分を不明瞭にし、立体視メディアアイテムの第１の表現の少なくとも第１の縁部から立体視メディアアイテムの第１の表現の内部に向かって内側に延びる、視覚効果と、を含む、ユーザインタフェースを表示する、命令を含む。

【0029】

いくつかの実施形態では、コンピュータシステムが説明される。コンピュータシステムは、１つ以上のプロセッサであって、コンピュータシステムが表示生成構成要素と通信する、１つ以上のプロセッサと、と、１つ以上のプロセッサによって実行されるように構成された１つ以上のプログラムを記憶するメモリと、を備え、１つ以上のプログラムは、表示生成構成要素を介して、ユーザインタフェースであって、立体視メディアアイテムの第１の表現であって、立体視メディアアイテムの第１の表現は、少なくとも第１の縁部を含む、立体視メディアアイテムの第１の表現と、視覚効果であって、視覚効果は、立体視メディアアイテムの少なくとも第１の部分を不明瞭にし、立体視メディアアイテムの第１の表現の少なくとも第１の縁部から立体視メディアアイテムの第１の表現の内部に向かって内側に延びる、視覚効果と、を含む、ユーザインタフェースを表示する、命令を含む。

【0030】

いくつかの実施形態では、コンピュータシステムが説明される。コンピュータシステムは、表示生成構成要素と通信し、コンピュータシステムは、表示生成構成要素を介して、ユーザインタフェースであって、立体視メディアアイテムの第１の表現であって、立体視メディアアイテムの第１の表現は、少なくとも第１の縁部を含む、立体視メディアアイテムの第１の表現と、視覚効果であって、視覚効果は、立体視メディアアイテムの少なくとも第１の部分を不明瞭にし、立体視メディアアイテムの第１の表現の少なくとも第１の縁部から立体視メディアアイテムの第１の表現の内部に向かって内側に延びる、視覚効果と、を含む、ユーザインタフェースを表示するための手段を備える。

【0031】

いくつかの実施形態では、コンピュータプログラム製品が説明される。コンピュータプログラム製品は、表示生成構成要素と通信するコンピュータシステムの１つ以上のプロセッサによって実行されるように構成された１つ以上のプログラムを備え、１つ以上のプログラムは、表示生成構成要素を介して、ユーザインタフェースであって、立体視メディアアイテムの第１の表現であって、立体視メディアアイテムの第１の表現は、少なくとも第１の縁部を含む、立体視メディアアイテムの第１の表現と、視覚効果であって、視覚効果は、立体視メディアアイテムの少なくとも第１の部分を不明瞭にし、立体視メディアアイテムの第１の表現の少なくとも第１の縁部から立体視メディアアイテムの第１の表現の内部に向かって内側に延びる、視覚効果と、を含む、ユーザインタフェースを表示する、命令を含む。

【0032】

前述の様々な実施形態は、本明細書に記載の任意の他の実施形態と組み合わせることができることに留意されたい。本明細書で説明する特徴及び利点は、包括的なものではなく、特に、図面、明細書及び特許請求の範囲を鑑みると、多くの追加の特徴及び利点が当業者には明らかになるであろう。更に、本明細書において使用される文言は、専ら読みやすさ及び説明の目的で選択されたものであり、本発明の主題を画定又は制限するために選択されたものではないことに留意されたい。

【図面の簡単な説明】

【0033】

説明される様々な実施形態をより良く理解するため、以下の図面と併せて、以下の「発明を実施するための形態」が参照されるべきであり、類似の参照番号は、以下の図の全てを通じて、対応する部分を指す。

【0034】

【図1】いくつかの実施形態による、拡張現実体験を提供するためのコンピュータシステムの動作環境を示すブロック図である。

【0035】

【図2】いくつかの実施形態による、ユーザの拡張現実体験を管理及び調整するように構成されたコンピュータシステムのコントローラを示すブロック図である。

【0036】

【図3】いくつかの実施形態による、拡張現実体験の視覚的構成要素をユーザに提供するように構成されたコンピュータシステムの表示生成構成要素を示すブロック図である。

【0037】

【図4】いくつかの実施形態による、ユーザのジェスチャ入力をキャプチャするように構成されたコンピュータシステムのハンドトラッキングユニットを示すブロック図である。

【0038】

【図5】いくつかの実施形態による、ユーザの視線入力をキャプチャするように構成されたコンピュータシステムのアイトラッキングユニットを示すブロック図である。

【0039】

【図6】いくつかの実施形態による、グリント支援視線追跡パイプラインを示すフロー図である。

【0040】

【図7A】いくつかの実施形態による、メディアアイテム及びユーザインタフェースと相互作用するための例示的な技術を示す。

【図7B】いくつかの実施形態による、メディアアイテム及びユーザインタフェースと相互作用するための例示的な技術を示す。

【図7C】いくつかの実施形態による、メディアアイテム及びユーザインタフェースと相互作用するための例示的な技術を示す。

【図7D】いくつかの実施形態による、メディアアイテム及びユーザインタフェースと相互作用するための例示的な技術を示す。

【図7E】いくつかの実施形態による、メディアアイテム及びユーザインタフェースと相互作用するための例示的な技術を示す。

【図7F】いくつかの実施形態による、メディアアイテム及びユーザインタフェースと相互作用するための例示的な技術を示す。

【図7G】いくつかの実施形態による、メディアアイテム及びユーザインタフェースと相互作用するための例示的な技術を示す。

【図7H】いくつかの実施形態による、メディアアイテム及びユーザインタフェースと相互作用するための例示的な技術を示す。

【図7I】いくつかの実施形態による、メディアアイテム及びユーザインタフェースと相互作用するための例示的な技術を示す。

【図7J】いくつかの実施形態による、メディアアイテム及びユーザインタフェースと相互作用するための例示的な技術を示す。

【図7K】いくつかの実施形態による、メディアアイテム及びユーザインタフェースと相互作用するための例示的な技術を示す。

【図7L】いくつかの実施形態による、メディアアイテム及びユーザインタフェースと相互作用するための例示的な技術を示す。

【図7M】いくつかの実施形態による、メディアアイテム及びユーザインタフェースと相互作用するための例示的な技術を示す。

【図7N】いくつかの実施形態による、メディアアイテム及びユーザインタフェースと相互作用するための例示的な技術を示す。

【0041】

【図8】様々な実施形態による、メディアアイテム及びユーザインタフェースと相互作用する方法のフロー図である。

【0042】

【図9】様々な実施形態による、メディアアイテム及びユーザインタフェースと相互作用する方法のフロー図である。

【0043】

【図10】様々な実施形態による、メディアアイテム及びユーザインタフェースと相互作用する方法のフロー図である。

【0044】

【図11A】いくつかの実施形態による、メディアアイテムを表示するための例示的な技術を示す。

【図11B】いくつかの実施形態による、メディアアイテムを表示するための例示的な技術を示す。

【図11C】いくつかの実施形態による、メディアアイテムを表示するための例示的な技術を示す。

【図11D】いくつかの実施形態による、メディアアイテムを表示するための例示的な技術を示す。

【図11E】いくつかの実施形態による、メディアアイテムを表示するための例示的な技術を示す。

【図11F】いくつかの実施形態による、メディアアイテムを表示するための例示的な技術を示す。

【0045】

【図12】いくつかの実施形態による、メディアアイテムを表示するための方法のフロー図である。

【発明を実施するための形態】

【0046】

本開示は、いくつかの実施形態による、拡張現実（ＸＲ）体験をユーザに提供するユーザインタフェースに関する。

【0047】

本明細書に記載するシステム、方法、及びＧＵＩは、複数の方法で仮想／拡張現実環境とのユーザインタフェース相互作用を改善する。

【0048】

いくつかの実施形態では、表示されたコンテンツの１つ以上の視覚特性は、ユーザの視線が向けられている場所に基づいて修正される。例えば、ユーザがメディアライブラリ内の第１のメディアアイテムを注視した場合、第１のメディアアイテムの視覚特性が修正され、ユーザがメディアライブラリ内の第２のメディアアイテムを注視した場合、第２のメディアアイテムの視覚特性が修正される。ユーザの視線のロケーション及び／又はポジションは、例えば、タッチ感知面又は他の物理的コントローラとは対照的に、センサ及び／又はカメラ（例えば、ヘッドマウントデバイスと統合されるか、又はユーザから離れて設置される（例えば、ＸＲ室内）センサ及び／又はカメラ）を使用して検出される。ユーザの視線に基づいて表示されたコンテンツの視覚特性を修正することは、コンピュータシステムの状態（例えば、コンピュータシステムがユーザインタフェース内の特定のポジションでユーザ視線を検出したこと）に関する視覚的フィードバックをユーザに提供する。ユーザの視線に基づいて表示されたコンテンツの視覚特性を修正することはまた、ユーザが、複数のコントロールを有するディスプレイを視覚的に散らかすことなく、２つ以上のコンテキストにおいて表示されたコンテンツと効率的に相互作用することを可能にし、ユーザインタフェースの対話効率を改善する（例えば、所望の結果を達成するために必要とされる入力の数を低減する）。

【0049】

いくつかの実施形態では、コンピュータシステムは、ユーザの視線が向けられている場所に基づいて、ユーザがユーザインタフェースにズームインすることを可能にする。例えば、ユーザがズームインコマンド（例えば、１つ以上のハンドジェスチャ）を与えながらユーザインタフェースの第１のポジションを注視する場合には、コンピュータシステムは、第１のポジションをズーム動作の中心点として使用してユーザインタフェースをズームインし、そしてユーザがズームインコマンドを与えながらユーザインタフェースの第２のポジションを注視する場合には、コンピュータシステムは、第２のポジションをズーム動作の中心点として使用してユーザインタフェースをズームインする。ユーザの視線に基づいてユーザインタフェースをズームインすることは、コンピュータシステムの状態（例えば、コンピュータシステムがユーザインタフェース内の特定のポジションでユーザの視線を検出したこと）に関する視覚的フィードバックをユーザに提供し、適切な及び／又は正しい入力を提供する際にユーザを支援する。ユーザの視線に基づいてユーザインタフェースをズームインすることはまた、ユーザが、複数のコントロールを有するディスプレイを視覚的に散らかすことなく、２つ以上のコンテキストにおいて表示されたコンテンツと効率的に相互作用することを可能にし、ユーザインタフェースの対話効率を改善する（例えば、所望の結果を達成するために必要とされる入力の数を低減する）。

【0050】

いくつかの実施形態では、メディアアイテムは、メディアアイテムが特定のタイプの深度情報を含むかどうかに基づいて（例えば、メディアアイテムが立体視キャプチャであるかどうかに基づいて）、異なって（例えば、異なる視覚効果で）表示される。例えば、メディアアイテムが立体視キャプチャである場合、メディアアイテムは、視覚特性の第１のセットとともに表示される（例えば、三次元形状内に表示される、複数の層とともに表示される、屈折及び／又はぼやけた縁部とともに表示される）。メディアアイテムが立体視キャプチャでない場合、メディアアイテムは、視覚特性の第２のセットを用いて表示される（例えば、二次元形状内で表示される、単一の層として表示される、屈折及び／又はぼやけた縁部なしで表示される）。メディアアイテムが特定のタイプの深度情報を含むかどうかに基づいてメディアアイテムを異なるように表示することは、コンピュータシステムの状態に関する視覚的フィードバックをユーザに提供する（例えば、現在表示されているメディアアイテムが特定のタイプの深度情報を含むかどうかをユーザに示す）。

【0051】

いくつかの実施形態では、視覚効果は、以前にキャプチャされたメディアアイテム（例えば、以前にキャプチャされた立体視メディアアイテム）の表現の上にオーバーレイされて表示される。例えば、視覚効果は、以前にキャプチャされたメディアアイテムの表現の１つ以上の縁部に表示することができ、以前にキャプチャされたメディアアイテムの表現の中心に向かって内側に延びることができる。視覚効果は、視覚効果がメディアアイテムの表現の中心に向かって延びるにつれて値及び／又は強度が減少する視覚特性（例えば、ぼかしの量）を有する。メディアアイテムの表現の１つ以上の縁部に視覚効果を表示することは、ユーザが以前にキャプチャされたメディアアイテムの表現を視聴している間にユーザが体験し得る視覚的不快感（例えば、ウィンドウバイオレーション）の量を低減するのを助ける。

【0052】

図１～図６は、ＸＲ体験をユーザに提供するための例示的なコンピュータシステムを説明する。図７Ａ～図７Ｎは、いくつかの実施形態による、メディアアイテム及びユーザインタフェースと相互作用するための例示的な技術を示す。図８は、様々な実施形態による、メディアアイテム及びユーザインタフェースと相互作用する方法のフロー図である。図９は、様々な実施形態による、メディアアイテム及びユーザインタフェースと相互作用する方法のフロー図である。図１０は、様々な実施形態による、メディアアイテム及びユーザインタフェースと相互作用する方法のフロー図である。図７Ａ～図７Ｎのユーザインタフェースは、図８～図１０のプロセスを示すために使用される。図１１Ａ～図１１Ｆは、いくつかの実施形態による、メディアアイテムを表示するための例示的な技術を示す。図１２は、様々な実施形態による、メディアアイテムを表示するための方法のフロー図である。図１１Ａ～図１１Ｆのユーザインタフェースは、図１２のプロセスを示すために使用される。

【0053】

後述のプロセスは、改善された視覚的なフィードバックをユーザに提供すること、操作を実行するために必要な入力の数を減らすこと、表示される追加のコントロールでユーザインタフェースを混乱させることなく追加の制御オプションを提供すること、条件のセットが満たされたときに更なるユーザ入力を必要とせずに操作を実行すること、プライバシー及び／若しくはセキュリティを改善すること、記憶空間を節約しながらより多様な、詳細な、及び／若しくは現実的なユーザ体験を提供すること、ユーザが体験するウィンドウバイオレーションの量を低減すること、並びに／又は追加の技術を含む、様々な技術を通して、（例えば、ユーザが適切な入力を提供するのを助け、デバイスを動作させる／デバイスと相互作用するときのユーザの誤りを低減することによって）デバイスの操作性を高め、ユーザデバイスインタフェースをより効率的にする。これらの技術はまた、ユーザがデバイスをより迅速かつ効率的に使用することを可能にすることによって、電力使用量を低減し、デバイスのバッテリ寿命を改善する。バッテリ電力、従って重量を節約することは、デバイスの人間工学を改善する。これらの技術はまた、リアルタイム通信を可能にし、より少ない及び／又はより精度の低いセンサの使用を可能にし、よりコンパクトで、より軽く、より安価なデバイスをもたらし、デバイスが様々な照明条件で使用されることを可能にする。これらの技術は、エネルギー使用を低減し、それによってデバイスによって放出される熱を低減し、これは、デバイス構成要素のための動作パラメータ内に十分にあるデバイスが、過度に多くの熱を生成している場合、ユーザが装着するには不快になり得るウェアラブルデバイスにとって特に重要である。

【0054】

更に、１つ以上のステップが満たされている１つ以上の条件を条件とする本明細書に記載の方法では、記載の方法は、繰り返しの過程にわたって、本方法のステップが条件とする条件の全てが本方法の異なる繰り返しで満たされるように、複数の繰り返しで繰り返されることができることを理解されたい。例えば、ある方法が、条件が満たされた場合に第１のステップを実行し、条件が満たされなかった場合に第２のステップを実行することを必要とする場合、当業者であれば、条件が満たされ、満たされなくなるまで、請求項に記載のステップが、特定の順序で繰り返されることを理解するであろう。したがって、満たされた１つ以上の条件に依存する１つ以上のステップで説明される方法は、方法に記載された各条件が満たされるまで繰り返される方法として書き換えられることができる。しかしながら、これは、システム又はコンピュータ可読媒体が、対応する１つ以上の条件の充足に基づいて条件付き動作を実行するための命令を含み、したがって、方法のステップが条件付きである全ての条件が満たされるまで、方法のステップを明示的に繰り返すことなく偶発性が満たされたか否かを判定することができる、システム又はコンピュータ可読媒体の請求項には必要とされない。当業者はまた、条件付きステップを有する方法と同様に、システム又はコンピュータ可読記憶媒体が、条件付きステップの全てが実行されたことを確実にするために必要な回数だけ方法のステップを繰り返すことができることを理解するであろう。

【0055】

いくつかの実施形態では、図１に示されるように、ＸＲ体験は、コンピュータシステム１０１を含む動作環境１００を介してユーザに提供される。コンピュータシステム１０１は、コントローラ１１０（例えば、ポータブル電子デバイス又はリモートサーバのプロセッサ）と、表示生成構成要素１２０（例えば、ヘッドマウントデバイス（ＨＭＤ）、ディスプレイ、プロジェクタ、タッチスクリーンなど）と、１つ以上の入力デバイス１２５（例えば、アイトラッキングデバイス１３０、ハンドトラッキングデバイス１４０、他の入力デバイス１５０）と、１つ以上の出力デバイス１５５（例えば、スピーカ１６０、触知出力ジェネレータ１７０、及び他の出力デバイス１８０）と、１つ以上のセンサ１９０（例えば、画像センサ、光センサ、深度センサ、触覚センサ、配向センサ、近接センサ、温度センサ、ロケーションセンサ、運動センサ、速度センサなど）と、任意選択的に１つ以上の周辺デバイス１９５（例えば、家電製品、ウェアラブルデバイスなど）と、を含む。いくつかの実施形態では、入力デバイス１２５、出力デバイス１５５、センサ１９０、及び周辺デバイス１９５のうちの１つ以上は、（例えば、ヘッドマウントデバイス又はハンドヘルドデバイス内で）表示生成構成要素１２０と統合される。

【0056】

ＸＲ体験を説明するとき、ユーザが感知する、及び／又は（例えば、ＸＲ体験を生成するコンピュータシステムに、ＸＲ体験を生成するコンピュータシステム１０１に提供される様々な入力に対応するオーディオ、視覚、及び／又は触覚フィードバックを生成させる、コンピュータシステム１０１によって検出された入力を用いて）ユーザが相互作用することができる、いくつかの関連するが、別個の環境に個別的に言及するために様々な用語が使用される。以下は、これらの用語のサブセットである。

【0057】

物理的環境：物理的環境とは、人々が電子システムの助けなしに、感知及び／又は相互作用することができる物理的世界を指す。物理的な公園などの物理的環境には、物理的な木々、物理的な建物、及び物理的な人々などの物理的物品が挙げられる。人々は、視覚、触覚、聴覚、味覚、及び嗅覚などを介して、物理的環境を直接感知し、及び／又はそれと相互作用することができる。

【0058】

拡張現実：これと対照的に、拡張現実（extended reality、ＸＲ）環境は、人々が電子システムを介して感知及び／又は対話する、全体的又は部分的に模倣された環境を指す。ＸＲでは、人物の身体運動のサブセット又はその表現が追跡され、それに応じて、ＸＲ環境内でシミュレートされた１つ以上の仮想オブジェクトの１つ以上の特性が、少なくとも１つの物理学の法則でふるまうように調節される。例えば、ＸＲシステムは、人物の頭部の回転を検出し、それに応じて、そのようなビュー及び音が物理的環境においてどのように変化するかと同様の方法で、人物に提示されるグラフィックコンテンツ及び音場を調節することができる。状況によっては（例えば、アクセス性の理由から）、ＸＲ環境における仮想オブジェクト（単数又は複数）の特性（単数又は複数）に対する調節は、身体運動の表現（例えば、音声コマンド）に応じて行われてもよい。人物は、視覚、聴覚、触覚、味覚及び嗅覚を含むこれらの感覚のうちのいずれか１つを使用して、ＸＲオブジェクトを感知し、かつ／又はＸＲオブジェクトと相互作用してもよい。例えば、人は、３Ｄ空間内のポイントオーディオソースの知覚を提供する、３Ｄ又は空間オーディオ環境を作り出すオーディオオブジェクトを感知し、及び／又はそれと対話することができる。別の例では、オーディオオブジェクトによって、コンピュータ生成オーディオを含めて、又は含めずに、物理的環境から周囲音を選択的に組み込むオーディオ透過性が可能になり得る。いくつかのＸＲ環境では、人物は、オーディオオブジェクトのみを感知し、かつ／又はそれと相互作用してもよい。

【0059】

ＸＲの例としては、仮想現実及び複合現実が挙げられる。

【0060】

仮想現実：仮想現実（ＶＲ）環境とは、１つ以上の感覚について、コンピュータ生成感覚入力に全面的に基づくように設計された模倣環境を指す。ＶＲ環境は、人物が感知かつ／又は相互作用することができる複数の仮想オブジェクトを含む。例えば、木、建物、及び人々を表すアバターのコンピュータ生成画像は、仮想オブジェクトの例である。人物は、コンピュータ生成環境内に人物が存在することのシミュレーションを通じて、かつ／又はコンピュータ生成環境内での人物の物理的移動のサブセットのシミュレーションを通じて、ＶＲ環境における仮想オブジェクトを感知し、かつ／又はそれと相互作用することができる。

【0061】

複合現実：複合現実（ＭＲ）環境とは、コンピュータ生成感覚入力に全面的に基づくように設計されたＶＲ環境とは対照的に、コンピュータ生成感覚入力（例えば、仮想オブジェクト）を含むことに加えて、物理的環境からの感覚入力又はその表現を組み込むように設計された模倣環境を指す。仮想の連続体上では、複合現実環境は、一方の端部における完全な物理的環境と、他方の端部における仮想現実環境との間であるがこれらを含まない、任意の場所である。いくつかのＭＲ環境では、コンピュータ生成感覚入力は、物理的環境からの感覚入力の変化に応じ得る。また、ＭＲ環境を提示するためのいくつかの電子システムは、仮想オブジェクトが現実のオブジェクト（すなわち、物理的環境からの物理的物品又はその表現）と相互作用することを可能にするために、物理的環境に対するロケーション及び／又は配向を追跡してもよい。例えば、システムは、仮想の木が物理的な地面に対して静止して見えるように、移動を考慮に入れてもよい。

【0062】

複合現実の例としては、拡張現実及び拡張仮想が挙げられる。

【0063】

拡張現実：拡張現実（ＡＲ）環境とは、１つ以上の仮想オブジェクトが物理的環境上又はその表現上に重ね合わされた模倣環境を指す。例えば、ＡＲ環境を提示するための電子システムは、人物が物理的環境を直接見ることができる透明又は半透明のディスプレイを有してもよい。システムは、透明又は半透明のディスプレイに仮想オブジェクトを提示するように構成されていてもよく、それによって、人物はシステムを使用して、物理的環境の上に重ね合わされた仮想オブジェクトを知覚する。あるいは、システムは、不透明ディスプレイと、物理的環境の表現である、物理的環境の画像又はビデオをキャプチャする１つ以上の撮像センサとを有してもよい。システムは、画像又はビデオを仮想オブジェクトと合成し、その合成物を不透明ディスプレイ上に提示する。人物はこのシステムを使用して、物理的環境を、物理的環境の画像又はビデオによって間接的に見て、物理的環境に重ね合わされた仮想オブジェクトを知覚する。本明細書で使用するとき、不透明ディスプレイ上に示される物理的環境のビデオは、「パススルービデオ」と呼ばれ、システムが、１つ以上の画像センサ（単数又は複数）を使用して、物理的環境の画像をキャプチャし、不透明ディスプレイ上にＡＲ環境を提示する際にそれらの画像を使用することを意味する。更に代替的に、システムが仮想オブジェクトを、例えば、ホログラムとして物理的環境の中に、又は物理的表面に投影するプロジェクションシステムを有してもよく、それによって、人物はシステムを使用して、物理的環境に重ね合わされた仮想オブジェクトを知覚する。拡張現実環境はまた、物理的環境の表現がコンピュータ生成感覚情報によって変換される模倣環境を指す。例えば、パススルービデオを提供する際に、システムは、１つ以上のセンサ画像を、撮像センサがキャプチャした透視図とは別の選択された透視図（例えば、視点）を面付けするように変形してもよい。別の例として、物理的環境の表現を、その一部をグラフィカルに修正（例えば、拡大）することによって変形してもよく、それにより、修正された部分を、元のキャプチャ画像を表すが非写実的な、改変版にすることもできる。更なる例として、物理的環境の表現は、その一部をグラフィカルに除去又は不明瞭化することによって変形されてもよい。

【0064】

拡張仮想：拡張仮想（augmented virtuality、ＡＶ）環境とは、仮想環境又はコンピュータ生成環境が物理的環境から１つ以上の感覚入力を組み込んだ模倣環境を指す。感覚入力は、物理的環境の１つ以上の特性の表現であり得る。例えば、ＡＶの公園には仮想の木及び仮想の建物があり得るが、顔がある人々は、物理的な人々が撮られた画像から写実的に再現される。別の例として、仮想オブジェクトは、１つ以上の撮像センサによって撮像された物理的物品の形状又は色を採用してもよい。更なる例として、仮想オブジェクトは、物理的環境における太陽のポジションと一致する影を採用することができる。

【0065】

視点ロック仮想オブジェクト：ユーザの視点がシフト（例えば、変化）しても、コンピュータシステムが仮想オブジェクトをユーザの視点内の同じロケーション及び／又はポジションに表示するとき、仮想オブジェクトは視点ロックされる。コンピュータシステムがヘッドマウントデバイスである実施形態では、ユーザの視点は、ユーザの頭部の前向き方向にロックされる（例えば、ユーザの視点は、ユーザが真っ直ぐ前を見ているときのユーザの視野の少なくとも一部分である）。したがって、ユーザの視点は、ユーザの頭部を動かさずに、ユーザの視線が動いても固定されたままである。コンピュータシステムが、ユーザの頭部に対して再配置され得る表示生成構成要素（例えば、表示画面）を有する実施形態では、ユーザの視点は、コンピュータシステムの表示生成構成要素上でユーザに提示されている拡張現実ビューである。例えば、ユーザの視点が第１の配向にある（例えば、ユーザの頭部が北を向いている）ときにユーザの視点の左上隅に表示される視点ロック仮想オブジェクトは、ユーザの視点が第２の配向に変化しても（例えば、ユーザの頭部が西を向いている）、ユーザの視点の左上隅に表示され続ける。言い換えれば、視点ロック仮想オブジェクトがユーザの視点において表示されるロケーション及び／又はポジションは、物理的環境におけるユーザのポジション及び／又は配向とは無関係である。コンピュータシステムがヘッドマウントデバイスである実施形態では、ユーザの視点は、仮想オブジェクトが「頭部ロック仮想オブジェクト」とも称されるように、ユーザの頭部の配向にロックされる。

【0066】

環境ロック仮想オブジェクト：仮想オブジェクトは、コンピュータシステムが、三次元環境（例えば、物理的環境又は仮想環境）内のロケーション及び／又はオブジェクトに基づく（例えば、それを参照して選択される、及び／又はそれに固定される）ユーザの視点内のロケーション及び／又はポジションに仮想オブジェクトを表示するとき、環境ロック（又は、「世界ロック」）される。ユーザの視点がシフトすると、ユーザの視点に対する環境内のロケーション及び／又はオブジェクトが変化し、その結果、環境ロック仮想オブジェクトがユーザの視点内の異なるロケーション及び／又はポジションに表示される。例えば、ユーザの直前にある木にロックされた環境ロック仮想オブジェクトは、ユーザの視点の中心に表示される。ユーザの視点が右にシフトして（例えば、ユーザの頭部が右に向けられて）木がユーザの視点において左寄りになる（例えば、ユーザの視点における木のポジションがシフトする）場合、木にロックされた環境ロック仮想オブジェクトは、ユーザの視点において左寄りに表示される。言い換えれば、環境ロック仮想オブジェクトがユーザの視点において表示されるロケーション及び／又はポジションは、仮想オブジェクトがロックされる環境におけるロケーション及び／又はオブジェクトのポジション及び／又は配向に依存する。いくつかの実施形態では、コンピュータシステムは、ユーザの視点において環境ロック仮想オブジェクトを表示するポジションを決定するために、静止基準フレーム（例えば、物理的環境における固定ロケーション及び／又はオブジェクトに固定される座標系）を使用する。環境ロック仮想オブジェクトは、環境の静止部分（例えば、床、壁、テーブル、又は他の静止オブジェクト）にロックされることができ、又は環境の可動部分（例えば、車両、動物、人、又はユーザの手、手首、腕、足など、ユーザの視点とは無関係に移動するユーザの身体の部分の表現）にロックされることができ、それにより、仮想オブジェクトは、仮想オブジェクトと環境の部分との間の固定された関係を維持するために、視点又は環境の部分が移動するにつれて移動する。

【0067】

いくつかの実施形態では、環境ロック又は視点ロックされた仮想オブジェクトは、仮想オブジェクトが追従している基準点の移動に対して、環境ロック又は視点ロックされた仮想オブジェクトの動きを低減又は遅延させる遅延追従挙動を示す。いくつかの実施形態では、遅延追従挙動を示すとき、コンピュータシステムは、仮想オブジェクトが追従している基準点（例えば、環境の一部、視点、又は視点から５～３００ｃｍの間にある点などの視点に対して固定された点）の移動を検出すると、仮想オブジェクトの移動を意図的に遅延させる。例えば、基準点（例えば、環境の一部又は視点）が第１の速度で移動するとき、仮想オブジェクトは、基準点にロックされたままであるようにデバイスによって移動されるが、第１の速度よりも遅い第２の速度で移動する（例えば、基準点が移動を停止又は減速するまで、その時点で仮想オブジェクトが基準点に追いつき始める）。いくつかの実施形態では、仮想オブジェクトが遅延追従挙動を示すとき、デバイスは、基準点の少量の移動を無視する（例えば、０～５度の移動又は０～５０ｃｍの移動など、閾値移動量未満である基準点の移動を無視する）。例えば、基準点（例えば、仮想オブジェクトがロックされる環境の部分又は視点）が第１の量だけ移動するとき、基準点と仮想オブジェクトとの間の距離は増加し（例えば、仮想オブジェクトがロックされる基準点とは異なる視点又は環境の部分に対して固定又は実質的に固定されたポジションを維持するように仮想オブジェクトが表示されているので）、基準点（例えば、仮想オブジェクトがロックされる環境の部分又は視点）が第１の量よりも大きい第２の量だけ移動するとき、基準点と仮想オブジェクトとの間の距離は最初に増加し（例えば、仮想オブジェクトがロックされる基準点とは異なる視点又は環境の部分に対して固定又は実質的に固定されたポジションを維持するように仮想オブジェクトが表示されているので）、次いで、仮想オブジェクトが基準点に対して固定又は実質的に固定されたポジションを維持するようにコンピュータシステムによって移動されるので、基準点の移動量が閾値（例えば、「遅延追従」閾値）を超えて増加するにつれて減少する。いくつかの実施形態では、基準点に対して実質的に固定されたポジションを維持する仮想オブジェクトは、仮想オブジェクトが、１つ以上の寸法（例えば、基準点のポジションに対して上／下、左／右、及び／又は前方／後方）において基準点の閾値距離（例えば、１、２、３、５、１５、２０、５０ｃｍ）内に表示されることを含む。

【0068】

ハードウェア：人物が様々なＸＲ環境を感知し、及び／又はそれと相互作用することを可能にする、多くの異なるタイプの電子システムが存在する。例としては、ヘッドマウントシステム、プロジェクションベースシステム、ヘッドアップディスプレイ（ＨＵＤ）、統合表示機能を有する車両フロントガラス、統合表示機能を有する窓、人の目の上に配置されるように設計されたレンズとして形成されたディスプレイ（例えば、コンタクトレンズ類）、ヘッドホン／イヤフォン、スピーカアレイ、入力システム（例えば、触覚フィードバックを有する又は有さない、ウェアラブルコントローラ又はハンドヘルドコントローラ）、スマートフォン、タブレット、及びデスクトップ／ラップトップコンピュータ、が挙げられる。ヘッドマウントシステムは、音声出力を提供するためにヘッドマウントシステムに統合されたスピーカ及び／又は他の音声出力デバイスを含み得る。ヘッドマウントシステムは、１つ以上のスピーカ（単数又は複数）及び一体型不透明ディスプレイを有してもよい。代替的に、ヘッドマウントシステムは、外部の不透明ディスプレイ（例えば、スマートフォン）を受け入れるように構成されていてもよい。ヘッドマウントシステムは、物理的環境の画像若しくはビデオをキャプチャするための１つ以上の撮像センサ、及び／又は物理的環境の音声をキャプチャするための１つ以上のマイクロフォンを組み込んでいてもよい。ヘッドマウントシステムは、不透明ディスプレイではなく、透明又は半透明のディスプレイを有してもよい。透明又は半透明のディスプレイは、画像を表す光が人物の目に向けられる媒体を有してもよい。ディスプレイは、デジタル光投影、ＯＬＥＤ、ＬＥＤ、ｕＬＥＤ、液晶オンシリコン、レーザスキャン光源、又はこれらの技術の任意の組み合わせを利用することができる。媒体は、光導波路、ホログラム媒体、光結合器、光反射器、又はこれらの任意の組み合わせであってもよい。一実施形態では、透明又は半透明のディスプレイは、選択的に不透明になるように構成されていてもよい。プロジェクションベースシステムは、グラフィカル画像を人物の網膜上に投影する網膜投影技術を採用することができる。プロジェクションシステムはまた、例えば、ホログラムとして、又は物理的表面上に、仮想オブジェクトを物理的環境内に投影するように構成されていてもよい。いくつかの実施形態では、コントローラ１１０は、ユーザに対するＸＲ体験を管理及び調整するように構成されている。いくつかの実施形態では、コントローラ１１０は、ソフトウェア、ファームウェア、及び／又はハードウェアの好適な組み合わせを含む。コントローラ１１０については、図２を参照して以下により詳細に記載する。いくつかの実施形態では、コントローラ１１０は、シーン１０５（例えば、物理的環境）に対してローカル又はリモートであるコンピューティングデバイスである。例えば、コントローラ１１０は、シーン１０５内に位置するローカルサーバである。別の例では、コントローラ１１０は、シーン１０５の外側に位置するリモートサーバ（例えば、クラウドサーバ、中央サーバなど）である。いくつかの実施形態では、コントローラ１１０は、１つ以上の有線又は無線通信チャネル１４４（例えば、ＢＬＵＥＴＯＯＴＨ、ＩＥＥＥ８０２．１１ｘ、ＩＥＥＥ８０２．１６ｘ、ＩＥＥＥ８０２．３ｘなど）を介して、表示生成構成要素１２０（例えば、ＨＭＤ、ディスプレイ、プロジェクタ、タッチスクリーンなど）と通信可能に結合される。別の例では、コントローラ１１０は、表示生成構成要素１２０（例えば、ＨＭＤ、又はディスプレイ及び１つ以上のプロセッサなどを含むポータブル電子デバイス）、入力デバイス１２５のうちの１つ以上、出力デバイス１５５のうちの１つ以上、センサ１９０のうちの１つ以上、及び／又は周辺デバイス１９５のうちの１つ以上の筐体（例えば、物理的ハウジング）内に含まれる、又は上記のうちの１つ以上と同じ物理的筐体又は支持構造を共有する。

【0069】

いくつかの実施形態では、表示生成構成要素１２０は、ＸＲ体験（例えば、ＸＲ体験の少なくとも視覚的コンポーネント）をユーザに提供するように構成される。いくつかの実施形態では、表示生成構成要素１２０は、ソフトウェア、ファームウェア、及び／又はハードウェアの好適な組み合わせを含む。表示生成構成要素１２０について、図３を参照して以下により詳細に説明する。いくつかの実施形態では、コントローラ１１０の機能は、表示生成構成要素１２０によって提供される、及び／又は表示生成構成要素１２０と組み合わされる。

【0070】

いくつかの実施形態によれば、表示生成構成要素１２０は、ユーザがシーン１０５内に仮想的及び／又は物理的に存在している間に、ＸＲ体験をユーザに提供する。

【0071】

いくつかの実施形態では、表示生成構成要素は、ユーザの身体の一部（例えば、自身の頭部や自身の手など）に装着される。したがって、表示生成構成要素１２０は、ＸＲコンテンツを表示するために提供された１つ以上のＸＲディスプレイを含む。例えば、様々な実施形態では、表示生成構成要素１２０は、ユーザの視野を包囲する。いくつかの実施形態では、表示生成構成要素１２０は、ＸＲコンテンツを提示するように構成されたハンドヘルドデバイス（スマートフォン又はタブレットなど）であり、ユーザは、ユーザの視野に向けられるディスプレイ及びシーン１０５に向けられるカメラを備えたデバイスを保持する。いくつかの実施形態では、ハンドヘルドデバイスは、任意選択的に、ユーザの頭部に装着された筐体内に配置される。いくつかの実施形態では、ハンドヘルドデバイスは、任意選択的に、ユーザの前の支持体（例えば、三脚）上に配置される。いくつかの実施形態では、表示生成構成要素１２０は、ユーザが表示生成構成要素１２０を着用又は保持しない状態でＸＲコンテンツを提示するように構成されたＸＲチャンバ、筐体、又は部屋である。ＸＲコンテンツ（例えば、ハンドヘルドデバイス又は三脚上のデバイス）を表示するための１つのタイプのハードウェアを参照して説明される多くのユーザインタフェースは、ＸＲコンテンツ（例えば、ＨＭＤ又は他のウェアラブルコンピューティングデバイス）を表示するための別のタイプのハードウェア上に実施され得る。例えば、ハンドヘルド又は三脚搭載デバイスの前の空間内で起こる相互作用に基づいてトリガされるＸＲコンテンツとの相互作用を示すユーザインタフェースは、相互作用がＨＭＤの前の空間で発生し、ＸＲコンテンツの応答がＨＭＤを介して表示されるＨＭＤと同様に実施され得る。同様に、物理的環境（例えば、シーン１０５又はユーザの身体の一部（例えば、ユーザの目（単数又は複数）、頭部、又は手））に対するハンドヘルド又は三脚搭載デバイスの移動に基づいてトリガされたＸＲコンテンツとの相互作用を示すユーザインタフェースは、物理的環境（例えば、シーン１０５又はユーザの身体の一部（例えば、ユーザの目（単数又は複数）、頭部、又は手））に対するＨＭＤの移動によって移動が引き起こされるＨＭＤと同様に実施され得る。

【0072】

動作環境１００の関連する特徴が図１に示されているが、当業者は、本明細書に開示される例示的な実施形態のより適切な態様を曖昧にしないように、簡潔にするために様々な他の特徴が示されていないことを、本開示から理解されよう。

【0073】

図２は、いくつかの実施形態による、コントローラ１１０の一例のブロック図である。特定の特徴が示されているが、当業者は、本明細書に開示される実施形態のより適切な態様を曖昧にしないよう、簡潔にするために様々な他の特徴が示されていないことを、本開示から理解されよう。そのため、非限定的な例として、いくつかの実施形態では、コントローラ１１０は、１つ以上の処理ユニット２０２（例えば、マイクロプロセッサ、特定用途向け集積回路（ＡＳＩＣ）、フィールドプログラマブルゲートアレイ（ＦＰＧＡ）、グラフィック処理ユニット（ＧＰＵ）、中央処理ユニット（ＣＰＵ）、処理コアなど）、１つ以上の入出力（Ｉ／Ｏ）デバイス２０６、１つ以上の通信インタフェース２０８（例えば、ユニバーサルシリアルバス（ＵＳＢ）、ＦＩＲＥＷＩＲＥ、ＴＨＵＮＤＥＲＢＯＬＴ、ＩＥＥＥ ８０２．３ｘ、ＩＥＥＥ ８０２．１１ｘ、ＩＥＥＥ ８０２．１６ｘ、グローバル移動通信システム（ＧＳＭ）、符号分割多元接続（ＣＤＭＡ）、時分割多元接続（ＴＤＭＡ）、グローバル測位システム（ＧＰＳ）、赤外線（ＩＲ）、ＢＬＵＥＴＯＯＴＨ、ＺＩＧＢＥＥ、又は同様のタイプのインタフェース）、１つ以上のプログラミング（例えば、Ｉ／Ｏ）インタフェース２１０、メモリ２２０、並びにこれら及び様々な他のコンポーネントを相互接続するための１つ以上の通信バス２０４を含む。

【0074】

いくつかの実施形態では、１つ以上の通信バス２０４は、システム構成要素を相互接続し、システム構成要素間の通信を制御する、回路を含む。いくつかの実施形態では、１つ以上のＩ／Ｏデバイス２０６は、キーボード、マウス、タッチパッド、ジョイスティック、１つ以上のマイクロフォン、１つ以上のスピーカ、１つ以上の画像センサ、１つ以上のディスプレイなどのうちの少なくとも１つを含む。

【0075】

メモリ２２０は、ダイナミックランダムアクセスメモリ（dynamic random-access memory、ＤＲＡＭ）、スタティックランダムアクセスメモリ（static random-access memory、ＳＲＡＭ）、ダブルデータレートランダムアクセスメモリ（double-data-rate random-access memory、ＤＤＲＲＡＭ）、又は他のランダムアクセスソリッドステートメモリデバイスなどの高速ランダムアクセスメモリを含む。いくつかの実施形態では、メモリ２２０は、１つ以上の磁気ディスク記憶デバイス、光ディスク記憶デバイス、フラッシュメモリデバイス、又は他の不揮発性ソリッドステート記憶デバイスなどの非揮発性メモリを含む。メモリ２２０は、１つ以上の処理ユニット２０２からリモートに位置する１つ以上の記憶デバイスを任意選択的に含む。メモリ２２０は、非一時的コンピュータ可読記憶媒体を含む。いくつかの実施形態では、メモリ２２０、又はメモリ２２０の非一時的コンピュータ可読記憶媒体は、任意選択的なオペレーティングシステム２３０及びＸＲ体験モジュール２４０を含む、以下のプログラム、モジュール及びデータ構造、又はそれらのサブセットを記憶する。

【0076】

オペレーティングシステム２３０は、様々な基本システムサービスを処理し、ハードウェア依存タスクを実行するための命令を含む。いくつかの実施形態では、ＸＲ体験モジュール２４０は、１人以上のユーザに対する１つ以上のＸＲ体験（例えば、１人以上のユーザに対する単一のＸＲ体験、又は１人以上のユーザのそれぞれのグループに対する複数のＸＲ体験）を管理及び調整するように構成されている。そのために、様々な実施形態では、ＸＲ体験モジュール２４０は、データ取得ユニット２４１と、トラッキングユニット２４２と、調整ユニット２４６と、データ送信ユニット２４８と、を含む。

【0077】

いくつかの実施形態では、データ取得ユニット２４１は、少なくとも図１の表示生成構成要素１２０、並びに任意選択的に入力デバイス１２５、出力デバイス１５５、センサ１９０、及び／又は周辺デバイス１９５のうちの１つ以上からデータ（例えば、提示データ、相互作用データ、センサデータ、ロケーションデータなど）を取得するように構成される。その目的で、様々な実施形態では、データ取得ユニット２４１は、そのための命令及び／又は論理、並びにそのためのヒューリスティックス及びメタデータを含む。

【0078】

いくつかの実施形態では、トラッキングユニット２４２は、シーン１０５をマッピングし、図１のシーン１０５に対して、かつ任意選択的に、入力デバイス１２５、出力デバイス１５５、センサ１９０、及び／又は周辺デバイス１９５のうちの１つ以上に対して、少なくとも表示生成構成要素１２０のポジション／ロケーションを追跡するように構成される。そのために、様々な実施形態では、トラッキングユニット２４２は、そのための命令及び／又は論理、並びにそのためのヒューリスティックス及びメタデータを含む。いくつかの実施形態では、トラッキングユニット２４２は、ハンドトラッキングユニット２４４及び／又はアイトラッキングユニット２４３を含む。いくつかの実施形態では、ハンドトラッキングユニット２４４は、図１のシーン１０５に対する、表示生成構成要素１２０に対する、かつ／又はユーザの手に対して定義された座標系に対する、ユーザの手の１つ以上の部分のポジション／ロケーション、及び／又はユーザの手の１つ以上の部分の運動を追跡するように構成される。ハンドトラッキングユニット２４４は、図４に関して以下でより詳細に説明される。いくつかの実施形態では、アイトラッキングユニット２４３は、シーン１０５に対する（例えば、物理的環境及び／又はユーザ（例えば、ユーザの手）に対する）、又は表示生成構成要素１２０を介して表示されたＸＲコンテンツに対する、ユーザの視線（又は、より広範にはユーザの目、顔、又は頭部）のポジション及び移動を追跡するように構成される。アイトラッキングユニット２４３は、図５に関して以下でより詳細に説明される。

【0079】

いくつかの実施形態では、調整ユニット２４６は、表示生成構成要素１２０によって、並びに任意選択的に、出力デバイス１５５及び／又は周辺デバイス１９５のうちの１つ以上によって、ユーザに提示されるＸＲ体験を管理及び調整するように構成される。その目的で、様々な実施形態において、調整ユニット２４６は、そのための命令及び／又は論理、並びにそのためのヒューリスティックス及びメタデータを含む。

【0080】

いくつかの実施形態では、データ送信ユニット２４８は、データ（例えば、提示データ、ロケーションデータなど）を少なくとも表示生成構成要素１２０、並びに任意選択的に、入力デバイス１２５、出力デバイス１５５、センサ１９０、及び／又は周辺デバイス１９５のうちの１つ以上に送信するように構成される。そのために、様々な実施形態では、データ送信ユニット２４８は、そのための命令及び／又は論理、並びにそのためのヒューリスティックス及びメタデータを含む。

【0081】

データ取得ユニット２４１、トラッキングユニット２４２（例えば、アイトラッキングユニット２４３及びハンドトラッキングユニット２４４を含む）、調整ユニット２４６、及びデータ送信ユニット２４８が、単一のデバイス（例えば、コントローラ１１０）上に存在するものとして示されているが、他の実施形態では、データ取得ユニット２４１、トラッキングユニット２４２（例えば、アイトラッキングユニット２４３及びハンドトラッキングユニット２４４を含む）、調整ユニット２４６、及びデータ送信ユニット２４８の任意の組み合わせが、別個のコンピューティングデバイス内に配置されてもよいことを理解されたい。

【0082】

更に、図２は、本明細書に記載される実施形態の構造概略とは対照的に、特定の実施形態に存在し得る様々な特徴の機能を説明することをより意図している。当業者によって認識されるように、別々に示された事項を組み合わせることができ、また、一部の事項は分離することができる。例えば、図２に別々に示されるいくつかの機能モジュールは、単一のモジュールにおいて実装することができ、単一の機能ブロックの様々な機能は、様々な実施形態において１つ以上の機能ブロックによって実装することができる。モジュールの実際の数、並びに特定の機能の分割及びそれらの間にどのように機能が割り当てられるかは、実装形態によって異なり、いくつかの実施形態では、特定の実装形態のために選択されたハードウェア、ソフトウェア、及び／又はファームウェアの特定の組み合わせに部分的に依存する。

【0083】

図３は、いくつかの実施形態による、表示生成構成要素１２０の一例のブロック図である。特定の特徴が示されているが、当業者は、本明細書に開示される実施形態のより適切な態様を曖昧にしないよう、簡潔にするために様々な他の特徴が示されていないことを、本開示から理解されよう。その目的で、非限定的な例として、いくつかの実施形態では、表示生成構成要素１２０（例えば、ＨＭＤ）には、１つ以上の処理ユニット３０２（例えば、マイクロプロセッサ、ＡＳＩＣ、ＦＰＧＡ、ＧＰＵ、ＣＰＵ、処理コアなど）、１つ以上の入出力（Ｉ／Ｏ）デバイス及びセンサ３０６、１つ以上の通信インタフェース３０８（例えば、ＵＳＢ、ＦＩＲＥＷＩＲＥ、ＴＨＵＮＤＥＲＢＯＬＴ、ＩＥＥＥ ８０２．３ｘ、ＩＥＥＥ ８０２．１１ｘ、ＩＥＥＥ ８０２．１６ｘ、ＧＳＭ、ＣＤＭＡ、ＴＤＭＡ、ＧＰＳ、赤外線、ＢＬＵＥＴＯＯＴＨ、ＺＩＧＢＥＥ、及び／又は同様のタイプのインタフェース）、１つ以上のプログラミング（例えば、Ｉ／Ｏ）インタフェース３１０、１つ以上のＸＲディスプレイ３１２、１つ以上の任意選択の内向き及び／又は外向き画像センサ３１４、メモリ３２０、並びにこれら及び様々な他のコンポーネントを相互接続するための１つ以上の通信バス３０４、が含まれる。

【0084】

いくつかの実施形態では、１つ以上の通信バス３０４は、システムコンポーネント間の通信を相互接続及び制御する回路を含む。いくつかの実施形態では、１つ以上のＩ／Ｏデバイス及びセンサ３０６は、慣性測定装置（ＩＭＵ）、加速度計、ジャイロスコープ、温度計、１つ以上の生理的センサ（例えば、血圧モニタ、心拍数モニタ、血液酸素センサ、血糖センサなど）、１つ以上のマイクロフォン、１つ以上のスピーカ、触覚エンジン、１つ以上の深度センサ（例えば、構造化光、飛行時間など）などのうちの少なくとも１つを含む。

【0085】

いくつかの実施形態では、１つ以上のＸＲディスプレイ３１２は、ＸＲ体験をユーザに提供するように構成される。いくつかの実施形態では、１つ以上のＸＲディスプレイ３１２は、ホログラフィック、デジタル光処理（ＤＬＰ）、液晶ディスプレイ（ＬＣＤ）、液晶オンシリコン（ＬＣｏＳ）、有機発光電界効果トランジスタ（ＯＬＥＴ）、有機発光ダイオード（ＯＬＥＤ）、表面伝導型電子放射素子ディスプレイ（ＳＥＤ）、電界放射ディスプレイ（ＦＥＤ）、量子ドット発光ダイオード（ＱＤ－ＬＥＤ）、微小電気機械システム（ＭＥＭＳ）、及び／又は同様のディスプレイタイプに相当する。いくつかの実施形態では、１つ以上のＸＲディスプレイ３１２は、回折、反射、偏光、ホログラフィックなどの、導波管ディスプレイに相当する。例えば、表示生成構成要素１２０（例えば、ＨＭＤ）は、単一のＸＲディスプレイを含む。別の実施例では、表示生成構成要素１２０は、ユーザの各目用のＸＲディスプレイを含む。いくつかの実施形態では、１つ以上のＸＲディスプレイ３１２は、ＭＲ又はＶＲコンテンツを提示することができる。いくつかの実施形態では、１つ以上のＸＲディスプレイ３１２は、ＭＲ又はＶＲコンテンツを提示することができる。

【0086】

いくつかの実施形態では、１つ以上の画像センサ３１４は、ユーザの目を含むユーザの顔の少なくとも一部分に対応する画像データを取得するように構成される（及び、アイトラッキングカメラと称する場合がある）。いくつかの実施形態では、１つ以上の画像センサ３１４は、ユーザの手（単数又は複数）及び任意選択的にユーザの腕（単数又は複数）の少なくとも一部分に対応する画像データを取得するように構成される（及び、ハンドトラッキングカメラと称される場合がある）。いくつかの実施形態では、１つ以上の画像センサ３１４は、表示生成構成要素１２０（例えばＨＭＤ）、が存在しない場合に、ユーザが閲覧するようなシーンに対応する画像データを取得するように前方を向くように構成されている（かつ、シーンカメラと称されることがある）。１つ以上の任意選択的な画像センサ３１４は、（例えば、相補型金属酸化膜半導体（ＣＭＯＳ）画像センサ若しくは電荷結合デバイス（ＣＣＤ）画像センサを備えた）１つ以上のＲＧＢカメラ、１つ以上の赤外線（ＩＲ）カメラ、１つ以上のイベントベースのカメラ、及び／又は同様のもの、を含むことができる。

【0087】

メモリ３２０は、ＤＲＡＭ、ＳＲＡＭ、ＤＤＲ ＲＡＭ、又は他のランダムアクセスソリッドステートメモリデバイスなどの、高速ランダムアクセスメモリを含む。いくつかの実施形態では、メモリ３２０は、１つ以上の磁気ディスク記憶デバイス、光ディスク記憶デバイス、フラッシュメモリデバイス、又はその他の不揮発性ソリッドステート記憶デバイスなどの不揮発性メモリを含む。メモリ３２０は、１つ以上の処理ユニット３０２からリモートに位置する１つ以上の記憶デバイスを任意選択的に含む。メモリ３２０は、非一時的コンピュータ可読記憶媒体を含む。いくつかの実施形態では、メモリ３２０、又はメモリ３２０の非一時的コンピュータ可読記憶媒体は、任意選択のオペレーティングシステム３３０及びＸＲ提示モジュール３４０を含む、以下のプログラム、モジュール及びデータ構造、又はそれらのサブセットを記憶する。

【0088】

オペレーティングシステム３３０は、様々な基本システムサービスを処理する命令、及びハードウェア依存タスクを実行する命令を含む。いくつかの実施形態では、ＸＲ提示モジュール３４０は、１つ以上のＸＲディスプレイ３１２を介してＸＲコンテンツをユーザに提示するように構成される。その目的で、様々な実施形態では、ＸＲ提示モジュール３４０は、データ取得ユニット３４２、ＸＲ提示ユニット３４４、ＸＲマップ生成ユニット３４６、及びデータ送信ユニット３４８を含む。

【0089】

いくつかの実施形態では、データ取得ユニット３４２は、少なくとも図１のコントローラ１１０からデータ（例えば、提示データ、相互作用データ、センサデータ、ロケーションデータなど）を取得するように構成される。その目的で、様々な実施形態では、データ取得ユニット３４２は、そのための命令及び／又は論理、並びにそのためのヒューリスティックス及びメタデータを含む。

【0090】

いくつかの実施形態では、ＸＲ提示ユニット３４４は、１つ以上のＸＲディスプレイ３１２を介してＸＲコンテンツを提示するように構成される。その目的で、様々な実施形態では、ＸＲ提示ユニット３４４は、そのための命令及び／又は論理、並びにそのためのヒューリスティックス及びメタデータを含む。

【0091】

いくつかの実施形態では、ＸＲマップ生成ユニット３４６は、メディアコンテンツデータに基づいて、ＸＲマップ（例えば、複合現実シーンの３Ｄマップ又はコンピュータ生成オブジェクトを配置して拡張現実を生成することができる物理的環境のマップ）を生成するように構成されている。その目的で、様々な実施形態では、ＸＲマップ生成ユニット３４６は、そのための命令及び／又は論理、並びにそのためのヒューリスティックス及びメタデータを含む。

【0092】

いくつかの実施形態では、データ送信ユニット３４８は、少なくともコントローラ１１０、及び任意選択的に入力デバイス１２５、出力デバイス１５５、センサ１９０、及び／又は周辺デバイス１９５のうちの１つ以上にデータ（例えば、提示データ、ロケーションデータなど）を伝送するように構成される。その目的で、様々な実施形態では、データ送信ユニット３４８は、そのための命令及び／又は論理、並びにそのためのヒューリスティックス及びメタデータを含む。

【0093】

データ取得ユニット３４２は、ＸＲ提示ユニット３４４、ＸＲマップ生成ユニット３４６、及びデータ送信ユニット３４８は、単一のデバイス（例えば、図１の表示生成構成要素１２０）上に存在するものとして示されているが、他の実施形態では、データ取得ユニット３４２、ＸＲ提示ユニット３４４、ＸＲマップ生成ユニット３４６、及びデータ送信ユニット３４８の任意の組み合わせが、別個のコンピューティングデバイス内に配置されてもよいことを理解されたい。

【0094】

更に、図３は、本明細書に記載される実施形態の構造概略とは対照的に、特定の実装形態に存在し得る様々な特徴の機能を説明することをより意図している。当業者によって認識されるように、別々に示された事項を組み合わせることができ、また、一部の事項は分離することができる。例えば、図３に別々に示すいくつかの機能モジュールは、単一のモジュール内に実現することができ、単一の機能ブロックの様々な機能は、様々な実施形態では１つ以上の機能ブロックによって実行することができる。モジュールの実際の数、並びに特定の機能の分割及びそれらの間にどのように機能が割り当てられるかは、実装形態によって異なり、いくつかの実施形態では、特定の実装形態のために選択されたハードウェア、ソフトウェア、及び／又はファームウェアの特定の組み合わせに部分的に依存する。

【0095】

図４は、ハンドトラッキングデバイス１４０の例示的な実施形態の概略図である。いくつかの実施形態では、ハンドトラッキングデバイス１４０（図１）は、図１のシーン１０５に対する（例えば、ユーザを取り囲む物理的環境の一部に対する、表示生成構成要素１２０に対する、又はユーザの一部（例えば、ユーザの顔、目、又は頭部）に対する、及び／又はユーザの手に対して定義された座標系に対する）ユーザの手の１つ以上の部分のロケーション／ポジション、及び／又は、ユーザの手の１つ以上の部分の動きを追跡するように、ハンドトラッキングユニット２４４（図２）によって制御される。いくつかの実施形態では、ハンドトラッキングデバイス１４０は、表示生成構成要素１２０の一部である（例えば、ヘッドマウントデバイスに埋め込まれる、又はヘッドマウントデバイスに取り付けられる）。いくつかの実施形態では、ハンドトラッキングデバイス１４０は、表示生成構成要素１２０とは別個である（例えば、別個のハウジング内に位置する、又は別個の物理的支持構造に取り付けられる）。

【0096】

いくつかの実施形態では、ハンドトラッキングデバイス１４０は、人間のユーザの少なくとも手４０６を含む三次元シーン情報をキャプチャする画像センサ４０４（例えば、１つ以上のＩＲカメラ、３Ｄカメラ、深度カメラ、及び／又はカラーカメラなど）を含む。画像センサ４０４は、指及びそれらのそれぞれのポジションを区別するのを可能にするのに十分な解像度で手画像をキャプチャする。画像センサ４０４は、典型的には、ユーザの身体の他の部分の画像、又は身体の全ての画像をキャプチャし、ズーム機能又は高倍率を有する専用センサのいずれかを有して、所望の解像度で手の画像をキャプチャすることができる。いくつかの実施形態では、画像センサ４０４はまた、手４０６の２Ｄカラービデオ画像及びシーンの他の要素をキャプチャする。いくつかの実施形態では、画像センサ４０４は、シーン１０５の物理的環境をキャプチャする他の画像センサと併せて使用される、又はシーン１０５の物理的環境をキャプチャする画像センサとして機能する。いくつかの実施形態では、画像センサ４０４は、画像センサ又はその一部の視野が使用されて、画像センサによってキャプチャされた手の移動がコントローラ１１０への入力として処理される相互作用空間を定義するように、ユーザ又はユーザの環境に対して位置決めされる。

【0097】

いくつかの実施形態では、画像センサ４０４は、３Ｄマップデータ（及び場合によってはカラー画像データも）を含むフレームのシーケンスをコントローラ１１０に出力し、これにより、マップデータから高レベル情報を抽出する。この高レベル情報は、典型的には、アプリケーションプログラムインタフェース（ＡＰＩ）を介して、コントローラ上で実行されるアプリケーションに提供され、それに応じて表示生成構成要素１２０を駆動する。例えば、ユーザは、自分の手４０６を移動させて自分の手の姿勢を変化させることによって、コントローラ１１０上で実行されるソフトウェアと対話することができる。

【0098】

いくつかの実施形態では、画像センサ４０４は、手４０６を含むシーン上にスポットパターンを投影し、投影されたパターンの画像をキャプチャする。いくつかの実施形態では、コントローラ１１０は、パターンのスポットの横方向シフトに基づいて、三角測量によって（ユーザの手の表面上の点を含む）シーン内の点の３Ｄ座標を計算する。このアプローチは、ユーザが任意の種類のビーコン、センサ、又は他のマーカを保持又は着用する必要がないという点で有利である。これは、画像センサ４０４からの特定の距離で、所定の基準面に対するシーン内の点の深度座標を与える。本開示では、画像センサ４０４は、シーン内の点の深度座標が画像センサによって測定されたｚコンポーネントに対応するように、直交する一連のｘ、ｙ、ｚ軸を定義すると想定される。代替的に、画像センサ４０４（例えば、ハンドトラッキングデバイス）は、単一又は複数のカメラ又は他のタイプのセンサに基づいて、立体撮像又は飛行時間測定などの他の３Ｄマッピング方法を使用することができる。

【0099】

いくつかの実施形態では、ハンドトラッキングデバイス１４０は、ユーザが手（例えば、手全体又は１本以上の指）を移動させている間、ユーザの手を含む深度マップの時間シーケンスをキャプチャし処理する。画像センサ４０４及び／又はコントローラ１１０内のプロセッサ上で動作するソフトウェアは、３Ｄマップデータを処理して、これらの深度マップ内の手のパッチ記述子を抽出する。ソフトウェアは、各フレームにおける手の姿勢を推定するために、以前の学習プロセスに基づいて、これらの記述子をデータベース４０８に記憶されたパッチ記述子と照合する。姿勢は、典型的には、ユーザの手関節及び指先の３Ｄロケーションを含む。

【0100】

ソフトウェアはまた、ジェスチャを識別するために、シーケンス内の複数のフレームにわたって手及び／又は指の軌道を解析することができる。本明細書に記載される姿勢推定機能は、運動追跡機能とインターリーブされてもよく、それにより、パッチベースの姿勢推定が２つ（又はそれより多く）のフレーム毎に１回のみ実行される一方、追跡は残りのフレームにわたって発生する姿勢の変化を発見するために使用される。姿勢、運動、及びジェスチャ情報は、上述のＡＰＩを介して、コントローラ１１０上で実行されるアプリケーションプログラムに提供される。このプログラムは、例えば、姿勢及び／又はジェスチャ情報に応じて、表示生成構成要素１２０上に提示された画像を移動させ修正する、又は他の機能を実行することができる。

【0101】

いくつかの実施形態では、ジェスチャは、エアジェスチャを含む。エアジェスチャは、ユーザがデバイス（例えば、コンピュータシステム１０１、１つ以上の入力デバイス１２５、及び／又は、ハンドトラッキングデバイス１４０）の一部である入力要素に触れることなく（又はそれとは無関係に）検出されるジェスチャであり、絶対的な基準（例えば、地面に対するユーザの腕の角度、又は地面に対するユーザの手の距離）に対するユーザの身体の動き、ユーザの身体の別の部分（例えば、ユーザの肩に対するユーザの手の移動、ユーザの一方の手のユーザの別の手に対する移動、及び／又はユーザの指の、別の指若しくはユーザの手の一部に対する移動）に対するユーザの身体の動き、及び／又はユーザの身体の一部（例えば、所定の量及び／又は速さによる所定の姿勢での手の移動を含むタップジェスチャ、又は所定の速度又はユーザの身体の一部の回転量を含むシェイクジェスチャ）の絶対的な動きを含む、空中にあるユーザの身体の一部（例えば、頭部、１つ以上の腕、１つ以上の手、１つ以上の指、及び／又は１つ以上の脚）の検出された動きに基づく。

【0102】

いくつかの実施形態では、本明細書に記載の様々な例及び実施形態で使用される入力ジェスチャは、いくつかの実施形態に係る、ＸＲ環境（例えば、仮想又は複合現実環境）と相互作用するための他の指（単数又は複数）又はユーザの手の部分（単数又は複数）に対するユーザの指（単数又は複数）の移動によって実行されるエアジェスチャを含む。いくつかの実施形態では、エアジェスチャは、ユーザがデバイスの一部である入力要素に触れることなく（又はデバイスの一部である入力要素から独立して）検出されるジェスチャであり、絶対的な基準に対するユーザの身体の動き（例えば、地面に対するユーザの腕の角度、又は地面に対するユーザの手の距離）、ユーザの身体の別の部分に対するユーザの身体の動き（例えば、ユーザの肩に対するユーザの手の動き、ユーザの一方の手に対するユーザの他方の手の移動、及び／又はユーザの手の別の指若しくは部分に対するユーザの指の移動）、及び／又は、ユーザの身体の一部の絶対的な動き（例えば、所定の量及び／又は速さによる所定のポーズでの手の移動を含むタップジェスチャ、又はユーザの身体の一部の所定の速さ又は量の回転を含むシェイクジェスチャ）を含む、ユーザの身体の一部の検出された動きに基づく。

【0103】

入力ジェスチャがエアジェスチャ（例えば、タッチスクリーン上に表示されたユーザインタフェース要素との接触、又はユーザインタフェース要素にカーソルを移動させるためのマウス又はトラックパッドとの接触など、どのユーザインタフェース要素がユーザ入力のターゲットであるかに関する情報をコンピュータシステムに提供する入力デバイスとの物理的接触がない場合）であるいくつかの実施形態では、ジェスチャは、ユーザ入力のターゲット（例えば、以下で説明するように、直接入力の場合）を決定するためにユーザの注意（例えば、視線）を考慮に入れる。したがって、エアジェスチャを含む実装形態では、入力ジェスチャは、例えば、以下でより詳細に説明するように、ピンチ及び／又はタップ入力を実行するためのユーザの指（単数又は複数）及び／又は手の移動と組み合わせて（例えば、同時）ユーザインタフェース要素に対する検出された注意（例えば、視線）である。

【0104】

いくつかの実施形態では、ユーザインタフェースオブジェクトに向けられた入力ジェスチャは、ユーザインタフェースオブジェクトを参照して直接的又は間接的に実行される。例えば、ユーザ入力は、三次元環境（例えば、ユーザの現在の視点に基づいて決定されるように、）におけるユーザインタフェースオブジェクトのポジションに対応するポジションでユーザの手で入力ジェスチャを実行したことに応じて、ユーザインタフェースオブジェクトに対して直接実行される。いくつかの実施形態では、入力ジェスチャは、ユーザインタフェースオブジェクトに対するユーザの注意（例えば、視線）を検出しながら、ユーザの手のポジションが三次元環境におけるユーザインタフェースオブジェクトのポジションに対応するポジションにない間に入力ジェスチャを実行するユーザに従って、ユーザインタフェースオブジェクトに対して間接的に実行される。例えば、直接入力ジェスチャの場合、ユーザは、ユーザインタフェースオブジェクトの表示ポジション（例えば、オプションの外縁又はオプションの中央部分から測定して、０．５ｃｍ、１ｃｍ、５ｃｍ、又は０～５ｃｍの距離内）に対応するポジション又はその付近でジェスチャを開始することによって、ユーザの入力をユーザインタフェースオブジェクトに向けることができる。間接的な入力ジェスチャの場合、ユーザは、ユーザインタフェースオブジェクトに注意を払うことによって（例えば、ユーザインタフェースオブジェクトを注視することによって）ユーザの入力をユーザインタフェースオブジェクトに向けることができ、オプションに注意を払いながら、ユーザは、入力ジェスチャを開始する（例えば、コンピュータシステムによって検出可能な任意のポジションで）（例えば、ユーザインタフェースオブジェクトの表示ポジションに対応しないポジションで）。

【0105】

いくつかの実施形態では、本明細書に記載の様々な例及び実施形態で使用される入力ジェスチャ（例えば、エアジェスチャ）は、いくつかの実施形態に係る、仮想又は複合現実環境と相互作用するためのピンチ入力及びタップ入力を含む。例えば、後述するピンチ入力やタップ入力は、エアジェスチャとして行われる。

【0106】

いくつかの実施形態では、ピンチ入力は、ピンチジェスチャ、ロングピンチジェスチャ、ピンチアンドドラッグジェスチャ、又はダブルピンチジェスチャのうちの１つ以上を含むエアジェスチャの一部である。例えば、エアジェスチャであるピンチジェスチャは、互いに接触するように手の２本以上の指を動かすこと、すなわち、任意選択的に、互いに接触した直後の（例えば、０～１秒以内）中断を含む。エアジェスチャであるロングピンチジェスチャは、互いに接触している中断を検出する前に、少なくとも閾値時間量（例えば、少なくとも１秒）にわたって互いに接触するように手の２本以上の指を動かすことを含む。例えば、ロングピンチジェスチャは、ユーザがピンチジェスチャ（例えば、２つ以上の指が接触している場合、）を保持することを含み、ロングピンチジェスチャは、２本以上の指の間の接触の中断が検出されるまで継続する。いくつかの実施形態では、エアジェスチャであるダブルピンチジェスチャは、互いに直接（例えば、既定の期間内に）連続して検出される２つ（例えば、又はそれより多く）のピンチ入力（例えば、同じ手で実行される）を含む。例えば、ユーザは、第１のピンチ入力を実行し（例えば、ピンチ入力又はロングピンチ入力）、第１のピンチ入力を解放し（例えば、２つ以上の指の間の接触を破壊する）、第１のピンチ入力を解放した後、既定の期間（例えば、１秒以内又は２秒以内）内に第２のピンチ入力を実行する。

【0107】

いくつかの実施形態では、エアジェスチャであるピンチアンドドラッグジェスチャは、ユーザの手のポジションを第１のポジション（例えば、ドラッグの開始ポジション）から第２のポジション（例えば、抗力の終了ポジション）に変化させるドラッグ入力に関連して（例えば、その後に）実行されるピンチジェスチャ（例えば、ピンチジェスチャ又はロングピンチジェスチャ）を含む。いくつかの実施形態では、ユーザは、ドラッグ入力を実行しながらピンチジェスチャを維持し、（例えば、第２のポジションにおいて）ドラッグジェスチャを終了するためにピンチジェスチャ（例えば、２本以上の指を開く）を解放する。いくつかの実施形態では、ピンチ入力及びドラッグ入力は、同じ手（例えば、ユーザは、２本以上の指をつまんで互いに接触し、ドラッグジェスチャで空中の第２のポジションに同じ手を移動させる）によって実行される。いくつかの実施形態では、ピンチ入力はユーザの第１の手によって実行され、ドラッグ入力はユーザの第２の手によって実行される（例えば、ユーザの第２の手は、ユーザがユーザの第１の手でピンチ入力を継続する間に空中で第１のポジションから第２のポジションに移動する）。いくつかの実施形態では、エアジェスチャである入力ジェスチャは、ユーザの両手の双方を使用して実行される入力（例えば、ピンチ入力及び／又はタップ入力）を含む。例えば、入力ジェスチャは、互いに関連して（例えば、既定の期間と同時に、又は既定の期間内に）行われる２つ（例えば、又はそれより多く）のピンチ入力を含む。例えば、ユーザの第１の手を使用して実行される第１のピンチジェスチャ（例えば、ピンチ入力、ロングピンチ入力、又はピンチ及びドラッグ入力）と、第１の手を使用してピンチ入力を実行することに関連して、他方の手（例えば、ユーザの両手の第２の手）を使用して第２のピンチ入力を実行する。いくつかの実施形態では、ユーザの両手の間の移動（例えば、ユーザの両手の間の距離又は相対的な向きを増加及び／又は減少させるために）。

【0108】

いくつかの実施形態では、エアジェスチャとして実行されるタップ入力（例えば、ユーザインタフェース要素に向けられる）は、ユーザインタフェース要素に向かうユーザの指の移動（単数又は複数）、任意選択的にユーザの指（単数又は複数）をユーザインタフェース要素に向かって伸ばした状態でのユーザの手のユーザインタフェース要素に向かう移動、ユーザの指の下方への動き（例えば、マウスクリック動作又はタッチスクリーン上のタップを模倣する）、又はユーザの手の他の既定の移動を含む。いくつかの実施形態では、エアジェスチャとして実行されるタップ入力は、ユーザの視点から離れて、及び／又は移動の終了が続くタップ入力のターゲットであるオブジェクトに向かって指又は手のタップジェスチャの移動を実行する指又は手の移動特性に基づいて検出される。いくつかの実施形態では、タップジェスチャ（例えば、ユーザの視点から離れる、及び／又はタップ入力の対象であるオブジェクトに向かう移動の終了、指又は手の移動方向の反転、及び／又は指又は手の移動の加速方向の反転）を実行する指又は手の移動特性の変化に基づいて、移動の終了が検出される。

【0109】

いくつかの実施形態では、ユーザの注意は、（任意選択で、他の条件を必要とせずに）三次元環境の一部に向けられた視線の検出に基づいて、三次元環境の一部に向けられていると判定される。いくつかの実施形態では、ユーザの注意が三次元環境の一部に向けられていることをデバイスが判定するために、ユーザの視点が三次元環境の一部から距離閾値内にある間に、少なくとも閾値持続時間（例えば、滞留時間）、視線が三次元環境の一部に向けられていることを必要とすること、及び／又は視線が三次元環境の一部に向けられていることを必要とすることなどの１つ以上の追加の条件を伴う三次元環境の一部に向けられた視線の検出に基づいて、ユーザの注意が三次元環境の一部に向けられていると判定され、追加の条件のうちの１つが満たされていない場合、デバイスは、三次元環境のうちの視線が向けられている部分に注意が向けられていないと判定する（例えば、１つ以上の追加の条件が満たされるまで）。

【0110】

いくつかの実施形態では、ユーザ又はユーザの一部の準備完了状態構成の検出は、コンピュータシステムによって検出される。手の準備完了状態構成の検出は、ユーザが、手によって実行される１つ以上のエアジェスチャ入力（例えば、ピンチ、タップ、ピンチ及びドラッグ、ダブルピンチ、ロングピンチ、又は本明細書に説明される他のエアジェスチャ）を使用して、コンピュータシステムと対話する準備をしている可能性が高いというインジケーションとして、コンピュータシステムによって使用される。例えば、手の準備完了状態は、手が所定の手形状（例えば、親指と１本以上の指が伸ばされて間隔を空けてピンチ若しくはグラブジェスチャを行う準備ができているプレピンチ形状、又は１本以上の指が伸ばされて手のひらがユーザから離れる方向を向いているプレタップ）を有するか否か、手がユーザの視点に対して所定のポジションにあるか否か（例えば、ユーザの頭部の下、ユーザの腰の上、身体から少なくとも１５ｃｍ、２０ｃｍ、２５ｃｍ、３０ｃｍ、又は５０ｃｍだけ伸ばされている）、及び／又は手が特定の方法で移動したか否か（例えば、ユーザの腰の上、ユーザの頭部の下のユーザの正面の領域に向かって移動したか、又はユーザの身体若しくは脚から離れたか）に基づいて決定される。いくつかの実施形態では、準備完了状態は、ユーザインタフェースの対話要素が注意（例えば、視線）入力に応じるかどうかを判定するために使用される。

【0111】

いくつかの実施形態では、ソフトウェアは、例えばネットワーク上で、コントローラ１１０に電子形態でダウンロードされてもよい、又はその代わりに、光学、磁気、若しくは電子メモリ媒体などの、実体的非一時的媒体に提供されてもよい。いくつかの実施形態では、データベース４０８は、同様に、コントローラ１１０に関連付けられたメモリに記憶される。代替的又は追加的に、コンピュータの記載された機能の一部又は全ては、カスタム又は半カスタム集積回路又はプログラム可能なデジタル信号プロセッサ（ＤＳＰ）などの専用のハードウェアに実装されてもよい。コントローラ１１０は、例として、画像センサ４０４とは別個のユニットとして図４に示されているが、コントローラの処理機能の一部又は全部は、好適なマイクロプロセッサ及びソフトウェアによって、又は画像センサ４０４（例えば、ハンドトラッキングデバイス）のハウジング内の専用回路によって、又は他の方法で画像センサ４０４に関連付けることができる。いくつかの実施形態では、これらの処理機能のうちの少なくともいくつかは、（例えば、テレビセット、ハンドヘルドデバイス、又はヘッドマウントデバイスにおいて）表示生成構成要素１２０と統合された好適なプロセッサによって、又はゲームコンソール又はメディアプレーヤーなどの任意の他の適切なコンピュータ化されたデバイスを用いて実行されてもよい。画像センサ４０４の感知機能は、同様に、センサ出力によって制御されるコンピュータ又は他のコンピュータ化された装置に統合することができる。

【0112】

図４は、いくつかの実施形態による、画像センサ４０４によってキャプチャされた深度マップ４１０の概略図を更に含む。深度マップは、上述したように、それぞれの深度値を有するピクセルのマトリックスを含む。手４０６に対応するピクセル４１２は、このマップで背景及び手首からセグメント化されている。深度マップ４１０内の各ピクセルの輝度は、深度値、すなわち、画像センサ４０４からの測定されたｚ距離に反比例し、深度が上昇するにつれて階調が濃くなる。コントローラ１１０は、人間の手の特性を有する画像のコンポーネント（すなわち、隣接ピクセル群）を識別及びセグメント化するために、これらの深度値を処理する。これらの特性は、例えば、深度マップのシーケンスの全体サイズ、形状、フレームからフレームへの動きを含むことができる。

【0113】

図４はまた、いくつかの実施形態による、コントローラ１１０が手４０６の深度マップ４１０から最終的に抽出する手骨格４１４を概略的に示す。図４では、手の骨格４１４は、元の深度マップからセグメント化された手の背景４１６に重ね合わされる。いくつかの実施形態では、手（例えば、指関節、指先、手のひらの中心、手首に接続する手の終端など）、及び任意選択的に手に接続された手首又は腕上の主要な特徴点が、手骨格４１４上で識別され配置される。いくつかの実施形態では、複数の画像フレーム上にわたるこれらの主要な特徴点のロケーション及び移動がコントローラ１１０によって使用されて、いくつかの実施形態により、手によって実行される手ジェスチャ又は手の現在の状態を判定する。

【0114】

図５は、アイトラッキングデバイス１３０（図１）の例示的な実施形態を示す。いくつかの実施形態では、アイトラッキングデバイス１３０は、シーン１０５に対する、又は表示生成構成要素１２０を介して表示されたＸＲコンテンツに対する、ユーザの視線のポジション及び移動を追跡するように、アイトラッキングユニット２４３（図２）によって制御される。いくつかの実施形態では、アイトラッキングデバイス１３０は、表示生成構成要素１２０と統合される。例えば、いくつかの実施形態では、表示生成構成要素１２０がヘッドセット、ヘルメット、ゴーグル、又は眼鏡などのヘッドマウントデバイス、又はウェアラブルフレームに配置されたハンドヘルドデバイスである場合、ヘッドマウントデバイスは、ユーザによる視聴のためのＸＲコンテンツを生成するコンポーネント及びＸＲコンテンツに対するユーザの視線を追跡するためのコンポーネントの両方を含む。いくつかの実施形態では、アイトラッキングデバイス１３０は、表示生成構成要素１２０とは別個である。例えば、表示生成構成要素がハンドヘルドデバイス又はＸＲチャンバである場合、アイトラッキングデバイス１３０は、任意選択的に、ハンドヘルドデバイス又はＸＲチャンバとは別個のデバイスである。いくつかの実施形態では、アイトラッキングデバイス１３０は、ヘッドマウントデバイス又はヘッドマウントデバイスの一部である。いくつかの実施形態では、ヘッドマウントアイトラッキングデバイス１３０は、任意選択的に、頭部に装着されている表示生成構成要素又は頭部に装着されていない表示生成構成要素とともに使用される。いくつかの実施形態では、アイトラッキングデバイス１３０は、ヘッドマウントデバイスではなく、任意選択的に、ヘッドマウント表示生成構成要素と組み合わせて使用される。いくつかの実施形態では、アイトラッキングデバイス１３０は、ヘッドマウントデバイスではなく、任意選択的に、非ヘッドマウント表示生成構成要素の一部である。

【0115】

いくつかの実施形態では、表示生成構成要素１２０は、ユーザの目の前に左及び右の画像を含むフレームを表示して、３Ｄ仮想ビューをユーザに提供するディスプレイ機構（例えば、左右の目近傍ディスプレイパネル）を使用する。例えば、ヘッドマウント表示生成構成要素は、ディスプレイとユーザの目との間に位置する左右の光学レンズ（本明細書では接眼レンズと称される）を含んでもよい。いくつかの実施形態では、表示生成構成要素は、表示のためにユーザの環境のビデオをキャプチャする１つ以上の外部ビデオカメラを含んでもよい、又はそれに結合されてもよい。いくつかの実施形態では、ヘッドマウント表示生成構成要素は、ユーザが物理的環境を直接視認し、透明又は半透明ディスプレイ上に仮想オブジェクトを表示することができる透明又は半透明のディスプレイを有してもよい。いくつかの実施形態では、表示生成構成要素は、仮想オブジェクトを物理的環境に投影する。仮想オブジェクトは、例えば、物理的表面上に、又はホログラフとして投影され、それによって、個人は、システムを使用して、物理的環境の上に重ね合わされた仮想オブジェクトを観察することができる。そのような場合、左右の目のための別個のディスプレイパネル及び画像フレームが必要とされない場合がある。

【0116】

図５に示すように、いくつかの実施形態では、アイトラッキングデバイス１３０（例えば、視線トラッキングデバイス）は、少なくとも１つのアイトラッキングカメラ（例えば、赤外線（ＩＲ）カメラ又は近ＩＲ（ＮＩＲ）カメラ）、並びに光（例えば、ＩＲ光又はＮＩＲ光）をユーザの目に向けて発する照明源（例えば、ＬＥＤのアレイ若しくはリングなどのＩＲ光源又はＮＩＲ光源）を含む。アイトラッキングカメラは、ユーザの目に向けられて、光源からの反射ＩＲ又はＮＩＲ光を目から直接受信してもよく、又は代替的に、ユーザの目と、視覚的光が通過することを可能にしながら目からアイトラッキングカメラにＩＲ又はＮＩＲ光を反射させるディスプレイパネルとの間に配置される「ホット」ミラーに向けられてもよい。アイトラッキングデバイス１３０は、任意選択的に、ユーザの目の画像を（例えば、６０～１２０フレーム／秒（ｆｐｓ）でキャプチャされるビデオストリームとして）キャプチャし、画像を解析して、視線追跡情報を生成し、視線追跡情報をコントローラ１１０に通信する。いくつかの実施形態では、ユーザの両目は、それぞれのアイトラッキングカメラ及び照明源によって別々に追跡される。いくつかの実施形態では、ユーザの片目のみが、個別のアイトラッキングカメラ及び照明源によって追跡される。

【0117】

いくつかの実施形態では、アイトラッキングデバイス１３０は、デバイス固有の較正プロセスを使用して較正されて、特定の動作環境１００用のアイトラッキングデバイスのパラメータ、例えば、ＬＥＤ、カメラ、ホットミラー（存在する場合）、接眼レンズ、及びディスプレイスクリーンの３Ｄ幾何学的関係及びパラメータを判定する。デバイス固有の較正プロセスは、ＡＲ／ＶＲ機器のエンドユーザへの配送前に、工場又は別の施設で実行されてもよい。デバイス固有の較正プロセスは、自動較正プロセスであってもよく、又は手動較正プロセスであってもよい。ユーザ固有の較正プロセスは、特定のユーザの目パラメータ、例えば、瞳孔ロケーション、中心視覚ロケーション、光軸、視軸、目間隔などの推定を含んでもよい。いくつかの実施形態によれば、いったんアイトラッキングデバイス１３０についてデバイス固有及びユーザ固有のパラメータが判定されると、アイトラッキングカメラによってキャプチャされた画像は、グリント支援方法を使用して処理され、ディスプレイに対するユーザの現在の視覚軸及び視点を判定することができる。

【0118】

図５に示されるように、アイトラッキングデバイス１３０（例えば、１３０Ａ又は１３０Ｂ）は、接眼レンズ（単数又は複数）５２０と、アイトラッキングが行われるユーザの顔の側に配置された少なくとも１つのアイトラッキングカメラ５４０（例えば、赤外線（ＩＲ）又は近ＩＲ（ＮＩＲ）カメラ）と光（例えば、ＩＲ又はＮＩＲ光）をユーザの目（単数又は複数）５９２に向かって発する照明源５３０（例えば、ＮＩＲ発光ダイオード（ＬＥＤ）のアレイ若しくはリングなどのＩＲ又はＮＩＲ光源）とを含む視線トラッキングシステムと、を含む。アイトラッキングカメラ５４０は、ユーザの目（単数又は複数）５９２とディスプレイ５１０（例えば、ヘッドマウントディスプレイの左若しくは右側のディスプレイパネル、又はハンドヘルドデバイスのディスプレイ、プロジェクタなど）との間に位置し、（例えば、図５の上部に示されるように）可視光を透過させながら、目（単数又は複数）５９２からのＩＲ又はＮＩＲ光を反射するミラー５５０に向けられてもよく、あるいは、（例えば、図５の下部に示されるように）反射された目（単数又は複数）５９２からのＩＲ又はＮＩＲ光を受光するようにユーザの目（単数又は複数）５９２に向けられてもよい。

【0119】

いくつかの実施形態では、コントローラ１１０は、ＡＲ又はＶＲフレーム５６２（例えば、左及び右のディスプレイパネルの左及び右のフレーム）をレンダリングし、フレーム５６２をディスプレイ５１０に提供する。コントローラ１１０は、様々な目的のために、例えば、表示のためにフレーム５６２を処理する際に、アイトラッキングカメラ５４０からの視線トラッキング入力５４２を使用する。コントローラ１１０は、任意選択的に、グリント支援方法又は他の適切な方法を使用して、アイトラッキングカメラ５４０から得られた視線トラッキング入力５４２に基づいて、ディスプレイ５１０上のユーザの視点を推定する。視線トラッキング入力５４２から推定された視点は、任意選択的に、ユーザが現在見ている方向を判定するために使用される。

【0120】

以下、ユーザの現在の視線方向のいくつかの可能な使用事例について説明するが、これは限定することを意図するものではない。例示的な使用例として、コントローラ１１０は、判定されたユーザの視線方向に基づいて、仮想コンテンツを異なってレンダリングすることができる。例えば、コントローラ１１０は、周辺領域においてよりもユーザの現在の視線方向から判定された中心視覚領域において、より高い解像度で仮想コンテンツを生成してもよい。別の例として、コントローラは、ユーザの現在の視線方向に少なくとも部分的に基づいて、ビュー内の仮想コンテンツを位置決め又は移動させてもよい。別の例として、コントローラは、ユーザの現在の視線方向に少なくとも部分的に基づいて、ビュー内に特定の仮想コンテンツを表示してもよい。ＡＲアプリケーションにおける別の例示的な使用事例として、コントローラ１１０は、ＸＲ体験の物理的環境をキャプチャして、判定された方向に焦点を合わせるように外部カメラを方向付けることができる。次いで、外部カメラの自動焦点機構は、ユーザが現在ディスプレイ５１０上で見ている環境内のオブジェクト又は表面に焦点を合わせることができる。別の例示的な使用事例として、接眼レンズ５２０は集束可能なレンズであってもよく、視線トラッキング情報がコントローラによって使用されて、ユーザが現在見ている仮想オブジェクトが、ユーザの目５９２の収束に一致するために適切な両目連動を有するように接眼レンズ５２０の焦点を調整する。コントローラ１１０は、視線トラッキング情報を活用して、ユーザが見ている近接オブジェクトが正しい距離で現れるように接眼レンズ５２０を方向付けて焦点を調整することができる。

【0121】

いくつかの実施形態では、アイトラッキングデバイスは、ウェアラブルハウジングに取り付けられた、ディスプレイ（例えば、ディスプレイ５１０）、２つの接眼レンズ（例えば、接眼レンズ（単数又は複数）５２０）、アイトラッキングカメラ（例えば、アイトラッキングカメラ（単数又は複数）５４０）、及び光源（例えば、光源５３０（例えば、ＩＲ ＬＥＤ又はＮＩＲ ＬＥＤ））を含むヘッドマウントデバイスの一部である。光源は、ユーザの目（単数又は複数）５９２に向かって光（例えば、ＩＲ光又はＮＩＲ光）を発する。いくつかの実施形態では、光源は、図５に示されるように、各レンズの周りにリング又は円状に配置されてもよい。いくつかの実施形態では、８つの光源５３０（例えば、ＬＥＤ）が、一例として各レンズ５２０の周りに配置される。しかしながら、より多くの又はより少ない光源５３０が使用されてもよく、光源５３０の他の配置及びロケーションが用いられてもよい。

【0122】

いくつかの実施形態では、ディスプレイ５１０は、可視光範囲内の光を発し、ＩＲ又はＮＩＲ範囲内の光を発さないため、視線トラッキングシステムにノイズを導入しない。アイトラッキングカメラ（単数又は複数）５４０のロケーション及び角度は、例として与えられ、限定することを意図するものではないことに留意されたい。いくつかの実施形態では、単一のアイトラッキングカメラ５４０がユーザの顔の各側に位置する。いくつかの実施形態では、２つ以上のＮＩＲカメラ５４０をユーザの顔の各側に使用することができる。いくつかの実施形態では、より広い視野（ＦＯＶ）を有するカメラ５４０と狭いＦＯＶを有するカメラ５４０が、ユーザの顔の各側に使用されてもよい。いくつかの実施形態では、１つの波長（例えば、８５０ｎｍ）で動作するカメラ５４０と異なる波長（例えば、９４０ｎｍ）で動作するカメラ５４０とが、ユーザの顔の各側に使用されてもよい。

【0123】

図５に示すような視線トラッキングシステムの実施形態は、例えば、コンピュータ生成現実、仮想現実、及び／又は複合現実アプリケーションに使用されて、コンピュータ生成現実、仮想現実、拡張現実、及び／又は拡張仮想の体験をユーザに提供することができる。

【0124】

図６は、いくつかの実施形態による、グリント支援視線追跡パイプラインを示す。いくつかの実施形態では、視線トラッキングパイプラインは、グリント支援視線トラッキングシステム（例えば、図１及び図５に示されるようなアイトラッキングデバイス１３０）によって実現される。グリント支援視線トラッキングシステムは、追跡状態を維持することができる。当初、追跡状態はオフ又は「いいえ」である。追跡状態にあるとき、グリント支援視線トラッキングシステムは、現フレームを解析する際に前のフレームからの先行情報を使用して、現フレーム内の瞳孔輪郭及びグリントを追跡する。追跡状態にない場合、グリント支援視線トラッキングシステムは、現フレーム内の瞳孔及びグリントを検出しようとし、それに成功した場合、追跡状態を「はい」に初期化し、追跡状態で次のフレームに続く。

【0125】

図６に示されるように、視線追跡カメラは、ユーザの左目及び右目の左右の画像をキャプチャすることができる。次いで、キャプチャされた画像は、６１０で開始される処理のために視線トラッキングパイプラインに入力される。要素６００に戻る矢印によって示されるように、視線トラッキングシステムは、例えば、毎秒６０～１２０フレームの速度で、ユーザの目の画像をキャプチャし続けることができる。いくつかの実施形態では、キャプチャされた画像の各セットが、処理のためにパイプラインに入力されてもよい。しかしながら、いくつかの実施形態、又はいくつかの条件下では、全てのキャプチャされたフレームがパイプラインによって処理されるわけではない。

【0126】

６１０で、現在のキャプチャされた画像について、追跡状態がはいである場合、この方法は要素６４０に進む。６１０で、追跡状態がいいえである場合、６２０に示されるように、画像が解析されて、画像内のユーザの瞳孔及びグリントを検出する。６３０で、瞳孔とグリントが正常に検出される場合、方法は要素６４０に進む。正常に検出されない場合、方法は要素６１０に戻り、ユーザの目の次の画像を処理する。

【0127】

６４０において、要素６１０から進む場合、以前のフレームからの前の情報に部分的に基づいて瞳孔及びグリントを追跡するために、現在のフレームが分析される。６４０で、要素６３０から進む場合、現フレーム内の検出された瞳孔及びグリントに基づいて、追跡状態が初期化される。要素６４０での処理の結果は、追跡又は検出の結果が信頼できることを確認するためにチェックされる。例えば、結果は、瞳孔及び視線推定を実行するための十分な数のグリントが現フレームで正常に追跡又は検出されるかどうかを判定するためにチェックすることができる。６５０で、結果が信頼できない場合、追跡状態は要素６６０でいいえに設定され、方法は要素６１０に戻り、ユーザの目の次の画像を処理する。６５０で、結果が信頼できる場合、方法は要素６７０に進む。６７０で、追跡状態は、はいに設定され（まだ、はいではない場合）、瞳孔及びグリント情報が要素６８０に渡されて、ユーザの視点を推定する。

【0128】

図６は、特定の実施で使用され得るアイトラッキング技術の一例として機能することを意図している。当業者によって認識されるように、現在存在するか、又は将来開発される他のアイトラッキング技術は、様々な実施形態によるＸＲ体験をユーザに提供するためにコンピュータシステム１０１において、本明細書に記載されるグリント支援アイトラッキング技術の代わりに、又はそれと組み合わせて使用することができる。

【0129】

本開示では、コンピュータシステムとの相互作用に関して、様々な入力方法が説明される。一例が１つの入力デバイス又は入力方法を使用して提供され、別の例が別の入力デバイス又は入力方法を使用して提供される場合、各例は、別の例に関して記載された入力デバイス又は入力方法と互換性があり得、任意選択的にそれらを利用することを理解されたい。同様に、様々な出力方法が、コンピュータシステムとの相互作用に関して説明される。一例が１つの出力デバイス又は出力方法を使用して提供され、別の例が別の出力デバイス又は出力方法を使用して提供される場合、各例は、別の例に関して記載された出力デバイス又は出力方法と互換性があり得、任意選択的にそれらを利用することを理解されたい。同様に、様々な方法が、コンピュータシステムを介した仮想環境又は複合現実環境との相互作用に関して説明される。一例が仮想環境との相互作用を使用して提供され、別の例が複合現実環境を使用して提供される場合、各例は、別の例に関して説明された方法と互換性があり得、任意選択的にそれらを利用することを理解されたい。したがって、本開示は、各例示的な実施形態の説明における実施形態の全ての特徴を網羅的に列挙することなく、複数の例の特徴の組み合わせである実施形態を開示する。
ユーザインタフェース及び関連するプロセス

【0130】

ここで、ユーザインタフェース（user interfaces、「ＵＩ」）の実施形態、並びに、表示生成構成要素及び１つ以上の入力デバイスと通信しているポータブル多機能デバイス又はヘッドマウントデバイスなどのコンピュータシステム上で実現することができる関連プロセスに注目する。

【0131】

図７Ａ～図７Ｎは、いくつかの実施形態による、メディアアイテム及びユーザインタフェースと相互作用するための例示的な技術を示す。図８～図１０は、それぞれ、メディアアイテム及びユーザインタフェースと相互作用するための例示的な方法８００、９００、及び１０００のフロー図である。図７Ａ～図７Ｎのユーザインタフェースは、図８～図１０のプロセスを含む、以下で説明されるプロセスを示すために使用される。

【0132】

図７Ａは、ディスプレイデバイス（例えば、タッチ感知ディスプレイ）７０２と、１つ以上の入力センサ７１５（例えば、１つ以上のカメラ、視線追跡装置、手の移動追跡装置、及び／又は頭部の移動追跡装置）とを含むタブレットであるコンピュータシステム７００を示す。以下で説明するいくつかの実施形態では、コンピュータシステム７００はタブレットである。いくつかの実施形態では、コンピュータシステム７００は、スマートフォン、ウェアラブルデバイス、ウェアラブルスマートウォッチデバイス、ヘッドマウントシステム（例えば、ヘッドセット）、又はディスプレイデバイス（例えば、ディスプレイスクリーン、投影デバイスなど）を含む、かつ／又はそれと通信している他のコンピュータシステムである。コンピュータシステム７００は、コンピュータシステム（例えば、図１のコンピュータシステム１０１）である。

【0133】

図７Ａにおいて、コンピュータシステム７００は、ディスプレイデバイス（例えば、タッチ感知ディスプレイ又はＨＭＤのディスプレイ）７０２を介して、メディアウィンドウ７０４及び三次元環境７０６を表示する。いくつかの実施形態では、三次元環境７０６は、（図７Ａに示されるように）ディスプレイによって表示される。いくつかの実施形態では、三次元環境７０６は、１つ以上のカメラによってキャプチャされた物理的環境の仮想環境像又は画像（又はビデオ）である。いくつかの実施形態では、三次元環境７０６は、メディアウィンドウ７０４の背後でユーザに可視であるが、ディスプレイによって表示されない。例えば、いくつかの実施形態では、三次元環境７０６は、ディスプレイによって表示されることなく、メディアウィンドウ７０４の背後で（例えば、透明なディスプレイを通して）ユーザに可視である物理的環境である。

【0134】

図７Ａにおいて、電子機器７００は、メディアウィンドウ７０４内に、メディアライブラリユーザインタフェース７０８を表示する。メディアライブラリユーザインタフェース７０８は、複数のメディアアイテム７１０Ａ～７１０Ｅの表現を含む。いくつかの実施形態では、複数のメディアアイテムは、写真及び／又はビデオ（例えば、立体視写真及び／又はビデオ及び／又は非立体視写真及び／又はビデオ）を含む。いくつかの実施形態では、複数のメディアアイテムは、メディアライブラリ（例えば、デバイス７００及び／又はデバイス７００のユーザに関連付けられたメディアライブラリ）からの複数のメディアアイテム及び／又はメディアアイテムのサブセットを含む。いくつかの実施形態では、複数のメディアアイテム７１０Ａ～７１０Ｅは、１つ以上の立体視メディアアイテム（例えば、立体視写真及び／又は立体視ビデオ）と、１つ以上の非立体視メディアアイテム（例えば、非立体視写真及び／又は非立体視ビデオ）とを含む。いくつかの実施形態では、立体視メディアアイテムは、特定のタイプの深度情報を含むが、非立体視メディアアイテムは、特定のタイプの深度情報を含まない。いくつかの実施形態では、立体視メディアアイテムは、２つの異なるカメラ（又はカメラの２つの異なるセット）を使用して同時にキャプチャされた少なくとも２つの画像を含むメディアアイテムである。いくつかの実施形態では、立体視メディアアイテムは、ユーザの第１の目に対して、第１のカメラ（又はカメラの第１のセット）によってキャプチャされた第１の画像を表示し（例えば、第１の画像がユーザの第２の目に対して表示されることなく）、ユーザの第２の目に対して、第１の画像とは異なるが、第２のカメラ（又はカメラの第２のセット）によって第１の画像と同時にキャプチャされた第２の画像を同時に表示する（例えば、第２の画像がユーザの第１の目に対して表示されることなく）ことによって表示される。非立体視画像は、例えば、単一のカメラによってキャプチャされた静止画像及び／又は単一のカメラによってキャプチャされたビデオを含む。いくつかの実施形態では、非立体視メディアアイテムは、例えば、複数のカメラによってキャプチャされる（例えば、複数のカメラによって同時にキャプチャされる）複数の画像を含むが、異なる画像は、ユーザの異なる目に同時に提示されない（例えば、複数の画像は、ユーザの両目に提示される単一の画像に組み合わせられる）。いくつかの実施形態では、立体視メディアアイテム及び／又は非立体視メディアアイテムは、（例えば、デバイス７００の一部である、及び／又はデバイス７００と通信している１つ以上のカメラを使用して）デバイス７００によってキャプチャされる。

【0135】

メディアライブラリユーザインタフェース７０８は、オプション７１２Ａ～７１２Ｅを含む。オプション７１２Ａは、（例えば、非立体視メディアアイテムを表示することなく）立体視メディアアイテムのセットを表示するために選択可能である。いくつかの実施形態では、オプション７１２Ａは、非立体視メディアアイテムの表現を含むことなく、１つ以上の立体視メディアアイテムの表現を含むユーザインタフェースを表示するために選択可能である。オプション７１２Ｂは、メディアライブラリからの複数のメディアアイテム（例えば、特定の時間、イベント、及び／又はロケーションに関連付けられたメディアアイテムの集合）を集約することによって（例えば、自動的に）生成される集約コンテンツアイテムのセットを表示するために選択可能である。オプション７１２Ｃは、メディアライブラリユーザインタフェース７０８を表示するために選択可能である。オプション７１２Ｄは、メディアアイテムのアルバム（例えば、メディアアイテムの収集）（例えば、手動でキュレーションされたメディアアイテムの収集及び／又は自動的に生成されたメディアアイテムの収集）を表示するために選択可能である。オプション７１２Ｅは、メディアアイテムのテキスト検索を行うプロセスを開始するために選択可能である（例えば、テキスト検索ユーザインタフェースを表示するために選択可能である）。

【0136】

図７Ａにおいて、コンピュータシステム７００は、視覚特性の第１のセットを用いてメディアアイテム７１０Ａを表示する。図７Ａにおいて、コンピュータシステム７００は、注視インジケーション７１４によって示されるように、ユーザがメディアアイテム７１０Ａを注視していることを（例えば、センサ７１５を介して）検出する。いくつかの実施形態では、注視インジケーション７１４は、コンピュータシステム７００によって表示されない。

【0137】

図７Ｂにおいて、ユーザが閾値持続時間にわたって（例えば、別のメディアアイテムを注視することなく継続的に）メディアアイテム７１０Ａを注視したという判定に応じて、コンピュータシステム７００は、メディアアイテム７１０Ａの１つ以上の視覚特性を修正し、視覚特性の第１のセットとは異なる視覚特性の第２のセットを用いてメディアアイテム７１０Ａを表示する。

【0138】

いくつかの実施形態では、メディアアイテム７１０Ａの１つ以上の視覚特性を修正すること、及び／又はメディアアイテム７１０Ａを視覚特性の第２のセットを用いて表示することは、メディアアイテム７１０Ａの要素を所定の軸に沿って分離及び／又は拡張すること（例えば、メディアアイテム７１０Ａの表示を二次元オブジェクトから三次元オブジェクトに変更すること）を含む。例えば、いくつかの実施形態では、メディアアイテム７１０Ａの１つ以上の視覚特性を修正することの一部として、コンピュータシステム７００は、メディアアイテム７１０Ａの表示をメディアアイテム７１０Ａの個別の軸（例えば、メディアアイテム７１０Ａのｚ軸）に沿って拡大して、ユーザがメディアアイテム７１０Ａを深度（例えば、厚さ）を有する三次元オブジェクトとして知覚するようにする。いくつかの実施形態では、メディアアイテム７１０Ａは、メディアアイテム７１０Ａが深度情報（例えば、特定のタイプの深度情報）を含む（例えば、メディアアイテム７１０Ａが立体視メディアアイテムである）という判定に基づいて（例えば、判定に応じて）、メディアアイテム７１０Ａの個別の軸に沿って拡大される。例えば、メディアアイテム７１０Ａがメディアアイテム７１０Ａの個別の軸に沿って拡張されると、メディアアイテム７１０Ａ内の要素の第１のセットは、第１の深度（例えば、拡張されたメディアアイテム７１０Ａのｚ軸に沿った第１のｚポジション）で表示され、メディアアイテム７１０Ａ内の要素の第２のセットは、第１の深度とは異なる第２の深度（例えば、拡張されたメディアアイテム７１０Ａのｚ軸上の第２のｚポジション）で表示される。

【0139】

いくつかの実施形態では、メディアアイテム７１０Ａを注視している間に、ユーザが（例えば、ＨＭＤを装着しながら自身の頭部を動かす及び／若しくは回すことによって、並びに／又はディスプレイデバイス７０２に対して自身の身体を動かすことによって）自身の視点をシフトさせると、メディアアイテム７１０Ａ内のコンテンツは、ユーザが自身の視点をシフトさせることに応じてシフトする。いくつかの実施形態では、視差効果は、例えば、ユーザからより遠いメディアアイテム７１０Ａの層が、ユーザにより近いメディアアイテム７１０Ａの層よりもゆっくりと（又はより少ない量だけ）移動するように実現される。

【0140】

いくつかの実施形態では、メディアアイテム７１０Ａの１つ以上の視覚特性を修正すること、及び／又は視覚特性の第２のセットを用いてメディアアイテム７１０Ａを表示することは、メディアアイテム７１０Ａを後方に（例えば、ユーザから離れるように）押すことを含む。例えば、いくつかの実施形態では、図７Ｂにおいて、ユーザが閾値持続時間にわたってメディアアイテム７１０Ａを注視したという判定に応じて、コンピュータシステム７００は、メディアアイテム７１０Ａをプッシュバックしながら、メディアアイテム７１０Ｂ～７１０Ｅの表示された深度を維持する。いくつかの実施形態では、メディアアイテム７１０Ａは、メディアアイテム７１０Ａが特定のタイプの深度情報を含む（例えば、立体視メディアアイテムである）という判定に基づいて、後方に押される。

【0141】

いくつかの実施形態では、メディアアイテム７１０Ａの１つ以上の視覚特性を修正すること、及び／又は視覚特性の第２のセットを用いてメディアアイテム７１０Ａを表示することは、メディアアイテム７１０Ａを自動再生すること（例えば、（例えば、ユーザ視線以外の更なるユーザ入力なしに）自動的に再生すること）を含む。例えば、いくつかの実施形態では、メディアアイテム７１０Ａがビデオ（例えば、立体視ビデオ又は非立体視ビデオ）である場合、ユーザが閾値持続時間にわたってメディアアイテム７１０Ａを注視したという判定に応じて、コンピュータシステム７００は、メディアライブラリユーザインタフェース７０８内でメディアアイテム７１０Ａのビデオコンテンツの再生を開始する。いくつかの実施形態では、（例えば、ユーザの視線に応じて）メディアアイテム７１０Ａを自動再生することは、メディアライブラリユーザインタフェース７０８内でメディアアイテム７１０Ａを再生するときにローパスフィルタ（例えば、ぼかしフィルタ及び／又は平滑化フィルタ）を適用することを含む。いくつかの実施形態では、ローパスフィルタは、（例えば、以下の図７Ｍ～図７Ｎを参照して説明されるように、例えば、選択されたメディアユーザインタフェース７１９内で）選択された状態のメディアアイテム７１０Ａを再生するときに除去される。いくつかの実施形態では、メディアライブラリユーザインタフェース７０８内でメディアアイテム７１０Ａを自動再生することは、メディアアイテム７１０Ａが選択された状態で（例えば、以下の図７Ｍ～図７Ｎを参照して説明されるように、例えば、選択されたメディアユーザインタフェース７１９内で）再生されるときよりも低い音量でメディアアイテム７１０Ａのオーディオコンテンツを出力することを含む。

【0142】

いくつかの実施形態では、ユーザの視線がメディアアイテム７１０Ａから離れて（例えば、別のメディアアイテム７１０Ｂ～７１０Ｅに）移動すると、コンピュータシステム７００は、視覚特性の第２のセットを用いたメディアアイテム７１０Ａの表示を中止する（例えば、メディアアイテム７１０Ａの自動再生を中止する）（例えば、視覚特性の第２のセットを用いたメディアアイテム７１０Ａの表示から、視覚特性の第１のセットを用いたメディアアイテム７１０Ａの表示及び／又は視覚特性の第３のセットを用いたメディアアイテム７１０Ａの表示に戻る）。

【0143】

図７Ｃにおいて、視覚特性の第２のセットを用いてメディアアイテム７１０Ａを表示している間に、コンピュータシステム７００は、注視インジケーション７１４によって示されるように、ユーザの視線がメディアアイテム７１０Ｃに対応するメディアライブラリユーザインタフェース７０８内の異なるポジションに移動したことを検出する。図７Ｃにおいて、ユーザの視線がメディアアイテム７１０Ｃに移動したと判定したことに応じて、コンピュータシステム７００は、視覚特性の第２のセットを用いたメディアアイテム７１０Ａの表示を中止し、（図７Ａに表示されていたように）視覚特性の第１のセットを用いてメディアアイテム７１０Ａを表示する。更に、ユーザの視線がメディアアイテム７１０Ｃに移動した（及び、任意選択的に、閾値持続時間にわたって維持された）という判定に応じて、コンピュータシステム７００は、メディアアイテム７１０Ｃを、視覚特性の第３のセット（例えば、図７Ａ～図７Ｂ）で表示される状態から、視覚特性の第４のセット（例えば、図７Ｃ）で表示される状態に遷移させる。いくつかの実施形態では、視覚特性の第３のセットは、視覚特性の第１のセットと同じである。いくつかの実施形態では、視覚特性の第４のセットは、視覚特性の第２のセットと同じである。いくつかの実施形態では、視覚特性の第１のセットから視覚特性の第２のセットへの遷移に関して上記で説明した例は、視覚特性の第３のセットから視覚特性の第４のセットへの遷移に適用され得る。

【0144】

図７Ｃにおいて、メディアライブラリユーザインタフェース７０８内に視覚特性の第４のセットを用いてメディアアイテム７１０Ｃを表示している間に、コンピュータシステム７００は、ユーザジェスチャ７１６を（例えば、センサ７１５を介して）検出する。いくつかの実施形態では、ユーザジェスチャ７１６及び本明細書で説明される様々なユーザジェスチャは、１つ以上のタッチ入力（例えば、タッチ感知ディスプレイなどのディスプレイデバイス７０２）を含む。いくつかの実施形態では、ユーザジェスチャ７１６及び本明細書で説明される様々なユーザジェスチャは、（例えば、カメラ及び／又は身体移動センサ（例えば、手移動センサ及び／又は頭部移動センサ）によってキャプチャされるような）１つ以上のエアジェスチャ（例えば、既定の方式でのユーザの身体の１つ以上の部分の移動）を含む。いくつかの実施形態では、エアジェスチャは、ユーザがデバイスの一部である入力要素に触れることなく（又はデバイスの一部である入力要素から独立して）検出されるジェスチャであり、絶対的な基準に対するユーザの身体の動き（例えば、地面に対するユーザの腕の角度、又は地面に対するユーザの手の距離）、ユーザの身体の別の部分に対するユーザの身体の動き（例えば、ユーザの肩に対するユーザの手の動き、ユーザの一方の手に対するユーザの他方の手の移動、及び／又はユーザの手の別の指若しくは部分に対するユーザの指の移動）、及び／又は、ユーザの身体の一部の絶対的な動き（例えば、所定の量及び／又は速さによる所定のポーズでの手の移動を含むタップジェスチャ、又はユーザの身体の一部の所定の速さ又は量の回転を含むシェイクジェスチャ）を含む、ユーザの身体の一部の検出された動きに基づく。いくつかの実施形態では、ユーザジェスチャ７１６は、ピンチアンドドラッグジェスチャ（例えば、ピンチアンドドラッグエアジェスチャ）を含み、ユーザは、自分の手で既定のピンチ形状を形成し、（例えば、手が既定のピンチ形状を維持している間に）既定のピンチ形状を形成している手を特定の方向にドラッグする（例えば、移動させる）（例えば、上方向のピンチアンドドラッグジェスチャ）。いくつかの実施形態では、既定のピンチ形状は、ユーザが一方の手の親指の端部に近接した領域を同じ手の１本以上の他の指の端部（単数又は複数）と接触させる形状である。いくつかの実施形態では、図７Ｃにおいて、メディアライブラリユーザインタフェース７０８を表示している間に、コンピュータシステム７００は、（例えば、センサ７１５を介して）既定の形状（例えば、既定のピンチ形状）を作るユーザの手を検出し、（例えば、既定の形状を維持しながら）既定の（例えば、上）方向に移動するユーザの手を検出する。

【0145】

図７Ｄにおいて、ユーザジェスチャ７１６の検出に応じて、コンピュータシステム７００は、メディアライブラリユーザインタフェース７０８を上方にスクロールする。いくつかの実施形態では、メディアライブラリユーザインタフェース７０８は、ユーザジェスチャ７１６の方向及び大きさに基づいて（例えば、ピンチアンドドラッグジェスチャの移動の方向及び大きさに基づいて（例えば、ユーザのピンチされた手の方向、及びユーザのピンチされた手がどれだけ移動するかに基づいて））上方にスクロールされる。その結果、メディアライブラリユーザインタフェース７０８は、もはやメディアアイテム７１０Ａ～７１０Ｂを含まず、メディアアイテム７１０Ｃ～７１０Ｅを上方に移動させ、メディアアイテム７１０Ｆを表示する。更に、図７Ｄにおいて、コンピュータシステム７００は、注視インジケーション７１４によって示されるように、ユーザの視線がメディアアイテム７１０Ｆに向けられていることを検出する。図７Ｄにおいて、ユーザの視線が閾値持続時間にわたってメディアアイテム７１０Ｆ上に維持されているという判定に応じて、コンピュータシステム７００は、視覚特性の第５のセット（例えば、二次元及び／又は拡張されていない）を有するメディアアイテム７１０Ｆの表示から、視覚特性の第５のセットとは異なる視覚特性の第６のセット（例えば、三次元及び／又は拡張された）を有するメディアアイテム７１０Ｆの表示に遷移させる。いくつかの実施形態では、視覚特性の第５のセットは、第１及び／又は視覚特性の第３のセットと同じである。いくつかの実施形態では、視覚特性の第６のセットは、第２の及び／又は視覚特性の第４のセットと同じである。いくつかの実施形態では、視覚特性の第１のセットから視覚特性の第２のセットへの遷移に関して上記で説明した例は、視覚特性の第５のセットから視覚特性の第６のセットへの遷移にも適用され得る。

【0146】

図７Ｄにおいて、ユーザの視線がメディアアイテム７１０Ｆ上に維持されている間、コンピュータシステム７００は、ユーザジェスチャ７１８を検出する。いくつかの実施形態では、ユーザジェスチャ７１８は、ズームインコマンドに対応する。いくつかの実施形態では、ユーザジェスチャ７１８は、両手ピンチ解除ジェスチャ（例えば、両手ピンチ解除エアジェスチャ）（例えば、２つのピンチされた手が互いから離れるように動かされるジェスチャ）を含む。いくつかの実施形態では、両手ピンチ解除ジェスチャを検出することは、コンピュータシステム７００が、ユーザの第１の手が既定の形状（例えば、既定のピンチ形状）を形成したことを検出することと、コンピュータシステム７００が、ユーザの第２の手が既定の形状（例えば、所定のピンチ形状）を形成したことを検出することと、コンピュータシステム７００が、第１の時点で、既定の形状を形成する第１の手と、既定の形状を形成する第２の手とが互いに第１の距離にあることを検出することと、第２の時点に続いて、コンピュータシステム７００が、既定の形状を形成する第１の手と、既定の形状を形成する第２の手とが互いに第２の距離に移動されたことを検出することと、を含み、第２の距離は第１の距離よりも大きい。いくつかの実施形態では、ユーザジェスチャ７１８は、片手ピンチジェスチャ又は片手ダブルピンチジェスチャ（例えば、ユーザの片手が素早く連続して２つのピンチジェスチャ（例えば、互いの閾値持続時間内に２つのピンチジェスチャ）を行う）を含む。いくつかの実施形態では、コンピュータシステム７００が片手ピンチジェスチャを検出することは、コンピュータシステム７００が、２本の指が互いの閾値距離内になるまで（例えば、２本の指が閾値距離よりも互いに近くなるまで（例えば、２本の指が互いに接触するまで））ユーザの指のうちの２本以上が互いに近づくことを含むピンチを検出することを含む。いくつかの実施形態では、コンピュータシステム７００が片手ダブルピンチジェスチャを検出することは、コンピュータシステム７００が、２本の指が互いの閾値距離内になるまで（例えば、２本の指が閾値距離よりも互いに近くなるまで（例えば、２本の指が互いに接触するまで））ユーザの指のうちの２本以上が互いに近づくことを含む第１のピンチを検出することを含む。２本の指が離れていることを検出した後に、コンピュータシステム７００は、２本の指が互いの閾値距離内になるまで（例えば、２本の指が閾値距離よりも互いに近づくまで（例えば、２本の指が互いに接触するまで））ユーザの指のうちの２本以上が互いに近づくことを含む第２のピンチを検出する。いくつかの実施形態では、片手ダブルピンチジェスチャは、第１のピンチの閾値期間内に第２のピンチを検出することを含む（例えば、第２のピンチは、第１のピンチが開始及び／又は完了された後の閾値期間内に開始及び／又は完了される）。

【0147】

図７Ｅにおいて、ユーザの視線がメディアアイテム７１０Ｆに向けられている間にズームインコマンドに対応するユーザジェスチャ７１８を検出したことに応じて、コンピュータシステム７００は、メディアアイテム７１０Ｆをズームイン動作の中心及び／又はフォーカスとしてメディアライブラリユーザインタフェース７０８上でズームインする。したがって、図７Ｅでは、メディアアイテム７１０Ｆは、図７Ｄよりも大きいサイズで表示される。いくつかの実施形態では、ユーザの視線が異なるメディアアイテムに向けられた場合、ズームインユーザコマンドは、メディアアイテム７１０Ｆにズームインするのではなく、異なるメディアアイテムにズームインすることになる。いくつかの実施形態では、ズーム動作の大きさ（例えば、コンピュータシステム７００がメディアライブラリユーザインタフェース７０８上でどの程度ズームインするか）は、両手ピンチ解除ジェスチャ（例えば、エアジェスチャ）の方向及び／又は大きさに基づいて（例えば、ユーザの第１のピンチされた手がユーザの第２のピンチされた手からどの程度移動するかに基づいて）判定される。いくつかの実施形態では、ユーザジェスチャ７１８が片手ピンチ及び／又は片手ダブルピンチジェスチャ（例えば、エアジェスチャ）である場合、コンピュータシステム７００は、メディアライブラリユーザインタフェース７０８を所定の量（例えば、デフォルト量）だけズームインする。いくつかの実施形態では、コンピュータシステム７００がヘッドマウントデバイスであるとき、コンピュータシステム７００は、コンピュータシステム７００の２つの別個のディスプレイデバイス上のメディア７１０Ｆの表示のズームレベルを別個に増加させ、コンピュータシステム７００の各ディスプレイデバイスは、ユーザの個別の目に対応する（例えば、各ディスプレイデバイスは、ユーザの個別の目に可視である）。

【0148】

図７Ｄに戻ると、ユーザの視線がメディアアイテム７１０Ｆ上に維持されている間に、コンピュータシステム７００は、ユーザジェスチャ７１８を検出する。いくつかの実施形態では、図７Ｅを参照して上述したように、ユーザジェスチャ７１８がズームインユーザコマンドに対応するのではなく、ユーザジェスチャ７１８がメディアアイテム選択コマンドに対応する。いくつかの実施形態では、メディアアイテム選択コマンドは、（例えば、上述したような）片手ピンチジェスチャ（例えば、エアジェスチャ）を含む（例えば、片手ピンチジェスチャである）。いくつかの実施形態では、メディアアイテム選択コマンドは、（例えば、上述したような）両手ピンチ解除ジェスチャ（例えば、エアジェスチャ）を含む（例えば、両手ピンチ解除ジェスチャである）。いくつかの実施形態では、複数のジェスチャが単一のコマンドに対応する（例えば、異なるジェスチャが同じ結果をもたらす）。

【0149】

図７Ｆにおいて、ユーザの視線がメディアアイテム７１０Ｆに向けられている間にメディアアイテム選択コマンドに対応するユーザジェスチャ７１８を検出したことに応じて、コンピュータシステム７００は、メディアウィンドウ７０４内のメディアライブラリユーザインタフェース７０８の表示を中止し、メディアウィンドウ７０４内に、選択されたメディアユーザインタフェース７１９内のメディアアイテム７１０Ｆを表示する。いくつかの実施形態では、コンピュータシステム７００がヘッドマウントデバイスであるとき、コンピュータシステム７００は、メディアアイテム７１０Ｆの第１の表現（例えば、含まれたメディアアイテム７１０Ｆに含まれる環境の第１の透視図）をユーザの第１の目に表示し、コンピュータシステム７００は、メディアアイテム７１０Ｆの第２の表現（例えば、メディアアイテム７１０Ｆに含まれる環境の第２の透視図）をユーザの第２の目に表示し、それによって、ユーザは、立体視深度効果を伴ってメディアアイテム７１０Ｆを視認する。

【0150】

いくつかの実施形態では、図７Ｄのユーザジェスチャ７１８は、図７Ｆに示すシナリオでは、メディアアイテム選択コマンドに対応し、１つ以上の中間状態を含む。例えば、メディアアイテム選択コマンドが片手ピンチジェスチャである場合、ユーザは、ピンチジェスチャを実行するために、ゆっくりと及び／又は徐々に人差し指を親指に近づけることができる。いくつかの実施形態では、ユーザがメディアアイテム選択コマンドを進めるにつれて、図７Ｄのメディアアイテム７１０Ｆの１つ以上の分離された要素は、（例えば、既定の軸に沿って（例えば、ｚ軸に沿って））徐々に互いに近づくように移動する。いくつかの実施形態では、ユーザジェスチャが完了閾値を超えると、メディアアイテム７１０Ｆは、（例えば、図７Ｆに見られるように）１つ以上の要素が再拡張された状態で、選択されたメディアユーザインタフェース７１９に表示される。いくつかの実施形態では、完了閾値に達する前にユーザがメディアアイテム選択ジェスチャの実行を中止した（例えば、ユーザが完了閾値に達する前にピンチジェスチャを停止した、及び／又は完了閾値に達する前に自身の人差し指と親指を離して広げた）場合、図７Ｄのメディアアイテム７１０Ｆの要素は、メディアライブラリユーザインタフェース７０８内で再拡張及び／又は分離する。いくつかの実施形態では、ユーザがメディアアイテム選択コマンドを進めるにつれて、図７Ｄの他のメディアアイテム（例えば、メディアアイテム７１０Ｃ～７１０Ｅ）は徐々にぼかされる（例えば、メディアアイテム選択コマンドが完了閾値に向かって進むにつれて、よりぼかされるようになる）。いくつかの実施形態では、特定のタイプのユーザジェスチャは、図７Ｄと図７Ｆとの間の中間段階の表示（例えば、メディアアイテムの漸進的なぼかし、並びに／又はメディアアイテム層及び／若しくは要素が互いに近づく漸進的な移動）をもたらすが、他のタイプのユーザジェスチャは、中間段階を表示することなく、図７Ｄのメディアライブラリユーザインタフェース７０８から図７Ｆの選択されたメディアユーザインタフェース７１９への遷移を直ちに引き起こす。例えば、いくつかの実施形態では、素早い片手ピンチジェスチャ（例えば、閾値時間内に完了する片手ピンチジェスチャ）は、中間状態を表示することなくメディアライブラリユーザインタフェース７０８から選択されたメディアユーザインタフェース７１９への即時の遷移をもたらし、一方、遅い片手ピンチジェスチャ又は両手ピンチ解除ジェスチャは、ユーザジェスチャに基づいてメディアライブラリユーザインタフェース７０８から選択されたメディアユーザインタフェース７１９へ遷移する間に中間状態を表示する。

【0151】

図７Ｆでは、選択されたメディアユーザインタフェース７１９が表示されると、三次元環境７０６が暗くなることが分かる。更に、メディアウィンドウ７０４は、メディアウィンドウ７０４から（例えば、三次元環境７０６内に）延びる１つ以上の照明効果７２６－１とともに表示される。いくつかの実施形態では、メディアアイテムを開くとき（例えば、メディアライブラリユーザインタフェース７０８から選択されたメディアユーザインタフェース７１９に遷移するとき）、メディアウィンドウ７０４から延びる照明効果（例えば、７２６－１）及び三次元環境７０６に適用される照明効果が徐々に実現及び／又は表示される。例えば、いくつかの実施形態では、図７Ｄから図７Ｆまで、ユーザジェスチャ７１８（メディアアイテム選択コマンド）に応じて、メディアアイテム７１０Ｆのサイズは、メディアウィンドウ７０４を満たすように徐々に増大され、三次元環境７０６は、徐々に暗くされ、照明効果７２６－１は、メディアウィンドウ７０４から徐々に延び、強度が徐々に増加する。同様に、いくつかの実施形態では、（例えば、選択されたメディアユーザインタフェース７１９からメディアライブラリユーザインタフェース７０８に遷移するために）メディアアイテムが閉じられると、メディアウィンドウ７０４から延び、三次元環境７０６に適用される照明効果が徐々に除去される（例えば、照明効果７２６－１の強度及びサイズが徐々に減少し、三次元環境７０６が徐々に明るくなる）。いくつかの実施形態では、コンピュータシステム７００がヘッドマウントデバイスである場合、コンピュータシステム７００は、ユーザが（例えば、コンピュータシステム７００を装着しながら）自身の頭部を回転させること及び／又は物理的環境の周りを歩くことに応じて、照明効果７２６－１の外観を変化させる。いくつかの実施形態では、照明効果７２６－１は、メディアウィンドウ７０４から延びる複数の光線を含む。いくつかの実施形態では、複数の光線の視覚特性（例えば、１つ以上の光線の長さ、１つ以上の光線の色（単数又は複数）、及び／又は１つ以上の光線の輝度及び／又は強度）は、表示されたメディアアイテム（例えば、選択されたメディアユーザインタフェース７１９内に表示されたメディアアイテム）の視覚的コンテンツに基づいて決定される。いくつかの実施形態では、メディアウィンドウ７０４の縁部における視覚的コンテンツ（例えば、メディアウィンドウ７０４の縁部及び／又は境界の閾値距離内の視覚的コンテンツ）は、複数の光線の視覚特性を決定する際に、メディアウィンドウ７０４の縁部の内部のコンテンツよりも重く重み付けされる。いくつかの実施形態では、１つ以上の光線は、（例えば、表示されたメディアアイテムの視覚的コンテンツに基づいて）可変長、可変色、可変輝度、及び／又は可変強度を有する。したがって、いくつかの実施形態では、表示されたメディアアイテムの視覚的コンテンツが変化する（例えば、表示されたメディアアイテムが１つのメディアアイテムから別のメディアアイテムに変化する、表示されたメディアアイテムが、ビデオが再生されるときに変化する視覚的コンテンツを有するビデオである、及び／又はユーザがメディアアイテム内でズームイン又はズームアウトする）とき、複数の光線を含む照明効果７２６－１は、それに応じて変化する。いくつかの実施形態では、表示されたメディアアイテムがビデオである場合、照明効果７２６－１（例えば、複数の光線）の変化は、経時的に平滑化される。いくつかの実施形態では、照明効果７２６－１は、メディアウィンドウ７０４の前面（例えば、前面層７２０）から延びる（例えば、前方に延びる）光線と、メディアウィンドウ７０４の背面（例えば、背面層７２２）から延びる（例えば、後方に延びる）光線と、を含む。

【0152】

いくつかの実施形態では、照明効果７２６－１は、表示されるメディアアイテム（例えば、選択されたメディアユーザインタフェース７１９内に表示されるメディアアイテム）が立体視メディアアイテムであるか非立体視メディアアイテムであるかに関わらず、メディアウィンドウ７０４から拡張される。いくつかの実施形態では、メディアウィンドウ７０４から延びる光線は、示されたメディアアイテムが（例えば、図７Ｆ、７Ｇ、７Ｈ、及び７Ｎに示されるような）立体視メディアアイテムであるかどうか、又は示されたメディアアイテムが（例えば、図７Ｊ～図７Ｍに示されるような）非立体視メディアアイテムであるかどうかに基づいて異なる。例えば、光線の視覚特性を決定するために使用される１つ以上のアルゴリズムは、表示されたメディアアイテムが立体視メディアアイテムであるか非立体視メディアアイテムであるかに基づいて異なる。いくつかの実施形態では、光線（又は光線の視覚特性を決定するために使用されるアルゴリズム）は、表示されたメディアアイテムが立体視メディアアイテムであるか非立体視メディアアイテムであるかに基づいて異なることはない。

【0153】

いくつかの実施形態では、メディアアイテム、メディアウィンドウ７０４、及び／又は三次元環境７０６の視覚特性は、表示されたメディアアイテムが立体視メディアアイテムであるか、又は非立体視メディアアイテムであるかに依存する。図７Ｆにおいて、表示されたメディアアイテムは、立体視メディアアイテムである。表示されたメディアアイテムが立体視メディアアイテムであるという判定に基づいて、コンピュータシステム７００は、立体視メディアアイテムに対応する視覚特性のセットとともにメディアアイテムを表示する。例えば、図示の実施形態では、メディアウィンドウ７０４は、表示されたメディアアイテムを三次元的に表示し、メディアアイテムの要素は軸に沿って展開される。図示した実施形態では、メディアウィンドウ７０４は、前面層７２０、背面層７２２、及び前面層７２０と背面層７２２との間の１つ以上の中間層７２４とともに示されている。いくつかの実施形態では、コンピュータシステム７００がヘッドマウントデバイスであるとき、コンピュータシステム７００は、ユーザが物理的環境内で自身を再配置すること、及び／又は（例えば、コンピュータシステム７００を自身の頭部に装着しながら）自身の頭部を回転させることに応じて、メディアウィンドウ７０４内に表示されたメディアアイテムの異なる透視図を表示する。

【0154】

いくつかの実施形態では、表示されたメディアアイテムが立体視メディアアイテムであるという判定に従って、表示されたメディアアイテムは、連続的な縁部を有する連続的な三次元形状内に表示される（例えば、メディアウィンドウ７０４は、連続的な縁部を有する連続的な三次元形状である）。図７Ｉは、連続的な縁部を伴う連続三次元形状の例示的な実施形態の側面プロファイル図を示し、前面層７２０は、図７Ｉにおける形状の左表面として示され、背面層７２２は、図７Ｉにおける形状の右表面として示される。いくつかの実施形態では、図７Ｉに示すように、メディアウィンドウ７０４の三次元形状は、湾曲した前面及び／又は湾曲した背面を有する。いくつかの実施形態では、メディアウィンドウ７０４の三次元形状は、屈折縁部（例えば、ぼやけた縁部及び／又はガラス状の縁部）を有する。対照的に、いくつかの実施形態では、表示されたメディアアイテムが非立体視メディアアイテムであるという判定に従って、表示されたメディアアイテムは、（図７Ｊに示されるように）二次元オブジェクト内に及び／又は二次元オブジェクトとして表示される（例えば、メディアウィンドウ７０４は、二次元オブジェクト及び／又は形状である）。いくつかの実施形態では、コンピュータシステム７００がヘッドマウントデバイスであるとき、コンピュータシステム７００は、ユーザが物理的環境内で自身を再配置すること、及び／又は自身の頭部を回転させること（例えば、ユーザが自身の頭部にコンピュータシステム７００を装着している間）に応じて、立体視メディアアイテムの三次元形状の異なる透視図を表示する。

【0155】

図７Ｆにおいて、コンピュータシステム７００は、共有オプション７２８Ａ、時間及びロケーション情報７２８Ｂ、並びにクローズオプション７２８Ｃも表示する。共有オプション７２８Ａは、表示されたメディアアイテムを共有するための１つ以上のオプションを表示するために選択可能である。時間及びロケーション情報７２８Ｂは、表示されたメディアアイテムに対応する時間及びロケーション情報７２８Ｂ（例えば、表示されたメディアアイテムのキャプチャの時間及びロケーション）を表示する。クローズオプション７２８Ｃは、表示されたメディアアイテムを閉じるために選択可能である（例えば、選択されたメディアユーザインタフェース７１９の表示を中止し、メディアライブラリユーザインタフェース７０８を再表示するために選択可能である）。いくつかの実施形態では、表示されたメディアアイテムが立体視メディアアイテムであるという判定に従って、共有オプション７２８Ａ、日時情報７２８Ｂ、及びクローズオプション７２８Ｃなどの１つ以上のコントロールが表示される（例えば、メディアウィンドウ７０４の外側に、及び／又は１つ以上のコントロールが表示された立体視メディアアイテム７１０Ｆに重複しない及び／又はオーバーレイしないような方法で）。

【0156】

いくつかの実施形態では、メディアアイテムが選択されたメディアユーザインタフェース７１９に表示されるとき、メディアアイテムは、（例えば、表示されたメディアアイテムが立体視メディアアイテムであるか非立体視メディアアイテムであるかに関わらず）メディアアイテムに適用されるビネッティング（例えば、暗くされた角部及び／又は縁部）を伴って表示される。いくつかの実施形態では、メディアアイテムが選択されたメディアユーザインタフェース７１９に表示されるとき、メディアアイテムは、任意選択的に没入状態で表示される。いくつかの実施形態では、条件の第１のセットが満たされる場合、メディアアイテムは没入状態で表示され、条件の第１のセットが満たされない場合、メディアアイテムは没入状態で表示されない。様々な実施形態において、条件の第１のセットは、例えば、第１のユーザ設定（例えば、没入型視聴設定）が有効及び／又は無効にされているという判定、第１のメディアアイテムが特定のタイプ（例えば、非立体視と比較して立体視）であるという判定（例えば、第１のメディアアイテムが立体視メディアアイテムであるという判定に従って）、及び／又は特定のタイプの１つ以上のユーザ入力（例えば、１つ以上のジェスチャ（例えば、１つ以上のエアジェスチャ））が検出されたという判定のうちの１つ以上を含む。いくつかの実施形態では、非没入状態は第１の角度サイズに対応し、没入状態は第１の角度サイズよりも大きい第２の角度サイズに対応する。換言すれば、没入状態では、表示されたメディアアイテムは、より大きい角度表示サイズで表示され、非没入状態では、表示されたメディアアイテムは、より小さい角度表示サイズで表示される。いくつかの実施形態では、メディアアイテムが没入状態で表示され、コンピュータシステム７００がヘッドマウントデバイスである場合、コンピュータシステム７００は、ユーザが物理的環境内で自身を再配置すること、及び／又は（例えば、ユーザがコンピュータシステム７００を頭部に装着している間に）自身の頭部を回転させることに基づいて、メディアアイテムの異なる透視図を表示する。

【0157】

図７Ｆにおいて、選択されたメディアユーザインタフェース７１９にメディアアイテム７１０Ｆを表示している間に、コンピュータシステム７００は、ユーザジェスチャ７３２を検出する。ユーザジェスチャ７３２のための異なるタイプのユーザジェスチャに対応する様々な異なるシナリオが、以下で順に説明される。

【0158】

第１のシナリオでは、ユーザジェスチャ７３２は、例えば、選択されたメディアユーザインタフェース７１９の表示を中止し、かつ／又はメディアライブラリユーザインタフェース７０８を再表示するためのメディアアイテムクローズコマンドに対応する。いくつかの実施形態では、メディアアイテムクローズコマンドは、ピンチアンドドラッグジェスチャ（例えば、エアジェスチャ）（例えば、既定の方向へのピンチアンドドラッグジェスチャ（例えば、下方向へのピンチアンドドラッグジェスチャ））を含む。いくつかの実施形態では、第１の方向（例えば、左）へのピンチアンドドラッグジェスチャは、選択されたメディアユーザインタフェース７１９内の後続のメディアアイテム（例えば、メディアアイテムの順序付けられたシーケンス内の直後のメディアアイテム）を表示するための次のメディアアイテムコマンドに対応し、第２の方向（例えば、第１の方向とは反対の第２の方向）（例えば、右）へのピンチアンドドラッグジェスチャは、選択されたメディアユーザインタフェース７１９内の前のメディアアイテム（例えば、メディアアイテムの順序付けられたシーケンス内の直前のメディアアイテム）を表示するための前のメディアアイテムコマンドに対応し、第３の方向（例えば、下）へのピンチアンドドラッグジェスチャは、メディアアイテムを閉じるコマンドに対応する。上述のように、いくつかの実施形態では、コンピュータシステム７００がピンチアンドドラッグジェスチャ（例えば、ピンチアンドドラッグエアジェスチャ）を検出することは、コンピュータシステム７００が、ユーザの手が既定の形状（例えば、既定のピンチ形状）を形成することを検出することと、コンピュータシステム７００が、（例えば、ユーザの手が既定の形状を形成及び／又は維持している間に）既定の形状を形成する手の特定の方向の移動を検出することと、を含む。いくつかの実施形態では、コンピュータシステム７００がピンチアンドドラッグジェスチャを検出することは、コンピュータシステム７００が、特定の方向に少なくとも閾値距離にわたって既定の形状を形成する手の移動を検出することを更に含む。

【0159】

第２のシナリオでは、ユーザジェスチャ７３２は、注視インジケーション７１４－１によって示されるように、ユーザの視線がメディアウィンドウ７０４の右下隅で検出されている間に受信されるズームインコマンド（例えば、図７Ｄを参照して様々な実施形態が上述された、片手ダブルピンチジェスチャ又は両手ピンチ解除ジェスチャ）に対応する。第３のシナリオでは、ユーザジェスチャ７３２は、注視インジケーション７１４－２によって示されるように、ユーザの視線がメディアウィンドウ７０４の左上隅で検出されている間に受信されるズームインコマンドに対応する。第２のシナリオでは、ユーザの視線がメディアウィンドウ７０４の右下隅に向けられている間にズームインコマンドに対応するユーザジェスチャ７３２に応じて、コンピュータシステム７００は、図７Ｇに示されるように、メディアウィンドウ７０４の右下隅にズームインする。第３のシナリオでは、ユーザの視線がメディアウィンドウ７０４の左上隅に向けられている間にズームインコマンドに対応するユーザジェスチャ７３２に応じて、コンピュータシステム７００は、図７Ｈに示すように、メディアウィンドウ７０４の左上隅にズームインする。

【0160】

図７Ｊは、非立体視メディアアイテム７３１を表示する選択されたメディアユーザインタフェース７１９を示す。図７Ｊにおいて、メディアアイテム７３１は、パノラマ非立体視画像である。図７Ｊにおいて、三次元環境７０６は、図７Ｆにおけるように暗くされ、照明効果７３０－１は、メディアウィンドウ７０４から広がる。図７Ｆを参照して上述した照明効果７２６－１と同様に、いくつかの実施形態では、照明効果７３０－１は、メディアウィンドウ７０４に示された視覚的コンテンツ（例えば、表示されたメディアアイテム７３１の視覚的コンテンツ）に基づいて決定される。いくつかの実施形態では、照明効果７３０－１は、メディアウィンドウ７０４内に表示される視覚的コンテンツの差に基づいて照明効果７２６－１とは異なるが、照明効果７３０－１を生成及び／又は決定するために使用されるアルゴリズムは、照明効果７２６－１を生成及び／又は決定するために使用されるアルゴリズムと同じである。いくつかの実施形態では、メディアアイテム７３１が非立体視メディアアイテムであり、メディアアイテム７１０Ｆが立体視メディアアイテムであったという事実に基づいて、照明効果７３０－１を生成及び／又は決定するために使用されるアルゴリズムは、照明効果７２６－１を生成及び／又は決定するために使用されるアルゴリズムとは異なる。いくつかの実施形態では、図７Ｆを参照して上述した照明効果７２６－１の様々な特性は、照明効果７３０－１、及び本明細書に記載の他の照明効果（例えば、７３０－２、７３０－３、７３０－４、７２６－２、７２６－３、及び／又は７２６－４）に適用可能である。いくつかの実施形態では、コンピュータシステム７００がヘッドマウントデバイスであるとき、コンピュータシステム７００は、メディアアイテム７３１が非立体視メディアアイテムである結果として、ユーザが物理的環境を歩き回ること、及び／又は（例えば、ユーザがコンピュータシステム７００を頭部に装着している間に）ユーザの頭部を回すことに応じて、メディアアイテム７３１に含まれるコンテンツの様々な透視図を表示しない。

【0161】

いくつかの実施形態では、図７Ｊのメディアウィンドウ７０４及び選択されたメディアユーザインタフェース７１９の特定の視覚特性は、表示されたメディアアイテム７３１が非立体視メディアアイテムであるという判定に基づいて、図７Ｆの視覚特性とは異なる。例えば、いくつかの実施形態では、図７Ｊの表示されたメディアアイテム７３１が非立体視メディアアイテムであるという判定に基づいて、共有オプション７２８Ａ、時間及びロケーション情報７２８Ｂ、並びにクローズオプション７２８Ｃなどの１つ以上のコントロールが、表示されたメディアアイテム７３１上にオーバーレイされて表示される。別の例では、いくつかの実施形態において、図７Ｊの表示されたメディアアイテム７３１が非立体視メディアアイテムであるという判定に基づいて、メディアアイテム７３１は、二次元オブジェクト内に及び／又は二次元オブジェクトとして表示される（一方、図７Ｆのメディアアイテム７１０Ｆは、三次元オブジェクト内に表示されている）。立体視メディアアイテムと非立体視メディアアイテムとの間の他の差異は、図７Ｆを参照して上記でより詳細に説明された。

【0162】

図７Ｊにおいて、選択されたメディアユーザインタフェース７１９内に非立体視パノラマ状のメディアアイテム７３１を表示している間に、コンピュータシステム７００は、（例えば、センサ７１５を介して）ユーザジェスチャ７３３を検出する。図示されたシナリオでは、ユーザジェスチャ７３３はズームインコマンドに対応する。いくつかの実施形態では、ズームインコマンドは、（例えば、図７Ｄを参照して）上述したように、片手ダブルピンチジェスチャ及び／又は両手ピンチ解除ジェスチャを含む。更に、図７Ｊにおいて、コンピュータシステム７００は、ユーザジェスチャ７３３を検出している間に、注視インジケーション７１４によって示されるように、表示されたメディアアイテム７３１内の第１のポジションに向けられたユーザ視線を検出する。

【0163】

図７Ｋにおいて、ユーザの視線が表示されたメディアアイテム７３１内の第１のポジションに向けられている間にユーザジェスチャ７３３（例えば、ズームインコマンド）を検出したことに応じて、コンピュータシステム７００は、第１のポジションをズームイン動作の中心点としてメディアアイテム７３１をズームインする。更に、図７Ｋにおいて、ユーザジェスチャ７３３（例えば、ズームインコマンド）を検出したことに応じて、かつ表示されたメディアアイテム７３１がパノラマ状のメディアアイテムであるという判定に従って、コンピュータシステム７００は、メディアウィンドウ７０４のサイズを拡大し、またメディアウィンドウ７０４を湾曲させる。図７Ｋにおいて、照明効果７３０－２は、メディアウィンドウ７０４から延びる。いくつかの実施形態では、照明効果７３０－２は、メディアウィンドウ７０４に表示されている視覚的コンテンツの変化に基づいて、照明効果７３０－１とは異なる。いくつかの実施形態では、コンピュータシステム７００がヘッドマウントデバイスである場合、メディアウィンドウ７０４の表示は、メディアウィンドウ７０４が湾曲した外観で表示されている間に（例えば、メディアウィンドウ７０４が湾曲した外観なしで表示されている場合とは対照的に）、ユーザのより広い視野を占有する。

【0164】

図７Ｋにおいて、コンピュータシステム７００は、ユーザジェスチャ７３４を（例えば、センサ７１５を介して）検出する。いくつかの実施形態では、ユーザジェスチャ７３４は、ユーザジェスチャ７３３のズームインコマンドの継続（例えば、両手ピンチ解除ジェスチャ（例えば、（例えば、図７Ｄを参照して）上述した様々な実施形態）の継続）である。更に、図７Ｋにおいて、コンピュータシステム７００は、ユーザジェスチャ７３４を検出している間に、注視インジケーション７１４によって示されるように、表示されたメディアアイテム内の第２のポジションに向けられたユーザ視線を検出する。

【0165】

図７Ｌにおいて、ユーザの視線が表示されたメディアアイテム内の第２のポジションに向けられていた間にユーザジェスチャ７３４（例えば、ズームインコマンド（例えば、（例えば、図７Ｄを参照して）上述した様々な実施形態））を検出したことに応じて、コンピュータシステム７００は、第２のポジションをズームイン動作の中心点としてパノラマ状のメディアアイテム７３１を更にズームインする。更に、図７Ｌにおいて、ユーザジェスチャ７３４（例えば、ズームインコマンド）を検出したことに応じて、かつ表示されたメディアアイテム７３１がパノラマ状のメディアアイテムであるという判定に従って、コンピュータシステム７００は、メディアウィンドウ７０４のサイズを更に拡大し、メディアウィンドウ７０４を更に湾曲させる。図７Ｌにおいて、照明効果７３０－３は、メディアウィンドウ７０４から延びる。いくつかの実施形態では、照明効果７３０－３は、メディアウィンドウ７０４に表示されている変化する視覚的コンテンツに基づいて、照明効果７３０－２及び７３０－１とは異なる。

【0166】

更に、図７Ｌでは、メディアアイテム７３１が更にズームインされるにつれて、メディアアイテム７３１は、メディアアイテム７３１の左側及び右側の特定のコンテンツがメディアウィンドウ７０４内でもはや可視ではなくなるほど十分にズームインされる。図７Ｌでは、メディアウィンドウ７０４内で可視ではない追加のコンテンツがメディアアイテム７３１の左側にあるという判定に従って、コンピュータシステム７００は、メディアウィンドウ７０４の左側に視覚効果７３６Ａを表示する。同様に、メディアウィンドウ７０４内で可視ではない追加のコンテンツがメディアアイテム７３１の右側にあるという判定に従って、コンピュータシステム７００は、メディアウィンドウ７０４の右側に視覚効果７３６Ｂを表示する。いくつかの実施形態では、視覚効果７３６Ａは、メディアウィンドウ７０４の左縁部をぼかすこと及び／又は視覚的に不明瞭にすることを含み、視覚効果７３６Ｂは、メディアウィンドウ７０４の右縁部をぼかすこと及び／又は視覚的に不明瞭にすることを含む。

【0167】

図７Ｌにおいて、選択されたメディアユーザインタフェース７１９にメディアアイテム７３１を表示している間に、コンピュータシステム７００はユーザジェスチャ７３８を検出する。いくつかの実施形態では、ユーザジェスチャ７３８は、前のコンテンツアイテムコマンド（例えば、第１の（例えば、右）方向へのピンチアンドドラッグジェスチャ（例えば、（例えば、図７Ｄ及び図７Ｆを参照して）上述した様々な実施形態））及び／又は次のコンテンツアイテムコマンド（例えば、第２の（例えば、左）方向へのピンチアンドドラッグジェスチャ（例えば、（例えば、図７Ｄ及び図７Ｆを参照して）上述した様々な実施形態））に対応する。

【0168】

図７Ｍにおいて、ユーザジェスチャ７３８を検出したことに応じて、コンピュータシステム７００は、選択されたメディアユーザインタフェース７１９内に図７Ｌのメディアアイテム７３１を表示することを中止し、選択されたメディアユーザインタフェース７１９内に非立体視ビデオメディアアイテム７４１を表示する。図７Ｍでは、示されたメディアアイテム７４１が非立体視メディアアイテムであるという判定に従って、１つ以上のコントロールがメディアアイテム上にオーバーレイされて表示される。１つ以上のコントロールは、例えば、共有オプション７２８Ａ、時間及びロケーション情報７２８Ｂ、並びにクローズオプション７２８Ｃ、並びにスクラバ７４０を含む。スクラバ７４０は、ビデオメディアアイテム７４１内をナビゲートするためにユーザによって操作されることができ（例えば、ユーザは、スクラバ７４０と相互作用することができる）、一時停止ボタン、再生ボタン、早送りボタン、及び／又は巻き戻しボタンなどの１つ以上の再生コントロールも含む。図７Ｍにおいて、照明効果７３０－４は、メディアウィンドウ７０４から延びる。図７Ｆを参照して上述したように、いくつかの実施形態では、ビデオの照明効果は、ビデオ内の個別の時間における照明効果が複数のビデオフレーム（例えば、個別の時間の直前及び／又は直後の複数のビデオフレーム）に基づいて決定されるように、経時的に平滑化される。

【0169】

図７Ｍにおいて、選択されたメディアユーザインタフェース７１９に非立体視ビデオメディアアイテム７４１を表示している間に、コンピュータシステム７００は、ユーザジェスチャ７４２を検出する。いくつかの実施形態では、ユーザジェスチャ７４２は、前のコンテンツアイテムコマンド（例えば、第１の（例えば、右）方向へのピンチアンドドラッグジェスチャ（例えば、（例えば、図７Ｄ及び図７Ｆを参照して）上述した様々な実施形態））及び／又は次のコンテンツアイテムコマンド（例えば、第２の（例えば、左）方向へのピンチアンドドラッグジェスチャ（例えば、（例えば、図７Ｄ及び図７Ｆを参照して）上述した様々な実施形態））に対応する。

【0170】

図７Ｎにおいて、ユーザジェスチャ７４２を検出したことに応じて、コンピュータシステム７００は、選択されたメディアユーザインタフェース７１９内に図７Ｍの非立体視ビデオメディアアイテム７４１を表示することを中止し、選択されたメディアユーザインタフェース７１９内に立体視ビデオメディアアイテム７４３を表示する。図７Ｎでは、示されたメディアアイテム７４３が立体視メディアアイテムであるという判定に従って、１つ以上のコントロール（例えば、共有オプション７２８Ａ、時間及びロケーション情報７２８Ｂ、クローズオプション７２８Ｃ、スクラバ７４０）がメディアウィンドウ７０４に表示される（例えば、外側に及び／又は重複せずに）。いくつかの実施形態では、１つ以上のコントロール（例えば、７２８Ａ、７２８Ｂ、７２８Ｃ、及び／又は７４０）は、ユーザの手が第１のポジション（例えば、上昇ポジション）にあるときに表示され、ユーザの手が第１のポジションにないとき（例えば、ユーザの手が下降ポジションにあるとき）に隠される／表示されない。いくつかの実施形態では、１つ以上のコントロールは、ユーザの手が第１のポジションにあるときに表示され、そしてユーザの手が第１のポジションにないときには、表示されるメディアアイテムが立体視メディアアイテムであるか又は非立体視メディアアイテムであるかに関わらず、隠される。いくつかの実施形態では、１つ以上のコントロールは、ユーザの手が第１のポジションにあるときに表示され、そしてユーザの手が第１のポジションにないときには、表示されるメディアアイテムが静止画像であるか又はビデオであるかに関わらず、隠される。

【0171】

更に、示されたメディアアイテム７４３が立体視メディアアイテムであるという判定に従って、メディアアイテム７４３は、複数の層（例えば、７２０、７２２、及び７２４）を有する三次元形状内に表示される。図７Ｎにおいて、照明効果７２６－４は、メディアウィンドウ７０４から延びる。図７Ｆ及び図７Ｍを参照して上述したように、いくつかの実施形態では、ビデオの照明効果は、ビデオ内の個別の時間における照明効果が複数のビデオフレーム（例えば、個別の時間の直前及び／又は直後の複数のビデオフレーム）に基づいて決定されるように、経時的に平滑化される。

【0172】

図７Ａ～図７Ｎに関する追加の説明が、図８～図１０を参照しながら説明された方法８００、９００、及び１０００を参照しながら以下で与えられる。

【0173】

図８は、いくつかの実施形態による、メディアアイテム及びユーザインタフェースと相互作用するための例示的な方法８００のフロー図である。いくつかの実施形態では、方法８００は、表示生成構成要素（例えば、７０２）（例えば、ディスプレイコントローラ、タッチ感知ディスプレイシステム、ディスプレイ（例えば、統合及び／又は接続された）、３Ｄディスプレイ、透明ディスプレイ、プロジェクタ、及び／又はヘッドアップディスプレイ）及び１つ以上の入力デバイス（例えば、７１５）（例えば、タッチ感知面（例えば、タッチ感知ディスプレイ））と通信するコンピュータシステム（例えば、７００）（例えば、図１のコンピュータシステム１０１）（例えば、スマートフォン、スマートウォッチ、タブレット、及び／又はウェアラブルデバイス）、マウス、キーボード、リモートコントロール、視覚入力デバイス（例えば、カメラ）、オーディオ入力デバイス（例えば、マイクロフォン）、及び／又はバイオメトリックセンサ（例えば、指紋センサ、顔識別センサ、及び／又は虹彩識別センサ））で実行される。いくつかの実施形態では、方法８００は、非一時的（又は一時的）コンピュータ可読記憶媒体に記憶され、コンピュータシステム１０１の１つ以上のプロセッサ２０２（例えば、図１Ａのコントロール１１０）などのコンピュータシステムの１つ以上のプロセッサによって実行される命令によって統御される。方法８００のいくつかの動作は、任意選択的に、組み合わされ、かつ／又はいくつかの動作の順序は、任意選択的に、変更される。

【0174】

いくつかの実施形態では、コンピュータシステム（例えば、７００）は、表示生成構成要素（例えば、７０２）を介して、第１のメディアアイテム（例えば、７１０Ａ～７１０Ｆ）の表現を含む複数のメディアアイテム（例えば、７１０Ａ～７１０Ｆ）（例えば、画像、写真、及び／又はビデオ）の表現（例えば、サムネイル及び／又はプレビュー）を含むメディアライブラリユーザインタフェース（例えば、７０８）を表示する（８０２）。

【0175】

メディアライブラリユーザインタフェースを表示している間に（８０４）、コンピュータシステムは、第１の時点で、１つ以上の入力デバイスを介して、メディアライブラリユーザインタフェース内の第１のポジションに対応するユーザ視線（例えば、７１４）を検出する（８０６）（例えば、ユーザがメディアライブラリユーザインタフェース内の第１のポジションを注視していることを検出及び／又は判定する）。いくつかの実施形態では、メディアライブラリユーザインタフェース内の第１のポジションは、第１のメディアアイテムの表現に対応するポジションであるか、又は第１のメディアアイテムの表現に対応しない（例えば、第１のメディアアイテムとは異なる第２のメディアアイテムの表現に対応する）メディアライブラリユーザインタフェース内のポジションである。

【0176】

メディアライブラリユーザインタフェース内の第１のポジションに対応するユーザ視線を検出したことに応じて（８０８）、コンピュータシステムは、第１のメディアアイテムの表現の外観を、表示生成構成要素を介して、第１の方式で（例えば、視覚特性の第１のセットを用いて）表示されることから、第１の方式とは異なる第２の方式で（例えば、視覚特性の第２のセットを用いて）表示されることに変更する（８１０）（例えば、図７Ａ～図７Ｂのメディアアイテム７１０Ａ及び／又は図７Ｂ～図７Ｃのメディアアイテム７１０Ｃ）。

【0177】

コンピュータシステムは、第１の時点の後の第２の時点で（例えば、第２の方式で第１のメディアアイテムの表現を表示した後又は表示している間に）、１つ以上の入力デバイスを介して、メディアライブラリユーザインタフェース内の第２のポジション（例えば、図７Ｃの７１４）に対応するユーザ視線を検出する（８１２）（例えば、ユーザがメディアライブラリユーザインタフェース内の第２のポジションを注視していることを検出及び／又は判定する）。いくつかの実施形態では、メディアライブラリユーザインタフェース内の第２のポジションは、第１のメディアアイテムの表現に対応するポジション、又は第１のポジションとは異なる第１のメディアアイテムの表現に対応しない（例えば、第１のメディアアイテムとは異なる第２のメディアアイテムの表現に対応する）メディアライブラリユーザインタフェース内のポジションである。

【0178】

メディアライブラリユーザインタフェース内の第２のポジションに対応するユーザ視線を検出したことに応じて（８１４）、コンピュータシステムは、表示生成構成要素を介して、第２の方式とは異なる第３の方式で（例えば、視覚特性の第２のセットとは異なる視覚特性の第３のセットを用いて）第１のメディアアイテムの表現を表示する（８１６）（例えば、図７Ｂから図７Ｃのメディアアイテム７１０Ａ）。いくつかの実施形態では、第３の方式は第１の方式と同じである。

【0179】

メディアライブラリユーザインタフェース内の第１のポジションに対応するユーザ視線を検出したことに応じて、第１のメディアアイテムの表現の外観を第１の方式で表示されることから第２の方式で表示されることに変更することは、システムの状態に関する視覚的フィードバック（例えば、第１のポジションに対応するユーザ視線が検出されたこと）をユーザに提供し、これは、改善された視覚的フィードバックを提供する。

【0180】

いくつかの実施形態では、コンピュータシステムは、表示生成構成要素を介して、第１のメディアアイテムとは異なる第２のメディアアイテムの表現を含む複数のメディアアイテム（例えば、７１０Ａ～７１０Ｆ）（例えば、画像、写真、及び／又はビデオ）の表現（例えば、サムネイル及び／又はプレビュー）を含むメディアライブラリユーザインタフェース（例えば、７０８）を（例えば、第２の時点の後の第３の時点で）表示する。第２のメディアアイテムの表現を含むメディアライブラリユーザインタフェースを表示している間に、コンピュータシステムは、１つ以上の入力デバイスを介して、メディアライブラリユーザインタフェース（例えば、図７Ｃの７１４）内の第３のポジション（例えば、第２のポジション、又は第１のポジション及び／又は第２のポジションとは異なる第３のポジション）（例えば、第２のメディアアイテムの表現に対応するメディアライブラリユーザインタフェース内の第３のポジション、又は第２のメディアアイテムの表現に対応しない（例えば、第２のメディアアイテムとは異なる第３のメディアアイテムの表現に対応する）メディアライブラリユーザインタフェース内の第３のポジション）に対応するユーザ視線を（例えば、第３の時点の後の第４の時点で）検出する（例えば、ユーザがメディアライブラリユーザインタフェース内の第３のポジションを注視していることを検出及び／又は決定する）。メディアライブラリユーザインタフェース内の第３のポジションに対応するユーザ視線を検出したことに応じて、コンピュータシステムは、第２のメディアアイテム（例えば、７１０Ｃ）の表現の外観を、第４の方式（例えば、視覚特性の第４のセットを用いて）（いくつかの実施形態では、第４の方式は、第１の方式、第２の方式、及び／又は第３の方式と同じである）で表示されることから、第４の方式とは異なる第５の方式（例えば、図７Ｂ～図７Ｃのメディアアイテム７１０Ｃ）で表示されること（例えば、視覚特性の第４のセットとは異なる視覚特性の第５のセットを用いて）に変更する。いくつかの実施形態では、第５の方式は、第１の方式、第２の方式、及び／又は第３の方式と同じである。

【0181】

いくつかの実施形態では、コンピュータシステムは、第３のポジションとは異なるメディアライブラリユーザインタフェース内の第４のポジション（例えば、第２のメディアアイテムの表現に対応するメディアライブラリユーザインタフェース内の第４のポジション、又は第２のメディアアイテムの表現に対応しない（例えば、第２のメディアアイテムとは異なる第３のメディアアイテムの表現に対応する）メディアライブラリユーザインタフェース内の第４のポジション）に対応するユーザ視線を、１つ以上の入力デバイスを介して（例えば、第４の時点の後の第５の時点で）（例えば、第５の方式で第２のメディアアイテムの表現を表示した後又は表示している間に）検出する。（例えば、ユーザがメディアライブラリユーザインタフェース内の第４のポジションを注視していることを検出及び／又は判定する）。メディアライブラリユーザインタフェース内の第４のポジションに対応するユーザ視線を検出したことに応じて、コンピュータシステムは、表示生成構成要素を介して、第５の方式とは異なる第６の方式で（例えば、視覚特性の第５のセットとは異なる視覚特性の第６のセットを用いて）第２のメディアアイテムの表現を表示する。いくつかの実施形態では、第６の方式は第４の方式と同じである。

【0182】

メディアライブラリユーザインタフェース内の第３のポジションに対応するユーザ視線を検出したことに応じて、第２のメディアアイテムの表現の外観を第４の方式で表示されることから第５の方式で表示されることに変更することは、システムの状態についての視覚的フィードバック（例えば、第３のポジションに対応するユーザ視線が検出されたこと）をユーザに提供し、これは、改善された視覚的フィードバックを提供する。

【0183】

いくつかの実施形態では、第１のメディアアイテム（例えば、７１０Ａ）は、第１の要素及び第２の要素を含む複数の要素を含む。いくつかの実施形態では、第１のメディアアイテムの表現を第１の方式で表示することは、第１の要素及び第２の要素を第１の二次元平面（例えば、図７Ａのメディアアイテム７１０Ａ）（例えば、第１の次元及び第１の次元とは異なる（例えば、第１の次元に対して垂直な）第２の次元を含む二次元平面）内に表示する（例えば、第１の要素及び第２の要素を二次元オブジェクト内に及び／又は単一の二次元オブジェクトの一部として表示する）ことを含む。いくつかの実施形態では、第２の方式で第１のメディアアイテムの表現を表示することは、第１の二次元平面（例えば、図７Ｂのメディアアイテム７１０Ａ）の外側に延びる第３の次元（例えば、第１の二次元平面に垂直な第３の次元）に沿って第１の要素と第２の要素とを分離することを含む。

【0184】

いくつかの実施形態では、メディアライブラリユーザインタフェースは、ｘ軸及びｘ軸に垂直なｙ軸を有する第１の平面を定義し（例えば、メディアライブラリユーザインタフェースは少なくとも１つの平面を含み、平面はｘ軸及びｙ軸を定義する）（いくつかの実施形態では、複数のメディアアイテムの表現は、第１の平面上に（例えば、第１の平面内に）表示される）、第１のメディアアイテムは、第１の要素及び第２の要素を含む複数の要素を含み、第１のメディアアイテムの表現を第１の方式で表示することは、ｚ軸上の第１のポジションに複数の要素を表示することを含み、ｚ軸は、ｘ軸及びｙ軸の両方に垂直であり（例えば、第１のメディアアイテムの表現は、二次元オブジェクトとして表示される）（例えば、第１のメディアアイテム内の複数の要素は、単一の二次元平面（例えば、第１の平面）上に表示される）（いくつかの実施形態では、第１の方式で表示されたときに、第１のメディアアイテムの表現は、第１の平面内に提示される二次元平面オブジェクトとして表示される）（いくつかの実施形態では、メディアライブラリユーザインタフェースによって定義される第１の平面は、ｚ軸上の第１のポジションに位置決めされる）、第１のメディアアイテムの表現を第２の方式で表示することは、第１の要素をｚ軸上の第２のポジション（いくつかの実施形態では、ｚ軸上の第２のポジションは、ｚ軸上の第１のポジションと同じであるか、又はｚ軸上の第１のポジションとは異なる）に同時に表示することを含み、第２の要素は、ｚ軸上の第２のポジションとは異なる第３のポジションにある。

【0185】

いくつかの実施形態では、第１のメディアアイテムは第３の要素を含み、第２の方式で第１のメディアアイテムの表現を表示することは、ｚ軸上の第２のポジションに第１の要素を同時に表示することを含み、第２の要素は、第２のポジションとは異なるｚ軸上の第３のポジションにあり、第３の要素は、第２の及び第３のポジションとは異なるｚ軸上の第４のポジションにある。

【0186】

メディアライブラリユーザインタフェース内の第１のポジションに対応するユーザ視線を検出したことに応じて、要素を第３の次元に拡張することによって、第１のメディアアイテムの表現の外観を第１の方式で表示されることから第２の方式で表示されることに変更することは、システムの状態に関する視覚的フィードバック（例えば、第１のポジションに対応するユーザ視線が検出されたこと）をユーザに提供し、これは、改善された視覚的フィードバックを提供する。

【0187】

いくつかの実施形態では、第１のメディアアイテムの表現を第１の方式で表示することは、第１のメディアアイテムの表現をユーザに対して第１のポジションに表示することを含む。いくつかの実施形態では、第２の方式で第１のメディアアイテムの表現を表示することは、（例えば、図７Ａ～図７Ｄのメディアアイテム７１０Ａ～７１０Ｆを参照して説明したように）第１のポジションよりもユーザから離れたユーザに対する第２のポジションに第１のメディアアイテムの表現を表示することを含む（例えば、第１のメディアアイテムの表現は、後方に及び／又はユーザから離れるように押される）。

【0188】

いくつかの実施形態では、メディアライブラリユーザインタフェースを表示することは、第１のメディアアイテムの表現と同時に、第１のメディアアイテムの表現とは異なる第３のメディアアイテムの表現を表示することを含み、第２の方式で第１のメディアアイテムの表現を表示することは、ユーザに対する第３のメディアアイテムのポジションを維持しながら、ユーザに対する第２のポジションに第１のメディアアイテムの表現を表示すること（例えば、ユーザに対する第３のメディアアイテムのポジションを維持しながら、第１のメディアアイテムの表現を後方に及び／又はユーザから離れるように移動させること）を含む。

【0189】

いくつかの実施形態では、メディアライブラリユーザインタフェースは、ｘ軸及びｘ軸に垂直なｙ軸を有する第１の平面を定義し（例えば、メディアライブラリユーザインタフェースは少なくとも１つの平面を含み、平面はｘ軸及びｙ軸を定義する）（いくつかの実施形態では、複数のメディアアイテムの表現は、第１の平面上に（例えば、第１の平面内に）表示される）、第１のメディアアイテムの表現を第１の方式で表示することは、第１のメディアアイテムの表現をｚ軸上の第１のポジションに表示することを含み、ｚ軸は、ｘ軸及びｙ軸の両方に垂直であり、更に、メディアライブラリユーザインタフェースの前面は、ｚ軸の正方向を定義し、メディアライブラリユーザインタフェースの背面は、ｚ軸の負方向を定義し（いくつかの実施形態では、ｚ軸の正方向は、ユーザに向かって延び、ｚ軸の負方向は、ユーザから離れて延びる）、第１のメディアアイテムの表現を第２の方式で表示することは、第１のポジションとは異なるｚ軸上の第２のポジションに第１のメディアアイテムの表現を表示することを含み、第２のポジションは、第１のポジションよりも負のｚ軸ポジションである（例えば、第１のメディアアイテムは、第１の方式と比較して第２の方式で後方に（例えば、ユーザから更に離れて）押される）（いくつかの実施形態では、第１のメディアアイテムの表現は、ｚ軸上の第２のポジションに、第１の平面と平行に表示される）。

【0190】

いくつかの実施形態では、第１のメディアアイテムの表現を第１の方式で表示している間に、１つ以上（例えば、２つ以上）の他のメディアアイテムの表現がｚ軸上の第１のポジションに表示され、第１のメディアアイテムの表現を第２の方式で表示している間に、１つ以上（例えば、２つ以上）の他のメディアアイテムの表現がｚ軸上の第１のポジションに表示される（例えば、維持される）。

【0191】

メディアライブラリユーザインタフェース内の第１のポジションに対応するユーザ視線を検出したことに応じて、第１のメディアアイテムの表現をユーザから離れるように移動させることによって、第１のメディアアイテムの表現の外観を第１の方式で表示されることから第２の方式で表示されることに変更することは、システムの状態に関する視覚的フィードバック（例えば、第１のポジションに対応するユーザの視線が検出されたこと）をユーザに提供し、これは、改善された視覚的フィードバックを提供する。

【0192】

いくつかの実施形態では、第１のメディアアイテムは、ビデオコンテンツ（例えば、映画コンテンツ及び／又は動画コンテンツ）を含む。第１のメディアアイテムの表現を第１の方式で表示することは、第１のメディアアイテムのビデオコンテンツの静的表現を表示すること（例えば、第１のメディアアイテムの静的サムネイル画像表現を表示すること）を含み、第２の方式で第１のメディアアイテムの表現を表示することは、第１のメディアアイテムのビデオコンテンツの再生（例えば、第１のメディアアイテムのビデオコンテンツの少なくともサブセットの再生）を表示すること（例えば、図７Ａ～図７Ｄのメディアアイテム７１０Ａ～７１０Ｆを参照して説明したように）（例えば、第１のメディアアイテムの動画コンテンツ及び／又は映画コンテンツを表示すること）（例えば、メディアライブラリユーザインタフェース内に第１のメディアアイテムのビデオコンテンツの再生を表示すること）（例えば、メディアライブラリユーザインタフェース内の任意の他のメディアアイテムのビデオコンテンツの再生を表示することなく、メディアライブラリユーザインタフェース内の第１のメディアアイテムのビデオコンテンツの再生を表示すること）を含む。メディアライブラリユーザインタフェース内の第１のポジションに対応するユーザ視線を検出したことに応じて、第１のメディアアイテムのビデオコンテンツの再生を表示することによって、第１のメディアアイテムの表現の外観を第１の方式で表示されることから第２の方式で表示されることに変更することは、システムの状態に関する視覚的フィードバック（例えば、第１のポジションに対応するユーザ視線が検出されたこと）をユーザに提供し、これは、改善された視覚的フィードバックを提供する。

【0193】

いくつかの実施形態では、第２の方式とは異なる第３の方式で第１のメディアアイテムの表現を表示することは、（例えば、図７Ａ～図７Ｄのメディアアイテム７１０Ａ～７１０Ｆを参照して説明したように）第１のメディアアイテムのビデオコンテンツの第２の静的表現を表示すること（例えば、第１のメディアアイテムの静的サムネイル画像表現を表示すること）を含む。いくつかの実施形態では、第２の静的表現は、静的表現と同じであるか、又は静的表現とは異なる。いくつかの実施形態では、メディアライブラリユーザインタフェース内の第２のポジションに対応するユーザ視線を検出したことに応じて、コンピュータシステムは、第１のアイテムのビデオコンテンツの再生を中止する。いくつかの実施形態では、メディアライブラリユーザインタフェース内の第２のポジションに対応するユーザ視線を検出したことに応じて、コンピュータシステムは、第１のメディアアイテムとは異なる第２のメディアアイテムの表現の外観を、第２のメディアアイテムのビデオコンテンツの静的表現を表示すること（例えば、第１のアイテムのビデオコンテンツの静的サムネイル画像表現を表示すること）から、第２のメディアアイテムのビデオコンテンツの再生を表示すること（例えば、第２のメディアアイテムの動画コンテンツ及び／又は映画コンテンツを表示すること）に変更する。メディアライブラリユーザインタフェース内の第２のポジションに対応するユーザ視線を検出したことに応じて、（例えば、第１のメディアアイテムのビデオコンテンツの静的表現を表示することによって）第１のメディアアイテムの表現の外観を第２の方式で表示されることから第３の方式で表示されることに変更することは、システムの状態に関する視覚的フィードバック（例えば、第２のポジションに対応するユーザ視線が検出されたこと）をユーザに提供し、これは、改善された視覚的フィードバックを提供する。

【0194】

いくつかの実施形態では、第２の方式で第１のメディアアイテムの表現を表示することは、（例えば、図７Ａ～図７Ｄのメディアアイテム７１０Ａ～７１０Ｆを参照して説明したように）第１のメディアアイテムのビデオコンテンツにローパスフィルタ（例えば、ぼかしフィルタ及び／又は平滑化フィルタ）を適用することを含む（いくつかの実施形態では、第１のメディアアイテムのビデオコンテンツの再生を表示することは、それを含む）。いくつかの実施形態では、メディアライブラリユーザインタフェースを表示している間に、コンピュータシステムは、第１のメディアアイテムの選択に対応する１つ以上のユーザ入力（例えば、１つ以上のタッチ入力、１つ以上の非タッチ入力、１つ以上のジェスチャ（例えば、１つ以上のエアジェスチャ））を検出し（例えば、ユーザの視線が第１のメディアアイテム上に維持されている及び／又は第１のメディアアイテムに向けられている間の片手ピンチジェスチャ及び／又は両手ピンチ解除ジェスチャ）、第１のメディアアイテムの選択に対応する１つ以上のユーザ入力を検出したことに応じて、コンピュータシステムは、ローパスフィルタが適用されていない第１のメディアアイテムのビデオコンテンツの再生を表示する。いくつかの実施形態では、第１のメディアアイテムの選択に対応する１つ以上のユーザ入力を検出したことに応じて、コンピュータシステムは、メディアライブラリユーザインタフェースとは異なるメディアプレーヤーユーザインタフェースを表示し（いくつかの実施形態では、コンピュータシステムは、メディアライブラリユーザインタフェースの表示を中止し、及び／又はメディアライブラリユーザインタフェースの少なくとも一部の表示を中止する）、メディアプレーヤーユーザインタフェース内に、低域通過フィルタが適用されていない第１のメディアアイテムのビデオコンテンツの再生を表示する。メディアライブラリユーザインタフェース内の第１のポジションに対応するユーザ視線を検出したことに応じて、第１のメディアアイテムの表現の外観を第１の方式で表示されることから第２の方式で表示されることに（例えば、ローパスフィルタが適用された第１のメディアアイテムのビデオコンテンツの再生を表示することによって）変更することは、システムの状態に関する視覚的フィードバック（例えば、第１のポジションに対応するユーザ視線が検出されたこと）をユーザに提供し、これは、改善された視覚的フィードバックを提供する。

【0195】

いくつかの実施形態では、第１のメディアアイテムのビデオコンテンツの再生を表示することを含む第２の方式で第１のメディアアイテムの表現を表示している間に、コンピュータシステムは、第１のメディアアイテムのオーディオコンテンツ（例えば、第１のメディアアイテムのビデオコンテンツに対応するオーディオコンテンツ）を第１の音量レベルで出力する。メディアライブラリユーザインタフェースを表示している間に（いくつかの実施形態では、第１のメディアアイテムのビデオコンテンツの再生を（例えば、メディアライブラリユーザインタフェース内に）表示している間に、及び／又は第１のメディアアイテムのオーディオコンテンツを第１の音量レベルで出力している間に）、コンピュータシステムは、１つ以上の入力デバイスを介して、第１のメディアアイテムの選択に対応する１つ以上のユーザ入力（例えば、１つ以上のタッチ入力、１つ以上の非タッチ入力、及び／又は１つ以上のジェスチャ（例えば、１つ以上のエアジェスチャ））（例えば、ユーザの視線が第１のメディアアイテム上に維持されている及び／又は第１のメディアアイテムに向けられている間の片手ピンチジェスチャ及び／又は両手ピンチ解除ジェスチャ）を検出する。第１のメディアアイテムの選択に対応する１つ以上のユーザ入力を検出したことに応じて、コンピュータシステムは、（例えば、図７Ａ～図７Ｄのメディアアイテム７１０Ａ～７１０Ｆを参照して説明したように）第１のメディアアイテムのオーディオコンテンツを第１の音量レベルよりも大きい第２の音量レベルで出力する。いくつかの実施形態では、第１のメディアアイテムの選択に対応する１つ以上のユーザ入力は、１つ以上のエアジェスチャを含む。いくつかの実施形態では、第１のメディアアイテムの選択に対応する１つ以上のユーザ入力を検出することは、ユーザの視線が第１のメディアアイテム上に維持されている及び／又は第１のメディアアイテムに向けられている間に、片手ピンチジェスチャ（例えば、片手ピンチエアジェスチャ）及び／又は両手ピンチ解除ジェスチャ（例えば、両手ピンチ解除エアジェスチャ）を検出すること（例えば、ユーザの視線が第１のメディアアイテム上に維持されている及び／又は第１のメディアアイテムに向けられていることを検出しながら、片手ピンチジェスチャ及び／又は両手ピンチ解除ジェスチャを検出すること）を含む。いくつかの実施形態では、コンピュータシステムは、第１のメディアアイテムのビデオコンテンツの再生を表示し続けながら、第２の音量レベルで第１のメディアアイテムのオーディオコンテンツを出力する。いくつかの実施形態では、第１のメディアアイテムの選択に対応する１つ以上のユーザ入力を検出したことに応じて、コンピュータシステムは、メディアライブラリユーザインタフェースとは異なるメディアプレーヤーユーザインタフェースを表示し（いくつかの実施形態では、コンピュータシステムは、メディアライブラリユーザインタフェースの表示を中止し、及び／又はメディアライブラリユーザインタフェースの少なくとも一部の表示を中止する）、メディアプレーヤーユーザインタフェース内に、第１のメディアアイテムのオーディオコンテンツを第２の音量レベルで出力しながら、第１のメディアアイテムのビデオコンテンツの再生を表示する。第１のメディアアイテムのオープン及び／又は選択に応じて、第１のメディアアイテムのオーディオコンテンツが出力される音量を自動的に増加させることは、ユーザが更なるユーザ入力を提供することなく再生音量を増加させることを可能にし、これにより、動作を実行するのに必要な入力の数が低減される。

【0196】

いくつかの実施形態では、第１のメディアアイテムのビデオコンテンツの再生を表示することは、（例えば、図７Ａ～図７Ｄのメディアアイテム７１０Ａ～７１０Ｆを参照して説明したように）メディアライブラリユーザインタフェース内の第１のポジションに対応するユーザ視線を検出したことに応じて（例えば、追加のユーザ入力なしに）実行される。いくつかの実施形態では、第１のメディアアイテムのビデオコンテンツの再生は、メディアライブラリユーザインタフェース内の第１のポジションに対応するユーザ視線が閾値持続時間にわたって維持されたという判定に従って表示される。メディアライブラリユーザインタフェース内の第１のポジションに対応するユーザ視線を検出したことに応じて、第１のメディアアイテムのビデオコンテンツの再生を表示することにより、ユーザは、追加のユーザ入力なしに第１のメディアアイテムのビデオコンテンツを再生することができ、これにより、動作を実行するのに必要な入力の数が低減される。

【0197】

いくつかの実施形態では、第１のメディアアイテムは、第１の要素及び第２の要素を含む複数の要素（例えば、第１の層内の第１の要素及び第２の層内の第２の要素を含む、複数の層内に位置決めされた複数の要素（いくつかの実施形態では、各層は、ｚ軸に沿って異なるポジションに位置決めされる））を含む。いくつかの実施形態では、メディアライブラリユーザインタフェース内の第１のポジションに対応するユーザ視線を検出し続けている間に、コンピュータシステムは、（例えば、図７Ａ～図７Ｄのメディアアイテム７１０Ａ～７１０Ｆを参照して説明したように）ユーザの視点が第１のメディアアイテムに対してシフトする（例えば、ユーザの視点の移動に応じて、又はユーザの視点が同じ場所に留まっている間の第１のメディアアイテムの移動に応じて、第１の要素を第２の要素に対して移動させる）と、表示生成構成要素を介して、第１の要素を第２の要素に対して移動させて表示する。いくつかの実施形態では、第１の要素は、第１のメディアアイテムに対するユーザの視点の変化の量に基づく量だけ、第２の要素に対してシフトする。いくつかの実施形態では、第１の要素は、第１のメディアアイテムに対するユーザの視点の変化の方向に基づく方向に、第２の要素に対してシフトする。いくつかの実施形態では、第２の要素に対して移動する第１の要素を表示することは、１つ以上のユーザ入力（例えば、１つ以上のジェスチャ（例えば、ユーザの手及び／又は頭部の動き）（例えば、１つ以上のエアジェスチャ）及び／又は１つ以上の非ジェスチャ入力）を検出したことに応じて実行される。メディアライブラリユーザインタフェース内の第１のポジションに対応するユーザ視線を検出している間に第２の要素に対して移動する第１の要素を表示することは、システムの状態に関する視覚的フィードバック（例えば、第１のポジションに対応するユーザ視線が検出されたこと）をユーザに提供し、これは、改善された視覚的フィードバックを提供する。

【0198】

いくつかの実施形態では、コンピュータシステムは、１つ以上の入力デバイスを介して、メディアライブラリユーザインタフェース（例えば、７０８）内の第１のポジションに対応するユーザ視線（例えば、７１４）を検出する（例えば、第３の方式で第１のメディアアイテムの表現を表示した後及び／又は表示している間に）（例えば、ユーザがメディアライブラリユーザインタフェース内の第１のポジション（例えば、第１のメディアアイテムの表現に対応するメディアライブラリユーザインタフェース内の第１のポジション）を注視していることを検出及び／又は判定する）。メディアライブラリユーザインタフェース内の第１のポジションに対応するユーザ視線を検出し続けている間に（例えば、第３の時点の後の第４の時点で）、コンピュータシステムは、１つ以上の入力デバイスを介して、１つ以上のユーザジェスチャ（例えば、７１６又は７１８）（例えば、ユーザの手、頭部、及び／又は身体の移動）（例えば、１つ以上のエアジェスチャ（例えば、片手ピンチエアジェスチャ、片手ダブルピンチエアジェスチャ、ピンチアンドドラッグエアジェスチャ、両手ピンチエアジェスチャ、及び／又は両手ピンチ解除エアジェスチャ））（いくつかの実施形態では、１つ以上の非ジェスチャ入力）（いくつかの実施形態では、第１のメディアアイテムの選択に対応する１つ以上のユーザジェスチャ）を検出する。メディアライブラリユーザインタフェース内の第１のポジションに対応するユーザ視線を検出し続けている間に１つ以上のユーザジェスチャを検出したことに応じて、コンピュータシステムは、第１のメディアアイテムの表現の外観を、表示生成構成要素を介して、第７の方式で（例えば、視覚特性の第７のセットを用いて）表示されることから、第７の方式とは異なる第８の方式で（例えば、視覚特性の第８のセットを用いて）表示されることに変更する（例えば、図７Ｄ～図７Ｆを参照して説明したように、ユーザジェスチャ７１８に応じてメディアアイテム７１０Ｆの外観を変更する）。いくつかの実施形態では、第７の方式は第２の方式と同じである。いくつかの実施形態では、メディアライブラリユーザインタフェース内の第１のポジションに対応するユーザ視線を検出し続けている間に１つ以上のユーザジェスチャを検出したことに応じて、コンピュータシステムは、第１のメディアアイテムの表現の外観を、第２の方式で表示されることから、第２の方式とは異なる第８の方式で表示されることに変更する。メディアライブラリ内の第１のポジションに対応するユーザ視線を検出し続けている間に１つ以上のユーザジェスチャを検出したことに応じて第１のメディアアイテムの表現の外観を変更することは、システムの状態（例えば、システムが、第１のポジションに対応するユーザ視線を検出し続けている間に１つ以上のユーザジェスチャを検出したこと）に関する視覚的フィードバックをユーザに提供し、これは、改善された視覚的フィードバックを提供する。

【0199】

いくつかの実施形態では、１つ以上のユーザジェスチャは、ピンチジェスチャ（例えば、ピンチエアジェスチャ）（例えば、片手ピンチジェスチャ又は両手ピンチジェスチャ）（例えば、（例えば、図７Ｄ～図７Ｆを参照して説明されるように）２本の指（例えば、片手又は両手の２本の指）が互いに対して第１の距離から互いに対して第２の距離まで移動し、第２の距離が第１の距離よりも小さい）を含む。いくつかの実施形態では、第２の距離は、閾値距離よりも小さい（例えば、２本の指は、距離閾値を満たすのに十分に近いポジションに移動される）。いくつかの実施形態では、ピンチジェスチャは、第１のメディアアイテムのユーザ選択（例えば、任意の他のメディアアイテムの選択を伴わない第１のメディアアイテムのユーザ選択（例えば、第１のメディアアイテムのみのユーザ選択））を示す選択ジェスチャに対応し、第８の方式での第１のメディアアイテムの表現の表示は、第１のメディアアイテムのユーザ選択を示し（例えば、複数のメディアアイテムのうちの任意の他のメディアアイテムを選択することなく、複数のメディアアイテムからの第１のメディアアイテムのユーザ選択（例えば、第１のメディアアイテムのみのユーザ選択）を示す）、第７の方式での第１のメディアアイテムの表現の表示は、第１のメディアアイテムのユーザ選択を示さない。

【0200】

いくつかの実施形態では、第１のメディアアイテムの表現の外観を第７の方式で表示されることから第８の方式で表示されることに変更することは、第１のメディアアイテムの表現のサイズを拡大することを含む。いくつかの実施形態では、第１のメディアアイテムの表現の外観を第７の方式で表示されることから第８の方式で表示されることに変更することは、第１のメディアアイテムの再生を開始すること（例えば、第１のメディアアイテムのビデオ再生を開始すること）を含む。いくつかの実施形態では、第１のメディアアイテムの表現の外観を第７の方式で表示されることから第８の方式で表示されることに変更することは、メディアライブラリユーザインタフェースとは異なる選択されたメディアユーザインタフェース内に第１のメディアアイテムの表現を表示することを含む。いくつかの実施形態では、ピンチジェスチャを含む１つ以上のユーザジェスチャを検出したことに応じて、コンピュータシステムは、第１のメディアアイテムの表現とは異なる１つ以上のメディアアイテムの表現（例えば、メディアライブラリユーザインタフェースに表示されていた１つ以上のメディアアイテムの表現）を表示することを中止する。

【0201】

メディアライブラリ内の第１のポジションに対応するユーザ視線を検出し続けている間に１つ以上のユーザジェスチャを検出したことに応じて第１のメディアアイテムの表現の外観を変更することは、システムの状態（例えば、システムが、第１のポジションに対応するユーザ視線を検出し続けている間に１つ以上のユーザジェスチャを検出したこと）に関する視覚的フィードバックをユーザに提供し、これは、改善された視覚的フィードバックを提供する。

【0202】

いくつかの実施形態では、第１のメディアアイテム（例えば、７１０Ａ～７１０Ｆ）は、第１の要素及び第２の要素を含む複数の要素を含む。いくつかの実施形態において、第７の方式で第１のメディアアイテムの表現を表示することは、第１の要素を第１のポジションに表示することと、第２の要素を、第１のポジションよりもコンピュータシステムのユーザに近い第２のポジションに表示することと、を含む。いくつかの実施形態では、１つ以上のユーザジェスチャ（例えば、１つ以上のエアジェスチャ）は、第１のジェスチャ（例えば、第１のエアジェスチャ）を含む。いくつかの実施形態では、メディアライブラリユーザインタフェース内の第１のポジションに対応するユーザ視線を検出し続けている間に第１のジェスチャを検出したことに応じて、コンピュータシステムは、（例えば、図７Ｄ～図７Ｆを参照して説明したように）第１の要素に対して第２の要素を移動させて、第１の要素と第２の要素との間の距離を減少させる。いくつかの実施形態では、第１のジェスチャは、ピンチジェスチャ（例えば、ピンチエアジェスチャ）（例えば、第１の指が第２の指のより近くに移動するジェスチャ）であり、第２の要素は、ピンチジェスチャの大きさに基づいて（例えば、１本の指の別の指に対する移動量に基づいて）、軸に沿った第１の要素と第２の要素との間の距離を減少させるために、第１の要素に対して軸に沿って移動される。

【0203】

いくつかの実施形態では、メディアライブラリユーザインタフェースは、ｘ軸及びｘ軸に垂直なｙ軸を有する第１の平面を定義し（例えば、メディアライブラリユーザインタフェースは少なくとも１つの平面を含み、平面はｘ軸及びｙ軸を定義する）（いくつかの実施形態では、複数のメディアアイテムの表現は、第１の平面上に（例えば、第１の平面内に）表示される）、第１のメディアアイテムは、第１の要素及び第２の要素を含む複数の要素を含み、第７の方式で第１のメディアアイテムの表現を表示することは、第１の要素をｚ軸上の第１のポジションに、第２の要素をｚ軸上の第２のポジションとは異なる第２のポジションに同時に表示することを含み、１つ以上のユーザジェスチャは、第１のジェスチャを含み、メディアライブラリユーザインタフェース内の第１のポジションに対応するユーザ視線を検出し続けている間に第１のジェスチャを検出したことに応じて、コンピュータシステムは、第１のジェスチャの大きさに基づいて、第１の要素に対してｚ軸に沿って第２の要素を移動させて、ｚ軸に沿った第１の要素と第２の要素との間の距離を減少させる。いくつかの実施形態では、第１のジェスチャは、ピンチジェスチャ（例えば、ピンチエアジェスチャ）（例えば、第１の指が第２の指のより近くに移動するジェスチャ）であり、第２の要素は、ピンチジェスチャの大きさに基づいて（例えば、別の指に対する１本の指の移動量に基づいて）、ｚ軸に沿った第１の要素と第２の要素との間の距離を減少させるように、第１の要素に対してｚ軸に沿って移動される。

【0204】

第１のポジションに対応するユーザ視線を検出し続けている間に第１のジェスチャを検出したことに応じて第１の要素に対して第２の要素を移動させることは、システムの状態（例えば、第１のポジションに対応するユーザ視線を検出し続けている間にシステムが第１のジェスチャを検出したこと）に関する視覚的フィードバックをユーザに提供し、これは、改善された視覚的フィードバックを提供する。

【0205】

いくつかの実施形態では、１つ以上のユーザジェスチャは、第１のジェスチャに続いて実行される第２のジェスチャ（例えば、第２のエアジェスチャ）を含む。いくつかの実施形態では、メディアライブラリユーザインタフェース内の第１のポジションに対応するユーザ視線を検出し続けている間に第２のジェスチャを検出したことに応じて、コンピュータシステムは、（例えば、図７Ｄ～図７Ｆを参照して説明されるように）（例えば、第２のジェスチャの大きさに基づいて）第１の要素と第２の要素との間の距離を増加させるために、第１の要素に対して第２の要素を移動させる（例えば、所定の軸に沿って第２の要素を移動させる）。いくつかの実施形態では、第１の要素と第２の要素との間の距離を増加させるように第１の要素に対して第２の要素を移動させることは、第１の要素を軸（例えば、所定の軸（例えば、コンピュータシステムのユーザに向かって延びる軸））上の第１のポジションに移動させること、及び／又は第２の要素を軸上の第２のポジションに移動させることを含む。いくつかの実施形態では、第２のジェスチャは、ピンチ解除ジェスチャ（例えば、エアピンチ解除ジェスチャ）（例えば、第１の指が第２の指から更に移動するジェスチャ）である。いくつかの実施形態では、第２の要素は、第１の要素に対して移動され（例えば、軸に沿って移動され）、ピンチ解除ジェスチャの大きさに基づいて（例えば、別の指に対する１本の指の移動量に基づいて）、第１の要素と第２の要素との間の距離を増加させる。いくつかの実施形態では、第１の要素と第２の要素との間の距離を増加させるために第１の要素に対して第２の要素を移動させることは、第１のジェスチャが完了閾値を満たさなかったという判定に従って実行される。メディアライブラリ内の第１のポジションに対応するユーザ視線を検出し続けている間に第２のジェスチャを検出したことに応じて第１の要素に対して第２の要素を移動させることは、システムの状態（例えば、第１のポジションに対応するユーザ視線を検出し続けている間にシステムが第２のジェスチャを検出したこと）に関する視覚的フィードバックをユーザに提供し、これは、改善された視覚的フィードバックを提供する。

【0206】

いくつかの実施形態では、１つ以上のユーザジェスチャ（例えば、７１８）は、第１のジェスチャに続いて実行される第３のジェスチャ（例えば、第３のエアジェスチャ）を含み、第３のジェスチャは、第１のメディアアイテムのユーザ選択（例えば、任意の他のメディアアイテムを選択しない第１のメディアアイテムのユーザ選択（例えば、第１のメディアアイテムのみの選択））を示す。いくつかの実施形態では、第３のジェスチャは、第１のジェスチャの継続（例えば、完了閾値を超える第１のジェスチャの継続）である。いくつかの実施形態では、第３のジェスチャを検出したことに応じて、コンピュータシステムは、（例えば、図７Ｄ～図７Ｆを参照して説明されるように）第１の要素と第２の要素との間の距離を（例えば、所定の軸に沿って）増加させる。いくつかの実施形態では、第１のジェスチャを検出したことに応じて、第１の要素と第２の要素との間の距離を第１の距離まで減少させ、第３のジェスチャを検出したことに応じて、第１の要素と第２の要素との間の距離を第１の距離から第２の距離まで増加させる。いくつかの実施形態では、メディアライブラリユーザインタフェース内の第１のポジションに対応するユーザ視線を検出し続けている間に第１のジェスチャを検出したことに応じて、コンピュータシステムは、第１のジェスチャの大きさに基づいて、第１の要素に対して第２の要素を移動させて、第１の要素と第２の要素との間の距離を第１の距離まで減少させ、第１の要素に対して第２の要素を移動させて、第１の要素と第２の要素との間の距離を第１の距離まで減少させた後に、第１のジェスチャが完了閾値を満たすという判定に従って、コンピュータシステムは、第１の要素と第２の要素との間の距離を第２の距離まで増加させる。第３のジェスチャを検出したことに応じて第１の要素と第２の要素との間の距離を増加させることは、システムの状態（例えば、システムが第３のジェスチャを検出したこと）に関する視覚的フィードバックをユーザに提供し、これは、改善された視覚的フィードバックを提供する。

【0207】

いくつかの実施形態では、メディアライブラリユーザインタフェース（例えば、７０８）を表示することは、第１のメディアアイテム（例えば、７１０Ａ～７１０Ｆ）の表現と同時に、第１のメディアアイテム（例えば、７１０Ａ～７１０Ｆ）の表現とは異なる第２のメディアアイテムの表現を表示することを含む。１つ以上のユーザジェスチャは、第１の選択ジェスチャ（例えば、エアジェスチャ）（例えば、７１８）（例えば、エアタップジェスチャ（例えば、いかなる表面又はオブジェクトにも接触しないタップジェスチャ）、第１のメディアアイテムの選択（例えば、図７Ｄにおけるメディアアイテム７１０Ｆの選択）（例えば、任意の他のメディアアイテムの選択を伴わない第１のメディアアイテムの選択（例えば、第１のメディアアイテムのみの選択））に対応する２本指のピンチジェスチャ、２本指のピンチ解除ジェスチャ、片手ピンチジェスチャ、及び／又は片手ピンチ解除ジェスチャ）を含む。いくつかの実施形態では、第１の選択ジェスチャを検出することは、既定のジェスチャ（例えば、エアジェスチャ）を検出するとともに、ユーザの視線が第１のメディアアイテムに向けられている及び／又は第１のメディアアイテム上に維持されていること（例えば、ユーザの視線が第１のメディアアイテムに向けられている及び／又は第１のメディアアイテム上に維持されている間の片手ピンチジェスチャ及び／又は両手ピンチ解除ジェスチャ）も検出することを含む。いくつかの実施形態では、第１のメディアアイテムの選択に対応する第１の選択ジェスチャを検出したことに応じて、コンピュータシステムは、（例えば、図７Ｄ～図７Ｆを参照して説明したように）第２のメディアアイテムの表現を視覚的に不明瞭にする（例えば、第２のメディアアイテムの表現をぼかす）。第１の選択ジェスチャを検出したことに応じて第２のメディアアイテムの表現を視覚的に不明瞭にすることは、システムの状態（例えば、システムが第１のメディアアイテムの選択に対応する第１の選択ジェスチャを検出したこと）に関する視覚的フィードバックをユーザに提供し、これは、改善された視覚的フィードバックを提供する。

【0208】

いくつかの実施形態では、メディアライブラリユーザインタフェース内の第１のポジションに対応するユーザ視線（例えば、７１４）を検出している間に（及び、任意選択的に、第２の方式で第１のメディアアイテムの表現を表示している間に）、コンピュータシステムは、１つ以上の入力デバイスを介して、１つ以上のユーザジェスチャ（例えば、７１８）（例えば、ユーザの手、頭部（例えば、左右）、及び／又は身体部分の移動（例えば、１つ以上のエアジェスチャ））の第２のセットを検出する。１つ以上のユーザジェスチャの第２のセットを検出したことに応じて、コンピュータシステムは、１つ以上のユーザジェスチャの第２のセットに基づいて（例えば、１つ以上のユーザジェスチャの第２のセットの移動の方向に基づいて）第１のメディアアイテムの表現の視覚的コンテンツをシフトする（例えば、図７Ｃ～図７Ｄ）。いくつかの実施形態では、１つ以上のユーザジェスチャの第２のセットを検出したことに応じて、コンピュータシステムは、追加のコンテンツ（例えば、第１のメディアアイテムの追加のコンテンツ及び／又はメディアライブラリユーザインタフェースの追加のコンテンツ）を表示する。１つ以上のユーザジェスチャの第２のセットを検出したことに応じて第１のメディアアイテムの表現の視覚的コンテンツをシフトすることは、システムの状態（例えば、システムが１つ以上のユーザジェスチャの第２のセットを検出したこと）に関する視覚的フィードバックをユーザに提供し、これは、改善された視覚的フィードバックを提供する。いくつかの実施形態では、コンピュータシステムがヘッドマウントデバイスであるとき、１つ以上のユーザジェスチャの第２のセットは、ユーザの頭部の回転に対応する。

【0209】

いくつかの実施形態では、メディアライブラリユーザインタフェース（例えば、７０８）を表示している間に、コンピュータシステムは、１つ以上の入力デバイスを介して、ピンチジェスチャ（例えば、ピンチエアジェスチャ）（例えば、２本の指を互いに隣り合わせに配置すること、及び／又は２本の指を互いに近づける移動）及びドラッグジェスチャ（例えば、ドラッグエアジェスチャ）（例えば、ある方向への手の移動（例えば、ピンチされた手の移動））（例えば、ピンチアンドドラッグジェスチャ）を含む１つ以上のユーザジェスチャの第３のセット（例えば、７１６）（例えば、１つ以上のエアジェスチャ）を検出する。１つ以上のユーザジェスチャの第３のセットを検出したことに応じて、コンピュータシステムは、メディアライブラリユーザインタフェースのスクロールを表示する（例えば、図７Ｃ～図７Ｄ）。いくつかの実施形態では、１つ以上のユーザジェスチャの第３のセットを検出する前に、コンピュータシステムは、メディアアイテムの第１のセットの表現を表示し、メディアライブラリユーザインタフェースのスクロールを表示することは、１つ以上のユーザジェスチャの第３のセットを検出した後に、メディアアイテムの第１のセットとは異なるメディアアイテムの第２のセットの表現を表示することを含む。いくつかの実施形態では、メディアライブラリユーザインタフェースのスクロールを表示することは、メディアアイテムの第１のセットの少なくともサブセットがもはや表示されなくなるまで、ある方向にメディアアイテムの第１のセットのスクロールを表示することを含む。１つ以上のユーザジェスチャの第３のセットを検出したことに応じてメディアライブラリユーザインタフェースのスクロールを表示することは、システムの状態（例えば、システムが１つ以上のユーザジェスチャの第３のセットを検出したこと）についての視覚的フィードバックをユーザに与え、これは、改善された視覚的フィードバックを提供する。

【0210】

いくつかの実施形態では、メディアライブラリユーザインタフェース（例えば、７０８）を表示している間に、コンピュータシステムは、１つ以上の入力デバイスを介して、第１のメディアアイテム（例えば、７１０Ｆ）の選択に対応する１つ以上のユーザ入力（例えば、７１８）（例えば、１つ以上のジェスチャ入力（例えば、１つ以上のエアジェスチャ）及び／又は１つ以上の非ジェスチャ入力（例えば、ユーザの視線が第１のメディアアイテムに向けられている及び／又は第１のメディアアイテム上に維持されている間の片手ピンチジェスチャ及び／又は両手ピンチ解除ジェスチャ）（例えば、任意の他のメディアアイテムを選択することなく第１のメディアアイテムを選択すること（例えば、第１のメディアアイテムのみを選択すること））を検出する。第１のメディアアイテムの選択に対応する１つ以上のユーザ入力を検出したことに応じて、コンピュータシステムは、表示生成構成要素を介して、メディアライブラリユーザインタフェースとは異なる選択されたメディアユーザインタフェース（例えば、７１９）に第１のメディアアイテムを表示する。いくつかの実施形態では、選択されたメディアユーザインタフェースは、メディアライブラリユーザインタフェースをオーバーレイする。いくつかの実施形態では、第１のメディアアイテムの選択に対応する１つ以上のユーザ入力を検出したことに応じて、コンピュータシステムは、メディアライブラリユーザインタフェースの表示を中止するか、又はメディアライブラリユーザインタフェースの少なくとも一部の表示を中止する。選択されたメディアユーザインタフェース内に第１のメディアアイテムを表示している間に、コンピュータシステムは、１つ以上の入力デバイスを介して、ピンチジェスチャ（例えば、ピンチエアジェスチャ）（例えば、互いに隣り合う２本の指の配置及び／又は互いに近づく２本の指の移動）及びドラッグジェスチャ（例えば、ドラッグエアジェスチャ）（例えば、ある方向への手の移動（例えば、ピンチされた手の移動））（例えば、第１の方向へのピンチアンドドラッグジェスチャ）を含む１つ以上のユーザジェスチャの第４のセット（例えば、７３２）（例えば、１つ以上のエアジェスチャ）を検出する。１つ以上のユーザジェスチャの第４のセットを検出したことに応じて、コンピュータシステムは、選択されたメディアユーザインタフェース内の第１のメディアアイテムの表示を中止し、表示生成構成要素を介して、選択されたメディアユーザインタフェース内に第１のメディアアイテムとは異なる第２のメディアアイテムを表示する（例えば、図７Ｆを参照して説明したように）。いくつかの実施形態では、コンピュータシステムは、選択されたメディアユーザインタフェース内の第１のメディアアイテムの表示を、選択されたメディアユーザインタフェース内の第２のメディアアイテムの表示に置換する。いくつかの実施形態では、選択されたメディアユーザインタフェース内に第２のメディアアイテムを表示することは、ドラッグジェスチャ（例えば、ピンチアンドドラッグジェスチャ）が特定の方向（例えば、左方向、右方向、上方向、及び／又は下方向）に対応するという判定に従って実行される。いくつかの実施形態では、特定の方向とは異なる方向へのピンチアンドドラッグジェスチャは、異なるアクション（例えば、選択されたメディアユーザインタフェースの表示を中止すること、及び／又はメディアライブラリユーザインタフェースを表示すること）をもたらす。１つ以上のユーザジェスチャの第４のセットを検出したことに応じて、選択されたメディアユーザインタフェース内の第１のメディアアイテムの表示を中止し、選択されたメディアユーザインタフェース内の第１のメディアアイテムとは異なる第２のメディアアイテムを表示することは、システムの状態（例えば、システムが１つ以上のユーザジェスチャの第４のセットを検出したこと）に関する視覚的フィードバックをユーザに提供し、これは、改善された視覚的フィードバックを提供する。

【0211】

いくつかの実施形態では、メディアライブラリユーザインタフェース（例えば、７０８）を表示している間に、コンピュータシステムは、１つ以上の入力デバイスを介して、第１のメディアアイテム（例えば、７１０Ｆ）の選択に対応する１つ以上のユーザ入力（例えば、７１８）（例えば、１つ以上のジェスチャ入力（例えば、１つ以上のエアジェスチャ）及び／又は１つ以上の非ジェスチャ入力（例えば、ユーザの視線が第１のメディアアイテムに向けられている及び／又は第１のメディアアイテム上に維持されている間の片手ピンチジェスチャ及び／又は両手ピンチ解除ジェスチャ）（例えば、任意の他のメディアアイテムを選択することなく第１のメディアアイテムを選択すること（例えば、第１のメディアアイテムのみを選択すること））を検出する。第１のメディアアイテムの選択に対応する１つ以上のユーザ入力を検出したことに応じて、コンピュータシステムは、表示生成構成要素を介して、メディアライブラリユーザインタフェースとは異なる選択されたメディアユーザインタフェース（例えば、７１９）に第１のメディアアイテム（例えば、７１０Ｆ）を表示する。いくつかの実施形態では、選択されたメディアユーザインタフェースは、メディアライブラリユーザインタフェースをオーバーレイする。いくつかの実施形態では、第１のメディアアイテムの選択に対応する１つ以上のユーザ入力を検出したことに応じて、コンピュータシステムは、メディアライブラリユーザインタフェースの表示を中止するか、又はメディアライブラリユーザインタフェースの少なくとも一部の表示を中止する。選択されたメディアユーザインタフェース内に第１のメディアアイテムを表示している間に、コンピュータシステムは、１つ以上の入力デバイスを介して、ピンチジェスチャ（例えば、２本の指を互いに隣り合わせに配置すること、及び／又は２本の指を互いに近づける移動）及びドラッグジェスチャ（例えば、ある方向への手の移動（例えば、ピンチされた手の移動））（例えば、第１の方向へのピンチアンドドラッグジェスチャ）を含む１つ以上のユーザジェスチャの第５のセット（例えば、７３２）（例えば、１つ以上のエアジェスチャ）を検出する。１つ以上のユーザジェスチャの第５のセットを検出したことに応じて、コンピュータシステムは、選択されたメディアユーザインタフェースの表示を中止し、表示生成構成要素を介して、（例えば、図７Ｆを参照して説明したように）メディアライブラリユーザインタフェース（例えば、７０８）を（例えば、選択されたメディアユーザインタフェースによって以前に占有されていたロケーションに）表示する。いくつかの実施形態では、選択されたメディアユーザインタフェースの表示を中止し、メディアライブラリユーザインタフェースを表示することは、ドラッグジェスチャ（例えば、ピンチアンドドラッグジェスチャ）が特定の方向（例えば、左方向、右方向、上方向、及び／又は下方向）に対応するという判定に従って実行される。いくつかの実施形態では、特定の方向とは異なる方向へのピンチアンドドラッグジェスチャは、異なるアクションをもたらす（例えば、選択されたメディアユーザインタフェース内の第１のメディアアイテムの表示を、選択されたメディアユーザインタフェース内の異なるメディアアイテムと置換する）。１つ以上のユーザジェスチャの第５のセットを検出したことに応じて、選択されたメディアユーザインタフェースの表示を中止し、メディアライブラリユーザインタフェースを表示することは、システムの状態（例えば、システムが１つ以上のユーザジェスチャの第５のセットを検出したこと）に関する視覚的フィードバックをユーザに提供し、これは、改善された視覚的フィードバックを提供する。

【0212】

いくつかの実施形態では、メディアライブラリユーザインタフェース（例えば、７０８）を表示している間に、コンピュータシステムは、１つ以上の入力デバイスを介して、第１のメディアアイテム（例えば、７１０Ｆ）の選択に対応する１つ以上のユーザ入力（例えば、７１８）（例えば、１つ以上のジェスチャ入力（例えば、１つ以上のエアジェスチャ）及び／又は１つ以上の非ジェスチャ入力（例えば、ユーザの視線が第１のメディアアイテムに向けられている及び／又は第１のメディアアイテム上に維持されている間の片手ピンチジェスチャ及び／又は両手ピンチ解除ジェスチャ）（例えば、任意の他のメディアアイテムを選択することなく第１のメディアアイテムを選択すること（例えば、第１のメディアアイテムのみを選択すること））を検出する。第１のメディアアイテムの選択に対応する１つ以上のユーザ入力を検出したことに応じて、コンピュータシステムは、表示生成構成要素を介して、メディアライブラリユーザインタフェースとは異なる選択されたメディアユーザインタフェース（例えば、７１９）に第１のメディアアイテム（例えば、７１０Ｆ）を表示する。いくつかの実施形態では、選択されたメディアユーザインタフェースは、メディアライブラリユーザインタフェースをオーバーレイする。いくつかの実施形態では、第１のメディアアイテムの選択に対応する１つ以上のユーザ入力を検出したことに応じて、コンピュータシステムは、メディアライブラリユーザインタフェースの表示を中止するか、又はメディアライブラリユーザインタフェースの少なくとも一部の表示を中止する。選択されたメディアユーザインタフェース内に第１のメディアアイテムを表示している間に、コンピュータシステムは、１つ以上の入力デバイスを介して、ピンチジェスチャ（例えば、２本の指を互いに隣り合わせに配置すること、及び／又は２本の指を互いに近づける移動）及びドラッグジェスチャ（例えば、ある方向への手の移動（例えば、ピンチされた手の移動））（例えば、第１の方向へのピンチアンドドラッグジェスチャ）を含む１つ以上のユーザジェスチャの第６のセット（例えば、１つ以上のエアジェスチャ）（例えば、７３２）を検出する。１つ以上のユーザジェスチャの第６のセットを検出したことに応じて、ドラッグジェスチャ（例えば、ピンチアンドドラッグジェスチャ）が第１の方向（例えば、左方向、右方向、上方向、及び／又は下方向）に対応するという判定に従って、コンピュータシステムは、選択されたメディアユーザインタフェース内での第１のメディアアイテムの表示を中止し、表示生成構成要素を介して、選択されたメディアユーザインタフェース内で第１のメディアアイテムとは異なる第２のメディアアイテムを表示する。いくつかの実施形態では、第２のメディアアイテムを表示することは、選択されたメディアユーザインタフェース内の第１のメディアアイテムの表示を、選択されたメディアユーザインタフェース内の第２のメディアアイテムの表示と置換することを含む。いくつかの実施形態では、１つ以上のユーザジェスチャの第６のセットを検出したことに応じて、ドラッグジェスチャ（例えば、ピンチアンドドラッグジェスチャ）が第１の方向とは異なる第２の方向（例えば、左方向、右方向、上方向、及び／又は下方向）に対応するという判定に従って、コンピュータシステムは、選択されたメディアユーザインタフェースの表示を中止し、表示生成構成要素を介して、（例えば、図７Ｆを参照して説明されるように）メディアライブラリユーザインタフェースを表示する。

【0213】

いくつかの実施形態では、１つ以上のユーザジェスチャの第６のセットを検出したことに応じて、ドラッグジェスチャが第１の方向及び第２の方向とは異なる（かつ、任意選択的に第１の方向とは反対の）第３の方向であるという判定に従って、コンピュータシステムは、選択されたメディアユーザインタフェース内の第１のメディアアイテムの表示を中止し、表示生成構成要素を介して、選択されたメディアユーザインタフェース内の第１のメディアアイテム及び第２のメディアアイテムとは異なる第３のメディアアイテムを表示する。いくつかの実施形態では、コンピュータシステムは、選択されたメディアユーザインタフェース内の第１のメディアアイテムの表示を、選択されたメディアユーザインタフェース内の第３のメディアアイテムの表示に置換する。

【0214】

１つ以上のユーザジェスチャの第６のセットを検出したことに応じて、かつドラッグジェスチャが第１の方向に対応するという判定に従って、選択されたメディアユーザインタフェース内の第１のメディアアイテムの表示を中止し、選択されたメディアユーザインタフェース内の第１のメディアアイテムとは異なる第２のメディアアイテムを表示することは、システムの状態（例えば、システムが１つ以上のユーザジェスチャの第６のセットを検出し、ジェスチャの第６のセットが第１の方向に対応すると判定したこと）に関する視覚的フィードバックをユーザに提供し、これは、改善された視覚的フィードバックを提供する。

【0215】

１つ以上のユーザジェスチャの第６のセットを検出したことに応じて、ドラッグジェスチャが第２の方向に対応するという判定に従って、選択されたメディアユーザインタフェースの表示を中止し、メディアライブラリユーザインタフェースを表示することは、システムの状態（例えば、システムが１つ以上のユーザジェスチャの第６のセットを検出し、１つ以上のユーザジェスチャの第６のセットが第２の方向に対応すると判定したこと）に関する視覚的フィードバックをユーザに提供し、これは、改善された視覚的フィードバックを提供する。

【0216】

いくつかの実施形態では、メディアライブラリユーザインタフェース（例えば、７０８）を表示している間に、コンピュータシステムは、１つ以上の入力デバイスを介して、第１のメディアアイテム（例えば、７１０Ｆ）の選択（例えば、ユーザの視線が第１のメディアアイテムに向けられている及び／又は第１のメディアアイテム上に維持されている間の片手ピンチジェスチャ及び／又は両手ピンチ解除ジェスチャ）に対応する１つ以上のユーザ入力（例えば、７１８）（例えば、１つ以上のジェスチャ入力（例えば、１つ以上のエアジェスチャ）及び／又は１つ以上の非ジェスチャ入力）を検出する（例えば、任意の他のメディアアイテムを選択せずに第１のメディアアイテムを選択する（例えば、第１のメディアアイテムのみを選択する））。第１のメディアアイテムの選択に対応する１つ以上のユーザ入力を検出したことに応じて、コンピュータシステムは、表示生成構成要素を介して、メディアライブラリユーザインタフェースとは異なる選択されたメディアユーザインタフェース（例えば、７１９）に第１のメディアアイテム（例えば、７１０Ｆ）を表示する。いくつかの実施形態では、選択されたメディアユーザインタフェースは、メディアライブラリユーザインタフェースをオーバーレイする。いくつかの実施形態では、第１のメディアアイテムの選択に対応する１つ以上のユーザ入力を検出したことに応じて、コンピュータシステムは、メディアライブラリユーザインタフェースの表示を中止するか、又はメディアライブラリユーザインタフェースの少なくとも一部の表示を中止する。選択されたメディアユーザインタフェース内に第１のメディアアイテムを表示している間に、ユーザの手（例えば、ユーザの１つ以上の手）が第１の状態（例えば、持ち上げられた状態及び／又は第１のポーズ）にあるという判定に従って、コンピュータシステムは、表示生成構成要素を介して、ユーザインタフェースコントロールの第１のセット（例えば、７２８Ａ、７２８Ｂ、７２８Ｃ、及び／又は７４０）（例えば、選択可能なコントロール、クローズオプション、共有オプション、時間情報、日付情報、ロケーション情報、及び／又は再生コントロール（例えば、再生オプション、一時停止オプション、早送りオプション、及び／又は巻き戻しオプション））を表示する。いくつかの実施形態では、ユーザインタフェースコントロールの第１のセットを表示している間に、コンピュータシステムは、ユーザインタフェースコントロールの第１のセットの第１のユーザインタフェースコントロールの選択に対応する１つ以上の選択入力を検出し、１つ以上の選択入力を検出したことに応じて、第１のメディアアイテムの表示を修正する（例えば、第１のメディアアイテムを閉じる（例えば、表示を中止する）、第１のメディアアイテムの再生を開始及び／又は一時停止する、第１のメディアアイテムの再生を前方及び／又は後方にスキップする、第１のメディアアイテムの再生を減速及び／又は加速する）。いくつかの実施形態では、ユーザインタフェースコントロールの第１のセットは、第１のメディアアイテムを閉じる（例えば、その表示を中止する）ために選択可能な第１のユーザインタフェースコントロール（例えば、クローズオプション）を含む。いくつかの実施形態では、１つ以上のユーザインタフェースコントロールの第１のセットは、第１のメディアアイテムを１つ以上の外部電子デバイス（例えば、共有オプション）に共有するためのプロセスを開始するために選択可能な第２のユーザインタフェースコントロールを含む。いくつかの実施形態では、１つ以上のユーザインタフェースコントロールの第１のセットは、第１のメディアアイテムの再生を再開及び／又は開始するために選択可能な第３のユーザインタフェースコントロール（例えば、再生オプション）を含む。いくつかの実施形態では、１つ以上のユーザインタフェースコントロールの第１のセットは、第１のメディアアイテムの再生を一時停止するために選択可能な第４のユーザインタフェースコントロール（例えば、一時停止オプション）を含む。いくつかの実施形態では、１つ以上のユーザインタフェースコントロールの第１のセットは、第１のメディアアイテムの再生をスキップ及び／又は加速するように選択可能な第５のユーザインタフェースコントロール（例えば、早送りオプション）を含む。いくつかの実施形態では、１つ以上のユーザインタフェースコントロールの第１のセットは、第１のメディアアイテムの再生を後方にスキップ、減速、及び／又は逆再生するように選択可能な第６のユーザインタフェースコントロール（例えば、巻き戻しオプション）を含む。ユーザの手（例えば、ユーザの１つ以上の手）が第１の状態とは異なる第２の状態（例えば、下げられた状態及び／又は第２のポーズ）にあるという判定に従って、コンピュータシステムは、（例えば、図７Ｎを参照して説明されるように）ユーザインタフェースコントロールの第１のセットを表示することを取り止める。

【0217】

いくつかの実施形態では、ユーザインタフェースコントロールの第１のセットは、第１のメディアアイテム上にオーバーレイされることなく（例えば、第１のメディアアイテムの上及び／又は下に）表示される。いくつかの実施形態では、ユーザインタフェースコントロールの第１のセットを表示している間に、コンピュータシステムは、１つ以上の入力デバイスを介して、ユーザの手が第１の状態から第２の状態に移動したことを検出し、ユーザの手が第１の状態から第２の状態に移動したことを検出したことに応じて、ユーザインタフェースコントロールの第１のセットの表示を中止する。

【0218】

ユーザの手が第１の状態にあるという判定に従ってユーザインタフェースコントロールの第１のセットを表示することは、システムの状態（例えば、ユーザの手が第１の状態にあることをシステムが検出したこと）に関する視覚的フィードバックをユーザに提供し、これは、改善された視覚的フィードバックを提供する。

【0219】

ユーザの手が第２の状態にあるときにユーザインタフェースコントロールの第１のセットを表示することを取り止めること、及びユーザの手が第１の状態にあるときにユーザインタフェースコントロールの第１のセットを表示することは、ユーザインタフェースを混乱させることなく追加のコントロールオプションを提供する。

【0220】

いくつかの実施形態では、メディアライブラリユーザインタフェース（例えば、７０８）を表示している間に、コンピュータシステムは、１つ以上の入力デバイスを介して、第１のメディアアイテム（例えば、７１０Ｆ）の選択に対応する１つ以上のユーザジェスチャの第７のセット（例えば、７１８）（例えば、１つ以上のエアジェスチャ）（例えば、ユーザの視線が第１のメディアアイテムに向けられている及び／又は第１のメディアアイテム上に維持されている間の片手ピンチジェスチャ及び／又は両手ピンチ解除ジェスチャ）（例えば、他のメディアアイテムを選択することなく第１のメディアアイテムを選択すること（例えば、第１のメディアアイテムのみを選択すること））を検出する。１つ以上のユーザジェスチャの第７のセットを検出したことに応じて、コンピュータシステムは、照明効果の第１のセット（例えば、視覚的照明特性の第１のセット）を表示することから、照明効果の第１のセットとは異なる照明効果の第２のセット（例えば、視覚的照明特性の第２のセット）を表示することに遷移させ、照明効果の第１のセットを表示することに続いて、表示生成構成要素を介して、照明効果の中間セット（例えば、視覚的照明特性の第１のセット及び視覚的照明特性の第２のセットとは異なる視覚的照明特性の中間セット）を表示することであって、照明効果の中間セットは、照明効果の第１のセット及び照明効果の第２のセットとは異なる（いくつかの実施形態では、照明効果の第１のセットは、第１の照明特性（例えば、輝度、コントラスト、彩度）に対する第１の値（例えば、第１の数値）を有し、照明効果の第２のセットは、第１の照明特性に対する第１の値とは異なる第２の値を有し、照明効果の中間セットは、第１の照明特性に対する第１及び第２の値とは異なる第３の値を有し、第３の値は、第１の値と第２の値との間にある）、ことと、照明効果の中間セットを表示することに続いて、表示生成構成要素を介して、（例えば、図７Ｄ～図７Ｆを参照して説明したように）照明効果の第２のセットを表示することと、を含む。いくつかの実施形態では、コンピュータシステムがヘッドマウントデバイスである場合、照明効果の第１のセット及び／又は第２のセットの外観は、ユーザが物理的環境内で自身を再配置したこと及び／又はユーザが（例えば、ユーザがコンピュータシステムを装着している間に）自身の頭部を回転させたことをコンピュータシステムが検出したことに応じて変化する。

【0221】

いくつかの実施形態では、照明効果の第１のセットを表示することから照明効果の第２のセットを表示することに遷移させることは、照明効果の第１のセットから照明効果の第２のセットに徐々に遷移させることを含む（例えば、照明効果の第１のセットと照明効果の第２のセットとの間に適用される複数の中間照明効果）。いくつかの実施形態では、照明効果の第１のセットを表示することから照明効果の第２のセットを表示することに遷移させることは、複数の光線（例えば、様々な色、長さ、及び／又は強度の複数の光線）がメディアウィンドウから延びる光スピル効果を徐々に適用する（例えば、光スピル効果の輝度及び／又は強度を徐々に増加させる）ことを含む。いくつかの実施形態では、光スピル効果は、選択されたメディアアイテムに基づいて決定される（例えば、どのメディアアイテムが選択されたかに基づいて異なる）。いくつかの実施形態では、照明効果の第１のセットを表示することから照明効果の第２のセットを表示することに遷移させることは、メディアライブラリユーザインタフェースと同時に表示される背景コンテンツを徐々に暗くすることを含む。いくつかの実施形態では、１つ以上のユーザジェスチャの第７のセットを検出したことに応じて、選択された第１のメディアアイテムは、選択されたメディアアイテムユーザインタフェースに表示される。いくつかの実施形態では、背景コンテンツは、第１の時点でメディアライブラリユーザインタフェースと同時に表示され、第２の時点で選択されたメディアアイテムユーザインタフェースと同時に表示される。いくつかの実施形態では、背景コンテンツは、メディアライブラリユーザインタフェースと同時に表示されている間は明るい状態で表示され、選択されたメディアアイテムユーザインタフェースと同時に表示されている間は暗い状態で表示される。いくつかの実施形態では、コンピュータシステムがヘッドマウントデバイスである場合、照明効果の第１のセット及び／又は第２のセットの外観は、ユーザが物理的環境内で自身を再配置したこと及び／又はユーザが（例えば、ユーザがコンピュータシステムを装着している間に）自身の頭部を回転させたことをコンピュータシステムが検出したことに応じて変化する。

【0222】

１つ以上のユーザジェスチャの第７のセットを検出したことに応じて照明効果の第１のセットを表示することから照明効果の第２のセットを表示することに遷移させることは、システムの状態（例えば、システムが１つ以上のユーザジェスチャの第７のセットを検出したこと）に関する視覚的フィードバックをユーザに提供し、これは、改善された視覚的フィードバックを提供する。

【0223】

いくつかの実施形態では、コンピュータシステムは、表示生成構成要素を介して、メディアライブラリユーザインタフェース（例えば、７０８）とは異なる選択されたメディアユーザインタフェース（例えば、７１９）（例えば、第１のメディアアイテムの選択を示す（例えば、第１のメディアアイテムのみの選択を示す）選択されたメディアユーザインタフェース（例えば、第１のメディアアイテムが視覚的に強調される（例えば、他のメディアアイテムよりも大きいサイズで表示される、及び／又は表示されているメディアライブラリの唯一のメディアアイテムである）選択されたメディアユーザインタフェース）に第１のメディアアイテム（例えば、７１０Ｆ）を表示する。選択されたメディアユーザインタフェース内に第１のメディアアイテムを表示している間に、コンピュータシステムは、１つ以上の入力デバイスを介して、選択されたメディアユーザインタフェースを閉じるユーザ要求（例えば、ピンチアンドドラッグジェスチャ（例えば、所定の方向へのピンチアンドドラッグジェスチャ））に対応する１つ以上のユーザジェスチャの第８のセット（例えば、７３２）（例えば、１つ以上のエアジェスチャ）を検出する。１つ以上のユーザジェスチャの第８のセットを検出したことに応じて、コンピュータシステムは、照明効果の第３のセット（例えば、視覚的照明特性の第３のセット）（例えば、選択されたメディアユーザインタフェースにおいて第１のメディアアイテムと同時に表示される照明効果の第３のセット）を表示することから、照明効果の第３のセットとは異なる照明効果の第４のセット（例えば、視覚的照明特性の第４のセット）を表示することに遷移させ、照明効果の第３のセットを表示することに続いて、表示生成構成要素を介して、照明効果の第２の中間セット（例えば、視覚的照明特性の第３のセット及び視覚的照明特性の第４のセットとは異なる視覚的照明特性の第２の中間セット）を表示することであって、照明効果の第２の中間セットは、照明効果の第３のセット及び照明効果の第４のセットとは異なる（いくつかの実施形態では、照明効果の第３のセットは、第１の照明特性（例えば、輝度、コントラスト、彩度）に対する第１の値（例えば、第１の数値）を有し、照明効果の第４のセットは、第１の照明特性に対する第１の値とは異なる第２の値を有し、照明効果の第２の中間セットは、第１の照明特性に対する第１及び第２の値とは異なる第３の値を有し、第３の値は、第１の値と第２の値との間にある）、ことと、照明効果の第２の中間セットを表示することに続いて、表示生成構成要素を介して、（例えば、図７Ｆを参照して説明したように）照明効果の第４のセットを表示することと、を含む。

【0224】

いくつかの実施形態では、照明効果の第３のセットを表示することから照明効果の第４のセットを表示することに遷移させることは、照明効果の第３のセットから照明効果の第４のセットに徐々に遷移させることを含む（例えば、照明効果の第３のセットと照明効果の第４のセットとの間に適用される複数の中間照明効果）。いくつかの実施形態では、照明効果の第３のセットを表示することから照明効果の第４のセットを表示することに遷移させることは、複数の光線（例えば、様々な色、長さ、及び／又は強度の複数の光線）がメディアウィンドウから延びる（例えば、選択されたメディアユーザインタフェースから延びる）光スピル効果を徐々に減少させる（例えば、光スピル効果の輝度及び／又は強度を徐々に減少させる）ことを含む。いくつかの実施形態では、光スピル効果は、選択されたメディアアイテムに基づいて決定される（例えば、どのメディアアイテムが選択されたかに基づいて異なる）。いくつかの実施形態では、照明効果の第３のセットを表示することから照明効果の第４のセットを表示することに遷移させることは、選択されたメディアユーザインタフェースと同時に表示される背景コンテンツを徐々に明るくすることを含む。いくつかの実施形態では、１つ以上のユーザジェスチャの第８のセットを検出したことに応じて、コンピュータシステムは、選択されたメディアユーザインタフェースの表示を中止し、メディアライブラリユーザインタフェースを表示する。いくつかの実施形態では、背景コンテンツは、第１の時点で選択されたメディアユーザインタフェースと同時に表示され、第２の時点でメディアライブラリユーザインタフェースと同時に表示される。いくつかの実施形態では、背景コンテンツは、選択されたメディアユーザインタフェースと同時に表示されている間は暗くされた状態で表示され、メディアライブラリユーザインタフェースと同時に表示されている間は明るくされた状態で表示される。

【0225】

１つ以上のユーザジェスチャの第８のセットを検出したことに応じて照明効果の第３のセットを表示することから照明効果の第４のセットを表示することに遷移させることは、システムの状態（例えば、システムが１つ以上のユーザジェスチャの第８のセットを検出したこと）に関する視覚的フィードバックをユーザに提供し、これは、改善された視覚的フィードバックを提供する。

【0226】

いくつかの実施形態では、コンピュータシステムは、表示生成構成要素を介して、メディアライブラリユーザインタフェース（例えば、７０８）とは異なる選択されたメディアユーザインタフェース（例えば、７１９）（例えば、第１のメディアアイテムの選択を示す（例えば、第１のメディアアイテムのみの選択を示す）選択されたメディアユーザインタフェース（例えば、第１のメディアアイテムが視覚的に強調される（例えば、他のメディアアイテムよりも大きいサイズで表示される、及び／又は表示されているメディアライブラリの唯一のメディアアイテムである）選択されたメディアユーザインタフェース）に第１のメディアアイテム（例えば、７４１又は７４３）と、視覚的コンテンツをナビゲートする（例えば、複数のフレーム（例えば、ビデオの画像）をナビゲートする、及び／又は複数のメディアアイテムをナビゲートする）ためのナビゲーションユーザインタフェース要素（例えば、７４０）（例えば、スクラババー）と、を同時に表示する。選択されたメディアユーザインタフェース内の第１のメディアアイテムと同時にナビゲーションユーザインタフェース要素を表示することは、ユーザがより少ない入力でコンテンツをナビゲートすることを可能にし、これにより、動作を実行するのに必要な入力の数が低減される。

【0227】

いくつかの実施形態では、ナビゲーションユーザインタフェース要素（例えば、７４０）は、選択されると、１つ以上のそれぞれのメディアアイテム（例えば、図７Ｍ～図７Ｎのスクラバ７４０に示される一時停止オプション）に関連付けられたそれぞれの機能（例えば、再生オプション、一時停止オプション、早送りオプション、巻き戻しオプション、及び／又はスキップオプション）を実行する１つ以上の選択可能なコントロールを含む。いくつかの実施形態では、ナビゲーションユーザインタフェース要素を表示している間に、コンピュータシステムは、１つ以上の選択可能なコントロールのうちの第１の選択可能なコントロールの選択に対応する１つ以上の選択入力（例えば、１つ以上のエアジェスチャ）を検出し、１つ以上の選択入力を検出したことに応じて、コンピュータシステムは、第１のメディアアイテムの表示を修正する（例えば、第１のメディアアイテムの再生を開始及び／又は一時停止する、第１のメディアアイテムの再生を前方及び／又は後方にスキップする、第１のメディアアイテムの再生を減速及び／又は加速する）。いくつかの実施形態では、１つ以上の選択可能なコントロールは、第１のメディアアイテムの再生を再開及び／又は開始するために選択可能な第１のコントロール（例えば、再生オプション）を含む。いくつかの実施形態では、１つ以上の選択可能なコントロールは、第１のメディアアイテムの再生を一時停止するために選択可能な第２のコントロール（例えば、一時停止オプション）を含む。いくつかの実施形態では、１つ以上の選択可能なコントロールは、第１のメディアアイテムの再生を前方にスキップする及び／又は加速するために選択可能な第３のコントロール（例えば、早送りオプション）を含む。いくつかの実施形態では、１つ以上の選択可能なコントロールは、第１のメディアアイテムの再生を後方にスキップする、減速する、及び／又は逆再生するように選択可能な第４のコントロール（例えば、巻き戻しオプション）を含む。１つ以上の選択可能なコントロールを表示することは、ユーザがより少ない入力で様々なそれぞれの機能を実行することを可能にし、これにより、動作を実行するのに必要な入力の数が低減される。

【0228】

いくつかの実施形態では、メディアライブラリユーザインタフェース（例えば、７０８）を表示している間に、コンピュータシステムは、１つ以上の入力デバイスを介して、第１のメディアアイテム（例えば、７１０Ｆ）の選択に対応する１つ以上のユーザ入力（例えば、７１８）（例えば、１つ以上のタッチ入力、１つ以上の非タッチ入力、及び／又は１つ以上のジェスチャ（例えば、１つ以上のエアジェスチャ））（例えば、ユーザの視線が第１のメディアアイテムに向けられている及び／又は第１のメディアアイテム上に維持されている間の片手ピンチジェスチャ及び／又は両手ピンチ解除ジェスチャ）を検出する。第１のメディアアイテムの選択に対応する１つ以上のユーザ入力を検出したことに応じて、第１の基準のセットが満たされたという判定に従って（例えば、第１のユーザ設定（例えば、没入型視聴設定）が有効及び／又は無効であるという判定に従って、第１のメディアアイテムが特定のタイプであるという判定に従って、かつ／又は特定のタイプの１つ以上のユーザ入力が検出されたという判定に従って）、コンピュータシステムは、表示生成構成要素を介して、第１のメディアアイテムを第１の角度サイズで表示し、第１の基準のセットが満たされなかったという判定に従って、コンピュータシステムは、表示生成構成要素を介して、第１のメディアアイテムを第１の角度サイズとは異なる第２の角度サイズで表示する（例えば、図７Ｆを参照して説明したように）。いくつかの実施形態では、第１の角度サイズは、没入型視聴体験（例えば、視聴されているメディアアイテムに対してより大きい角度サイズを有する）に対応し、第２の角度サイズは、非没入型視聴体験に対応する（例えば、第２の角度サイズは、第１の角度サイズより小さい）。いくつかの実施形態では、コンピュータシステムがヘッドマウントデバイスであるとき、第１のメディアアイテムが第１の角度サイズで表示されている間に、コンピュータシステムは、ユーザが物理的環境内で自身を再配置したこと、及び／又は（例えば、ユーザがコンピュータシステムを装着している間に）自身の頭部を回転させたことをコンピュータシステムが検出したことに応じて、第１のメディアアイテムが表示される透視図を変更する。第１の基準のセットが満たされたという判定に従って第１のメディアアイテムを第１の角度サイズで表示することは、システムの状態に関する視覚的フィードバック（例えば、第１の基準のセットが満たされたこと）をユーザに提供し、これは、改善された視覚的フィードバックを提供する。

【0229】

いくつかの実施形態では、コンピュータシステムは、表示生成構成要素を介して、第１のメディアアイテム（例えば、７１０Ｆ）を（例えば、メディアライブラリユーザインタフェースとは異なる選択されたメディアユーザインタフェース内に）表示し（例えば、第１のメディアアイテムの選択を示す（例えば、第１のメディアアイテムのみの選択を示す）選択されたメディアユーザインタフェース）（例えば、第１のメディアアイテムが他のメディアアイテムに対して視覚的に強調される（例えば、他のメディアアイテムよりも大きいサイズで表示される、及び／又は表示されているメディアライブラリの唯一のメディアアイテムである）選択されたメディアユーザインタフェース）、第１のメディアアイテムは、（例えば、図７Ｆを参照して説明したように）第１のメディアアイテムに適用されるビネッティング（例えば、第１のメディアアイテムの縁部及び／又は角部を暗くする、薄くする、不明瞭にする、及び／又はぼかす）を伴って（例えば、選択されたメディアユーザインタフェース内に）表示される。第１のメディアアイテムに適用されるビネッティングを用いて第１のメディアアイテムの表現を表示することは、第１のメディアアイテムの表現が、例えば、選択された状態で表示されていることをユーザに示し、これは、改善された視覚的フィードバックを提供する。

【0230】

いくつかの実施形態では、コンピュータシステムは、１つ以上の入力デバイスを介して、メディアライブラリユーザインタフェース（例えば、７０８）内の第１のポジションに対応するユーザ視線（例えば、７１４）を検出する（例えば、第２の時点の後の第６の時点で）（例えば、第３の方式で第１のメディアアイテムの表現を表示した後又は表示している間に）（例えば、ユーザがメディアライブラリユーザインタフェース内の第１のポジション（例えば、第１のメディアアイテムの表現に対応するメディアライブラリユーザインタフェース内の第１のポジション）を注視していることを検出及び／又は判定する）。メディアライブラリユーザインタフェース内の第１のポジションに対応するユーザ視線を検出し続けている間に（例えば、第６の時点の後の第７の時点で）、コンピュータシステムは、１つ以上の入力デバイスを介して、第１のメディアアイテム（例えば、７１０Ｆ）の選択に対応する選択ジェスチャ（例えば、７１８）（例えば、エアジェスチャ）（例えば、ユーザの手、頭部、及び／又は身体の移動）（いくつかの実施形態では、１つ以上の非ジェスチャ入力）（例えば、ユーザの視線が第１のメディアアイテムに向けられている及び／又はその上に維持されている間の片手ピンチジェスチャ及び／又は両手ピンチ解除ジェスチャ）を検出する。メディアライブラリユーザインタフェース内の第１のポジションに対応するユーザ視線を検出し続けている間に第１のメディアアイテムの選択に対応する選択ジェスチャを検出したことを検出したことに応じて、選択ジェスチャが第１のタイプの選択ジェスチャ（例えば、エアジェスチャ）（例えば、片手ピンチジェスチャ、片手ダブルピンチジェスチャ、両手ピンチジェスチャ、両手ピンチ解除ジェスチャ、部分的に完了した片手ピンチジェスチャ、及び／又は完了した片手ピンチジェスチャ）に対応するという判定に従って、コンピュータシステムは、表示生成構成要素を介して、第９の方式で（例えば、視覚特性の第９のセットを用いて）第１のメディアアイテムを表示し（例えば、中間選択状態で（例えば、メディアライブラリユーザインタフェースから選択されたメディアユーザインタフェースに遷移させる遷移状態で）第１のメディアアイテムを表示する）（例えば、選択されたメディアユーザインタフェースに表示された第１のメディアアイテムのサイズよりも小さく、メディアライブラリユーザインタフェース内の第１のメディアアイテムの表現のサイズよりも大きいサイズで第１のメディアアイテムを表示する）、選択ジェスチャが、第１のタイプの選択ジェスチャとは異なる第２のタイプの選択ジェスチャ（例えば、片手ピンチジェスチャ、片手ダブルピンチジェスチャ、両手ピンチジェスチャ、両手ピンチ解除ジェスチャ、部分的に完了した片手ピンチジェスチャ、及び／又は完了した片手ピンチジェスチャ）に対応するという判定に従って、コンピュータシステムは、表示生成構成要素を介して、第９の方式とは異なる第１０の方式で（例えば、視覚特性の第９のセットとは異なる視覚特性の第１０のセットを用いて）（例えば、第１のメディアアイテムのユーザ選択を示すメディアライブラリユーザインタフェースとは異なる選択されたメディアユーザインタフェースにおいて）第１のメディアアイテムを表示する、いくつかの実施形態では、第９の方式で第１のメディアアイテムを表示することは、遷移状態で第１のメディアアイテムを表示することを含み、第１０の方式で第１のメディアアイテムを表示することは、選択状態で第１のメディアアイテムを表示することを含む。いくつかの実施形態では、第９の方式で第１のメディアアイテムを表示することは、メディアライブラリユーザインタフェース内の第１のメディアアイテムの表現のサイズよりも大きい第１のサイズで第１のメディアアイテムを表示することを含み、第１０の方式で第１のメディアアイテムを表示することは、（例えば、図７Ｆを参照して説明されるように）第１のサイズよりも大きい第２のサイズで第１のメディアアイテムを表示することを含む。第１のメディアアイテムの選択に対応する選択ジェスチャを検出したことに応じて、第９の方式及び／又は第１０の方式で第１のメディアアイテムを表示することは、システムの状態（例えば、システムが第１のメディアアイテムの選択に対応する選択ジェスチャを検出したこと）に関する視覚的フィードバックをユーザに提供し、これは、改善された視覚的フィードバックを提供する。

【0231】

いくつかの実施形態では、方法８００、９００、１０００、及び１１００の態様／動作は、これらの方法の間で交換、置換、及び／又は追加され得る。例えば、方法８００で表示されるメディアライブラリユーザインタフェースは、任意選択的に、方法９００で表示されるユーザインタフェースであり、及び／又は方法８００で表示される第１のメディアアイテムは、任意選択的に、方法９００及び／又は１０００で表示される第１のメディアアイテムである。簡潔にするために、それらの詳細はここでは繰り返さない。

【0232】

図９は、いくつかの実施形態による、メディアアイテム及びユーザインタフェースと相互作用するための例示的な方法９００のフロー図である。いくつかの実施形態では、方法１０００は、表示生成構成要素（例えば、７０２）（例えば、ディスプレイコントローラ、タッチ感知ディスプレイシステム、ディスプレイ（例えば、統合及び／又は接続された）、３Ｄディスプレイ、透明ディスプレイ、プロジェクタ、及び／又はヘッドアップディスプレイ）及び１つ以上の入力デバイス（例えば、７１５）（例えば、タッチ感知面（例えば、タッチ感知ディスプレイ））と通信するコンピュータシステム（例えば、７００）（例えば、図１のコンピュータシステム１０１）（例えば、スマートフォン、スマートウォッチ、タブレット、及び／又はウェアラブルデバイス）、マウス、キーボード、リモートコントロール、視覚入力デバイス（例えば、カメラ）、オーディオ入力デバイス（例えば、マイクロフォン）、及び／又はバイオメトリックセンサ（例えば、指紋センサ、顔識別センサ、及び／又は虹彩識別センサ））で実行される。いくつかの実施形態では、方法１０００は、非一時的（又は一時的）コンピュータ可読記憶媒体に記憶され、コンピュータシステム１０１の１つ以上のプロセッサ２０２（例えば、図１Ａのコントロール１１０）などのコンピュータシステムの１つ以上のプロセッサによって実行される命令によって統御される。方法９００のいくつかの動作は、任意選択的に、組み合わされ、かつ／又はいくつかの動作の順序は、任意選択的に、変更される。

【0233】

いくつかの実施形態では、コンピュータシステム（例えば、７００）は、表示生成構成要素（例えば、７０２）を介して、第１のズームレベルのユーザインタフェース（例えば、図７Ｄのユーザインタフェース７０８、図７Ｆ又は図７Ｊのユーザインタフェース７１９）（例えば、１つ以上のコンテンツアイテム（例えば、１つ以上の選択可能なコンテンツアイテム及び／又はメディアアイテム（例えば、写真及び／又はビデオ））及び／又は１つ以上のコンテンツアイテムの表現（例えば、１つ以上のメディアアイテムの選択可能な表現）を含むユーザインタフェース）（例えば、７０８、７１９）を表示する（９０２）。ユーザインタフェースを表示している間に（９０４）、コンピュータシステムは、１つ以上の入力デバイスを介して、ズームインユーザコマンド（例えば、片手ピンチジェスチャ、片手ダブルピンチジェスチャ、両手ピンチジェスチャ、及び／又は両手ピンチ解除ジェスチャ）に対応する１つ以上のユーザ入力（例えば、７１８、７３２、７３３、７３４）（例えば、１つ以上のタップ入力、１つ以上のジェスチャ（例えば、１つ以上のエアジェスチャ）、及び／又は１つ以上の他の入力）を検出する（９０６）。ズームインユーザコマンドに対応する１つ以上のユーザ入力を検出したことに応じて（９０８）、ユーザ視線（例えば、７１４）（例えば、１つ以上のユーザ入力を検出している間及び／又は１つ以上のユーザ入力を検出した後に検出されたユーザ視線）がユーザインタフェース内の第１のポジションに対応するという判定に従って（９１０）（例えば、ユーザがユーザインタフェース内の第１のポジションを注視しているという判定に従って）、コンピュータシステムは、表示生成構成要素を介して、第１のズームレベルよりも大きい第２のズームレベルでユーザインタフェース（例えば、図７Ｅのユーザインタフェース７０８、図７Ｇのユーザインタフェース７１９、図７Ｈのユーザインタフェース７１９、図７Ｋのユーザインタフェース７１９）を表示し（９１２）、第２のズームレベルでユーザインタフェースを表示することは、第１のポジションに基づいて選択された第１のズーム中心を使用してユーザインタフェースをズームすること（例えば、ユーザインタフェースを拡大及び／又はズームしながら、ユーザインタフェースの第１のポジションを表示生成構成要素上のその現在の表示ポジションに維持すること（例えば、ズーム動作の少なくとも一部の間、ユーザインタフェースの第１のポジションを表示生成構成要素上のその現在の表示ポジションに維持すること））を含む。ユーザ視線（例えば、１つ以上のユーザ入力を検出している間及び／又は１つ以上のユーザ入力を検出した後に検出されたユーザ視線）がユーザインタフェース内の第１のポジションとは異なる第２のポジションに対応するという判定に従って（９１４）（例えば、ユーザがユーザインタフェース内の第２のポジションを注視しているという判定に従って）、コンピュータシステムは、表示生成構成要素を介して、第１のズームレベルよりも大きい第３のズームレベル（例えば、第２のズームレベルと等しい又は異なる第３のズームレベル）でユーザインタフェース（例えば、図７Ｅのユーザインタフェース７０８、図７Ｇのユーザインタフェース７１９、図７Ｈのユーザインタフェース７１９、図７Ｋのユーザインタフェース７１９）を表示し（９１６）、第３のズームレベルでユーザインタフェースを表示することは、第２のポジションに基づいて選択された第２のズーム中心を使用してユーザインタフェースをズームすることを含み、第２のズーム中心は、第１のズーム中心とは異なるロケーションにある（例えば、ユーザインタフェースを拡大及び／又はズームしながら、ユーザインタフェースの第２のポジションを表示生成構成要素上の現在の表示ポジションに維持する（例えば、ズーム動作の少なくとも一部の間、ユーザインタフェースの第２のポジションを表示生成構成要素上の現在の表示ポジションに維持する））。ズームインユーザコマンドに対応する１つ以上のユーザ入力を検出したことに応じて、ユーザ視線のポジションに基づいて選択された第１のズーム中心を使用して第２のズームレベルでユーザインタフェースを表示することは、システムの状態（例えば、システムが１つ以上のユーザ入力を検出し、ユーザ視線のポジションを検出したこと）に関する視覚的フィードバックをユーザに提供し、これは、改善された視覚的フィードバックを提供する。

【0234】

いくつかの実施形態では、ズームインユーザコマンド（例えば、７１８、７３２、７３３、又は７３４）に対応する１つ以上のユーザ入力は、第１のピンチジェスチャ（例えば、エアジェスチャ）（例えば、２本の指が互いに近づくように移動するジェスチャ（例えば、手の人差し指と親指が互いに近づくように移動するジェスチャ））（例えば、片手ピンチジェスチャ（例えば、片手の２本の指が互いに近づくように移動する））と、第１のピンチジェスチャ（例えば、第２の片手ピンチジェスチャ（例えば、第１のピンチジェスチャと同じ手による））に続いて発生する第２のピンチジェスチャ（例えば、エアジェスチャ）（例えば、互いの閾値持続時間内に発生及び／又は検出される第１のピンチジェスチャ及び第２のピンチジェスチャ）と、を含む。第１のピンチジェスチャ及び第２のピンチジェスチャに応じてユーザ視線のポジションに基づいて選択された第１のズーム中心を使用して第２のズームレベルでユーザインタフェースを表示することは、システムの状態（例えば、システムが第１のピンチジェスチャ及び第２のピンチジェスチャを検出し、ユーザ視線のポジションを検出したこと）に関する視覚的フィードバックをユーザに提供し、これは、改善された視覚的フィードバックを提供する。

【0235】

いくつかの実施形態では、ズームインユーザコマンド（例えば、７１８、７３２、７３３、又は７３４）に対応する１つ以上のユーザ入力は、両手ピンチ解除ジェスチャ（例えば、エアジェスチャ）（例えば、第１の手が別の手から離れるジェスチャ）（例えば、ピンチ形状（例えば、既定のピンチ形状（例えば、手の人差し指と親指が接触している形状）を作る第１の手が、ピンチ形状を作る第２の手から離れるジェスチャ）を含む。両手ピンチ解除ジェスチャに応じて、ユーザの視線のポジションに基づいて選択された第１のズーム中心を使用して第２のズームレベルでユーザインタフェースを表示することは、システムの状態（例えば、システムが両手ピンチ解除ジェスチャを検出し、ユーザの視線のポジションを検出したこと）に関する視覚的フィードバックをユーザに提供し、これは、改善された視覚的フィードバックを提供する。

【0236】

いくつかの実施形態では、ズームインユーザコマンド（例えば、７１８、７３２、７３３、又は７３４）に対応する１つ以上のユーザ入力を検出したことに応じて、ユーザインタフェースが第１のタイプ（例えば、非パノラマ画像）の第１のメディアアイテムを表示しているという判定に従って、コンピュータシステムは、第１のサイズ（例えば、第１のカバーエリア及び／又は第１の寸法のセット）（例えば、第１のタイプのメディアアイテムの既定の最大サイズ）で第１のメディアアイテムを表示する。ユーザインタフェースが第１のタイプとは異なる第２のタイプの第２のメディアアイテム（例えば、パノラマ画像（例えば、複数の画像キャプチャを特定の方向に一緒にスティッチングすることによって生成された画像）（例えば、パノラマ寸法として識別された寸法のセットを有する画像））（例えば、閾値アスペクト比よりも大きいアスペクト比を有する画像（例えば、１６：９よりも大きい及び／又は１６：９以上であるアスペクト比を有する画像））を表示しているという判定に従って、コンピュータシステムは、（例えば、図７Ｊ～図７Ｌを参照して説明したように）第１のサイズ（例えば、第１のタイプのメディアアイテムの既定の最大サイズよりも大きいサイズ）よりも大きい第２のサイズ（例えば、第２のカバレッジエリア及び／又は第２の寸法セット）で第２のメディアアイテムを表示する（例えば、図７Ｋ～図７Ｌのメディアウィンドウ７０４）。いくつかの実施形態では、パノラマ画像は、非パノラマ画像よりも大きいサイズに拡大することができる。ユーザインタフェースが第２のタイプのメディアアイテムを表示しているという判定に従って、第１のサイズよりも大きい第２のサイズで第２のメディアアイテムを自動的に表示することにより、ユーザは、追加のユーザ入力を必要とすることなく、第２のタイプのメディアアイテム（例えば、パノラマ画像）をより大きいサイズで表示することができ、これは、更なるユーザ入力を必要とすることなく、条件のセットが満たされたときに動作を実行する。

【0237】

いくつかの実施形態では、ズームインユーザコマンド（例えば、７１８、７３２、７３３、又は７３４）に対応する１つ以上のユーザ入力を検出したことに応じて、ユーザインタフェースが第１のタイプの第１のメディアアイテム（例えば、非パノラマ画像）を表示しているという判定に従って、コンピュータシステムは、第１のメディアアイテムを平坦なオブジェクト（例えば、二次元オブジェクト、非湾曲オブジェクト、平坦な平面オブジェクト、及び／又は平坦な非湾曲表面を有するオブジェクト）として表示する。ユーザインタフェースが第２のタイプの第２のメディアアイテム（例えば、パノラマ画像（例えば、複数の画像キャプチャを特定の方向に互いにスティッチングすることによって生成された画像）（例えば、パノラマ寸法として識別された寸法（例えば、幅及び／又は高さ）のセットを有する画像））を表示しているという判定に従って、コンピュータシステムは、第２のメディアアイテムを湾曲したオブジェクト（例えば、三次元オブジェクト、湾曲面オブジェクト、及び／又は１つ以上の湾曲表面を有するオブジェクト）（例えば、図７Ｋ～図７Ｌのメディアウィンドウ７０４）として表示する（例えば、図７Ｊ～図７Ｌを参照して説明したように）。いくつかの実施形態では、パノラマ画像は、ズームされるにつれて湾曲され、非パノラマ画像は、ズームされるにつれて湾曲されない。いくつかの実施形態では、コンピュータシステムがヘッドマウントデバイスであるとき、第２のメディアアイテムは、第１のメディアアイテムが平坦なオブジェクトとして表示されるときとは対照的に、第２のメディアアイテムが湾曲したオブジェクトとして表示されるとき、ユーザの視野のより多くを占有する。ユーザインタフェースが第２のタイプのメディアアイテムを表示しているという判定に従って、第２のメディアアイテムを湾曲したオブジェクトとして自動的に表示することにより、ユーザは、追加のユーザ入力を必要とせずに、第２のタイプのメディアアイテム（例えば、パノラマ画像）を湾曲したオブジェクトとして表示することが可能になり、これは、更なるユーザ入力を必要とせずに、条件のセットが満たされたときに動作を実行する。

【0238】

いくつかの実施形態では、ユーザインタフェースを第１のズームレベルで表示することは、第１のメディアアイテムの表現（例えば、第１のメディアアイテムのサムネイル表現）を第１のサイズ（例えば、図７Ｄの７１０Ｆ）で表示することを含む。三次元環境（例えば、７０６）は、ユーザインタフェース（例えば、７０８）を少なくとも部分的に取り囲み、ユーザインタフェースの背後の背景コンテンツ（例えば、物理的環境又は仮想環境の表現）を含む。いくつかの実施形態では、背景コンテンツは、ユーザインタフェースを少なくとも部分的に取り囲む。いくつかの実施形態では、三次元環境及び／又は背景コンテンツは、表示生成構成要素によって（例えば、ユーザインタフェースの背後に）表示される。いくつかの実施形態では、三次元環境及び／又は背景コンテンツは、（例えば、ユーザインタフェースの背後で）ユーザに可視であるが、表示生成構成要素によって表示されない（例えば、三次元環境及び／又は背景コンテンツは、表示生成構成要素によって表示されることなく、ユーザインタフェースの背後でユーザによって可視である有形物理的オブジェクトである）。いくつかの実施形態では、ズームインユーザコマンド（例えば、７１８）に対応する１つ以上のユーザ入力を検出したことに応じて、コンピュータシステムは、第１のメディアアイテムの表現を、第１のサイズ（例えば、図７Ｄの７１０Ｆ）で表示されることから、第１のサイズよりも大きい第２のサイズ（例えば、図７Ｆの７１０Ｆ）で表示されることに遷移させる（例えば、第１のメディアアイテムの表示を拡大する）。そして、第１のメディアアイテム（例えば、図７Ｆの三次元環境７０６）に対する背景コンテンツの視覚的強調を低減させる（例えば、背景コンテンツを暗くする）。いくつかの実施形態では、背景コンテンツは、第１のメディアアイテムの表現が第１のサイズで表示されることから第２のサイズで表示されることに遷移させるのと同時に、第１の輝度レベルで表示されることから第２の輝度レベルで表示されることに遷移される。ユーザが第１のメディアアイテムをズームインしたときに背景コンテンツを暗くした状態で表示することは、システムの状態に関するフィードバック（例えば、システムが第１のメディアアイテムをズームイン状態で表示していること）をユーザに提供し、これは、改善された視覚的フィードバックを提供する。

【0239】

いくつかの実施形態では、ユーザインタフェースを第１のズームレベルで表示することは、第１のメディアアイテムの表現（例えば、第１のメディアアイテムのサムネイル表現）を第１のサイズ（例えば、図７Ｄの７１０Ｆ）で表示することを含む。いくつかの実施形態では、ズームインユーザコマンド（例えば、７１８）に対応する１つ以上のユーザ入力を検出したことに応じて、コンピュータシステムは、第１のメディアアイテムの表現を、第１のサイズ（例えば、図７Ｄの７１０Ｆ）で表示されることから、第１のサイズよりも大きい第２のサイズ（例えば、図７Ｆの７１０Ｆ）で表示されることに遷移させる（例えば、第１のメディアアイテムの表示を拡大する）。そして、ユーザインタフェース（例えば、７０４）から延びる（例えば、第１のメディアアイテムから延びる）光スピル効果（例えば、７２６－１）を表示する。いくつかの実施形態では、光スピル効果は、第１のメディアアイテムの視覚的コンテンツ（例えば、視覚特性）に基づいて決定される１つ以上の視覚特性（例えば、輝度、強度、サイズ及び／又は長さ、色、彩度、コントラスト）を含む（例えば、異なるメディアアイテムは、異なる光スピル効果をもたらす）。いくつかの実施形態では、光スピル効果は、アイテムの縁部の周囲の輝き、アイテムを取り囲む光の出現、アイテムの周囲の光線の出現、及び／又はアイテムの中間又は中心の背後の光源の出現のうちの１つ以上を含む。いくつかの実施形態では、第１のメディアアイテムの表現のサイズは、ズームインユーザコマンドに対応する１つ以上のユーザ入力に応じて徐々に増大する。いくつかの実施形態では、ユーザインタフェースから背景コンテンツに及ぶ光スピル効果は、第１のメディアアイテムの表現のサイズの漸増と同時に徐々に修正される（例えば、徐々に強調される）。ユーザが第１のメディアアイテムをズームインしたときに光スピル効果を表示することは、システムの状態（例えば、システムがズームイン状態で第１のメディアアイテムを表示していること）に関するフィードバックをユーザに提供し、これは、改善された視覚的フィードバックを提供する。

【0240】

いくつかの実施形態では、ユーザインタフェースを第１のズームレベルで表示することは、第１のメディアアイテムを第１のサイズ（例えば、図７Ｊ、図７Ｋの７３１）で表示すること（例えば、第１のメディアアイテムのユーザ選択を示す選択されたメディアユーザインタフェース内に第１のメディアアイテムの表現を表示すること）を含む。いくつかの実施形態では、ユーザインタフェースを第２のズームレベルで表示することは、第１のメディアアイテムを第１のサイズよりも大きい第２のサイズ（例えば、図７Ｌの７３１）で表示することと、第２のサイズが所定の閾値サイズよりも大きいという判定に従って、第１のメディアアイテム（例えば、７３６Ａ又は７３６Ｂ）の少なくとも第１の縁部にぼかし効果が適用された第１のメディアアイテムを表示することと、第２のサイズが所定の閾値サイズよりも大きくないという判定に従って、第１のメディアアイテムのいずれの縁部にもぼかし効果を適用せずに、第１のメディアアイテムを表示すること（例えば、図７Ｊ）と、を含む。いくつかの実施形態では、ぼかし効果は、第１の縁部を越えて延びる第１のメディアアイテムの追加のコンテンツが表示されないこと、及び／又はユーザが第１のメディアアイテムの追加のコンテンツを見るために第１の縁部の方向にスクロールすることができることを示すものとして、第１のメディアアイテムの第１の縁部に適用される。いくつかの実施形態では、ぼかし効果は、第１のメディアアイテムの第１の縁部における視覚的コンテンツをぼかすこと、及び／又は第１のメディアアイテムの第１の縁部における視覚的コンテンツを別様に視覚的に不明瞭にすることを含む。いくつかの実施形態では、第１のメディアアイテムのいずれの縁部にもぼかし効果が適用されずに第１のメディアアイテムを表示することは、第１のメディアアイテムの全体が表示されていることを示す。第１のメディアアイテムの第１の縁部に適用されたぼかし効果を有する第１のメディアアイテムを表示することは、システムの状態に関するフィードバック（例えば、表示されていない第１の縁部を越えて延びる第１のメディアアイテムの追加のコンテンツがあること）をユーザに提供し、これは、改善された視覚的フィードバックを提供する。

【0241】

いくつかの実施形態では、ユーザインタフェースは、第１のメディアアイテムの表現及び第２のメディアアイテムの表現を含む、メディアライブラリ（例えば、デバイスに関連付けられた（例えば、デバイスに記憶された）及び／又はユーザに関連付けられたメディアアイテムの集合）内の複数のメディアアイテム（例えば、７１０Ａ～７１０Ｆ）の表現を含むメディアライブラリユーザインタフェース（例えば、７０８）である。いくつかの実施形態では、ユーザインタフェースを第１のズームレベルで表示することは、第１のサイズ（例えば、第１の寸法のセット（例えば、高さ及び／又は幅）を有する）での第１のメディアアイテムの表現と、第２のサイズ（いくつかの実施形態では、第２のサイズは第１のサイズと異なるか又は同じである）での第２のメディアアイテムの表現とを同時に表示することを含む（例えば、図７Ｄの７０８）。いくつかの実施形態では、ユーザインタフェースを第２のズームレベルで表示することは、第１のメディアアイテムの表現を第１のサイズよりも大きい第３のサイズで、及び第２のメディアアイテムの表現を第２のサイズよりも大きい第４のサイズで、同時に表示することを含む（例えば、図７Ｅ）。いくつかの実施形態では、第４のサイズは、第３のサイズと異なるか、又は同じである。いくつかの実施形態では、ユーザインタフェースを第１のズームレベルで表示することは、複数のメディアアイテムの表現を有するメディアライブラリグリッドを表示することを含み、ユーザインタフェースを第２のズームレベルで表示することは、メディアライブラリグリッドをズームインする（例えば、より少ないメディアアイテムの表現をより大きいサイズで表示する）ことを含む。ズームインユーザコマンドに対応する１つ以上のユーザ入力を検出したことに応じて、第１のメディアアイテムの表現を第３のサイズで表示し、第２のメディアアイテムの表現を第４のサイズで表示することは、システムの状態（例えば、システムがズームインユーザコマンドに対応する１つ以上のユーザ入力を検出したこと）に関する視覚的フィードバックをユーザに提供し、これは、改善された視覚的フィードバックを提供する。

【0242】

いくつかの実施形態では、第１のズームレベルでユーザインタフェースを表示することは、（例えば、第１の寸法のセット（例えば、高さ及び／又は幅）を有する）第１のサイズでユーザインタフェースを表示することを含む。いくつかの実施形態では、ズームインユーザコマンドに対応する１つ以上のユーザ入力を検出したことに応じて、ユーザインタフェースが第１のユーザインタフェース（例えば、７１９）（例えば、選択されたメディアユーザインタフェース（例えば、ユーザによって選択されたメディアアイテムを表示するユーザインタフェース、並びに／又はメディアアイテムのユーザ選択を示す及び／若しくはメディアアイテムのユーザ選択に応答するユーザインタフェース））であるという判定に従って、コンピュータシステムは、第１のサイズよりも大きい第２のサイズでユーザインタフェース（例えば、図７Ｊ～図７Ｌの選択されたメディアユーザインタフェース７１９）を表示する。ユーザインタフェースが第１のユーザインタフェース（例えば、７０８）とは異なる第２のユーザインタフェース（例えば、メディアライブラリユーザインタフェース（例えば、メディアライブラリの複数のメディアアイテムの表現を表示するユーザインタフェース））であるという判定に従って、コンピュータシステムは、ユーザインタフェースを第１のサイズ（例えば、図７Ｄ～図７Ｅのメディアライブラリユーザインタフェース７０８）に維持する（いくつかの実施形態では、選択されたメディアユーザインタフェース（例えば、７１９）は、ズームインコマンドに応じてより大きなサイズに拡大することができるが、メディアライブラリユーザインタフェース（例えば、７０８）は、ズームインコマンドに応じてより大きなサイズに拡大されない）。ズームインユーザコマンドに対応する１つ以上のユーザ入力を検出したことに応じて、第１のサイズよりも大きい第２のサイズでユーザインタフェースを表示することは、システムの状態（例えば、システムがズームインユーザコマンドに対応する１つ以上のユーザ入力を検出したこと）に関する視覚的フィードバックをユーザに提供し、これは、改善された視覚的フィードバックを提供する。

【0243】

いくつかの実施形態では、方法８００、９００、１０００、及び１１００の態様／動作は、これらの方法の間で交換、置換、及び／又は追加され得る。例えば、方法８００で表示されるメディアライブラリユーザインタフェースは、任意選択的に、方法９００で表示されるユーザインタフェースであり、及び／又は方法８００で表示される第１のメディアアイテムは、任意選択的に、方法９００及び／又は１０００で表示される第１のメディアアイテムである。簡潔にするために、それらの詳細はここでは繰り返さない。

【0244】

図１０は、いくつかの実施形態による、メディアアイテム及びユーザインタフェースと相互作用するための例示的な方法１０００のフロー図である。いくつかの実施形態では、方法１０００は、表示生成構成要素（例えば、７０２）（例えば、ディスプレイコントローラ、タッチ感知ディスプレイシステム、ディスプレイ（例えば、統合及び／又は接続された）、３Ｄディスプレイ、透明ディスプレイ、プロジェクタ、及び／又はヘッドアップディスプレイ）及び１つ以上の入力デバイス（例えば、７１５）（例えば、タッチ感知面（例えば、タッチ感知ディスプレイ））と通信するコンピュータシステム（例えば、７００）（例えば、図１のコンピュータシステム１０１）、マウス、キーボード、リモートコントロール、視覚入力デバイス（例えば、カメラ）、オーディオ入力デバイス（例えば、マイクロフォン）、及び／又はバイオメトリックセンサ（例えば、指紋センサ、顔識別センサ、及び／又は虹彩識別センサ））で実行される。いくつかの実施形態では、方法１０００は、非一時的（又は一時的）コンピュータ可読記憶媒体に記憶され、コンピュータシステム１０１の１つ以上のプロセッサ２０２（例えば、図１Ａのコントロール１１０）などのコンピュータシステムの１つ以上のプロセッサによって実行される命令によって統御される。方法１０００のいくつかの動作は、任意選択的に、組み合わされ、かつ／又はいくつかの動作の順序は、任意選択的に、変更される。

【0245】

いくつかの実施形態では、コンピュータシステム（例えば、７００）は、１つ以上の入力デバイスを介して、第１のメディアアイテム（例えば、７１０Ｆ）の選択に対応する１つ以上のユーザ入力（例えば、７１８）（例えば、１つ以上のタップ入力、１つ以上のジェスチャ（例えば、１つ以上のエアジェスチャ）、及び／又は１つ以上の他の入力）（例えば、ユーザの視線が第１のメディアアイテムに向けられている及び／又は維持されている間の片手ピンチジェスチャ及び／又は両手ピンチ解除ジェスチャ）（例えば、メディアライブラリの第１のメディアアイテムの選択、メディアライブラリ内の複数のメディアアイテムの第１のメディアアイテムの選択、複数のメディアアイテムの第１のメディアアイテムの選択、及び／又は複数の表示されたメディアアイテムの第１のメディアアイテムの選択（例えば、メディアアイテムの複数の表示された表現のうちの第１のメディアアイテムの表現の選択））を検出する（１００２）。第１のメディアアイテムの選択に対応する１つ以上のユーザ入力を検出したことに応じて（１００４）、第１のメディアアイテムが個別のタイプの深度情報を含むメディアアイテム（例えば、ユーザの第１の目のための１つ以上のカメラの第１のセットからの画像及びユーザの第２の目のための１つ以上のカメラの第２のセットからの画像を表示することによって表示される２つの異なるカメラ（又はカメラのセット）から同時にキャプチャされたメディアを有する立体視メディアアイテム）であるという判定に従って（１００６）、コンピュータシステムは、表示生成構成要素を通じて、第１のメディアアイテムを第１の方式で表示し（１００８）（例えば、図７Ｆ）（例えば、視覚特性の第１のセットを用いて）、第１のメディアアイテムが個別のタイプの深度情報を含まないメディアアイテムであるという判定に従って（１０１０）、コンピュータシステムは、表示生成構成要素を介して、（例えば、図７Ｆ及び図７Ｊを参照して説明したように）第１の方式（例えば、図７Ｊ）とは異なる第２の方式（例えば、視覚特性の第２のセットを用いて）で第１のメディアアイテムを表示する（１０１２）。第１のメディアアイテムが個別のタイプの深度情報を含むメディアアイテムであるという判定に従って第１のメディアアイテムを第１の方式で表示することは、システムの状態に関する視覚的フィードバック（例えば、第１のメディアアイテムが個別のタイプの深度情報を含むとシステムが判定したこと）をユーザに提供し、これは、改善された視覚的フィードバックを提供する。

【0246】

いくつかの実施形態では、第１の方式で第１のメディアアイテムを表示することは、第１のメディアアイテムを取り囲む第１のタイプの境界（例えば、周囲縁部及び／又は境界）（例えば、第１の形状を有する第１の境界、視覚特性の第１のセットを有する第１の境界）（例えば、屈折縁部を有する第１の境界及び／又は丸い角部を有する第１の境界）を有する第１のメディアアイテムを表示することを含む（例えば、図７Ｆ）。いくつかの実施形態では、第２の方式で第１のメディアアイテムを表示することは、第１のメディアアイテムを取り囲む第１の境界とは異なる第２のタイプの境界（例えば、周囲縁部及び／又は境界）を有する第１のメディアアイテム（例えば、図７Ｆを参照して説明したように）（例えば、図７Ｊ）（例えば、第２の形状を有する第２の境界、視覚特性の第２のセットを有する第２の境界）（例えば、非屈折縁部を有する第２の境界、及び／又は非円形（例えば、矩形及び／又は尖った）角部を有する第２の境界）を表示することを含む。いくつかの実施形態では、（例えば、メディアライブラリユーザインタフェースに提示される）メディアライブラリは、第１のタイプのメディアアイテムのセット（例えば、複数のメディアアイテム）と、第２のタイプのメディアアイテムのセット（例えば、複数のメディアアイテム）と、を含む。第１のタイプの個別のメディアアイテムの選択に対応する１つ以上のユーザ入力を検出したことに応じて、コンピュータシステムは、第１のタイプの個別のメディアアイテムを取り囲む第１のタイプの境界を有する第１のタイプの個別のメディアアイテムを表示することを含む第１の方式で、第１のタイプの個別のメディアアイテムを表示する。第２のタイプの個別のメディアアイテムの選択に対応する１つ以上のユーザ入力を検出したことに応じて、コンピュータシステムは、第２のタイプの個別のメディアアイテムを取り囲む第２のタイプの境界を有する第２のタイプの個別のメディアアイテムを表示することを含む、第２の方式で第２のタイプの個別のメディアアイテムを表示する。いくつかの実施形態では、第１のタイプのメディアアイテムは、第１のタイプの境界で表示されることを含む第１の方式で表示され、第２のタイプのメディアアイテムは、第２のタイプの境界で表示されることを含む第２の方式で表示される。第１のメディアアイテムが個別のタイプの深度情報を含むかどうかに基づいて第１のメディアアイテムの境界を異なって表示することは、システムの状態（例えば、第１のメディアアイテムが個別のタイプの深度情報を含むか否か）に関する視覚的フィードバックをユーザに提供し、これは、改善された視覚的フィードバックを提供する。

【0247】

いくつかの実施形態では、第１のメディアアイテムが第１の方式で表示されたときに、第１のメディアアイテム（例えば、７０６）を少なくとも部分的に取り囲む（例えば、完全に取り囲む）コンテンツ（例えば、背景コンテンツ）（例えば、第１のメディアアイテムの背後に表示され、第１のメディアアイテムを部分的に取り囲む背景コンテンツ）は、第１の外観（例えば、図７Ｆ）（例えば、視覚特性の第３のセットを有する）（例えば、第１のメディアアイテムの境界の外側に表示される選択可能なコントロールを有する、及び／又は背景コンテンツに適用される照明効果の第３のセットを有する）を有する（例えば、有するように表示生成構成要素によって修正される）。第１のメディアアイテムが第２の方式で表示されたときに、第１のメディアアイテムを少なくとも部分的に取り囲む（例えば、完全に取り囲む）コンテンツ（例えば、背景コンテンツ）は、（例えば、図７Ｆを参照して説明されるように）（例えば、第１のメディアアイテムの境界の外側に選択可能なコントロールを表示することなく、及び／又は背景コンテンツに適用される照明効果の第４のセットを有することなく）（例えば、視覚特性の第４のセットを有する）第１の外観（例えば、図７Ｊ）とは異なる第２の外観を有する（例えば、有するように表示生成構成要素によって修正される）。いくつかの実施形態では、第１のメディアアイテムを少なくとも部分的に取り囲むコンテンツは、表示生成構成要素によって表示される。いくつかの実施形態では、第１のメディアアイテムを少なくとも部分的に取り囲むコンテンツは、表示生成構成要素によって表示されない（例えば、第１のメディアアイテムを少なくとも部分的に取り囲むコンテンツは、コンテンツが表示生成構成要素によって表示されることなく、ユーザインタフェースの背後のユーザによって可視である１つ以上の有形物理的オブジェクトを含む）。第１のメディアアイテムが個別のタイプの深度情報を含むかどうかに基づいて、第１のメディアアイテムを取り囲むコンテンツを異なって表示することは、システムの状態（例えば、第１のメディアアイテムが個別のタイプの深度情報を含むか否か）に関する視覚的フィードバックをユーザに提供し、これは、改善された視覚的フィードバックを提供する。

【0248】

いくつかの実施形態では、コンピュータシステムは、第１のメディアアイテムから延びる光線のセット（例えば、７２６－１、７２６－２、７２６－３、７２６－４、７３０－１、７３０－２、７３０－３、又は７３０－４）（例えば、光スピル照明効果）（例えば、第１のメディアアイテムの外側境界から、第１のメディアアイテムを少なくとも部分的に取り囲む背景コンテンツ内に延びる光線）を表示する。いくつかの実施形態では、光線は、光線の１つ以上の視覚特性（例えば、輝度、強度、サイズ、長さ、色、彩度、及び／又はコントラスト）が第１のメディアアイテムの視覚的コンテンツ（例えば、視覚特性）に基づいて決定される視覚効果である（例えば、異なるメディアアイテムは、異なる光スピル光線をもたらす）。いくつかの実施形態では、第２の方式で第１のメディアアイテムを表示することは、第１のメディアアイテムから延びる光線のセットを表示することを取り止めることを含む。いくつかの実施形態では、第１のメディアアイテムから延びる光線のセットは、経時的に変化する（例えば、第１のメディアアイテムから延びる光線のセットは、第１のメディアアイテムの視覚的コンテンツが経時的に変化するにつれて（例えば、第１のメディアアイテムの視覚的コンテンツ（例えば、ビデオコンテンツ）が再生するにつれて）経時的に変化する）。第１のメディアアイテムの選択に対応する１つ以上のユーザ入力の検出に応じて、第１のメディアアイテムから延びる光線のセットを表示することは、システムの状態（例えば、システムが第１のメディアアイテムの選択に対応する１つ以上のユーザ入力を検出したこと）に関する視覚的フィードバックをユーザに提供し、これは、改善された視覚的フィードバックを提供する。

【0249】

いくつかの実施形態では、光線のセットの１つ以上の視覚特性（例えば、輝度、強度、サイズ、長さ、色、彩度、及び／又はコントラスト）（例えば、７２６－１、７２６－２、７２６－３、７２６－４、７３０－１、７３０－２、７３０－３、又は７３０－４）は、（例えば、図７Ｆを参照して説明したように）第１のメディアアイテムの縁部（例えば、外側境界又は縁部から所定の距離内）における１つ以上の色に基づいて決定される（例えば、いくつかの実施形態では、第１のメディアアイテムの第１の縁部から延びる光線の視覚特性は、第１のメディアアイテムの第１の縁部に表示された色に基づいて決定され、及び／又は第１のメディアアイテムの第２の縁部から延びる光線の視覚特性は、第１のメディアアイテムの第２の縁部に表示された色に基づいて決定される）。第１のメディアアイテムの選択に対応する１つ以上のユーザ入力の検出に応じて、第１のメディアアイテムから延びる光線のセットを表示することは、システムの状態（例えば、システムが第１のメディアアイテムの選択に対応する１つ以上のユーザ入力を検出したこと）に関する視覚的フィードバックをユーザに提供し、これは、改善された視覚的フィードバックを提供する。

【0250】

いくつかの実施形態では、光線のセット（例えば、７２６－１、７２６－２、７２６－３、７２６－４、７３０－１、７３０－２、７３０－３、又は７３０－４）は、第１の長さを有する第１の光線と、第１の長さとは異なる第２の長さを有する第２の光線と、を含む（例えば、光線のセットは、異なる長さ又は可変長を有する光線を含む）。いくつかの実施形態では、光線のセットは、第１の長さ及び第２の長さとは異なる第３の長さを有する第３の光線を含む。いくつかの実施形態では、第１の光線は、第１のメディアアイテムの第１の側部（例えば、上、下、左、及び／又は右）から延び、第２の光線は、第１のサイズとは異なる第１のメディアアイテムの第２の側部から延び、第３の光線は、第１及び第２の側部とは異なる第１のメディアアイテムの第３の側部から延び、第４の光線は、第１の、第２の、及び第３の側部とは異なる第１のメディアアイテムの第４の側部から延びる。第１のメディアアイテムの選択に対応する１つ以上のユーザ入力の検出に応じて、第１のメディアアイテムから延びる光線のセットを表示することは、システムの状態（例えば、システムが第１のメディアアイテムの選択に対応する１つ以上のユーザ入力を検出したこと）に関する視覚的フィードバックをユーザに提供し、これは、改善された視覚的フィードバックを提供する。

【0251】

いくつかの実施形態では、第１のメディアアイテムは、個別のタイプの深度情報（例えば、ユーザの第１の目のための１つ以上のカメラの第１のセットからの画像、及びユーザの第２の目のための１つ以上のカメラの第２のセットからの画像を表示することによって表示される、２つの異なるカメラ（又はカメラのセット）から同時にキャプチャされたメディアを伴う立体視メディアアイテム）を含み、第１のメディアアイテムは、コンピュータシステム（例えば、７００）によって（例えば、コンピュータシステムに接続及び／又は統合された複数のカメラを使用して）キャプチャされた。いくつかの実施形態では、１つ以上のユーザ入力を検出する前に、コンピュータシステムは、１つ以上の入力デバイスを介して、第１のメディアアイテムをキャプチャする（例えば、コンピュータシステムに接続された及び／又は統合された複数のカメラを使用して）。いくつかの実施形態では、メディアアイテムは、第１のメディアアイテムが立体視キャプチャ（例えば、立体視メディアアイテム）である場合、個別のタイプの深度情報を含む。いくつかの実施形態では、立体視キャプチャは、離間された（例えば、人の目とほぼ同じ距離で離間された）２つの異なるカメラから同時にキャプチャされた２つの画像を含み、２つの画像は、キャプチャされたシーンの深度を再現するために、ユーザに同時に表示される（ユーザの第１の目のための第１の画像、及びユーザの第２の目のための第２の画像）。いくつかの実施形態では、コンピュータシステムがヘッドマウントデバイスであり、第１のメディアアイテムが深度情報を含むとき、コンピュータシステムは、ユーザがメディアアイテムに含まれるコンテンツ間の立体視深度を知覚するように、コンピュータシステムの第１のディスプレイ上にメディアアイテムに含まれる物理的環境の第１の透視図を表示し、コンピュータシステムは、電子デバイスの第２のディスプレイ上にメディアアイテムに含まれる物理的環境の第２の透視図を表示する。第１のメディアアイテムが個別のタイプの深度情報を含むメディアアイテムであるという判定に従って第１のメディアアイテムを第１の方式で表示することは、システムの状態に関する視覚的フィードバック（例えば、第１のメディアアイテムが個別のタイプの深度情報を含むとシステムが判定したこと）をユーザに提供し、これは、改善された視覚的フィードバックを提供する。

【0252】

いくつかの実施形態では、第１のメディアアイテムを第１の方式で表示することは、照明効果の第１のセット（例えば、７２６－１、７２６－２、７２６－３、又は７２６－４）（例えば、第１のメディアアイテムから延びる光スピル照明効果の第１のセット（例えば、第１のメディアアイテムの視覚的コンテンツに基づいて決定された１つ以上の視覚特性（例えば、輝度、強度、サイズ、長さ、色、彩度、及び／又はコントラスト）を有する光スピル照明効果の第１のセット）を有する第１のメディアアイテムを表示することを含む。いくつかの実施形態では、第２の方式で第１のメディアアイテムを表示することは、照明効果の第２のセット（例えば、７３０－１、７３０－２、７３０－３、又は７３０－４）（例えば、照明効果の第１のセットとは異なる照明効果の第２のセット、又は照明効果の第１のセットと同じ照明効果の第２のセット）（例えば、第１のメディアアイテムから延びる光スピル照明効果の第２のセット（例えば、第１のメディアアイテムの視覚的コンテンツに基づいて決定された１つ以上の視覚特性（例えば、輝度、強度、サイズ、長さ、色、彩度、及び／又はコントラスト）を有する光スピル照明効果の第２のセット））を有する第１のメディアアイテムを表示することを含む。例えば、いくつかの実施形態では、第１のメディアアイテムが、個別のタイプの深度情報を含むメディアアイテムである（例えば、立体視メディアアイテムである）か、又は個別のタイプの深度情報を含まないメディアアイテムである（例えば、立体視メディアアイテムではない）かに関わらず、第１のメディアアイテムは、第１のメディアアイテムに適用される照明効果とともに表示される。いくつかの実施形態では、第１のメディアアイテムが、個別のタイプの深度情報を含むメディアアイテムである（例えば、立体視メディアアイテムである）か、又は個別のタイプの深度情報を含まないメディアアイテムである（例えば、立体視メディアアイテムではない）かに関わらず、第１のメディアアイテムは、第１のメディアアイテムから延びる光スピル光線とともに表示される。いくつかの実施形態では、第１のメディアアイテムから延びる光スピル光線は、第１のメディアアイテムが個別のタイプの深度情報を含むか、又は個別のタイプの深度情報を含まないかに基づいて異なる（例えば、第１のメディアアイテムから延びる光スピル光線を決定するための１つ以上のアルゴリズムは、第１のメディアアイテムが個別のタイプの深度情報を含むか、又は個別のタイプの深度情報を含まないかに基づいて異なる）。第１のメディアアイテムの選択に対応する１つ以上のユーザ入力の検出に応じて第１の照明効果セット又は第２の照明効果セットを用いて第１のメディアアイテムを表示することは、システムの状態（例えば、システムが第１のメディアアイテムの選択に対応する１つ以上のユーザ入力を検出したこと）に関する視覚的フィードバックをユーザに提供し、これは、改善された視覚的フィードバックを提供する。

【0253】

いくつかの実施形態では、第１のセットの照明効果（例えば、７２６－１、７２６－２、７２６－３、又は７２６－４）は、第１のメディアアイテムの縁部における第１のセットの色（例えば、第１のメディアアイテムの最も外側の縁部、境界、及び／又は境界に表示される色）（例えば、縁部から所定の距離内）に基づいて、かつ第１のメディアアイテムの縁部の内側の第２のセットの色（例えば、第１のメディアアイテムの内側部分に表示される色（例えば、第１のメディアアイテムの縁部上ではない）（例えば、縁部から所定の距離よりも大きい）（例えば、第１のセットの色よりも第１のメディアアイテムの中心に近い及び／又は縁部から遠い））に基づいて決定され、第１のセットの色は、第１のセットの照明効果を決定する際に第２のセットの色よりも大きい重みを与えられる。いくつかの実施形態では、第２のセットの照明効果（例えば、７３０－１、７３０－２、７３０－３、又は７３０－４）は、第１のメディアアイテムの縁部における第３のセットの色（例えば、第１のメディアアイテムの最も外側の縁部、境界、及び／又は境界に表示される色）（例えば、縁部から所定の距離内）に基づいて、かつ第１のメディアアイテムの縁部の内側の第４のセットの色（例えば、第１のメディアアイテムの内側部分に表示される色（例えば、第１のメディアアイテムの縁部上ではない）（例えば、縁部から所定の距離よりも大きい）（例えば、第３のセットの色よりも第１のメディアアイテムの中心に近い及び／又は縁部から遠い））に基づいて決定され、第３のセットの色は、（例えば、図７Ｆを参照して説明されるように）第２のセットの照明効果を決定する際に第４のセットの色よりも大きい重みを与えられる。第１のメディアアイテムの選択に対応する１つ以上のユーザ入力の検出に応じて第１の照明効果セット又は第２の照明効果セットを用いて第１のメディアアイテムを表示することは、システムの状態（例えば、システムが第１のメディアアイテムの選択に対応する１つ以上のユーザ入力を検出したこと）に関する視覚的フィードバックをユーザに提供し、これは、改善された視覚的フィードバックを提供する。

【0254】

いくつかの実施形態では、照明効果の第１のセット及び照明効果の第２のセットは、第１のメディアアイテムの前に放出される光（例えば、第１のメディアアイテムの前面から外向きに延びる光）と、（例えば、図７Ｆを参照して説明したように）第１のメディアアイテムの背後に放出された光（例えば、第１のメディアアイテムの背面から外側に延びる光）（例えば、メディアウィンドウ７０４の前に放出された光及びメディアウィンドウ７０４の背後に放出された光）と、を含む。例えば、いくつかの実施形態では、第１のメディアアイテムが、個別のタイプの深度情報を含むメディアアイテムである（例えば、立体視メディアアイテムである）か、又は個別のタイプの深度情報を含まないメディアアイテムである（例えば、立体視メディアアイテムではない）かに関わらず、第１のメディアアイテムは、第１のメディアアイテムの前に放出される光と、第１のメディアアイテムの背後に放出される光とを含む照明効果とともに表示される。いくつかの実施形態では、第１のメディアアイテムの前に放出された光及び／又は第１のメディアアイテムの背後に放出された光は、ユーザに可視である他のコンテンツ（例えば、第１のメディアアイテムを少なくとも部分的に取り囲むコンテンツ（例えば、背景コンテンツ））から反射する。いくつかの実施形態では、ユーザに可視である他のコンテンツは、表示生成構成要素によって表示される。いくつかの実施形態では、ユーザに可視である他のコンテンツは、表示生成構成要素によって表示されない（例えば、他のコンテンツは、第１のメディアアイテムの背後に可視であるが、表示生成構成要素によって表示されない物理的（例えば、現実の）背景コンテンツを含む）。第１のメディアアイテムの選択に対応する１つ以上のユーザ入力を検出したことに応じて、第１のメディアアイテムの前に放出される光及び第１のメディアアイテムの背後に放出される光を含む第１の照明効果セット又は第２の照明効果セットを用いて第１のメディアアイテムを表示することは、システムの状態（例えば、システムが第１のメディアアイテムの選択に対応する１つ以上のユーザ入力を検出したこと）に関する視覚的フィードバックをユーザに提供し、これは、改善された視覚的フィードバックを提供する。

【0255】

いくつかの実施形態では、第１のメディアアイテムを第１の方式で表示することは、第１のメディアアイテムがビデオであるという判定に従って、照明効果の第３のセット（例えば、７２６－４）を有する第１のメディアアイテムを表示することと、第１のメディアアイテムが静止画像であるという判定に従って、照明効果の第４のセット（例えば、７２６－１、７２６－２、又は７２６－３）（例えば、照明効果の第３のセットと同じか又は異なる照明効果の第４のセット）を有する第１のメディアアイテムを表示することと、を含む。いくつかの実施形態では、第２の方式で第１のメディアアイテムを表示することは、第１のメディアアイテムがビデオであるという判定に従って、照明効果の第５のセット（例えば、７３０－４）で第１のメディアアイテムを表示することと、第１のメディアアイテムが静止画像であるという判定に従って、（例えば、図７Ｆ、図７Ｎ、及び図７Ｍを参照して説明したように）第６のセットの照明効果（例えば、７３０－１、７３０－２、又は７３０－３）（例えば、第５のセットの照明効果と同じか又は異なる第６のセットの照明効果）を有する第１のメディアアイテムを表示することと、を含む。いくつかの実施形態では、第１のメディアアイテムが静止画像であるかビデオであるかに関わらず、第１のメディアアイテムは、第１のメディアアイテムに適用される照明効果とともに表示される。いくつかの実施形態では、照明効果は、第１のメディアアイテムがビデオであるか静止画像であるかに基づいて異なる。いくつかの実施形態では、照明効果は、第１のメディアアイテムがビデオであるか静止画像であるかに関わらず同じである。いくつかの実施形態では、照明効果の第３のセット及び照明効果の第５のセット（例えば、ビデオ用の照明効果）は、経時的に変化する（例えば、第１のメディアアイテムから延びる光線のセットは、第１のメディアアイテムの視覚的コンテンツが経時的に変化するにつれて（例えば、第１のメディアアイテムのビデオコンテンツが再生されるにつれて）経時的に変化する）。第１のメディアアイテムの選択に対応する１つ以上のユーザ入力の検出に応じて第１の照明効果セット又は第２の照明効果セットを用いて第１のメディアアイテムを表示することは、システムの状態（例えば、システムが第１のメディアアイテムの選択に対応する１つ以上のユーザ入力を検出したこと）に関する視覚的フィードバックをユーザに提供し、これは、改善された視覚的フィードバックを提供する。

【0256】

いくつかの実施形態では、第１のメディアアイテムはビデオであり、ビデオ内の個別の再生時間における照明効果の第１のセット（例えば、７３０－４又は７２６－４）は、（例えば、図７Ｆ、図７Ｎ、及び図７Ｍを参照して説明したように）ビデオ内の個別の再生時間を含むビデオ内の複数の再生時間からのビデオからのコンテンツに基づいて生成された照明効果を含む（例えば、照明効果は、ビデオからの時間平均されたコンテンツに基づいてビデオから光を放出し、その結果、複数のフレームからのコンテンツが組み合わされて、照明効果を生成するために使用される平均色を生成する）。いくつかの実施形態では、照明効果の第１のセットが適用された第１のメディアアイテムを表示することは、第１のメディアアイテムがビデオであるという判定に従って、照明効果の第１の初期セットに第１の平滑化関数を適用すること（例えば、照明効果の第１の初期セットに第１の平滑化関数を適用することによって照明効果のセットを決定すること）を含む（いくつかの実施形態では、第１の平滑化関数は、ある期間（例えば、所定の持続時間）にわたって照明効果の第１の初期セットを平滑化する）。いくつかの実施形態では、照明効果の第２のセットが適用された第１のメディアアイテムを表示することは、第１のメディアアイテムがビデオであるという判定に従って、照明効果の第２の初期セットに第２の平滑化関数（いくつかの実施形態では、第２の平滑化関数は、第１の平滑化関数と同じであるか又は異なる）を適用すること（例えば、照明効果の第２の初期セットに第２の平滑化関数を適用することによって照明効果のセットを決定すること）を含む（いくつかの実施形態では、第２の平滑化関数は、ある期間（例えば、所定の持続時間）にわたって照明効果の第２の初期セットを平滑化する）。第１のメディアアイテムの選択に対応する１つ以上のユーザ入力の検出に応じて第１の照明効果セット又は第２の照明効果セットを用いて第１のメディアアイテムを表示することは、システムの状態（例えば、システムが第１のメディアアイテムの選択に対応する１つ以上のユーザ入力を検出したこと）に関する視覚的フィードバックをユーザに提供し、これは、改善された視覚的フィードバックを提供する。

【0257】

いくつかの実施形態では、第１のメディアアイテムを第１の方式で表示することは、（例えば、図７Ｆを参照して説明されるように）第１のメディアアイテムの１つ以上の縁部を視覚的に歪ませること（例えば、視覚的に不明瞭にすること及び／又はぼかすこと）（例えば、第１のメディアアイテムの全ての縁部並びに／又は外側境界及び／若しくは境界全体を視覚的に歪ませること）を含む。いくつかの実施形態では、第１のメディアアイテムを第１の方式で表示することは、いくらかの歪みを示すガラス状の縁部を表示することを含む。いくつかの実施形態では、第２の方式で第１のメディアアイテムを表示することは、第１のメディアアイテムの１つ以上の縁部を視覚的に歪ませることを取り止めること（例えば、第１のメディアアイテムの任意の縁部及び／又は外側境界を視覚的に歪ませることを取り止めること）を含む。個別のタイプの深度情報を含む第１のメディアアイテムに基づいて視覚的に歪められた１つ以上の縁部を有する第１のメディアアイテムを表示することは、システムの状態に関する視覚的フィードバック（例えば、第１のメディアアイテムが個別のタイプの深度情報を含むこと）をユーザに提供し、これは、改善された視覚的フィードバックを提供する。

【0258】

いくつかの実施形態では、第１のメディアアイテムを第１の方式で表示している間に、コンピュータシステムは、１つ以上の入力デバイスを介して、第１のメディアアイテム内の第１のポジションに対応するユーザ視線（例えば、７１４）を検出する（例えば、ユーザが第１のメディアアイテム内の第１のポジションを注視していることを検出及び／又は判定する）。第１のメディアアイテム内の第１のポジションに対応するユーザ視線を検出したことに応じて、コンピュータシステムは、（例えば、図７Ａ～図７Ｄを参照して説明したように）後方に（例えば、ユーザの視点から離れるように）移動する第１のメディアアイテムの少なくとも一部を表示する。個別のタイプの深度情報を含む第１のメディアアイテムに基づいて、第１のポジションに対応するユーザ視線を検出したことに応じて、後方に移動された第１のメディアアイテムを表示することは、システムの状態（例えば、第１のメディアアイテムが個別のタイプの深度情報を含むとシステムが判定し、第１のポジションに対応するユーザ視線を検出したこと）に関する視覚的フィードバックをユーザに提供し、これは、改善された視覚的フィードバックを提供する。

【0259】

いくつかの実施形態では、第１のメディアアイテムを第１の方式で表示することは、第１のメディアアイテムの１つ以上の縁部をぼかすこと（例えば、第１のメディアアイテムの全ての縁部及び／又は外側境界全体及び／又は境界をぼかすこと）を含む。いくつかの実施形態では、第２の方式で第１のメディアアイテムを表示することは、（例えば、図７Ｆを参照して説明されるように）第１のメディアアイテムの１つ以上の縁部をぼかすことを取り止めること（例えば、第１のメディアアイテムの任意の縁部又は境界をぼかすことを取り止めること）を含む。第１のメディアアイテムが個別のタイプの深度情報を含むことに基づいて、第１のメディアアイテムの１つ以上の縁部がぼかされた状態で第１のメディアアイテムを表示することは、システムの状態についての視覚的フィードバック（例えば、第１のメディアアイテムが個別のタイプの深度情報を含むとシステムが判定したこと）をユーザに与え、これは、改善された視覚的フィードバックを提供する。

【0260】

いくつかの実施形態では、第１のメディアアイテムを第１の方式で表示することは、第１のメディアアイテム（例えば、７０４）から延びる第１のセットの光スピル照明効果（例えば、７２６－１）（例えば、第１のメディアアイテムの視覚的コンテンツに基づいて決定された１つ以上の視覚特性（例えば、輝度、強度、サイズ、長さ、色、彩度、及び／又はコントラスト）を有する第１のセットの光スピル照明効果）で第１のメディアアイテムを表示することと、光スピル照明効果の第１のセットと同時に、（例えば、図７Ｆを参照して説明したような）１つ以上の追加の照明効果（例えば、第１のメディアアイテムから延びる追加の光線、第１のメディアアイテムを取り囲む追加の光、第１のメディアアイテムの境界に適用される照明効果（例えば、屈折及び／又はガラス境界）、及び／又は第１のメディアアイテムから延びる照明効果に適用される１つ以上の平滑化関数）を表示することと、を含む。いくつかの実施形態では、第２の方式で第１のメディアアイテムを表示することは、（例えば、図７Ｆを参照して説明したように）１つ以上の追加の照明効果を適用することなく第１のメディアアイテム（例えば、７０４）から延びる第２のセットの光スピル照明効果（例えば、７３０－１）（例えば、第１のメディアアイテムの視覚的コンテンツに基づいて決定された１つ以上の視覚特性（例えば、輝度、強度、サイズ、長さ、色、彩度、及び／又はコントラスト）を有する第２のセットの光スピル照明効果）（いくつかの実施形態では、第１のセットの光スピル照明効果と同じか又は第１のセットの光スピル照明効果とは異なる）を用いて第１のメディアアイテムを表示することを含む。個別のタイプの深度情報を含む第１のメディアアイテムに基づいて１つ以上の追加の照明効果を有する第１のメディアアイテムを表示することは、システムの状態に関する視覚的フィードバック（例えば、第１のメディアアイテムが個別のタイプの深度情報を含むとシステムが決定したこと）をユーザに提供し、これは、改善された視覚的フィードバックを提供する。

【0261】

いくつかの実施形態では、第１のメディアアイテムを第１の方式で表示することは、（例えば、図７Ｆ及び図７Ｉを参照して説明したように）連続的な縁部を有する三次元形状（例えば、図７Ｉの７０４）（例えば、鋭い及び／又は尖った角部のない三次元形状、例えば、連続した導関数の個別の数（例えば、２、３、４、１０、１００、又は無限）で微分可能な表面を有する凸形状などの連続した滑らかな形状）内に第１のメディアアイテムを表示することを含む。いくつかの実施形態では、第２の方式で第１のメディアアイテムを表示することは、連続的な縁部を有する三次元形状内に第１のメディアアイテムを表示することを取り止めること（例えば、二次元形状で、及び／又は連続的な縁部を有さない（例えば、鋭い及び／又は尖った角部を有する）三次元形状で、及び／又は異なる三次元形状で第１のメディアアイテムを表示すること）を含む。個別のタイプの深度情報を含む第１のメディアアイテムに基づいて、連続的な縁部を有する三次元形状内に第１のメディアアイテムを表示することは、システムの状態に関する視覚的フィードバック（例えば、第１のメディアアイテムが個別のタイプの深度情報を含むとシステムが判定したこと）をユーザに提供し、これは、改善された視覚的フィードバックを提供する。いくつかの実施形態では、コンピュータシステムがヘッドマウントデバイスであるとき、コンピュータシステム７００は、ユーザが物理的環境内で自身を再配置したこと、及び／又は（例えば、ユーザがコンピュータシステム７００を自身の頭部に装着している間に）自身の頭部を回転させたことをコンピュータシステムが検出したことに応じて、第１のメディアアイテムの三次元形状の異なる透視図を表示する。

【0262】

いくつかの実施形態では、連続的な縁部を伴う三次元形状は、（例えば、図７Ｆ及び７Ｉを参照して説明されるように）湾曲した前面及び湾曲した背面（例えば、図７Ｉにおける７０４）（例えば、湾曲した前面から直接横断して、かつ／又はその反対側に位置決めされる湾曲した背面）を含む。個別のタイプの深度情報を含む第１のメディアアイテムに基づいて、連続的な縁部を有する三次元形状内に第１のメディアアイテムを表示することは、システムの状態に関する視覚的フィードバック（例えば、第１のメディアアイテムが個別のタイプの深度情報を含むとシステムが判定したこと）をユーザに提供し、これは、改善された視覚的フィードバックを提供する。

【0263】

いくつかの実施形態では、連続的な縁部を伴う三次元形状は、（例えば、図７Ｆ及び７Ｉを参照して説明されるように）１つ以上の屈折縁部（例えば、図７Ｉの７０４）から放出されている光に屈折特性を適用する（例えば、偏向させる、屈曲させる、又はその方向を変化させる）１つ以上の屈折縁部を有する。個別のタイプの深度情報を含む第１のメディアアイテムに基づいて、連続的な縁部を有する三次元形状内に第１のメディアアイテムを表示することは、システムの状態に関する視覚的フィードバック（例えば、第１のメディアアイテムが個別のタイプの深度情報を含むとシステムが判定したこと）をユーザに提供し、これは、改善された視覚的フィードバックを提供する。

【0264】

いくつかの実施形態では、第１のメディアアイテムが個別のタイプの深度情報を含むメディアアイテムであるという判定は、第１のメディアアイテムが、（例えば、図７Ａ～図７Ｄを参照して説明したように）２つの異なるカメラ（又は２つの異なるカメラのセット）から同時にキャプチャされたメディアを含む立体視メディアアイテムであるという判定である。いくつかの実施形態では、立体視メディアアイテムは、ユーザの第１の目のために１つ以上のカメラの第１のセットによってキャプチャされた第１の画像を表示し、ユーザの第２の目のために１つ以上のカメラの第２のセットによってキャプチャされた第２の画像を（例えば、第１の画像と並行して、かつ／又は同時に）表示することによって表示される。いくつかの実施形態では、立体視メディアアイテムは、離間した（例えば、人の目とほぼ同じ距離で離間した）２つの異なるカメラから同時にキャプチャされた２つの異なる画像を含み、キャプチャされたシーンの深度を再現するために、２つの異なる画像がユーザに同時に表示される（第１の画像がユーザの第１の目に表示され、第１の画像とは異なる第２の画像がユーザの第２の目に表示される）。第１のメディアアイテムが２つの異なるカメラから同時にキャプチャされたメディアを含む立体視メディアアイテムであるという判定に従って、第１のメディアアイテムを第１の方式で表示することは、システムの状態に関する視覚的フィードバック（例えば、第１のメディアアイテムが２つの異なるカメラから同時にキャプチャされたメディアを含む立体視メディアアイテムであるとシステムが判定したこと）をユーザに提供し、これは、改善された視覚的フィードバックを提供する。

【0265】

いくつかの実施形態では、第１のメディアアイテムを第１の方式で表示することは、１つ以上のコントロール（例えば、７２８Ａ、７２８Ｂ、７２８Ｃ、又は７４０）（例えば、再生コントロール（例えば、再生、一時停止、巻き戻し、早送り）、停止、及び／又はクローズオプション）を第１のメディアアイテムの外側境界の外側（例えば、メディアウィンドウ７０４の外側）（例えば、図７Ｆ～図７Ｈ及び図７Ｎ）に表示する（例えば、第１のメディアアイテム上にオーバーレイされない）ことを含む。いくつかの実施形態では、第２の方式で第１のメディアアイテムを表示することは、第１のメディアアイテム上にオーバーレイされた１つ以上のコントロールを表示することを含む。いくつかの実施形態では、１つ以上のコントロールは、第１のメディアアイテムを閉じる（例えば、その表示を中止する）ように選択可能な第１のコントロール（例えば、クローズオプション）を含む。いくつかの実施形態では、１つ以上のコントロールは、第１のメディアアイテムを１つ以上の外部電子デバイス（例えば、共有オプション）に共有するためのプロセスを開始するために選択可能な第２のコントロールを含む。いくつかの実施形態では、１つ以上のコントロールは、第１のメディアアイテムの再生を再開及び／又は開始するために選択可能な第３のコントロール（例えば、再生オプション）を含む。いくつかの実施形態では、１つ以上のコントロールは、第１のメディアアイテムの再生を一時停止するために選択可能な第４のコントロール（例えば、一時停止オプション）を含む。いくつかの実施形態では、１つ以上のコントロールは、第１のメディアアイテムの再生を前方にスキップする及び／又は加速するように選択可能な第５のコントロール（例えば、早送りオプション）を含む。いくつかの実施形態では、１つ以上のコントロールは、第１のメディアアイテムの再生を後方にスキップする、減速する、及び／又は逆再生するように選択可能な第６のコントロール（例えば、巻き戻しオプション）を含む。第１のメディアアイテムが個別のタイプの深度情報を含むことに基づいて、第１のメディアアイテムの外側境界の外側に表示された１つ以上のコントロールとともに第１のメディアアイテムを表示することは、システムの状態（例えば、第１のメディアアイテムが個別のタイプの深度情報を含むとシステムが判定したこと）に関する視覚的フィードバックをユーザに提供し、これは、改善された視覚的フィードバックを提供する。

【0266】

いくつかの実施形態では、方法８００、９００、１０００、及び１１００の態様／動作は、これらの方法の間で交換、置換、及び／又は追加され得る。例えば、方法８００で表示されるメディアライブラリユーザインタフェースは、任意選択的に、方法９００で表示されるユーザインタフェースであり、及び／又は方法８００で表示される第１のメディアアイテムは、任意選択的に、方法９００及び／又は１０００で表示される第１のメディアアイテムである。簡潔にするために、それらの詳細はここでは繰り返さない。

【0267】

図１１Ａ～図１１Ｆは、メディアを表示する例を示す。図１２００は、メディアを表示するための例示的な方法１２００のフロー図である。図１１Ａ～図１１Ｆのユーザインタフェースは、図１２のプロセスを含む、以下で説明するプロセスを示すために使用される。

【0268】

図１１Ａは、ディスプレイデバイス７０２及び１つ以上のカメラを含むタブレットであるコンピュータシステム７００を示す（例えば、コンピュータシステム７００は、１つ以上のカメラと有線通信及び／又は無線通信する）。図１１Ａは、コンピュータシステム７００をタブレットとして示しているが、以下に説明する技術は、ヘッドマウントデバイスに適用可能である。コンピュータシステム７００がヘッドマウントデバイスであるいくつかの実施形態では、コンピュータシステム７００は、任意選択的に２つのディスプレイ（コンピュータシステム７００のユーザの各目に対して１つ）を含み、各ディスプレイは様々なコンテンツを表示する。コンピュータシステム７００がヘッドマウントデバイスである場合、コンピュータシステム７００は、様々な要素（例えば、後述する視覚効果１１１２など）を立体的に表示して、深度の知覚を作り出す。更に、コンピュータシステム７００がヘッドマウントデバイスである場合、ユーザは、仮想ポータル１１０２などのオブジェクトの異なる透視図を得るために、物理的環境を歩き回り、かつ／又は頭部を回すことができる。

【0269】

図１１Ａに示すように、コンピュータシステム７００は、ディスプレイデバイス７０２にメディアユーザインタフェース１１０４を表示する。図１１Ａに示すように、メディアユーザインタフェースは、物理的環境１１０６の表現を含む。図１１Ａにおいて、椅子１１０６ａ、ソファ１１０６ｂ、及び給水器１１０６ｃは、コンピュータシステム７００と通信する１つ以上のカメラの視野内にある。図１１Ａにおいて、椅子１１０６ａ、ソファ１１０６ｂ、及び給水器１１０６ｃは、コンピュータシステム７００と通信する１つ以上のカメラの視野内にあるため、物理的環境１１０６の表現は、椅子１１０６ａ、ソファ１１０６ｂ、及び給水器１１０６ｃを含む。ユーザがディスプレイデバイス（例えば、タッチ感知ディスプレイ）７０２を見ると、ユーザは、（例えば、図１１Ａ～図１１Ｆに示すように）コンピュータシステム７００が表示する１つ以上の仮想オブジェクトとともに物理的環境１１０６の表現を見ることができる。したがって、コンピュータシステム７００は、ディスプレイデバイス７０２を介して拡張現実環境を提示する。いくつかの実施形態では、物理的環境１１０６の表現に含まれるコンテンツは、コンピュータシステム７００の視点から（例えば、ユーザに）可視であるコンテンツに対応する。いくつかの実施形態では、物理的環境１１０６の表現に含まれるコンテンツは、コンピュータシステム７００のユーザの視点から可視であるコンテンツに対応する。いくつかの実施形態では、物理的環境１１０６の表現は、ディスプレイによって表示されることなく、（例えば、透明ディスプレイを通して）ユーザに可視である物理的環境である。

【0270】

図１１Ａ～図１１Ｆの実施形態では、コンピュータシステム７００の視点は、コンピュータシステム７００と通信する１つ以上のカメラの視野に対応する。したがって、コンピュータシステム７００が物理的環境全体にわたって移動されると、コンピュータシステム７００の視点が変化し、それに応じて１つ以上のカメラの視野が変化する。

【0271】

図１１Ａに示すように、コンピュータシステム７００は、物理的環境１１０６の表現内に仮想ポータル１１０２を表示する。コンピュータシステム７００は、仮想ポータル１１０２を物理的環境１１０６の表現内の三次元オブジェクトとして表示する。したがって、コンピュータシステム７００は、ある量の深度を有する仮想ポータル１１０２を表示する。コンピュータシステム７００が仮想ポータル１１０２を有するものとして表示する深度の量は、仮想ポータル１１０２のディスプレイに対するコンピュータシステム７００の位置決めの角度に直接相関する（例えば、人物がある角度から薄いガラスシートを見たときに、薄いガラスシートの厚さがどのように見えるかと同様）。仮想ポータル１１０２のディスプレイは、ワールドロックされる。したがって、コンピュータシステム７００は、コンピュータシステム７００の視点が変化するにつれて（例えば、コンピュータシステム７００が物理的環境全体にわたって移動されるにつれて）、物理的環境１１０６の表現内の仮想ポータル１１０２の相対的なポジションを維持する。

【0272】

図１１Ａに示されるように、コンピュータシステム７００は、仮想ポータル１１０２内にメディアアイテム１１０８の表現を表示する。ユーザは、仮想ウィンドウ１１１８を通して見ることによって、メディアアイテム１１０８の表現を見ることができる。仮想ウィンドウ１１１８は、ユーザが見ることができる仮想ポータル１１０２の半透明部分である。仮想ウィンドウ１１１８は、仮想ポータル１１０２の前面に位置決めされる。メディアアイテム１１０８の表現は、以前にキャプチャされた立体視メディアアイテムに対応する（例えば、写真又はビデオ）（例えば、物理的環境内の共通のロケーションに位置するカメラのセット（例えば、２つ以上のカメラ）からキャプチャされたメディアアイテム（例えば、カメラのセットは、人間の目が離間されるのとほぼ同じ距離だけ離間される）、カメラのセット内の各カメラは、物理的環境の固有の透視図をキャプチャする）。更に、図１１Ａに示すように、コンピュータシステム７００は、メディアアイテム１１０８の表現の上にオーバーレイされた視覚効果１１１２を表示する。図１１Ａにおいて、視覚効果１１１２は、メディアアイテム１１０８の表現の縁部に表示されるコンテンツをカバーするぼかし効果である。いくつかの実施形態では、コンピュータシステム７００がヘッドマウントデバイスであるとき、コンピュータシステム７００は、第１の画像（例えば、メディアアイテム１１０８の表現で示される環境の第１の透視図）をユーザの第１の目に表示し、コンピュータシステム７００は、第２の画像（例えば、メディアアイテム１１０８の表現で示される環境の第２の透視図）をユーザの第２の目に表示し、したがって、ユーザは、立体視深度効果を伴ってメディアアイテム１１０８を視認する（例えば、別個の画像をユーザの異なる目に表示することは、立体視深度効果を生成する）。

【0273】

図１１Ａにおいて、コンピュータシステム７００は、仮想ポータル１１０２内にメディアアイテム１１０８、後方ぼかし層１１１２ａ、及び衝突ぼかし層１１１２ｂの表現を表示する。後方ぼかし層１１１２ａ及び衝突ぼかし層１１１２ｂは組み合わされて、コンピュータシステム７００がメディアアイテム１１０８の表現の縁部を不明瞭にするように表示する視覚効果１１１２を生成する。更に、図１１Ａに示すように、コンピュータシステム７００は、メディアアイテム１１０８の表現を表示することの一部として、ビネット効果を表示する。したがって、図１１Ａに示すように、コンピュータシステム７００は、メディアアイテム１１０８の表現の周囲をメディアアイテム１１０８の表現の中心よりも暗く表示する。

【0274】

図１１Ａは、仮想ポータル１１０２内の後方ぼかし層と、衝突ぼかし層と、メディアアイテム１１０８の表現との間のポジション関係を示すのに役立つ視覚的補助としての概略図１１１４を含む。概略図１１１４は、（例えば、仮想ポータル１１０２内に表示される後方ぼかし層に対応する）後方ぼかし層１１１４ｂの表現、（例えば、仮想ポータル１１０２内に表示される衝突ぼかし層に対応する）衝突ぼかし層１１１４ｃの表現、（例えば、仮想ポータル１１０２内に表示されるメディアアイテム１１０８の表現に対応する）コンテンツ１１１４ｄの表現、及び（例えば、仮想ポータル１１０２の仮想ウィンドウ１１１８に対応する）ウィンドウ１１１４ｅの表現を含む。

【0275】

図１１Ａにおいて、概略図１１１４は、コンテンツ１１１４ｄの表現が、後方ぼかし層１１１４ｂの表現と衝突ぼかし層１１１４ｃの表現との間に位置決めされることを示す。したがって、コンピュータシステム７００は、仮想ポータル１１０２内の後方ぼかし層１１１２ａと衝突ぼかし層１１１２ｂとの間にメディアアイテム１１０８の表現を表示する（例えば、レンダリングする）。更に、概略図１１１４によって示されるように、後方ぼかし層１１１２ａは、コンテンツ１１１４ｄの表現よりも広く、衝突ぼかし層１１１２ｂは、メディアアイテム１１０８の表現の縁部に衝突する。

【0276】

後方ぼかし層１１１２ａは、メディアアイテム１１０８の表現に対応する立体視メディアアイテムの縁部にあるコンテンツの外挿のぼかしである。立体視メディアアイテムの縁部にあるコンテンツが変化すると（例えば、立体視メディアアイテムがビデオメディアアイテムに対応するとき）、後方ぼかし層１１１２ａに含まれるコンテンツは、立体視メディアアイテムの縁部におけるコンテンツに対する変化に基づいて変化する。

【0277】

衝突ぼかし層１１１２ｂは、メディアアイテム１１０８の表現に対応する立体視メディアアイテムの縁部にあるコンテンツのぼかしである。コンピュータシステム７００は、メディアアイテム１１０８の表現の縁部からメディアアイテム１１０８の表現の中央に向かって内側に延びるものとして、衝突ぼかし層１１１２ｂを表示する。更に、衝突ぼかし層１１１２ｂは、衝突ぼかし層１１１２ｂがメディアアイテム１１０８の表現の中心に向かって延びるにつれて大きさ（例えば、強度）が減少するぼかし効果である。すなわち、衝突ぼかし層１１１２ｂは、衝突ぼかし層１１１２ｂがメディアアイテム１１０８の表現の中心に向かって延びる（例えば、衝突ぼかし層１１１２ｂがフェザリングされる）につれて、より半透明になる。後方ぼかし層１１１２ａと同様に、衝突ぼかし層１１１２ｂによってぼかされるコンテンツは、立体視メディアアイテムの縁部におけるコンテンツが変化するにつれて（例えば、立体視メディアアイテムがビデオメディアアイテムに対応するとき）変化する。

【0278】

図１１Ａに示すように、概略図１１１４は、電子デバイス１１１４ａの表現を含む。電子デバイス１１１４ａの表現は、仮想ポータル１１０２のディスプレイのロケーションに対するコンピュータシステム７００の位置決めを示す。図１１Ａにおいて、概略図１１１４内のウィンドウ１１１４ｅの表現に対する電子デバイス１１１４ａの表現の位置決めによって示されるように、コンピュータシステム７００は、仮想ポータル１１０２のディスプレイの真正面にある物理的環境内のロケーションに位置決めされる。更に、概略図１１１４におけるコンテンツ１１１４ｄの表現及びウィンドウ１１１４ｅの表現の位置決めによって示されるように、コンピュータシステム７００は、仮想ポータル１１０２の仮想ウィンドウ１１１８の背後にメディアアイテム１１０８の表現を表示する（例えば、メディアアイテム１１０８の表現は、仮想ポータル１１０２の仮想ウィンドウ１１１８よりもコンピュータシステム７００から更に離れている）。図１１Ａ～図１１Ｆの実施形態では、コンピュータシステム７００は、ユーザによって保持及び／又は装着されている。したがって、コンピュータシステム７００の視点は、ユーザの視点に対応する。

【0279】

図１１Ａにおいて、コンピュータシステム７００は、コンピュータシステム７００の位置決めが仮想ポータル１１０２のディスプレイの中心にあると判定する。図１１Ａにおいて、コンピュータシステム７００は、コンピュータシステム７００の位置決めが仮想ポータル１１０２のディスプレイの中心にあると判定するため、コンピュータシステム７００は、メディアアイテム１１０８の表現の周囲に視覚効果１１１２を均一に表示する。図１１Ａにおいて、コンピュータシステム７００は、物理的環境内で再配置される。いくつかの実施形態では、コンピュータシステム７００がヘッドマウントデバイスであるとき、コンピュータシステム７００は、ユーザの異なる目にそれぞれ対応する２つのディスプレイデバイス上でメディアアイテム１１０８の表現の周囲に均一に視覚効果１１１２を別々に表示する（例えば、コンピュータシステム７００は、ユーザの２つの目に対してメディアアイテム１１１２の表現の周囲に均一に視覚効果１１１２を別々に表示する）。いくつかの実施形態では、コンピュータシステム７００は、視覚効果を有する立体視メディアアイテム１１１２の２つ以上の表現を同時に表示する。いくつかの実施形態では、コンピュータシステム７００は、視覚効果１１１２のない非立体視メディアアイテムの表現を表示する。いくつかの実施形態では、コンピュータシステム７００は、視覚効果１１１２を有するメディアアイテム１１０８の表現と、視覚効果１１１２のない非立体視メディアアイテムの表現とを同時に表示する。いくつかの実施形態では、メディアアイテム１１０８の表現は、コンピュータシステム７００と通信する１つ以上のカメラを介してキャプチャされたメディアアイテムの描写である。いくつかの実施形態では、メディアアイテム１１０８の表現は、コンピュータシステム７００と通信する（例えば、有線通信及び／又は無線通信）外部デバイスを介してキャプチャされたメディアアイテムの描写である。いくつかの実施形態では、メディアアイテム１１０８の表現は、２つ以上の固有の透視図からキャプチャされた物理的環境の表現であり、コンピュータシステム７００は、物理的環境の異なる透視図をユーザの各目に表示する。

【0280】

図１１Ｂにおいて、コンピュータシステム７００は、コンピュータシステム７００が仮想ポータル１１０２のディスプレイの右側に位置決めされていると判定する。コンピュータシステム７００は、コンピュータシステム７００が仮想ポータル１１０２のディスプレイの右側に位置決めされていると判定するため、コンピュータシステム７００は、コンピュータシステム７００のディスプレイデバイス７０２の中心の左側に仮想ポータル１１０２を表示する。コンピュータシステム７００は、仮想ポータル１１０２のディスプレイに対するコンピュータシステム７００の位置決めに基づいて、ディスプレイデバイス７０２上の仮想ポータル１１０２のディスプレイのロケーションを変更する（例えば、コンピュータシステム７００が仮想ポータル１１０２のディスプレイの左側に位置決めされる場合、コンピュータシステム７００は、ディスプレイデバイス７０２の中心の右側に仮想ポータル１１０２を表示する）。上述したように、仮想ポータル１１０２のディスプレイはワールドロックされる。したがって、物理的環境１１０６の表現に含まれるコンテンツに対する仮想ポータル１１０２のディスプレイのポジションは、コンピュータシステム７００の位置決めが変化することに応じて変化しない。いくつかの実施形態では、コンピュータシステム７００がヘッドマウントデバイスであるとき、コンピュータシステム７００は、それぞれがユーザの異なる目に対応する２つの別個のディスプレイデバイスの中心の左側に仮想ポータル１１０２を別個に表示する（例えば、コンピュータシステム７００は、ユーザの目毎に２つの別個のディスプレイデバイスの中心の左側に視覚効果１１１２を別個に表示する）。

【0281】

更に、図１１Ｂにおいて、コンピュータシステム７００は、コンピュータシステム７００が仮想ポータル１１０２のディスプレイの右側に位置決めされていると判定するため、コンピュータシステム７００は、仮想ポータル１１０２の左境界上に表示される視覚効果１１１２のサイズを大きくする。より具体的には、コンピュータシステム７００は、仮想ポータル１１０２の左境界上に表示される（例えば、視覚効果１１１２の一部を構成する）後方ぼかし層１１１２ａの量を増加させる。

【0282】

後方ぼかし層１１１２ａの表示は動的である。すなわち、コンピュータシステム７００は、仮想ポータル１１０２のディスプレイに対するコンピュータシステム７００の位置決めの角度が増加すると判定されたとき、仮想ポータル１１０２の個別の境界上に表示される後方ぼかし層１１１２ａの量を増加させる。より具体的には、コンピュータシステム７００は、コンピュータシステム７００の位置決めの反対側にある仮想ポータル１１０２の境界上に表示される後方ぼかし層１１１２ａの量を増加させる（例えば、コンピュータシステム７００が仮想ポータル１１０２のディスプレイの左側に位置決めされる場合、コンピュータシステム７００は、仮想ポータル１１０２の右境界上に表示される後方ぼかし層１１１２ａの量を増加させ、その逆も同様である）。したがって、コンピュータシステム７００の視点が物理的環境全体にわたって変化すると、メディアアイテム１１０８の表現の外観は、コンピュータシステム７００の視点の変化に基づいて変化する。より具体的には、コンピュータシステム７００の視点が物理的環境全体にわたって変化するにつれて、視覚効果１１１２によって不明瞭にされるメディアアイテム１１０８の表現の部分が変化する。

【0283】

コンピュータシステム７００が表示する後方ぼかし領域の量は、コンピュータシステム７００の位置決めと仮想ポータル１１０２のディスプレイとの間の相対角度に依存する。コンピュータシステム７００の位置決めと仮想ポータル１１０２のディスプレイとの間の相対角度が大きいほど、コンピュータシステム７００のポジションの反対側にある仮想ポータル１１０２の境界上にコンピュータシステム７００が表示する後方ぼかし領域の量が大きくなる。

【0284】

１１Ｂにおいて、コンピュータシステム７００は、コンピュータシステム７００が、（例えば、図１１Ａにおけるコンピュータシステム７００の位置決めと比較して）コンピュータシステム７００の以前のポジションよりも仮想ポータル１１０２のディスプレイの近くに位置決めされているという判定を行う。図１１Ｂにおいて、コンピュータシステム７００は、コンピュータシステム７００がコンピュータシステム７００の以前のポジションよりも仮想ポータル１１０２のディスプレイの近くに位置決めされていると判定するため、コンピュータシステム７００は、（例えば、図１１Ａにおける仮想ポータル１１０２のディスプレイのサイズと比較して）仮想ポータル１１０２のディスプレイのサイズを大きくする（例えば、コンピュータシステム７００と物理的環境１１０６の表現内の仮想ポータル１１０２のディスプレイとの間の距離が減少したことを示すために）。

【0285】

上で説明したように、コンピュータシステム７００の移動は、コンピュータシステム７００と通信する１つ以上のカメラの視野を変化させる。更に、上述したように、物理的環境１１０６の表現の外観は、１つ以上のカメラの視野内にある物理的環境の部分に対応する。したがって、コンピュータシステム７００が物理的環境内で再配置されると、それに応じて物理的環境１１０６の表現の外観が変化する。したがって、図１１Ｂでは、コンピュータシステム７００の位置決めが物理的環境内で右にシフトしているため、物理的環境１１０６の表現に含まれるコンテンツ（例えば、ソファ１１０６ｂ及びウォーターディスペンサ１１０６ｃ）の位置決めは、メディアユーザインタフェース１１０４内で左にシフトする（例えば、図１１Ａの物理的環境１１０６の表現に含まれるコンテンツの位置決めと比較して）。

【0286】

図１１Ｂに示すように、コンピュータシステム７００は、仮想ポータル１１０２の角部に鏡面反射効果１１２０を表示する。鏡面反射効果１１２０の表示は、仮想ポータル１１０２が物理的環境１１０６の表現内の三次元オブジェクトであるという知覚を作成するのに役立つ。図１１Ｂにおいて、コンピュータシステム７００は、物理的環境内で再配置される。いくつかの実施形態では、鏡面反射効果１１２０は、仮想ポータル１１０２の周囲に表示される。いくつかの実施形態では、コンピュータシステム７００は、コンピュータシステム７００が物理的環境内で再配置されると、視差効果を用いてメディアアイテム１１０８の表現を表示する（例えば、コンピュータシステム７００は、メディアアイテム１１０８の表現の前景部分をメディアアイテム１１０９の表現の背景部分に対してシフト／移動させて示す）。いくつかの実施形態では、コンピュータシステム７００は、コンピュータシステム７００の視点の変化を検出したことに応じて、メディアアイテム１１０８の表現のどの部分が視覚効果１１１２の衝突層によって不明瞭にされるかを変更する。いくつかの実施形態では、コンピュータシステム７００の視点の変化を検出したことに応じて、コンピュータシステム７００は、ユーザの目ごとに異なるようにメディアアイテム１１０８の表現の外観を変更する。

【0287】

図１１Ｃにおいて、コンピュータシステム７００は、コンピュータシステム７００が仮想ポータル１１０２のディスプレイの左側に位置決めされている（例えば、コンピュータシステム７００が仮想ポータル１１０２のディスプレイに対してある角度で位置決めされている）と判定する。図１１Ｃにおいて、コンピュータシステム７００は、コンピュータシステム７００が仮想ポータル１１０２のディスプレイの左側に位置決めされていると判定するため、コンピュータシステム７００は、コンピュータシステム７００のディスプレイデバイス７０２の中心の右側に仮想ポータル１１０２を表示する。更に、図１１Ｃにおいて、コンピュータシステム７００は、コンピュータシステム７００が仮想ポータル１１０２のディスプレイの左側に位置決めされているという判定を行うため、コンピュータシステム７００は、仮想ポータル１１０２の右境界上に表示される（例えば、視覚効果１１１２の一部を形成する）後方ぼかし層１１１２ａの量を（例えば、図１１Ａ及び図１１Ｂにおいて仮想ポータル１１０２の右境界上に表示される後方ぼかし層１１１２ａの量と比較して）増加させる。いくつかの実施形態では、コンピュータシステム７００がヘッドマウントデバイスであるとき、コンピュータシステム７００は、ユーザの異なる目にそれぞれ対応する、コンピュータシステム７００の２つの別個のディスプレイデバイスの中心の右側に仮想ポータル１１０２を別個に表示する（例えば、コンピュータシステム７００は、ユーザの目毎に、ディスプレイの中心の右側に視覚ポータル１１０２を別個に表示する）。いくつかの実施形態では、コンピュータシステム７００がヘッドマウントデバイスであるとき、コンピュータシステム７００は、ユーザの異なる目にそれぞれ対応する、コンピュータシステム７００の２つの別個のディスプレイデバイスのための仮想ポータル１１０２の右境界上の後方ぼかし層１１１２ａの表示の量を別個に増加させる（例えば、コンピュータシステム７００は、ユーザの各目のための仮想ポータル１１０２のディスプレイの量を別個に増加させる）。

【0288】

更に、図１１Ｃにおいて、コンピュータシステム７００は、コンピュータシステム７００が、物理的環境内のコンピュータシステム７００の以前のポジション（例えば、図１１Ｂにおけるコンピュータシステム７００のポジション）よりも仮想ポータル１１０２のディスプレイから遠くに位置決めされているという判定を行う。コンピュータシステム７００は、コンピュータシステム７００がコンピュータシステム７００の以前のポジションよりも仮想ポータル１１０２のディスプレイから遠くにポジションしていると判定するため、コンピュータシステム７００は、（例えば、図１１Ｂにおける仮想ポータル１１０２のサイズと比較して）仮想ポータル１１０２のディスプレイのサイズを減少させる（例えば、コンピュータシステム７００と仮想ポータル１１０２のディスプレイとの間の距離が増加したことを示すために）。いくつかの実施形態では、コンピュータシステム７００がヘッドマウントデバイスであるとき、コンピュータシステム７００は、ユーザの異なる目にそれぞれ対応する、コンピュータシステム７００の２つの別個のディスプレイデバイス上の仮想ポータル１１０２のディスプレイのサイズを別個に減少させる。

【0289】

図において、コンピュータシステム７００は、コンピュータシステム７００の以前のポジション（例えば、図１１Ｂにおけるコンピュータシステム７００のポジション）よりも仮想ポータル１１０２のディスプレイから左に離れて位置決めされているため、物理的環境１１０６の表現に含まれるコンテンツ（例えば、椅子１１０６ａ、ソファ１１０６ｂ、及び給水器１１０６ｃ）の位置決めは、メディアユーザインタフェース１１０４内で右にシフトする（例えば、図１１Ｂにおける物理的環境１１０６の表現に含まれるコンテンツの位置決めと比較して）。図１１Ｃに示すように、コンピュータシステム７００は、仮想ポータル１１０２の左隅に鏡面反射効果１１２０の表示を維持する。図１１Ｃにおいて、コンピュータシステム７００は、物理的環境内で再配置される。いくつかの実施形態では、鏡面反射効果１１２０の表示のロケーションは、仮想ポータル１１０２のディスプレイに対するコンピュータシステム７００の視点に基づく。

【0290】

図１１Ｄにおいて、コンピュータシステム７００は、コンピュータシステム７００の位置決めが仮想ポータル１１０２のディスプレイの中心にあると判定する。図１１Ｄにおいて、コンピュータシステム７００は、コンピュータシステム７００の位置決めが仮想ポータル１１０２のディスプレイの中心にあると判定するため、コンピュータシステム７００は、仮想ポータル１１０２の周囲に後方ぼかし層１１１２ａを均一に表示する（例えば、コンピュータシステム７００は、仮想ポータル１１０２の各境界上に同じ量の後方ぼかし層１１１２ａを表示する）。いくつかの実施形態では、コンピュータシステム７００がヘッドマウントデバイスであるとき、コンピュータシステム７００は、各々がユーザの異なる目に対応する、コンピュータシステム７００の２つの別個のディスプレイデバイス上に、仮想ポータル１１０２の周縁の周囲に後方ぼかし層１１１２ａを均一に表示する。

【0291】

更に、図１１Ｄにおいて、コンピュータシステム７００は、物理的環境内のコンピュータシステム７００の位置決めが、コンピュータシステム７００の以前の位置決め（例えば、図１１Ｃにおけるコンピュータシステム７００の位置決め）よりも仮想ポータル１１０２のディスプレイに近いという判定を行う。コンピュータシステム７００は、コンピュータシステム７００のポジションがコンピュータシステム７００の以前のポジションよりも仮想ポータルのディスプレイに近いという判定を行うため、コンピュータシステム７００は、（例えば、コンピュータシステム７００と仮想ポータル１１０２のディスプレイとの間の距離の減少を示すために）ディスプレイ仮想ポータル１１０２のサイズを増大させる。いくつかの実施形態では、コンピュータシステム７００がヘッドマウントデバイスであるとき、コンピュータシステム７００は、ユーザの異なる目にそれぞれ対応する、コンピュータシステム７００の２つの別個のディスプレイデバイス上の仮想ポータル１１０２のディスプレイのサイズを別個に増大させる。

【0292】

図１１Ｄにおいて、コンピュータシステム７００は、没入型外観を有するメディアアイテム１１０８の表現を表示する要求を検出する。いくつかの実施形態では、没入型外観を有するメディアアイテム１１０８の表現を表示する要求は、コンピュータシステム７００が、コンピュータシステム７００と通信する１つ以上のハードウェア入力機構のアクティブ化（例えば、１つ以上のハードウェア入力機構が押下及び／又は回転される）に対応する入力を検出することに対応する。いくつかの実施形態では、没入型外観を有するメディアアイテム１１０８の表現を表示する要求は、コンピュータシステム７００が、仮想ポータル１１０２のディスプレイに対応する物理的環境内のロケーションに再配置されたことを検出することに対応する。

【0293】

図１１Ｅにおいて、没入型外観を有するメディアアイテム１１０８の表現を表示する要求を検出したことに応じて、コンピュータシステム７００は、没入型外観を有するメディアアイテム１１０８の表現を表示する。図１１Ｅにおいて、メディアアイテム１１０８の表現の表示は、ディスプレイデバイス７０２の全体を占有する。すなわち、コンピュータシステム７００は、没入型外観で表示されるメディアアイテム１１０８の表現を表示するが、物理的環境１１０６の表現は可視ではない。コンピュータシステム７００は、メディアアイテム１１０８に含まれるコンテンツ（例えば、木及び女性）をフルスケール（例えば、現実世界スケール）で表示し、コンピュータシステム７００は、没入型外観を有するメディアアイテム１１０８の表現を表示する。メディアアイテム１１０８の表現が非没入型外観（例えば、図１１Ａ～図１１Ｄにおけるメディアアイテム１１０８の表現の外観）で表示されるときとは対照的に、メディアアイテム１１０８の表現が没入型外観で表示される間に、メディアアイテム１１０８の表現は、ユーザの視点のより大きな量を占有する。いくつかの実施形態では、コンピュータシステム７００がヘッドマウントデバイスであるとき、コンピュータシステム７００は、コンピュータシステム７００が没入型外観でメディアアイテム１１０８の表現を表示するときにユーザの異なる目にそれぞれ対応するコンピュータシステム７００の２つの別個のディスプレイデバイスの大部分（例えば、全体）にメディアアイテム１１０８の表現を表示する。

【0294】

図１１Ｅにおいて、コンピュータシステム７００は、コンピュータシステム７００の視点が物理的環境において左に回転されたことを検出する。いくつかの実施形態では、コンピュータシステム７００は、ユーザの視点を包み込むようにメディアアイテム１１０８の表現を表示し、コンピュータシステム７００は、没入型外観を有するメディアアイテム１１０８の表現を表示する。いくつかの実施形態では、没入型外観を有するメディアアイテム１１０８の表現を表示する要求を検出したことに応じて、コンピュータシステム７００と仮想ポータル１１０２との間の距離が減少する（例えば、コンピュータシステム７００は、仮想ポータル１１０２のディスプレイをコンピュータシステム７００のポジションのより近くに移動させ、かつ／又はコンピュータシステム７００は、物理的環境１１０６の表現内の仮想ポータル１１０２のディスプレイのより近くに移動される）。いくつかの実施形態では、没入型外観を有するメディアアイテム１１０８の表現を表示する要求を検出したことに応じて、コンピュータシステム７００は、メディアアイテム１１０８の表現のｚ軸に沿ってメディアアイテム１１０８の表現のサイズを増大させる（例えば、コンピュータシステム７００は、仮想ポータル１１０２の厚さを増加させる）。いくつかの実施形態では、没入型外観を有するメディアアイテム１１０８の表現を表示することの一部として、コンピュータシステム７００は、立体視メディアアイテムの縁部に含まれるコンテンツの外挿に基づく後方ぼかし層１１１２ａを表示する。

【0295】

図１１Ｆにおいて、コンピュータシステム７００の視点が左に回転されたことをコンピュータシステム７００が検出したことに応じて、コンピュータシステム７００は、メディアアイテム１１０８の表現の表示を更新して、メディアアイテム１１０８の表現の左半分を示す。より具体的には、コンピュータシステム７００は、メディアアイテム１１０８の表現の左半分（例えば、木を含むメディアアイテム１１０８の表現の部分）が可視であり、メディアアイテム１１０８の表現の右部分（例えば、人物を含むメディアアイテムの表現の部分）が不可視であるように、メディアアイテム１１０８の表現の表示を更新する。すなわち、コンピュータシステム７００は、没入型外観でメディアアイテム１１０８の表現を表示するが、メディアアイテム１１０８の表現の表示は、コンピュータシステム７００の視点に対する変化に基づいて変化する。いくつかの実施形態では、コンピュータシステム７００は、コンピュータシステム７００が非没入型外観（例えば、図１１Ａ～図１１Ｄにおけるメディアアイテム１１０８の表現の外観）でメディアアイテム１１０８の表現を表示する要求を検出したことに応じて、没入型外観でメディアアイテム１１０８の表現を表示することを中止する。いくつかの実施形態では、コンピュータシステム７００は、コンピュータシステム７００が仮想ポータル１１０２のディスプレイに対応する物理的環境内のロケーションから離れて再配置されたことをコンピュータシステム７００が検出したことに応じて、没入型外観を有するメディアアイテム１１０８の表現を表示することを中止する。

【0296】

図１１Ａ～図１１Ｆに関する追加の説明は、図１２に関して説明される方法１２００を参照して以下に提供される。

【0297】

図１２は、いくつかの実施形態による、メディアアイテムを表示するための例示的な方法１２００のフロー図である。いくつかの実施形態では、方法１２００は、表示生成構成要素（例えば、７０２）（例えば、ディスプレイコントローラ、タッチ感知ディスプレイシステム、ディスプレイ（例えば、統合及び／又は接続された）、３Ｄディスプレイ、透明ディスプレイ、ヘッドアップディスプレイ、及び／又はヘッドマウントディスプレイ）と通信（例えば、有線通信及び／又は無線通信）するコンピュータシステム（例えば、７００）（例えば、スマートフォン、タブレット、及び／又はヘッドマウントデバイス）において実行される。いくつかの実施形態では、方法１２００は、非一時的（又は一時的）コンピュータ可読記憶媒体に記憶され、コンピュータシステム１０１の１つ以上のプロセッサ２０２（例えば、図１のコントロール１１０）などのコンピュータシステムの１つ以上のプロセッサによって実行される命令によって統御される。方法１２００のいくつかの動作は、任意選択的に、組み合わされ、かつ／又はいくつかの動作の順序は、任意選択的に、変更される。

【0298】

コンピュータシステムは、表示生成構成要素を介して、立体視メディアアイテム（例えば、１１０８）の第１の表現（１２０４）（例えば、立体視メディアアイテムは、以前にキャプチャされた（例えば、コンピュータシステムと通信する１つ以上のカメラを使用して以前にキャプチャされた））（例えば、深度を伝えるようにユーザに提示することができるメディアアイテム（例えば、ビデオ又は静止写真）、異なる透視図を有する２つ以上のカメラ（又はカメラのセット）を使用してキャプチャされたメディアアイテム、及び／又はコンピュータシステムと通信する（例えば、有線通信又は無線）カメラを使用してキャプチャされたメディアアイテム）であって、立体視メディアアイテムの第１の表現は、少なくとも第１の縁部（例えば、１１０８の境界）を含む、第１の表現と、視覚効果（例えば、衝突ぼかし層１１１２ｂ）（１２０６）（例えば、グラフィカル要素及び／又は効果；ぼかし領域）であって、視覚効果は、立体視メディアアイテムの少なくとも第１の部分を不明瞭にし、立体視メディアアイテムの第１の表現の少なくとも第１の縁部から内部（例えば、立体視メディアアイテムの第１の表現の中心）に向かって内側に（例えば、（例えば、図１１Ａを参照して上述したように）立体視メディアアイテムの第１の表現の第１の縁部の方向に垂直な、キャプチャされた立体視メディアアイテムの第１の表現の中心に向かって内側に延びる方向に）延びる（キャプチャされた立体視メディアアイテムの第１の表現及び視覚効果は、物理的環境（例えば、コンピュータシステムのロケーションの物理的環境）（例えば、物理的環境のリアルタイム表現）の表現（例えば、仮想表現又は光学表現）がコンピュータシステムのユーザに可視である間に表示される）（例えば、視覚効果は、キャプチャされた立体視メディアアイテムの第１の表現と同時に表示される）（例えば、コンピュータシステムは、視覚効果とキャプチャされた立体視メディアアイテムの第１の表現とを別個の層にレンダリングする（例えば、視覚効果は、キャプチャされた立体視メディアアイテムの表現の背後にレンダリングされる））、視覚効果と、を含むユーザインタフェース（例えば、１１０４）（例えば、コンピュータシステムにインストールされたメディア視聴アプリケーション（例えば、サードパーティメディア視聴アプリケーション、又はコンピュータシステムの製造業者によってコンピュータシステムにインストールされたメディア視聴アプリケーション）に対応するユーザインタフェース）を表示する（１２０２）。いくつかの実施形態では、視覚効果によって覆われるキャプチャされた立体視メディアアイテムの第１の表現に含まれるコンテンツは、可視である（例えば、コンピュータシステムのユーザに可視である）（例えば、視覚効果は、ある程度の半透明性を有する）。いくつかの実施形態では、キャプチャされた立体視メディアアイテムの第１の表現に含まれるコンテンツは、視覚効果の一部を不明瞭にする（例えば、キャプチャされた立体視メディアアイテムに含まれるコンテンツは、ユーザが視覚効果の一部を見ることを妨げる）。いくつかの実施形態では、コンピュータシステムは、キャプチャされた立体視メディアアイテムの第１の表現の周囲に境界（例えば、色付き（例えば、黒）の実線）を表示する。いくつかの実施形態では、キャプチャされた立体視メディアアイテムの第１の表現はヘッドロックされる（例えば、コンピュータシステムの配向が物理的環境内で変化するにつれて、物理的環境の表現に対するキャプチャされた立体視メディアアイテムの第１の表現の位置決めが変化する）。いくつかの実施形態では、キャプチャされた立体視メディアアイテムの第１の表現は、ワールドロックされる（例えば、物理的環境の表現に対するキャプチャされた立体視メディアアイテムの位置決めは、コンピュータシステムの配向が物理的環境内で変化するときに維持される）。立体視メディアアイテムの第１の部分を不明瞭にし、立体視メディアアイテムの第１の縁部から立体視メディアアイテムの内部に向かって内側に延びる視覚効果を表示することは、ユーザが特定の角度（例えば、極端な角度）から立体視メディアアイテムを視聴している間にユーザが検出するウィンドウバイオレーション（例えば、立体視メディアアイテムのコンテンツがウィンドウの前で知覚される時点で、立体視メディアアイテムが背後に表示されるウィンドウの縁部によって、立体視メディアアイテム内のオブジェクトが不明瞭にされるときに発生する視覚効果）の量を低減するのに役立ち、その結果、ユーザの視聴体験が向上し、ウィンドウバイオレーションを低減することにより、デバイスの操作性が向上し、ユーザデバイスインタフェースがより効率的になる。そうすることはまた、ユーザがデバイスをより迅速かつ効率的に使用することを可能にすることによって、電力使用を低減し、コンピュータシステムのバッテリ寿命を改善する。

【0299】

いくつかの実施形態では、立体視メディアアイテム（例えば、１１０８によって表される）は、カメラのセット（例えば、物理的環境内の異なるロケーション（例えば、わずかに異なる（例えば、１インチ、２インチ、３インチ、及び／又は人の平均瞳孔間距離によって分離される））に位置決めされる２つ以上のカメラ）（例えば、コンピュータシステムと通信（例えば、有線通信及び／又は無線通信）している２つ以上のカメラ）からキャプチャされ、カメラのセットからの第１のカメラは、物理的環境の第１の透視図をキャプチャし、カメラのセットからの第２のカメラ（例えば、第１のカメラとは異なる）は、物理的環境の第２の透視図をキャプチャし、第２の透視図は、第１の透視図とは異なる（例えば、図１１Ａを参照して上述したように）。いくつかの実施形態では、コンピュータシステムは、（例えば、図１１Ａを参照して上述したように）表示生成構成要素（例えば、７０２）を介して、物理的環境の第１の透視図をユーザの第２の目（例えば、ユーザの右目）ではなくユーザの第１の目（例えば、ユーザの左目）に表示し（例えば、第１のカメラを介してキャプチャされた物理的環境の透視図は、ユーザの第２の目ではなくユーザの第１の目に可視である（例えば、第２のカメラを介してキャプチャされた物理的環境の透視図は、ユーザの第２の目には可視でない））、コンピュータシステムは、（例えば、図１１Ａを参照して上述したように）表示生成構成要素を介して、第２の透視図をユーザの第１の目ではなくユーザの第２の目に表示する（例えば、第２のカメラを介してキャプチャされた物理的環境の透視図は、ユーザの第１の目ではなく、ユーザの第２の目に可視である）（例えば、第２の透視図は、第１の透視図に含まれないコンテンツを含み、その逆も同様である）（例えば、立体視メディアアイテムは、同じ一般的な方向を指し、画像がユーザの異なる目に同時に表示されるときに立体視効果を生成するために人間の目が離間される距離だけほぼ離間された２つ以上の離間されたカメラによってキャプチャされた）。いくつかの実施形態では、コンピュータシステムがヘッドマウントデバイスであるとき、コンピュータシステムは、コンピュータシステムの第１のディスプレイデバイス上に物理的環境の第１の透視図を表示し、コンピュータシステムは、電子デバイスの第２のディスプレイデバイス上に物理的環境の第２の透視図を表示し、第１のディスプレイデバイスは、ユーザの第１の目に対応し（例えば、ユーザの第１の目に可視であり）、第２のディスプレイデバイスは、ユーザの第２の目に対応する（例えば、ユーザの第２の目に可視である）。物理的環境の第１の透視図をユーザの第１の目に表示し、物理的環境の第２の透視図をユーザの第２の目に表示することにより、立体視メディアアイテムの第１の表現に含まれるコンテンツ間のユーザの深度の知覚が向上し、その結果、ユーザの視聴体験が向上し、より正確になる。

【0300】

いくつかの実施形態では、立体視メディアアイテム（例えば、１１０８）の第１の表現を表示している間に、コンピュータシステムは、ユーザの視点の第１の変化（例えば、７００の視点の変化）（例えば、ユーザの全身の位置決めの変化、ユーザの身体の第１の部分（例えば、ユーザの頭部）の位置決めの変化）（例えば、ユーザの側方移動、ユーザの左右移動、及び／又は水平面に沿ったユーザの移動）を検出する。いくつかの実施形態では、ユーザの視点の第１の変化を検出したことに応じて、コンピュータシステムは、（例えば、図１１Ｂを参照して上述したように）ユーザの視点の第１の変化に基づいて、立体視メディアアイテムの第１の表現の外観を変化させる（例えば、立体視メディアの第１の表現の外観の変化は、ユーザの視点の変化に相関する）。いくつかの実施形態では、立体視メディアアイテムの第１の表現の外観を変更することの一部として、立体視メディアアイテムの第１の表現の２つ以上の視覚特性が変更される。いくつかの実施形態では、ユーザの視点の変更前に可視でなかった立体視メディアアイテムの第１の表現の部分は、ユーザの視点の変更後に可視である。ユーザの視点の変化を検出したことに応じて立体視メディアアイテムの外観を変更することは、ユーザが、追加のコントロールを表示することなく立体視メディアアイテムの表現の外観を制御することを可能にし、これは、ユーザインタフェースを混乱させることなく追加のコントロールオプションを提供する。ユーザの視点の変化を検出したことに応じて立体視メディアアイテムの外観を変化させることは、コンピュータシステムの状態（例えば、コンピュータシステムがユーザの視点の変化を検出した）に関する視覚的フィードバックをユーザに提供し、これは、改善された視覚的フィードバックを提供する。

【0301】

いくつかの実施形態では、立体視メディアアイテム（例えば、１１０８）の第１の表現の外観を変更する前に、視覚効果（例えば、衝突ぼかし層１１１２ｂ）は、立体視メディアアイテムの第１の表現の第１の部分を不明瞭にする（例えば、視覚効果は、立体視メディアアイテムの第１の表現の第３の部分を不明瞭にしない）。いくつかの実施形態では、立体視メディアアイテムの第１の表現の外観を変更することは、視覚効果が、（例えば、図１１Ｂを参照して上述したように）第１の部分とは異なる立体視メディアアイテムの第１の表現の第２の部分を不明瞭にするように、視覚効果を修正することを含む（例えば、視覚効果は、立体視メディアアイテムの表現の第１の部分を不明瞭にしない）。いくつかの実施形態では、立体視メディアアイテムの第１の表現の第１の部分は、立体視メディアアイテムの表現の第２の部分に含まれるコンテンツを含む（例えば、立体視メディアアイテムの表現の第１の部分内のコンテンツは、立体視メディアアイテムの表現の第３の部分に含まれるコンテンツと重複する）。ユーザの視点の変化を検出したことに応じて、立体視メディアアイテムの第１の表現のどの部分を視覚効果が不明瞭にするかを変更することは、ユーザが、追加のコントロールを表示することなく視覚効果の表示を制御することを可能にし、これは、ユーザインタフェースを混乱させることなく追加のコントロールオプションを提供する。

【0302】

いくつかの実施形態では、立体視メディアアイテム（例えば、１１０８）の第１の表現の外観を変更することは、（例えば、図１１Ｂを参照して上述したように）第１の方式でユーザの右目ではなくユーザの左目に表示される立体視メディアアイテムの第１の表現の外観を変更することと、第２の方式でユーザの左目ではなくユーザの右目に表示される（例えば、ユーザの左目とは異なる）第１の立体視メディアアイテムの第１の表現の外観を変更することと、を含み、第２の方式は、（例えば、図１１Ｂを参照して上述したように）第１の方式とは異なる（例えば、ユーザの左目とユーザの右目の両方に表示される立体視メディアアイテムの第１の表現のコンテンツの重複がある）（例えば、立体視メディアアイテムの第１の表現に含まれるコンテンツは、ユーザの右目ではなくユーザの左目に可視であり、逆もまた同様である）（例えば、コンピュータシステムは、ユーザの左目に可視である視覚効果の量を増加させ、コンピュータシステムは、ユーザの右目に可視である視覚効果の量を減少させる）。いくつかの実施形態では、コンピュータシステムは、立体視メディアアイテムの第１の表現の同じ視覚特性（例えば、輝度、半透明性、及び／又はサイズ）の変化をユーザの左目及びユーザの右目の両方に表示する。いくつかの実施形態では、コンピュータシステムは、立体視メディアアイテムの第１の表現の第１の視覚特性（例えば、輝度、半透明性、及び／又はサイズ）の変化をユーザの左目に表示し、コンピュータシステムは、立体視メディアアイテムの第１の表現の第２の視覚特性の変化をユーザの右目に表示し、第１の視覚特性は第２の視覚特性とは異なる。いくつかの実施形態では、コンピュータシステムがヘッドマウントデバイスであるとき、コンピュータシステムは、コンピュータシステムの第１のディスプレイデバイス（例えば、ユーザの第１の目に対応する（例えば、第１のディスプレイデバイスは、ユーザの第１の目に可視である））上に表示される立体視メディアアイテムの第１の表現の外観を、コンピュータシステムがコンピュータシステムの第２のディスプレイデバイス（例えば、ユーザの第２の目に対応する（例えば、第２のディスプレイデバイスは、ユーザの第２の目に可視である））上に表示される立体視メディアアイテムの表現の外観を変化させる方法とは異なるように変化させる。ユーザの右目（例えば、ユーザの第２の目）に表示される立体視メディアアイテムの第１の表現がどのように変更されるかとは異なるように、ユーザの左目に表示される立体視メディアアイテムの第１の表現の外観を変更することは、ユーザが、追加のコントロールを表示することなく、ユーザの両目に独立して表示されるものを制御することを可能にし、これは、ユーザインタフェースを混乱させることなく、追加のコントロールオプションを提供する。ユーザの右目（例えば、ユーザの第２の目）に表示される立体視メディアアイテムの第１の表現がどのように変更されるかとは異なるように、ユーザの左目に表示される立体視メディアアイテムの第１の表現の外観を変更することは、ユーザが極端な角度から立体視メディアアイテムを見たときにユーザが検出するウィンドウバイオレーション（例えば、立体視メディアアイテムのコンテンツがウィンドウの前で知覚される時点で、立体視メディアアイテムが背後に表示されるウィンドウの縁部によって立体視メディアアイテム内のオブジェクトが不明瞭にされるときに生じる視覚効果）の量を軽減するのに役立ち、その結果、ユーザの視聴体験が向上する。

【0303】

いくつかの実施形態では、視覚効果（例えば、衝突ぼかし層１１１２ｂ）は、視覚効果が立体視メディアアイテムの第１の表現の少なくとも第１の縁部（例えば、１１０８の境界）から立体視メディアアイテムの第１の表現の内部に向かって内側に延びるにつれて（例えば、図１１Ａを参照して上述したように）、複数の値を通じて（例えば、徐々に又は複数の離散的なステップを通じて）減少する視覚特性（例えば、密度及び／又は色（例えば、単色又は多色である色勾配））（例えば、透光性の量（例えば、視覚特性の背後に可視である物理的環境の表現の量））（例えば、視覚特性は、物理的環境の表現の第１の部分にオーバーレイされ、物理的環境の表現の第２の部分にオーバーレイされない）を有する。いくつかの実施形態では、視覚効果の第２の視覚特性（例えば、半透明性）は、立体視メディアアイテムの第１の表現の中心に向かう距離が減少するにつれて、複数の値にわたって増加する。ぼかし効果の視覚特性を減少させることは、ユーザが、２つ以上のカメラのキャプチャ領域の重複内にあるコンテンツを視聴する一方で、２つ以上のカメラのキャプチャ領域の重複内にないコンテンツを視聴しないことを支援し、これは、ユーザが立体視メディアアイテムを視聴している間に検出するウィンドウバイオレーション（例えば、立体視メディアアイテム内のオブジェクトが、立体視メディアアイテムのコンテンツがウィンドウの前で知覚される時点で立体視メディアアイテムが背後に表示されるウィンドウの縁部によって不明瞭にされるときに発生する視覚効果）の量を軽減するのを助け、その結果、ユーザの視聴体験が向上する。

【0304】

いくつかの実施形態では、立体視メディアの第１の表現（例えば、１１０８）は、立体視メディアアイテムの第１の表現の第１の縁部（例えば、１１０８の境界）における（及び任意選択で、立体視メディアアイテムの第１の表現の１つ以上の他の縁部における）コンテンツを含む。いくつかの実施形態では、視覚効果（例えば、衝突ぼかし層１１１２ｂ）は、（例えば、図１１Ａを参照して上述したように）立体視メディアアイテムの第１の表現の第１の縁部における（及び任意選択的に立体視メディアアイテムの第１の表現の１つ以上の他の縁部における）コンテンツのぼかしである。立体視メディアの第１の表現の第１の縁部においてコンテンツをぼかすことは、ユーザが極端な角度から立体視メディアアイテムを視聴している間にユーザが検出するウィンドウバイオレーション（例えば、立体視メディアアイテム内のオブジェクトが、立体視メディアアイテムが背後に表示されるウィンドウの縁部によって、立体視メディアアイテムのコンテンツがウィンドウの前で知覚される時点において不明瞭にされるときに発生する視覚効果）の量を軽減するのを助け、その結果、ユーザの視聴体験が向上する。

【0305】

いくつかの実施形態では、視覚効果は、立体視メディアアイテム（例えば、１１０８）の第１の表現の第１の縁部及び第２の縁部に表示される（例えば、同時に表示される）。いくつかの実施形態では、立体視メディアアイテムの第１の表現を表示している間に、コンピュータシステムは、ユーザの視点の第２の変化（例えば、７００の視点の変化）（例えば、ユーザの全身の位置決めの変化、ユーザの身体の第１の部分（例えば、ユーザの頭部）の位置決めの変化）（例えば、ユーザの側方移動、ユーザの左右移動、及び／又は水平面に沿ったユーザの移動）を検出する。いくつかの実施形態では、ユーザの視点の第２の変化は、立体視メディアアイテムの第１の表現の表示に対するユーザの視点の角度の変化を含む（例えば、立体視メディアアイテムの第１の表現の表示に対するユーザの視点の角度は、５、１０、１５、２５、３０、３５、４０、５５、又は６０度だけ変化する）。いくつかの実施形態では、ユーザの視点の第２の変化を検出したことに応じて、かつユーザの視点の第２の変化が第１の方向（例えば、左、右、上、及び／又は下）であるという判定に従って、ユーザの視点の第２の変化が第１の方向とは異なる第２の方向（例えば、左、右、上、及び／又は下）であるという判定に従って、コンピュータシステムは、（例えば、図１１Ｂ及び図１１Ｃを参照して上述したように）立体視メディアアイテムの第１の表現の少なくとも第２の縁部上の視覚効果（例えば、後方ぼかし層１１１２ａ）のサイズを増大させ（例えば、立体視メディアアイテムの表現の背後に表示されるぼかし領域のサイズが増大する）（例えば、立体視メディアアイテムの第１の表現の第１の縁部上の視覚効果のサイズを減少させる）（例えば、第２の縁部は、第１の方向とは反対の立体視メディアアイテムの第１の表現の側にある（例えば、第１の方向が右である場合、第２の縁部は、立体視メディアアイテムの左側にある））、コンピュータシステムは、（例えば、図１１Ｂ及び図１１Ｃを参照して上述したように）立体視メディアアイテムの第１の表現の少なくとも第１の縁部上の視覚効果のサイズを増大させる（例えば、立体視メディアアイテムの表現の背後に表示されるぼかし領域のサイズが増大する）（例えば、立体視メディアアイテムの第１の表現の第２の縁部上に表示される視覚効果のサイズを減少させる）（例えば、第１の縁部は、第２の方向とは反対の立体視メディアアイテムの第１の表現の側部にある（例えば、第２の方向が下向きである場合、第１の側部は、立体視メディアアイテムの第１の表現の上部にある））。いくつかの実施形態では、第１の縁部及び第２の縁部は、立体視メディアアイテムの第１の表現の反対側にあり、第１の方向は、第２の方向の反対である。いくつかの実施形態では、立体視メディアアイテムの第１の表現の第２の縁部上の視覚効果のサイズが変更されるとき、立体視メディアの第１の表現の第１の縁部上の視覚効果のサイズは変更されず、その逆も同様である。いくつかの実施形態では、第１の縁部及び第２の縁部は、第１の表現の反対側にある（例えば、左縁部及び右縁部）。ユーザの視点の変化を検出したことに応じて、立体視メディアアイテムの第１の表現の個別の縁部上の視覚効果のサイズを変更することは、ユーザが特定の角度から立体視メディアアイテムをいつ見るかをユーザが検出するウィンドウバイオレーション（例えば、立体視メディアアイテムのコンテンツがウィンドウの前で知覚される時点で、立体視メディアアイテムが背後に表示されるウィンドウの縁部によって立体視メディアアイテム内のオブジェクトが不明瞭にされるときに発生する視覚効果）の量を軽減し、その結果、ユーザの視聴体験が向上する。ユーザの視点の変化を検出したことに応じて、立体視メディアアイテムの第１の表現の個別の縁部上の視覚効果のサイズを変更することは、ユーザが、追加のコントロールを表示することなく視覚効果の表示を制御することを可能にし、これは、ユーザインタフェースを混乱させることなく追加のコントロールオプションを提供する。

【0306】

いくつかの実施形態では、ユーザインタフェース（例えば、１１０４）を表示することは、ぼかし領域（例えば、視覚効果１１１２の後方ぼかし領域）を表示することを含み、立体視メディアアイテムは、第１の複数の縁部（例えば、３つの縁部、４つの縁部、５つの縁部、６つの縁部、又は７つの縁部）を含む。いくつかの実施形態では、（例えば、１１０８に対応する）立体視メディアアイテムの第１の複数の縁部が第１のコンテンツを含むという判定に従って、ぼかし領域は、第１のコンテンツのぼかし表現を含み、第１のコンテンツのぼかし表現は、（例えば、図１１Ａを参照して上述したように）第１のコンテンツの外挿に基づき（例えば、第１のコンテンツのぼかし表現は、立体視メディアアイテムの複数の縁部にあるコンテンツの外挿を含む）（例えば、ぼかし表現は、立体視メディアアイテム内で可視ではないコンテンツを含む）、（例えば、１１０８に対応する）立体視メディアアイテムの第１の複数の縁部が（例えば、第１のコンテンツとは異なる）第２のコンテンツを含むという判定に従って、ぼかし領域は、（例えば、図１１Ａを参照して上述したように）第２のコンテンツのぼかし表現を含み、第２のコンテンツのぼかし表現は、第２のコンテンツの外挿に基づく（例えば、ぼかし領域は、第１のコンテンツの外挿を含まない）。いくつかの実施形態では、ぼかし領域に含まれるコンテンツは、コンピュータシステムがユーザの視点の変化を検出したことに応じて変化する（例えば、ぼかし領域に含まれるコンテンツは、コンピュータシステムの視点に基づいて動的に変化する）。いくつかの実施形態では、ぼかし領域は、立体視メディアアイテムの第１の表現の少なくとも第１の縁部から外側に延びる。

【0307】

いくつかの実施形態では、立体視メディアアイテムの第１の表現は、（例えば、図１１Ａを参照して上述したような）ビネット効果（例えば、立体視メディアアイテムの第１の表現の周囲における立体視メディアアイテムの第１の表現の輝度及び／又は彩度の低減（例えば、立体視メディアアイテムの第１の表現の周囲からの（例えば、立体視メディアアイテムの第１の表現の中心に向かう）距離が減少するにつれて、立体視メディアアイテムの第１の表現の輝度が増加する））で表示される（例えば、立体視メディアアイテムの第１の表現は、立体視メディアアイテムの第１の表現の中心で最も明るく、縁部で最も暗い）。いくつかの実施形態では、コンピュータシステムは、立体視メディアアイテムの第１の表現が最初に表示された後に、ビネット効果を適用する。いくつかの実施形態では、コンピュータシステムは、立体視メディアアイテムの第１の表現を最初に表示することの一部として、ビネット効果を適用する。

【0308】

いくつかの実施形態では、ユーザインタフェース（例えば、１１０４）を表示することは、仮想ポータル（例えば、１１０２）を表示することを含み、立体視メディアアイテム（例えば、１１０８）の第１の表現は、（例えば、図１１Ａを参照して上述したように）仮想ポータル内に表示される（例えば、仮想ポータルは、立体視メディアアイテムの第１の表現の周囲に表示される）。いくつかの実施形態では、仮想ポータルは、物理的環境の表現（例えば、光学又は仮想表現）の上にオーバーレイされる。いくつかの実施形態では、仮想ポータルは、三次元オブジェクトとして表示される（例えば、仮想ポータルは、深度を伴って表示される）。いくつかの実施形態では、コンピュータシステムは、ユーザが仮想ポータルのディスプレイの周りを移動するときにコンテンツがユーザに継続的に可視であるように、仮想ポータル内にコンテンツを表示する。いくつかの実施形態では、コンピュータシステムがヘッドマウントデバイスであるとき、コンピュータシステムは、ユーザが物理的環境を歩き回っていること、及び／又は（例えば、ユーザがコンピュータシステムを装着している間に）ユーザの頭部を回していることを検出したことに応じて、仮想ポータルの異なる透視図を表示する。仮想ポータル内に立体視メディアアイテムの表現を表示することは、立体視メディアアイテムの第１の表現に含まれるコンテンツ間の（例えば、ユーザによって体験されるような）相対的な深度の知覚を向上させ、その結果、ユーザの視聴体験が向上する。

【0309】

いくつかの実施形態では、立体視メディアアイテム（例えば、１１０８）の第１の表現は、前景部分及び背景部分を含む。いくつかの実施形態では、立体視メディアアイテムの第１の表現を表示している間に、コンピュータシステムは、（例えば、図１１Ａ、図１１Ｂ、及び図１１Ｃを参照して上述したように）ユーザの視点の第３の変化（例えば、７００の視点の変化）（例えば、ユーザの全身の位置決めの変化、ユーザの身体の第１の部分（例えば、ユーザの身体）の位置決めの変化）（例えば、ユーザの側方移動、ユーザの左右移動、及び／又は水平面に沿ったユーザの移動）を検出する。いくつかの実施形態では、ユーザの視点の第３の変化の検出に応じて、コンピュータシステムは、表示生成構成要素（例えば、７０２）を介して、ユーザの視点の第３の変化に基づいて、立体視メディアアイテムの第１の表現の前景部分を立体視メディアアイテムの第１の表現の背景部分に対して移動させて表示しする（例えば、図１１Ｂを参照して上述したように）（例えば、コンピュータシステムは、立体視メディアアイテムの第１の表現の前景部分及び背景部分に対して視差効果を表示する）（例えば、立体視メディアアイテムの第１の表現の前景部分は、立体視メディアアイテムの第１の表現の背景部分とは異なるようにシフトする（例えば、より速く移動する））（例えば、立体視メディアアイテムの第１の表現の前景部分内のオブジェクトは、ユーザの視点の変化に基づく第１の可変速度で移動し、立体視メディアアイテムの第１の表現の背景部分内のオブジェクトは、ユーザの視点の変化に基づく第２の可変速度で移動する）。立体視メディアアイテムの第１の表現の前景部分を立体視メディアアイテムの第１の表現の背景部分に対して移動させて表示することは、立体視メディアアイテムの第１の表現に関連付けられた深度データに関する視覚的フィードバックをユーザに提供し、これは、改善された視覚的フィードバックを提供する。

【0310】

いくつかの実施形態では、仮想ポータル（例えば、１１０２）を表示することは、仮想ポータル（例えば、１１０２）の第１の部分（例えば、１１１８）（例えば、仮想ポータルのウィンドウ（例えば、立体視メディアアイテムの第１の表現がウィンドウ内に位置する））（例えば、仮想ポータルの全体よりも少ない）を、ユーザの第１の視点から第１の距離だけ離れた物理的環境（例えば、１１０６）の第１の表現内の第１のロケーションに表示することを含み、立体視メディアアイテムの第１の表現を表示する（例えば、レンダリングする）ことは、立体視メディアアイテムの第１の表現（例えば、１１０８）を、ユーザの第１の視点から第２の距離だけ離れた物理的環境（例えば、７００の位置決め）の第１の表現内の第２のロケーションに表示することを含み、第２の距離は、第１の距離よりも大きい（例えば、仮想ポータルの第１の部分と立体視メディアアイテムの第１の表現との間にある量の立体視深度が存在する（例えば、コンピュータシステムは、立体視メディアアイテムの第１の表現が仮想ポータルの第１の部分の背後に位置決めされることをユーザに知覚させる別個の画像をユーザの２つの目に表示する））（例えば、表現は、仮想ポータルの第１の部分よりもユーザから遠い）。いくつかの実施形態では、コンピュータシステムは、ウィンドウとぼかし層との間に立体視メディアアイテムの第１の表現をレンダリングする。いくつかの実施形態では、コンピュータシステムは、第１のぼかしと第２のぼかしとの間で立体視メディアアイテムの第１の表現をレンダリングする。ポータルの第１の部分よりもユーザから更に離れて立体視メディアアイテムの表現を表示することは、コンピュータシステムが立体視メディアアイテムの第１の表現の上に様々な仮想オブジェクト（例えば、選択可能な仮想オブジェクト）を表示するときにユーザが体験し得るウィンドウバイオレーション（例えば、立体視メディアアイテムのコンテンツがウィンドウの前で知覚される時点で立体視メディアアイテムが背後に表示されるウィンドウの縁部によって立体視メディアアイテム内のオブジェクトが不明瞭にされるときに発生する視覚効果）の量を軽減し、これは、ユーザのための向上した視聴体験を提供する。

【0311】

いくつかの実施形態では、仮想ポータル（例えば、１１０２）は、ある量の厚さを有する三次元仮想オブジェクトであり、ユーザに表示される（例えば、可視である）厚さの量は、（例えば、図１１Ａに関連して上述したように）仮想ポータルのディスプレイに対するユーザの視点の角度に直接相関する（例えば、ユーザに可視である厚さの量は、仮想ポータルのディスプレイに対するユーザの視点の角度が増加すると増加する）。

【0312】

いくつかの実施形態では、立体視メディアアイテム（例えば、１１０８）の第１の表現を表示することは、立体視メディアアイテムの第１の表現の第１の縁部において（及び任意選択で、立体視メディアアイテムの第１の表現の１つ以上の他の縁部において）鏡面反射効果（例えば、１１２０）（例えば、仮想鏡面反射効果）（例えば、光の鏡のような反射）を表示することを含む。いくつかの実施形態では、鏡面反射効果は、立体視メディアアイテムの第１の表現の縁部のうちの２つ、３つ、又はそれ以上（例えば、全て）上に表示される。いくつかの実施形態では、鏡面反射効果は、立体視メディアアイテムの第１の表現の周囲に表示される。いくつかの実施形態では、鏡面反射効果の外観は、ユーザの視点の検出された変化に基づいて変化する。いくつかの実施形態では、コンピュータシステムは、物理的環境内の周囲照明が照明閾値を下回るという判定に従って、鏡面反射効果を表示することを中止する。いくつかの実施形態では、鏡面反射効果は静的である（例えば、鏡面反射効果の外観は、ユーザの視点が変化しても変化しない）。立体視メディアアイテムの表現の第１の縁部に鏡面反射効果を表示することは、仮想ポータルが物理的環境内の三次元オブジェクトであるという知覚を作成するのに役立ち、これは、ユーザが立体視メディアアイテムに関連付けられた深度データを視覚化するのを支援し、これは、ユーザのための向上した視聴体験を提供する。

【0313】

いくつかの実施形態では、立体視メディアアイテムの第１の表現（例えば、１１０８）は、物理的環境の第２の表現（例えば、１１０６）（例えば、光学表現又は仮想表現）内の第１のロケーション（例えば、仮想ロケーション）に表示され（例えば、第１のロケーションは、物理的環境内のコンピュータシステムの位置決めの正面にある物理的環境内のロケーションに対応する）、第１のロケーションは、ユーザの第１の視点（例えば、７００の視点）から第１の距離（例えば、仮想距離）だけ離れている（例えば、６インチ、１フィート、１．５フィート、５フィート、又は１０フィート）。いくつかの実施形態では、物理的環境の第２の表現内の第１のロケーションに立体視メディアアイテムの第１の表現を表示している間に、コンピュータシステムは、要求（例えば、コンピュータシステムと通信（例えば、有線通信及び／又は無線通信）しているハードウェアボタンのアクティブ化、エアジェスチャ（例えば、エアピンチ、エアスワイプ、及び／又はエアタップ）の（例えば、コンピュータシステムと通信している１つ以上のカメラを介した）検出）、及び／又は音声コマンド）（例えば、コンピュータシステムは、立体視メディアアイテムの第１の表現の表示のロケーションに対応する物理的環境内のロケーションにユーザが移動したことを検出する）を検出し、没入型外観を有する立体視メディアアイテムを表示する（例えば、図１１Ｄにおいて上述したように）（例えば、第１の人物ビュー）。いくつかの実施形態では、没入型外観で立体視メディアアイテムの第１の表現を表示する要求を検出したことに応じて、コンピュータシステムは、物理的環境の第２の表現内の第２のロケーションから立体視メディアアイテムの第１の表現を表示し、第２のロケーションは、ユーザの第１の視点（例えば、７００の視点）から第２の距離だけ離れており、第２の距離は、第１の距離未満であり（例えば、図１１Ｅを参照して上述したように）（例えば、コンピュータシステムは、立体視メディアアイテムの第１の表現の表示をユーザの視点に向かって移動させ、かつ／又はコンピュータシステムは、ユーザが立体視メディアアイテムの第１の表現の表示のより近くに移動したことを検出する）（例えば、コンピュータシステムがメディアアイテムの第１の表現を第１のロケーションから第２のロケーションに移動させている間に、コンピュータシステムは、立体視メディアアイテムの第１の表現の表示を維持する）、コンピュータシステムは、（例えば、図１１Ｅを参照して上述したように）物理的環境の第２の表現内の第１のロケーションと物理的環境の第２の表現内の第２のロケーションとの間の経路に平行な立体視メディアアイテムの第１の表現の平面に沿って、立体視メディアアイテムの第１の表現のサイズを増大させる（例えば、立体視メディアアイテムの第１の表現の表示は、立体視メディアアイテムの第１の表現のサイズが増大された後（例えば、立体視メディアアイテムの第１の表現が没入型外観で表示されている間）、ユーザの視野のより多くを占有する）（例えば、ｚ軸に沿った立体視メディアアイテムの第１の表現の厚さが増加される）。いくつかの実施形態では、没入型外観を有する立体視メディアアイテムを表示することは、立体視メディアアイテムの第１の表現に含まれるコンテンツの表現の異なる透視図を表示することを含み、異なる透視図は、環境内の共通点にある。いくつかの実施形態では、物理的環境の表現は、ユーザに可視である一方、立体視メディアアイテムの第１の表現は、没入型外観で表示される。いくつかの実施形態では、コンピュータシステムは、立体視メディアアイテムの第１の表現を、物理的環境の表現内の第１のロケーションから物理的環境の表現内の第２のロケーションに移動するものとして表示し、一方、コンピュータシステムは、立体視メディアアイテムの第１の表現のサイズを増大させて表示する。いくつかの実施形態では、コンピュータシステムは、コンピュータシステムが立体視メディアアイテムの第１の表現のサイズを増大させて表示する前又は後に、物理的環境の表現内の第１のロケーションから物理的環境の表現内の第２のロケーションに移動するように立体視メディアアイテムの第１の表現を表示する。いくつかの実施形態では、コンピュータシステムは、立体視メディアアイテムの第１の表現を非没入型外観で表示する要求を検出したことに応じて、立体視メディアアイテムの第１の表現を没入型外観で表示することを中止する。いくつかの実施形態では、コンピュータシステムがヘッドマウントデバイスであるとき、立体視メディアアイテムの外観は、立体視メディアアイテムが没入型外観で表示されている間のユーザの頭部の位置的配向に対応する。いくつかの実施形態では、コンピュータシステムがヘッドマウントデバイスであるとき、コンピュータシステムは、コンピュータシステムの第１のディスプレイデバイスの大部分（例えば、全体）上に立体視メディアアイテムを表示し、コンピュータシステムは、コンピュータシステムの第２のディスプレイデバイスの大部分（例えば、全体）上に立体視メディアアイテムを表示し、コンピュータシステムの第１のディスプレイデバイスは、ユーザの第１の目に対応し（例えば、第１のディスプレイデバイスは、ユーザの第１の目に可視である）、コンピュータシステムの第２のディスプレイデバイスは、ユーザの第２の目に対応する（例えば、第２のディスプレイデバイスは、ユーザの第２の目に可視である）。立体視メディアアイテムの第１の表現をユーザのより近くに表示し、立体視メディアアイテムの第１の表現のサイズを大きくすることは、コンピュータシステムの状態に関する視覚的フィードバックをユーザに提供し（例えば、コンピュータシステムは、没入型外観で立体視メディアアイテムの第１の表現を表示する要求を検出した）、これは、改善された視覚的フィードバックを提供する。

【0314】

いくつかの実施形態では、立体視メディアアイテム（例えば、１１０８）の第１の表現に含まれるコンテンツ（例えば、１１０８の木及び人物）は、空間メディアがキャプチャされたときにキャプチャされたオブジェクトのスケールに対して所定の関係を有する個別のスケールで表示される（例えば、立体視メディアアイテムの第１の表現に含まれるコンテンツは、立体視メディアアイテムがキャプチャされたときにオブジェクトが位置していた物理的環境に対するメディアアイテム内のオブジェクトのスケールと比較して、物理的環境の表現に対して１：１のスケールで表示される）（例えば、立体視メディアアイテムの第１の表現に含まれるコンテンツは、現実世界スケールで表示される）立体視メディアアイテムの第１の表現は、（例えば、図１１Ｅで上述したように）没入型外観で表示される。いくつかの実施形態では、コンピュータシステムは、没入型外観で立体視メディアアイテムの第１の表現を表示する要求をコンピュータシステムが検出する前に、フルスケール未満で立体視メディアアイテムの第１の表現に含まれるコンテンツを表示する（例えば、立体視メディアアイテムの第１の表現は、非没入型外観で表示される）。空間メディアがキャプチャされたときにキャプチャされたオブジェクトのスケールに対して所定の関係を有する個別のスケールで立体視メディアアイテムの第１の表現に含まれるコンテンツを表示することは、立体視メディアアイテムの第１の表現が没入型外観を有する間にユーザの視聴体験を向上させる、立体視メディアアイテムの第１の表現に含まれるコンテンツの相対的な現実世界サイズ及び位置決めの正確な表現をユーザに提供する。

【0315】

いくつかの実施形態では、没入型外観を有する立体視メディアアイテムの第１の表現（例えば、図１１Ｅ～図１１Ｆの１１０８）を表示する要求を検出する前に、立体視メディアアイテムの第１の表現を表示することは、非没入型外観を有する立体視メディアアイテムの第１の表現（例えば、図１１Ａ～図１１Ｄの１１０８）を表示することを含む（例えば、立体視メディアアイテムの第１の表現に含まれるコンテンツの外観は、コンピュータシステムの視点の変化に基づいて変化しない）。いくつかの実施形態では、（例えば、図１１Ｅを参照して上述したように）立体視メディアアイテムの第１の表現は、没入型外観で表示されたときに、ユーザの第２の視点の第１の角度範囲（例えば、ユーザの視点の周りの１８０、２７０、又は３６０度）を占有する（例えば、立体視メディアアイテムの第１の表現は、ユーザの第２の視点の第１の角度範囲を占有せず、（例えば、コンピュータシステムが没入型外観で第１の表現を表示する要求を検出する前に）立体視メディアアイテムの第１の表現は、非没入型外観で表示される）。いくつかの実施形態では、立体視メディアアイテムの第１の表現は、非没入型外観で表示されたときに、ユーザの第２の視点の第２の角度範囲（例えば、３０、４５、６０、１２０、又は１８０度）を占有し、第２の角度範囲は、（例えば、図１１Ｅを参照して上述したように）第１の角度範囲よりも小さい。立体視メディアアイテムの第１の表現が没入型外観で表示されている間に、ユーザの視点のより大きい角度範囲の周りに立体視メディアアイテムの第１の表現を表示することは、立体視メディアアイテムの第１の表現に含まれるコンテンツのビューを維持しながら、より大きい動きの範囲内で移動する能力をユーザに提供し、これは、ユーザのための向上した視聴体験を提供する。

【0316】

いくつかの実施形態では、立体視メディアアイテムは、第２の複数の縁部（例えば、３つの縁部、４つの縁部、５つの縁部、又は６つの縁部）を含む。いくつかの実施形態では、立体視メディアアイテムの第１の表現が没入型外観（例えば、図１１Ｅ及び図１１Ｆの１１０８）で表示されている間に、立体視メディアアイテム（例えば、１１０８によって表されるメディアアイテム）の第２の複数の縁部が第３のコンテンツを含むという判定に従って、コンピュータシステムは、立体視メディアアイテムの第１の表現の第１の縁部に第３のコンテンツの表現を表示し（例えば、少なくとも第３の縁部から外側に延びる）、第３のコンテンツの表現は、（例えば、図１１Ｅを参照して上述したように）第３のコンテンツの外挿に基づき（例えば、第３のコンテンツの表現は、立体視メディアアイテムの複数の縁部の各縁部において可視であるコンテンツの外挿を含む）（例えば、第３の表現は、立体視メディアアイテムにおいて可視でないコンテンツを含む）、立体視メディアアイテムの第２の複数の縁部が第４のコンテンツを含むという判定に従って、コンピュータシステムは、立体視メディアアイテムの第１の表現の第１の縁部に第４のコンテンツの表現を表示し、第４のコンテンツの表現は、（例えば、図１１Ｅを参照して上述したように）第４のコンテンツの外挿に基づく。いくつかの実施形態では、第３のコンテンツの外挿に基づく第３のコンテンツの表現はぼかされる。いくつかの実施形態では、第４のコンテンツの外挿に基づく第４のコンテンツの表現はぼかされる。いくつかの実施形態では、第３のコンテンツ／第４のコンテンツの表現は、ユーザの視点の変化の検出に応じて変化する。

【0317】

いくつかの実施形態では、コンピュータシステムは、非立体視メディアアイテム（例えば、複数の透視図からキャプチャされたコンテンツを含まないメディアアイテム）の表現を表示し、非立体視メディアアイテムは、（例えば、図１１Ａを参照して上述したように）視覚効果（例えば、衝突ぼかし１１１２ｂ）なしで表示される（例えば、非立体視メディアアイテムは、立体視メディアアイテムが表示される上述した視覚効果なしで表示される（例えば、非立体視メディアアイテムは、ぼかし効果が非立体視メディアアイテムの中央に向かって延びるにつれて強度が減少するぼかし効果で表示されず、非立体視メディアアイテムは、非立体視メディアアイテムに含まれるコンテンツの一部分を不明瞭にするぼかし効果で表示されず、非立体視メディアアイテムで表示されるぼかし効果の量は、コンピュータシステムの視点の変化に応じて変化せず、ぼかし効果が不明瞭にするコンテンツの部分は、コンピュータシステムの視点が変化することに応じて変化せず、非立体視メディアアイテムは、非立体視メディアアイテムに含まれるコンテンツの外挿に基づくぼかし領域で表示されず、非立体視メディアアイテムは、没入型外観で表示されず、ユーザの両目は、コンピュータシステムの視点の変化に応じて非立体視メディアアイテムの外観の同じ変化を見る）。いくつかの実施形態では、非立体視メディアアイテムの表現は、立体視メディアアイテムの第１の表現と同時に表示される。いくつかの実施形態では、コンピュータシステムは、非立体視メディアアイテムを表示することに応じて、立体視メディアアイテムの第１の表現を表示することを中止する。いくつかの実施形態において、上述した視覚効果のいくつかの組み合わせは、立体視メディアアイテムに適用され、非立体視メディアアイテムには適用されない。いくつかの実施形態では、上記で説明した視覚効果のいくつかの組み合わせが、立体視メディアアイテムと非立体視メディアアイテムの両方に適用される。

【0318】

いくつかの実施形態では、コンピュータシステムは、立体視メディアアイテムの第１の表現とは異なる第２の立体視メディアアイテムの第２の表現を表示する（例えば、第２の立体視メディアアイテムの第２の表現は、立体視メディアアイテムの第１の表現に含まれるコンテンツとは異なるコンテンツを含む）、第２の立体視メディアアイテムの第２の表現は、第２の視覚効果（例えば、衝突ぼけ１１１２ｂ）を用いて表示され（例えば、第２の立体視メディアアイテムの第２の表現は、立体視メディアアイテムが有する上記の視覚効果を用いて表示される）（例えば、第２の立体視メディアアイテムの第２の表現は、ぼかし効果が第２の立体視メディアアイテムの第２の表現の中央に向かって延びるにつれて強度が減少するぼかし効果を伴って表示される、第２の立体視メディアアイテムの第２の表現は、第２の立体視メディアアイテムの第２の表現に含まれるコンテンツの一部を不明瞭にするぼかし効果を伴って表示され、第２の立体視メディアアイテムの第２の表現内に表示されるぼかし効果の量は、コンピュータシステムの視点が変化するにつれて変化し、ぼかし効果が不明瞭にする第２の立体視メディアアイテムの第２の表現内のコンテンツの部分は、コンピュータシステムの視点が変化することに応じて変化し、第２の立体視メディアアイテムの第２の表現は、第２の立体視メディアアイテムの第２の表現に含まれるコンテンツの外挿に基づくぼかし領域とともに表示され、第２の立体視メディアアイテムの第２の表現は、没入型外観で表示されることができ、ユーザの目は、コンピュータシステムの視点が変化することに応じて、第２の立体視メディアアイテムの第２の表現の外観に対する異なる変化を見る）、第２の視覚効果は、第２の立体視メディアアイテムの第２の表現の少なくとも第１の部分を不明瞭にし、第２の立体視メディアアイテムの第２の表現の少なくとも第１の縁部から第２の立体視メディアアイテムの第２の表現の内部（例えば、図１１Ａを参照して上述したように）（例えば、第２の立体視メディアアイテムの第２の表現の中心）（例えば、第１のエッジの方向に対して垂直である第２の立体視メディアアイテムの第２の表現の中心に向かって内側に延びる方向に）に向かって内側に延在する。いくつかの実施形態では、コンピュータシステムは、第２の立体視メディアアイテムの第２の表現を表示することの一部として、立体視メディアアイテムの第１の表現を表示することを中止する。いくつかの実施形態では、コンピュータシステムは、立体視メディアアイテムの第１の表現と第２の立体視メディアアイテムの第２の表現とを同時に表示する。

【0319】

いくつかの実施形態では、方法８００、９００、１０００、及び１１００の態様／動作は、これらの方法の間で交換、置換、及び／又は追加され得る。例えば、方法９００で説明されるズーム動作は、任意選択的に、増加及び／又は減少したズームレベルでメディアアイテムの表現を表示するために使用される。簡潔にするために、それらの詳細はここでは繰り返さない。

【0320】

上記は、説明を目的として、特定の実施形態を参照して記述されている。しかしながら、上記の例示的な論考は、網羅的であること、又は開示される厳密な形態に本発明を限定することを意図するものではない。上記の教示を考慮して、多くの修正及び変形が可能である。本発明の原理及びその実際的な応用を最良の形で説明し、それによって他の当業者が、想到される特定の用途に適した様々な変更で本発明及び様々な記載された実施形態を最良の形で使用することを有効化するために、これらの実施形態を選択し記載した。

【0321】

上述したように、本技術の一態様は、ユーザのＸＲ体験を改善するために、様々なソースから入手可能なデータを収集及び使用することである。本開示は、いくつかの場合には、この収集されたデータが、特定の人を一意に識別する個人情報データ、又は特定の人に連絡する若しくはその所在を突き止めるために使用できる個人情報データを含み得ることを考察する。そのような個人情報データとしては、人口統計データ、ロケーションベースのデータ、電話番号、電子メールアドレス、ツイッターＩＤ、自宅の住所、ユーザの健康若しくはフィットネスのレベルに関するデータ若しくは記録（例えば、バイタルサイン測定値、投薬情報、運動情報）、生年月日、又は任意の他の識別情報若しくは個人情報を挙げることができる。

【0322】

本開示は、本技術におけるそのような個人情報データの使用がユーザの利益になる使用であり得る点を認識するものである。例えば、個人情報データは、ユーザのＸＲ体験を向上させるために使用することができる。更に、ユーザに利益をもたらす個人情報データに関する他の使用も本開示によって意図されている。例えば、健康データ及びフィットネスデータは、ユーザの全般的なウェルネスについての洞察を提供するために使用することができ、又は、ウェルネスの目標を追求する技術を使用している個人への、積極的なフィードバックとして使用することもできる。

【0323】

本開示は、そのような個人情報データの収集、分析、開示、送信、記憶、又は他の使用に関与するエンティティが、確固たるプライバシーポリシー及び／又はプライバシー慣行を遵守するものとなることを想到する。具体的には、そのようなエンティティは、個人情報データを秘密として厳重に保守するための、業界又は政府の要件を満たしているか又は上回るものとして一般に認識されている、プライバシーのポリシー及び慣行を実施し、一貫して使用するべきである。そのようなポリシーは、ユーザによって容易にアクセス可能とするべきであり、データの収集及び／又は使用が変更されるにつれて更新されるべきである。ユーザからの個人情報は、そのエンティティの合法的かつ正当な使用のために収集されるべきであり、それらの合法的使用を除いては、共有又は販売されるべきではない。更には、そのような収集／共有は、ユーザに告知して同意を得た後に実施されるべきである。その上、そのようなエンティティは、そのような個人情報データへのアクセスを保護及び安全化し、個人情報データへのアクセス権を有する他者が、それらのプライバシーポリシー及び手順を忠実に守ることを保証するための、あらゆる必要な措置を講じることを考慮するべきである。更に、そのようなエンティティは、広く受け入れられているプライバシーポリシー及び慣行に対する自身の遵守を証明するために、サードパーティによる評価を自らが受けることができる。更には、ポリシー及び慣行は、収集及び／又はアクセスされる具体的な個人情報データのタイプに適合されるべきであり、また、管轄権固有の考慮事項を含めた、適用可能な法令及び規格に適合されるべきである。例えば、アメリカ合衆国では、特定の健康データの収集又はそれへのアクセスは、医療保険の相互運用性と説明責任に関する法律（ＨＩＰＡＡ）などの、連邦法及び／又は州法に準拠し得る。その一方で、他国における健康データは、他の規制及びポリシーの対象となり得るものであり、それに従って対処されるべきである。それゆえ、各国において、異なる個人データのタイプに関して異なるプライバシー慣行が保たれるべきである。

【0324】

前述のことがらにも関わらず、本開示はまた、個人情報データの使用又は個人情報データへのアクセスを、ユーザが選択的に阻止する実施形態も想到する。すなわち、本開示は、そのような個人情報データへのアクセスを防止又は阻止するために、ハードウェア要素及び／又はソフトウェア要素が提供され得ることを意図している。例えば、ＸＲ体験の場合において、本技術は、ユーザが、サービスの登録中又はその後のいつでも、個人情報データの収集への参加の「オプトイン」又は「オプトアウト」を選択できるように構成され得る。別の例では、ユーザは、サービスのカスタマイズのためにデータを提供しないことを選択することができる。更に別の実施例では、ユーザは、データが維持される時間長を制限するか、又はカスタマイズされたサービスの展開を完全に禁止するかを選択することができる。「オプトイン」及び「オプトアウト」のオプションを提供することに加えて、本開示は、個人情報のアクセス又は使用に関する通知を提供することを意図している。例えば、ユーザの個人情報データにアクセスすることとなるアプリのダウンロード時にユーザに通知され、その後、個人情報データがアプリによってアクセスされる直前に再びユーザに注意してもよい。

【0325】

更には、本開示の意図は、個人情報データを、非意図的若しくは許可のないアクセス又は使用の危険性を最小限に抑える方法で、管理及び処理するべきであるという点である。データの収集を制限し、データがもはや必要とされなくなると削除することにより、リスクを最小化することができる。加えて、特定の健康関連アプリケーションにおいて適用可能な場合、ユーザのプライバシーを保護するために、データの匿名化を使用することができる。非特定化は、適切な場合には、特定の識別子（例えば、生年月日など）を除去すること、記憶されたデータの量又は特異性を制御すること（例えば、ロケーションデータを住所レベルよりも都市レベルで収集すること）、データがどのように記憶されるかを制御すること（例えば、データをユーザ全体にわたって集約すること）及び／又は他の方法によって、容易にすることができる。

【0326】

それゆえ、本開示は、１つ以上の様々な開示された実施形態を実施するための、個人情報データの使用を広範に網羅するものであるが、本開示はまた、そのような個人情報データにアクセスすることを必要とせずに、それらの様々な実施形態を実施することも可能であることを想到する。すなわち、本技術の様々な実施形態は、そのような個人情報データの全て又は一部が欠如することにより、動作不可能にされるものではない。例えば、ユーザに関連付けられたデバイスによって要求されているコンテンツなどの非個人情報データ若しくは必要最小量の個人情報、サービスに利用可能な他の非個人情報、又は公的に入手可能な情報に基づき嗜好を推測することによって、ＸＲ体験を生成できる。

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7A】

【図7B】

【図7C】

【図7D】

【図7E】

【図7F】

【図7G】

【図7H】

【図7I】

【図7J】

【図7K】

【図7L】

【図7M】

【図7N】

【図8】

【図9】

【図10】

【図11A】

【図11B】

【図11C】

【図11D】

【図11E】

【図11F】

【図12】

【手続補正書】

【提出日】2024-03-18

【手続補正1】

【補正対象書類名】特許請求の範囲

【補正対象項目名】全文

【補正方法】変更

【補正の内容】

【特許請求の範囲】

【請求項1】

方法であって、
表示生成構成要素と通信しているコンピュータシステムにおいて、
前記表示生成構成要素を介して、ユーザインタフェースであって、
立体視メディアアイテムの第１の表現であって、前記立体視メディアアイテムの前記第１の表現は、少なくとも第１の縁部を含む、立体視メディアアイテムの第１の表現と、
視覚効果であって、前記視覚効果は、前記立体視メディアアイテムの少なくとも第１の部分を不明瞭にし、前記立体視メディアアイテムの前記第１の表現の少なくとも前記第１の縁部から前記立体視メディアアイテムの前記第１の表現の内部に向かって内側に延びる、視覚効果と、を含む、ユーザインタフェースを表示することを含む、方法。

【請求項2】

前記立体視メディアアイテムは、カメラのセットからキャプチャされ、前記カメラのセットのうちの第１のカメラは、物理的環境の第１の透視図をキャプチャし、前記カメラのセットのうちの第２のカメラは、前記物理的環境の第２の透視図をキャプチャし、前記第２の透視図は、前記第１の透視図とは異なり、前記立体視メディアアイテムの前記第１の表現を表示することは、
前記表示生成構成要素を介して、前記物理的環境の前記第１の透視図をユーザの第２の目ではなく前記ユーザの第１の目に表示することと、
前記表示生成構成要素を介して、前記第２の透視図を前記ユーザの前記第１の目ではなく前記ユーザの前記第２の目に表示することと、を含む、請求項１に記載の方法。

【請求項3】

前記立体視メディアアイテムの前記第１の表現を表示している間に、ユーザの視点の第１の変化を検出することと、
前記ユーザの前記視点の前記第１の変化を検出したことに応じて、前記ユーザの前記視点の前記第１の変化に基づいて、前記立体視メディアアイテムの前記第１の表現の外観を変更することと、
を更に含む、請求項１に記載の方法。

【請求項4】

前記立体視メディアアイテムの前記第１の表現の前記外観を変更する前に、前記視覚効果は、前記立体視メディアアイテムの前記第１の表現の前記第１の部分を不明瞭にし、
前記立体視メディアアイテムの前記第１の表現の前記外観を変更することは、前記視覚効果が、前記第１の部分とは異なる前記立体視メディアアイテムの前記第１の表現の第２の部分を不明瞭にするように、前記視覚効果を修正すること、
を含む、請求項３に記載の方法。

【請求項5】

前記立体視メディアアイテムの前記第１の表現の前記外観を変更することは、
第１の方式で、ユーザの右目ではなく前記ユーザの左目に表示される前記立体視メディアアイテムの前記第１の表現の前記外観を変更することと、
前記ユーザの前記左目ではなく前記ユーザの前記右目に表示される前記立体視メディアアイテムの前記第１の表現の前記外観を、第２の方式であって、前記第２の方式は、前記第１の方式とは異なる、第２の方式で変更することと、を含む、請求項３に記載の方法。

【請求項6】

前記視覚効果は、前記視覚効果が前記立体視メディアアイテムの前記第１の表現の少なくとも前記第１の縁部から前記立体視メディアアイテムの前記第１の表現の前記内部に向かって内側に延びるにつれて、複数の値にわたって減少する視覚特性を有する、請求項１に記載の方法。

【請求項7】

前記立体視メディアアイテムの前記第１の表現は、前記立体視メディアアイテムの前記第１の表現の前記第１の縁部におけるコンテンツを含み、前記視覚効果は、前記立体視メディアアイテムの前記第１の表現の前記第１の縁部における前記コンテンツのぼかしである、請求項６に記載の方法。

【請求項8】

前記視覚効果は、前記立体視メディアアイテムの前記第１の表現の前記第１の縁部及び第２の縁部上に表示され、前記方法は、
前記立体視メディアアイテムの前記第１の表現を表示している間に、ユーザの前記視点の第２の変化であって、前記ユーザの前記視点の前記第２の変化は、前記立体視メディアアイテムの前記第１の表現の前記表示に対する前記ユーザの前記視点の角度の変化を含む、ユーザの前記視点の第２の変化を検出することと、
前記ユーザの前記視点の前記第２の変化を検出したことに応じて、
前記ユーザの前記視点の前記第２の変化が第１の方向であるという判定に従って、前記立体視メディアアイテムの前記第１の表現の少なくとも前記第２の縁部上の前記視覚効果のサイズを増大させ、
前記ユーザの前記視点の前記第２の変化が前記第１の方向とは異なる第２の方向であるという判定に従って、前記立体視メディアアイテムの前記第１の表現の少なくとも前記第１の縁部上の前記視覚効果の前記サイズを増大させることと、を更に含む、請求項３に記載の方法。

【請求項9】

前記ユーザインタフェースを表示することは、ぼかし領域を表示することを含み、前記立体視メディアアイテムは、第１の複数の縁部を含み、
前記立体視メディアアイテムの前記第１の複数の縁部が第１のコンテンツを含むという判定に従って、前記ぼかし領域は、前記第１のコンテンツのぼかし表現を含み、前記第１のコンテンツの前記ぼかし表現は、前記第１のコンテンツの外挿に基づき、
前記立体視メディアアイテムの前記第１の複数の縁部が第２のコンテンツを含むという判定に従って、前記ぼかし領域は、前記第２のコンテンツのぼかし表現を含み、前記第２のコンテンツの前記ぼかし表現は、前記第２のコンテンツの外挿に基づく、請求項１に記載の方法。

【請求項10】

前記立体視メディアアイテムの前記第１の表現は、ビネット効果を伴って表示される、請求項１に記載の方法。

【請求項11】

前記ユーザインタフェースを表示することは、仮想ポータルを表示することを含み、前記立体視メディアアイテムの前記第１の表現は、前記仮想ポータル内に表示される、請求項１に記載の方法。

【請求項12】

前記立体視メディアアイテムの前記第１の表現は、前景部分及び背景部分を含み、前記方法は、
前記立体視メディアアイテムの前記第１の表現を表示している間に、ユーザの前記視点の第３の変化を検出することと、
前記ユーザの前記視点の前記第３の変化を検出したことに応じて、前記表示生成構成要素を介して、前記ユーザの前記視点の前記第３の変化に基づいて、前記立体視メディアアイテムの前記第１の表現の前記前景部分を、前記立体視メディアアイテムの前記第１の表現の前記背景部分に対して移動させて表示することと、を更に含む、請求項８に記載の方法。

【請求項13】

前記仮想ポータルを表示することは、ユーザの第１の視点から第１の距離だけ離れた物理的環境の第１の表現内の第１のロケーションに前記仮想ポータルの第１の部分を表示することを含み、前記立体視メディアアイテムの前記第１の表現を表示することは、前記ユーザの前記第１の視点から第２の距離だけ離れた前記物理的環境の前記第１の表現内の第２のロケーションに前記立体視メディアアイテムの前記第１の表現を表示することを含み、前記第２の距離は、前記第１の距離よりも大きい、請求項１１に記載の方法。

【請求項14】

前記仮想ポータルは、ある量の厚さを有する三次元仮想オブジェクトであり、ユーザに表示される前記厚さの量は、前記仮想ポータルのディスプレイに対する前記ユーザの視点の角度に直接相関する、請求項１１に記載の方法。

【請求項15】

前記立体視メディアアイテムの前記第１の表現を表示することは、前記立体視メディアアイテムの前記第１の表現の前記第１の縁部において鏡面反射効果を表示することを含む、請求項１に記載の方法。

【請求項16】

前記立体視メディアアイテムの前記第１の表現は、前記物理的環境の第２の表現内の第１のロケーションに表示され、前記第１のロケーションは、ユーザの第１の視点から第１の距離だけ離れており、前記方法は、
前記物理的環境の前記第２の表現内の前記第１のロケーションに前記立体視メディアアイテムの前記第１の表現を表示している間に、没入型外観で前記立体視メディアアイテムを表示する要求を検出することと、
前記没入型外観で前記立体視メディアアイテムの前記第１の表現を表示する前記要求を検出したことに応じて、
前記物理的環境の前記第２の表現内の第２のロケーションであって、前記第２のロケーションは、前記ユーザの前記第１の視点から第２の距離だけ離れており、前記第２の距離は、前記第１の距離よりも短い、第２のロケーションから、前記立体視メディアアイテムの前記第１の表現を表示し、
前記物理的環境の前記第２の表現内の前記第１のロケーションと前記物理的環境の前記第２の表現内の前記第２のロケーションとの間の経路に平行である前記立体視メディアアイテムの前記第１の表現の平面に沿って前記立体視メディアアイテムの前記第１の表現のサイズを増大させることと、を更に含む、請求項２に記載の方法。

【請求項17】

前記立体視メディアアイテムの前記第１の表現に含まれるコンテンツは、空間メディアがキャプチャされたときにキャプチャされたオブジェクトのスケールに対して所定の関係を有する個別のスケールで表示され、前記立体視メディアアイテムの前記第１の表現は、前記没入型外観で表示される、請求項１６に記載の方法。

【請求項18】

前記没入型外観を有する前記立体視メディアアイテムの前記第１の表現を表示する前記要求を検出する前に、前記立体視メディアアイテムの前記第１の表現を表示することは、非没入型外観を有する前記立体視メディアアイテムの前記第１の表現を表示することを含み、
前記立体視メディアアイテムの前記第１の表現は、前記没入型外観で表示されたときに、ユーザの第２の視点の第１の角度範囲を占有し、
前記立体視メディアアイテムの前記第１の表現は、前記非没入型外観で表示されたときに、前記ユーザの前記第２の視点の第２の角度範囲であって、前記第２の角度範囲は、前記第１の角度範囲よりも小さい、第２の角度範囲を占有する、請求項１６に記載の方法。

【請求項19】

前記立体視メディアアイテムは、第２の複数の縁部を含み、前記方法は、
前記立体視メディアアイテムの前記第１の表現が前記没入型外観で表示されている間に、
前記立体視メディアアイテムの前記第２の複数の縁部が第３のコンテンツを含むという判定に従って、前記立体視メディアアイテムの前記第１の表現の前記第１の縁部において、前記第３のコンテンツの表現であって、前記第３のコンテンツの前記表現は、前記第３のコンテンツの外挿に基づく、前記第３のコンテンツの表現を表示することと、
前記立体視メディアアイテムの前記第２の複数の縁部が第４のコンテンツを含むという判定に従って、前記立体視メディアアイテムの前記第１の表現の前記第１の縁部において、前記第４のコンテンツの表現であって、前記第４のコンテンツの前記表現は、前記第４のコンテンツの外挿に基づく、前記第４のコンテンツの表現を表示することと、を更に含む、請求項１６に記載の方法。

【請求項20】

非立体視メディアアイテムであって、前記非立体視メディアアイテムは、前記視覚効果なしに表示される、非立体視メディアアイテムの表現を表示すること、
を更に含む、請求項１に記載の方法。

【請求項21】

前記立体視メディアアイテムの第１の表現とは異なる第２の立体視メディアアイテムの第２の表現であって、前記第２の立体視メディアアイテムの前記第２の表現は、第２の視覚効果とともに表示され、前記第２の視覚効果は、前記第２の立体視メディアアイテムの前記第２の表現の少なくとも第１の部分を不明瞭にし、前記第２の立体視メディアアイテムの前記第２の表現の少なくとも第１の縁部から前記第２の立体視メディアアイテムの前記第２の表現の内部に向かって内側に延びる、第２の立体視メディアアイテムの第２の表現を表示すること、
を更に含む、請求項１に記載の方法。

【請求項22】

コンピュータに請求項１～２１のいずれか一項に記載の方法を実行させるコンピュータプログラム。

【請求項23】

コンピュータシステムであって、
請求項２２に記載のコンピュータプログラムを格納したメモリと、
前記メモリに格納された前記コンピュータプログラムを実行可能な１以上のプロセッサと
を備え、
前記コンピュータシステムは、表示生成構成要素と通信するように構成される、コンピュータシステム。

【請求項24】

表示生成構成要素と通信するように構成されたコンピュータシステムであって、
請求項１～２１のいずれか一項に記載の方法を実行するための手段を備える、コンピュータシステム。

【手続補正書】

【提出日】2024-09-19

【手続補正1】

【補正対象書類名】明細書

【補正対象項目名】０１７３

【補正方法】変更

【補正の内容】

【0173】

図８は、いくつかの実施形態による、メディアアイテム及びユーザインタフェースと相互作用するための例示的な方法８００のフロー図である。いくつかの実施形態では、方法８００は、表示生成構成要素（例えば、７０２）（例えば、ディスプレイコントローラ、タッチ感知ディスプレイシステム、ディスプレイ（例えば、統合及び／又は接続された）、３Ｄディスプレイ、透明ディスプレイ、プロジェクタ、及び／又はヘッドアップディスプレイ）及び１つ以上の入力デバイス（例えば、７１５）（例えば、タッチ感知面（例えば、タッチ感知ディスプレイ））と通信するコンピュータシステム（例えば、７００）（例えば、図１のコンピュータシステム１０１）（例えば、スマートフォン、スマートウォッチ、タブレット、及び／又はウェアラブルデバイス）、マウス、キーボード、リモートコントロール、視覚入力デバイス（例えば、カメラ）、オーディオ入力デバイス（例えば、マイクロフォン）、及び／又はバイオメトリックセンサ（例えば、指紋センサ、顔識別センサ、及び／又は虹彩識別センサ））で実行される。いくつかの実施形態では、方法８００は、非一時的（又は一時的）コンピュータ可読記憶媒体に記憶され、コンピュータシステム１０１の１つ以上のプロセッサ２０２（例えば、図１のコントロール１１０）などのコンピュータシステムの１つ以上のプロセッサによって実行される命令によって統御される。方法８００のいくつかの動作は、任意選択的に、組み合わされ、かつ／又はいくつかの動作の順序は、任意選択的に、変更される。

【手続補正2】

【補正対象書類名】明細書

【補正対象項目名】０２３０

【補正方法】変更

【補正の内容】

【0230】

いくつかの実施形態では、コンピュータシステムは、１つ以上の入力デバイスを介して、メディアライブラリユーザインタフェース（例えば、７０８）内の第１のポジションに対応するユーザ視線（例えば、７１４）を検出する（例えば、第２の時点の後の第６の時点で）（例えば、第３の方式で第１のメディアアイテムの表現を表示した後又は表示している間に）（例えば、ユーザがメディアライブラリユーザインタフェース内の第１のポジション（例えば、第１のメディアアイテムの表現に対応するメディアライブラリユーザインタフェース内の第１のポジション）を注視していることを検出及び／又は判定する）。メディアライブラリユーザインタフェース内の第１のポジションに対応するユーザ視線を検出し続けている間に（例えば、第６の時点の後の第７の時点で）、コンピュータシステムは、１つ以上の入力デバイスを介して、第１のメディアアイテム（例えば、７１０Ｆ）の選択に対応する選択ジェスチャ（例えば、７１８）（例えば、エアジェスチャ）（例えば、ユーザの手、頭部、及び／又は身体の移動）（いくつかの実施形態では、１つ以上の非ジェスチャ入力）（例えば、ユーザの視線が第１のメディアアイテムに向けられている及び／又はその上に維持されている間の片手ピンチジェスチャ及び／又は両手ピンチ解除ジェスチャ）を検出する。メディアライブラリユーザインタフェース内の第１のポジションに対応するユーザ視線を検出し続けている間に第１のメディアアイテムの選択に対応する選択ジェスチャを検出したことに応じて、選択ジェスチャが第１のタイプの選択ジェスチャ（例えば、エアジェスチャ）（例えば、片手ピンチジェスチャ、片手ダブルピンチジェスチャ、両手ピンチジェスチャ、両手ピンチ解除ジェスチャ、部分的に完了した片手ピンチジェスチャ、及び／又は完了した片手ピンチジェスチャ）に対応するという判定に従って、コンピュータシステムは、表示生成構成要素を介して、第９の方式で（例えば、視覚特性の第９のセットを用いて）第１のメディアアイテムを表示し（例えば、中間選択状態で（例えば、メディアライブラリユーザインタフェースから選択されたメディアユーザインタフェースに遷移させる遷移状態で）第１のメディアアイテムを表示する）（例えば、選択されたメディアユーザインタフェースに表示された第１のメディアアイテムのサイズよりも小さく、メディアライブラリユーザインタフェース内の第１のメディアアイテムの表現のサイズよりも大きいサイズで第１のメディアアイテムを表示する）、選択ジェスチャが、第１のタイプの選択ジェスチャとは異なる第２のタイプの選択ジェスチャ（例えば、片手ピンチジェスチャ、片手ダブルピンチジェスチャ、両手ピンチジェスチャ、両手ピンチ解除ジェスチャ、部分的に完了した片手ピンチジェスチャ、及び／又は完了した片手ピンチジェスチャ）に対応するという判定に従って、コンピュータシステムは、表示生成構成要素を介して、第９の方式とは異なる第１０の方式で（例えば、視覚特性の第９のセットとは異なる視覚特性の第１０のセットを用いて）（例えば、第１のメディアアイテムのユーザ選択を示すメディアライブラリユーザインタフェースとは異なる選択されたメディアユーザインタフェースにおいて）第１のメディアアイテムを表示する、いくつかの実施形態では、第９の方式で第１のメディアアイテムを表示することは、遷移状態で第１のメディアアイテムを表示することを含み、第１０の方式で第１のメディアアイテムを表示することは、選択状態で第１のメディアアイテムを表示することを含む。いくつかの実施形態では、第９の方式で第１のメディアアイテムを表示することは、メディアライブラリユーザインタフェース内の第１のメディアアイテムの表現のサイズよりも大きい第１のサイズで第１のメディアアイテムを表示することを含み、第１０の方式で第１のメディアアイテムを表示することは、（例えば、図７Ｆを参照して説明されるように）第１のサイズよりも大きい第２のサイズで第１のメディアアイテムを表示することを含む。第１のメディアアイテムの選択に対応する選択ジェスチャを検出したことに応じて、第９の方式及び／又は第１０の方式で第１のメディアアイテムを表示することは、システムの状態（例えば、システムが第１のメディアアイテムの選択に対応する選択ジェスチャを検出したこと）に関する視覚的フィードバックをユーザに提供し、これは、改善された視覚的フィードバックを提供する。

【手続補正3】

【補正対象書類名】明細書

【補正対象項目名】０２３２

【補正方法】変更

【補正の内容】

【0232】

図９は、いくつかの実施形態による、メディアアイテム及びユーザインタフェースと相互作用するための例示的な方法９００のフロー図である。いくつかの実施形態では、方法１０００は、表示生成構成要素（例えば、７０２）（例えば、ディスプレイコントローラ、タッチ感知ディスプレイシステム、ディスプレイ（例えば、統合及び／又は接続された）、３Ｄディスプレイ、透明ディスプレイ、プロジェクタ、及び／又はヘッドアップディスプレイ）及び１つ以上の入力デバイス（例えば、７１５）（例えば、タッチ感知面（例えば、タッチ感知ディスプレイ））と通信するコンピュータシステム（例えば、７００）（例えば、図１のコンピュータシステム１０１）（例えば、スマートフォン、スマートウォッチ、タブレット、及び／又はウェアラブルデバイス）、マウス、キーボード、リモートコントロール、視覚入力デバイス（例えば、カメラ）、オーディオ入力デバイス（例えば、マイクロフォン）、及び／又はバイオメトリックセンサ（例えば、指紋センサ、顔識別センサ、及び／又は虹彩識別センサ））で実行される。いくつかの実施形態では、方法１０００は、非一時的（又は一時的）コンピュータ可読記憶媒体に記憶され、コンピュータシステム１０１の１つ以上のプロセッサ２０２（例えば、図１のコントロール１１０）などのコンピュータシステムの１つ以上のプロセッサによって実行される命令によって統御される。方法９００のいくつかの動作は、任意選択的に、組み合わされ、かつ／又はいくつかの動作の順序は、任意選択的に、変更される。

【手続補正4】

【補正対象書類名】明細書

【補正対象項目名】０２４４

【補正方法】変更

【補正の内容】

【0244】

図１０は、いくつかの実施形態による、メディアアイテム及びユーザインタフェースと相互作用するための例示的な方法１０００のフロー図である。いくつかの実施形態では、方法１０００は、表示生成構成要素（例えば、７０２）（例えば、ディスプレイコントローラ、タッチ感知ディスプレイシステム、ディスプレイ（例えば、統合及び／又は接続された）、３Ｄディスプレイ、透明ディスプレイ、プロジェクタ、及び／又はヘッドアップディスプレイ）及び１つ以上の入力デバイス（例えば、７１５）（例えば、タッチ感知面（例えば、タッチ感知ディスプレイ））と通信するコンピュータシステム（例えば、７００）（例えば、図１のコンピュータシステム１０１）、マウス、キーボード、リモートコントロール、視覚入力デバイス（例えば、カメラ）、オーディオ入力デバイス（例えば、マイクロフォン）、及び／又はバイオメトリックセンサ（例えば、指紋センサ、顔識別センサ、及び／又は虹彩識別センサ））で実行される。いくつかの実施形態では、方法１０００は、非一時的（又は一時的）コンピュータ可読記憶媒体に記憶され、コンピュータシステム１０１の１つ以上のプロセッサ２０２（例えば、図１のコントロール１１０）などのコンピュータシステムの１つ以上のプロセッサによって実行される命令によって統御される。方法１０００のいくつかの動作は、任意選択的に、組み合わされ、かつ／又はいくつかの動作の順序は、任意選択的に、変更される。

【手続補正5】

【補正対象書類名】明細書

【補正対象項目名】０２８７

【補正方法】変更

【補正の内容】

【0287】

図１１Ｃにおいて、コンピュータシステム７００は、コンピュータシステム７００が仮想ポータル１１０２のディスプレイの左側に位置決めされている（例えば、コンピュータシステム７００が仮想ポータル１１０２のディスプレイに対してある角度で位置決めされている）と判定する。図１１Ｃにおいて、コンピュータシステム７００は、コンピュータシステム７００が仮想ポータル１１０２のディスプレイの左側に位置決めされていると判定するため、コンピュータシステム７００は、コンピュータシステム７００のディスプレイデバイス７０２の中心の右側に仮想ポータル１１０２を表示する。更に、図１１Ｃにおいて、コンピュータシステム７００は、コンピュータシステム７００が仮想ポータル１１０２のディスプレイの左側に位置決めされているという判定を行うため、コンピュータシステム７００は、仮想ポータル１１０２の右境界上に表示される（例えば、視覚効果１１１２の一部を形成する）後方ぼかし層１１１２ａの量を（例えば、図１１Ａ及び図１１Ｂにおいて仮想ポータル１１０２の右境界上に表示される後方ぼかし層１１１２ａの量と比較して）増加させる。いくつかの実施形態では、コンピュータシステム７００がヘッドマウントデバイスであるとき、コンピュータシステム７００は、ユーザの異なる目にそれぞれ対応する、コンピュータシステム７００の２つの別個のディスプレイデバイスの中心の右側に仮想ポータル１１０２を別個に表示する（例えば、コンピュータシステム７００は、ユーザの目毎に、ディスプレイの中心の右側に仮想ポータル１１０２を別個に表示する）。いくつかの実施形態では、コンピュータシステム７００がヘッドマウントデバイスであるとき、コンピュータシステム７００は、ユーザの異なる目にそれぞれ対応する、コンピュータシステム７００の２つの別個のディスプレイデバイスのための仮想ポータル１１０２の右境界上の後方ぼかし層１１１２ａの表示の量を別個に増加させる（例えば、コンピュータシステム７００は、ユーザの各目のための仮想ポータル１１０２のディスプレイの量を別個に増加させる）。

【国際調査報告】