特許 7604404 人工現実システムのための中断モード特徴

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2024-12-13

(45)【発行日】2024-12-23

(54)【発明の名称】人工現実システムのための中断モード特徴

(51)【国際特許分類】

   G06F 3/01 20060101AFI20241216BHJP

   A63F 13/25 20140101ALI20241216BHJP

   A63F 13/49 20140101ALI20241216BHJP

   G06F 3/0482 20130101ALI20241216BHJP

   G09G 5/00 20060101ALI20241216BHJP

【ＦＩ】

G06F3/01 510

A63F13/25

A63F13/49

G06F3/01 570

G06F3/0482

G09G5/00 510Q

G09G5/00 530T

G09G5/00 550C

【請求項の数】 15

(21)【出願番号】P 2021577042

(86)(22)【出願日】2020-09-03

(65)【公表番号】

(43)【公表日】2022-11-22

(86)【国際出願番号】 US2020049282

(87)【国際公開番号】W WO2021061369

(87)【国際公開日】2021-04-01

【審査請求日】2023-08-17

(31)【優先権主張番号】62/905,098

(32)【優先日】2019-09-24

(33)【優先権主張国・地域又は機関】US

(31)【優先権主張番号】16/734,093

(32)【優先日】2020-01-03

(33)【優先権主張国・地域又は機関】US

(73)【特許権者】

【識別番号】515046968

【氏名又は名称】メタ プラットフォームズ テクノロジーズ， リミテッド ライアビリティ カンパニー

【氏名又は名称原語表記】ＭＥＴＡ ＰＬＡＴＦＯＲＭＳ ＴＥＣＨＮＯＬＯＧＩＥＳ， ＬＬＣ

(74)【代理人】

【識別番号】110002974

【氏名又は名称】弁理士法人Ｗｏｒｌｄ ＩＰ

(72)【発明者】

【氏名】シュー， チン

(72)【発明者】

【氏名】ヤング， リンジー

(72)【発明者】

【氏名】サマーズ， メリッサ エリン

(72)【発明者】

【氏名】ツェラー， アンドレア

(72)【発明者】

【氏名】ギョカルプ， アイファー

(72)【発明者】

【氏名】ボドレク， アーサー

(72)【発明者】

【氏名】リー， ソヒョン

【審査官】渡辺 慶人

(56)【参考文献】

【文献】特表２０１８－５２４１３４（ＪＰ，Ａ）

【文献】米国特許出願公開第２０１８／０１５７３３３（ＵＳ，Ａ１）

【文献】特開２０１８－１４７４５８（ＪＰ，Ａ）

【文献】特開平１０－１５４０５３（ＪＰ，Ａ）

【文献】米国特許出願公開第２０１８／００９５５４２（ＵＳ，Ａ１）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｇ０６Ｆ ３／０１

３／０４８－ ３／０４８９５

Ａ６３Ｆ ９／２４

１３／００ － １３／９８

(57)【特許請求の範囲】

【請求項1】

ヘッドマウントディスプレイ（ＨＭＤ）であって、前記ＨＭＤのユーザに人工現実コンテンツを出力するように構成され、前記人工現実コンテンツが、人工現実環境に参加する１人または複数の他のユーザに対応する１つまたは複数のアバターを含む、ヘッドマウントディスプレイ（ＨＭＤ）と、
ユーザ入力に応答して、前記ＨＭＤの前記ユーザのために、前記ユーザに対応するアバターが前記人工現実環境に参加することを停止するとともに、前記１人または複数の他のユーザの各ＨＭＤでは、前記１人または複数の他のユーザに対応する１つまたは複数のアバターが前記人工現実環境に参加することを継続させる中断モード環境を有効にするように構成された中断モードエンジンであって、前記中断モードエンジンが、少なくとも、
前記ユーザの前記ＨＭＤにおいて前記中断モード環境内の静的位置に前記１つまたは複数のアバターをレンダリングしつつ、前記１人または複数の他のユーザの各ＨＭＤにおいて、前記１人または複数の他のユーザに対応する１つまたは複数のアバターが前記人工現実環境に参加することを継続させること
を行う、中断モードエンジンと
を備える、人工現実システム。

【請求項2】

物理的環境を表す画像データをキャプチャするように構成された撮像デバイスと、
前記画像データから、前記撮像デバイスの視野における、前記ＨＭＤの前記ユーザの手の内側手首領域を移動することを含むユーザインターフェース（ＵＩ）アクティブ化ジェスチャーを識別するように構成されたジェスチャー検出器と、
前記ＵＩアクティブ化ジェスチャーに応答して、中断モードＵＩ要素を生成するように構成されたＵＩエンジンと、
前記ユーザの前記手の近くでまたは少なくとも部分的にその上で前記中断モードＵＩ要素をレンダリングするように構成されたレンダリングエンジンと
をさらに備え、
好ましくは、前記ユーザ入力が、前記中断モードＵＩ要素上の、前記ユーザのアバターの仮想手の１つまたは複数のフィンガーの配置を含む、中断モード選択ジェスチャーに対応し、前記ジェスチャー検出器が、前記画像データから、前記中断モード選択ジェスチャーを識別するようにさらに構成された、請求項１に記載の人工現実システム。

【請求項3】

前記中断モードエンジンは、前記中断モード環境が有効にされたことに応答して、前記１つまたは複数のアバターが前記ユーザのアバターから個人空間しきい値内にあるとき、前記ユーザの前記アバターから離れるように前記１つまたは複数のアバターを移動するようにさらに構成された、請求項１または２に記載の人工現実システム。

【請求項4】

前記中断モードエンジンが、前記人工現実環境内の仮想背景および仮想オブジェクトを前記中断モード環境中の単色背景と交換するようにさらに構成され、
好ましくは、前記中断モードエンジンが、前記中断モード環境において背景音楽を再生するようにさらに構成された、
請求項１から３のいずれか一項に記載の人工現実システム。

【請求項5】

前記ＨＭＤが第１のＨＭＤを含み、前記第１のＨＭＤの前記ユーザが第１のユーザを含み、前記システムが、前記１つまたは複数の他のアバターのうちの１つに対応する第２のユーザの第２のＨＭＤをさらに備え、前記第２のＨＭＤが、前記第２のユーザに、前記人工現実環境を含む人工現実コンテンツを出力するように構成され、
前記第１のユーザのアバターは、前記中断モードが前記第１のＨＭＤにおいて前記第１のユーザのために有効にされた後に、前記人工現実環境に参加することを停止し、
前記第２のユーザは、前記中断モードが前記第１のＨＭＤにおいて前記第１のユーザのために有効にされた後に、前記第２のＨＭＤにおいて前記人工現実環境に参加し続ける、
請求項１から４のいずれか一項に記載の人工現実システム。

【請求項6】

前記第２のＨＭＤは、前記中断モードが前記第１のＨＭＤにおいて前記第１のユーザのために有効にされた後に、前記第１のＨＭＤの前記第１のユーザに対応する仮想グラフィックをレンダリングする、請求項５に記載の人工現実システム。

【請求項7】

前記第２のＨＭＤの前記第２のユーザは、前記中断モードが前記第１のＨＭＤにおいて前記第１のユーザのために有効にされた後に、前記人工現実環境内で前記第１のＨＭＤの前記第１のユーザの前記アバターと相互作用することができない、請求項５または６に記載の人工現実システム。

【請求項8】

前記ユーザ入力が第１のユーザ入力を含み、前記中断モード環境が第１の中断モード環境を含み、
前記中断モードエンジンが、前記第２のユーザからの第２のユーザ入力に応答して、前記第２のＨＭＤの前記第２のユーザのために、前記第１の中断モード環境とは異なる第２の中断モード環境を有効にするようにさらに構成され、
前記第２のＨＭＤの前記第２のユーザが、前記第１の中断モード環境または前記第２の中断モード環境内で前記第１のユーザの前記アバターと相互作用することができない、
請求項５から７のいずれか一項に記載の人工現実システム。

【請求項9】

前記中断モードエンジンは、
前記中断モード環境内の前記１つまたは複数のアバターの各々のためのユーザインターフェース（ＵＩ）要素をレンダリングすることであって、各ＵＩ要素が、前記ユーザによって実施される選択ジェスチャーを介して選択可能である、ユーザインターフェース（ＵＩ）要素をレンダリングすることと、
前記１つまたは複数のアバターのうちの第１のアバターに対応する第１のＵＩ要素の選択ジェスチャーを検出したことに応答して、
選択されたとき、前記ユーザが前記人工現実環境に戻ったときに前記ＨＭＤにおいて前記第１のアバターをミュートするように構成された、第１の選択可能な仮想要素をレンダリングすることと、
選択されたとき、前記ユーザが前記人工現実環境に戻ったときに前記第１のアバターと前記ユーザのアバターとが相互作用することをブロックするように構成された、第２の選択可能な仮想要素をレンダリングすることと、
選択されたとき、前記第１のアバターを、ＡＲ体験に関連付けられたレビューエンティティに報告するように構成された、第３の選択可能な仮想要素をレンダリングすることと
のうちの少なくとも１つを行うことと
を行うようにさらに構成された、請求項１から８のいずれか一項に記載の人工現実システム。

【請求項10】

前記第１のアバターは、前記第１のアバターに対応する前記第１のＵＩ要素が選択されたとき、ハイライトされ、
好ましくは、前記第１のアバターは、前記中断モード環境が前記ユーザのために有効にされたか否かにかかわらず、前記ユーザによってブロックされた場合、前記人工現実環境または任意の他の人工現実環境において前記ユーザの前記アバターと相互作用することができないことになる、
請求項９に記載の人工現実システム。

【請求項11】

人工現実システムのヘッドマウントディスプレイ（ＨＭＤ）において、前記ＨＭＤのユーザに人工現実コンテンツを出力することであって、前記人工現実コンテンツが、人工現実環境に参加する１人または複数の他のユーザに対応する１つまたは複数のアバターを含む、人工現実コンテンツを出力することと、
ユーザ入力に応答して、前記ＨＭＤの前記ユーザのために、前記ユーザに対応するアバターが前記人工現実環境に参加することを停止するとともに、前記１人または複数の他のユーザの各ＨＭＤでは、前記１人または複数の他のユーザに対応する１つまたは複数のアバターが前記人工現実環境に参加することを継続させる中断モード環境を、少なくとも、
前記ユーザの前記ＨＭＤにおいて前記中断モード環境内の静的位置に前記１つまたは複数のアバターをレンダリングしつつ、前記１人または複数の他のユーザの各ＨＭＤにおいて、前記１人または複数の他のユーザに対応する１つまたは複数のアバターが前記人工現実環境に参加することを継続させること
によって有効にすることと
を含む、方法。

【請求項12】

前記人工現実システムによって、撮像デバイスを介して画像データを取得することと、
前記画像データから、前記撮像デバイスの視野における、前記ＨＭＤの前記ユーザの手の内側手首領域を移動することを含むユーザインターフェース（ＵＩ）アクティブ化ジェスチャーを識別することと、
前記ＵＩアクティブ化ジェスチャーに応答して、中断モードＵＩ要素を生成することと、
前記ユーザの前記手の近くでまたは少なくとも部分的にその上で前記中断モードＵＩ要素をレンダリングすることと
をさらに含み、
好ましくは、前記ユーザ入力が、前記中断モードＵＩ要素上の、前記ユーザのアバターの仮想手の１つまたは複数のフィンガーの配置を含む、中断モード選択ジェスチャーに対応し、
前記方法が、前記画像データから、前記中断モード選択ジェスチャーを識別することをさらに含む、請求項１１に記載の方法。

【請求項13】

中断モードエンジンが、前記人工現実環境内の仮想背景および仮想オブジェクトを前記中断モード環境中の単色背景と交換するようにさらに構成され、
好ましくは、前記中断モード環境を有効にすることは、前記中断モード環境が有効にされたことに応答して、前記１つまたは複数のアバターが前記ユーザのアバターから個人空間しきい値内にあるとき、前記ユーザの前記アバターから離れるように前記１つまたは複数のアバターを移動することをさらに含む、
請求項１１または１２に記載の方法。

【請求項14】

前記ユーザのアバターは、前記中断モードが前記ＨＭＤにおいて前記ユーザのために有効にされた後に、前記人工現実環境に参加することを停止し、前記１人または複数の他のユーザに対応する前記１つまたは複数のアバターは、前記中断モードが前記ＨＭＤにおいて前記ユーザのために有効にされた後に、前記人工現実環境に参加し続ける、請求項１１から１３のいずれか一項に記載の方法。

【請求項15】

命令を備えるコンピュータ可読記憶媒体であって、前記命令は、
人工現実システムのヘッドマウントディスプレイ（ＨＭＤ）において、前記ＨＭＤのユーザに人工現実コンテンツを出力することであって、前記人工現実コンテンツが、人工現実環境に参加する１人または複数の他のユーザに対応する１つまたは複数のアバターを含む、人工現実コンテンツを出力することと、
ユーザ入力に応答して、前記ユーザに対応するアバターが前記人工現実環境に参加することを停止するとともに、前記１人または複数の他のユーザの各ＨＭＤでは、前記１人または複数の他のユーザに対応する１つまたは複数のアバターが前記人工現実環境に参加することを継続させる、中断モード環境を、少なくとも、
前記ユーザの前記ＨＭＤにおいて前記中断モード環境内の静的位置に前記１つまたは複数のアバターをレンダリングしつつ、前記１人または複数の他のユーザの各ＨＭＤにおいて、前記１人または複数の他のユーザに対応する１つまたは複数のアバターが前記人工現実環境に参加することを継続させること
によって有効にすることと
を行うように１つまたは複数のプログラマブルプロセッサを構成する、コンピュータ可読記憶媒体。

【発明の詳細な説明】

【技術分野】

【0001】

本出願は、その内容全体が参照により本明細書に組み込まれる、２０１９年９月２４日に出願された米国仮特許出願第６２／９０５，０９８号の利益を主張する。

【0002】

本開示は、一般に、仮想現実システム、複合現実システムおよび／または拡張現実システムなど、人工現実システムに関する。

【背景技術】

【0003】

人工現実システムは、コンピュータゲーム、健康および安全、工業、ならびに教育などの多くの分野における適用例にとってますますユビキタスになっている。いくつかの例として、人工現実システムは、モバイルデバイス、ゲーミングコンソール、パーソナルコンピュータ、映画館、およびテーマパークに組み込まれている。概して、人工現実は、ユーザへの提示の前に何らかの様式で調整された形式の現実であり、これは、たとえば、仮想現実、拡張現実、複合現実、ハイブリッド現実、あるいはそれらの何らかの組合せおよび／または派生物を含み得る。

【0004】

一般的な人工現実システムは、ユーザに対してコンテンツをレンダリングおよび表示するための１つまたは複数のデバイスを含む。一例として、人工現実システムは、ユーザによって装着され、ユーザに人工現実コンテンツを出力するように構成された、ヘッドマウントディスプレイ（ＨＭＤ）を組み込み得る。人工現実コンテンツは、完全に生成されたコンテンツ、またはキャプチャされたコンテンツ（たとえば、現実世界のビデオおよび／または画像）と組み合わせられた生成されたコンテンツを含み得る。動作中に、ユーザは、一般に、コンテンツを選択するか、アプリケーションを起動するか、またはさもなければシステムを構成するために、人工現実システムと相互作用する。

【発明の概要】

【0005】

概して、本開示は、人工現実システムのための中断モード特徴について説明する。より詳細には、本開示は、人工現実アプリケーションの実行中に中断モード環境を生成することと、中断モード環境内でユーザインターフェース（ＵＩ）要素を提示および制御することとを行うためのシステム構成および技法について説明する。中断モード特徴は、人工現実（ＡＲ）環境内で１人または複数の他のユーザ（または１人または複数の他のユーザに対応する１つまたは複数のアバター）と相互作用するユーザが、ユーザのパースペクティブ（ｐｅｒｓｐｅｃｔｉｖｅ）からＡＲ環境を中断することを可能にする。中断モード環境中にいる間、ユーザは、ＡＲ環境からの他のユーザを観察および選択することが可能である。たとえば、ユーザは、中断モード環境から、友達になるべき別のユーザを選択するか、そのユーザにメッセージするか、そのユーザをミュートするか、そのユーザをブロックするか、またはそのユーザを報告し得る。

【0006】

本発明の第１の態様によれば、ヘッドマウントディスプレイ（ＨＭＤ）であって、ＨＭＤのユーザに人工現実コンテンツを出力するように構成され、人工現実コンテンツが、人工現実環境に参加する１人または複数の他のユーザに対応する１つまたは複数のアバターを含む、ヘッドマウントディスプレイ（ＨＭＤ）と、ユーザ入力に応答して、ＨＭＤのユーザのために中断モード環境を有効にするように構成された中断モードエンジンであって、中断モードエンジンが、ＨＭＤにおいて人工現実環境を中断モード環境と交換すること、ＨＭＤにおいて１つまたは複数のアバターおよび人工現実環境をミュートすること、または中断モード環境内の静的位置において１つまたは複数のアバターをレンダリングすることのうちの少なくとも１つを行う、中断モードエンジンとを備える、人工現実システムが提供される。

【0007】

人工現実システムは、物理的環境を表す画像データをキャプチャするように構成された撮像デバイス、画像データから、撮像デバイスの視野における、ＨＭＤのユーザの手の内側手首領域（ｉｎｓｉｄｅ ｗｒｉｓｔ ａｒｅａ）を移動することを含むユーザインターフェース（ＵＩ）アクティブ化ジェスチャーを識別するように構成されたジェスチャー検出器、ＵＩアクティブ化ジェスチャーに応答して、中断モードＵＩ要素を生成するように構成されたＵＩエンジン、および／あるいはユーザの手の近くでまたは少なくとも部分的にその上で中断モードＵＩ要素をレンダリングするように構成されたレンダリングエンジンをさらに備え得る。

【0008】

ユーザ入力は、中断モードＵＩ要素上の、ユーザのアバターの仮想手の１つまたは複数のフィンガー（ｆｉｎｇｅｒ）の配置を含む、中断モード選択ジェスチャーに対応し得る。ジェスチャー検出器は、画像データから、中断モード選択ジェスチャーを識別するようにさらに構成され得る。

【0009】

中断モードエンジンは、中断モード環境が有効にされたことに応答して、１つまたは複数のアバターがユーザのアバターから個人空間しきい値内にあるとき、ユーザのアバターから離れるように１つまたは複数のアバターを移動するようにさらに構成され得る。

【0010】

中断モードエンジンは、人工現実環境内の仮想背景および仮想オブジェクトを中断モード環境中の単色背景（ｓｏｌｉｄ－ｃｏｌｏｒ ｂａｃｋｇｒｏｕｎｄ）と交換するようにさらに構成され得る。

【0011】

中断モードエンジンは、中断モード環境において背景音楽を再生するようにさらに構成され得る。

【0012】

ＨＭＤは、第１のＨＭＤを含み得、第１のＨＭＤのユーザは第１のユーザを含み得る。本システムは、１つまたは複数の他のアバターのうちの１つに対応する第２のユーザの第２のＨＭＤをさらに備え得る。第２のＨＭＤは、第２のユーザに、人工現実環境を含む人工現実コンテンツを出力するように構成され得る。第１のユーザのアバターは、中断モードが第１のＨＭＤにおいて第１のユーザのために有効にされた後に、人工現実環境に参加することを停止し得る。第２のユーザは、中断モードが第１のＨＭＤにおいて第１のユーザのために有効にされた後に、第２のＨＭＤにおいて人工現実環境に参加し続け得る。

【0013】

第２のＨＭＤは、中断モードが第１のＨＭＤにおいて第１のユーザのために有効にされた後に、第１のＨＭＤの第１のユーザに対応する仮想グラフィックをレンダリングし得る。

【0014】

第２のＨＭＤの第２のユーザは、中断モードが第１のＨＭＤにおいて第１のユーザのために有効にされた後に、人工現実環境内で第１のＨＭＤの第１のユーザのアバターと相互作用することができないことがある。

【0015】

ユーザ入力は、第１のユーザ入力を含み得る。中断モード環境は、第１の中断モード環境を含み得る。中断モードエンジンは、第２のユーザからの第２のユーザ入力に応答して、第２のＨＭＤの第２のユーザのために、第１の中断モード環境とは異なる第２の中断モード環境を有効にするようにさらに構成され得る。第２のＨＭＤの第２のユーザは、第１の中断モード環境または第２の中断モード環境内で第１のユーザのアバターと相互作用することができないことがある。

【0016】

中断モードエンジンは、中断モード環境内の１つまたは複数のアバターの各々のためのユーザインターフェース（ＵＩ）要素をレンダリングすることであって、各ＵＩ要素が、ユーザによって実施される選択ジェスチャーを介して選択可能である、ユーザインターフェース（ＵＩ）要素をレンダリングすること、および／または１つまたは複数のアバターのうちの第１のアバターに対応する第１のＵＩ要素の選択ジェスチャーを検出したことに応答して、選択されたとき、ユーザが人工現実環境に戻ったときにＨＭＤにおいて第１のアバターをミュートするように構成された、第１の選択可能な仮想要素をレンダリングすることと、選択されたとき、ユーザが人工現実環境に戻ったときに第１のアバターとユーザのアバターとが相互作用することをブロックするように構成された、第２の選択可能な仮想要素をレンダリングすることと、選択されたとき、第１のアバターを、ＡＲ体験に関連付けられたレビューエンティティに報告するように構成された、第３の選択可能な仮想要素をレンダリングすることとのうちの少なくとも１つを行うことを行うようにさらに構成され得る。

【0017】

第１のアバターは、第１のアバターに対応する第１のＵＩ要素が選択されたとき、ハイライトされ得る。

【0018】

第１のアバターは、中断モード環境がユーザのために有効にされたか否かにかかわらず、ユーザによってブロックされた場合、人工現実環境または任意の他の人工現実環境においてユーザのアバターと相互作用することができないことがある。

【0019】

本発明の第２の態様によれば、人工現実システムのヘッドマウントディスプレイ（ＨＭＤ）において、ＨＭＤのユーザに人工現実コンテンツを出力することであって、人工現実コンテンツが、人工現実環境に参加する１人または複数の他のユーザに対応する１つまたは複数のアバターを含む、人工現実コンテンツを出力することと、ユーザ入力に応答して、ＨＭＤのユーザのために中断モード環境を、ＨＭＤにおいて人工現実環境を中断モード環境と交換すること、ＨＭＤにおいて１つまたは複数のアバターおよび人工現実環境をミュートすること、または中断モード環境内の静的位置において１つまたは複数のアバターをレンダリングすることのうちの少なくとも１つを行うことによって有効にすることとを含む、方法が提供される。

【0020】

本方法は、人工現実システムによって、撮像デバイスを介して画像データを取得すること、画像データから、撮像デバイスの視野における、ＨＭＤのユーザの手の内側手首領域を移動することを含むユーザインターフェース（ＵＩ）アクティブ化ジェスチャーを識別すること、ＵＩアクティブ化ジェスチャーに応答して、中断モードＵＩ要素を生成すること、および／あるいはユーザの手の近くでまたは少なくとも部分的にその上で中断モードＵＩ要素をレンダリングすることをさらに含み得る。

【0021】

ユーザ入力は、中断モードＵＩ要素上の、ユーザのアバターの仮想手の１つまたは複数のフィンガーの配置を含む、中断モード選択ジェスチャーに対応し得る。本方法は、画像データから、中断モード選択ジェスチャーを識別することをさらに含み得る。

【0022】

中断モードエンジンは、人工現実環境内の仮想背景および仮想オブジェクトを中断モード環境中の単色背景と交換するようにさらに構成され得る。

【0023】

中断モード環境を有効にすることは、中断モード環境が有効にされたことに応答して、１つまたは複数のアバターがユーザのアバターから個人空間しきい値内にあるとき、ユーザのアバターから離れるように１つまたは複数のアバターを移動することをさらに含み得る。

【0024】

ユーザのアバターは、中断モードがＨＭＤにおいてユーザのために有効にされた後に、人工現実環境に参加することを停止し得る。１人または複数の他のユーザに対応する１つまたは複数のアバターは、中断モードがＨＭＤにおいてユーザのために有効にされた後に、人工現実環境に参加し続け得る。

【0025】

本発明の第３の態様によれば、命令を備えるコンピュータ可読記憶媒体であって、命令は、人工現実システムのヘッドマウントディスプレイ（ＨＭＤ）において、ＨＭＤのユーザに人工現実コンテンツを出力することであって、人工現実コンテンツが、人工現実環境に参加する１人または複数の他のユーザに対応する１つまたは複数のアバターを含む、人工現実コンテンツを出力することと、ユーザ入力に応答して、中断モード環境を、ＨＭＤにおいて人工現実環境を中断モード環境と交換すること、ＨＭＤにおいて１つまたは複数のアバターおよび人工現実環境をミュートすること、または中断モード環境内の静的位置において１つまたは複数のアバターをレンダリングすることのうちの少なくとも１つを行うことによって有効にすることとを行うように１つまたは複数のプログラマブルプロセッサを構成する、コンピュータ可読記憶媒体が提供される。

【0026】

本技法は、少なくとも１つの実際的適用例を提供する１つまたは複数の技術的改善を提供し得る。たとえば、本技法は、ユーザが、人工現実環境に対応するデータを受信し続け、他のユーザが他のＨＭＤにおいて人工現実環境に参加し続けることを可能にしながら、ＨＭＤにおいて迅速に中断モードを有効にすることを可能にする。他のユーザが他のＨＭＤにおいて人工現実環境に参加し続ける間、人工現実環境に対応するデータを受信し続けることによって、ＨＭＤは、中断モード環境から人工現実環境に戻ったときに、処理すべきデータ更新のバックログを有しないことになり、これは、ユーザが、より喜びを与えるユーザ体験のために、データ処理遅延を低減することによって人工現実環境に参加することにより迅速に戻ることを可能にする。

【0027】

本開示の技法の１つまたは複数の例の詳細は、添付の図面および以下の説明において記載される。本技法の他の特徴、目的、および利点は、説明および図面から、ならびに特許請求の範囲から明らかになろう。

【図面の簡単な説明】

【0028】

【図1A】本開示の技法による、中断モード特徴を有する例示的な人工現実システムを示す図である。

【図1B】本開示の技法による、中断モード特徴を有する別の例示的な人工現実システムを示す図である。

【図2A】本開示の技法に従って動作する例示的なＨＭＤを示す図である。

【図2B】本開示で説明される技法による、別の例示的なＨＭＤを示す図である。

【図3】本開示の技法による、人工現実アプリケーションの実行中に中断モード環境を生成する人工現実システムの、コンソール、人工現実アプリケーションサーバ、およびＨＭＤの例示的な実装形態を示すブロック図である。

【図4】本開示の技法による、人工現実アプリケーションの実行中に中断モード環境を生成する人工現実システムの、例示的なＨＭＤ、および人工現実アプリケーションサーバを示すブロック図である。

【図5】１つまたは複数のデバイスが、各デバイス内の１つまたは複数のＳｏＣ集積回路を使用して実装される、マルチデバイス人工現実システムのための分散アーキテクチャのより詳細な例示的な実装形態を示すブロック図である。

【図6】本開示の態様による、人工現実システムのための中断モード環境を有効にするための例示的な動作を示すフローチャートである。

【図7】本開示の態様による、人工現実システムのための、中断モード環境内にいる間の例示的な動作を示すフローチャートである。

【図8】本開示の技法による、人工現実アプリケーションの実行中に中断モード環境に入るための例示的なジェスチャー駆動型ＵＩとのユーザ相互作用を示す図である。

【図9】本開示の技法による、人工現実アプリケーションの例示的な人工現実環境を示す図である。

【図10】本開示の技法による、中断モード環境の一例を示す図である。

【図11】本開示の技法による、中断モード環境の別の例を示す図である。

【発明を実施するための形態】

【0029】

同様の参照符号は、図および説明全体にわたって同様の要素を指す。

【0030】

図１Ａは、本開示の技法による、中断モード特徴を有する例示的な人工現実システム１０を示す図である。いくつかの例では、中断モード特徴は、セーフモードまたはセーフゾーン特徴と呼ばれることがある。図１Ａの例では、人工現実（ＡＲ）システム１０は、ヘッドマウントディスプレイ（ＨＭＤ）１１２と、コンソール１０６と、人工現実アプリケーションサーバ１０７と、いくつかの例では、１つまたは複数の外部センサー９０とを含む。

【0031】

示されているように、ＨＭＤ１１２は、一般に、ユーザ１１０によって装着され、ユーザ１１０に人工現実コンテンツ１２２を提示するための電子ディスプレイと光学アセンブリとを備える。さらに、ＨＭＤ１１２は、ＨＭＤの動きを追跡するための１つまたは複数のセンサー（たとえば、加速度計）を含み、周囲の物理的環境の画像データをキャプチャするための１つまたは複数の撮像デバイス１３８、たとえば、カメラ、ラインスキャナなどを含み得る。ヘッドマウントディスプレイとして示されているが、ＡＲシステム１０は、代替的に、または追加として、ユーザ１１０に人工現実コンテンツ１２２を提示するための眼鏡または他のディスプレイデバイスを含み得る。

【0032】

この例では、コンソール１０６は、ゲーミングコンソール、ワークステーション、デスクトップコンピュータ、またはラップトップなど、単一のコンピューティングデバイスとして示されている。他の例では、コンソール１０６は、分散コンピューティングネットワーク、データセンター、またはクラウドコンピューティングシステムなど、複数のコンピューティングデバイスにわたって分散され得る。コンソール１０６、ＨＭＤ１１２、およびセンサー９０は、この例に示されているように、ネットワーク１０４を介して通信可能に結合され得、ネットワーク１０４は、Ｗｉ－Ｆｉ、メッシュネットワークまたは短距離ワイヤレス通信媒体など、ワイヤードまたはワイヤレスネットワークであり得る。ＨＭＤ１１２は、この例では、コンソール１０６と通信しているものとして、たとえば、コンソール１０６にテザリングされるかまたはコンソール１０６とワイヤレス通信しているものとして示されているが、いくつかの実装形態では、ＨＭＤ１１２は、スタンドアロンモバイル人工現実システムとして動作する。

【0033】

この例では、ＨＭＤ１１２は、ネットワーク１０４を介して、人工現実アプリケーションサーバ１０７と通信しているものとして示されており、人工現実アプリケーションサーバ１０７は、コンソール１０６および／またはＨＭＤ１１２上で実行する人工現実アプリケーションのためのバックエンドネットワーク動作を実施する。いくつかの例では、人工現実アプリケーションサーバ１０７は、任意の形態におけるサーバまたは別のコンピューティングリソースに対応し得る。たとえば、人工現実アプリケーションサーバ１０７は、物理的コンピューティングデバイスであり得るか、あるいはクラウドコンピューティングシステム、サーバファーム、および／またはサーバクラスタ（またはそれらの部分）の構成要素であり得る。したがって、人工現実アプリケーションサーバ１０７は、特定の人工現実アプリケーションを実行するクライアントデバイスおよび他のデバイスまたはシステムにサービスを提供する、１つまたは複数の物理的コンピューティングデバイス、仮想コンピューティングデバイス、仮想マシン、コンテナ、および／または他の仮想化されたコンピューティングデバイスを表し得る。たとえば、人工現実アプリケーションサーバ１０７は、ユーザ間の関係（たとえば、交友関係）を管理すること、ユーザについてのプロファイルを維持すること、１人または複数のユーザとゲームを協調させること（たとえば、ゲームにおいて１人または複数のユーザを配置すること、スコアを維持すること）などを行い得る。

【0034】

図１Ａの例では、ユーザ１１０は、コンソール１０６および／またはＨＭＤ１１２上で実行する人工現実アプリケーションによって構築およびレンダリングされた人工現実コンテンツ１２２を観察する。いくつかの例では、人工現実システム１０は、ユーザ１１０への表示のための人工現実コンテンツ１２２をレンダリングするために、現実世界の３Ｄ物理的環境からキャプチャされた情報を使用する。一例として、人工現実コンテンツ１２２は、家庭用ゲーミングアプリケーションであり得、ユーザ１１０が、人工現実環境１２４内で、仮想手１３６と仮想腕１３７とを含むアバターとしてレンダリングされる。人工現実コンテンツ１２２は、人工現実環境１２４内に、アバター１２０としてレンダリングされた１人または複数の他のユーザと、１つまたは複数の仮想オブジェクト１２８Ａ、１２８Ｂとをも含むことができる。いくつかの例では、人工現実コンテンツ１２２は、現実世界の像と仮想オブジェクトとの混合物、たとえば、複合現実および／または拡張現実を含み得る。他の例では、人工現実コンテンツ１２２は、たとえば、ソーシャルネットワーキングアプリケーション、ビデオ会議アプリケーション、ナビゲーションアプリケーション、教育アプリケーション、トレーニングまたはシミュレーションアプリケーション、あるいは人工現実を実装する他のタイプのアプリケーションであり得る。いくつかの例では、人工現実コンテンツ１２２は、ＨＭＤ１１２のユーザに関連付けられたアバターに対するファーストパーソンパースペクティブからレンダリングされ得る。

【0035】

動作中に、人工現実アプリケーションは、基準系、一般にＨＭＤ１１２の観察パースペクティブについてのポーズ情報を追跡および計算することによって、ユーザ１１０への表示のための人工現実コンテンツ１２２を構築する。基準系としてＨＭＤ１１２を使用して、およびＨＭＤ１１２の現在の推定されたポーズによって決定された現在の視野１３０に基づいて、人工現実アプリケーションは３Ｄ人工現実コンテンツをレンダリングし、３Ｄ人工現実コンテンツは、いくつかの例では、少なくとも部分的に、ユーザ１１０の現実世界の３Ｄ物理的環境上にオーバーレイされ得る。このプロセス中、人工現実アプリケーションは、ユーザ１１０による動きおよび／またはユーザ１１０に関する特徴追跡情報など、現実世界の物理的環境内の３Ｄ情報をキャプチャするために、移動情報およびユーザコマンドなど、ＨＭＤ１１２から受信された検知されたデータと、いくつかの例では、外部カメラなど、任意の外部センサー９０からのデータとを使用する。検知されたデータに基づいて、人工現実アプリケーションは、ＨＭＤ１１２の基準系についての現在のポーズを決定し、現在のポーズに従って、人工現実コンテンツ１２２をレンダリングする。

【0036】

人工現実システム１０は、ユーザ１１０のリアルタイム視線追跡によって決定され得るようなユーザ１１０の現在の視野１３０または他の条件に基づいて、仮想コンテンツアイテムの生成およびレンダリングをトリガし得る。より詳細には、ＨＭＤ１１２の撮像デバイス１３８は、撮像デバイス１３８の視野１３０内にある、現実世界の物理的環境中のオブジェクトを表す画像データをキャプチャする。視野１３０は、一般に、ＨＭＤ１１２の観察パースペクティブと対応する。いくつかの例では、人工現実アプリケーションは、複合現実および／または拡張現実を含む人工現実コンテンツ１２２を提示する。いくつかの例では、人工現実アプリケーションは、人工現実コンテンツ１２２内でなど、仮想オブジェクトとともに視野１３０内にある、ユーザ１１０の手１３２および／または腕１３４の部分など、現実世界オブジェクトの画像をレンダリングし得る。他の例では、人工現実アプリケーションは、人工現実コンテンツ１２２内で、視野１３０内にある、ユーザ１１０の手１３２および／または腕１３４の部分の仮想表現をレンダリング（たとえば、仮想手１３６など、仮想オブジェクトとして現実世界オブジェクトをレンダリング）し得る。いずれの例でも、ユーザ１１０は、人工現実コンテンツ１２２内で、視野１３０内にあるユーザの手１３２、腕１３４、および／または任意の他の現実世界オブジェクトの部分を観察することが可能である。他の例では、人工現実アプリケーションは、ユーザの手１３２または腕１３４の表現をレンダリングしないことがある。

【0037】

いくつかの例では、検知されたデータに基づいて、人工現実システム１０は、ユーザ１１０によって実施されたジェスチャーを検出し、１つまたは複数の特定のジェスチャーを検出したことに応答して、１つまたは複数のユーザインターフェース要素を生成し、それらのユーザインターフェース要素は、図１Ａ中のユーザインターフェース（ＵＩ）メニュー１４０など、ユーザ１１０に提示されている下にある人工現実コンテンツ１２２上にオーバーレイされ得る。より詳細には、人工現実システム１０は、随意にユーザ１１０の個々のフィンガーまたは親指、および／あるいは腕１３４のすべてまたは部分を識別することを含めて、手１３２を識別するために、ＨＭＤ１１２の撮像デバイス１３８によってキャプチャされた画像データ内でオブジェクト認識を実施する。人工現実システム１０は、時間のスライディングウィンドウにわたって（随意に手の特定の指（ｄｉｇｉｔ）を含む）手１３２、および／または腕１３４の部分の位置、配向、および構成を追跡する。人工現実システム１０は、特定のオブジェクト、たとえば、ユーザ１１０の（手の特定の指を含む）手１３２、および／または腕１３４の部分によって実施された、１つまたは複数のジェスチャーを識別するために、手１３２、および／または腕１３４の部分の任意の追跡された動き、構成、位置、および／または配向を分析する。（１つまたは複数の）ジェスチャーを検出するために、人工現実アプリケーションは、手１３２、および／または腕１３４の部分の動き、構成、位置および／または配向を、人工現実システム１０のジェスチャーライブラリに記憶されたジェスチャー定義と比較し得、ここで、ジェスチャーライブラリ中の各ジェスチャーは、各々、１つまたは複数のアクションにマッピングされ得る。いくつかの例では、移動を検出することは、１つまたは複数の指が、仮想オブジェクトに対応する領域（たとえば、ＵＩ要素）に配置されるかどうかを含めて、手１３２の指（個々のフィンガーおよび親指）のうちの１つまたは複数の位置を追跡することを含み得る。他の例では、移動を検出することは、手１３２の内側手首領域がＨＭＤ１１２のほうを向いているかどうかを含めて、ＨＭＤ１１２の現在のポーズに対する手１３２の配向（たとえば、フィンガーがＨＭＤ１１２のほうを指すまたはＨＭＤ１１２から離れるように指すこと）および／または腕１３４の配向（すなわち、腕の法線がＨＭＤ１１２のほうを向くこと）を追跡することを含み得る。手１３２（またはそれの部分）の位置および配向は、代替的に、手１３２（またはそれの部分）のポーズと呼ばれることがある。

【0038】

本開示の技法によれば、人工現実システム１０は、人工現実アプリケーションの実行中に、ユーザ１１０がＨＭＤ１１２において中断モード特徴を有効にしたことに応答して、ユーザ１１０のパースペクティブからＡＲ環境を中断し、中断モード環境を生成し得る。たとえば、中断モード特徴は、以下でさらに詳細に説明されるように、ユーザ入力が中断モードＵＩ要素１４２を選択したことに応答して、人工現実コンテンツ１２２において、人工現実環境１２４を中断モード環境と交換し、ＨＭＤ１１２における静的位置において人工現実環境１２４からの１つまたは複数のアバターをレンダリングし得る。ユーザ１１０は、次いで、中断モード環境に存在する任意のアバター１２０を選択して、中断モード環境から、ユーザのプロファイルを観察すること、そのユーザと友達になること、そのユーザにメッセージすること、そのユーザをミュートすること、そのユーザをブロックすること、またはそのユーザを報告することを含む、選択されたアバターに対応するそのユーザに関する追加の動作を実施し得る。いくつかの例では、人工現実アプリケーションサーバ１０７は、中断モード環境から、ユーザと友達になるか、ユーザにメッセージするか、ユーザをブロックするか、またはユーザを報告するための、人工現実アプリケーションバックエンドネットワーク動作を実施する。たとえば、人工現実アプリケーションは、ＨＭＤ１１２においてユーザ１１０に提示されたユーザインターフェース上のユーザ入力に基づいて、プロファイルを取得するか、ユーザと友達になるか、ユーザにメッセージするか、ユーザをミュートするか、ユーザをブロックするか、またはユーザを報告するための、人工現実アプリケーションサーバ１０７によって実施される命令を策定し得る。いくつかの例では、中断モード特徴は、アバター１２０が人工現実環境１２４に参加し続ける間、人工現実環境１２４においてユーザ１１０のアバターを仮想グラフィックと交換し得る。このようにして、アバター１２０は、中断モード特徴がＨＭＤ１１２において有効にされる間、ＨＭＤ１１２のアバターと相互作用しないことがある（その逆も同様である）。いくつかの例では、中断モード環境は、セーフモードまたはセーフゾーン環境と呼ばれることがある。

【0039】

いくつかの例では、人工現実システム１０は、中断モード環境を選択するために使用されるＵＩ要素の表示をトリガすること、および／または中断モード環境の実行をトリガすることなど、人工現実アプリケーションによる所望の応答をトリガすることを意図された１つまたは複数のＵＩアクティブ化ジェスチャーを検出し得る。たとえば、ユーザ１１０は、仮想手１３６および／または仮想腕１３７の近くでまたは少なくとも部分的にその上でＵＩメニュー１４０（たとえば、仮想アイコン）の表示をトリガするために、手１３２の内側手首領域を現在の視野１３０に移動し得る。このＵＩアクティブ化ジェスチャーは、ユーザが腕時計または任意の他のウェアラブルデバイスを見ることと同様であり得る。図１Ａは、仮想腕１３７の内側表面（たとえば、手首領域）上に表示されたＵＩメニュー１４０を示すが、ＵＩメニュー１４０は、仮想手１３６および／または仮想腕１３７の（１つまたは複数の）任意の表面の近くでまたは部分的にその上で表示され得ることを理解されたい。

【0040】

図１Ａに示されているように、ＵＩメニュー１４０は、選択されたとき、中断モード特徴を有効にする中断モードＵＩ要素１４２と、選択されたとき、個人メニュー項目が表示されることを引き起こす個人ＵＩ要素１４４とを含み得る。

【0041】

いくつかの例では、ユーザ入力が個人ＵＩ要素１４４を選択したことに応答して表示される個人メニュー項目は、選択されたとき、ユーザが人工現実アプリケーション設定または選好を変更することを可能にする設定ＵＩ要素、選択されたとき、ユーザが現在の人工現実アプリケーションまたは環境において友達および／または人々を観察することを可能にする人々ＵＩ要素、選択されたとき、ユーザが、現在の人工現実環境１２４または前に訪問した場所／環境に関する情報を観察することを可能にする場所ＵＩ要素、あるいは、選択されたとき、ユーザが人々、場所、人工現実体験（たとえば、ゲーム、アプリケーション）を検索することを可能にする検索ＵＩ要素などを含み得る。いくつかの例では、人工現実アプリケーションサーバ１０７は、個人メニュー項目におけるユーザ入力に応答して、人工現実アプリケーション設定または選好を変更すること、人工現実環境中のユーザに関する情報を取得すること、人工現実環境または他の環境に関する情報を取得すること、あるいは人工現実アプリケーションによって策定された命令に基づいて検索を実施することを行うための、バックエンドネットワーク動作を実施する。

【0042】

いくつかの例では、ユーザ１１０は中断モードＵＩ要素１４２または個人ＵＩ要素１４４を、対応するＵＩ要素上のまたはその近くの（たとえば、中断モードＵＩ要素１４２または個人ＵＩ要素１４４がレンダリングされる物理的表面上の、あるいはＵＩ要素に対応する物理的ロケーションの近くの）１つまたは複数のフィンガーの配置を含む選択ジェスチャーにより選択し得る。図１Ａに示されている例では、ＵＩメニュー１４０は、仮想腕１３７の内側表面上に提示され、ユーザ１１０は、中断モードＵＩ要素１４２または個人ＵＩ要素１４４の仮想ロケーションに対応する、腕１３４の部分にタッチし得、これは、いずれかのＵＩ要素を選択したとき、ユーザ１１０に自然触覚フィードバックを提供する。すなわち、ユーザの手の１つまたは複数のフィンガーとユーザの腕１３６との間の物理的接触が、物理的キーボードまたは他の物理的入力デバイス上のボタンなど、物理的ユーザ入力オブジェクトと直接相互作用したとき、ユーザに、ユーザによって感じられる感覚のシミュレーションを提供し得る。これは、ジェスチャー検出の精度を簡略化および改善することができる。ユーザの手の動きに基づくＵＩアクティブ化ジェスチャーを定義することによって、ユーザは、中断モード特徴を有効にするために迅速におよび直観的にＵＩメニュー１４０をアクティブ化し得る。このようにして、ユーザ１１０は、ＨＭＤ１１２を取り外す必要なしに、および、他のユーザが人工現実環境１２４に参加し続けるとき、ＨＭＤ１１２が、人工現実環境１２４に対応するデータを受信し続けながら、人工現実環境１２４を休止し得る。他のユーザが人工現実環境１２４に参加し続ける間、人工現実環境１２４に対応するデータを受信し続けることによって、ＨＭＤ１１２は、ユーザ１１０が中断モード環境から人工現実環境１２４に戻ったときに、処理すべきデータ更新のバックログを有しないことになり、これは、ユーザ１１０が、より喜びを与えるユーザ体験のために、データ処理遅延を低減することによって人工現実環境１２４に参加することにより迅速に戻ることを可能にする。

【0043】

図１Ｂは、本開示の技法による、人工現実アプリケーションをコンカレントに実行する、中断モード特徴を有する別の例示的な人工現実システム２０を示す図である。図１Ｂの例では、人工現実システム２０は、外部カメラ１０２Ａおよび１０２Ｂ（まとめて、「外部カメラ１０２」）と、ＨＭＤ１１２Ａ～１１２Ｃ（まとめて、「ＨＭＤ１１２」）と、コントローラ１１４Ａおよび１１４Ｂ（まとめて、「コントローラ１１４」）と、コンソール１０６と、人工現実アプリケーションサーバ１０７と、センサー９０とを含む。

【0044】

図１Ｂに示されているように、人工現実システム２０は、コンソール１０６および／またはＨＭＤ１１２上で実行する複数の人工現実アプリケーションが、コンカレントに稼働しており、ユーザ１１０Ａ～１１０Ｃ（まとめて、「ユーザ１１０」）の各々に、それぞれのユーザについての対応する基準系の現在の観察パースペクティブに基づいて提示される共通のレンダリングされたシーン上で表示される、マルチユーザ環境を表す。すなわち、この例では、複数の人工現実アプリケーションの各々が、ＨＭＤ１１２の各々についての基準系についてのポーズ情報を追跡および計算することによって、人工現実環境１２４を構築する。人工現実システム２０は、ＨＭＤ１１２の対応する基準系についての更新されたポーズ情報を計算する際に使用するための、ユーザ１１０による動きならびに／またはユーザ１１０およびオブジェクト１０８に関する追跡情報など、現実世界環境内の３Ｄ情報をキャプチャするために、カメラ１０２、ＨＭＤ１１２、およびコントローラ１１４から受信されたデータを使用する。いくつかの例では、各ユーザ１１０は、同じまたは異なる現実世界環境中に（たとえば、同じまたは異なる物理的ロケーション中に）いることがある。どちらにしても、複数の人工現実アプリケーションは、ＨＭＤ１１２Ｃについて決定された現在の観察パースペクティブに基づいて、仮想オブジェクト１２８Ａ～１２８Ｃ（まとめて、「仮想オブジェクト１２８」）を、現実世界オブジェクト１０８Ａ～１０８Ｃ（まとめて、「現実世界オブジェクト１０８」）上に空間的にオーバーレイされたものとして有する、人工現実コンテンツ１２２を、人工現実環境１２４内の同じシーン上でレンダリングし得る。さらに、ＨＭＤ１１２Ｃのパースペクティブから、人工現実システム２０は、それぞれ、ユーザ１１０Ａ、１１０Ｂについての推定された位置に基づいて、人工現実環境１２４内でアバター１２０Ａ、１２０Ｂをレンダリングする。図１Ｂに示されている人工現実コンテンツ１２２は、本開示の技法による、中断モード特徴を有効にするより前の人工現実環境の一例であり得る。

【0045】

ＨＭＤ１１２の各々は、人工現実システム２０内でコンカレントに動作する。図１Ｂの例では、ユーザ１１０の各々は、複数の人工現実アプリケーションにおける「参加者」（または「プレーヤ」）であり得、ユーザ１１０のいずれかは、複数の人工現実アプリケーションにおける「観客」または「観測者」であり得る。ＨＭＤ１１２Ｃは、ユーザ１１０Ｃの手１３２および／または腕１３４を追跡することによって、図１ＡのＨＭＤ１１２と実質的に同様に動作し得る。ＨＭＤ１１２Ａも、ユーザ１１０Ａの手１３２Ａ、１３２Ｂの移動を追跡することによって、図１ＡのＨＭＤ１１２と実質的に同様に動作し、ユーザ入力を受信し得る。ＨＭＤ１１２Ｂは、ユーザ１１０Ｂによって保持されたコントローラ１１４からユーザ入力を受信し得る。コントローラ１１４は、Ｂｌｕｅｔｏｏｔｈなどの短距離ワイヤレス通信のニアフィールド通信を使用して、ワイヤード通信リンクを使用して、または別のタイプの通信リンクを使用してＨＭＤ１１２Ｂと通信していることがある。

【0046】

図１Ｂに示されているように、ＨＭＤ１１２Ｃのカメラ１３８を介してキャプチャされた画像データに加えてまたはその代替として、外部カメラ１０２からの入力データが、手の指（フィンガー、親指）の個体および／または組合せの移動を含む、ユーザ１１０Ｃの手１３２など、ユーザ１１０の手および腕の特定の動き、構成、位置、および／または配向を追跡および検出するために使用され得る。撮像デバイス１０２および１３８は、可視光スペクトル、赤外スペクトル、または他のスペクトルにおいて画像をキャプチャし得る。オブジェクト、オブジェクトポーズ、およびジェスチャーを識別するための本明細書で説明される画像処理は、たとえば、赤外画像、可視光スペクトル画像などを処理することを含み得る。

【0047】

図１Ａに関して上記で説明された例と同様の様式で、人工現実システム２０のコンソール１０６および／またはＨＭＤ１１２Ｃは、中断モード環境を選択するために使用されるＵＩ要素の表示をトリガすること、および／または中断モード環境の実行をトリガすることなど、人工現実アプリケーションによる所望の応答をトリガすることを意図された１つまたは複数のＵＩアクティブ化ジェスチャーを検出し得る。たとえば、ユーザ１１０は、少なくとも部分的に仮想手１３６の仮想手首上のまたはその近くの、中断モードＵＩ要素１４２と個人ＵＩ要素１４４とを含むＵＩメニュー１４０の表示をトリガするために、手１３２の内側手首領域（または任意の他の領域）を現在の視野１３０に移動し得る。ユーザ１１０Ｃは、中断モード特徴を有効にするために、中断モードＵＩ要素１４２を選択するユーザ入力を入力し得る。たとえば、ユーザ１１０Ｃは、アバターの１つまたは複数の仮想フィンガーが人工現実環境１２４において中断モードＵＩ要素１４２にタッチするような、中断モードＵＩ要素１４２がレンダリングされる場所に対応する領域における、ユーザの手の１つまたは複数のフィンガーの配置を含むタッチジェスチャーにより、中断モードＵＩ要素１４２を選択し得る。

【0048】

アクティブ化されたとき、中断モード特徴は、ＨＭＤ１１２Ｃにおいて、アバター１２０Ａ、１２０Ｂをフリーズさせ（たとえば、静的位置においてアバター１２０Ａ、１２０Ｂをレンダリングし）、（アバター１２０Ａ、１２０Ｂからを含む）人工現実環境１２４から来るすべてのオーディオをミュートし、および／またはアバター１２０Ａ、１２０Ｂの周囲の人工現実環境１２４を中断モード環境と交換することになる。すなわち、ＨＭＤ１１２Ｃは、人工コンテンツ１２２内のアバター１２０Ａ、１２０Ｂを除くあらゆるものを、単色背景を含む中断モード環境と交換することになる。たとえば、ＨＭＤ１１２Ｃは、中断モード環境中にいる間、アバター１２０Ａ、１２０Ｂ以外のすべての仮想オブジェクト１２８を除去（たとえば、表示することを中止）することになる。いくつかの例では、ＨＭＤ１１２Ｃは、アバター１２０Ａ、１２０Ｂから武器またはハンドヘルドオブジェクトを除去することになる。いくつかの例では、ＨＭＤ１１２Ｃは、アバター１２０Ａ、１２０Ｂがユーザ１１０を聴取しないように、マイクロフォンを無効にすることになる。いくつかの例では、ユーザ１１０は、中断モード特徴が有効にされたとき、人工現実環境１２４と相互作用することが可能でないことがある。このようにして、ユーザ１１０Ｃは、ＨＭＤ１１２Ｃを取り外す必要なしに、および、ユーザ１１０Ａ、１１０Ｂが人工現実環境１２４に参加し続けるとき、人工現実環境１２４に対応するデータを受信し続けながら、人工現実環境１２４を休止し得る。ユーザ１１０Ａ、１１０ＢがそれぞれＨＭＤ１１２Ａ、１１２Ｂにおいて人工現実環境１２４に参加し続ける間、人工現実環境１２４に対応するデータを受信し続けることによって、ＨＭＤ１１２Ｃは、中断モード環境から人工現実環境１２４に戻ったときに、処理すべきデータ更新のバックログを有しないことになり、これは、ユーザが、より喜びを与えるユーザ体験のために、データ処理遅延を低減することによって人工現実環境１２４に参加することにより迅速に戻ることを可能にする。

【0049】

いくつかの例では、中断モード特徴は、中断モード特徴が有効にされたとき、１つまたは複数のアバターがユーザから個人空間しきい値内（たとえば、１または２メートル内）にあるとき、ＨＭＤ１１２Ｃにおいて表示された中断モード環境においてユーザ１１０Ｃから離れるように、フリーズされたアバターのうちの１つまたは複数を移動することになる。たとえば、ＨＭＤ１１２Ｃは、中断モード特徴がＨＭＤ１１２Ｃにおいてアクティブ化されたとき、アバター１２０がユーザ１１０Ｃから個人空間しきい値内にあった場合、特定の距離（たとえば、２または３メートル）後ろにアバター１２０Ａを移動することになる。いくつかの例では、ユーザ１１０Ｃは、中断モード環境中にいる間に視野１３０を（たとえば、すべての方向において３６０度）回転させることが可能であり得るが、ユーザ１１０Ｃに対応するアバターは、中断モード環境内のそのアバターの現在のロケーションから移動することができないことになる。いくつかの例では、ユーザ１１０Ｃに対応するアバターは、中断モード環境内の特定の半径（たとえば、３メートル）内で動き回り得る。いくつかの例では、中断モード特徴が有効にされたときにユーザ１１０Ｃからの３６０度の見通し線中にあった、１人または複数の他のユーザのアバターのみが、中断モード環境中にいる間、レンダリングされることになる。たとえば、中断モード特徴が有効にされたときに、人工現実環境１２４中にいる間、遠くに、より高い高度に（たとえば、仮想山頂上にまたは任意の他の仮想オブジェクト上に）、またはより低い高度に（たとえば、仮想溝の底部上に）いるが、依然として、ユーザ１１０Ｃからの３６０度の見通し線から可視であった、他のユーザのためのアバターが、ＨＭＤ１１２Ｃにおいて中断モード環境において表示されることになる。逆に、中断モード特徴が有効にされたときに、仮想壁の後ろにいたまたはさもなければ仮想オブジェクトによって遮られた別のユーザのためのアバターが、中断モード環境においてレンダリングされないことになる。たとえば、ＨＭＤ１１２Ｃは、ＨＭＤ１１２Ｃにおいて中断モード環境内で仮想オブジェクト１２８Ａの後ろに隠れるユーザのアバターを、仮想オブジェクト１２８Ａを除去した後でも、表示しないことになる。いくつかの例では、ＨＭＤ１１２Ｃは、ユーザ１１０Ｃに中断モード環境を表示しながら、周囲音（たとえば、背景音または音楽）を再生することになる。

【0050】

いくつかの例では、ユーザ１１０Ａおよび／または１１０Ｂはまた、それぞれ、ＨＭＤ１１２Ａおよび／または１１２Ｂにおいて中断モード特徴を有効にし得る。たとえば、ユーザ１１０Ａは、中断モード特徴がＨＭＤ１１２Ｃにおいても有効にされるある時間期間中に、ユーザ入力を介してＨＭＤ１１２Ａにおいて中断モード特徴を有効にし得る。その時間期間中に、ＨＭＤ１１２Ｃは、第１の中断モード環境を表示し得、ＨＭＤ１１２Ａは、第１の中断モード環境とは異なる、第２の中断モード環境を表示し得る。たとえば、ユーザ１１Ｃは、第１の中断モード環境においてアバター１２０Ａと相互作用することができないことがあり、ユーザ１１０Ａは、第２の中断モード環境において、ユーザ１１０Ｃに対応するアバターと相互作用することができないことがある。いくつかの例では、アバター１２０Ａは、中断モード特徴がＨＭＤ１１２Ｃにおいて有効にされたときに、中断モード特徴がＨＭＤ１１２Ａにおいて有効にされた場合、ＨＭＤ１１２Ｃによって第１の中断モード環境において表示されないことがあり、その逆も同様である。第１の中断モード環境と第２の中断モード環境とは異なり得るが、第１の中断モード環境と第２の中断モード環境の両方が同じ背景および／または周囲音を含み得る（たとえば、２つの環境が同じに見え、感じられ得る）ことを理解されたい。

【0051】

図２Ａは、本開示の技法に従って動作する例示的なＨＭＤ１１２を示す図である。図２ＡのＨＭＤ１１２は、図１Ａおよび図１ＢのＨＭＤ１１２のいずれかの一例であり得る。ＨＭＤ１１２は、図１Ａ、図１Ｂの人工現実システム１０、２０など、人工現実システムの一部であり得るか、または、本明細書で説明される技法を実装するように構成されたスタンドアロンモバイル人工現実システムとして動作し得る。

【0052】

この例では、ＨＭＤ１１２は、ＨＭＤ１１２をユーザに固定するための前面剛体とバンドとを含む。さらに、ＨＭＤ１１２は、ユーザに人工現実コンテンツを提示するように構成された内向き（ｉｎｔｅｒｉｏｒ－ｆａｃｉｎｇ）電子ディスプレイ２０３を含む。電子ディスプレイ２０３は、液晶ディスプレイ（ＬＣＤ）、量子ドットディスプレイ、ドットマトリックスディスプレイ、発光ダイオード（ＬＥＤ）ディスプレイ、有機発光ダイオード（ＯＬＥＤ）ディスプレイ、陰極線管（ＣＲＴ）ディスプレイ、ｅ－ｉｎｋ、あるいは視覚出力を生成することが可能なモノクロ、カラー、または、任意の他のタイプのディスプレイなど、任意の好適なディスプレイ技術であり得る。いくつかの例では、電子ディスプレイは、ユーザの各眼に別個の画像を提供するための立体視ディスプレイである。いくつかの例では、ＨＭＤ１１２の前面剛体に対するディスプレイ２０３の知られている配向および位置は、ＨＭＤ１１２およびユーザの現在の観察パースペクティブに従って人工現実コンテンツをレンダリングするためにＨＭＤ１１２の位置および配向を追跡するとき、ローカル原点とも呼ばれる基準系として使用される。他の例では、ＨＭＤは、眼鏡またはゴーグルなど、他のウェアラブルヘッドマウントディスプレイの形態をとり得る。

【0053】

図２Ａにさらに示されているように、この例では、ＨＭＤ１１２は、ＨＭＤ１１２の現在の加速度を示すデータを出力する（慣性測定ユニットまたは「ＩＭＵ」とも呼ばれる）１つまたは複数の加速度計、ＨＭＤ１１２のロケーションを示すデータを出力するＧＰＳセンサー、様々なオブジェクトからのＨＭＤ１１２の距離を示すデータを出力するレーダーまたはソナー、あるいは、ＨＭＤ１１２または物理的環境内の他のオブジェクトのロケーションまたは配向の指示を提供する他のセンサーなど、１つまたは複数の動きセンサー２０６をさらに含む。その上、ＨＭＤ１１２は、物理的環境を表す画像データを出力するように構成された、ビデオカメラ、レーザースキャナ、ドップラーレーダースキャナ、深度スキャナなど、統合された撮像デバイス１３８Ａおよび１３８Ｂ（まとめて、「撮像デバイス１３８」）を含み得る。より詳細には、撮像デバイス１３８は、一般にＨＭＤ１１２の観察パースペクティブと対応する、撮像デバイス１３８の視野１３０Ａ、１３０Ｂ内にある、物理的環境中の（手１３２を含む）オブジェクトを表す画像データをキャプチャする。ＨＭＤ１１２は、検知されたデータを処理し、ディスプレイ２０３上に人工現実コンテンツを提示するためのプログラム可能な動作を実行するための動作環境を提供するために、内部電源と、１つまたは複数のプロセッサ、メモリ、およびハードウェアを有する１つまたは複数のプリント回路基板とを含み得る、内部制御ユニット２１０を含む。

【0054】

図２Ｂは、本開示で説明される技法による、別の例示的なＨＭＤ１１２を示す図である。図２Ｂに示されているように、ＨＭＤ１１２は、眼鏡の形態をとり得る。図２ＡのＨＭＤ１１２は、図１Ａおよび図１ＢのＨＭＤ１１２のいずれかの一例であり得る。ＨＭＤ１１２は、図１Ａ、図１Ｂの人工現実システム１０、２０など、人工現実システムの一部であり得るか、または、本明細書で説明される技法を実装するように構成されたスタンドアロンモバイル人工現実システムとして動作し得る。

【0055】

この例では、ＨＭＤ１１２は、ＨＭＤ１１２がユーザの鼻に載っていることを可能にするブリッジと、ＨＭＤ１１２をユーザに固定するためにユーザの耳にわたって延びるテンプル（または「アーム」）とを含む前面フレームを備える眼鏡である。さらに、図２ＢのＨＭＤ１１２は、ユーザに人工現実コンテンツを提示するように構成された内向き電子ディスプレイ２０３Ａおよび２０３Ｂ（まとめて、「電子ディスプレイ２０３」）を含む。電子ディスプレイ２０３は、液晶ディスプレイ（ＬＣＤ）、量子ドットディスプレイ、ドットマトリックスディスプレイ、発光ダイオード（ＬＥＤ）ディスプレイ、有機発光ダイオード（ＯＬＥＤ）ディスプレイ、陰極線管（ＣＲＴ）ディスプレイ、ｅ－ｉｎｋ、あるいは視覚出力を生成することが可能なモノクロ、カラー、または、任意の他のタイプのディスプレイなど、任意の好適なディスプレイ技術であり得る。図２Ｂに示されている例では、電子ディスプレイ２０３は、ユーザの各眼に別個の画像を提供するための立体視ディスプレイを形成する。いくつかの例では、ＨＭＤ１１２の前面フレームに対するディスプレイ２０３の知られている配向および位置は、ＨＭＤ１１２およびユーザの現在の観察パースペクティブに従って人工現実コンテンツをレンダリングするためにＨＭＤ１１２の位置および配向を追跡するとき、ローカル原点とも呼ばれる基準系として使用される。

【0056】

図２Ｂにさらに示されているように、この例では、ＨＭＤ１１２は、ＨＭＤ１１２の現在の加速度を示すデータを出力する（慣性測定ユニットまたは「ＩＭＵ」とも呼ばれる）１つまたは複数の加速度計、ＨＭＤ１１２のロケーションを示すデータを出力するＧＰＳセンサー、様々なオブジェクトからのＨＭＤ１１２の距離を示すデータを出力するレーダーまたはソナー、あるいは、ＨＭＤ１１２または物理的環境内の他のオブジェクトのロケーションまたは配向の指示を提供する他のセンサーなど、１つまたは複数の動きセンサー２０６をさらに含む。その上、ＨＭＤ１１２は、物理的環境を表す画像データを出力するように構成された、ビデオカメラ、レーザースキャナ、ドップラーレーダースキャナ、深度スキャナなど、統合された撮像デバイス１３８Ａおよび１３８Ｂ（まとめて、「撮像デバイス１３８」）を含み得る。ＨＭＤ１１２は、検知されたデータを処理し、ディスプレイ２０３上に人工現実コンテンツを提示するためのプログラム可能な動作を実行するための動作環境を提供するために、内部電源と、１つまたは複数のプロセッサ、メモリ、およびハードウェアを有する１つまたは複数のプリント回路基板とを含み得る、内部制御ユニット２１０を含む。

【0057】

図３は、本開示の技法による、人工現実アプリケーションの実行中に中断モード環境を生成する人工現実システムの、コンソール１０６、人工現実アプリケーションサーバ１０７、およびＨＭＤ１１２の例示的な実装形態を示すブロック図である。図３の例では、コンソール１０６は、稼働し、ＨＭＤ１１２の電子ディスプレイ２０３上での表示のためのコンテンツを出力する人工現実アプリケーションのための、ポーズ追跡、ジェスチャー検出、ならびに生成およびレンダリングを実施する。いくつかの例では、人工現実アプリケーションのためのポーズ追跡、ジェスチャー検出、ならびに／または生成およびレンダリングは、図４を参照しながら以下で説明されるように、ＨＭＤ１１２において実施され得る。

【0058】

この例では、ＨＭＤ１１２は、いくつかの例では、オペレーティングシステム３０５を実行するためのコンピュータプラットフォームを提供する１つまたは複数のプロセッサ３０２とメモリ３０４とを含み、オペレーティングシステム３０５は、たとえば埋込み型リアルタイムマルチタスキングオペレーティングシステム、または他のタイプのオペレーティングシステムであり得る。次に、オペレーティングシステム３０５は、アプリケーションエンジン３４０を含む１つまたは複数のソフトウェア構成要素３０７を実行するためのマルチタスキング動作環境を提供する。図２Ａおよび図２Ｂの例に関して説明されるように、プロセッサ３０２は、電子ディスプレイ２０３と、動きセンサー２０６と、撮像デバイス１３８とに結合される。プロセッサ３０２は、１つまたは複数のＩ／Ｏインターフェース３１９にさらに結合され、１つまたは複数のＩ／Ｏインターフェース３１９は、ディスプレイデバイス、撮像デバイス、他のＨＭＤなど、他のデバイスと通信するためのＩ／Ｏインターフェースを提供する。その上、１つまたは複数のＩ／Ｏインターフェース３１９は、ネットワーク１０４など、ネットワークと通信するための１つまたは複数のワイヤードまたはワイヤレスネットワークインターフェースコントローラ（ＮＩＣ）を含み得る。いくつかの例では、プロセッサ３０２とメモリ３０４とは、別個の、個別構成要素であり得る。他の例では、メモリ３０４は、単一の集積回路内にプロセッサ３０２とコロケートされるオンチップメモリであり得る。

【0059】

概して、コンソール１０６は、ＨＭＤ１１２のためにジェスチャー検出およびユーザインターフェース生成を実施するために、カメラ１０２（図１Ｂ）および／またはＨＭＤ１１２から受信された画像および追跡情報を処理するコンピューティングデバイスである。いくつかの例では、コンソール１０６は、サーバ、ワークステーション、デスクトップコンピュータ、ラップトップ、またはゲーミングシステムなど、単一のコンピューティングデバイスである。いくつかの例では、プロセッサ３１２および／またはメモリ３１４など、コンソール１０６の少なくとも一部分は、クラウドコンピューティングシステムにわたって、データセンターにわたって、あるいは、インターネット、別のパブリックまたはプライベート通信ネットワーク、たとえば、ブロードバンド、セルラー、Ｗｉ－Ｆｉ、および／または、コンピューティングシステムとサーバと（ＨＭＤを含む）コンピューティングデバイスとの間でデータを送信するための、他のタイプの通信ネットワークなど、ネットワークにわたって分散され得る。

【0060】

図３の例では、コンソール１０６は、いくつかの例では、オペレーティングシステム３１６を実行するためのコンピュータプラットフォームを提供する１つまたは複数のプロセッサ３１２とメモリ３１４とを含み、オペレーティングシステム３１６は、たとえば埋込み型リアルタイムマルチタスキングオペレーティングシステム、または他のタイプのオペレーティングシステムであり得る。次に、オペレーティングシステム３１６は、１つまたは複数のソフトウェア構成要素３１７を実行するためのマルチタスキング動作環境を提供する。プロセッサ３１２は、１つまたは複数のＩ／Ｏインターフェース３１５に結合され、１つまたは複数のＩ／Ｏインターフェース３１５は、キーボード、ゲームコントローラ、ディスプレイデバイス、撮像デバイス、ＨＭＤ、入力デバイスなど、デバイスと通信するための１つまたは複数のＩ／Ｏインターフェースを提供する。その上、１つまたは複数のＩ／Ｏインターフェース３１５は、ネットワーク１０４など、ネットワークと通信するための１つまたは複数のワイヤードまたはワイヤレスネットワークインターフェースコントローラ（ＮＩＣ）を含み得る。プロセッサ３０２、３１２の各々は、マルチコアプロセッサ、コントローラ、デジタル信号プロセッサ（ＤＳＰ）、特定用途向け集積回路（ＡＳＩＣ）、フィールドプログラマブルゲートアレイ（ＦＰＧＡ）、あるいは等価な個別論理回路または集積論理回路のうちの任意の１つまたは複数を含み得る。メモリ３０４、３１４は、ランダムアクセスメモリ（ＲＡＭ）、読取り専用メモリ（ＲＯＭ）、プログラマブル読取り専用メモリ（ＰＲＯＭ）、消去可能プログラマブル読取り専用メモリ（ＥＰＲＯＭ）、電子的消去可能プログラマブル読取り専用メモリ（ＥＥＰＲＯＭ）、およびフラッシュメモリなど、データおよび実行可能ソフトウェア命令を記憶するための任意の形式のメモリを含み得る。

【0061】

コンソール１０６のソフトウェアアプリケーション３１７は、アプリケーションエンジン３２０と、レンダリングエンジン３２２と、ジェスチャー検出器３２４と、ポーズトラッカー３２６と、ユーザインターフェースエンジン３２８と、中断モードエンジン３３２人工現実アプリケーションエンジン３３４とを含む。概して、アプリケーションエンジン３２０は、人工現実アプリケーション、たとえば、ソーシャルネットワーキングアプリケーション、遠隔会議アプリケーション、ゲーミングアプリケーション、ナビゲーションアプリケーション、教育アプリケーション、トレーニングまたはシミュレーションアプリケーションなどを提供および提示するための機能性を含む。アプリケーションエンジン３２０は、たとえば、１つまたは複数のソフトウェアパッケージ、ソフトウェアライブラリ、ハードウェアドライバ、および／またはコンソール１０６上に人工現実アプリケーションを実装するためのアプリケーションプログラムインターフェース（ＡＰＩ）を含み得る。アプリケーションエンジン３２０による制御に応答して、レンダリングエンジン３２２は、ＨＭＤ１１２のアプリケーションエンジン３４０によってユーザへの表示のための３Ｄ人工現実コンテンツを生成する。

【0062】

アプリケーションエンジン３２０およびレンダリングエンジン３２２は、ポーズトラッカー３２６によって決定された基準系、一般にＨＭＤ１１２の観察パースペクティブについての現在のポーズ情報に従って、ユーザ１１０への表示のための人工コンテンツを構築する。現在の観察パースペクティブに基づいて、レンダリングエンジン３２２は、いくつかの場合には、少なくとも部分的に、ユーザ１１０の現実世界の３Ｄ環境上にオーバーレイされ得る３Ｄ人工現実コンテンツを構築する。このプロセス中、ポーズトラッカー３２６は、ユーザ１１０による動きおよび／またはユーザ１１０に関する特徴追跡情報など、現実世界環境内の３Ｄ情報をキャプチャするために、移動情報およびユーザコマンドなど、ＨＭＤ１１２から受信された検知されたデータと、いくつかの例では、外部カメラなど、任意の外部センサー９０（図１Ａ、図１Ｂ）からのデータとに対して動作する。検知されたデータに基づいて、ポーズトラッカー３２６は、ＨＭＤ１１２の基準系についての現在のポーズを決定し、現在のポーズに従って、１つまたは複数のＩ／Ｏインターフェース３１５を介して、ユーザ１１０への表示のためのＨＭＤ１１２への通信のための人工現実コンテンツを構築する。いくつかの例では、アプリケーションエンジン３４０は、ＨＭＤ１１２のユーザが、電子デバイス２０３において表示される人工コンテンツの画像データをキャプチャすることを可能にする。

【0063】

撮像デバイス１３８または１０２、あるいは他のセンサーデバイスのいずれかからの検知されたデータに基づいて、ジェスチャー検出器３２４は、ユーザ１１０によって実施された１つまたは複数のジェスチャーを識別するために、ＨＭＤ１１２、および／またはユーザの物理的オブジェクト（たとえば、手、腕、手首、フィンガー、手のひら、親指）の追跡された動き、構成、位置、および／または配向を分析する。より詳細には、ジェスチャー検出器３２４は、ＨＭＤ１１２の撮像デバイス１３８ならびに／またはセンサー９０および外部カメラ１０２によってキャプチャされた画像データ内で認識されたオブジェクトを分析して、ユーザ１１０の手および／または腕を識別し、ＨＭＤ１１２に対する手および／または腕の移動を追跡して、ユーザ１１０によって実施されたジェスチャーを識別する。ジェスチャー検出器３２４は、キャプチャされた画像データに基づいて、腕、手、および／または指の位置および配向の変化を含む移動を追跡し、オブジェクトの動きベクトルをジェスチャーライブラリ３３０中の１つまたは複数のエントリと比較して、ユーザ１１０によって実施されたジェスチャーまたはジェスチャーの組合せを検出し得る。

【0064】

ジェスチャーライブラリ３３０中のいくつかのエントリが、各々、ユーザの手、特定のフィンガー、親指、手首および／または腕の相対経路または空間的な並進運動および回転など、一連の動きまたは動きのパターンとしてジェスチャーを定義し得る。ジェスチャーライブラリ３３０中のいくつかのエントリは、各々、特定の時間における、またはある時間期間にわたる、ユーザの手および／または腕（またはそれらの部分）の構成、位置、および／または配向としてジェスチャーを定義し得る。ジェスチャーのタイプの他の例が可能である。さらに、ジェスチャーライブラリ３３０中のエントリの各々が、定義されたジェスチャーまたは一連のジェスチャーについて、個人のリアルタイム視線追跡、表示されている人工コンテンツのタイプ、実行されているアプリケーションのタイプなどによって決定され得るような、ＨＭＤ１１２の現在の視野に対する空間関係、ユーザによって現在観測されている特定の区域に対する空間関係など、ジェスチャーまたは一連のジェスチャーがアクションをトリガするために必要とされる条件を指定し得る。

【0065】

ジェスチャーライブラリ３３０中のエントリの各々は、定義されたジェスチャーまたはジェスチャーの組合せ／一連のジェスチャーの各々について、ソフトウェアアプリケーション３１７によって実施されるべき所望の応答またはアクションをさらに指定し得る。たとえば、本開示の技法によれば、いくつかの特殊なジェスチャーがあらかじめ定義され得、したがって、あらかじめ定義されたジェスチャーのうちの１つを検出したことに応答して、アプリケーションエンジン３４０は、（たとえば、図１Ａ、図１Ｂに示されているように）人工現実アプリケーションの人工現実環境１２４の仮想コンテンツへのオーバーレイとしての、ユーザ１１０への表示のための、中断モードＵＩ要素１４２を含むＵＩメニュー１４０を生成し得る。ＵＩメニュー１４０を生成するためのこれらのあらかじめ定義されたジェスチャーは、（たとえば、ユーザが腕時計または他のウェアラブルデバイスを見ることと同様の）ユーザの手の内側手首領域（または任意の領域）をＨＭＤ１１２の現在の視野に移動することを含み得る。他のジェスチャーは、ＨＭＤ１１２のユーザのアバターの仮想手の１つまたは複数のフィンガーが人工現実環境においてＵＩ要素と接触するように、ＵＩ要素に対応する物理的ロケーションの近くの、ユーザの手の１つまたは複数のフィンガーの配置を含む選択ジェスチャーを含み得る。

【0066】

ジェスチャー検出器３２４が中断モードＵＩ要素１４２に対する選択ジェスチャーを検出したことに応答して、中断モードエンジン３３２は、人工現実アプリケーションの実行中にＨＭＤ１１２において中断モード特徴を有効にし得る。たとえば、中断モードエンジン３３２は、人工現実環境１２４を中断モード環境と交換し、人工現実環境１２４から来るすべてのオーディオをミュートし、および／またはＨＭＤ１１２における静的ポーズ（たとえば、位置および配向）において人工現実環境からの任意の１つまたは複数のアバターをレンダリングすることになる。いくつかの例では、中断モード環境は単色背景を含む。いくつかの例では、中断モードエンジン３３２は、中断モード特徴が有効にされたとき、１つまたは複数のアバターがユーザから個人空間しきい値内（たとえば、１または２メートル内）にあるとき、ＨＭＤ１１２の電子ディスプレイ２０３において表示された中断モード環境においてユーザから離れるように、フリーズされたアバターのうちの１つまたは複数を移動することになる。いくつかの例では、中断モードエンジン３３２は、ＨＭＤ１１２の電子ディスプレイ２０３において中断モード環境を表示しながら、周囲音（たとえば、背景音または音楽）を再生することになる。いくつかの例では、中断モードエンジン３３２は、ＨＭＤ１１２のユーザが、電子デバイス２０３において表示される人工コンテンツの画像データをキャプチャする能力を無効にする。たとえば、ＨＭＤ１１２のユーザは、中断モード環境において、レンダリングされたアバターの画像データをキャプチャすることができないことになる。いくつかの例では、中断モードエンジン３３２は、人工現実環境中の他のユーザがＨＭＤ１１２のユーザを聴取することができないように、ＨＭＤ１１２のマイクロフォンを無効にするか、またはＨＭＤ１１２から他のユーザにオーディオを送信することを中止する。

【0067】

いくつかの例では、中断モードエンジン３３２は、ＨＭＤ１１２のユーザが、中断モード環境からの別のユーザに対応するレンダリングされたアバターを選択することと、そのアバター／ユーザに対応する１つまたは複数の動作を実施することとを可能にする。たとえば、ＨＭＤ１１２のユーザは、アバターを選択し、対応するユーザのプロファイルを観察するか、あるいはそのユーザと友達になるか、そのユーザにメッセージするか、そのユーザをブロックするか、またはそのユーザを報告し得る。いくつかの例では、中断モードエンジン３３２は、ＨＭＤ１１２においてユーザ１１０に提示されたユーザインターフェース上のユーザ入力に基づいて、プロファイルを取得するか、ユーザと友達になるか、ユーザにメッセージするか、ユーザをミュートするか、ユーザをブロックするか、またはユーザを報告するための、人工現実アプリケーションサーバ１０７によって実施されるべきである命令を策定し得る。

【0068】

この例では、ＨＭＤ１１２およびコンソール１０６は、（たとえば、ネットワーク１０４を介して）人工現実アプリケーションサーバ１０７と通信しているものとして示されており、人工現実アプリケーションサーバ１０７は、コンソール１０６および／またはＨＭＤ１１２上で実行する人工現実アプリケーションのためのバックエンドネットワーク動作を実施する。図３に示されているように、人工現実アプリケーションサーバ１０７は、人工現実アプリケーションエンジン３３４と（１つまたは複数の）Ｉ／Ｏインターフェース３３６と含み得る。人工現実アプリケーションサーバは、１つまたは複数のプロセッサ、メモリ、オペレーティングシステムなど、さらなるハードウェアおよびソフトウェア構成要素を含み得る。これらの他の構成要素は簡単のために示されていない。

【0069】

人工現実アプリケーションエンジン３３４は、ユーザ間の関係（たとえば、交友関係）を管理すること、ユーザについてのプロファイルを維持すること、１人または複数のユーザとゲームを協調させること（たとえば、ゲームにおいて１人または複数のユーザを配置すること、スコアを維持すること）、あるいはコンソール１０６および／またはＨＭＤ１１２上で人工現実アプリケーションを実行するための任意の他のネットワークエンド動作を実施することを行い得る。たとえば、人工現実アプリケーションエンジン３３４は、ＨＭＤ１１２および／またはコンソール１０６から受信されたユーザ入力に応答して、特定のユーザのプロファイルを取得すること、あるいはユーザと友達になるか、ユーザにメッセージするか、ユーザをブロックするか、またはユーザを報告することを行うための機能性を含み得る。いくつかの例では、人工現実アプリケーションエンジン３３４は、ネットワークレベルにおけるプロファイル動作、友達になる動作、メッセージする動作、ブロックする動作、および／または報告する動作を実装するための、１つまたは複数のソフトウェアパッケージ、ソフトウェアライブラリ、ハードウェアドライバ、および／またはアプリケーションプログラムインターフェース（ＡＰＩ）を含み得る。

【0070】

人工現実アプリケーションエンジン３３４は、（１つまたは複数の）Ｉ／Ｏインターフェース３３６を介して、ユーザプロファイルを含んでいる１つまたは複数のデータベース（図示せず）にアクセスし得る。これらのユーザプロファイルは、各々、特定のユーザに関する１つまたは複数のピクチャおよび／または情報を含み得る。たとえば、ＨＭＤ１１２のユーザが別のユーザをブロックした場合、別のユーザは、人工現実環境において（または任意の他の人工現実環境またはアプリケーションにおいて）ＨＭＤ１１２のユーザを見るか、またはさもなければＨＭＤ１１２のユーザと相互作用すること（その逆も同様である）、ネットワーク上でＨＭＤ１１２のユーザを検索すること、人工現実アプリケーションサーバ１０７を介してＨＭＤ１１２のユーザにメッセージするか、またはＨＭＤ１１２のユーザと友達になることができないことになる。いくつかの例では、人工現実アプリケーションエンジン３３４は、その２人のユーザが後に同じ人工現実環境または人工現実アプリケーション中に（たとえば、同じゲーム中に）配置されるのを防ぎ得る。いくつかの例では、ＨＭＤ１１２のユーザは、現在の人工現実アプリケーションの完了（たとえば、ゲームの完了）後に、またはユーザが人工現実環境を出たときに、直ちに別のユーザをブロックすべきかどうかを示し得る。いくつかの例では、ＨＭＤ１１２のユーザは、人工現実環境内で別のユーザをミュートし、ＨＭＤ１１２のユーザが人工現実環境を出るときにその別のユーザをブロックする（たとえば、現在のゲーム中に別のユーザをミュートし、ゲームが終了すると別のユーザをブロックする）ことを示し得る。いくつかの例では、ブロックされたユーザは、人工現実環境においてユーザおよび／またはユーザのアバターを見るか、聴取するか、あるいはさもなければユーザおよび／またはユーザのアバターと相互作用することができないことになる。ＨＭＤ１１２のユーザが別のユーザをミュートした場合、ＨＭＤ１１２のユーザは、ＨＭＤ１１２のユーザが人工現実環境に戻ったとき、その別のユーザから来るオーディオを聴取することができないことになる。たとえば、中断モードエンジン３３２は、ＨＭＤ１１２においてその別のユーザから来るオーディオをミュートすることになる。ＨＭＤ１１２のユーザが別のユーザを報告した場合、人工現実アプリケーションエンジン３３４は、人工現実環境またはアプリケーションに関連付けられたレビューエンティティによるレビューのために、そのユーザにフラグを付けることになる。いくつかの例では、人工現実アプリケーションエンジン３３４は、レビューのために、人工現実環境内での、ＨＭＤ１１２のユーザと別のユーザとの間の相互作用を記録し得る。

【0071】

いくつかの例では、コンソール１０６および／またはＨＭＤ１１２は、中断モード特徴がＨＭＤ１１２において有効にされる間、Ｉ／Ｏインターフェース３１５および／または３１９を介して、（たとえば、他のＨＭＤ、コンソール、および／または人工現実アプリケーションサーバ１０７から）人工現実環境に対応するデータ（たとえば、ゲームデータ、位置データ）を受信し続ける。たとえば、コンソール１０６および／またはＨＭＤ１１２は、中断モード環境中の１つまたは複数のアバターの位置が更新されなくても、人工現実環境に参加し続けている１つまたは複数のアバターについての位置情報を受信し続け得る。このようにして、ＨＭＤ１１２のユーザは、他のユーザが人工現実環境に参加し続ける間、人工現実環境を休止し得る。人工現実環境に対応するデータを受信し続けることによって、ＨＭＤ１１２および／またはコンソール１０６は、ＨＭＤ１１２のユーザが中断モード環境から人工現実環境に戻ったときに、処理すべきデータ更新のバックログを有しないことになり、これは、ＨＭＤ１１２のユーザが、より喜びを与えるユーザ体験のために、データ処理遅延を低減することによって人工現実環境１２４に参加することをより迅速に再開することを可能にする。

【0072】

図４は、本開示の技法による、人工現実アプリケーションの実行中に中断モード環境を生成する人工現実システムの、例示的なＨＭＤ１１２、および人工現実アプリケーションサーバを示すブロック図である。

【0073】

この例では、図３と同様に、ＨＭＤ１１２は、いくつかの例では、オペレーティングシステム３０５を実行するためのコンピュータプラットフォームを提供する１つまたは複数のプロセッサ３０２とメモリ３０４とを含み、オペレーティングシステム３０５は、たとえば埋込み型リアルタイムマルチタスキングオペレーティングシステム、または他のタイプのオペレーティングシステムであり得る。次に、オペレーティングシステム３０５は、１つまたは複数のソフトウェア構成要素４１７を実行するためのマルチタスキング動作環境を提供する。その上、（１つまたは複数の）プロセッサ３０２は、電子ディスプレイ２０３と、動きセンサー２０６と、Ｉ／Ｏインターフェース３１９と、撮像デバイス１３８とに結合される。

【0074】

図４の例では、ソフトウェア構成要素４１７は、アプリケーションエンジン４４０と、レンダリングエンジン４２２と、ジェスチャー検出器４２４と、ポーズトラッカー４２６と、インターフェースエンジン４２８と、中断モードエンジン４３２とを含む。様々な例では、ソフトウェア構成要素４１７は、図３のコンソール１０６のカウンターパート構成要素（たとえば、アプリケーションエンジン３４０、レンダリングエンジン３２２、ジェスチャー検出器３２４、ポーズトラッカー３２６、ユーザインターフェースエンジン３２８、および中断モードエンジン３３２）と同様に動作する。いくつかの例では、レンダリングエンジン４２２は、ユーザ１１０の現実世界の物理的環境上に少なくとも部分的にオーバーレイされ得る３Ｄ人工現実コンテンツを構築する。

【0075】

図３に関して説明される例と同様に、アプリケーションエンジン４４０およびレンダリングエンジン４２２は、ポーズトラッカー４２６によって決定された基準系、一般にＨＭＤ１１２の観察パースペクティブについての現在のポーズ情報に従って、ユーザ１１０への表示のための人工コンテンツを構築する。検知されたデータに基づいて、ポーズトラッカー４２６は、ＨＭＤ１１２の基準系についての現在のポーズを決定し、現在のポーズに従って、ユーザ１１０への表示のための人工現実コンテンツを構築する。

【0076】

さらに、検知されたデータに基づいて、ジェスチャー検出器４２４は、ユーザ１１０によって実施された１つまたは複数のジェスチャーを識別するために、ユーザのオブジェクト（たとえば、手、腕、手首、フィンガー、手のひら、親指）の追跡された動き、構成、位置、および／または配向を分析する。ジェスチャー検出器４２４は、キャプチャされた画像データに基づいて、手、指、および／または腕の位置および配向の変化を含む移動を追跡し、オブジェクトの動きベクトルをジェスチャーライブラリ４３０中の１つまたは複数のエントリと比較して、ユーザ１１０によって実施されたジェスチャーまたはジェスチャーの組合せを検出し得る。ジェスチャーライブラリ４３０は、図３のジェスチャーライブラリ３３０と同様である。

【0077】

ジェスチャー検出器４２４がＵＩアクティブ化ジェスチャーを検出したことに基づいて、アプリケーションエンジン４４０は、（たとえば、図１Ａ、図１Ｂ、図３を参照しながら上記で説明されたように）人工現実アプリケーションの人工現実環境１２４の仮想コンテンツへのオーバーレイとしての、ユーザ１１０への表示のための、中断モードＵＩ要素１４２を含むＵＩメニュー１４０を生成し得る。ジェスチャー検出器は、次いで、中断モードＵＩ要素１４２に対する選択ジェスチャーを検出し得、中断モードエンジン４３２は、応答して、図３を参照しながら上記で説明されたように、人工現実アプリケーションの人工現実環境を中断モード環境と交換し、人工現実環境から来るすべてのオーディオをミュートし、および／または静的位置において人工現実環境からの任意の１つまたは複数のアバターをレンダリングし得る。中断モードエンジン４３２は、さらに、図３を参照しながら上記で説明されたように、ＨＭＤ１１２のユーザが、中断モード環境からの別のユーザに対応するフリーズされたアバターを選択し、ＨＭＤ１１２において、対応するユーザのプロファイルを観察すること、あるいは、そのユーザと友達になること、そのユーザにメッセージすること、そのユーザをブロックすること、またはそのユーザを報告することを含む、１つまたは複数の動作を実施することを可能にし得る。いくつかの例では、人工現実アプリケーションサーバ１０７は、図３を参照しながら上記で説明されたように、ユーザのプロファイルを取得するための、あるいはユーザと友達になるか、ユーザにメッセージするか、ユーザをブロックするか、またはユーザを報告するための、人工現実アプリケーションバックエンドネットワー機能性を実装する。いくつかの例では、中断モードエンジン４３２は、図３を参照しながら上記で説明されたように、ＨＭＤ１１２において別のユーザをミュートするための機能性を実装する。

【0078】

図５は、１つまたは複数のデバイスが、各デバイス内の１つまたは複数のＳｏＣ集積回路を使用して実装される、マルチデバイス人工現実システムのための分散アーキテクチャのより詳細な例示的な実装形態を示すブロック図である。いくつかの例では、人工現実システムは、ＨＭＤ１１２とともに動作する周辺デバイス５０２を含む。この例では、周辺デバイス５０２は、人工現実システムが仮想コンテンツをその上にオーバーレイする表面を有する物理的な現実世界のデバイスである。周辺デバイス５０２は、プレゼンスセンシティブ表面のロケーションにタッチするかまたはそのロケーション上をホバリングする１つまたは複数のオブジェクト（たとえば、フィンガー、スタイラス）の存在を検出することによってユーザ入力を検出するための１つまたは複数のプレゼンスセンシティブ表面を含み得る。いくつかの例では、周辺デバイス５０２は、プレゼンスセンシティブディスプレイであり得る、出力ディスプレイを含み得る。いくつかの例では、周辺デバイス５０２は、スマートフォン、タブレットコンピュータ、個人情報端末（ＰＤＡ）、または他のハンドヘルドデバイスであり得る。いくつかの例では、周辺デバイス５０２は、スマートウォッチ、スマートリング、または他のウェアラブルデバイスであり得る。周辺デバイス５０２はまた、キオスクあるいは他の固定または移動システムの一部であり得る。周辺デバイス５０２は、スクリーンにコンテンツを出力するためのディスプレイデバイスを含むことも含まないこともある。

【0079】

概して、図５に示されているＳｏＣは、各ＳｏＣ集積回路が人工現実アプリケーションのための動作環境を提供するように構成された様々な特殊な機能ブロックを含む分散アーキテクチャにおいて配列された特殊な集積回路の集合を表す。図５は、ＳｏＣ集積回路の１つの例示的な配列にすぎない。マルチデバイス人工現実システムのための分散アーキテクチャは、ＳｏＣ集積回路の任意の集合および／または配列を含み得る。

【0080】

この例では、ＨＭＤ１１２のＳｏＣ５３０Ａは、追跡５７０と、暗号化／解読５８０と、コプロセッサ５８２と、セキュリティプロセッサ５８３と、インターフェース５８４とを含む機能ブロックを備える。追跡５７０は、眼追跡５７２（「眼５７２」）、手追跡５７４（「手５７４」）、深度追跡５７６（「深度５７６」）、ならびに／または同時位置特定およびマッピング（ＳＬＡＭ）５７８（「ＳＬＡＭ５７８」）のための機能ブロックを提供する。たとえば、ＨＭＤ１１２は、ＨＭＤ１１２の現在の加速度を示すデータを出力する（慣性測定ユニットまたは「ＩＭＵ」とも呼ばれる）１つまたは複数の加速度計、ＨＭＤ１１２のロケーションを示すデータを出力するＧＰＳセンサー、様々なオブジェクトからのＨＭＤ１１２の距離を示すデータを出力するレーダーまたはソナー、あるいは、ＨＭＤ１１２または物理的環境内の他のオブジェクトのロケーションまたは配向の指示を提供する他のセンサーから、入力を受信し得る。ＨＭＤ１１２はまた、１つまたは複数の撮像デバイス５８８Ａ～５８８Ｎ（まとめて、「撮像デバイス５８８」）から画像データを受信し得る。撮像デバイスは、物理的環境を表す画像データを出力するように構成された、ビデオカメラ、レーザースキャナ、ドップラーレーダースキャナ、深度スキャナなどを含み得る。より詳細には、撮像デバイスは、一般にＨＭＤ１１２の観察パースペクティブと対応する、撮像デバイスの視野内にある、物理的環境中の（周辺デバイス５０２および／または手を含む）オブジェクトを表す画像データをキャプチャする。検知されたデータおよび／または画像データに基づいて、追跡５７０は、たとえば、ＨＭＤ１１２の基準系についての現在のポーズを決定し、現在のポーズに従って、人工現実コンテンツをレンダリングする。

【0081】

暗号化／解読５８０は、周辺デバイス５０２またはセキュリティサーバに通信される発信データを暗号化し、周辺デバイス５０２またはセキュリティサーバから通信された着信データを解読するための機能ブロックである。暗号化／解読５８０は、セッション鍵（たとえば、秘密対称鍵）でデータを暗号化／解読するために対称鍵暗号法をサポートし得る。

【0082】

コアプリケーションプロセッサ５８２は、ビデオ処理ユニット、グラフィックス処理ユニット、デジタル信号プロセッサ、エンコーダおよび／またはデコーダ、ならびに／あるいは他のものなど、様々なプロセッサを含む。本開示で説明される技法によれば、バックエンドシェルのすべてまたは部分が、ハードウェアで、ソフトウェアで、またはハードウェアとソフトウェアとの組合せのものであり得る。たとえば、コンカレントアプリケーションエンジンのバックエンドシェルがコアプリケーションプロセッサ５８２上で実行され得る。複数の人工現実アプリケーションがコアプリケーションプロセッサ５８２上でコンカレントに実行され得る。

【0083】

セキュリティプロセッサ５８３は、ＡＲ環境内で連携して使用されるデバイス、たとえば、周辺デバイス６０６とペアリングするとき、ＨＭＤ１１２のセキュアデバイス構成証明および相互認証を提供する。セキュリティプロセッサ５８３は、ＨＭＤ１１２のＳｏＣ５３０Ａ～５３０Ｃを認証し得る。

【0084】

インターフェース５８４は、ＳｏＣ５３０Ａの機能ブロックに接続するための１つまたは複数のインターフェースを含む機能ブロックである。一例として、インターフェース５８４は、周辺構成要素相互接続エクスプレス（ＰＣＩｅ）スロットを含み得る。ＳｏＣ５３０Ａは、インターフェース５８４を使用してＳｏＣ５３０Ｂ、５３０Ｃと接続し得る。ＳｏＣ５３０Ａは、他のデバイス、たとえば、周辺デバイス１３６と通信するためにインターフェース５８４を使用して通信デバイス（たとえば、無線送信機）と接続し得る。

【0085】

ＳｏＣ５３０Ｂおよび５３０Ｃは、各々、それぞれのディスプレイ、たとえば、ディスプレイ５８６Ａ、５８６Ｂ（まとめて、「ディスプレイ５８６」）上で人工現実コンテンツを出力するためのディスプレイコントローラを表す。この例では、ＳｏＣ５３０Ｂは、ユーザの左眼５８７Ａのための人工現実コンテンツを出力するための、ディスプレイ５５８Ａのためのディスプレイコントローラを含み得る。たとえば、ＳｏＣ５３０Ｂは、ディスプレイ５８６Ａ上で人工現実コンテンツを出力するための解読ブロック５９２Ａ、デコーダブロック５９４Ａ、ディスプレイコントローラ５９６Ａ、および／またはピクセルドライバ５９８Ａを含む。同様に、ＳｏＣ５３０Ｃは、ユーザの右眼５８７Ｂのための人工現実コンテンツを出力するための、ディスプレイ５５８Ｂのためのディスプレイコントローラを含み得る。たとえば、ＳｏＣ５３０Ｃは、人工現実コンテンツを生成し、ディスプレイ５８６Ｂ上で出力するための、解読５９２Ｂ、デコーダ５９４Ｂ、ディスプレイコントローラ５９６Ｂ、および／またはピクセルドライバ５９８Ｂを含む。ディスプレイ５５８は、ＡＲコンテンツを表示するための発光ダイオード（ＬＥＤ）ディスプレイ、有機ＬＥＤ（ＯＬＥＤ）、量子ドットＬＥＤ（ＱＬＥＤ）、電子ペーパー（Ｅ－ｉｎｋ）ディスプレイ、液晶ディスプレイ（ＬＣＤ）、または他のタイプのディスプレイを含み得る。

【0086】

周辺デバイス５０２は、人工現実アプリケーションをサポートするように構成されたＳｏＣ５１０Ａおよび５１０Ｂを含む。この例では、ＳｏＣ５１０Ａは、追跡５４０と、暗号化／解読５５０と、ディスプレイプロセッサ５５２と、インターフェース５５４と、セキュリティプロセッサ５５６とを含む機能ブロックを備える。追跡５４０は、眼追跡５４２（「眼５４２」）、手追跡５４４（「手５４４」）、深度追跡５４６（「深度５４６」）、ならびに／または同時位置特定およびマッピング（ＳＬＡＭ）５４８（「ＳＬＡＭ５４８」）を提供する機能ブロックである。たとえば、周辺デバイス５０２は、周辺デバイス５０２の現在の加速度を示すデータを出力する（慣性測定ユニットまたは「ＩＭＵ」とも呼ばれる）１つまたは複数の加速度計、周辺デバイス５０２のロケーションを示すデータを出力するＧＰＳセンサー、様々なオブジェクトからの周辺デバイス５０２の距離を示すデータを出力するレーダーまたはソナー、あるいは、周辺デバイス５０２または物理的環境内の他のオブジェクトのロケーションまたは配向の指示を提供する他のセンサーから、入力を受信し得る。周辺デバイス５０２は、いくつかの例では、物理的環境を表す画像データを出力するように構成された、ビデオカメラ、レーザースキャナ、ドップラーレーダースキャナ、深度スキャナなど、１つまたは複数の撮像デバイスから画像データをも受信し得る。検知されたデータおよび／または画像データに基づいて、追跡ブロック５４０は、たとえば、周辺デバイス５０２の基準系についての現在のポーズを決定し、現在のポーズに従って、ＨＭＤ１１２に人工現実コンテンツをレンダリングする。

【0087】

暗号化／解読５５０は、ＨＭＤ１１２またはセキュリティサーバに通信される発信データを暗号化し、ＨＭＤ１１２またはセキュリティサーバから通信された着信データを解読する。暗号化／解読５５０は、セッション鍵（たとえば、秘密対称鍵）を使用してデータを暗号化／解読するために対称鍵暗号法をサポートし得る。

【0088】

ディスプレイプロセッサ５５２は、ＨＭＤ１１２に人工現実コンテンツをレンダリングするための、ビデオ処理ユニット、グラフィックス処理ユニット、エンコーダおよび／またはデコーダ、ならびに／あるいは他のものなど、１つまたは複数のプロセッサを含む。

【0089】

インターフェース５５４は、ＳｏＣ５１０Ａの機能ブロックに接続するための１つまたは複数のインターフェースを含む。一例として、インターフェース５８４は、周辺構成要素相互接続エクスプレス（ＰＣＩｅ）スロットを含み得る。ＳｏＣ５１０Ａは、インターフェース５８４を使用してＳｏＣ５１０Ｂと接続し得る。ＳｏＣ５１０Ａは、他のデバイス、たとえば、ＨＭＤ１１２と通信するためにインターフェース５８４を使用して１つまたは複数の通信デバイス（たとえば、無線送信機）と接続し得る。

【0090】

図５の例に関して説明されるように、セキュリティプロセッサ５５６は、ＡＲ環境内で連携して使用されるデバイス、たとえば、ＨＭＤ１１２とペアリングするとき、周辺デバイス５０２のセキュアデバイス構成証明および相互認証を提供する。セキュリティプロセッサ５５６は、周辺デバイス５０２のＳｏＣ５１０Ａ、５１０Ｂを認証し得る。

【0091】

ＳｏＣ５１０Ｂは、コアプリケーションプロセッサ５６０とアプリケーションプロセッサ５６２とを含む。この例では、コアプリケーションプロセッサ５６０は、視覚処理ユニット（ＶＰＵ）、グラフィックス処理ユニット（ＧＰＵ）、および／または中央処理ユニット（ＣＰＵ）など、様々なプロセッサを含む。アプリケーションプロセッサ５６２は、たとえば、仮想ユーザインターフェースを生成し、周辺デバイス５０２の表面にレンダリングするための、および／または周辺デバイス５０２に関してユーザによって実施されたジェスチャーを検出するための、１つまたは複数の人工現実アプリケーションを実行するための処理ユニットを含み得る。

【0092】

図６は、本開示の態様による、人工現実システム（たとえば、図１Ａ、図１Ｂの人工現実システム１０、２０）のための中断モード環境を有効にするための例示的な動作を示すフローチャート６００である。例および説明の目的で、図６の方法がＨＭＤ１１２に関して説明される。ただし、コンソール１０６が、この方法の動作のうちの１つまたは複数を実施し得ることを理解されたい。

【0093】

最初に、ＨＭＤ１１２は、ユーザに人工現実コンテンツを出力する（６０２）。たとえば、ＨＭＤ１１２は、ソーシャルネットワーキングアプリケーション、遠隔会議アプリケーション、ゲーミングアプリケーション、ナビゲーションアプリケーション、教育アプリケーション、トレーニングまたはシミュレーションアプリケーションなど、人工現実アプリケーションの人工現実環境を出力し得る。人工現実コンテンツは、人工現実環境に参加する他のＨＭＤの１人または複数の他のユーザに対応する１つまたは複数のアバターを含み得る。次に、ＨＭＤ１１２は、（たとえば、図１Ａ、図１Ｂ、図７に示されているように）ユーザがユーザの手の内側手首領域（または任意の領域）をＨＭＤ１１２の視野に移動することを含むＵＩアクティブ化ジェスチャーを検出し得、ＨＭＤ１１２は、部分的に、ユーザの手に対応する仮想手の（１つまたは複数の）任意の表面上で、またはその近くでＵＩメニューを出力することになる（６０４）。ＵＩメニューは、図１Ａ、図１Ｂを参照しながら上記で説明されたように、中断モードＵＩ要素および／または個人ＵＩ要素を含み得る。

【0094】

次に、ＨＭＤ１１２は、ＵＩメニュー内の中断モードＵＩ要素の中断モード選択ジェスチャーを検出し得る（６０６）。たとえば、中断モード選択ジェスチャーは、対応するＵＩ要素上のまたはその近くの（たとえば、中断モードＵＩ要素がレンダリングされた物理的表面上の、または中断モードＵＩ要素がレンダリングされた場所に対応する物理的ロケーションの近くの）、ユーザの１つまたは複数のフィンガー（物理的または仮想）の配置を含み得る。中断モード選択ジェスチャーを検出したことに応答して、ＨＭＤ１１２は、１つまたは複数の他のアバターをフリーズすること（たとえば、静的位置において１つまたは複数のアバターをレンダリングすること）とＨＭＤ１１２において中断モード環境を出力することとを含めて、中断モードを有効にする（６０８）。いくつかの例では、１人または複数のユーザは、中断モードがＨＭＤ１１２において有効にされる間、人工現実環境に参加し続け得る。いくつかの例では、ＨＭＤ１１２は、人工環境中の１つまたは複数のアバターについてのゲームステータス（たとえば、スコア、残寿命）情報および／またはロケーション情報を含む、人工現実環境に対応するデータを受信し続け得るが、ＨＭＤ１１２のユーザは、中断モード環境から人工現実環境に参加しないことがある。ＨＭＤ１１２は、（たとえば、中断モード環境内で更新を表示することなしに）このデータを背景で処理し得る。

【0095】

ＨＭＤ１１２は、次いで、ユーザが中断モードを出ることを望むかどうかを決定することになる（６１０）。たとえば、ＨＭＤ１１２は、ユーザが中断モード環境内でＵＩ要素を選択したかどうかを決定し得る。ユーザが中断モードを出ることを望まない（６１０のいいえ分岐）と決定したことに応答して、ＨＭＤ１１２は、中断モードのままである（たとえば、６０８に戻る）ことになる。ユーザが中断モードを出ることを望む（６１０のはい分岐）と決定したことに応答して、ＨＭＤ１１２は、ＨＭＤ１１２のユーザに、人工現実環境を含む人工現実コンテンツを出力する（たとえば、６０２に戻る）ことになる。ＨＭＤ１１２は、人工現実環境に対応するデータを受信し、処理し続けたので、ＨＭＤ１１２は、ＨＭＤ１１２が、処理すべきデータのバックログを有しないことになるので、中断モード環境から人工現実環境により迅速にユーザを戻し得る。このようにして、中断モード環境と人工現実環境との間の遷移は急（ｓｈａｒｐ）（たとえば、瞬時またはさもなければ迅速）であり得る。いくつかの例では、ＨＭＤ１１２は、中断モード環境と人工現実環境との間で遷移するときにフェージング効果をレンダリングし得る。

【0096】

図７は、本開示の態様による、人工現実システム（たとえば、図１Ａ、図１Ｂの人工現実システム１０、２０）のための中断モード環境内での例示的な動作を示すフローチャート７００である。例および説明の目的で、図７の方法がＨＭＤ１１２に関して説明される。ただし、コンソール１０６が、この方法の動作のうちの１つまたは複数を実施し得ることを理解されたい。たとえば、フローチャート７００は、ＨＭＤ１１２において中断モード特徴を有効にするために中断モードエンジン３３２または４３２によって実施される機能（たとえば、図６のフローチャート６００のステップ６０８）の一例である。

【0097】

ＨＭＤ１１２は、人工現実アプリケーションの人工現実環境を中断モード環境と交換する（７０２）。たとえば、ＨＭＤ１１２は、ＨＭＤ１１２においてレンダリングされた人工現実コンテンツを単色背景と交換し得る。これは、人工現実環境中にあった構造、地面／床、（武器などのハンドヘルドオブジェクトを含む）オブジェクトなどを表示することを中止することを含み得る。たとえば、中断モードが有効にされたときにアバターがテーブル上に立っていた場合、テーブルは、中断モード環境において表示されないことになり、そのアバターは、中断モード環境において浮動しているように見え得る。いくつかの例では、中断モード環境の背景が、（たとえば、（１つまたは複数の）他の色に、他の画像に、または１つまたは複数のパター（ｐａｔｔｅｒ）を含むように）ＨＭＤ１１２のユーザによって変更され得る。

【0098】

ＨＭＤ１１２はまた、ＨＭＤ１１２において人工現実環境からのオーディオをミュートすることになる（７０４）。たとえば、ＨＭＤ１１２は、音楽、１つまたは複数のアバターからの音声または他の雑音、背景雑音などをミュートすることになる。いくつかの例では、ＨＭＤ１１２は、中断モード環境に対応する周囲音（たとえば、背景音、音楽、または白色雑音）を再生し得る。たとえば、ＨＭＤ１１２は、自然からの音（たとえば、ビーチに打ち寄せる波）、リラックスさせる音楽、または他の音を再生し得る。いくつかの例では、中断モード環境において再生される周囲音は、（たとえば、他の音楽または音に）ＨＭＤ１１２のユーザによって変更され得る。いくつかの例では、ＨＭＤ１１２は、人工現実環境中の他のユーザがＨＭＤ１１２のユーザを聴取することができないように、ＨＭＤ１１２のマイクロフォンを無効にするか、あるいは他のユーザまたはデバイス（たとえば、他のＨＭＤ、コンソール１０６）にオーディオを送信することを中止する。

【0099】

ＨＭＤ１１２は、中断モード環境内の静的ポーズ（たとえば、位置および配向）において、他のユーザに対応する１つまたは複数のアバターをレンダリングすることになる（７０６）。静的ポーズは、中断モードがＨＭＤ１１２において有効にされたときに人工現実環境内で１つまたは複数のアバターがあったポーズに対応し得る。いくつかの例では、ＨＭＤ１１２は、レンダリングされたアバターのうちの１つまたは複数がＨＭＤ１１２のユーザから個人空間しきい値内に（たとえば、１または２メートル内に）あるかどうかを決定し得る（７０８）。１つまたは複数のレンダリングされたアバターが個人空間しきい値内にある（７０８のはい分岐）という決定に応答して、ＨＭＤ１１２は、１つまたは複数のレンダリングされたアバターを特定の距離（たとえば、２または３メートル）後ろに移動する。たとえば、ＨＭＤ１１２は、個人空間しきい値内の１つまたは複数のレンダリングされたアバターを後ろにスライドさせるアニメーションをレンダリングし得る。いくつかの例では、ＨＭＤ１１２は、個人空間しきい値におけるまたは個人空間しきい値を越える静的位置において、単に、１つまたは複数のレンダリングされたアバターをレンダリングし得る。どちらにしても、フローチャート７００は７１２に続く。

【0100】

１つまたは複数のレンダリングされたアバターが個人空間しきい値内にない（７０８のいいえ分岐）という決定に応答して、ＨＭＤ１１２は、ユーザ入力に基づいて、中断モード環境中の１つまたは複数のレンダリングされたアバターに対応する１つまたは複数の動作を実施する（７１２）。たとえば、ユーザは、（たとえば、図１Ａ、図３を参照しながら上記で説明されたように）別のユーザのアバターを選択して、中断モード環境から、そのユーザと友達になるか、そのユーザにメッセージするか、そのユーザをミュートするか、そのユーザをブロックするか、またはそのユーザを報告し得る。いくつかの例では、人工現実アプリケーションサーバ１０７は、（たとえば、図１Ａ、図３を参照しながら上記で説明されたように）中断モード環境から、ユーザと友達になるか、ユーザにメッセージするか、ユーザをブロックするか、またはユーザを報告するための、バックエンドネットワーク動作を実施する。たとえば、ＨＭＤ１１２のユーザがネットワークレベルにおいて別のユーザをブロックした場合、別のユーザは、人工現実環境において（または任意の他の人工現実環境またはアプリケーションにおいて）ＨＭＤ１１２のユーザを見るか、またはさもなければＨＭＤ１１２のユーザと相互作用すること（その逆も同様である）、ネットワーク上でＨＭＤ１１２のユーザを検索すること、ＨＭＤ１１２のユーザにメッセージするか、またはＨＭＤ１１２のユーザと友達になることができないことになる。ＨＭＤ１１２のユーザと別のユーザとがすでに友達であった場合、別のユーザをブロックすることはその２人のユーザを友達解除し得る。いくつかの例では、コンソール１０６は、その２人のユーザが後に同じ人工現実環境または人工現実アプリケーション中に（たとえば、同じゲーム中に）配置されるのを防ぎ得る。いくつかの例では、ＨＭＤ１１２のユーザは、現在の人工現実アプリケーションの完了（たとえば、ゲームの完了）後に、またはユーザが人工現実環境を出たときに、（ブロックすることが、ユーザが中断モード環境から人工現実環境に戻ったときに有効であることになるように）直ちに別のユーザをブロックすべきかどうかを示し得る。いくつかの例では、ブロックされたユーザは、人工現実環境においてユーザおよび／またはユーザのアバターを見るか、聴取するか、あるいはさもなければユーザおよび／またはユーザのアバターと相互作用することができないことになる。ＨＭＤ１１２のユーザが別のユーザをミュートした場合、ＨＭＤ１１２のユーザは、ＨＭＤ１１２のユーザが人工現実環境に戻ったとき、その別のユーザから来るオーディオを聴取することができないことになる。いくつかの例では、ＨＭＤ１１２は、その別のユーザからオーディオデータを受信し続けることになるが、そのオーディオをミュートすることになる。

【0101】

図８は、本開示の技法による、人工現実アプリケーションの実行中に中断モード環境に入るための例示的なジェスチャー駆動型ＵＩとのユーザ相互作用を示す図である。特に、図８は、仮想手１３６Ａ、１３６Ｂ（まとめて、「仮想手１３６」）、および、仮想手１３６Ａの近くの、中断モードＵＩ要素１４２と個人ＵＩ要素１４４とを含むＵＩメニュー１４０を示す。いくつかの例では、ＨＭＤ１１２は、ＨＭＤ１１２が、仮想手１３６に対応するユーザの手の内側手首領域がＨＭＤ１１２の視野に入って来たことを検出したことに応答して（たとえば、図１Ａを参照しながら上記で説明されたようにＵＩアクティブ化ジェスチャーを検出した後に）、レンダリングされていることがある。図８は、ユーザが、中断モードＵＩ要素１４２上の、仮想フィンガー８０２の配置を含む中断モード選択ジェスチャーを実施することをさらに示し、これは、ユーザが、中断モードＵＩ要素がレンダリングされた場所に対応する物理的領域にフィンガーを配置することに対応する。ＨＭＤ１１２が（たとえばユーザの手のキャプチャされた画像データを介して）中断モードＵＩ要素１４２に対する選択ジェスチャーを検出したことに応答して、ＨＭＤ１１２は中断モード特徴を有効にする。ユーザの手の動きに基づくＵＩアクティブ化および選択ジェスチャーを定義することによって、ユーザは、迅速におよび直観的に中断モード特徴を有効にし得る。

【0102】

図９は、本開示の技法による、ＨＭＤ１１２においてユーザに提示される、人工現実アプリケーションの例示的な人工現実環境９２４を示す図である。図９に示されている例では、人工現実環境９２４は、アバター９２０Ａ、９２０Ｂ、９２０Ｃ、９２０Ｄ、９２０Ｅ、および９２０Ｆ（まとめて、「アバター９２０」）と、仮想オブジェクト９２８Ａおよび９２８Ｂ（まとめて、「仮想オブジェクト９２８」）と、仮想ハンドヘルドオブジェクト９１４とを含む。特に、アバター９２０は、ＨＭＤの他のユーザに対応し得、人工現実環境９２４はゲーミングアプリケーションに対応し得る。いくつかの例では、１つまたは複数のアバター９２０が、コスチューム、マスク、またはアクセサリを装着し得る。たとえば、アバター９２０Ｅは、図９中のマスク９０２を装着している。いくつかの例では、各アバターによって装着される用品一式またはコスチュームは、それぞれのユーザによって個人化され得る。いくつかの例では、アバター９２０は、対応するユーザに関する情報をもつグラフィック要素を含み得る。たとえば、図９は、アバター９２０に対する対応するユーザのファーストネームをもつグラフィック要素を示す。他の例では、これらのグラフィックは、追加または代替として、対応するユーザに関するゲームスコア、残寿命、または任意の他の情報を含み得る。いくつかの例では、このグラフィック要素は、人工現実環境９２４中に含まれないことがある。図９に示されている人工現実環境９２４は、本開示の技法による、中断モード特徴を有効にするより前の人工現実環境の一例であり得る。

【0103】

図９は、６人の異なるユーザに対応する６つのアバターを示すが、他のアバターが、人工現実環境９２４中に存在し得、ただし、ＨＭＤ１１２の視野中にないか、仮想オブジェクトの後ろに（たとえば、仮想壁９２８Ａの後ろに）あるか、またはあまりに遠く離れている（たとえば、可視しきい値を越えて位置する）ので、ＨＭＤ１１２のユーザに可視でないことがある。たとえば、ＨＭＤ１１２のユーザは、自分の視野を移動すること（たとえば、向きを変えることまたは仮想壁９２８Ａの後ろを見ること）によって追加のアバターを見得る。図９は、利用可能でないユーザ（すなわち、ジェイコブ）に対応する仮想グラフィック９０４をも示す。仮想グラフィック９０４は、ユーザのプロファイルピクチャと、ユーザが離れているかまたはさもなければ利用可能でないことを示すメッセージとを含み得る。いくつかの例では、仮想グラフィック９０４に対応するユーザは、そのユーザが、自分のＨＭＤを一時停止した、自分のＨＭＤを取り外した、自分のＨＭＤにおいて中断モード特徴を有効にしたなどのために、利用可能でないことがある。どちらにしても、仮想グラフィック９０４は、なぜユーザが利用可能でないかの指示を含むことも含まないこともある。いくつかの例では、仮想グラフィック９０４は、ユーザに対応する「コイン」またはトークンであり得る。

【0104】

図１０は、本開示の技法による、例示的な中断モード環境１０２４を示す図である。図１０に示されている例では、中断モード環境１０２４は、図９中の人工現実環境９２４に対応する。すなわち、図１０は、ユーザが、図９の人工現実環境９２４に参加しながら中断モード特徴を有効にした後に、ＨＭＤ１１２において表示される例示的な中断モード環境１０２４である。

【0105】

図１０に示されているように、中断モード環境１０２４は、それぞれ、図９のアバター９２０Ａ、９２０Ｂ、９２０Ｃ、９２０Ｄ、９２０Ｅ、および９２０Ｆに対応する、アバター１０２０Ａ、１０２０Ｂ、１０２０Ｃ、１０２０Ｄ、１０２０Ｅ、および１０２０Ｆ（まとめて、「アバター１０２０」）を含む。ＨＭＤ１１２は、ＨＭＤ１１２のユーザが中断モード特徴を有効にしたときにアバター１０２０があったポーズに対応する静的ポーズ（たとえば、位置および配向）においてアバター１０２０を提示する。アバター１０２０は、ＨＭＤ１１２における中断モード環境１０２４中の静的ポーズにおいて提示されるが、アバター９２０は、図９の人工環境９２４に参加し続け得る。ＨＭＤ１１２は、中断モード特徴が有効にされる間、アバター９２０の各々についてのポーズ情報を含む、人工現実環境９２４に関するデータを受信し続け得る。すなわち、人工現実環境９２４は、ＨＭＤ１１２のユーザが中断モード環境１０２４に入ったとき、アバター９２０のために一時停止されないかまたはさもなければ停止されない。特に、ＨＭＤ１１２は、中断モード環境１０２４において（仮想オブジェクト９２８を含む）人工環境９２４の仮想背景を表示せず、代わりに、異なる背景（たとえば、単色背景）を提示する。たとえば、中断モード環境１０２４は、図９の仮想オブジェクト９２８または仮想ハンドヘルドオブジェクト９１４を含まない。特に、ＨＭＤ１１２は、人工現実環境９２４において仮想オブジェクト９２８の後ろにあった（たとえば、仮想オブジェクト９２８によって遮られた）アバターを中断モード環境１０２４において表示しないことになる。いくつかの例では、ＨＭＤ１１２は、アバター９２０のコスチューム、マスク、またはアクセサリを提示し続ける。たとえば、ＨＭＤ１１２は、アバター１０２０Ｅをマスク１００２とともに提示することになり、これは図９中のアバター９２０Ｅおよびマスク９０２に対応する。いくつかの例では、アバター１０２０は、アバター９２０のうちのいくつかに対する対応するユーザのファーストネームをもつグラフィック要素を含み得る。他の例では、これらのグラフィックは、追加または代替として、対応するユーザに関するゲームスコア、残寿命、または任意の他の情報を含み得る。いくつかの例では、このグラフィック要素は、人工現実環境９２４中に含まれないことがあるが、中断モード環境１０２４中に含まれ得る。いくつかの例では、このグラフィック要素は、中断モード環境１０２４中に含まれないことがある。

【0106】

ＨＭＤ１１２は、ユーザが中断モード特徴を有効にしたとき、仮想現実環境９２４中にあった１つまたは複数のアバターに対応する複数の仮想ＵＩ要素をさらに表示し得る。たとえば、中断モード環境１０２４は、ＵＩ要素１０５０Ａ、１０５０Ｂ、１０５０Ｃ、１０５０Ｄ、および１０５０（まとめて、「ＵＩ要素１０５０」または「情報パネル１０５０」）を含む。ＵＩ要素１０５０の各々は、図１０に示されているように、アバターのそれぞれのユーザに対応するピクチャ、ネーム、または任意の他の情報を含み得る。いくつかの例では、ＵＩ要素１０５０は、中断モード環境１０２４において現在可視でないアバターについての１つまたは複数のＵＩ要素を含み得る。たとえば、図１０中のＵＩ要素１０５０Ａに対応するアバターが可視でない。このアバターは、ＨＭＤ１１２のユーザが中断モード特徴を有効にしたときに、そのアバターがＨＭＤ１１２の見通し線中にないか、そのアバターが仮想オブジェクトまたは別のアバターの後ろにあったか、あるいはそのアバターが「離れて」いたので、可視でないことがある。ＨＭＤ１１２は、命令、追加情報、ならびに／または中断モード環境１０２４を出るためのおよび人工現実環境９２４に戻るための仮想ＵＩ要素とともに、ＵＩ要素１０５４をも提示し得る。図１０に示されている例では、ＵＩ要素１０５４は、ＨＭＤ１１２のユーザが追加のオプションのためにユーザプロファイル（たとえば、ＵＩ要素１０５０のいずれか）をタップし得ることを示す。この例では、ユーザは、ＵＩ要素１０５０Ｃをタップすることによってアバター１０２０Ａを選択している。いくつかの例では、ＨＭＤ１１２のユーザは、アバターを見るかまたはアバターを指すことによって、アバター１０２０を選択し得る。いくつかの例では、ＨＭＤ１１２のユーザは、たとえば、アバター１０２０の物理的外観について言葉で説明すること（たとえば、アバターのサイズ、衣類、アクセサリ、または任意の他の特徴的な特性について説明すること）、またはそのアバターのネームを言うことを含む、音声選択によりそのアバターを選択し得る。このようにして、ユーザは、特定のアバター／ユーザを探すのに様々なＵＩ要素１０５０をスクロールする必要がない。いくつかの例では、ＨＭＤ１１２は、アバター１０５０が選択されるまで、それらのアバターを視覚的にミュートし得る。たとえば、アバター１０２０Ｂ～１０２０Ｆは、グレースケールで提示されるか、またはさもなければ人工現実環境９２４におけるものとは別様に提示され得る（図１０では点線によって表される）。ＨＭＤ１１２はまた、（たとえば、人工現実環境９２４の場合のように）選択されたアバター１０２０Ａをトゥルーカラーでハイライトおよび／または提示し得る。たとえば、ＨＭＤ１１２は、アバター１０２０Ａの下でスポットライトまたはベース１０５６を提示し、ＨＭＤ１１２のユーザからベース１０５６へのライン１０５８を提示し得る。ベース１０５６およびライン１０５８は、ユーザが、異なるアバター１０２０を選択したとき、アバター１０２０間で移動し得る。

【0107】

ユーザ１０２０Ａを選択したことに応答して、ＨＭＤ１１２は、ユーザが中断モードＵＩ１０５２を通してそのユーザと関与することを可能にする選択可能な仮想要素を含む中断モードＵＩ１０５２をレンダリングする。たとえば、ユーザは、中断モードＵＩ１０５２中の対応する仮想要素を選択することによって、ユーザ１０２０Ａと友達になり、ユーザ１０２０Ａにメッセージし、ユーザ１０２０Ａをミュートし、ユーザ１０２０Ａをブロックし、および／またはユーザ１０２０Ａを報告し得る。いくつかの例では、中断モードＵＩ１０５２は、中断モード環境１０２４を出るためのおよび人工現実環境９２４に戻るための仮想ＵＩ要素を含み得る。

【0108】

いくつかの例では、ブロックすることは、（たとえば、図３を参照しながら説明された人工現実アプリケーションエンジン３３４によって）ネットワークまたはサーバレベルにおいて実施され、ミュートすることは、（たとえば、図４を参照しながら説明された中断モードエンジン４３２によって）ＨＭＤレベルにおいて実施される。たとえば、ユーザがネットワーク上でユーザ１０２０Ａをブロックした場合、ユーザ１０２０Ａは、ユーザが中断モード環境を出た後に、人工現実環境９２４において（または任意の他の人工現実環境またはアプリケーションにおいて）ユーザを見るかまたはさもなければユーザと相互作用すること、ネットワーク上でユーザを検索すること、ユーザにメッセージするか、またはユーザと友達になることができないことになる。いくつかの例では、ユーザは、現在の人工現実アプリケーションの完了（たとえば、ゲームの完了）後に、またはユーザが人工現実環境９２４を出たときに、直ちにユーザ９０２をブロックすべきかどうかを示し得る。いくつかの例では、ＨＭＤ１１２のユーザは、人工現実環境内で別のユーザをミュートし、ＨＭＤ１１２のユーザが人工現実環境を出るときにその別のユーザをブロックする（たとえば、現在のゲーム中に別のユーザをミュートし、ゲームが終了すると別のユーザをブロックする）ことを示し得る。いくつかの例では、ブロックされたユーザは、ユーザおよび／またはユーザのアバターを見るか、聴取するか、あるいはさもなければユーザおよび／またはユーザのアバターと相互作用することができないことになる。たとえば、再び図９を参照すると、ＨＭＤ１１２のユーザがアバター９２０Ａをブロックし、アバター９２０Ｂが後で、ＨＭＤ１１２のユーザが人工現実環境９２４に戻ったとき、ユーザと話す場合、アバター９２０Ｂは、アバター９２０Ａに対応するブロックされたユーザのパースペクティブから、誰とも話していないように見えることになる。

【0109】

ユーザが別のユーザをミュートした場合、ユーザは、ＨＭＤ１１２がその別のユーザから来るオーディオをミュートすることになるので、人工現実環境９２４にいる間、その別のユーザから来るオーディオを聴取することができないことになる。ＨＭＤ１１２のユーザが別のユーザを報告した場合、コンソール１０６（または人工現実システムからの任意の他のデバイス）は、人工現実環境またはアプリケーションに関連付けられたレビューエンティティによるレビューのために、そのユーザにフラグを付けることになる。いくつかの例では、人工現実システムは、レビューのために、人工現実環境９２４内での、ＨＭＤ１１２のユーザと別のユーザとの間の相互作用を記録し得る。

【0110】

アバター９２０は、中断モード特徴がＨＭＤ１１２において有効にされる間、人工現実環境９２４に参加し続けることになるが、ＨＭＤ１１２のユーザに対応するアバターは人工現実環境９２４において無効にされることになり、図９のアバター９２０は、ＨＭＤ１１２のユーザに対応するアバターを観察するかまたはそのアバターと相互作用することができないことになる。代わりに、アバター９２０に対応するユーザは、ＨＭＤ１１２のユーザが中断モードを有効にしたことを示すことなしに、そのユーザが利用可能でないことを示す図９の指示９０４と同様のグラフィックを見得る。いくつかの例では、ＨＭＤ１１２のユーザは、人工現実環境９２４に参加することができないことがある。いくつかの例では、ＨＭＤ１１２のユーザは、中断モード環境１０２４内のアバター１０２０を撮影または記録することができないことがある。ユーザのアバターは、ユーザの延長（たとえば、人工現実環境中のユーザのエージェントまたはペルソナ（ｐｅｒｓｏｎａ））を表し得るので、中断モード特徴は、中断モード特徴がアクティブ化される間、ユーザが知ることまたは承諾することなしに、他のユーザが、ユーザのアバターを撮影しないこと、記録しないこと、またはユーザのアバターと相互作用しないことを保証するのを助けることができ、その逆も同様である。

【0111】

ユーザが中断モード環境１０２４中にいる間、（そのモードにおける、ユーザのＨＭＤを含む）人工現実環境中のユーザのＨＭＤ間のネットワーク通信が続く。たとえば、ＨＭＤ１１２は、他のＨＭＤから、人工現実アプリケーション、人工現実環境、および／または他のアバターに関する更新を受信し続けることになる。このようにして、ユーザは、人工現実アプリケーションを休止し、後で直ちに、人工現実アプリケーションの現在の状態において人工現実環境１０２４に再び入り得る。人工現実アプリケーションは、ユーザが中断モード環境１０２４中にいた間、続いたので、アバター９２０のいずれかは、ユーザが、中断モード環境１０２４を出、人工現実環境９２４に再び入るときには、異なるロケーションに位置し得、および／または人工現実環境９２４を出ていることがある。ＨＭＤ１１２は、中断モードが有効にされた間、ＨＭＤ１１２が処理すべき更新をすでに処理していることになるので、ＨＭＤ１１２が、それらの更新のバックログを有しないことになるので、アバター９２０の更新されたポーズを直ちに表示することが可能であることになる。

【0112】

中断モード特徴が一時停止モードとは異なることを理解されたい。たとえば、中断モード環境では、ＨＭＤ１１２のユーザは、人工現実アプリケーション設定または選好にアクセスするかまたはそれらを更新することができないことがある。別の例として、ＨＭＤ１１２のユーザのためのアバターは、アバター９２０が人工現実環境９２４に参加し続ける間、人工現実環境９２４において仮想グラフィック（たとえば、図９の仮想グラフィック９０４）と交換され得る。このようにして、アバター９２０は、中断モード特徴がＨＭＤ１１２において有効にされる間、ＨＭＤ１１２のアバターと相互作用しないことがある（その逆も同様である）。

【0113】

図１１は、本開示の技法による、中断モード環境１１２４の別の例を示す図である。図１１に示されている例では、中断モード環境１１２４は、図１０の中断モード環境１０２４とは異なるパースペクティブから示されている。特に、中断モード環境１１２４は、図１１ではサードパーソンパースペクティブから示されている。中断モード環境１１２４は、ＨＭＤ１１２のユーザに対応するアバター１１１０と、人工現実環境中の他のユーザに対応するアバター１１２０Ａ、１１２０Ｂ、および１１２０Ｃ（まとめて、「アバター１１２０」）とを含む。図１０と同様に、ＨＭＤ１１２は、中断モード環境１１２４中の静的ポーズにおいてアバター１０２０を提示する。図１１に示されているように、アバター１１１０は、プラットフォームまたはベース１１６０上で提示され得る。

【0114】

いくつかの例では、ＨＭＤ１１２は、図７を参照しながら上記で説明されたように、１つまたは複数のアバター１１２０がアバター１１１０から個人空間しきい値内（たとえば、１または２メートル内）にあるとき、アバター１１１０から離れるように１つまたは複数のアバター１１２０を移動することになる。いくつかの例では、アバター１１１０は、中断モード環境中にいる間にその視野を回転させることが可能であり得るが、中断モード環境１１２４内のそのアバターの現在のロケーションから移動することができないことになる。たとえば、アバター１１１０は、３６０度向きを変え、上および下を見得るが、中断モード環境１１２４内の別のロケーションまで歩くことができない。いくつかの例では、アバター１１１０は、中断モード環境内の半径プラットフォーム１１６０内で動き回り得る。いくつかの例では、ＨＭＤ１１２のユーザが中断モード特徴を有効にしたときにアバター１１１０からの３６０度の見通し線中にあったアバターのみが、中断モード環境においてレンダリングされることになる。たとえば、ユーザが中断モード特徴を有効にしたときに、より高いレベル／高度に（たとえば、仮想山頂上にまたは任意の他の仮想オブジェクト上に）、またはより低いレベル／高度に（たとえば、仮想溝の底部上に）あるが、（ユーザがそのアバターを見ていないことがあるにもかかわらず）アバター１１１０からの３６０度の見通し線内にあった、アバター１１２０が、そのアバターが中断モード環境１１２４内のＨＭＤの視野内にあるとき、表示されることになる。仮想壁の後ろにあったまたはさもなければ仮想オブジェクトによって遮られた別のユーザのためのアバターが、中断モード環境１１２４においてレンダリングされないことがある。いくつかの例では、ＨＭＤ１１２は、アバターのペルソナを構成する衣類、ヘッドギア、靴、コスチューム要素、または任意の他の要素を含む、アバター１１２０の衣服およびアクセサリを中断モード環境１１２４においてレンダリングし続け得る。たとえば、ＨＭＤ１１２は、アバター１１２０Ｂ上で仮想ヘッドフォン１１６２をレンダリングし続け得る。このようにして、ユーザは、中断モード環境１１２４内のアバター１１２０の各々をより容易に識別し得る。

【0115】

中断モード環境１１２４中にある間、アバター１１１０は、（たとえば、図１０中のＵＩ要素１０５０を参照しながら説明されたように）追加の動作を実施するために、ＵＩ要素１１５０Ａ、１１５０Ｂ、または１１５０Ｃ（まとめて、「ＵＩ要素１１５０」）のいずれかに対する選択ジェスチャーを実施することによってアバター１１２０のいずれかを選択し得る。たとえば、アバター１１１０が（たとえば、タッチジェスチャーを通して）ＵＩ要素１１５０のうちの１つを選択したとき、ＨＭＤ１１２は、仮想中断モードＵＩ１１５２をレンダリングする。アバターが選択されたとき、ＨＭＤ１１２は、選択されたアバターをハイライトし、および／または他のアバターを強調しない（たとえば、他のアバターをグレーアウトする）。たとえば、アバター１１１０はアバター１１２０Ａを選択し得、ＨＭＤ１１２は、アバター１１２０Ａの下でスポットライトまたはベース１１５６をレンダリングし、プラットフォーム１１６０からベース１０５６へのライン１１５８を提示し得る。ベース１０５６およびライン１０５８は、ユーザが、異なるアバター１０２０を選択したとき、アバター１１２０間で移動し得る。追加または代替として、ＨＭＤ１１２は、たとえば、選択されないアバター１１２０Ｂおよび１１２０Ｃをグレーアウトすることまたはフェードアウトさせること（図１１では点線として表される）によって、それらのアバターを強調しない。

【0116】

本開示で説明される技法は、少なくとも部分的に、ハードウェア、ソフトウェア、ファームウェアまたはそれらの任意の組合せで実装され得る。たとえば、説明される技法の様々な態様が、１つまたは複数のマイクロプロセッサ、ＤＳＰ、特定用途向け集積回路（ＡＳＩＣ）、フィールドプログラマブルゲートアレイ（ＦＰＧＡ）、あるいは任意の他の等価な集積論理回路または個別論理回路、ならびにそのような構成要素の任意の組合せを含む、１つまたは複数のプロセッサ内で実装され得る。「プロセッサ」または「処理回路」という用語は、概して、単独でまたは他の論理回路と組み合わせて、上記の論理回路のいずれか、あるいは任意の他の等価な回路を指し得る。ハードウェアを備える制御ユニットも、本開示の技法のうちの１つまたは複数を実施し得る。

【0117】

そのようなハードウェア、ソフトウェア、およびファームウェアは、本開示で説明される様々な動作および機能をサポートするために、同じデバイス内にまたは別個のデバイス内に実装され得る。さらに、説明されるユニット、モジュール、または構成要素のいずれかは、一緒に、または個別の、ただし相互運用可能な論理デバイスとして別個に、実装され得る。モジュールまたはユニットとしての異なる特徴の図は、異なる機能的態様を強調することが意図され、そのようなモジュールまたはユニットが別個のハードウェアまたはソフトウェア構成要素によって実現されなければならないことを必ずしも暗示するとは限らない。むしろ、１つまたは複数のモジュールまたはユニットに関連付けられた機能性は、別個のハードウェアまたはソフトウェア構成要素によって実施されるか、あるいは共通のまたは別個のハードウェアまたはソフトウェア構成要素内に組み込まれ得る。

【0118】

本開示で説明される技法はまた、命令を含んでいる、コンピュータ可読記憶媒体など、コンピュータ可読媒体において具現されるかまたは符号化され得る。コンピュータ可読記憶媒体において埋め込まれるかまたは符号化される命令は、たとえば、命令が実行されるとき、プログラマブルプロセッサ、または他のプロセッサに方法を実施させ得る。コンピュータ可読記憶媒体は、ランダムアクセスメモリ（ＲＡＭ）、読取り専用メモリ（ＲＯＭ）、プログラマブル読取り専用メモリ（ＰＲＯＭ）、消去可能プログラマブル読取り専用メモリ（ＥＰＲＯＭ）、電子的消去可能プログラマブル読取り専用メモリ（ＥＥＰＲＯＭ）、フラッシュメモリ、ハードディスク、ＣＤ－ＲＯＭ、フロッピーディスク、カセット、磁気媒体、光媒体、または他のコンピュータ可読媒体を含み得る。

【0119】

本明細書の様々な例として説明されたように、本開示の技法は、人工現実システムを含むか、または人工現実システムとともに実装され得る。説明されたように、人工現実は、ユーザへの提示の前に何らかの様式で調整された形式の現実であり、これは、たとえば、仮想現実（ＶＲ）、拡張現実（ＡＲ）、複合現実（ＭＲ）、ハイブリッド現実、あるいはそれらの何らかの組合せおよび／または派生物を含み得る。人工現実コンテンツは、完全に生成されたコンテンツ、またはキャプチャされたコンテンツ（たとえば、現実世界の写真）と組み合わせられた生成されたコンテンツを含み得る。人工現実コンテンツは、ビデオ、オーディオ、触覚フィードバック、またはそれらの何らかの組合せを含み得、それらのいずれも、（観察者に３次元効果をもたらすステレオビデオなどの）単一のチャネルまたは複数のチャネルにおいて提示され得る。さらに、いくつかの実施形態では、人工現実は、たとえば、人工現実におけるコンテンツを作成するために使用される、および／または人工現実において使用される（たとえば、人工現実におけるアクティビティを実施する）アプリケーション、製品、アクセサリ、サービス、またはそれらの何らかの組合せに関連付けられ得る。人工現実コンテンツを提供する人工現実システムは、ホストコンピュータシステムに接続されたヘッドマウントディスプレイ（ＨＭＤ）、スタンドアロンＨＭＤ、モバイルデバイスまたはコンピューティングシステム、あるいは、１人または複数の観察者に人工現実コンテンツを提供することが可能な任意の他のハードウェアプラットフォームを含む、様々なプラットフォーム上に実装され得る。

【0120】

特定の実施形態では、コンピューティングシステムの１つまたは複数のオブジェクト（たとえば、コンテンツまたは他のタイプのオブジェクト）は、１つまたは複数のプライバシー設定に関連付けられ得る。１つまたは複数のオブジェクトは、たとえば、ソーシャルネットワーキングシステム、クライアントシステム、サードパーティシステム、ソーシャルネットワーキングアプリケーション、メッセージングアプリケーション、写真共有アプリケーション、あるいは任意の他の好適なコンピューティングシステムまたはアプリケーションなど、任意の好適なコンピューティングシステムまたはアプリケーションに記憶されるか、または場合によっては関連付けられ得る。本明細書で説明される例はオンラインソーシャルネットワークのコンテキストにおけるものであるが、これらのプライバシー設定は、任意の他の好適なコンピューティングシステムに適用され得る。オブジェクトについてのプライバシー設定（または「アクセス設定」）は、たとえば、オブジェクトに関連して、許可サーバ上のインデックス中で、別の好適な様式で、またはそれらの任意の好適な組合せなど、任意の好適な様式で記憶され得る。オブジェクトについてのプライバシー設定は、オブジェクト（またはオブジェクトに関連付けられた特定の情報）がオンラインソーシャルネットワーク内でどのようにアクセスされ、記憶され、または場合によっては使用され（たとえば、観察、共有、修正、コピー、実行、表面化、または識別され）得るかを指定し得る。オブジェクトについてのプライバシー設定が、特定のユーザまたは他のエンティティがそのオブジェクトにアクセスすることを可能にするとき、オブジェクトは、そのユーザまたは他のエンティティに関して「可視」であるものとして説明され得る。限定としてではなく一例として、オンラインソーシャルネットワークのユーザは、ユーザプロファイルページに関する職歴情報にアクセスし得るユーザのセットを識別するユーザプロファイルページについてのプライバシー設定を指定し、したがって、他のユーザがその情報にアクセスすることを除外し得る。

【0121】

特定の実施形態では、オブジェクトについてのプライバシー設定は、オブジェクトに関連付けられたある情報にアクセスすることを可能にされるべきでないユーザまたは他のエンティティの「ブロックリスト（ｂｌｏｃｋｅｄ ｌｉｓｔ）」を指定し得る。特定の実施形態では、ブロックリストは、サードパーティエンティティを含み得る。ブロックリストは、オブジェクトが可視でない１つまたは複数のユーザまたはエンティティを指定し得る。限定としてではなく一例として、ユーザは、ユーザに関連付けられた写真アルバムにアクセスしてはいけないユーザのセットを指定し、したがって、それらのユーザが写真アルバムにアクセスすることを除外し得る（また、場合によってはユーザの指定されたセット内にない何人かのユーザが写真アルバムにアクセスすることを可能にする）。特定の実施形態では、プライバシー設定は、特定のソーシャルグラフ要素に関連付けられ得る。ノードまたはエッジなど、ソーシャルグラフ要素のプライバシー設定は、ソーシャルグラフ要素、ソーシャルグラフ要素に関連付けられた情報、またはソーシャルグラフ要素に関連付けられたオブジェクトが、どのようにオンラインソーシャルネットワークを使用してアクセスされ得るかを指定し得る。限定としてではなく一例として、特定の写真に対応する特定の概念ノードは、写真が、写真においてタグ付けされたユーザと写真においてタグ付けされたユーザの友達とによってのみアクセスされ得ることを指定するプライバシー設定を有し得る。特定の実施形態では、プライバシー設定は、ユーザが、そのユーザのコンテンツ、情報、またはアクションがソーシャルネットワーキングシステムによって記憶／ロギングされるか、または他のシステム（たとえば、サードパーティシステム）と共有されることをオプトインまたはオプトアウトすることを可能にし得る。本開示は、特定の様式で特定のプライバシー設定を使用することについて説明するが、本開示は、任意の好適な様式で任意の好適なプライバシー設定を使用することを企図する。

【0122】

特定の実施形態では、プライバシー設定は、ソーシャルグラフの１つまたは複数のノードまたはエッジに基づき得る。プライバシー設定は、ソーシャルグラフの１つまたは複数のエッジまたはエッジタイプについて、あるいはソーシャルグラフの１つまたは複数のノードまたはノードタイプに関して指定され得る。２つのノードを接続する特定のエッジに適用されるプライバシー設定は、ノードに対応する２つのエンティティ間の関係がオンラインソーシャルネットワークの他のユーザに可視であるかどうかを制御し得る。同様に、特定のノードに適用されるプライバシー設定は、ノードに対応するユーザまたは概念がオンラインソーシャルネットワークの他のユーザに可視であるかどうかを制御し得る。限定としてではなく一例として、第１のユーザは、ソーシャルネットワーキングシステムに対してオブジェクトを共有し得る。オブジェクトは、エッジによって第１のユーザのユーザノードに接続された概念ノードに関連付けられ得る。第１のユーザは、オブジェクトの概念ノードに接続する特定のエッジに適用されるプライバシー設定を指定し得るか、または概念ノードに接続するすべてのエッジに適用されるプライバシー設定を指定し得る。限定としてではなく別の例として、第１のユーザは、特定のオブジェクトタイプのオブジェクトのセット（たとえば、画像のセット）を共有し得る。第１のユーザは、特定のプライバシー設定を有するものとして、その特定のオブジェクトタイプの第１のユーザに関連付けられたすべてのオブジェクトに関してプライバシー設定を指定し得る（たとえば、第１のユーザによって投稿されたすべての画像が、第１のユーザの友達、および／または画像においてタグ付けされたユーザのみに可視であることを指定する）。

【0123】

特定の実施形態では、ソーシャルネットワーキングシステムは、第１のユーザが１つまたは複数のプライバシー設定を指定するのを支援するために、第１のユーザに（たとえば、ウェブページ、モジュール、１つまたは複数のダイアログボックス、または任意の他の好適なインターフェース内に）「プライバシーウィザード」を提示し得る。プライバシーウィザードは、命令、好適なプライバシー関係情報、現在のプライバシー設定、プライバシー設定の変更または確認を指定する、第１のユーザからの１つまたは複数の入力を受け付けるための１つまたは複数の入力フィールド、あるいはそれらの任意の好適な組合せを表示し得る。特定の実施形態では、ソーシャルネットワーキングシステムは、第１のユーザの現在のプライバシー設定を第１のユーザに表示し得る「ダッシュボード」機能性を第１のユーザに与え得る。ダッシュボード機能性は、任意の適切な時間において（たとえば、ダッシュボード機能性を召喚する第１のユーザからの入力に続いて、特定のイベントまたはトリガアクションの発生に続いて）第１のユーザに表示され得る。ダッシュボード機能性は、第１のユーザが、任意の時間において、任意の好適な様式（たとえば、第１のユーザをプライバシーウィザードにリダイレクトすること）で第１のユーザの現在のプライバシー設定のうちの１つまたは複数を修正することを可能にし得る。

【0124】

オブジェクトに関連付けられたプライバシー設定は、許諾されるアクセスまたはアクセスの拒否の任意の好適なグラニュラリティを指定し得る。限定としてではなく一例として、アクセスまたはアクセスの拒否は、特定のユーザ（たとえば、私のみ、私のルームメート、私の上司）、特定の分離の程度内のユーザ（たとえば、友達、友達の友達）、ユーザグループ（たとえば、ゲーミングクラブ、私の家族）、ユーザネットワーク（たとえば、特定の雇用主の従業員、特定の大学の学生または卒業生）、すべてのユーザ（「公開」）、ユーザなし（「プライベート」）、サードパーティシステムのユーザ、特定のアプリケーション（たとえば、サードパーティアプリケーション、外部ウェブサイト）、他の好適なエンティティ、あるいはそれらの任意の好適な組合せについて指定され得る。本開示は、許諾されるアクセスまたはアクセスの拒否の特定のグラニュラリティについて説明するが、本開示は、許諾されるアクセスまたはアクセスの拒否の任意の好適なグラニュラリティを企図する。

【0125】

特定の実施形態では、１つまたは複数のサーバが、プライバシー設定を施行するための許可／プライバシーサーバであり得る。データストアに記憶された特定のオブジェクトについてのユーザ（または他のエンティティ）からの要求に応答して、ソーシャルネットワーキングシステムは、オブジェクトについての要求をデータストアに送り得る。要求は、要求に関連付けられたユーザを識別し得、オブジェクトは、オブジェクトに関連付けられたプライバシー設定に基づいてユーザがオブジェクトにアクセスすることを許可されると許可サーバが決定した場合、ユーザ（またはユーザのクライアントシステム）にのみ送られ得る。要求元ユーザがオブジェクトにアクセスすることを許可されない場合、許可サーバは、要求されたオブジェクトがデータストアから取り出されることを防ぎ得るか、または要求されたオブジェクトがユーザに送られることを防ぎ得る。検索クエリコンテキストでは、問い合わせているユーザがオブジェクトにアクセスすることを許可された場合のみ、たとえば、オブジェクトについてのプライバシー設定が、オブジェクトが、問い合わせているユーザに対して表面化されること、そのユーザによって発見されること、または場合によってはそのユーザに可視であることを可能にする場合のみ、オブジェクトが検索結果として提供され得る。特定の実施形態では、オブジェクトは、ユーザのニュースフィードを通してユーザに可視であるコンテンツを表し得る。限定としてではなく一例として、１つまたは複数のオブジェクトは、ユーザの「トレンディング」ページに可視であり得る。特定の実施形態では、オブジェクトは、特定のユーザに対応し得る。オブジェクトは、特定のユーザに関連付けられたコンテンツであり得るか、あるいはソーシャルネットワーキングシステム、または他のコンピューティングシステムに記憶された特定のユーザのアカウントまたは情報であり得る。限定としてではなく一例として、第１のユーザは、オンラインソーシャルネットワークの「知り合いかも（Ｐｅｏｐｌｅ Ｙｏｕ Ｍａｙ Ｋｎｏｗ）」機能を通して、または第１のユーザの友達のリストを観察することによって、オンラインソーシャルネットワークの１人または複数の第２のユーザを観察し得る。限定としてではなく一例として、第１のユーザは、第１のユーザが、第１のユーザのニュースフィードまたは友達リスト中の特定の第２のユーザに関連付けられたオブジェクトを見ることを望まないことを指定し得る。オブジェクトについてのプライバシー設定が、オブジェクトが、ユーザに対して表面化されること、ユーザによって発見されること、またはユーザに可視であることを可能にしない場合、オブジェクトは、検索結果から除外され得る。本開示は、特定の様式でプライバシー設定を施行することについて説明するが、本開示は、任意の好適な様式でプライバシー設定を施行することを企図する。

【0126】

特定の実施形態では、ユーザに関連付けられた同じタイプの異なるオブジェクトは、異なるプライバシー設定を有し得る。ユーザに関連付けられた異なるタイプのオブジェクトは、異なるタイプのプライバシー設定を有し得る。限定としてではなく一例として、第１のユーザは、第１のユーザのステータス更新が公開であるが、第１のユーザによって共有される画像がオンラインソーシャルネットワーク上の第１のユーザの友達にのみ可視であることを指定し得る。限定としてではなく別の例として、ユーザは、個人ユーザ、友達の友達、フォロワー、ユーザグループ、または企業エンティティなど、異なるタイプのエンティティについて異なるプライバシー設定を指定し得る。限定としてではなく別の例として、第１のユーザは、第１のユーザによって投稿されたビデオが第１のユーザの雇用主に可視でないようにしながら、それらのビデオを観察し得るユーザのグループを指定し得る。特定の実施形態では、異なるユーザグループまたはユーザ層について異なるプライバシー設定が提供され得る。限定としてではなく一例として、第１のユーザは、第１のユーザと同じ大学に通う他のユーザが、第１のユーザのピクチャを観察し得ることを指定するが、第１のユーザの家族である他のユーザが、それらの同じピクチャを観察し得ないことを指定し得る。

【0127】

特定の実施形態では、ソーシャルネットワーキングシステムは、特定のオブジェクトタイプの各オブジェクトについての１つまたは複数のデフォルトプライバシー設定を提供し得る。デフォルト値に設定されたオブジェクトについてのプライバシー設定は、そのオブジェクトに関連付けられたユーザによって変更され得る。限定としてではなく一例として、第１のユーザによって投稿されるすべての画像が、第１のユーザの友達にのみ可視であるというデフォルトプライバシー設定を有し得、特定の画像について、第１のユーザは、画像が友達と友達の友達とに可視であるようにプライバシー設定を変更し得る。

【0128】

特定の実施形態では、プライバシー設定は、ソーシャルネットワーキングシステムが任意の目的のために第１のユーザに関連付けられた特定のオブジェクトまたは情報を受信すること、収集すること、ロギングすること、または記憶することを行い得るかどうかを、第１のユーザが（たとえば、オプトアウトすることによって、オプトインしないことによって）指定することを可能にし得る。特定の実施形態では、プライバシー設定は、特定のアプリケーションまたはプロセスが第１のユーザに関連付けられた特定のオブジェクトまたは情報にアクセスすること、それを記憶すること、または使用することを行い得るかどうかを、第１のユーザが指定することを可能にし得る。プライバシー設定は、固有のアプリケーションまたはプロセスによって、オブジェクトまたは情報がアクセスされること、記憶されること、または使用されることを、第１のユーザがオプトインすることまたはオプトアウトすることを可能にし得る。ソーシャルネットワーキングシステムは第１のユーザに特定の機能またはサービスを提供するためにそのような情報にアクセスし、ソーシャルネットワーキングシステムは任意の他の目的のためにその情報へのアクセスを有しないことがある。そのようなオブジェクトまたは情報にアクセスするか、それを記憶するか、または使用する前に、ソーシャルネットワーキングシステムは、任意のそのようなアクションを可能にする前に、もしあれば、どのアプリケーションまたはプロセスがオブジェクトまたは情報にアクセスするか、それを記憶するか、または使用し得るかを指定するプライバシー設定を提供するようにユーザにプロンプトし得る。限定としてではなく一例として、第１のユーザは、オンラインソーシャルネットワークに関係するアプリケーション（たとえば、メッセージングアプリ）を介して第２のユーザにメッセージを送信し得、そのようなメッセージがソーシャルネットワーキングシステムによって記憶されるべきでないというプライバシー設定を指定し得る。

【0129】

特定の実施形態では、ユーザは、第１のユーザに関連付けられたオブジェクトまたは情報の特定のタイプがソーシャルネットワーキングシステムによってアクセス、記憶、または使用され得るかどうかを指定し得る。限定としてではなく一例として、第１のユーザは、ソーシャルネットワーキングシステムを通して第１のユーザによって送られた画像が、ソーシャルネットワーキングシステムによって記憶され得ないことを指定し得る。限定としてではなく別の例として、第１のユーザは、第１のユーザから特定の第２のユーザに送られたメッセージが、ソーシャルネットワーキングシステムによって記憶され得ないことを指定し得る。限定としてではなくさらに別の例として、第１のユーザは、特定のアプリケーションを介して送られたすべてのオブジェクトがソーシャルネットワーキングシステムによって保存され得ることを指定し得る。

【0130】

特定の実施形態では、プライバシー設定は、第１のユーザに関連付けられた特定のオブジェクトまたは情報が特定のクライアントシステムまたはサードパーティシステムからアクセスされ得るかどうかを、第１のユーザが指定することを可能にし得る。プライバシー設定は、特定のデバイス（たとえば、ユーザのスマートフォン上の電話帳）から、特定のアプリケーション（たとえば、メッセージングアプリ）から、または特定のシステム（たとえば、電子メールサーバ）からオブジェクトまたは情報がアクセスされることを、第１のユーザがオプトインするかまたはオプトアウトすることを可能にし得る。ソーシャルネットワーキングシステムは、各デバイス、システム、またはアプリケーションに関してデフォルトプライバシー設定を提供し得、および／または、第１のユーザは、各コンテキストについての特定のプライバシー設定を指定するようにプロンプトされ得る。限定としてではなく一例として、第１のユーザは、ユーザに近接しているレストランまたは他の場所についての推奨を提供するために、ソーシャルネットワーキングシステムのロケーションサービス特徴を利用し得る。第１のユーザのデフォルトプライバシー設定は、ソーシャルネットワーキングシステムが、ロケーションベースサービスを提供するために、第１のユーザのクライアントデバイスから提供されたロケーション情報を使用し得ることを指定するが、ソーシャルネットワーキングシステムが、第１のユーザのロケーション情報を記憶すること、またはそれを任意のサードパーティシステムに提供することを行い得ないことを指定し得る。第１のユーザは、次いで、写真にジオタグを付けるために、ロケーション情報がサードパーティ画像共有アプリケーションによって使用されることを可能にするように、プライバシー設定を更新し得る。

【図1A】

【図1B】

【図2A】

【図2B】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】