特表2024-532299 | 知財ポータル「IP Force」

知財求人 - 知財ポータルサイト「IP Force」

▶ グーグル　インコーポレイテッドの特許一覧

特表2024-532299屋内空間の３次元マップを生成するためのシステムおよび方法

書誌要約請求の範囲詳細な説明課題実施例実施するための形態図面の説明

目に優しい文字サイズ小中大 PDF Top

< >

1
2
3
4
5
6
7
8
9
10

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公表特許公報(A)

(11)【公表番号】

(43)【公表日】2024-09-05

(54)【発明の名称】屋内空間の３次元マップを生成するためのシステムおよび方法

(51)【国際特許分類】

G06T 19/00 20110101AFI20240829BHJP

G06F 3/04815 20220101ALI20240829BHJP

G06F 3/0484 20220101ALI20240829BHJP

G01S 5/12 20060101ALI20240829BHJP

G01S 17/89 20200101ALN20240829BHJP

【ＦＩ】

G06T19/00 600

G06F3/04815

G06F3/0484

G01S5/12

G01S17/89

【審査請求】有

【予備審査請求】未請求

(21)【出願番号】P 2024512113

(86)(22)【出願日】2022-08-22

(85)【翻訳文提出日】2024-03-13

(86)【国際出願番号】 US2022075263

(87)【国際公開番号】W WO2023028449

(87)【国際公開日】2023-03-02

(31)【優先権主張番号】17/445,751

(32)【優先日】2021-08-24

(33)【優先権主張国・地域又は機関】US

(81)【指定国・地域】

(71)【出願人】

【識別番号】502208397

【氏名又は名称】グーグルエルエルシー

【氏名又は名称原語表記】ＧｏｏｇｌｅＬＬＣ

【住所又は居所原語表記】１６００ＡｍｐｈｉｔｈｅａｔｒｅＰａｒｋｗａｙ９４０４３ＭｏｕｎｔａｉｎＶｉｅｗ，ＣＡＵ．Ｓ．Ａ．

(74)【代理人】

【識別番号】110001195

【氏名又は名称】弁理士法人深見特許事務所

(72)【発明者】

【氏名】ウー，ションジー

(72)【発明者】

【氏名】ファーボーグ，アレクサンダー・ジェイムズ

【テーマコード（参考）】

5B050

5E555

5J062

5J084

【Ｆターム（参考）】

5B050BA09

5B050BA13

5B050CA07

5B050DA01

5B050EA07

5B050EA18

5B050EA19

5B050EA28

5B050FA02

5B050GA08

5E555AA04

5E555AA27

5E555BA05

5E555BA06

5E555BB05

5E555BB06

5E555BC04

5E555BE16

5E555CA41

5E555CA42

5E555CA44

5E555CA45

5E555CB21

5E555DA11

5E555DB55

5E555DC13

5E555DC43

5E555DD06

5E555EA22

5E555FA00

5J062AA01

5J062BB08

5J062CC14

5J062FF01

5J062FF02

5J062FF03

5J062HH05

5J084AA05

5J084AB16

5J084AC08

5J084CA65

(57)【要約】

３次元（３Ｄ）マップは、モバイルコンピューティングデバイスのセンサを使用した領域の走査に基づいて、異なる領域に対して生成され得る。各走査中に、超広帯域通信（ＵＷＢ）を使用して、固定位置のスマートデバイスを基準としたモバイルコンピューティングデバイスの位置を測定できる。領域の３Ｄマップは、走査中に取得される位置測定値に基づいてスマートデバイスの固定位置（すなわち、アンカー位置）に登録され得るため、３Ｄマップを組み合わされた３Ｄマップに結合することができる。次に、組み合わされた（すなわち、結合された）３Ｄマップを使用して、モバイルコンピューティングデバイスまたは他のスマートデバイスの位置固有の動作を容易にすることができる。

【特許請求の範囲】

【請求項1】

３次元（３Ｄ）マップを生成する方法であって、前記方法は、
モバイルコンピューティングデバイスの深度センサを使用して第１の領域の第１の走査を実行することと、
前記モバイルコンピューティングデバイスの超広帯域位置センサを使用して、前記第１の走査中にアンカー位置に対して前記モバイルコンピューティングデバイスの位置を特定することと、
前記第１の領域の前記アンカー位置に対する第１の３Ｄマップを生成することと、を含む、方法。

【請求項2】

前記モバイルコンピューティングデバイスの前記深度センサを使用して第２の領域の第２の走査を実行することと、
前記モバイルコンピューティングデバイスの前記超広帯域位置センサを使用して、前記第２の走査中に前記アンカー位置に対する前記モバイルコンピューティングデバイスの位置を特定することと、
前記第２の領域の前記アンカー位置に対する第２の３Ｄマップ、を生成することと、
前記アンカー位置に基づいて、前記第１の３Ｄマップと前記第２の３Ｄマップを結合することと、をさらに含む、請求項１に記載の方法。

【請求項3】

前記第１の領域は、建物または住宅内の第１の部屋であり、前記第２の領域は、前記建物または住宅内の第２の部屋である、請求項２に記載の方法。

【請求項4】

前記アンカー位置は、前記建物または住宅内に固定的に配置され、超広帯域通信用に構成されたスマートデバイスの位置である、請求項３に記載の方法。

【請求項5】

前記アンカー位置は、前記建物または住宅の外側に固定的に配置され、超広帯域通信用に構成されたスマートデバイスの位置である、請求項３に記載の方法。

【請求項6】

前記アンカー位置に基づいて前記第１の３Ｄマップと前記第２の３Ｄマップを結合することは、
前記第１の３Ｄマップと前記第２の３Ｄマップとを空間的に配置して、両方の領域をカバーする第３の３Ｄマップを形成することを含む、請求項２～請求項５のいずれかに記載の方法。

【請求項7】

前記深度センサは、ライダーセンサ、カメラ、または超音波センサである、先行する請求項のいずれかに記載の方法。

【請求項8】

前記モバイルコンピューティングデバイスは、携帯電話、タブレット、または拡張現実メガネである、先行する請求項のいずれかに記載の方法。

【請求項9】

前記超広帯域位置センサは超広帯域タグである、先行する請求項のいずれかに記載の方法。

【請求項10】

固定位置に対して前記モバイルコンピューティングデバイスの前記位置を特定することは、
前記超広帯域タグと、前記超広帯域タグとの超広帯域通信用に構成されたスマートデバイスとの間の範囲を決定することを含み、前記スマートデバイスは前記アンカー位置に位置する、請求項９に記載の方法。

【請求項11】

固定位置に対して前記モバイルコンピューティングデバイスの前記位置を特定することは、
前記超広帯域タグと、前記超広帯域タグとの超広帯域通信用に構成された複数のスマートデバイスの間の範囲を決定することを含み、前記複数のスマートデバイスのうちの１つが前記アンカー位置に位置する、請求項９に記載の方法。

【請求項12】

スマートデバイスの位置に基づいてスマートデバイスの動作を制御する方法であって、前記方法は、
モバイルコンピューティングデバイスによって走査された第１の領域と第２の領域を含む結合された３Ｄマップを生成することを含み、前記第１の領域と前記第２の領域は、アンカー位置に対するそれらの相対位置に従って前記結合された３Ｄマップ内に配置され、前記相対位置は超広帯域（ＵＷＢ）通信によって決定され、
前記方法は、
前記結合された３Ｄマップ内の複数の位置にタグ付けすることと、
ＵＷＢ通信と前記結合された３Ｄマップに基づいて前記スマートデバイスを追跡することと、
前記スマートデバイスが前記結合された３Ｄマップ内のタグ付けされた位置にあることを決定することと、
前記タグ付けされた位置に基づいて前記スマートデバイスの前記動作を調整することと、を含む、方法。

【請求項13】

前記結合された３Ｄマップ内の前記複数の位置に前記タグ付けすることは、
前記結合された３Ｄマップに基づいて建物または住宅の境界を識別することと、
前記建物または住宅の前記境界外の位置にタグ付けすることと、を含む、請求項１２に記載の方法。

【請求項14】

前記タグ付けされた位置に基づいて前記スマートデバイスの前記動作を前記調整することは、
前記スマートデバイスが前記建物または住宅の前記境界外の前記位置にある場合、前記スマートデバイスのネットワークへのアクセスを制限することを含む、請求項１３に記載の方法。

【請求項15】

前記結合された３Ｄマップ内の前記複数の位置に前記タグ付けすることは、
前記結合された３Ｄマップと関連付けられた画像に基づいて物体を識別することと、
前記物体の周囲の領域にタグ付けすることと、を含む、請求項１２～請求項１４のいずれかに記載の方法。

【請求項16】

前記タグ付けされた位置に基づいて前記スマートデバイスの前記動作を前記調整することは、
前記スマートデバイスが前記物体の周囲の前記領域に入ったときに、前記スマートデバイス上で前記物体に関する情報を提示することを含む、請求項１５に記載の方法。

【請求項17】

前記結合された３Ｄマップ内の前記複数の位置に前記タグ付けすることは、
前記結合された３Ｄマップに基づいて部屋を識別することと、
前記部屋にタグ付けすることと、を含む、請求項１２～請求項１６のいずれかに記載の方法。

【請求項18】

前記タグ付けされた位置に基づいて前記スマートデバイスの前記動作を前記調整することは、
前記スマートデバイスが前記部屋に入ったときに基づいて、前記スマートデバイス上の媒体の再生を制御することを含む、請求項１７に記載の方法。

【請求項19】

前記部屋に前記タグ付けすることは、
前記結合された３Ｄマップと関連付けられた画像に基づいて前記部屋内の物体を識別することと、
前記部屋内の前記物体に基づいて部屋のタイプを決定することと、
前記部屋のタイプに応じて前記部屋にタグ付けすることと、を含む、請求項１７または請求項１８に記載の方法。

【請求項20】

３次元（３Ｄ）マップを生成するシステムであって、前記システムは、
アンカー位置に固定的に配置され、超広帯域（ＵＷＢ）通信用に構成されたスマートデバイスと、
モバイルコンピューティングデバイスと、を含み、
前記モバイルコンピューティングデバイスは、
第１の走査中に第１の領域上で深度センサが走査されるときに、前記第１の領域に対応する深度データの第１のセット、および、第２の走査中に前記深度センサが第２の領域上で走査されるときに、前記第２の領域に対応する深度データの第２のセットを収集するように構成された深度センサ、
前記スマートデバイスとＵＷＢタグとの間のＵＷＢ通信に基づいて、前記第１の走査および前記第２の走査中に前記モバイルコンピューティングデバイスと前記アンカー位置との間の範囲を決定するように構成されたＵＷＢタグ、ならびに、
ソフトウェア命令によって、
前記第１の走査中の前記モバイルコンピューティングデバイスと前記アンカー位置との間の前記範囲に基づいて、深度データの前記第１のセットを前記アンカー位置に登録し、
深度データの前記登録された第１のセットに基づいて、前記アンカー位置に対する第１の３Ｄマップを生成し、
前記第２の走査中の前記モバイルコンピューティングデバイスと前記アンカー位置との間の前記範囲に基づいて、深度データの前記第２のセットを前記アンカー位置に登録し、
深度データの前記登録された第２のセットに基づいて、前記アンカー位置に対する第２の３Ｄマップを生成し、
前記第１の３Ｄマップと前記第２の３Ｄマップを結合する
ように構成されたプロセッサ、
を含む、システム。

【発明の詳細な説明】

【技術分野】

【0001】

関連出願の相互参照
本出願は、２０２１年８月２４日に出願された米国特許出願第１７／４４５，７５１号の継続であり、優先権を主張し、その全体が参照により本明細書に組み込まれる。

【0002】

開示分野
本開示は、拡張現実システムに関し、より具体的には、複数の走査によって生成された３次元（３Ｄ）マップを組み合わせ（すなわち、結合し）、結合された３Ｄマップをモバイルアプリケーションに使用するためのシステムおよび方法に関する。

【背景技術】

【0003】

背景
モバイルデバイス上の深度感知により、ユーザは屋内空間（例えば、部屋）を走査して３Ｄモデル（すなわち、３Ｄマップ）を作成することができる。深度感知には、方向を決定するための慣性測定装置（ＩＭＵ）と、さまざまな領域を感知するためにモバイルコンピューティングデバイスが物理的に移動されて（すなわち、走査されて）モバイルコンピューティングデバイスと部屋内の物体との間の深度（すなわち、範囲）を決定するための専用の深度センサまたはカメラとを含む複数のセンサを利用し得る。３Ｄマップを画像と組み合わせて現実的な仮想部屋を生成することができ、仮想部屋に対してユーザは没入型で現実的な体験（例えば、仮想ツアー）で対話することができる。３Ｄモデルを使用して、拡張現実（ＡＲ）環境でより現実的な仮想物体を生成することもできる。例えば、３Ｄモデルは、ＡＲソフトウェアが屋内空間の現実の物体の背後に、建物や住宅などの仮想物体を配置するのに役立ち得る。屋内空間を正常に走査するには複数の要件があり、これらの要件がユーザの制御を超えている場合がある。すべての要件が満たされていない場合、走査が不十分になり、対応する３Ｄマップが不完全になったりかつ／または、歪んだりし得る。これは、複数の領域がある広い屋内空間を走査する場合に特に当てはまる。

【発明の概要】

【0004】

概要
少なくとも１つの態様において、本開示は、一般に、３Ｄマップを生成するための方法を説明する。この方法は、モバイルコンピューティングデバイスの深度センサを使用して第１の領域の第１の走査を実行することを含む。この方法は、モバイルコンピューティングデバイスの超広帯域（ＵＷＢ）位置センサを使用して、第１の走査中にアンカー位置に対してモバイルコンピューティングデバイスの位置を特定することをさらに含む。この方法は、第１の領域の第１の３Ｄマップを生成することをさらに含み、第１の３Ｄマップはアンカー位置を基準とする。

【0005】

可能な実装では、この方法は、モバイルコンピューティングデバイスの深度センサを使用して第２の領域の第２の走査を実行することをさらに含む。モバイルコンピューティングデバイスは、第２の領域の第２の３Ｄマップを生成できるように、モバイルコンピューティングデバイスのＵＷＢ位置センサを使用する第２の走査中にアンカー位置に対して相対的に配置される。第１の３Ｄマップと同様に、第２の３Ｄマップはアンカー位置を基準としている。この方法は、（共通の）アンカー位置に基づいて第１の３Ｄマップと第２の３Ｄマップを結合することをさらに含む。

【0006】

第１の領域は、建物や住宅などの屋内空間の第１の部屋とすることができ、第２の領域は、屋内空間の第２の部屋とすることができる。アンカー位置は、スマートデバイス（例えば、スマートホームデバイス）が固定的に配置される屋内空間内の位置であり得る。

【0007】

スマートデバイスは、モバイルコンピューティングデバイスのＵＷＢ位置センサとのＵＷＢ通信用に構成することができる。ＵＷＢ通信を通じて、スマートデバイスに対するモバイルコンピューティングデバイスの範囲および／または方向が決定され、走査中にモバイルコンピューティングデバイスの位置を特定する（すなわち、追跡する）ために使用され得る。３Ｄマップを空間的に配置して、両方の領域をカバーする第３の３Ｄマップを形成できる。両方の３Ｄマップが屋内空間内のスマートデバイスのアンカー位置を基準にして生成（すなわち、再構成）されるため、この空間配置が可能になる。

【0008】

別の態様では、本開示は、一般に、（可動）スマートデバイスの動作をその位置に基づいて制御するための方法を説明する。この方法は、結合された３Ｄマップを生成することを含む。３Ｄマップは、モバイルコンピューティングデバイスによって走査された第１の領域と第２の領域を含む。第１の領域と第２の領域は、ＵＷＢ通信によって決定されるアンカー位置に対する相対位置に従って、結合された３Ｄマップ内に配置される。この方法は、結合された３Ｄマップ内の複数の位置にタグ付けすることをさらに含む。この方法は、ＵＷＢ通信および結合された３Ｄマップに基づいてスマートデバイスを追跡することと、スマートデバイスが結合された３Ｄマップ内のタグ付けされた位置にあることを決定することと、タグ付けされた位置に基づいてスマートデバイスの動作を調整することとをさらに含む。

【0009】

可能な実装では、建物または住宅の境界は、結合された３Ｄマップに基づいて識別することができるので、建物または住宅の境界の外側の位置にタグ付けすることができる。スマートデバイスが建物または住宅の境界の外側の位置にある場合、そのアクセス（例えば、ネットワーク）が制限され得る。

【0010】

別の可能な実装では、結合された３Ｄマップと関連付けられる画像に基づいて物体を識別することができるため、その物体の周囲の領域にタグ付けすることができる。スマートデバイスが物体の周囲の領域に入ると、スマートデバイス上に情報が表示され得る。例えば、エアロバイク（登録商標）の周囲の領域は、スマートデバイスをトリガして、エアロバイクでのトレーニングに関連する情報を表示し得る。

【0011】

別の可能な実装では、部屋は、結合された３Ｄマップに基づいて識別され得る。さらに、部屋は、結合された３Ｄマップと関連付けられた画像内で識別された物体に基づいて決定される部屋タイプに従ってタグ付けすることができる。スマートデバイスが部屋に入ると、媒体の再生が制御され得る（部屋のタイプに基づいて）。例えば、画像内で識別されたベッドを使用して部屋を寝室としてタグ付けすることができ、スマートデバイス（例えば、スマートスピーカ）での再生を寝室に適したものにすることができる。

【0012】

別の態様では、本開示は、３Ｄマップを生成するためのシステムを概説する。このシステムは、アンカー位置に固定的に配置され、ＵＷＢ通信用に構成されたスマートデバイス（例えば、スマートホームデバイス）を含む。このシステムは、モバイルコンピューティングデバイス（例えば、携帯電話、タブレット、ＡＲメガネ）をさらに含む。モバイルコンピューティングデバイスには深度センサが含まれ、深度センサは、第１の走査中に深度センサが第１の領域上で走査されるときに、第１の領域に対応する深度データの第１のセットを収集し、第２の走査中に深度センサが第２の領域にわたって走査されるときに、第２の領域に対応する深度データの第２のセットを収集するように構成されている。モバイルコンピューティングデバイスは、スマートデバイスとＵＷＢタグとの間のＵＷＢ通信に基づいて、第１の走査および第２の走査中にモバイルコンピューティングデバイスとアンカー位置との間の範囲を決定するように構成されたＵＷＢタグをさらに含む。モバイルコンピューティングデバイスは、３Ｄマッピング方法を実行するためにソフトウェア命令によって構成され得るプロセッサをさらに含む。３Ｄマッピング方法は、第１の走査中のモバイルコンピューティングデバイスとアンカー位置との間の範囲に基づいて、深度データの第１のセットをアンカー位置に登録することと、深度データの登録された第１のセットに基づいて、アンカー位置に対する第１の３Ｄマップを生成することと、を含む。３Ｄマッピング方法は、第２の走査中に、モバイルコンピューティングデバイスとアンカー位置との間の範囲に基づいて、深度データの第２のセットをアンカー位置に登録することと、深度データの登録された第２のセットに基づいて、アンカー位置に対する第２の３Ｄマップを生成することをさらに含む。３Ｄマッピング方法は、第１の３Ｄマップと第２の３Ｄマップを結合することをさらに含む。

【0013】

前述の例示的な概要、ならびに本開示の他の例示的な目的および／または利点、ならびにそれを達成する方法は、以下の詳細な説明およびその添付図面の中でさらに説明される。

【図面の簡単な説明】

【0014】

【図1】本開示の可能な実装による、屋内領域を走査して３Ｄマップの深度データを取得するモバイルコンピューティングデバイスを示す図である。

【図2】屋内位置システム内に構成されたモバイルコンピューティングデバイスおよびスマートデバイスを含む屋内空間の平面図である。

【図3】本開示の可能な実装による超広帯域タグのブロック図である。

【図4】本開示の可能な実装による屋内空間の可能な３Ｄ走査シナリオを示す図である。

【図5】図４に示される３Ｄ走査シナリオから結合された３Ｄマップを生成するための第１の可能な方法を示すフローチャートである。

【図6】図４に示される３Ｄ走査シナリオから結合された３Ｄマップを生成するための第２の可能な方法を示すフローチャートである。

【図7】図４に示される３Ｄ走査シナリオから結合された３Ｄマップを生成するための第３の可能な方法を示すフローチャートである。

【図8】図４に示される３Ｄ走査シナリオからの結合された３Ｄマップを使用する可能な用途を示す図である。

【図9】本開示の可能な実装による、結合された３Ｄマップを生成するための方法のフローチャートである。

【図10】本明細書で説明される技術とともに使用され得る例示的なコンピューティング環境を示す図である。

【発明を実施するための形態】

【0015】

図面内の構成要素は、必ずしも相互の縮尺通りではない。いくつかの図を通して、同様の参照番号は対応する部分を示す。

【0016】

詳細な説明
モバイルコンピューティングデバイス（例えば、携帯電話、タブレット、拡張現実（ＡＲ）メガネ）は、屋内空間の３Ｄマップ（すなわち、３Ｄモデル、３Ｄ走査）を作成するために、屋内空間（例えば、住宅、建物、オフィスなど）の領域（例えば、部屋、ホールなど）を走査できる深度センサ（すなわち、深度カメラ）を備えて構成され得る。３Ｄマップは、屋内空間を正確に描写する空間関係で配置される物体（例えば、壁、家具、アイテム）の相対的な寸法を含む屋内空間のレンダリングである。３Ｄマップは、空間のインタラクティブなビュー（例えば、仮想ツアー）を得るために直接使用され得る。あるいは、情報を３Ｄマップから導き出して、何らかのアプリケーション（例えば、コンピュータ支援設計、拡張現実など）を強化または有効にすることもできる。

【0017】

図１に示すように、３Ｄマップの深度データの取得は、深度センサの限られる視野（ＦＯＶ）に対応するために屋内領域１００の３Ｄ走査中に経路１２０に沿ってモバイルコンピューティングデバイス１１０に含まれる深度センサを物理的に走査することによって達成され得る。モバイルコンピューティングデバイス１１０は、３Ｄ走査中にその位置／方向を監視することができ（例えば、慣性測定装置（ＩＭＵ）および／またはカメラを使用して）、これにより、走査中に深度データをモバイルコンピューティングデバイスの相対位置／方向に登録できるようになる。深度データは、３Ｄ走査中のモバイルコンピューティングデバイスの位置／方向に対して相対的であり、物理座標系に対して相対的なものではないため、異なる３Ｄ走査からの深度データのセットの相対的な位置／方向を決定するのは困難な場合がある。したがって、屋内空間の複数の異なる領域の３Ｄマップを作成することは困難な場合があり、現在、ほとんどのソリューションには技術的な問題がある。

【0018】

１回の走査で複数の異なる領域を連続的に走査して、複数の異なる領域の３Ｄマップを作成するには、実際よりも多くの処理能力および／またはメモリが必要になる場合があり、走査が中断される場合、ユーザは時間のかかる走査プロセスを再開しなければならない場合がある。複数の領域を個別に走査して（すなわち、複数の走査セッションで）複数の領域の結合された３Ｄマップを作成し、その後３Ｄマップを結合するには、相対的な位置／方向を決定するために３Ｄマップに重複する領域が必要になり得る。これらの重複領域を取得して登録することは、いくつかの理由から難しい場合がある。第一に、重複領域に認識可能なランドマークがなく、常に利用できるとは限らない場合、使用可能な重複領域を取得することが困難になり得る。第二に、ユーザが重複領域を不適切に走査すると、使用可能な重複領域を取得することが困難になり得、ユーザに追加の要件が課せられる。利用可能な重複領域が取得できたとしても、処理が必要となるため自動的に登録することが困難な場合があり、重複領域に基づいて手動で３Ｄマップを結合するには時間がかかり得る。

【0019】

開示されるシステムおよび方法は、各３Ｄ走査中に位置データ［location data］（つまり、位置データ［position data］）を取得することによって、屋内空間の複数の領域の３Ｄマップを作成するための技術的ソリューションを提供するため、各３Ｄ走査が屋内空間の物理的な位置（すなわち、アンカー位置）に登録され（または登録できる）、その後、共通のアンカー位置（すなわち、アンカー点）に基づいて３Ｄマップが結合される。開示されるアンカー位置は、スマートホームデバイス（例えば、スマートスピーカ、ハブデバイス、スマートサーモスタットなど）などのスマートデバイスの位置であり得、通常は移動されないか、または恒久的に設置されている（すなわち、固定的に配置されている）。位置データは、走査を実行するモバイルコンピューティングデバイスとスマートデバイス間の超広帯域（ＵＷＢ）通信に基づく位置追跡によって取得できる。本開示は、結合された３Ｄマップから情報を収集し、結合された３Ｄマップを拡張現実を含むモバイルアプリケーションに使用するための可能な技術的機会についてもさらに説明する。

【0020】

図２は、屋内測位システム（ＩＰＳ）として構成されたモバイルコンピューティングデバイスおよびスマートデバイスを含む屋内空間の平面図である。モバイルコンピューティングデバイスおよびスマートデバイスのみが示されているが、ＩＰＳは、さまざまな可能なアプリケーションに対してさまざまな可能なデバイスのさまざまな構成を使用して実装され得ることに留意されたい。ここで、アンカー位置に固定的に配置されるスマートデバイス２２０による３Ｄ走査中のモバイルコンピューティングデバイス２１０の位置／追跡の１つの可能な実装について説明する。

【0021】

図２に示すように、モバイルコンピューティングデバイス２１０は、屋内空間２００の領域（すなわち、寝室）内で移動することができるが、スマートデバイス２２０は、固定位置に位置したままである。図に示すように、スマートデバイスはアンカー位置にある。アンカー位置は、屋内空間２００内であってもよいし、屋内空間２００の外側であってもよい。例えば、隣接する屋内空間（図示せず）のスマートデバイスをアンカー点として使用することができる。

【0022】

モバイルコンピューティングデバイス２１０およびスマートデバイス２２０は、ＵＷＢ通信リンク２３０を介して通信するように構成されている。これらのデバイス間のＵＷＢ通信は、スマートデバイス２２０に対するモバイルコンピューティングデバイス２１０の位置（position）（すなわち、位置(location)）を特定および追跡するために使用され得る。例えば、モバイルコンピューティングデバイス２１０は、領域の３Ｄ走査中に、スマートデバイスに対するその位置を特定し、追跡することができる。

【0023】

モバイルコンピューティングデバイス２１０およびスマートデバイス２２０は各々、少なくとも１つのＵＷＢタグ（すなわち、ＵＷＢモジュール）を含むことができる。ＵＷＢタグは、ＵＷＢ通信を介して情報を送受信するように構成できる。この情報は、モバイルコンピューティングデバイス２１０および／またはスマートデバイス２２０の相対位置を決定するために使用することができ、ＵＷＢタグが相対位置を出力するように構成されている場合、それはＵＷＢ位置センサと呼ばれることがある。相対位置は、さまざまなアプローチを使用してＵＷＢ位置センサによって決定できる。

【0024】

ＵＷＢ位置センサ（すなわち、ＵＷＢセンサ）は、ＵＷＢ通信に基づいて、モバイルコンピューティングデバイス２１０とスマートデバイス２２０との間の範囲（ｒ）を決定することができる。例えば、範囲（ｒ）は、モバイルコンピューティングデバイス２１０とスマートデバイス２２０との間で交換される情報（例えば、ハンドシェイク）にかかるラウンドトリップタイム（ＲＴＴ）に基づいてもよい。いくつかの実装では、ＵＷＢ位置センサは範囲（ｒ）だけでなく角度（θ）も決定できる。この角度は、アンカー位置（図２に示す）またはアンカー位置からオフセットされる既知の位置に位置することができる固定座標系２２５（ｘ、ｙ、ｚ）に対して相対的であり得る。角度（θ）の決定は、到着時間差（ＴＯＡ）に基づいて行うことができる。ＵＷＢ位置センサは、複数のアンテナの各々が異なる時間にＵＷＢ信号を受信するように、アレイ状に配置される複数のアンテナで構成され得る。到達時間差を計算することにより、角度（θ）に対応するＵＷＢ信号の入射角を決定できる。これらの測定には、マルチパス信号を除去するステップがさらに含まれ得、他の次元（つまり、平面）に拡張することもできる。例えば、ＵＷＢ通信は、２つのデバイス（図示せず）間の相対的な高度を決定するのに役立ち得る。

【0025】

いくつかの実装では、ＩＰＳは複数のスマートデバイス（すなわち、複数のアンカー位置）を含む。したがって、ＵＷＢ通信は、モバイルコンピューティングデバイス２１０が各スマートデバイスに対する適切な相対位置を決定できるように、スマートデバイス識別情報（すなわち、デバイスＩＤ）を含むことができる。複数のスマートデバイスを使用すると、モバイルコンピューティングデバイスと各スマートデバイスの間の範囲に基づいて三角測量が可能になる場合もある。さらに、複数のスマートデバイスを使用すると、スマートデバイスの動きを検出でき得る。例えば、各スマートデバイスは、他のスマートデバイスの位置を監視することができ、スマートデバイスの移動により、スマートデバイスがその位置を更新／変更し、および／またはそのデバイスＩＤを更新／変更するようにトリガすることができる。

【0026】

図３は、本開示の可能な実装によるＵＷＢタグのブロック図である。図示のＵＷＢタグは、モバイルコンピューティングデバイスおよび／またはスマートデバイスの一部として（すなわち、非一体実装）または、モバイルコンピューティングデバイスおよび／またはスマートデバイスに結合されるスタンドアロンデバイスとして（すなわち、単一の実装）統合できる。単一実装では、ＵＷＢタグ３００はプロセッサ３１０を含むことができる。プロセッサ３１０は、ソフトウェア命令に従って動作（例えば測距、測位）を実行するように構成され得る。ソフトウェア命令（すなわち、ソフトウェア、コードなど）は、メモリ３２０（例えば、非一時的なコンピュータ可読メモリ）に記憶され、そこから読み出すことができる。プロセッサ３１０は、メモリ３２０に通信可能に結合され、実行のためにソフトウェアを取得し、ソフトウェアの実行から得られる情報を読み書きするように構成され得る。例えば、往復時間、範囲、角度、位置などに関するデータは、メモリ３２０に記憶され得る（およびメモリ３２０から取得され得る）。ＵＷＢタグ３００がモバイルコンピューティングデバイスまたはスマートデバイスの一部として統合される場合（すなわち、非一体実装）、プロセッサ３１０は、モバイルコンピューティングデバイスまたはスマートデバイスの中央処理装置（ＣＰＵ）として実装され得る。例えば、ＡＲメガネにおいてＵＷＢタグ機能を提供するように構成された構成要素は、ＡＲメガネの中央処理装置を利用することができる。

【0027】

ＵＷＢタグ３００は、ハードウェア（例えば、論理回路）またはソフトウェア（例えば、サイクルカウンタ）で実装されるクロック３１５をさらに含むことができる。クロック３１５は、デジタル処理のタイミングを制御することができ、イベントのタイミング（例えば、期間、間隔）を計算するのに有用であり得るタイムスタンプとして機能することができる。イベントは、ＵＷＢタグ３００の通信（例えば、往復時間）、またはＵＷＢ通信のハンドシェイクプロトコルに関連する他のイベントに対応し得る。

【0028】

ＵＷＢタグ３００は、特定の機能のためにプロセッサを補助または置き換えるように構成されたデジタル信号プロセッサ（ＤＳＰ３３０）をさらに含むことができる。例えば、ＤＳＰは、ＵＷＢタグ間の通信に関する態様（例えば、パケット形成、信号識別など）を実行するように構成され得る。プロセッサ３１０および／またはＤＳＰ３３０は、ＵＷＢアンテナ３４５を介してＵＷＢ通信リンク３５０上で信号を通信するようにＵＷＢ送信機／受信機（すなわち、ＵＷＢトランシーバ３４０）を構成し得る。信号は、ハンドシェイク動作（すなわち、ハンドシェイクプロトコル）を含むことができるＵＷＢプロトコルに対応することができる。ＵＷＢ通信リンク３５０は、複数のＵＷＢタグを含むＵＷＢネットワーク３５５の通信チャネルとして機能することができる。いくつかの実装では、処理が複数のＵＷＢタグによって共有され得る。これらの実装では、ＵＷＢ通信リンク３５０は、部分的に処理される情報をＵＷＢタグ間で中継する役割を果たし得る。

【0029】

ＵＷＢタグ３００は、データトランシーバ３６０（例えば、Ｂｌｕｅｔｏｏｔｈ（登録商標）トランシーバ、ＷｉＦｉトランシーバ、５Ｇトランシーバなど）をさらに含むことができ、データトランシーバは、データアンテナ３６５を介してデータ通信リンク３７０上で信号を通信するようにプロセッサ３１０および／またはＤＳＰ３３０によって構成され得る。データ通信リンク３７０は、ＵＷＢネットワーク以外のデータネットワークのための通信チャネルとして機能することができる。例えば、データ通信リンク３７０は、ＵＷＢネットワーク３５５内の１つまたは複数のＵＷＢタグがＢｌｕｅｔｏｏｔｈ通信を介してモバイルコンピューティングデバイスと通信できるように構成されたＢｌｕｅｔｏｏｔｈ通信リンクであってもよい。言い換えれば、ＵＷＢタグのうちの１つまたは複数は、ＵＷＢネットワーク３５５の一部である（すなわち、ＵＷＢネットワーク３５５と通信する）ことに加えて、データネットワーク３７５（例えば、ＷｉＦｉネットワーク、ＣＤＭＡネットワーク、Ｂｌｕｅｔｏｏｔｈネットワーク）の一部（すなわち、データネットワーク３７５と通信する）であってもよい。この追加のデータ通信リンク３７０は、ＵＷＢタグ３００と通信するための別のデバイス（例えば、ＡＲデバイス、ＶＲデバイス、携帯電話、タブレットなど）のためのポートとして考えることができる。このポートは、他のデバイスが測位に必要な処理の一部を実行するように構成されている実装、または他のデバイスが測位の結果を受信するように構成されている実装で役立つ場合がある（例えば、ＡＲアプリケーション、ＶＲアプリケーションなどで）。

【0030】

ＵＷＢタグ３００は、慣性測定装置（ＩＭＵ３９０）をさらに含んでもよい。ＩＭＵ３９０は、ＵＷＢタグ３００の動きおよび方向を測定するように構成された１つまたは複数の加速度計および磁力計を含み得る。非一体実装の場合、ＩＭＵ３９０は、モバイルコンピューティングデバイスまたはスマートデバイスのＩＭＵであってもよい。例えば、ＡＲグラスにＵＷＢタグ機能を提供する構成要素は、ＡＲグラスのＩＭＵを利用することができる。

【0031】

ＵＷＢタグ３００は、構成要素に通電して機能させるためのバッテリ３８０（例えば、充電式バッテリ）などの電源をさらに含むことができる。非一体実装の場合、バッテリは、モバイルコンピューティングデバイスまたはスマートデバイス用のバッテリであってもよい。例えば、ＡＲメガネにおいてＵＷＢタグ機能を提供する構成要素は、ＵＷＢタグ専用のバッテリではなく、ＡＲメガネのバッテリから電力を供給され得る。

【0032】

図２に戻ると、ＵＷＢ位置データは、モバイルコンピューティングデバイス２１０によって収集される３Ｄ走査データ（例えば、深度データ）とともに記憶され、固定座標系２２５に登録された３Ｄマップを再構成するために使用され得る。モバイルコンピューティングデバイスは、さまざまな時点で複数の走査を実行するために使用され、さまざまなスマートデバイスをアンカー点として使用し得るため、屋内空間２００内の複数の領域（例えば、部屋）の３Ｄマップを生成するためにデータを識別し、記憶し、結合するさまざまな方法があり得る。

【0033】

図４は、屋内空間に対する可能な３Ｄ走査シナリオを示す。示される走査シナリオは、本開示の態様を説明するために詳細に説明されるが、この走査シナリオに対する明らかな変形および他の可能な走査シナリオは、開示される技術の範囲内であると理解されたい。図４に示すように、屋内空間４００は、第１のアンカー位置に配置される第１のスマートデバイス４１０（例えば、スマートホームハブ）と、第２のアンカー位置に配置される第２のスマートデバイス４２０（例えば、スマートホームサーモスタット）とを含む。モバイルコンピューティングデバイス４３０は、屋内空間４００内の領域（例えば、部屋）の３Ｄ走査を行うように構成されている。３Ｄ走査は、ユーザが参加するマッピングプロセスの一部である場合もあれば、ユーザが参加する必要のない別のプロセス（例えば、ＡＲゲーム）の一部である場合もある。モバイルコンピューティングデバイス４３０は、第１のスマートデバイス４１０および第２のスマートデバイス４２０に対するその位置を決定するようにさらに構成されている。したがって、３Ｄ走査は、第１のアンカー位置（すなわち、第１のスマートデバイス４１０）および／または第２のアンカー位置（すなわち、第２のスマートデバイス４２０）に登録された３Ｄマップを生成することができる。

【0034】

同じアンカー位置に登録された３Ｄマップを結合して、より多くの情報を含む結合された３Ｄマップを形成することができる。例えば、結合された３Ｄマップは、（ｉ）第１の３Ｄ走査中に走査される屋内空間の第１の部屋、および（ｉｉ）第２の３Ｄ走査中に走査される屋内空間の第２の部屋を含み得る。登録された３Ｄマップを結合すると、部分的な３Ｄマップを異なる時点で生成し、次いで時間をかけて結合してより完全な３Ｄマップを形成することもできる。例えば、結合された３Ｄマップは、（ｉ）第１の走査中に走査される第１の部屋の第１の部分３Ｄ走査、および（ｉｉ）第２の走査中に走査される第１の部屋の第２の部分３Ｄ走査を含み得る。言い換えれば、結合された３Ｄマップには、各構成マップよりも多くの領域および／または詳細を含めることができる。

【0035】

図４に示すように、モバイルコンピューティングデバイス４３０は、屋内空間４００の第１の部屋（すなわち、寝室４０１）の第１の３Ｄ走査４３１を行う。第１の３Ｄ走査４３１中、モバイルコンピューティングデバイス４３０は、上述したように、第１のスマートデバイス４１０とのＵＷＢ通信に基づいて相対位置データを収集する。この位置データは、第１のスマートデバイス４１０に関連付けられる識別子（すなわち、ＩＤ）によって、第１のアンカー位置に対する相対的な位置として識別することができる。

【0036】

第１の３Ｄ走査中に、モバイルコンピューティングデバイス４３０は、上述したように、第２のスマートデバイス４２０とのＵＷＢ通信に基づいて相対位置データを収集することもできる。この位置データは、第２のスマートデバイス４２０に関連付けられるＩＤによって、第２のアンカー位置に対する相対的な位置として識別することができる。

【0037】

別の時間に、モバイルコンピューティングデバイス４３０は、屋内空間４００の第２の部屋（すなわち、オフィス４０２）の第２の３Ｄ走査４３２を行う。第２の３Ｄ走査４３２中、モバイルコンピューティングデバイス４３０は、上述したように、第１のスマートデバイス４１０とのＵＷＢ通信に基づいて相対位置データを収集する。この位置データは、第１のスマートデバイス４１０に関連付けられるＩＤによって、第１のアンカー位置に対する相対的な位置として識別することができる。

【0038】

各３Ｄ走査の結果、ＩＭＵデータ、カメラデータ、および／または深度センサデータの何らかの組合せを含むことができる３Ｄ走査データが得られる。３Ｄ走査データは、アンカー位置に対する距離および／または方向を含むことができるＵＷＢ位置データ（すなわち、位置データ、ＵＷＢデータ）に関連付けることができる。位置データは、そのＩＤ（例えば、デバイスＩＤ）によって識別され、アンカー位置を示すことができる。走査／位置データを再構成および結合して、図４に示される例示的なシナリオから結合された３Ｄマップを生成するためのいくつかの可能な方法を図５～７に示し、次に説明する。

【0039】

図５は、図４に示される３Ｄ走査シナリオから結合された３Ｄマップを生成するための第１の可能な方法を示すフローチャートである。上述したように、第１の３Ｄ走査の結果、寝室４０１の３Ｄ走査データ（すなわち、３Ｄ－ＤＡＴＡ）および第１のスマートデバイス４１０に対する位置データ（すなわち、ＰＯＳ－ＤＡＴＡ（ＩＤ＝１））を含む第１のデータセット５０１が得られる。第１の３Ｄ走査はまた、寝室４０１の３Ｄ走査データ（すなわち、３Ｄ－ＤＡＴＡ）および第２のスマートデバイス４２０に対する位置データ（すなわち、ＰＯＳ－ＤＡＴＡ（ＩＤ＝２））を含む第２のデータセット５０２をもたらす。この例では、第１のデータセット５０１と第２のデータセット５０２の３Ｄ走査データは同じである（すなわち、同じ走査の結果である）が、実際には異なり得る。例えば、寝室４０１の２つの３Ｄ走査を取得することができ、１回目の寝室の第１の３Ｄ走査は、第１のアンカー位置に基づいて取得され、２回目の寝室の第２の３Ｄ走査は、第２のアンカー位置に基づいて取得され得る。

【0040】

上述のように、オフィス４０２の３Ｄ走査の結果、オフィス４０２の３Ｄ走査データ（すなわち、３Ｄ－ＤＡＴＡ）および第１のスマートデバイス４１０に対する位置データ（すなわち、ＰＯＳ－ＤＡＴＡ（ＩＤ＝１））を含む第３のデータセット５０３が得られる。第１のデータセット５０１、第２のデータセット５０２、および第３のデータセット５０３は、後の再構成および結合のためにメモリ５２０に記憶され得る。メモリは、モバイルコンピューティングデバイスのローカルメモリであってもよい。あるいは、メモリは、モバイルコンピューティングデバイスがネットワークを介してアクセスできるリモートメモリ（例えば、クラウドメモリ）であってもよい。この実装では、各３Ｄ走査からのデータは３Ｄマップに再構成されずに記憶される。言い換えれば、各走査の生データは３Ｄマップに再構成されずに記憶される。このアプローチには、記憶されるデータが生の状態にあり、必要に応じて再構成および結合できるため、単純さの点で利点があり得る。

【0041】

図５に示すように、この方法は、生データが結合された３Ｄマップに変換される再構成（すなわち、ＲＥＣＯＮ）および結合（すなわち、ＭＥＲＧＥ）プロセス５３０をさらに含む。再構成／結合プロセス５３０は、座標系を共有する（すなわち、共通のアンカー点からの位置データを有する）データセットを求めてデータセット（すなわち、データセットのメタデータ）を検索することを含むことができる。例えば、示されるように、再構成および結合プロセス５３０は、各々の位置データが同じ識別子（ＩＤ＝１）を有するため、第１のデータセット５０１および第３のデータセット５０３に対して動作する。再構成および結合プロセス５３０の出力は、図４において空間的に配置され配向される寝室４０１およびオフィス４０２を表す結合された３Ｄマップ５１０である。結合された３Ｄマップ５１０は、３Ｄフォーマット（例えば、ｏｂｊ）であってもよい。結合された３Ｄマップには、結合に使用されるアンカー位置を識別するメタデータが含まれる場合と含まれない場合がある。

【0042】

図６は、図４に示される３Ｄ走査シナリオから結合された３Ｄマップを生成するための第２の可能な方法を示すフローチャートである。第１のデータセット５０１、第２のデータセット５０２、および第３のデータセット５０３は各々、３Ｄ再構成アルゴリズム６１０に適用される。第１のデータセット５０１の再構成（すなわち、ＲＥＣＯＮ）により、第１のアンカー点に登録されたデータを有する寝室４０１の第１の登録された３Ｄマップ６０１が得られる。したがって、第１の登録された３Ｄマップ６０１は、その３Ｄマップがどの座標系（すなわち、アンカー位置）（すなわち、第１のスマートデバイス４１０）に登録されているかを示す関連付けられたＩＤ（すなわち、ＩＤ＝１）を有する。第２のデータセット５０２の再構成により、第２のアンカー点に登録されたデータを有する寝室４０１の第２の登録された３Ｄマップ６０２が得られる。したがって、第２の登録された３Ｄマップ６０２は、３Ｄマップがどの座標系（すなわち、アンカー位置）（すなわち、第２のスマートデバイス４２０）に登録されているかを示す関連付けられたＩＤ（すなわち、ＩＤ＝２）を有する。第３のデータセット５０２の再構成により、第１のアンカー点に登録されたデータを有するオフィス４０２の第３の登録された３Ｄマップ６０３が得られる。したがって、第３の登録された３Ｄマップ６０３は、その３Ｄマップがどの座標系（すなわち、アンカー位置）（すなわち、第１のスマートデバイス４１０）に登録されているかを示す関連付けられたＩＤ（すなわち、ＩＤ＝１）を有する。

【0043】

第１の登録された３Ｄマップ６０１、第２の登録された３Ｄマップ６０２、および第３の登録された３Ｄマップ６０３は、後の使用および／または結合のためにメモリ６２０に記憶され得る。メモリは、モバイルコンピューティングデバイスのローカルメモリであってもよい。あるいは、メモリは、モバイルコンピューティングデバイスがネットワークを介してアクセスできるリモートメモリ（例えば、クラウドメモリ）であってもよい。この実装では、使用可能な３Ｄマップが記憶され、後で結合できるように識別される。このアプローチは、記憶され登録された３Ｄマップが個別のマップとして使用可能であり、必要に応じて結合できるため、使いやすさと汎用性の点で利点があり得る。各登録された３Ｄマップの再構成と記憶は、異なる時点で行われ得るため、領域の登録済みマップは時間の経過とともに記憶装置に蓄積され得る。

【0044】

この方法は、登録された３Ｄマップを組み合わせて結合されたＤマップ６４０を生成する結合（すなわち、ＭＥＲＧＥ）プロセス６３０をさらに含む。結合プロセス６３０は、登録されたマップの識別子をチェックすること、同じ識別を有する登録された３Ｄマップを結合すること、および同じ識別を持たない登録された３Ｄマップを結合しないことを含むことができる。図６に示すように、第１の登録された３Ｄマップ６０１と第３の登録された３Ｄマップ６０３は、両方とも同じ識別子（すなわち、ＩＤ＝１）を有するため、結合６３０される。

【0045】

登録された各３Ｄマップのデータは、３Ｄ点および／または３Ｄ点から作成される３Ｄメッシュ（例えば、ワイヤフレーム）を含むことができる。３Ｄ点は、アンカー位置によって定義される座標系にマッピングできる。いくつかの実装では、登録された３Ｄマップは、領域の画像を含む。例えば、その領域の画像を、その領域を表す３Ｄ表面上にレンダリングできる。

【0046】

図７は、図４に示される３Ｄ走査シナリオから結合された３Ｄマップを生成するための第３の可能な方法を示すフローチャートである。メモリ６２０に記憶された第１の登録された３Ｄマップ６０１、第２の登録された３Ｄマップ６０２、および第３の登録された３Ｄマップ６０３は、それぞれの領域の画像を含むことができる。したがって、この方法は、その領域に関する追加情報について３Ｄマップ画像を分析するための識別プロセス７１０を含むことができる。この追加情報には、領域の特性（例えば、サイズ、形状、色、構成など）および／または領域内の物体（例えば、電化製品、家具、設備など）が含まれ得る。識別プロセスでは、画像認識アルゴリズムを使用してこの情報を認識し得る。この方法は、認識された情報を領域を説明するタグに関連付けることをさらに含むことができる。例えば、第１の登録された３Ｄマップ６０１の画像分析により、寝室４０１のベッドを識別することができる。画像分析は自動的に実行することができ、これにより、３Ｄマッピング時に領域を正確にタグ付けするというユーザの責任を有利に排除することができる。したがって、第１の登録された３Ｄマップ６０１の登録されたマップは寝室としてタグ付けされ得る。タグ付け後、第１の登録／タグ付けされた３Ｄマップ７０１は寝室としてタグ付けされ（すなわち、ＴＡＧ＝ＢＥＤＲＯＯＭ）、第２の登録／タグ付けされた３Ｄマップ７０２は寝室としてタグ付けされ（すなわち、ＴＡＧ＝ＢＥＤＲＯＯＭ）、第３の登録／タグ付けされた３Ｄマップ７０３は、オフィスとしてタグ付けされる（すなわち、ＴＡＧ＝ＯＦＦＩＣＥ）。登録されタグ付けされた３Ｄマップは、モバイルコンピューティングデバイスに対してローカルまたはリモート（例えばクラウド）にあるメモリ７３０に記憶され得る。この方法は、登録／タグ付けされた３Ｄマップを組み合わせて結合された３Ｄマップ７５０を生成する結合（すなわち、ＭＥＲＧＥ）プロセス７４０をさらに含む。図６に示すように、第１の登録／タグ付けされた３Ｄマップ７０１と第３の登録／タグ付けされた３Ｄマップ７０３は、両方とも同じ識別子（すなわち、ＩＤ＝１）を有するため、結合７４０される。結合の結果は、タグ付けされた領域を含む結合された３Ｄマップ７５０である。結合では、登録された３Ｄマップが同じ識別子を持つ必要があり得るが、結合された３Ｄ内の登録された３Ｄマップの一部がタグ付けされていない可能性がある。

【0047】

結合された３Ｄマップは、さまざまなアプリケーションで使用することができる。結合された３Ｄマップは、屋内空間の視覚化に大きな変更を加えることなく使用できる。例えば、結合された３Ｄマップは、屋内空間の３Ｄツアーの一部として、またはＡＲクラウドアンカーなどのＡＲアプリケーションで現実的な仮想物体を生成するのに役立つように提示され得、これにより、複数のユーザが異なる時点において（または同時に）異なる観測点（または同じ観測点）から観測／対話できる永続的な仮想物体をＡＲシーンに追加できる。結合された３Ｄマップは、測定および／または設計の基礎として使用することもできる。例えば、結合された３Ｄマップは、現場測量やコンピュータ支援設計（ＣＡＤ）モデルの作成に使用できる。結合された３Ｄマップは、特に結合された３Ｄマップにタグ付けされた領域／位置が含まれる場合、屋内測位を利用する用途で追加機能を提供するのにも役立ち得る。

【0048】

前述した屋内測位システム（ＩＰＳ）は、３Ｄマッピング以外の用途に使用することもできる。これらの用途は、収集された測位データを結合された３Ｄマップと関連付けることによってさらに強化できる。例えば、スマートデバイスの動作は、領域の結合された３Ｄマップ内でその追跡された位置に基づいて調整できる。

【0049】

図８は、図４に示される３Ｄ走査シナリオからの結合された３Ｄマップの可能な用途を示す。本開示の態様を説明するために示される用途を詳細に説明するが、この用途および他の可能な用途に対する明らかな変形は、開示される技術の範囲内であると理解されたい。

【0050】

図８に示すように、第１のアンカー位置にある第１のスマートデバイス（例えば、スマートホームハブ８０１）は、複数のスマートデバイスの位置を追跡する（または複数のスマートデバイスから位置を受信する）。図示される複数のスマートデバイスには、第１のスマートスピーカ８１０、第２のスマートスピーカ８２０、および（ユーザが着用する）ＡＲメガネ８３０が含まれる。各スマートデバイスは、それ自体を追跡することも、スマートホームハブ８０１に対する相対的な位置を取得するために追跡されることもできる。例えば、ＵＷＢを使用した屋内測位は、第１のスマートスピーカ８１０が第１の位置（ｘ１、ｙ１、ｚ１）にあり、第２のスマートスピーカ８２０が第２の位置（ｘ２、ｙ２、ｚ２）にあり、ＡＲメガネ８３０（ユーザが着用）は、第３の位置（ｘ３、ｙ３、ｚ３）にあることを決定できる。決定された各位置は、スマートホームハブ８０１が配置されている第１のアンカー位置に基づく座標系８４０に対して相対的である。

【0051】

決定された位置は、結合された３Ｄマップ７５０と比較され得る。さらに、決定された位置は、タグ付けによって決定される付加情報と比較されてもよい。例えば、アプリケーションは、結合された３Ｄマップ７５０内のタグ付けされる領域（すなわち、寝室、オフィス）に対する第１の位置と第２の位置との比較に基づいて、第１のスマートスピーカ８１０が寝室にあり、第２のスマートスピーカ８２０は、オフィス内にあると結論付けることができる。結合された３Ｄマップ７５０は、屋内空間の境界を定義するのにも役立ち得る。例えば、第３の位置は、結合された３Ｄマップによって定義される領域内にあるため、アプリケーションは、ＡＲメガネ８３０（ユーザが着用する）が屋内空間の境界内にあると結論付けることもできる。

【0052】

アプリケーションは、スマートデバイスの結論付けられた位置を使用して、それらがどのように動作するかに影響を与えることができる。例えば、ＡＲメガネ８３０が屋内空間の境界内にあると結論付けられたため、アプリケーションは自動的にユーザに機能（すなわち、アクセス）を提供することができ、その結果ユーザが「コンピュータ、オフィスで音楽をかけて」と言ったときに、そのコマンドが実行されるようにする。言い換えれば、結合された３Ｄに対する追跡を使用して、アプリケーションにセキュリティの手段を提供することができる。コマンドを実行するために、アプリケーションは、オフィス内のその位置に基づいて音楽を再生するように第２のスマートスピーカ８２０を構成することができる。第１のスマートスピーカ８１０は、寝部屋内の位置に基づいて無音状態を保つように構成されている。

【0053】

領域に加えて、結合された３Ｄマップ内の特定の位置は、認識された物体に基づいてタグ付けされ得る。図示のように、第４の位置（ｘ４、ｙ４、ｚ４）は、その位置で認識された物体（例えば、エクササイズマシン８５０）に基づいてタグ付けすることができる。結合された３Ｄマップ７５０に対してスマートデバイスを追跡するアプリケーションは、スマートデバイスが物体に近づく（例えば、≦１メートル）ときに機能を変更する（例えば、プロセスの開始／停止）ようにスマートデバイスを構成することができる。例えば、ＡＲメガネ８３０（すなわち、ユーザ）がエクササイズマシン８５０に近づくと、以前のトレーニングからの統計がＡＲメガネのＡＲディスプレイ上に表示され得る。

【0054】

図９は、本開示の可能な実装による、結合された３Ｄマップを生成するための方法のフローチャートである。方法９００は、走査する領域を選択すること９１０を含む。選択することは、走査のために屋内空間の領域内にモバイルコンピューティングデバイスを配置することを含むことができる。この方法は、モバイルコンピューティングデバイスを使用して領域（例えば、部屋）の３Ｄ走査を実行すること９２０をさらに含む。３Ｄ走査は、センサ（例えば、深度センサ、カメラ、ＩＭＵ）が領域およびモバイルコンピューティングデバイスに関する情報を捕捉する際に、モバイルコンピューティングデバイスを移動させることを含むことができる。この方法は、（例えば、モバイルコンピューティングデバイスの）ＵＷＢ位置センサを使用して、３Ｄ走査中にアンカー位置に対してモバイルコンピューティングデバイスの位置を特定すること９３０をさらに含む。位置特定は、モバイルコンピューティングデバイスと、ＵＷＢ用に構成され、ＵＷＢ信号を使用してアンカー位置に位置するスマートデバイスとの間の範囲および／または角度を計算することを含むことができる。この方法は、その領域の３Ｄマップを生成すること９４０をさらに含む。３Ｄマップは、アンカー位置に基づく座標系に対する相対的な３Ｄ点を含むことができる（例えば、アンカー位置は座標系の原点である）。このプロセスを繰り返して、３Ｄマップのコレクション９５０（すなわち、セット）を生成することができる。この方法は、同じアンカー位置９６０を有する３Ｄマップを結合９７０して、結合された３Ｄマップ９８０を形成することをさらに含む。

【0055】

図１０は、ここで説明される技術とともに使用され得る（例えば、モバイルコンピューティングデバイス、スマートデバイス、ＡＲデバイスなどを実装するために）コンピュータデバイス１０００およびモバイルコンピュータデバイス１０５０の例を示す。コンピューティングデバイス１０００は、プロセッサ１００２、メモリ１００４、記憶デバイス１００６、メモリ１００４および高速拡張ポート１０１０に接続する高速インターフェース１００８、低速バス１０１４および記憶デバイス１００６に接続する低速インターフェース１０１２を含む。構成要素１００２、１００４、１００６、１００８、１０１０、および１０１２の各々は、さまざまなバスを使用して相互接続され、共通のマザーボード上に、または必要に応じて他の方法で搭載され得る。プロセッサ１００２は、メモリ１００４または記憶デバイス１００６に記憶された命令を含む、コンピューティングデバイス１０００内で実行するための命令を処理することができ、高速インターフェース１００８に結合されるディスプレイ１０１６などの外部入出力デバイス上のＧＵＩ用のグラフィック情報を表示する。他の実装では、複数のプロセッサおよび／または複数のバスが、複数のメモリおよびメモリのタイプとともに、必要に応じて使用され得る。また、複数のコンピューティングデバイス１０００が接続されてもよく、各デバイスは必要な動作の一部を提供する（例えば、サーババンク、ブレードサーバのグループ、またはマルチプロセッサシステムとして）。

【0056】

メモリ１００４は、コンピューティングデバイス１０００内に情報を記憶する。一実施形態では、メモリ１００４は、１つまたは複数の揮発性メモリ装置である。別の実装では、メモリ１００４は１つまたは複数の不揮発性メモリ装置である。メモリ１００４は、磁気ディスクまたは光ディスクなどの別の形態のコンピュータ可読媒体であってもよい。

【0057】

記憶デバイス１００６は、コンピューティングデバイス１０００に大容量記憶を提供することができる。一実施形態では、記憶デバイス１００６は、コンピュータ可読媒体であってもよいし、コンピュータ可読媒体を含んでもよく、フロッピー（登録商標）ディスクデバイス、ハードディスクデバイス、光ディスクデバイス、またはテープデバイス、フラッシュメモリまたは他の同様のソリッドステートメモリデバイス、または記憶領域ネットワークもしくはその他の構成内のデバイスを含むデバイスのアレイなどである。コンピュータプログラム製品は、情報担体に具体的に組み込むことができる。コンピュータプログラム製品には、実行時に上記のような１つまたは複数の方法を実行する命令も含まれ得る。情報担体は、メモリ１００４、記憶デバイス１００６、またはプロセッサ１００２上のメモリなどのコンピュータまたは機械可読媒体である。

【0058】

高速コントローラ１００８は、コンピューティングデバイス１０００の帯域幅を大量に消費する動作を管理し、一方、低速コントローラ１０１２は、帯域幅をあまり消費しない動作を管理する。このような機能の割り当ては一例にすぎない。一実装では、高速コントローラ１００８は、メモリ１００４、ディスプレイ１０１６（例えば、グラフィックプロセッサまたはアクセラレータを介して）、およびさまざまな拡張カード（図示せず）を受信することができる高速拡張ポート１０１０に結合される。この実装では、低速コントローラ１０１２は記憶デバイス１００６および低速拡張ポート１０１４に結合される。低速拡張ポートには、さまざまな通信ポート（例えば、ＵＳＢ、Ｂｌｕｅｔｏｏｔｈ、イーサネット（登録商標）、無線イーサネット）が含まれ得、例えば、ネットワークアダプタを介して、キーボード、ポインティングデバイス、スキャナなどの１つまたは複数の入出力デバイス、またはスイッチもしくはルータなどのネットワーキングデバイスに結合することができる。

【0059】

コンピューティングデバイス１０００は、図に示すように、多くの異なる形式で実装することができる。例えば、それは、標準サーバ１０２０として実装されてもよいし、そのようなサーバのグループ内で複数回実装されてもよい。それはまた、ラックサーバシステム１０２４の一部として実装されてもよい。さらに、ラップトップコンピュータ１０２２などのパーソナルコンピュータに実装することもできる。あるいは、コンピューティングデバイス１０００の構成要素は、デバイス１０５０などのモバイルデバイス（図示せず）内の他の構成要素と組み合わせることができる。このようなデバイスの各々は、１つまたは複数のコンピューティングデバイス１０００、１０５０を含むことができ、システム全体は、相互に通信する複数のコンピューティングデバイス１０００、１０５０で構成することができる。

【0060】

コンピューティングデバイス１０５０は、他の構成要素の中でもとりわけ、プロセッサ１０５２、メモリ１０６４、ディスプレイ１０５４などの入出力デバイス、通信インターフェース１０６６、およびトランシーバ１０６８を含む。デバイス１０５０には、追加の記憶を提供するために、マイクロドライブまたは他のデバイスなどの記憶デバイスも提供され得る。構成要素１０５０、１０５２、１０６４、１０５４、１０６６、および１０６８の各々は、さまざまなバスを使用して相互接続され、構成要素のいくつかは、共通のマザーボード上に、または適切な他の方法で搭載され得る。

【0061】

プロセッサ１０５２は、メモリ１０６４に記憶される命令を含む、コンピューティングデバイス１０５０内で命令を実行することができる。プロセッサは、別個の複数のアナログおよびデジタルプロセッサを含むチップのチップセットとして実装されてもよい。プロセッサは、例えば、ユーザインターフェース、デバイス１０５０によって実行されるアプリケーション、およびデバイス１０５０による無線通信の制御など、デバイス１０５０の他の構成要素の調整を提供することができる。

【0062】

プロセッサ１０５２は、制御インターフェース１０５８およびディスプレイ１０５４に結合されるディスプレイインターフェース１０５６を介してユーザと通信することができる。ディスプレイ１０５４は、例えば、ＴＦＴＬＣＤ（薄膜トランジスタ液晶ディスプレイ）、ＬＥＤ（発光ダイオード）もしくはＯＬＥＤ（有機発光ダイオード）ディスプレイ、または他の適切なディスプレイ技術であってもよい。ディスプレイインターフェース１０５６は、ディスプレイ１０５４を駆動してグラフィック情報および他の情報をユーザに提示するための適切な回路を含むことができる。制御インターフェース１０５８は、ユーザからコマンドを受信し、それらをプロセッサ１０５２に送信するために変換することができる。さらに、デバイス１０５０と他のデバイスとの近距離通信を可能にするために、プロセッサ１０５２と通信する外部インターフェース１０６２を設けることができる。外部インターフェース１０６２は、例えば、いくつかの実装では有線通信を提供することができ、または他の実装では無線通信を提供することができ、複数のインターフェースを使用することもできる。

【0063】

メモリ１０６４は、コンピューティングデバイス１０５０内に情報を記憶する。メモリ１０６４は、コンピュータ可読媒体、揮発性メモリ装置、または不揮発性メモリ装置のうちの１つまたは複数として実装することができる。拡張メモリ１０７４も提供され、拡張インターフェース１０７２を介してデバイス１０５０に接続され得、拡張インターフェース１０７２は、例えば、ＳＩＭＭ（単一インラインメモリモジュール）カードインターフェースを含み得る。このような拡張メモリ１０７４は、デバイス１０５０に追加の記憶空間を提供することができ、またはデバイス１０５０にアプリケーションもしくは他の情報を記憶することもできる。具体的には、拡張メモリ１０７４は、上述のプロセスを実行または補足するための命令を含むことができ、安全な情報も含むことができる。したがって、例えば、拡張メモリ１０７４は、デバイス１０５０のセキュリティモジュールとして提供されてもよく、デバイス１０５０の安全な使用を許可する命令でプログラムされてもよい。さらに、安全なアプリケーションは、ＳＩＭＭカード上にハッキング不可能な方法で識別情報を配置するなどの追加情報とともに、ＳＩＭＭカードを介して提供され得る。

【0064】

メモリには、例えば、以下に説明するように、フラッシュメモリおよび／またはＮＶＲＡＭメモリが含まれてもよい。一実装では、コンピュータプログラム製品は情報担体に具体的に組み込まれる。コンピュータプログラム製品には、実行時に上記のような１つまたは複数の方法を実行する命令が含まれている。情報担体は、例えばトランシーバ１０６８または外部インターフェース１０６２を介して受信され得る、メモリ１０６４、拡張メモリ１０７４、またはプロセッサ１０５２上のメモリなどのコンピュータまたは機械可読媒体である。

【0065】

デバイス１０５０は、通信インターフェース１０６６を介して無線通信することができ、通信インターフェース１０６６は、必要に応じてデジタル信号処理回路を含み得る。通信インターフェース１０６６は、とりわけ、ＧＳＭ（登録商標）音声通話、ＳＭＳ、ＥＭＳ、もしくはＭＭＳメッセージング、ＣＤＭＡ、ＴＤＭＡ、ＰＤＣ、ＷＣＤＭＡ（登録商標）、ＣＤＭＡ２０００、またはＧＰＲＳなどのさまざまなモードまたはプロトコルの下での通信を提供し得る。このような通信は、例えば無線周波数トランシーバ１０６８を通じて行われてもよい。さらに、Ｂｌｕｅｔｏｏｔｈ、Ｗｉ－Ｆｉ、またはその他の同様のトランシーバ（図示せず）を使用するなど、短距離通信が発生し得る。さらに、ＧＰＳ（全地球測位システム）受信機モジュール１０７０は、追加のナビゲーションおよび位置関連の無線データをデバイス１０５０に提供することができ、このデータは、デバイス１０５０上で実行されるアプリケーションによって適宜使用され得る。

【0066】

デバイス１０５０は、オーディオコーデック１０６０を使用して音声通信することもでき、オーディオコーデック１０６０は、ユーザから話される情報を受信し、それを使用可能なデジタル情報に変換することができる。オーディオコーデック１０６０は、同様に、例えばデバイス１０５０のハンドセット内のスピーカなどを介して、ユーザに対して可聴音を生成することができる。このような音は、音声通話からの音を含んでもよく、録音される音（例えば、音声メッセージ、音楽ファイルなど）を含んでもよく、また、デバイス１０５０上で動作するアプリケーションによって生成される音を含んでもよい。

【0067】

コンピューティングデバイス１０５０は、図に示すように、多くの異なる形式で実装することができる。例えば、携帯電話１０８０として実装されてもよい。それはまた、スマートフォン１０８２、携帯情報端末、または他の同様のモバイルデバイスの一部として実装されてもよい。

【0068】

本明細書で説明されるシステムおよび技術のさまざまな実装は、デジタル電子回路、集積回路、特別に設計されるＡＳＩＣ（特定用途向け集積回路）、コンピュータハードウェア、ファームウェア、ソフトウェア、および／またはそれらの組合せにおいて実現することができる。これらのさまざまな実装には、少なくとも１つのプログラム可能なプロセッサを含むプログラム可能なシステム上で実行可能および／または解釈可能な１つまたは複数のコンピュータプログラムでの実装が含まれ得、これは、特殊用途または汎用であり、記憶システム、少なくとも１つの入力デバイス、および少なくとも１つの出力デバイスからデータおよび命令を受信したり、記憶システム、少なくとも１つの入力デバイス、および少なくとも１つの出力デバイスにデータおよび命令を送信したりするために結合され得る。

【0069】

これらのコンピュータプログラム（プログラム、ソフトウェア、ソフトウェアアプリケーション、またはコードとも呼ばれる）には、プログラマブルプロセッサ用の機械命令が含まれ、高レベルの手続き型および／もしくは物体指向プログラミング言語、ならびに／またはアセンブリ／マシン言語で実装できる。本明細書で使用される場合、「機械可読媒体」「コンピュータ可読媒体」という用語は、プログラマブルプロセッサに機械命令および／またはデータを提供するために使用される任意のコンピュータプログラム製品、装置、および／またはデバイス（例えば、磁気ディスク、光ディスク、メモリ、プログラマブル論理デバイス（ＰＬＤ））を指し、機械可読信号として機械命令を受信する機械可読媒体を含む。「機械可読信号」という用語は、機械命令および／またはデータをプログラマブルプロセッサに提供するために使用される任意の信号を指す。

【0070】

ユーザとの対話を提供するには、ここで説明されているシステムと技術は、ユーザに情報を表示するための表示デバイス（ＬＥＤ（発光ダイオード）、またはＯＬＥＤ（有機ＬＥＤ）、またはＬＣＤ（液晶ディスプレイ）モニター／スクリーン）、ユーザがコンピュータに入力を行えるためのキーボードおよびポインティングデバイス（例えば、マウスやトラックボール）を備えたコンピュータ上で実装できる。他の種類のデバイスを使用して、ユーザとの対話を提供することもできる。例えば、ユーザに提供されるフィードバックは、任意の形式の感覚フィードバック（例えば、視覚的フィードバック、聴覚的フィードバック、または触覚的フィードバック）であり得る。ユーザからの入力は、音響、音声、または触覚入力など、あらゆる形式で受信することができる。

【0071】

ここで説明するシステムと技術は、バックエンド構成要素（データサーバなど）を含み、またはミドルウェア構成要素（アプリケーションサーバなど）を含み、または、フロントエンド構成要素（例えば、ユーザがここで説明するシステムおよび技術の実装と対話できるグラフィカルユーザインターフェースまたはＷｅｂブラウザーを備えたクライアントコンピュータ）、またはそのようなバックエンド、ミドルウェア、またはフロントエンド構成要素の任意の組合せを含むコンピューティングシステムに実装できる。システムの構成要素は、デジタルデータ通信の任意の形式または媒体（例えば、通信ネットワーク）によって相互接続することができる。通信ネットワークの例には、ローカルエリアネットワーク（「ＬＡＮ」）、ワイドエリアネットワーク（「ＷＡＮ」）、およびインターネットが含まれる。

【0072】

コンピューティングシステムは、クライアントとサーバを含むことができる。クライアントとサーバは一般に、互いにリモートにあり、通常は通信ネットワークを通じて対話する。クライアントとサーバの関係は、それぞれのコンピュータ上で実行され、相互にクライアントとサーバの関係を持つコンピュータプログラムによって発生する。

【0073】

いくつかの実装では、図に示されるコンピューティングデバイスは、物理空間内に挿入されるコンテンツを閲覧するための拡張環境を生成するために、ＡＲヘッドセット／ＨＭＤデバイス１０９０とインターフェースするセンサを含むことができる。例えば、コンピューティングデバイス１０５０または図に示される他のコンピューティングデバイスに含まれる１つまたは複数のセンサは、ＡＲヘッドセット１０９０に入力を提供することができ、または一般に、ＡＲ空間に入力を提供することができる。センサには、タッチスクリーン、加速度計、ジャイロスコープ、圧力センサ、生体認証センサ、温度センサ、湿度センサ、周囲光センサなどが含まれ得るが、これらに限定されない。コンピューティングデバイス１０５０は、センサを使用して、ＡＲ空間におけるコンピューティングデバイスの絶対位置および／または検出される回転を決定することができ、それらはＡＲ空間への入力として使用され得る。例えば、コンピューティングデバイス１０５０は、コントローラ、レーザーポインタ、キーボード、武器などの仮想物体としてＡＲ空間に組み込まれてもよい。ＡＲ空間に組み込まれるときのユーザによるコンピューティングデバイス／仮想物体の配置により、ユーザは、ＡＲ空間内で特定の方法で仮想物体を見るようにコンピューティングデバイスを配置することができる。例えば、仮想物体がレーザーポインタを表す場合、ユーザはコンピューティングデバイスを実際のレーザーポインタであるかのように操作できる。ユーザはコンピューティングデバイスを左右、上下、円を描くように動かすなど、レーザーポインタを使用する場合と同様の方法でデバイスを使用できる。いくつかの実装では、ユーザは仮想レーザーポインタを使用してターゲット位置を狙うことができる。

【0074】

いくつかの実装では、コンピューティングデバイス１０５０上に含まれる、またはコンピューティングデバイス１０５０に接続される１つまたは複数の入力デバイスを、ＡＲ空間への入力として使用することができる。入力デバイスには、タッチスクリーン、キーボード、１つまたは複数のボタン、トラックパッド、タッチパッド、ポインティングデバイス、マウス、トラックボール、ジョイスティック、カメラ、マイク、入力機能を備えたイヤホンまたはバド、ゲームコントローラ、またはその他の接続可能な入力デバイスが含まれ得るが、これらに限定されない。コンピューティングデバイスがＡＲ空間に組み込まれるときに、コンピューティングデバイス１０５０に含まれる入力デバイスと対話するユーザは、ＡＲ空間内で特定のアクションを発生させることができる。

【0075】

いくつかの実装では、コンピューティングデバイス１０５０のタッチスクリーンは、ＡＲ空間においてタッチパッドとしてレンダリングされ得る。ユーザは、コンピューティングデバイス１０５０のタッチスクリーンと対話することができる。対話は、例えばＡＲヘッドセット１０９０において、ＡＲ空間内のレンダリングされるタッチパッド上の動きとしてレンダリングされる。レンダリングされる動きにより、ＡＲ空間内の仮想物体を制御できる。

【0076】

いくつかの実装では、コンピューティングデバイス１０５０に含まれる１つまたは複数の出力デバイスは、ＡＲ空間内のＡＲヘッドセット１０９０のユーザに出力および／またはフィードバックを提供することができる。出力とフィードバックは、視覚的、戦術的、または音声のいずれかになる。出力および／またはフィードバックには、振動、１つまたは複数のライトやストロボのオン／オフ、または点滅および／もしくはフラッシュ、アラームの鳴動、チャイムの再生、曲の再生、およびオーディオファイルの再生が含まれ得るが、これらに限定されない。出力デバイスには、振動モーター、振動コイル、圧電デバイス、静電デバイス、発光ダイオード（ＬＥＤ）、ストロボ、スピーカなどが含まれ得るが、これらに限定されない。

【0077】

いくつかの実装では、コンピューティングデバイス１０５０は、コンピュータ生成の３Ｄ環境において別の物体として現れることができる。ユーザによるコンピューティングデバイス１０５０との対話（例えば、回転、振る、タッチスクリーンに触れる、タッチスクリーン上で指をスワイプする）は、ＡＲ空間内の物体との対話として解釈することができる。ＡＲ空間におけるレーザーポインタの例では、コンピューティングデバイス１０５０は、コンピュータ生成の３Ｄ環境において仮想レーザーポインタとして現れる。ユーザがコンピューティングデバイス１０５０を操作すると、ＡＲ空間内のユーザはレーザーポインタの動きを見る。ユーザは、コンピューティングデバイス１０５０上のＡＲ環境におけるコンピューティングデバイス１０５０またはＡＲヘッドセット１０９０上のコンピューティングデバイス１０５０との対話からフィードバックを受信する。コンピューティングデバイスとのユーザの対話は、制御可能なデバイスのＡＲ環境で生成されるユーザインターフェースとの対話に変換することができる。

【0078】

いくつかの実装では、コンピューティングデバイス１０５０はタッチスクリーンを含み得る。例えば、ユーザはタッチスクリーンを動作して、制御可能なデバイスのユーザインターフェースと対話できる。例えば、タッチスクリーンは、制御可能なデバイスのプロパティを制御できるスライダーなどのユーザインターフェース要素を含むことができる。

【0079】

コンピューティングデバイス１０００は、ラップトップ、デスクトップ、ワークステーション、携帯情報端末、サーバ、ブレードサーバ、メインフレーム、および他の適切なコンピュータを含むがこれらに限定されない、さまざまな形態のデジタルコンピュータおよびデバイスを表すことを意図している。コンピューティングデバイス１０５０は、携帯情報端末、携帯電話、スマートフォン、および他の同様のコンピューティングデバイスなど、さまざまな形態のモバイルデバイスを表すことを意図している。ここに示される構成要素、それらの接続と関係、およびそれらの機能は、単なる例であることを意図しており、本文書で説明および／または特許請求される発明の実装を限定することを意図するものではない。

【0080】

多くの実施形態について説明した。それでもなお、本明細書の趣旨および範囲から逸脱することなく、さまざまな修正を行うことができることが理解されるであろう。

【0081】

さらに、図に示されている論理フローは、望ましい結果を達成するために、示されている特定の順序または連続した順序を必要としない。さらに、説明したフローから他のステップを提供したり、ステップを削除したりすることができ、他の構成要素を説明したシステムに追加したり、説明したシステムから削除したりすることができる。したがって、他の実施形態も特許請求の範囲に含まれる。

【0082】

上記の説明にさらに加えて、ユーザには、本明細書で説明されるシステム、プログラム、または機能によってユーザ情報（例えば、ユーザのソーシャルネットワーク、ソーシャルアクション、または活動、職業、ユーザの好み、あるいはユーザの現在地に関する情報）の収集が可能になるかどうか、およびいつ可能になるかの両方について、またユーザがサーバからコンテンツまたは通信を送信されるかどうかについて、ユーザが選択できるようにする制御が提供されてもよい。さらに、特定のデータは、個人を特定できる情報が削除されるように、記憶または使用される前に１つまたは複数の方法で処理され得る。例えば、ユーザの身元情報は、ユーザの個人を特定できる情報が特定できないように処理され得るか、ユーザの特定の位置を特定することができないように、位置情報が取得される位置でユーザの地理的位置が一般化され得る（例えば、都市、郵便番号、州レベル）。したがって、ユーザは、ユーザに関してどのような情報が収集されるか、その情報がどのように使用されるか、およびどのような情報がユーザに提供されるかを制御できる。

【0083】

記載される実装の特定の特徴が本明細書に記載されるように示されているが、多くの修正、置換、変更および均等物が当業者には思い浮かぶであろう。したがって、添付の特許請求の範囲は、実装の範囲内に含まれるすべてのそのような修正および変更を網羅することを意図していることを理解されたい。これらは限定ではなく例としてのみ提示されており、形式および詳細においてさまざまな変更が可能であることを理解されたい。本明細書に記載される装置および／または方法の任意の部分は、相互に排他的な組合せを除いて、任意の組合せで組み合わせることができる。本明細書で説明される実装は、説明される異なる実装の機能、構成要素、および／または特徴のさまざまな組合せおよび／またはサブ組合せを含むことができる。

【0084】

他に定義されない限り、本明細書で使用されるすべての技術用語および科学用語は、当業者によって一般に理解されるのと同じ意味を有する。本明細書に記載のものと類似または同等の方法および材料を、本開示の実施または試験に使用することができる。本明細書および添付の特許請求の範囲で使用される場合、単数形「a」、「an」、「the」は、文脈上明らかに別段の指示がない限り、複数の指示対象を含む。本明細書で使用される「含む」（comprising）という用語およびその変形は、「含む」（including）という用語およびその変形と同義に使用され、オープンで非限定的な用語である。本明細書で使用される「任意の」または「任意に」という用語は、その後に説明される特徴、イベント、または状況が発生する場合も発生しない場合もあり、その説明には、前記特徴、イベント、または状況が発生する場合と発生しない場合とが含まれることを意味する。本明細書では、範囲は、「約」１つの特定の値から、および／または「約」別の特定の値までとして表現され得る。このような範囲が表現される場合、態様には、１つの特定の値からおよび／または他の特定の値までが含まれる。同様に、先行詞「約」を使用して値が近似値として表現される場合、特定の値が別の態様を形成することが理解されよう。各範囲の端点は、他の端点との関係においても、他の端点とは独立しても重要であることがさらに理解されるであろう。

【図1】