特表 2022-543556 インタラクティブな仮想現実環境のためのオーサリングシステム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公表特許公報(A)

(11)【公表番号】

(43)【公表日】2022-10-13

(54)【発明の名称】インタラクティブな仮想現実環境のためのオーサリングシステム

(51)【国際特許分類】

   G06F 3/0482 20130101AFI20221005BHJP

   G06F 3/04815 20220101ALI20221005BHJP

   G06F 3/01 20060101ALI20221005BHJP

   G09G 5/00 20060101ALI20221005BHJP

   G09G 5/377 20060101ALI20221005BHJP

【ＦＩ】

G06F3/0482

G06F3/04815

G06F3/01 510

G09G5/00 510A

G09G5/00 555G

G09G5/00 530M

G09G5/36 520L

【審査請求】未請求

【予備審査請求】未請求

(21)【出願番号】P 2022505558

(86)(22)【出願日】2020-08-07

(85)【翻訳文提出日】2022-03-28

(86)【国際出願番号】 US2020045344

(87)【国際公開番号】W WO2021026422

(87)【国際公開日】2021-02-11

(31)【優先権主張番号】62/884,020

(32)【優先日】2019-08-07

(33)【優先権主張国・地域又は機関】US

(31)【優先権主張番号】16/549,609

(32)【優先日】2019-08-23

(33)【優先権主張国・地域又は機関】US

(81)【指定国・地域】

(71)【出願人】

【識別番号】522035454

【氏名又は名称】ヒューマン モード、エルエルシー

(74)【代理人】

【識別番号】110000877

【氏名又は名称】弁理士法人ＲＹＵＫＡ国際特許事務所

(72)【発明者】

【氏名】ケルバー、ウィリアム ザビエル ザ・サード

(72)【発明者】

【氏名】ソ、ヨーン ジョーン

(72)【発明者】

【氏名】チョイ、ジェ リム

【テーマコード（参考）】

5C182

5E555

【Ｆターム（参考）】

5C182AA31

5C182AB33

5C182AC02

5C182AC03

5C182BA14

5C182BA57

5C182BB01

5C182BB03

5C182BB11

5C182BC01

5C182BC22

5C182BC25

5C182BC26

5C182CB13

5C182CB14

5C182CB32

5C182CB42

5C182CB47

5C182CB52

5C182CC21

5C182DA02

5C182DA65

5E555AA27

5E555AA44

5E555AA76

5E555BA02

5E555BB02

5E555BC04

5E555BC21

5E555BE16

5E555BE17

5E555DB11

5E555DB18

5E555DB32

5E555DB53

5E555DB57

5E555FA00

(57)【要約】

非一時的コンピュータ可読媒体は、プロセッサにより実行される場合、プロセッサに、複合現実環境をヘッドセットに投影する手順であって、複合現実環境は、オブジェクトを有し、オブジェクトのそれぞれは、オブジェクトが複合現実環境内でどのように相互作用するかを定義する特性を有するオブジェクトコンピュータコードにより作成される、手順と、少なくとも１つのユーザインタフェースデバイスからの第１の入力に応じて、予め規定されたアクションモジュールのリストを有する仮想フィードバックスクリーン上にアクションメニューを表示する手順であって、アクションモジュールは、１つ又は複数の機能を有するコンピュータ実行可能コードのモジュールを含み、１つ又は複数の機能は、複合現実環境内のオブジェクトのうちの第１のオブジェクトの１つ又は複数の属性に影響を与えるように構成される、手順と、選択されたアクションモジュールを含むように、第１のオブジェクトのオブジェクトコンピュータコードを更新する手順とを実行させるコンピュータ実行可能コードを格納する。

【特許請求の範囲】

【請求項1】

プロセッサと、
仮想フィードバックスクリーンを有するヘッドセットと、
１つ又は複数のユーザインタフェースデバイスと、
コンピュータ実行可能コードを格納する非一時的コンピュータ可読媒体と
を備え、
前記コンピュータ実行可能コードは、前記プロセッサにより実行される場合、前記プロセッサに、
複合現実環境を前記ヘッドセットに投影する手順であって、前記複合現実環境は、１つ又は複数のオブジェクトを有し、前記１つ又は複数のオブジェクトのそれぞれは、前記１つ又は複数のオブジェクトが前記複合現実環境内でどのように相互作用するかを定義する特性を有するオブジェクトコンピュータコードにより作成される、手順と、
少なくとも１つのユーザインタフェースデバイスからの第１の入力に応じて、予め規定されたアクションモジュールのリストを有する前記仮想フィードバックスクリーン上にアクションメニューを表示する手順であって、前記アクションモジュールは、１つ又は複数の機能を有するコンピュータ実行可能コードのモジュールを含み、前記１つ又は複数の機能は、前記複合現実環境内の前記１つ又は複数のオブジェクトの第１のオブジェクトの１つ又は複数の属性に影響を与えるように構成される、手順と、
選択されたアクションモジュールを含むように、前記第１のオブジェクトの前記オブジェクトコンピュータコードを更新する手順と
を実行させる、電子デバイス。

【請求項2】

前記第１のオブジェクトは、前記第１の入力の前に識別される、請求項１に記載の電子デバイス。

【請求項3】

前記第１のオブジェクトは、前記第１の入力の後に識別される、請求項１に記載の電子デバイス。

【請求項4】

前記非一時的コンピュータ可読媒体は、前記プロセッサにより実行される場合、前記プロセッサに、トリガイベントに応じて、選択されたアクションモジュールを含むように前記第１のオブジェクトの前記オブジェクトコンピュータコードを更新する手順を実行させるコンピュータ実行可能コードを格納する、請求項１から３のいずれか一項に記載の電子デバイス。

【請求項5】

ユーザがトリガオブジェクトと相互作用することにより、予め決定されたトリガ条件を満たす場合、前記トリガイベントがあげられる、請求項４に記載の電子デバイス。

【請求項6】

前記非一時的コンピュータ可読媒体は、前記プロセッサにより実行される場合、前記プロセッサに、トリガメニューから特定のトリガオブジェクトを選択する少なくとも１つのユーザインタフェースデバイスからの第２の入力に応じて、前記トリガオブジェクトに対する１つ又は複数のトリガ条件のリストを有するトリガ条件メニューを表示する手順と、前記トリガオブジェクトに対する第１のトリガ条件の選択に応じて、ユーザが前記トリガオブジェクトを前記複合現実環境に配置することを可能にする手順とを実行させるコンピュータ実行可能コードを格納し、前記第１のトリガ条件は、満たされた場合、前記プロセッサに、選択されたアクションモジュールを含むように、前記第１のオブジェクトの前記オブジェクトコンピュータコードを更新させる、請求項１から５のいずれか一項に記載の電子デバイス。

【請求項7】

プロセッサと、
仮想フィードバックスクリーンを有するヘッドセットと、
１つ又は複数のユーザインタフェースデバイスと、
コンピュータ実行可能コードを格納する非一時的コンピュータ可読媒体と
を備え、
前記コンピュータ実行可能コードは、前記プロセッサにより実行される場合、前記プロセッサに、
複合現実環境を前記ヘッドセットに投影する手順であって、前記複合現実環境は、１つ又は複数のオブジェクトを有し、前記１つ又は複数のオブジェクトのそれぞれは、前記１つ又は複数のオブジェクトが前記複合現実環境内でどのように相互作用するかを定義する特性を有するオブジェクトコンピュータコードにより作成される、手順と、
トリガメニューから特定のトリガオブジェクトを選択する少なくとも１つのユーザインタフェースデバイスからの第１の入力に応じて、前記トリガオブジェクトに対する１つ又は複数のトリガ条件のリストを有するトリガ条件メニューを表示する手順と、前記トリガオブジェクトに対する第１のトリガ条件の選択に応じて、ユーザが前記トリガオブジェクトを前記複合現実環境に配置することを可能にする、手順と
を実行させる、電子デバイス。

【請求項8】

前記トリガオブジェクトは、前記第１の入力の前に識別される、請求項７に記載の電子デバイス。

【請求項9】

前記トリガオブジェクトは、前記第１の入力の後に識別される、請求項７に記載の電子デバイス。

【請求項10】

前記非一時的コンピュータ可読媒体は、前記プロセッサにより実行される場合、前記プロセッサに、トリガイベントに応じて、選択されたアクションモジュールを含むように、前記トリガオブジェクトの前記オブジェクトコンピュータコードを更新する手順を実行させるコンピュータ実行可能コードを格納する、請求項７から９のいずれか一項に記載の電子デバイス。

【請求項11】

ユーザが前記トリガオブジェクトと相互作用することにより、予め決定されたトリガ条件を満たす場合、前記トリガイベントがあげられる、請求項１０に記載の電子デバイス。

【請求項12】

プロセッサに、
複合現実環境をヘッドセットに投影する手順であって、前記複合現実環境は、１つ又は複数のオブジェクトを有し、前記１つ又は複数のオブジェクトのそれぞれは、前記１つ又は複数のオブジェクトが前記複合現実環境内でどのように相互作用するかを定義する特性を有するオブジェクトコンピュータコードにより作成される、手順と、
少なくとも１つのユーザインタフェースデバイスからの第１の入力に応じて、予め規定されたアクションモジュールのリストを有する仮想フィードバックスクリーン上にアクションメニューを表示する手順であって、前記アクションモジュールは、１つ又は複数の機能を有するコンピュータ実行可能コードのモジュールを含み、前記１つ又は複数の機能は、前記複合現実環境内の前記１つ又は複数のオブジェクトのうちの第１のオブジェクトの１つ又は複数の属性に影響を与えるように構成される、手順と、
選択されたアクションモジュールを含むように、前記第１のオブジェクトの前記オブジェクトコンピュータコードを更新する手順と
を実行させるためのコンピュータプログラム。

【請求項13】

前記第１のオブジェクトは、前記第１の入力の前に識別される、請求項１２に記載のコンピュータプログラム。

【請求項14】

前記第１のオブジェクトは、前記第１の入力の後に識別される、請求項１２に記載のコンピュータプログラム。

【請求項15】

前記プロセッサに、トリガイベントに応じて、選択されたアクションモジュールを含むように、前記第１のオブジェクトの前記オブジェクトコンピュータコードを更新する手順を実行させる、請求項１２から１４のいずれか一項に記載のコンピュータプログラム。

【請求項16】

ユーザがトリガオブジェクトと相互作用することにより、予め決定されたトリガ条件を満たす場合、前記トリガイベントがあげられる、請求項１５に記載のコンピュータプログラム。

【請求項17】

前記プロセッサに、トリガメニューから特定のトリガオブジェクトを選択する少なくとも１つのユーザインタフェースデバイスからの第２の入力に応じて、前記トリガオブジェクトに対する１つ又は複数のトリガ条件のリストを有するトリガ条件メニューを表示する手順と、前記トリガオブジェクトに対する第１のトリガ条件の選択に応じて、ユーザが前記トリガオブジェクトを前記複合現実環境に配置することを可能にする手順と、を実行させ、前記第１のトリガ条件は、満たされた場合、前記プロセッサに、選択されたアクションモジュールを含むように、前記第１のオブジェクトの前記オブジェクトコンピュータコードを更新させる、請求項１２から１６のいずれか一項に記載のコンピュータプログラム。

【請求項18】

プロセッサと、
仮想フィードバックスクリーンを有するヘッドセットと、
１つ又は複数のユーザインタフェースデバイスと、
コンピュータ実行可能コードを格納する非一時的コンピュータ可読媒体と
を備え、
前記コンピュータ実行可能コードは、前記プロセッサにより実行される場合、前記プロセッサに、
仮想現実環境を前記ヘッドセットに投影する手順であって、前記仮想現実環境は、１つ又は複数のオブジェクトを有し、前記１つ又は複数のオブジェクトのそれぞれは、前記１つ又は複数のオブジェクトが前記仮想現実環境内でどのように相互作用するかを定義する特性を有するコンテナにより作成され、前記１つ又は複数のオブジェクトは、前記１つ又は複数のオブジェクトの境界を定義する座標を有する３次元メッシュを有する、手順と、
前記１つ又は複数のオブジェクトの第１のオブジェクトを選択する手順と、
少なくとも１つのユーザインタフェースデバイスからの第１の入力に応じて、前記仮想フィードバックスクリーン上に、前記仮想現実環境内のアクションメニューを表示する手順であって、前記アクションメニューは、予め定義されたアクションスクリプトのリストを有し、前記アクションスクリプトは、１つ又は複数の機能を有するコンピュータ実行可能コードのモジュールを含み、前記１つ又は複数の機能は、前記仮想現実環境内の前記１つ又は複数のオブジェクトのうちの前記第１のオブジェクトの１つ又は複数の属性に影響を与えるように構成される、手順と、
選択されたアクションスクリプトを含むように、前記第１のオブジェクトの前記コンテナを更新する手順と
を実行させる、電子デバイス。

【請求項19】

前記第１のオブジェクトは、前記第１の入力の前に識別される、請求項１８に記載の電子デバイス。

【請求項20】

前記第１のオブジェクトは、前記第１の入力の後に識別される、請求項１８に記載の電子デバイス。

【請求項21】

前記非一時的コンピュータ可読媒体は、前記プロセッサにより実行される場合、前記プロセッサに、トリガイベントに応じて、選択されたアクションスクリプトを含むように、前記第１のオブジェクトの前記コンテナを更新する手順を実行させるコンピュータ実行可能コードを格納する、請求項１８から２０のいずれか一項に記載の電子デバイス。

【請求項22】

ユーザがトリガオブジェクトと相互作用することにより、予め決定されたトリガ条件を満たす場合、前記トリガイベントがあげられる、請求項２１に記載の電子デバイス。

【請求項23】

前記非一時的コンピュータ可読媒体は、前記プロセッサにより実行される場合、前記プロセッサに、トリガメニューから特定のトリガオブジェクトを選択する少なくとも１つのユーザインタフェースデバイスからの第２の入力に応じて、前記トリガオブジェクトに対する１つ又は複数のトリガ条件のリストを有するトリガ条件メニューを表示する手順と、前記トリガオブジェクトに対する第１のトリガ条件の選択に応じて、ユーザが前記トリガオブジェクトを前記仮想現実環境に配置することを可能にする手順とを実行させるコンピュータ実行可能コードを格納し、前記第１のトリガ条件は、満たされた場合、前記プロセッサに、選択されたアクションスクリプトを含むように、前記第１のオブジェクトの前記コンテナを更新させる、請求項１８から２２のいずれか一項に記載の電子デバイス。

【請求項24】

プロセッサと、
仮想フィードバックスクリーンを有するヘッドセットと、
１つ又は複数のユーザインタフェースデバイスと、
コンピュータ実行可能コードを格納する非一時的コンピュータ可読媒体と
を備え、
前記コンピュータ実行可能コードは、前記プロセッサにより実行される場合、前記プロセッサに、
仮想現実環境を前記ヘッドセットに投影する手順であって、前記仮想現実環境は、１つ又は複数のオブジェクトを有し、前記１つ又は複数のオブジェクトのそれぞれは、前記１つ又は複数のオブジェクトが前記仮想現実環境内でどのように相互作用するかを定義する特性を有するコンテナにより作成される、手順と、
少なくとも１つのユーザインタフェースデバイスからの入力に応じて、トリガメニューから選択されたトリガオブジェクトを、前記１つ又は複数のオブジェクトのうちの特定のオブジェクトに接続することで、複合オブジェクトを形成する手順であって、前記複合オブジェクトは、１つ又は複数のアクションスクリプトを含み、前記トリガオブジェクトに対する１つ又は複数のトリガスクリプタブルアクションを有するスクリプタブルメニューを、前記仮想フィードバックスクリーン上の前記仮想現実環境に表示する、手順と、
前記トリガオブジェクトに対するトリガスクリプタブルアクションの選択に応じて、ユーザが前記トリガオブジェクトを前記仮想現実環境に配置することを可能にし、前記複合オブジェクトの前記１つ又は複数のアクションスクリプトに前記トリガスクリプタブルアクションを関連付ける手順と
を実行させる、電子デバイス。

【請求項25】

前記トリガオブジェクトは、前記入力の前に識別される、請求項２４に記載の電子デバイス。

【請求項26】

前記トリガオブジェクトは、前記入力の後に識別される、請求項２４に記載の電子デバイス。

【請求項27】

前記非一時的コンピュータ可読媒体は、前記プロセッサにより実行される場合、前記プロセッサに、トリガイベントに応じて、アクションスクリプトをアクティブにするように前記複合オブジェクトを更新する手順を実行させるコンピュータ実行可能コードを格納する、請求項２４から２６のいずれか一項に記載の電子デバイス。

【請求項28】

前記ユーザが前記トリガオブジェクトと相互作用することにより、予め決定されたトリガ条件を満たす場合、前記トリガイベントがあげられる、請求項２７に記載の電子デバイス。

【請求項29】

プロセッサに、
仮想現実環境をヘッドセットに投影する手順であって、前記仮想現実環境は、１つ又は複数のオブジェクトを有し、前記１つ又は複数のオブジェクトのそれぞれは、前記１つ又は複数のオブジェクトが前記仮想現実環境内でどのように相互作用するかを定義する特性を有するコンテナにより作成され、前記１つ又は複数のオブジェクトは、前記１つ又は複数のオブジェクトの境界を定義する座標を有する３次元メッシュを有する、手順と、
前記仮想現実環境内の前記１つ又は複数のオブジェクトのうちの第１のオブジェクトを選択する少なくとも１つのユーザインタフェースデバイスからの第１の入力に応じて、予め定義されたアクションスクリプトのリストを有する仮想フィードバックスクリーン上にアクションメニューを表示する手順であって、前記アクションスクリプトは、１つ又は複数の機能を有するコンピュータ実行可能コードのモジュールを含み、前記１つ又は複数の機能は、前記仮想現実環境内の前記１つ又は複数のオブジェクトのうちの第１のオブジェクトの１つ又は複数の属性に影響を与えるように構成される、手順と、
選択されたアクションスクリプトを含むように、前記第１のオブジェクトの前記コンテナを更新する手順と
を実行させるためのコンピュータプログラム。

【請求項30】

前記第１のオブジェクトは、前記第１の入力の前に識別される、請求項２９に記載のコンピュータプログラム。

【請求項31】

前記第１のオブジェクトは、前記第１の入力の後に識別される、請求項２９に記載のコンピュータプログラム。

【請求項32】

前記プロセッサに、トリガイベントに応じて、選択されたアクションスクリプトを含むように前記第１のオブジェクトの前記コンテナを更新する手順を実行させる、請求項２９から３１のいずれか一項に記載のコンピュータプログラム。

【請求項33】

ユーザがトリガオブジェクトと相互作用することにより、予め決定されたトリガ条件を満たす場合、前記トリガイベントがあげられる、請求項３２に記載のコンピュータプログラム。

【請求項34】

前記プロセッサに、トリガメニューから特定のトリガオブジェクトを選択する少なくとも１つのユーザインタフェースデバイスからの第２の入力に応じて、前記トリガオブジェクトに対する１つ又は複数のトリガ条件のリストを有するトリガ条件メニューを表示する手順と、前記トリガオブジェクトに対する第１のトリガ条件の選択に応じて、ユーザが前記トリガオブジェクトを前記仮想現実環境に配置することを可能にする手順とを実行させ、前記第１のトリガ条件は、満たされた場合、前記プロセッサに、選択されたアクションスクリプトを含むように前記第１のオブジェクトの前記コンテナを更新させる、請求項２９から３３のいずれか一項に記載のコンピュータプログラム。

【発明の詳細な説明】

【技術分野】

【0001】

［参照による組み込み］
本特許出願は、２０１９年８月２３日に出願された米国特許出願第１６／５４９，６０９号に対する優先権を主張し、２０１９年８月７日に出願された米国仮特許出願第６２／８８４，０２０号により識別される仮特許出願に対する優先権を主張し、両方の特許出願の内容全体が、ここで、参照により本明細書に組み込まれる。

【背景技術】

【0002】

仮想現実ハードウェアは、進歩し、より有能になっており、仮想現実ハードウェアの費用が低下してきており、仮想現実における関心及び様々な産業におけるその利用性が高まっているが、しかしながら、コンピュータプログラミング分野以外の多くの人々は、仮想現実環境をプログラミングするのに必要なスキルを有していない。

【0003】

仮想現実（ＶＲ）は、３次元環境のコンピュータで生成されたシミュレーションであり、仮想現実システムを用いて、一見すると現実的又は物理的な方法で、人により相互作用され得る物理エンジンを含む。仮想現実システムは、仮想環境におけるユーザの物理的な存在をシミュレートするマルチプロジェクション環境が画像、サウンド及び他の感覚を生成するスクリーンを含み、ユーザが仮想環境に入力を提供できるインターフェースデバイスを含み得る。仮想現実システムは、ユーザが人工世界を見回し、その周りを移動し、仮想オブジェクトと相互作用することを可能にする。この効果は、一般的に、目の前に小型スクリーンを有するヘッドマウントディスプレイで構成されるＶＲヘッドセットにより作成されるが、複数の大型スクリーンを有する特別に設計されたルームを通じて作成されることもできる。仮想現実は、一般的に、聴覚的及びビデオフィードバックを組み込むが、触覚技術を通じて感覚及び力フィードバックなどの他の環境シミュレーションもまた含み得る。

【0004】

仮想環境及びＶＲアプリケーションとも称される仮想現実環境は、例えば、ゲーム及びマルチメディアなどの娯楽、又は、クラスルーム教育又は仮想訓練などの訓練を含み得る。仮想現実環境をプログラミングすることは、２次元コンピュータモニタ上に複合３次元環境をレンダリングすることによりさらに複雑な複雑で非常に時間のかかる作業である。さらに、高度な３次元モデリング、テクスチャリング及びライティングは、熟練した技能が必要であり、時間のかかる処理である。

【0005】

現在、仮想現実環境を構築することは、一般的に、少なくともグラフィックアート設計、コンピュータプログラミング、３次元数学及び物理学、並びに、音響工学の理解を含む広くて高度な知識や技能を有する人のチームを必要としている。これらの技能のいずれか１つを有する人を加えることは、需要及び必要により費用がかかる。さらに、仮想現実環境を構築するのに必要とされる広くて高度な知識や技能に起因して、仮想現実の採用は、これらの技能を有する人、又は、これらの技能を有するチームを構築することが可能なエリアに限定されている。

【0006】

必要とされることは、シンプルでもありかつ、編集される仮想現実環境内にもある仮想現実環境を作成及び修正するための能力をユーザに提供するシステム及び方法である。そのようなシステムが、本開示が対象にするシンプルでもありかつ、編集される仮想現実環境内にもある仮想現実環境を作成及び修正するための能力をユーザに提供する。

【発明の概要】

【0007】

シンプルでもありかつ、編集される仮想現実環境内にもある仮想現実環境を作成し、修正するという問題が、本明細書で説明されるシステムを用いて解決される。

【0008】

１つの実施形態において、本開示は、プロセッサと、ヘッドセットと、１つ又は複数のユーザインタフェースデバイスと、非一時的コンピュータ可読媒体とを備える電子デバイスを説明する。ヘッドセットは、仮想フィードバックスクリーンを有する。非一時的コンピュータ可読媒体は、プロセッサにより実行される場合、プロセッサに、複合現実環境をヘッドセットに投影させるコンピュータ実行可能コードを格納する。複合現実環境は、１つ又は複数のオブジェクトを有する。１つ又は複数のオブジェクトのそれぞれは、１つ又は複数のオブジェクトが複合現実環境内でどのように相互作用するかを定義する特性を有するオブジェクトコンピュータコードにより作成される。少なくとも１つのユーザインタフェースデバイスからの第１の入力に応じて、アクションメニューは、予め規定されたアクションモジュールのリストを有する仮想フィードバックスクリーン上に表示される。アクションモジュールは、１つ又は複数の機能を有するコンピュータ実行可能コードのモジュールを含み、１つ又は複数の機能は、複合現実環境内の１つ又は複数のオブジェクトの第１のオブジェクトの１つ又は複数の属性に影響を与えるように構成される。第１のオブジェクトのオブジェクトコンピュータコードは、選択されたアクションモジュールを含むように更新される。

【図面の簡単な説明】

【0009】

本明細書の一部に組み込まれ、その一部を構成する添付の図面は、本明細書で説明される１つ又は複数の実装を示し、説明と共に、これらの実装を説明する。図面は、正確な縮尺にすることを意図しておらず、図の特定の特徴及び特定の見方は、縮尺に対して、又は、明瞭性及び簡潔性の関心のある概略図を誇張して示され得る。コンポーネントが図面ごとにラベリングされ得るわけではない。図における同様の参照番号は、同一又は類似の要素又は機能を表し、これを指し得る。

【0010】

【図1】仮想現実世界オーサリングシステムの例示的な実施形態である。

【0011】

【図2】車両オブジェクトの例示的な実施形態のブロック図である。

【0012】

【図3】オブジェクト構成処理の例示的な実施形態のフロー図である。

【0013】

【図4】ホイールオブジェクトの例示的な実施形態のブロック図である。

【0014】

【図5】図２の車両オブジェクト及び図４のホイールオブジェクトの形状を成す複合オブジェクトの上面図である。

【0015】

【図6】図５の複合オブジェクトを形成するオブジェクト関係モデルの例示的な実施形態のブロック図である。

【0016】

【図7】図５の複合オブジェクトを形成する階層オブジェクト関係モデルの例示的な実施形態である。

【0017】

【図8】例示的なルーム設定メニューを示す仮想環境の例示的な実施形態のスクリーンショットである。

【0018】

【図9】例示的なツール選択メニューを示す仮想環境の例示的な実施形態のスクリーンショットである。

【0019】

【図10】仮想環境へのマルチユーザアクセスのためのネットワーク図の例示的な実施形態である。

【0020】

【図11】例示的なスクリプタブルメニューを示す仮想環境の例示的な実施形態のスクリーンショットである。

【0021】

【図12】スクリプトビルダの例示的な実施形態の概略図である。

【0022】

【図13】仮想環境の例示的な実施形態の概略図である。

【0023】

【図14】本開示に従う仮想現実世界オーサリングシステムを実装するコンピュータシステムの例示的な実施形態である。

【発明を実施するための形態】

【0024】

本開示の少なくとも１つの実施形態を詳細に説明する前に、本開示は、そのアプリケーションにおいて、特段の記載がない限り、以下の説明において記載される、又は、図面において示されるコンポーネントの構造、実験、例示的なデータ及び／又は配置の詳細に限定されることはないことが理解されるべきである。

【0025】

本開示は、他の実施形態ができ、様々な方法で訓練又は実行されることができる。例えば、住宅構造の規模の変更が例として用いられてよいが、方法及びシステムは、他の人工的なオブジェクトの他の特性（例として、限定されることはないが、構造設置面積又は構造エリアの変更）を評価するために用いられてよく、その非排他的な例は、工業用建物又は商業用建物などの他のタイプの建物を含み、道路、橋、ユーティリティライン、ユーティリティタワーなどのインフラストラクチャを含む。また、本明細書で採用される語句及び用語は、説明のためであり、限定するものとみなされるべきではないことが理解されるべきである。

【0026】

本明細書の説明で用いられるような「備える（ｃｏｍｐｒｉｓｅｓ）」、「備える（ｃｏｍｐｒｉｓｉｎｇ）」、「含む（ｉｎｃｌｕｄｅｓ）」、「含む（ｉｎｃｌｕｄｉｎｇ）」、「有する（ｈａｓ）」、「有する（ｈａｖｉｎｇ）」という用語又はその任意の他の変形例は、非排他的包含をカバーすることが意図されている。例えば、特段の記載がない限り、要素のリストを有するプロセス、方法、物品又は装置は、必ずしもこれらの要素のみに限定されることはないが、明示的に記載されていない、又は、このようなプロセス、方法、物品又は装置に固有の他の要素も含んでよい。

【0027】

さらに、明示的に反対のことが述べられていない限り、「又は（ｏｒ）」は、包括を指し、除外の「又は（ｏｒ）」ではない。例えば、条件Ａ又はＢは、Ａが真であり（又は、存在し）、Ｂが偽である（又は、存在しない）、Ａが偽であり（又は、存在しない）、Ｂが真である（又は、存在する）、及び、Ａ及びＢの両方が真である（又は、存在する）のうちの１つにより満たされる。

【0028】

さらに「ａ」又は「ａｎ」の使用は、本明細書における実施形態の要素及びコンポーネントを説明するために採用される。これは、単に利便性のために、かつ、本発明の概念の一般的な意味を与えるために行われる。本説明は、１つ又は複数を含むものと読み取られるべきであり、それが別の意味であることが明らかでない限り、単数は複数も含む。さらに、用語「複数の」の使用は、明示的に反対のことが述べられていない限り、「１つより多く」を伝えることを意味する。

【0029】

本明細書で用いられるように、「実質的に（ｓｕｂｓｔａｎｔｉａｌｌｙ）」、「について（ａｂｏｕｔ）」、「約（ａｐｐｒｏｘｉｍａｔｅｌｙ）」及びこれらの組み合わせ及び変形形態のような修飾語句は、それらが修飾する正確な量又は値だけでなく、例えば、計算許容範囲、計算誤差、製造公差、測定誤差、損傷、様々な部分に及ぶ応力、及び、それらの組み合わせに起因し得るそれらからの多少のずれを含むことが意図されている。

【0030】

本明細書で用いられるように、「一実施形態」、「実施形態」、「いくつかの実施形態」、「一例」、「例えば」又は「例」への何らかの言及は、実施形態に関連して説明される特定の要素、機能、構造又は特性が、少なくとも１つの実施形態において含まれており、他の実施形態に関連して用いられてよいことを意味する。本明細書内の様々な箇所において、「いくつかの実施形態において」、又は、「一例」という語句の出現は、例えば、必ずしも、同一の実施形態をすべて参照しているわけではない。

【0031】

序数の専門用語（すなわち、「第１」、「第２」、「第３」、「第４」など）の使用は、２つ又はそれより多くの項目間を区別の目的のためだけであり、特に明記されていない限り、ある項目よりも上の別の項目、又は、任意の追加順序に対する任意のシーケンス又は順序又は重要度を示唆することを意味しているわけではない。

【0032】

「少なくとも１つ」又は「１つ又は複数」という用語の使用は、１つ、並びに、１よりも多い任意の数を含むものと理解される。さらに、「Ｘ、Ｖ及びＺのうちの少なくとも１つ」という語句の使用は、Ｘ単体、Ｖ単体及びＺ単体、並びに、Ｘ、Ｖ及びＺの組み合わせを含むものと理解される。

【0033】

本明細書で用いられるように、回路は、アナログ及び／又はデジタルコンポーネント、又は、１つ又は複数の好適にプログラムされたプロセッサ（例えば、マイクロプロセッサ）及び関連するハードウェア及びソフトウェア、又は、ハードワイヤードロジックであってよい。また、「コンポーネント」は、１つ又は複数の機能を実行してよい。「コンポーネント」という用語は、プロセッサ（例えば、マイクロプロセッサ）、特定用途向け集積回路（ＡＳＩＣ）、フィールドプログラマブルゲートアレイ（ＦＰＧＡ）、ハードウェア及びソフトウェアの組み合わせ、及び／又は、同様のものなどのハードウェアを含んでよい。本明細書で用いられるような「プロセッサ」という用語は、タスクを集合的に実行すべく、独立して又は共に動作するシングルプロセッサ又は複数のプロセッサを意味する。

【0034】

プログラミング言語は、ソフトウェアを作成するために用いられるコマンド、命令及び他のシンタックスのセットである。プログラマがコードを書き込むために用いられる言語は、「高水準言語」と呼ばれる。高水準言語コードは、プログラマにより読まれて理解されるために設計され、コンピュータ可読命令としてコンピュータハードウェアにより直接認識される「低水準言語」にコンパイルされる。これは、論理語及びシンボルを用いて、プログラマが、より自然なやり方でソースコードを書き込むことを可能にする。高水準言語の例は、Ｃ＋＋、Ｊａｖａ（登録商標）、Ｐｅｒｌ及びＰＨＰを含む。低水準言語は、アセンブリ言語及び機械語を含む。

【0035】

ソフトウェアは、１つ又は複数のコンポーネントにより実行される場合、コンポーネントに、特定の機能を実行させる１つ又は複数のコンピュータ可読命令を含んでよい。本明細書で説明されるアルゴリズムは、１つ又は複数の非一時的コンピュータ可読媒体上に格納され得ることを理解されたい。例示的な非一時的コンピュータ可読媒体は、ランダムアクセスメモリ、リードオンリメモリ、フラッシュメモリ及び／又は同様のものを含み得る。そのような非一時的コンピュータ可読媒体は、電気ベース、磁気ベース、光学ベース及び／又は同様のものであってよい。ソフトウェアモジュールは、１つ又は複数の特定の機能を有するコンピュータ実行可能コードの再利用可能な部分である。

【0036】

仮想現実システムは、投影される環境が、仮想環境においてユーザの物理的な存在をシミュレートする画像、サウンド及び他の感覚を生成するデバイスを含み、ユーザは、仮想環境への入力を提供できるインターフェースデバイスを含んでよい。仮想現実システムは、処理コンポーネント、及び、ユーザの五感のうちの１つに影響を与えるように構成される任意の環境シミュレータ、例えば、限定されることはないが、嗅覚刺激、方向刺激又は力刺激を生成するように構成される機器をさらに含んでよい。仮想現実システムは、限定されることはないが、Ｏｃｕｌｕｓ Ｑｕｅｓｔ、Ｏｃｕｌｕｓ Ｇｏ及びＯｃｕｌｕｓ Ｒｉｆｔ（カリフォルニア州メンローパークにあるＦａｃｅｂｏｏｋ（登録商標）Ｉｎｃ．の一部門であるＯｃｕｌｕｓ ＶＲ）、ＳＡＭＳＵＮＧ（登録商標） ＨＭＤ Ｏｄｙｓｓｅｙ＋（サムスングループ及びサムスン電子、カリフォルニア州、サンノゼ）、又は、Ｇｏｏｇｌｅ（登録商標） Ｃａｒｄｂｏａｒｄ ＶＲプラットフォーム（Ｇｏｏｇｌｅ、ＬＬＣ、カリフォルニア州マウンテンビュー）を含んでよい。拡張現実システムは、限定されることはないが、Ｍｉｃｒｏｓｏｆｔ（登録商標） ＨｏｌｏＬｅｎｓ（マイクロソフト（登録商標）コーポレーション、ワシントン州、レドモンド）又はＶｕｚｉｘ Ｂｌａｄｅ（Ｖｕｚｉｘコーポレーション、ニューヨーク州、ウェストヘンリエッタ）を含んでよい。仮想現実ヘッドセットという用語は、仮想現実ヘッドセットが単独でヘッドセットユニットを指すことが意図されていることが文脈により明らかでない限り、仮想現実システムを含むと読み取られるべきである。

【0037】

仮想環境は、アバター、すなわち、仮想環境内のユーザの描写を含んでよい。アバターは、仮想現実オブジェクトであり、ユーザの写真のような現実感のある描写であってよい、ユーザの一般的描写であってよい、又は、ユーザにより制御されるデバイスの描写であってよい。いくつかの実施形態において、アバターは、ユーザの動きをミラーリングする、又は、当該動きに近づけるやり方で移動し得る。ユーザの動きをミラーリングする、又は、当該動きに近づけることにより、アバターは、ユーザの現実世界の動きに対する視覚的フィードバックを提供することり、ユーザに対してより没入感のある体験を創造することにより、仮想環境をさらに向上させる。

【0038】

仮想環境は、物理エンジンを含んでよい。物理エンジンは、仮想環境内のオブジェクトに対する物理的及び質量的な相互作用をシミュレートするコンピュータコードのモジュールである。物理エンジンは、衝突検出を提供してよく、すなわち、第１のオブジェクトが、第２のオブジェクトと交差しているか否かを決定するために用いられるコンピュータコードのモジュールを提供し、交差のステータスが変化した場合にイベントをあげる。例えば、衝突トリガスクリプタブルアクションを有する付属の第１のオブジェクト（以下でさらに詳細に説明される）が第２のオブジェクトと交差している場合、衝突検出が入力イベントをあげ、第１のオブジェクト及び第２のオブジェクトのそれぞれが、もはや交差していない場合、衝突検出が終了イベントをあげる。各イベントは、衝突の場所並びに衝突の際のオブジェクトのそれぞれの特性、例えば、オブジェクトの速度、オブジェクトの質量及びオブジェクトの材料を含み得る１つ又は複数の属性を有する。さらに、物理エンジンは、動的なシミュレーション、すなわち、仮想環境内で１つ又は複数のオブジェクトに対して作用する力のシミュレーション、例えば、限定されることはないが、重力、又は、材料の構造のシミュレーションを提供する。

【0039】

本明細書で用いられるように、仮想現実という用語は、拡張現実及び混合現実などの補足現実をさらに含む。拡張現実、現実世界に存在するオブジェクトが、コンピュータにより生成された、場合により、視覚、聴覚的、触覚、体性感覚及び嗅覚を含む複数の感覚モダリティにわたるコンピュータにより生成された知覚情報により強化される現実世界の環境のインタラクティブな体験、混合現実、新しい環境を生成する現実世界及び仮想世界の融合、及び、物理オブジェクト及びデジタルオブジェクトがリアルタイムに共存して相互作用する視覚化は、仮想現実システムとして同一又は同様の設備を用いてよい。さらに、仮想環境は、補足現実及び仮想現実システムのそれぞれにわたって交換可能であり得る。

【0040】

リポジトリは、仮想環境生成コンポーネントにおいてローカルに、ローカルネットワーク内のコンピュータ上で、又は、インターネットに接続されるコンピュータ又はサーバ上で格納されるデータベース又は他のファイルストレージシステムであり、そうでなければ、リポジトリオーナからの許可を伴ってユーザ１４がアクセスして利用可能である。リポジトリオーナは、リポジトリを削除し、リポジトリをコピーし、リポジトリを編集し、又は、ユーザ１４に対する許可の程度変えつつ、リポジトリを共有する権利を含むリポジトリに対するすべての権利を作成又は有するエンティティである。リポジトリのタイプは、オンラインリポジトリ３０４、パーソナルリポジトリ及びコアリポジトリを含む。オンラインリポジトリ３０４（以下で詳細に説明される）は、オーナにより任意のユーザに提供されるアクセスによる再利用のために利用可能なルーム、オブジェクト及び／又はアイテムを格納できるリポジトリである。オンラインリポジトリ３０４は、インターネットに接続されてよく、又は、接続されていなくてよいが、しかしながら、それはネットワーク４２０（以下で詳細に説明される）を介して利用可能である。オンラインリポジトリ３０４は、ローカルネットワーク内又はインターネット上のいずれかのサーバに配置されてよい。パーソナルリポジトリは、ユーザ１４がオーナであり、ユーザ１４がアクセスを許可しない限り、他のユーザがアクセス可能ではないリポジトリであり、さらに、オブジェクト、アクションスクリプト、スクリプタブルアクション及び他のアイテムは、オーナ、ユーザ１４からの許可なく他のユーザによりコピー又は編集されなくてよい。仮想現実世界オーサリングシステム１０はまた、コアリポジトリを含む。コアリポジトリは、仮想現実世界オーサリングシステム１０より提供され、所有され、及び、デフォルトで含まれるユーザ１４に利用可能なルーム、オブジェクト及び／又はアイテムのリポジトリである。ユーザ１４は、ユーザが仮想環境を作成している間、コアリポジトリ内のオブジェクトをコピーし、次に、修正及び使用するための許可を有する。

【0041】

ここで、図１を参照すると、参照番号１０によりそこに示され、指定されているものは、オブジェクト２６と共に仮想環境２２を表示するＶＲヘッドセット１８を用いたユーザ１４を有する仮想現実世界オーサリングシステムの例示的な実施形態である。また、示されるものは、オブジェクトビルダ３０、環境構築ツール３４、スクリプトビルダ３８、トリガオブジェクト４２、物理エンジン４６及び双方向状態ＡＰＩ５０を含むＶＲ設計特性を有する１つ又は複数のコンピュータアプリケーションを格納する仮想環境生成コンポーネント２８である。

【0042】

１つの実施形態において、ユーザ１４は、プログラマではなく、プログラミング言語を知らない。ユーザ１４は、ＶＲ世界オーサリングシステムを用いて、コンピュータコードを書くことなく仮想環境２２を構築する。ユーザ１４は、単独で仮想環境２２を構築し得る、又は、追加のユーザ１４と共に作業し得る。他と共に作業する場合、ユーザ１４は、仮想環境２２のローカルコピー上で作業してよい、又は、他のユーザ１４と共に共有される仮想環境２２内で作業してよい。

【0043】

ＶＲヘッドセット１８は、没入感のある３次元体験のために、ユーザの目を覆う頭部装着型装置である。ＶＲヘッドセット１８は、自己完結型であり得る、すなわち、ＶＲヘッドセット１８は、コンピュータコードを格納する非一時的メモリと、コンピュータコードを実行する場合、仮想環境２２を生成するプロセッサとを有する仮想環境生成コンポーネントを有してよい。他の実施形態において、ＶＲヘッドセット１８は、仮想環境生成コンポーネントから分離されていてよいが、代わりに、通信コンポーネントを通じて仮想環境生成コンポーネントと通信されてよい。ＶＲヘッドセット１８は、ヒューマンインタフェースデバイス又は環境シミュレータなどの他のコンポーネントを含んでよい。

【0044】

通信コンポーネントは、ＶＲヘッドセット１８と他のコンポーネントとの間の通信を提供する通信プロトコルを実装する回路又は他のハードウェアを有するＶＲヘッドセットのコンポーネントである。通信プロトコルは、限定されることはないが、有線通信、ＷｉＦｉ（登録商標）、Ｂｌｕｅｔｏｏｔｈ（登録商標）、無線ＰＡＮ、ＩＲ、もしくは、他の無線ベース又は光ベースの通信協定のうちの１つ又は複数を含んでよい。

【0045】

ある環境において、ユーザ１４は、ＶＲヘッドセット１８を用いて仮想環境２２を表示するが、一方で、別の環境では、ユーザ１４は、１つ又は複数のスクリーン上に表示される仮想環境２２がユーザ１４を仮想環境２２に没頭させるように、１つ又は複数の他のスクリーン上に仮想環境２２を表示する。

【0046】

仮想環境２２は、仮想環境生成コンポーネントにより確立及び実行される。仮想環境２２は、ユーザ１４のみに利用可能であってよい、又は、１人より多くのユーザ１４に同時に利用可能であってよい。１つの実施形態において、仮想環境２２は、ユーザ１４によりアクセス可能なサーバ上にホストされる。サーバは、ローカル（イントラネット）又は外部（インターネット）のいずれかのネットワーク接続を介してヘッドセットに接続されてよい。

【0047】

仮想環境２２は、少なくとも実行モード又は設計モードでユーザにより実行されてよい。設計モードにおいて、ユーザ１４は、より静的なシミュレーションで仮想環境２２を体験する、すなわち、ユーザ１４は、仮想環境２２にオブジェクトを加える、又は、仮想環境２２からオブジェクトを除去することができる、又は、物理学及び他のオブジェクト特性を有効又は無効にし得る。実行モードにおいて、ユーザ１４は、まるで、ユーザ１４が仮想環境２２の一部であるかのように有効にされたシミュレーションで仮想環境２２を体験する。ユーザ１４が実行モードを可能にするために、仮想環境２２は、まず設計モードで作成されなければならない。シミュレーションが有効にされている場合、物理エンジンが完全に有効にされる。

【0048】

１つの実施形態において、仮想環境２２は、１つ又は複数のシミュレーションパラメータ及び複数の仮想現実オブジェクト２６（オブジェクト２６）を備える。オブジェクトは、アイテムの空きのコンテナである。各アイテムは、オブジェクトと関連付けられた関連ファイル及びコンテンツデータに対するポインタを有する基準であり、埋め込みファイル、すなわち、オブジェクトは、特定のアイテム又は別のオブジェクトに対するファイルデータを含む。オブジェクト、及び、オブジェクトに含まれるアイテムのそれぞれは、オブジェクトが、互いに順番に兄弟であるアイテムのそれぞれに対する親が検討され得るような階層的関係を禁止する。別の実施形態において、アイテムはまた、アイテムに対するコンテナ、又は、アイテムがサブアイテムに対する親であり、オブジェクトに対する子であるようなサブアイテムであってよい。１つの実施形態において、オブジェクト２６は、メタデータアイテム、すなわち、オブジェクト２６の質量、オブジェクト２６の弾力性及びオブジェクト２６の材料などのオブジェクト２６の特性を格納するファイルを含む。メタデータアイテムにおける特性のそれぞれは、仮想環境内のオブジェクト２６と任意の他のオブジェクトとの間の相互作用を適切にシミュレートする物理エンジンにより必要とされ得る。

【0049】

ここで、図２を参照すると、示されるものは、親コンテナ７４と、３ｄメッシュ７８、テクスチャ８２、オーディオ８６及びアクションスクリプト９０を含む複数のアイテムとを有する車両オブジェクト７０の例示的な実施形態である。図２に見られるように、車両オブジェクト７０の親コンテナ７４に付属するアイテムのそれぞれは、車両オブジェクト７０を拡張する。識別される複数のアイテムは、例示の目的のみであり、限定することを意図するものではない。上記で定義されるように、アイテムは、オブジェクト２６について追加の情報を拡張又は提供し得る任意のファイルである。例えば、アイテムはまた、限定されることはないが、ｄｏｃ、ｄｏｃｘ、ｐｐｔ、ｐｐｔｘ、ｐｄｆ及びｔｘｔなどのドキュメントファイル、ハイパーリンク、限定されることはないが、ｍｐ４、ａｖｉ、ｍｐｅｇもしくはｍｏｖ又は専用アイテムなどの、限定されることはないが、ＵＲＬ、ビデオファイルなどを含んでよい。

【0050】

３Ｄメッシュ７８は、車両オブジェクト７０の３次元ワイヤフレーム表現である。それは、任意のテクスチャ又はスムージングが適用される前のオブジェクトのベースモデルである。例示的な３Ｄメッシュファイルのタイプは、限定されることはないが、ｓｔｌ、ｏｂｊ、ｆｂｘ、ｃｏｌｌａｄａ、３ｄｓ、ｖｒｍｌ及びｘ３ｄを含む。

【0051】

テクスチャ８２は、車両オブジェクト７０の視覚テクスチャを含む２次元グラフィックスファイルである。車両オブジェクト７０がグラフィックプロセッサにより３次元でレンダリングされる場合、テクスチャ８２は、３Ｄメッシュ７８に適用される。例示的な２Ｄグラフィックスファイルタイプは、限定されることはないが、ｊｐｇ、ｇｉｆ、ｐｎｇ、ｂｍｐ及びｔｉｆｆを含む。

【0052】

オーディオ８６は、車両オブジェクト７０と関連付けられるオーディオクリップである。オーディオ８６は、車両オブジェクト７０が発する任意のサウンドを含んでよく、又は、別のオブジェクトが車両オブジェクト７０と相互作用する場合に再生され得る別のサウンドファイルに対する任意のサウンド修正を含んでよい。例示的なオーディオファイルのタイプは、限定されることはないが、ｍｉｄｉ、ｍｐ３、ｗａｖ及びｏｇｇを含む。

【0053】

専用アイテムは、そうでなければ、プログラミングなしでは取得するのが困難な複合機能を示すアイテムであり、その他のアイテムに類似するオブジェクトに取り付けられ得る。専用アイテムは、ユーザ１４がプログラミングすることなく機能が豊富な仮想環境を構築することを可能にする。１つの実施形態において、専用アイテムは、限定されることはないが、ビデオプレーヤアイテム、オーディオプレーヤアイテム、ドキュメントビューアーアイテム又はクイズアイテムなどのアイテムを含んでよい。

【0054】

ビデオプレーヤアイテムは、オブジェクトに付属するものなどのビデオファイルアイテム、又は、ハイパーリンクオブジェクトのエンドポイントにあるものなどのビデオストリームを再生する機能を提供する。このアイテムを提供することにより、ユーザは、このアイテムを３Ｄメッシュ上に広げて、限定されることはないが、仮想ＴＶスクリーン、映画のスクリーン又はコンピュータモニタなどの仮想ディスプレイを形成できる。

【0055】

同様に、オーディオプレーヤアイテムは、オブジェクトに取り付けられているものなどのオーディオファイルアイテム、又は、ハイパーリンクオブジェクトのエンドポイントにあるものなどのオーディオストリームを再生する機能を提供する。ユーザ１４は、車両オブジェクト７０内のラジオなどの単純な特徴にこのアイテムを実装してよい。

【0056】

ドキュメントビューアーアイテムは、ユーザ１４がメッシュ上にドキュメント表示アイテムを実装することにより、プレゼンテーションを実装することを可能にするコードを提供する。同様に、クイズアイテムは、各要素が回答に関連するメッシュに対する複数の要素を有するクイズアイテムを取り付けることによって、ユーザ１４により実装されてよく、クイズアイテムの出力は、選択された解答のインデックスであり得る。

【0057】

アイテムのファイルデータがオブジェクトに対するファイルデータと共にセーブされる場合、アイテムは、オブジェクトに埋め込まれる。例えば、３ｄメッシュ７８は、例えば、３ｄメッシュ７８データがシリアル化され、エンコードが用いられるか否かに関わらず、親コンテナ７４として同じファイル内にセーブされる場合、車両オブジェクト７０に埋め込まれる。したがって、親コンテナ７４のファイルロケーションを移動させると、３ｄメッシュ７８のためのデータも移動させることになる。同様に、親コンテナ７４を削除すると、３ｄメッシュ７８のためのデータを含む埋め込みデータも削除することになる。

【0058】

リンク又は参照が車両オブジェクト７０の親コンテナ７４内に格納されている場合、オブジェクトにより、アイテムが参照される。リンク又は参照は、例示の目的のみで、メモリの場所、ファイルシステム、ハイパーリンクなどのウェブリソース、又は、データベースのいずれかに対するポインタであってよい。アイテムが参照された場合、アイテムのエンコードされるデータは、親コンテナ７４と共に格納されておらず、親コンテナ７４と共にシリアル化及び圧縮されていない。したがっては、コンピュータメモリ上のより小さなサイズの親コンテナ７４だけでなく、親コンテナ７４も削除された場合、アイテムへのポインタは削除されるが、しかしながら、アイテムデータは削除されない。

【0059】

仮想環境２２内にオブジェクト２６を実装すべく、オブジェクト２６がまず構成されなければならない。ここで、図３を参照すると、オブジェクト構成処理１００の例示的な実施形態が示される。一般に、オブジェクト構成処理は、選択されたリポジトリから３ｄメッシュをロードする段階（段階１０４）、親オブジェクトを自動的に作成する段階（段階１０８）、及び、１つ又は複数のアイテムを親コンテナに追加する段階（段階１１２）を備える。１つの実施形態において、１つ又は複数のアイテムを親コンテナに追加する段階（段階１１２）は、さらに、複合オブジェクトを形成すべく、座標リンクを用いて、互いにオブジェクトをリンクさせる段階を含んでよい。

【0060】

ここで、図４を参照すると、ホイール親コンテナ１２４、３ｄメッシュ１２８、テクスチャ１３２及びアクションスクリプト１３６を有するホイールオブジェクト１２０の例示的な実施形態がそこに示される。ホイール親コンテナ１２４は、３ｄメッシュ１２８、テクスチャ１３２及びアクションスクリプト１３６に対する参照又はこれらのコピーを含む。３ｄメッシュ１２８は、ホイールを表す３次元ワイヤフレーム構造である。ワイヤフレーム構造は、線又はエッジにより結合されるポイント又は頂点で構成されている。頂点のそれぞれは、少なくとも１つのエッジにより別の頂点に接続されている。テクスチャ１３２は、３Ｄメッシュ１２８を用いて処理される場合に、画像に３Ｄメッシュ１２８をラップ（ｗｒａｐ）するテクスチャファイルである。例えば、テクスチャ１３２は、３Ｄメッシュ１２８をラップして、３ｄメッシュ１２８が実際のホイールのように見えさせてよい。他の実施形態において、テクスチャ１３２は、オブジェクトの材料及びその材料の特性などのオブジェクトお他の特性に基づいて計算される。

【0061】

ここで、図５を参照すると、１つの車両オブジェクト７０及び４つのホイールオブジェクト１２０ａ－ｄを有する複合車両オブジェクト１５０の例示的な実施形態がそこに示される。車両オブジェクト７０の３ｄメッシュ７８は、３次元空間に存在し、３ｄメッシュワイヤフレームの境界を定義する座標を有し、座標は、例えば、（Ｘ、Ｙ、Ｚ）形態のデカルト座標により定義される３次元における場所である。第１の座標リンク１５４ａがホイールオブジェクト１２０ａの座標を車両オブジェクト７０の第１の座標にリンクさせ、第２の座標リンク１５４ｂがホイールオブジェクト１２０ｂの座標を車両オブジェクト７０の第２の座標にリンクさせ、第３の座標リンク１５４ｃがホイールオブジェクト１２０ｃの座標を車両オブジェクト７０の第３の座標にリンクさせ、第４の座標リンク１５４ｄがホイールオブジェクト１２０ｄの座標を車両オブジェクト７０の第４の座標にリンクさせるように、ホイールオブジェクト１２０ａ－ｄは、座標リンク１５４ａ－ｄにより車両オブジェクト７０に取り付けられる。１つの実施形態において、座標リンクは、接続強度とも称される３次元範囲を含み、３次元範囲は、オブジェクトが互いに接続される範囲を提供する。

【0062】

座標リンク１５４ａ－ｄは、ホイールオブジェクト１２０ａ－ｄのそれぞれと車両オブジェクト７０との間の相対距離を保持することにより、ホイールオブジェクト１２０ａ－ｄのそれぞれを車両オブジェクト７０に取り付ける。複合車両オブジェクト１５０のアイテム、車両オブジェクト７０及びホイールオブジェクト１２０ａ－ｄのそれぞれは、接続リンク１５４ａ－ｄとの物理的な接続を保持しつつ、互いに独立して動作し得る。

【0063】

図６の例示的なオブジェクト関係モデル１５８に示されるように、親コンテナ７４及びホイールコンテナ１２４ａ及び１２４ｂ（図示されていない１２４ｃ及び１２４ｄも同様）は、複合車両オブジェクト１５０を形成すべく、階層的関係ではなく、むしろ、接続リンク１５４ａ－ｄを通じた横の関係で結合される。

【0064】

別の例示的な階層オブジェクト関係モデル１５８ａに示されるように、複合車両オブジェクト１５０は、図７に示されるように、車両オブジェクト７０（親）と、ホイールオブジェクト１２０ａ－ｄのそれぞれ（子）との間の階層的な親－子関係を通じて形成され得る。繰り返しになるが、ホイールオブジェクト１２０ｃ及び１２０ｄは分かりやすくするために図示されていない。階層オブジェクト関係モデル１５８ａは、３ｄメッシュ７８、テクスチャ８２、オーディオ８６及びアクションスクリプト９０などの親コンテナ７４における他のアイテムと同じ階層レベルにあり、一方、ホイールコンテナ１２４ａ、１２４ｂのそれぞれ内のアイテムは、親コンテナ７４内のアイテムより低い階層レベルのものであるホイールコンテナ１２４ａ及び１２４ｂを示す。

【0065】

１つの実施形態において、複合オブジェクトを形成する親－子関係におけるオブジェクトは、オブジェクトのそれぞれの能力を保持して、アクションスクリプトアイテムの使用を通じて複合オブジェクトとは独立して相互作用しつつ、親オブジェクトの任意の方向への移動は、同様にすべての子オブジェクトを移動させるように、子オブジェクトが親オブジェクトに取り付けられるよりも、むしろ、オブジェクト間の接続強度により決定されるような相対距離を保持しない。

【0066】

ユーザ１４は、環境構築システムを用いて仮想環境内に１つ又は複数のオブジェクトを配置する。図８に示されるように、ルーム１６０において、環境構築システムは、ルーム名フィールド１７４、重力制御１７８、スケール制御１８２、プライベート制御１８６、編集可能な制御１９０、匿名公開制御１９４、実行制御１９８、リセット制御２０２、破壊制御２０６、公開制御２１０又は設定メニュー２１４を含む制御を列挙するルーム設定メニュー１７０をユーザ１４に提供する。また、バーチャルハンド２２０ａ及び２２０ｂ及びカーソル２２４が仮想環境２２に示される。

【0067】

カーソル２２４は、ユーザ１４からの入力により影響を受け、ユーザ１４により移動可能である仮想環境２２内のポイントの仮想環境表現である。例えば、カーソル２２４は、ユーザの手と一致するものとユーザ１４が解釈する仮想環境２２内の第１の位置から、ユーザの手により選択される仮想環境２２内のポイントであるものとユーザ１４が解釈する仮想環境２２内の第２の位置へと延びる線であり得る。別の実施形態において、カーソル２２４は、ユーザ１４がユーザの手に対応する仮想環境２２内のポイントとして解釈する仮想環境２２内の第２の位置に配置される幾何学的図形である。

【0068】

ルーム１６０は、ユーザ１４が作成又はダウンロードした特定の仮想環境２２である。ルーム１６０は、仮想環境２２の初期構造を提供し、ルーム１６０内のオブジェクトに適用可能な環境設定を格納できる。例えば、ユーザ１４は、ルーム設定メニュー１７０内の重力制御１７８を用いて、ルーム内の重力を調節し得る。重力制御１７８を用いることにより、ユーザ１４は、この特定の仮想環境２２内のすべてのオブジェクトに対して、重力がどのような反応を示すかを調節する。さらに、ユーザ１４は、スケール制御１８２を用いて、ルームをスケーリングできる。１つの実施形態において、スケール制御１８２は、ユーザの視点から、ユーザが拡大又は縮小するように見えるように、ルーム１６０内のすべてのオブジェクトの相対的なサイズを調節する。プライベート制御１８６を選択することにより、ユーザ１４は、ルーム１６０がリポジトリ内で検索可能になることを防止できる。ユーザ１４はまた、編集可能な制御１９０をトグルすることにより、彼らのルーム１６０が他のユーザにより編集可能であるか否かを調節できる。ユーザ１４はまた、匿名公開制御１９４を用いることにより、１つ又は複数のリポジトリに対して匿名で彼らのルーム１６０を公開するオプションを有する。リセット制御２０２を用いることにより、ユーザ１４は、変更を直近のセーブに戻すことができる。ルーム設定メニュー１７０はまた、破壊制御２０６を選択することにより、ユーザ１４が、ルーム１６０、及び、ルーム１６０内のオブジェクトのすべてのインスタンスを削除することを可能にすることで、新しいルームを初期化すると、環境に類似する空の仮想環境にルームを戻す。選択すると、公開制御２１０は、ユーザ１４が、匿名公開、ルームがプライベートであるか否か、ルームが編集可能か否かなど、ルーム設定メニュー１７０内の他の設定と一致する１つ又は複数のリポジトリにルーム１６０を公開することを可能にする。さらに、ルームを公開することにより、ルーム内のすべてのオブジェクトも公開され、これにより、サードパーティユーザが、すべてのカスタムオブジェクトを用いて十分に機能的なルームをダウンロード及び開設し、ユーザ１４によりごく最近公開されたルームをミラーリングすることを可能にする。別の実施形態において、公開制御２１０を選択すると、ユーザ１４には、リポジトリメニューが提示され、これにより、ルーム１６０が公開されているリポジトリをユーザが選択することを可能にする。ルーム設定メニュー１７０はまた、ユーザ１４が環境構築システム内の異なるメニューを選択することを可能にする設定メニュー２１４、例えば、限定されることはないが、以下でさらに詳細に説明されるこれらのメニューを提供する。

【0069】

１つの実施形態において、ルーム１６０は、ルームに対するすべての設定、例えば、ルーム設定メニュー１７０内で調節されるこれらの設定、並びに、ルーム内のオブジェクトのすべてに対する参照を含むルームセーブファイルとしてセーブされ得る。ルーム内の各オブジェクトについて、ルームセーブファイルは、限定されることはないが、オブジェクトに対する開始位置、オブジェクトに対する開始ローテーション、オブジェクトに対する開始スケーリング、オブジェクトが重力による影響を受けるか否か、及び、オブジェクトが、掴むことが可能か否か、などを含むデフォルト設定を格納する。開始位置、開始ローテーション、開始スケーリング、及び、他の同様の特性などのオブジェクトのデフォルト設定は、位置決め又はスケーリングに関するＸ値、Ｙ値、Ｚ値などの３次元に対応する値、及び、オブジェクトに対する開始ローテーションの角回転値を有してよい。ルーム１６０は、ルーム名フィールド１７４の値でセーブされることにより、ユーザ１４が、シンプルに認識可能なラベル、ルーム名を通じて、ルームを検索することを可能にする。

【0070】

１つの実施形態において、ルーム設定メニュー１７０は、さらに、ユーザ１４が、セーブ名を有するセーブファイルに対するその現在の状態でルーム１６０をセーブすることを可能にするセーブ制御を含む。セーブ制御が選択された場合、セーブファイル場所スクリーンがロードされてよい、又は、ロードされなくてよく、ユーザ１４が直近のセーブファイルとは異なるファイル場所にルーム１６０をセーブすることを可能にする。代替的に、ユーザ１４がルーム１６０をセーブするセーブ制御を選択した場合、ルーム１６０は、直近のセーブファイルと同じセーブファイルに対してセーブされる。セーブファイルは、ルーム名フィールド１７４値と同一の名称が付されてよい、又は、セーブファイルは、さらに、セーブ名に日付スタンプを含んでよく、これにより、仮想環境を選択したユーザ１４が、必要に応じて、前にセーブしたファイルを選択するためにロードすることを可能にする。１つの実施形態において、公開制御２１０が選択された場合、ルーム１６０は自動的にセーブされる、又は、セーブ確認スクリーンが出現して、セーブ制御が行うのと少なくとも同じオプションをユーザ１４に提供する。

【0071】

ここで、図９を参照すると、仮想環境２２内のルーム１６０のためのツールメニュー２３０の例示的な実施形態がそこに示される。ツールメニュー２３０は、一組の３次元オブジェクト操作ツールをリストアップしており、移動ツール２３４、回転ツール２３８、スケールツール２４２、インフォツール２４６、ワイヤツール２５０、グループ化ツール２５４、グループ化解除ツール２５８、複製ツール２６２、及び、消去ツール２６６を含む。ツールメニュー２３０はまた、取り消しツール２７０及び設定メニュー２１４を提供する。また、バーチャルハンド２２０ａ及び２２０ｂ並びにカーソル２２４がルーム１６０内に示される。上記のツールのみがツールメニュー２３０にあげられる一方、ツールメニュー２３０は、ユーザ１４に利用可能なツールの完全なリストではない。他のツールは、ユーザが、あるオブジェクトから別のオブジェクトへの寸法をコピーする、あるオブジェクトから別のオブジェクトへのテクスチャ又は色などの特性をコピーする、あるオブジェクトから別のオブジェクトへの１つ又は複数のオブジェクトアイテムをコピーする、その基本設定及び／又は他のオブジェクト操作に対するオブジェクトをリセットすることを可能にするものを含んでよい。さらに、ツールメニュー２３０内のツールの組織は、利便性のためのみであり、ツールは、他の構成において編成され得る。１つの実施形態において、ユーザ１４は、ツールメニュー２３０内の１つ又は複数のツールを移動して、ユーザ１４が最も便利だと思う順番にツールを再編成できる。

【0072】

移動ツール２３４は、ユーザ１４がルーム１６０内のオブジェクトを選択し、そのオブジェクトをルーム１６０内の別の場所に移動させることを可能にする。同様に、回転ツール２３８は、ユーザ１４が３次元空間内で選択されたオブジェクトを回転させることを可能にし、スケールツール２４２は、ユーザがルーム１６０内のオブジェクトをスケーリング、すなわち、そのサイズを拡大又は縮小することを可能にする。他のツールは、選択されたオブジェクトの特性及びメタデータを表示するインフォツール２４６、選択されたオブジェクト及びその子を複製する複製ツール２６２、及び、選択されたオブジェクト及びその子アイテムを消去する消去ツール２６６を含む。複合オブジェクトと共に作業する又はこれを作成するのに利用可能なツールは、さらに、座標リンク１５４を用いて共にワイヤオブジェクトを配線する方法をユーザに提供するワイヤツール２５０と、ユーザが、選択されたオブジェクトを有する複合オブジェクトを共に形成するオブジェクトの選択をグループ化することを可能にするグループ化ツール２５４と、複合オブジェクトをその構成オブジェクトに分離するグループ化解除ツール２５８とを含む。１つの実施形態において、グループ化解除ツール２５８はまた、オブジェクト及びそのアイテムを分離できる、すなわち、親コンテナから１つ又は複数のアイテムを除去でき、その結果、アイテムは、オブジェクトから独立し、オブジェクト自体とみなされる。ツールメニュー２３０はまた、ユーザ１４がルーム１６０内の１つ又は複数のオブジェクトに対する直近の変更を取り消す、又は、無効にすることを可能にする取り消しツール２７０を提供する。同様に、ツールメニュー２３０は、設定メニュー２１４を含み、設定メニュー２１４は、環境構築システム内の異なるメニュー、例えば、限定されることはないが、（以下で詳細に説明される）ルーム設定メニュー１７０又はスクリプト化可能なメニュー３４０を、ユーザ１４が選択することを可能にする。

【0073】

ここで、図１０を参照すると、第２ユーザ３１６及び第３ユーザ３２０ｇ、ユーザ１４により展開及び所有される仮想環境２２に接続することを可能する１つ又は複数のサーバ３１２上にホストされるオンラインリポジトリ３０４及び仮想環境コンポーネント３０８を有するネットワーク図３００の例示的な実施形態を示す。仮想環境コンポーネント３０８は、ホストされる環境３２４及びユーザ状態同期コンポーネント３２８を備える。ホストされる環境３２４は、ユーザ１４により所有される仮想環境であり、仮想現実世界オーサリングシステム１０内からアップロード及びホストされるオンラインであってよい。ユーザ１４は、他人、この場合、第２ユーザ３１６及び第３ユーザ３２０が、ホストされる環境３２４を結合することを可能にし得る。ユーザ１４はまた、第２ユーザ３１６及び、第３ユーザ３２０が、ホストされる環境３２４、仮想環境２２、仮想環境内の１つ又は複数のオブジェクトのいずれか、又は、仮想環境内の１つ又は複数のアイテムのいずれかを、そのユーザの個人リポジトリへ、又は、ユーザがアクセスした任意の他の環境へコピーするのを禁止し得る。ホストされる環境３２４又は仮想環境２２などへのアクセスを制御することの許可は、例えば、アクセス制御リストなどの標準的なコンピュータ技術を用いて実装され得る。

【0074】

作成される任意のルームが永続的だと言われる、すなわち、ルームは、セーブされた場合、第１の時点でルーム内のすべてのオブジェクトの状況及び場所を格納し、ユーザが第２の時点でルームを開けた場合、ルーム内のすべてのオブジェクトの状況及び場所が、第１の時点と同じである。第１の時点の後の第２の時点において、ユーザ１４は、設計モードでルーム１６０をロードし、ルーム１６０を編集できる。さらに、ユーザ１４は、ルーム１６０をコピーして、第２のルームを作成できる。第２のルームにあるオブジェクト及びアイテムは、第２のルームが作成された時点でルーム１６０にあるすべてのオブジェクト及びアイテムと同じ状態及び場所を有する。

【0075】

１つの実施形態において、人が、ユーザ１４に１つ又は複数のアクションモジュールを与え、又は、販売する、又は、１つ又は複数のリポジトリにアクションを提出することができるオンラインマーケットプレイスがある。新たなアクションモジュール又はアクションモジュールのセットを必要としているユーザ１４は、追加のアクションモジュール又はアクションモジュールのセットが利用可能な１つ又は複数の追加のリポジトリに接続できる。リポジトリに接続することにより、ユーザ１４は、ユーザの仮想環境２２内での使用のためにリポジトリにおいて利用可能なアクションモジュール又はアクションモジュールのセットにアクセスする。

【0076】

ユーザ１４又は他のユーザ１４は、検索可能な１つ又は複数のルーム１６０を１つ又は複数のリポジトリ内で検索できる。１つの実施形態において、ユーザ１４が匿名公開制御１９４を選択していなかった場合、ルーム名フィールド１７４及び／又はユーザのユーザ名又はハンドルに基づいて検索が実行され得る。他の実施形態において、ルーム１６０の重力レベル、テーマ及び／又は任意の他の検索可能な特性などの環境設定に対して、検索が行われ得る。

【0077】

第２ユーザ３１６又は第３ユーザ３２０がホストされる環境３２４に接続する場合、接続するユーザ３１６又は３２０は、オンラインリポジトリ３０４に自動的に接続して、ルーム１６０を結合する前に、ホストされる環境３２４を仮想化する必要があるルーム、オブジェクト及びアイテムをダウンロードする。接続するユーザ３１６及び／又は３２０がルーム１６０を結合する許可を有する場合、同様に、それぞれは、ルーム１６０内のオブジェクト及びアイテムのそれぞれに対する少なくとも読み取り許可を有する。

【0078】

さらに、第２ユーザ３１６又は第３ユーザ３２０がホストされる環境３２４に接続するために、仮想環境２２内の接続するユーザの座標のそれぞれ、接続するユーザの必要な状態パラメータのそれぞれ、及び、すべてのオブジェクト及びアイテムは、ユーザ状態同期コンポーネント３２８を通じて同期され、ホストされる環境３２４内の１つ又は複数のユーザのそれぞれに送信される。したがって、ユーザ１４がホストされる環境３２４内を移動する場合、第２ユーザ３１６及び第３ユーザ３２０の両方が、まるで、ユーザのそれぞれが他の人に直接会うことができたかのようなユーザ１４の動きを観察する。ユーザ状態同期コンポーネント３２８は、さらに、互いに会って、ホストされる環境３２４の周りを移動し、音声又はオーディオ通信コンポーネントを利用して、互いにチャットし、オブジェクトを処理し、あるユーザから別のユーザにオブジェクトを伝送し、ホストされる環境３２４内の特定の３次元座標点で表示するノートを作成する能力を任意の接続されているユーザに提供する。

【0079】

１つの実施形態において、サーバ３１２は、ユーザの仮想環境生成コンポーネントのコンポーネントである。ここで、第２ユーザ３１６及び第３ユーザ３２０は、ネットワークを通じて、ユーザの仮想現実環境コンポーネントに接続する。以下でさらに論じられるように、ネットワークは、第２ユーザ３１６又は第３ユーザ３２０によるユーザの仮想環境生成コンポーネントへのアクセスを提供するインターネット、ローカルエリアネットワーク、又は、任意の他のデータ接続プロトコルとすることができる。

【0080】

仮想現実世界オーサリングシステム１０は、ユーザ１４が仮想環境２２内のインタラクティブな複合オブジェクトを作成することを可能にするスクリプトビルダ３８をユーザ１４に提供する。仮想現実世界オーサリングシステム１０は、アクションスクリプトの使用を通じて複合オブジェクトを作成すべく、ユーザ１４にプログラミングコードを書き込ませる必要がない。

【0081】

ここで、図１１を参照すると、スクリプト化可能なメニュー３４０の例示的な実施形態を有するルーム１６０の仮想環境２２がそこに示されており、スクリプト化可能なメニュー３４０は、複数のスクリプタブル機能３４４ａ－ｎを有する。スクリプタブル機能は、少なくとも１つの入力及び少なくとも１つの出力を有するコンピュータ機能である。スクリプタブル機能は、アニメーション効果で、ある場所から別の場所へオブジェクトを移動させる移動スクリプタブル、３次元でオブジェクトの回転を記述するローテータスクリプタブル、オブジェクトの３次元位置を即座に設定するオブジェクト位置クリプタブル、オブジェクトに取り付けられるアクションスクリプトを無効にする無効スクリプタブルなどの動的な３次元オブジェクトを操作するために用いられる機能を含み得る。スクリプタブル機能はまた、数学関数を含んでよく、入力は、評価対象の値を含んでよく、出力は、数学関数の結果である。数学関数は、加算、乗算、論理積、論理和、排他的論理和、及び、論理否定を含んでよい。１つ又は複数の数学関数は、入力又は出力値をそれぞれ修正すべく、別のスクリプタブルの入力又は出力に接続され得る。他のスクリプタブル機能は、遅延又は常にオンなどの時間又は時間の経過に関連する機能を含んでよい。利用可能なスクリプタブル機能は、拡張され得る。例えば、ユーザ１４が定型的にＮＡＮＤ論理演算を用いる場合、ユーザ１４は、論理スクリプタブルでない機能出力を論理ＡＮＤスクリプタブル機能入力にリンクし、組み合わせられたスクリプタブル機能を新しいＮＡＮＤスクリプタブル機能にセーブすることにより、新しいスクリプタブル機能を形成してよい。スクリプト化可能なメニュー３４０は、さらに、設定メニュー２１４を有し、設定メニュー２１４は、上述したようにユーザ１４が、環境構築システム内の異なるメニュー、例えば、限定されることはないが、ルーム設定メニュー１７０又はツールメニュー２３０を選択することを可能にする。

【0082】

アクションスクリプトは、１つ又は複数のスクリプタブル機能を有するＴｕｒｉｎｇ－ｃｏｍｐｌｅｔｅコンピュータプログラマブルコードのモジュールである。アクションスクリプトを利用することにより、ユーザ１４は、コンピュータプログラミング言語を理解することなく、アクションモジュールと共に配線することにより複合オブジェクトを構築できる。

【0083】

ここで、図１２を参照すると、スクリプトビルダの略図３６０の例示的な実施形態がそこに示される。ここで、（以下のさらなる詳細で論じられる）トリガオブジェクト４２は、ルーム１６０内利用可能になる。トリガスクリプタブルアクション３６２がトリガオブジェクト４２と関連付けられる。トリガスクリプタブルアクション出力３６４ａは、スクリタブルコネクタ３６８ａにより、ローテータスクリプタブルアクション３４４ａに接続される。スクリタブルコネクタ３６８ａは、トリガスクリプタブルアクション出力３６４ａからローテータスクリプタブルアクションアクティブ入力３７２ａへのパスの視覚的表現である。スクリタブルコネクタ３６８ａを用いて第１の入力に第１の出力を接続することにより、ユーザ１４は、第１の入力への入力値として、第１の出力の値を用いるように、スクリプトビルダ３８に指示している。また、４５度の静的ローテータスクリプタブルアクションＸ３７２ｂが示される、すなわち、４５度は、３次元座標空間内の「ｘ」方向に回転する度合いの数を表すローテータスクリプタブルアクション３４４ａへの予め設定された入力である。ローテータスクリプタブルアクション３４４ａはまた、「ｙ」方向及び「ｚ」方向への入力を受け入れる。ローテータスクリプタブルアクションオブジェクト出力３６４ｂは、スクリタブルコネクタ３６８ａにより、バスタブオブジェクト２６ａのバスタブオブジェクト入力３７２ｃに接続される。ローテータスクリプタブルアクションオブジェクト出力３６４ｂを、バスタブオブジェクト２６ａのバスタブオブジェクト入力３７２ｃに接続することにより、ユーザ１４は、ローテータスクリプタブルアクション３４４ａが、バスタブオブジェクト２６ａに適用されること示すにより、トリガオブジェクト４２がローテータスクリプタブルアクション３４４ａを呼び出す場合、バスタブオブジェクト２６ａに、「ｘ」方向に４５度回転させる。トリガスクリプタブルアクション３６２をローテータスクリプタブルアクションアクティブ入力３７２ａに接続することにより、ユーザ１４は、ローテータスクリプタブルアクション３４４ａがアクティブである場合、かつ、ローテータスクリプタブルアクション３４４ａが、トリガスクリプタブルアクション３６２の出力に基づいて非アクティブである場合に構成することができる。接続されたトリガスクリプタブルアクション３６２、ローテータスクリプタブルアクション３４４ａ及びオブジェクト特性３７６は、バスタブオブジェクト２６ａの親コンテナにあるアイテムとして格納される第１のアクションスクリプトを作成する。スクリプトビルダの略図３６０がセーブされる場合、仮想現実世界オーサリングシステム１０は、スクリプトビルダの略図３６０を処理し、当該略図をコンピュータ言語にコンパイルする。

【0084】

スクリプトビルダの略図３６０により示される同じ複合オブジェクトの挙動は、テキストスクリプトビルダを用いて作成され得る。ユーザ１４が非常に傾いている場合、ユーザ１４は、テキストスクリプトビルダを用いて、スクリプトビルダ３８を用いて作成されるのと同じバスタブオブジェクト２６ａをプログラミングできる。第１のアクションスクリプトは、テキストエディタに書き込まれ、仮想環境２２のルーム１６０にテキストファイルを後でインポートできる。仮想環境２２がテキストファイルを受信した場合、仮想環境２２は、第１のアクションスクリプトをスクリプトビルダの略図３６０に変換する。例示的なテキストファイルは、
／／ＴｒｉｇｇｅｒｅｄＲｏｔａｔｏｒ．ａｃｔ－ｃｏｍｍｅｎｔｅｄ ｏｕｔ ｆｉｌｅｎａｍｅ
［ｆＡｃｔｉｖａｔｅｄ］＞Ｔｒｉｇｇｅｒ＞［ｆＴｒｉｇｇｅｒＣｈｅｃｋ］
［ｆＴｒｉｇｇｅｒＣｈｅｃｋ ４５ ＄ ＄］＞Ｒｏｔａｔｅ＞［ａＲｏｔａｔｅＡｃｔｉｏｎ］
であってよい。

【0085】

上記のコードにおいて、「ｆＡｃｔｉｖａｔｅｄ」は、トリガスクリプタブルアクションに対する条件を受信し、ｆＡｃｔｉｖａｔｅｄ機能結果を出力し、ｆＴｒｉｇｇｅｒＣｈｅｃｋ機能を呼び出す機能である。ｆＴｒｉｇｇｅｒＣｈｅｃｋ機能は、３つのパラメータ４５ ＄ ＄を受信し、＄はｎｕｌｌ又は何もない値を表す。ローテートスクリプタブルアクションへの入力値は、バスタブオブジェクト２６ａのアクション入力への入力として、ａＲｏｔａｔｅＡｃｔｉｏｎへの出力が処理される。

【0086】

いくつかの実施形態において、スクリプトビルダの略図３６０は、任意の他のスクリプタブルアクションに接続されていないスクリプタブルアクションを示してよい。この場合、その出力への接続がないスクリプタブルアクションは、オブジェクト２６に対する効果が全くない。例えば、スクリプトビルダの略図３６０において、スクリタブルコネクタ３６８ａがそこに無かった場合、トリガスクリプタブルアクション３６２の出力は、バスタブオブジェクト２６ａに対する効果はなく、これより、ローテータスクリプタブルアクションアクティブ入力３７２ａが真に設定されていた場合、バスタブオブジェクト２６ａに連続的に回転させる。

【0087】

さらに、ユーザ１４は、多くの別個のスクリプタブルアクションが関連する複合アクションスクリプトを作成することを望むかもしれない。１つの解決手段は、ユーザ１４が、望ましいアクションスクリプトに類似する第２のアクションスクリプトを選択して、第２のアクションスクリプトをダウンロードし、軽微な変更を行い、望ましい結果を実現することである。さらに、ユーザ１４がアクションスクリプトを検索して発見した場合、ユーザ１４は、検索からアクションスクリプトを、ユーザ１４がアクションを追加することを望む仮想環境２２内のオブジェクト上にドラッグし得る。他の実施形態において、アクションスクリプトは、他の複雑な３次元アクションの間で、衝突回避及び／又はＡ＊アルゴリズム経路追従などの複合アクションを含み得る。

【0088】

トリガオブジェクト４２は、アクティブな場合、１つ又は複数のオブジェクト２６に取り付けられる１つ又は複数のスクリプタブルアクションをアクティブにさせるトリガスクリプタブルアクション３６２を有するオブジェクトである。トリガスクリプタブルアクション３６２は、ユーザのアバターを含むオブジェクト２６が、トリガオブジェクト４２、又は、トリガオブジェクト４２に着陸又はこれを通過するオブジェクト２６に基づくユーザのアバターなどの予め規定された方式でトリガオブジェクト４２と相互作用する場合にアクティブにされ得る。１つの実施形態において、相互作用は、１つ又は複数のオブジェクト２６がトリガオブジェクト４２条に積層され、１つ又は複数のオブジェクト２６がトリガ閾値を上回る全質量又は重量を有する場合、トリガスクリプタブルアクション３６２がアクティブにされるように、物理エンジンにより決定され得る。このシナリオにおいて、オブジェクトの質量合計は、トリガスクリプタブルアクション３６２の入力に向けられる。他の実施形態において、トリガオブジェクト４２と相互作用する１つ又は複数のオブジェクト２６の任意の特性は、トリガスクリプタブルアクション３６２への入力として用いられてよい。

【0089】

アクションスクリプトは、スクリプトビルダ３８により作成され、仮想環境２２に対話性を追加するために用いられる。トリガスクリプタブルアクションを含むアクションスクリプトを作成することにより、ユーザ１４は、プログラミングの知識を用いることなく、仮想環境内に複合オブジェクトを迅速かつ容易に作成できる。トリガの幅広く様々な使用がユーザの想像力のみにより拘束される一方、トリガを用いて、インタラクティブな複合オブジェクトを作成するいくつかの他の例は、押された場合、エレベータのドアが開くようなボタントリガオブジェクトにトリガを追加すること、銃の引き金が引かれた場合、銃が発砲するような銃の引き金にトリガを追加すること、又は、ユーザのアバターが出入り口閾値と交差する場合、クイズオブジェクトが閲覧可能になり、クイズオブジェクトにより存在するクイズに対する回答をユーザ１４に要求するような交差トリガを出入り口に追加することを含む。別の実施形態において、トリガスクリプタブルアクション３６２への入力は、時間遅延が終了した場合、アクティブ信号が時間遅延スクリプタブルアクションの出力からトリガスクリプタブルアクションの入力へ送信されるような時間遅延スクリプタブルアクションであってよい。

【0090】

１つの実施形態において、衝突検出は、デフォルトでオブジェクト２６に対して有効になっていない。衝突検出を有効にする代わりに、トリガオブジェクトが、オブジェクト２６に対する階層的な又は親－子関係に加えられ、スケーリングされ、接続される。トリガオブジェクト４２を追加して、オブジェクト２６を取り囲むことにより、オブジェクト２６と相互作用する任意のトリガオブジェクトは、まず、トリガオブジェクト４２を通過して、次に、トリガスクリプタブルアクション３６２をアクティブにしなければならない。トリガオブジェクトがトリガオブジェクト４２を入力した場合、そのトリガに対してｅｎｔｅｒｅｄ（）イベントがあげられ、ｅｎｔｅｒｅｄ（）イベントメッセージが作成される。同様に、トリガオブジェクトがもはや交差していない場合、トリガオブジェクトは、ｅｘｉｔｅｄ（）イベントが発生する。イベントハンドラ、及び、又は、メッセージレシーバは、ｅｎｔｅｒｅｄ（）又はｅｘｉｔｅｄ（）イベント又はメッセージを処理し、トリガスクリプタブルアクションをアクティブにする。

【0091】

１つの実施形態において、物理エンジンの動的なシミュレーションは、物理学の計算された法則を衝突検出、ニュートンの第２法則及び重力、並びに、剛体力学に限定している。仮想環境２２内のオブジェクト２６が、物理特性がオンに設定され、かつ、有効な質量特性を有する場合、物理エンジンは、オブジェクト２６を物理学シミュレーションにかける。物理エンジンの剛体力学シミュレーションは、オブジェクト２６の角回転挙動を説明しなければならない。物理学の計算された法則の併用効果は、ほとんどの使用条件にリアルなシミュレーションを提供する。別の実施形態において、追加の物理シミュレーション、例えば、限定されることはないが、軟体力学及び／又は電磁力が利用される。

【0092】

いくつかの実施形態において、仮想現実世界オーサリングシステム１０は、さらに、双方向状態ＡＰＩ５０を提供する。双方向状態ＡＰＩ５０は、実世界から仮想環境２２に、及び、仮想環境２２から実世界に双方向状態情報を提供する。双方向状態ＡＰＩ５０を実装する場合、実世界のオブジェクトは、仮想環境２２内のプロキシとして動作するモデルオブジェクトにモデル化されてよい。１つの実施形態において、心拍モニタが、ユーザ１４に取り付けされてよい。心拍モニタは、次に、双方向状態ＡＰＩに接続され、心拍モニタから仮想環境２２に心拍データを送信してよい。仮想環境２２内の心拍モデルオブジェクトは、心拍データを入力として受信し、心拍モデルオブジェクトからの出力をディスプレイオブジェクトの入力に接続してよく、これにより、仮想環境２２内のユーザの現実世界の心拍の表示をユーザ１４に提供する。同様に、仮想環境２２内からの情報は、仮想環境２２の外部及び現実世界の内部へ伝送されることができる。例えば、ユーザのアバターのアーム動作データは、双方向状態ＡＰＩ５０を通じて、実世界に記録及び伝送されてよい。現実世界において、アーム動作データが収集され、仮想環境内のユーザのアバターの動きが現実世界内のロボットアームによりミラーリングされるように、ロボットアームに送信されてよい。

【0093】

双方向状態ＡＰＩ５０についてのそのような必要性の１つは、危険なエリア内でのリモートロボット操作である。１又は複数のカメラを有するロボットは、人間がアクセス不可能な、又は、人間に有害な危険なエリアに配備され得る。ロボット上の１又は複数のカメラは、現実世界からイメージを収集し、仮想環境にイメージを伝送することができる。仮想環境２２は、次に、生成されるオブジェクトに対するテクスチャファイルとして現実世界のイメージを用いて、現実世界のイメージのオブジェクトを反映することができる。ロボットのアバターを有するユーザ１４は、次に、オブジェクトと相互作用でき、そのような相互作用は、次に、ロボットのアバターの運動データを収集し、そのデータを双方向状態ＡＰＩ５０を通じてロボットに送り返することにより、現実世界にミラーリングされることができ、これにより、ロボットに、ロボットのアバターの動きを現実世界にミラーリングさせる。

【0094】

双方向状態ＡＰＩ５０は、イベント処理システムであり、それは、イベントをキューに置く。ＡＰＩイベントは、システムにより送信及び受信されるべきメッセージに関連する。例えば、ＡＰＩイベントハンドラは、以下の疑似コードを実装してよく、受信されたメッセージは、ｍｅｓｓａｇｅ＿ｒｅｃｅｉｖｅｄ機能と呼ばれ、送信されたメッセージは、ｍｅｓｓａｇｅ＿ｓｅｎｔ機能と呼ばれる。

【0095】

ｓｗｉｔｃｈ（ｅｖｅｎｔ．ｔｙｐｅ）
｛ ｃａｓｅ: "ａｐｉ＿ｍｅｓｓａｇｅ＿ｒｅｃｅｉｖｅｄ：" ａｐｉ＿ｍｅｓｓａｇｅ＿ｒｅｃｖ（ｓｔａｔｅ）；
ｃａｓｅ： "ａｐｉ＿ｍｅｓｓａｇｅ＿ｓｅｎｄ" ： ａｐｉ＿ｍｅｓｓａｇｅ＿ｓｅｎｄ（ｏｂｊｅｃｔ）；
｝

【0096】

上記機能の例示的な疑似コードは、
ａｐｉ＿ｍｅｓｓａｇｅ＿ｒｅｃｖ（ｓｔａｔｅ）
｛ ｏｂｊｅｃｔｎａｍｅ ＝ ｓｔａｔｅ.ｏｂｊｅｃｔｎａｍｅ
ｏｂｊｅｃｔ ＝ ｇｅｔｏｂｊｅｃｔｗｉｔｈｎａｍｅ（ｏｂｊｅｃｔｎａｍｅ）
ｏｂｊｅｃｔ．ｐｒｏｐｅｒｔｙ１ ＝ ｓｔａｔｅ．ｐｒｏｐｅｒｔｙ１
ｏｂｊｅｃｔ．ｐｒｏｐｅｒｔｙ２ ＝ ｓｔａｔｅ．ｐｒｏｐｅｒｔｙ２
ｏｂｊｅｃｔ．ｐｒｏｐｅｒｔｙ３ ＝ ｓｔａｔｅ．ｐｒｏｐｅｒｔｙ３
・・・．．
｝
ａｐｉ＿ｍｅｓｓａｇｅ＿ｓｅｎｄ（ｏｂｊｅｃｔ）
｛ ｓｔａｔｅ ＝ ｎｅｗ ｓｔａｔｅ
ｓｔａｔｅ．ｏｂｊｅｃｔｎａｍｅ＝ｏｂｊｅｃｔ．ｎａｍｅ；
ｓｔａｔｅ．ｐｒｏｐｅｒｔｙ１ ＝ ｏｂｊｅｃｔ．ｐｒｏｐｅｒｔｙ１
ｓｔａｔｅ．ｐｒｏｐｅｒｔｙ２ ＝ ｏｂｊｅｃｔ．ｐｒｏｐｅｒｔｙ２
ｓｔａｔｅ．ｐｒｏｐｅｒｔｙ３ ＝ ｏｂｊｅｃｔ．ｐｒｏｐｅｒｔｙ３
・・・．
ｓｅｎｄ＿ｓｔａｔｅ（ｓｔａｔｅ）
｝
として表現され得る。

【0097】

送信状態機能は、ａｐｉ＿ｍｅｓｓａｇｅ＿ｓｅｎｄイベントが発生した場合に状態情報を送信する。それは、メッセージをラップ（ｗｒａｐ）し、それをシリアル化し、ネットワークを通じて送信することにより、接続型及びステートレス型の両方の様々なプロトコルのうちの任意の１つ又は複数を通じて、これを行うことができる。１つ又は複数のプロトコルは、ｈｔｔｐ、ｈｔｔｐｓ、ｔｅｌｎｅｔ、ｗｅｂ ｓｏｃｋｅｔｓ、ｓｉｇｎａｌｒ、ｓｏｃｋｉｅｔ．ｉｏ又はｔｃｐ／ｉｐソケットを含んでよい。

【0098】

ここで、図１３を参照すると、仮想現実世界オーサリングシステム１０の例示的な実施形態がそこに示され、ユーザ１４は、仮想環境２２内にあり、仮想環境２２は、複合バスケットボールオブジェクト３８０、バスケットボールオブジェクト３８２、バスケットボールトリガオブジェクト３８４、バスケットボールのゴールオブジェクト３８８及び複合バスケットボールリングオブジェクト３９２を有するバスケットボールのコートである。

【0099】

複合バスケットボールオブジェクト３８０を作成するために、ユーザ１４は、バスケットボールの質感、バスケットボールの弾み音、例えば、質量及び弾力性などのバスケットボールの物理的な特定を格納するバスケットボールのメタデータアイテム、及び、弾みアクションスクリプトを含むアイテムを有するバスケットボールオブジェクト３８２を作成する ユーザ１４はまた、バスケットボールトリガオブジェクト３８４を作成し、バスケットボールトリガオブジェクト３８４は、バスケットボールオブジェクトの半径より大きい半径を有する楕円体である。ユーザ１４は、バスケットボールオブジェクト３８２及びバスケットボールトリガオブジェクト３８４をそれらの中心点に接続することにより、バスケットボールトリガオブジェクト３８４に、仮想環境２２内にバスケットボールオブジェクト３８２を完全に包含させ、複合バスケットボールオブジェクト３８０を作成する。弾みアクションスクリプトは、弾みアクションを計算するために、質量及び弾力性、並びに、速度の値を含むバスケットボール用ボールの物理的特性を入力値として取り得る。

【0100】

複合バスケットボールオブジェクト３８０が弾むためには、複合バスケットボールオブジェクト３８０に対して作用する力がなければならず、したがって、バスケットボールトリガオブジェクト３８４に取り付けられるトリガスクリプタブルアクションと共に、衝突検出が実装される。衝突検出について、干渉するオブジェクトがバスケットボールトリガオブジェクト３８４と交差する場合、トリガイベントがあげられる。トリガハンドラは、イベントに応答して、トリガスクリプタブルアクションの入力を呼び出すことによりトリガスクリプタブルアクションをアクティブにする。ユーザ１４がスクリプタブルメニューからトリガスクリプタブルアクションを選択した場合、衝突検出及びイベント処理が、トリガスクリプタブルアクションに対して自動的に実装される。ユーザ１４は、次に、スクリプトビルダ３８を入力できる。ここで、ユーザ１４は、スクリタブルコネクタを用いて、バスケットボールトリガオブジェクト３８４のトリガスクリプタブルアクションの出力を、バスケットボールオブジェクト３８２の弾みスクリプタブルアクション上の入力に接続できる。弾みスクリプタブルアクションの他の入力は、干渉するオブジェクトの速度及び／又は質量を含んでよく、それにより、複合バスケットボールオブジェクトに影響を与えるべきではないトリガオブジェクト又は別のオブジェクトと、複合バスケットボールオブジェクト３８０が交差する場合に、弾みスクリプタブルアクションが、複合バスケットボールオブジェクト３８０を弾ませることを防止する。弾みスクリプタブルアクションの出力は、次に、第２のスクリプタブルコネクタによりバスケットボールオブジェクトに対して入力されるアクションに接続されることができ、トリガスクリプタブルアクションからバスケットボールオブジェクトに対する弾みスクリプタブルアクションへの接続により、トリガスクリプタブルアクションが衝突検出によりアクティブになった場合に、バスケットボール用ボールを弾ませる。

【0101】

同様に、複合バスケットボールリングオブジェクト３９２は、バスケットボールリングオブジェクトと、リムトリガスクリプタブルアクションを有するバスケットボールリングのトリガオブジェクトとの間の階層的関係を形成することにより作成され、バスケットボールリングのトリガオブジェクトは、リムにより囲まれる円形平面であり、両方のオブジェクトの中心点が接続される。ここで、衝突検出は、１つ又は複数の干渉するオブジェクトがバスケットボールリングのトリガオブジェクトと交差するか否かを再びテストする必要がある。トリガスクリプタブルアクションは、トリガスクリプタブルアクションが次のスクリプタブルアクションをアクティブにするため、交差するオブジェクトが複合バスケットボールオブジェクトであるという条件を有し得る。ユーザ１４は、次に、スクリプトビルダ３８を入力できる。ここで、ユーザ１４は、スクリタブルコネクタを用いて、バスケットボールリングのトリガオブジェクトのリムトリガスクリプタブルアクションの出力を、スコアボードオブジェクトのゴールのスクリプタブルアクション上の入力に接続できる。ゴールのスクリプタブルアクションに対する他の入力は、どちらのチームが最後にボールのコントロールをしたのか、複合バスケットボールオブジェクト３８０がリリースされたコート上の場所などの複合バスケットボールオブジェクト３８０の特性である。ゴールのスクリプタブルアクションからの出力は、スコアを入れるポイントの数、及び、スコアを入れるチームを含んでよい。ゴールのスクリプタブルアクションの出力は、次に、第２のスクリプタブルコネクタにより、スコアボードオブジェクト上に入力されるアクションに接続されることができ、リムトリガスクリプタブルアクションからスコアボードオブジェクトに対するゴールのスクリプタブルアクションへの接続により、リムトリガスクリプタブルアクションが衝突検出によりアクティブになった場合に、スコアボードにスコアを変更させる。

【0102】

ここで、図１４を参照すると、１つ又は複数のコンピュータシステム４００上で実行される仮想現実世界オーサリングシステム１０の例示的な実施形態が示される。コンピュータシステム４００は、それぞれがコンピュータプロセッサ４０８を有する１つ又は複数の処理コンポーネント４０４と、１つ又は複数の非一時的メモリ４１２とを備えてよく、１つ又は複数の通信コンポーネント４１６を含んでよい（又は、これらと通信可能に連結される）。非一時的メモリ４１２は、仮想現実世界オーサリングシステム１０を実装するコンピュータコードを格納してよい。コンピュータシステム４００は、処理コンポーネント４０４間の双方向通信を可能にするネットワーク４２０、１つ又は複数のＶＲヘッドセット１８、及び／又は、サーバシステム４２４を含んでよい。コンピュータプロセッサ４０８又は複数のコンピュータプロセッサ４０８は、単一の物理的な場所に配置されてよい、又は、必ずしも、単一の物理的な場所に配置されていなくてよい。１つの実施形態において、処理コンポーネント４０４は、ＶＲヘッドセット１８と統合される。

【0103】

１つの実施形態において、ネットワーク４２０は、インターネットであり、ＶＲヘッドセット１８は、通信コンポーネント４１６を介してコンピュータプロセッサ４０８とインタフェース接続する。しかしながら、ネットワーク４２０は、ほぼすべてのタイプのネットワークであってよく、ワールドワイドウェブ（又は、インターネット）として、ローカルエリアネットワーク（ＬＡＮ）、ワイドエリアネットワーク（ＷＡＮ）、メトロポリタンネットワーク、無線ネットワーク、セルラーネットワーク、Ｂｌｕｅｔｏｏｔｈネットワーク、グローバルシステムフォーモバイルコミュニケーションズ（ＧＳＭ（登録商標））ネットワーク、符号分割多元接続（ＣＤＭＡ）ネットワーク、３Ｇネットワーク、４Ｇネットワーク、５Ｇネットワーク、衛星ネットワーク、無線ネットワーク、光ネットワーク、ケーブルネットワーク、公衆交換電話網、イーサネット（登録商標）ネットワーク、それらの組み合わせ、及び／又は同様のものを実装してよいことを留意されたい。近い将来、本開示の実施形態が、より高度なネットワーキングトポロジーを用い得ることが考えられる。

【0104】

１つの実施形態において、コンピュータプロセッサ４０８及び非一時的メモリ４１２を有する処理コンポーネント４０４は、商用ウェブサイト及び／又はデータセンタなどの商用コンピュータベースのビジネスシステムを提供するのに適切な構成で複数のサーバを有するサーバシステム４２４を用いて実装されてよい。

【0105】

以下は、本明細書で開示される本発明の概念の非限定的で例示的な実施形態の番号リストである。

【0106】

１．プロセッサと、
仮想フィードバックスクリーンを有するヘッドセットと、
１つ又は複数のユーザインタフェースデバイスと、
コンピュータ実行可能コードを格納する非一時的コンピュータ可読媒体と
を備え、
コンピュータ実行可能コードは、プロセッサにより実行される場合、プロセッサに、
複合現実環境をヘッドセットに投影する手順であって、複合現実環境は、１つ又は複数のオブジェクトを有し、１つ又は複数のオブジェクトのそれぞれは、１つ又は複数のオブジェクトが複合現実環境内でどのように相互作用するかを定義する特性を有するオブジェクトコンピュータコードにより作成される、手順と、
少なくとも１つのユーザインタフェースデバイスからの第１の入力に応じて、予め規定されたアクションモジュールのリストを有する仮想フィードバックスクリーン上にアクションメニューを表示する手順であって、アクションモジュールは、１つ又は複数の機能を有するコンピュータ実行可能コードのモジュールを含み、１つ又は複数の機能は、複合現実環境内の１つ又は複数のオブジェクトの第１のオブジェクトの１つ又は複数の属性に影響を与えるように構成される、手順と、
選択されたアクションモジュールを含むように、第１のオブジェクトのオブジェクトコンピュータコードを更新する手順と
を実行させる、電子デバイス。

【0107】

２．第１のオブジェクトは、第１の入力の前に識別される、例示的な実施形態１の電子デバイス。

【0108】

３．第１のオブジェクトは、第１の入力の後に識別される、例示的な実施形態１の電子デバイス。

【0109】

４．非一時的コンピュータ可読媒体は、プロセッサにより実行される場合、プロセッサに、トリガイベントに応じて、選択されたアクションモジュールを含むように第１のオブジェクトのオブジェクトコンピュータコードを更新する手順を実行させるコンピュータ実行可能コードを格納する、例示的な実施形態１－３のいずれか１つの電子デバイス。

【0110】

５．ユーザがトリガオブジェクトと相互作用することにより、予め決定されたトリガ条件を満たす場合、トリガイベントがあげられる、例示的な実施形態４の電子デバイス。

【0111】

６．非一時的コンピュータ可読媒体は、プロセッサにより実行される場合、プロセッサに、トリガメニューから特定のトリガオブジェクトを選択する少なくとも１つのユーザインタフェースデバイスからの第２の入力に応じて、トリガオブジェクトに対する１つ又は複数のトリガ条件のリストを有するトリガ条件メニューを表示する手順と、トリガオブジェクトに対する第１のトリガ条件の選択に応じて、ユーザがトリガオブジェクトを複合現実環境に配置することを可能にする手順を実行させるコンピュータ実行可能コードを格納し、トリガ条件は、満たされた場合、プロセッサに、選択されたアクションモジュールを含むように、第１のオブジェクトのオブジェクトコンピュータコードを更新させる、例示的な実施形態１－５のいずれか１つの電子デバイス。

【0112】

７．プロセッサと、
仮想フィードバックスクリーンを有するヘッドセットと、
１つ又は複数のユーザインタフェースデバイスと、
コンピュータ実行可能コードを格納する非一時的コンピュータ可読媒体と
を備え、
コンピュータ実行可能コードは、プロセッサにより実行される場合、プロセッサに、
複合現実環境をヘッドセットに投影する手順であって、複合現実環境は、１つ又は複数のオブジェクトを有し、１つ又は複数のオブジェクトのそれぞれは、１つ又は複数のオブジェクトが複合現実環境内でどのように相互作用するかを定義する特性を有するオブジェクトコンピュータコードにより作成される、手順と、
トリガメニューから特定のトリガオブジェクトを選択する少なくとも１つのユーザインタフェースデバイスからの第１の入力に応じて、トリガオブジェクトに対する１つ又は複数のトリガ条件のリストを有するトリガ条件メニューを表示する手順と、トリガオブジェクトに対する第１のトリガ条件の選択に応じて、ユーザがトリガオブジェクトを複合現実環境に配置することを可能にする、手順と
を実行させる、電子デバイス。

【0113】

８．トリガオブジェクトは、第１の入力の前に識別される、例示的な実施形態７の電子デバイス。

【0114】

９．トリガオブジェクトは、第１の入力の後に識別される、例示的な実施形態７の電子デバイス。

【0115】

１０．非一時的コンピュータ可読媒体は、プロセッサにより実行される場合、プロセッサに、トリガイベントに応じて、選択されたアクションモジュールを含むように、トリガオブジェクトのオブジェクトコンピュータコードを更新する手順を実行させるコンピュータ実行可能コードを格納する、例示的な実施形態７－９のいずれか１つの電子デバイス。

【0116】

１１．ユーザがトリガオブジェクトと相互作用することにより、予め決定されたトリガ条件を満たす場合、トリガイベントがあげられる、例示的な実施形態１０の電子デバイス。

【0117】

１２．プロセッサにより実行される場合、プロセッサに、
複合現実環境をヘッドセットに投影する手順であって、複合現実環境は、１つ又は複数のオブジェクトを有し、１つ又は複数のオブジェクトのそれぞれは、１つ又は複数のオブジェクトが複合現実環境内内でどのように相互作用するかを定義する特性を有するオブジェクトコンピュータコードにより作成される、手順と、
少なくとも１つのユーザインタフェースデバイスからの第１の入力に応じて、予め規定されたアクションモジュールのリストを有する仮想フィードバックスクリーン上にアクションメニューを表示する手順であって、アクションモジュールは、１つ又は複数の機能を有するコンピュータ実行可能コードのモジュールを含み、１つ又は複数の機能は、複合現実環境内の１つ又は複数のオブジェクトの第１のオブジェクトの１つ又は複数の属性に影響を与えるように構成される、手順と、
選択されたアクションモジュールを含むように、第１のオブジェクトのオブジェクトコンピュータコードを更新する手順と
を実行させるコンピュータ実行可能コードを格納する非一時的コンピュータ可読媒体。

【0118】

１３．第１のオブジェクトは、第１の入力の前に識別される、例示的な実施形態１２の非一時的コンピュータ可読媒体。

【0119】

１４．第１のオブジェクトは、第１の入力の後に識別される、例示的な実施形態１２の非一時的コンピュータ可読媒体。

【0120】

１５．非一時的コンピュータ可読媒体は、プロセッサにより実行される場合、プロセッサに、トリガイベントに応じて、選択されたアクションモジュールを含むように第１のオブジェクトのオブジェクトコンピュータコードを更新する手順を実行させるコンピュータ実行可能コードを格納する、例示的な実施形態１２－１４のいずれか１つの非一時的コンピュータ可読媒体。

【0121】

１６．ユーザがトリガオブジェクトと相互作用することにより、予め決定されたトリガ条件を満たす場合、トリガイベントがあげられる、例示的な実施形態１５の非一時的コンピュータ可読媒体。

【0122】

１７．非一時的コンピュータ可読媒体は、プロセッサにより実行される場合、プロセッサに、トリガメニューから特定のトリガオブジェクトを選択する少なくとも１つのユーザインタフェースデバイスからの第２の入力に応じて、トリガオブジェクトに対する１つ又は複数のトリガ条件のリストを有するトリガ条件メニューを表示する手順と、トリガオブジェクトに対する第１のトリガ条件の選択に応じてユーザがトリガオブジェクトを複合現実環境に配置することを可能にする手順と、を実行させるコンピュータ実行可能コードを格納し、トリガ条件は、満たされた場合、プロセッサに、選択されたアクションモジュールを含むように、第１のオブジェクトのオブジェクトコンピュータコードを更新させる、例示的な実施形態１２－１６のいずれか１つの非一時的コンピュータ可読媒体。

【0123】

１８． プロセッサと、
仮想フィードバックスクリーンを有するヘッドセットと、
１つ又は複数のユーザインタフェースデバイスと、
コンピュータ実行可能コードを格納する非一時的コンピュータ可読媒体と
を備え、
コンピュータ実行可能コードは、プロセッサにより実行される場合、プロセッサに、
仮想現実環境をヘッドセットに投影する手順であって、仮想現実環境は、１つ又は複数のオブジェクトを有し、１つ又は複数のオブジェクトのそれぞれは、１つ又は複数のオブジェクトが仮想現実環境内でどのように相互作用するかを定義する特性を有するコンテナにより作成され、１つ又は複数のオブジェクトは、１つ又は複数のオブジェクトの境界を定義する座標を有する３次元メッシュを有する、手順と、
１つ又は複数のオブジェクトの第１のオブジェクトを選択する手順と、
少なくとも１つのユーザインタフェースデバイスからの第１の入力に応じて、仮想フィードバックスクリーン上に、仮想現実環境内のアクションメニューを表示する手順であって、アクションメニューは、予め定義されたアクションスクリプトのリストを有し、アクションスクリプトは、１つ又は複数の機能を有するコンピュータ実行可能コードのモジュールを含み、１つ又は複数の機能は、仮想現実環境内の１つ又は複数のオブジェクトのうちの第１のオブジェクトの１つ又は複数の属性に影響を与えるように構成される、手順と、
選択されたアクションスクリプトを含むように、第１のオブジェクトのコンテナを更新する手順と
を実行させる、電子デバイス。

【0124】

１９．第１のオブジェクトは、第１の入力の前に識別される、例示的な実施形態１８の電子デバイス。

【0125】

２０．第１のオブジェクトは、第１の入力の後に識別される、例示的な実施形態１８の電子デバイス。

【0126】

２１．非一時的コンピュータ可読媒体は、プロセッサにより実行される場合、プロセッサに、トリガイベントに応じて、選択されたアクションスクリプトを含ように第１のオブジェクトのコンテナを更新する手順を実行させるコンピュータ実行可能コードを格納する、例示的な実施形態１８－２０のいずれか１つの電子デバイス。

【0127】

２２．ユーザがトリガオブジェクトと相互作用することにより、予め決定されたトリガ条件を満たす場合、トリガイベントがあげられる、例示的な実施形態２１の電子デバイス。

【0128】

２３．非一時的コンピュータ可読媒体は、プロセッサにより実行される場合、プロセッサに、トリガメニューから特定のトリガオブジェクトを選択する少なくとも１つのユーザインタフェースデバイスからの第２の入力に応じて、トリガオブジェクトに対する１つ又は複数のトリガ条件のリストを有するトリガ条件メニューを表示する手順と、トリガオブジェクトに対する第１のトリガ条件の選択に応じて、ユーザがトリガオブジェクトを仮想現実環境に配置することを可能にする手順とを実行させるコンピュータ実行可能コードを格納し、トリガ条件は、満たされた場合、プロセッサに、選択されたアクションスクリプトを含むように、第１のオブジェクトのコンテナを更新させる、例示的な実施形態１８－２２のいずれか１つの電子デバイス。

【0129】

２４．プロセッサと、
仮想フィードバックスクリーンを有するヘッドセットと、
１つ又は複数のユーザインタフェースデバイスと、
コンピュータ実行可能コードを格納する非一時的コンピュータ可読媒体と
を備え、
コンピュータ実行可能コードは、プロセッサにより実行される場合、プロセッサに、
仮想現実環境をヘッドセットに投影する手順であって、仮想現実環境は、１つ又は複数のオブジェクトを有し、１つ又は複数のオブジェクトのそれぞれは、１つ又は複数のオブジェクトが仮想現実環境内でどのように相互作用するかを定義する特性を有するコンテナにより作成される、手順と、
少なくとも１つのユーザインタフェースデバイスからの入力に応じて、トリガメニューから選択されたトリガオブジェクトを、１つ又は複数のオブジェクトのうちの特定のオブジェクトに接続することで、複合オブジェクトを形成する手順であって、複合オブジェクトは、１つ又は複数のアクションスクリプトを含み、トリガオブジェクトに対する１つ又は複数のトリガスクリプタブルアクションを有するスクリプタブルメニューを、仮想フィードバックスクリーン上の仮想現実環境に表示する、手順と、
トリガオブジェクトに対するトリガスクリプタブルアクションの選択に応じて、ユーザがトリガオブジェクトを仮想現実環境に配置することを可能にし、複合オブジェクトの１つ又は複数のアクションスクリプトにトリガスクリプタブルアクションを関連付ける手順と
を実行させる、電子デバイス。

【0130】

２５．トリガオブジェクトは、入力の前に識別される、例示的な実施形態２４の電子デバイス。

【0131】

２６．トリガオブジェクトは、入力の後に識別される、例示的な実施形態２４の電子デバイス。

【0132】

２７． 非一時的コンピュータ可読媒体は、プロセッサにより実行される場合、プロセッサに、トリガイベントに応じて、アクションスクリプトをアクティブにするように複合オブジェクトを更新する手順を実行させるコンピュータ実行可能コードを格納する、例示的な実施形態２４－２６のいずれか１つの電子デバイス。

【0133】

２８．ユーザがトリガオブジェクトと相互作用することにより、予め決定されたトリガ条件を満たす場合、トリガイベントがあげられる、例示的な実施形態２７の電子デバイス。

【0134】

２９．プロセッサにより実行される場合、プロセッサに、
仮想現実環境をヘッドセットに投影する手順であって、仮想現実環境は、１つ又は複数のオブジェクトを有し、１つ又は複数のオブジェクトのそれぞれは、１つ又は複数のオブジェクトが仮想現実環境内でどのように相互作用するかを定義する特性を有するコンテナにより作成され、１つ又は複数のオブジェクトは、１つ又は複数のオブジェクトの境界を定義する座標を有する３次元メッシュを有する、手順と、
仮想現実環境内の１つ又は複数のオブジェクトのうちの第１のオブジェクトを選択する少なくとも１つのユーザインタフェースデバイスからの第１の入力に応じて、予め定義されたアクションスクリプトのリストを有する仮想フィードバックスクリーン上にアクションメニューを表示する手順であって、アクションスクリプトは、１つ又は複数の機能を有するコンピュータ実行可能コードのモジュールを含み、１つ又は複数の機能は、仮想現実環境内の１つ又は複数のオブジェクトのうちの第１のオブジェクトの１つ又は複数の属性に影響を与えるように構成される、手順と、
選択されたアクションスクリプトを含むように、第１のオブジェクトのコンテナを更新する手順と
を実行させるコンピュータ実行可能コードを格納する非一時的コンピュータ可読媒体。

【0135】

３０．第１のオブジェクトは、第１の入力の前に識別される、例示的な実施形態２９の非一時的コンピュータ可読媒体。

【0136】

３１．第１のオブジェクトは、第１の入力の後に識別される、例示的な実施形態２９の非一時的コンピュータ可読媒体。

【0137】

３２．非一時的コンピュータ可読媒体は、プロセッサにより実行される場合、プロセッサに、トリガイベントに応じて、選択されたアクションスクリプトを含むように第１のオブジェクトのコンテナを更新する手順を実行させるコンピュータ実行可能コードを格納する例示的な実施形態２９－３１のいずれか１つの非一時的コンピュータ可読媒体。

【0138】

３３．ユーザがトリガオブジェクトと相互作用することにより、予め決定されたトリガ条件を満たす場合、トリガイベントがあげられる、例示的な実施形態３２の非一時的コンピュータ可読媒体。

【0139】

３４．非一時的コンピュータ可読媒体は、プロセッサにより実行される場合、プロセッサに、トリガメニューから特定のトリガオブジェクトを選択する少なくとも１つのユーザインタフェースデバイスからの第２の入力に応じて、トリガオブジェクトに対する１つ又は複数のトリガ条件のリストを有するトリガ条件メニューを表示する手順と、トリガオブジェクトに対する第１のトリガ条件の選択に応じて、ユーザがトリガオブジェクトを仮想現実環境に配置することを可能にする手順とを実行させるコンピュータ実行可能コードを格納し、トリガ条件は、満たされた場合、プロセッサに、選択されたアクションスクリプトを含むように第１のオブジェクトのコンテナを更新させる、例示的な実施形態２９－３３のいずれか１つの非一時的コンピュータ可読媒体。

【0140】

上記の説明及び例から、本明細書において開示され請求される本発明の概念は、本明細書で言及される利点を獲得するために十分に適合される。本発明の概念の例示的な実施形態が、本開示の目的のために説明されてきたが、当業者にそれら自体を容易に示唆し、本明細書において開示及び請求される本発明の概念の主旨の範囲内で遂行される多数の変更が行われ得ることが理解される。例示的な目的として、バスケットボールのコートのＶＲ環境の例、及び、車両の複合オブジェクトの例が用いられているが、しかしながら、例は、例示的な目的のみのためであり、本発明の範囲を限定するものとして解釈されるべきではないことが理解されるべきである。

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】

【国際調査報告】