特許 7000397 仮想現実制御システム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2021-12-27

(45)【発行日】2022-02-04

(54)【発明の名称】仮想現実制御システム

(51)【国際特許分類】

   G06F 3/01 20060101AFI20220128BHJP

   G09B 9/00 20060101ALI20220128BHJP

   G06T 19/00 20110101ALI20220128BHJP

   G09B 5/02 20060101ALN20220128BHJP

【ＦＩ】

G06F3/01 510

G09B9/00 C

G06T19/00 300B

G09B5/02

【請求項の数】 6

【外国語出願】

(21)【出願番号】P 2019193318

(22)【出願日】2019-10-24

(65)【公開番号】P2021068209

(43)【公開日】2021-04-30

【審査請求日】2019-12-23

(31)【優先権主張番号】10-2019-0132026

(32)【優先日】2019-10-23

(33)【優先権主張国・地域又は機関】KR

(73)【特許権者】

【識別番号】519110397

【氏名又は名称】スコネック エンターテインメント カンパニー リミテッド

(74)【代理人】

【識別番号】110000877

【氏名又は名称】龍華国際特許業務法人

(72)【発明者】

【氏名】ソン、チャエ フーン

(72)【発明者】

【氏名】カン、セ ホ

【審査官】菅原 浩二

(56)【参考文献】

【文献】特表２０１０－５３５３６３（ＪＰ，Ａ）

【文献】特開２０００－１２２５２０（ＪＰ，Ａ）

【文献】特開２０１５－１２１７５６（ＪＰ，Ａ）

【文献】特開２０１９－０１２１５４（ＪＰ，Ａ）

【文献】特表２０１６－５３２９０９（ＪＰ，Ａ）

【文献】特開２０００－３５３２４８（ＪＰ，Ａ）

【文献】中国特許出願公開第１０６６０１０６２（ＣＮ，Ａ）

【文献】中国特許出願公開第１０６０５５１１３（ＣＮ，Ａ）

【文献】特開平１１－２７２６４７（ＪＰ，Ａ）

【文献】米国特許出願公開第２０１５／０２６９８１８（ＵＳ，Ａ１）

【文献】米国特許出願公開第２０１５／０１１６３１６（ＵＳ，Ａ１）

【文献】米国特許出願公開第２０１４／０３３６７８６（ＵＳ，Ａ１）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｇ０６Ｆ ３／０１

Ｇ０９Ｂ ９／００

Ｇ０６Ｔ １９／００

Ｇ０９Ｂ ５／０２

(57)【特許請求の範囲】

【請求項1】

対象物体に光を放出し、前記対象物体から光を受光して、光信号を検出するように構成されたセンサと、
画像を第１ユーザに出力するように構成された第１ディスプレイと、
画像を第２ユーザに出力するように構成された第２ディスプレイと、
前記第１ディスプレイ及び前記第２ディスプレイのうちの少なくとも１つを制御するように構成された少なくとも１つのコントローラと、
を備え、
前記コントローラは、
前記光信号に基づいて、前記第１ユーザに関する第１位置データ及び前記第２ユーザに関する第２位置データを取得し、
前記第１位置データに基づいて、第１領域及び第２領域を含む画像を前記第１ディスプレイに出力する
ように構成され、
前記コントローラは、前記第１ユーザが前記第２ユーザよりも先に前記第１領域に位置するときに、前記第１ユーザに第１権限を、前記第２ユーザに第２権限を割り当て、
前記第１権限が前記第２権限より高い権限であり、
前記第１位置データが前記第１領域に位置するときは、第１画像が前記第１ディスプレイに出力され、前記第２位置データが前記第１領域に位置するときは、通知画像が前記第２ディスプレイに出力され、
前記第２権限を有する前記第２ユーザが予め定められた時間移動せずに前記第１領域に位置するときに、前記コントローラは、前記第１権限を前記第２ユーザに移譲するかどうかを前記第１ユーザに確認し、
前記コントローラは、前記第１ディスプレイおよび前記第２ディスプレイのそれぞれに、目的地への移動経路を含む画像を表示するように制御し、
前記第１ユーザの移動が完了した後、前記コントローラは、前記第２ユーザの移動経路を含む画像を前記第２ディスプレイに表示するように制御し、
前記第１ユーザが前記第２ユーザの前記移動経路に近接して位置するときに、前記コントローラは、前記第２ユーザの前記移動経路の色を変更するように前記第２ディスプレイを制御する、
仮想現実制御システム。

【請求項2】

前記通知画像は、前記第２ユーザの前記第２位置データに対応する画像ではない、
請求項１に記載の仮想現実制御システム。

【請求項3】

前記第２ユーザが前記第１ユーザによって移譲された前記第１権限を有する場合において、前記第２位置データが前記第１領域に位置するときは、前記第２ユーザの前記第２位置データに対応する画像が前記第２ディスプレイに出力される、
請求項１又は２に記載の仮想現実制御システム。

【請求項4】

前記第１権限及び前記第２権限は、予め設定された権限である、
請求項１から３のいずれか一項に記載の仮想現実制御システム。

【請求項5】

前記第１権限が前記第１ユーザに、前記第２権限が前記第２ユーザに割り当てられているときに、前記コントローラは、前記第１ディスプレイに第１シナリオと関連する画像を表示するように制御し、前記第２ディスプレイに、前記第１シナリオとは異なる第２シナリオと関連する画像を表示するように制御する、
請求項１から４のいずれか一項に記載の仮想現実制御システム。

【請求項6】

前記第１権限に従って、前記第１位置データおよび予め定められた第１移動経路を比較することにより評価が実行される、
請求項１から５のいずれか一項に記載の仮想現実制御システム。

【発明の詳細な説明】

【技術分野】

【0001】

［関連出願の相互参照］
本出願は、２０１９年１０月２３日に提出された韓国特許出願第１０－２０１９－０１３２０２６号の優先権と利益を主張し、その開示はその全体が参照により本明細書に組み込まれる。

【背景技術】

【0002】

本開示は、仮想現実制御システムに関する。

【0003】

［関連技術の説明］
仮想現実は、現実に追加された仮想情報、又はプログラムによって生成された仮想現実画像として、現実世界の対象物体の状態をユーザに提供する技術であり得る。

【0004】

このような仮想現実を提供する技術には、ユーザ又は物体などの対象物体の状態に関する現実世界で提供される情報に基づいて、プログラムを用いて仮想空間、仮想キャラクタ、仮想物体を作成する技術が含まれ得る。この技術では、様々なセンサを使用して、対象物体の状態に関する情報を取得できる。

【0005】

仮想現実システムを使用して、様々な災害状況をユーザに提供することができ、仮想現実を体験しているユーザの没入感を改善する方法に関する研究が活発に行われている。

【発明の概要】

【0006】

本開示の１つの目的は、化学事故対応訓練コンテンツの権限に従ってユーザに異なる役割を割り当て、それによりユーザが適切な訓練を実行できるようにする仮想現実システムを提供することである。

【0007】

本開示の１つの一般的な態様によれば、対象物体に光を放出し、対象物体から光を受光して、光信号を検出するように構成されたセンサと、画像を第１ユーザに出力するように構成された第１ディスプレイと、画像を第２ユーザに出力するように構成された第２ディスプレイと、第１ディスプレイ及び第２ディスプレイのうちの少なくとも１つを制御するように構成された少なくとも１つのコントローラと、を備える仮想現実制御システムが提供され、コントローラは、光信号に基づいて第１ユーザに関する第１位置データと第２ユーザに関する第２位置データとを取得し、第１位置データに基づき第１ディスプレイに第１領域及び第２領域を備える画像を出力するように構成され、第１ユーザは第１権限を有し、第２ユーザは第２権限を有し、第１権限が第２権限より高い権限であり、第１位置データが第１領域に位置するときは、第１画像が出力され、第２位置データが第１領域に位置するときは、通知画像が第２ディスプレイに出力される。

【図面の簡単な説明】

【0008】

本開示の上記及び他の目的、特徴、及び利点は、添付の図面を参照してその例示的な実施形態を詳細に説明することにより、当業者により明らかになるであろう。

【0009】

【図1】本開示の一実施形態による仮想現実制御システムを示す図である。

【0010】

【図2】本開示の一実施形態による検出デバイスを示す図である。

【0011】

【図3】本開示の一実施形態によるサーバを示す図である。

【0012】

【図4】本開示の一実施形態による補助計算デバイスを示す図である。

【0013】

【図5】本開示の一実施形態によるウェアラブルディスプレイデバイスを示す図である。

【0014】

【図6】本開示の一実施形態による訓練制御システムを示す図である。

【0015】

【図7】一実施形態による仮想現実制御システムの行動後レビュー（ＡＡＲ）システムを示す図である。

【0016】

【図8】本開示の一実施形態による仮想現実制御システムの実装例を示す図である。

【0017】

【図9】本開示の一実施形態による対象物体を追跡する方法を示す図である。

【0018】

【図10】本開示の一実施形態によるウェアラブルディスプレイデバイスを介して仮想現実画像を出力する例を示す図である。

【0019】

【図11】本開示の一実施形態による仮想現実画像を示す図である。

【0020】

【図12】本開示の一実施形態による追跡領域に配置された実物体ＲＯを示す図である。

【0021】

【図13】一実施形態による追跡領域を示す図である。そして

【0022】

【図14】一実施形態による訓練シナリオによる移動線を示す図である。

【図15】一実施形態による訓練シナリオによる移動線を示す図である。

【図16】一実施形態による訓練シナリオによる移動線を示す図である。

【図17】一実施形態による訓練シナリオによる移動線を示す図である。

【発明を実施するための形態】

【0023】

一実施形態による仮想現実制御システムは、対象物体に光を放出し、対象物体から光を受光して、光信号を検出するように構成されたセンサと、画像を第１ユーザに出力するように構成された第１ディスプレイと、画像を第２ユーザに出力するように構成された第２ディスプレイと、第１ディスプレイ及び第２ディスプレイのうちの少なくとも１つを制御するように構成された少なくとも１つのコントローラと、を備えることができ、コントローラは、光信号に基づいて第１ユーザに関する第１位置データと第２ユーザに関する第２位置データとを取得し、第１領域及び第２領域を備える画像を第１位置データに基づき第１ディスプレイに出力するように構成され、第１ユーザは第１権限を有し、第２ユーザは第２権限を有し、第１権限が第２権限より高い権限であり、第１位置データが第１領域に位置するときは、第１画像が出力され、第２位置データが第１領域に位置するときは、通知画像が第２ディスプレイに出力される。

【0024】

通知画像は、第２ユーザの視野に対応する画像でなくてもよい。

【0025】

第２ユーザが、第１ユーザによって移譲される第１権限を有する場合において、第２位置データが第１領域に位置するときは、第２ユーザの視野に対応する画像が出力され得る。

【0026】

第１権限及び第２権限は、予め設定された権限である場合がある。

【0027】

コントローラは、第１ユーザと第２ユーザとの間の第１領域に最初に位置するユーザに、より高い権限を割り当てることができる。

【0028】

シミュレーションは、第１権限及び第２権限に従って、異なるシナリオで実行できる。

【0029】

評価は、第１権限及び第２権限に従って、異なる評価項目で実行できる。

【0030】

コントローラは、第１権限及び第２権限に従って、第１ユーザ及び第２ユーザの各々が第１ディスプレイ及び第２ディスプレイの各々に移動する移動経路を表示してもよい。

【0031】

コントローラは、第１ディスプレイ及び第２ディスプレイの各々に目的地への移動経路を表示してもよく、移動経路は最短距離ではない。

【0032】

コントローラは、第１ディスプレイ及び第２ディスプレイの各々に目的地への移動経路を表示し、コントローラは、第１ユーザの移動が完了した後に第２ユーザの移動経路が表示されるように制御する。

【0033】

以下、本開示の例示的な実施形態について、添付図面を参照して詳細に説明する。一方、本開示の趣旨は、提案された実施形態に限定されず、本開示が属する分野の当業者は、さらなる遡及的な開示又は別の実施形態を容易に提案することができ、これは、本開示の趣旨から逸脱することなく、別の構成要素の追加、修正、及び削除を介して本開示の趣旨に含まれる。

【0034】

以下の説明において、実施形態の図面に示される同一の範囲内で同一の機能を有する構成要素は、同一の参照番号を用いて示される。

【0035】

本開示は、空間及び時間の制約又は実装或いは発生の制限のために体験することが困難な状況をユーザが体験できるように仮想現実を提供し得る仮想現実制御システムに関する。

【0036】

ここで、仮想現実は現実世界とは異なる場合があり、プログラムによって作成された人工的な環境である場合がある。

【0037】

このような仮想現実は一般に、プログラムを使用して現実から分離された仮想空間を作成し、仮想空間の画像を提供する仮想現実（ＶＲ）、現実世界に仮想画像を重ね合わせることにより単一の画像を提供する拡張現実（ＡＲ）、現実世界と仮想現実を融合して仮想空間を提供し、仮想空間の画像を提供する複合現実（ＭＲ）に分類され得る。

【0038】

以下の仮想現実の説明において、仮想現実は、上述のＶＲ、ＡＲ、及びＭＲだけでなく、様々な種類の仮想空間を提供する仮想環境を指す場合がある。

【0039】

以下、図１を参照して、本発明の一実施形態による仮想現実感を提供する仮想現実感制御システム１０について説明する。

【0040】

図１は、本開示の一実施形態による仮想現実制御システム１０を示す図である。

【0041】

図１を参照すると、仮想現実制御システムは、検出デバイス１００、サーバ２００、補助計算デバイス３００、ウェアラブルディスプレイデバイス４００、入力デバイス５００、制御システム１０００、及び訓練データベース（ＤＢ）サーバ１３００を備えることができる。

【0042】

一実施形態によれば、検出デバイス１００はサーバ２００に接続されてもよい。

【0043】

検出デバイス１００は、対象物体を追跡することにより検出されたデータを取得してもよい。

【0044】

一実施形態による対象物体は、ウェアラブルディスプレイデバイス４００を介して出力される画像に影響を及ぼす物体であり得る。例えば、対象物体は、ウェアラブルディスプレイデバイス４００、ユーザ、入力デバイス５００、及びユーザの近くに位置する物体など、基準点又は特徴点を有する物体のうちの少なくとも１つを備えてもよい。

【0045】

加えて、一実施形態による対象物体の追跡は、現実環境における対象物体の位置に関するデータを取得することを意味してもよい。

【0046】

例えば、対象物体を追跡することにより、現実環境における対象物体の動きに応じて変化する位置のデータが取得され得る。対象物体の位置データは、予め定められた間隔で取得されてもよいが、これに限定されない。

【0047】

一実施形態によれば、検出デバイス１００は、検出データをサーバ２００に提供してもよい。

【0048】

一実施形態によれば、サーバ２００は、検出デバイス１００及び補助計算デバイス３００に接続されてもよい。

【0049】

サーバ２００は、接続されているデバイスからデータを取得してもよい。

【0050】

一実施形態によれば、サーバ２００は、検出データ、検出デバイス１００により取得された画像データ、及び検出デバイス１００から検出デバイス１００の状態データのうちの少なくとも１つを取得してもよい。

【0051】

加えて、サーバ２００は、以下で説明されるいくつかの実施形態による様々なデータを取得することができる。

【0052】

一実施形態によれば、サーバ２００はそれに接続されたデバイスを制御することができる。

【0053】

一実施形態によれば、サーバ２００は、補助計算デバイス３００又はウェアラブルディスプレイデバイス４００を制御してもよい。

【0054】

一例では、サーバ２００は、補助計算デバイス３００にインストールされたプログラム又はアプリケーションの駆動を制御することができる。より具体的には、サーバ２００は、補助計算デバイス３００にインストールされるプログラム又はアプリケーションの開始及び／又は終了を制御することができる。

【0055】

別の例では、サーバ２００は、検出デバイス１００の動作に必要な様々な設定を提供してもよい。

【0056】

また、サーバ２００は、検出データに基づいて、対象物体の位置データを生成してもよいし、仮想現実における対象物体の位置に対応する仮想位置データを生成してもよい。

【0057】

また、サーバ２００は、補助計算デバイス３００で実行されるプログラム又はアプリケーションの認証を実行してもよい。

【0058】

一実施形態によるサーバ２００の機能は、上記の機能に限定されず、実施形態によっては、様々な機能を実行するサーバ２００が提供されてもよい。

【0059】

また、一実施形態によるサーバ２００は、必ずしも単一の物理デバイスとして提供されず、上記の機能から細分化された個別の機能を実行する複数のデバイスとして提供されてもよい。

【0060】

例えば、サーバ２００は、検出デバイス１００に接続され、検出データに基づいて、位置データを取得するように構成された検出サーバ、システムに設けられたデバイスの一部を制御するように構成された運用サーバ、仮想現実制御システム１０のデバイスのうち少なくとも１つのデバイスで実行されるプログラム又はアプリケーションの認証を実行するように構成されたライセンスサーバに分割され得、関連する機能は、それぞれのサーバによって実行され得る。

【0061】

一方、サーバ２００には、補助計算デバイス３００が入力デバイス５００から取得した入力信号、又は入力信号に基づく入力データが提供されてもよい。

【0062】

入力データは、物体などに関するユーザの選択データ、入力デバイス５００を介した入力動作に関するデータ、及び入力デバイス５００の照準方向に関する照準データを含んでもよい。

【0063】

補助計算デバイス３００は、検出デバイス１００、サーバ２００、ウェアラブルディスプレイデバイス４００、及び入力デバイス５００のうちの少なくとも１つに接続され得る。

【0064】

また、補助計算デバイス３００は、制御システム１０００に接続されてもよい。

【0065】

補助計算デバイス３００は、サーバ２００から取得した位置データに基づいて、仮想位置データを計算してもよい。

【0066】

あるいは、補助計算デバイス３００は、検出デバイス１００から取得した検出データを処理することにより、対象物体の位置データを計算してもよいし、仮想位置データを計算してもよい。

【0067】

補助計算デバイス３００は、予め記憶されたプログラム又はアプリケーションを通じて、ウェアラブルディスプレイデバイス４００を介してユーザに画像を提供してもよい。

【0068】

加えて、補助計算デバイス３００は、ウェアラブルディスプレイデバイス４００を介して提供される音声データを提供してもよい。

【0069】

一実施形態によれば、補助計算デバイス３００は、予めインストールされたプログラム又はアプリケーションを通じて、位置データに基づいてユーザに提供される画像を取得することができる。

【0070】

また、補助計算デバイス３００は、入力デバイス５００から取得した入力信号に基づいて入力データを取得してもよい。

【0071】

加えて、補助計算デバイス３００は、取得された入力データを考慮に入れることにより、ユーザに提供される画像を取得してもよい。

【0072】

ウェアラブルディスプレイデバイス４００は、補助計算デバイス３００に接続されてもよい。

【0073】

ウェアラブルディスプレイデバイス４００は、仮想現実の画像をユーザに提供してもよい。

【0074】

ウェアラブルディスプレイデバイス４００は、補助計算デバイス３００から取得した仮想現実画像をユーザに視覚的に出力してもよい。

【0075】

また、ウェアラブルディスプレイデバイス４００は、補助計算デバイス３００から取得した音声データを出力してもよい。

【0076】

入力デバイス５００は、仮想現実に反映されるユーザの入力に関する信号を取得してもよい。

【0077】

入力デバイス５００は、補助計算デバイス３００に接続されてもよい。

【0078】

入力デバイス５００は、補助計算デバイス３００へのユーザの入力に対応する入力信号を提供してもよい。

【0079】

入力デバイス５００は、ユーザの動きに対応する信号を取得するための加速度センサ、ジャイロスコープ、ジャイロセンサ、微小電気機械システム（ＭＥＭＳ）、地磁気センサ、慣性測定センサ（ＩＭＩＵ）、光学センサ、照度センサ、フォトセンサ、赤外線センサ、カラーセンサ、深度センサ、電磁波センサなどを備えてもよい。

【0080】

さらに、入力デバイス５００は、ユーザに関する信号、慣性を取得するためのボタン、スイッチ、ジョグシャトル、ホイールなどを備えることができる。さらに、入力デバイス５００は、有線通信及び無線通信のうちの少なくとも１つを介して補助計算デバイス３００に接続されてもよい。

【0081】

また、入力デバイス５００は、補助計算デバイス３００と通信するための通信モジュールを備えることができる。

【0082】

制御システム１０００は、サーバ２００に接続されてもよい。あるいは、制御システム１０００は、補助計算デバイス３００に接続されてもよい。制御システム１０００は、サーバ２００に備えられる構成要素であってもよい。制御システム１０００には、外部要員が訓練を制御できるようにするインタフェースが設けられてもよい。

【0083】

制御システム１０００は、訓練制御システム１１００及び行動後レビュー（ＡＡＲ）システム１２００を備え得る。

【0084】

訓練制御システム１１００は、監督者などの外部要員が訓練状況を設定し、訓練状況を進めることを可能にするシステムであり得る。
訓練制御システム１１００は、ユーザが外部要員によって設定された訓練状況に基づいて訓練を実施できるように、補助計算デバイス３００及びサーバ２００のうちの少なくとも１つを制御することができる。

【0085】

ＡＡＲシステム１２００は、訓練プロセス及び結果データを記憶してもよい。ＡＡＲシステム１２００は、記憶された訓練データに基づいてレビューするコンテンツをユーザに提供してもよい。ＡＡＲシステム１２００は、訓練生を評価し、評価結果をユーザに提供し得る。

【0086】

訓練ＤＢサーバ１３００は、訓練シナリオを記憶してもよい。制御システム１０００は、訓練ＤＢサーバ１３００の記憶されたデータをロードして、サーバ２００及び補助計算デバイス３００のうちの少なくとも１つを制御し、それにより、ユーザが訓練を実施できるようにすることができる。

【0087】

訓練ＤＢサーバ１３００は、訓練プロセス中に生成されるユーザデータ及び訓練データを記憶してもよい。

【0088】

訓練ＤＢサーバ１３００は、制御システム１０００とは別個のサーバとして実装されてもよいし、制御システム１０００の一部分として実装されてもよい。また、制御システム１０００及び訓練ＤＢサーバ１３００は、サーバ２００の一部分として実装されてもよい。

【0089】

図１は、入力デバイス５００が補助計算デバイス３００に接続されることを示しているが、実施形態はこれに限定されず、入力デバイス５００は選択に応じて様々な接続形態で提供され得る。

【0090】

例えば、入力デバイス５００は、サーバ２００及びウェアラブルディスプレイデバイス４００に接続され、それらに入力信号を提供し得る。

【0091】

上述した仮想現実制御システム１０は、説明の便宜上の一例に過ぎない。一実施形態による仮想現実制御システム１０は、図１に示す構成及び接続関係に限定されず、選択に応じて様々な形式で提供され得る。

【0092】

一例では、補助計算デバイス３００及びウェアラブルディスプレイデバイス４００は１つのデバイスとして提供されてもよく、この場合、補助計算デバイス３００で実行される動作はウェアラブルディスプレイデバイス４００で実装されてもよい。

【0093】

ただし、以下の様々な実施形態の説明では、説明の便宜上、仮想現実制御システム１０を例として説明する。

【0094】

以下、図２を参照して、本開示の一実施形態による検出デバイス１００について説明する。

【0095】

図２は、本開示の一実施形態による検出デバイスを示す図である。

【0096】

図２を参照すると、検出デバイス１００は、発光部１１０とセンサ１２０とを備えることができる。

【0097】

発光部１１０は、追跡のために、信号を対象物体に、又は対象物体の近傍に投射してもよい。

【0098】

一例では、発光部１１０は、可視光、赤外光などの光信号を投射する発光デバイスとして提供されてもよい。

【0099】

より具体的には、発光部は、可視光発光ダイオード（ＬＥＤ）、赤外線ＬＥＤなどとして提供されてもよい。

【0100】

センサ１２０は、外部ソースから信号を取得してもよい。

【0101】

一例では、センサ１２０は、発光部１１０から投射された信号に対応する信号を取得することができる。

【0102】

別の例では、センサ１２０は、対象物体に提供されたマーカによって反射された光に関する信号を取得してもよい。

【0103】

例えば、センサ１２０は、イメージセンサ、光学センサ、照度センサ、フォトセンサ、赤外線センサ、カラーセンサ、深度センサ、電磁波センサなどとして提供されてもよい。

【0104】

図３は、本開示の一実施形態によるサーバ２００を示す図である。

【0105】

図３を参照すると、サーバ２００は、サーバ通信部２１０、サーバ記憶部２２０、サーバ入力部２３０、サーバコントローラ２４０、及びサーバディスプレイ２５０を備えることができる。

【0106】

サーバ通信部２１０は、検出デバイス１００、補助コンピューティングデバイス３００、ウェアラブルディスプレイデバイス４００、及び入力デバイス５００のうちの少なくとも１つに接続され、そこから又はそこへデータを取得又は提供することができる。

【0107】

サーバ通信部２１０は、有線通信及び無線通信のうちの少なくとも１つを介して、検出デバイス１００、補助計算デバイス３００、ウェアラブルディスプレイデバイス４００、及び入力デバイス５００のうちの少なくとも１つに接続され得る。

【0108】

例えば、無線通信には、Ｗｉ－Ｆｉネットワーク、第３世代（３Ｇ）ネットワーク、ロングタームエボリューション（ＬＴＥ）ネットワーク、５Ｇネットワーク、及び長距離（ＬｏＲＡ）、車両環境における無線アクセス（ＷＡＶＥ）、ビーコン、ＺｉｇＢｅｅ（登録商標）、Ｂｌｕｅｔｏｏｔｈ（登録商標）、Ｂｌｕｅｔｏｏｔｈ（登録商標）低エネルギーなどのモバイル通信ネットワークが備えられ得る。

【0109】

加えて、有線通信は、ツイストペアケーブル、同軸ケーブル、光ファイバーケーブルなどを備えてもよい。

【0110】

サーバ通信部２１０は、有線通信及び無線通信のうちの少なくとも１つを提供する通信モジュールとして提供されてもよい。

【0111】

サーバ記憶部２２０は、データを記憶することができる。

【0112】

サーバ記憶部２２０は、外部ソースから取得されたデータを記憶してもよい。

【0113】

さらに、サーバ記憶部２２０は、サーバ２００の動作に必要なデータを記憶してもよい。

【0114】

例えば、サーバ記憶部２２０は、ハードディスク、フロッピーディスク、磁気テープなどの磁気媒体、コンパクトディスク読み取り専用メモリ（ＣＤ－ＲＯＭ）などの光学媒体、フロティカルディスク、読み取り専用メモリ（ＲＯＭ）、ランダムアクセスメモリ（ＲＡＭ）、フラッシュメモリ、ソリッドステートドライブ（ＳＳＤ）、ＣＤ－ＲＯＭ、ＤＶＤ－ＲＯＭ、ユニバーサルシリアルバス（ＵＳＢ）などの光磁気媒体として提供されてもよい。

【0115】

サーバ入力部２３０は、ユーザの入力に対応する信号を取得してもよい。

【0116】

ユーザの入力は、例えば、ボタンを押す、クリックする、タッチする、又はドラッグすることであり得る。

【0117】

サーバ入力部２３０は、例えば、キーボード、キーパッド、ジョグシャトル、又はホイールとして実装されてもよい。

【0118】

サーバコントローラ２４０は、サーバ２００の全体的な動作を制御することができる。

【0119】

例えば、サーバコントローラ２４０は、サーバ２００に備えられたデバイスの動作を制御することができる。

【0120】

サーバディスプレイ２５０は視覚データを出力してもよい。

【0121】

サーバディスプレイ２５０は、視覚データを出力するモニタ、テレビ、表示パネルなどとして提供されてもよい。

【0122】

また、サーバディスプレイ２５０がタッチスクリーンとして提供される場合、サーバディスプレイ２５０は、サーバ入力部２３０の機能を実行することができる。

【0123】

図４は、本開示の一実施形態による補助計算デバイス３００を示す図である。

【0124】

図４を参照すると、補助計算デバイス３００は、補助計算通信部３１０、補助計算記憶部３２０、補助計算入力部３３０、及び補助計算コントローラ３４０を備え得る。

【0125】

補助計算通信部３１０は、サーバ２００、ウェアラブルディスプレイデバイス４００、及び入力デバイス５００のうちの少なくとも１つに接続されてもよい。

【0126】

補助計算通信部３１０は、有線通信及び無線通信のうちの少なくとも１つを介して、サーバ２００、ウェアラブルディスプレイデバイス４００、及び入力デバイス５００のうちの少なくとも１つに接続されてもよい。

【0127】

補助計算通信部３１０は、接続されたサーバ２００、接続されたウェアラブルディスプレイデバイス、及び接続された入力デバイス５００のうちの少なくとも１つとデータを交換してもよい。

【0128】

例えば、無線通信は、Ｗｉ－Ｆｉネットワーク、３Ｇネットワーク、ＬＴＥネットワーク、５Ｇネットワーク、ＬｏＲＡ、ＷＡＶＥ、ビーコン、ＺｉｇＢｅｅ（登録商標）、Ｂｌｕｅｔｏｏｔｈ（登録商標）、Ｂｌｕｅｔｏｏｔｈ（登録商標）低エネルギーなどのモバイル通信ネットワークを含み得る。

【0129】

加えて、有線通信は、ツイストペアケーブル、同軸ケーブル、光ファイバーケーブルなどを含んでもよい。

【0130】

補助計算通信部３１０は、有線通信及び無線通信のうちの少なくとも１つを提供するための通信モジュールとして提供されてもよい。

【0131】

補助計算記憶部３２０は、外部ソースから取得されたデータを記憶してもよい。

【0132】

加えて、補助計算記憶部３２０は、補助計算デバイス３００の動作に必要なデータを記憶してもよい。

【0133】

また、補助計算記憶部３２０は、ユーザに仮想体験を提供するために、アプリケーション又はプログラムを記憶してもよい。

【0134】

補助計算入力部３３０は、ユーザの入力に対応する信号を取得してもよい。

【0135】

ユーザの入力は、例えば、ボタンを押す、クリックする、タッチする、又はドラッグすることができる。

【0136】

例えば、補助計算入力部３３０は、例えば、キーボード、キーパッド、ジョグシャトル、又はホイールとして実装されてもよい。

【0137】

補助計算コントローラ３４０は、補助計算デバイス３００の全体的な動作を制御することができる。

【0138】

図５は、本開示の一実施形態によるウェアラブルディスプレイデバイス４００を示す図である。

【0139】

図５を参照すると、ウェアラブルディスプレイデバイス４００は、ウェアラブル表示通信部４１０、ウェアラブル表示記憶部４２０、ウェアラブル表示センサ４３０、ウェアラブル表示コントローラ４４０、ウェアラブル表示画面出力部４５０、ウェアラブル表示スピーカ４６０を備えることができる。

【0140】

ウェアラブル表示通信部４１０は、補助計算デバイス３００に接続されてもよい。

【0141】

ウェアラブル表示通信部４１０は、有線通信及び無線通信のうちの少なくとも１つを介して補助計算デバイス３００に接続されてもよい。

【0142】

ウェアラブル表示記憶部４２０は、データを記憶することができる。

【0143】

ウェアラブル表示記憶部４２０は、ウェアラブルディスプレイデバイス４００の動作に必要なアプリケーション又はプログラムを記憶してもよい。

【0144】

さらに、ウェアラブル表示記憶部４２０は、外部ソースから取得されたデータを記憶してもよい。

【0145】

ウェアラブル表示センサ４３０は、ウェアラブルディスプレイデバイス４００の状態と、ユーザの入力に対応する信号を取得することができる。

【0146】

一実施形態によるウェアラブル表示センサ４３０は、ウェアラブル表示動作センサモジュール４３１及びウェアラブル表示音センサモジュール４３２を備えることができる。

【0147】

ウェアラブル表示動作センサモジュール４３１は、ウェアラブルディスプレイデバイス４００の状態に関する信号を取得してもよい。

【0148】

一例では、ウェアラブル表示動作センサモジュール４３１は、ウェアラブルディスプレイデバイス４００の回転に関する回転データを取得してもよい。

【0149】

別の例では、ウェアラブル表示動作センサモジュール４３１は、ウェアラブルディスプレイデバイス４００の位置の動きに関する動きデータを取得してもよい。

【0150】

ウェアラブル表示動作センサモジュール４３１は、加速度センサ、ジャイロスコープ、ジャイロセンサ、ＭＥＭＳ、地磁気センサ、ＩＭＩＵ、光学センサ、照度センサ、フォトセンサ、赤外線センサ、カラーセンサ、深度センサ、電磁波センサなどを備えてもよい。

【0151】

ウェアラブル表示音センサモジュール４３２は、外部から入力された音に対応する信号を取得してもよい。

【0152】

一例では、ウェアラブル表示音センサモジュール４３２は、マイクロホンであり得る。

【0153】

ウェアラブル表示コントローラ４４０は、ウェアラブルディスプレイデバイス４００の全体的な動作を制御してもよい。

【0154】

ウェアラブル表示画面出力部４５０は、視覚データをユーザに出力してもよい。

【0155】

一例では、ウェアラブル表示画面出力部４５０は、仮想現実の画像を出力してもよい。
別の例では、ウェアラブル表示画面出力部４５０は、３次元（３Ｄ）仮想現実の画像を出力してもよい。

【0156】

ウェアラブル表示画面出力部４５０は、液晶ディスプレイ（ＬＣＤ）、電子ペーパー、ＬＥＤディスプレイ、有機発光ダイオード（ＯＬＥＤ）ディスプレイ、湾曲ディスプレイ、立体視（両眼視差を使用した３Ｄディスプレイ）などの画像出力デバイスとして提供されてもよい。

【0157】

ウェアラブル表示スピーカ４６０は、聴覚データを出力してもよい。

【0158】

ウェアラブル表示スピーカ４６０は、チューナー、プレーヤー、アンプ、スピーカなどの音響デバイスとして提供されてもよい。

【0159】

図６は、本開示の一実施形態による訓練制御システム１１００を示す図である。

【0160】

図６を参照すると、一実施形態による訓練制御システム１１００は、情報マネージャ１１１０、訓練コントローラ１１２０、モニタ１１３０、予期しない事象マネージャ１１４０、及びプリセッター１１５０を備えることができる。

【0161】

情報マネージャ１１１０は、訓練生情報を管理し得る。
情報マネージャ１１１０は、記憶された訓練生情報をシステム管理者及びコントローラに提供してもよい。

【0162】

情報マネージャ１１１０は、複数の訓練生の権限を設定してもよい。例えば、情報マネージャ１１１０は、複数の訓練生のうちの少なくとも１人をフィールドコマンダーとして設定し、残りの訓練生をチームメンバーとして設定することができる。情報マネージャ１１１０は、複数の訓練生を複数のチームに設定してもよい。情報マネージャ１１１０は、訓練生に関する記憶された情報に基づいて各訓練生の権限及び役割を設定することができる。

【0163】

訓練コントローラ１１２０は、訓練生が進める訓練に関する予め設定及び訓練を制御することができる。

【0164】

訓練コントローラ１１２０は、訓練生が訓練を開始する前に、訓練シナリオ、訓練生の登録の設定などの予め設定を設定してもよい。

【0165】

訓練コントローラ１１２０は、各訓練生に役割を割り当てることができる。訓練コントローラ１１２０は、情報マネージャ１１１０によって設定された権限に基づいて各訓練生に役割を割り当てることができる。訓練コントローラ１１２０は、記憶されたシナリオをロードするか、訓練の難易度を設定することができる。訓練コントローラ１１２０は、訓練シナリオで作成された任意の状況を追加又は削除してもよい。訓練コントローラ１１２０は、訓練の開始、停止、及び／又は終了を制御し得る。

【0166】

モニタ１１３０は、訓練中に訓練生の行動、訓練フィールドの状況、シナリオの進行、機器の状態などをリアルタイムで確認することができる。

【0167】

予期しない事象マネージャ１１４０は、訓練シナリオを実行している訓練生に任意の状況を適用してもよい。予期しない事象マネージャ１１４０は、各訓練生のタスクと役割を変更してもよい。予期しない事象マネージャ１１４０は、複数の訓練生の中で最高の権限を有する訓練生の権限を削除してもよい。この場合、次に高い権限を有する訓練生に最高の権限を割り当てることができるように、更新を行うことができる。あるいは、訓練生の中で最高の権限を有する訓練生の権限が削除された場合、対応する訓練生に最も近い訓練生に最高の権限が割り当てられてもよい。あるいは、訓練生の中で最高の権限を有する訓練生の権限が削除された場合、対応する訓練生が占めていた領域を最初に占有した訓練生に最高の権限が割り当てられてもよい。

【0168】

予期しない事象マネージャ１１４０は、仮想キャラクタを追加及び／又は削除し、訓練生の機器を編集し、又は複数の事象を適用することができる。

【0169】

図７は、一実施形態による仮想現実制御システムのＡＡＲシステムを示す図である。

【0170】

図７を参照すると、一実施形態によるＡＡＲシステム１２００は、訓練評価部１２１０、訓練記録部１２２０、訓練チェック部１２３０、訓練分析部１２４０、及び記録された訓練再生部１２５０を備え得る。

【0171】

訓練評価部１２１０は、訓練生のタスクの達成に関する進捗度を評価してもよい。訓練評価部１２１０は、各訓練生の評価スコアを計算してもよい。訓練評価部１２１０は、各訓練生が所属するチームの評価スコア、又は同じシナリオを実行した訓練生の全体的な評価スコアを計算してもよい。

【0172】

訓練評価部１２１０は、訓練生の位置情報を検出し、位置情報とシナリオに設定された経路とを比較することにより類似度を決定し、訓練生の訓練を評価することができる。予期しない事象が発生する場合、訓練評価部１２１０は、訓練生の位置情報の変化に基づいて訓練を評価してもよい。特に、訓練評価部１２１０は、予期しない事象の発生直後に訓練生の応答速度に重みを割り当てることにより訓練を評価してもよい。訓練評価部１２１０は、訓練生の身長と、移動時のマーカの高さに基づいて、訓練生の姿勢を評価してもよい。また、訓練評価部１２１０は、訓練生のハンドジェスチャ、実物体の取り扱いの習熟度などに基づいて訓練生を評価することができる。

【0173】

訓練記録部１２２０は、各訓練生の訓練を記録してもよい。訓練記録部１２２０は、訓練プロセス中の訓練生の位置、姿勢、行動、及び実物体の位置を記録してもよい。訓練評価部１２１０は、訓練記録部１２２０に記録されたデータに基づいて、訓練生の訓練を評価してもよい。

【0174】

訓練チェック部１２３０は、記憶された訓練を確認してもよい。訓練チェック部１２３０は、期間又はシナリオごとに、訓練生固有の訓練結果及び訓練チーム固有の訓練結果を確認してもよい。

【0175】

訓練分析部１２４０は、実行された訓練を分析し得る。訓練分析部１２４０は、時間固有の評価にグラフを提供してもよい。訓練分析部１２４０は、複数の訓練生の間で評価結果を比較し、比較結果にグラフを提供することができる。

【0176】

記録された訓練再現部１２４０は、記録された訓練を再現してもよい。記録された訓練再現部１２５０は、各訓練生についてウェアラブルディスプレイデバイス４００に出力された画像を、ウェアラブルディスプレイデバイス４００を介して再出力することができる。

【0177】

ここで、仮想現実制御システムのサーバ２００、補助計算デバイス３００、制御システム１０００、及び訓練ＤＢサーバ１３００は、単一のコントローラとして定義されてもよい。単一のコントローラとして定義された構成要素は、単一のデバイス又はクラウド計算として実装できる。コントローラは、マイクロプロセッサとして実装されてもよい。

【0178】

図８は、本開示の一実施形態による仮想現実制御システム１０の実装例を示す図である。

【0179】

図８を参照すると、仮想現実制御システム１０は、少なくとも１人のユーザ８００に仮想体験のための追跡領域６００を提供することにより実装され得る。

【0180】

加えて、追跡領域６００では、ユーザ８００は、補助計算デバイス３００、ウェアラブルディスプレイデバイス４００、及び入力デバイス５００のうちの少なくとも１つを提供され得る。

【0181】

また、ユーザ８００に提供される対象物体には、マーカＭが提供されてもよい。

【0182】

例えば、対象物体がウェアラブルディスプレイデバイス４００及び入力デバイス５００である場合、ウェアラブルディスプレイデバイス４００及び入力デバイス５００には、異なるパターンのマーカＭが提供されてもよい。

【0183】

以下、マーカＭが提供されるパターンについて説明する。

【0184】

加えて、追跡領域６００には、少なくとも１つの検出デバイス１００が提供されてもよい。

【0185】

例えば、図８に示すように、追跡領域６００には、複数の検出デバイス１００が提供されていてもよい。

【0186】

検出デバイス１００は、追跡領域６００の周囲に予め定められた間隔で互いに離間するように提供されてもよい。

【0187】

また、検出デバイス１００は、地面から予め定められた高さで互いに離間するように提供されてもよい。

【0188】

加えて、検出デバイス１００は、追跡領域６００に向けて提供されてもよい。

【0189】

検出デバイス１００は、予め設置されたフレームに固定設置されてもよい。

【0190】

例えば、図８に示すように、追跡領域６００の周囲に検出デバイス１００を設置するためのフレームを設けてもよい。また、検出デバイス１００をフレームに固定設置してもよい。

【0191】

検出デバイス１００は、追跡領域６００に関する検出データを取得してもよい。

【0192】

検出デバイス１００に備えられるセンサ１２０は、追跡領域６００の少なくとも一部に関する検出データを取得してもよい。

【0193】

検出デバイス１００は、検出データをサーバ２００又は補助計算デバイス３００に提供してもよい。

【0194】

例えば、検出デバイス１００は、センサ１２０により取得された検出データをサーバ２００に提供してもよい。

【0195】

サーバ２００は、検出データに基づいて、対象物体のリアルタイムの位置データを取得してもよい。

【0196】

図８に示すように、追跡領域６００に複数の検出デバイス１００が提供されている場合、サーバ２００又は補助計算デバイス３００は、複数の検出デバイス１００から検出データを取得し、取得した検出データに基づいて、対象物体の現在位置データを取得してもよい。

【0197】

また、サーバ２００又は補助計算デバイス３００は、対象物体の位置データに基づいて、少なくとも１つの対象物体の仮想位置データを取得してもよい。

【0198】

例えば、補助計算デバイス３００は、現実世界におけるユーザ８００の位置データに含まれる座標に対応する仮想現実の座標を、ユーザ８００に対応する仮想現実のキャラクタの仮想位置データとして取得してもよい。

【0199】

サーバ２００は、対象物体の位置データ及び仮想位置データのうちの少なくとも１つを補助計算デバイス３００に提供してもよい。

【0200】

図８に示すように、追跡領域６００に複数の検出デバイス１００が提供されている場合、サーバ２００又は補助計算デバイス３００は、複数の検出デバイス１００から検出データを取得し、取得した検出データに基づいて、対象物体の現在位置データを取得してもよい。

【0201】

また、サーバ２００又は補助計算デバイス３００は、対象物体の位置データに基づいて、少なくとも１つの対象物体の仮想位置データを取得してもよい。

【0202】

例えば、補助計算デバイス３００は、現実世界におけるユーザ８００の位置データに含まれる座標に対応する仮想現実の座標を、ユーザ８００に対応する仮想現実のキャラクタの仮想位置データとして取得してもよい。

【0203】

サーバ２００は、対象物体の位置データ及び仮想位置データのうちの少なくとも１つを補助計算デバイス３００に提供してもよい。

【0204】

加えて、サーバ２００が複数の補助計算デバイス３００に接続されている場合、サーバ２００は、複数の補助計算デバイス３００のうち少なくとも１つの補助計算デバイス３００から仮想現実画像を取得し、取得した仮想現実画像を接続された監視ディスプレイデバイス７００に提供することができる。

【0205】

例えば、サーバ２００は、サーバ入力部２３０を介してサーバ２００に接続された補助計算デバイス３００の中から仮想現実画像を取得する補助計算デバイス３００の選択を取得してもよく、選択された補助計算デバイス３００から取得された仮想現実画像を監視ディスプレイデバイス７００に提供してもよい。

【0206】

また、サーバ２００は、補助計算デバイス３００から仮想位置データを取得し、取得した仮想位置データと仮想現実における仮想カメラの予め設定された位置とに基づいて仮想現実画像を取得してもよい。

【0207】

さらに、サーバ２００は、取得した仮想現実画像を接続された監視ディスプレイデバイス７００に提供してもよい。

【0208】

監視ディスプレイデバイス７００は、サーバ２００から取得した仮想現実画像を出力してもよい。

【0209】

加えて、入力デバイス５００は、サーバ２００、補助計算デバイス３００、及びウェアラブルディスプレイデバイス４００のうちの少なくとも１つに接続されるように提供されてもよい。

【0210】

また、入力デバイス５００には、少なくとも１つのマーカＭが提供されていてもよい。

【0211】

入力デバイス５００は、各ユーザ８００が入力デバイス５００を携帯するように提供されてもよい。

【0212】

例えば、ユーザ８００は、入力デバイス５００を自身の手に携帯していてもよい。

【0213】

一実施形態によれば、サーバ２００は、検出デバイス１００から取得した検出データに基づいて、入力デバイス５００の位置データを取得してもよい。また、入力デバイス５００の現実位置データは、追跡領域６００内の入力デバイス５００の位置データ又は向き方向データのうちの少なくとも１つを含んでもよい。

【0214】

補助計算デバイス３００は、入力デバイス５００の位置データに基づいて、仮想現実における入力デバイス５００に対応する仮想物体の向き方向を決定してもよい。

【0215】

また、補助計算デバイス３００は、仮想現実における入力デバイス５００に対応する仮想物体の向き方向を考慮した仮想画像を取得してもよい。

【0216】

例えば、補助計算デバイス３００は、入力デバイス５００に対応する銃が仮想現実における入力デバイス５００の向き方向に対応する方向に向けられた仮想画像を取得してもよい。

【0217】

また、補助計算デバイス３００は、仮想現実における入力デバイス５００を介したユーザ８００の事象生成命令に応じた事象の生成を考慮した仮想画像を取得してもよい。

【0218】

例えば、ユーザ８００が入力デバイス５００に提供されたスイッチを押すと、補助計算デバイス３００は、ユーザ８００に対応するキャラクタが仮想現実で銃を発射することを示す仮想画像を取得することができる。

【0219】

図９は、本開示の一実施形態による対象物体を追跡する方法を示す図である。

【0220】

図９を参照すると、対象物体を追跡する方法は、外部に提供されたセンサを用いて対象物体に関するデータを取得し、取得した対象物体に関するデータに基づいて、対象物体の位置を決定することができる。

【0221】

以下、図９を参照して、対象物体がウェアラブルディスプレイデバイス４００である例について説明する。

【0222】

図９を参照すると、対象物体には、対象物体を識別するためのマーカＭが提供されていてもよい。

【0223】

マーカＭは、対象物体上に提供され、対象物体を識別及び追跡するための基準として機能し得る。

【0224】

対象物体を追跡するためには、対象物体と他のデバイスを区別する必要があり、対象物体にマーカＭを提供することにより対象物体を識別することが可能である。

【0225】

また、複数の対象物体が提供される場合、各対象物体を識別する必要があり、そのために、ある物体に提供されたマーカは、他の物体に提供された他のマーカＭと区別可能であってもよい。

【0226】

例えば、１つの対象物体に提供されたマーカＭは、他の対象物体に提供された他のマーカＭとは異なるパターンで提供されてもよい。

【0227】

また、パターンは、異なる位置に提供された複数のマーカＭにより形成されるパターン、一つの表示パネルに提供される光学パターンなど、様々な種類のパターンを含んでもよい。

【0228】

パターンは、マーカＭのマーカ座標によって形成されてもよい。

【0229】

例えば、検出デバイス１００により３つのマーカＭを追跡できるため、第１マーカ座標ＭＰ１－１、第２マーカ座標ＭＰ１－２、第３マーカ座標ＭＰ１－３を検出データとして取得し、第１マーカ座標ＭＰ１－１から第３マーカ座標ＭＰ１－３までは、三角形のパターンを形成してもよい。

【0230】

また、マーカＭは、発光部１１０から投射される光信号を反射又は吸収する受動マーカと、光信号を自律的に放出するアクティブマーカとして提供されてもよい。

【0231】

例えば、受動マーカは、光反射材料が取り付けられた３次元モデル、認識可能なコードが印刷された紙、反射テープなどを備えてもよい。

【0232】

さらに、アクティブマーカは、ＬＥＤモジュール、電波発生部などを備えてもよい。

【0233】

一実施形態によれば、対象物体には、少なくとも１つのマーカＭが提供されてもよい。

【0234】

例えば、仮想現実制御システム１０が１つの物体のみの位置を追跡する場合、１つのマーカＭのみが対象物体上に提供され得る。

【0235】

また、仮想現実制御システム１０が１つの物体のみの位置を追跡する場合であっても、対象物体には複数のマーカＭが提供されていてもよい。

【0236】

また、仮想現実制御システム１０が複数の対象物体の位置を追跡する場合、複数の対象物体の各々を識別するために、１つの対象物体にパターンを形成する複数のマーカＭを設けてもよい。

【0237】

例えば、仮想現実制御システム１０によって位置が追跡される対象物体が、ウェアラブルディスプレイデバイス４００及び入力デバイス５００である場合、ウェアラブルディスプレイデバイス４００には、第１パターンのマーカＭが提供されてもよく、入力デバイス５００には、第２パターンのマーカＭが提供されてもよい。

【0238】

第１パターンは第２パターンとは異なり、位置追跡中に検出される第１パターンはウェアラブルディスプレイデバイス４００として識別され、検出された第２パターンは入力デバイス５００として識別され得る。

【0239】

上記において、複数の対象物体が提供される場合、複数の対象物体の各々に提供されるマーカＭは、複数の対象物体の各々を識別するためのパターンを形成するように提供される。
ただし、実施形態はこれに限らず、単一の対象物体が提供されている場合であっても、対象物体に提供されたマーカＭを形成してパターンを形成してもよい。

【0240】

さらに、対象物体上に提供されたマーカＭのパターンは、ユーザ８００を識別するために使用されてもよい。

【0241】

例えば、第１パターンは、第１ユーザが着用するウェアラブルディスプレイデバイス４００として識別され、第２パターンは、第１ユーザが携帯する入力デバイス５００として識別され得る。
加えて、第３パターンは、第２ユーザが着用するウェアラブルディスプレイデバイス４００として識別され、第４パターンは、第２ユーザが携帯する入力デバイス５００として識別され得る。

【0242】

対象物体を追跡するために、サーバ２００は、検出デバイス１００から対象物体に関するデータを取得し、取得したデータに基づいて、対象物体の位置に関する検出データを取得してもよい。また、サーバ２００は、検出データに基づいて、対象物体の位置データを計算してもよい。

【0243】

検出デバイス１００が対象物体に関するデータをサーバ２００に提供する技術について説明する。検出デバイス１００の発光部１１０は、追跡領域６００の少なくとも一部に信号を投射してもよい。

【0244】

例えば、発光部１１０が赤外線ＬＥＤである場合、発光部１１０は、追跡領域６００の少なくとも一部に赤外線信号を投射してもよい。

【0245】

さらに、センサ１２０は、外部ソースから取得したデータをサーバ２００に提供してもよい。

【0246】

一例では、センサ１２０がカメラである場合、センサ１２０は、外部ソースから取得された画像信号をサーバ２００に提供してもよい。

【0247】

図９は、１つのセンサ１２０のみを示しているが、実施形態はこれに限定されない。
図８に示すように、複数のセンサ１２０が提供されてもよく、複数のセンサ１２０の各々は、取得されたデータをサーバ２００に提供してもよい。

【0248】

サーバ２００は、センサ１２０から取得したデータに基づいて、対象物体の位置を決定してもよい。

【0249】

サーバ２００は、センサ１２０から取得したデータがマーカＭに関するデータを含むかどうかを判定してもよい。
また、サーバ２００は、センサ１２０から取得したデータにマーカＭに関するデータが含まれると判定された場合、マーカＭのパターンに基づいて対象物体を識別してもよい。

【0250】

例えば、センサ１２０から取得されたデータが第１パターンを含む場合、サーバ２００は、対象物体をウェアラブルディスプレイデバイス４００として識別してもよい。

【0251】

１つのセンサ１２０から取得したデータには複数のパターンが存在する場合があり、サーバ２００は複数のパターンを識別できる。

【0252】

パターンは、サーバ２００に予め記憶されてもよく、予め記憶されたパターンが取得データに存在する場合、サーバ２００は、対応するパターンが存在すると判定し、パターンに対応する対象物体を識別してもよい。

【0253】

サーバ２００は、センサ１２０から取得したデータに基づいて、対象物体の位置を決定してもよい。

【0254】

なお、サーバ２００には、予め記憶された各パターンに関する代表点ＲＰが設定されてもよい。

【0255】

代表点ＲＰは、パターンを表す点であり得る。

【0256】

代表点ＲＰは、パターンの外側に存在し得る。

【0257】

例えば、代表点ＲＰは、第１マーカ座標ＭＫ１－１、第２マーカ座標ＭＫ１－２、及び第３マーカ座標ＭＫ１－３により形成される平面から予め定められた距離だけ離れた点に設定されてもよい。

【0258】

複数のマーカＭに基づくパターンが提供されている場合、パターンに備えられる複数のマーカＭに関する座標データを取得し、サーバ２００は、パターンを表す代表点ＲＰを、パターンが付与された対象物体の位置データとして取得してもよい。

【0259】

したがって、サーバ２００は、対象物体の位置データを取得することにより、対象物体を追跡することができる。

【0260】

対象物体の位置を追跡する方法は、上記の例に限らず、選択に応じて様々な種類の位置を追跡する方法を用いてもよい。

【0261】

一実施形態によれば、センサ１２０がイメージセンサとして提供される場合、センサ１２０は外部映像を取得し、取得された映像に基づいて対象物体に関する位置データを取得することができる。

【0262】

一例では、図９に示されたセンサ１２０が、ウェアラブルディスプレイデバイス４００に提供される場合、センサ１２０は、ウェアラブルディスプレイデバイス４００の片側に提供され、ウェアラブルディスプレイデバイス４００の内側から外側方向に向けられて、ウェアラブルディスプレイデバイス４００の外側に関する画像データを取得することができる。

【0263】

さらに、ウェアラブルディスプレイデバイス４００は、取得した画像データを補助計算デバイス３００に提供してもよい。

【0264】

一実施形態によれば、ウェアラブルディスプレイデバイス４００は、予め定められた間隔で画像データを補助計算デバイス３００に提供してもよい。

【0265】

例えば、ウェアラブルディスプレイデバイス４００は、画像データがセンサ１２０を介して取得される間隔と同じ間隔で、補助計算デバイス３００に画像データを提供してもよい。

【0266】

補助計算デバイス３００は、取得した画像データから少なくとも１つの特徴点を取得してもよい。

【0267】

一実施形態によれば、補助計算デバイス３００は、画像データに含まれる物体を特徴点として取得してもよい。

【0268】

一実施形態によれば、補助計算デバイス３００は、画像データに含まれる物体のうち、予め定められたサイズよりも大きい物体を特徴点として取得してもよい。

【0269】

補助計算デバイス３００は、画像データに含まれる物体を識別し、識別した物体の中から予め定められたサイズよりも大きい物体を特徴点として取得してもよい。また、補助計算デバイス３００は、画像データに含まれる物体が占める画素数に基づいて物体のサイズを決定してもよい。

【0270】

一実施形態によれば、補助計算デバイス３００は、画像データに含まれる物体のうち、予め設定された種類の物体を特徴点として取得することができる。

【0271】

例えば、ボール型物体が予め設定されている場合、補助計算デバイス３００は、画像データに含まれる野球ボール、サッカーボール、バスケットボールボールなどのボール型物体を特徴点として取得してもよい。

【0272】

一実施形態によれば、補助計算デバイス３００は、画像データに含まれるマーカを特徴点として取得してもよい。

【0273】

補助計算デバイス３００は、画像データに含まれるバーコード、クイックレスポンス（ＱＲ）コードなどのマーカを識別し、マーカを特徴点として取得してもよい。

【0274】

また、補助計算デバイス３００は、画像データに含まれる特徴点の位置を決定してもよい。

【0275】

補助計算デバイス３００は、ウェアラブルディスプレイデバイス４００から取得した画像データに基づいて、特徴点の位置変化及びサイズ変化のうちの少なくとも１つを判定してもよい。

【0276】

補助計算デバイス３００は、特徴点の位置変化方向、位置変動、及びサイズ変動に基づいてウェアラブルディスプレイデバイス４００の移動方向及び移動距離を決定することができる。

【0277】

例えば、補助計算デバイス３００は、ウェアラブルディスプレイデバイス４００から取得した画像データに基づいて、特徴点の位置変化を判定してもよい。

【0278】

補助計算デバイス３００は、ウェアラブルディスプレイデバイス４００の移動方向及び移動距離を決定し得る。

【0279】

補助計算デバイス３００は、特徴点の位置変化方向、位置変動、及びサイズ変動に基づいてウェアラブルディスプレイデバイス４００の移動方向及び移動距離を決定することができる。

【0280】

例えば、補助計算デバイス３００は、第１時点で取得された第１画像データに含まれる特徴点の位置と、第１時点より遅い第２時点で取得された第２画像データに含まれる特徴点の位置とを比較してもよく、第１画像データ内の特徴点が第２画像データ内で右に移動したことを比較が示す場合、ウェアラブルディスプレイデバイス４００が左に移動したと判定することができる。

【0281】

また、補助計算デバイス３００は、特徴点の位置が変化した場合に特徴点の移動距離を決定してもよい。

【0282】

補助計算デバイスは、第１画像データにおける特徴点の位置と第２画像データにおける特徴点の位置との間の画素数に基づいて、特徴点の移動距離を決定してもよい。

【0283】

あるいは、補助計算デバイス３００は、第１画像データにおける特徴点の座標と第２画像データにおける特徴点の座標とに基づいて、特徴点の移動距離を決定してもよい。

【0284】

また、例えば、補助計算デバイス３００は、サイズ変動に基づいてウェアラブルディスプレイデバイスの移動方向及び移動距離を決定してもよい。

【0285】

補助計算デバイス３００は、第１時点で取得された第１画像データに含まれる特徴点のサイズと、第１時点より遅い第２時点で取得された第２画像データに含まれる特徴点のサイズとを比較してもよく、比較が、第１画像データ内の特徴点の位置が第２画像データ内で右に移動することを比較が示す場合、ウェアラブルディスプレイデバイス４００が左に移動したと判定することができる。

【0286】

したがって、補助計算デバイス３００は、予め設定された初期位置に対する対象物体の位置の変化に基づいて対象物体の位置を追跡することができる。

【0287】

図１０は、本開示の一実施形態によるウェアラブルディスプレイデバイス４００を介して仮想現実画像４５２を出力する例を示す図である。

【0288】

図１０を参照すると、仮想現実制御システム１０は、仮想現実の少なくとも一部に関連する仮想現実画像４５２を、ウェアラブルディスプレイデバイス４００を介してユーザ８００に提供することができる。

【0289】

ここで、仮想現実画像４５２は、ユーザ８００が仮想現実を体験するためにウェアラブルディスプレイデバイス４００を通じて提供されてもよく、仮想現実画像４５２は、仮想現実に関する画像として実装される複数の画像フレームとして解釈されてもよく、又は特定の瞬間の画像フレームとして解釈されてもよいことに留意されたい。

【0290】

仮想現実画像４５２は、仮想位置データに基づいて表示されるキャラクタ又は仮想物体を備え得る。この場合、仮想位置データは、現実世界における対象物体の位置座標及び向き方向ののうちの少なくとも一つを含む位置データに基づいて計算されてもよい。例えば、位置データは、追跡領域６００に位置する対象物体の位置座標であってもよい。

【0291】

サーバ２００は、追跡領域６００に関する座標値を予め記憶してもよい。

【0292】

サーバ２００は、追跡領域６００に関する座標系を予め記憶してもよい。座標系は、平面座標系、直交座標系、極座標系、空間座標系、円筒座標系、及び球座標系のうちの少なくとも１つであり得る。

【0293】

サーバ２００は、追跡領域６００に関する検出データ及び座標系に基づいて、追跡領域６００内の対象物体の座標値を取得してもよい。また、サーバ２００は、取得した追跡領域６００内の対象物体の座標値を位置データとして取得してもよい。

【0294】

一例では、検出データが赤外線画像である場合、サーバ２００は、赤外線画像における対象物体に対応するマーカの位置と、赤外線画像を提供した検出デバイス１００の設置位置とに基づいて、追跡領域６００におけるマーカの座標値を取得してもよい。また、サーバ２００は、追跡領域６００内のマーカの座標値に基づいてマーカが形成するパターンを決定し、マーカが形成するパターンに対応する対象物体を識別してもよい。また、サーバ２００は、追跡領域６００内のマーカとマーカの座標値とによって形成されるパターンに基づいて、対象物体の代表点ＲＰを取得し、対象物体の代表点ＲＰの座標値を対象物体の位置データとして取得してもよい。

【0295】

サーバ２００は、位置データを補助計算デバイス３００に提供してもよい。

【0296】

補助計算デバイス３００は、仮想現実に関する座標値を予め記憶してもよい。

【0297】

補助計算デバイス３００は、仮想現実に関する座標系を予め記憶してもよい。座標系は、平面座標系、直交座標系、極座標系、空間座標系、円筒座標系、及び球座標系のうちの少なくとも１つであり得る。

【0298】

補助計算デバイス３００は、仮想現実に関する位置データと座標系とに基づいて、仮想現実における対象物体の座標値を取得してもよい。

【0299】

例えば、補助計算デバイス３００は、現実位置データに含まれる座標値に対応する仮想現実の座標値を取得し、取得した仮想現実の座標値を仮想位置データとして取得してもよい。

【0300】

補助計算デバイス３００は、仮想位置データに基づいて、ユーザ８００に出力される仮想現実画像４５２を取得してもよい。

【0301】

一実施形態によれば、補助計算デバイス３００は、仮想カメラの仮想位置データとしてウェアラブルディスプレイデバイス４００の仮想位置データを取得し、仮想カメラの仮想位置データ及び仮想カメラの向き方向に基づいて、仮想カメラの視野４５１を取得してもよい。

【0302】

補助計算デバイス３００は、ウェアラブルディスプレイデバイス４００の位置データに含まれる向き方向に基づいて、仮想カメラの向き方向を取得してもよい。

【0303】

また、補助計算デバイス３００は、仮想カメラの視野４５１として、仮想カメラの向き方向の予め定められた領域を取得してもよい。

【0304】

したがって、ウェアラブルディスプレイデバイス４００の位置データに基づいて、仮想カメラの視野４５１を取得することにより、現実世界のユーザ８００に対応するキャラクタの視野は、ユーザ８００の動きに応じて変化し得、その変化は、ユーザ８００に提供される仮想現実画像４５２に反映され得る。

【0305】

一方、仮想カメラの視野４５１は、ウェアラブルディスプレイデバイス４００の仮想位置データだけでなく、仮想現実における特定の仮想位置データに基づいて取得されてもよい。

【0306】

さらに、補助計算デバイス３００は、仮想現実における仮想カメラの視野４５１に対応する仮想現実画像４５２を取得してもよい。

【0307】

補助計算デバイス３００は、仮想現実画像４５２をウェアラブルディスプレイデバイス４００に提供してもよい。

【0308】

ウェアラブルディスプレイデバイス４００は、取得した仮想現実画像４５２を、ウェアラブル表示画面出力部４５０を介してユーザ８００に出力してもよい。

【0309】

以下、本発明の一実施形態による仮想現実制御システム１０が仮想体験の一部としてユーザ８００に提供する災害訓練コンテンツについて、図１１及び１２を参照して説明する。

【0310】

図１１は、本開示の一実施形態による仮想現実画像４５２を示す図である。

【0311】

図１２は、本開示の一実施形態による追跡領域６００に配置された実物体ＲＯを示す図である。

【0312】

図１１を参照すると、仮想現実制御システム１０は、災害訓練に関するコンテンツをユーザ８００に提供してもよい。

【0313】

ここで、災害訓練コンテンツには、実際に発生する可能性のある事象、事故、及び問題のある状況に対応するために、事前に災害に備える方法に関するコンテンツが含まれる場合がある。例えば、災害訓練コンテンツには、化学物質を扱う工場で発生する可能性のある化学事故に対応するための訓練コンテンツが含まれる場合がある。したがって、ユーザ８００は、仮想現実で災害を体験し、実質的な訓練を受けることにより、現実の災害に備えることができる。

【0314】

図１１に戻り参照すると、仮想現実制御システム１０は、災害訓練コンテンツをユーザ８００に提供するために、災害訓練に関する仮想現実画像４５２を提供してもよい。

【0315】

ここで、仮想現実画像４５２は、災害に関する背景及び地形、キャラクタ９００、ピアキャラクタ９１０、及び仮想物体ＶＯを備え得る。

【0316】

ここで、災害に関する背景と地形には、災害を表す地形の特徴と物体が備えられる場合がある。例えば、災害が化学プラントでの化学事故である場合、仮想現実画像４５２は、垂直／水平配管、弁、貯蔵タンク、ポンプ、又は安全デバイスなどの工場施設及び化学施設を備え得る。

【0317】

ここで、キャラクタ９００は、ユーザ８００に対応する仮想現実のキャラクタを指すことができる。例えば、キャラクタ９００は、ユーザ８００の動きを追跡することにより取得される仮想位置データに基づいて生成されてもよく、ユーザ８００の動きに対応するように移動してもよい。

【0318】

ここで、ピアキャラクタ９１０は、予め記憶されたアプリケーション又はプログラムによって提供されるノンプレイヤーキャラクタ（ＮＰＣ）と、ユーザ８００を除く他のユーザに対応するキャラクタを備えることができる。特に、仮想現実制御システム１０によって提供される災害訓練コンテンツは、 複数のユーザに提供されてもよい。この場合、複数のユーザが互いに協力して、仮想現実で災害を体験することができ、ユーザ８００の動きに応じて仮想現実で動くキャラクタ９００と、ユーザ８００を除く別のユーザの動きに対応するピアキャラクタ９１０が提供されてもよい。

【0319】

ここで、仮想物体ＶＯは、仮想現実で実現され、キャラクタによって使用されることができ、ツール、機器、設備などを備えることができる。例えば、仮想物体ＶＯは、現実世界でユーザ８００が携帯する入力デバイス５００に対応する仮想現実において、ユーザキャラクタ９００の手と、ユーザキャラクタ９００が携帯する機器、機械設備などを備えることができる。別の例では、仮想物体ＶＯは、災害訓練コンテンツ内の化学設備及び機器を制御するための弁、スパナ、測定部などを備え得る。

【0320】

仮想物体ＶＯは、補助計算デバイス３００に予め記憶されたプログラムのアプリケーションによって提供されてもよい。ここで、仮想物体ＶＯは、補助計算デバイス３００に予め記憶された物体データに基づいて、又は現実世界の実物体ＲＯに基づいて生成されてもよい。

【0321】

図１２を参照すると、仮想現実制御システム１０は、仮想現実の仮想物体ＶＯを表示するために、実物体ＲＯを備える追跡領域６００をユーザ８００に提供することができる。

【0322】

ここで、実物体ＲＯは、仮想現実制御システム１０によってユーザ８００に提供されるコンテンツに応じて形態又は形状が異なり得る。例えば、仮想現実制御システム１０は、工場での事故に関する災害訓練コンテンツをユーザ８００に提供し、実物体ＲＯには、垂直／水平配管、弁、貯蔵タンク、ポンプ、安全デバイスなどの工場設備と化学設備が備えられる場合がある。一方、実物体ＲＯは、必ずしも仮想現実で提供される仮想物体ＶＯと同様の形態を有するとは限らない。例えば、実物体ＲＯが特徴点又はマーカを備え、その結果、実物体ＲＯのサイズデータ、位置データ、又は関数データが検出デバイス１００、サーバ２００、又は補助計算デバイス３００に提供される場合、実物体ＲＯは、実物体ＲＯに基づいて生成される仮想物体ＶＯとは異なる形態を有し得る。しかし、追跡領域６００内に空間が許される場合、実物体ＲＯは、仮想物体ＶＯと同様の形態及び形状を有することができ、この場合、仮想現実へのユーザ８００の没入感を改善するために、ユーザ８００に触感を提供することができる。

【0323】

実物体ＲＯは、予め設定された機能を自動的に、又はユーザ８００の動作によって実行するシミュレータを備えることができる。例えば、仮想現実を体験しているユーザ８００がコンテンツの進行に従って追跡領域に力を加える場合、実物体ＲＯは、回転又は異なる位置に移動し、関連情報をサーバ２００又は補助計算デバイス３００に提供することができる。あるいは、検出デバイス１００は、実物体ＲＯの位置変化又は回転の発生を監視し、関連情報をサーバ２００又は補助計算デバイス３００に提供してもよい。

【0324】

図１３は、一実施形態による追跡領域を示す図である。

【0325】

図１３を参照すると、一実施形態による追跡領域６００は、複数の領域を備えることができる。

【0326】

追跡領域６００は、除染領域６１０、塩素充填領域６２０、第１貯蔵領域６３０、第２貯蔵領域６４０、塩素貯蔵領域６５０、漏れ封じ込め機器ボックス６６０、除染供給ボックス６７０、及びフィールド命令領域６８０を備えてもよい。

【0327】

各領域は、実物体ＴＯからなる領域、仮想物体ＶＯからなる領域、又はＲＯとＶＯの組み合わせからなる領域であってもよい。各領域がＲＯ又はＶＯで構成される領域である場合、各領域はＲＯ又はＶＯが占める領域よりも大きくなる場合がある。制御システム１０００、サーバ２００、又は補助計算デバイス３００は、各領域をＲＯ又はＶＯが占める領域よりも大きく設定することにより、各領域内の物体の近くに位置するユーザの行動をより正確に評価し得る。

【0328】

除染領域６１０は、訓練領域の入口ドアの近くの位置に設定されてもよい。除染領域６１０は、ＮＰＣにより除染された除染空間と、化学シャワーにより除染された除染空間とに分割され得る。除染領域の近くに準備空間があり得る。準備空間に機器回収ボックスを配置できる。仮想ディスプレイを準備空間に設置し、ユーザは仮想ディスプレイを介して訓練監督者の指示を受信することができる。

【0329】

塩素充填領域６２０は、Ｙシリンダー、トン容器、及び複数の弁を備えることができる。第１貯蔵領域６３０は、タンク、ポンプ、及びタンクローリーを備え得る。第２貯蔵領域６４０は、複数のタンク及びポンプを備え得る。第１貯蔵領域６３０及び第２貯蔵領域６４０は、１つのタンクを共有してもよい。第１貯蔵領域６３０と第２貯蔵領域６４０とによって共有されるタンクには、排出壁が設置されてもよい。

【0330】

複数の機器を漏れ封じ込め機器ボックス６６０内に配置することができる。機器の各々は、実物体又は仮想物体であり得る。

【0331】

フィールド命令領域６８０は、各領域を見ることができる追跡領域６００の中央領域に配置することができる。フィールド命令領域６８０は、フィールドコマンダーのための領域であり得る。

【0332】

フィールド命令領域６８０は、仮想物体又は実物体によって他の領域から分割されてもよい。

【0333】

複数のユーザの中で最高の権限を有するユーザは、フィールド命令領域６８０に位置することができる。すなわち、フィールド命令の権限を割り当てられたユーザは、フィールド命令領域６８０に入るよう誘導されることができる。

【0334】

フィールドコマンダーがフィールド命令領域６８０に配置される場合、フィールドマネージャーの視野に対応する画像がウェアラブルディスプレイデバイスに出力され得る。フィールド命令ではないユーザがフィールド命令領域６８０に位置するときは、視野に対応する画像は出力され得ない。あるいは、ウェアラブルデバイスを介して、ユーザが許可されていない領域に入ったことを通知することもできる。この場合、フィールドコマンダーではないユーザが装着するウェアラブルデバイスは、低解像度の画像、警告通知、又は警告音を出力できる。

【0335】

すなわち、第１ユーザが第１権限を有し得、第２ユーザが第２権限を有し得、第１権限が第２権限より高い場合、第１ユーザのみがフィールド命令領域６８０に入ることができる。第１ユーザがフィールド命令領域６８０に位置するときは、視野に対応する画像が出力され得、第２ユーザがフィールド命令領域６８０に位置するときは、通知画像が出力されるか、視野に対応する画像ではない画像が出力され得る。

【0336】

第２ユーザがフィールド命令領域６８０に位置するときは、コントローラは、フィールド命令権限を第２ユーザに移譲するかどうかを第１ユーザに確認してもよい。第１ユーザがフィールド命令権限の移譲を確認する場合、第２ユーザはフィールドコマンダーになり、視野に対応する画像が出力され得る。フィールドコマンダー権限を持たない第２ユーザが予め定められた時間移動せずにフィールド命令領域６８０に位置するときは、コントローラは、第１ユーザにフィールド命令権限を移譲するか否かを確認することができる。

【0337】

あるいは、訓練プロセス中にフィールドコマンダーの権限が削除される場合、フィールド命令領域６８０に最も近い領域のチームのチームリーダーにフィールドコマンダー権限が自動的に割り当てられ得る。又は、フィールド命令領域６８０に最も近い領域に位置するユーザに、フィールドコマンダー権限を自動的に割り当てることができる。

【0338】

フィールド命令領域６８０は、フィールドコマンダー権限を有する人にのみ表示されてもよい。フィールド命令領域６８０の入口ドアは、フィールド命令権限を有する人にのみ表示されてもよく、フィールド命令権限を持たない人には表示されなくてもよい。

【0339】

フィールド命令領域６８０は、ユーザがフィールド命令権限を有しているかどうかに応じて、入口ドアの開閉を制御してもよい。例えば、ユーザがフィールド命令領域６８０の入口ドアから予め定められた距離内に入るフィールドコマンダー権限を有する場合において、コントローラは、フィールド命令領域６８０の入口ドアを開くように制御することができる。フィールド命令権限を持たないユーザがフィールド命令領域６８０に近い領域内に位置するときでも、入口ドアは開かないように制御されてもよい。

【0340】

フィールドコマンダーの権限は、事前にユーザの１人に割り当てられてもよい。あるいは、訓練が開始された後に最初にフィールド命令領域６８０に入るユーザにフィールドコマンダー権限が割り当てられてもよい。

【0341】

図１４から図１７は、一実施形態による訓練シナリオによる移動線を示す図である。

【0342】

図１４を参照すると、５人のユーザが訓練シナリオに参加できる。５人のユーザは、１つのフィールドコマンダーＣ、チームＡ（Ａ１及びＡ２）、及びチームＢ（Ｂ１及びＢ２）に分類できる。

【0343】

フィールドコマンダーＣ、チームＡ（Ａ１及びＡ２）、及びチームＢ（Ｂ１及びＢ２）は、除染領域６１０に配置されてもよい。フィールドコマンダーＣ、チームＡ（Ａ１及びＡ２）、及びチームＢ （Ｂ２及びＢ２）は、除染領域で除染を実行し、準備空間で待機できる。状況情報は、準備空間に設置されたディスプレイを通じて提供され得る。状況が報告されると、コントローラはユーザに保護スーツの着用を促すことができる。

【0344】

この場合、保護スーツの色はチームによって異なる場合があり、フィールドコマンダーの保護スーツの形状はチームメンバーの保護スーツの形状とは異なる場合がある。

【0345】

図１５を参照すると、チームＡ（Ａ及びＡ２）は、緊急停止（ＥＳＤ）領域に近い領域を移動するように誘導され得、チームＢ（Ｂ１及びＢ２）は、塩素充填領域６２０に移動するように誘導され得る。

【0346】

フィールドコマンダーＣは、フィールド命令領域６８０に移動するように誘導されてもよい。

【0347】

状況が発生した場合、目的地は準備空間の各ユーザのウェアラブルディスプレイに表示され得る。目的地は、仮想空間内の矢印で表され得、各ユーザを目的地に誘導する。

【0348】

あるいは、状況が発生した後、フィールドコマンダーＣの命令が行われた後、各目的地が準備空間に表示されてもよい。例えば、フィールドコマンダーＣがマイクロホンを介して音声入力を入力してチームＡにＥＳＤを実行するように命令する場合、チームＡのユーザが着用するウェアラブルディスプレイデバイスにＥＳＤ領域が表示され得る。さらに、フィールドコマンダーＣがマイクロホンを介して音声入力を入力してチームＢに漏洩箇所の確認を命令する場合、チームＢのユーザが着用するウェアラブルディスプレイデバイスに塩素充填領域６２０が表示され得る。

【0349】

フィールドコマンダーＣの命令があっても、チームＡとチームＢの目的地を表示するタイミングが異なる場合がある。例えば、フィールドコマンダーＣが連続的に命令を命令する場合でも、チームＡ及びチームＢの各ユーザのウェアラブル表示デバイスに時間間隔で目的地を表示することができる。あるいは、チームＡの移動状態に基づいて、チームＢのユーザの目的地を表示することもできる。

【0350】

したがって、ユーザの移動線が重複することを防ぐことにより、ユーザ同士の物理的な接触を防ぐことができる。

【0351】

目的地への経路は、各ユーザのウェアラブルディスプレイデバイスに表示されてもよい。各ユーザのウェアラブルディスプレイデバイスは、ユーザが追跡領域の地面を移動するための経路を表示してもよい。ユーザが移動するための経路の周りに別のユーザがいる場合、そのユーザは別のユーザの存在を知らされ、物理的な接触を防ぐことができる。

【0352】

ユーザが移動する経路の周りに別のユーザがいる場合、地面に表示されている経路の色を変更したり、ウェアラブル表示デバイスを介して表示される別のユーザに矢印を追加したりできる。この場合、ユーザと他のユーザとの間の距離が短くなると、より大きな警告通知が出力され得る。

【0353】

フィールドコマンダーＣは、チームＡ（Ａ１及びＡ２）とチームＢ（Ｂ１及びＢ２）が移動を完了した後に移動するように誘導され得る。

【0354】

チームＡ（Ａ１及びＡ２）は、ＥＳＤ領域に移動してＥＳＤを試みるよう誘導され得る。ＥＳＤが正常に実行される場合、状況は閉じられる。フィールドコマンダーＣがＥＳＤの失敗の報告を受信する場合、チームＢ（Ｂ１及びＢ２）の動きが誘導され得る。チームＢの最後に動いたユーザ（Ｂ１及びＢ２）が除染領域６１０から予め定められた距離以上離れた場合、フィールドコマンダーＣの移動が誘導され得る。

【0355】

コントローラは、チームＢ（Ｂ１及びＢ２）にＹシリンダーの漏洩箇所を確認するよう誘導できる。

【0356】

図１６を参照すると、チームＡ（Ａ１及びＡ２）は、塩素充填領域６２０に移動するように誘導され得る。塩素充填領域６２０に移動したチームＡ（Ａ１及びＡ２）は、配管弁を閉じるよう誘導され得る。

【0357】

チームＡ（Ａ１及びＡ２）の塩素充填領域６２０への移動が完了した後、チームＢ（Ｂ１及びＢ２）は、漏れ封じ込め機器ボックス６６０に移動するように誘導され得る。チームＢ（Ｂ１及びＢ２）の漏れ封じ込めボックス６６０への移動が完了すると、チームＡは除染供給ボックス６７０に移動するように誘導され得る。

【0358】

チームＡの除染供給ボックス６７０への移動が完了した場合、チームＢが塩素充填領域６２０に戻り、漏れ封じ込めボックス６６０から選択された機器を使用して漏れ封じ込めプロセスを進めるように誘導できる。

【0359】

コントローラは、予め設定されているか、監督者によって割り当てられた予期しない事象を追加できる。例えば、予期しない事象が追加される場合、チームＡの１人のメンバーが弁に移動し、弁を閉じ、除染供給ボックス６７０に戻るよう誘導され得る。

【0360】

図１７を参照すると、フィールドコマンダーＣがマイクロホンを介して撤退する命令を入力した場合、チームＢは除染領域６１０に移動するように誘導され得る。チームＢの移動が完了した場合、チームＡは消石灰の確認後にスプレーするように誘導され、その後除染領域６１０に移動するように誘導することができる。チームＡの除染領域６１０への移動が完了した場合、フィールドコマンダーＣも除染領域６１０に移動するように誘導され、フィールドコマンダーＣの移動と除染が完了すると、状況は終了する。

【0361】

訓練シナリオでのチームの同時移動は制限される場合がある。つまり、一方のチームが動いている場合、もう一方のチームは静止状態を維持するように誘導され、それによってユーザ間の物理的な衝突を防ぐ。

【0362】

さらに、１つのチームの役割は、役割を実行するための物体までの距離に基づいて割り当てられ得る。例えば、１人が弁を閉じる必要がある場合、チーム内の弁に最も近いユーザに役割が付与され得、ユーザから物体までの距離が同じ場合、予め設定された順序に従って役割を付与できる。さらに、同じチーム内の目的地への経路のディスプレイを設定して、ユーザの移動線が重複しないように設定することができる。つまり、チームメンバーが１人の場合、目的地への最短経路が表示され得るが、チームメンバーが複数の場合、目的地への経路は曲線として表示され得、移動線が重複しないようにする。

【0363】

実施形態による仮想現実制御システムは、化学事故対応訓練コンテンツにおいて、それらの権限に従って、ユーザに異なる役割を割り当てるシステムを提供することができ、それにより、ユーザの訓練能力が向上する。

【0364】

多くの例示的な実施形態が上記で説明された。それにもかかわらず、これらの例示的な実施形態に様々な修正を加えることができることを理解されたい。例えば、適切な結果は、記述された技術が異なる順序で実行される場合、及び／又は記述されたシステム、アーキテクチャ、デバイス、又は回路の構成要素が異なる方法で組み合わされ、及び／又は他の構成要素又はそれらの同等物によって置換又は補足される場合に達成され得る。
［参照番号］
１０：仮想現実制御システム
１００：検出デバイス
２００：サーバ
３００：補助計算デバイス
４００：ウェアラブルディスプレイデバイス
５００：入力デバイス

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】

【図15】

【図16】

【図17】