特表 2024-506749 シミュレーション環境へのリモート可視性をもたらす方法及びシステム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公表特許公報(A)

(11)【公表番号】

(43)【公表日】2024-02-14

(54)【発明の名称】シミュレーション環境へのリモート可視性をもたらす方法及びシステム

(51)【国際特許分類】

   G09B 9/16 20060101AFI20240206BHJP

   H04N 7/15 20060101ALI20240206BHJP

   G09B 9/28 20060101ALI20240206BHJP

【ＦＩ】

G09B9/16

H04N7/15

G09B9/28

【審査請求】未請求

【予備審査請求】未請求

(21)【出願番号】P 2023568643

(86)(22)【出願日】2022-01-26

(85)【翻訳文提出日】2023-09-21

(86)【国際出願番号】 IB2022050689

(87)【国際公開番号】W WO2022162562

(87)【国際公開日】2022-08-04

(31)【優先権主張番号】63/141,787

(32)【優先日】2021-01-26

(33)【優先権主張国・地域又は機関】US

(81)【指定国・地域】

(71)【出願人】

【識別番号】523180779

【氏名又は名称】シーエーイー・インコーポレイテッド

(74)【代理人】

【識別番号】110000855

【氏名又は名称】弁理士法人浅村特許事務所

(72)【発明者】

【氏名】ソーディーン、マーク

(72)【発明者】

【氏名】ラガセ、マイケル

(72)【発明者】

【氏名】イエ、ヘビング

(72)【発明者】

【氏名】モリセット、セバスチャン

(72)【発明者】

【氏名】デソルニエーズ、パスカル

(72)【発明者】

【氏名】ジアンニアス、ニック

(72)【発明者】

【氏名】ミルザハニ、バーバク

(72)【発明者】

【氏名】クリスティアンセン、ゴードン

(72)【発明者】

【氏名】グランガー － ドゥシャーム、ジュリアン

(72)【発明者】

【氏名】ダイグル、ピエール

(72)【発明者】

【氏名】ヴィンセント、ピエール － ルック

【テーマコード（参考）】

5C164

【Ｆターム（参考）】

5C164FA10

5C164UB83S

5C164VA02P

5C164VA07P

5C164VA22S

(57)【要約】

シミュレーション環境へのリモート可視性をもたらす方法は、セキュア・パブリック・ネットワーク越しに、第１のコンピュータ上で稼働する第１のビデオ会議クライアントと第２のコンピュータ上で稼働する第２のビデオ会議クライアントとの間の接続を確立するステップと、セキュア・プライベート・ネットワーク越しに、第１のコンピュータにおいて、シミュレーション環境の第１の部分を包含する第１のライブ・カメラ・フィードを受信するステップであって、第２のコンピュータは、セキュア・プライベート・ネットワークの外側に位置する、ステップと、ビューワ内で、第１のライブ・カメラ・フィード及びシミュレーション制御インタフェース、シミュレーション環境の第２の部分の表現、並びに／又はシミュレーション環境の第３の部分を包含する第２のライブ・カメラ・フィードを表示するステップと、第１のビデオ会議クライアントを通じて、ビューワ・アプリケーションに対し、第２のビデオ会議クライアントの視覚アクセスを許可するステップと、を含む。

【特許請求の範囲】

【請求項1】

シミュレーション環境へのリモート可視性をもたらす、コンピュータにより実施される方法であって、前記方法は、プロセッサによって実行され、
セキュア・パブリック・ネットワーク越しに、第１のコンピュータ上で稼働する第１のビデオ会議クライアントと第２のコンピュータ上で稼働する第２のビデオ会議クライアントとの間の接続を確立するステップと、
セキュア・プライベート・ネットワーク越しに、前記第１のコンピュータにおいて第１のライブ・カメラ・フィードを受信するステップであって、前記ライブ・カメラ・フィードは、前記シミュレーション環境の第１の部分を包含し、第１のカメラによって捕捉され、前記第２のコンピュータは、前記セキュア・プライベート・ネットワークの外側に位置する、ステップと、
前記第１のコンピュータ上で稼働するビューワ・アプリケーション内で、前記第１のライブ・カメラ・フィードと、シミュレーション制御インタフェース、前記シミュレーション環境の第２の部分の、コンピュータにより生成された表現、及び第２のカメラによって捕捉され、前記第１の部分とは異なる、前記シミュレーション環境の第３の部分を包含する第２のライブ・カメラ・フィード、のうちの少なくとも１つと、を表示するステップと、
前記第１のビデオ会議クライアントを通じて、前記ビューワ・アプリケーションに対し、前記第２のビデオ会議クライアントの視覚アクセスを許可するステップと、
を含む、コンピュータにより実施される方法。

【請求項2】

前記第１のコンピュータにおいて、前記シミュレーション環境内に存在するマイクロフォンからライブ音声フィードを受信するステップと、
前記第２のコンピュータが、前記ライブ音声フィードを実質的にリアルタイムで再生することを可能にするように、前記セキュア・パブリック・ネットワーク越しに、前記第１のビデオ会議クライアントを通じて、前記第２のコンピュータに前記ライブ音声フィードを送信するステップと、
を更に含む、請求項１に記載のコンピュータにより実施される方法。

【請求項3】

前記第１のコンピュータにおいて、前記第１のビデオ会議クライアントを通じて、前記第２のコンピュータからライブ音声フィードを受信するステップと、
前記シミュレーション環境内に搭載されたスピーカに、前記受信されたライブ音声フィードを送信するステップと、
を更に含む、請求項１に記載のコンピュータにより実施される方法。

【請求項4】

前記シミュレーション環境は、飛行シミュレータを含み、前記シミュレーション環境の前記第１の部分は、前記飛行シミュレータの機器及び制御の部分を包含する、請求項１から３までのいずれか一項に記載のコンピュータにより実施される方法。

【請求項5】

前記少なくとも１つのビデオ・フィードは、少なくとも２つのビデオ・フィードを含む、請求項４に記載のコンピュータにより実施される方法。

【請求項6】

前記少なくとも２つのビデオ・フィードのうちの所与の１つは、前記飛行シミュレータの内部部分を包含し、前記飛行シミュレータの前記内部部分は、コンピュータにより生成された環境の画像が表示された前記飛行シミュレータのスクリーンを含む、請求項４に記載のコンピュータにより実施される方法。

【請求項7】

前記飛行シミュレータは、動きに基づく飛行シミュレータを含み、前記少なくとも２つのビデオ・フィードのうちの所与の１つは、前記動きに基づく飛行シミュレータの外部部分を包含する、請求項４に記載のコンピュータにより実施される方法。

【請求項8】

前記ビューワ・アプリケーションは更に、前記シミュレータのシミュレーション制御インタフェースのビューをもたらすために構成される、請求項１から７までのいずれか一項に記載のコンピュータにより実施される方法。

【請求項9】

前記シミュレーション制御インタフェースは、インストラクタ操作ステーションのインタフェースを含み、前記第２のライブ・カメラ・フィードは、前記インストラクタ操作ステーションを包含する、請求項８に記載のコンピュータにより実施される方法。

【請求項10】

シミュレーション・エンジンから、前記シミュレーション制御インタフェースの前記ビューを受信するステップを更に含む、請求項８に記載のコンピュータにより実施される方法。

【請求項11】

前記ビューワ・アプリケーションは更に、データ分析プラットフォームのインタフェースのビューをもたらすために構成される、請求項１から７までのいずれか一項に記載のコンピュータにより実施される方法。

【請求項12】

前記データ分析プラットフォームの前記インタフェースの前記ビューは、前記データ分析プラットフォームの前記インタフェースが表示されたディスプレイ・ユニットの画像に対応し、前記ディスプレイの前記画像は、前記プライベート・ネットワークに接続された更なるカメラによって捕捉される、請求項１１に記載のコンピュータにより実施される方法。

【請求項13】

前記データ分析プラットフォームをホストするサーバから、前記データ分析プラットフォームの前記インタフェースの前記ビューを受信するステップを更に含む、請求項１１に記載のコンピュータにより実施される方法。

【請求項14】

前記ビューワ・アプリケーションに対する制御を前記第２のビデオ会議クライアントに許可するステップを更に含む、請求項１から７までのいずれか一項に記載のコンピュータにより実施される方法。

【請求項15】

オペレーティング・システムのインタフェースに対する制御を前記第２のビデオ会議クライアントに許可するステップを更に含む、請求項１４に記載のコンピュータにより実施される方法。

【請求項16】

データ分析プラットフォームのインタフェースに対する制御を前記第２のビデオ会議クライアントに許可するステップを更に含む、請求項１１から１４までのいずれか一項に記載のコンピュータにより実施される方法。

【請求項17】

前記第１のビデオ会議クライアントから、前記環境内の視覚インジケーションを投影する命令を受信するステップと、
前記視覚インジケーションを投影するように、前記シミュレータ内に据え付けられたプロジェクタを制御するステップと、
を更に含む、請求項１から１６までのいずれか一項に記載のコンピュータにより実施される方法。

【請求項18】

シミュレーション環境へのリモート可視性をもたらすシステムであって、
プロセッサと、
前記プロセッサに動作可能に接続された非一時的記憶媒体であって、コンピュータ可読命令を含む、非一時的記憶媒体と、を備え、
前記プロセッサは、前記コンピュータ可読命令を実行すると、
セキュア・パブリック・ネットワーク越しに、第１のコンピュータ上で稼働する第１のビデオ会議クライアントと第２のコンピュータ上で稼働する第２のビデオ会議クライアントとの間の接続を確立し、
セキュア・プライベート・ネットワーク越しに、前記第１のコンピュータにおいて第１のライブ・カメラ・フィードを受信し、前記ライブ・カメラ・フィードは、前記シミュレーション環境の第１の部分を包含し、第１のカメラによって捕捉され、前記第２のコンピュータは、前記セキュア・プライベート・ネットワークの外側に位置し、
前記第１のコンピュータ上で稼働するビューワ・アプリケーション内で、前記第１のライブ・カメラ・フィードと、シミュレーション制御インタフェース、前記シミュレーション環境の第２の部分の、コンピュータにより生成された表現、及び第２のカメラによって捕捉され、前記第１の部分とは異なる、前記シミュレーション環境の第３の部分を包含する第２のライブ・カメラ・フィード、のうちの少なくとも１つと、を表示し、
前記第１のビデオ会議クライアントを通じて、前記ビューワ・アプリケーションに対し、前記第２のビデオ会議クライアントの視覚アクセスを許可する、
ために構成される、システム。

【請求項19】

前記プロセッサは更に、
前記第１のコンピュータにおいて、前記シミュレーション環境内に存在するマイクロフォンからライブ音声フィードを受信し、
前記第２のコンピュータが、前記ライブ音声フィードを実質的にリアルタイムで再生することを可能にするように、前記セキュア・パブリック・ネットワーク越しに、前記第１のビデオ会議クライアントを通じて、前記第２のコンピュータに前記ライブ音声フィードを送信する、
ために構成される、請求項１８に記載のシステム。

【請求項20】

前記プロセッサは更に、
前記第１のコンピュータにおいて、前記第１のビデオ会議クライアントを通じて、前記第２のコンピュータからライブ音声フィードを受信し、
前記シミュレーション環境内に搭載されたスピーカに、前記受信されたライブ音声フィードを送信する、
ために構成される、請求項１８に記載のシステム。

【請求項21】

前記シミュレーション環境は、飛行シミュレータを含み、前記シミュレーション環境の前記第１の部分は、前記飛行シミュレータの機器及び制御の部分を包含する、請求項１８から２０までのいずれか一項に記載のシステム。

【請求項22】

前記少なくとも１つのビデオ・フィードは、少なくとも２つのビデオ・フィードを含む、請求項１８から２１までのいずれか一項に記載のシステム。

【請求項23】

前記少なくとも２つのビデオ・フィードのうちの所与の１つは、前記飛行シミュレータの内部部分を包含し、前記飛行シミュレータの前記内部部分は、コンピュータにより生成された環境の画像が表示された前記飛行シミュレータのスクリーンを含む、請求項２２に記載のシステム。

【請求項24】

前記飛行シミュレータは、動きに基づく飛行シミュレータを含み、前記少なくとも２つのビデオ・フィードのうちの所与の１つは、前記動きに基づく飛行シミュレータの外部部分を包含する、請求項２２に記載のシステム。

【請求項25】

前記ビューワ・アプリケーションは更に、前記シミュレータのシミュレーション制御インタフェースのビューをもたらすために構成される、請求項１８から２４までのいずれか一項に記載のシステム。

【請求項26】

前記シミュレーション制御インタフェースは、インストラクタ操作ステーションのインタフェースを含み、前記第２のライブ・カメラ・フィードは、前記インストラクタ操作ステーションを包含する、請求項２５に記載のシステム。

【請求項27】

前記プロセッサは更に、シミュレーション・エンジンから、前記シミュレーション制御インタフェースの前記ビューを受信するために構成される、請求項２５に記載のシステム。

【請求項28】

前記ビューワ・アプリケーションは更に、データ分析プラットフォームのインタフェースのビューをもたらすために構成される、請求項１８から２４までのいずれか一項に記載のシステム。

【請求項29】

前記データ分析プラットフォームの前記インタフェースの前記ビューは、前記データ分析プラットフォームの前記インタフェースが表示されたディスプレイ・ユニットの画像に対応し、前記ディスプレイの前記画像は、前記プライベート・ネットワークに接続された更なるカメラによって捕捉される、請求項２８に記載のシステム。

【請求項30】

前記プロセッサは更に、前記データ分析プラットフォームをホストするサーバから、前記データ分析プラットフォームの前記インタフェースの前記ビューを受信するために構成される、請求項２８に記載のシステム。

【請求項31】

前記プロセッサは更に、前記ビューワ・アプリケーションに対する制御を前記第２のビデオ会議クライアントに許可するために構成される、請求項１８から２４までのいずれか一項に記載のシステム。

【請求項32】

前記プロセッサは更に、オペレーティング・システムのインタフェースに対する制御を前記第２のビデオ会議クライアントに許可するために構成される、請求項３１に記載のシステム。

【請求項33】

前記プロセッサは更に、データ分析プラットフォームのインタフェースに対する制御を前記第２のビデオ会議クライアントに許可するために構成される、請求項２８から３１までのいずれか一項に記載のシステム。

【請求項34】

前記プロセッサは更に、
前記第１のビデオ会議クライアントから、前記環境内の視覚インジケーションを投影する命令を受信し、
前記視覚インジケーションを投影するように、前記シミュレータ内に据え付けられたプロジェクタを制御する、
ために構成可能である、請求項１８から３３までのいずれか一項に記載のシステム。

【請求項35】

シミュレーション環境へのリモート可視性をもたらすコンピュータ・プログラム製品であって、前記コンピュータ・プログラム製品は、コンピュータ実行可能命令をそこに記憶したコンピュータ可読メモリを含み、前記コンピュータ実行可能命令は、プロセッサによって実行されるとき、
セキュア・パブリック・ネットワーク越しに、第１のコンピュータ上で稼働する第１のビデオ会議クライアントと第２のコンピュータ上で稼働する第２のビデオ会議クライアントとの間の接続を確立するステップと、
セキュア・プライベート・ネットワーク越しに、前記第１のコンピュータにおいて第１のライブ・カメラ・フィードを受信するステップであって、前記ライブ・カメラ・フィードは、前記シミュレーション環境の第１の部分を包含し、第１のカメラによって捕捉され、前記第２のコンピュータは、前記セキュア・プライベート・ネットワークの外側に位置する、ステップと、
前記第１のコンピュータ上で稼働するビューワ・アプリケーション内で、前記第１のライブ・カメラ・フィードと、シミュレーション制御インタフェース、前記シミュレーション環境の第２の部分の、コンピュータにより生成された表現、及び第２のカメラによって捕捉され、前記第１の部分とは異なる、前記シミュレーション環境の第３の部分を包含する第２のライブ・カメラ・フィード、のうちの少なくとも１つと、を表示するステップと、
前記第１のビデオ会議クライアントを通じて、前記ビューワ・アプリケーションに対し、前記第２のビデオ会議クライアントの視覚アクセスを許可するステップと、
の方法ステップを実行する、コンピュータ・プログラム製品。

【請求項36】

シミュレーション環境へのリモート可視性をもたらすキットであって、
請求項３５に記載のコンピュータ・プログラム製品と、
前記シミュレーション環境の内部に取り外し可能に確保可能なポールと、を備え、前記ポールは、調節可能な長さを有する伸長体と、カメラを保持するための少なくとも１つのカメラ保持デバイスと、を含み、前記カメラ保持デバイスは、前記伸長体に沿った所望のポジションにおいて確保可能であり、前記カメラが前記シミュレーション環境の所望の部分の画像を捕捉するように構成される、
キット。

【請求項37】

前記伸長体は、伸縮式である、請求項３６に記載のキット。

【請求項38】

前記カメラ保持デバイスは、前記伸長体に回転可能に確保される、請求項３６又は３７に記載のキット。

【請求項39】

前記カメラ保持デバイスは、前記伸長体に確保可能なクランプと、前記クランプに回転可能に接続された第１の端と前記カメラに搭載可能な第２の端との間で延びるアームと、を含む、請求項３８に記載のキット。

【請求項40】

前記カメラ保持デバイスは更に、前記アームの前記第１の端と前記クランプとの間に搭載された第１のボール・ジョイントと、前記アームの前記第２の端において搭載され、前記カメラに確保可能である第２のボール・ジョイントと、を含む、請求項３９に記載のキット。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、シミュレータの分野に関し、特に、シミュレータのリモート・アクセス及び／又は制御に関する。

【背景技術】

【0002】

パイロット及びコパイロットを訓練及び評価するために、エアクラフト・シミュレータが使用される。そのために、パイロット又はコパイロットの訓練及び評価を担当する人間は、シミュレータ内に物理的に存在する。

【0003】

しかしながら、既存のクライアント、潜在的なクライアント、規制機関、及び飛行インストラクタなどの第三者にシミュレーション環境へのリモート視覚アクセスをもたらすことが望ましいことがあり得る。パンデミック中にこれが特に当てはまる。シミュレーション環境へのそのようなリモート視覚アクセスをもたらすいくつかのカスタム・ソリューションが存在する。しかしながら、それらの設計及び実装態様は通常、時間を要し及び／又は高価である。

【発明の概要】

【発明が解決しようとする課題】

【0004】

したがって、シミュレーション環境へのリモート可視性を確実にもたらす改善された方法及びシステムに対する必要性が存在する。

【課題を解決するための手段】

【0005】

第１の広範囲の態様によって、シミュレーション環境へのリモート可視性をもたらす、コンピュータにより実施される方法が提供され、方法は、プロセッサによって実行され、セキュア・パブリック・ネットワーク越しに、第１のコンピュータ上で稼働する第１のビデオ会議クライアントと第２のコンピュータ上で稼働する第２のビデオ会議クライアントとの間の接続を確立するステップと、セキュア・プライベート・ネットワーク越しに、第１のコンピュータにおいて第１のライブ・カメラ・フィードを受信するステップであって、ライブ・カメラ・フィードは、シミュレーション環境の第１の部分を包含し、第１のカメラによって捕捉され、第２のコンピュータは、セキュア・プライベート・ネットワークの外側に位置する、ステップと、第１のコンピュータ上で稼働するビューワ・アプリケーション内で、第１のライブ・カメラ・フィードと、シミュレーション制御インタフェース、シミュレーション環境の第２の部分の、コンピュータにより生成された表現、及び第２のカメラによって捕捉され、第１の部分とは異なる、シミュレーション環境の第３の部分を包含する第２のライブ・カメラ・フィード、のうちの少なくとも１つと、を表示するステップと、第１のビデオ会議クライアントを通じて、ビューワ・アプリケーションに対し、第２のビデオ会議クライアントの視覚アクセスを許可するステップと、を含む。

【0006】

一実施例では、方法は更に、第１のコンピュータにおいて、シミュレーション環境内に存在するマイクロフォンからライブ音声フィードを受信するステップと、第２のコンピュータが、ライブ音声フィードを実質的にリアルタイムで再生することを可能にするように、セキュア・パブリック・ネットワーク越しに、第１のビデオ会議クライアントを通じて、第２のコンピュータにライブ音声フィードを送信するステップと、を含む。

【0007】

一実施例では、方法は更に、第１のコンピュータにおいて、第１のビデオ会議クライアントを通じて、第２のコンピュータからライブ音声フィードを受信するステップと、シミュレーション環境内に搭載されたスピーカに、受信されたライブ音声フィードを送信するステップと、を含む。

【0008】

一実施例では、シミュレーション環境は、飛行シミュレータを含み、シミュレーション環境の第１の部分は、飛行シミュレータの機器及び制御の部分を包含する。

【0009】

一実施例では、少なくとも１つのビデオ・フィードは、少なくとも２つのビデオ・フィードを含む。

【0010】

一実施例では、少なくとも２つのビデオ・フィードのうちの所与の１つは、飛行シミュレータの内部部分を包含し、飛行シミュレータの内部部分は、コンピュータにより生成された環境の画像が表示された飛行シミュレータのスクリーンを含む。

【0011】

一実施例では、飛行シミュレータは、動きに基づく飛行シミュレータを含み、少なくとも２つのビデオ・フィードのうちの所与の１つは、動きに基づく飛行シミュレータの外部部分を包含する。

【0012】

一実施例では、ビューワ・アプリケーションは更に、シミュレータのシミュレーション制御インタフェースのビューをもたらすために構成される。

【0013】

一実施例では、シミュレーション制御インタフェースは、インストラクタ操作ステーションのインタフェースを含み、第２のライブ・カメラ・フィードは、インストラクタ操作ステーションを包含する。

【0014】

一実施例では、方法は更に、シミュレーション・エンジンから、シミュレーション制御インタフェースのビューを受信するステップを含む。

【0015】

一実施例では、ビューワ・アプリケーションは更に、データ分析プラットフォームのインタフェースのビューをもたらすために構成される。

【0016】

一実施例では、データ分析プラットフォームのインタフェースのビューは、データ分析プラットフォームのインタフェースが表示されたディスプレイ・ユニットの画像に対応し、ディスプレイの画像は、プライベート・ネットワークに接続された更なるカメラによって捕捉される。

【0017】

一実施例では、方法は更に、データ分析プラットフォームをホストするサーバから、データ分析プラットフォームのインタフェースのビューを受信するステップを含む。

【0018】

一実施例では、方法は更に、ビューワ・アプリケーションに対する制御を第２のビデオ会議クライアントに許可するステップを含む。

【0019】

一実施例では、方法は更に、オペレーティング・システムのインタフェースに対する制御を第２のビデオ会議クライアントに許可するステップを含む。

【0020】

一実施例では、方法は更に、データ分析プラットフォームのインタフェースに対する制御を第２のビデオ会議クライアントに許可するステップを含む。

【0021】

一実施例では、方法は更に、第１のビデオ会議クライアントから、環境内の視覚インジケーションを投影する命令を受信するステップと、視覚インジケーションを投影するように、シミュレータ内に据え付けられたプロジェクタを制御するステップと、を含む。

【0022】

一実施例では、方法は更に、シミュレーション環境の少なくとも一部分の所与の画像内で選択された少なくとも１つのポイントの座標を受信するステップであって、所与の画像は、ディスプレイ・ユニット上で表示される、ステップと、少なくとも１つのポイントの受信された座標に基づいて、シミュレーション環境内の関心の領域を識別するステップと、シミュレーション環境内の関心の領域を視覚的に区別するように、プロジェクタに制御信号を提供することと、によって、シミュレーション環境内の関心の領域をリモートに指し示すステップを含む。

【0023】

一実施例では、シミュレータ内の関心の領域を識別するステップは、受信された座標を、プロジェクタと関連付けられた座標系内のポインタ・エリアにマッピングするステップを含み、制御信号を提供するステップは、ポインタ・エリアに基づいてオーバレイ画像を生成するステップであって、オーバレイ画像は、関心の領域を包含する、ステップと、シミュレータ上でオーバレイ画像を投影するように、プロジェクタに制御信号を提供するステップと、を含む。

【0024】

一実施例では、受信された座標をポインタ・エリアにマッピングするステップは、受信された座標を、シミュレーション環境の座標系内の少なくとも１つの所与のポイントにマッピングするステップと、少なくとも１つの所与のポイントを、プロジェクタと関連付けられた座標系内のポインタ・エリアにマッピングするステップと、を含む。

【0025】

一実施例では、方法は更に、テレコミュニケーション・ネットワーク越しに、第１のコンピュータ上で稼働する第１のビデオ会議クライアントと第２のコンピュータ上で稼働する第２のビデオ会議クライアントとの間の接続を確立するステップと、第１のビデオ会議クライアントを通じて、第２のコンピュータに所与の画像を送信するステップと、を含み、第２のコンピュータは、リモート・ディスプレイ・ユニット上での表示のための所与の画像を提供し、座標を受信する該ステップは、セキュア・パブリック・ネットワーク越しに、第１のビデオ会議クライアントを通じて、第２のコンピュータから座標を受信するステップを含む。

【0026】

一実施例では、テレコミュニケーション・ネットワークは、パブリック・ネットワーク、セキュア・パブリック・ネットワーク、プライベート・ネットワーク、及びセキュア・プライベート・ネットワークのうちの１つを含む。

【0027】

一実施例では、制御信号を提供するステップは、受信された座標に基づいて、複数の利用可能なプロジェクタの中でプロジェクタを選択するステップと、選択されたプロジェクタに制御信号を提供するステップと、を含む。

【0028】

一実施例では、制御信号を提供するステップは、プロジェクタについてのターゲット・ポジションを決定するステップであって、ターゲット・ポジションは、関心の領域がプロジェクタの視野内に含まれることを保証する、ステップと、ターゲット・ポジションを更に示す制御信号を提供するステップと、を含む。

【0029】

一実施例では、方法は更に、シミュレーション環境内に位置するカメラから、シミュレーション環境の少なくとも一部分の所与の画像を受信するステップを含む。

【0030】

一実施例では、方法は更に、シミュレーション環境の少なくとも一部分の所与の画像を生成するステップを含む。

【0031】

一実施例では、所与の画像を生成するステップは、シミュレーション環境の３Ｄモデルを使用して実行される。

【0032】

一実施例では、座標を受信するステップは、所与の画像内で選択された複数のポイントについての座標を受信するステップを含み、関心の領域を識別するステップは、複数のポイントについての受信された座標に基づいて、複数の関心の領域を識別するステップを含み、制御信号を提供するステップは、シミュレーション環境内の複数の関心の領域を視覚的且つ同時に区別するように、プロジェクタに制御信号を提供するステップを含む。

【0033】

一実施例では、方法は更に、ポインタ・エリアについての少なくとも１つの特性を選択するステップを含み、制御信号は、少なくとも１つの特性を示す。

【0034】

一実施例では、少なくとも１つの特性は、形状、強度、及び色のうちの少なくとも１つを含む。

【0035】

別の広範囲の態様によって、シミュレーション環境へのリモート可視性をもたらすシステムが提供され、システムは、プロセッサと、プロセッサに動作可能に接続された非一時的記憶媒体であって、コンピュータ可読命令を含む、非一時的記憶媒体と、を含み、プロセッサは、コンピュータ可読命令を実行すると、セキュア・パブリック・ネットワーク越しに、第１のコンピュータ上で稼働する第１のビデオ会議クライアントと第２のコンピュータ上で稼働する第２のビデオ会議クライアントとの間の接続を確立し、セキュア・プライベート・ネットワーク越しに、第１のコンピュータにおいて第１のライブ・カメラ・フィードを受信し、ライブ・カメラ・フィードは、シミュレーション環境の第１の部分を包含し、第１のカメラによって捕捉され、第２のコンピュータは、セキュア・プライベート・ネットワークの外側に位置し、第１のコンピュータ上で稼働するビューワ・アプリケーション内で、第１のライブ・カメラ・フィードと、シミュレーション制御インタフェース、シミュレーション環境の第２の部分の、コンピュータにより生成された表現、及び第２のカメラによって捕捉され、第１の部分とは異なる、シミュレーション環境の第３の部分を包含する第２のライブ・カメラ・フィード、のうちの少なくとも１つと、を表示し、第１のビデオ会議クライアントを通じて、ビューワ・アプリケーションに対し、第２のビデオ会議クライアントの視覚アクセスを許可するために構成される。

【0036】

一実施例では、プロセッサは更に、第１のコンピュータにおいて、シミュレーション環境内に存在するマイクロフォンからライブ音声フィードを受信し、第２のコンピュータが、ライブ音声フィードを実質的にリアルタイムで再生することを可能にするように、セキュア・パブリック・ネットワーク越しに、第１のビデオ会議クライアントを通じて、第２のコンピュータにライブ音声フィードを送信するために構成される。

【0037】

一実施例では、プロセッサは更に、第１のコンピュータにおいて、第１のビデオ会議クライアントを通じて、第２のコンピュータからライブ音声フィードを受信し、シミュレーション環境内に搭載されたスピーカに、受信されたライブ音声フィードを送信するために構成される。

【0038】

一実施例では、シミュレーション環境は、飛行シミュレータを含み、シミュレーション環境の第１の部分は、飛行シミュレータの機器及び制御の部分を包含する。

【0039】

一実施例では、少なくとも１つのビデオ・フィードは、少なくとも２つのビデオ・フィードを含む。

【0040】

一実施例では、少なくとも２つのビデオ・フィードのうちの所与の１つは、飛行シミュレータの内部部分を包含し、飛行シミュレータの内部部分は、コンピュータにより生成された環境の画像が表示された飛行シミュレータのスクリーンを含む。

【0041】

一実施例では、飛行シミュレータは、動きに基づく飛行シミュレータを含み、少なくとも２つのビデオ・フィードのうちの所与の１つは、動きに基づく飛行シミュレータの外部部分を包含する。

【0042】

一実施例では、ビューワ・アプリケーションは更に、シミュレータのシミュレーション制御インタフェースのビューをもたらすために構成される。

【0043】

一実施例では、シミュレーション制御インタフェースは、インストラクタ操作ステーションのインタフェースを含み、第２のライブ・カメラ・フィードは、インストラクタ操作ステーションを包含する。

【0044】

一実施例では、プロセッサは更に、シミュレーション・エンジンから、シミュレーション制御インタフェースのビューを受信するために構成される。

【0045】

一実施例では、ビューワ・アプリケーションは更に、データ分析プラットフォームのインタフェースのビューをもたらすために構成される。

【0046】

一実施例では、データ分析プラットフォームのインタフェースのビューは、データ分析プラットフォームのインタフェースが表示されたディスプレイ・ユニットの画像に対応し、ディスプレイの画像は、プライベート・ネットワークに接続された更なるカメラによって捕捉される。

【0047】

一実施例では、プロセッサは更に、データ分析プラットフォームをホストするサーバから、データ分析プラットフォームのインタフェースのビューを受信するために構成される。

【0048】

一実施例では、プロセッサは更に、ビューワ・アプリケーションに対する制御を第２のビデオ会議クライアントに許可するために構成される。

【0049】

一実施例では、プロセッサは更に、オペレーティング・システムのインタフェースに対する制御を第２のビデオ会議クライアントに許可するために構成される。

【0050】

一実施例では、プロセッサは更に、データ分析プラットフォームのインタフェースに対する制御を第２のビデオ会議クライアントに許可するために構成される。

【0051】

一実施例では、プロセッサは更に、第１のビデオ会議クライアントから、環境内の視覚インジケーションを投影する命令を受信し、視覚インジケーションを投影するように、シミュレータ内に据え付けられたプロジェクタを制御するために構成される。

【0052】

一実施例では、システムは更に、シミュレータ内の関心の領域をリモートに指し示すように適合され、プロセッサは更に、シミュレーション環境の少なくとも一部分の所与の画像内で選択された少なくとも１つのポイントの座標を受信し、所与の画像は、ディスプレイ・ユニット上で表示され、少なくとも１つのポイントの受信された座標に基づいて、シミュレーション環境内の関心の領域を識別し、シミュレーション環境内の関心の領域を視覚的に区別するように、プロジェクタに制御信号を提供するために構成される。

【0053】

一実施例では、プロセッサは、受信された座標を、プロジェクタと関連付けられた座標系内のポインタ・エリアにマッピングし、ポインタ・エリアに基づいてオーバレイ画像を生成し、オーバレイ画像は、関心の領域を包含し、シミュレータ上でオーバレイ画像を投影するように、プロジェクタに制御信号を提供するために構成される。

【0054】

一実施例では、プロセッサは、受信された座標を、シミュレーション環境の座標系内の少なくとも１つの所与のポイントにマッピングし、少なくとも１つの所与のポイントを、プロジェクタと関連付けられた座標系内のポインタ・エリアにマッピングする、ために構成される。

【0055】

一実施例では、プロセッサは、テレコミュニケーション・ネットワーク越しに、第１のコンピュータ上で稼働する第１のビデオ会議クライアントと第２のコンピュータ上で稼働する第２のビデオ会議クライアントとの間の接続を確立し、第１のビデオ会議クライアントを通じて、第２のコンピュータに所与の画像を送信するために構成され、第２のコンピュータは、リモート・ディスプレイ・ユニット上での表示のための所与の画像を提供し、座標を該受信することは、セキュア・パブリック・ネットワーク越しに、第１のビデオ会議クライアントを通じて、第２のコンピュータから座標を受信することを含む。

【0056】

一実施例では、テレコミュニケーション・ネットワークは、パブリック・ネットワーク、セキュア・パブリック・ネットワーク、プライベート・ネットワーク、及びセキュア・プライベート・ネットワークのうちの１つを含む。

【0057】

一実施例では、プロセッサは更に、受信された座標に基づいて、複数の利用可能なプロジェクタの中でプロジェクタを選択し、選択されたプロジェクタに制御信号を提供するために構成される。

【0058】

一実施例では、プロセッサは更に、プロジェクタについてのターゲット・ポジションを決定し、ターゲット・ポジションは、関心の領域がプロジェクタの視野内に含まれることを保証し、ターゲット・ポジションを更に示す制御信号を提供するために構成される。

【0059】

一実施例では、プロセッサは更に、シミュレーション環境内に位置するカメラから、シミュレーション環境の少なくとも一部分の所与の画像を受信するために構成される。

【0060】

一実施例では、プロセッサは更に、シミュレーション環境の少なくとも一部分の所与の画像を生成するために構成される。

【0061】

一実施例では、プロセッサは、シミュレーション環境の３Ｄモデルを使用して所与の画像を生成するために構成される。

【0062】

一実施例では、プロセッサは、所与の画像内で選択された複数のポイントについての座標を受信し、複数のポイントについての受信された座標に基づいて、複数の関心の領域を識別し、シミュレーション環境内の複数の関心の領域を視覚的且つ同時に区別するように、プロジェクタに制御信号を提供するために構成される。

【0063】

一実施例では、プロセッサは更に、ポインタ・エリアについての少なくとも１つの特性を選択するために構成され、制御信号は、少なくとも１つの特性を示す。

【0064】

一実施例では、少なくとも１つの特性は、形状、強度、及び色のうちの少なくとも１つを含む。

【0065】

更なる広範囲の態様によって、シミュレーション環境へのリモート可視性をもたらすコンピュータ・プログラム製品が提供され、コンピュータ・プログラム製品は、コンピュータ実行可能命令をそこに記憶したコンピュータ可読メモリを含み、コンピュータ実行可能命令は、プロセッサによって実行されるとき、セキュア・パブリック・ネットワーク越しに、第１のコンピュータ上で稼働する第１のビデオ会議クライアントと第２のコンピュータ上で稼働する第２のビデオ会議クライアントとの間の接続を確立するステップと、セキュア・プライベート・ネットワーク越しに、第１のコンピュータにおいて第１のライブ・カメラ・フィードを受信するステップであって、ライブ・カメラ・フィードは、シミュレーション環境の第１の部分を包含し、第１のカメラによって捕捉され、第２のコンピュータは、セキュア・プライベート・ネットワークの外側に位置する、ステップと、第１のコンピュータ上で稼働するビューワ・アプリケーション内で、第１のライブ・カメラ・フィードと、シミュレーション制御インタフェース、シミュレーション環境の第２の部分の、コンピュータにより生成された表現、及び第２のカメラによって捕捉され、第１の部分とは異なる、シミュレーション環境の第３の部分を包含する第２のライブ・カメラ・フィード、のうちの少なくとも１つと、を表示するステップと、第１のビデオ会議クライアントを通じて、ビューワ・アプリケーションに対し、第２のビデオ会議クライアントの視覚アクセスを許可するステップと、の方法ステップを実行する。

【0066】

一実施例では、コンピュータ・プログラム製品は更に、プロセッサによって実行されるとき、シミュレーション環境内の関心の領域をリモートに指し示すように適合され、コンピュータ可読メモリは、シミュレーション環境の少なくとも一部分の所与の画像内で選択された少なくとも１つのポイントの座標を受信するステップであって、所与の画像は、ディスプレイ・ユニット上で表示される、ステップと、少なくとも１つのポイントの受信された座標に基づいて、シミュレーション環境内の関心の領域を識別するステップと、シミュレーション環境内の関心の領域を視覚的に区別するように、プロジェクタに制御信号を提供するステップと、の方法ステップを実行する、更なるコンピュータ実行可能命令をそこに記憶する。

【0067】

更なる別の広範囲の態様によって、シミュレーション環境へのリモート可視性をもたらすキットが提供され、キットは、上記コンピュータ・プログラム製品と、シミュレーション環境の内部に取り外し可能に確保可能なポールと、を含み、ポールは、調節可能な長さを有する伸長体と、カメラを保持するための少なくとも１つのカメラ保持デバイスと、を含み、カメラ保持デバイスは、伸長体に沿った所望のポジションにおいて確保可能であり、カメラがシミュレーション環境の所望の部分の画像を捕捉するように構成可能である。

【0068】

一実施例では、伸長体は、伸縮式である。

【0069】

一実施例では、カメラ保持デバイスは、伸長体に回転可能に確保可能である。

【0070】

一実施例では、カメラ保持デバイスは、伸長体に確保可能なクランプと、クランプに回転可能に接続された第１の端とカメラに搭載可能な第２の端との間で伸びるアームと、を含む。

【0071】

一実施例では、カメラ保持デバイスは更に、アームの第１の端とクランプとの間に搭載された第１のボール・ジョイントと、アームの第２の端において搭載され、カメラに確保可能である第２のボール・ジョイントと、を含む。

【0072】

本発明の更なる特徴及び利点は、添付図面との組合せで採用される、以下の詳細な説明から明らかになるであろう。

【図面の簡単な説明】

【0073】

【図1】実施例による、シミュレーション環境へのリモート可視性をもたらす、コンピュータにより実施される方法を例示するフロー・チャートである。

【図2】コクピット内に据え付けられた例示的なポールの画像を示す図であり、ポールは、コクピットの異なる部分の画像を捕捉するためにそこに搭載された複数のカメラを有する。

【図3】ビューワ・アプリケーションによって生成され、６個の区域を含む例示的な画像を示す図である。

【図4】図３の画像が表示された例示的なビデオ会議クライアント・インタフェースを例示する図である。

【図5】実施例による、シミュレーション環境へのリモート可視性をもたらすシステムを例示するブロック図である。

【図6】実施例による、装備されたエアクラフト・シミュレータの例示的なコクピットを例示する概念図である。

【図7】実施例による、４個の異なる画像を同時に表示するためのインタフェースを例示する概念図である。

【図8】実施例による、それぞれのディスプレイ・ユニット上に各々が表示されることになる４個のインタフェースを例示する概念図である。

【図9】実施例による、シミュレータ内で関心の領域をリモートに照射する方法を例示するフロー・チャートである。

【図10】実施例による、シミュレータ内で関心の領域を照射するためにプロジェクタをリモートに制御する方法を例示するフロー・チャートである。

【図11】シミュレータの部分を例示する例示的なコンピュータにより生成された画像を示す図である。

【図12】関心の領域が照射されたシミュレータ内に位置するカメラによって捕捉された例示的な画像を示す図である。

【図13】実施例による、シミュレータ内で関心の領域を照射するためにプロジェクタをリモートに制御するシステムを例示するブロック図である。

【発明を実施するための形態】

【0074】

添付図面の全体を通じて、同様の特徴が同様の参照符号によって識別されることに留意されよう。

【0075】

一実施例では、以下で説明される方法及びシステムは、例えば、パイロット及び／又はコパイロットを訓練するエアクラフト・シミュレータのコンテキストにおいて使用され得る。エアクラフト・シミュレータは通常、エアクラフト・コクピットを模倣した訓練ルームを含む。訓練ルームは通常、シミュレートされたエアクラフトの移動をシミュレートするために移動可能である。訓練ルームには、エアクラフト内で発見された実物の機器及び制御に通常は対応する、又は模倣する機器及び制御が設けられる。訓練ルームにはまた通常、パイロット及びコパイロットのための２つのシートが設けられる。更に、訓練ルームには通常、パイロット及びコパイロットのシートの背後に位置するインストラクタ操作ステーションが設けられ、インストラクタ操作ステーションは、シミュレーション中に、インストラクタが、シミュレーションを制御すること並びに／又はパイロット及びコパイロットの遂行能力をモニタすることを可能にする。例えば、インストラクタは、インストラクタ操作ステーションを介して、シミュレーションのパラメータを設定し得、又は所与のシミュレーションをロードし得る。インストラクタ操作ステーションは、例えば、パイロット及び／又はコパイロットのサーティフィケーションを更新するためにパイロット及び／又はコパイロットを評価する米国連邦航空庁（Ｆｅｄｅｒａｌ Ａｖｉａｔｉｏｎ Ａｄｍｉｎｉｓｔｒａｔｉｏｎ（ＦＡＡ））などの規制エージェンシのエージェントによっても使用され得る。

【0076】

エアクラフト・シミュレータの通常のアーキテクチャは、インストラクタ又はエージェントが、シミュレーション中にパイロット及び／又はコパイロットを指示、ガイド、及び／又は評価するようにシミュレータの訓練ルーム内に物理的に存在することを必要とする。しかしながら、パンデミック中などのいくつかの特定の状況では、シミュレーション中にパイロット及び／又はコパイロットをリモートに指示、ガイド、及び／又は評価することが有利であり得る。そのために、本方法及びシステムは、インストラクタ又はエージェントなどの第三者の人間に、シミュレータ内に位置する機器及び制御を含むコクピット又は飛行デッキの少なくとも一部へのリモート可視性又はリモート視覚アクセスをもたらす。本方法及びシステムは更に、インストラクタ又はエージェントによるシミュレーション・エンジンのリモート制御を有効にし得る。本方法及びシステムはまた、パイロット及び／又はコパイロットと第三者との間の通信をもたらし得る。

【0077】

一実施例では、本技術は、既製のビデオ会議プラットフォームを使用して実装され、既製のビデオ会議プラットフォームは、第三者によって使用される位置及びシステムに関わらず、迅速及び／又は安価な実装態様を可能にする。

【0078】

図１は、シミュレーション環境へのリモート可視性をもたらす方法１０の一実施例を例示する。方法１０は、少なくとも１つのプロセッサによって実行されることが理解されるべきである。上記説明されたように、シミュレーション環境は、シミュレーション中に、パイロットなどのユーザの配置において少なくとも機器及び制御を含む。シミュレーション環境は更に、機器及び制御の少なくとも一部分など、シミュレータの少なくとも一部分を捕捉するように位置付けられ及び方位付けられた少なくとも１つのカメラが設けられる。カメラは、プライベート・ネットワークを介して第１のコンピュータ・マシンに接続される。第１のコンピュータ・マシンも、テレコミュニケーション・ネットワークを介してプライベート・ネットワークの外側に位置する第２のコンピュータ・マシンに接続される。第２のコンピュータ・マシンは、プライベート・ネットワークへのアクセスを有さない。第１の及び第２のコンピュータ・マシンは、テレコミュニケーション・ネットワークを使用して、ビデオ会議プラットフォームを介して通信する。

【0079】

ステップ１２において、第１のコンピュータ・マシンは、プライベート・ネットワーク越しに、カメラから第１のビデオ・フィードを受信する。第１のビデオ・フィードは、シミュレータの少なくとも第１の部分を包含し、すなわち、カメラは、シミュレータの内部空間の少なくとも一部分の画像を捕捉し、捕捉された画像は、第１のコンピュータ・マシンに送信される。例えば、カメラは、パイロット及びコパイロットのシートの背後に位置付けられ得、その結果、ビデオ・フィードは、パイロット、コパイロット、及びコクピットの部分を包含し得る。

【0080】

ステップ１４において、ビューワ・アプリケーション及び第１のビデオ会議クライアントは、第１のコンピュータ・マシン上で同時に稼働している。第１のコンピュータ・マシンは、第１のディスプレイ・ユニットを含み、ビューワ・アプリケーションは、第１のディスプレイ・ユニット上でステップ１２において受信されたビデオ・フィードを表示するために構成される。例えば、ビューワ・アプリケーションは、少なくとも１つのビデオ・フィードをそこに表示するためのインタフェースを生成し、及び／又は、第１のコンピュータ・マシンに接続された第１のディスプレイ・ユニット上でそれらが表示され得るように、ビデオ・フィードをフォーマットするために構成され得る。第１のビデオ会議クライアントは、テレコミュニケーション・ネットワークを介して、第２のビデオ会議クライアントとデータを送信及び受信するために構成される。

【0081】

一実施例では、第１のコンピュータ・マシンは更に、ステップ１２において、シミュレーション制御インタフェース、シミュレータの第２の部分の、コンピュータにより生成された表現、及び／又は第２のカメラによって捕捉され、第１のビデオ・フィードによって包含されたシミュレータの部分とは異なるシミュレータの部分を包含する第２のライブ・カメラ・フィードを受信する。このケースでは、ステップ１４において、シミュレーション制御インタフェース、シミュレータの第２の部分の、コンピュータにより生成された表現、及び／又は第２のライブ・カメラ・フィードは、第１のビデオ・フィードに加えて、ビューワ・アプリケーション内で表示される。

【0082】

ビューワ・アプリケーションは、ビデオ・フィード又は任意の画像などの画像を表示するために構成されることが理解されるべきである。一実施例では、ビューワ・アプリケーションは、様々なグラフィック・ファイル・フォーマットを扱う能力を有する。一実施例では、ビューワ・アプリケーションは、色深度、表示解像度、及び色プロファイルなど、表示の特質に従って画像をレンダリングするために構成される。

【0083】

ステップ１６において、第２のコンピュータ・マシン上で稼働する第２のビデオ会議クライアントは、第１のコンピュータ・マシン上で稼働する第１のビデオ会議クライアントを通じて、ビューワ・アプリケーションへのアクセスを許可される。結果として、ビデオ・フィードは、テレコミュニケーション・ネットワークを介して、第１のビデオ会議クライアントによって第２のビデオ会議クライアントに送信される。結果として、第１のコンピュータ・マシンに接続された第１のディスプレイ・ユニット上で表示された同一の画像は、第２のコンピュータ・マシンに接続された第２のディスプレイ・ユニット上でリモートに表示され得、第三者は、ビデオ会議プラットフォームを使用する間、シミュレーション環境へのリモート可視性を有し得る。

【0084】

一実施例では、方法１０は更に、セキュア・パブリック・ネットワーク越しに、第１のコンピュータ上で稼働する第１のビデオ会議クライアントと第２のコンピュータ上で稼働する第２のビデオ会議クライアントとの間の接続を確立するステップを含む。

【0085】

一実施例では、第１の及び第２のビデオ会議クライアントは、ビデオ会議セッションに参加するコンピュータ・マシンの間でビデオ・フィードを少なくとも送信するために構成された既製のビデオ会議プラットフォームの一部である。例えば、既製のビデオ会議プラットフォームは、Ｔｅａｍｓ（登録商標）、Ｗｅｂｅｘ（登録商標）、又はＧｏｏｇｌｅ Ｍｅｅｔ（登録商標）などであり得る。

【0086】

シミュレータに対するカメラのポジション及び方位は、シミュレータの所望のビューに応じて選ばれることが理解されるべきである。上記説明されたように、カメラは、シミュレータ内に位置し得る。このケースでは、カメラのポジション及び方位は、少なくともパイロット及びコクピットの部分を捕捉するように選ばれ得る。別の実例では、カメラのポジション及び方位は、コクピットの所与の区域又は部分のみを捕捉するように選ばれ得る。更なる実施例では、カメラは、第三者がシミュレータの動きを見ることを可能にするために、シミュレータの外側を捕捉するようにシミュレータの外側に位置付けられ得る。

【0087】

一実施例では、カメラのポジション及び方位は、適時に固定される。別の実施例では、カメラのポジション及び／又は方位は、シミュレータの異なるビューが捕捉され得るにつれて、シミュレータに対して変化し得る。このケースでは、カメラのポジション及び／又は方位は、第１のコンピュータ・マシンによって制御され得る。

【0088】

上記説明は、シミュレータの画像を捕捉するための単一のカメラに言及しているが、シミュレータの画像の捕捉するために複数のカメラが使用され得ることが理解されるべきである。例えば、シミュレータの内部空間の異なるビューを捕捉するために、シミュレータ内に数個のカメラが据え付けられ得る。このケースでは、シミュレータ内に据え付けられた各々のカメラのポジション及び方位は、シミュレータの内部空間のそれぞれの所望のビューに応じて選ばれる。例えば、第１のカメラは、パイロット、コパイロット、及びコクピットの画像を捕捉するために位置付けられ及び方位付けられ得、第２のカメラは、コクピットの所与の部分の画像を捕捉するために位置付けられ及び方位付けられ得る。シミュレータの少なくとも外部部分の画像を捕捉するために、少なくとも１つの更なるカメラがシミュレータの外側に据え付けられ得る。

【0089】

シミュレータの数個のビューが数個のカメラによって捕捉されるとき、ステップ１２は、第１のコンピュータ・マシンにおいて、プライベート・ネットワーク越しにカメラからビデオ・フィードを受信することを含む。一実施例では、ビューワ・アプリケーションは、受信されたビデオ・フィードのうちの所与の１つを選択し、第１のコンピュータ・マシンに接続された第１のディスプレイ・ユニット上での表示のための選択されたビデオ・フィードを提供するために構成される。別の実施例では、ビューワ・アプリケーションは、受信されたビデオ・フィードの少なくとも２つを選択し、２つの選択されたビデオ・フィードを含む画像を生成し、第１のコンピュータ・マシンに接続された第１のディスプレイ・ユニット上での表示のための生成された画像を提供するために構成される。例えば、シミュレータの内部部分を包含する第１のビデオ・フィード及びシミュレータの外部部分を包含する第２のビデオ・フィードは、ステップ１２において受信され得る。次いで、ステップ１４において、ビューワ・アプリケーションは、第１のビデオ・フィードからの第１の画像及び第２のビデオ・フィードからの第２の画像を含む画像を生成する。例えば、生成された画像の半分は、第１のビデオ・フィードの画像に対応し得ると共に、生成された画像の他の半分は、第２のビデオ・フィードの画像に対応し得る。例えば、２つのビデオ・フィードからの画像は、生成された画像内で並んで位置付けられ得、又はその他の最上部上で１つが位置付けられ得る、などである。ビューワ・アプリケーションによって生成された画像は次いで、第１のディスプレイ・ユニットに送信されて、その上で表示されることになる。更に、第１のコンピュータ・マシンに接続された第１のディスプレイ・ユニット上での生成された画像の表示と同時に、生成された画像は、テレコミュニケーション・ネットワークを介して、第１のビデオ会議クライアントによって第２のビデオ会議クライアントに送信され、その結果、第１のコンピュータ・マシンに接続された第１のディスプレイ・ユニット上での生成された画像の表示及び第２のコンピュータ・マシンに接続された第２のディスプレイ・ユニット上での同一の生成された画像の表示は、実質的に同時に発生する。

【0090】

例えば、ビューワ・アプリケーションによって３つのビデオ・フィードから生成された画像は、それぞれのビデオ・フィードが統合された３つの区域を含み得る。生成された画像の左上区域は、第１のカメラによって捕捉され、パイロット、コパイロット、及び機器、及び制御パネルを包含する第１のビデオ・フィードを表示するために使用され得る。生成された画像の右上区域は、第２のカメラによって捕捉され、機器の部分及び制御パネルを包含する第２のビデオ・フィードを表示するために使用され得る。生成された画像の左下区域は、第３のカメラによって捕捉され、シミュレーション画像、例えば、実のエアクラフトのウインドウを通じて見られるようにエアクラフトの外部環境の、コンピュータにより生成された画像を表示するために、シミュレータ内に存在するディスプレイ・ユニットを包含する第３のビデオ・フィードを表示するために使用され得る。

【0091】

図２は、シミュレータのコクピット内で複数のカメラ５１を取り外し可能に据え付けるために使用され得る例示的なポール５０を例示する。ポール５０は、コクピットのフロアに接するように適合された第１の端とコクピットのシーリングに接するように適合された第２の端との間で縦方向に延びる伸長体５２を含む。伸長体５２の長さは、異なる高さを有するコクピットを収容するように調節可能である。例えば、伸長体５２は、伸縮式であり得る。一実施例では、コクピットへのポール５０の確保を改善するために、伸長体５２の第１の及び第２の端においてそれぞれのラバー・パッドが搭載される。伸長体５２は、任意の適切な形状を有し得ることが理解されるべきである。例えば、伸長体５２は、円形断面、正方形断面などを有し得る。

【0092】

ポール５０は更に、複数のカメラ保持デバイス５４を含み、複数のカメラ保持デバイス５４の各々は、伸長体５２の長さに沿ったそれぞれのポジションにおいて搭載可能であり、それに確保されたカメラ５１のそれぞれ１つを有するために構成される。各々のカメラ保持デバイス５４は、ポール５０に搭載可能なクランプ６０と、クランプ６０に回転可能に確保された第１の端６４とカメラ５１のそれぞれ１つに回転可能に確保可能な第２の端６６との間で延びるアーム６２と、を含む。アーム６２の第２の端６６に搭載されると、カメラ５１のそれぞれ１つは次いで、アーム６２に対して回転可能である。一実施例では、クランプ６０は、伸長体５２に摺動可能に搭載される。

【0093】

一実施例では、クランプ６０に対する３つの回転軸の周りでアーム６２の回転をもたらすために、アーム６２の第１の端６４とクランプ６２との間で第１のボール・ジョイントが接続される。同様に、アーム６２にカメラを確保し、アーム６２に対する３つの回転軸の周りでカメラの回転をもたらすために、アーム６２の第２の端６６に第２のボール・ジョイントが存在する。

【0094】

コクピットにポール５０を搭載するために、伸長体５２の長さは、コクピットの高さに、すなわち、コクピットのシーリングとフロアとの間の距離に対応するように調節される。ポール５０は次いで、フロア上の所望のポジションにおいてその第１の端がコクピットのフロアに接し、その第２の端がコクピットのシーリングに接するように位置付けられる。ポール５０の長さがコクピットのフロアとシーリングとの間の距離に実質的に等しいので、ポール５０とコクピットのフロア及びシーリングとの間に圧縮力が存在し、それによってポール５０をコクピットに確保することが可能になる。ポール５０は実質的に、コクピットに確保されるときに垂直に延びることが理解されるべきである。

【0095】

ポール５０がフロア上の所望のポジションにおいてコクピットに確保されると、カメラ保持デバイス５４の各々は、伸長体５２に沿ったそれぞれの所望の縦方向のポジションに位置付けられる。所望の縦方向ポジションにあると、伸長体５２にカメラ保持デバイス５４のそれぞれ１つを固定して確保するために、クランプ６０が使用される。カメラ５１のそれぞれ１つは次いで、各々のカメラ保持デバイス５４に確保される。代わりに、カメラ５１は、それらの所望の縦方向のポジションにカメラ保持デバイス５４を位置付ける前に、カメラ保持デバイス５４に確保され得る。

【0096】

次いで、カメラ５１の各々は、その対応するアーム６２に対してそれぞれのカメラ５１の各々を回転させ、及び／又はその対応するクランプ６０に対してその対応するアーム６２を回転させることによって、コクピットのそれぞれの所望のビューの画像を捕捉するように方位付けられる。

【0097】

伸長体５２が円筒形状を有する実施例では、クランプ６０は更に、伸長体５２の縦方向軸の周りで回転可能である。このケースでは、カメラ５１のそれぞれ１つを適切に方位付けるために、伸長体にクランプを確保する前に、伸長体５２の円周に沿った所望の径方向ポジションにクランプ６０を位置付けることができる。

【0098】

ポール５０は、カメラ５１によるコクピットの所望のビューの捕捉を可能にする、任意の適切なポジションにおいてコクピット内で取り外し可能に確保され得ることが理解されるべきである。一実施例では、ポール５０は、パイロット及びコパイロットが、それらのそれぞれのシートにアクセスすること、及び／又は緊急のケースにおいてコクピットを容易に離れることを可能にする、コクピット内の適切なポジションにおいて確保される。

【0099】

一実施例では、ポール５０は、コクピットのシミュレートされたエリア内で確保される。例えば、ポール５０は、パイロット及びコパイロットのシートの間など、コクピットの中央台座の前方に確保され得る。別の実例では、ポール５０は、中央台座に対向しながら、パイロット及びコパイロットシートの後部に確保される。

【0100】

一実施例では、ポール５０は、コクピット内のポジションに搭載され、その結果、ポール５０に搭載されたカメラ５１の各々と撮像されることになるコクピットのそのそれぞれの部分との間の距離は、約１２１．９２ｃｍ（４フィート）～約１８５．０４ｃｍ（６フィート）から構成される。

【0101】

カメラ保持デバイス５４の数、したがって、カメラ５１の数は、ポール５０がカメラ保持デバイス５４のうちの少なくとも１つを含む限り可変であり得ることが理解されるべきである。一実施例では、ポール５０は、カメラ保持デバイス５４のうちの少なくとも３つを含む。このケースでは、カメラ保持デバイス５４の第１のものは、コクピットの中央台座を包含する第１のビデオ・フィードを提供するために、カメラ５１のうちの１つがそれに搭載されるように構成され得る。カメラ保持デバイス５４の第２のものは、オーバヘッド機器パネルを包含する第２のビデオ・フィードを提供するために、カメラ５１のうちの１つがそれに搭載されるように構成され得る。カメラ保持デバイス５４の第３のものは、パイロット機器パネルを包含する第３のビデオ・フィードを提供するために、カメラ５１のうちの１つがそれに搭載されるように構成され得る。コパイロット機器パネル、パイロットのシートにいるときのパイロット、コパイロットのシートにいるときのコパイロット、ディスプレイ・ユニットなどを包含するビデオ・フィードなど、コクピットの他の部分のビデオ・フィードをカメラ５１の追加の１つが提供するように、カメラ保持デバイス５４の追加の１つが設けられ得る。

【0102】

いくつかの実施例では、方法１０は更に、インストラクタ操作ステーションのインタフェースなど、シミュレータのシミュレーション制御インタフェースへのリモート・アクセスをもたらす。オペレーティング・システムのシミュレーション制御インタフェースは、シミュレーションを生成する、シミュレーション・エンジンとデータを交換することをもたらす。例えば、シミュレーションのためのパラメータを設定及び表示するために、シミュレーション制御インタフェースが使用され得る。一実施例では、第１のコンピュータ・マシンは、プライベート・ネットワーク越しにシミュレーション・エンジンと通信しており、シミュレーション・エンジンは、ビューワ・アプリケーションにシミュレーション制御インタフェースを直接送信する。ビューワ・アプリケーションは、第１のディスプレイ・ユニット上でビデオ・フィード及びシミュレーション制御インタフェースの両方を含む画像を表示するように、シミュレーション制御インタフェースをカメラから受信されたビデオ・フィードと組み合わせる。例えば、シミュレーション制御インタフェース及びビデオ・フィードをそれぞれ表示するために、生成された画像の２つの並んだ区域が使用され得る。

【0103】

上記説明されたように、オペレーティング・システムのインタフェースがビューワ・アプリケーションによってシミュレーション・エンジンから受信され得ると共に、他の実施例が可能である。例えば、シミュレーション制御インタフェースは、第１のディスプレイ・ユニットとは別個の更なるディスプレイ・ユニット上で、例えば、シミュレータ内のインストラクタ・ステーション上に備えられるディスプレイ・ユニット上で表示され得、カメラは、制御インタフェースを包含するビデオ・フィードを提供するように、更なるディスプレイ・ユニットの画像を捕捉する。シミュレーション制御インタフェースを包含するビデオ・フィードは次いで、ビューワ・アプリケーションに送信され、ビューワ・アプリケーションは、シミュレーション制御インタフェースを包含するビデオ・フィード及びシミュレータの部分を包含するビデオ・フィードを使用して画像を生成する。

【0104】

一実施例では、シミュレーション・エンジンによって生成された画像も、第１のコンピュータ・マシンに送信され得、その結果、ビューワ・アプリケーションは、少なくとも１つのビデオ・フィードと、任意選択で、オペレーティング・システムのインタフェースとそれらを組み合わせる。

【0105】

一実施例では、第１のコンピュータ・マシンは、プライベート・ネットワーク越しに、データ分析プラットフォームをホストするサーバに接続される。データ分析プラットフォームは、ユーザが所与のビューに対して費やした時間量、第２のディスプレイ・ユニット上で表示された画像に対するユーザ・クリックの位置など、第２のコンピュータ・マシンとのユーザの履歴的対話を記憶する。このケースでは、方法１０は更に、データ分析プラットフォームのインタフェースへのリモート・アクセスをもたらす。

【0106】

この実施例では、第１のコンピュータ・マシンは、ビューワ・アプリケーションに、データ分析プラットフォームのインタフェースを直接送信する。ビューワ・アプリケーションは、第１のディスプレイ・ユニット上でビデオ・フィード及びデータ分析プラットフォームのインタフェースの両方を含む画像を表示するように、データ分析プラットフォームのインタフェースを、カメラから受信されたビデオ・フィードと組み合わせる。

【0107】

上記説明されたように、データ分析プラットフォームのインタフェースがビューワ・アプリケーションによって、データ分析プラットフォームをホストするサーバから直接受信され得ると共に、他の実施例が可能である。例えば、データ分析プラットフォームのインタフェースは、第１のディスプレイ・ユニットとは別個の更なるディスプレイ・ユニット上で表示され得、更なるカメラは、データ分析プラットフォームのインタフェースを包含するビデオ・フィードを提供するように、更なるディスプレイ・ユニットの画像を捕捉し得る。データ分析プラットフォームのインタフェースを包含するビデオ・フィードは次いで、ビューワ・アプリケーションに送信され、ビューワ・アプリケーションは、データ分析プラットフォームのインタフェースを包含するビデオ・フィード及びシミュレータの部分を包含するビデオ・フィードを使用して画像を生成する。

【0108】

図３は、ビューワ・アプリケーションによって実行された６個の異なる画像又はビデオ・フィードの組合せから結果として生じる例示的な画像を例示する。例示される画像は、６個の対等の区域に分割され、各々の区域は、それぞれの画像又はビデオ・フィードをその上で表示するために使用される。右上で、インストラクタ・オペレーティング・システムのインタフェースの画像が表示される。真ん中上で、シミュレータの上部分を包含するビデオ・フィードが表示される。右上で、エアクラフトの外部環境のシミュレートされた画像が表示される。左下で、シミュレータの外部部分を包含するビデオ・フィードが表示される。真ん中下で、コクピットの第１の部分を包含するビデオ・フィードが表示される。右下で、コクピットの第２の部分を包含するビデオ・フィードが表示される。

【0109】

図３に例示される画像は、テレコミュニケーション・ネットワーク越しに、第１のビデオ会議クライアントによって第２のビデオ会議クライアントに送信される。図４は、第２のコンピュータ・マシンの第２のディスプレイ・ユニット上で表示された第２のビデオ会議クライアントの例示的なインタフェースを例示する。例示されるインタフェースは、ビューワ・アプリケーションによって生成され、第２のビデオ会議クライアントに送信された画像を含み、更に、画像の下にあるビデオ会議セッションへのそれぞれの参加者に各々が対応するアイコンを含む。

【0110】

例えば、ビューワ・アプリケーションによって生成された画像は、７個のビデオ・フィード及びシミュレートされた画像を組み合わせ得る。ビューワ・アプリケーションによって生成された画像は、４個の区域に分割され得る。シミュレータのそれぞれの部分を各々が包含する６個の異なるビデオ・フィードを表示するために、左上区域が使用され得る。コマンド及び制御のパネルの部分を包含するビデオ・フィードを表示するために、画像の右上区域が使用され得る。オーバレイされたエアクラフト・ポジションとのシミュレートされたマップを表示するために、画像の右下が使用され得る。左上に表示された６個の画像のうちの１つの拡大されたバージョンを表示するために、画像の左下が使用され得る。例えば、左上に表示された６個のビデオ・フィードのうちの１つに対してダブル・クリックすることによって、選択されたビデオ・フィードが左下区域上で拡大及び表示される。

【0111】

一実施例では、方法１０は更に、テレコミュニケーション・ネットワーク越しに、第１のビデオ会議クライアントと第２のビデオ会議クライアントとの間で音声信号を送信することを含む。一実施例では、少なくとも１つのマイクロフォン及び／又は少なくとも１つのスピーカは、音を捕捉し、及び／又は音声信号を放出するために、シミュレータ内に存在し得る。マイクロフォン及びスピーカは、第１のコンピュータ・マシンと通信している。例えば、マイクロフォン及びスピーカは、プライベート・ネットワーク越しに、第１のコンピュータ・マシンに接続され得る。別の実例では、第１のコンピュータ・マシンとマイクロフォン及び／又はスピーカとの間でＢｌｕｅｔｏｏｔｈ（登録商標）通信が使用され得る。

【0112】

マイクロフォンがシミュレータ内に位置するとき、マイクロフォンは、シミュレータ内で放出された音を捕捉し、音声フィードは、マイクロフォンによって第１のコンピュータ・マシンに送信される。受信された音声フィードは次いで、ビデオ会議セッション中にテレコミュニケーション・ネットワーク越しに、第１のビデオ会議クライアントによって第２のビデオ会議クライアントに送信される。第三者がシミュレータ内で生成された音を聞くことができるように、受信された音声フィードを再生するために、第２のコンピュータ・マシンに少なくとも１つのスピーカが設けられることが理解されるべきである。

【0113】

同様に、第２のコンピュータ・マシンには、音声を捕捉するためのマイクロフォンが設けられ得、対応する音声フィードは次いで、テレコミュニケーション・ネットワークを介して、第２のビデオ会議クライアントによって第１のビデオ会議クライアントに送信される。第１のコンピュータ・マシンは次いで、第２のコンピュータ・マシンから音声フィードを受信し、シミュレータに存在するスピーカに音声フィードを送信する。

【0114】

したがって、シミュレータ内に存在するパイロット及び／又はコパイロットとビデオ会議セッションを介してリモートに位置する第三者との間で、音声通信が実質的にリアルタイムで確立され得る。第三者は、シミュレータ内で雑音を聞くことに加え、パイロットとコパイロットとの間のあらゆる議論を聞く間、パイロット及びコパイロットにボーカル命令又はコメントを送信し得る。

【0115】

一実施例では、パイロット及びコパイロットには各々、第１のコンピュータ・マシンに接続されたそれぞれのヘッドセットが与えられる。別の実施例では、少なくとも１つのマイクロフォンは、シミュレータ内で音声を捕捉するように、パイロットとコパイロットとの間など、シミュレータの内部部分内で確保され得、少なくとも１つのスピーカは、シミュレータの内部部分内で確保され得る。

【0116】

一実施例では、本方法１０によって、第三者とパイロットとの間の視覚通信がもたらされ得る。例えば、第三者は、第２のコンピュータ・デバイスに、テキスト、画像、図など、コマンド／要求／命令を入力し得る。コマンドは、テレコミュニケーション・ネットワーク越しに、第２のビデオ会議クライアントによって第１のビデオ会議クライアントに送信される。コマンドを受信すると、第１のコンピュータ・マシンは、パイロット及び／又はコパイロットにコマンドを通知するように、シミュレータ内に位置するディスプレイ・ユニットに、受信されたコマンドを送信する。例えば、コマンドは、シミュレータの機器及び制御パネルに含まれるディスプレイ・ユニット上で表示され得る。別の実施例では、ディスプレイ・ユニットは、パイロット及び／又はコパイロットに通知するための、シミュレータ内でコマンドを投影するために構成されたプロジェクタを含み得る。

【0117】

一実施例では、第１のコンピュータ・マシン上で稼働するビューワ・アプリケーションは、ビデオ会議プラットフォームを介して第２のコンピュータ・マシンによってリモートに制御され得る。このケースでは、方法１０は更に、第１のビデオ会議クライアントを介して、ビューワ・アプリケーションに対する第２のビデオ会議クライアント制御を許可するステップを含む。このケースでは、第三者は、第２のビデオ会議クライアント内でコマンドを入れ得る。そのように行って、第三者は、例えば、シミュレータのインストラクタ・オペレータ・ステーションのインタフェースと対話し得る。入力が第２のコンピュータ・マシンの第２のビデオ会議クライアントに入れられるとき、入力は、テレコミュニケーション・ネットワーク越しに、第２のビデオ会議クライアントによって第１のビデオ会議クライアントに送信される。入力は次いで、コマンドを実行するために構成されたビューワ・アプリケーションによって受信される。例えば、それがマウス・クリックを検出するとき、第２のビデオ会議クライアントは、第２のビデオ会議クライアントによって表示された画像内でカーソルのポジションを決定し得る。第２のビデオ会議クライアントは次いで、第１のビデオ会議クライアントにカーソル・ポジションを送信し、第１のビデオ会議クライアントは、ビューワ・アプリケーションに、受信されたカーソル・ポジションを送信する。ビューワ・アプリケーションは、ビューワ・アプリケーションによって生成された画像内の同一のポジションにおけるマウス・クリックとして、受信されたカーソルを解釈する。例えば、カーソル・ポジションがインストラクタ・オペレータ・ステーションのインタフェース上のボタンに対応する場合、ビューワは、ボタンを活性化し、すなわち、それは、シミュレーション・エンジンに、識別されたボタンが活性化されるべきであることを示すコマンドを送信する。第三者は、データ分析プラットフォームのインタフェースと対話し得る。

【0118】

第１の及び第２のビデオ会議クライアントが既製のビデオ会議プラットフォームの一部である一実施例では、ビューワ・アプリケーションに対する第２のビデオ会議クライアント制御を許可するために、「Ｇｉｖｅ ｃｏｎｔｒｏｌ」及び「Ｔａｋｅ ｃｏｎｔｒｏｌ」などの既存の機能が使用され得る。次いで、第２のビデオ会議クライアントに、オペレーティング・システムのインタフェース及び／又はデータ分析プラットフォームのインタフェースの制御を許可することができる。

【0119】

上記説明された方法１０は、シミュレーション環境へのリモート可視性をもたらすシステムとして具現化され、システムは、少なくとも１つのプロセッサと、プロセッサに動作可能に接続された非一時的記憶媒体とを含み、非一時的記憶媒体は、コンピュータ可読命令を含み、プロセッサは、コンピュータ可読命令を実行すると、方法１０のステップを実行するために構成されることが理解されるべきである。

【0120】

上記説明された方法１０は、シミュレーション環境へのリモート可視性をもたらすコンピュータ・プログラム製品として具現化され得、コンピュータ・プログラム製品は、プロセッサによって実行されるとき、方法１０の方法ステップを実行する、コンピュータ実行可能命令をそこに記憶したコンピュータ可読メモリを含むことも理解されるべきである。

【0121】

図５は、シミュレーション環境へのリモート可視性をもたらすシステム１００の一実施例を例示する。システム１００は、方法１０を実行するために使用され得る。

【0122】

システム１００は、シミュレーション環境又はシミュレータ１０２、プライベート位置１０２、及びリモート位置１０４を含む。シミュレータ１０２は、シミュレータ１０２のユーザがシミュレーションを実行するように対話する少なくとも機器及び制御（図示せず）と、機器及び制御の少なくとも一部分など、シミュレータ１０２の少なくとも一部分の画像を捕捉するための少なくとも１つのカメラ１１０と、シミュレータ１０２内に位置付けられた少なくとも１つのスピーカ１１２と、シミュレータ１０２内に位置付けられた少なくとも１つのマイクロフォン１０４と、を含む。

【0123】

プライベート位置１０４は、第１のコンピュータ・マシン１２０と、それに接続された第１のディスプレイ・ユニット１２２と、を含む。ビューワ・アプリケーション及び第１のビデオ会議クライアントは、第１のコンピュータ・マシン上で同時に稼働している。第１のコンピュータ・マシン１２０は、シミュレータ１０２のカメラ１１０、スピーカ１１２、及びマイクロフォン１１４と通信している。カメラ１１０は、プライベート・ネットワークを介してコンピュータ・マシン１２０に接続される。一実施例では、スピーカ１１２及びマイクロフォン１１４も、プライベート・ネットワークを介してコンピュータ・マシン１２０に接続される。別の実施例では、Ｂｌｕｅｔｏｏｔｈ（登録商標）通信などの無線通信は、上記説明されたような第１のコンピュータ・マシン及びスピーカ１１２及びマイクロフォン１１４を接続するために使用され得る。このケースでは、プライベート位置１２２は、スピーカ１１２及びマイクロフォン１１４と第１のコンピュータ・マシン１２０との間の無線通信を可能にするように、シミュレータと近接近して位置することが理解されるべきである。

【0124】

リモート位置は、第２のコンピュータ・マシン１３０、第２のディスプレイ・ユニット１３２、スピーカ１３４、及びマイクロフォン１３６を含む。第２のビデオ会議クライアントは、第２のコンピュータ・マシン１３０上で稼働している。データは、テレコミュニケーション・ネットワーク１３８を介して、第１のコンピュータ・マシン１２０上で稼働する第１のビデオ会議クライアントと第２のコンピュータ・マシン１３０上で稼働する第２のビデオ会議クライアントとの間で交換され得る。第２のコンピュータ・マシン１３０は、プライベート・ネットワーク１２４へのアクセスを有さないことが理解されるべきである。

【0125】

上記説明されたように、第１のコンピュータ・マシン１２０上で稼働するビューワ・アプリケーションは、プライベート・ネットワーク１２４越しにカメラ１１０からビデオ・フィードを受信し、第１のディスプレイ・ユニット１２２上での表示のためのビデオ・フィードを提供する。更に、ビューワ・アプリケーションは、第１のビデオ会議クライアントにビデオ・フィードを送信し、第１のビデオ会議クライアントは、テレコミュニケーション・ネットワーク１３８越しに、第２のビデオ会議クライアントにビデオ・フィードを送信する。

【0126】

第２のコンピュータ・マシン１３０上で稼働する第２のビデオ会議クライアントは、第１のビデオ会議クライアントからビデオ・フィードを受信し、第２のディスプレイ・ユニット１３２上での表示のために、受信されたビデオ・フィードを送信する。

【0127】

スピーカ１１２及びマイクロフォン１１４、及びスピーカ１３４及びマイクロフォン１３６は、上記説明されたように、シミュレータ環境１０２とリモート位置１０６との間の音声通信を可能にする。マイクロフォン１１４によって捕捉された任意の音声信号は、第１の及び第２のビデオ会議クライアントを介して、テレコミュニケーション・ネットワーク１３８越しに、第１のコンピュータ・マシン１２１０に送信され、その後、第２のコンピュータ・マシン１３０に送信される。音声信号は次いで、スピーカ１３４によって再生される。同様に、マイクロフォン１３６によって捕捉された任意の音声信号は、テレコミュニケーション・ネットワーク１３８越しに、第１の及び第２のビデオ会議クライアントを介して、第１のコンピュータ・マシン１２０に送信される。第１のコンピュータ・マシン１２０は次いで、音声信号を再生するスピーカ１１２に、受信された音声信号を送信する。

【0128】

一実施例では、システム１００は更に、シミュレータ１０２のためのシミュレーションを生成するシミュレーション・エンジン１４０を含む。シミュレーション・エンジン１４０は、プライベート・ネットワーク１２４を介して第１のコンピュータ・マシン１２０と通信している。シミュレーション・エンジン１４０は、プライベート・ネットワーク１２４越しに、第１のコンピュータ・マシン１２０にオペレーティング・システムのインタフェースを送信するために構成される。第１のコンピュータ・マシン１２０上で稼働するビューワ・アプリケーションは、シミュレーション・エンジン１４０のインタフェースを受信し、カメラ１１０から受信されたビデオ・フィード及びオペレーティング・システムのインタフェースを含む画像を生成する。ビューワ・アプリケーションは次いで、第１のディスプレイ・ユニット１２２及び第１のビデオ会議クライアントに、その上で表示されることになる生成された画像を送信し、第１のビデオ会議クライアントは、上記説明されたように、第２のビデオ会議クライアントに画像を送信する。

【0129】

一実施例では、システム１００は更に、プライベート・ネットワークに接続されたサーバ１４２上でホストされたデータ分析プラットフォームを含む。サーバ１４２は、プライベート・ネットワーク１２４越しに、第１のコンピュータ・マシン１２０に、データ分析プラットフォームのインタフェースを送信するために構成される。第１のコンピュータ・マシン１２０上で稼働するビューワ・アプリケーションは、データ分析プラットフォームのインタフェースを受信し、カメラ１１０から受信されたビデオ・フィード及びデータ分析プラットフォームのインタフェースを含む画像を生成する。ビューワ・アプリケーションは次いで、第１のディスプレイ・ユニット１２２及び第１のビデオ会議クライアントに、その上で表示されることになる生成された画像を送信し、第１のビデオ会議クライアントは、上記説明されたように、第２のビデオ会議クライアントに画像を送信する。

【0130】

上記説明されたように、コマンド／要求は、テレコミュニケーション・ネットワーク１３８越しに、第１の及び第２のビデオ会議クライアントを介して、第２のコンピュータ・マシン１３０から第１のコンピュータ・マシン１２０に送信され得る。例えば、第２のコンピュータ・マシン１３０に入力された予め定義された入力は、コマンドとして認識され得、第１のコンピュータ・マシン１２０のビュー・アプリケーションに送信され得る。例えば、第２のコンピュータ・マシン１３０に接続されたユーザ・インタフェースの所与のキーのマウス・クリック又は作動は、コマンドとして識別され得る。このケースでは、第２のビデオ会議クライアントは、第１のビデオ会議クライアントにコマンドを送信し、ビューワ・アプリケーションは、コマンドを実行する。

【0131】

上記説明されたように、第１の及び第２のビデオ会議クライアントが既製のビデオ会議プラットフォームの一部である実施例では、ビューワ・アプリケーションの制御は、既製のビデオ会議プラットフォームの予め定義された機能を使用して、第２のコンピュータ・デバイスに対して許可され得る。

【0132】

図６は、エアクラフト・シミュレータの例示的なコクピットを例示する。シミュレータは：
パイロット機器パネル及びコパイロット機器パネルを含むメイン機器パネルと、
パイロット及びコパイロットのシートの間に位置付けられた中央台座と、
オーバヘッド機器パネルと、
シミュレーション画像をその上で表示するための少なくとも１つのディスプレイ・ユニットと、
パイロット及びコパイロットの前方に位置付けられた２つのフロント・カメラと、
パイロット及びコパイロットの背後に位置付けられ、パイロット機器パネル、コパイロット機器パネル、及びコクピットの全ビューを撮像するようにその各々が方位付けられた３つのリア・カメラと、
オーバヘッド機器パネルを撮像するために位置付けられ及び方位付けられた上向きカメラと、
中央台座を撮像するために位置付けられ及び方位付けられた下向きカメラと、
シミュレータの外部部分を撮像するための外部カメラと、
コクピット内の画像を表示するための、パイロット及びコパイロットの背後に位置付けられた２つのプロジェクタと、
メイン機器パネルの反対側にその各々が位置付けられた２つのマイクロフォンと、
台座上に位置付けられた中央マイクロフォンと、
メイン機器パネルの反対側にその各々が位置付けられた２つのスピーカと、
台座上に位置付けられた中央スピーカとを含む。

【0133】

カメラ、マイクロフォン及びスピーカ、及びプロジェクタの全ては、第１のコンピュータ・マシンと通信している。カメラによって捕捉されたビデオ・フィードは、受信されたビデオ・フィードを組み合わせた画像を生成するビューワ・アプリケーションによって受信され、生成された画像は、第１のビデオ会議クライアントによって第２のビデオ会議クライアントに、及び第１のディスプレイ・ユニットに送信される。マイクロフォンから受信された音声フィードも、第１のビデオ会議クライアントによって第２のビデオ会議クライアントに送信される。第１のビデオ会議クライアントによって第２のビデオ会議クライアントから受信された任意の音声フィードは、スピーカに送信されて再生されることになる。第１のビデオ会議クライアントによって第２のビデオ会議クライアントから受信されたテキスト又は画像などの任意の視覚命令は、２つのプロジェクタのうちの少なくとも１つに送信されて、コクピット内で表示されることになる。以下で更に詳細に説明されるように、特定の機器を指し示すように、異なる機器パネル上で画像を表示するために、プロジェクタが使用され得る。

【0134】

一実施例では、パイロット及びコパイロットには各々、第１のコンピュータ・マシンに接続されたヘッドセットが与えられ得る。このケースでは、上記説明されたスピーカ及びマイクロフォンが省略され得る。

【0135】

図６に例示されたシミュレータの構成要素の一部が省略され得、又は他の構成要素が追加され得ることが理解されるべきである。同様に、構成要素のポジション及び方位は、例示的であるにすぎないことが理解されるべきである。

【0136】

図７は、第２のビデオ会議クライアントによって生成された例示的な視覚インタフェースを例示する。このインタフェースを使用して、第２のコンピュータ・マシンのユーザは、ユーザが見ることを要望するインタフェースのビデオ・フィード及び画像を選択し得る。視覚インタフェースの左上において、ユーザは、表示された画像のレイアウトを選択し得る。例えば、ユーザは、単一のビデオ・フィード若しくはインタフェース画像、並んで位置する２つの異なるビデオ・フィード若しくはインタフェース画像、４個のビデオ・フィード若しくはインタフェース画像、又は６個のビデオ・フィード若しくはインタフェース画像を表示することを選択し得る。

【0137】

最上部制御バーは、どのビデオ・フィード及びインタフェース画像が利用可能であるかを示すボックスを含む。本実例では、５個の異なるビデオ・フィード及び４個の異なるインタフェース画像が利用可能である。例示される実例では、レイアウトが４個のウインドウを含むので、ユーザは、それぞれのウインドウに各々が表示されることになる利用可能なビデオ・フィード及びインタフェース画像から４個のアイテムを選択し得る。

【0138】

図８は、４個のディスプレイ・ユニットが第２のコンピュータ・マシンに接続されるときの例示的なセットアップを例示する。この実施例では、ディスプレイ・ユニットごとに、第２のビデオ会議クライアントによって同一の視覚インタフェースが設けられる。ユーザは、異なるディスプレイ・ユニットに対して異なるレイアウトを選択し得る。例示される実施例では、３つのディスプレイ・ユニットは、単一のビデオ・フィード又は単一のインタフェースを各々が表示する単一のウインドウを含むインタフェースを表示すると共に、第４のディスプレイ・ユニットは、４個の異なるビデオ・フィード又はインタフェースをそこに表示する４個のウインドウを含むインタフェースを表示する。

【0139】

上記方法及びシステムは、飛行シミュレータ又はエアクラフト・シミュレータのコンテキストにおいて説明されると共に、他のタイプのシミュレータのために使用され得ることが理解されるべきである。

【0140】

統合されたカメラ、マイクロフォン、及びスピーカがシミュレータに既に設けられている実施例では、既に存在するカメラ、マイクロフォン、及びスピーカは、本技術を実装するために使用され得る。

【0141】

一実施例では、シミュレータの少なくとも一部分を撮像するために使用されるカメラは、捕捉された画像のストリーミングに適合するインターネット・プロトコル（ＩＰ）カメラである。一実施例では、カメラは、低光感受性を有するカラー・カメラである。一実施例では、カメラには、その視野を調節するためのズームが設けられる。このケースでは、視野は、第１のコンピュータ・マシン又は第２のコンピュータ・マシンから制御され得る。一実施例では、カメラは、それが３Ｇへのビュッフェ・アップと共に移動しないように、搭載できる。一実施例では、カメラは、１０８０ピクセル及び３０フレーム毎秒の最小解像度をサポートし、並びに／又はＲＴＳＰ（ストリーミング・プロトコル）及びＨ．２６４圧縮をサポートする。

【0142】

一実施例では、カメラは、Ｐａｎａｓｏｎｉｃ（登録商標）ＷＶ－Ｓ１１３１である。別の実施例では、カメラは、Ａｘｉｓカメラなどのミニチュア・カメラである。例えば、カメラは、９０デグリーよりも優れ、優良な低光特性などの広範囲の視野を有するペン・カメラ又はピンホール・カメラであり得る。そのようなミニチュア・カメラは、より大きなカメラが妨げになり、又は非常に侵入的である場合に使用され得る。

【0143】

一実施例では、カメラは、ビューを最大化すると共に、侵入性のレベルを最小化するように、各々のコクピットに特有である、カスタムメード又はカスタムアセンブルされたブラケット上に搭載される。それがミニチュア・カメラであるとき、カメラは、メイン機器パネル（ＭＩＰ）内、又はグレア・シールド制御パネル（ＧＣＰ）内のいずれかに搭載され得る。

【0144】

一実施例では、本システムの動作がシミュレータの全体動作に影響を与えることを防止するように、専用セグメントがプライベート・ネットワーク内で作成される。

【0145】

一実施例では、ワイド・エリア・ネットワーク（ＷＡＮ）越しにシミュレータと通信するために、仮想プライベート・ネットワーク（ＶＰＮ）が使用される。ＶＰＮは、良好な性能を保証するために、様々なネットワーク・ファイアウォール／ルータ／スイッチを通じたトンネリングを可能にする。標準ＶＰＮ工程を介して、パスワード保護がもたらされる。一実施例では、ローカル・エリア・ネットワーク（ＬＡＮ）上でシステムを稼働させるとき、暗号化又はＶＰＮが存在し得ない。

【0146】

一実施例では、カメラは、シミュレータ・ネットワークの専用セグメントにアクセスするよう、オンボード・ルータに接続される。第１のコンピュータ・マシンは、カメラからビデオ・フィードを受信するように、セグメントに接続する。

【0147】

一実施例では、第１のコンピュータ・マシンは、シミュレータと第２のコンピュータ・マシンとの間の双方向通信を管理するための、シミュレータ・ネットワーク及びインターネットへの同時アクセスを有する。第１のコンピュータ・マシンは、インターネットとシミュレータ・ネットワークとの間のブリッジとしての役割を果たし、ブリッジは、第２のコンピュータ・マシンが、シミュレータ・ネットワークへの直接アクセスを有することを防止する。第２のコンピュータ・マシンは、例えば、クライアント又は規制エンティティに属し得る。

【0148】

一実施例では、ビューワ・アプリケーションなどのアプリケーションは、第１のコンピュータ・マシンのプロセッサ上でローカルに稼働すると共に、第１のビデオ会議クライアントは、クラウド内で少なくとも一部分的に稼働し得る。別の実施例では、アプリケーションは、クラウド内で主に稼働し得る。

【0149】

一実施例では、第１のコンピュータ・マシンは、オンボードに位置し、それは、会議スピーカへの有線接続を有効にする。一実施例では、例えば、第１のコンピュータ・マシン及びシミュレータが同一の建物内に位置するときなど、第１のコンピュータ・マシンがシミュレータに隣接して位置するとき、又は第１のコンピュータ・マシン及びシミュレータが異なる建物内に位置するときなど、第１のコンピュータ・マシンがシミュレータからリモートに位置するとき、第１のコンピュータ・マシンをシミュレータと同一場所に設置することができる。

【0150】

第１の及び第２のコンピュータ・マシンは、少なくとも１つのプロセッサ、メモリ、及び通信手段が設けられた任意のデバイスであり得る。例えば、第１又は第２のコンピュータ・マシンは、ラップトップ、デスクトップ、タブレット、スマートフォンなどであり得る。

【0151】

一実施例では、上記説明されたシステム内での音声の管理は、３つの以下の態様：
１）エンジン音、外部の気流、空気力学ヒス、ギア及びフラップ展開などの機械音など、シミュレーションによって生じるコクピットの周囲音と、
２）例えば、航空交通制御と航空機乗組員との間の会話をシミュレートする無線通信と、
３）指導工程の当然ある部分である乗組員－インストラクタ通信と、を考慮に入れる。

【0152】

パイロット及び／又はコパイロットにヘッドセットが与えられる実施例では、パイロット又はコパイロットは、ヘッドセットを通じて通信及び相互通信を聞き、シミュレータ・サウンド・システムによって周囲音が生成される。パイロットの声は、ヘッドセット・マイクロフォンによって捕捉される。

【0153】

パイロット及び／又はコパイロットにヘッドセットが与えられる実施例では、エコー及び周囲雑音を取り除くために、デジタル信号処理システムに接続され得る追加のスピーカと共に、キー位置に特殊マイクロフォンが据え付けられる。シミュレートされたエアクラフト音は、シミュレータ・サウンド・システムによって生成される。

【0154】

一実施例では、以下の６個のビュー：
パイロット側メイン機器パネルと、
コパイロット側メイン機器パネルと、
中央台座と、
オーバヘッド・パネルと、
一次飛行ディスプレイのうちの１つのクローズアップと、
インストラクタがそれらの背後から前かがみになっているビューと同様の、２人のパイロットの間の肩の奥のビューとのそれぞれ１つを各々が捕捉するために、少なくとも６個の異なるカメラが使用される。そのようなビューは、機器、ウインドウ外視覚、及びパイロットを包含する全体的な広角度をもたらす。

【0155】

一実施例では、背後に向かって対向するメイン機器パネル内に邪魔にならないで搭載されたカメラは、パイロットの顔／反応のビューをもたらす。

【0156】

一実施例では、データ分析プラットフォームがクラウド内でホストされる。制限されたインターネット接続性によりインスタンス・シミュレータに適合させるようになど、視認するためのシミュレータに分析データをダウンロードすることができるか、又はクラウドから直接分析データを視認することができるかのいずれかである。

【0157】

以下では、シミュレータ内の関心の領域を指し示すように、少なくとも１つのプロジェクタをリモートに操作する方法及びシステムが説明される。一実施例では、上記説明された第三者などのユーザが、ビデオ会議プラットフォームを介してシミュレータ内の関心の領域を指し示すようにプロジェクタをリモートに操作することを可能にするために、上記説明されたシステム１００と共に、以下で説明される方法が使用され得る。

【0158】

以下で説明される方法及びシステムは、インストラクタがパイロット／コパイロットと共にシミュレータ内に物理的に存在するとき、インストラクタとパイロット／コパイロットとの間に存在する対話の一部を再現することを試みる。そのような訓練中に、インストラクタがシミュレータ内に物理的に存在するとき、インストラクタは通常、１つ又は複数の多機能ディスプレイ上でエアクラフト・システム動作及び／又はコンテンツの特定の態様を指し示すことが必要とされる。

【0159】

採用された慣習的な方法は、インストラクタが、動きシステムが備えられたエアクラフト・シミュレータのための安全性予防措置として締められたシート・ベルトにより座っているポジションからパイロット／コパイロット又はポイントに向かって、前に移動することを必要とする。しかしながら、パンデミック中など、何らかの事情下では、インストラクタが、例えば、汚染リスクを低減させるために、リモートに位置し、すなわち、シミュレータの外側に位置することが有利であり得る。

【0160】

図９は、シミュレータ又はシミュレーション環境内の関心の領域をリモートに指し示す方法１５０の一実施例を例示する。方法１５０は、少なくとも１つのプロセッサ、少なくとも１つのメモリ、及び通信インタフェースが設けられたコンピュータ・マシンによって実行されることが理解されるべきである。方法１５０は、シミュレータ内に存在しないインストラクタなどのユーザが、シミュレータ内の所与の関心の領域をリモートに指し示すことによって、パイロット又はコパイロットなどのシミュレータ内に位置する人間と視覚的に対話することを可能にする。以下で説明されるように、方法１５０は、セキュア・パブリック・ネットワーク越しに、ビデオ会議プラットフォームを介して実行され得る。

【0161】

ステップ１５２において、シミュレータの少なくとも一部分の画像は、リモートに位置するディスプレイ・ユニット上での表示のために、第１のコンピュータ・マシンによって提供される。画像は、コクピットの少なくとも一部分、機器及び制御の少なくとも一部分など、シミュレータの内部の少なくとも一部分を表す。

【0162】

一実施例では、画像は、シミュレータ内に据え付けられた少なくとも１つのカメラによって捕捉される。例えば、シミュレータの内部のビューを捕捉するために、シミュレータ内で移動可能な単一のカメラが使用され得る。別の実例では、シミュレータの内部のビューを捕捉するために、固定されたポジション及び／又は方位を有する単一のカメラが使用され得る。更なる実例では、固定されたポジション及び方位を各々が有する複数のカメラは、シミュレータ内に据え付けられ得る。ステップ１５０において表示のために提供された画像は、所与のカメラによって捕捉された画像に対応し得る。別の実施例では、画像は、複数のカメラによって捕捉された複数の画像の組合せから結果として生じ得る。このケースでは、方法１５０は更に、単一の画像を取得するように、異なるカメラから共に受信された複数の画像を組み合わせるステップを含む。

【0163】

別の実施例では、ステップ１５２において表示のために提供された画像は、シミュレータの内部の少なくとも一部分のシミュレートされた画像又はコンピュータにより生成された画像であり得る。一実施例では、画像は、シミュレータの少なくとも一部分の三次元（３Ｄ）画像であり得る。このケースでは、方法１５０は更に、シミュレータの内部の少なくとも一部分の画像を生成するステップを含む。

【0164】

画像は、通信ネットワーク越しに、第１のコンピュータ・マシンによって、シミュレータの外側に位置する第２の又はリモート・コンピュータ・マシンに送信される。例えば、通信ネットワークは、セキュア・プライベート・ネットワークであり得る。別の実例では、通信ネットワークは、インターネットなどのパブリック・ネットワークであり得る。リモート・コンピュータ・マシンは、リモート・コンピュータ・マシンにコマンドを入力するためのユーザ・インタフェース及びシミュレータの受信された画像をその上で表示するためのディスプレイ・ユニットに接続される。

【0165】

シミュレータの受信された画像が表示されると、リモート・コンピュータ・マシンのユーザは、ディスプレイ・ユニットがタッチスクリーンを含むときなど、マウス、キーボード、スタイラスなどの任意の適切なユーザ・インタフェースを使用して、表示された画像の少なくとも１つのポイントを選択し得る。

【0166】

一実施例では、単一のポイントがシミュレータの表示された画像上で選択される。別の実施例では、複数のポイントがユーザによって選択される。複数のポイントは、離散的であり得、すなわち、選択されたポイントは、相互から間隔を空けられ得る。代わりに、ポイントは、線、円、正方形などの連続した幾何学的形状を形成するように隣接し得る。

【0167】

画像上の少なくとも１つのポイントを選択する任意の適切な方法が使用され得ることが理解されるべきである。例えば、所望のポイントにわたってカーソルを移動させるためにマウスが使用され得、クリック・イベントを生じさせ、所望のポイントを選択するために、マウス上での右又は左クリックが使用され得、又は所望のポイントを選択するために、キーボードのキーが押下され得る。別の実例では、所望のポイントにわたってカーソルを移動させるために、マウスを移動させる間、マウス上での右又は左クリックによって複数のポイントが選択され得る。更なる実例では、リモート・コンピュータ・マシンのユーザは、１つのポイント又は複数のポイントを選択するために、表示された画像上を引き動かし得る。

【0168】

表示された画像内の選択されたポイントの座標は、リモート・コンピュータ・マシンによって捕捉され、通信ネットワーク越しに第１のコンピュータ・マシンに送信される。

【0169】

リモートに表示された画像が２Ｄ画像であるとき、捕捉された座標は、２Ｄ座標であり、リモートに表示された画像が３Ｄ画像であるとき、捕捉された座標は、３Ｄ座標であることが理解されるべきである。

【0170】

ステップ１５４において、リモートに表示された画像内の選択されたポイントのポジションが受信され、すなわち、選択されたポイントの座標は、通信ネットワーク越しに、第１のコンピュータ・マシンによって受信される。

【0171】

一実施例では、第１の及びリモート・コンピュータ・マシンは、パブリック・セキュア・ネットワークを介して接続され、第１のコンピュータ・マシンに第１のビデオ会議クライアントが設けられると共に、第２のコンピュータ・マシンに第２のビデオ会議クライアントが設けられる。このケースでは、選択されたポイントの座標は、第２のビデオ会議クライアントを通じて、第１のコンピュータ・マシンに送信され、第１のビデオ会議クライアントを通じて、第１のコンピュータ・マシンによって受信される。

【0172】

ステップ１５６において、シミュレータ上に位置する関心の領域は、選択されたポイントの受信された座標に基づいて識別される。例えば、リモート・コンピュータ・マシンのユーザが画像上に表示された所与のボタン又はアクチュエータを選択した場合、ステップ１５６は、選択されたボタン又はアクチュエータが含まれる、シミュレータ上の関心の領域を識別することにある。

【0173】

一実施例では、関心の領域の識別は、リモートに表示された画像の座標系とシミュレータの座標系との間のマッピングに基づいて実行される。

【0174】

一実施例では、関心の領域は、予め定義された形状及び／又は寸法を有する。このケースでは、ステップ１５６は、受信された座標に基づいて、シミュレータ上の関心の領域のポジションを識別することを含む。例えば、単一のポイントの座標がステップ１５４において受信される場合、ステップ１５６は、単一の選択されたポイントの受信された座標に基づいて、シミュレータ上の関心の領域のポジションを識別することと、関心の領域に、予め定義された形状及び予め定義された寸法を割り当てることとを含む。例えば、関心の領域は、予め定義された辺長を有する正方形の形状を有し得る。

【0175】

１つよりも多いポイントの座標が受信される実施例では、関心の領域の相対サイズは、選択されたポイントによって形成された幾何学的オブジェクトの相対サイズよりも大きくなり得る。例えば、選択されたポイントが所与の直径を有する円を形成する場合、関心の領域も、円形状を有し得、円形の関心の領域の直径は、選択されたポイントによって形成された円の直径よりも大きくなり得る。

【0176】

１つよりも多い選択されたポイントの座標がステップ１５４において受信される実施例では、関心の領域についてのポジションは、選択されたポイントのうちの少なくとも１つの座標に基づいて識別され、関心の領域の形状及び寸法は、選択されたポイントの座標に基づいて決定され得る。例えば、第２のコンピュータ・マシンのユーザがポイントを選択するために図を描く場合、関心の領域は、図の形状と同一の形状がもたらされ、関心の領域の寸法は、図の寸法に基づいて選ばれ得ると共に、シミュレータ内の関心の領域のポジションは、表示された画像内の図のポジションに基づいて、すなわち、表示された画像内の図の少なくとも１つのポイントの座標に基づいて識別される。

【0177】

一実施例では、第１の座標系は、シミュレータの内部に割り当てられ、第２の座標系は、表示された画像に割り当てられる。関心の領域のポジションは、受信された座標、及び第１の座標系と第２の座標系との間の伝達関数など、第１の座標系と第２の座標系との間のマッピングを使用して決定される。座標系の間のマッピングは、表示された画像内の所与のポイントをシミュレータ内のそれぞれのポイントにマッピングすること、すなわち、第２の座標系内の所与のポイントの座標に基づいて、第１の座標系内のそれぞれのポイントの座標を決定することを可能にする。

【0178】

一実施例では、方法は更に、第１の座標系と第２の座標系との間のマッピングを決定する較正のステップを含む。

【0179】

シミュレータ内の関心の領域のポジションがステップ１５６において識別されると、シミュレータの関心の領域は、ステップ１５８において視覚的に区別され、例えば、関心の領域が照射される。関心の領域を視覚的に区別する任意の適切な方法が使用され得ることが理解されるべきである。シミュレータには、光源を制御する第１のコンピュータ・マシンに接続された少なくとも１つの光源が設けられ得る。例えば、シミュレータには、単一の光源が設けられ得、単一の光源のポジション及び／又は方位は、シミュレータ上の関心の領域を照射するように調節される。別の実施例では、シミュレータには、複数の光源が設けられ得、方法は更に、関心の領域のポジションに基づいて、関心の領域を照射するように、操作されることになる所与の光源を選択するステップを含む。シミュレータに複数の光源が設けられる実施例では、光源のポジション及び／又は方位が固定され得る。代わりに、少なくとも１つの光源のポジション及び／又は方位は、調節可能であり得る。

【0180】

方法１５０を使用する間、インストラクタなどのユーザは、シミュレータからリモートに位置し得ると共に、パイロット又はコパイロットなどのシミュレータのユーザと視覚的に対話する能力をなおも有する。例えば、シミュレータの表示された画像上の所与の位置においてカーソルを向けることによって、シミュレータ内の対応する位置が照射され、それによって、インストラクタが、シミュレーション中に活性化されることになる制御、コマンド、ボタンなど、シミュレータ内の位置を視覚的に示すことを可能にする。方法１５０が実質的にリアルタイムで実行され、その結果、表示された画像上で選択された任意の領域又はポイントが実質的にリアルタイムでシミュレータ内で照射されることが理解されるべきである。

【0181】

一実施例では、方法１５０は更に、第２のコンピュータ・マシンのユーザが、シミュレータのユーザとトークすることを可能にする。このケースでは、第２のコンピュータ・マシンは、マイクロフォンに接続され、シミュレータには、少なくとも１つのスピーカが設けられる。代わりに、シミュレータのユーザには、ヘッドセットが与えられ得る。第２のコンピュータ・マシンのユーザは次いで、マイクロフォンにトークし得、生成されたライブ音声フィードは、第１のコンピュータ・マシンに送信される。第１の及び第２のコンピュータ・マシンがビデオ会議プラットフォームを介して接続される実施例では、ライブ音声フィードは、第２のビデオ会議クライアントを通じて、第２のコンピュータ・マシンによって送信され、第１のビデオ会議クライアントを通じて、第１のコンピュータ・マシンによって受信される。第１のコンピュータ・マシンは次いで、スピーカに、受信されたライブ音声フィードを送信し、スピーカは、実質的にリアルタイムで音声フィードを再生する。

【0182】

図１０は、シミュレータ内の関心の領域をリモートに指し示す方法２００の更なる実施例を例示する。方法２００は、シミュレータ内の関心の領域を照射するためにプロジェクタが使用される、方法１５０の特定の実装態様に対応する。

【0183】

ステップ２０２において、ステップ１５２と同様に、上記説明されたように、シミュレータの少なくとも一部分の画像は、リモート表示のために、第１のコンピュータ・マシンによって第２のコンピュータ・マシンに提供される。

【0184】

ステップ２０４において、ステップ１５４と同様に、上記説明されたように、表示された画像内で選択された少なくとも１つのポイントの座標は、第１のコンピュータ・マシンによって受信される。

【0185】

ステップ２０６において、受信された座標は、プロジェクタの視野内のポインタ・エリアにマッピングされる。ポインタ・エリアは、プロジェクタの視野の部分に対応し、プロジェクタの視野内のポジション、形状、及びサイズによって定義される。ステップ２０６において、プロジェクタの視野内のポインタ・エリアのポジションは、受信された座標に基づいて決定される。

【0186】

一実施例では、方法１５０に関して上記説明されたように、ポインタ・エリアは、予め定義された形状及び／又は寸法を有する。

【0187】

ステップ２０４において、方法１５０に関して上記説明されたように、１つよりも多い選択されたポイントの座標が受信される実施例では、プロジェクタの視野内のポインタ・エリアのポジションは、選択されたポイントのうちの少なくとも１つの座標に基づいて識別され、関心の領域の形状及び寸法は、選択されたポイントの座標に基づいて決定され得る。

【0188】

一実施例では、第１の座標系は、プロジェクタ又はプロジェクタの視野に割り当てられ、第２の座標系は、表示された画像に割り当てられる。第１の座標系内のポインタ・エリアのポジションは、第１の座標系と第２の座標系との間の伝達関数など、第１の座標系と第２の座標系との間のマッピングを使用して、受信された座標に基づいて決定される。座標系の間のマッピングは、第２の座標内の所与のポイントの座標に基づいて、第１の座標系内のそれぞれのポイントの座標を決定することを可能にする。プロジェクタの視野内のポインタ・エリアのポジションは次いで、選択されたポイントに対応する、第１の座標系内のポイントのポジションに基づいて選ばれる。

【0189】

一実施例では、プロジェクタの座標系は、シミュレータの座標系にマッピングされ、その結果、表示された画像内の選択されたポイントに対応するシミュレータの座標系内の少なくとも１つの所与のポイントが、シミュレータの座標系と表示された画像との間のマッピングを使用して最初に決定される。プロジェクタの座標系内のポインタ・エリアの位置は次いで、シミュレータの座標系内の識別された所与のポイントをプロジェクタの座標系にマッピングすることによって識別される。

【0190】

一実施例では、方法は更に、第１の座標系と第２の座標系との間のマッピングを決定する較正のステップを含む。

【0191】

プロジェクタの視野によって包含されたシミュレータの部分に、表示された画像が対応する実施例では、プロジェクタの視野と関連付けられた座標系は、表示された画像の座標系に一致し得、その結果、表示された画像内の座標（ｘ，ｙ）を有するポイントも、プロジェクタの視野内の座標（ｘ，ｙ）を有する。表示された画像がシミュレータのシミュレートされた画像である実施例では、表示された画像は、プロジェクタの視野によって包含されたシミュレータの部分に一致し得る。

【0192】

プロジェクタの視野と関連付けられた座標系が表示された画像の座標系と一致しないように、表示された画像とプロジェクタの視野によって包含されたシミュレータの部分との間に小さな差がある実施例では、プロジェクタの視野内のポイントの座標はなお、表示された画像内のその対応するポイントに一致すると見なされ得、ポインタ・エリアのサイズが増大し得る。このケースでは、照射された関心の領域は、選択されたポイントに対応するシミュレータのポイントが関心の領域内に含まれることを保証するようにより大きくなり得る。これは、表示された画像がシミュレータ内に位置するカメラによって捕捉された画像であるとき、カメラがプロジェクタに隣接して位置付けられ、カメラがプロジェクタのそれらと実質的に同一の方位及び同一の視野を有するケースであり得る。

【0193】

ポインタ・エリアが識別されると、次のステップ２０８は、ポインタ・エリアに基づいたオーバレイ画像の生成を含む。

【0194】

一実施例では、オーバレイ画像は、ポインタ・エリアに対応し、その結果、プロジェクタは、ポインタ・エリア内でのみ光を投影し、ポインタ・エリアの外側でプロジェクタの視野の部分内では光は投影されない。

【0195】

別の実施例では、オーバレイ画像は、ポインタ・エリアよりも大きい。このケースでは、オーバレイ画像は、第１の及び第２の区域を含む。第１の区域は、ポインタ・エリアに対応し、第２の区域は、ポインタ・エリアの外側のオーバレイ画像の残りの部分に対応する。このケースでは、第１の及び第２の区域は、オーバレイ画像の残りからポインタ・エリアを視覚的に区別するために、少なくとも１つの異なる特徴を有する。例えば、ポインタ・エリア内で生成された光の色は、オーバレイ画像の残りに対して生成された光の色とは異なり得る。同一の又は別の実例では、光の強度が異なり得る。例えば、ポインタ・エリア内の光の強度は、ゼロに設定され得ると共に、オーバレイ画像の残りの強度は、ゼロよりも大きくなり得、その結果、関心の領域は、照射されないことによって、また、関心の領域を囲むエリアが照射されることによって、視覚的に区別される。別の実例では、ポインタ・エリア内の光の強度は、ゼロよりも大きくなり得ると共に、オーバレイ画像の残りの強度は、ゼロに設定され得、その結果、関心の領域は、照射されることによって、また、関心の領域を囲むエリアが照射されないことによって、視覚的に区別される。

【0196】

ステップ２１０において、プロジェクタは、シミュレータ上のオーバレイ画像を投影するように制御され、すなわち、オーバレイ画像を示す制御信号は、プロジェクタに提供され、それによって、シミュレータの関心の領域を視覚的に区別する。一実施例では、プロジェクタの視野のポインタ・エリア内で投影された光によって照射されたシミュレータは、シミュレータの関心の領域を形成する。

【0197】

オーバレイ画像がポインタ・エリアに対応する単一の区域を含む実施例では、プロジェクタは、その視野内で識別されたポインタ・エリア内でのみ光を投影する。図１１及び１２は、そのようなシナリオを例示する。図１１は、コクピットの部分の例示的なリモートに表示された画像を例示する。正方形形状及びオレンジ色を有するカーソルは、コクピットの画像の上に表示される。第２のコンピュータ・マシンのユーザは、シミュレータのコクピット上でハイライトされることになる関心の領域を選択するように、正方形カーソルを移動させ得る。正方形カーソルのポジションは、第１のコンピュータ・マシンに送信され、第１のコンピュータ・マシンは、表示された画像内の正方形カーソルの受信されたポジションに基づいて、プロジェクタの視野内のポインタ・エリアについてのポジションを決定する。プロジェクタは次いで、ポインタ・エリアに対応するオーバレイ画像を投影する。オーバレイ画像には、正方形形状及びオレンジ色がもたらされる。図１２は、オーバレイ画像がコクピットの上に投影されるときのコクピットを例示する。オレンジの正方形は次いで、表示された画像内で表されたコクピットの部分上の正方形カーソルのポジションと実質的に同一のコクピット上のポジションにおいて、コクピット上で投影される。

【0198】

オーバレイ画像の所与の区域のみがポインタ・エリアに対応する別の実施例では、プロジェクタは、シミュレータ上で画像を投影し、関心の領域は、所与の区域によって照射されたシミュレータの部分に対応する。関心の領域を視覚的に区別するために、上記説明されたように、ポインタ・エリア内で放出された光は、オレンジなどの第１の色がもたらされ得ると共に、オーバレイ画像の第２の区域に対応する放出された光は、白などの第２の及び異なる色を有し得る。

【0199】

オーバレイ画像のサイズは、それがプロジェクタの視野全体を占有し、次いで、ポインタ・エリアが視野の部分に対応するように選ばれ得る。

【0200】

一実施例では、方法１５０、２００は、プロセッサと、プロセッサに動作可能に接続された非一時的記憶媒体とを含むシステムとして具現化され、非一時的記憶媒体は、コンピュータ可読命令を含み、プロセッサは、コンピュータ可読命令を実行すると、方法１５０、２００のステップを実行するために構成され、る。

【0201】

別の実施例では、方法１５０、２００は、プロセッサによって実行されるとき、方法１５０、２００のステップを実行する、コンピュータ実行可能命令をそこに記憶したコンピュータ可読メモリを含むコンピュータ・プログラム製品として具現化される。

【0202】

図１３は、ユーザが、シミュレータ内の関心の領域をリモートに指し示すことを可能にするシステム２５０の一実施例を例示する。

【0203】

システム２５０は、シミュレーション環境又はシミュレータ２５２、プライベート位置２５３、及びリモート位置２５４を含む。シミュレータ２５２は、シミュレータ１５２のユーザがシミュレーションを実行するように対話する少なくとも機器及び制御（図示せず）と、少なくとも１つのプロジェクタ２６０と、を含む。シミュレータには更に、機器及び制御の少なくとも一部分など、シミュレータ２５２の少なくとも一部分の画像を捕捉するための少なくとも１つのカメラ２６２と、シミュレータ２５２内に位置付けられた少なくとも１つのスピーカ２６６と、シミュレータ２５２内に位置付けられた少なくとも１つのマイクロフォン２６４と、が設けられ得る。

【0204】

プライベート位置２５３は、方法２００のステップを実行するために構成された第１のコンピュータ・マシン２７０を含む。第１のコンピュータ・マシン２７０にも、第１のビデオ会議クライアントが設けられる。第１のコンピュータ・マシン２７０は、プライベート・セキュア・ネットワーク２７４を介して、プロジェクタ２６０と通信している。第１のコンピュータ・マシン２７０はまた、シミュレータ２５２内に存在する場合、カメラ２６２、スピーカ２６６、及び／又はマイクロフォン２６４と通信し得る。

【0205】

リモート位置２５４は、第２のコンピュータ・マシン２８０、第２のディスプレイ・ユニット２８２、及びユーザ・インタフェース２８４を含む。第２のディスプレイ・ユニット２８２が、例えば、タッチスクリーンを含む場合、ユーザ・インタフェース２８４が省略され得ることが理解されるべきである。リモート位置２５４は任意選択で、スピーカ２８８及びマイクロフォン２８６を含み得る。第２のビデオ会議クライアントは、第２のコンピュータ・マシン２８０上に設けられる。データは、パブリック・セキュア・ネットワーク２９０を介して、第１のコンピュータ・マシン２７０上で稼働する第１のビデオ会議クライアントと第２のコンピュータ・マシン２８０上で稼働する第２のビデオ会議クライアントとの間で交換され得る。第２のコンピュータ・マシン２８０は、プライベート・ネットワーク２７４へのアクセスを有さないことが理解されるべきである。

【0206】

一実施例では、システム２５０は、コクピットの部分など、シミュレータ２５２の少なくとも一部分の画像を生成するための画像ジェネレータ２９２を含む。画像ジェネレータ２９２は、シミュレータ２５２の３Ｄモデルから画像を生成するために構成され得る。別の実施例では、シミュレータ２５２は、シミュレータ２５２の少なくとも一部分の画像のライブ画像を捕捉するためのカメラ２６２を含む。

【0207】

画像は、セキュア・プライベート・ネットワーク２７４越しに、第１のコンピュータ・マシン２７０に送信される。第１のコンピュータ・マシン２７０は、セキュア・パブリック・ネットワーク２９０越しに、第１のビデオ会議クライアントを通じて、第２のコンピュータ・マシン２８０にシミュレータ２５２の画像を送信する。第２のコンピュータ・マシン２８０は、第２のビデオ会議クライアントを通じて、シミュレータ２５２の画像を受信し、その上で表示のために受信された画像をディスプレイ・ユニット２８２に提供する。インストラクタなど、第２のコンピュータ・マシン２８０のユーザは次いで、シミュレータ２５２の表示された画像内の少なくとも１つのポイントを選択し得る。例えば、ユーザ・インタフェース２８４がマウスを含む場合、ユーザは、シミュレータ２５２のユーザに、シミュレータ２５２内の所与のコマンドの位置の視覚インジケーションを提供するために、画像内で表示された所与のコマンド上で左クリックし得る。

【0208】

第２のコンピュータ・マシン２８０は、選択されたポイントの座標を捕捉し、セキュア・パブリック・ネットワーク２９０越しに、第２のビデオ会議クライアントを通じて、第１のコンピュータ・マシン２７０に捕捉された座標を送信する。第１のコンピュータ・マシン２７０は次いで、第１のビデオ会議クライアントを通じて、選択されたポイントの座標を受信し、上記説明されたように、ポインタ・エリアに基づいてオーバレイ画像を生成する前に、受信された座標を、プロジェクタ２６０の視野内のポインタ・エリアにマッピングする。第１のコンピュータ・マシン２７０は、プロジェクタ２６０にオーバレイ画像を送信し、プロジェクタ２６０は、上記説明されたように、関心の領域を照射するように、シミュレータ２５２上でオーバレイ画像を投影する。

【0209】

一実施例では、表示された画像は、静的である。別の実施例では、表示された画像は、動的であり、時間と共に可変であり得る。

【0210】

一実施例では、スピーカ２６６及び２８８並びにマイクロフォン２６４及び２８６は、シミュレータ２５２とリモート位置との間の音声通信を可能にし、その結果、インストラクタ及びパイロットは、例えば、訓練シミュレーション中にトークし得る。このケースでは、マイクロフォン２８６によって捕捉されたライブ音声フィードは、セキュア・パブリック・ネットワーク２９０越しに、第２のビデオ会議クライアントを通じて、第１のコンピュータ・マシン２７０に送信される。第１のコンピュータ・マシン２７０は、第１のビデオ会議クライアントを通じて、ライブ音声フィードを受信し、スピーカ２６６に、シミュレータ２５２内で再生されることになるライブ音声フィードを送信する。同様に、マイクロフォン２６４は、シミュレータ２５２からライブ音声フィードを捕捉し、セキュア・プライベート・ネットワーク２７４越しに、第１のコンピュータ・マシン２７０に捕捉されたライブ音声フィードを送信する。第１のコンピュータ・マシン２７０は次いで、セキュア・パブリック・ネットワーク２９０越しに、第１のビデオ会議クライアントを通じて、第２のコンピュータ・マシン２８０にライブ音声フィードを送信する。第２のコンピュータ・マシン２８０は、第２のビデオ会議クライアントを通じて、ライブ音声フィードを受信し、スピーカ２８８に、再生されることになるライブ音声フィードを送信する。

【0211】

シミュレータの表示された画像が、シミュレータ内に位置するカメラによって捕捉されたライブ・ビデオ・フィードである実施例では、カメラの方位、ポジション、及び／又はズームは、カメラがシミュレータの所望のビューを捕捉し得るように調節され得る。

【0212】

シミュレータのそれぞれのビューを捕捉するためにその各々が位置付けられ及び方位付けられた複数のカメラがシミュレータに設けられた実施例では、シミュレータの所望のビューは、所与のカメラを選択することによって取得される。

【0213】

一実施例では、ビューは、例えば、ビデオ会議プラットフォームを介して、カメラに対して制御を許可したとき、第２のコンピュータ・マシンからリモートに選択され得る。第２のコンピュータ・マシンのユーザは次いで、シミュレータ内に位置するカメラのポジション、方位、及び／又はズームをリモートに制御し得、及び／又はシミュレータの所望のビューを取得するように、所与のカメラを選択し得る。

【0214】

上記説明は、プロジェクタ２６０などの１つのプロジェクタに言及するが、シミュレータには、複数のプロジェクタが設けられ得ることが理解されるべきである。複数のプロジェクタは各々、シミュレータの異なるエリアをカバーし得る。このケースでは、方法２００は更に、区別されることになる関心の領域が所与のプロジェクタの視野の中に備えられるように、選択されたポイントの座標に基づいて、所与のプロジェクタを選択するステップを含む。

【0215】

単一のプロジェクタが使用される実施例では、プロジェクタは、固定されたポジション及び方位を有する。別の実施例では、プロジェクタのポジション及び／又は方位は、調節可能である。このケースでは、方法２００は更に、関心の領域がプロジェクタの視野内にないとき、プロジェクタにとって必要とされる並進又は必要とされる回転など、必要とされる移動を決定するステップと、決定された必要とされる移動に従ってプロジェクタを移動させるステップと、を含み得る。

【0216】

一実施例では、関心の領域又はポインタ・エリアについての少なくとも１つの特徴は、第２のコンピュータ・マシンのユーザによって選択され得る。例えば、関心の領域又はポインタ・エリアについての形状、サイズ、及び／又は色が選択され得る。例えば、関心の領域又はポインタ・エリアは、円、矢印、「Ｘ」などの形状を有し得る。

【0217】

プロジェクタが使用される実施例では、プロジェクタによって投影された画像は、アニメーション化され得る。

【0218】

一実施例では、方法は更に、投影された画像とコクピット機器及び制御との間の位置合わせを保証するために、マッピングパラメータを決定するステップを含む。このケースでは、座標をマッピングするステップは、オーバレイ画像内のポインタ・エリアを決定するために、マッピングパラメータを座標に適用するステップを含む。

【0219】

一実施例では、パラメータは、プロジェクタのポジション、プロジェクタの光学特性、及びコクピット構造の幾何学形状の関数として決定される。

【0220】

一実施例では、パラメータは、一連の特徴を投影し、シミュレータ上の特徴の位置を識別することによって決定される。

【0221】

一実施例では、特徴の位置の識別は、画像処理手段を通じて自動で実行される。

【0222】

一実施例では、プロジェクタは、以下の特性のうちの少なくとも１つを含む：
（ａ）電力がコクピットのエリア内で容易にアクセス可能でない場合があるので、プロジェクタは、Ｐｏｗｅｒ－Ｏｖｅｒ－Ｅｔｈｅｒｎｅｔ（ＰＯＥ）機能を有し、
（ｂ）プロジェクタは、クライアント・アプリケーションを稼働させるビルトイン能力を有し、
（ｃ）プロジェクタは、低熱及び最小ファン雑音を生じさせる。

【0223】

一実施例では、プロジェクタは、必要なコクピット・カバレッジ、ＨＤ解像度、及び輝度をもたらすレンズを含む。

【0224】

一実施例では、オフボードＩＯＳにおいて、サーバ・アプリケーションを含むポインタ・システムのための専用モニタが存在する。サーバ・アプリケーションは、プロジェクタの各々上で稼働するクライアントの各々と直接インタフェースする。サーバ・アプリケーションは、ＵＩ管理；インストラクタとのインタフェースを含む。プロジェクタ／ビューは、ＩＯＳ及び表示される対応する静的画像において選択される。カーソルが所望のポジションに移動するにつれて、位置付けるデータが、プロジェクタ／クライアント・アプリケーションに転送される。実際のカーソルは、コクピットから戻るカメラ・フィードを使用してインストラクタによって視認される。サーバ・アプリケーションは、カーソル・シンボル・タイプ、サイズ、及び色など、カーソルの少なくとも一部の特性についての異なる選択肢を含み得る。

【0225】

一実施例では、サーバ・アプリケーションは、製品使用分析の目的のために、使用を証明する予め定義された関心のエリアを捕捉するように拡大される。

【0226】

一実施例では、（３Ｄ）動的画像を配信する可動カメラの使用は、必要とされるプロジェクタの数を低減させることを可能にし得る。コクピット・エリアの３Ｄモデルは、インストラクタによって命令されるように、３Ｄ世界内で仮想的に移動すると共に、ポインタを表示するために、追加のロジックと共に必要とされる。これは、カメラ方位（方位角、仰角）とシミュレータ座標との間のマッピング・マトリックスを作成することによって達成され得る。これは、手動で又は半自動手順を通じて行われ得、半自動手順では、カメラは、各々の格子間隔において止まる、その範囲を通じてテスト・パターン・（例えば、格子）スイベルを表示する。ユーザは次いで、そのインタフェース表示上で格子位置を確認することを問われる。

【0227】

一実施例では、リモート指示方法及びシステムは、関心のエリアを口頭で説明するよりも、迅速であり、直感的であり、且つ曖昧でない。

【0228】

一実施例では、方法１０は、第２のコンピュータ・マシンのユーザが、同一のビデオ会議プラットフォームを使用してシミュレータ内の関心の領域をリモートに指し示し得るように、方法２００のステップを更に含むように適合され得る。

【0229】

同様に、システム１００は、第２のコンピュータ・マシン１３０のユーザが、シミュレータ１０２内の関心の領域を指し示すことを可能にするように構成され得る。このケースでは、第１のコンピュータ１２０は、セキュア・パブリック・ネットワーク１３８越しに、第１のビデオ会議クライアントを通じて、シミュレータ１０２の少なくとも一部分の画像を送信するために構成され、第２のコンピュータ・マシン１３０は、第２のビデオ会議クライアントを通じて、シミュレータ１０２の部分の画像を受信し、ディスプレイ・ユニット１３２上で受信された画像を表示するために構成される。第２のコンピュータ・マシンは更に、第２のコンピュータ・マシン１３０のユーザによって画像内で選択された少なくとも１つのポイントの座標を捕捉し、セキュア・パブリック・ネットワーク１３８越しに、第２のビデオ会議クライアントを通じて、第１のコンピュータ・マシン１２０に、捕捉された座標を送信するために構成される。座標を受信すると、第１のコンピュータ・マシン１２０は、関心の領域を視覚的に区別するために、受信された座標に基づいて、シミュレータ１０２内の対応する関心の領域を識別し、シミュレータ１０２内の関心の領域を照射するように、プロジェクタなど、シミュレータ１０２内に存在する光源を制御する。

【0230】

上記説明された発明の実施例は、例示的であるにすぎないことが意図される。したがって、発明の範囲は、添付の特許請求の範囲によって唯一限定されることが意図される。

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【国際調査報告】