特開 2024-172338 保守訓練支援装置、保守訓練支援システム、保守訓練支援方法およびプログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】P2024172338

(43)【公開日】2024-12-12

(54)【発明の名称】保守訓練支援装置、保守訓練支援システム、保守訓練支援方法およびプログラム

(51)【国際特許分類】

   G06F 3/01 20060101AFI20241205BHJP

   G06F 3/0484 20220101ALI20241205BHJP

   G06F 3/0346 20130101ALI20241205BHJP

   G06T 19/00 20110101ALI20241205BHJP

   G09B 9/00 20060101ALI20241205BHJP

   G09B 19/00 20060101ALI20241205BHJP

【ＦＩ】

G06F3/01 510

G06F3/0484

G06F3/0346 422

G06T19/00 A

G09B9/00 Z

G09B19/00 Z

【審査請求】未請求

【請求項の数】8

【出願形態】ＯＬ

(21)【出願番号】P 2023089992

(22)【出願日】2023-05-31

【公序良俗違反の表示】

（特許庁注：以下のものは登録商標）

１．ＢＬＵＥＴＯＯＴＨ

(71)【出願人】

【識別番号】000233491

【氏名又は名称】株式会社日立システムズ

(74)【代理人】

【識別番号】110000198

【氏名又は名称】弁理士法人湘洋特許事務所

(72)【発明者】

【氏名】加畑 亮一

(72)【発明者】

【氏名】成田 賀仁

(72)【発明者】

【氏名】勝又 大介

(72)【発明者】

【氏名】菊地 克朗

【テーマコード（参考）】

5B050

5B087

5E555

【Ｆターム（参考）】

5B050BA09

5B050CA07

5B050DA04

5B050EA07

5B050EA12

5B050EA13

5B050FA06

5B087AA07

5B087BC05

5B087DE02

5E555AA25

5E555AA26

5E555BA02

5E555BA05

5E555BA38

5E555BB02

5E555BB05

5E555BB38

5E555BC04

5E555BE17

5E555CA17

5E555CA42

5E555CA44

5E555CB22

5E555CB66

5E555DA08

5E555DA09

5E555DB53

5E555DC13

5E555DC84

5E555DD07

5E555EA07

5E555FA00

(57)【要約】      （修正有）

【課題】仮想現実の中で、より効率的かつ効果的に電子機器の保守作業に関する訓練の実施を支援する保守訓練支援装置、システム、方法及びプログラムを提供する。
【解決手段】保守訓練支援システムにおいて、保守訓練支援装置１００は、保守作業固有のオブジェクトを配置した３次元のＶＲ（Ｖｉｒｔｕａｌ Ｒｅａｌｉｔｙ）空間を表示するためのＶＲ表示情報を生成する表示情報生成部１１１と、ＶＲ空間内でのユーザの動作を特定する動作特定部１１２と、を備える。表示情報生成部１１１は、ユーザの動作を示す動作情報に基づき、所定のラベルまたは電子機器を把持したユーザの手からオブジェクトまでの距離が所定未満の時に、ラベルまたは電子機器を開放する動作指示が入力されたことを動作特定部１１２が検知した場合、ラベルがオブジェクトの表面に貼り付けられた状態または電子機器がオブジェクト内にマウントされた状態を表すＶＲ表示情報を生成する。
【選択図】図２

【特許請求の範囲】

【請求項1】

保守作業固有のオブジェクトを配置した３次元のＶＲ（Ｖｉｒｔｕａｌ Ｒｅａｌｉｔｙ）空間を表示するためのＶＲ表示情報を生成する表示情報生成部と、
前記ＶＲ空間内でのユーザの動作を特定する動作特定部と、を備え、
前記表示情報生成部は、
ユーザの動作を示す動作情報に基づき、所定のラベルまたは電子機器を把持したユーザの手からオブジェクトまでの距離が所定未満の時に、前記ラベルまたは電子機器を開放する動作指示が入力されたことを前記動作特定部が検知した場合、
前記ラベルが前記オブジェクトの表面に貼り付けられた状態または前記電子機器が前記オブジェクト内にマウントされた状態を表す前記ＶＲ表示情報を生成する
ことを特徴とする保守訓練支援装置。

【請求項2】

請求項１に記載の保守訓練支援装置であって、
前記表示情報生成部は、
前記ラベルまたは電子機器を把持したユーザの手からオブジェクトまでの距離が所定未満であることが前記動作特定部により検知された場合、
前記オブジェクトの表面に、前記ラベルの貼り付け位置または前記電子機器のマウント位置をガイドする補助情報を表示する
ことを特徴とする保守訓練支援装置。

【請求項3】

請求項２に記載の保守訓練支援装置であって、
前記補助情報は、前記ラベルまたは電子機器の表面形状と同じ形状で表示される
ことを特徴とする保守訓練支援装置。

【請求項4】

請求項２または３に記載の保守訓練支援装置であって、
前記表示情報生成部は、
前記補助情報上に前記ラベルまたは電子機器が吸着されるような動作を表現した前記ＶＲ表示情報を生成する
ことを特徴とする保守訓練支援装置。

【請求項5】

請求項１に記載の保守訓練支援装置であって、
前記表示情報生成部は、
前記オブジェクトの表面に前記ラベルが貼り付けられている場合、当該オブジェクトの動きに連動して、前記ＶＲ空間における当該ラベルの位置が移動する動作を表した前記ＶＲ表示情報を生成する
ことを特徴とする保守訓練支援装置。

【請求項6】

保守訓練支援装置と、ユーザの動作を検知するＶＲゴーグルおよびコントローラと、を有する保守訓練支援システムであって、
前記保守訓練支援装置は、
保守作業固有のオブジェクトを配置した３次元のＶＲ（Ｖｉｒｔｕａｌ Ｒｅａｌｉｔｙ）空間を表示するためのＶＲ表示情報を生成する表示情報生成部と、
前記ＶＲ空間内でのユーザの動作を特定する動作特定部と、を備え、
前記表示情報生成部は、
前記ＶＲゴーグルおよびコントローラのうち、少なくともいずれか一方により検知されたユーザの動作を示す動作情報に基づき、所定のラベルまたは電子機器を把持したユーザの手からオブジェクトまでの距離が所定未満の時に、前記ラベルまたは電子機器を開放する動作指示が入力されたことを前記動作特定部が検知した場合、
前記ラベルが前記オブジェクトの表面に貼り付けられた状態または前記電子機器が前記オブジェクト内にマウントされた状態を表す前記ＶＲ表示情報を生成する
ことを特徴とする保守訓練支援システム。

【請求項7】

保守訓練支援装置が行う保守訓練支援方法であって、
前記保守訓練支援装置は、
保守作業固有のオブジェクトを配置した３次元のＶＲ（Ｖｉｒｔｕａｌ Ｒｅａｌｉｔｙ）空間を表示するためのＶＲ表示情報を生成する表示情報生成ステップと、
前記ＶＲ空間内でのユーザの動作を特定する動作特定ステップと、を行い、
前記表示情報生成ステップでは、
ユーザの動作を示す動作情報に基づき、所定のラベルまたは電子機器を把持したユーザの手からオブジェクトまでの距離が所定未満の時に、前記ラベルまたは電子機器を開放する動作指示が入力されたことを前記動作特定ステップにより検知された場合、
前記ラベルが前記オブジェクトの表面に貼り付けられた状態または前記電子機器が前記オブジェクト内にマウントされた状態を表す前記ＶＲ表示情報を生成する
ことを特徴とする保守訓練支援方法。

【請求項8】

コンピュータを保守訓練支援装置として機能させるプログラムであって、
前記コンピュータを、
保守作業固有のオブジェクトを配置した３次元のＶＲ（Ｖｉｒｔｕａｌ Ｒｅａｌｉｔｙ）空間を表示するためのＶＲ表示情報を生成する表示情報生成部と、
前記ＶＲ空間内でのユーザの動作を特定する動作特定部と、して機能させ、
ユーザの動作を示す動作情報に基づき、所定のラベルまたは電子機器を把持したユーザの手からオブジェクトまでの距離が所定未満の時に、前記ラベルまたは電子機器を開放する動作指示が入力されたことを前記動作特定部が検知した場合、
前記表示情報生成部に、前記ラベルが前記オブジェクトの表面に貼り付けられた状態または前記電子機器が前記オブジェクト内にマウントされた状態を表す前記ＶＲ表示情報を生成させる
ことを特徴とするプログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、保守訓練支援装置、保守訓練支援システム、保守訓練支援方法およびプログラムに関する。

【背景技術】

【0002】

近年、ＶＲ（Ｖｉｒｔｕａｌ Ｒｅａｌｉｔｙ：仮想現実）の技術を利用したゲームなどの映像コンテンツが増加傾向にある。ＶＲは、例えば、３ＤＣＧ（Ｄｉｍｅｎｓｉｏｎａｌ Ｃｏｍｐｕｔｅｒ Ｇｒａｐｈｉｃｓ）の技術を用いて作成された仮想現実の映像世界であり、ゲームユーザなどのＶＲ利用者は、仮想現実の中で様々な体験をすることができる。

【0003】

また、ＶＲの特性を利用して、職業訓練を行うコンテンツがある。例えば、特許文献１には、ＶＲ空間内において農作物の栽培訓練を行うことが開示されている。具体的には、特許文献１には、仮想空間に表示される農作物に対する作業対象部位と作業対象部位に用いる道具である作業手段とを作業手順に関連付けて記憶する訓練シナリオ記憶部と、作業手順の進行に伴って、農作物および作業手段を表示装置に三次元表示させる三次元表示制御部と、ユーザあるいは操作用装置の位置や動きを検知して検知信号を出力する検知信号出力部と、検知信号に基づいて、仮想空間に表示される作業手段を変化させる操作検知部と、仮想空間における作業対象部位の座標と作業手段の座標および操作内容とに基づいて操作の結果を判定する操作判定部と、を備えた農作物の栽培技術を教育・訓練するシステムが開示されている。

【先行技術文献】

【特許文献】

【0004】

【特許文献1】特開２０２２－１４９６３６号公報

【発明の概要】

【発明が解決しようとする課題】

【0005】

職業訓練を行うＶＲコンテンツでは、通常、訓練対象固有のオブジェクトやその動きなどを定義した情報と、ＶＲゴーグルやコントローラから取得した情報と、に基づいて、ユーザ動作に連動して変化する仮想現実世界の表示情報が生成される。そのため、例えば電子機器などの保守作業に関する訓練をＶＲコンテンツで行う場合、保守作業固有のオブジェクトなどを定義した情報が必要になる。

【0006】

また、保守作業の訓練中にＶＲ空間の中で保守作業固有のユーザ動作を補助するための情報を表示することが好ましい場合があり、このような情報を表示する場合にも、予め定義した情報が必要になる。

【0007】

なお、特許文献１の技術は、ＶＲ空間内で農作物の栽培に関する教育・訓練を行うものである。そのため、同文献の技術では、電子機器などの保守作業固有のオブジェクトやその動き等については考慮されていない。

【0008】

本発明は、上記の点に鑑みてなされたものであり、仮想現実の中で、より効率的かつ効果的に電子機器の保守作業に関する訓練の実施を支援することを目的とする。

【課題を解決するための手段】

【0009】

本願は、上記課題の少なくとも一部を解決する手段を複数含んでいるが、その例を挙げるならば、以下のとおりである。

【0010】

上記の課題を解決するため、本発明の一態様に係る保守訓練支援装置は、保守作業固有のオブジェクトを配置した３次元のＶＲ（Ｖｉｒｔｕａｌ Ｒｅａｌｉｔｙ）空間を表示するためのＶＲ表示情報を生成する表示情報生成部と、前記ＶＲ空間内でのユーザの動作を特定する動作特定部と、を備え、前記表示情報生成部は、ユーザの動作を示す動作情報に基づき、所定のラベルまたは電子機器を把持したユーザの手からオブジェクトまでの距離が所定未満の時に、前記ラベルまたは電子機器を開放する動作指示が入力されたことを前記動作特定部が検知した場合、前記ラベルが前記オブジェクトの表面に貼り付けられた状態または前記電子機器が前記オブジェクト内にマウントされた状態を表す前記ＶＲ表示情報を生成する。

【0011】

また、上記の保守訓練支援装置において、前記表示情報生成部は、前記ラベルまたは電子機器を把持したユーザの手からオブジェクトまでの距離が所定未満であることが前記動作特定部により検知された場合、前記オブジェクトの表面に、前記ラベルの貼り付け位置または前記電子機器のマウント位置をガイドする補助情報を表示しても良い。

【0012】

また、上記の保守訓練支援装置において、前記補助情報は、前記ラベルまたは電子機器の表面形状と同じ形状で表示されても良い。

【0013】

また、上記の保守訓練支援装置において、前記表示情報生成部は、前記補助情報上に前記ラベルまたは電子機器が吸着されるような動作を表現した前記ＶＲ表示情報を生成しても良い。

【0014】

また、上記の保守訓練支援装置において、前記表示情報生成部は、前記オブジェクトの表面に前記ラベルが貼り付けられている場合、当該オブジェクトの動きに連動して、前記ＶＲ空間における当該ラベルの位置が移動する動作を表した前記ＶＲ表示情報を生成しても良い。

【0015】

また、本発明の別の態様にかかる保守訓練支援システムは、保守訓練支援装置と、ユーザの動作を検知するＶＲゴーグルおよびコントローラと、を有する保守訓練支援システムであって、前記保守訓練支援装置は、保守作業固有のオブジェクトを配置した３次元のＶＲ（Ｖｉｒｔｕａｌ Ｒｅａｌｉｔｙ）空間を表示するためのＶＲ表示情報を生成する表示情報生成部と、前記ＶＲ空間内でのユーザの動作を特定する動作特定部と、を備え、前記表示情報生成部は、前記ＶＲゴーグルおよびコントローラにより検知されたユーザの動作を示す動作情報に基づき、所定のラベルまたは電子機器を把持したユーザの手からオブジェクトまでの距離が所定未満の時に、前記ラベルまたは電子機器を開放する動作指示が入力されたことを前記動作特定部が検知した場合、前記ラベルが前記オブジェクトの表面に貼り付けられた状態または前記電子機器が前記オブジェクト内にマウントされた状態を表す前記ＶＲ表示情報を生成する。

【0016】

また、本発明の別の態様にかかる保守訓練支援方法は、保守訓練支援装置が行う保守訓練支援方法であって、前記保守訓練支援装置は、保守作業固有のオブジェクトを配置した３次元のＶＲ（Ｖｉｒｔｕａｌ Ｒｅａｌｉｔｙ）空間を表示するためのＶＲ表示情報を生成する表示情報生成ステップと、前記ＶＲ空間内でのユーザの動作を特定する動作特定ステップと、を行い、前記表示情報生成ステップでは、ユーザの動作を示す動作情報に基づき、所定のラベルまたは電子機器を把持したユーザの手からオブジェクトまでの距離が所定未満の時に、前記ラベルまたは電子機器を開放する動作指示が入力されたことを前記動作特定ステップにより検知された場合、前記ラベルが前記オブジェクトの表面に貼り付けられた状態または前記電子機器が前記オブジェクト内にマウントされた状態を表す前記ＶＲ表示情報を生成する。

【0017】

また、本発明の別の態様にかかるプログラムは、コンピュータを保守訓練支援装置として機能させるプログラムであって、前記コンピュータを、保守作業固有のオブジェクトを配置した３次元のＶＲ（Ｖｉｒｔｕａｌ Ｒｅａｌｉｔｙ）空間を表示するためのＶＲ表示情報を生成する表示情報生成部と、前記ＶＲ空間内でのユーザの動作を特定する動作特定部と、して機能させ、ユーザの動作を示す動作情報に基づき、所定のラベルまたは電子機器を把持したユーザの手からオブジェクトまでの距離が所定未満の時に、前記ラベルまたは電子機器を開放する前記動作指示が入力されたことを動作特定部が検知した場合、前記表示情報生成部に、前記ラベルが前記オブジェクトの表面に貼り付けられた状態または前記電子機器が前記オブジェクト内にマウントされた状態を表す前記ＶＲ表示情報を生成させる。

【発明の効果】

【0018】

本発明によれば、仮想現実の中で、より効率的かつ効果的に電子機器の保守作業に関する訓練の実施を支援することができる。

【0019】

なお、上記以外の課題、構成および効果等は、以下の実施形態の説明により明らかにされる。

【図面の簡単な説明】

【0020】

【図1】保守訓練支援システムの概略構成の一例を示した図である。

【図2】保守訓練支援装置の機能構成の一例を示したブロック図である。

【図3】オブジェクト管理情報の一例を示した図である。

【図4】干渉情報の一例を示した図である。

【図5】ペア情報の一例を示した図である。

【図6】位置情報の一例を示した図である。

【図7】保守作業訓練を行うＶＲ空間の一例を示した図である。

【図8】注意喚起ラベルの貼り付け動作の一例を示した図である。

【図9】ワイヤフレームの第１の表示例を示した図である。

【図10】電子機器の移動動作の一例を示した図である。

【図11】ワイヤフレームの第２の表示例を示した図である。

【図12】保守訓練支援装置のハードウェア構成の一例を示した図である。

【図13】保守訓練支援処理の一例を示したフロー図である。

【発明を実施するための形態】

【0021】

以下、本発明の一例である実施形態について、図面を用いて説明する。

【0022】

＜保守訓練支援システム１０００の概略構成＞
図１は、本実施形態に係る保守訓練支援システム１０００の概略構成の一例を示した図である。図示するように、保守訓練支援システム１０００は、保守訓練支援装置１００と、計算機１５０と、ＶＲゴーグル１６０と、コントローラ１７０と、を有している。

【0023】

なお、ＶＲゴーグル１６０およびコントローラ１７０は、所定の無線通信規格（例えば、Ｂｌｕｅｔｏｏｔｈなど）による無線通信あるいは有線ケーブルにより計算機１５０と相互通信可能に接続されており、計算機１５０は、ネットワークＮを介して保守訓練支援装置１００と相互通信可能に接続されている。

【0024】

なお、ネットワークＮは、例えば、インターネット、イントラネット、ＷＡＮ（Ｗｉｄｅ Ａｒｅａ Ｎｅｔｗｏｒｋ）、携帯電話網等、あるいはこれらが複合した通信網などである。また、ネットワークＮは、携帯電話通信網等の無線通信網上のＶＰＮ（Ｖｉｒｔｕａｌ Ｐｒｉｖａｔｅ Ｎｅｔｗｏｒｋ）等であっても良い。

【0025】

このような保守訓練支援システム１０００では、保守訓練支援装置１００により生成されたＶＲ表示情報を計算機１５０が取得して３Ｄレンダリングを行い、レンダリング後のＶＲ表示情報をＶＲゴーグル１６０に出力することで、保守作業の訓練を行うためのＶＲ空間がＶＲゴーグル１６０に表示される。

【0026】

また、ＶＲゴーグル１６０やコントローラ１７０は各々、自身に搭載されているカメラやセンサから取得したユーザの動作を示す情報（以下、「動作情報」という場合がある）を保守訓練支援装置１００に送信し、ＶＲ空間におけるユーザの動きをフィードバックする。また、フィードバックを取得した保守訓練支援装置１００は、ユーザ動作に連動して変化したＶＲ空間の表示情報を生成し、計算機１５０を介してＶＲゴーグル１６０に表示させる。

【0027】

このような処理が連続的に繰り返し実行されることで、ユーザは、ＶＲ空間において電子機器等の保守作業の訓練を行うことができる。

【0028】

＜ＶＲゴーグル１６０＞
ＶＲゴーグル１６０は、例えば３ＧＣＧで作成された３次元映像のＶＲ表示情報を映し出すヘッドマウントディスプレイである。ＶＲゴーグル１６０は、ユーザの両眼の視差を利用してＶＲ空間内のオブジェクトなどが立体的に見えるように、ＶＲゴーグル１６０に搭載されているディスプレイにＶＲ表示情報を表示する。

【0029】

また、ＶＲゴーグル１６０は、ユーザの頭部の動き（例えば、向きや傾きなど）を検知するセンサや、ユーザの手の動きの検知などに利用される複数のカメラを有し、計算機１５０を介して、検知した動作情報を保守訓練支援装置１００に送信する。具体的には、ＶＲゴーグル１６０は、センサやカメラによるヘッドトラッキングを行い、トラッキングデータを動作情報として保守訓練支援装置１００に送信する。なお、ＶＲゴーグル１６０は、ユーザがコントローラ１７０を用いない場合、カメラを用いたハンドトラッキングを行い、ユーザの手の動き（ハンドジェスチャー）を示す動作情報を保守訓練支援装置１００に送信する。

【0030】

なお、ＶＲゴーグル１６０には、例えば、自身でＶＲ表示情報をレンダリングすることでＶＲ空間を表示するスタンドアロン型や、スマートフォンを嵌め込んで使用する形態など様々な種類があるが、本実施形態では、通信可能に接続された計算機１５０によりレンダリングされたＶＲ表示情報を用いてＶＲ空間をディスプレイに表示する形態のものを例として以下の説明を行う。

【0031】

＜コントローラ１７０＞
コントローラ１７０は、ＶＲ空間におけるユーザの手の動き（手の移動方向や移動量など）を検知したり、オブジェクトを掴むあるいは放すなどの動作指示をユーザから受け付ける装置である。具体的には、コントローラ１７０は、例えば、モーションセンサや加速度センサなどの複数種類のセンサを有している。また、コントローラ１７０は、動作指示を受け付ける複数の指示受付ボタンを有している。

【0032】

また、コントローラ１７０は、計算機１５０を介して、センサが検知したユーザの手の動きや指示受付ボタンを介して取得した動作指示を含む動作情報を保守訓練支援装置１００に送信する。

【0033】

このようなＶＲゴーグル１６０およびコントローラ１７０を用いることで、ユーザは、作業対象のオブジェクトが配置されたＶＲ空間の中で、オブジェクトを把持する動作、把持したままオブジェクトを動かす動作あるいは把持したオブジェクトを開放する動作などの保守作業に関する様々な種類の動作を行うことができる。

【0034】

＜計算機１５０＞
計算機１５０は、保守作業の訓練を行うＶＲ空間の表示情報をＶＲゴーグル１６０に表示させる装置であって、例えば、ＰＣ（Ｐｅｒｓｏｎａｌ Ｃｏｍｐｕｔｅｒ）によって実現される。なお、計算機１５０は、要求される処理スペックを満たせば、タブレット端末やスマートフォンなどの装置であっても良い。

【0035】

計算機１５０は、３次元映像であるＶＲ表示情報を保守訓練支援装置１００から取得すると、３Ｄレンダリングを行う。具体的には、計算機１５０は、保守訓練支援装置１００から取得したＶＲ表示情報を用いてリアルタイムに３次元映像を生成するリアルタイムレンダリングを行う。また、計算機１５０は、３Ｄレンダリングにより生成した３次元映像であるＶＲ表示情報をＶＲゴーグル１６０に出力する。

【0036】

また、計算機１５０は、ＶＲゴーグル１６０およびコントローラ１７０から取得した動作情報を保守訓練支援装置１００に送信する処理を行う。

【0037】

＜保守訓練支援装置１００＞
保守訓練支援装置１００は、ＶＲ空間におけるユーザの保守訓練を支援する装置であって、例えば、サーバ計算機やクラウドサーバあるいはパーソナルコンピュータにより実現される。具体的には、保守訓練支援装置１００は、ユーザが保守作業の訓練を行う３次元映像のＶＲ表示情報を生成し、計算機１５０を介して、当該訓練を行うユーザが装着するＶＲゴーグル１６０にＶＲ表示情報を表示させる。

【0038】

また、保守訓練支援装置１００は、ＶＲゴーグル１６０やコントローラ１７０から取得した動作情報に基づきユーザの動作に連動して変化するＶＲ空間の表示情報を生成し、計算機１５０を介してＶＲゴーグル１６０に表示させる。

【0039】

＜＜保守訓練支援装置１００の詳細＞＞
図２は、保守訓練支援装置１００の機能構成の一例を示したブロック図である。図示するように、保守訓練支援装置１００は、処理部１１０と、記憶部１２０と、通信部１３０と、を有している。

【0040】

処理部１１０は、保守訓練支援装置１００で実行される様々な処理を行う機能部である。具体的には、処理部１１０は、各処理を実行するための機能部として、表示情報生成部１１１と、動作特定部１１２と、を有している。

【0041】

＜＜＜表示情報生成部１１１＞＞＞
表示情報生成部１１１は、ＶＲ表示情報を生成する機能部である。具体的には、表示情報生成部１１１は、記憶部１２０に記憶されているオブジェクト等に関する各種の情報や、ＶＲゴーグル１６０およびコントローラ１７０から取得した動作情報を用いて、ＶＲ空間内で保守作業の訓練を行う様子を３次元映像で表したＶＲ表示情報を生成する。また、表示情報生成部１１１は、通信部１３０を介して、ＶＲ表示情報を計算機１５０に送信する。

【0042】

＜＜＜動作特定部１１２＞＞＞
動作特定部１１２は、ＶＲ空間におけるユーザの動作やオブジェクトの動きを特定する機能部である。動作特定部１１２は、コントローラ１７０からの入力もしくはＶＲゴーグル１６０からの入力（ＶＲゴーグル１６０で認識されたハンドジェスチャーの内容を示す）を受け付けて、ユーザの動作を特定する。具体的には、動作特定部１１２は、コントローラ１７０またはＶＲゴーグル１６０から受け付けた動作情報を用いて、ＶＲ空間におけるユーザの動作（例えば、手の動きやオブジェクトに対して掴むあるいは放すといった動作）と、ユーザの動作に伴って変化するオブジェクトの位置、オブジェクト同士の距離あるいはオブジェクト同士の干渉といったオブジェクトの動きを特定する。

【0043】

より具体的には、動作特定部１１２は、動作情報と、ＶＲ空間に設定されているグローバル座標系および各オブジェクトに設定されているローカル座標系に基づきオブジェクトの位置、干渉などの物理関係、連動するオブジェクトなどを管理する記憶部１２０内の各種の情報と、を用いて、ＶＲ空間におけるユーザの動作やオブジェクトの動きを特定する。

【0044】

なお、ＶＲ空間におけるユーザの動作やオブジェクトの動きなどを特定する方法は、特に限定されるものではなく、例えば、公知のＶＲ技術が用いられれば良い。

【0045】

＜＜＜記憶部１２０＞＞＞
次に、記憶部１２０について説明する。記憶部１２０は、各種の情報を記憶する機能部である。具体的には、記憶部１２０は、保守作業固有のオブジェクトやその動作が定義されているオブジェクト管理情報ＤＢ（Ｄａｔａｂａｓｅ）１２１と、干渉などの物理関係のあるオブジェクトの情報が登録されている干渉情報１２２と、動作に連動性のあるオブジェクトが登録されているペア情報１２３と、ＶＲ空間における各オブジェクトの最新の位置を記憶した位置情報１２４と、保守作業訓練の手順や作業指示などが登録されているシナリオ情報１２５と、を有している。

【0046】

図３は、オブジェクト管理情報ＤＢ１２１に格納されているオブジェクト管理情報の一例を示した図である。オブジェクト情報は、オブジェクトの種類や位置および動作などが定義されている情報である。具体的には、オブジェクト管理情報は、識別情報、種類、座標位置および特殊オブジェクトフラグといった項目が対応付けられたレコードを有している。

【0047】

識別情報は、オブジェクトを一意に識別する情報である。種類は、オブジェクトの種類を識別する情報であって、例えば保守作業固有のオブジェクトであるラック、電子機器、ラック扉、ケーブル、電源コード、注意喚起ラベルなどの様々な種類がある。

【0048】

座標位置は、ＶＲ空間におけるオブジェクトの位置を示す座標情報である。なお、座標位置には、ＶＲ空間に設定されるグローバル座標系で特定されるオブジェクトの位置と、個々のオブジェクトに設定されるローカル座標系で特定されるオブジェクトの位置と、の両方が含まれる。

【0049】

また、特殊オブジェクトフラグは、保守作業の訓練により動かすことのできるオブジェクト（例えば、電子機器やラック、ラック扉、ケーブル、電源コード、注意喚起ラベルなど）を示す情報である。具体的には、特殊オブジェクトフラグに「１」が登録されているオブジェクトは、特殊オブジェクトに該当する。なお、保守作業訓練における移動対象に該当しないオブジェクトには、当該フラグに「０」が登録されている。

【0050】

また、オブジェクト管理情報には、これらの項目以外にも、動作の特性（例えば、ラック扉の場合、ローカル座標系におけるＸ～Ｚ軸のいずれかの軸を中心に開閉する等）を定義した情報なども登録されている（図示せず）。

【0051】

図４は、干渉情報１２２の一例を示した図である。干渉情報１２２は、オブジェクト同士の干渉状況を示す情報である。具体的には、干渉情報１２２は、識別情報、干渉オブジェクトおよび干渉部位といった項目が対応付けられたレコードを有している。なお、識別情報は、オブジェクトを一意に識別する情報である。干渉オブジェクトは、識別情報で特定されるオブジェクトから見た場合の干渉対象のオブジェクトであって、当該オブジェクトの識別情報が登録されている。また、干渉部位は、干渉オブジェクトと干渉（接触）している部位を特定する情報であって、例えば、ローカル座標系により特定される情報である。

【0052】

図５は、ペア情報１２３の一例を示した図である。ペア情報１２３は、連動関係にあるオブジェクトを登録した情報である。具体的には、ペア情報１２３には、親オブジェクトと、親オブジェクトの動きに連動する子オブジェクトと、に関する情報が登録されている。より具体的には、ペア情報１２３は、親オブジェクトの識別情報、子オブジェクトの識別情報および座標位置といった項目が対応付けられたレコードを有している。

【0053】

なお、親オブジェクトと子オブジェクトの識別情報は各々、ラックやラック扉などの親オブジェクト（例えば、子オブジェクトが貼り付けられたり、取り付けられたりする側のオブジェクトを指す）と、電子機器や注意喚起ラベルなどの子オブジェクト（例えば、親オブジェクトに貼り付けたり、取り付けたりする側のオブジェクト）を一意に識別する情報である。座標位置は、親オブジェクトに対する子オブジェクトの位置を特定する座標情報であって、例えば、ローカル座標系により特定される情報である。なお、親オブジェクトに該当するオブジェクトの種類や子オブジェクトに該当するオブジェクトの種類は所定の情報（図示せず）により定義され、当該情報は、記憶部１２０に予め格納されていれば良い。また、例えば、特殊オブジェクトが子オブジェクトとして扱われ、非特殊オブジェクトが親オブジェクトとして扱われても良い。

【0054】

なお、連動性のあるオブジェクト同士が親オブジェクトに該当するか、子オブジェクトに該当するかは、所定の観点（例えば、動作のし難さなど）に応じてオブジェクトごとに予め設定されている優先情報（図示せず）に基づき決定されれば良い。

【0055】

図６は、位置情報１２４の一例を示した図である。位置情報１２４は、ユーザによる保守作業訓練によって動いたオブジェクトの変化後の位置すなわちＶＲ空間における最新の位置を示す情報である。具体的には、位置情報１２４は、識別情報および座標位置といった項目が対応付けられたレコードを有している。なお、識別情報は、オブジェクトを一意に識別する情報である。また、座標位置は、オブジェクトの最新の位置を示す座標情報であって、グローバル座標系およびローカル座標系によって特定される情報である。

【0056】

シナリオ情報１２５は、保守作業訓練の手順や作業指示などが登録されている情報である。具体的には、シナリオ情報１２５には、例えば、電子機器２０１の交換やマウント位置の変更といった複数種類の訓練目的に応じたシナリオと、各シナリオに対応するオブジェクト、オブジェクトの配置、保守作業の手順および作業指示といった情報が登録されている。

【0057】

なお、作業指示は、例えば、「指差し呼称により作業対象のラックを特定してください」、「作業対象のラックに作業中ラベル（注意喚起ラベル）を貼ってください」など、保守作業の手順に従った作業指示を示す情報である。

【0058】

また、これら記憶部１２０内の各情報は一例であって、ＶＲ空間におけるオブジェクトの位置、動き、干渉などの物理関係、連動性のあるオブジェクトおよび移動後の位置などを特定できる情報であれば、情報の種類や内容および情報の紐付け関係などは上記の例に限定されるものではない。

【0059】

＜＜＜通信部１３０＞＞＞
図２に戻って説明する。通信部１３０は、外部装置との間で情報通信を行う機能部である。具体的には、通信部１３０は、計算機１５０と情報通信を行い、ＶＲゴーグル１６０やコントローラ１７０から出力された動作情報を取得する。また、通信部１３０は、表示情報生成部１１１により生成されたＶＲ表示情報を計算機１５０に送信する。

【0060】

＜ＶＲゴーグル１６０に表示されるＶＲ空間の一例＞
図７は、保守作業訓練を行うＶＲ空間の一例を示した図である。図示するように、保守作業訓練のＶＲ空間には、例えば、ラック２００、電子機器２０１および注意喚起ラベル２０２などの保守作業固有のオブジェクトと、作業指示ウィンドウ２０３と、ユーザの手２０４（図示する例は、手２０４の形状を簡略化している）が表示されている。

【0061】

なお、ラック２００などの各オブジェクトや作業指示ウィンドウ２０３は、前述の記憶部１２０に格納されている情報に基づいてＶＲ空間内に表示されている。また、ユーザの手２０４は、ＶＲゴーグル１６０やコントローラ１７０から取得した動作情報に基づき、ＶＲ空間内の対応する位置に表現されている。

【0062】

＜保守作業特有の動作および補助情報の表示＞
図８は、注意喚起ラベル２０２の貼り付け動作の一例を示した図である。保守作業では、誤作業防止の観点から、作業対象の電子機器２０１などがマウントされているラック２００やラック扉に作業対象を示す注意喚起ラベル２０２（例えば、「作業中」といった文字が記載されたラベル）を貼り付けることがルール化されている。処理部１１０は、このような保守作業特有の動作をユーザがＶＲ空間で訓練できるようにする。

【0063】

具体的には、表示情報生成部１１１は、記憶部１２０内の各情報を用いて、ＶＲ空間の所定位置（例えば、ラック２００付近など）に注意喚起ラベル２０２を配置したＶＲ表示情報を生成する。また、動作特定部１１２は、動作情報と、記憶部１２０内の各情報と、に基づいて、ユーザの手２０４から注意喚起ラベル２０２までの距離を計算する。また、動作特定部１１２は、当該距離が所定未満のときに把持する動作指示が入力された場合、表示情報生成部１１１を介して、ユーザの手２０４が注意喚起ラベル２０２を把持する動作のＶＲ表示情報を生成する。

【0064】

また、動作特定部１１２は、動作情報と、記憶部１２０内の各情報と、に基づいて、注意喚起ラベル２０２を把持したユーザの手２０４からラック２００などのオブジェクトまでの距離を計算する。また、当該距離が所定未満の時に注意喚起ラベル２０２を開放する動作指示が入力されたことを動作特定部１１２が検知すると、表示情報生成部１１１は、ユーザの手２０４に近接するラック２００等のオブジェクトの表面に注意喚起ラベル２０２が貼り付けられた状態のＶＲ表示情報を生成する。

【0065】

このような処理により、ユーザは、注意喚起ラベル２０２の貼り付けといった保守作業特有の動作をＶＲ空間内で訓練することができる。

【0066】

また、処理部１１０は、このような保守作業特有の動作を補助するための補助情報として、ラック２００やラック扉の表面に注意喚起ラベル２０２の張り付く位置をガイドするためのワイヤフレーム２１０を表示する。

【0067】

図９は、ワイヤフレーム２１０の第１の表示例を示した図である。ワイヤフレーム２１０の表示にあたり、動作特定部１１２は、動作情報と、記憶部１２０内の各情報と、を用いて、注意喚起ラベル２０２を把持したユーザの手２０４からラック２００やラック扉などのオブジェクトまでの距離を計算し、当該距離が所定未満になったか否かを判定する。

【0068】

そして、当該距離が所定未満であると判定した場合、動作特定部１１２は、表示情報生成部１１１を介して、ユーザが把持している注意喚起ラベル２０２に近接するラック２００等のオブジェクトの表面に、注意喚起ラベル２０２の貼付領域を示すワイヤフレーム２１０を表示する。なお、ワイヤフレーム２１０は、注意喚起ラベル２０２の表面形状（矩形など）と同じ形状で表示される。

【0069】

また、注意喚起ラベル２０２を把持したユーザの手２０４からラック２００などのオブジェクトまでの距離が所定未満の時に注意喚起ラベル２０２を開放する動作指示が入力されたことを動作特定部１１２が検知すると、表示情報生成部１１１は、ラック２００等のオブジェクトの表面であって、ワイヤフレーム２１０の表示位置に注意喚起ラベル２０２が貼り付けられた状態のＶＲ表示情報を生成する。具体的には、表示情報生成部１１１は、ワイヤフレーム２１０によって位置決めされたオブジェクトの表面に注意喚起ラベル２０２が吸着（スナップ）するような貼り付け動作を表現したＶＲ表示情報を生成する。

【0070】

このような処理により、ユーザは、ワイヤフレーム２１０に基づいて、オブジェクト表面に注意喚起ラベル２０２の貼付位置を位置決めすることができる。

【0071】

また、ワイヤフレーム２１０によって位置決めされたオブジェクトの表面に注意喚起ラベル２０２が吸着（スナップ）するように貼り付けられることで、ユーザは、把持する注意喚起ラベル２０２の向きや、手２０４からオブジェクトまでの距離を微調整することなく、訓練に集中することができる。

【0072】

図１０は、電子機器２０１の移動動作の一例を示した図である。保守作業には、例えば、故障した電子機器２０１等を交換する作業や、電子機器２０１のマウント位置を変更する作業がある。処理部１１０は、このような保守作業特有の動作をユーザがＶＲ空間で訓練できるようにする。

【0073】

具体的には、表示情報生成部１１１は、記憶部１２０内の各情報を用いて、電子機器２０１がマウントされたラック２００を配置したＶＲ空間の表示情報を生成する。また、動作特定部１１２は、動作情報と、記憶部１２０内の各情報と、に基づいて、ユーザの手２０４から作業対象の電子機器２０１までの距離を計算する。また、動作特定部１１２は、当該距離が所定未満のときに把持する動作指示が入力された場合、表示情報生成部１１１を介して、ユーザの手２０４が作業対象の電子機器２０１を把持する動作のＶＲ表示情報を生成する。

【0074】

また、動作特定部１１２は、動作情報と、記憶部１２０内の各情報と、に基づいて、電子機器２０１を把持したユーザの手２０４からラック２００などのオブジェクトの表面までの距離を計算する。また、当該距離が所定未満の時に電子機器２０１を開放する動作指示が入力されたことを動作特定部１１２が検知すると、表示情報生成部１１１は、ユーザの手２０４に近接するラック２００内のマウント可能な位置に電子機器２０１がマウントされた状態のＶＲ表示情報を生成する。

【0075】

このような処理により、ユーザは、電子機器２０１の交換や位置変更といった保守作業特有の動作をＶＲ空間内で訓練することができる。

【0076】

また、処理部１１０は、このような保守作業特有の動作を補助するための補助情報として、ラック２００内のマウント可能な位置をガイドするためのワイヤフレーム２１０を表示する。

【0077】

図１１は、ワイヤフレーム２１０の第２の表示例を示した図である。ワイヤフレーム２１０の表示にあたり、動作特定部１１２は、動作情報と、記憶部１２０内の各情報と、を用いて、電子機器２０１を把持したユーザの手２０４からラック２００表面までの距離を計算し、当該距離が所定未満になったか否かを判定する。

【0078】

そして、当該距離が所定未満であると判定した場合、動作特定部１１２は、表示情報生成部１１１を介して、ユーザが把持している電子機器２０１に近接するラック２００内のマウント可能な位置に、電子機器２０１のマウント領域を示すワイヤフレーム２１０を表示する。なお、ワイヤフレーム２１０は、電子機器２０１の表面形状（矩形など）と同じ形状で表示される。

【0079】

また、電子機器２０１を把持したユーザの手２０４からラック２００表面までの距離が所定未満の時に電子機器２０１を開放する動作指示が入力されたことを動作特定部１１２が検知すると、表示情報生成部１１１は、ラック２００表面であって、ワイヤフレーム２１０の表示位置に電子機器２０１がマウントされた状態のＶＲ表示情報を生成する。具体的には、表示情報生成部１１１は、ワイヤフレーム２１０によって位置決めされたラック２００内のマウント可能な位置に電子機器２０１が吸着（スナップ）するような動作を表現したＶＲ表示情報を生成する。

【0080】

このような処理により、ユーザは、ワイヤフレーム２１０に基づいて、ラック２００内に電子機器２０１のマウント位置を位置決めすることができる。

【0081】

また、ワイヤフレーム２１０によって位置決めされたラック２００内に電子機器２０１が吸着（スナップ）するようにマウントされることで、ユーザは、把持する電子機器２０１の向きや、手２０４からラック２００までの距離を微調整することなく、訓練に集中することができる。

【0082】

なお、保守作業特有の動作に関するオブジェクトは、注意喚起ラベル２０２や電子機器２０１に限定されるものではなく、ケーブルや電源コードあるいはそれ以外のオブジェクトも対象となる。その場合でも、保守訓練支援装置１００（特に、処理部１１０）は、上記と同様の処理を行うことで、保守作業特有の動作についてユーザの訓練を可能にし、補助情報の表示によって、より効率的かつ効果的な訓練の実施を支援することができる。

【0083】

また、処理部１１０は、親オブジェクトの動きに連動させて子オブジェクトも動くようにＶＲ空間内でのオブジェクトの位置を変更する。例えば、動作特定部１１２は、或るオブジェクト（例えば、ラック扉や電子機器２０１）に注意喚起ラベル２０２が貼り付けられたことを動作情報に基づき検知すると、優先情報（図示せず）に基づいて、当該オブジェクトを親オブジェクト、注意喚起ラベル２０２を子オブジェクトとしてペア情報１２３に登録する。

【0084】

また、動作特定部１１２は、例えば、動作情報に基づき親オブジェクト（ラック扉や電子機器２０１）が動作したことを検知すると、ペア情報１２３に基づいて、注意喚起ラベル２０２が親オブジェクトと連動する子オブジェクトであることを特定する。そうすると、動作特定部１１２は、親オブジェクトの動き（ラック扉の開閉や電子機器２０１のマウント位置の変更など）に連動させて注意喚起ラベル２０２の位置を移動させ、移動後の座標位置を位置情報１２４に登録する。

【0085】

また、動作特定部１１２は、表示情報生成部１１１を介して、親オブジェクトや子オブジェクトの動作を表すＶＲ表示情報を生成する。

【0086】

このような処理により、処理部１１０は、ＶＲ空間におけるよりリアルなオブジェクトの動作を表現することができる。

【0087】

＜ハードウェア構成＞
図１２は、保守訓練支援装置１００のハードウェア構成の一例を示した図である。図示するように、保守訓練支援装置１００は、プロセッサ３１０と、メモリ３２０と、ストレージ３３０と、通信装置３４０と、を有し、各構成要素はバス３５０により接続されている。また、電源（不図示）は、一次電池でも、充電可能な二次電池でも良く、消耗・劣化した際に交換可能とすることができる。

【0088】

プロセッサ３１０はＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）、ＧＰＵ（Ｇｒａｐｈｉｃｓ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）等の演算装置であり、メモリ３２０又はストレージ３３０に記録されたプログラムに従って処理を実行する。保守訓練支援装置１００では、メモリ３２０又はストレージ３３０上に読み出されたプログラムに従って動作するプロセッサ３１０により処理が行われる。処理部１１０は、プロセッサ３１０がプログラムを実行することにより各々の機能を実現する。

【0089】

メモリ３２０は、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）又はフラッシュメモリ等の記憶装置であり、プログラムやデータが一時的に読み出される記憶エリアとして機能する。ストレージ３３０は、書き込み及び読み出し可能な記憶装置である。記憶部１２０は、メモリ３２０又はストレージ３３０によりその機能が実現される。なお、記憶部１２０は、通信装置３４０を介して接続される記憶装置によってその機能が実現されても良い。

【0090】

通信装置３４０は、保守訓練支援装置１００を外部の装置と通信接続するためのインターフェースである。

【0091】

なお、保守訓練支援装置１００の各構成要素の処理は、１つのハードウェアで実行されてもよいし、複数のハードウェアで実行されてもよい。また、保守訓練支援装置１００の各構成要素の処理は、１つのプログラムで実現されてもよいし、複数のプログラムで実現されてもよい。

【0092】

＜保守訓練支援処理＞
図１３は、保守訓練支援処理の一例を示したフロー図である。当該処理は、例えば表示情報生成部１１１が処理の開始指示をユーザから受け付けると開始される。このとき、ユーザは、自身が訓練したい所定のシナリオをシナリオ情報１２５から選択して処理を開始する。

【0093】

処理が開始されると、表示情報生成部１１１は、ＶＲ表示情報を生成する（ステップＳ１０）。具体的には、表示情報生成部１１１は、シナリオ情報１２５を用いて、ユーザが選択したシナリオに対応するオブジェクト、オブジェクトの配置、保守作業の手順および作業指示といった情報を特定する。また、表示情報生成部１１１は、特定したオブジェクト等を配置したＶＲ空間の表示情報を生成する。

【0094】

また、表示情報生成部１１１は、通信部１３０を介して動作情報を取得すると、当該動作情報と、記憶部１２０内の各情報と、に基づき、ユーザの動作に応じて変化するＶＲ空間の表示情報を生成し、通信部１３０を介して、当該ＶＲ表示情報を計算機１５０に送信する。

【0095】

次に、動作特定部１１２は、取得した動作情報および記憶部１２０内の各情報に基づき、ユーザの第１の動作を検知したか否かを判定する（ステップＳ２０）。具体的には、動作特定部１１２は、注意喚起ラベル２０２を把持したユーザの手２０４から所定のオブジェクト（例えば、ラック２００や電子機器２０１など）までの距離が所定未満の時に、ユーザの第１の動作を検知したと判定する。

【0096】

あるいは、動作特定部１１２は、電子機器２０１を把持したユーザの手２０４からラック２００表面までの距離が所定未満の時に、ユーザの第１の動作を検知したと判定する。

【0097】

そして、第１の動作を検知したと判定した場合（ステップＳ２０でＹｅｓ）、表示情報生成部１１１は、ワイヤフレーム２１０を表示する（ステップＳ３０）。具体的には、表示情報生成部１１１は、対象のオブジェクト（例えば、ラック２００やラック扉）の表面あるいは対象のオブジェクト内（ラック２００内）のマウント可能な位置にワイヤフレーム２１０を表示する。一方で、第１の動作を検知していないと判定した場合（ステップＳ２０でＮｏ）、動作特定部１１２は、処理をステップＳ１０に戻す。

【0098】

次に、動作特定部１１２は、取得した動作情報および記憶部１２０内の各情報に基づき、ユーザの第２の動作を検知したか否かを判定する（ステップＳ４０）。具体的には、動作特定部１１２は、注意喚起ラベル２０２を開放する動作指示が入力された場合、ユーザの第２の動作を検知したと判定する。

【0099】

あるいは、動作特定部１１２は、電子機器２０１を開放する動作指示が入力された場合、ユーザの第２の動作を検知したと判定する。

【0100】

そして、動作特定部１１２が第２の動作を検知したと判定した場合（ステップＳ４０でＹｅｓ）、表示情報生成部１１１は、ワイヤフレーム２１０によって位置決めされたオブジェクトの表面あるいはオブジェクト内のマウント可能な位置に注意喚起ラベル２０２あるいは電子機器２０１が吸着（スナップ）するような動作を表現したＶＲ表示情報を生成する（ステップＳ５０）。一方で、第２動作を検知していないと判定した場合（ステップＳ４０でＮｏ）、動作特定部１１２は、処理をステップＳ２０に戻す。

【0101】

次に、動作特定部１１２は、ペア情報１２３に親オブジェクトおよび子オブジェクトが登録されており、親オブジェクトに対するユーザの動作指示を受け付けたか否かを判定する（ステップＳ６０）。具体的には、動作特定部１１２は、動作情報と、ペア情報１２３と、記憶部１２０内のその他の情報と、に基づき、上記判定を行う。

【0102】

そして、動作特定部１１２が親オブジェクトに対するユーザの動作指示を受け付けたと判定した場合（ステップＳ６０でＹｅｓ）、表示情報生成部１１１は、親オブジェクトおよび子オブジェクトの位置が連動して移動するＶＲ表示情報を生成する（ステップＳ７０）。また、表示情報生成部１１１は、ステップＳ７０を行うと、処理をステップＳ１０に戻す。一方で、当該指示を受け付けていないと判定した場合（ステップＳ６０でＮｏ）、表示情報生成部１１１は、処理をステップＳ１０に戻す。

【0103】

以上、保守訓練支援処理について説明した。

【0104】

このような保守訓練支援装置によれば、仮想現実の中で、より効率的かつ効果的に電子機器等の保守作業に関する訓練の実施を支援することができる。

【0105】

特に、保守訓練支援装置は、保守固有のオブジェクトを配置し、保守作業特有の動作を実行できるＶＲ空間をユーザに提供する。これにより、ユーザは、広いスペースを必要としない仮想現実の中で、保守作業のリアルな訓練を体験、実施することができる。

【0106】

また、保守訓練支援装置は、電子機器等の保守作業特有の動作を表す３次元映像をＶＲ表示情報としてＶＲゴーグルに表示させることができる。また、保守訓練支援装置は、保守作業固有のオブジェクトや、保守作業特有の動作を補助するための補助情報を表示することができる。そのため、ユーザは、仮想現実の中で、より効率的かつ効果的に電子機器等の保守作業の訓練を実施することができる。

【0107】

なお、本発明は、上記の実施形態に限られるものではなく、様々な変形が可能である。例えば、保守訓練支援装置は、ＶＲゴーグルが計算機と同様の処理を実行できる機能を備えている場合には、計算機の代わりに、スタンドアロン型のＶＲゴーグルが用いられても良い。なお、コントローラは、スタンドアロン型のＶＲゴーグルとの間で情報通信を行い、ＶＲゴーグルを介して保守訓練支援装置にユーザの動作情報を送信する。

【0108】

また、上記した実施形態の例は、本発明を分かり易くするために詳細に説明したものであり、本発明は、ここで説明した全ての構成を備えるものに限定されない。また、ある実施形態の一例の構成の一部を他の一例の構成に置き換えることが可能である。また、ある実施形態の一例の構成に他の一例の構成を加えることも可能である。また、各実施形態の一例の構成の一部について、他の構成の追加・削除・置換をすることもできる。また、上記の各構成、機能、処理部、処理手段等は、それらの一部又は全部を、例えば集積回路で設計する等によりハードウェアで実現してもよい。また、図中の制御線や情報線は、説明上必要と考えられるものを示しており、全てを示しているとは限らない。ほとんど全ての構成が相互に接続されていると考えてもよい。

【符号の説明】

【0109】

１０００・・・保守訓練支援システム、１００・・・保守訓練支援装置、１１０・・・処理部、１１１・・・表示情報生成部、１１２・・・動作特定部、１２０・・・記憶部、１２１・・・オブジェクト管理情報ＤＢ、１２２・・・干渉情報、１２３・・・ペア情報、１２４・・・位置情報、１２５・・・シナリオ情報、１３０・・・通信部、３１０・・・プロセッサ、３２０・・・メモリ、３３０・・・ストレージ、３４０・・・通信装置、３５０・・・バス、Ｎ・・・ネットワーク

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】