(19)【発行国】日本国特許庁(JP)
(12)【公報種別】公開特許公報(A)
(11)【公開番号】P2022047565
(43)【公開日】2022-03-25
(54)【発明の名称】職業訓練装置
(51)【国際特許分類】
G09B 19/00 20060101AFI20220317BHJP
G09B 9/00 20060101ALI20220317BHJP
G06F 3/01 20060101ALI20220317BHJP
【ＦＩ】
G09B19/00 H
G09B9/00 Z
G06F3/01 510
【審査請求】有
【請求項の数】6
【出願形態】ＯＬ
(21)【出願番号】P 2020153409
(22)【出願日】2020-09-14
(71)【出願人】
【識別番号】520354795
【氏名又は名称】株式会社ビーライズ
(74)【代理人】
【識別番号】110001427
【氏名又は名称】特許業務法人前田特許事務所
(72)【発明者】
【氏名】波多間 俊之
(72)【発明者】
【氏名】林 健司
(72)【発明者】
【氏名】高野 智幸
(72)【発明者】
【氏名】石原 裕輝
【テーマコード（参考）】
5E555
【Ｆターム（参考）】
5E555AA11
5E555BA38
5E555BB38
5E555BC01
5E555BE17
5E555CB19
5E555DA08
5E555DB53
5E555FA00
(57)【要約】
【課題】丁寧さに関する評価を適切にかつ客観的に行える職業訓練装置を提供する。
【解決手段】職業訓練装置１は、仮想空間画像を表示する仮想空間表示部２と、物を取り扱う職業の現場を再現し、利用者に物を取り扱わせる作業を仮想的に実行可能にする仮想空間画像を仮想空間表示部２に表示させる表示制御部２０と、利用者の動作に関する情報を取得する取得部５と、利用者が物を取り扱うときに取得された動作に関する情報に基づいて利用者の丁寧さを評価する評価部２２と、評価部２２で評価された評価結果を表示する結果表示部１２とを備えている。
【選択図】図２
【解決手段】職業訓練装置１は、仮想空間画像を表示する仮想空間表示部２と、物を取り扱う職業の現場を再現し、利用者に物を取り扱わせる作業を仮想的に実行可能にする仮想空間画像を仮想空間表示部２に表示させる表示制御部２０と、利用者の動作に関する情報を取得する取得部５と、利用者が物を取り扱うときに取得された動作に関する情報に基づいて利用者の丁寧さを評価する評価部２２と、評価部２２で評価された評価結果を表示する結果表示部１２とを備えている。
【選択図】図２
【特許請求の範囲】
【請求項1】
仮想空間で職業の訓練を可能にする職業訓練装置において、
職業訓練を行うための仮想空間画像を表示する仮想空間表示部と、
物を取り扱う職業の現場を再現し、前記職業訓練装置の利用者に物を取り扱わせる作業を仮想的に実行可能にする仮想空間画像を前記仮想空間表示部に表示させる表示制御部と、
前記利用者の動作に関する情報を取得する取得部と、
前記利用者が物を取り扱うときに前記取得部により取得された前記動作に関する情報に基づいて前記利用者の丁寧さを評価する評価部と、
前記評価部で評価された評価結果を表示する結果表示部とを備えていることを特徴とする職業訓練装置。
職業訓練を行うための仮想空間画像を表示する仮想空間表示部と、
物を取り扱う職業の現場を再現し、前記職業訓練装置の利用者に物を取り扱わせる作業を仮想的に実行可能にする仮想空間画像を前記仮想空間表示部に表示させる表示制御部と、
前記利用者の動作に関する情報を取得する取得部と、
前記利用者が物を取り扱うときに前記取得部により取得された前記動作に関する情報に基づいて前記利用者の丁寧さを評価する評価部と、
前記評価部で評価された評価結果を表示する結果表示部とを備えていることを特徴とする職業訓練装置。
【請求項2】
請求項１に記載の職業訓練装置において、
前記取得部は、前記動作に関する情報として前記利用者の手の加速度、位置及び角度を取得し、
前記評価部は、前記取得部により取得された前記利用者の手の加速度、位置及び角度に基づいて前記利用者の丁寧さを評価することを特徴とする職業訓練装置。
前記取得部は、前記動作に関する情報として前記利用者の手の加速度、位置及び角度を取得し、
前記評価部は、前記取得部により取得された前記利用者の手の加速度、位置及び角度に基づいて前記利用者の丁寧さを評価することを特徴とする職業訓練装置。
【請求項3】
請求項１または２に記載の職業訓練装置において、
前記表示制御部は、前記利用者に、器具を取り扱わせる作業を仮想的に実行可能にする仮想空間画像を前記仮想空間表示部に表示させ、
前記評価部は、前記利用者が前記器具を取り扱うときに前記取得部により取得された前記動作に関する情報に基づいて前記利用者の丁寧さを評価することを特徴とする職業訓練装置。
前記表示制御部は、前記利用者に、器具を取り扱わせる作業を仮想的に実行可能にする仮想空間画像を前記仮想空間表示部に表示させ、
前記評価部は、前記利用者が前記器具を取り扱うときに前記取得部により取得された前記動作に関する情報に基づいて前記利用者の丁寧さを評価することを特徴とする職業訓練装置。
【請求項4】
請求項１または２に記載の職業訓練装置において、
前記表示制御部は、前記利用者に飲食物を取り扱わせる作業を仮想的に実行可能にする仮想空間画像を前記仮想空間表示部に表示させ、
前記評価部は、前記利用者が前記飲食物を取り扱うときに前記取得部により取得された前記動作に関する情報に基づいて前記利用者の丁寧さを評価することを特徴とする職業訓練装置。
前記表示制御部は、前記利用者に飲食物を取り扱わせる作業を仮想的に実行可能にする仮想空間画像を前記仮想空間表示部に表示させ、
前記評価部は、前記利用者が前記飲食物を取り扱うときに前記取得部により取得された前記動作に関する情報に基づいて前記利用者の丁寧さを評価することを特徴とする職業訓練装置。
【請求項5】
請求項１から３のいずれか１つに記載の職業訓練装置において、
前記表示制御部は、荷物を取り扱う職業の現場を再現し、前記利用者に前記荷物を取り扱わせる作業を仮想的に実行可能にする仮想空間画像を前記仮想空間表示部に表示させ、
前記評価部は、前記利用者が前記荷物を取り扱うときに前記取得部により取得された前記動作に関する情報に基づいて前記利用者の丁寧さを評価することを特徴とする職業訓練装置。
前記表示制御部は、荷物を取り扱う職業の現場を再現し、前記利用者に前記荷物を取り扱わせる作業を仮想的に実行可能にする仮想空間画像を前記仮想空間表示部に表示させ、
前記評価部は、前記利用者が前記荷物を取り扱うときに前記取得部により取得された前記動作に関する情報に基づいて前記利用者の丁寧さを評価することを特徴とする職業訓練装置。
【請求項6】
請求項１から５のいずれか１つに記載の職業訓練装置において、
前記評価部は、所定の判定基準に基づいて丁寧さを判定し、前記利用者が取り扱う物に応じて前記判定基準を変更することを特徴とする職業訓練装置。
前記評価部は、所定の判定基準に基づいて丁寧さを判定し、前記利用者が取り扱う物に応じて前記判定基準を変更することを特徴とする職業訓練装置。
【発明の詳細な説明】
【技術分野】
【0001】
本発明は、仮想空間を利用して職業の訓練を可能にする職業訓練装置に関する。
【背景技術】
【0002】
近年、バーチャルリアリティー（ＶＲ）技術が一般にも浸透してきており、例えば家庭用ゲーム機等でもＶＲ体験が可能になっている。このＶＲの技術を利用して、実際の現場に行くことなく、職業体験や職業訓練を行う装置が知られている（例えば、特許文献１～３参照）。
【0003】
特許文献１には、様々な職業を体験可能にする職業体験施設をＶＲ技術で仮想空間に構成し、利用者に様々な職業を擬似体験させる装置が開示されている。
【0004】
特許文献２には、職業訓練の対象となる事象をＶＲ技術で仮想空間に擬似的に再現し、所定の訓練シナリオに基づいて様々なシミュレーションを実行する装置が開示されている。
【0005】
特許文献３には、仮想設備をＶＲ技術で仮想空間に構成し、利用者が保持するデバイスの情報に基づいて仮想空間における利用者のアクションを認識し、アクションの認識結果から利用者の評価を行う装置が開示されている。利用者の評価は、所定の作業が終了したか否か、アクションの実行方向と仮想設備との位置関係、利用者の姿勢や所作等に基づいて行われる。
【先行技術文献】
【特許文献】
【0006】
【特許文献1】特開２００３－６７４７２号公報
【特許文献2】特開２００６－７２１９３号公報
【特許文献3】特開２０１９－１９７１６５号公報
【発明の概要】
【発明が解決しようとする課題】
【0007】
ところで、企業で人を採用する時に、その人が採用職種に対してどの程度適しているのかを事前に判断するべく、採用試験が実施されている。しかし、採用試験だけでその人の適性を判断することは難しく、採用後、実際に現場で作業にあたらせた段階で適性が無いと判断される場合がある。
【0008】
また、就職する時に、本人が応募職種に対する適性を知るために、適性診断を受けることがある。しかし、適性試験だけで本人の適性を判断することは難しく、就職後、実際に現場で作業にあたった段階で適性が無いと分かる場合がある。
【0009】
また、そもそも、その職業に適しているか否かを判断すること自体が難しく、明確な基準を作るのは困難であった。例えば、本人はその職業に対する適性がないと思っていても、他の者から見ると適性があると判断される場合があり得る。反対に、本人はその職業に対する適性があると思っているのに、他の者から見ると適性がないと判断されたり、また別の者から見ると適性があると判断されることもあり、適性の判断には属人性がある。
【0010】
そこで、例えば特許文献１～３に開示されているようなＶＲ技術を利用して仮想空間で職業を体験させることによってその職業に対する適性を判断することが考えられる。
【0011】
ところが、特許文献１に開示されている装置では、様々な職業を体験可能にすることが目的となっており、様々な職業を体験するだけで終わるので、適性を判断するには至らない。
【0012】
また、特許文献２に開示されている装置で実行される訓練シナリオはヒューマンエラーを誘発するトラップを持っており、この訓練シナリオを実行することで職業の適性を判断することができるものではない。
【0013】
さらに、特許文献３では、利用者の評価を、作業の終了、アクションの位置、利用者の姿勢や所作等に基づいて行っているが、これは自身の作業の理解度を客観的に見るためのものであり、適性を判断することができるものではない。
【0014】
職業に対する適性を判断する際に、作業のスピード、正確性等は試験等である程度の判断が可能であるが、特に、作業の丁寧さについては試験等で判断することは難しい。丁寧さは作業を行う上で重要な項目であり、職種に応じて、例えば丁寧な作業が最優先される場面があったり、丁寧さよりもスピードが優先される場面があったり、適度な丁寧さが要求される場合があったりする。ところが、丁寧さに関する評価を適切にかつ客観的に行える職業訓練装置は存在しなかった。
【0015】
本発明は、かかる点に鑑みてなされたものであり、その目的とするところは、丁寧さに関する評価を適切にかつ客観的に行える職業訓練装置を提供することにある。
【課題を解決するための手段】
【0016】
上記目的を達成するために、第１の発明は、仮想空間で職業の訓練を可能にする職業訓練装置において、職業訓練を行うための仮想空間画像を表示する仮想空間表示部と、物を取り扱う職業の現場を再現し、前記職業訓練装置の利用者に物を取り扱わせる作業を仮想的に実行可能にする仮想空間画像を前記仮想空間表示部に表示させる表示制御部と、前記利用者の動作に関する情報を取得する取得部と、前記利用者が物を取り扱うときに前記取得部により取得された前記動作に関する情報に基づいて前記利用者の丁寧さを評価する評価部と、前記評価部で評価された評価結果を表示する結果表示部とを備えている。
【0017】
この構成によれば、利用者は、物を取り扱う職業の現場が再現された仮想空間画像を見ることができ、この仮想空間画像により、物を取り扱う作業を仮想的に実行することができ、これにより、職業訓練を実行することができるとともに、職業を擬似体験することができる。職業訓練及び擬似体験中、利用者が物を取り扱うときには、利用者の動作に関する情報が取得部により取得される。利用者の動作に関する情報としては、動作の速度、速度の変化（加速度）、目標位置に対する相対的な距離等が含まれる。評価部は、取得された動作に関する情報に基づいて利用者の丁寧さを評価する。例えば物を動かし始めたときにゆっくりとした動作であれば丁寧であると評価でき、反対に物を動かし始めたときに速い動作であれば丁寧でないと評価できる。物を動かし終わるときも同様に評価できる。利用者の動作に関する情報を利用しているので、丁寧さの評価の際に属人性が排除されて公平でかつ適切な評価結果を得ることができる。得られた評価結果は結果表示部に表示されるので、利用者はもちろん、利用者以外の者も利用者の丁寧さの評価結果を把握できる。
【0018】
第２の発明は、前記取得部は、前記動作に関する情報として前記利用者の手の加速度、位置及び角度を取得し、前記評価部は、前記取得部により取得された前記利用者の手の加速度、位置及び角度に基づいて前記利用者の丁寧さを評価する。
【0019】
この構成によれば、利用者の手の加速度、位置及び角度に基づくことで、利用者の丁寧さを的確に評価できる。
【0020】
第３の発明は、 前記表示制御部は、前記利用者に、器具を取り扱わせる作業を仮想的に実行可能にする仮想空間画像を前記仮想空間表示部に表示させ、前記評価部は、前記利用者が前記器具を取り扱うときに前記取得部により取得された前記動作に関する情報に基づいて前記利用者の丁寧さを評価する。
【0021】
この構成によれば、各種器具を取り扱う職業を訓練できる。器具を取り扱う職業としては、例えば飲食業があるが、これに限られるものではなく、例えば製造業や土木工事等であってもよい。これらの業種では、器具を使用することが多く、器具の取り扱いにも丁寧さが要求される場面が多いので、器具を取り扱うときに取得された動作に関する情報に基づくことで、利用者の丁寧さを的確に評価できる。器具は、例えば調理器具、電動ドライバー、各種作業器具等を挙げることができるが、これらに限定されるものではない。
【0022】
第４の発明は、前記表示制御部は、前記利用者に飲食物を取り扱わせる作業を仮想的に実行可能にする仮想空間画像を前記仮想空間表示部に表示させ、前記評価部は、前記利用者が前記飲食物を取り扱うときに前記取得部により取得された前記動作に関する情報に基づいて前記利用者の丁寧さを評価する。
【0023】
すなわち、飲食物を取り扱う際には、その動かし方によって容器から飲食物がこぼれたり、形が崩れるといった事象が起こり得る。このような事象が生じ得る環境下で取得された動作に関する情報に基づくことで、利用者の丁寧さを的確に評価できる。
【0024】
第５の発明は、前記表示制御部は、荷物を取り扱う職業の現場を再現し、前記利用者に前記荷物を取り扱わせる作業を仮想的に実行可能にする仮想空間画像を前記仮想空間表示部に表示させ、前記評価部は、前記利用者が前記荷物を取り扱うときに前記取得部により取得された前記動作に関する情報に基づいて前記利用者の丁寧さを評価する。
【0025】
この構成によれば、荷物を取り扱う職業を訓練できる。荷物を取り扱う職業では、例えば壊れやすい物等のように荷物の種類によって丁寧さが要求される場面が多いので、荷物を取り扱うときに取得された動作に関する情報に基づくことで、利用者の丁寧さを的確に評価できる。また、丁寧さがあまり要求されない荷物も存在しており、そのような荷物の場合には丁寧さよりもスピードを重視した動作がなされているか否かを評価することもできる。
【0026】
第６の発明は、前記評価部は、所定の判定基準に基づいて丁寧さを判定し、前記利用者が取り扱う物に応じて前記判定基準を変更する。
【0027】
一般的に、各種職業では、丁寧さが最優先される物を取り扱う場合と、丁寧さがそれほど要求されない物を取り扱う場合とがある。前者の場合、丁寧さの判定基準としての閾値を高めておく一方、後者の場合、前者の場合よりも閾値を低くすることで、場面に応じた丁寧さの評価が可能になる。
【発明の効果】
【0028】
本発明によれば、利用者に物を取り扱わせる作業を仮想的に実行可能にし、利用者が物を取り扱うときに取得された動作に関する情報に基づいて利用者の丁寧さを適切にかつ客観的に行うことができる。
【図面の簡単な説明】
【0029】
【図1】本発明の実施形態に係る職業訓練装置の使用状態を説明する図である。
【図2】職業訓練装置のブロック図である。
【図3】職業選択の手順を示すフローチャートである。
【図4】スイーツショップステージが選択された場合の評価手順を示すフローチャートである。
【図5A】スイーツショップの店内を仮想的に表示した場合を示す模式図である。
【図5B】スイーツショップの店内に表示される注文リストの一例を示す図である。
【図6】空港ソーティングステージが選択された場合の評価手順を示すフローチャートである。
【図7A】空港ソーティングの現場を仮想的に表示した場合を示す模式図である。
【図7B】発送レーン上の表示の表示の一例を示す図である。
【図7C】発送荷物の伝票の一例を示す図である。
【図8】ＲＰＧショップが選択された場合の評価手順を示すフローチャートである。
【図9A】ＲＰＧショップの店内を仮想的に表示した場合を示す模式図である。
【図9B】ＲＰＧショップの店内に表示される注文リストの一例を示す図である。
【図10】結果表示用ユーザーインターフェース画面の一例を示す図である。
【発明を実施するための形態】
【0030】
以下、本発明の実施形態を図面に基づいて詳細に説明する。尚、以下の好ましい実施形態の説明は、本質的に例示に過ぎず、本発明、その適用物或いはその用途を制限することを意図するものではない。
【0031】
図１は、本発明の実施形態に係る職業訓練装置１の使用状態を説明する図である。職業訓練装置１は、バーチャルリアリティー（ＶＲ）技術を利用した仮想空間で各種職業の訓練及び疑似体験を可能にする装置である。職業訓練装置１の利用者Ａとしては、例えば就職前の者、就職後の者、学生等を挙げることができ、例えば子供が利用者Ａとなることもでき、利用者Ａは特に限定されるものではない。
【0032】
職業訓練装置１は、コンピュータ１０と、ヘッドマウントディスプレイ（以下、ＨＭＤという）２と、右側コントローラ３と、左側コントローラ４とを備えている。ＨＭＤ２は、職業訓練及び疑似体験を行うための仮想空間画像を表示する仮想空間表示部である。ＨＭＤ２、右側コントローラ３及び左側コントローラ４は、例えば上記特許文献に記載された各種訓練の分野や、ゲーム等の分野において従来から用いられている周知の機器であり、汎用品であってもよいし、専用品であってもよい。この実施形態では、Ｆａｃｅｂｏｏｋ社のＯｃｕｌｕｓ Ｑｕｅｓｔを使用している。右側コントローラ３及び左側コントローラ４は、例えば手を入れることが可能なグローブ型（手袋型）であってもよく、その形状や構造や問わない。
【0033】
ＨＭＤ２は、利用者Ａの頭部に装着可能に構成されており、装着状態で利用者Ａの目の前に配置される液晶パネルや有機ＥＬ（Electro-Luminescence）パネル等からなる表示スクリーン２ａを備えている。表示スクリーン２ａは、後述するコンピュータ１０の表示制御部２０によって制御されて利用者Ａの目の前に仮想空間画像を表示する。表示制御部２０はＨＭＤ２に内蔵されていてもよい。仮想空間の表示技術は従来から周知の技術（上記特許文献等に開示されている技術）を適用すればよいので、詳細な説明は省略する。また、ＨＭＤ２は、利用者Ａの左右の耳に対応する部分にスピーカ２ｂがそれぞれ設けられている。スピーカ２ｂは後述するコンピュータ１０によって制御することができる。さらに、ＨＭＤ２には、図示しないが右側コントローラ３及び左側コントローラ４の位置を検出するトラッキングカメラも内蔵されている。
【0034】
右側コントローラ３及び左側コントローラ４は、それぞれ利用者Ａの右手及び左手に装着可能に構成されている。右側コントローラ３及び左側コントローラ４の構造や機能は同じであり、形状が左右対称になっているだけである。右側コントローラ３及び左側コントローラ４は、例えば６自由度のコントローラであり、加速度センサや利用者Ａの指で操作可能なスイッチ等を有している。
【0035】
右側コントローラ３及び左側コントローラ４に内蔵されている加速度センサや、ＨＭＤ２のトラッキングカメラによって右側コントローラ３及び左側コントローラ４の加速度や位置、角度、速度、角速度等を取得する取得部５が構成されている。右側コントローラ３の加速度や位置、角度、速度、角速度等は、利用者Ａの右手の加速度や位置、角度、速度、角速度等と略同じであり、また、左側コントローラ４の加速度や位置、角度、速度、角速度等は、利用者Ａの左手の加速度や位置、角度、速度、角速度等と略同じである。手の加速度や位置、角度、速度、角速度等は、利用者Ａの動作に関する情報であり、略リアルタイムに取得されて更新される。また、右側コントローラ３及び左側コントローラ４の加速度や位置に基づいて、利用者Ａの右手及び左手の速度を算出することもでき、これも利用者Ａの動作に関する情報である。また、側コントローラ３及び左側コントローラ４の速度から利用者Ａの右手及び左手の加速度を算出することができる。さらに、右側コントローラ３及び左側コントローラ４の角速度から利用者Ａの右手及び左手の角速度も算出できる。
【0036】
取得部５の構成は上述した構成に限られるものではなく、従来から周知の各種位置検出方法や加速度検出方法、角速度検出方法に基づいて利用者Ａの右手及び左手の位置、角度、速度、角速度等を取得することができる。
【0037】
コンピュータ１０は、デスクトップ型パーソナルコンピュータ、ノート型パーソナルコンピュータ、タブレット端末、スマートフォン等であってもよい。この実施形態では、コンピュータ１０がデスクトップ型パーソナルコンピュータである場合について説明する。また、後述するコンピュータ１０の各機能のうち一部または全部がＨＭＤ２に内蔵されていてもよい。
【0038】
図２に示すように、コンピュータ１０は、本体部１１と、ディスプレイ１２と、キーボード１３と、マウス１４と、記憶部１５とを備えている。本体部１１には、例えばＣＰＵ（Central Processing Unit）、ＲＡＭ（Random Access Memory）、ＲＯＭ（Read Only Memory）、通信モジュール２４等が内蔵されており、この実施形態では、ＳＳＤ（Solid State Drive）やハードディスクドライブ等からなる記憶部１５も内蔵されている。記憶部１５は、本体部１１とは別体であってもよく、例えばＨＭＤ２に内蔵されていてもよい。
【0039】
ディスプレイ１２には、各種設定画面や、ＨＭＤ２に表示されている画像等を表示させることができる。キーボード１３やマウス１４は、本体部１１を操作するためのデバイスであり、各種設定等を行う際に使用される。記憶部１５には、本体部１１を動作させるためのプログラムや、後述する評価結果等を記憶することができる。
【0040】
尚、ノート型パーソナルコンピュータの場合、本体部１１、ディスプレイ１２、キーボード１３、マウス１４及び記憶部１５が一体化されることになる。また、タブレット端末、スマートフォンの場合、キーボード１３及びマウス１４の代わりにタッチパネル式の操作デバイスが設けられているが、キーボード１３及びマウス１４と同様な操作が可能になっている。
【0041】
本体部１１は、上記通信モジュール２４の他に、表示制御部２０、アクション認識部２１、評価部２２及び結果表示画像生成部２３も有している。表示制御部２０、アクション認識部２１、評価部２２及び結果表示画像生成部２３は、ハードウェアで構成されていてもよいし、ソフトウェアで構成されていてもよいし、ハードウェアとソフトウェアの組み合わせで構成されていてもよい。また、本体部１１側で右側コントローラ３及び左側コントローラ４の位置を取得できる場合には、取得部５の一部が本体部１１に内蔵されていてもよい。
【0042】
本体部１１と、ＨＭＤ２とは通信モジュール２４を介して近距離通信が可能に構成されている。通信モジュール２４によって画像データや音声データをＨＭＤ２に送信できる。本体部１１と、ＨＭＤ２との通信形態は、無線通信であってもよいし、有線通信であってもよい。
【0043】
また、本体部１１と、右側コントローラ３及び左側コントローラ４は、通信モジュール２４を介して近距離通信が可能に構成されている。右側コントローラ３及び左側コントローラ４が有するスイッチの操作状態が本体部１１に出力される。尚、右側コントローラ３及び左側コントローラ４と、ＨＭＤ２とを通信可能にし、ＨＭＤ２を介して右側コントローラ３及び左側コントローラ４のスイッチの操作状態を本体部１１に出力してもよい。この場合の通信形態は、無線通信であってもよいし、有線通信であってもよい。
【0044】
表示制御部２０は、仮想空間画像をＨＭＤ２に表示させる部分であり、この実施形態では本体部１１に設けられているが、ＨＭＤ２と一体化されていてもよい。仮想空間画像の具体例については後述するが、物を取り扱う職業の現場を再現した画像であり、その画像を利用者Ａに見せ、利用者Ａに物を取り扱わせる作業を仮想的に実行可能にする画像である。職業の現場は、第１の職業の現場、第２の職業の現場、第３の職業の現場を含んでおり、これらは全て異なる職業とすることができる。例えば、第１の職業は、飲食物を取り扱う職業（飲食店の職業）とすることができ、例えば喫茶店、レストラン、ファーストフード店、屋台等を挙げることができる。第２の職業は、荷物を取り扱う職業とすることができ、例えば、運送会社の荷役、空港における荷役、各種配達所の荷役、会社内の荷役等を挙げることができる。これら職業を運送業の一部と呼ぶこともできる。第３の職業は、例えば実在しない職業とすることができ、あるゲーム内の職業や、仮想の職業等を挙げることができる。
【0045】
アクション認識部２１には、取得部５で取得された利用者Ａの動作に関する情報が入力される。アクション認識部２１は、利用者Ａの動作に関する情報に基づいて利用者Ａがどのような動作を行ったかを推測する。例えば、右側コントローラ３が持ち上げられたら利用者Ａが右手を挙げたと、右側コントローラ３が下げられたら利用者Ａが右手を下げたと、アクション認識部２１が認識する。その他にも、右側コントローラ３及び左側コントローラ４の位置情報等に基づいて、利用者Ａの左右の手の姿勢や位置、移動速度を認識できるとともに、利用者Ａの体の位置や移動速度等も認識することができる。この認識手法は従来から周知の手法を用いることができる。
【0046】
評価部２２は、第１評価部２２ａと、第２評価部２２ｂと、第３評価部２２ｃと、総合評価部２２ｄとを有している。詳細は後述するが、第１評価部２２ａは、上記第１の職業の現場で利用者Ａが物を取り扱うときに取得部５により取得された利用者Ａの動作に関する情報に基づいて利用者Ａの丁寧さを評価する部分である。また、第２評価部２２ｂは、上記第２の職業の現場で利用者Ａが物を取り扱うときに取得部５により取得された利用者Ａの動作に関する情報に基づいて利用者Ａの丁寧さを評価する部分である。また、第３評価部２２ｃは、上記第３の職業の現場で利用者Ａが物を取り扱うときに取得部５により取得された利用者Ａの動作に関する情報に基づいて利用者Ａの丁寧さを評価する部分である。
【0047】
（第１評価部２２ａ）
第１評価部２２ａは、飲食店で食品を調理器具で掴んで運ぶピッキング動作と、飲食物を盛り付ける盛り付け動作と、調理器具を扱う動作の３種類の動作にて丁寧さを評価する。尚、飲食物、容器、道具等は、全て仮想空間に立体的に表示される仮想的なものであり、利用者Ａが視認可能なオブジェクトと呼ぶこともできる。また、オブジェクトには、電子レンジやオーブン、コンロのような加熱用調理器具が含まれていてもよい。加熱用調理器具を取り扱うときの利用者の手の加速度、位置、速度、角速度等に基づいて、利用者の丁寧さを評価することができる。例えば、電子レンジやオーブンの扉の開け閉め時にゆっくりと操作する場合には丁寧であると評価し、扉の開け閉めの速度が所定以上に速いと丁寧でないと評価する。
第１評価部２２ａは、飲食店で食品を調理器具で掴んで運ぶピッキング動作と、飲食物を盛り付ける盛り付け動作と、調理器具を扱う動作の３種類の動作にて丁寧さを評価する。尚、飲食物、容器、道具等は、全て仮想空間に立体的に表示される仮想的なものであり、利用者Ａが視認可能なオブジェクトと呼ぶこともできる。また、オブジェクトには、電子レンジやオーブン、コンロのような加熱用調理器具が含まれていてもよい。加熱用調理器具を取り扱うときの利用者の手の加速度、位置、速度、角速度等に基づいて、利用者の丁寧さを評価することができる。例えば、電子レンジやオーブンの扉の開け閉め時にゆっくりと操作する場合には丁寧であると評価し、扉の開け閉めの速度が所定以上に速いと丁寧でないと評価する。
【0048】
また、食品を客に渡すときや、客のテーブルに出すときの利用者の手の加速度、位置、速度、角速度等に基づいて、利用者の丁寧さを評価することもできる。食品を客にゆっくりと渡す場合には丁寧であると評価し、食品を渡す際の速度が所定以上に速いと丁寧でないと評価する。
【0049】
また、例えば注文を受けるためのタブレット端末や受注専用端末を操作するときの利用者の手の加速度、位置、速度、角速度等に基づいて、利用者の丁寧さを評価することもできる。端末の操作時に強く端末を叩くような動作の場合、丁寧でないと評価する。
【0050】
以下、第１評価部２２ａによる具体的な評価手法について説明する。
１．ピッキング動作時における丁寧さの評価
飲食物を入れる食器を取り扱うときの取り扱い方によって利用者Ａの丁寧さを評価する。飲食物を入れる前の空の食器を取り扱う時には、その容器の受け渡し先（場所または人）、コントローラ３、４の加速度、角度、速度、角速度、コントローラ３、４の位置情報等を用いて丁寧さを評価する。飲食物が入った食器を取り扱う時には、その容器の受け渡し先、コントローラ３、４の加速度、角度、速度、角速度、コントローラ３、４の位置情報に加えて、容器の角度を用いて判定する。容器の角度は、コントローラ３、４の角度から求めることができる。尚、容器を仮想空間で利用者Ａが把持する操作は、コントローラ３、４のボタン操作で行うことができる。例えば、コントローラ３、４のボタンが押されると、その動作が把持動作であるとして、仮想空間上で仮想の利用者Ａが仮想の容器を把持する。また、把持した容器を利用者Ａが放す動作も、コントローラ３、４のボタン操作で行うことができる。例えば、コントローラ３、４のボタンから指が放されると、その動作が放す動作であるとして、仮想空間上で仮想の利用者Ａが仮想の容器を放す。
１．ピッキング動作時における丁寧さの評価
飲食物を入れる食器を取り扱うときの取り扱い方によって利用者Ａの丁寧さを評価する。飲食物を入れる前の空の食器を取り扱う時には、その容器の受け渡し先（場所または人）、コントローラ３、４の加速度、角度、速度、角速度、コントローラ３、４の位置情報等を用いて丁寧さを評価する。飲食物が入った食器を取り扱う時には、その容器の受け渡し先、コントローラ３、４の加速度、角度、速度、角速度、コントローラ３、４の位置情報に加えて、容器の角度を用いて判定する。容器の角度は、コントローラ３、４の角度から求めることができる。尚、容器を仮想空間で利用者Ａが把持する操作は、コントローラ３、４のボタン操作で行うことができる。例えば、コントローラ３、４のボタンが押されると、その動作が把持動作であるとして、仮想空間上で仮想の利用者Ａが仮想の容器を把持する。また、把持した容器を利用者Ａが放す動作も、コントローラ３、４のボタン操作で行うことができる。例えば、コントローラ３、４のボタンから指が放されると、その動作が放す動作であるとして、仮想空間上で仮想の利用者Ａが仮想の容器を放す。
【0051】
コントローラ３、４の加速度や速度によって把持された容器の加速度や速度を求めることができる。容器を所定の判定値（閾値）未満の加速度及び速度で動かすと丁寧な動作であると判定するが、判定値を超えて速く動かすと丁寧でないと判定する。また、容器の傾斜角度についても判定値を設けておき、容器の傾斜角度が判定値未満であれば丁寧な動作であると判定するが、判定値を超えて傾けると丁寧でないと判定する。このとき、角速度も同様に判定値として利用することができる。
【0052】
上記加速度および角度の判定値は、変更することが可能である。例えば、こぼれたり崩れやすい飲食物（ジュース、コーヒー、酒、シチュー、カレーや生クリーム等）と、こぼれたり崩れにくい飲食物（おにぎり、煮物、パン等）によって判定値を変えてもよい。こぼれたり崩れやすい飲食物が容器に入っている場合には、こぼれたり崩れにくい飲食物が容器に入っていない場合に比べて、加速度及び速度の判定値を低くする。容器を速く動かすと飲食物がこぼれてしまうからである。こぼれたり崩れやすい飲食物が容器に入っている場合には、こぼれたり崩れにくい飲食物が容器に入っていない場合に比べて、容器の傾斜角度の判定値を鉛直に近い判定値にする。容器を傾斜させると飲食物がこぼれてしまうからである。
２．盛り付け動作
容器に食品を盛り付ける動作によっても丁寧さを評価する。すなわち、利用者Ａに飲食物を取り扱わせる作業を仮想的に実行可能にする仮想空間画像を表示制御部２０が生成し、ＨＭＤ２に表示させ、第１評価部２２ａは、利用者Ａが飲食物を取り扱うときに取得部５により取得された動作に関する情報に基づいて利用者Ａの丁寧さを評価する。
２．盛り付け動作
容器に食品を盛り付ける動作によっても丁寧さを評価する。すなわち、利用者Ａに飲食物を取り扱わせる作業を仮想的に実行可能にする仮想空間画像を表示制御部２０が生成し、ＨＭＤ２に表示させ、第１評価部２２ａは、利用者Ａが飲食物を取り扱うときに取得部５により取得された動作に関する情報に基づいて利用者Ａの丁寧さを評価する。
【0053】
例えば、容器に対する食品の相対的な位置が重要でない食器への盛りつけ動作（ごはんや煮物等）では、コントローラ３、４の加速度、角度、速度、角速度を用いて丁寧さを評価する。食品が容器に近づくほど食品の速度を低下させる動作を行った場合には丁寧な動作であると判定し、食品が容器に近づいても食品の速度を低下させない場合には丁寧でないと判定する。また、容器に対する食品の相対的な位置や食品同士の相対的な位置が重要な盛り付け（パフェやケーキ等）では、コントローラ３、４の加速度および角度に加えて、食品同士の相対位置情報を用いて判定したり、食品と容器との相対位置情報を用いて判定する。食品同士の相対位置が予め定められた位置関係に近いほど丁寧な動作であると判定し、予め定められた位置関係から離れるほど丁寧でないと判定する。同様に、食品と容器との相対位置についても、予め定められた位置関係に近いほど丁寧な動作であると判定し、予め定められた位置関係から離れるほど丁寧でないと判定する。尚、食品を仮想空間で利用者Ａが把持する操作は、コントローラ３、４のボタン操作で行うことができる。例えば、コントローラ３、４のボタンが押されると、その動作が食品の把持動作であるとして、仮想空間上で仮想の利用者Ａが仮想の食品を把持する。食品は手で把持する物であってもよいし、後述する調理器具で把持する物であってもよい。食品を放す操作は、コントローラ３、４のボタンを放す操作とすることができる。
３．調理器具を扱う動作
調理器具としては、例えばトング、箸、スプーン、おたま、しゃもじ、フォーク等を挙げることができる。調理器具は、飲食物を作るための道具であり、この場合、利用者Ａに、飲食物を作るための道具を取り扱わせる作業を仮想的に実行可能にする仮想空間画像を表示制御部２０が生成し、ＨＭＤ２に表示させることができる。
３．調理器具を扱う動作
調理器具としては、例えばトング、箸、スプーン、おたま、しゃもじ、フォーク等を挙げることができる。調理器具は、飲食物を作るための道具であり、この場合、利用者Ａに、飲食物を作るための道具を取り扱わせる作業を仮想的に実行可能にする仮想空間画像を表示制御部２０が生成し、ＨＭＤ２に表示させることができる。
【0054】
調理器具を取り扱う動作に基づいて丁寧さを評価することもできる。例えば、トングを把持する操作は、食器の場合と同様にコントローラ３、４のボタン操作で行うことができる。トングの場合、コントローラ３、４の加速度、速度、位置情報、食品との相対位置情報、食器との相対位置情報を用いて判定する。例えば、トングを判定値未満の加速度及び速度で動かすと丁寧な動作であると判定するが、判定値を超えて速く動かすと丁寧でないと判定する。また、トングが容器や容器内の食品に近づくほどトングの速度を低下させる動作を行った場合には丁寧な動作であると判定し、トングが容器や容器内の食品に近づいてもトングの速度を低下させない場合には丁寧でないと判定する。こぼれやすい食品を扱うスプーンやおたま、しゃもじを利用者Ａが取り扱う場合、コントローラ３、４の加速度、位置情報、食品との相対位置情報、食器との相対位置情報に加えて、傾斜角度を用いて判定する。調理器具を放す操作は、コントローラ３、４のボタンを放す操作とすることができる。
【0055】
（第２評価部２２ｂ）
表示制御部２０は、荷物を取り扱う職業の現場を再現し、利用者Ａに荷物を取り扱わせる作業を仮想的に実行可能にする仮想空間画像をＨＭＤ２に表示させることができる。この場合、第２評価部２２ｂは、利用者Ａが荷物を取り扱うときに取得部５により取得された動作に関する情報に基づいて利用者Ａの丁寧さを評価する。
表示制御部２０は、荷物を取り扱う職業の現場を再現し、利用者Ａに荷物を取り扱わせる作業を仮想的に実行可能にする仮想空間画像をＨＭＤ２に表示させることができる。この場合、第２評価部２２ｂは、利用者Ａが荷物を取り扱うときに取得部５により取得された動作に関する情報に基づいて利用者Ａの丁寧さを評価する。
【0056】
例えば、荷物を取り扱う職業（例えば運送業）での丁寧さを評価することが可能であり、具体的には、荷物を運ぶピッキング動作で丁寧さを評価する。尚、荷物は、仮想空間に立体的に表示される仮想的なものであり、利用者Ａが視認可能なオブジェクトと呼ぶこともできる。
【0057】
以下、第２評価部２２ｂによる具体的な評価手法について説明する。
【0058】
例えば運送業では、頑丈なダンボールに入った荷物、壊れ物表示がされたダンボールに入った荷物、天地無用の表示がされたダンボールに入った荷物等を仮想的に取り扱うものとし、これら仮想的な荷物を表示制御部２０が生成し、ランダムに、または所定の順番にＨＭＤ２に表示させる。
【0059】
頑丈なダンボールと、壊れ物表示があるダンボールでは、搬送先、加速度、角度、速度、角速度、位置情報を用いて丁寧さを判定する。複数の搬送先の中から予め決められた搬送先に間違いなく運んだ場合には丁寧な動作であると判定し、誤った搬送先に運んだ場合には丁寧でないと評価する。壊れ物表示があるダンボールを取り扱う場合、頑丈なダンボールを取り扱う場合に比べて加速度の判定値を低くする。壊れ物表示があるダンボールを頑丈なダンボールに比べてゆっくりと移動させた場合には、丁寧な動作であると判定するが、両者を同等の速度で移動させた場合には、丁寧でないと評価する。
【0060】
天地無用の表示があるダンボールでは、搬送先、加速度、位置情報に加えて、角度を用いて判定する。
【0061】
（第３評価部２２ｃ）
表示制御部２０は、あるゲーム内の職業の現場を再現し、利用者Ａに品物（商品）を取り扱わせる作業を仮想的に実行可能にする仮想空間画像をＨＭＤ２に表示させることができる。この場合、第３評価部２２ｃは、利用者Ａが商品を取り扱うときに取得部５により取得された動作に関する情報に基づいて利用者Ａの丁寧さを評価する。
表示制御部２０は、あるゲーム内の職業の現場を再現し、利用者Ａに品物（商品）を取り扱わせる作業を仮想的に実行可能にする仮想空間画像をＨＭＤ２に表示させることができる。この場合、第３評価部２２ｃは、利用者Ａが商品を取り扱うときに取得部５により取得された動作に関する情報に基づいて利用者Ａの丁寧さを評価する。
【0062】
すなわち、ゲーム内のみに存在する職業で利用者Ａの丁寧さを評価することが可能であり、具体的には商品を運ぶピッキング動作で丁寧さを評価する。尚、商品は、仮想空間に立体的に表示される仮想的なものであり、利用者Ａが視認可能なオブジェクトと呼ぶこともできる。
【0063】
以下、第３評価部２２ｃによる具体的な評価手法について説明する。例えば、ロールプレイングゲーム内の商店における販売者を利用者Ａが演じる場面で丁寧さを評価することができる。注文された商品を間違うことなく選択して販売した場合には、丁寧な動作であると判定し、誤った商品を選択して販売した場合には、丁寧でないと評価する。商品の数についても、注文された数だけ提供した場合には、丁寧な動作であると判定し、誤った数を提供した場合には、丁寧でないと評価する。
【0064】
（総合評価部２２ｄ）
総合評価部２２ｄは、第１評価部２２ａ、第２評価部２２ｂ及び第３評価部２２ｃの評価結果をまとめて利用者Ａの丁寧さを最終的に評価する部分である。例えば、第１評価部２２ａによる評価結果が良くても、第２評価部２２ｂ及び第３評価部２２ｃの評価結果が悪ければ、総合評価としては悪いと評価する。また、第１評価部２２ａ、第２評価部２２ｂ及び第３評価部２２ｃの評価結果のうち、任意の評価結果に重み付けをし、その評価結果を重視した総合評価結果を生成することもできる。例えば、第１評価部２２ａによる評価結果に重み付けした場合、第２評価部２２ｂ及び第３評価部２２ｃの評価結果が悪くても、総合評価としては良いと評価する。上述した総合評価結果を生成することなく、第１評価部２２ａ、第２評価部２２ｂ及び第３評価部２２ｃの評価結果をそのまま提示してもよい。また、第１評価部２２ａ、第２評価部２２ｂ及び第３評価部２２ｃの評価結果のうち、任意の１つのみまたは２つのみを提示してもよい。
総合評価部２２ｄは、第１評価部２２ａ、第２評価部２２ｂ及び第３評価部２２ｃの評価結果をまとめて利用者Ａの丁寧さを最終的に評価する部分である。例えば、第１評価部２２ａによる評価結果が良くても、第２評価部２２ｂ及び第３評価部２２ｃの評価結果が悪ければ、総合評価としては悪いと評価する。また、第１評価部２２ａ、第２評価部２２ｂ及び第３評価部２２ｃの評価結果のうち、任意の評価結果に重み付けをし、その評価結果を重視した総合評価結果を生成することもできる。例えば、第１評価部２２ａによる評価結果に重み付けした場合、第２評価部２２ｂ及び第３評価部２２ｃの評価結果が悪くても、総合評価としては良いと評価する。上述した総合評価結果を生成することなく、第１評価部２２ａ、第２評価部２２ｂ及び第３評価部２２ｃの評価結果をそのまま提示してもよい。また、第１評価部２２ａ、第２評価部２２ｂ及び第３評価部２２ｃの評価結果のうち、任意の１つのみまたは２つのみを提示してもよい。
【0065】
評価結果は、例えばＡ、Ｂ、Ｃのようなランク評価であってもよいし、０～１００点のような点数評価であってもよい。
【0066】
（結果表示画像生成部２３）
結果表示画像生成部２３は、利用者Ａの識別情報（例えば名前）、第１評価部２２ａ、第２評価部２２ｂ及び第３評価部２２ｃの評価結果、総合評価結果等を一覧形式で表示するユーザーインターフェース画面を生成する部分である。結果表示画像生成部２３で生成された画面は、ディスプレイ１２に表示される。
結果表示画像生成部２３は、利用者Ａの識別情報（例えば名前）、第１評価部２２ａ、第２評価部２２ｂ及び第３評価部２２ｃの評価結果、総合評価結果等を一覧形式で表示するユーザーインターフェース画面を生成する部分である。結果表示画像生成部２３で生成された画面は、ディスプレイ１２に表示される。
【0067】
（丁寧さの評価手順）
次に、上記のように構成された職業訓練装置１を利用して利用者Ａの丁寧さを評価する手順の具体例を説明する。図３は、丁寧さの評価手順を示すフローチャートである。このフローチャートは、職業訓練装置１のアプリケーションを立ち上げるか、所定の開始操作を行うことによってスタートする。
次に、上記のように構成された職業訓練装置１を利用して利用者Ａの丁寧さを評価する手順の具体例を説明する。図３は、丁寧さの評価手順を示すフローチャートである。このフローチャートは、職業訓練装置１のアプリケーションを立ち上げるか、所定の開始操作を行うことによってスタートする。
【0068】
スタート後のステップＳＡ１では、本体部１１が選択画像をＨＭＤ２に表示させる。選択画像は、第１の職業の現場、第２の職業の現場及び第３の職業の現場の名称やアイコン等を表示する画像である。本例では、第１の職業が飲食物を取り扱う職業であるので、その現場としてスイーツショップステージとし、また、第２の職業が荷物を取り扱う職業であるので、その現場として空港ソーティングステージとし、また、第３の職業が実在しない職業であるので、その現場としてＲＰＧ（ロールプレイングゲーム）ショップとする。これら３つのアイコンのうち、どのアイコンを選択するかは、利用者Ａの右側コントローラ３または左側コントローラ４の操作状態を検出することによって可能である。例えば、アイコンを指すポインタのようなオブジェクトをＨＭＤ２に表示させ、このオブジェクトを右側コントローラ３または左側コントローラ４で操作可能にしておくことができる。アクション認識部２１で右側コントローラ３または左側コントローラ４の操作状態を検出することで、ポインタが指しているアイコンを特定できる。選択操作は、右側コントローラ３または左側コントローラ４のボタンで実行することもできる。
【0069】
利用者Ａによる選択操作が行われると、ステップＳＡ２に進み、選択操作が本体部１１によって受け付けられる。スイーツショップステージが選択された場合にはステップＳＡ３に進み、空港ソーティングステージが選択された場合にはステップＳＡ４に進み、ＲＰＧショップステージが選択された場合にはステップＳＡ５に進む。
【0070】
また、例えば、図３に示すフローチャートのステップＳＡ１の選択画像中に終了アイコンを設けておき、この終了アイコンの操作によって職業訓練を終了するようにしてもよい。
【0071】
ステップＳＡ３に進むと、図４に示すフローチャートのステップＳＢ１に進む。ステップＳＢ１では、スイーツショップステージで丁寧さの評価を行う前に操作の練習を行うか否かの選択を受け付ける。この選択は、上記選択操作と同様に、利用者Ａが右側コントローラ３または左側コントローラ４を操作することで実行できる。
【0072】
ステップＳＢ１でＹＥＳと判定されて利用者Ａが練習を選択した場合にはステップＳＢ２に進み、ナレーションをＨＭＤ２に表示させるとともに、例えば容器やトングを掴む操作、食品の盛り付け操作等を１回ずつ練習させる。
【0073】
ステップＳＢ１でＮＯと判定された場合、及びステップＳＢ２を経た後、ステップＳＢ３に進む。ステップＳＢ３では、利用者Ａのスタート操作を待つ。スタート操作は、上記選択操作と同様に、利用者Ａが右側コントローラ３または左側コントローラ４を操作することで実行できる。
【0074】
本体部１１は、スタート操作がなされたことを検出すると、表示制御部２０に図５Ａに示すようなスイーツショップの店内５０を仮想的に表示した画像を生成してＨＭＤ２に表示させる。この図５Ａは、スイーツショップの店内５０を上方から見た場合を模式的に示しており、このスイーツショップでは、仮想的な客Ｂから注文されたパフェを作って提供する。スイーツショップの店内５０には、壁面５１とドア５２とが設けられている。また、カウンター５３、カウンター５３上のマット５３ａ、注文票５３ｂが設けられるとともに、パフェの作り方が表示される作り方表示パネル５４と、注文リストが表示される注文リスト表示パネル５５とが設けられている。さらに、食器が置いてある食器棚５６、パフェのベースとなる複数種の具材が収容されたベース具材収容箱５７、スプーンが収容されたスプーン収容箱５７ａ、パフェに使用される複数種のアイスクリームが収容されたアイスクリーム収容箱５８、デッィシャーが収容されたデッィシャー収容箱５８ａ、パフェに使用される複数種のソースが収容されたソース収容箱５９、パフェに使用される複数種のトッピングが収容されたトッピング収容箱６０、トングが収容されたトング収容箱６１が設けられている。利用者Ａも店内５０に仮想的に表示される。利用者Ａの両手も仮想的に表示され、右側コントローラ３及び左側コントローラ４を動かすと、店内５０の利用者Ａの手もそれに応じて動くようになっている。
【0075】
図５Ｂは、注文リスト表示パネル５５に表示される注文リストの表示例を示す図である。注文リスト表示パネル５５には、商品のアイコン、商品名、注文数、ピッキング数（提供したパフェの数）等が表示される。
【0076】
図４に示すスローチャートのステップＳＢ４～ＳＢ８が職業訓練フロー及び丁寧さの判定フローである。ステップＳＢ４では、図５Ａに示すように客Ｂがドア５２から入り、カウンター５３の前まで移動してくるとともに、商品であるパフェを注文する。注文されたパフェは注文リスト表示パネル５５に表示され、注文されたパフェの作り方は作り方表示パネル５４に表示される。これらの仮想的な画像は、全て表示制御部２０が生成してＨＭＤ２に表示させる。以後、同様である。また、スピーカ２ｂから効果音やＢＧＭ等の音楽等を流してもよい。
【0077】
ステップＳＢ５では、注文されたパフェを作る。利用者Ａは、仮想空間内で作り方表示パネル５４を見ながら、右側コントローラ３及び左側コントローラ４を動かす。まず、食器棚５６に並べておいてある複数の食器の中から１つの食器（容器、専用グラス等）を把持する。その後、スプーン収容箱５７ａに収容されているスプーンを把持し、ベース具材収容箱５７に収容された所望の具材をすくう動作を行い、すくった具材を食器に入れる動作を行う。スプーンはスプーン収容箱５７ａに戻す。
【0078】
次いで、デッィシャー収容箱５８ａに収容されているデッィシャーを把持し、アイスクリーム収容箱５８に収容された所望のアイスクリームをすくう動作を行い、すくったアイスクリームを食器に入れる動作を行う。デッィシャーはデッィシャー収容箱５８ａに戻す。
【0079】
そして、ソース収容箱５９から所望のソースが入った入れ物を把持して容器内の食材にかける動作を行った後、トング収容箱６１に収容されているトングを把持し、トッピング収容箱６０に収容された所望のトッピングを掴んで食器に入れる動作を行う。
【0080】
どこになる何が把持されたかは右側コントローラ３及び左側コントローラ４の操作状態を検出することで認識可能である。また、ステップＳＢ５の各手順が実行されたか否かは右側コントローラ３及び左側コントローラ４の操作状態を検出することで判定できる。ステップＳＢ５の各手順が実行されているとき、利用者Ａの丁寧さも評価される。ステップＳＢ５の各手順が実行されると、ステップＳＢ６に進む。ステップＳＢ６では、利用者Ａが作ったパフェ（注文されたパフェ）及び注文票５３ｂをカウンター５３に置く動作を行う。次に行うべき動作は仮想空間上にガイド表示されるので、利用者Ａはそのガイド表示を見ながら上記動作を行うことができる。
【0081】
ステップＳＢ７では、ステップＳＢ６で置かれたパフェが正しく作られたパフェであるか否かを判定する。例えば食材が指定された食材でない場合には、ステップＳＢ７でＮＯと判定されてステップＳＢ５に戻る。パフェが正しく作られたパフェである場合にはステップＳＢ８に進み、この職業訓練で獲得したスコアを加点し、客Ｂが退店する。
【0082】
ステップＳＢ４が開始されてからタイマーがスタートするようになっており、経過時間が仮想空間に表示される。ステップＳＢ９では、経過時間が所定時間（制限時間）を超えると、途中であっても訓練が終了する。
【0083】
ステップＳＢ１０では訓練結果や丁寧さの評価結果の表示画面を結果表示画像生成部２３が生成し、ディスプレイ１２に表示させる。ステップＳＢ１１では、ランキング表示を行う。訓練結果としては、正しく作られたパフェの数が多いほど良い結果となるようにしたり、丁寧さの評価が高いほど良い結果となるようにすることができる。また、訓練の途中で、スプーン等の調理器具を落としたり、食材を落とした場合には訓練結果を悪くする。訓練結果や丁寧さの評価結果は点数で表示することもできる。また、ランキング表示では、これまで職業訓練装置１を利用した利用者Ａが複数いる場合に、全利用者中、何位であるかを表示する。
【0084】
ステップＳＢ１２では、利用者Ａの名前を入力する。名前が入力されると、訓練結果及び丁寧さの評価結果が名前を関連付けられて記憶部１５に記憶される。ステップＳＢ１３の後、図３に示すフローチャートのステップＳＡ１に進む。
【0085】
図３に示すフローチャートのステップＳＡ４に進んで空港ソーティングステージが選択された場合には、図６に示すフローチャートのステップＳＣ１に進む。ステップＳＣ１～ＳＣ３は、図４に示すフローチャートのステップＳＢ１～ＳＢ３と同じである。
【0086】
ステップＳＣ４では、本体部１１が、スタート操作がなされたことを検出すると、表示制御部２０に図７Ａに示すような空港ソーティングの現場７０を仮想的に表示した画像を生成してＨＭＤ２に表示させる。この図７Ａは、空港ソーティングの現場７０を上方から見た場合を模式的に示しており、この空港ソーティングの現場７０には、仕訳対象の荷物が複数流れてくる到着レーン７１、到着レーン７１上の荷物が入ったボックス７１ａ、第１発送レーン７２、第２発送レーン７３、第３発送レーン７４、第４発送レーン７５、情報表示パネル７６が設けられている。第１発送レーン７２、第２発送レーン７３、第３発送レーン７４、第４発送レーン７５は行き先が異なっている。また、第１発送レーン７２の上には第１表示器７２ａ、第２発送レーン７３の上には第２表示器７３ａ、第３発送レーン７４の上には第３表示器７４ａ、第４発送レーン７５の上には第４表示器７５ａが設けられている。各表示器７２ａ、７３ａ、７４ａ、７５ａには、それぞれ、出発までの残り時間と、行き先を示す国旗及び国名と、航空会社名とが表示される（図７Ｂ及び図７Ｃ参照）。また、荷物には伝票が付されており、その伝票には、行き先を示す国旗及び国名と、航空会社名とが表示される。また、荷物には、壊れ物表示、天地無用の表示等が付されているものが混在しており、これらをランダムに、または所定の順番にボックス７１ａ内に表示させる。
【0087】
ステップＳＣ４では、荷物が入ったボックス７１ａが到着レーン７１上を流れてくる。利用者Ａがボックス７１ａ内の荷物をピッキングする。利用者Ａが右側コントローラ３または左側コントローラ４のボタンを操作することで実行できる。ステップＳＣ６では、利用者Ａが荷物の伝票を見て、対応する発送レーン７２～７５上、即ち、伝票の国名及び航空会社名と、表示器７２ａ、７３ａ、７４ａ、７５ａの表示とが一致する発送レーン７２～７５に置く動作を行う。
【0088】
ステップＳＣ６では荷物が置かれた発送レーン７２～７５が正しいレーンであったか否かを判定する。正しいレーンであった場合には、ステップＳＣ９にてスコアが加点される。その後、ステップＳＣ８に進み、ボックス７１ａ内の全荷物の発送が完了したか、及び、各発送レーン７２～７５がフライト時間になったかを判定する。各発送レーン７２～７５がフライト時間になっておらず、かつ、全荷物の発送が完了した場合には、ステップＳＣ４に戻る。各発送レーン７２～７５がフライト時間になった場合には、ボックス７１ａ内に荷物が残っていてもステップＳＣ１０に進む。
【0089】
ステップＳＣ４が開始されてからタイマーがスタートするようになっており、経過時間が仮想空間に表示される。ステップＳＣ１０では、経過時間が所定時間（制限時間）を超えると、途中であっても訓練が終了する。その後、ステップＳＣ１１～ＳＣ１４に進む。ステップＳＣ１１～ＳＣ１４は、図４に示すフローチャートのステップＳＢ１０～ＳＢ１３と同様である。ステップＳＣ１４の後、図３に示すフローチャートのステップＳＡ１に進む。
【0090】
図３に示すフローチャートのステップＳＡ５に進んでＲＰＧショップステージが選択された場合には、図８に示すフローチャートのステップＳＤ１に進む。ステップＳＤ１～ＳＤ３は、図４に示すフローチャートのステップＳＢ１～ＳＢ３と同じである。
【0091】
ステップＳＤ４では、本体部１１が、スタート操作がなされたことを検出すると、表示制御部２０に図９Ａに示すようなＲＰＧショップの店内８０を仮想的に表示した画像を生成してＨＭＤ２に表示させる。この図９Ａは、ＲＰＧショップの店内８０を上方から見た場合を模式的に示しており、このＲＰＧショップの店内８０には、壁面８１とドア８２とが設けられている。また、カウンター８３、カウンター８３上のマット８３ａ、注文票８３ｂが設けられるとともに、注文リストが表示される注文リスト表示パネル８４が設けられている。さらに、各種商品が収容された収容箱８５、８６がカウンター８３の上に設置されている。注文リスト表示パネル８４には、図９Ｂに示すように商品のアイコン、商品名、注文数、ピッキング数（提供した商品の数）等が表示される。
【0092】
【0093】
ステップＳＤ５では、利用者Ａが注文された商品を注文された数だけピッキングする。ステップＳＤ６では、利用者Ａがピッキングした商品（注文された商品）及び注文票８３ｂをカウンター８３に置く動作を行う。
【0094】
ステップＳＤ７では、ステップＳＤ６で置かれた商品が正しい商品であるか否かを判定する。ステップＳＤ７では商品の個数も注文通りであるか否か判定する。例えば商品が指定された商品でない場合には、ステップＳＤ７でＮＯと判定されてステップＳＤ５に戻る。置かれた商品が正しい商品である場合にはステップＳＤ８に進む。また、商品が指定された個数でない場合には、ステップＳＤ７でＮＯと判定されてステップＳＤ５に戻る。置かれた商品の個数が正しい個数である場合にはステップＳＤ８に進む。商品の判定と個数の判定をＡＮＤ条件としてもよい。判定後、職業訓練で獲得したスコアを加点し、客Ｂが退店する。
【0095】
ステップＳＤ４が開始されてからタイマーがスタートするようになっており、経過時間が仮想空間に表示される。ステップＳＤ９では、経過時間が所定時間（制限時間）を超えると、途中であっても訓練が終了する。その後、ステップＳＤ１０～ＳＤ１３に進む。ステップＳＤ１０～ＳＤ１３は、図４に示すフローチャートのステップＳＢ１０～ＳＢ１３と同様である。ステップＳＤ１３の後、図３に示すフローチャートのステップＳＡ１に進む。
【0096】
（結果表示）
図１０は、結果表示用ユーザーインターフェース画面９０の一例を示す図である。結果表示用ユーザーインターフェース画面９０は、結果表示画像生成部２３が生成し、ディスプレイ１２に表示させる。例えば職業訓練装置１の利用者Ａや管理者が結果表示操作を実行すると、結果表示画像生成部２３が結果表示用ユーザーインターフェース画面９０を生成してディスプレイ１２に表示させることができる。
図１０は、結果表示用ユーザーインターフェース画面９０の一例を示す図である。結果表示用ユーザーインターフェース画面９０は、結果表示画像生成部２３が生成し、ディスプレイ１２に表示させる。例えば職業訓練装置１の利用者Ａや管理者が結果表示操作を実行すると、結果表示画像生成部２３が結果表示用ユーザーインターフェース画面９０を生成してディスプレイ１２に表示させることができる。
【0097】
結果表示用ユーザーインターフェース画面９０には、利用者Ａの名前を表示する名前表示領域９０ａ、結果を集計した期間やデータ数を表示する表示領域９０ｂが設けられている。さらに、結果表示用ユーザーインターフェース画面９０には、スイーツショップステージ、空港ソーティングステージ及びＲＰＧショップステージごとにデータ数、プレイ時間（訓練時間）、平均スコア、丁寧さ評価等を表示する結果表示領域９０ｃも設けられている。本発明の結果表示部は、ディスプレイ１２で構成されている。結果は利用者Ａにフィードバックしてもよいし、利用者Ａにフィードバックしなくてもよい。
【0098】
（実施形態の作用効果）
以上説明したように、この実施形態によれば、利用者Ａは、物を取り扱う職業の現場が再現された仮想空間画像を見ることができ、この仮想空間画像により、物を取り扱う作業を仮想的に実行することができ、これにより、職業訓練を実行することができる。職業訓練中、利用者Ａが物を取り扱うときには、利用者Ａの動作に関する情報が取得部５により取得される。取得された動作に関する情報に基づいて評価部２２が利用者Ａの丁寧さを評価する。この評価結果は、ディスプレイ１２に表示されるので、利用者Ａはもちろん、利用者Ａ以外の者も利用者Ａの丁寧さの評価結果を把握できる。
以上説明したように、この実施形態によれば、利用者Ａは、物を取り扱う職業の現場が再現された仮想空間画像を見ることができ、この仮想空間画像により、物を取り扱う作業を仮想的に実行することができ、これにより、職業訓練を実行することができる。職業訓練中、利用者Ａが物を取り扱うときには、利用者Ａの動作に関する情報が取得部５により取得される。取得された動作に関する情報に基づいて評価部２２が利用者Ａの丁寧さを評価する。この評価結果は、ディスプレイ１２に表示されるので、利用者Ａはもちろん、利用者Ａ以外の者も利用者Ａの丁寧さの評価結果を把握できる。
【0099】
上述の実施形態はあらゆる点で単なる例示に過ぎず、限定的に解釈してはならない。さらに、特許請求の範囲の均等範囲に属する変形や変更は、全て本発明の範囲内のものである。
【0100】
利用者の動作に関する情報を取得する取得部の例は、上述したコントローラ３、４を用いる例に限られるものではなく、いわゆるハンドトラッキングの技術を利用して利用者の動作に関する情報を取得してもよい。例えば、ＨＭＤ２に内蔵されているカメラによって利用者の両手を撮像可能にしておき、撮像された画像を本体部１１やＨＭＤ２に内蔵された画像処理手段によって画像処理することによって利用者の手を判別する。これにより、手の位置、姿勢、角度を取得することができるとともに、各指が伸びているか、曲がっているか、あるいはどの程度曲がっているかも情報として取得できる。手を判別する手法、及び手の位置等を取得する手法は従来から周知の手法を利用できる。
【0101】
また、職業訓練装置１は、食品関連や荷役関連の業種以外にも、例えば各種製造業や土木作業時の丁寧さを評価する装置として利用することもできる。例えば電動ドライバーや各種作業機械等を仮想オブジェクトとして表示させ、これらを利用者が動かしたり、操作する際の加速度や位置、角度、速度、角速度等を利用して丁寧さを評価できる。
【産業上の利用可能性】
【0102】
以上説明したように、本発明に係る職業訓練装置は、例えば物を取り扱う作業の訓練を実行する際に用いることができる。
【符号の説明】
【0103】
１ 職業訓練装置
２ ＨＭＤ（仮想空間表示部）
５ 取得部
１２ ディスプレイ（結果表示部）
２０ 表示制御部
２２ 評価部
２ ＨＭＤ（仮想空間表示部）
５ 取得部
１２ ディスプレイ（結果表示部）
２０ 表示制御部
２２ 評価部
【図1】
【図2】
【図3】
【図4】
【図5A】
【図5B】
【図6】
【図7A】
【図7B】
【図7C】
【図8】
【図9A】
【図9B】
【図10】