知財求人 - 知財ポータルサイト「IP Force」
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】特許公報(B1)
(11)【特許番号】
(24)【登録日】2022-04-08
(45)【発行日】2022-04-18
(54)【発明の名称】仮想空間体感システム
(51)【国際特許分類】
G06T 19/00 20110101AFI20220411BHJP
A63F 13/56 20140101ALI20220411BHJP
【ＦＩ】
G06T19/00 300B
A63F13/56
【請求項の数】
4
(21)【出願番号】P 2021575439
(86)(22)【出願日】2021-06-01
(86)【国際出願番号】 JP2021020889
【審査請求日】2021-12-17
【早期審査対象出願】
(73)【特許権者】
【識別番号】321001355
【氏名又は名称】株式会社ＡＢＡＬ
(74)【代理人】
【識別番号】110000800
【氏名又は名称】特許業務法人創成国際特許事務所
(72)【発明者】
【氏名】尾小山 良哉
【審査官】板垣 有紀
(56)【参考文献】
【文献】国際公開第２０２１／０９５１７５（ＷＯ，Ａ１）
【文献】特開２０１９－１９２１７８（ＪＰ，Ａ）
【文献】リーン ジン，セカンドライフ 歩き方ハンドブック，初版，日本，株式会社ソーテック社，2007年08月31日，pp. 44, 51
(58)【調査した分野】(Int.Cl.，ＤＢ名)
Ｇ０６Ｔ １９／００
Ａ６３Ｆ １３／５６
(57)【特許請求の範囲】
【請求項1】
第１ユーザ及び第２ユーザが存在する現実空間に対応する仮想空間を生成する仮想空間生成部と、前記第１ユーザに対応する第１アバター、及び、前記第２ユーザに対応する第２アバターを、前記仮想空間に生成するとともに、前記第１ユーザ及び前記第２ユーザの一方に対応し、前記第１アバター及び前記第２アバターとは独立したアバターであるゴーストを、前記仮想空間に生成するアバター生成部と、
前記現実空間における前記第１ユーザの座標及び前記第２ユーザの座標を認識するユーザ座標認識部と、
前記第１ユーザの座標に基づいて、前記仮想空間における前記第１アバターの座標を決定し、前記第２ユーザの座標に基づいて、前記仮想空間における前記第２アバターの座標を決定するとともに、前記第１ユーザ及び前記第２ユーザの一方に対応する前記第１アバター又は前記第２アバターの座標に所定のズレを生じさせた座標に基づいて、前記ゴーストの座標を決定するアバター座標決定部と、
前記第１アバターの座標及び前記第２アバターの座標に基づいて、前記第１ユーザ及び前記第２ユーザに認識させる前記仮想空間の画像を決定する仮想空間画像決定部と、
第１トリガーイベントの発生を認識するトリガーイベント認識部と、
前記第１ユーザ及び前記第２ユーザに、前記仮想空間の画像を認識させる仮想空間画像表示器とを備えている仮想空間体感システムにおいて、
前記アバター座標決定部は、前記第１トリガーイベントの発生が認識された際に、前記第１アバター及び前記第２アバターの一方の座標を、前記第１アバター及び前記第２アバターの他方の座標に一致する座標又は隣接する座標に移動させ、
前記仮想空間画像決定部は、前記第１ユーザ及び前記第２ユーザの他方に認識させる前記仮想空間の画像に、前記第１ユーザ及び前記第２ユーザの一方に対応している旨を示す情報を付加した前記ゴーストの画像を含ませ、
前記第１トリガーイベントは、前記第１ユーザ及び前記第２ユーザの他方に対応する前記第１アバター又は前記第２アバターが前記ゴーストに対して実行する所定の動作であることを特徴とする仮想空間体感システム。
【請求項2】
第１ユーザ及び第２ユーザが存在する現実空間に対応する仮想空間を生成する仮想空間生成部と、前記第１ユーザに対応する第１アバター、及び、前記第２ユーザに対応する第２アバターを、前記仮想空間に生成するとともに、前記第１ユーザ及び前記第２ユーザの一方に対応し、前記第１アバター及び前記第２アバターとは独立したアバターであるゴーストを、前記仮想空間に生成するアバター生成部と、
前記現実空間における前記第１ユーザの座標及び前記第２ユーザの座標を認識するユーザ座標認識部と、
前記第１ユーザの座標に基づいて、前記仮想空間における前記第１アバターの座標を決定し、前記第２ユーザの座標に基づいて、前記仮想空間における前記第２アバターの座標を決定するとともに、前記第１ユーザ及び前記第２ユーザの一方に対応する前記第１アバター又は前記第２アバターの座標に所定のズレを生じさせた座標に基づいて、前記ゴーストの座標を決定するアバター座標決定部と、
前記第１アバターの座標及び前記第２アバターの座標に基づいて、前記第１ユーザ及び前記第２ユーザに認識させる前記仮想空間の画像を決定する仮想空間画像決定部と、
第１トリガーイベントの発生を認識するトリガーイベント認識部と、
前記第１ユーザ及び前記第２ユーザに、前記仮想空間の画像を認識させる仮想空間画像表示器とを備えている仮想空間体感システムにおいて、
前記仮想空間画像決定部は、前記第１ユーザ及び前記第２ユーザの他方に認識させる前記仮想空間の画像に、前記第１ユーザ及び前記第２ユーザの一方に対応している旨を示す情報を付加した前記ゴーストの画像を含ませ、且つ、前記第１トリガーイベントの発生が認識された際に、前記第１ユーザ及び前記第２ユーザの一方に認識させる前記仮想空間の画像を、前記第１アバター及び前記第２アバターの一方の座標が前記第１アバター及び前記第２アバターの他方の座標に一致する座標又は隣接する座標に移動した場合における画像にし、
前記第１トリガーイベントは、前記第１ユーザ及び前記第２ユーザの他方に対応する前記第１アバター又は前記第２アバターが前記ゴーストに対して実行する所定の動作であることを特徴とする仮想空間体感システム。
【請求項3】
請求項１又は請求項２に記載の仮想空間体感システムにおいて、前記トリガーイベント認識部は、第２トリガーイベントの発生を認識し、
前記アバター生成部は、前記第２トリガーイベントの発生が認識された際に、前記第１ユーザに対応する前記ゴーストである第１ゴーストを、前記仮想空間に生成し、
前記アバター座標決定部は、前記第２トリガーイベントの発生が認識された後には、前記第１ユーザの座標に前記所定のズレを生じさせた座標に基づいて、前記第１アバターの座標を決定し、前記第１ユーザの座標に基づいて、前記仮想空間における前記第１ゴーストの座標を決定し、
前記仮想空間画像決定部は、前記第２トリガーイベントの発生が認識された後には、前記第２ユーザに認識させる前記仮想空間の画像に、前記第１ユーザに対応している旨を示す情報を付加した前記第１ゴーストの画像を含ませ、
前記第１トリガーイベントは、前記第２アバターが前記第１ゴーストに対して実行する所定の動作であることを特徴とする仮想空間体感システム。
【請求項4】
請求項１～請求項３のいずれか１項に記載の仮想空間体感システムにおいて、前記トリガーイベント認識部は、第２トリガーイベントの発生を認識し、
前記アバター生成部は、前記第２トリガーイベントの発生が認識された際に、前記第２ユーザに対応する前記ゴーストである第２ゴーストを、前記仮想空間に生成し、
前記アバター座標決定部は、前記第２トリガーイベントの発生が認識された後には、前記第１ユーザの座標に前記所定のズレを生じさせた座標に基づいて、前記第１アバターの座標を決定し、前記第２ユーザの座標に前記所定のズレを生じさせた座標に基づいて、前記仮想空間における前記第２ゴーストの座標を決定し、
前記仮想空間画像決定部は、前記第２トリガーイベントの発生が認識された後には、前記第１ユーザに認識させる前記仮想空間の画像に、前記第２ユーザに対応している旨を示す情報を付加した前記第２ゴーストの画像を含ませ、
前記第１トリガーイベントは、前記第１アバターが前記第２ゴーストに対して実行する所定の動作であることを特徴とする仮想空間体感システム。
【発明の詳細な説明】
【技術分野】
【0001】
本発明は、画像として表示された仮想空間に、ユーザ自身が存在していると認識させるための仮想空間体感システムに関する。
【背景技術】
【0002】
従来、サーバ等で仮想空間を生成し、ヘッドマウントディスプレイ（以下、「ＨＭＤ」ということがある。）を介して、その仮想空間の画像をユーザに認識させ、ユーザ自身がその仮想空間に存在していると認識させる仮想空間体感システムがある。
【0003】
この種の仮想空間体感システムは、モーションキャプチャー装置等によってユーザの現実空間における動作（例えば、座標の移動、向きを含む姿勢の変化等）を認識し、その認識した動作に応じて、ユーザに対応するアバターを仮想空間で動作させるものがある（例えば、特許文献１参照）。
【0004】
特許文献１に記載の仮想空間体感システムでは、複数のユーザの各々に対応するようにして、同一の仮想空間に複数のアバターを生成している。そして、この仮想空間体感システムでは、各ユーザに認識させる仮想空間の画像は、自らに対応したアバターの座標に基づいて決定される。すなわち、同時に仮想空間を体感している場合であっても、ユーザごとに視認している仮想空間の画像（ひいては、体感している仮想空間の環境）は異なる。
【先行技術文献】
【特許文献】
【0005】
【文献】特開２０１０１５７４６１号公報
【発明の概要】
【発明が解決しようとする課題】
【0006】
ところで、複数のユーザが同時に仮想空間を体感しており、且つ、ユーザごとに体感している仮想空間の環境が異なっている場合、一方のユーザが、自らの体感している環境を、他方のユーザにも体感してほしいと考える場合がある。また逆に、一方のユーザが、他方のユーザが体感している環境を、自らが体感したいと考える場合もある。
【0007】
本発明は以上の点に鑑みてなされたものであり、仮想空間で異なる環境を体感していた複数のユーザが、同様の環境を体感することができるようになる仮想空間体感システムを提供することを目的とする。
【課題を解決するための手段】
【0008】
本第１の発明の仮想空間体感システムは、
第１ユーザ及び第２ユーザが存在する現実空間に対応する仮想空間を生成する仮想空間生成部と、
前記第１ユーザに対応する第１アバター、及び、前記第２ユーザに対応する第２アバターを、前記仮想空間に生成するとともに、前記第１ユーザ及び前記第２ユーザの一方に対応し、前記第１アバター及び前記第２アバターとは独立したアバターであるゴーストを、前記仮想空間に生成するアバター生成部と、
前記現実空間における前記第１ユーザの座標及び前記第２ユーザの座標を認識するユーザ座標認識部と、
前記第１ユーザの座標に基づいて、前記仮想空間における前記第１アバターの座標を決定し、前記第２ユーザの座標に基づいて、前記仮想空間における前記第２アバターの座標を決定するとともに、前記第１ユーザ及び前記第２ユーザの一方に対応する前記第１アバター又は前記第２アバターの座標に所定のズレを生じさせた座標に基づいて、前記ゴーストの座標を決定するアバター座標決定部と、
前記第１アバターの座標及び前記第２アバターの座標に基づいて、前記第１ユーザ及び前記第２ユーザに認識させる前記仮想空間の画像を決定する仮想空間画像決定部と、
第１トリガーイベントの発生を認識するトリガーイベント認識部と、
前記第１ユーザ及び前記第２ユーザに、前記仮想空間の画像を認識させる仮想空間画像表示器とを備えている仮想空間体感システムにおいて、
前記アバター座標決定部は、前記第１トリガーイベントの発生が認識された際に、前記第１アバター及び前記第２アバターの一方の座標を、前記第１アバター及び前記第２アバターの他方の座標に一致する座標又は隣接する座標に移動させ、
前記仮想空間画像決定部は、前記第１ユーザ及び前記第２ユーザの他方に認識させる前記仮想空間の画像に、前記第１ユーザ及び前記第２ユーザの一方に対応している旨を示す情報を付加した前記ゴーストの画像を含ませ、
前記第１トリガーイベントは、前記第１ユーザ及び前記第２ユーザの他方に対応する前記第１アバター又は前記第２アバターが前記ゴーストに対して実行する所定の動作であることを特徴とする。
第１ユーザ及び第２ユーザが存在する現実空間に対応する仮想空間を生成する仮想空間生成部と、
前記第１ユーザに対応する第１アバター、及び、前記第２ユーザに対応する第２アバターを、前記仮想空間に生成するとともに、前記第１ユーザ及び前記第２ユーザの一方に対応し、前記第１アバター及び前記第２アバターとは独立したアバターであるゴーストを、前記仮想空間に生成するアバター生成部と、
前記現実空間における前記第１ユーザの座標及び前記第２ユーザの座標を認識するユーザ座標認識部と、
前記第１ユーザの座標に基づいて、前記仮想空間における前記第１アバターの座標を決定し、前記第２ユーザの座標に基づいて、前記仮想空間における前記第２アバターの座標を決定するとともに、前記第１ユーザ及び前記第２ユーザの一方に対応する前記第１アバター又は前記第２アバターの座標に所定のズレを生じさせた座標に基づいて、前記ゴーストの座標を決定するアバター座標決定部と、
前記第１アバターの座標及び前記第２アバターの座標に基づいて、前記第１ユーザ及び前記第２ユーザに認識させる前記仮想空間の画像を決定する仮想空間画像決定部と、
第１トリガーイベントの発生を認識するトリガーイベント認識部と、
前記第１ユーザ及び前記第２ユーザに、前記仮想空間の画像を認識させる仮想空間画像表示器とを備えている仮想空間体感システムにおいて、
前記アバター座標決定部は、前記第１トリガーイベントの発生が認識された際に、前記第１アバター及び前記第２アバターの一方の座標を、前記第１アバター及び前記第２アバターの他方の座標に一致する座標又は隣接する座標に移動させ、
前記仮想空間画像決定部は、前記第１ユーザ及び前記第２ユーザの他方に認識させる前記仮想空間の画像に、前記第１ユーザ及び前記第２ユーザの一方に対応している旨を示す情報を付加した前記ゴーストの画像を含ませ、
前記第１トリガーイベントは、前記第１ユーザ及び前記第２ユーザの他方に対応する前記第１アバター又は前記第２アバターが前記ゴーストに対して実行する所定の動作であることを特徴とする。
【0009】
ここで、「仮想空間の画像」には、仮想空間の背景の画像の他、他のアバターの画像、仮想空間にのみ存在するオブジェクトの画像、現実空間に対応して仮想空間に存在するオブジェクトの画像等が含まれる。
【0010】
このように、本第１の発明の仮想空間体感システムでは、第１トリガーイベントの発生が認識された際には、アバター座標決定部は、第１アバター及び第２アバターの一方の座標を、第１アバター及び第２アバターの他方の座標に一致する座標又は隣接する座標に移動させている。
【0011】
ここで、第１ユーザ及び第２ユーザに認識させる仮想空間の画像は、第１アバター及び第２アバターの座標に基づいて決定される。そのため、アバター同士の座標が一致又は隣接している場合には、それらのアバターに対応する各々のユーザの認識する仮想空間の画像も、一致又は隣接した画像（すなわち、同様の画像）になる。
【0012】
したがって、本第１の発明の仮想空間体感システムによれば、第１トリガーイベントの発生が認識された際には、各々のユーザの認識する仮想空間の画像も一致又は隣接した画像にすることができるので、それまで仮想空間で異なる環境を体感していた第１ユーザ及び第２ユーザが、ほぼ同じ環境を体感することができるようになる。
【0013】
また、本第２の発明の仮想空間体感システムは、
第１ユーザ及び第２ユーザが存在する現実空間に対応する仮想空間を生成する仮想空間生成部と、
前記第１ユーザに対応する第１アバター、及び、前記第２ユーザに対応する第２アバターを、前記仮想空間に生成するとともに、前記第１ユーザ及び前記第２ユーザの一方に対応し、前記第１アバター及び前記第２アバターとは独立したアバターであるゴーストを、前記仮想空間に生成するアバター生成部と、
前記現実空間における前記第１ユーザの座標及び前記第２ユーザの座標を認識するユーザ座標認識部と、
前記第１ユーザの座標に基づいて、前記仮想空間における前記第１アバターの座標を決定し、前記第２ユーザの座標に基づいて、前記仮想空間における前記第２アバターの座標を決定するとともに、前記第１ユーザ及び前記第２ユーザの一方に対応する前記第１アバター又は前記第２アバターの座標に所定のズレを生じさせた座標に基づいて、前記ゴーストの座標を決定するアバター座標決定部と、
前記第１アバターの座標及び前記第２アバターの座標に基づいて、前記第１ユーザ及び前記第２ユーザに認識させる前記仮想空間の画像を決定する仮想空間画像決定部と、
第１トリガーイベントの発生を認識するトリガーイベント認識部と、
前記第１ユーザ及び前記第２ユーザに、前記仮想空間の画像を認識させる仮想空間画像表示器とを備えている仮想空間体感システムにおいて、
前記仮想空間画像決定部は、前記第１ユーザ及び前記第２ユーザの他方に認識させる前記仮想空間の画像に、前記第１ユーザ及び前記第２ユーザの一方に対応している旨を示す情報を付加した前記ゴーストの画像を含ませ、且つ、前記第１トリガーイベントの発生が認識された際に、前記第１ユーザ及び前記第２ユーザの一方に認識させる前記仮想空間の画像を、前記第１アバター及び前記第２アバターの一方の座標が前記第１アバター及び前記第２アバターの他方の座標に一致する座標又は隣接する座標に移動した場合における画像にし、
前記第１トリガーイベントは、前記第１ユーザ及び前記第２ユーザの他方に対応する前記第１アバター又は前記第２アバターが前記ゴーストに対して実行する所定の動作であることを特徴とする。
第１ユーザ及び第２ユーザが存在する現実空間に対応する仮想空間を生成する仮想空間生成部と、
前記第１ユーザに対応する第１アバター、及び、前記第２ユーザに対応する第２アバターを、前記仮想空間に生成するとともに、前記第１ユーザ及び前記第２ユーザの一方に対応し、前記第１アバター及び前記第２アバターとは独立したアバターであるゴーストを、前記仮想空間に生成するアバター生成部と、
前記現実空間における前記第１ユーザの座標及び前記第２ユーザの座標を認識するユーザ座標認識部と、
前記第１ユーザの座標に基づいて、前記仮想空間における前記第１アバターの座標を決定し、前記第２ユーザの座標に基づいて、前記仮想空間における前記第２アバターの座標を決定するとともに、前記第１ユーザ及び前記第２ユーザの一方に対応する前記第１アバター又は前記第２アバターの座標に所定のズレを生じさせた座標に基づいて、前記ゴーストの座標を決定するアバター座標決定部と、
前記第１アバターの座標及び前記第２アバターの座標に基づいて、前記第１ユーザ及び前記第２ユーザに認識させる前記仮想空間の画像を決定する仮想空間画像決定部と、
第１トリガーイベントの発生を認識するトリガーイベント認識部と、
前記第１ユーザ及び前記第２ユーザに、前記仮想空間の画像を認識させる仮想空間画像表示器とを備えている仮想空間体感システムにおいて、
前記仮想空間画像決定部は、前記第１ユーザ及び前記第２ユーザの他方に認識させる前記仮想空間の画像に、前記第１ユーザ及び前記第２ユーザの一方に対応している旨を示す情報を付加した前記ゴーストの画像を含ませ、且つ、前記第１トリガーイベントの発生が認識された際に、前記第１ユーザ及び前記第２ユーザの一方に認識させる前記仮想空間の画像を、前記第１アバター及び前記第２アバターの一方の座標が前記第１アバター及び前記第２アバターの他方の座標に一致する座標又は隣接する座標に移動した場合における画像にし、
前記第１トリガーイベントは、前記第１ユーザ及び前記第２ユーザの他方に対応する前記第１アバター又は前記第２アバターが前記ゴーストに対して実行する所定の動作であることを特徴とする。
【0014】
このように、本第２の発明の仮想空間体感システムでは、第１トリガーイベントの発生が認識された際には、仮想空間画像決定部は、第１ユーザ及び第２ユーザの一方に認識させる仮想空間の画像を、第１アバター及び第２アバターの一方の座標が第１アバター及び第２アバターの他方の座標に一致する座標又は隣接する座標に移動した場合における画像にしている。
【0015】
すなわち、第１トリガーイベントの発生が認識された際には、一方のユーザに認識させる仮想空間の画像を決定するための基準となる座標を、そのユーザに対応するアバターの座標の位置に関係なく、他方のユーザに対応するアバターの座標に一致する座標又はそれに隣接する座標としている。
【0016】
これにより、第１トリガーイベントの発生が認識された際には、一方のユーザは、他方のユーザとともに、他方のユーザに対応するアバターの座標に一致する座標又は隣接する座標に基づいて決定された仮想空間の画像を認識することになる。
【0017】
したがって、本第２の発明の仮想空間体感システムによれば、第１トリガーイベントの発生が認識された後には、一方のユーザは、他方のユーザに対応するアバターの座標に一致する座標又は隣接する座標に基づいて決定された仮想空間の画像を認識することになるので、それまで仮想空間で異なる環境を体感していた第１ユーザ及び第２ユーザが、ほぼ同じ環境を体感することができるようになる。
【0018】
ところで、本発明の仮想空間体感システムにおいては、
前記アバター生成部は、前記第１ユーザ及び前記第２ユーザの一方に対応し、前記第１アバター及び前記第２アバターとは独立したアバターであるゴーストを、前記仮想空間に生成し、
前記アバター座標決定部は、前記第１ユーザ及び前記第２ユーザの一方に対応する前記第１アバター又は前記第２アバターの座標に所定のズレを生じさせた座標に基づいて、前記ゴーストの座標を決定し、
前記仮想空間画像決定部は、前記第１ユーザ及び前記第２ユーザの他方に認識させる前記仮想空間の画像に、前記第１ユーザ及び前記第２ユーザの一方に対応している旨を示す情報を付加した前記ゴーストの画像を含ませ、
前記第１トリガーイベントは、前記第１ユーザ及び前記第２ユーザの他方に対応する前記第１アバター又は前記第２アバターが前記ゴーストに対して実行する所定の動作であるように構成されている。
前記アバター生成部は、前記第１ユーザ及び前記第２ユーザの一方に対応し、前記第１アバター及び前記第２アバターとは独立したアバターであるゴーストを、前記仮想空間に生成し、
前記アバター座標決定部は、前記第１ユーザ及び前記第２ユーザの一方に対応する前記第１アバター又は前記第２アバターの座標に所定のズレを生じさせた座標に基づいて、前記ゴーストの座標を決定し、
前記仮想空間画像決定部は、前記第１ユーザ及び前記第２ユーザの他方に認識させる前記仮想空間の画像に、前記第１ユーザ及び前記第２ユーザの一方に対応している旨を示す情報を付加した前記ゴーストの画像を含ませ、
前記第１トリガーイベントは、前記第１ユーザ及び前記第２ユーザの他方に対応する前記第１アバター又は前記第２アバターが前記ゴーストに対して実行する所定の動作であるように構成されている。
【0019】
ここで、ユーザに「対応している旨を示す情報」とは、例えば、常時又はユーザの要求に応じて表示されるメッセージといった直接的な情報の他、対応するアバターの形状を半透明にしたものをゴーストの形状として採用することによって示される間接的な情報も含む。
【0020】
仮想空間にユーザに対応するアバターを生成する場合、ユーザ１人に対して必ずしも１つのアバターのみが生成されるわけではない。そこで、ユーザに対応し、且つ、ユーザに認識させる画像を決定する際の基準となるアバターの他に、ユーザに対応しているが、その基準となるアバターとは独立したアバター（すなわち、その基準とはならないアバター）であるゴーストを生成しても構わない。
【0021】
ここで、本発明の仮想空間体感システムでは、ゴーストに、所定のユーザに対応している旨を示す情報が付加されている。そのため、他のユーザは、そのゴーストがどのユーザに対応するものであるのかを、容易に把握することができるようになっている。
【0022】
そのうえで、アバターがそのゴーストに対して実行する所定の動作を第１トリガーイベントとして設定すると、アバターに対応するユーザは、その動作を実行した結果、ゴーストに対応するユーザの環境を自らも体感することができることを、直感的に理解することができるようになる。
【0023】
ここで、「所定の動作」としては、アバターがゴーストを基準として行う何らかの動作であればよい。例えば、アバターがゴーストに接触するような動作、アバターがゴーストを基準とした所定の範囲内に移動するような動作、アバターが仮想空間に存在するオブジェクトを操作する際に、その対象としてゴーストを選択するような動作（例えば、カメラ型オブジェクトでゴーストを撮影するような動作等）等が挙げられる。
【0024】
また、本発明の仮想空間体感システムにおいては、ゴーストを生成する構成の場合、
前記トリガーイベント認識部は、第２トリガーイベントの発生を認識し、
前記アバター生成部は、前記第２トリガーイベントの発生が認識された際に、前記第１ユーザに対応する前記ゴーストである第１ゴーストを、前記仮想空間に生成し、
前記アバター座標決定部は、前記第２トリガーイベントの発生が認識された後には、前記第１ユーザの座標に前記所定のズレを生じさせた座標に基づいて、前記第１アバターの座標を決定し、前記第１ユーザの座標に基づいて、前記仮想空間における前記第１ゴーストの座標を決定し、
前記仮想空間画像決定部は、前記第２トリガーイベントの発生が認識された後には、前記第２ユーザに認識させる前記仮想空間の画像に、前記第１ユーザに対応している旨を示す情報を付加した前記第１ゴーストの画像を含ませ、
前記第１トリガーイベントは、前記第２アバターが前記第１ゴーストに対して実行する所定の動作であることが好ましい。
前記トリガーイベント認識部は、第２トリガーイベントの発生を認識し、
前記アバター生成部は、前記第２トリガーイベントの発生が認識された際に、前記第１ユーザに対応する前記ゴーストである第１ゴーストを、前記仮想空間に生成し、
前記アバター座標決定部は、前記第２トリガーイベントの発生が認識された後には、前記第１ユーザの座標に前記所定のズレを生じさせた座標に基づいて、前記第１アバターの座標を決定し、前記第１ユーザの座標に基づいて、前記仮想空間における前記第１ゴーストの座標を決定し、
前記仮想空間画像決定部は、前記第２トリガーイベントの発生が認識された後には、前記第２ユーザに認識させる前記仮想空間の画像に、前記第１ユーザに対応している旨を示す情報を付加した前記第１ゴーストの画像を含ませ、
前記第１トリガーイベントは、前記第２アバターが前記第１ゴーストに対して実行する所定の動作であることが好ましい。
【0025】
例えば、第１ユーザと第２ユーザとが現実空間の同一領域内（例えば、同じ部屋）に存在している場合等には、第１アバターの座標を第１ユーザの座標に所定のズレを生じた座標に基づいて決定していると、第２ユーザが、自らに対応する第２アバターを第１アバターと接触しないように移動したとしても、第１アバターに対応する第１ユーザと接触してしまうおそれがある。
【0026】
そして、その接触を回避するために、第１ユーザに対応する第１ゴーストの座標を、第１ユーザの座標に基づく座標（すなわち、ズレが生じる前の座標）にするという手法が採用されることがある。これにより、第２アバター（すなわち、第２ユーザ）が、第１ゴーストを回避するように移動するようになるので、第２ユーザが第１ユーザに接触してしまうことが抑制できる。
【0027】
そして、そのような手法が採用されている場合には、このように、第１トリガーイベントとして、第２アバターが第１ゴーストに対して実行する動作を採用することが好ましい。
【0028】
そのように構成すると、その動作によって、第２ユーザは、第１ユーザと環境を共有する第１トリガーイベントが発生することを、直感的に理解することができる。ひいては、第１トリガーイベントを発生させるために、第２ユーザの仮想空間への没入感が阻害されてしまうことを抑制することができる。
【0029】
また、本発明の仮想空間体感システムにおいては、ゴーストを生成する構成の場合、
前記トリガーイベント認識部は、第２トリガーイベントの発生を認識し、
前記アバター生成部は、前記第２トリガーイベントの発生が認識された際に、前記第２ユーザに対応する前記ゴーストである第２ゴーストを、前記仮想空間に生成し、
前記アバター座標決定部は、前記第２トリガーイベントの発生が認識された後には、前記第１ユーザの座標に前記所定のズレを生じさせた座標に基づいて、前記第１アバターの座標を決定し、前記第２ユーザの座標に前記所定のズレを生じさせた座標に基づいて、前記仮想空間における前記第２ゴーストの座標を決定し、
前記仮想空間画像決定部は、前記第２トリガーイベントの発生が認識された後には、前記第１ユーザに認識させる前記仮想空間の画像に、前記第２ユーザに対応している旨を示す情報を付加した前記第２ゴーストの画像を含ませ、
前記第１トリガーイベントは、前記第１アバターが前記第２ゴーストに対して実行する所定の動作であることが好ましい。
前記トリガーイベント認識部は、第２トリガーイベントの発生を認識し、
前記アバター生成部は、前記第２トリガーイベントの発生が認識された際に、前記第２ユーザに対応する前記ゴーストである第２ゴーストを、前記仮想空間に生成し、
前記アバター座標決定部は、前記第２トリガーイベントの発生が認識された後には、前記第１ユーザの座標に前記所定のズレを生じさせた座標に基づいて、前記第１アバターの座標を決定し、前記第２ユーザの座標に前記所定のズレを生じさせた座標に基づいて、前記仮想空間における前記第２ゴーストの座標を決定し、
前記仮想空間画像決定部は、前記第２トリガーイベントの発生が認識された後には、前記第１ユーザに認識させる前記仮想空間の画像に、前記第２ユーザに対応している旨を示す情報を付加した前記第２ゴーストの画像を含ませ、
前記第１トリガーイベントは、前記第１アバターが前記第２ゴーストに対して実行する所定の動作であることが好ましい。
【0030】
例えば、第１ユーザと第２ユーザとが現実空間の同一領域内（例えば、同じ部屋）に存在している場合等には、第１アバターの座標を第１ユーザの座標に所定のズレを生じた座標に基づいて決定していると、第１ユーザが、自らに対応する第１アバターを第２アバターと接触しないように移動したとしても、第２アバターに対応する第２ユーザと接触してしまうおそれがある。
【0031】
そして、その接触を回避するために、第２ユーザに対応する第４ゴーストの座標を、第２アバターの座標に第１アバターと同様のズレを生じさせた座標にするという手法が採用されることがある。これにより、第１アバター（すなわち、第１ユーザ）が、第４ゴーストを回避するように移動するようになるので、第１ユーザが第２ユーザに接触してしまうことが抑制できる。
【0032】
そのような手法が採用されている場合には、このように、第１トリガーイベントとして、第１アバターが第２ゴーストに対して実行する動作を採用することが好ましい。
【0033】
そのように構成すると、その動作によって、第１ユーザは、第２ユーザと環境を共有する第１トリガーイベントが発生することを、直感的に理解することができる。ひいては、第１トリガーイベントを発生させるために、第１ユーザの仮想空間への没入感が阻害されてしまうことを抑制することができる。
【図面の簡単な説明】
【0034】
【発明を実施するための形態】
【0035】
【0036】
ＶＲシステムＳは、現実空間ＲＳの所定の領域（例えば、１つの部屋）に共に存在する第１ユーザＵ１及び第２ユーザＵ２（以下、総称する場合は「ユーザＵ」という。）に対し、その領域に対応する１つの仮想空間ＶＳに、第１ユーザＵ１に対応する第１アバターＡ１及び第２ユーザＵ２に対応する第２アバターＡ２を介して、自らが共に存在すると認識させるものである（図４等参照）。
【0037】
なお、本実施形態及び後述する第２実施形態では、理解を容易にするために、ユーザは２人としている。しかし、本発明の仮想空間体感システムは、そのような構成に限定されるものではなく、ユーザの数は３人以上であってもよい。
【0038】
［システムの概略構成］
まず、図１を参照して、ＶＲシステムＳの概略構成について説明する。
まず、図１を参照して、ＶＲシステムＳの概略構成について説明する。
【0039】
図１に示すように、ＶＲシステムＳは、現実空間ＲＳに存在するユーザＵに取り付けられる複数の標識１と、ユーザＵ（厳密には、ユーザＵに取り付けられた標識１）を撮影するカメラ２と、仮想空間ＶＳ（図４等参照）の画像及び音声を決定するサーバ３と、決定された画像及び音声をユーザに認識させるヘッドマウントディスプレイ（以下、「ＨＭＤ４」という。）とを備えている。
【0040】
ＶＲシステムＳでは、カメラ２、サーバ３及びＨＭＤ４は、インターネット網、公衆回線、近距離無線通信等の無線で相互に情報を送受信可能となっている。ただし、それらのいずれか同士を有線で相互に情報を送受信可能に構成してもよい。
【0041】
複数の標識１は、ユーザＵの装着するＨＭＤ４、手袋及び靴を介して、ユーザＵの頭部、両手及び両足のそれぞれに取り付けられている。なお、複数の標識１は、後述するようにユーザＵの現実空間ＲＳにおける座標及び姿勢（ひいては、動作（例えば、座標の移動、向きを含む姿勢の変化等））を認識するために用いられるものである。そのため、ＶＲシステムＳを構成する他の機器に応じて、標識１の取り付け位置は適宜変更してよい。
【0042】
カメラ２は、ユーザＵの存在する現実空間ＲＳのユーザＵが動作可能範囲（すなわち、座標の移動、姿勢の変化等をし得る範囲）を多方向から撮影可能なように設置されている。
【0043】
サーバ３は、カメラ２が撮影した画像から標識１を認識し、その認識された標識１の現実空間ＲＳにおける位置に基づいて、ユーザＵの座標及び姿勢を認識する。また、サーバ３は、その座標及び姿勢に基づいて、ユーザＵに認識させる画像及び音声を決定する。
【0044】
ＨＭＤ４は、ユーザＵの頭部に装着される。ＨＭＤ４には、ユーザＵに、サーバ３によって決定された仮想空間ＶＳの画像をユーザＵの認識させるためのモニタ４１（仮想空間画像表示器）と、サーバ３によって決定された仮想空間ＶＳの音声をユーザＵに認識させるためのスピーカ４２（仮想空間音声発生器）とが設けられている（図２参照）。
【0045】
ＶＲシステムＳを用いてゲーム等を行う場合、ユーザＵは、仮想空間ＶＳの画像と音声のみを認識して、ユーザＵ自身が仮想空間に存在していると認識させられる。すなわち、ＶＲシステムＳは、いわゆる没入型のシステムとして構成されている。
【0046】
なお、本発明の仮想空間体感システムは、そのような没入型のシステムに限定されるものではない。そのため、例えば、現実空間の画像と仮想空間の画像とを重畳して表示して、ユーザに拡張した現実空間を認識させるシステム（いわゆるＡＲシステム）に、本発明の仮想空間体感システムの構成を適用してもよい。
【0047】
ＶＲシステムＳでは、ユーザＵの現実空間ＲＳにおける座標を認識するシステムとして、標識１とカメラ２とサーバ３とによって構成された、いわゆるモーションキャプチャー装置を備えている。
【0048】
なお、本発明の仮想空間体感システムは、そのような構成に限定されるものではない。例えば、モーションキャプチャー装置を使用する場合には、上記の構成のものの他、標識及びカメラの数が上記構成とは異なる（例えば、それぞれ１つずつ設けられている）ものを用いてもよい。
【0049】
また、例えば、モーションキャプチャー装置に代わり、ユーザの座標のみを認識する装置を用いてもよい。具体的には、例えば、ＨＭＤにＧＰＳ等のセンサを搭載し、そのセンサからの出力に基づいて、ユーザの座標、姿勢等を認識するようにしてもよい。また、そのようなセンサと、上記のようなモーションキャプチャー装置を併用してもよい。
【0050】
［処理部の構成］
次に、図２を用いて、サーバ３の備えている処理部の構成を詳細に説明する。
次に、図２を用いて、サーバ３の備えている処理部の構成を詳細に説明する。
【0051】
サーバ３は、ＣＰＵ、ＲＡＭ、ＲＯＭ、インターフェース回路等を含む１つ又は複数の電子回路ユニットにより構成されている。サーバ３は、実装されたハードウェア構成又はプログラムにより実現される機能（処理部）として、図２に示すように、表示画像生成部３１と、ユーザ情報認識部３２と、トリガーイベント認識部３３と、アバター座標決定部３４と、仮想空間画像決定部３５と、仮想空間音声決定部３６とを備えている。
【0052】
表示画像生成部３１は、ＨＭＤ４のモニタ４１を介してユーザＵに認識させる画像を生成する。表示画像生成部３１は、仮想空間生成部３１ａと、アバター生成部３１ｂと、移動体生成部３１ｃとを有している。
【0053】
仮想空間生成部３１ａは、仮想空間ＶＳの背景となる画像及び仮想空間ＶＳに存在するオブジェクトの画像を生成する。
【0054】
アバター生成部３１ｂは、仮想空間ＶＳに、第１ユーザＵ１に対応するようにして第１アバターＡ１、及び、第１アバターＡ１とは独立したアバターである第１ゴーストＧ１を生成する（図６等参照）。また、アバター生成部３１ｂは、第２ユーザＵ２に対応するようにして、第２アバターＡ２、及び、第２アバターＡ２とは独立したアバターである第２ゴーストＧ２を生成する（図６等参照）。
【0055】
第１アバターＡ１及び第２アバターＡ２（以下、総称する場合は「アバターＡ」という。）、並びに、第１ゴーストＧ１及び第２ゴーストＧ２（以下、総称する場合は「ゴーストＧ」という。）は、対応するユーザＵの現実空間ＲＳにおける動作（すなわち、座標の移動及び姿勢の変化）に対応して、仮想空間ＶＳにおいて動作する。
【0056】
移動体生成部３１ｃは、仮想空間ＶＳに、現実空間ＲＳには対応する物体が存在せず、仮想空間ＶＳにアバターと接続可能な移動体を生成する。
【0057】
ここで、「移動体」とは、アバターが接続した際に、ユーザの現実の移動とは異なるアバターの移動を、（意識している、意識していないに関わらず）ユーザＵに予測させるものであればよい。
【0058】
例えば、移動体としては、エレベータ等の現実空間で移動に使われるものの他、飛び乗ることが可能な川を流れる丸太、上に立った際に崩れそうな床、ジャンプ台、跳躍を補助する翼等が該当する。また、移動体としては、仮想空間の地面、壁面に描画された文字、模様等も該当する。
【0059】
また、ここで、アバターと移動体との「接続」とは、移動体の移動、移動体の形状の変化等がアバターの座標に影響することを、ユーザが予測し得る状態になることをいう。
【0060】
例えば、アバターがエレベータに乗り込む、アバターが川を流れる丸太に乗る、アバターが崩れそうな床の上に立つ、ジャンプ台の上に立つ、跳躍を補助する翼をアバターが装着する等が、接続に該当する。また、仮想空間の地面、壁面に描画された文字、模様等に、アバターが接触、近接すること等も、接続に該当する。
【0061】
ユーザ情報認識部３２には、カメラ２が撮影した標識１を含むユーザＵの画像データが入力される。このユーザ情報認識部３２は、ユーザ姿勢認識部３２ａと、ユーザ座標認識部３２ｂとを有している。
【0062】
ユーザ姿勢認識部３２ａは、入力されたユーザＵの画像データから標識１を抽出し、その抽出結果に基づいて、ユーザＵの姿勢を認識する。
【0063】
ユーザ座標認識部３２ｂは、入力されたユーザＵの画像データから標識１を抽出し、その抽出結果に基づいて、ユーザＵの座標を認識する。
【0064】
トリガーイベント認識部３３は、システム設計者が予め定めた条件を満たした際に、所定のトリガーイベントが発生したこと、又は、トリガーイベントが解除されたことを認識する。
【0065】
ここで、トリガーイベントは、ユーザがその発生を認識していないものであってもよい。そのため、トリガーイベントとしては、例えば、ユーザが現実空間において所定の動作を行うこと（すなわち、ユーザに対応するアバターが仮想空間において所定の動作を行うこと）等のユーザの動作に起因するものも該当するし、所定時間の経過といったユーザの動作に起因しないものも該当する。
【0066】
アバター座標決定部３４は、ユーザ座標認識部３２ｂによって認識されたユーザＵの現実空間ＲＳにおける座標に基づいて、そのユーザＵに対応するアバターの仮想空間ＶＳにおける座標を決定する。
【0067】
また、アバター座標決定部３４は、トリガーイベント認識部３３が所定のトリガーイベントの発生を認識した際には、所定期間若しくは所定範囲、又は、所定期間及び所定範囲において、ユーザの座標に関わらず、そのユーザに対応するアバターの座標を移動させる。
【0068】
また、アバター座標決定部３４は、トリガーイベント認識部３３が所定のトリガーイベントの発生を認識した際には、所定期間若しくは所定範囲、又は、所定期間及び所定範囲において、ユーザＵに対応するアバターＡの座標に所定のズレを生じさせた座標に基づいて、ゴーストＧの座標を決定する。
【0069】
仮想空間画像決定部３５は、アバターの座標に基づいて、ＨＭＤ４のモニタ４１を介して、そのアバターに対応するユーザＵに認識させる仮想空間の画像を決定する。
【0070】
ここで、「仮想空間の画像」には、仮想空間の背景の画像の他、他のアバターの画像、ゴーストの画像、仮想空間にのみ存在するオブジェクトの画像、現実空間に対応して仮想空間に存在するオブジェクトの画像等が含まれる。
【0071】
なお、本実施形態におけるゴーストＧの画像には、そのゴーストＧに対応するユーザＵに対応している旨を示す情報が付加されている。
【0072】
ここで、ユーザに「対応している旨を示す情報」とは、例えば、常時又はユーザの要求に応じて表示されるメッセージといった直接的な情報の他、対応するアバターの形状を半透明にしたものをゴーストの形状として採用することによって示される間接的な情報も含む。
【0073】
仮想空間音声決定部３６は、アバターの座標に基づいて、ＨＭＤ４のスピーカ４２を介して、そのアバターに対応するユーザＵに認識させる音声を決定する。
【0074】
なお、本発明の仮想空間体感システムを構成する各処理部は、上記のような構成に限定されるものではない。
【0075】
例えば、上記実施形態においてサーバ３に設けられている処理部の一部を、ＨＭＤ４に設けてもよい。また、複数のサーバを用いて構成してもよいし、サーバを省略してＨＭＤに搭載されているＣＰＵを協働させて構成してもよい。また、ＨＭＤに搭載されているスピーカ以外のスピーカを設けてもよい。また、視覚及び聴覚へ影響を与えるデバイスの他、仮想空間に応じた匂い、風等を生じさせるような嗅覚及び触覚へ影響を与えるデバイスを含めてもよい。
【0076】
【0077】
【0078】
この処理においては、まず、サーバ３の表示画像生成部３１は、仮想空間ＶＳ、第１アバターＡ１及び第２アバターＡ２、並びに、移動体を生成する（図３／ＳＴＥＰ１００）。
【0079】
具体的には、表示画像生成部３１の仮想空間生成部３１ａは、仮想空間ＶＳ及び仮想空間ＶＳに存在する各種オブジェクトを生成する。また、表示画像生成部３１のアバター生成部３１ｂは、第１ユーザＵ１に対応する第１アバターＡ１及び第２ユーザＵ２に対応する第２アバターＡ２を生成する。また、表示画像生成部３１の移動体生成部３１ｃは、後述するエレベータＶＳ１等の移動体を生成する。
【0080】
このＳＴＥＰ１００の処理により生成された仮想空間ＶＳには、図４に示すように、第１アバターＡ１及び第２アバターＡ２、並びに、移動体であるエレベータＶＳ１の他、現実空間ＲＳに設置されているホワイトボードＲＳ１に対応する位置に生成されたスイッチＶＳ２等のトリガーイベントに関連するオブジェクトが設置されている。
【0081】
次に、サーバ３のアバター座標決定部３４は、第１ユーザＵ１の現実空間ＲＳにおける座標及び姿勢に基づいて、第１アバターＡ１の仮想空間ＶＳにおける座標及び姿勢を決定し、第２ユーザＵ２の現実空間ＲＳにおける座標及び姿勢に基づいて、第２アバターＡ２の仮想空間ＶＳにおける座標及び姿勢を決定する（図３／ＳＴＥＰ１０１）。
【0082】
このＳＴＥＰ１０１以降の処理における第１ユーザＵ１及び第２ユーザＵ２の座標及び姿勢は、カメラ２によって撮影された画像データに基づいてサーバ３のユーザ情報認識部３２によって認識された座標及び姿勢が用いられる。
【0083】
次に、サーバ３の仮想空間画像決定部３５及び仮想空間音声決定部３６は、第１ユーザＵ１に認識させる画像及び音声を、第１アバターＡ１の仮想空間ＶＳにおける座標及び姿勢に基づいて決定し、第２ユーザＵ２に認識させる画像及び音声を、第２アバターＡ２の仮想空間ＶＳにおける座標及び姿勢に基づいて決定（図３／ＳＴＥＰ１０２）。
【0084】
次に、ユーザＵの装着しているＨＭＤ４は、ＨＭＤ４に搭載されているモニタ４１に決定された画像を表示させ、ＨＭＤ４に搭載されているスピーカ４２に決定された音声を発生させる（図３／ＳＴＥＰ１０３）。
【0085】
次に、サーバ３のユーザ情報認識部３２は、第１ユーザＵ１又は第２ユーザＵ２の現実空間ＲＳにおける座標の移動又は姿勢の変化が認識されたか否かを判断する（図３／ＳＴＥＰ１０４）。
【0086】
第１ユーザＵ１又は第２ユーザＵ２の現実空間ＲＳにおける座標の移動又は姿勢の変化が認識された場合（ＳＴＥＰ１０４でＹＥＳの場合）、ＳＴＥＰ１０１に戻り、再度、ＳＴＥＰ１０１以降の処理が実行される。
【0087】
一方、第１ユーザＵ１又は第２ユーザＵ２の現実空間ＲＳにおける座標の移動又は姿勢の変化が認識されなかった場合（ＳＴＥＰ１０４でＮＯの場合）、サーバ３は、処理の終了を指示する信号を認識したか否かを判断する（図３／ＳＴＥＰ１０５）。
【0088】
終了を指示する信号を認識できなかった場合（ＳＴＥＰ１０５でＮＯの場合）、ＳＴＥＰ１０４に戻り、再度、ＳＴＥＰ１０４以降の処理が実行される。
【0089】
一方、終了を指示する信号を認識した場合（ＳＴＥＰ１０５でＹＥＳの場合）、ＶＲシステムＳは、今回の処理を終了する。
【0090】
以上の処理により、仮想空間ＶＳでは、第１ユーザＵ１に対応する第１アバターＡ１及び第２ユーザＵ２に対応する第２アバターＡ２と、移動体であるエレベータＶＳ１、後述するトリガーイベントの発生に関連するスイッチＶＳ２等を含む複数のオブジェクトが設置される。
【0091】
そして、第１ユーザＵ１及び第２ユーザＵ２は、それぞれが装着したＨＭＤ４で表示される画像及び発生される音声によって、それぞれに対応する第１アバターＡ１及び第２アバターＡ２を介して、自身が仮想空間ＶＳに存在し、自由に動作することができると認識するようになる。
【0092】
［仮想空間を拡張させる際及びそれ以後における処理］
次に、図２、図４～図７を参照して、仮想空間ＶＳをその仮想空間ＶＳに対応する現実空間ＲＳよりも広くなるように拡張させる際及びそれ以後において、ＶＲシステムＳが実行する処理について説明する。
次に、図２、図４～図７を参照して、仮想空間ＶＳをその仮想空間ＶＳに対応する現実空間ＲＳよりも広くなるように拡張させる際及びそれ以後において、ＶＲシステムＳが実行する処理について説明する。
【0093】
ここで、具体的な処理の内容の説明に先立って、仮想空間ＶＳをその仮想空間ＶＳに対応する現実空間ＲＳよりも広くなるように拡張させる処理、及び、それに伴う接触回避のための処理の概要を説明する。
【0094】
ＶＲシステムＳは、所定のトリガーイベント（本発明における第２トリガーイベント）が発生した際に、第１ユーザＵ１の座標と第１アバターＡ１の座標との対応関係、又は、第２ユーザＵ２と第２アバターＡ２との対応関係に、ズレを生じさせる処理を行うように構成されている。
【0095】
本実施形態では、例えば、図４に示すように、第１アバターＡ１が移動体であるエレベータＶＳ１に乗っている状態（接続されている状態）で、図６に示すように、第２アバターＡ２がスイッチＶＳ２を押すことが、そのトリガーイベントとして設定されている。
【0096】
そして、そのトリガーイベントの発生が認識された際には、図４及び図６に示すように、第１ユーザＵ１の座標の移動に関わらず、第１ユーザＵ１に対応する第１アバターＡ１の座標は、上方向へと移動する。具体的には、第１アバターＡ１は、エレベータＶＳ１によって、仮想空間ＶＳに規定された１階部分である第１フロアＦ１から、２階部分である第２フロアＦ２へと移動する。
【0097】
これにより、ＶＲシステムＳでは、対応する第１アバターＡ１が移動させられた第１ユーザＵ１、及び、第１アバターＡ１を認識している第２ユーザＵ２に、現実空間ＲＳよりも上下方向に拡張された仮想空間ＶＳを認識させることができるようになっている。
【0098】
ここで、そのようなズレを生じさせた場合、第１ユーザＵ１と第２ユーザＵ２とは、現実空間ＲＳにおける互いの位置関係を適切に把握することができなくなるおそれがある。その結果、意図せず第１ユーザＵ１と第２ユーザＵ２とが接触してしまうおそれがあった。
【0099】
例えば、図６に示す状態においては、第２ユーザＵ２は、第１アバターＡ１と同様に第１ユーザＵ１が現実空間ＲＳでも上方に移動していると誤解してしまう場合がある。そして、図７に示すように、第２ユーザＵ２は、仮想空間ＶＳで自らに対応する第２アバターＡ２をエレベータＶＳ１の下方に移動可能であると誤解し、第２アバターＡ２をエレベータＶＳ１の下方に移動させるように、自らが移動しようとしてしまう場合がある。
【0100】
しかし、現実空間ＲＳでは、実際には第１バターＡ１に対応する第１ユーザＵ１が第２ユーザＵ２と同じ高さに存在している。そのため、その場合には、現実空間ＲＳにおいて、第１ユーザＵ１と第２ユーザＵ２とが接触してしまうことになる。その結果、第１ユーザＵ１及び第２ユーザＵ２の仮想空間ＶＳへの没入感が阻害されてしまうおそれがあった。
【0101】
そこで、ＶＲシステムＳでは、所定のトリガーイベントの発生が認識された際には、以下に説明するように、仮想空間ＶＳをその仮想空間ＶＳに対応する現実空間ＲＳよりも広くなるように拡張させる処理を実行するとともに、接触回避のための処理を実行することにより、意図しない第１ユーザＵ１と第２ユーザＵ２との接触を防止している。
【0102】
この処理においては、まず、サーバ３のトリガーイベント認識部３３は、トリガーイベントの発生を認識したか否かを判断する（図５／ＳＴＥＰ２００）。
【0103】
具体的には、まず、トリガーイベント認識部３３は、図４に示すように、仮想空間ＶＳで、第１ユーザＵ１に対応する第１アバターＡ１の座標が移動体であるエレベータＶＳ１に乗るように、現実空間ＲＳで、第１ユーザＵ１の座標が移動したか否かを判断する。
【0104】
その後、トリガーイベント認識部３３は、さらに、仮想空間ＶＳで、第２ユーザＵ２に対応する第２アバターＡ２がスイッチＶＳ２近傍の位置でそのスイッチＶＳ２に触れる姿勢となるように、現実空間ＲＳで、第２ユーザＵ２が移動して所定の姿勢となったか否かを判断する（図６参照）。
【0105】
そして、第１アバターＡ１がエレベータＶＳ１に乗った状態で、第２アバターＡ２がスイッチＶＳに触れる姿勢となったときには、トリガーイベント認識部３３は、トリガーイベントが発生したと認識する。
【0106】
トリガーイベントの発生を認識しなかった場合（ＳＴＥＰ２００でＮＯの場合）、ＳＴＥＰ２００に戻り、再度、判断が実行される。この処理は、所定の制御周期で繰り返される。
【0107】
一方、トリガーイベントの発生を認識した場合（ＳＴＥＰ２００でＹＥＳの場合）、サーバ３のアバター座標決定部３４は、第１アバターＡ１の座標を移動させる（図５／ＳＴＥＰ２０１）。
【0108】
具体的には、アバター座標決定部３４は、認識されたトリガーイベントの種類に応じて予め定められているズレの内容（すなわち、補正方向及び補正量）に応じて、第１ユーザＵ１の座標に基づく第１アバターＡ１の座標を移動させる。この移動は、第１ユーザＵ１の座標の移動に基づく第１アバターＡ１の座標の移動とは、独立して行われる。これにより、第１ユーザＵ１の座標と第１アバターＡ１の座標との対応関係にズレが生じる。
【0109】
【0110】
次に、サーバ３の表示画像生成部３１は、第１ゴーストＧ１及び第２ゴーストＧ２を生成する（図５／ＳＴＥＰ２０２）。
【0111】
具体的には、表示画像生成部３１のアバター生成部３１ｂは、トリガーイベントの発生をトリガーとして、仮想空間ＶＳに、第１ユーザＵ１に対応する第１ゴーストＧ１を生成するとともに、第２ユーザＵ２に対応する第２ゴーストＧ２を生成する。
【0112】
本実施形態においては、図６に示すように、第１ゴーストＧ１は、第１ユーザＵ１に対応している旨を示すために、第１アバターＡ１と同じ形状の半透明のアバターとして構成される。また、第１ゴーストＧ１には、後述する第１情報ボードＧ１ａが付加される。同様に、第２ゴーストＧ２は、第２ユーザＵ２に対応している旨を示すために、第２アバターＡ２と同じ形状の半透明のアバターとして構成され、また、第２ゴーストＧ２には、後述する第２情報ボードＧ２ａが付加される。
【0113】
また、本実施形態においては、第１ゴーストＧ１の生成される座標は、ＳＴＥＰ２０１の処理が実行される直前における第１アバターＡ１の座標と一致するように設定されている。また、第２ゴーストＧ２の生成される座標は、第２ユーザＵ２の座標とは独立した座標となるように設定されている。
【0114】
次に、サーバ３のアバター座標決定部３４は、ユーザ情報認識部３２が認識した第１ユーザＵ１の現実空間ＲＳにおける座標及び姿勢に基づいて、第１アバターＡ１及び第１ゴーストＧ１の仮想空間ＶＳにおける座標及び姿勢を決定する（図５／ＳＴＥＰ２０３）。
【0115】
具体的には、アバター座標決定部３４は、認識されたトリガーイベントの種類に応じて予め定められているズレの内容（すなわち、補正方向及び補正量）に応じて、トリガーイベントの発生が認識される時点の前までの処理（ＳＴＥＰ２０１の処理が実行される前までの処理）によって決定された第１アバターＡ１の座標及び姿勢を補正して、トリガーイベントの発生が認識された時点以後における第１アバターＡ１の座標及び姿勢を決定する。
【0116】
本実施形態においては、アバター座標決定部３４は、第１ユーザＵ１の座標に基づく第１アバターＡ１の座標を、第１フロアＦ１に対する第２フロアＦ２の高さの分だけ上方向に移動させた座標を、トリガーイベントの発生が認識された時点以後における第１アバターＡ１の座標として決定する。また、アバター座標決定部３４は、第１ユーザＵ１の姿勢に基づく第１アバターＡ１の姿勢を、そのまま、トリガーイベントの発生が認識された時点以後における第１アバターＡ１の姿勢として決定する。
【0117】
また、アバター座標決定部３４は、トリガーイベントの発生が認識される時点の前までに第１アバターＡ１の座標及び姿勢を決定していた処理と同様の処理を用いて、第１ユーザＵ１の座標及び姿勢に基づいて、第１ゴーストＧ１の座標及び姿勢を決定する。
【0118】
次に、サーバ３の仮想空間画像決定部３５及び仮想空間音声決定部３６は、第１ユーザＵ１に認識させる画像及び音声を、第１アバターＡ１の仮想空間ＶＳにおける座標及び姿勢に基づいて決定する（図５／ＳＴＥＰ２０４）。
【0119】
次に、サーバ３のアバター座標決定部３４は、ユーザ情報認識部３２が認識した第２ユーザＵ２の現実空間ＲＳにおける座標及び姿勢に基づいて、第２アバターＡ２及び第２ゴーストＧ２の仮想空間ＶＳにおける座標及び姿勢を決定する（図５／ＳＴＥＰ２０５）。
【0120】
具体的には、アバター座標決定部３４は、これまでに第２アバターＡ２の座標及び姿勢を決定していた処理と同様の処理を用いて、第２ユーザＵ２の座標及び姿勢に基づいて、第２アバターＡ２の座標及び姿勢を決定する。
【0121】
また、アバター座標決定部３４は、認識されたトリガーイベントの種類に応じて予め定められているズレの内容（すなわち、補正方向及び補正量）に応じて、トリガーイベントの発生が認識される時点の前までの処理によって決定された第２アバターＡ２の座標及び姿勢を補正して、第２ゴーストＧ２の座標及び姿勢を決定する。
【0122】
本実施形態においては、アバター座標決定部３４は、第２ユーザＵ２の座標に基づく第２アバターＡ２の座標を、第１フロアＦ１に対する第２フロアＦ２の高さの分だけ上方向に移動させたものを、トリガーイベントの発生が認識された時点以後における第２ゴーストＧ２の座標として決定する。
【0123】
また、アバター座標決定部３４は、第２ユーザＵ２の姿勢に基づく第２アバターＡ２の姿勢を、そのまま、トリガーイベントの発生が認識された時点以後における第２ゴーストＧ２の姿勢として決定する。
【0124】
次に、サーバ３の仮想空間画像決定部３５及び仮想空間音声決定部３６は、第２ユーザＵ２に認識させる画像及び音声を、第２アバターＡ２の仮想空間ＶＳにおける座標及び姿勢に基づいて決定する（図５／ＳＴＥＰ２０６）。
【0125】
次に、ユーザＵの装着しているＨＭＤ４が、モニタ４１に決定された画像を表示し、スピーカ４２に音声を発生する（図５／ＳＴＥＰ２０７）。
【0126】
次に、サーバ３のユーザ情報認識部３２は、第１ユーザＵ１又は第２ユーザＵ２の現実空間ＲＳにおける座標の移動又は姿勢の変化が認識されたか否かを判断する（図５／ＳＴＥＰ２０８）。
【0127】
第１ユーザＵ１又は第２ユーザＵ２の現実空間ＲＳにおける座標の移動又は姿勢の変化が認識された場合（ＳＴＥＰ２０８でＹＥＳの場合）、ＳＴＥＰ２０３に戻り、再度、ＳＴＥＰ２０３以降の処理が実行される。
【0128】
一方、第１ユーザＵ１又は第２ユーザＵ２の現実空間ＲＳにおける座標の移動又は姿勢の変化が認識されなかった場合（ＳＴＥＰ２０８でＮＯの場合）、サーバ３は、処理の終了を指示する信号を認識したか否かを判断する（図５／ＳＴＥＰ２０９）。
【0129】
終了を指示する信号を認識できなかった場合（ＳＴＥＰ２０９でＮＯの場合）、ＳＴＥＰ２０８に戻り、再度、ＳＴＥＰ２０８以降の処理が実行される。
【0130】
一方、終了を指示する信号を認識した場合（ＳＴＥＰ２０９でＹＥＳの場合）、ＶＲシステムＳは、今回の処理を終了する。
【0131】
以上説明したように、ＶＲシステムＳでは、トリガーイベントが発生し、第１ユーザＵ１の座標と第１ユーザＵ１に対応する第１アバターＡ１の座標との対応関係にズレが生じた場合には、第１ユーザＵ１の座標に対応する第１ゴーストＧ１が生成され、第２ユーザＵ２の座標に対応する座標を、そのズレに対応するように補正した座標に第２ゴーストＧ２が生成される。
【0132】
そして、第１ユーザＵ１の認識する仮想空間ＶＳの画像及び音声に、その第２ゴーストＧ２の画像及び音声が含まれるようになる。また、第２ユーザＵ２の認識する仮想空間ＶＳの画像及び音声に、その第１ゴーストＧ１の画像及び音声が含まれるようになる。
【0133】
そのため、トリガーイベントの発生が認識された後には、第１ユーザＵ１は、何らかの動作を行う際に、自然に自らの補正した座標に対応する第１アバターＡ１と、第２プレイヤーの補正した座標に対応する第２ゴーストＧ２との接触を回避しつつ動作する。また、第２ユーザＵ２は、何らかの動作を行う際に、自然に自らの座標に対応する第２アバターＡ２と、第１ユーザＵ１の座標に対応する第１ゴーストＧ１との接触を回避しつつ動作する。
【0134】
これにより、現実空間ＲＳにおける第１ユーザＵ１と第２ユーザＵ２との接触を、防止することができる。
【0135】
なお、本実施形態においては、第１ゴーストＧ１を第１アバターＡ１と同じ形状の半透明のアバターとして構成し、第２ゴーストＧ２を第２アバターＡ２と同じ形状の半透明のアバターとして構成している。これは、第１ゴーストＧ１が第１ユーザＵ１に対応している旨、及び、第２ゴーストＧ２が第２ユーザＵ２に対応している旨を示すためである。
【0136】
また、本実施形態においては、第１ゴーストＧ１に、第１情報ボードＧ１ａを付加し、第２ゴーストＧ２に、第２情報ボードＧ２ａを付加している。これは、後述の環境を同期させるための処理におけるトリガーイベント（本発明における第１トリガーイベント）をユーザＵが発生させる際に、そのトリガーイベントの発生が認識された際に実行される処理を、ユーザＵに直感的に理解させるためである。
【0137】
しかし、本発明の仮想空間体感システムにおけるアバターがどのユーザに対応しているかを示す情報の表示方法、及び、ゴーストに関連する情報の表示方法は、このような構成に限定されるものではなく、適宜設定してよい。
【0138】
そのため、例えば、本実施形態において、第１ゴーストＧ１及び第２ゴーストＧ２の形状を第１アバターＡ１及び第２アバターＡ２の形状と一致させるにとどめ、情報ボードを省略してもよい。逆に、第１アバターＡ１及び第２アバターＡ２の形状に対応した形状を表示せずに、情報ボードのみを表示してもよい。
【0139】
【0140】
ここで、具体的な処理の内容の説明に先立って、本実施形態における環境を同期させる処理の概要を説明する。
【0141】
ＶＲシステムＳは、所定のトリガーイベント（本発明における第１トリガーイベント）の発生を認識した際に、第１ユーザＵ１及び第２ユーザＵ２の一方の環境に、第１ユーザＵ１及び第２ユーザＵ２の一方の環境を同期させる処理を行うように構成されている。
【0142】
ここで、「環境」とは、仮想空間の座標に基づいて、その座標に位置しているアバターに対応するユーザが認識する画像及び音声の少なくとも一方をいう。また、「環境の同期」とは、複数のアバターに対応する複数のユーザが、同様の環境を認識するようになることをいう。
【0143】
本実施形態では、例えば、図９に示すように、第２アバターＡ２が第１ユーザＵ１に対応している第１ゴーストＧ１に触れることが、そのトリガーイベントとして設定されている。
【0144】
そして、そのトリガーイベントの発生が認識された際には、図１０に示すように、第２ユーザＵ２の座標の移動に関わらず、第２ユーザＵ２に対応する第２アバターＡ２の座標は、第１アバターＡ１の座標に隣接する座標へと移動する。具体的には、第２アバターＡ２は、第１フロアＦ１から、第２フロアＦ２の第１アバターＡ１に隣接する座標へと移動する。
【0145】
これにより、ＶＲシステムＳでは、そのトリガーイベントの発生が認識された時点以後においては、第１ユーザＵ１の環境と第２ユーザＵ２の環境とが同期して、第１ユーザＵ１及び第２ユーザＵ２は、同様の環境を体感することができるようになっている。
【0146】
なお、以下においては、第１アバターＡ１に対応する第１ユーザＵ１が、仮想空間ＶＳの第２フロアＦ２よりもさらに上空に存在している虹ＶＳ３を、第２ユーザＵ２とともに眺めたい旨を第２ユーザＵ２にメッセージ機能などを介して伝えた際に、第２ユーザＵ２が第１ユーザＵ１と環境を同期しようとする（すなわち、自らも虹ＶＳ３を眺めようとする）際における処理を説明する。
【0147】
この処理においては、まず、サーバ３のトリガーイベント認識部３３は、トリガーイベントの発生を認識したか否かを判断する（図８／ＳＴＥＰ３００）。
【0148】
具体的には、まず、トリガーイベント認識部３３は、図９に示すように、仮想空間ＶＳで、第２ユーザＵ２に対応する第２アバターＡ２が、第１ユーザＵ１に対応する第１アバターＡ１に触れる姿勢となったか否かを判断する。そして、第２アバターＡ２が第１アバターＡ１に触れる姿勢となった時には、トリガーイベント認識部３３は、トリガーイベントが発生したと認識する。
【0149】
トリガーイベントの発生を認識しなかった場合（ＳＴＥＰ３００でＮＯの場合）、ＳＴＥＰ３００に戻り、再度、判断が実行される。この処理は、所定の制御周期で繰り返される。
【0150】
一方、トリガーイベントの発生を認識した場合（ＳＴＥＰ３００でＹＥＳの場合）、サーバ３のアバター座標決定部３４は、第２アバターＡ２の座標を、第１アバターＡ１の座標に隣接する座標に移動させる（図５／ＳＴＥＰ３０１）。
【0151】
具体的には、アバター座標決定部３４は、第１アバターＡ１の座標だけでなく姿勢も参照して、第１アバターＡ１の側方、前方又は後方に位置する座標（すなわち、隣接する座標）を認識し、その座標に第２アバターＡ２を移動させる。
【0152】
この移動は、第２ユーザＵ２の座標の移動に基づく第２アバターＡ２の座標の移動とは、独立して行われる。なお、これにより、第２ユーザＵ２の座標と第２アバターＡ２の座標との対応関係にズレが生じる。
【0153】
【0154】
なお、移動の経緯（例えば、移動にかかる時間、移動中の経路等）は、適宜設定してよい。例えば、第１ユーザＵ１及び第２ユーザＵ２とは異なる第３ユーザが存在する場合には、第２アバターＡ２の移動経路が認識可能なように、第２アバターＡ２の移動速度をある程度ゆっくりとした速度に設定することによって、トリガーイベントの発生が認識された際における座標の移動を、第３ユーザに認識させることができるようになる。
【0155】
次に、サーバ３の表示画像生成部３１は、第１ゴーストＧ１及び第２ゴーストＧ２を消去する（図８／ＳＴＥＰ３０２）。
【0156】
本実施形態においては、ＳＴＥＰ３０１における第２アバターＡ２の移動によって、前述の仮想空間を拡張する処理によって生じた、第１アバターＡ１の座標と第２アバターＡ２の座標との対応関係におけるズレが解消される。すなわち、その移動後には、第１アバターＡ１の座標と第２アバターＡ２の座標との対応関係が、そのズレが生じる前の対応関係（すなわち、第１ユーザＵ１の座標と第２ユーザＵ２の座標との対応関係に一致したもの）に戻る。
【0157】
そのため、このＳＴＥＰ３０２における処理を実行した後においては、第１ゴーストＧ１及び第２ゴーストＧ２が存在していなくても、意図しない接触が抑制されることになる。むしろ、第１ゴーストＧ１及び第２ゴーストＧ２が存在している場合には、逆に意図しない接触を発生させてしまうおそれがある。そこで、本実施形態においては、このように、不要となった第１ゴーストＧ１及び第２ゴーストＧ２を消去する処理を実行している。
【0158】
なお、ＳＴＥＰ３０２における処理の実行後においても、第１アバターＡ１の座標と第２アバターＡ２の座標との対応関係と、第１ユーザＵ１の座標と第２ユーザＵ２の対応座標との関係とが、一致したものに戻らない場合等には、必要に応じて、第１ゴーストＧ１及び第２ゴーストＧ２の少なくとも一方を、引き続き存在させるようにするとよい。
【0159】
次に、サーバ３のアバター座標決定部３４は、ユーザ情報認識部３２が認識した第１ユーザＵ１及び第２ユーザＵ２の現実空間ＲＳにおける座標及び姿勢に基づいて、第１アバターＡ１及び第１ゴーストＧ１、並びに、第２アバターＡ２及び第２ゴーストＧ２の仮想空間ＶＳにおける座標及び姿勢を決定する（図８／ＳＴＥＰ３０３）。
【0160】
具体的には、アバター座標決定部３４は、引き続き、第１ユーザの座標及び姿勢に基づいて決定された座標及び姿勢を、前述の仮想空間ＶＳを拡張させる処理において発生したズレの内容（すなわち、補正方向及び補正量）に基づいて補正して、第１アバターＡ１の座標及び姿勢を決定する。
【0161】
また、アバター座標決定部３４は、第２ユーザの座標及び姿勢に基づいて決定された座標及び姿勢を、認識されたトリガーイベントの種類に応じて予め定められているズレの内容（すなわち、補正方向及び補正量）に基づいて補正して、第２アバターＡ２の座標及び姿勢を決定する。
【0162】
本実施形態においては、アバター座標決定部３４は、第２ユーザＵ２の座標に基づく第２アバターＡ２の座標を、第１フロアＦ１に対する第２フロアＦ２の高さの分だけ上方向に移動させ、且つ、トリガーイベントの発生が認識された時点における第２アバターＡ２の座標から第１アバターＡ１の左隣りの座標まで水平方向に移動させたものを、トリガーイベントの発生が認識された時点以後における第２アバターＡ２の座標として決定する。
【0163】
また、アバター座標決定部３４は、第２ユーザＵ２の姿勢に基づく第２アバターＡ２の姿勢を、そのまま、トリガーイベントの発生が認識された時点以後における第２アバターＡ２の姿勢として決定する。
【0164】
次に、サーバ３の仮想空間画像決定部３５及び仮想空間音声決定部３６は、第１ユーザＵ１に認識させる画像及び音声を、第１アバターＡ１の仮想空間ＶＳにおける座標及び姿勢に基づいて決定し、第２ユーザＵ２に認識させる画像及び音声を、第２アバターＡ２の仮想空間ＶＳにおける座標及び姿勢に基づいて決定する（図８／ＳＴＥＰ３０４）。
【0165】
次に、ユーザＵの装着しているＨＭＤ４が、モニタ４１に決定された画像を表示し、スピーカ４２に音声を発生する（図８／ＳＴＥＰ３０５）。
【0166】
次に、サーバ３のユーザ情報認識部３２は、第１ユーザＵ１又は第２ユーザＵ２の現実空間ＲＳにおける座標の移動又は姿勢の変化が認識されたか否かを判断する（図８／ＳＴＥＰ３０６）。
【0167】
第１ユーザＵ１又は第２ユーザＵ２の現実空間ＲＳにおける座標の移動又は姿勢の変化が認識された場合（ＳＴＥＰ３０６でＹＥＳの場合）、ＳＴＥＰ３０３に戻り、再度、ＳＴＥＰ３０３以降の処理が実行される。
【0168】
一方、第１ユーザＵ１又は第２ユーザＵ２の現実空間ＲＳにおける座標の移動又は姿勢の変化が認識されなかった場合（ＳＴＥＰ３０６でＮＯの場合）、サーバ３は、処理の終了を指示する信号を認識したか否かを判断する（図８／ＳＴＥＰ３０７）。
【0169】
終了を指示する信号を認識できなかった場合（ＳＴＥＰ３０７でＮＯの場合）、ＳＴＥＰ３０６に戻り、再度、ＳＴＥＰ３０６以降の処理が実行される。
【0170】
一方、終了を指示する信号を認識した場合（ＳＴＥＰ３０７でＹＥＳの場合）、ＶＲシステムＳは、今回の処理を終了する。
【0171】
以上説明したように、ＶＲシステムＳでは、トリガーイベントの発生が認識された際には、アバター座標決定部３４は、第２アバターＡ２の座標を、第１アバターＡ１の座標に隣接する座標に移動させている。
【0172】
ここで、第１ユーザＵ１及び第２ユーザＵ２に認識させる仮想空間ＶＳの画像及び音声は、第１アバターＡ１及び第２アバターＡ１の座標に基づいて決定される。そのため、アバター同士の座標が一致又は隣接している場合には、それらのアバターに対応する各々のユーザの認識する仮想空間ＶＳの画像及び音声も、一致又は類似した画像及び音声（すなわち、同様の画像及び音声）になる。
【0173】
したがって、ＶＲシステムＳによれば、トリガーイベントの発生が認識された際には、各々のユーザの認識する仮想空間の画像及び音声も一致又は隣接した画像及び音声にすることができるので、それまで仮想空間で異なる環境を体感していた第１ユーザＵ１及び第２ユーザＵ２が、ほぼ同じ環境を体感することができるようになる。
【0174】
なお、本実施形態においては、第２ユーザＵ２が自らの環境を第１ユーザＵ１の環境に同期させる場合について説明した。しかし、本発明の仮想空間体感システムは、そのような構成に限定されるものではなく、トリガーイベントの発生が認識された際に第１ユーザ及び第２ユーザの一方の環境を、第１ユーザ及び第２ユーザの他方の環境に同期させるものであればよい。
【0175】
そのため、例えば、本実施形態において、第１アバターＡ１が第２ユーザＵ２に対応する第２ゴーストＧ２に触れた場合にも、第２アバターＡ２の座標を第１アバターＡ１の座標に隣接する座標に移動させるように構成してもよい。すなわち、第２アバターＡ２が自ら第１アバターＡ１の座標に一致する座標又は隣接する座標に移動するのではなく、第１アバターＡ１が第２アバターＡ２の座標を自らの座標に一致する座標又は隣接する座標に呼び寄せるように構成してもよい。
【0176】
また、例えば、本実施形態において、第２アバターＡ２が第１ユーザＵ１に対応する第１ゴーストＧ１に触れた場合に、第１アバターＡ１が自ら第２アバターＡ２の座標に一致する座標又は隣接する座標に移動するように構成してもよいし、第１アバターＡ１が第２アバターＡ２の座標を自らの座標に一致する座標又は隣接する座標に呼び寄せるように構成してもよい。
【0177】
なお、自らの座標が他のユーザの座標に一致する座標又は隣接する座標へ移動する処理を行う構成と、他のユーザの座標を自らの座標に一致する座標又は隣接する座標に呼び寄せる処理を行う構成とを同時に実装する場合には、トリガーイベントとなる動作を、行われる処理に応じて異ならせればよい。
【0178】
具体的には、例えば、自らに対応するアバターの右手で他のユーザに対応するアバターに触れた場合には、自らの座標が他のユーザの座標に一致する座標又は隣接する座標へ移動する処理を実行し、自らに対応するアバターの左手で他のユーザに対応するアバターに触れた場合には、他のユーザの座標を自らの座標に一致する座標又は隣接する座標に呼び寄せる処理を実行するというように構成するとよい。
【0179】
また、本実施形態においては、トリガーイベントの発生が認識された場合に、第２アバターＡ２の座標を第１アバターＡ１の座標に一致する座標ではなく、隣接する座標に移動させる処理を行っている。これは、第２アバターＡ２の座標が移動した際に、一方のユーザの認識する画像に他方のユーザに対応するアバターを含ませやすくして、一方のユーザに他方のユーザが自らの近傍に移動してきたことを認識させやすくするためである。
【0180】
しかし、本発明は、そのような構成に限定されるものではなく、一方のアバターを移動させる座標を、他方のアバターの座標と一致させてもよい。このように構成した場合には、環境の同期の度合いを、隣接する座標に移動させた場合に比べて、さらに高めることができる。
【0181】
また、本実施形態においては、トリガーイベントの発生が認識された以後においては、第２アバターＡ２は、継続して第２フロアＦ２に位置する。すなわち、トリガーイベントの発生が認識された際における移動によって生じたズレに基づいて、第２ユーザＵ２の座標と第２アバターＡ２の座標との対応関係にズレが生じた状態が継続されている。
【0182】
しかし、本発明は、そのような構成に限定されるものではなく、トリガーイベントの発生が認識された際における移動によって生じたズレを、その後に解消するように構成してもよい。
【0183】
そのため、例えば、トリガーイベントが継続している期間だけ（例えば、上記実施形態では、第２アバターＡ２が第１アバターＡ１に触れている期間だけ）、又は、トリガーイベントの発生が認識されてから所定の期間だけ、アバターの座標を移動させ、その期間の経過後には、アバターの座標を、トリガーイベントの発生が認識される前における座標に戻すように構成してもよい。
【0184】
【0185】
なお、本実施形態のＶＲシステムＳは、環境を同期させる際及びそれ以後において実行する処理を除き、第１実施形態のＶＲシステムＳと同様の構成を備えている。
【0186】
そのため、以下の説明においては、環境を同期させる際及びそれ以後において実行する処理についてのみ説明する。また、第１実施形態のＶＲシステムＳの構成と同一の構成又は対応する構成については、同一の符号を付すとともに、詳細な説明は省略する。
【0187】
【0188】
ここで、具体的な処理の内容の説明に先立って、本実施形態における環境を同期させる処理の概要を説明する。
【0189】
ＶＲシステムＳは、所定のトリガーイベント（本発明における第１トリガーイベント）の発生を認識した際に、第１ユーザＵ１及び第２ユーザＵ２の一方の環境に、第１ユーザＵ１及び第２ユーザＵ２の一方の環境を同期させる処理を行うように構成されている。
【0190】
本実施形態では、例えば、図１２に示すように、第２アバターＡ２が第１ユーザＵ１に対応している第１ゴーストＧ１に触れることが、そのトリガーイベントとして設定されている。
【0191】
そして、そのトリガーイベントの発生が認識された際には、図１３に示すように、第２ユーザＵ２の座標に関わらず、第２ユーザＵ２が認識する環境は、第１ユーザＵ１が認識している環境と一致したものとなる。具体的には、第２ユーザＵ２が認識する環境は、第２アバターＡ２の座標に基づくもの（図１４参照）から、第１アバターＡ１の座標に基づくもの（図１５参照）に変化する。
【0192】
これにより、ＶＲシステムＳでは、第１ユーザＵ１の環境と第２ユーザＵ２の環境とを同期させて、第１ユーザＵ１及び第２ユーザＵ２が、同様の環境を体感することができるようになっている。
【0193】
なお、以下においては、第１アバターＡ１に対応する第１ユーザＵ１が、仮想空間ＶＳの第２フロアＦ２よりもさらに上空に存在している虹ＶＳ３を、第２ユーザＵ２とともに眺めたい旨を第２ユーザＵ２にメッセージ機能などを介して伝えた際に、第２ユーザＵ２が第１ユーザＵ１と環境を同期しようとする（すなわち、自らも虹ＶＳ３を眺めようとする）際における処理を説明する。
【0194】
なお、図１４に示すように、この処理の開始時の状態においては、第２ユーザＵ２は、仮想空間ＶＳの第２フロアＦ２にいる第１アバターＡ１を見上げている状態の画像を認識しているものとする。
【0195】
この処理においては、まず、サーバ３のトリガーイベント認識部３３は、トリガーイベントの発生を認識したか否かを判断する（図１１／ＳＴＥＰ４００）。
【0196】
具体的には、まず、トリガーイベント認識部３３は、図１２に示すように、仮想空間ＶＳで、第２ユーザＵ２に対応する第２アバターＡ２が、第１ユーザＵ１に対応する第１アバターＡ１に触れる姿勢となったか否かを判断する。そして、第２アバターＡ２が第１アバターＡ１に触れる姿勢となった時には、トリガーイベント認識部３３は、トリガーイベントが発生したと認識する。
【0197】
トリガーイベントの発生を認識した場合（ＳＴＥＰ４００でＹＥＳの場合）、サーバ３のアバター座標決定部３４は、第２アバターＡ２及び第２ゴーストＧ２の座標を固定する（図１１／ＳＴＥＰ４０１）。
【0198】
本実施形態では、この後に実行されるＳＴＥＰ４０２～ＳＴＥＰ４０４の処理（すなわち、環境を同期させるための処理）において、第２アバターＡ２及び第２ゴーストＧ２に対応する第２ユーザＵ２の認識する画像及び音声が、第１アバターＡ１の座標に基づいて決定されたものにする処理が実行される。
【0199】
そのため、その処理の実行されている最中に第２アバターＡ２が移動できてしまうと、環境を同期させるための処理の終了後に、意図せず第２アバターＡ２の座標が移動している状態となる。ひいては、その処理の終了後に、その第２アバターＡ２の座標に基づいて画像及び音声を認識する第２ユーザＵ２の没入感を阻害してしまうおそれがある。
【0200】
また、その処理の実行されている最中に第２ゴーストＧ２が移動できてしまうと、環境を同期させるための処理の終了後に、意図せず第２ゴーストＧ２の座標が移動している状態となる。ひいては、その処理の終了後に、第１ユーザＵ１の認識している画像において、突然第２ゴーストＧ２の位置が変わってしまうことになり、第１ユーザＵ１の没入感を阻害してしまうおそれがある。
【0201】
そこで、ＶＲシステムＳでは、トリガーイベントの発生を認識した場合（すなわち、環境を同期させる処理の実行が開始される際には）、このＳＴＥＰ４０１の処理を実行して、第２アバターＡ２及び第２ゴーストＧ２の座標を固定することによって、そのようにして没入感が阻害されてしまうことを抑制している。
【0202】
【0203】
これは、姿勢まで固定されてしまうと、環境を同期させるための処理の終了後に、第２ユーザＵ２の姿勢と第２アバターＡ２の姿勢及び第２ゴーストＧ２の姿勢との対応関係にズレが生じてしまうおそれがあり、その一方で、環境を同期させるための処理の最中に、第２ゴーストＧ２の姿勢が変化したとしても、第１ユーザＵ１の没入感を阻害しないためである。
【0204】
ただし、第２アバターＡ２の姿勢も、第１アバターＡ１の姿勢と一致するように構成してもよい。このように構成した場合には、第２ユーザＵ２の認識する画像及び音声が第１ユーザＵ１の認識する画像及び音声とさらに一致したものになるので、第２ユーザＵ２は、第１ユーザＵ１とさらに同期した環境を体感することができるようになる。
【0205】
なお、このように第２アバターＡ２及び第２ゴーストＧ２の座標を固定した状態で、第２ユーザＵ２が移動してしまうと、第２ユーザＵ２の座標と第２アバターＡ２の座標及び第２ゴーストＧ２の座標との対応関係に、意図せずズレが生じてしまうことになる。ひいては、意図しない接触を誘発する要因が発生してしまう。
【0206】
そこで、図１５に示すように、ＶＲシステムＳでは、環境同期処理を実行している旨の表示とともに、移動をしないように注意する旨のメッセージを、第２ユーザＵ２の認識する画像に表示する。これにより、ＶＲシステムＳでは、そのようなズレの発生を抑制している。
【0207】
実行する処理の説明に戻り、ＳＴＥＰ４０１の処理を実行した後には、サーバ３のアバター座標決定部３４は、ユーザ情報認識部３２が認識した第１ユーザＵ１の現実空間ＲＳにおける座標及び姿勢に基づいて、第１アバターＡ１及び第１ゴーストＧ１の仮想空間ＶＳにおける座標及び姿勢を決定する（図１１／ＳＴＥＰ４０２）。
【0208】
次に、サーバ３の仮想空間画像決定部３５及び仮想空間音声決定部３６は、第１ユーザＵ１及び第２ユーザＵ２に認識させる画像及び音声を、第１アバターＡ１の仮想空間ＶＳにおける座標及び姿勢に基づいて決定する（図５／ＳＴＥＰ４０３）。
【0209】
具体的には、仮想空間画像決定部３５及び仮想空間音声決定部３６は、第１ユーザＵ１に認識させる画像及び音声を、第１アバターＡ１の座標及び姿勢に基づいて決定する。また、仮想空間画像決定部３５及び仮想空間音声決定部３６は、第２ユーザＵ２に認識させる画像及び音声を、第１アバターＡ１の座標、及び、第２アバターＡ２の姿勢に基づいて決定する。
【0210】
このようにして決定された第１ユーザＵ１に認識させる画像及び音声は、第１アバターＡ１の座標及び姿勢に基づいて、仮想空間ＶＳの第２フロアＦ２で、上空にある虹ＶＳ３を眺めているものになる。
【0211】
また、このようにして決定された第２ユーザＵ２に認識させる画像及び音声は、第１アバターＡ１の座標よりも第１アバターＡ１から見て後ろ側となる座標に位置している場合に認識される画像及び音声となる。具体的には、図１５に示すように、仮想空間ＶＳの第２フロアＦ２で、上空にある虹ＶＳ３を、第１アバターＡ１の背後から眺めているものになる。
【0212】
なお、本実施形態では、第２ユーザＵ２が第１ユーザＵ１とともに環境を楽しむことを考慮しているので、第１アバターＡ１（ひいては、第１ユーザＵ１）を認識できるように、この処理において第２ユーザＵ２に認識させる画像及び音声の基準となる座標を、第１アバターＡ１の座標の後ろ側となる座標（すなわち、隣接する座標）としている。
【0213】
しかし、第２ユーザＵ２が第１ユーザＵ１の体感している環境とさらに近い環境を体感したいというような場合には、基準となる座標を、第１アバターＡ１の座標と一致させるようにするとよい。また、基準となる姿勢も第１アバターＡ１と一致させた場合には、第２ユーザＵ２は、第１ユーザＵ１の体感している環境と同じ環境を体感することができるようになる。
【0214】
次に、ユーザＵの装着しているＨＭＤ４は、ＨＭＤ４に搭載されているモニタ４１に決定された画像を表示させ、ＨＭＤ４に搭載されているスピーカ４２に決定された音声を発生させる（図１１／ＳＴＥＰ４０４）。
【0215】
次に、サーバ３のトリガーイベント認識部３３は、トリガーイベントの解除を認識したか否かを判断する（図１１／ＳＴＥＰ４０５）。
【0216】
具体的には、まず、トリガーイベント認識部３３は、仮想空間ＶＳで、第２ユーザＵ２に対応する第２アバターＡ２が、第１ユーザＵ１に対応する第１アバターＡ１に触れる姿勢（図１２参照）を解除したか否かを判断する。そして、第２アバターＡ２が第１アバターＡ１に触れる姿勢を解除した時には、トリガーイベント認識部３３は、トリガーイベントが解除されたと認識する。
【0217】
なお、トリガーイベントの解除は、例えば、トリガーイベントの発生から所定の期間が経過したときに自動的に認識されるように構成されていてもよいし、他のトリガーイベントが発生したとき（例えば、第２アバターＡ２が第１ゴーストＧ１に触れていない状態になったとき等）に認識されるように構成されていてもよい。
【0218】
トリガーイベントの解除を認識しなかった場合（ＳＴＥＰ４０５でＮＯの場合）、ＳＴＥＰ４０２に戻り、再度、ＳＴＥＰ４０２以降の処理が実行される。
【0219】
一方、トリガーイベントの解除を認識した場合（ＳＴＥＰ４０５でＹＥＳの場合）、サーバ３のアバター座標決定部３４は、第２アバターＡ２及び第２ゴーストＧ２の座標の固定を解除する（図１１／ＳＴＥＰ４０６）。
【0220】
トリガーイベントの発生を認識しなかった場合（ＳＴＥＰ４００でＮＯの場合）、又は、第２アバターＡ２及び第２ゴーストＧ２の座標の固定を解除した後には、サーバ３のアバター座標決定部３４は、ユーザ情報認識部３２が認識した第１ユーザＵ１の現実空間ＲＳにおける座標及び姿勢に基づいて、第１アバターＡ１及び第１ゴーストＧ１の仮想空間ＶＳにおける座標及び姿勢を決定する（図１１／ＳＴＥＰ４０７）。
【0221】
次に、サーバ３の仮想空間画像決定部３５及び仮想空間音声決定部３６は、第１ユーザＵ１に認識させる画像及び音声を、第１アバターＡ１の仮想空間ＶＳにおける座標及び姿勢に基づいて決定する（図１１／ＳＴＥＰ４０８）。
【0222】
次に、サーバ３のアバター座標決定部３４は、ユーザ情報認識部３２が認識した第２ユーザＵ２の現実空間ＲＳにおける座標及び姿勢に基づいて、第２アバターＡ２及び第２ゴーストＧ２の仮想空間ＶＳにおける座標及び姿勢を決定する（図１１／ＳＴＥＰ４０９）。
【0223】
次に、サーバ３の仮想空間画像決定部３５及び仮想空間音声決定部３６は、第２ユーザＵ２に認識させる画像及び音声を、第２アバターＡ２の仮想空間ＶＳにおける座標及び姿勢に基づいて決定する（図１１／ＳＴＥＰ４１０）。
【0224】
次に、ユーザＵの装着しているＨＭＤ４が、モニタ４１に決定された画像を表示し、スピーカ４２に音声を発生する（図１１／ＳＴＥＰ４１１）。
【0225】
次に、サーバ３は、処理の終了を指示する信号を認識したか否かを判断する（図１１／ＳＴＥＰ４１２）。
【0226】
終了を指示する信号を認識できなかった場合（ＳＴＥＰ４１２でＮＯの場合）、ＳＴＥＰ４００に戻り、再度、ＳＴＥＰ４００以降の処理が実行される。
【0227】
一方、終了を指示する信号を認識した場合（ＳＴＥＰ４１２でＹＥＳの場合）、ＶＲシステムＳは、今回の処理を終了する。
【0228】
このように、ＶＲシステムＳでは、トリガーイベントの発生が認識された際には、仮想空間画像決定部３５及び仮想空間音声決定部３６は、第２ユーザＵ２に認識させる仮想空間ＶＳの画像及び音声を、第２アバターＡ２の座標が第１アバターＡ１の座標に隣接する座標に移動した場合における画像及び音声にしている。
【0229】
すなわち、トリガーイベントの発生が認識された際には、第２ユーザＵ２に認識させる仮想空間ＶＳの画像及び音声を決定するための基準となる座標を、第２ユーザＵ２に対応する第２アバターＡ２の座標の位置に関係なく、第１ユーザＵ１に対応する第１アバターＡ１の座標に隣接する座標としている。
【0230】
これにより、トリガーイベントの発生が認識された際には、第２ユーザＵ２は、第１ユーザＵ１とともに、第１ユーザＵ１に対応する第１アバターＡ１の座標に隣接する座標に基づいて決定された仮想空間ＶＳの画像及び音声を認識することになる。
【0231】
したがって、ＶＲシステムＳによれば、トリガーイベントの発生が認識された後には、第２ユーザＵ２は、第１ユーザＵ１に対応する第１アバターＡ１の座標に隣接する座標に基づいて決定された仮想空間ＶＳの画像及び音声を認識することになるので、それまで仮想空間ＶＳで異なる環境を体感していた第１ユーザ及び第２ユーザが、ほぼ同じ環境を体感することができるようになる。
【0232】
なお、本実施形態においては、第２ユーザＵ２が自らの環境を第１ユーザＵ１の環境に同期させる場合について説明した。しかし、本発明の仮想空間体感システムは、そのような構成に限定されるものではなく、トリガーイベントの発生が認識された際に第１ユーザ及び第２ユーザの一方の環境を、第１ユーザ及び第２ユーザの他方の環境に同期させるものであればよい。
【0233】
そのため、例えば、本実施形態において、第１アバターＡ１が第２ユーザＵ２に対応する第２ゴーストＧ２に触れた場合に、第１ユーザＵ１の認識する画像及び音声を、第２アバターＡ２の座標に一致する座標又は隣接する座標を基準として決定するように構成してもよい。
【0234】
また、例えば、本実施形態では、他のユーザである第１ユーザＵ１の環境に第２ユーザＵ２が自らの環境を同期させているが、自らの環境に他のユーザの環境を同期させるように構成してもよい。
【0235】
具体的には、例えば、本実施形態において、第１アバターＡ１が第２ユーザＵ２に対応する第２ゴーストＧ２に触れた場合に、第２ユーザＵ２の認識する画像及び音声を、第１アバターＡ１の座標に一致する座標又は隣接する座標を基準として決定するように構成してもよい。逆に、第２アバターＡ２が第１ユーザＵ１に対応する第１ゴーストＧ１に触れた場合に、第１ユーザＵ１の認識する画像及び音声を、第２アバターＡ２の座標に一致する座標又は隣接する座標を基準として決定するように構成してもよい。
【0236】
なお、他のユーザの環境に自らの環境を同期させる処理を行う構成と、自らの環境に他のユーザの環境を同期させる処理を行う構成とを同時に実装する場合には、トリガーイベントとなる動作を、行われる処理に応じて異ならせればよい。
【0237】
具体的には、例えば、自らに対応するアバターの右手で他のユーザに対応するアバターに触れた場合には、他のユーザの環境に自らの環境を同期させる処理を実行し、自らに対応するアバターの左手で他のユーザに対応するアバターに触れた場合には、自らの環境に他のユーザの環境を同期させる処理を実行するというように構成するとよい。
【0238】
また、第１実施形態のように、座標を移動させて環境を同期させる処理を行う構成と、本実施形態のように、基準となる座標を変更して環境を同期させる処理を行う構成とを同時に実装する場合には、トリガーイベントとなる動作を、行われる処理に応じて異ならせればよい。
【0239】
具体的には、例えば、自らに対応するアバターで他のユーザに対応するアバターの手に触れた場合には、座標を移動させて環境を同期させる処理を行い、自らに対応するアバターで他のユーザに対応するアバターの肩に触れた場合には、基準となる座標を変更して環境を同期させる処理を行うように構成するよい。
【0240】
［その他の実施形態］
以上、図示の実施形態について説明したが、本発明はこのような形態に限定されるものではない。
以上、図示の実施形態について説明したが、本発明はこのような形態に限定されるものではない。
【0241】
例えば、上記実施形態では、図４等に示すように、仮想空間体感システムであるＶＲシステムＳは、現実空間ＲＳの１つの部屋に共に存在する第１ユーザＵ１及び第２ユーザＵ２に対し、その部屋に対応する１つの仮想空間ＶＳに、第１ユーザＵ１に対応する第１アバターＡ１及び第２ユーザＵ２に対応する第２アバターＡ２を介して、互いに存在すると認識させるものとして構成されている。
【0242】
しかし、本発明の仮想空間体感システムは、そのような構成に限定されるものではなく、複数のユーザに対応するアバターが、同時に仮想空間に存在できるものであればよい。
【0243】
そのため、例えば、第１ユーザと第２ユーザとが、現実空間の異なる領域（例えば、各々の自室）に存在していてもよい。
【0244】
また、上記実施形態では、仮想空間ＶＳをその仮想空間ＶＳに対応する現実空間ＲＳよりも広くなるように拡張させる処理（図５のフローチャートを参照して説明した処理）を実行した場合において、環境を同期させる処理（図８のフローチャート又は図１１のフローチャートを参照して説明した処理）を実行した場合について説明した。
【0245】
これは、ユーザにそのように現実空間よりも拡張された仮想空間を認識させた場合には、各々のユーザが、異なる環境を体感する機会（ひいては、環境を共有したいと感じる機会）が増えるためである。
【0246】
しかし、本発明の仮想空間体感システムは、そのような仮想空間を拡張させる処理を実行した場合にのみ環境を同期させる処理を実行する構成に限定されるものではなく、各々のユーザが、自分以外のユーザも何らかの仮想空間を体験していることを認識できるように構成されていればよい。そのため、例えば、各々のユーザに対応するアバターが、同一の仮想空間に存在していなくてもよい。
【0247】
具体的には、買い物客である複数の第１ユーザに対応する複数の第１アバターが、仮想空間に存在する店舗に自由に存在するとともに、店員である第２ユーザに対応する第２アバターが、仮想空間に存在するコンシェルジュカウンターに存在するように構成されていてもよい。このとき、コンシェルジュカウンターの存在する仮想空間は、店舗の存在する仮想空間であってもよいし、店舗の存在する仮想空間とは別の仮想空間であってもよい。
【0248】
このように構成されている場合であって、上記第１実施形態のように一方のアバターそのものが他方のアバターの座標と一致する座標又は隣接する座標に移動するように構成されているときには、第１トリガーイベントの発生が認識された際には、第２アバターは、コンシェルジュカウンターから、複数の第１ユーザのうちその第１トリガーイベントを発生させた第１ユーザに対応する第１アバターの座標へと移動する。
【0249】
また、このように構成されている場合であって、上記第２実施形態のように一方のアバターの視点だけが他方のアバターの座標と一致する座標又は隣接する座標に移動するように構成されているときには、第１トリガーイベントの発生が認識された際には、第２アバターに対応する第２ユーザに表示される画像は、コンシェルジュカウンターの画像から、複数の第１ユーザのうちその第１トリガーイベントを発生させた第１ユーザに表示されている画像と同様の画像に変化する。
【0250】
また、これらのように構成されている場合、第１トリガーイベントは、例えば、第１アバターが仮想空間に生成されたオブジェクトである呼び出しボタンを押す、又は、第２アバターが移動ボタンを押すといった動作等が該当する。
【0251】
また、上記実施形態では、第２ユーザＵ２に対応する第２アバターＡ２が、第１ユーザＵ１に対応し、第１ユーザＵ１の座標との対応関係にズレの生じた座標に位置する第１ゴーストＧ１に接触する動作を、第１トリガーイベントとして採用している。また、第１ユーザＵ１に対応する第１アバターＡ１が、第２ユーザＵ２に対応し、第２ユーザＵ２の座標との対応関係にズレの生じた座標に位置する第２ゴーストＧ２に接触する動作も、第１トリガーイベントとして採用し得るとしている。
【0252】
これは、その動作によって、一方のユーザが、他方のユーザと環境を共有する第１トリガーイベントが発生することを、直感的に理解することができるようにするためである。ひいては、第１トリガーイベントを発生させるために、その第１トリガーイベントを発生させようとするユーザの仮想空間への没入感が阻害されてしまうことを抑制することができるようにするためである。
【0253】
しかし、本発明における第１トリガーイベントは、このような構成に限定されるものではなく、システム設計者等が適宜設定してよい。
【0254】
そのため、例えば、仮想空間に生成されたオブジェクト（例えば、移動スイッチ、呼び出しスイッチ等）に触れることによって、第１トリガーイベントが発生するように構成してもよい。また、アバターに特定の動作（例えば、手招きする動作等）を行わせた場合に、第１トリガーイベントが発生するように構成してもよい。
【0255】
また、上記実施形態においては、トリガーイベントを、一方のユーザに対応するアバターが他方のユーザに対応するゴーストに触れる動作としている。しかし、本発明における第１トリガーイベントは、そのような構成に限定されるものではなく、一方のユーザに対応するアバターが他方のユーザに対応するゴーストに対して実行する所定の動作であればよい。
【0256】
ここで、「所定の動作」としては、アバターがゴーストを基準として行う何らかの動作であればよい。例えば、本実施形態のようにアバターがゴーストに接触するような動作の他、アバターがゴーストを基準とした所定の範囲内に移動するような動作、アバターが仮想空間に存在するオブジェクトを操作する際に、その対象としてゴーストを選択するような動作（例えば、カメラ型オブジェクトでゴーストを撮影するような動作等）等が挙げられる。
【0257】
また、本実施形態においては、仮想空間を拡張させる処理の際に生成されたゴーストを、トリガーイベントを発生させるためのキーとして採用している。しかし、本発明におけるゴーストは、そのような構成に限定されるものではなく、ユーザに対応し、且つ、そのユーザの認識する画像及び音声の基準とはならないアバターであればよい。
【0258】
そのため、例えば、仮想空間を拡張する処理等の実行等に関係なく、最初から、ユーザに対応し、且つ、そのユーザの認識する画像及び音声の基準となるアバターとともに、そのアバターとは独立したアバターを生成し、その独立した（例えば、基準となるアバターの座標とは異なる座標に生成した）アバターをゴーストとして採用してもよい。
【0259】
具体的には、例えば、仮想空間で、ダンスの講師に対応するアバター、生徒に対応するアバター、及び、講師に対応するアバターの手元に存在し、生徒に対応したミニチュアのようなアバターを生成して、そのミニチュアのようなアバターを用いて、講師が生徒の状態を確認するような場合には、そのミニチュアのようなアバターを、ゴーストとして採用してもよい。
【0260】
そのように構成した場合には、講師が、生徒の状態を、客観的な自らの視点で観察するとともに、必要に応じて生徒の主観的な視点で観察することができるようになる。
【符号の説明】
【0261】
１…標識、２…カメラ、３…サーバ、４…ＨＭＤ、３１…表示画像生成部、３１ａ…仮想空間生成部、３１ｂ…アバター生成部、３１ｃ…移動体生成部、３２…ユーザ情報認識部、３２ａ…ユーザ姿勢認識部、３２ｂ…ユーザ座標認識部、３３…トリガーイベント認識部、３４…アバター座標決定部、３５…仮想空間画像決定部、３６…仮想空間音声決定部、４１…モニタ（仮想空間画像表示器）、４２…スピーカ（仮想空間音声発生器）、Ａ…アバター、Ａ１…第１アバター、Ａ２…第２アバター、Ｆ１…第１フロア、Ｆ２…第２フロア、Ｇ１…第１ゴースト、Ｇ１ａ…第１情報ボード、Ｇ２…第２ゴースト、Ｇ２ａ…第２情報ボード、ＲＳ…現実空間、ＲＳ１…ホワイトボード、Ｓ…ＶＲシステム、Ｕ…ユーザ、Ｕ１…第１ユーザ、Ｕ２…第２ユーザ、ＶＳ…仮想空間、ＶＳ１…エレベータ（移動体）、ＶＳ２…スイッチ、ＶＳ３…虹。
【要約】
仮想空間で異なる環境を体感していた複数のユーザが、同様の環境を体感することができるようになる仮想空間体感システムを提供する。ＶＲシステムＳのアバター座標決定部３４は、トリガーイベントの発生が認識された際に、第１アバターＡ１及び第２アバターＡ２の一方の座標を、第１アバターＡ１及び第２アバターＡ１の他方の座標に一致する座標又は隣接する座標に移動させる。
【図1】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】
【図8】
【図9】
【図10】
【図11】
【図12】
【図13】
【図14】
【図15】