特許 7030669 情報処理方法、装置、および当該情報処理方法をコンピュータに実行させるためのプログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2022-02-25

(45)【発行日】2022-03-07

(54)【発明の名称】情報処理方法、装置、および当該情報処理方法をコンピュータに実行させるためのプログラム

(51)【国際特許分類】

   G06T 19/00 20110101AFI20220228BHJP

   G06F 3/0487 20130101ALI20220228BHJP

   G06F 3/01 20060101ALI20220228BHJP

   A63F 13/25 20140101ALI20220228BHJP

   A63F 13/55 20140101ALI20220228BHJP

   A63F 13/5255 20140101ALI20220228BHJP

【ＦＩ】

G06T19/00 300B

G06F3/0487

G06F3/01 510

A63F13/25

A63F13/55

A63F13/5255

【請求項の数】 12

(21)【出願番号】P 2018191318

(22)【出願日】2018-10-09

(62)【分割の表示】P 2017141868の分割

【原出願日】2017-07-21

(65)【公開番号】P2019049987

(43)【公開日】2019-03-28

【審査請求日】2020-07-01

(73)【特許権者】

【識別番号】509070463

【氏名又は名称】株式会社コロプラ

(72)【発明者】

【氏名】猪俣 篤

(72)【発明者】

【氏名】高野 友輝

【審査官】村松 貴士

(56)【参考文献】

【文献】特許第６４１９２６８（ＪＰ，Ｂ１）

【文献】特開２０１７－０５８９７１（ＪＰ，Ａ）

【文献】特開２００１－３０６４７７（ＪＰ，Ａ）

【文献】特開２００３－１７８３２８（ＪＰ，Ａ）

【文献】特開２０１０－２７９４６０（ＪＰ，Ａ）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｇ０６Ｔ １３／００ － １３／８０

Ｇ０６Ｔ １９／００ － １９／２０

Ａ６３Ｆ １３／００ － １３／９８

Ｇ０６Ｆ ３／０１

Ｇ０６Ｆ ３／０４８ － ３／０４８９

(57)【特許請求の範囲】

【請求項1】

表示部を備えるヘッドマウントデバイスを介してユーザに仮想体験を提供するためにコンピュータによって実行される情報処理方法であって、
前記コンピュータにより自動制御される第１アバターと、該第１アバターに関連付けられ前記コンピュータにより自動制御される第１キャラクタと、を含む仮想空間を規定する仮想空間データを特定するステップと、
前記第１アバターを自動制御するための第１制御データ及び前記第１キャラクタを自動制御するための第２制御データのそれぞれに基づいて、前記第１アバター及び前記第１キャラクタを制御するステップと、
前記仮想空間において、前記第１アバター及び前記第１キャラクタと関連付けられていない仮想視点を特定するステップと、
前記仮想空間データと、前記仮想空間における前記仮想視点の位置と、前記ヘッドマウントデバイスの姿勢に基づいて視野画像を生成し、前記視野画像を前記表示部に表示させるステップと、
を含み、
前記第１制御データは、前記仮想空間内の第１位置における前記第１アバターの動きを制御するための動き制御データを含み、
前記動き制御データは、前記第１アバターの動きを規定した第１の動きが関連付けられた第１条件を含み、
前記第１条件は、前記第１キャラクタ及び前記第１キャラクタ以外のオブジェクトである相手キャラクタの一方から他方に対する動作を含む事象に基づいて、前記第１キャラクタまたは前記相手キャラクタの状態が第２条件を満たしたことを含み、
前記第１の動きは、前記相手キャラクタに関連付けられた相手アバターを注目対象とした動きを含む、
情報処理方法。

【請求項2】

前記第１制御データは、前記第１アバターの位置を前記第１位置から第２位置に移動させるように制御するための位置制御データ、及び、前記第１アバターの外観を制御するための外観制御データの少なくとも一つをさらに含む、
請求項１に記載の情報処理方法。

【請求項3】

前記仮想空間は、前記ユーザに関連付けられた第２アバターを更に含み、
前記第１制御データは、前記動き制御データを含み、
前記情報処理方法は、
前記ユーザの動きに基づく動きデータを取得するステップと、
前記動きデータに基づいて前記第２アバターを動かすステップと、を更に含み、
前記動きデータの少なくとも一部を前記動き制御データとして適用し、
前記動き制御データとして適用された前記動きデータの少なくとも一部に基づいて、前記第１アバターの動きを制御する、
請求項２に記載の情報処理方法。

【請求項4】

前記動きデータが取得された場合に、前記動き制御データは、前記コンピュータによる自動制御のために予め設定された第１制御状態から、前記動きデータの少なくとも一部が適用された第２制御状態に更新され、前記第１アバターの動きは、前記第２制御状態の前記動き制御データに基づいて制御される、
請求項３に記載の情報処理方法。

【請求項5】

前記動き制御データとして適用される前記動きデータの少なくとも一部を取得した後の第１時間以内において、前記動きデータの少なくとも一部に基づいて前記第１アバターの動きを制御する、
請求項３または４に記載の情報処理方法。

【請求項6】

前記仮想空間は、前記ユーザによる操作入力に基づいて操作される第２キャラクタを含み、
前記動きデータは、前記動きデータの取得時における前記第２キャラクタの状態を表す状態情報と関連付けて取得され、
前記第１キャラクタの状態が第１状態である場合に、前記第１状態に関連付けられている前記動きデータの少なくとも一部が、前記動き制御データとして適用される、
請求項３～５のいずれか一項に記載の情報処理方法。

【請求項7】

前記仮想空間は、複数のユーザの各々に関連づけられた前記第２アバターを含み、
前記複数のユーザの各々の前記動きデータが取得され、
前記複数のユーザのいずれかの前記動きデータの少なくとも一部が、前記動き制御データとして適用される、
請求項３～６のいずれか一項に記載の情報処理方法。

【請求項8】

前記仮想空間において発生した事象が前記第１条件を満たした場合に、前記第１条件に関連付けられた前記第１の動きを前記第１アバターにさせる、
請求項２～７のいずれか一項に記載の情報処理方法。

【請求項9】

前記第１条件は、前記第１キャラクタと前記仮想空間に配置された注目対象との位置関係が第３条件を満たしたことを含み、
前記第１の動きは、前記第１アバターの視線を前記注目対象に向けさせることを含む、
請求項８に記載の情報処理方法。

【請求項10】

前記注目対象は、前記仮想空間に配置されているオブジェクトであって、前記第１アバターの視線方向に基づいて定義される前記第１アバターの視野に含まれているオブジェクトの中から選択される、
請求項９に記載の情報処理方法。

【請求項11】

請求項１～１０のいずれか一項に記載の情報処理方法をコンピュータに実行させるプログラム。

【請求項12】

少なくともメモリと、前記メモリに結合されたプロセッサとを備え、前記プロセッサの制御により請求項１～１０のいずれか一項に記載の情報処理方法を実行する、装置。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、情報処理方法、装置、および当該情報処理方法をコンピュータに実行させるためのプログラムに関する。

【背景技術】

【0002】

仮想空間におけるゲーム体験（ＶＲゲーム）をユーザに提供するハードウェアとして、プレイステーション（登録商標）ＶＲが知られている。プレイステーションＶＲでは、ユーザは、コントローラを用いて仮想空間におけるプレイヤキャラクタ等を操作することにより、ＶＲゲームをプレイすることができる。コントローラを用いてＶＲゲームをプレイするための技術については、特許文献１，２にも開示されている。

【先行技術文献】

【特許文献】

【0003】

【文献】特開２０１５－２３２７８３号公報

【文献】特開２０１６－１５８７９４号公報

【発明の概要】

【発明が解決しようとする課題】

【0004】

また、仮想空間におけるキャラクタを操作するゲームにおいて、ユーザの分身としての位置づけを有するオブジェクトであるアバターをキャラクタと共に仮想空間に混在させることによりエンタテイメント性を向上させることが行われている。

【0005】

そこで、本開示は、キャラクタとアバターとを混在させた仮想空間における仮想体験のエンタテイメント性を向上させ得る情報処理方法、装置、および当該情報処理方法をコンピュータに実行させるためのプログラムを提供することを目的とする。

【課題を解決するための手段】

【0006】

本開示が示す一態様によれば、表示部を備えるヘッドマウントデバイスを介してユーザに仮想体験を提供するためにコンピュータによって実行される情報処理方法が提供される。この情報処理方法は、コンピュータにより自動制御される第１アバターと、該第１アバターに関連付けられコンピュータにより自動制御される第１キャラクタと、を含む仮想空間を規定する仮想空間データを特定するステップと、第１アバターを自動制御するための第１制御データ及び第１キャラクタを自動制御するための第２制御データのそれぞれに基づいて、第１アバター及び第１キャラクタを制御するステップと、仮想空間において、第１アバター及び第１キャラクタと関連付けられていない仮想視点を特定するステップと、仮想空間データと、仮想空間における仮想視点の位置と、ヘッドマウントデバイスの姿勢に基づいて視野画像を生成し、視野画像を表示部に表示させるステップと、を含む。

【発明の効果】

【0007】

本開示によれば、キャラクタとアバターとを混在させた仮想空間における仮想体験のエンタテイメント性を向上させ得る情報処理方法、装置、および当該情報処理方法をコンピュータに実行させるためのプログラムを提供することが可能となる。

【図面の簡単な説明】

【0008】

【図1】ある実施の形態に従うＨＭＤシステム１００の構成の概略を表す図である。

【図2】一局面に従うコンピュータ２００のハードウェア構成の一例を表すブロック図である。

【図3】ある実施の形態に従うＨＭＤ装置１１０に設定されるｕｖｗ視野座標系を概念的に表す図である。

【図4】ある実施の形態に従う仮想空間２を表現する一態様を概念的に表す図である。

【図5】ある実施の形態に従うＨＭＤ装置１１０を装着するユーザ１９０の頭部を上から表した図である。

【図6】仮想空間２において視界領域２３をＸ方向から見たＹＺ断面を表す図である。

【図7】仮想空間２において視界領域２３をＹ方向から見たＸＺ断面を表す図である。

【図8】ある実施の形態に従うコントローラ１６０の概略構成を表す図である。

【図9】ある実施の形態に従うコンピュータ２００をモジュール構成として表すブロック図である。

【図10】ある実施の形態に従うＨＭＤシステム１００Ａが実行する処理を表すフローチャートである。

【図11】仮想空間の一例を模式的に表す図である。

【図12】ＨＭＤ装置を介してユーザに提供される視界画像の一例を表す図である。

【図13】コンピュータにより自動制御される自動アバターの動きを制御するために実行される処理を表すフローチャートである。

【図14】自動アバターの動きを制御するために実行される処理の第１の変形例を示すフローチャートである。

【図15】自動アバターの動きを制御するために実行される処理の第２の変形例を示すフローチャートである。

【図16】仮想空間において発生した事象に基づく自動アバターの制御の例を示す図である。

【図17】仮想空間において発生した事象に基づく自動アバターの制御の他の例を示す図である。

【図18】仮想空間における自動アバターの位置を移動させる制御の例を示す図である。

【発明を実施するための形態】

【0009】

以下、図面を参照しつつ、本開示の実施の形態について説明する。以下の説明では、同一の部品には同一の符号を付してある。それらの名称および機能も同じである。したがって、それらについての詳細な説明は繰り返さない。

【0010】

以下、図面を参照しつつ、本開示の実施の形態について説明する。以下の説明では、同一の部品には同一の符号を付してある。それらの名称および機能も同じである。したがって、それらについての詳細な説明は繰り返さない。
［ＨＭＤシステムの構成］

【0011】

図１を参照して、ＨＭＤ（Head Mount Device）システム１００の構成について説明する。図１は、ある実施の形態に従うＨＭＤシステム１００の構成の概略を表す図である。ある局面において、ＨＭＤシステム１００は、家庭用のシステムとしてあるいは業務用のシステムとして提供される。

【0012】

ＨＭＤシステム１００は、ＨＭＤ装置１１０（ヘッドマウントデバイス）と、ＨＭＤセンサ１２０と、コントローラ１６０と、コンピュータ２００とを備える。ＨＭＤ装置１１０は、モニタ１１２（表示部）と、マイク１１８と、注視センサ１４０とを含む。

【0013】

ある局面において、コンピュータ２００は、インターネットその他のネットワーク１９に接続可能であり、ネットワーク１９に接続されているサーバ１５０その他のコンピュータと通信可能である。別の局面において、ＨＭＤ装置１１０は、ＨＭＤセンサ１２０の代わりに、センサ１１４を含み得る。

【0014】

ＨＭＤ装置１１０は、ユーザの頭部に装着され、動作中に仮想空間をユーザに提供し得る。より具体的には、ＨＭＤ装置１１０は、右目用の画像および左目用の画像をモニタ１１２にそれぞれ表示する。ユーザの各目がそれぞれの画像を視認すると、ユーザは、両目の視差に基づき当該画像を３次元の画像として認識し得る。

【0015】

モニタ１１２は、例えば、非透過型の表示装置として実現される。ある局面において、モニタ１１２は、ユーザの両目の前方に位置するようにＨＭＤ装置１１０の本体に配置されている。したがって、ユーザは、モニタ１１２に表示される３次元画像を視認すると、仮想空間に没入することができる。ある実施の形態において、仮想空間は、例えば、背景、ユーザが操作可能なオブジェクト、およびユーザが選択可能なメニューの画像等を含む。ある実施の形態において、モニタ１１２は、所謂スマートフォンその他の情報表示端末が備える液晶モニタまたは有機ＥＬ（Electro Luminescence）モニタとして実現され得る。モニタ１１２は、ＨＭＤ装置１１０の本体と一体に構成されてもよいし、別体として構成されてもよい。

【0016】

ある局面において、モニタ１１２は、右目用の画像を表示するためのサブモニタと、左目用の画像を表示するためのサブモニタとを含み得る。別の局面において、モニタ１１２は、右目用の画像と左目用の画像とを一体として表示する構成であってもよい。この場合、モニタ１１２は、高速シャッタを含む。高速シャッタは、画像がいずれか一方の目にのみ認識されるように、右目用の画像と左目用の画像とを交互に表示可能に作動する。

【0017】

マイク１１８は、ユーザが発した音声を取得する。マイク１１８によって取得された音声は、音声解析処理によってユーザの感情を検知するために使用され得る。検知結果は、後述するアバターの表情等に反映されてもよい。当該音声は、仮想空間２に対して、音声による指示を与えるためにも使用され得る。また、当該音声は、ネットワーク１９およびサーバ１５０等を介して、他のユーザが使用するＨＭＤシステムに送られ、当該ＨＭＤシステムに接続されたスピーカ等から出力されてもよい。これにより、仮想空間を共有するユーザ間での会話（チャット）が実現される。

【0018】

ＨＭＤセンサ１２０は、複数の光源（図示しない）を含む。各光源は例えば、赤外線を発するＬＥＤ（Light Emitting Diode）により実現される。ＨＭＤセンサ１２０は、ＨＭＤ装置１１０およびコントローラ１６０の動きを検出するためのポジショントラッキング機能を有する。ＨＭＤセンサ１２０は、この機能を用いて、現実空間内におけるＨＭＤ装置１１０の位置および傾き、ならびにコントローラ１６０の位置および傾きを検出する。

【0019】

なお、別の局面において、ＨＭＤセンサ１２０は、カメラにより実現されてもよい。この場合、ＨＭＤセンサ１２０は、カメラから出力されるＨＭＤ装置１１０およびコントローラ１６０の画像情報を用いて、画像解析処理を実行することにより、ＨＭＤ装置１１０の位置および傾き、ならびにコントローラ１６０の位置および傾きを検出することができる。

【0020】

別の局面において、ＨＭＤ装置１１０は、位置検出器として、ＨＭＤセンサ１２０の代わりに、センサ１１４を備えてもよい。ＨＭＤ装置１１０は、センサ１１４を用いて、ＨＭＤ装置１１０自身の位置および傾きを検出し得る。例えば、センサ１１４が角速度センサ、地磁気センサ、加速度センサ、あるいはジャイロセンサ等である場合、ＨＭＤ装置１１０は、ＨＭＤセンサ１２０の代わりに、これらの各センサのいずれかを用いて、自身の位置および傾きを検出し得る。一例として、センサ１１４が角速度センサである場合、角速度センサは、現実空間におけるＨＭＤ装置１１０の３軸周りの角速度を経時的に検出する。ＨＭＤ装置１１０は、各角速度に基づいて、ＨＭＤ装置１１０の３軸周りの角度の時間的変化を算出し、さらに、角度の時間的変化に基づいて、ＨＭＤ装置１１０の傾きを算出する。また、ＨＭＤ装置１１０は、透過型表示装置を備えていてもよい。この場合、当該透過型表示装置は、その透過率を調整することにより、一時的に非透過型の表示装置として構成可能であってもよい。また、視界画像は仮想空間を構成する画像の一部に、現実空間を提示する構成を含んでいてもよい。例えば、ＨＭＤ装置１１０に搭載されたカメラで撮影した画像を視界画像の一部に重畳して表示させてもよいし、当該透過型表示装置の一部の透過率を高く設定することにより、視界画像の一部から現実空間を視認可能にしてもよい。

【0021】

注視センサ１４０は、ユーザ１９０の右目および左目の視線が向けられる方向（視線方向）を検出する。当該方向の検出は、例えば、公知のアイトラッキング機能によって実現される。注視センサ１４０は、当該アイトラッキング機能を有するセンサにより実現される。ある局面において、注視センサ１４０は、右目用のセンサおよび左目用のセンサを含むことが好ましい。注視センサ１４０は、例えば、ユーザ１９０の右目および左目に赤外光を照射するとともに、照射光に対する角膜および虹彩からの反射光を受けることにより各眼球の回転角を検出するセンサであってもよい。注視センサ１４０は、検出した各回転角に基づいて、ユーザ１９０の視線方向を検知することができる。

【0022】

サーバ１５０は、コンピュータ２００にプログラムを送信し得る。別の局面において、サーバ１５０は、他のユーザによって使用されるＨＭＤ装置に仮想現実を提供するための他のコンピュータ２００と通信し得る。例えば、アミューズメント施設において、複数のユーザが参加型のゲームを行う場合、各コンピュータ２００は、各ユーザの動作に基づく信号を他のコンピュータ２００と通信して、同じ仮想空間において複数のユーザが共通のゲームを楽しむことを可能にする。なお、サーバ１５０は、一または複数のコンピュータ装置により構成され、後述するコンピュータ２００のハードウェア構成と同様に、一般的なコンピュータが備えるハードウェア構成（プロセッサ、メモリ、ストレージ等）を備える。

【0023】

コントローラ１６０は、ユーザ１９０からコンピュータ２００への命令の入力を受け付ける。ある局面において、コントローラ１６０は、ユーザ１９０によって把持可能に構成される。本実施形態では、コントローラ１６０は、ユーザ１９０によって両手で把持されるタイプの入力装置である。別の局面において、コントローラ１６０は、コンピュータ２００から送られる信号に基づいて、振動、音、光のうちの少なくともいずれかを出力するように構成されてもよい。別の局面において、コントローラ１６０は、仮想現実を提供する空間に配置されるオブジェクトの位置および動き等を制御するためにユーザ１９０によって与えられる操作を受け付ける。上述したように、現実空間におけるコントローラ１６０の位置および傾きは、ＨＭＤセンサ１２０（あるいはカメラ等）によって検出され得る。別の局面において、コントローラ１６０は、位置検出器として、上述したセンサ１１４と同様のセンサ（図示しない）を備えてもよい。この場合、当該センサにより、コントローラ１６０の位置および傾きが検出され得る。また、ＨＭＤセンサ１２０とコントローラ１６０が備えるセンサとが併用されてもよい。この場合、例えば、コントローラ１６０の位置はＨＭＤセンサ１２０によって検出され、コントローラ１６０の傾きはコントローラ１６０が備えるセンサによって検出される。
［ハードウェア構成］

【0024】

図２を参照して、本実施の形態に係るコンピュータ２００について説明する。図２は、一局面に従うコンピュータ２００のハードウェア構成の一例を表すブロック図である。コンピュータ２００は、主たる構成要素として、プロセッサ１０と、メモリ１１と、ストレージ１２と、入出力インターフェース１３と、通信インターフェース１４とを備える。各構成要素は、それぞれ、バス１５に接続されている。

【0025】

プロセッサ１０は、コンピュータ２００に与えられる信号に基づいて、あるいは、予め定められた条件が成立したことに基づいて、メモリ１１またはストレージ１２に格納されているプログラムに含まれる一連の命令を実行する。ある局面において、プロセッサ１０は、ＣＰＵ（Central Processing Unit）、ＭＰＵ（Micro Processor Unit）、ＦＰＧＡ（Field-Programmable Gate Array）その他のデバイスとして実現される。

【0026】

メモリ１１は、プログラムおよびデータを一時的に保存する。プログラムは、例えば、ストレージ１２からロードされる。メモリ１１に保存されるデータは、コンピュータ２００に入力されたデータと、プロセッサ１０によって生成されたデータとを含む。ある局面において、メモリ１１は、ＲＡＭ（Random Access Memory）その他の揮発性メモリとして実現される。

【0027】

ストレージ１２は、プログラムおよびデータを永続的に保持する。ストレージ１２は、例えば、ＲＯＭ（Read-Only Memory）、ハードディスク装置、フラッシュメモリ、その他の不揮発性記憶装置として実現される。ストレージ１２に格納されるプログラムは、ＨＭＤシステム１００において仮想空間を提供するためのプログラム、シミュレーションプログラム、ゲームプログラム、ユーザ認証プログラム、および他のコンピュータ２００との通信を実現するためのプログラム等を含む。ストレージ１２に格納されるデータは、仮想空間を規定するためのデータおよびオブジェクト等を含む。

【0028】

なお、別の局面において、ストレージ１２は、メモリカードのように着脱可能な記憶装置として実現されてもよい。さらに別の局面において、コンピュータ２００に内蔵されたストレージ１２の代わりに、外部の記憶装置に保存されているプログラムおよびデータを使用する構成が使用されてもよい。このような構成によれば、例えば、アミューズメント施設のように複数のＨＭＤシステム１００が使用される場面において、プログラムおよびデータ等の更新を一括して行うことが可能になる。

【0029】

ある実施の形態において、入出力インターフェース１３は、ＨＭＤ装置１１０およびＨＭＤセンサ１２０との間で信号を通信する。ある局面において、入出力インターフェース１３は、ＵＳＢ（Universal Serial Bus）インターフェース、ＤＶＩ（Digital Visual Interface）、ＨＤＭＩ（登録商標）（High-Definition Multimedia Interface）その他の端子を用いて実現される。なお、入出力インターフェース１３は上述のものに限られない。例えば、入出力インターフェース１３は、Ｂｌｕｅｔｏｏｔｈ（登録商標）等の無線通信インターフェースを含んでもよい。

【0030】

ある実施の形態において、入出力インターフェース１３は、さらに、コントローラ１６０と通信し得る。例えば、入出力インターフェース１３は、コントローラ１６０から出力された信号の入力を受ける。別の局面において、入出力インターフェース１３は、プロセッサ１０から出力された命令を、コントローラ１６０に送る。当該命令は、振動、音声出力、発光等をコントローラ１６０に指示する。コントローラ１６０は、当該命令を受信すると、その命令に応じて、振動、音声出力または発光のいずれかを実行する。

【0031】

通信インターフェース１４は、ネットワーク１９に接続されて、ネットワーク１９に接続されている他のコンピュータ（例えば、サーバ１５０）と通信する。ある局面において、通信インターフェース１４は、例えば、ＬＡＮ（Local Area Network）その他の有線通信インターフェース、あるいは、ＷｉＦｉ（Wireless Fidelity）、Ｂｌｕｅｔｏｏｔｈ（登録商標）、ＮＦＣ（Near Field Communication）その他の無線通信インターフェースとして実現される。なお、通信インターフェース１４は上述のものに限られない。

【0032】

ある局面において、プロセッサ１０は、ストレージ１２にアクセスし、ストレージ１２に格納されている１つ以上のプログラムをメモリ１１にロードし、当該プログラムに含まれる一連の命令を実行する。当該１つ以上のプログラムは、コンピュータ２００のオペレーティングシステム、仮想空間を提供するためのアプリケーションプログラム、コントローラ１６０を用いて仮想空間で実行可能なゲームソフトウェア等を含み得る。プロセッサ１０は、入出力インターフェース１３を介して、仮想空間を提供するための信号をＨＭＤ装置１１０に送る。ＨＭＤ装置１１０は、その信号に基づいてモニタ１１２に映像を表示する。

【0033】

サーバ１５０は、ネットワーク１９を介して複数のＨＭＤシステム１００の各々の制御装置と接続される。図２に示される例では、サーバ１５０は、ＨＭＤ装置１１０Ａを有するＨＭＤシステム１００Ａと、ＨＭＤ装置１１０Ｂを有するＨＭＤシステム１００Ｂとを含む複数のＨＭＤシステム１００を互いに通信可能に接続する。これにより、共通の仮想空間を用いた仮想体験が各ＨＭＤシステムを使用するユーザに提供される。なお、ＨＭＤシステム１００Ａ、ＨＭＤシステム１００Ｂ、およびその他のＨＭＤシステム１００は、いずれも同様の構成を備える。ただし、各ＨＭＤシステム１００は、互いに異なる機種であってもよいし、互いに異なる性能（処理性能および検知性能等）を有するものであってもよい。

【0034】

なお、図２に示される例では、コンピュータ２００がＨＭＤ装置１１０の外部に設けられる構成が示されているが、別の局面において、コンピュータ２００は、ＨＭＤ装置１１０に内蔵されてもよい。一例として、モニタ１１２を含む携帯型の情報通信端末（例えば、スマートフォン）がコンピュータ２００として機能してもよい。

【0035】

また、コンピュータ２００は、複数のＨＭＤ装置１１０に共通して用いられる構成であってもよい。このような構成によれば、例えば、複数のユーザに同一の仮想空間を提供することもできるので、各ユーザは同一の仮想空間で他のユーザと同一のアプリケーションを楽しむことができる。なお、このような場合、本実施形態における複数のＨＭＤシステム１００は、入出力インターフェース１３により、コンピュータ２００に直接接続されてもよい。また、本実施形態におけるサーバ１５０の各機能（例えば後述する同期処理等）は、コンピュータ２００に実装されてもよい。

【0036】

ある実施の形態において、ＨＭＤシステム１００では、グローバル座標系が予め設定されている。グローバル座標系は、現実空間における鉛直方向、鉛直方向に直交する水平方向、ならびに、鉛直方向および水平方向の双方に直交する前後方向にそれぞれ平行な、３つの基準方向（軸）を有する。本実施の形態では、グローバル座標系は視点座標系の一つである。そこで、グローバル座標系における水平方向、鉛直方向（上下方向）、および前後方向は、それぞれ、ｘ軸、ｙ軸、ｚ軸と規定される。より具体的には、グローバル座標系において、ｘ軸は現実空間の水平方向に平行である。ｙ軸は、現実空間の鉛直方向に平行である。ｚ軸は現実空間の前後方向に平行である。

【0037】

ある局面において、ＨＭＤセンサ１２０は、赤外線センサを含む。赤外線センサが、ＨＭＤ装置１１０の各光源から発せられた赤外線をそれぞれ検出すると、ＨＭＤ装置１１０の存在を検出する。ＨＭＤセンサ１２０は、さらに、各点の値（グローバル座標系における各座標値）に基づいて、ＨＭＤ装置１１０を装着したユーザ１９０の動きに応じた、現実空間内におけるＨＭＤ装置１１０の位置および傾きを検出する。より詳しくは、ＨＭＤセンサ１２０は、経時的に検出された各値を用いて、ＨＭＤ装置１１０の位置および傾きの時間的変化を検出できる。

【0038】

グローバル座標系は現実空間の座標系と平行である。したがって、ＨＭＤセンサ１２０によって検出されたＨＭＤ装置１１０の各傾きは、グローバル座標系におけるＨＭＤ装置１１０の３軸周りの各傾きに相当する。ＨＭＤセンサ１２０は、グローバル座標系におけるＨＭＤ装置１１０の傾きに基づき、ｕｖｗ視野座標系をＨＭＤ装置１１０に設定する。ＨＭＤ装置１１０に設定されるｕｖｗ視野座標系は、ＨＭＤ装置１１０を装着したユーザ１９０が仮想空間において物体を見る際の視点座標系に対応する。
［ｕｖｗ視野座標系］

【0039】

図３を参照して、ｕｖｗ視野座標系について説明する。図３は、ある実施の形態に従うＨＭＤ装置１１０に設定されるｕｖｗ視野座標系を概念的に表す図である。ＨＭＤセンサ１２０は、ＨＭＤ装置１１０の起動時に、グローバル座標系におけるＨＭＤ装置１１０の位置および傾きを検出する。プロセッサ１０は、検出された値に基づいて、ｕｖｗ視野座標系をＨＭＤ装置１１０に設定する。

【0040】

図３に示されるように、ＨＭＤ装置１１０は、ＨＭＤ装置１１０を装着したユーザの頭部を中心（原点）とした３次元のｕｖｗ視野座標系を設定する。より具体的には、ＨＭＤ装置１１０は、グローバル座標系を規定する水平方向、鉛直方向、および前後方向（ｘ軸、ｙ軸、ｚ軸）を、グローバル座標系内においてＨＭＤ装置１１０の各軸周りの傾きだけ各軸周りにそれぞれ傾けることによって新たに得られる３つの方向を、ＨＭＤ装置１１０におけるｕｖｗ視野座標系のピッチ方向（ｕ軸）、ヨー方向（ｖ軸）、およびロール方向（ｗ軸）として設定する。

【0041】

ある局面において、ＨＭＤ装置１１０を装着したユーザ１９０が直立し、かつ、正面を視認している場合、プロセッサ１０は、グローバル座標系に平行なｕｖｗ視野座標系をＨＭＤ装置１１０に設定する。この場合、グローバル座標系における水平方向（ｘ軸）、鉛直方向（ｙ軸）、および前後方向（ｚ軸）は、ＨＭＤ装置１１０におけるｕｖｗ視野座標系のピッチ方向（ｕ軸）、ヨー方向（ｖ軸）、およびロール方向（ｗ軸）に一致する。

【0042】

ｕｖｗ視野座標系がＨＭＤ装置１１０に設定された後、ＨＭＤセンサ１２０は、ＨＭＤ装置１１０の動きに基づいて、設定されたｕｖｗ視野座標系におけるＨＭＤ装置１１０の傾き（傾きの変化量）を検出できる。この場合、ＨＭＤセンサ１２０は、ＨＭＤ装置１１０の傾きとして、ｕｖｗ視野座標系におけるＨＭＤ装置１１０のピッチ角（θｕ）、ヨー角（θｖ）、およびロール角（θｗ）をそれぞれ検出する。ピッチ角（θｕ）は、ｕｖｗ視野座標系におけるピッチ方向周りのＨＭＤ装置１１０の傾き角度を表す。ヨー角（θｖ）は、ｕｖｗ視野座標系におけるヨー方向周りのＨＭＤ装置１１０の傾き角度を表す。ロール角（θｗ）は、ｕｖｗ視野座標系におけるロール方向周りのＨＭＤ装置１１０の傾き角度を表す。

【0043】

ＨＭＤセンサ１２０は、検出されたＨＭＤ装置１１０の傾き角度に基づいて、ＨＭＤ装置１１０が動いた後のＨＭＤ装置１１０におけるｕｖｗ視野座標系を、ＨＭＤ装置１１０に設定する。ＨＭＤ装置１１０と、ＨＭＤ装置１１０のｕｖｗ視野座標系との関係は、ＨＭＤ装置１１０の位置および傾きに関わらず、常に一定である。ＨＭＤ装置１１０の位置および傾きが変わると、当該位置および傾きの変化に連動して、グローバル座標系におけるＨＭＤ装置１１０のｕｖｗ視野座標系の位置および傾きが変化する。

【0044】

ある局面において、ＨＭＤセンサ１２０は、赤外線センサからの出力に基づいて取得される赤外線の光強度および複数の点間の相対的な位置関係（例えば、各点間の距離など）に基づいて、ＨＭＤ装置１１０の現実空間内における位置を、ＨＭＤセンサ１２０に対する相対位置として特定してもよい。また、プロセッサ１０は、特定された相対位置に基づいて、現実空間内（グローバル座標系）におけるＨＭＤ装置１１０のｕｖｗ視野座標系の原点を決定してもよい。
［仮想空間］

【0045】

図４を参照して、仮想空間についてさらに説明する。図４は、ある実施の形態に従う仮想空間２を表現する一態様を概念的に表す図である。仮想空間２は、中心２１の３６０度方向の全体を覆う全天球状の構造を有する。図４では、説明を複雑にしないために、仮想空間２のうちの上半分の天球が例示されている。仮想空間２では各メッシュが規定される。各メッシュの位置は、仮想空間２に規定されるＸＹＺ座標系における座標値として予め規定されている。コンピュータ２００は、仮想空間２に展開可能なコンテンツ（静止画、動画等）を構成する各部分画像を、仮想空間２において対応する各メッシュにそれぞれ対応付けて、ユーザによって視認可能な仮想空間画像２２が展開される仮想空間２をユーザに提供する。

【0046】

ある局面において、仮想空間２では、中心２１を原点とするＸＹＺ座標系が規定される。ＸＹＺ座標系は、例えば、グローバル座標系に平行である。ＸＹＺ座標系は視点座標系の一種であるため、ＸＹＺ座標系における水平方向、鉛直方向（上下方向）、および前後方向は、それぞれＸ軸、Ｙ軸、Ｚ軸として規定される。したがって、ＸＹＺ座標系のＸ軸（水平方向）がグローバル座標系のｘ軸と平行であり、ＸＹＺ座標系のＹ軸（鉛直方向）がグローバル座標系のｙ軸と平行であり、ＸＹＺ座標系のＺ軸（前後方向）がグローバル座標系のｚ軸と平行である。

【0047】

ＨＭＤ装置１１０の起動時、すなわちＨＭＤ装置１１０の初期状態において、仮想カメラ１は、例えば仮想空間２の中心２１に配置される。仮想カメラ１は、現実空間におけるＨＭＤ装置１１０の動きに連動して、仮想空間２を同様に移動する。これにより、現実空間におけるＨＭＤ装置１１０の位置および向きの変化が、仮想空間２において同様に再現される。

【0048】

仮想カメラ１には、ＨＭＤ装置１１０の場合と同様に、ｕｖｗ視野座標系が規定される。仮想空間２における仮想カメラ１のｕｖｗ視野座標系は、現実空間（グローバル座標系）におけるＨＭＤ装置１１０のｕｖｗ視野座標系に連動するように規定されている。したがって、ＨＭＤ装置１１０の傾きが変化すると、それに応じて、仮想カメラ１の傾きも変化する。また、仮想カメラ１は、ＨＭＤ装置１１０を装着したユーザの現実空間における移動に連動して、仮想空間２において移動することもできる。

【0049】

仮想カメラ１の向きは、仮想カメラ１の位置および傾きに応じて決まるので、ユーザが仮想空間画像２２を視認する際に基準となる視線（基準視線５）は、仮想カメラ１の向きに応じて決まる。コンピュータ２００のプロセッサ１０は、基準視線５に基づいて、仮想空間２における視界領域２３を規定する。視界領域２３は、仮想空間２のうち、ＨＭＤ装置１１０を装着したユーザの視界に対応する。

【0050】

注視センサ１４０によって検出されるユーザ１９０の視線方向は、ユーザ１９０が物体を視認する際の視点座標系における方向である。ＨＭＤ装置１１０のｕｖｗ視野座標系は、ユーザ１９０がモニタ１１２を視認する際の視点座標系に等しい。また、仮想カメラ１のｕｖｗ視野座標系は、ＨＭＤ装置１１０のｕｖｗ視野座標系に連動している。したがって、ある局面に従うＨＭＤシステム１００は、注視センサ１４０によって検出されたユーザ１９０の視線方向を、仮想カメラ１のｕｖｗ視野座標系におけるユーザの視線方向とみなすことができる。
［ユーザの視線］

【0051】

図５を参照して、ユーザの視線方向の決定について説明する。図５は、ある実施の形態に従うＨＭＤ装置１１０を装着するユーザ１９０の頭部を上から表した図である。

【0052】

ある局面において、注視センサ１４０は、ユーザ１９０の右目および左目の各視線を検出する。ある局面において、ユーザ１９０が近くを見ている場合、注視センサ１４０は、視線Ｒ１およびＬ１を検出する。別の局面において、ユーザ１９０が遠くを見ている場合、注視センサ１４０は、視線Ｒ２およびＬ２を検出する。この場合、ロール方向ｗに対して視線Ｒ２およびＬ２がなす角度は、ロール方向ｗに対して視線Ｒ１およびＬ１がなす角度よりも小さい。注視センサ１４０は、検出結果をコンピュータ２００に送信する。

【0053】

コンピュータ２００が、視線の検出結果として、視線Ｒ１およびＬ１の検出値を注視センサ１４０から受信した場合には、その検出値に基づいて、視線Ｒ１およびＬ１の交点である注視点Ｎ１を特定する。一方、コンピュータ２００は、視線Ｒ２およびＬ２の検出値を注視センサ１４０から受信した場合には、視線Ｒ２およびＬ２の交点を注視点として特定する。コンピュータ２００は、特定した注視点Ｎ１の位置に基づき、ユーザ１９０の視線方向Ｎ０を特定する。コンピュータ２００は、例えば、ユーザ１９０の右目Ｒと左目Ｌとを結ぶ直線の中点と、注視点Ｎ１とを通る直線の延びる方向を、視線方向Ｎ０として検出する。視線方向Ｎ０は、ユーザ１９０が両目により実際に視線を向けている方向である。また、視線方向Ｎ０は、視界領域２３に対してユーザ１９０が実際に視線を向けている方向に相当する。

【0054】

また、別の局面において、ＨＭＤシステム１００は、テレビジョン放送受信チューナを備えてもよい。このような構成によれば、ＨＭＤシステム１００は、仮想空間２においてテレビ番組を表示することができる。

【0055】

さらに別の局面において、ＨＭＤシステム１００は、インターネットに接続するための通信回路、あるいは、電話回線に接続するための通話機能を備えていてもよい。
［視界領域］

【0056】

図６および図７を参照して、視界領域２３について説明する。図６は、仮想空間２において視界領域２３をＸ方向から見たＹＺ断面を表す図である。図７は、仮想空間２において視界領域２３をＹ方向から見たＸＺ断面を表す図である。

【0057】

図６に示されるように、ＹＺ断面における視界領域２３は、領域２４を含む。領域２４は、仮想カメラ１の基準視線５と仮想空間２のＹＺ断面とによって定義される。プロセッサ１０は、仮想空間２における基準視線５を中心として極角αを含む範囲を、領域２４として規定する。

【0058】

図７に示されるように、ＸＺ断面における視界領域２３は、領域２５を含む。領域２５は、基準視線５と仮想空間２のＸＺ断面とによって定義される。プロセッサ１０は、仮想空間２における基準視線５を中心とした方位角βを含む範囲を、領域２５として規定する。

【0059】

ある局面において、ＨＭＤシステム１００は、コンピュータ２００からの信号に基づいて、視界画像をモニタ１１２に表示させることにより、ユーザ１９０に仮想空間を提供する。視界画像は、仮想空間画像２２のうち視界領域２３に重畳する部分に相当する。ユーザ１９０が、頭に装着したＨＭＤ装置１１０を動かすと、その動きに連動して仮想カメラ１も動く。その結果、仮想空間２における視界領域２３の位置が変化する。これにより、モニタ１１２に表示される視界画像は、仮想空間画像２２のうち、仮想空間２においてユーザが向いた方向の視界領域２３に重畳する画像に更新される。ユーザは、仮想空間２における所望の方向を視認することができる。

【0060】

ユーザ１９０は、ＨＭＤ装置１１０を装着している間、現実世界を視認することなく、仮想空間２に展開される仮想空間画像２２のみを視認できる。そのため、ＨＭＤシステム１００は、仮想空間２への高い没入感覚をユーザに与えることができる。

【0061】

ある局面において、プロセッサ１０は、ＨＭＤ装置１１０を装着したユーザ１９０の現実空間における移動に連動して、仮想空間２において仮想カメラ１を移動し得る。この場合、プロセッサ１０は、仮想空間２における仮想カメラ１の位置および向きに基づいて、ＨＭＤ装置１１０のモニタ１１２に投影される画像領域（すなわち、仮想空間２における視界領域２３）を特定する。すなわち、仮想カメラ１によって、仮想空間２におけるユーザ１９０の視野が定義される。

【0062】

ある実施の形態に従うと、仮想カメラ１は、二つの仮想カメラ、すなわち、右目用の画像を提供するための仮想カメラと、左目用の画像を提供するための仮想カメラとを含むことが望ましい。また、ユーザ１９０が３次元の仮想空間２を認識できるように、適切な視差が、二つの仮想カメラに設定されていることが好ましい。本実施の形態においては、仮想カメラ１が二つの仮想カメラを含み、二つの仮想カメラのロール方向が合成されることによって生成されるロール方向（ｗ）がＨＭＤ装置１１０のロール方向（ｗ）に適合されるように構成されているものとして、本開示に係る技術思想を例示する。
［コントローラ］

【0063】

図８を参照して、コントローラ１６０の一例について説明する。図８は、ある実施の形態に従うコントローラ１６０の概略構成を表す図である。図８の状態（Ａ）は、コントローラ１６０の上面の外観構成を示しており、図８の状態（Ｂ）は、コントローラ１６０の奥側側面の外観構成を示している。ここで、コントローラ１６０の上面とは、ユーザ１９０がコントローラ１６０を両手で保持した場合に、ユーザ１９０の方を向く面である。

【0064】

図８の状態（Ａ）に示されるように、コントローラ１６０の上面には、入力部としての、方向キー１６１、アナログスティック１６２Ｌ，１６２Ｒ、４種の操作ボタン１６３、タッチパッド１６４、および機能ボタン１６５等が設けられている。また、コントローラ１６０は、ユーザ１９０がコントローラ１６０を把持するための把持部１６６を有する。把持部１６６は、ユーザ１９０の左手によって把持される左把持部１６６Ｌとユーザ１９０の右手によって把持される右把持部１６６Ｒとを有する。また、図８の状態（Ｂ）に示されるように、コントローラ１６０の奥側側面には、入力部としての上部ボタン１６７Ｌ，１６７Ｒと、コントローラ１６０から送信される指示情報等に基づいて発光する発光部１６８とが設けられている。

【0065】

タッチパッド１６４は、方向キー１６１と操作ボタン１６３との間に設けられている。機能ボタン１６５は、左右のアナログスティック１６２Ｌ，１６２Ｒの間に設けられている。機能ボタン１６５は、例えばコントローラ１６０を起動したり、コントローラ１６０とコンピュータ２００との間の通信接続をアクティブにしたりするために使用され得る。その他の入力部（方向キー１６１、アナログスティック１６２、操作ボタン１６３、および上部ボタン１６７）は、後述するアバターおよびプレイヤキャラクタの操作等に使用され得る。例えば、アナログスティック１６２は、ある局面において、初期位置（ニュートラルの位置）から３６０度任意の方向への操作を受け付ける。当該操作は、例えば、仮想空間２に配置されるオブジェクトを移動させるための操作を含む。

【0066】

方向キー１６１およびアナログスティック１６２Ｌは、ユーザ１９０の左手の親指による操作を受け付けることを想定して配置されている。操作ボタン１６３およびアナログスティック１６２Ｒは、ユーザ１９０の右手の親指による操作を受け付けることを想定して配置されている。上部ボタン１６７Ｌは、ユーザ１９０の左手の人差し指による操作を受け付けることを想定して配置されており、上部ボタン１６７Ｒは、ユーザ１９０の右手の人差し指による操作を受け付けることを想定して配置されている。ただし、コントローラ１６０の形状、各部の配置構成、および各部の機能は、上記例に限られない。例えば、操作ボタン１６３の個数は４つ以外（例えば２つ）であってもよいし、アナログスティック１６２Ｌ，１６２Ｒが省略されてもよい。

【0067】

ある局面において、コントローラ１６０は、発光部１６８その他の部材を駆動するための電池を含む。電池は、充電式、ボタン型、乾電池型等を含むが、これらに限定されない。別の局面において、コントローラ１６０は、例えば、コンピュータ２００のＵＳＢインターフェースに接続され得る。この場合、コントローラ１６０は、電池を必要としない。
［ＨＭＤ装置の制御装置］

【0068】

図９を参照して、ＨＭＤ装置１１０の制御装置について説明する。ある実施の形態において、制御装置は周知の構成を有するコンピュータ２００によって実現される。図９は、ある実施の形態に従うコンピュータ２００をモジュール構成として表すブロック図である。

【0069】

図９に示されるように、コンピュータ２００は、表示制御モジュール２２０と、仮想空間制御モジュール２３０と、メモリモジュール２４０と、通信制御モジュール２５０とを備える。表示制御モジュール２２０は、サブモジュールとして、仮想カメラ制御モジュール２２１と、視界領域決定モジュール２２２と、視界画像生成モジュール２２３と、基準視線特定モジュール２２４とを含む。仮想空間制御モジュール２３０は、サブモジュールとして、仮想空間定義モジュール２３１と、仮想オブジェクト制御モジュール２３２と、コントローラ情報取得モジュール２３３と、データ共有モジュール２３４と、ゲーム状態判定モジュール２３５とを含む。

【0070】

ある実施の形態において、表示制御モジュール２２０と仮想空間制御モジュール２３０とは、プロセッサ１０によって実現される。別の実施の形態において、複数のプロセッサ１０が表示制御モジュール２２０と仮想空間制御モジュール２３０として作動してもよい。メモリモジュール２４０は、メモリ１１またはストレージ１２によって実現される。通信制御モジュール２５０は、通信インターフェース１４によって実現される。

【0071】

ある局面において、表示制御モジュール２２０は、ＨＭＤ装置１１０のモニタ１１２における画像表示を制御する。仮想カメラ制御モジュール２２１は、仮想空間２に仮想カメラ１を配置し、仮想カメラ１の挙動、向き等を制御する。視界領域決定モジュール２２２は、ＨＭＤ装置１１０を装着したユーザの頭の向きに応じて、視界領域２３を規定する。視界画像生成モジュール２２３は、決定された視界領域２３に基づいて、モニタ１１２に表示される視界画像を生成する。基準視線特定モジュール２２４は、注視センサ１４０からの信号に基づいて、ユーザ１９０の視線を特定する。

【0072】

仮想空間制御モジュール２３０は、ユーザ１９０に提供される仮想空間２を制御する。仮想空間定義モジュール２３１は、仮想空間２を表す仮想空間データを生成することにより、ＨＭＤシステム１００における仮想空間２を規定する。

【0073】

仮想オブジェクト制御モジュール２３２は、後述するオブジェクト情報２４２に基づいて、仮想空間２に配置されるオブジェクトを生成する。また、仮想オブジェクト制御モジュール２３２は、仮想空間２におけるオブジェクトの動作（移動および状態変化等）を制御する。また、仮想オブジェクト制御モジュール２３２は、後述するコントローラ情報取得モジュール２３３により取得されたコントローラ情報等に基づいて、アバターおよびプレイヤキャラクタの動作（動き、移動および状態変化等）を制御する。オブジェクトは、例えば、ゲームのストーリーの進行に従って配置される森、山その他を含む風景、動物等を含み得る。アバターは、ＨＭＤ装置１１０を装着したユーザに関連付けられたオブジェクトである。アバターは、仮想空間２におけるユーザの分身としての位置付けを有するオブジェクトである。一方、プレイヤキャラクタは、仮想空間２で展開されるゲームにおいて、ユーザによって操作されるキャラクタオブジェクトである。本実施形態では、仮想空間２で展開されるゲームは、複数のユーザが仮想空間２に用意されたゲームフィールド（例えば闘技場）上で各自のプレイヤキャラクタ同士を闘わせる対戦ゲーム（あるいは、複数のユーザ同士が協力して進めるアクションゲーム等）である。また、アバターは人型のオブジェクトであり、プレイヤキャラクタは動物を模したオブジェクトである。ただし、プレイヤキャラクタは、仮想空間２で展開されるゲームの内容に応じて適宜の形態を採り得る。例えば、プレイヤキャラクタは、人型のオブジェクトであってもよいし、ロボット等の生物以外を模したオブジェクトであってもよい。より具体的には、仮想空間２で展開されるゲームがラジコンカーを用いたレースゲームである場合、プレイヤキャラクタは、ラジコンカーを表すオブジェクトであってもよい。

【0074】

コントローラ情報取得モジュール２３３は、コントローラ１６０の状態を特定するための状態情報と、コントローラ１６０に対するユーザ１９０による入力操作の内容を示す操作情報とを含むコントローラ情報を取得する。状態情報は、例えば、上述したＨＭＤセンサ１２０等により検出されたコントローラ１６０の位置および傾きを特定するための情報である。コントローラ情報は、コントローラ１６０の状態およびコントローラ１６０に対する入力操作の内容を仮想空間２におけるアバターまたはプレイヤキャラクタに反映させるために、仮想オブジェクト制御モジュール２３２に受け渡される。また、コントローラ情報取得モジュール２３３は、サーバ１５０を介して取得された他のユーザのコントローラ情報についても、適宜仮想オブジェクト制御モジュール２３２に受け渡す。これにより、他のユーザに関連付けられたアバターまたはプレイヤキャラクタを、他のユーザのコントローラ情報に基づいて動作させることができる。

【0075】

データ共有モジュール２３４は、ユーザ間で共有すべきデータを、サーバ１５０を介して他のユーザのＨＭＤシステム１００との間で送受信する。共有すべきデータとしては、アバターの身体の一部の動作を制御するための動き情報、およびプレイヤキャラクタの動作を制御するためのコントローラ情報等がある。動き情報は、例えば、ＨＭＤセンサ１２０等により検出されたＨＭＤ装置１１０の位置および傾きを特定するための情報（以下「向きデータ」）、および注視センサ１４０等により検出されたアイトラッキングデータ等である。本実施形態では、データ共有モジュール２３４は、動き情報とコントローラ情報とを含む情報（以下「プレイヤ情報」という。）を、ユーザ間で共有すべき情報として、サーバ１５０を介して他のユーザのＨＭＤシステム１００との間で送受信する。プレイヤ情報の送受信は、後述する通信制御モジュール２５０の機能を利用することにより実現される。

【0076】

ゲーム状態判定モジュール２３５は、仮想空間２で展開されるゲームにおいて発生した事象に関する判定を行う。ゲームにおいて発生する事象は、例えば、プレイヤキャラクタ、アバター及び仮想空間２に配置されたオブジェクトの相互の位置関係、並びに、プレイヤキャラクタまたはアバターによる他のオブジェクトに対する動作等を含む。

【0077】

ゲーム状態判定モジュール２３５は、仮想空間２に配置されるオブジェクトのそれぞれが、他のオブジェクトと衝突した場合に、当該衝突を検出する。ゲーム状態判定モジュール２３５は、例えば、あるオブジェクトと、別のオブジェクトとが触れたタイミングを検出することができ、当該検出がされたときに、予め定められた処理を行う。仮想空間制御モジュール２３０は、オブジェクトとオブジェクトとが触れている状態から離れたタイミングを検出することができ、当該検出がされたときに、予め定められた処理を行う。ゲーム状態判定モジュール２３５は、例えばオブジェクト毎に設定されたコリジョンエリアに基づく公知の当たり判定を実行することにより、オブジェクトとオブジェクトとが触れている状態であることを検出することができる。

【0078】

メモリモジュール２４０は、コンピュータ２００が仮想空間２をユーザ１９０に提供するために使用されるデータを保持している。ある局面において、メモリモジュール２４０は、空間情報２４１と、オブジェクト情報２４２と、ユーザ情報２４３とを保持している。空間情報２４１には、例えば、仮想空間２を提供するために規定された１つ以上のテンプレートが含まれている。オブジェクト情報２４２には、例えば、仮想空間２において再生されるコンテンツ、当該コンテンツで使用されるオブジェクトを配置するための情報等が含まれている。当該コンテンツは、例えば、ゲーム、現実社会と同様の風景を表したコンテンツ等を含み得る。オブジェクト情報２４２には、各オブジェクト（例えば、プレイヤキャラクタおよびアバター等）を描画するための描画情報も含まれている。また、オブジェクト情報２４２は、各オブジェクトに関連付けられた属性を示す属性情報も含み得る。オブジェクトの属性情報としては、例えば当該オブジェクトが可動物であるか固定物であるかを示す情報等が挙げられる。ユーザ情報２４３には、例えば、ＨＭＤシステム１００の制御装置としてコンピュータ２００を機能させるためのプログラム、オブジェクト情報２４２に保持される各コンテンツを使用するアプリケーションプログラム等が含まれている。

【0079】

メモリモジュール２４０に格納されているデータおよびプログラムは、ＨＭＤ装置１１０のユーザによって入力される。あるいは、プロセッサ１０が、当該コンテンツを提供する事業者が運営するコンピュータ（例えば、サーバ１５０）からプログラムあるいはデータをダウンロードして、ダウンロードされたプログラムあるいはデータをメモリモジュール２４０に格納する。

【0080】

通信制御モジュール２５０は、ネットワーク１９を介して、サーバ１５０その他の情報通信装置と通信し得る。

【0081】

ある局面において、表示制御モジュール２２０および仮想空間制御モジュール２３０は、例えば、ユニティテクノロジーズ社によって提供されるＵｎｉｔｙ（登録商標）を用いて実現され得る。別の局面において、表示制御モジュール２２０および仮想空間制御モジュール２３０は、各処理を実現する回路素子の組み合わせとしても実現され得る。

【0082】

コンピュータ２００における処理は、ハードウェアと、プロセッサ１０により実行されるソフトウェアとによって実現される。このようなソフトウェアは、ハードディスクその他のメモリモジュール２４０に予め格納されている場合がある。また、ソフトウェアは、ＣＤ－ＲＯＭその他のコンピュータ読み取り可能な不揮発性のデータ記録媒体に格納されて、プログラム製品として流通している場合もある。あるいは、当該ソフトウェアは、インターネットその他のネットワークに接続されている情報提供事業者によってダウンロード可能なプログラム製品として提供される場合もある。このようなソフトウェアは、光ディスク駆動装置その他のデータ読取装置によってデータ記録媒体から読み取られて、あるいは、通信制御モジュール２５０を介してサーバ１５０その他のコンピュータからダウンロードされた後、メモリモジュール２４０に一旦格納される。そのソフトウェアは、プロセッサ１０によってメモリモジュール２４０から読み出され、実行可能なプログラムの形式でＲＡＭに格納される。プロセッサ１０は、そのプログラムを実行する。

【0083】

図９に示されるコンピュータ２００を構成するハードウェアは、一般的なものである。したがって、本実施の形態に係る最も本質的な部分は、コンピュータ２００に格納されたプログラムであるともいえる。なお、コンピュータ２００のハードウェアの動作は周知であるので、詳細な説明は繰り返さない。

【0084】

なお、データ記録媒体としては、ＣＤ－ＲＯＭ、ＦＤ（Flexible Disk）、ハードディスクに限られず、磁気テープ、カセットテープ、光ディスク（ＭＯ（Magnetic Optical Disc）／ＭＤ（Mini Disc）／ＤＶＤ（Digital Versatile Disc））、ＩＣ（Integrated Circuit）カード（メモリカードを含む）、光カード、マスクＲＯＭ、ＥＰＲＯＭ（Erasable Programmable Read-Only Memory）、ＥＥＰＲＯＭ（Electrically Erasable Programmable Read-Only Memory）、フラッシュＲＯＭなどの半導体メモリ等の固定的にプログラムを担持する不揮発性のデータ記録媒体でもよい。

【0085】

ここでいうプログラムとは、プロセッサ１０により直接実行可能なプログラムだけでなく、ソースプログラム形式のプログラム、圧縮処理されたプログラム、暗号化されたプログラム等を含み得る。
［制御構造］

【0086】

図１０を参照して、本実施の形態に係るコンピュータ２００の制御構造について説明する。図１０は、ユーザ１９０Ａによって使用されるＨＭＤシステム１００Ａがユーザ１９０Ａに仮想空間２を提供するために実行する処理を表すフローチャートである。

【0087】

ステップＳ１において、コンピュータ２００のプロセッサ１０は、仮想空間定義モジュール２３１として、仮想空間画像データを特定し、仮想空間２を定義する仮想空間データを取得する。ここで、プロセッサ１０は、仮想空間２を共有する他のユーザのアバターおよびプレイヤキャラクタの初期配置等に関する情報をサーバ１５０等から受信することにより、当該他のユーザのアバターおよびプレイヤキャラクタを含む仮想空間２を定義する仮想空間データを生成することができる。あるいは、各ＨＭＤシステム１００と通信可能に接続されたサーバ１５０によって、複数のユーザに共通の仮想空間２を定義する仮想空間データが生成されてもよい。この場合、プロセッサ１０は、サーバ１５０から仮想空間データをダウンロードすることにより、仮想空間データを取得することができる。

【0088】

ステップＳ２において、プロセッサ１０は、仮想カメラ制御モジュール２２１として、仮想カメラ１を初期化する。例えば、プロセッサ１０は、メモリのワーク領域において、仮想カメラ１を仮想空間２において予め規定された中心点（あるいはその他の予め規定されたデフォルト位置）に配置し、仮想カメラ１の視線をユーザ１９０が向いている方向に向ける。

【0089】

ステップＳ３において、プロセッサ１０は、視界画像生成モジュール２２３として、初期の視界画像を表示するための視界画像データを生成する。生成された視界画像データは、視界画像生成モジュール２２３を介して通信制御モジュール２５０によってＨＭＤ装置１１０に送られる。

【0090】

ステップＳ４において、ＨＭＤ装置１１０のモニタ１１２は、コンピュータ２００から受信した信号に基づいて、視界画像を表示する。ＨＭＤ装置１１０を装着したユーザ１９０Ａは、視界画像を視認すると仮想空間２を認識し得る。

【0091】

ステップＳ５において、ＨＭＤセンサ１２０は、ＨＭＤ装置１１０から発信される複数の赤外線光に基づいて、ＨＭＤ装置１１０の位置と傾きを検知する。検知結果は、動き検知データ（動き情報の一部）として、コンピュータ２００に送られる。

【0092】

ステップＳ６において、プロセッサ１０は、視界領域決定モジュール２２２として、ＨＭＤ装置１１０の位置と傾きとに基づいて、ＨＭＤ装置１１０を装着したユーザ１９０Ａの視界方向を特定する。プロセッサ１０は、アプリケーションプログラムを実行し、アプリケーションプログラムに含まれる命令に基づいて、仮想空間２にオブジェクトを配置する。

【0093】

ステップＳ７において、コントローラ１６０は、現実空間におけるユーザ１９０Ａの操作を検出する。例えば、ある局面において、コントローラ１６０は、ユーザ１９０Ａによってボタンが押下されたことを検出する。また、上述したようにＨＭＤセンサ１２０またはコントローラ１６０自身が備えるセンサは、コントローラ１６０の位置および傾きを検出する。検出結果を示す信号は、ＨＭＤセンサ１２０またはコントローラ１６０からコンピュータ２００に送られる。このようにして、コントローラ１６０に対するユーザ１９０Ａによる入力操作の内容を示す操作情報とコントローラ１６０の状態（位置および傾き等）を特定するための状態情報とを含むコントローラ情報が、コンピュータ２００に送られる。そして、プロセッサ１０は、コントローラ情報取得モジュール２３３として、当該コントローラ情報を取得する。

【0094】

ステップＳ８において、プロセッサ１０は、コントローラ情報取得モジュール２３３およびデータ共有モジュール２３４として、サーバ１５０から、仮想空間２を共有する他のユーザのプレイヤ情報（音声データ、動き情報、およびコントローラ情報等）を取得する。

【0095】

ステップＳ９において、プロセッサ１０は、仮想オブジェクト制御モジュール２３２として、ユーザ１９０Ａを含む各ユーザ１９０のプレイヤ情報に基づいて、各ユーザのアバターおよびプレイヤキャラクタの動作を制御する。

【0096】

ステップＳ１０において、プロセッサ１０は、視界画像生成モジュール２２３として、ステップＳ９の処理結果に基づく視界画像を表示するための視界画像データを生成し、生成した視界画像データをＨＭＤ装置１１０に出力する。

【0097】

ステップＳ１１において、ＨＭＤ装置１１０のモニタ１１２は、受信した視界画像データに基づいて視界画像を更新し、更新後の視界画像を表示する。

【0098】

図１１は、仮想空間２の一例を模式的に表す図である。図１１に示されるように、仮想空間２は、ユーザ１９０Ａに関連付けられたアバターＡ２１（第２アバター）と、ユーザ１９０Ａにより使用されるコントローラ１６０Ａに対する入力操作に基づいて操作されるプレイヤキャラクタＣ２１（第２キャラクタ）と、ユーザ１９０Ａとは異なるユーザ１９０Ｂに関連付けられたアバターＡ２２（第２アバター）と、ユーザ１９０Ｂにより使用されるコントローラ１６０Ｂに対する入力操作に基づいて操作されるプレイヤキャラクタＣ２２（第２キャラクタ）と、ユーザ１９０Ａに装着され、モニタ１１２（表示部）を備えるＨＭＤ装置１１０Ａ（ヘッドマウントデバイス）に提供される視界画像Ｍ１を定義する仮想カメラ１Ａと、ユーザ１９０Ｂに装着され、モニタ１１２を備えるＨＭＤ装置１１０Ｂに提供される視界画像Ｍ２を定義する仮想カメラ１Ｂとを含む。また、図１１に示される例では、仮想空間２は、さらに、コントローラ１６０Ａ，１６０Ｂに対応する仮想的なコントローラを表すコントローラオブジェクトＶＣ２１，ＶＣ２２を含む。

【0099】

また、仮想空間２は、コンピュータ２００により自動制御される自動アバターＡ１（第１アバター）と、自動アバターＡ１に関連付けられコンピュータ２００により自動制御される自動プレイヤキャラクタＣ１（第１キャラクタ）と、を含む。仮想区間２は、さらに、自動アバターＡ１に把持される仮想的なコントローラオブジェクトＶＣ１を含んでもよい。仮想空間２に自動アバターＡ１及び自動プレイヤキャラクタＣ１を配置するために、図１０に示すフローチャートのステップＳ１において、プロセッサ１０は、自動アバターＡ１及び自動プレイヤキャラクタＣ１の初期配置等に関する情報をサーバ１５０から受信することにより、自動アバターＡ１及び自動プレイヤキャラクタＣ１を含む仮想空間を定義する仮想空間データを生成することができる。自動アバターＡ１及び自動プレイヤキャラクタＣ１を定義するための情報は、ユーザ間に共有される。

【0100】

プロセッサ１０は、仮想オブジェクト制御モジュール２３２として、自動アバターＡ１を制御するための第１制御データに基づいて、自動アバターＡ１を制御する。また、プロセッサ１０は、仮想オブジェクト制御モジュール２３２として、自動プレイヤキャラクタＣ１を制御するための第２制御データに基づいて、自動プレイヤキャラクタＣ１を制御する。第１制御データは、自動アバターＡ１の制御内容及び制御実施のための条件等を含む。プロセッサ１０は、第１制御データを参照して、自動アバターＡ１を制御する。第２制御データは、自動プレイヤキャラクタＣ１の制御内容、制御実施のための条件等を含む。プロセッサ１０は、第２制御データを参照して、自動プレイヤキャラクタＣ１を制御する。プロセッサ１０は、第１制御データ及び第２制御データを、例えばサーバ１５０から、通信制御モジュール２５０を介して取得してもよい。第１制御データ及び第２制御データは、オブジェクト情報２４２としてメモリに格納されていてもよい。

【0101】

図１１に示される例では、仮想空間２において、複数のユーザ１９０Ａ，１９０Ｂが各自のプレイヤキャラクタＣ２１，Ｃ２２を操作して、ゲームフィールドＦ上で相手方のプレイヤキャラクタＣ２２，Ｃ２１及びコンピュータ２００により自動制御される自動プレイヤキャラクタＣ１と闘わせる対戦ゲーム（ここでは、爆弾Ｂ１を投げ合うゲーム）が展開されている。仮想空間２では、ゲームに関連するプレイヤキャラクタＣ２１，Ｃ２２，Ｃ１だけでなく、コントローラオブジェクトＶＣ２１，ＶＣ２２を保持するアバターＡ２１，Ａ２２及び自動アバターＡ１が所定の位置に配置されている。これにより、仮想空間２において、各ユーザ１９０Ａ，１９０ＢのアバターＡ２１，Ａ２２及び自動アバターＡ１が各プレイヤキャラクタＣ２１，Ｃ２２及び自動プレイヤキャラクタＣ１を操作しているシチュエーションが表現されている。また、仮想カメラ１Ａ，１Ｂは、アバターＡ２１，Ａ２２の視点に関連付けられている。これにより、ユーザ１９０Ａ，１９０Ｂに対して、アバターＡ２１，Ａ２２の１人称視点における視界画像Ｍ１，Ｍ２（視野画像）が提供される。

【0102】

図１２は、ＨＭＤ装置１１０Ａを介してユーザ１９０Ａに提供される視界画像Ｍ１の一例を表す図である。図１２に示されるように、視界画像Ｍ１には、ユーザ１９０Ａ，１９０Ｂにより操作されるプレイヤキャラクタＣ２１、Ｃ２２及びユーザ１９０Ｂに関連付けられたアバターＡ２２が含まれる。また、視界画像Ｍ１には、コンピュータ２００により自動制御される自動アバターＡ１及び自動プレイヤキャラクタＣ１がさらに含まれている。ユーザ１９０Ａは、視界画像Ｍ１を認識することによって、あたかも自分がアバターＡ２１として仮想空間２に存在しているかのような仮想体験をすることができる。同様に、ユーザ１９０Ｂは、視界画像Ｍ２を認識することによって、あたかも自分がアバターＡ２２として仮想空間２に存在しているかのような仮想体験をすることができる。

【0103】

このような仮想空間２によれば、各ユーザ１９０Ａ，１９０Ｂに対して、アバターＡ２１，Ａ２２を介したマルチプレイゲームを提供することができる。また、この仮想空間２には、各ユーザ１９０Ａ，１９０ＢのアバターＡ２１，Ａ２２およびプレイヤキャラクタＣ２１，Ｃ２２並びにコンピュータにより自動制御される自動アバターＡ１及び自動プレイヤキャラクタＣ１が存在する。このため、各ユーザ１９０Ａ，１９０Ｂは、アバターＡ２１，Ａ２２を介して互いの存在を認識すると共に、アバターＡ１として擬人化されたコンピュータを認識しつつ、仮想空間２において共通のゲームを楽しむことができる。これにより、各ユーザ１９０Ａ，１９０Ｂの仮想体験のエンタテイメント性を向上させることができる。

【0104】

図１３は、コンピュータにより自動制御される自動アバターＡ１の動きを制御するために実行される処理を表すフローチャートである。前述のとおり、自動アバターＡ１は、第１制御データに基づいて制御される。第１制御データは、自動アバターＡ１の動きを制御するための動き制御データ、自動アバターＡ１の位置を制御するための位置制御データ及び自動アバターＡ１の外観を制御するための外観制御データを含むことができる。図１３に示されるフローチャートは、動き制御データに関する処理を表したものである。なお、図１３に示される処理は、図１０におけるＳ５～Ｓ９に示される処理と一部重複している。

【0105】

ステップＳ２１において、プロセッサ１０は、コントローラ情報取得モジュール２３３として、ユーザ１９０の動きに基づく動きデータを取得する。動きデータは、例えば、ゲームのプレイ中のある時間におけるユーザ１９０Ａの動きに基づく動き情報及びコントローラ情報を含む。

【0106】

ステップＳ２２において、プロセッサ１０は、仮想オブジェクト制御モジュール２３２として、ステップＳ２１において取得された動きデータに基づいてユーザ１９０に関連付けられたアバターを動かす。具体的には、例えば、プロセッサ１０は、ユーザ１９０Ａの動きに基づく動きデータに基づいて、ユーザ１９０Ａの動きを模すようにアバターＡ２１を動かす。

【0107】

ステップＳ２３において、プロセッサ１０は、仮想オブジェクト制御モジュール２３２として、ステップＳ２２においてアバターを動かすために用いられた動きデータの少なくとも一部を、コンピュータ２００により自動制御される自動アバターＡ１の動きを制御するための動き制御データに適用する。即ち、プロセッサ１０は、ユーザ１９０Ａの動きデータが取得された場合に、動き制御データの制御状態を、自動アバターＡ１の自動制御のために予め設定された第１制御状態から、動きデータの少なくとも一部が適用された第２制御状態に更新することができる。

【0108】

具体的には、プロセッサ１０は、ゲーム中におけるある時間幅に対応するユーザ１９０Ａの動きデータを、当該動きデータの取得時以後のある時間（第１時間）内における動き制御データとして適用する。動き制御データとして適用される動きデータに対応する時間幅は、例えば、一連の動きの開始時から終了時までであってもよく、例えば、ユーザ１９０Ａが手を挙げてから振り下ろすまでの時間幅であってもよい。

【0109】

ステップＳ２４において、プロセッサ１０は、仮想オブジェクト制御モジュール２３２として、ステップＳ２３において動き制御データとして適用された動きデータの少なくとも一部に基づいて、自動アバターＡ１の動きを制御する。具体的には、プロセッサ１０は、例えば、ある時間幅におけるユーザ１９０Ａの一連の動きを示す動きデータが動き制御データとして適用された場合には、ユーザ１９０Ａ及びアバターＡ２１の一連の動きと同様の動きを自動アバターＡ１にさせる。これにより、自動アバターＡ１に人間らしい自然な動作をさせることができる。また、自動アバターＡ１がユーザ１９０Ａと同様の動作をするので、ユーザ１９０Ａに対して自動アバターＡ１に対する親しみを感じさせることができる。

【0110】

続いて、本実施の形態の第１の変形例について説明する。図１４は、自動アバターＡ１の動きを制御するために実行される処理の第１の変形例を示すフローチャートである。

【0111】

ステップＳ３１において、プロセッサ１０は、コントローラ情報取得モジュール２３３として、ユーザ１９０の動きに基づく動きデータを当該ユーザ１９０のプレイヤキャラクタの状態情報と関連付けて取得する。状態情報は、例えば、ゲームの進行において用いられるプレイヤキャラクタに関連付けられたパラメータ等であって、プレイヤキャラクタの体力値であるヒットポイント（ＨＰ）等が例示される。具体的には、プロセッサ１０は、例えば、ユーザ１９０Ａの動きに基づく動きデータを、プレイヤキャラクタＣ２１の状態情報と関連付けて取得する。

【0112】

ステップＳ３２において、プロセッサ１０は、仮想オブジェクト制御モジュール２３２として、ステップＳ２１において取得された動きデータに基づいてユーザ１９０に関連付けられたアバターを動かす。具体的には、例えば、プロセッサ１０は、ユーザ１９０Ａの動きに基づく動きデータに基づいて、ユーザ１９０Ａの動きを模すようにアバターＡ２１を動かす。

【0113】

ステップＳ３３において、プロセッサ１０は、仮想オブジェクト制御モジュール２３２として、自動プレイヤキャラクタＣ１の状態情報（第１状態）を取得する。前述のとおり、この状態情報は、例えば、自動プレイヤキャラクタＣ１のヒットポイント等のパラメータである。

【0114】

ステップＳ３４において、プロセッサ１０は、仮想オブジェクト制御モジュール２３２として、ステップＳ３１において取得された動きデータのうち、ステップＳ３３において取得された状態情報と同値の状態情報に関連付けられている動きデータを抽出し、抽出した動きデータを自動アバターＡ１の動きを制御するための動き制御データに適用する。

【0115】

ステップＳ３５において、プロセッサ１０は、仮想オブジェクト制御モジュール２３２として、ステップＳ３４において動き制御データとして適用された動きデータに基づいて、自動アバターＡ１の動きを制御する。具体的には、プロセッサ１０は、例えば、ある時間幅におけるユーザ１９０Ａの一連の動きを示す動きデータが動き制御データとして適用された場合には、ユーザ１９０Ａ及びアバターＡ２１の一連の動きと同様の動きを自動アバターＡ１にさせる。これにより、自動アバターＡ１の制御に、自動プレイヤキャラクタＣ１の状態に応じた動きデータが用いられるので、自動アバターＡ１に自動プレイヤキャラクタＣ１の状態が加味された自然な動作をさせることができる。

【0116】

続いて、本実施の形態の第２の変形例について説明する。第２の変形例は、複数のユーザのそれぞれに関連付けられたアバター、及び、各ユーザによって操作される複数のプレイヤキャラクタが仮想空間２に含まれる場合における自動アバターＡの動きの制御の例である。図１５は、自動アバターＡ１の動きを制御するために実行される処理の第２の変形例を示すフローチャートである。

【0117】

ステップＳ４１において、プロセッサ１０は、コントローラ情報取得モジュール２３３及びデータ共有モジュール２３４として、複数のユーザ１９０のそれぞれの動きに基づく動きデータを取得する。具体的には、プロセッサ１０は、例えば、ユーザ１９０Ａ，１９０Ｂのそれぞれの動きに基づく動きデータを取得する。

【0118】

ステップＳ４２において、プロセッサ１０は、仮想オブジェクト制御モジュール２３２として、ステップＳ４１において取得された動きデータに基づいて各ユーザ１９０に関連付けられたアバターを動かす。具体的には、例えば、プロセッサ１０は、ユーザ１９０Ａの動きに基づく動きデータに基づいて、ユーザ１９０Ａの動きを模すようにアバターＡ２１を動かす。また、プロセッサ１０は、ユーザ１９０Ｂの動きに基づく動きデータに基づいて、ユーザ１９０Ｂの動きを模すようにアバターＡ２２を動かす。

【0119】

ステップＳ４３において、プロセッサ１０は、仮想オブジェクト制御モジュール２３２として、自動アバターＡ１の動き制御データに適用する動きデータの指定を取得する。具体的には、プロセッサ１０は、ステップＳ４１において取得された複数のユーザの動きデータのうちのいずれのユーザの動きデータを動き制御データに適用するかの指定を取得する。動きデータの指定は、例えば、ユーザ１９０のうちのいずれかによる明示的な指示入力に基づいてもよい。また、動きデータは、コンピュータ２００またはサーバ１５０等によりランダムな選択に基づいてもよい。

【0120】

ステップＳ４４において、プロセッサ１０は、仮想オブジェクト制御モジュール２３２として、ステップＳ４３において指定された動きデータを自動アバターＡ１の動きを制御するための動き制御データに適用する。

【0121】

ステップＳ４５において、プロセッサ１０は、仮想オブジェクト制御モジュール２３２として、ステップＳ４４において動き制御データとして適用された動きデータに基づいて、自動アバターＡ１の動きを制御する。これにより、自動アバターＡ１の動きの制御に用いるために、所望のまたは好適な動きデータを選択できるので、ユーザ１９０がより好感を持ちやすい自然な動作を自動アバターＡ１にさせることができる。

【0122】

次に、図１６～図１７を参照して、自動アバターＡ１の動きの制御の例を説明する。動き制御データは、自動アバターＡ１の所定の動きを規定した動作情報（第１の動き）が関連付けられた、仮想空間２における所定の事象を規定した事象条件（第１条件）を含むことができる。仮想空間２において発生した事象が動き制御データに含まれる事象条件を満たした場合に、プロセッサ１０は、事象条件に関連付けられた動作情報に規定されている動きを自動アバターＡ１にさせる。

【0123】

図１６は、仮想空間２において発生した事象に基づく自動アバターＡ１の制御の例を示す図である。図１６に示される例では、動き制御データは、自動プレイヤキャラクタＣ１及び自動プレイヤキャラクタＣ１以外のプレイヤキャラクタＣ２１，Ｃ２２（相手キャラクタ）の一方から他方に対する動作を含む事象に基づいて、自動プレイヤキャラクタＣ１またはプレイヤキャラクタＣ２１，Ｃ２２の状態がある条件を満たしたこと（第２条件）を事象条件として含む。この事象条件には、プレイヤキャラクタＣ２１，Ｃ２２に関連付けられたアバターＡ２１，Ａ２２を注目対象とした動きが動作情報として関連付けられている。

【0124】

具体的には、図１６に示される例では、仮想空間２では、ゲームがプレイヤキャラクタＣ１，Ｃ２１，Ｃ２２が相互に闘う対戦ゲームが展開されており、自動プレイヤキャラクタＣ１がプレイヤキャラクタＣ２２と闘って勝った状態が示されている。また、このゲームにおいて、動き制御データは、自動プレイヤキャラクタＣ１が相手のプレイヤキャラクタに勝ったことを事象条件として含む。そして、かかる事象条件が満たされた場合に、相手のプレイヤキャラクタに関連付けられたアバターを注目対象として、闘いに勝ったことを誇示するポーズを自動アバターＡ１にさせることが動作情報として関連付けられている。

【0125】

図１６に示されるように、プロセッサ１０は、ゲーム状態判定モジュール２３５として、自動プレイヤキャラクタＣ１がプレイヤキャラクタＣ２２と闘って、例えばプレイヤキャラクタＣ２２のヒットポイントが所定値以下となり、自動プレイヤキャラクタＣ１が闘いに勝ち、所定の事象条件が満たされたことを判定する。そして、所定の事象条件が満たされたので、プロセッサ１０は、仮想オブジェクト制御モジュール２３２として、アバターＡ２２を注目対象として闘いに勝ったことを誇示するポーズを自動アバターＡ１にさせる。これにより、自動アバターＡ１に、プレイヤキャラクタ同士の作用が反映された動作をさせることができるので、仮想体験のエンタテイメント性をより向上させ得る。

【0126】

図１７は、仮想空間２において発生した事象に基づく自動アバターＡ１の制御の他の例を示す図である。図１７に示される例では、動き制御データは、自動プレイヤキャラクタＣ１と仮想空間２に配置された注目対象との位置関係が所定の位置条件（第３条件）を満たしたことを事象条件として含む。この事象条件には、自動アバターＡ１の視線を注目対象に向けさせることが動作情報として関連付けられている。

【0127】

具体的には、図１７に示される例では、仮想空間２では、ゲームがプレイヤキャラクタＣ１，Ｃ２１，Ｃ２２が相互に闘う対戦ゲームが展開されており、自動プレイヤキャラクタＣ１とアイテムＩ（注目対象）との距離が所定値以下になった状態が示されている。また、このゲームにおいて、動き制御データは、自動プレイヤキャラクタＣ１とアイテムＩとの距離が所定値以下になったことを事象条件として含む。そして、かかる事象条件が満たされた場合に、アイテムＩに視線を向ける動きを自動アバターＡ１にさせることが動作情報として関連付けられている。

【0128】

図１７に示されるように、プロセッサ１０は、ゲーム状態判定モジュール２３５として、自動プレイヤキャラクタＣ１とアイテムＩとの距離が所定値以下となり、所定の事象条件が満たされたことを判定する。そして、所定の事象条件が満たされたので、プロセッサ１０は、仮想オブジェクト制御モジュール２３２として、視線をアイテムＩに向ける動きを自動アバターＡ１にさせる。これにより、自動アバターＡ１に、注目対象との位置関係に応じた自然な動きをさせることができる。

【0129】

なお、プロセッサ１０は、ゲーム状態判定モジュール２３５として、仮想空間２に配置されているオブジェクトのうち、自動アバターＡ１の視線方向に基づいて定義される自動アバターＡ１の視野に含まれているオブジェクトの中から、注目対象としてのアイテムを選択することができる。即ち、自動アバターＡ１の視野にアイテムが含まれていることは、自動アバターＡ１の視線をそのアイテムに向けさせる条件として適切である。これにより、自動アバターＡ１に、自然な動きをさせることができる。

【0130】

図１８は、仮想空間２における自動アバターＡ１の位置を移動させる制御の例を示す図である。第１制御データに含まれる位置制御データは、自動アバターＡ１の位置を、移動前の位置（第１位置）から、自動プレイヤキャラクタＣ１の位置に基づいて定義された位置（第２位置）に移動させることを含む。

【0131】

プロセッサ１０は、仮想オブジェクト制御モジュール２３２として、自動プレイヤキャラクタＣ１の位置に基づいて、自動アバターＡ１を移動させる位置を定義する。具体的には、自動アバターＡ１はゲームフィールドＦの外縁に沿って移動するので、プロセッサ１０は、ゲームフィールドＦの外縁において、ゲームフィールドＦ中の自動プレイヤキャラクタＣ１の位置に最も近い位置を、自動アバターＡ１を移動させる位置をして定義する。そして、図１８に示されるように、プロセッサ１０は、定義された位置に自動アバターＡ１を移動させる。

【0132】

また、前述のとおり、第１制御データは、自動アバターＡ１の外観を制御する外観制御データを含み得る。第１制御データが外観制御データを含む場合には、プロセッサ１０は、仮想オブジェクト制御モジュール２３２として、自動プレイヤキャラクタＣ１の状態に基づいて、自動アバターＡ１の外観を制御してもよい。具体的には、プロセッサ１０は、例えば、プレイヤキャラクタの体力値であるヒットポイント（ＨＰ）といったパラメータに基づいて、自動アバターＡ１の外観を制御することとしてもよい。この場合には、予め自動アバターＡ１の外観を定義する外観データとＨＰ値とを関連付けておき、プロセッサ１０は、ゲームの進行に応じて変化するＨＰ値に応じた外観データを適用することにより、自動アバターＡ１の外観を制御する。

【0133】

本明細書に開示された主題は、例えば、以下のような項目として示される。
（項目１）
表示部（モニタ１１２）を備えるヘッドマウントデバイス（ＨＭＤ装置１１０）を介してユーザ（ユーザ１９０）に仮想体験を提供するためにコンピュータ（コンピュータ２００またはサーバ１５０）によって実行される情報処理方法であって、
前記コンピュータにより自動制御される第１アバター（自動アバターＡ１）と、該第１アバターに関連付けられ前記コンピュータにより自動制御される第１キャラクタ（自動プレイヤキャラクタＣ１）と、を含む仮想空間を規定する仮想空間データを特定するステップ（図１０のステップＳ１）と、
前記第１アバターを自動制御するための第１制御データ及び前記第１キャラクタを自動制御するための第２制御データのそれぞれに基づいて、前記第１アバター及び前記第１キャラクタを制御するステップ（図１０のステップＳ９または図１３のステップＳ２４）と、
前記仮想空間において、前記第１アバター及び前記第１キャラクタと関連付けられていない仮想視点を特定するステップ（図１０のステップＳ６）と、
前記仮想空間データと、前記仮想空間における前記仮想視点の位置と、前記ヘッドマウントデバイスの姿勢に基づいて視野画像を生成し、前記視野画像を前記表示部に表示させるステップ（図１０のステップＳ１０，Ｓ１１）と、
を含む情報処理方法。
本項目の情報処理方法によれば、コンピュータにより自動制御される第１アバター及び第１キャラクタが、それらのためにそれぞれ設けられた第１制御データ及び第２制御データに基づいて制御されることにより、自動制御されるアバター及びキャラクタを含む視野画像をユーザに提供できる。従って、仮想空間における仮想体験のエンタテイメント性を向上させ得る。
（項目２）
前記第１制御データは、前記仮想空間内の第１位置における前記第１アバターの動きを制御するための動き制御データ、前記第１アバターの位置を前記第１位置から第２位置に移動させるように制御するための位置制御データ、及び、前記第１アバターの外観を制御するための外観制御データの少なくとも一つを含む、
項目１に記載の情報処理方法。
本項目の情報処理方法によれば、第１アバターの動き、位置及び外観をそれぞれの制御データを用いて制御することにより、好適な自動制御が実現される。
（項目３）
前記仮想空間は、前記ユーザに関連付けられた第２アバターを更に含み、
前記第１制御データは、前記動き制御データを含み、
前記情報処理方法は、
前記ユーザの動きに基づく動きデータを取得するステップと、
前記動きデータに基づいて前記第２アバターを動かすステップと、を更に含み、
前記動きデータの少なくとも一部を前記動き制御データとして適用し、
前記動き制御データとして適用された前記動きデータの少なくとも一部に基づいて、前記第１アバターの動きを制御する、
項目２に記載の情報処理方法。
本項目の情報処理方法によれば、第１アバターの制御に、ユーザの動きを表す動きデータが用いられるので、コンピュータにより自動制御される第１アバターに、人間らしい自然な動作をさせることができる。
（項目４）
前記動きデータが取得された場合に、前記動き制御データは、前記コンピュータによる自動制御のために予め設定された第１制御状態から、前記動きデータの少なくとも一部が適用された第２制御状態に更新され、前記第１アバターの動きは、前記第２制御状態の前記動き制御データに基づいて制御される、
項目３に記載の情報処理方法。
本項目の情報処理方法によれば、動き制御データに対する動きデータの適用が好適に実現される。
（項目５）
前記動き制御データとして適用される前記動きデータの少なくとも一部を取得した後の第１時間以内において、前記動きデータの少なくとも一部に基づいて前記第１アバターの動きを制御する、
項目３または４に記載の情報処理方法。
本項目の情報処理方法によれば、自身の動きに基づいて第１アバターが動いていることをユーザが認識しやすいので、第１アバターに対する親しみをユーザ感じさせることができる。
（項目６）
前記仮想空間は、前記ユーザによる操作入力に基づいて操作される第２キャラクタを含み、
前記動きデータは、前記動きデータの取得時における前記第２キャラクタの状態を表す状態情報と関連付けて取得され、
前記第１キャラクタの状態が第１状態である場合に、前記第１状態に関連付けられている前記動きデータの少なくとも一部が、前記動き制御データとして適用される、
項目３～５のいずれか一項に記載の情報処理方法。
本項目の情報処理方法によれば、第１アバターの制御に、第１キャラクタの状態に応じた動きデータが用いられるので、自動制御される第１アバターに、第１キャラクタの状態が加味された自然な動作をさせることができる。
（項目７）
前記仮想空間は、複数のユーザの各々に関連づけられた前記第２アバターを含み、
前記複数のユーザの各々の前記動きデータが取得され、
前記複数のユーザのいずれかの前記動きデータの少なくとも一部が、前記動き制御データとして適用される、
項目３～６のいずれか一項に記載の情報処理方法。
本項目の情報処理方法によれば、第１アバターの制御に用いるために、所望のまたは好適な動きデータを選択できるので、ユーザがより好感を持ちやすい自然な動作を第１アバターにさせることができる。
（項目８）
前記動き制御データは、前記第１アバターの動きを規定した第１の動きが関連付けられた第１条件を含み、
前記仮想空間において発生した事象が前記第１条件を満たした場合に、前記第１条件に関連付けられた前記第１の動きを前記第１アバターにさせる、
項目２～７のいずれか一項に記載の情報処理方法。
本項目の情報処理方法によれば、仮想空間において発生した事象に応じた動作を第１アバターにさせることができるので、仮想空間における仮想体験のエンタテイメント性をより向上させ得る。
（項目９）
前記第１条件は、前記第１キャラクタ及び前記第１キャラクタ以外のオブジェクトである相手キャラクタの一方から他方に対する動作を含む事象に基づいて、前記第１キャラクタまたは前記相手キャラクタの状態が第２条件を満たしたことを含み、
前記第１の動きは、前記相手キャラクタに関連付けられた相手アバターを注目対象とした動きを含む、
項目８に記載の情報処理方法。
本項目の情報処理方法によれば、第１アバターに、キャラクタ同士の作用が反映された動作をさせることができるので、仮想体験のエンタテイメント性をより向上させ得る。
（項目１０）
前記第１条件は、前記第１キャラクタと前記仮想空間に配置された注目対象との位置関係が第３条件を満たしたことを含み、
前記第１の動きは、前記第１アバターの視線を前記注目対象に向けさせることを含む、
項目８または９に記載の情報処理方法。
本項目の情報処理方法によれば、第１アバターに、注目対象との位置関係に応じた自然な動きをさせ得る。
（項目１１）
前記注目対象は、前記仮想空間に配置されているオブジェクトであって、前記第１アバターの視線方向に基づいて定義される前記第１アバターの視野に含まれているオブジェクトの中から選択される、
項目１０に記載の情報処理方法。
本項目の情報処理方法によれば、第１アバターの視界に注目対象が含まれていることは、第１アバターの視線を注目対象に向けさせる条件として適切であるので、第１アバターにより自然な動きをさせ得る。
（項目１２）
前記第２位置は、前記第１キャラクタの位置に基づいて定義され、
前記位置制御データは、前記第１アバターの位置を、前記第１位置から、前記第１キャラクタの位置に基づいて定義された前記第２位置に移動させることを含む、
項目２～１１のいずれか一項に記載の情報処理方法。
本項目の情報処理方法によれば、第１キャラクタを操作する仮想的なユーザである第１アバターの位置が第１キャラクタの位置に応じて制御されるので、現実感をより好適に演出できる。
（項目１３）
前記外観制御データは、前記第１キャラクタの状態に基づいて、前記第１アバターの外観を制御することを含む、
項目２～１２のいずれか一項に記載の情報処理方法。
本項目の情報処理方法によれば、第１キャラクタの状態に応じて第１アバターの外観が変化しうるので、仮想体験におけるエンタテイメント性を向上させることができる。
（項目１４）
項目１～１３のいずれか一項に記載の情報処理方法をコンピュータに実行させるプログラム。
（項目１５）
少なくともメモリと、前記メモリに結合されたプロセッサとを備え、前記プロセッサの制御により項目１～１３のいずれか一項に記載の情報処理方法を実行する、装置。

【符号の説明】

【0134】

１，１Ａ，１Ｂ…仮想カメラ、２…仮想空間、１０…プロセッサ、１１…メモリ、１２…ストレージ、１３…入出力インターフェース、１４…通信インターフェース、１５…バス、１９…ネットワーク、１００，１００Ａ，１００Ｂ…ＨＭＤシステム、１１０，１１０Ａ，１１０Ｂ…ＨＭＤ装置、１１２…モニタ、１１４…センサ、１１８…マイク、１２０…センサ、１４０…注視センサ、１５０…サーバ、１６０，１６０Ａ…コントローラ、１９０，１９０Ａ，１９０Ｂ…ユーザ、２００…コンピュータ、２２０…表示制御モジュール、２２１…仮想カメラ制御モジュール、２２２…視界領域決定モジュール、２２３…視界画像生成モジュール、２２４…基準視線特定モジュール、２３０…仮想空間制御モジュール、２３１…仮想空間定義モジュール、２３２…仮想オブジェクト制御モジュール、２３３…コントローラ情報取得モジュール、２３４…データ共有モジュール、２３５…ゲーム状態判定モジュール、２４０…メモリモジュール、２４１…空間情報、２４２…オブジェクト情報、２４３…ユーザ情報、２５０…通信制御モジュール、Ａ１…自動アバター、Ａ２１，Ａ２２…アバター、Ｃ１…自動プレイヤキャラクタ、Ｃ２１，Ｃ２２…プレイヤキャラクタ、Ｉ…アイテム、ＶＣ１，ＶＣ２１，ＶＣ２２…コントローラオブジェクト。

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】

【図15】

【図16】

【図17】

【図18】