特許 6853638 表示システム、表示方法、及び、コンピュータ装置

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】6853638

(24)【登録日】2021年3月16日

(45)【発行日】2021年3月31日

(54)【発明の名称】表示システム、表示方法、及び、コンピュータ装置

(51)【国際特許分類】

   G06F 3/01 20060101AFI20210322BHJP

   A63F 13/25 20140101ALI20210322BHJP

   A63F 13/212 20140101ALI20210322BHJP

   A63F 13/525 20140101ALI20210322BHJP

   G06F 3/0481 20130101ALI20210322BHJP

   G06F 3/0487 20130101ALI20210322BHJP

   G09G 5/00 20060101ALI20210322BHJP

   G09G 5/36 20060101ALI20210322BHJP

   G09G 5/377 20060101ALI20210322BHJP

【ＦＩ】

   G06F3/01 510

   A63F13/25

   A63F13/212

   A63F13/525

   G06F3/0481 150

   G06F3/0487

   G09G5/00 550C

   G09G5/36 520P

   G09G5/36 520L

   G09G5/00 530M

   G09G5/00 530D

   G09G5/36 520B

【請求項の数】6

【全頁数】17

(21)【出願番号】特願2016-179939(P2016-179939)

(22)【出願日】2016年9月14日

(65)【公開番号】特開2018-45462(P2018-45462A)

(43)【公開日】2018年3月22日

【審査請求日】2019年9月13日

【前置審査】

(73)【特許権者】

【識別番号】308033283

【氏名又は名称】株式会社スクウェア・エニックス

(73)【特許権者】

【識別番号】504437801

【氏名又は名称】グリー株式会社

(74)【代理人】

【識別番号】110001782

【氏名又は名称】特許業務法人ライトハウス国際特許事務所

(72)【発明者】

【氏名】加島 直弥

(72)【発明者】

【氏名】明石 佳久

(72)【発明者】

【氏名】ブーシェ ロビン

(72)【発明者】

【氏名】串田 夏子

【審査官】 星野 裕

(56)【参考文献】

【文献】 特開２００５−０３８００８（ＪＰ，Ａ）

【文献】 特許第５９８１５９１（ＪＰ，Ｂ１）

【文献】 特許第５９４４６００（ＪＰ，Ｂ１）

【文献】 特開２０１６−０９３３６３（ＪＰ，Ａ）

(58)【調査した分野】（Int.Cl.，ＤＢ名）

Ｇ０６Ｆ ３／０１

Ａ６３Ｆ １３／２１２

Ａ６３Ｆ １３／２５

Ａ６３Ｆ １３／５２５

Ｇ０６Ｆ ３／０４８

Ｇ０９Ｇ ５／００

Ｇ０９Ｇ ５／３６

Ｇ０９Ｇ ５／３７７

(57)【特許請求の範囲】

【請求項1】

プレイヤの頭部に装着することで利用される表示装置を備える表示システムであって、
表示装置の向き及び／又は位置に応じて、仮想空間内の仮想カメラの視軸及び／又は位置を特定する仮想カメラ特定手段と、
仮想カメラの視軸及び／又は位置に応じて、仮想空間内のオブジェクトを表示装置に表示する表示手段と、
オブジェクトに設定された所定の領域と、仮想カメラ特定手段により特定された視軸が交差するか否かを判定する交差判定手段と
を備え、
表示手段が、交差判定手段により、所定の領域と視軸が交差すると判定された場合に、オブジェクトに関連付けられた情報を追加して表示するものであり、
オブジェクトに設定された所定の領域が、球形であり、オブジェクトの部位毎に設定された複数の領域である、表示システム。

【請求項2】

表示手段が、
交差判定手段により、所定の領域と視軸が交差すると判定された後に、仮想カメラの視軸及び／又は位置が変化することにより、所定の領域と視軸が交差しないと判定された場合に、表示されていたオブジェクトに関連付けられた情報を非表示にする、
請求項１に記載の表示システム。

【請求項3】

交差判定手段により、所定の領域と視軸が交差すると判定された場合に、オブジェクトに関連付けられた情報を抽出する情報抽出手段を備え、
表示手段が、
情報抽出手段により抽出された、オブジェクトに関連付けられた情報を表示する、請求項１又は２に記載の表示システム。

【請求項4】

オブジェクトに関連付けられた情報が、オブジェクトの状態又は属性に関する情報を含む、
請求項１〜３のいずれかに記載の表示システム。

【請求項5】

プレイヤの頭部に装着することで利用される表示装置と、コンピュータ装置とを備える表示システムにおいて実行される表示方法であって、
表示装置の向き及び／又は位置に応じて、仮想空間内の仮想カメラの視軸及び／又は位置を特定する仮想カメラ特定ステップと、
仮想カメラの視軸及び／又は位置に応じて、仮想空間内のオブジェクトを表示装置に表示する第１表示ステップと、
オブジェクトに設定された所定の領域と、仮想カメラ特定手段により特定された視軸が交差するか否かを判定する交差判定ステップと、
交差判定ステップにより、所定の領域と視軸が交差すると判定された場合に、オブジェクトに関連付けられた情報を追加して表示する第２表示ステップと
を有し、
オブジェクトに設定された所定の領域が、球形であり、オブジェクトの部位毎に設定された複数の領域である、表示方法。

【請求項6】

プレイヤの頭部に装着することで利用される表示装置と通信による接続が可能なコンピュータ装置であって、
表示装置の向き及び／又は位置に応じて、仮想空間内の仮想カメラの視軸及び／又は位置を特定する仮想カメラ特定手段と、
仮想カメラの視軸及び／又は位置に応じて、仮想空間内のオブジェクトを表示装置に表示する表示手段と、
オブジェクトに設定された所定の領域と、仮想カメラ特定手段により特定された視軸が交差するか否かを判定する交差判定手段と
を備え、
表示手段が、交差判定手段により、所定の領域と視軸が交差すると判定された場合に、オブジェクトに関連付けられた情報を追加して表示するものであり、
オブジェクトに設定された所定の領域が、球形であり、オブジェクトの部位毎に設定された複数の領域である、コンピュータ装置。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、プレイヤの頭部に装着する表示装置を用いた表示システム、表示方法、及び、コンピュータ装置に関する。

【背景技術】

【0002】

近年、ゲーム業界では、ヘッドマウントディスプレイ等を用いたＶＲ（Ｖｉｒｔｕａｌ Ｒｅａｌｉｔｙ）技術に注目が集まっている。例えば、ヘッドマウントディスプレイにゲーム内の仮想世界の映像を表示することで、仮想世界を現実世界のように感じさせることができ、ゲームへの没入感を高めることができる。そのため、ＶＲ技術は、ゲームの趣向性を向上させる技術として、期待がされている。

【0003】

例えば、特許文献１には、所定の規則に基づいて決定される視点位置と、ヘッドマウントディスプレイの姿勢に基づいて決定された視線方向とを用いて、ゲームフィールドの画像を生成し、生成したゲームフィールドの画像にゲームに関する情報などを追加して、ヘッドマウントディスプレイに表示する仮想空間の画像を生成することが開示されている。

【先行技術文献】

【特許文献】

【0004】

【特許文献1】特開２０１６−９３３６３号公報

【発明の概要】

【発明が解決しようとする課題】

【0005】

しかし、特許文献１のように、ヘッドマウントディスプレイに表示する仮想空間の画像にゲームに関する情報を表示すると、ヘッドマウントディスプレイに表示された画像が仮想空間のものだという認識が強くなり、ゲームへの没入感が薄れるおそれがある。一方で、例えば、ゲームキャラクタの名称や体力など、ゲームに関する情報を表示しない場合は、ユーザが不便に感じるおそれがある。

【0006】

本発明の少なくとも１つの実施の形態の目的は、ゲームへの没入感の低下を抑制しつつ、ゲームに関する情報などをユーザに提示することが可能な表示システム、表示装置、及び、表示方法を提供することである。

【課題を解決するための手段】

【0007】

非限定的な観点によると、プレイヤの頭部に装着することで利用される表示装置を備える表示システムであって、表示装置の向き及び／又は位置に応じて、仮想空間内の仮想カメラの視軸及び／又は位置を特定する仮想カメラ特定手段と、仮想カメラの視軸及び／又は位置に応じて、仮想空間内のオブジェクトを表示装置に表示する表示手段とを備え、表示手段が、仮想カメラ特定手段により特定された視軸上にオブジェクトが存在する場合に、オブジェクトに関連付けられた情報を追加して表示する、表示システムである。

【0008】

非限定的な観点によると、プレイヤの頭部に装着することで利用される表示装置と、コンピュータ装置とを備える表示システムにおいて実行される表示方法であって、表示装置の向き及び／又は位置に応じて、仮想空間内の仮想カメラの視軸及び／又は位置を特定する仮想カメラ特定ステップと、仮想カメラの視軸及び／又は位置に応じて、仮想空間内のオブジェクトを表示装置に表示する表示ステップとを備え、表示ステップが、仮想カメラ特定ステップにより特定された視軸上にオブジェクトが存在する場合に、オブジェクトに関連付けられた情報を追加して表示する、表示方法である。

【0009】

非限定的な観点によると、プレイヤの頭部に装着することで利用される表示装置と通信による接続が可能なコンピュータ装置であって、表示装置の向き及び／又は位置に応じて、仮想空間内の仮想カメラの視軸及び／又は位置を特定する仮想カメラ特定手段と、仮想カメラの視軸及び／又は位置に応じて、仮想空間内のオブジェクトを表示装置に表示する表示手段とを備え、表示手段が、仮想カメラ特定手段により特定された視軸上にオブジェクトが存在する場合に、オブジェクトに関連付けられた情報を追加して表示する、コンピュータ装置である。

【発明の効果】

【0010】

本発明の各実施形態により１または２以上の不足が解決される。

【図面の簡単な説明】

【0011】

【図1】本発明の実施の形態の少なくとも１つに対応する、システムの構成を示すブロック図である。

【図2】本発明の実施の形態の少なくとも１つに対応する、ディスプレイ装置の構成を示すブロック図である。

【図3】本発明の実施の形態の少なくとも１つに対応する、ディスプレイ装置を頭部に装着した場合にユーザの姿勢を特定するための直交座標系を示す図である。

【図4】本発明の実施の形態の少なくとも１つに対応する、コンピュータ装置の構成を示すブロック図である。

【図5】本発明の実施の形態の少なくとも１つに対応する、ゲーム実行画面の例である。

【図6】本発明の実施の形態の少なくとも１つに対応する、仮想空間の概念を表す図である。

【図7】本発明の実施の形態の少なくとも１つに対応する、プログラム実行処理のフローチャートである。

【図8】本発明の実施の形態の少なくとも１つに対応する、仮想空間におけるプレイヤの視線とオブジェクトの交差の概念を説明する図である。

【図9】本発明の実施の形態の少なくとも１つに対応する、仮想空間におけるプレイヤの視線とオブジェクトの交差の概念を説明する図である。

【図10】本発明の実施の形態の少なくとも１つに対応する、仮想世界におけるプレイヤの視線と交差判定を行う領域の設定方法を説明する図である。

【発明を実施するための形態】

【0012】

以下、添付図面を参照して、本発明の実施の形態について説明する。以下、効果に関する記載は、本発明の実施の形態の効果の一側面であり、ここに記載するものに限定されない。また、以下で説明するフローチャートを構成する各処理の順序は、処理内容に矛盾や不整合が生じない範囲で順不同である。

【0013】

本発明の実施の形態の概要について説明する。図１は、本発明の実施の形態の少なくとも１つに対応する、システムの構成を示すブロック図である。

【0014】

図１（ａ）は、システムの構成に関する１つの例を表す図である。システムは、センサを搭載したディスプレイ装置１と、光線を照射する照射装置２と、ディスプレイ装置１にて表示される画像を生成又は処理するコンピュータ装置３と、センサを搭載したコントローラ４とから構成される。

【0015】

ディスプレイ装置１は、視界を覆うようにして頭部に装着するゴーグル型の表示装置であることが好ましい。ディスプレイは高い透過率を有する透過型ディスプレイであっても、低い透過率を有する非透過型ディスプレイであってもよい。また、ディスプレイ装置１は、搭載された複数のセンサを用いて、ユーザの姿勢を特定することができる。ディスプレイ装置１の構成については後述する。

【0016】

照射装置２は、広範囲にレーザ光線を照射する装置である。照射装置２の周囲にレーザ光線が照射されると、ディスプレイ装置１及びコントローラ４に搭載された光センサによってレーザ光線が感知され、ディスプレイ装置１及びコントローラ４の位置を特定する。この位置特定方法は、「Ｌｉｇｈｔｈｏｕｓｅ方式」と呼ばれるものである。より正確に位置を特定するために、照射装置２は、所定の間隔を空けて少なくとも２台設置されることが好ましい。

【0017】

コンピュータ装置３は、ディスプレイ装置１及びコントローラ４と通信により接続可能である。通信は、有線又は無線によるものであってもよい。コンピュータ装置３は、ディスプレイ装置１と互いに独立した装置であってもよいし、ディスプレイ装置１に組み込まれた一体の装置であってもよい。

【0018】

コントローラ４は、ボタンとトリガを備え、ユーザの操作により入力を受け付ける入力装置である。また、光センサが搭載されており、照射装置２から照射されたレーザ光線を感知することができる。さらに、タッチセンサが搭載されており、ユーザの接触による入力を受け付けることができる。コントローラ４は、一対にして左右の手に把持して使用するものであるが、いずれか１つのみを使用するものであってもよい。

【0019】

図１（ｂ）は、図１（ａ）に示すシステムとは異なるシステムの構成に関する１つの例を表す図である。図１（ｂ）に示すシステムは、光源となる発光部を備えるディスプレイ装置５１と、ディスプレイ装置５１やコントローラ５４の光源となる発光部から発せられた光を撮影する撮影装置５２と、ディスプレイ装置５１にて表示される画像を生成又は処理するコンピュータ装置５３と、光源となる発光部を備えるコントローラ５４とから構成される。

【0020】

ディスプレイ装置５１は、ディスプレイ装置１と同様に、視界を覆うようにして頭部に装着するゴーグル型の表示装置であることが好ましい。ディスプレイは高い透過率を有する透過型ディスプレイであっても、低い透過率を有する非透過型ディスプレイであってもよい。

【0021】

撮影装置５２は、ディスプレイ装置５１及びコントローラ５４の光源となる発光部から発せられた光を撮影することにより、ディスプレイ装置５１及びコントローラ５４の位置を特定するための装置である。

【0022】

コンピュータ装置５３は、ディスプレイ装置５１及びコントローラ５４と通信により接続可能である。通信は、有線又は無線によるものであってもよい。

【0023】

コントローラ５４は、ボタンを備え、ユーザの操作により入力を受け付ける入力装置である。光源となる発光部を備え、コントローラ５４から発せられた光を撮影装置５２が撮影することにより、コントローラ５４の位置を特定する。コントローラは手に把持するものであり、対にして使用することが好ましいが、１つのコントローラを使用するものとしてもよい。

【0024】

以下の説明において、本発明の実施の形態においては、図１（ａ）に示した方式により、ディスプレイ装置１及びコントローラ４の位置を特定するものとする。しかし、本発明はこの方式に限定されない。例えば、図１（ｂ）に示した方式や、頭部以外の身体の一部に装着し、ディスプレイ装置１及びコントローラ４の位置を特定するものであってもよい。

【0025】

ディスプレイ装置１に表示される画像は、ディスプレイ装置１に搭載されたセンサにより測定された値、及び、コントローラ４へのユーザの入力操作に基づいて、コンピュータ装置３により生成又は処理された画像である。

【0026】

ここで、ディスプレイ装置１の構成について説明する。図２は、本発明の実施の形態の少なくとも１つに対応する、ディスプレイ装置の構成を示すブロック図である。ディスプレイ装置１は、制御部１１、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）１２、ストレージ部１３、撮像部１４、グラフィックス処理部１５、表示部１６、センサ部１８、通信インタフェース１９、インタフェース部２０、及びレンズ２１からなり、それぞれ内部バスにより接続されている。

【0027】

制御部１１は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）やＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）から構成される。制御部１１は、ストレージ部１３に格納されたプログラムを実行し、ディスプレイ装置１の制御を行う。ＲＡＭ１２は、制御部１１のワークエリアである。ストレージ部１３は、プログラムやデータを保存するための記憶領域である。

【0028】

制御部１１は、プログラム及びデータをＲＡＭ１２及びストレージ部１３から読み出して処理を行う。制御部１１は、ＲＡＭ１２にロードされたプログラム及びデータを処理することで、描画命令をグラフィックス処理部１５に出力する。さらに、制御部１１は、センサ部１８において測定された各種の値に基づいて処理を行う、あるいは、インタフェース部２０を介してコンピュータ装置３へデータを送信する。

【0029】

撮像部１４は、レンズ２１を介して撮影した画像をグラフィックス処理部１５へ出力する。ディスプレイ装置１を頭部に装着することによって視界が覆われる場合には、装置外部の情報を確認することができないため、撮像部１４により撮像された情報を、後述する表示部１６が備える表示画面１７に表示させることで、ユーザは現実空間を認識することができ、安全性を確保することができる。

【0030】

グラフィックス処理部１５は、フレーム単位で１枚の画像の描画を実行する。画像の１フレーム時間は、例えば３０分の１秒である。グラフィックス処理部１５は、描画に関する演算処理の一部を受け持ち、システム全体の負荷を分散させる役割を有する。

【0031】

表示部１６は、表示画面１７を備え、ユーザの視界を覆うディスプレイ装置１のゴーグル内部に設置される。表示画面１７は、例えば、有機ＥＬや無機ＥＬが使用されるが、これに限定されるものではない。

【0032】

センサ部１８は、近接センサ１８ａ、赤外線センサ１８ｂ、ジャイロセンサ１８ｃ、及び、加速度センサ１８ｄを少なくとも備える。近接センサ１８ａは、ディスプレイ装置１のゴーグル部分に設置され、ユーザの顔部との接触有無を判定するために用いる。赤外線センサ１８ｂは、ディスプレイ装置１に複数設置されるものであり、照射装置２から照射された光線を感知することで、ディスプレイ装置１の位置を特定するために用いる。ジャイロセンサ１８ｃ、及び加速度センサ１８ｄは、ユーザの姿勢を特定するために用いる。

【0033】

ここで、図を用いてユーザの姿勢の特定方法について説明する。図３は、本発明の実施の形態の少なくとも１つに対応する、ディスプレイ装置を頭部に装着した場合にユーザの姿勢を特定するための直交座標系を示す図である。

【0034】

図示するように、ディスプレイ装置１を装着したユーザの頭部を中心にして、ＸＹＺ座標を規定する。ユーザが直立する垂直方向をＹ軸（ヨー角）、Ｙ軸と直交し、かつ、ディスプレイ装置１の表示画面１７の中心とユーザの頭部とを結ぶ方向をＺ軸（ロール角）、Ｙ軸及びＺ軸と直交する方向をＸ軸（ピッチ角）とする。ジャイロセンサ１８ｃでは、各軸回りの角度（傾き）を検出し、加速度センサ１８ｄでは、ディスプレイ装置１の動きを検知する。検出された角度及び検知された動きに応じて、表示画面１７に表示される画像を変化させる。ディスプレイ装置１は、複数のセンサにより測定された値（以下、姿勢情報という）を用いて、ユーザの姿勢を特定することができる。

【0035】

続いて、通信インタフェース１９は、無線又は有線により通信回線５に接続が可能であり、通信回線５を介してデータを受信することが可能である。通信インタフェース１９を介して受信したデータは、ＲＡＭ１２にロードされ、制御部１１により演算処理が行われる。

【0036】

インタフェース部２０は、主にコンピュータ装置３と接続され、コンピュータ装置３において処理又は生成された画像等のデータを受信することができる。また、センサ部１８において取得した各種センサの測定値をコンピュータ装置３へ送信することもできる。

【0037】

続いて、コンピュータ装置３について説明する。図４は、本発明の実施の形態の少なくとも１つに対応する、コンピュータ装置の構成を示すブロック図である。コンピュータ装置３は、制御部３１、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）３２、ストレージ部３３、サウンド処理部３４、グラフィックス処理部３５、ＤＶＤ／ＣＤ−ＲＯＭドライブ３６、通信インタフェース３７、インタフェース部３８、及びフレームメモリ３９からなり、それぞれ内部バスにより接続されている。

【0038】

制御部３１は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）やＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）から構成される。制御部３１は、ストレージ部３３に格納されたプログラムを実行し、コンピュータ装置３の制御を行う。ＲＡＭ３２は、制御部３１のワークエリアである。ストレージ部３３は、プログラムやデータを保存するための記憶領域である。

【0039】

制御部３１は、プログラム及びデータをＲＡＭ３２から読み出して処理を行なう。制御部３１は、ＲＡＭ３２にロードされたプログラム及びデータを処理することで、描画命令をグラフィックス処理部３５に出力する。

【0040】

サウンド処理部３４は、サウンド出力装置４０に接続されている。制御部３１がサウンド出力の指示をサウンド処理部３４に出力すると、サウンド処理部３４はサウンド出力装置４０にサウンド信号を出力する。サウンド出力装置４０は、例えば、ヘッドフォンであり、ユーザがディスプレイ装置１とともに頭部に装着してもよいし、スピーカがディスプレイ装置１に組み込まれていてもよい。

【0041】

グラフィックス処理部３５は、フレーム単位で１枚の画像の描画を実行する。画像の１フレーム時間は、例えば９０分の１秒である。グラフィックス処理部３５は描画に関する演算処理の一部を受け持ち、システム全体の負荷を分散させる役割を有する。コンピュータ装置３のグラフィックス処理部３５は、ディスプレイ装置１の位置情報及び姿勢情報と、コントローラ４の位置情報とに基づいて、表示画面１７に表示する画像を生成するため、ディスプレイ装置１に含まれるグラフィックス処理部１５よりも高い性能を要する。

【0042】

ＤＶＤ／ＣＤ−ＲＯＭドライブ３６は、ディスク４１からデータを読み込み、ＲＡＭ３２にロードされ、制御部３１により演算処理が行われる。なお、ディスク４１の種類はＤＶＤ又はＣＤに限らず、Ｂｌｕ−ｒａｙ（登録商標）ディスクやその他の規格であってもよい。

【0043】

通信インタフェース３７は無線又は有線により通信回線５に接続が可能であり、通信回線５を介してデータを受信することが可能である。通信インタフェース３７を介して受信したデータは、ディスク４１から読み込まれたデータと同様に、ＲＡＭ３２にロードされ、制御部３１により演算処理が行われる。

【0044】

インタフェース部３８は、主にディスプレイ装置１と接続され、コンピュータ装置３において処理又は生成された画像等のデータを送信することができる。

【0045】

なお、上述の説明において、ディスプレイ装置１とコンピュータ装置３とは別装置として記載したが、ディスプレイ装置１によりコンピュータ装置３の処理をすべて行うこととしてもよい。この場合には、コンピュータ装置３は不要となり、コントローラ４はディスプレイ装置１と通信により接続される。

【0046】

続いて、本発明の実施の形態におけるプログラム実行処理について説明する。本発明の実施の形態の一例として、仮想世界において敵キャラクタと仮想戦闘を行うゲームで、プレイヤが所有するカードを選択することで、プレイヤキャラクタの行動を決定し、仮想戦闘を進行させるゲームが挙げられる。プレイヤは、一人のプレイヤキャラクタを操作するようにしてもよいし、複数人のプレイヤキャラクタからなるチームを操作するようにしてもよい。プレイヤが所有するカードは、プレイヤアカウントに直接、あるいは、プレイヤキャラクタと関連付けられて記憶される。

【0047】

図５は、本発明の実施の形態の少なくとも１つに対応する、ゲーム実行画面の例である。表示画面１７には、仮想戦闘の状況が映しだされており、敵キャラクタ１０１と、システム指示情報１０２と、プレイヤキャラクタが使用可能であり、且つ、複数のキャラクタを模した、プレイヤにより選択される選択肢となるカード群１０３と、仮想世界におけるプレイヤの手部１０４とが少なくとも表示される。図示しないが、プレイヤキャラクタは、プレイヤキャラクタの体力を表す値（以下、体力値という）を有しており、体力値がなくなると戦闘不能状態となりゲームが終了する。また、敵キャラクタ１０１の生命力（非図示）がなくなると敵キャラクタは戦闘不能となり、プレイヤが勝利したと判定してゲームが終了する。

【0048】

プレイヤは、コントローラ４を操作することにより、仮想世界内のプレイヤキャラクタに対して行動を指示する。コントローラ４の操作とは、例えば、コントローラ４の位置及び傾きを変更させる操作、あるいは、コントローラ４のボタン等に対する押下又は接触操作をいう。コントローラ４の位置及び傾きの変化情報を入力情報とすることで、プレイヤは直感的な操作を行うことができ、よりゲームに集中することができる。

【0049】

本発明の実施の形態の前提として、プログラムが実行されると、コンピュータ装置３の制御部３１は、プログラムによって定義される仮想空間をグラフィックス処理部３５に出力させる。また、ディスプレイ装置１を頭に装着したプレイヤの位置、及び、コントローラ４の位置を、照射装置２から照射された光線を受光した位置及び方向に基づいて特定する。さらに、ディスプレイ装置１のセンサ部１８の各種センサの測定値により、ディスプレイ装置１の姿勢を特定する。

【0050】

図６は、本発明の実施の形態の少なくとも１つに対応する、仮想空間の概念を表す図である。プログラムにより定義される仮想空間７０が、図示するように半球状の空間で表される場合に、ディスプレイ装置１を頭部に装着したプレイヤ８０の視野は、可視領域８１に該当する。すなわち、可視領域８１に該当する映像が、ディスプレイ装置１の表示画面１７に表示される。例えば、プレイヤ８０が左を向けば、プレイヤ８０の動きにしたがって、可視領域８１は左側に移動する。上下方向についても同様に、例えば、プレイヤ８０が上を向けば、プレイヤ８０の動きにしたがって、可視領域８１は上側に移動する。

【0051】

続いて、情報を表示する処理について説明する。図７は、本発明の実施の形態の少なくとも１つに対応する、プログラム実行処理のフローチャートである。最初に、ディスプレイ装置１の姿勢情報を測定する（ステップＳ１）。姿勢情報は、ディスプレイ装置１のセンサ部１８に含まれる各種センサにより測定される。

【0052】

次に、ディスプレイ装置１に搭載された光センサが照射装置２から照射されたレーザ光線を感知し、ディスプレイ装置１の位置及び向きを特定する（ステップＳ２）。ステップＳ１及びステップＳ２の処理は、所定の間隔毎に行い、測定又は特定の都度、コンピュータ装置３へ送信して、ディスプレイ装置１の表示画面１７において表示する表示用画像を生成してもよい。

【0053】

ステップＳ１において測定された姿勢情報、及び、ステップＳ２において特定された向き及び位置に関する情報をコンピュータ装置３へ送信する（ステップＳ３）。コンピュータ装置３は、情報を受信し（ステップＳ４）、ステップＳ１において測定された姿勢情報、及び、ステップＳ２において特定された位置情報に基づいて、仮想空間におけるプレイヤの視線を特定する（ステップＳ５）。

【0054】

仮想空間におけるプレイヤの視線とは、ディスプレイ装置１の姿勢情報（水平面に対する傾きに関する情報）、位置に関する情報、及び向きに関する情報（水平面に平行な平面上でどの方向を向いているかに関する情報）に基づいて特定される、可視領域８１において、プレイヤが仮想空間内で見ていると推測される方向である。例えば、ディスプレイ装置１の位置に仮想カメラの視点を設定し、ディスプレイ装置１の向きをもとに、視点を始点として、仮想世界における水平面に平行な平面上でどの方向へ視線が向いているかを特定し、ディスプレイ装置１の姿勢情報をもとに、該水平面に対する視線の傾きを特定することができる。このようにすることで、プレイヤに意識させることなく、仮想世界において、プレイヤが見ていると推測される方向に存在するオブジェクトを、ディスプレイ装置１に表示させることができ、プレイヤの利便性が向上するとともに、より仮想世界に没入することができる。

【0055】

ところで、ディスプレイ装置１が、ディスプレイ装置１を装着したユーザの視線を追跡することができる機能を有するようにしてもよい。この場合には、眼球の動作から視線を算出することができる。

【0056】

次に、ステップＳ５において特定されたプレイヤの視線が、仮想空間内のオブジェクトと交差しているか判定する（ステップＳ６）。オブジェクトとは、キャラクタ、敵キャラクタ、アイテム、あるいは、仮想空間に表示される物体等をいう。

【0057】

プレイヤの視線が仮想空間内のオブジェクトと交差していると判定された場合（ステップＳ６においてＹＥＳ）には、コンピュータ装置３のストレージ部３３に記憶された情報、ディスク４１から読み込まれた情報、通信インタフェース３７から読み込まれた情報、あるいは、インタフェース部３８から読み込まれた情報から、キャラクタに関連する情報のうち表示すると設定された情報を抽出し（ステップＳ７）、抽出された情報を含めて表示する画像を生成する（ステップＳ８）。プレイヤの視線が仮想空間内のオブジェクトと交差していないと判定された場合（ステップＳ６においてＮＯ）には、情報を抽出することなく、表示する画像を生成する（ステップＳ８）。

【0058】

続いて、コンピュータ装置３は、生成された画像をディスプレイ装置１へ送信する（ステップＳ９）。ディスプレイ装置１は、画像を受信し（ステップＳ１０）、受信した画像を表示画面１７に表示して（ステップＳ１１）、終了する。

【0059】

なお、ステップＳ６においてオブジェクトと交差していると判定され、ステップＳ８において情報を追加された画像が生成された後に、プレイヤがディスプレイ装置１の位置及び向きを変化させることによって、ステップＳ６において視線が交差していないと判定された場合には、追加されて表示されていた情報が削除され、ステップＳ８において画像が生成されることとなる。つまり、プレイヤがオブジェクトから視線を逸らすと、オブジェクトに関する情報が非表示となる。

【0060】

ここで、プレイヤの視線とオブジェクトとの交差について説明する。図８は、本発明の実施の形態の少なくとも１つに対応する、仮想空間におけるプレイヤの視線とオブジェクトの交差の概念を説明する図である。交差とは、視線と、オブジェクトを形成する境界面とが交差することをいい、線と面とが接することも含む概念である。

【0061】

図８（ａ）は、仮想戦闘におけるプレイヤの視線とキャラクタとが交差していない状況の例である。表示画面１７には、プレイヤキャラクタ以外のキャラクタ１１１、敵キャラクタ１１２、及び、プレイヤの視線方向を示す点１１３が表示される。点１１３が表示されると仮想世界に没入することを妨げるため、点１１３は表示画面上で非表示であってもよい。

【0062】

図８（ｂ）は、図８（ａ）の状況におけるキャラクタ１１１及び１１３の位置関係を模式化して俯瞰した図である。ディスプレイ装置１を装着したプレイヤの正面方向には、プレイヤから所定の距離を隔てて、視線方向を示す点１１３が表示される。さらに、キャラクタ１１１には、プレイヤの視線と交差した場合に情報を表示するか否かの交差判定を行うための判定領域１１４が予め設定されている。ディスプレイ装置１と点１１３とを結ぶ線１１５は、プレイヤが仮想空間内で見ていると推測される方向を表す線である。ステップＳ６における交差判定は、キャラクタ１１１に設定された判定領域１１４と、線１１５とが交差しているか否かにより判定されるものである。

【0063】

図９は、本発明の実施の形態の少なくとも１つに対応する、仮想空間におけるプレイヤの視線とオブジェクトの交差の概念を説明する図である。図９（ａ）は、仮想戦闘におけるプレイヤの視線とキャラクタとが交差している状況の例である。表示画面１７には、プレイヤキャラクタ以外のキャラクタ１１１、敵キャラクタ１１２、プレイヤの視線方向を示す点１１３、及び、視線がキャラクタ１１１と交差した結果表示された、キャラクタ１１１に関する情報１１６が表示される。

【0064】

図９（ｂ）は、図９（ａ）の状況におけるキャラクタ１１１及び１１３の位置関係を模式化して俯瞰した図である。ディスプレイ装置１を装着したプレイヤの正面方向には、プレイヤから所定の距離を隔てて、視線方向を示す点１１３が表示される。さらに、キャラクタ１１１には判定領域１１４が予め設定されている。ディスプレイ装置１と点１１３とを結ぶ線１１５は、プレイヤが仮想空間内で見ていると推測される方向を表す線である。

【0065】

図９（ｂ）では、点１１３をプレイヤからキャラクタ１１１までの距離より遠い位置に図示したが、図９（ａ）では、点１１３をキャラクタ１１１より手前に図示している。プレイヤの視線がキャラクタ１１１と交差していると判定されると、表示画面１７には、キャラクタ１１１に関する情報１１６が表示される。情報１１６には、例えば、キャラクタの名前、属性、キャラクタの調子を表すアイコン、キャラクタの体力を表す体力値、キャラクタの気力を表す気力値等が含まれる。

【0066】

情報１１６は、現実世界では見えない情報ではあるが、ゲームを進行させるうえでは必要な情報であるため、視線を対象に向けた場合にだけ表示されることが好ましい。このようにすることで、プレイヤの没入感を損なうことなく、より趣向性の高い画面表示制御を行うことが可能となる。

【0067】

さらに、プレイヤの視線と交差した場合に情報を表示するための交差判定を行う判定領域１１４の設定について説明する。図１０は、本発明の実施の形態の少なくとも１つに対応する、仮想世界におけるプレイヤの視線と交差判定を行う領域の設定方法を説明する図である。

【0068】

図１０（ａ）は、人型のキャラクタに対して設定された判定領域１１４を表す。判定領域１１４は、キャラクタの形状に沿って判定領域を設定することが好ましいが、形状が複雑化することで判定処理の負荷が増大すること、及び、判定領域を設定する人的コストの観点から困難である。

【0069】

そこで、図示するように、人型キャラクタを包含する球体を定義して、判定領域１１４とすることができる。球の中心点は、人型キャラクタの大きさを表す座標位置から算出してもよいし、人型キャラクタがポリゴンにより表示される場合には、特定のボーンの頂点を中心点としてもよい。このようにすることで、違和感なくキャラクタへの視線を判定することができ、かつ、判定処理の負荷を軽減することができる。

【0070】

一方、極端に一方向に長いキャラクタ等においては、判定領域を、球体として設定してしまうと、キャラクタとは遠く離れた空間にまで判定領域を広げてしまい、キャラクタが明らかに存在しない空間においても、キャラクタに関連する情報が追加で表示されてしまうことになり、プレイヤに違和感を与えることとなり得る。そこで、図１０（ｂ）に示すように、身体の部位毎に複数の判定領域１１４を設定することができる。具体的には、頭部、胴体部、左右の腕部、左右の脚部にそれぞれ判定領域１１４ａ〜１１４ｅを設定する。このようにすることで、判定処理の負荷及び開発コストを抑えつつ判定領域１１４を設定することができ、プレイヤに違和感を与えることなく情報を表示することができる。

【0071】

なお、三次元空間における線分と物体の交差判定には、例えば、レイトレーシング法において物体とレイ（光線）との交点を求めるための方法を用いることができる。その他の方法によっても可能であり、本発明においては交差判定の方法により限定されるものではない。

【0072】

本発明の実施の形態を適用可能なゲームとして、例えば、複数のキャラクタが登場するようなロールプレイングゲーム（ＲＰＧ）や、宝探しのように仮想世界に存在するオブジェクトの情報をプレイヤが知ることで進めるゲームが好ましいが、これに限定されない。また、インターネットを介して不特定多数のプレイヤが参加するＭＭＯ（Ｍａｓｓｉｖｅｌｙ Ｍｕｌｔｉｐｌａｙｅｒ Ｏｎｌｉｎｅ）型のゲームにも適用可能である。

【0073】

本発明の実施の形態では、ディスプレイ装置１及びコントローラ４の位置を特定するための光線はレーザ光線であって、例えば、赤外線が挙げられるが、光線はこれに限定されず、可視光線であってもよいし、不可視光線であってもよい。

【0074】

本発明の実施の形態では、視線とオブジェクトが交差した場合に、視認可能な態様で画像を生成する例を挙げたが、本発明はこれに限定されない。すなわち、人の知覚により認識することができる態様であればよく、例えば、視線とオブジェクトが交差した場合に、聴覚により認識可能な態様で発音するようにしてもよい。

【0075】

本発明の実施の形態の一側面として、プレイヤの視線とオブジェクトとが交差した場合に、情報を表示させることで、プレイヤのゲームへの没入感の低下を抑制することができる。

【0076】

本発明の実施の形態の一側面として、交差判定の領域を球体とすることで、判定処理の負荷を軽減し、判定領域を設定するコストを軽減することができる。

【0077】

本発明の実施の形態において、「ディスプレイ装置」とは、例えば、ヘッドマウントディスプレイ（ＨＭＤ）と呼ばれる装置が挙げられる。「頭部に装着」とは、例えば、帽子のように頭に被ること、眼鏡のように顔に付けること、あるいは、その他頭部の一部に付着させることをいい、身体の一部から延長させて頭部を覆うような場合も含む概念である。「向き」とは、例えば、単に物体の方向や角度だけでなく、加速度のような単位時間の変化量に関する方向を含む概念である。「仮想空間」とは、例えば、プログラム及びデータにより定義される空間であって、コンピュータにより生成される仮想的な空間をいう。

【0078】

本発明の実施の形態において、「照射装置」とは、例えば、所定の範囲内に光を照射する装置であって、範囲の広狭は問わない。「仮想カメラ」とは、例えば、コンピュータグラフィックスを描くときの視点又は画角をカメラに例えたものをいう。「視軸」とは、例えば、仮想カメラの視線の軸をいう。「オブジェクト」とは、例えば、仮想空間内に存在する有形の物体をいう。

【0079】

「オブジェクトに関連付けられた情報」とは、例えば、他のキャラクタの体力、状態、属性等の情報や、アイテムに関する情報、その他オブジェクトデータに関連する情報をいう。「オブジェクトに関連付けられた情報を追加」とは、例えば、付加された情報を人の知覚により認識できる態様で追加することをいう。「基準点」とは、例えば、オブジェクトを包含する球体の中心点をいう。

【0080】

［付記］
上で述べた実施の形態の説明は、下記の発明を、発明の属する分野における通常の知識を有する者がその実施をすることができるように記載した。

【0081】

［１］ プレイヤの頭部に装着することで利用される表示装置を備える表示システムであって、
表示装置の向き及び／又は位置に応じて、仮想空間内の仮想カメラの視軸及び／又は位置を特定する仮想カメラ特定手段と、
仮想カメラの視軸及び／又は位置に応じて、仮想空間内のオブジェクトを表示装置に表示する表示手段とを備え、
表示手段が、
仮想カメラ特定手段により特定された視軸上にオブジェクトが存在する場合に、オブジェクトに関連付けられた情報を追加して表示する、表示システム。

【0082】

［２］ オブジェクトに所定の領域が設定されており、
オブジェクトについて設定された所定の領域と、仮想カメラの視軸が交差するか否かを判定する交差判定手段とを備え、
表示手段が、
交差判定手段により、所定の領域と視軸が交差すると判定された場合に、視軸上にオブジェクトが存在するとして、オブジェクトに関連付けられた情報を追加して表示する、
［１］に記載の表示システム。

【0083】

［３］ 表示手段が、
交差判定手段により、所定の領域と視軸が交差すると判定された後に、仮想カメラの視軸及び／又は位置が変化することにより、所定の領域と視軸が交差しないと判定された場合に、表示されていたオブジェクトに関連付けられた情報を非表示にする、
［１］又は［２］に記載の表示システム。

【0084】

［４］ オブジェクトに設定された所定の領域が、オブジェクトに設定された基準点を中心とする球である、［１］〜［３］のいずれかに記載の表示システム。

【0085】

［５］ プレイヤの頭部に装着することで利用される表示装置と、コンピュータ装置とを備える表示システムにおいて実行される表示方法であって、
表示装置の向き及び／又は位置に応じて、仮想空間内の仮想カメラの視軸及び／又は位置を特定する仮想カメラ特定ステップと、
仮想カメラの視軸及び／又は位置に応じて、仮想空間内のオブジェクトを表示装置に表示する表示ステップとを備え、
表示ステップが、
仮想カメラ特定ステップにより特定された視軸上にオブジェクトが存在する場合に、オブジェクトに関連付けられた情報を追加して表示する、表示方法。

【0086】

［６］ プレイヤの頭部に装着することで利用される表示装置と通信による接続が可能なコンピュータ装置であって、
表示装置の向き及び／又は位置に応じて、仮想空間内の仮想カメラの視軸及び／又は位置を特定する仮想カメラ特定手段と、
仮想カメラの視軸及び／又は位置に応じて、仮想空間内のオブジェクトを表示装置に表示する表示手段とを備え、
表示手段が、
仮想カメラ特定手段により特定された視軸上にオブジェクトが存在する場合に、オブジェクトに関連付けられた情報を追加して表示する、コンピュータ装置。

【符号の説明】

【0087】

１ ディスプレイ装置
１１ 制御部
１２ ＲＡＭ
１３ ストレージ部
１４ 撮像部
１５ グラフィックス処理部
１６ 表示部
１７ 表示画面
１８ センサ部
１８ａ 近接センサ
１８ｂ 赤外線センサ
１８ｃ ジャイロセンサ
１８ｄ 加速度センサ
１９ 通信インタフェース
２ 照射装置
２０ インタフェース部
２１ レンズ
３ コンピュータ装置
３１ 制御部
３２ ＲＡＭ
３３ ストレージ部
３４ サウンド処理部
３５ グラフィックス処理部
３６ ＤＶＤ／ＣＤ−ＲＯＭドライブ
３７ 通信インタフェース
３８ インタフェース部
３９ フレームメモリ
４ コントローラ
４０ サウンド出力装置
４１ ディスク
５ 通信回線
５１ ディスプレイ装置
５２ 撮影装置
５３ コンピュータ装置
５４ コントローラ

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】