ホーム > 特許ランキング > 株式会社Ｇ１ｃｏｍｐａｎｙ
知財求人 - 知財ポータルサイト「IP Force」
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】公開特許公報(A)
(11)【公開番号】P2024017782
(43)【公開日】2024-02-08
(54)【発明の名称】コンピュータプログラム及びサーバ
(51)【国際特許分類】
G06T 19/00 20110101AFI20240201BHJP
G06F 3/01 20060101ALI20240201BHJP
【ＦＩ】
G06T19/00 300B
G06F3/01 510
G06F3/01 570
【審査請求】未請求
【請求項の数】12
【出願形態】ＯＬ
(21)【出願番号】P 2022120659
(22)【出願日】2022-07-28
(71)【出願人】
【識別番号】522093432
【氏名又は名称】株式会社Ｇ１ｃｏｍｐａｎｙ
(74)【代理人】
【識別番号】100122725
【弁理士】
【氏名又は名称】竹口 美穂
(72)【発明者】
【氏名】小柴 恵一
【テーマコード（参考）】
5B050
5E555
【Ｆターム（参考）】
5B050BA09
5B050BA13
5B050CA07
5B050CA08
5B050EA07
5B050FA06
5B050FA13
5E555AA63
5E555AA64
5E555AA76
5E555BE17
5E555CA42
5E555CA44
5E555CB45
5E555CB66
5E555CC05
5E555DA08
5E555DB41
5E555DB57
5E555DC13
5E555DD06
5E555DD07
5E555EA07
5E555FA00
(57)【要約】
【課題】本発明の課題は、ヘッドマウントディスプレイに表示される仮想空間内の空間画像における、ユーザの興味を惹く特定の対象物の対象物情報をユーザに提供することができるコンピュータプログラム及びサーバを提供する。
【解決手段】上記課題解決のため、本発明のプログラムは、ユーザの頭部に装着されるＨＭＤ１に仮想空間を表示するためのコンピュータ（プロッセサ１０）を、少なくとも一つの対象物が含まれた空間画像を前記仮想空間に表示させる画像表示手段１０１、現実空間における前記ユーザの身体の少なくとも一部の姿勢及び／又は動作に基づいて、空間画像における位置を特定する位置特定手段１０２、この特定された位置に対象物が表示されている場合に、この対象物を特定する対象物特定手段１０３、及びこの特定された対象物に関する情報である対象物情報を、情報処理装置を介して、ユーザに提供させる提供手段１０４として機能させる。
【選択図】図２
【解決手段】上記課題解決のため、本発明のプログラムは、ユーザの頭部に装着されるＨＭＤ１に仮想空間を表示するためのコンピュータ（プロッセサ１０）を、少なくとも一つの対象物が含まれた空間画像を前記仮想空間に表示させる画像表示手段１０１、現実空間における前記ユーザの身体の少なくとも一部の姿勢及び／又は動作に基づいて、空間画像における位置を特定する位置特定手段１０２、この特定された位置に対象物が表示されている場合に、この対象物を特定する対象物特定手段１０３、及びこの特定された対象物に関する情報である対象物情報を、情報処理装置を介して、ユーザに提供させる提供手段１０４として機能させる。
【選択図】図２
【特許請求の範囲】
【請求項1】
ユーザの頭部に装着されるヘッドマウントディスプレイに仮想空間を表示するためのコンピュータを、
少なくとも一つの対象物が含まれた空間画像を前記仮想空間に表示させる画像表示手段、
前記現実空間における前記ユーザの身体の少なくとも一部の姿勢及び／又は動作に基づいて、前記空間画像における位置を特定する位置特定手段、
前記位置特定手段によって特定された位置に前記対象物が表示されている場合に、この対象物を特定する対象物特定手段、及び
前記対象物特定手段に特定された対象物に関する情報である対象物情報をユーザに提供する提供手段、
として機能させることを特徴とするコンピュータプログラム。
少なくとも一つの対象物が含まれた空間画像を前記仮想空間に表示させる画像表示手段、
前記現実空間における前記ユーザの身体の少なくとも一部の姿勢及び／又は動作に基づいて、前記空間画像における位置を特定する位置特定手段、
前記位置特定手段によって特定された位置に前記対象物が表示されている場合に、この対象物を特定する対象物特定手段、及び
前記対象物特定手段に特定された対象物に関する情報である対象物情報をユーザに提供する提供手段、
として機能させることを特徴とするコンピュータプログラム。
【請求項2】
前記対象物情報は、前記対象物の取得又は利用を前記ユーザに促すための広告情報を含む、
ことを特徴とする請求項１に記載のコンピュータプログラム。
ことを特徴とする請求項１に記載のコンピュータプログラム。
【請求項3】
前記位置特定手段は、前記現実空間において、前記ユーザの身体の少なくとも一部で指示姿勢及び／又は動作がされたときに、前記仮想空間において、所定位置から前記指示姿勢の指し示す方向に対応する方向にある位置を、前記空間画像における位置として特定し、
前記対象物特定手段は、前記位置特定手段によって特定された位置に前記対象物が表示されている場合に、当該対象物が選択状態であることを表示し、前記現実空間において、前記ユーザの身体の少なくとも一部で所定の取得姿勢及び／又は所定の取得動作がなされた場合に、前記選択状態である対象物を特定する、
ことを特徴とする請求項１又は２に記載のコンピュータプログラム。
前記対象物特定手段は、前記位置特定手段によって特定された位置に前記対象物が表示されている場合に、当該対象物が選択状態であることを表示し、前記現実空間において、前記ユーザの身体の少なくとも一部で所定の取得姿勢及び／又は所定の取得動作がなされた場合に、前記選択状態である対象物を特定する、
ことを特徴とする請求項１又は２に記載のコンピュータプログラム。
【請求項4】
前記対象物特定手段は、前記選択状態の対象物に対応付けて、前記対象物情報の一部を仮想空間に表示することで、当該対象物が選択状態であることを表示する、
ことを特徴とする請求項３に記載のコンピュータプログラム。
ことを特徴とする請求項３に記載のコンピュータプログラム。
【請求項5】
空間動画データの再生によって前記空間画像が表示され、この空間画像データの再生時間に応じて表示される前記空間画像が変化し、
前記対象物特定手段は、前記再生時間に応じた、前記仮想空間における前記対象物の表示される位置を示す位置情報に基づいて、前記対象物特定手段によって特定された位置に前記対象物が表示されているかどうかを判断する、
ことを特徴とする請求項１又は２に記載のコンピュータプログラム。
前記対象物特定手段は、前記再生時間に応じた、前記仮想空間における前記対象物の表示される位置を示す位置情報に基づいて、前記対象物特定手段によって特定された位置に前記対象物が表示されているかどうかを判断する、
ことを特徴とする請求項１又は２に記載のコンピュータプログラム。
【請求項6】
前記コンピュータは、サーバに通信可能に接続されたヘッドマウントディスプレイ、又は情報処理装置のコンピュータであり、
前記提供手段は、前記対象物が特定された場合に、前記対象物情報の送信要求を前記サーバに対して送信し、前記対象物情報の送信要求に応じた前記サーバから前記対象物情報を受信することで、前記対象物情報を前記ユーザに提供するために、前記対象物情報を前記ヘッドマウントディスプレイ又は前記情報処理装置に取得させる、
ことを特徴とする請求項１又は２に記載のコンピュータプログラム。
前記提供手段は、前記対象物が特定された場合に、前記対象物情報の送信要求を前記サーバに対して送信し、前記対象物情報の送信要求に応じた前記サーバから前記対象物情報を受信することで、前記対象物情報を前記ユーザに提供するために、前記対象物情報を前記ヘッドマウントディスプレイ又は前記情報処理装置に取得させる、
ことを特徴とする請求項１又は２に記載のコンピュータプログラム。
【請求項7】
ユーザの頭部に装着されて仮想空間を表示するヘッドマウントディスプレイ、又は当該ヘッドマウントディスプレイに対応する情報処理装置に、ネットワークを介して通信可能に接続され、記憶部を備えたサーバであって、
前記ヘッドマウントディスプレイにおいて、少なくとも一つの対象物が含まれた空間画像を前記仮想空間に表示させるための処理を行う表示処理手段、
現実空間における前記ユーザの身体の少なくとも一部の姿勢及び／又は動作に基づいて特定された前記空間画像の位置において、前記対象物が表示されている場合に、この対象物を特定の対象物として、前記特定の対象物に関連する対象物情報の送信要求を、前記ヘッドマウントディスプレイ、又は前記情報処理装置から受信する情報受信処理手段、
前記情報受信手段によって前記対象物情報の送信要求を受信した場合に、前記記憶部に記憶された前記対象物情報を、前記ユーザに提供するために、前記ヘッドマウントディスプレイ又は前記情報処理装置に対して送信する情報送信処理手段、
を備えたサーバ。
前記ヘッドマウントディスプレイにおいて、少なくとも一つの対象物が含まれた空間画像を前記仮想空間に表示させるための処理を行う表示処理手段、
現実空間における前記ユーザの身体の少なくとも一部の姿勢及び／又は動作に基づいて特定された前記空間画像の位置において、前記対象物が表示されている場合に、この対象物を特定の対象物として、前記特定の対象物に関連する対象物情報の送信要求を、前記ヘッドマウントディスプレイ、又は前記情報処理装置から受信する情報受信処理手段、
前記情報受信手段によって前記対象物情報の送信要求を受信した場合に、前記記憶部に記憶された前記対象物情報を、前記ユーザに提供するために、前記ヘッドマウントディスプレイ又は前記情報処理装置に対して送信する情報送信処理手段、
を備えたサーバ。
【請求項8】
前記対象物情報は、前記対象物の取得又は利用を前記ユーザに促すための広告情報を含む、
ことを特徴とする請求項７に記載のサーバ。
ことを特徴とする請求項７に記載のサーバ。
【請求項9】
前記現実空間において、前記ユーザの身体の少なくとも一部で指示姿勢及び／又は動作がされたときに、前記仮想空間の所定位置から、前記指示姿勢の指し示す方向に対応する方向にある位置が、前記空間画像における位置として特定され、
前記特定された位置に前記対象物が表示されている場合に、当該対象物が選択状態であることを表示され、前記現実空間において前記ユーザの身体の少なくとも一部で所定の取得姿勢及び／又は所定の取得動作がなされた場合に、前記選択状態である対象物が特定される、
ことを特徴とする請求項７又は８に記載のサーバ。
前記特定された位置に前記対象物が表示されている場合に、当該対象物が選択状態であることを表示され、前記現実空間において前記ユーザの身体の少なくとも一部で所定の取得姿勢及び／又は所定の取得動作がなされた場合に、前記選択状態である対象物が特定される、
ことを特徴とする請求項７又は８に記載のサーバ。
【請求項10】
前記表示処理手段は、空間動画データを前記ヘッドマウントディスプレイ又は前記情報処理装置で再生させて、前記ヘッドマウントディスプレイに前記空間画像を表示させ、この空間画像データの再生時間に応じて表示される前記空間画像が変化し、
前記情報送信処理手段は、前記再生時間に応じた、前記空間画像における前記対象物の表示される位置を示す位置情報であって、前記特定された前記空間画像の位置に前記対象物が表示されているかどうかを判断するための情報を、前記ヘッドマウントディスプレイ又は前記情報処理装置に送信する、
ことを特徴とする請求項７又は８に記載のサーバ。
前記情報送信処理手段は、前記再生時間に応じた、前記空間画像における前記対象物の表示される位置を示す位置情報であって、前記特定された前記空間画像の位置に前記対象物が表示されているかどうかを判断するための情報を、前記ヘッドマウントディスプレイ又は前記情報処理装置に送信する、
ことを特徴とする請求項７又は８に記載のサーバ。
【請求項11】
ユーザの頭部に装着されたヘッドマウントディスプレイに、仮想空間を表示するためのコンピュータを、
現実空間におけるユーザの身体の少なくとも一部の姿勢及び／又は動作が、所定の撮影姿勢及び／又は所定の撮影動作である場合に、前記仮想空間をこの仮想空間内の仮想カメラから撮影する撮影手段として機能させ、
前記所定の撮影姿勢及び／又は所定の撮影動作の種類は、第１撮影指示用及び第２撮影指示用の少なくとも２種類あり、
前記撮影手段は、
前記第１撮影指示がされた場合には、前記仮想空間における所定の位置の前記仮想カメラから、前記所定の撮影姿勢及び／又は所定の撮影動作で指し示す方向に対応する方向に向かって前記仮想空間を撮影し、
前記第２撮影指示がされた場合には、前記仮想空間における所定の位置の前記仮想カメラから、前記所定の撮影姿勢及び／又は所定の撮影動作で指し示す方向に対応する方向の反対方向に向かって前記仮想空間を撮影する、
ことを特徴とするコンピュータプログラム。
現実空間におけるユーザの身体の少なくとも一部の姿勢及び／又は動作が、所定の撮影姿勢及び／又は所定の撮影動作である場合に、前記仮想空間をこの仮想空間内の仮想カメラから撮影する撮影手段として機能させ、
前記所定の撮影姿勢及び／又は所定の撮影動作の種類は、第１撮影指示用及び第２撮影指示用の少なくとも２種類あり、
前記撮影手段は、
前記第１撮影指示がされた場合には、前記仮想空間における所定の位置の前記仮想カメラから、前記所定の撮影姿勢及び／又は所定の撮影動作で指し示す方向に対応する方向に向かって前記仮想空間を撮影し、
前記第２撮影指示がされた場合には、前記仮想空間における所定の位置の前記仮想カメラから、前記所定の撮影姿勢及び／又は所定の撮影動作で指し示す方向に対応する方向の反対方向に向かって前記仮想空間を撮影する、
ことを特徴とするコンピュータプログラム。
【請求項12】
ユーザの頭部に装着されて仮想空間を表示するためのヘッドマウントディスプレイ、又は前記ヘッドマウントディスプレイに対応する情報処理装置に、ネットワークを介して通信可能に接続されたサーバであって、
現実空間におけるユーザの身体の少なくとも一部の姿勢及び／又は動作が、所定の撮影姿勢及び／又は所定の撮影動作である場合に、前記仮想空間を前記仮想カメラで撮影した撮影画像を取得して、前記ヘッドマウントディスプレイ又は前記情報処理装置に対して送信する情報送信処理手段、を備え、
前記所定の撮影姿勢及び／又は所定の撮影動作の種類は、第１撮影指示用及び第２撮影指示用の２種類を含み、
前記撮影画像は、
第１撮影指示がされた場合には、前記仮想空間における所定の位置の前記仮想カメラから、前記所定の撮影姿勢及び／又は所定の撮影動作で指し示す方向に対応する方向に向かって前記仮想空間が撮影されることで生成され、
前記第２撮影指示がされた場合には、前記仮想空間における所定の位置の前記仮想カメラから、前記所定の撮影姿勢及び／又は所定の撮影動作で指し示す方向に対応する方向の反対方向に向かって前記仮想空間が撮影されることで生成される、
ことを特徴とするサーバ。
現実空間におけるユーザの身体の少なくとも一部の姿勢及び／又は動作が、所定の撮影姿勢及び／又は所定の撮影動作である場合に、前記仮想空間を前記仮想カメラで撮影した撮影画像を取得して、前記ヘッドマウントディスプレイ又は前記情報処理装置に対して送信する情報送信処理手段、を備え、
前記所定の撮影姿勢及び／又は所定の撮影動作の種類は、第１撮影指示用及び第２撮影指示用の２種類を含み、
前記撮影画像は、
第１撮影指示がされた場合には、前記仮想空間における所定の位置の前記仮想カメラから、前記所定の撮影姿勢及び／又は所定の撮影動作で指し示す方向に対応する方向に向かって前記仮想空間が撮影されることで生成され、
前記第２撮影指示がされた場合には、前記仮想空間における所定の位置の前記仮想カメラから、前記所定の撮影姿勢及び／又は所定の撮影動作で指し示す方向に対応する方向の反対方向に向かって前記仮想空間が撮影されることで生成される、
ことを特徴とするサーバ。
【発明の詳細な説明】
【技術分野】
【0001】
本発明は、ヘッドマウントディスプレイに仮想空間を表示するためのコンピュータプログラム、及び、ヘッドマウントディスプレイ又は情報処理装置と通信可能に接続されたサーバに関する。
【背景技術】
【0002】
例えば、特許文献１に示すように、ヘッドマウントディスプレイ（以下、「ＨＭＤ」と記載する。）を用いて仮想空間（例えば全天球の空間）の表面等に空間画像（３６０度空間画像等）とともに、空間画像に関連する情報（第２ＵＲＬアドレス等の広告コンテンツ）を表示して、空間画像に関連する情報をＨＭＤのユーザに提供するシステムは知られている。
【先行技術文献】
【特許文献】
【0003】
【特許文献1】特許第６５３８１０７号公報
【発明の概要】
【発明が解決しようとする課題】
【0004】
特許文献１の情報処理システムでは、空間画像に関する情報（広告コンテンツ）を仮想空間に表示するが、空間画像に含まれる対象物（商品、美術館等の施設、店舗等）をユーザが直接特定して、この対象物の広告コンテンツ等（対象物情報）を表示することが出来ない。このため、ユーザの興味を惹く特定の対象物についての対象物情報をユーザに提供することが出来ない。
【0005】
そこで、本発明の課題は、ヘッドマウントディスプレイに表示される仮想空間内の空間画像における、ユーザの興味を惹く特定の対象物の対象物情報をユーザに提供することができるコンピュータプログラム、及びサーバを提供することである。
【課題を解決するための手段】
【0006】
（１）上記課題を解決するために、本発明に係るコンピュータプログラムは、ユーザの頭部に装着されたヘッドマウントディスプレイに仮想空間を表示するためのコンピュータを、少なくとも一つの対象物が含まれた空間画像を前記仮想空間に表示させる画像表示手段、前記現実空間における前記ユーザの身体の少なくとも一部の姿勢及び／又は動作に基づいて、前記空間画像における位置を特定する位置特定手段、前記位置特定手段によって特定された位置に前記対象物が表示されている場合に、この対象物を特定する対象物特定手段、及び前記対象物特定手段に特定された対象物に関する情報である対象物情報をユーザに提供する提供手段、として機能させることを特徴とする。
【0007】
上記構成によれば、画像表示手段によって仮想空間に空間画像が表示され、この空間画像にユーザの興味を惹く対象物が含まれているときに、対象物が表示されている空間画像における位置を特定するための姿勢及び／又は動作を、現実空間においてユーザが自身の身体の少なくとも一部（例えば手、腕や目等）で行うと、この位置が位置特定手段によって特定される。この特定された空間画像における位置に、対象物が表示されていると、この対象物が対象物特定手段によって特定され、この対象物に関する情報である対象物情報がユーザに提供される。ここで、「ユーザに提供する」とは、ユーザが対象物情報を見る、聞く等によって知得できるようにすることである。このように、空間画像における位置を特定するための姿勢及び／又は動作を、ユーザが自身の身体の少なくとも一部（手、腕や目等）で行うだけで、空間画像における対象物のうち、ユーザの興味を惹く対象物を特定して、この特定の対象物の対象物情報をユーザに提供することができる。なお、本発明は、ヘッドマウントディスプレイ及びヘッドマウントディスプレイに対応する情報処理装置が、自機でユーザに提供する場合だけでなく、ヘッドマウントディスプレイが情報処理装置を介して提供する構成、情報処理装置がヘッドマウントディスプレイを介して提供する構成を含む。前記コンピュータは、一台の装置のプロセッサから構成されても、複数台の装置のプロセッサから構成されてもよい。例えば、コンピュータは、ヘッドマウントディスプレイのプロセッサ、ヘッドマウントディスプレイに対応する情報処理装置のプロセッサ、ヘッドマウントディスプレイ又は情報処理装置と通信可能に接続されたサーバのプロセッサの単体又は組み合わせたものであってもよい。
【0008】
（２）前記対象物情報は、前記対象物の取得又は利用を前記ユーザに促すための広告情報を含んでもよい。
【0009】
上記構成によれば、ユーザの興味を惹く特定の対象物の広告情報をユーザに提供し、この情報処理装置を利用した対象物の取得又は利用のための行動をユーザに促すことが出来る。広告情報は、仮想空間における対象物、及び仮想空間における対象物に対応する現実空間における対象物のうち、いずれの取得又は利用を対象とするものであってもよい。例えば、空間画像が現実空間の街並みを表示するものであり、仮想空間における対象物が美術館である場合に、広告情報は、仮想空間における美術館の利用を促進してもよいし、仮想空間の美術館に対応する現実空間の美術館の利用を促進するためのものであってもよい。
【0010】
（３）前記位置特定手段は、前記現実空間において、前記ユーザの身体の少なくとも一部で指示姿勢及び／又は動作がされたときに、前記仮想空間において、所定位置から前記指示姿勢の指し示す方向に対応する方向にある位置を、前記空間画像における位置として特定し、前記対象物特定手段は、前記位置特定手段によって特定された位置に前記対象物が表示されている場合に、当該対象物が選択状態であることを表示し、前記現実空間において、前記ユーザの身体の少なくとも一部で所定の取得姿勢及び／又は所定の取得動作がなされた場合に、前記選択状態である対象物を特定してもよい。
【0011】
上記構成によれば、現実空間によってユーザに指示姿勢（例えば、ユーザの手で指し示す姿勢等）がされたときに、仮想空間において、所定位置（例えば中心位置）からユーザの手で指し示す方向に対応する方向にある位置が、位置特定手段によって特定される。この特定された位置に対象物が表示されていると、対象物が選択状態であることが対象物特定手段によって表示される。これによって、対象物を指し示す指示姿勢をするだけで、ユーザは対象物を選択状態にすることができる。そして、この選択情報であることが表示されるため、ユーザは選択状態になった対象物が所望の対象物であるかを検討し、所望の対象物である場合にのみ、所定の取得姿勢及び／又は所定の取得動作（手でグリップする等の所定の取得ジェスチャー）を行って、対象物を特定し、特定された対象物に関連する対象物情報をユーザに提供することが可能になる。これによって、所望しない対象物の対象物情報を取得してしまうことを防止することができる。
【0012】
（４）前記対象物特定手段は、前記選択状態の対象物に対応付けて、前記対象物情報の一部を仮想空間に表示することで、当該対象物が選択状態であることを表示してもよい。
【0013】
上記構成によれば、ユーザは、対象物情報の一部を確認した上で、対象物情報の提供を受けたいかどうかを判断し、提供を受けたい場合にのみ、当該対象物情報の提供を受けることが可能になる。
【0014】
（５）空間動画データの再生によって前記空間画像が表示され、この空間画像データの再生時間に応じて表示される前記空間画像が変化してもよい。前記対象物特定手段は、前記再生時間に応じた、前記仮想空間における前記対象物の表示される位置を示す位置情報に基づいて、前記対象物特定手段によって特定された位置に前記対象物が表示されているかどうかを判断してもよい。
【0015】
上記構成によれば、空間動画データの再生によって空間画像が動画として表示される。ここで、再生時間（再生開始時からの経過時間）に応じて、空間画像が変化する場合には、仮想空間における対象物の表示位置が変わる場合がある。本発明の構成によれば、空間画像データの再生時間に応じた、仮想空間における対象物の表示される位置を示す位置情報に基づいて、位置特定手段によって特定された位置に対象物が表示されているかどうかが判断される。このため、空間画像が変化しても、特定された位置に対象物が表示されているかを、正確に判断することが可能になる。
【0016】
（６）上記コンピュータは、サーバに通信可能に接続されたヘッドマウントディスプレイ、又は情報処理装置のコンピュータであり、前記提供手段は、前記対象物が特定された場合に、前記対象物情報の送信要求を前記サーバに対して送信し、前記対象物情報の送信要求に応じた前記サーバから前記対象物情報を受信することで、前記対象物情報を前記ユーザに提供するために、前記対象物情報を前記ヘッドマウントディスプレイ又は前記情報処理装置に取得させてもよい。
【0017】
上記構成によれば、ヘッドマウントディスプレイ又は情報処理装置がサーバから対象物情報を受信することで、対象物情報を取得してユーザに提供することが可能になる。この様に、サーバ側で対象物情報を記憶しているため、対象物情報の内容の更新がし易く、ユーザに提供される対象物情報を現状に合った新しい情報とすることができる。
【0018】
（７）上記課題を解決するために、本発明に係るサーバは、ユーザの頭部に装着されて仮想空間を表示するヘッドマウントディスプレイ、又は当該ヘッドマウントディスプレイに対応する情報処理装置に、ネットワークを介して通信可能に接続され、記憶部を備える。そして、表示処理手段、情報受信処理手段及び情報送信処理手段を備える。表示処理手段は、前記ヘッドマウントディスプレイにおいて、少なくとも一つの対象物が含まれた空間画像を前記仮想空間に表示させるための処理を行う。情報受信処理手段は、現実空間における前記ユーザの身体の少なくとも一部の姿勢及び／又は動作に基づいて特定された前記空間画像の位置において、前記対象物が表示されている場合に、この対象物を特定の対象物として、前記特定の対象物に関連する対象物情報の送信要求を、前記ヘッドマウントディスプレイ、又は前記情報処理装置から受信する。情報送信処理手段は、前記情報受信手段によって前記対象物情報の送信要求を受信した場合に、前記記憶部に記憶された前記対象物情報を、前記ユーザに提供するために、前記ヘッドマウントディスプレイ又は前記情報処理装置に対して送信する。
【0019】
上記（１）のコンピュータプログラムと同様の作用効果を奏する。
【0020】
（８）前記対象物情報は、前記対象物の取得又は利用を前記ユーザに促すための広告情報を含んでもよい。
【0021】
上記（２）のコンピュータプログラムと同様の作用効果を奏する。ここでも、広告情報は、仮想空間における対象物、及び仮想空間における対象物に対応する現実空間における対象物のうち、いずれの取得又は利用を対象とするものであってもよい。
【0022】
（９）上記サーバでは、前記現実空間において、前記ユーザの身体の少なくとも一部で指示姿勢及び／又は動作がされたときに、前記仮想空間の所定位置から、前記指示姿勢の指し示す方向に対応する方向にある位置が、前記空間画像における位置として特定され、前記特定された位置に前記対象物が表示されている場合に、当該対象物が選択状態であることを表示され、前記現実空間において前記ユーザの身体の少なくとも一部で所定の取得姿勢及び／又は所定の取得動作がなされた場合に、前記選択状態である対象物が特定されてもよい。
【0023】
上記（３）のコンピュータプログラムと同様の作用効果を奏する。
【0024】
（１０）前記表示処理手段は、空間動画データを前記ヘッドマウントディスプレイ又は前記情報処理装置で再生させて、前記ヘッドマウントディスプレイに前記空間画像を表示させ、この空間画像データの再生時間に応じて表示される前記空間画像が変化してもよい。また、前記情報送信処理手段は、前記再生時間に応じた、前記空間画像における前記対象物の表示される位置を示す位置情報であって、前記特定された前記空間画像の位置に前記対象物が表示されているかどうかを判断するための情報を、前記ヘッドマウントディスプレイ又は前記情報処理装置に送信してもよい。
【0025】
上記（５）のコンピュータプログラムと同様の作用効果を奏する。
【0026】
（１１）本発明に係るコンピュータプログラムは、ユーザの頭部に装着されたヘッドマウントディスプレイに、仮想空間を表示するためのコンピュータを、撮影手段として機能させる。撮影手段は、現実空間におけるユーザの身体の少なくとも一部の姿勢及び／又は動作が、所定の撮影姿勢及び／又は所定の撮影動作である場合に、前記仮想空間をこの仮想空間内の仮想カメラから撮影する。前記所定の撮影姿勢及び／又は所定の撮影動作の種類は、第１撮影指示用及び第２撮影指示用の少なくとも２種類ある。前記撮影手段は、前記第１撮影指示がされた場合には、前記仮想空間における所定の位置の前記仮想カメラから、前記所定の撮影姿勢及び／又は所定の撮影動作で指し示す方向に対応する方向に向かって前記仮想空間を撮影し、前記第２撮影指示がされた場合には、前記仮想空間における所定の位置の前記仮想カメラから、前記所定の撮影姿勢及び／又は所定の撮影動作で指し示す方向に対応する方向の反対方向に向かって前記仮想空間を撮影する。
【0027】
上記構成によれば、所定の撮影姿勢及び／又は所定の撮影動作の種類が第１撮影指示用及び第２撮影指示用の少なくとも２種類あり、第１撮影指示用の所定の撮影姿勢及び／又は所定の撮影動作がされた場合と、第２撮影指示用の所定の撮影姿勢及び／又は所定の撮影動作がされた場合とで、撮影方向が異なる。ユーザは、所定の撮影姿勢及び／又は所定の撮影動作の種類を変えるだけで、仮想カメラの撮影方向を第１撮影用及び第２撮影用の間で切り替えて撮影をさせることができる。なお、仮想カメラの位置（上記所定の位置）は、第１撮影用及び第２撮影用で同じであっても異なっていてもよい。
【0028】
（１２）本発明に係るサーバは、ユーザの頭部に装着されて仮想空間を表示するためのヘッドマウントディスプレイ、又は前記ヘッドマウントディスプレイに対応する情報処理装置に、ネットワークを介して通信可能に接続される。また、サーバは、現実空間におけるユーザの身体の少なくとも一部の姿勢及び／又は動作が、所定の撮影姿勢及び／又は所定の撮影動作である場合に、前記仮想空間を前記仮想カメラで撮影した撮影画像を取得して、前記ヘッドマウントディスプレイ又は前記情報処理装置に対して送信する情報送信処理手段、を備える。前記所定の撮影姿勢及び／又は所定の撮影動作の種類は、第１撮影指示用及び第２撮影指示用の２種類を含み、前記撮影画像は、第１撮影指示用の所定の撮影姿勢及び／又は所定の撮影動作がされた場合には、前記仮想空間における所定の位置の前記仮想カメラから、前記所定の撮影姿勢及び／又は所定の撮影動作で指し示す方向に対応する方向に向かって前記仮想空間が撮影されることで生成され、前記第２撮影指示がされた場合には、前記仮想空間における所定の位置の前記仮想カメラから、前記所定の撮影姿勢及び／又は所定の撮影動作で指し示す方向に対応する方向の反対方向に向かって前記仮想空間が撮影されることで生成される、ことを特徴とする。
【0029】
上記（１１）のコンピュータプログラムと同様の作用効果を奏する。
【発明の効果】
【0030】
上記構成によれば、ヘッドマウントディスプレイに表示される仮想空間内の空間画像における、ユーザの興味を惹く特定の対象物の対象物情報をユーザに提供することができるコンピュータプログラム、及びサーバを提供することができる。
【図面の簡単な説明】
【0031】
【図1】本実施形態に係る対象物情報提供システムを示す図である。
【図5】仮想空間の説明図である。
【図6】ヘッドマウントディスプレイにおける仮想空間の表示の一例である。
【図7】対象物テーブルの一例である。
【図8】第１撮影指示用撮影ジェスチャーと第１撮影の説明図である。
【図9】第２撮影指示用撮影ジェスチャーと第２撮影の説明図である。
【図10】第１撮影用の仮想カメラ位置と撮影方向の説明図である。
【図11】第２撮影用の仮想カメラ位置と撮影方向の説明図である。
【図12】ヘッドマウントディスプレイの実行する対象物情報取得処理の一例を示すフローチャート（その１）である。
【図13】ヘッドマウントディスプレイの実行する対象物情報取得処理の一例を示すフローチャート（その２）である。
【図14】サーバの実行するサーバ側対象物情報取得処理の一例を示すフローチャートである。
【図15】情報処理装置の実行する処理装置側対象物情報取得処理の一例を示すフローチャートである。
【図16A】本実施形態の変形例に係る対象物情報提供システムを示す図である。
【図16B】本実施形態の変形例に係る対象物情報提供システムを示す図である。
【図17】本実施形態の変形例に係る対象物情報提供システムを示す図である。
【図18】本実施形態の変形例に係る対象物情報提供システムを示す図である。
【発明を実施するための形態】
【0032】
（本実施形態の第１の特徴）
以下に、図１、図５、及び図６を用いて、本発明を適用した一実施形態（以下、「本実施形態」と記載する）に係る対象物情報提供システムの第１の特徴を説明する。図１は、本実施形態に係る対象物情報提供システムを示す図である。図５は、仮想空間の説明図である。図６は、ヘッドマウントディスプレイにおける仮想空間の表示の一例である。
以下に、図１、図５、及び図６を用いて、本発明を適用した一実施形態（以下、「本実施形態」と記載する）に係る対象物情報提供システムの第１の特徴を説明する。図１は、本実施形態に係る対象物情報提供システムを示す図である。図５は、仮想空間の説明図である。図６は、ヘッドマウントディスプレイにおける仮想空間の表示の一例である。
【0033】
本実施形態に係る対象物情報提供システム１００は、ユーザの頭部に搭載するヘッドマウントディスプレイ（以下、「ＨＭＤ」と記載する）１を備える。ＨＭＤ１は、例えば、図５で示すような三次元の仮想空間Ｗの所定領域を表示する。仮想空間Ｗは、ＶＲ（Ｖｉｒｔｕａｌ Ｒｅａｌｉｔｙ）空間であり、例えば球体（全天球等）として定義されるものである。なお、仮想空間Ｗは、球状でなくてもよく、半球等の他の形状であってもよい。本実施形態では、仮想空間Ｗは、ＶＲ空間であるが、ＡＲ（Ａｒｇｕｍｅｎｔｅｄ Ｒｅａｌｉｔｙ）空間やＭＲ（Ｍｉｘｅｄ Ｒｅａｌｉｔｙ）空間であってもよい。
【0034】
また、本実施形態では、仮想空間Ｗの表面に亘って（全天球内面に亘って）空間画像が表示される。空間画像は、仮想空間Ｗ内に表示するための画像であり、本実施形態では、３６０°カメラで全周囲撮影された全天球画像であるが、コンピュータグラフィックスや手書き等で作成された画像であってもよい。本実施形態では、空間画像は、現実空間（現実世界）に対応しており、例えば、現実空間の自然風景や街並み等の景色や、現実空間の建築物内部等を表示するものであってもよい。なお、空間画像は、必ずしも現実空間に対応するものでなくてもよく、架空の風景や建物内部等を表示してもよい。この様な空間画像が仮想空間Ｗの表面に亘って表示されることで、ユーザは、ＨＭＤ１を介して仮想空間Ｗの表面の空間画像を視認することができる。
【0035】
なお、本実施形態において「画像」とは、静止画像と複数のフレーム画像から構成された動画像の両方を含む。なお、空間画像は、右目用画像と左目用画像とがあり、立体視可能であってもよい。空間画像は、図６で示すように、少なくとも一つの対象物Ｏを含む。対象物Ｏは、ユーザによって特定可能な表示物であり、対象物Ｏは、例えば、商品・美術品等の物品や、店舗・施設（図書館や美術館やホテル等）・建築物、観光名所等の自然物等である。
【0036】
ＨＭＤ１には、現実空間における座標系である実座標系が予め設定されている。実座標系は、現実空間の座標系であり、ＨＭＤ１の位置を原点として、鉛直方向（上下方向）のＹ座標、鉛直方向に直交する水平方向（左右方向）のＸ座標、この水平方向と鉛直方向の双方に直行する方向（前後方向）のＺ座標を有する。また、図５で示すように、仮想空間Ｗには、グローバル座標系が設定されている。グローバル座標系は、仮想空間Ｗの中心点を原点とした、Ｘ座標、Ｙ座標、Ｚ座標を有する。グローバル座標系のＸ座標、Ｙ座標、Ｚ座標と、実座標系のＸ座標、Ｙ座標、Ｚ座標とはそれぞれ対応付けられている（例えば平行である）。この様にして、現実空間と仮想空間Ｗが対応づけられている。
【0037】
そして、ユーザが頭部（ＨＭＤ１）の傾き（向き）を変更したときに、この向きに応じて仮想空間Ｗにおける表示領域（ＨＭＤ１の視野）が変わる。この表示領域の変更について具体的に説明する。本実施形態では、仮想空間Ｗにおける所定位置（例えば仮想空間Ｗの中心点）にユーザ視点となる仮想カメラＣａ１が配置される。本実施形態では、例えば３次元モデルのアバターＭ１が仮想空間Ｗに配置され、アバターＭ１の頭部が仮想空間Ｗの中心点に配置されるようになっているが、アバターＭ１は必ずしも表示されなくてもよい。この場合、アバターＭ１に代えて、ユーザ等を実写した撮影画像が空間画像に合成されてもよい。これによって、処理負担が軽くあたかもユーザ本人が仮想空間Ｗに居るような感覚をユーザに与えることができる。なお、この撮影画像は、後述のサーバ３にユーザに対応付けて登録されていてもよい。本実施形態では、この仮想カメラＣａ１の撮影方向は、現実空間におけるユーザの頭部の向き（ＨＭＤ１の向き）と対応する。このため、頭部の向きの変更に応じて仮想カメラＣａ１の撮影方向も変更され、仮想空間における表示される領域が変わる。例えば、ユーザが頭部を右に向ければ、仮想カメラＣａ１の撮影方向も右に向き、ユーザが頭部を左に向ければ、仮想カメラＣａ１の撮影方向も左に向き、これによって、ユーザに仮想空間に入り込んだような没入感を与えることが出来るようになっている。
【0038】
本実施形態の第１の特徴は次のようなものである。現実空間における、ユーザの身体の少なくとも一部（例えば、手や腕等）のジェスチャーに基づいて、空間画像における位置（仮想空間Ｗにおける位置）を特定する位置特定処理が実行される。「ジェスチャー」とは、「姿勢及び／又は動作」であり、具体的には、姿勢、動作、又はこれらの組み合わせである。そして、この特定された位置に対象物Ｏが表示されている場合に、この対象物Ｏを特定する対象物特定処理が実行され、この特定された対象物に関する情報である対象物情報Ｊ１がＨＭＤ１のユーザに提供される。具体的には、対象物情報Ｊ１がユーザの所有する情報処理装置２に取得させる取得処理が実行され、情報処理装置２を介してユーザに対象物情報Ｊ１が提供される。これによって、空間画像における位置を特定するためのジェスチャーを、ユーザが自身の身体の少なくとも一部で行うことで、空間画像の対象物Ｏが特定されて、この対象物Ｏに関連する対象物情報Ｊ１をユーザに提供する（知得させる）ことができる。
【0039】
本実施形態では、対象物Ｏを含む空間画像を仮想空間Ｗに表示することで仮想空間Ｗのコンテンツをユーザに提供し、かつ、この空間画像における対象物Ｏを特定できる。従来、対象物Ｏのオブジェクトを仮想空間Ｗに配置することでコンテンツをユーザに提供し、かつ、アバターＭ１との衝突判定等によって、対象物Ｏを特定する構成は存在する。本実施形態の構成では、従来の構成に比較して、仮想空間Ｗのコンテンツ制作の作業負担を重くすることなく、ユーザの興味を惹く対象物Ｏを特定して、対象物情報Ｊ１を取得することができる。
【0040】
対象物情報Ｊ１は、対象物Ｏの取得又は利用をユーザに促すための広告情報を含む。広告情報は、例えば、対象物が商品・美術品等の物品である場合には、物品の名称、物品を表示する画像・動画、物品の説明、及びこれらの情報が掲載されたサイトや物品を入手するための販売サイト等のＵＲＬ（Ｕｎｉｆｏｒｍ Ｒｅｓｏｕｒｃｅ Ｌｏｃａｔｏｒ）等である。対象物が施設（図書館・ホテル・美術館等）・店舗・建造物である場合には、施設・店舗・建造物の名称、施設・店舗・建造物を表示する画像や動画、施設・店舗・建造物の説明、及びこれらの情報が掲載されたサイトのＵＲＬ等である。また、施設・店舗・建造物に関するサービスの販売（予約）サイトやアクセス方法を示すサイト等のＵＲＬであってもよい。施設・店舗・建造物に関するサービスは、例えばホテルの宿泊、レストランの食事を含む。施設・店舗・建造物の関連物（施設・店舗・建造物で販売等されている物品等）の名称、物品の画像・動画、物品の説明、及びこれらの情報が掲載されたサイトや物品を入手するための販売サイト等のＵＲＬであってもよい。対象物が観光名所である自然物（山、海等）である場合には、自然物の名称、自然物を表示する画像・動画、自然物の説明（テキスト・画像・動画）、これらの情報を示すサイトのＵＲＬや、自然物へのアクセス方法を示すサイト等のＵＲＬである。現実の自然物が有料で入場できる等の場合には、その対象物の入場チケットの販売サイト等のＵＲＬであってもよい。
【0041】
上記の様に、対象物情報Ｊ１は広告情報を含むため、ユーザの興味を惹く特定の対象物Ｏの広告情報をユーザに提供することができる。ここで、対象物Ｏの広告情報は、本実施形態では、仮想空間における対象物Ｏに相当する現実空間の対象物の広告情報であるが、仮想空間Ｗにおいて対象物Ｏを取得・利用できる場合には、仮想空間Ｗにおける対象物Ｏの広告情報であってもよい。仮想空間Ｗにおいて対象物Ｏを取得・利用できる場合とは、例えば、衣服等のアイテムが対象物Ｏであり、アバターＭ１が仮想空間Ｗ内で取得して着用できる場合や、仮想的な美術館等が対象物Ｏであり、仮想的な美術館に入場して、仮想的な美術館内でデジタルアートを閲覧できる場合等である。
【0042】
（本実施形態の第２の特徴）
以下に、図１、図５、及び図８から図１１を用いて、本実施形態の第２の特徴を説明する。図８は、第１撮影指示用撮影ジェスチャーと第１撮影の説明図である。図９は、第２撮影指示用撮影ジェスチャーと第２撮影の説明図である。図１０は、第１撮影用の仮想カメラ位置と撮影方向の説明図である。図１１は、第２撮影用の仮想カメラ位置と撮影方向の説明図である。
以下に、図１、図５、及び図８から図１１を用いて、本実施形態の第２の特徴を説明する。図８は、第１撮影指示用撮影ジェスチャーと第１撮影の説明図である。図９は、第２撮影指示用撮影ジェスチャーと第２撮影の説明図である。図１０は、第１撮影用の仮想カメラ位置と撮影方向の説明図である。図１１は、第２撮影用の仮想カメラ位置と撮影方向の説明図である。
【0043】
現実空間におけるユーザの身体の少なくとも一部（例えば、手や腕等）のジェスチャーが、所定の撮影ジェスチャーである場合に、仮想空間Ｗを、この仮想空間Ｗ内の仮想カメラＣａ２から撮影する撮影処理が実行される。ここでの仮想カメラＣａ２は、仮想空間Ｗの仮想的な写真撮影のためのものであり、ユーザの視界を表示するための仮想カメラＣａ１とは別途設定される。「所定の撮影ジェスチャー」とは、「所定の撮影姿勢及び／又は所定の撮影動作」であり、具体的には、所定の撮影姿勢、所定の撮影動作、又はこれらの組み合わせである。
【0044】
ここで、所定の撮影ジェスチャーの種類、すなわち撮影ジェスチャーの種類は、第１撮影指示用及び第２撮影指示用の少なくとも２種類ある。もっとも、２種類以上あってもよい。図１０で示すように、現実空間で第１撮影指示用撮影ジェスチャーがされた場合には、仮想空間Ｗにおける所定の位置（仮想空間Ｗの中心点）に配置された仮想カメラＣａ２から、所定の撮影ジェスチャーで指し示す方向に対応する方向に向かって仮想空間Ｗが撮影される。この撮影を「第１撮影」と記載する場合がある。
【0045】
ここで、本実施形態では、ユーザ視点となる仮想カメラＣａ１の位置は仮想カメラＣａ２と同じであるが、仮想カメラＣａ１の撮影方向は、仮想カメラＣａ２の撮影方向とは異なる場合がある。仮想カメラＣａ１の撮影方向は、アバターＭ１の前方（ＨＭＤ１の向きと対応する方向）であるのに対して、仮想カメラＣａ２の撮影方向は、所定の撮影ジェスチャーで指し示す方向に対応する方向である。仮想カメラＣａ２の画角が仮想カメラＣａ１の画角よりも小さく設定されることで、仮想カメラＣａ１と仮想カメラＣａ２の撮影方向が一致している場合には、図１０で示すように、仮想カメラＣａ１の撮影領域Ｆ１内（撮影画像Ｖ１内）に、仮想カメラＣａ２の撮影領域Ｆ２（撮影画像Ｖ２）が納まるようになっている。
【0046】
本実施形態における、第１撮影指示用の所定の撮影ジェスチャー（第１撮影指示用撮影ジェスチャー）を説明する。図８で示すように、現実空間において、ユーザの右手と左手それぞれについて人差し指と親指が直角になるようにし、略同一平面において、右手の人差し指と左手の人差し指、右手の親指と左手の親指を略平行に配置して、両手で囲いを形成する姿勢（所定の撮影姿勢）にすることが、第１撮影指示用撮影ジェスチャーの種類となっている。この両手の囲いの範囲を撮影領域Ｆ２に対応させて、囲いを広げると撮影領域Ｆ２が広くなってもよいが、撮影領域Ｆ２の大きさが一定であってもよい。現実空間においてユーザが両手の囲いを向けている方向に対応する仮想空間における方向が、所定の撮影ジェスチャーが指し示す方向となり、仮想カメラＣａ２の撮影方向となる。この方向に伸びる直線と仮想空間Ｗの表面の交点Ｐが、第１撮影による撮影画像Ｖ２の中心に位置することになる。なお、例えば、「現実空間においてユーザが両手の囲いを向けている方向」とは、現実空間におけるＨＭＤ１の位置から、ユーザの両手の囲い内の所定の位置（中心位置）に向かう方向である。もっとも、この第１撮影指示用撮影ジェスチャーはあくまで一例であり他のジェスチャーを採用してもよい。例えば、所定の撮影ジェスチャーとして、上記両手の囲いを前方に突き出す撮影動作（所定の撮影動作）を採用してもよい。また、所定の撮影ジェスチャーとして、上記所定の撮影姿勢にした状態で、特定の指（例えば人差し指）を素早く曲げる、または、右手指と左手指が触れた瞬間に撮影される等の所定の動作を行う（所定の撮影姿勢及び所定の撮影動作を行う）ことを採用してもよい。
【0047】
また、図１１で示すように、現実空間において第２撮影指示用撮影ジェスチャーがされた場合には、仮想空間Ｗの所定位置の仮想カメラＣａ２から、所定の撮影ジェスチャーで指し示す方向の反対方向に向かって、仮想空間Ｗが撮影される。所定の撮影ジェスチャーで指し示す方向の反対方向に伸びる直線と仮想空間Ｗの表面との交点Ｐ´が、第２撮影指示による撮影画像Ｖ２の中心に位置することになる。この撮影を、「第２撮影」と記載する場合がある。
【0048】
なお、第２撮影では第１撮影とは異なり、仮想カメラＣａ１の位置と仮想カメラＣａ２の位置は異なる。仮想カメラＣａ１の位置は仮想空間Ｗの中心点であるが、仮想カメラＣａ２の位置は、仮想空間Ｗの中心点から、所定の撮影ジェスチャーで指し示す方向に対応する方向（交点Ｐに向かう方向）に所定距離離れた位置である。このため、仮想カメラＣａ２で、所定の撮影ジェスチャーで指し示す方向に対応する方向の反対方向（交点Ｐ´に向かう方向）に撮影することで、アバターＭ１を含めて撮影することが可能になっている。上述したように、仮想カメラＣａ１の撮影方向は、アバターＭ１の頭部が向いている方（ＨＭＤ１の向いている方向）であり、第２撮影においても、仮想カメラＣａ１と仮想カメラＣａ２の撮影方向は異なる。第２撮影でも、ユーザに仮想カメラＣａ２の撮影画像Ｖ２を視認させるために、仮想カメラＣａ１の撮影画像Ｖ１内に、仮想カメラＣａ２の撮影画像Ｖ２を合成して表示することで、ユーザに撮影画像Ｖ１を視認させることが出来るようになっている。
【0049】
本実施形態における、第２撮影指示用の所定の撮影ジェスチャー（第２撮影指示用撮影ジェスチャー）を説明する。図９で示すように、現実空間において、ユーザの片手（右手等）において第２関節で人差し指を略直角に曲げる姿勢（所定の撮影姿勢）が、第２撮影指示用撮影ジェスチャーとなっている。この人差し指の曲げられた部位を一角とした四角形の範囲が撮影領域Ｆ２に対応してもよい。現実空間においてユーザが上記四角形を向けている方向に対応する仮想空間における方向が、所定の撮影ジェスチャーが指し示す方向となり、仮想カメラＣａ２の撮影方向となる。なお、「現実空間においてユーザが上記四角形を向けている方向」とは、例えば、現実空間におけるＨＭＤ１の位置から、上記四角形内の所定の位置（中心位置）に向かう方向である。もっとも、必ずしも「現実空間においてユーザが上記四角形を向けている方向」が仮想カメラＣａ２の撮影方向が一致しなくてもよい。この第２撮影指示用撮影ジェスチャーはあくまで一例であり他のジェスチャーを採用してもよい。例えば、第２撮影指示用撮影ジェスチャーとして、第２関節で人差し指を略直角に曲げる姿勢をした片手を前方に突き出す撮影動作（所定の撮影動作）を採用してもよい。また、上記所定の撮影姿勢にした状態で、特定の指（例えば人差し指）を素早く複数回振る所定の動作を行う（所定の撮影姿勢及び所定の撮影動作を行う）ことを採用してもよい。なお、図８及び図９で示しているユーザの手は説明の便宜上示しているだけであり、ＨＭＤ１にはユーザの手は表示されない。もっとも、ユーザの手と一致するジェスチャーをするように、アバターＭ１の手をＨＭＤ１に表示してもよい。
【0050】
〔本実施形態に係る対象物情報提供システムの構成〕
以下に、図１を用いて、本実施形態に係る対象物情報提供システムを説明する。対象物情報システム１００は、ＨＭＤ１、情報処理装置２、及びサーバ３を備える。ＨＭＤ１、及び情報処理装置２はサーバ３に通信ネットワークＮを介して通信可能に接続されている。
以下に、図１を用いて、本実施形態に係る対象物情報提供システムを説明する。対象物情報システム１００は、ＨＭＤ１、情報処理装置２、及びサーバ３を備える。ＨＭＤ１、及び情報処理装置２はサーバ３に通信ネットワークＮを介して通信可能に接続されている。
【0051】
ＨＭＤ１は、上述したように、ユーザの頭部に装着されて、少なくとも一つの対象物Ｏ（図６参照）が含まれた空間画像の表示された、仮想空間Ｗを表示するためのものである。情報処理装置２は、例えば、スマートフォン、タブレット端末、ゲーム機、パーソナルコンピュータ等である。情報処理装置２は、ＨＭＤ１に対応するものであり、本実施形態では、ＨＭＤ１のユーザに対して、対象物情報Ｊ１を提供するためのものである。本発明の「ＨＭＤに対応する情報処理装置」とは、例えば、ＨＭＤ１のユーザの持ち物である情報処理装置２や、サーバ３が提供するサービスにＨＭＤ１のユーザのアカウントでログインされた情報処理装置２等である。情報処理装置２は、サーバ３から特定された対象物Ｏに関連する対象物情報Ｊ１を取得することで、ユーザに対象物情報Ｊ１を提供できるようになっている。
【0052】
サーバ３は、ＨＭＤ１において、少なくとも一つの対象物Ｏが含まれた空間画像の表示された、仮想空間Ｗを表示させるための処理を行う。例えば、サーバ３は、自機が記憶する空間動画データＤを、ＨＭＤ１でストリーミング再生させる。もっとも、再生方法は、ストリーミング再生に限定されず、ＨＭＤ１にサーバ３から空間動画データＤをダウンロードさせて再生させる等してもよい。サーバ３は、対象物情報Ｊ１を記憶し、ＨＭＤ１に表示されている対象物Ｏが特定されたときに、この特定された対象物Ｏの対象物情報Ｊ１を、通信ネットワークＮを介して情報処理装置２に対して送信する。
【0053】
〔ＨＭＤ１の構成〕
以下に、図１及び図２を参照して、ＨＭＤ１の機能的構成について説明する。図２は、図１で示すＨＭＤ１の機能ブロック図である。ＨＭＤ１は、プロセッサ１０、ストレージ１１、通信部１２、ディスプレイ１３、操作部１４、メモリ１５、及びセンサ部１６を有する。ストレージ１１は、例えば、ハードディスク、ＳＳＤ（Ｓｏｌｉｄ Ｓｔａｔｅ ＤｒｉＶｅ）、ＵＳＢフラッシュメモリ等である。ストレージ１１には、対象物情報プログラムＰ１が記憶されている。対象物情報プログラムＰ１は、プロセッサ１０に後述の対象物情報取得処理（位置特定処理、対象物特定処理、取得処理を含む処理）を実行させるためのプログラムである。対象物情報プログラムＰ１は、他の情報処理装置（サーバ３等）からダウンロードしても、ＨＭＤ１の出荷状態から記憶されていてもよい。
以下に、図１及び図２を参照して、ＨＭＤ１の機能的構成について説明する。図２は、図１で示すＨＭＤ１の機能ブロック図である。ＨＭＤ１は、プロセッサ１０、ストレージ１１、通信部１２、ディスプレイ１３、操作部１４、メモリ１５、及びセンサ部１６を有する。ストレージ１１は、例えば、ハードディスク、ＳＳＤ（Ｓｏｌｉｄ Ｓｔａｔｅ ＤｒｉＶｅ）、ＵＳＢフラッシュメモリ等である。ストレージ１１には、対象物情報プログラムＰ１が記憶されている。対象物情報プログラムＰ１は、プロセッサ１０に後述の対象物情報取得処理（位置特定処理、対象物特定処理、取得処理を含む処理）を実行させるためのプログラムである。対象物情報プログラムＰ１は、他の情報処理装置（サーバ３等）からダウンロードしても、ＨＭＤ１の出荷状態から記憶されていてもよい。
【0054】
通信部１２は、インターネット等のＷＡＮ（Ｗｉｄｅ Ａｒｅａ Ｎｅｔｗｏｒｋ）や、ＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）等のネットワークＮを介して、他の情報処理装置と有線及び／又は無線で通信を行うものである。通信部１２は、サーバ３とネットワークＮを介して通信を行う。なお、本実施形態では、情報処理装置２は、ＨＭＤ１と直接通信可能に接続されていないが、通信可能に接続されていてもよい。ディスプレイ１３は、ＨＭＤ１をユーザの頭部に搭載（装着）した際に、ユーザの視界を覆うように形成された非透過型の表示装置である。ディスプレイ１３は、仮想空間Ｗを表示するためのものであり、例えば、液晶ディスプレイや有機ＥＬディスプレイ等のディスプレイである。網膜投影ディスプレイであってもよい。なお、ディスプレイ１３は、右目用表示部と左目用表示部とから構成されて、ユーザに立体視させてもよい。操作部１４は、ユーザからの指示（操作）を受け付けるためのものである。メモリ１５は、例えば、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）で構成されるものである。メモリ１５には、上記対象物情報取得処理の実行によって、対象物テーブルＴ１がサーバ３から受信されて記憶される。
【0055】
対象物テーブルＴ１は、再生時間（再生開始時からの経過時間）に応じた、仮想空間Ｗにおける前記対象物の表示される位置を示す位置情報を含む。対象物テーブルＴ１についての詳細は、図７を用いて後述する。本実施形態では上述したように、空間動画データＤの再生によって空間画像がディスプレイ１３で表示されるが、この空間画像データＤの再生時間に応じて表示される空間画像が変化する。このため、空間画像（仮想空間Ｗ）における対象物Ｏの位置が再生時間に応じて変わっていく場合がある。本実施形態では、ユーザ所望の対象物Ｏを特定するための処理（対象物特定処理）において、ユーザの身体の少なくとも一部のジェスチャーに基づいて特定された空間画像における位置に、対象物Ｏが表示されているかどうかを、対象物テーブルＴ１に基づいて判断する。これによって、空間画像（仮想空間Ｗ）における対象物Ｏの位置が再生時間に応じて変わっても、精度良く、ユーザに特定された空間画像の位置に対象物Ｏがあるかを判断することができる。
【0056】
センサ部１６は、現実空間において、ユーザの頭部（ＨＭＤ１）の向きや、ユーザの身体の少なくとも一部のジェスチャーを検出するためのセンサを備える。「ユーザの身体の少なくとも一部」は、本実施形態では「手」であるが、ユーザの身体の他の部位であってもよい。
【0057】
センサ部１６は、例えば、地磁気センサ、加速度センサ、角速度センサ等の傾きセンサ等を備え、これによって、現実空間のＨＭＤ１の傾き（向き）を検出してもよい。この検知されたＨＭＤ１の向きに応じて、仮想空間におけるアバターＭ１の向き（仮想カメラＣａ１の撮影方向）が設定される。また、センサ部１６は、赤外線照射素子と、赤外線カメラとを有する赤外線検知センサをハンドトラッキングセンサとして備えてもよい。具体的には、赤外線照射素子から照射されて、手や腕等で反射した赤外光を赤外線カメラで検知することで、手や腕の姿勢や手や腕等の動作（ユーザのハンドジェスチャー）、及び手や腕の位置を検出してもよい。本実施形態では、傾きセンサに検出された現実空間のＨＭＤ１の向きと、検出されたハンドジェスチャー（指示ジェスチャーや撮影ジェスチャー等）と、手や腕の位置に基づいて、仮想空間Ｗにおけるハンドジェスチャーで指し示す方向に対応する方向（図５、図１０及び図１１において交点Ｐに向かう方向）が決定される。
【0058】
ユーザの身体の少なくとも一部のジェスチャーを検出するための方法は、上記赤外線検知センサによる検出に限らず、他の方法であってもよい。例えば、可視光を検知する通常のカメラの撮影画像を用いた方法であってもよい。この方法では、現実空間においてユーザを撮影した撮影画像を画像解析することで、ハンドジェスチャーや手や腕の位置が検出される。画像解析では、例えば、ユーザの身体のシルエットを抽出し、抽出したシルエットに基づいて骨格モデルが形成され、骨格モデルに基づいてユーザのハンドジェスチャーが検出される。また、ユーザの身体に取り付けたマーカの位置をトラッキングする光学式モーションキャプチャシステムや、体に装着した慣性センサから得た加速度・角速度・方位の情報を骨格モデルに当てはめることで体の動作を計測する慣性式モーションキャプチャシステムを用いて、ユーザのハンドジェスチャーが検出されてもよい。また、ユーザの手等で把持するコントローラを用いて、ユーザのジェスチャーが検出されてもよい。
【0059】
プロセッサ１０は、例えば、ＣＰＵ(Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ)、ＭＰＵ（Ｍｉｃｒｏ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）、及び／またはＧＰＵ（Ｇｒａｐｈｉｃｓ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）で構成されている。プロセッサ１０は、ストレージ１１に記憶されている対象物情報プログラムＰ１を実行することで、画像表示手段１０１、位置特定手段１０２、対象物特定手段１０３、提供手段１０４、位置情報記憶手段１０５、撮影手段１０６、及び画像取得手段１０７として機能する。
【0060】
画像表示手段１０１は、例えば、サーバ３が記憶する空間動画データＤをストリーミング再生等して、ＨＭＤ１のディスプレイ１３において、空間画像を表示する仮想空間Ｗを表示させる。位置特定手段１０２は、上述した位置特定処理を実行する。以下、位置特定処理をより詳細に説明する。
【0061】
〔ＨＭＤ１の構成：位置特定処理の説明〕
図５を用いて本実施形態における位置特定処理を説明する。位置特定処理では、上述したように、現実空間におけるＨＭＤ１のユーザの身体の少なくとも一部（手等）のジェスチャー（所定の指示ジェスチャー）に基づいて、空間画像における位置が特定される。本実施形態では、現実空間において、ユーザの手で指し示す指示姿勢（例えば人差し指での指差しの姿勢）が所定の指示ジェスチャーとしてされたときに、仮想空間Ｗの所定位置（例えば中心点）から、指示姿勢の指し示す方向に対応する方向にある位置が、空間画像における位置として特定される。本実施形態では、仮想空間Ｗの表面に空間画像が表示されるため、所定位置から指示姿勢の差し示す方向に対応する方向に延びる直線と仮想空間Ｗの交点である位置Ｐが所定位置として特定される。例えば、ユーザが、現実空間で右斜め上の方向を指し示す指示姿勢を行った場合に、仮想空間において、仮想空間Ｗでも右斜め上（仮想空間におけるユーザの正面を基準として）に延びる直線と仮想空間Ｗの交点である位置Ｐが、空間画像における位置として特定される。
図５を用いて本実施形態における位置特定処理を説明する。位置特定処理では、上述したように、現実空間におけるＨＭＤ１のユーザの身体の少なくとも一部（手等）のジェスチャー（所定の指示ジェスチャー）に基づいて、空間画像における位置が特定される。本実施形態では、現実空間において、ユーザの手で指し示す指示姿勢（例えば人差し指での指差しの姿勢）が所定の指示ジェスチャーとしてされたときに、仮想空間Ｗの所定位置（例えば中心点）から、指示姿勢の指し示す方向に対応する方向にある位置が、空間画像における位置として特定される。本実施形態では、仮想空間Ｗの表面に空間画像が表示されるため、所定位置から指示姿勢の差し示す方向に対応する方向に延びる直線と仮想空間Ｗの交点である位置Ｐが所定位置として特定される。例えば、ユーザが、現実空間で右斜め上の方向を指し示す指示姿勢を行った場合に、仮想空間において、仮想空間Ｗでも右斜め上（仮想空間におけるユーザの正面を基準として）に延びる直線と仮想空間Ｗの交点である位置Ｐが、空間画像における位置として特定される。
【0062】
対象物特定手段１０３は、対象物選択処理、及び上述した対象物特定処理を実行する。対象物選択処理では、位置特定手段１０２によって特定された位置（図５の位置Ｐ）に、対象物Ｏがある（表示されている）場合に、当該対象物Ｏが選択状態であることが表示される。対象物特定処理では、上述したように、位置特定手段１０２によって特定された位置に対象物Ｏが表示されている場合に、この対象物Ｏが特定される。
【0063】
〔ＨＭＤ１の構成：対象物選択処理の説明〕
図５及び図６を用いて本実施形態における対象物選択処理を説明する。対象物特定処理において、本実施形態では、選択状態の対象物Ｏに対応付けて、対象物情報Ｊ１の一部である表示用情報Ｊ３を仮想空間に表示することで、当該対象物Ｏが選択状態であることが表示される。もっとも、対象物Ｏに重ねて選択アイコンを表示したり、色を変える等、他の方法によって選択状態であることを表示してもよい。図６では、２つの対象物Ｏがユーザの視界（仮想カメラＣａ１の撮影領域Ｆ１すなわち撮影画像Ｖ１）内に表示されている様子を示し、奥側の対象物Ｏがユーザの所定の指示ジェスチャーにより特定された位置（位置Ｐ）に存在する様子を示している。奥側の対象物Ｏに重ねて表示された吹き出し内に、表示用情報Ｊ３が表示されている。
図５及び図６を用いて本実施形態における対象物選択処理を説明する。対象物特定処理において、本実施形態では、選択状態の対象物Ｏに対応付けて、対象物情報Ｊ１の一部である表示用情報Ｊ３を仮想空間に表示することで、当該対象物Ｏが選択状態であることが表示される。もっとも、対象物Ｏに重ねて選択アイコンを表示したり、色を変える等、他の方法によって選択状態であることを表示してもよい。図６では、２つの対象物Ｏがユーザの視界（仮想カメラＣａ１の撮影領域Ｆ１すなわち撮影画像Ｖ１）内に表示されている様子を示し、奥側の対象物Ｏがユーザの所定の指示ジェスチャーにより特定された位置（位置Ｐ）に存在する様子を示している。奥側の対象物Ｏに重ねて表示された吹き出し内に、表示用情報Ｊ３が表示されている。
【0064】
〔ＨＭＤ１の構成：対象物特定処理の説明〕
そして、対象物特定処理において、現実空間において、ユーザの手で所定の取得ジェスチャーがなされた場合に、選択状態である対象物Ｏが特定される。ここで、「所定の取得ジェスチャー」とは、「所定の取得姿勢及び／又は所定の取得動作」である、具体的には、所定の取得姿勢、所定の取得動作又はこれらの組み合わせである。本実施形態では、所定の取得ジェスチャーは、人差指と親指でつまむグリップ動作（所定の取得動作）である。もっとも、所定の取得ジェスチャーとして他のジェスチャーを採用してもよい。例えば、手を握った姿勢（所定の取得姿勢）を採用してもよく、所定の指示姿勢から所定期間内に上記所定の取得動作がされたことを、所定の取得ジェスチャーとして採用してもよい。この場合には、所定の指示姿勢が所定の取得姿勢となり、この所定の取得姿勢と、上記グリップ動作（所定の取得動作）との組み合わせが所定の取得ジェスチャーとなる。
そして、対象物特定処理において、現実空間において、ユーザの手で所定の取得ジェスチャーがなされた場合に、選択状態である対象物Ｏが特定される。ここで、「所定の取得ジェスチャー」とは、「所定の取得姿勢及び／又は所定の取得動作」である、具体的には、所定の取得姿勢、所定の取得動作又はこれらの組み合わせである。本実施形態では、所定の取得ジェスチャーは、人差指と親指でつまむグリップ動作（所定の取得動作）である。もっとも、所定の取得ジェスチャーとして他のジェスチャーを採用してもよい。例えば、手を握った姿勢（所定の取得姿勢）を採用してもよく、所定の指示姿勢から所定期間内に上記所定の取得動作がされたことを、所定の取得ジェスチャーとして採用してもよい。この場合には、所定の指示姿勢が所定の取得姿勢となり、この所定の取得姿勢と、上記グリップ動作（所定の取得動作）との組み合わせが所定の取得ジェスチャーとなる。
【0065】
上記のように、ユーザが視界において対象物Ｏを指し示す直感的な指示姿勢をすることで、ユーザは対象物Ｏを選択状態にすることができる。そして、選択情報であることが表示されるため、ユーザは選択状態になった対象物Ｏが所望の対象物Ｏであるかを検討し、所望の対象物Ｏである場合にのみ、所定の取得ジェスチャーを行って、対象物Ｏを特定することができる。これによって、所望しない特定物Ｏを特定してしまうことを防止することができる。
【0066】
〔ＨＭＤ１の構成：対象物特定処理の説明：対象物テーブル〕
上述したように本実施形態では、対象物特定処理において、位置特定手段１０２によって特定された位置に、対象物Ｏが表示されているかどうかの判断は、対象物テーブルＴ１（位置情報）に基づいてなされる。上述したように、空間画像が動画である場合に再生時間（例えば、再生開始時からの経過時間）に応じて対象物Ｏの位置が変化する場合があるからである。図７を用いて、対象物テーブルＴ１を説明する。図７は、対象物テーブルの一例である。対象物テーブルＴ１には、対象物Ｏに固有の識別情報である対象物識別情報Ｊ２と、選択表示用情報Ｊ３とが互いに対応付けて登録されている。選択表示用情報Ｊ３は、上述したように、対象物情報Ｊ１の少なくとも一部（例えば、商品の名称、施設・店舗・建築物の名称、自然物の名称等の対象物名）である。例えば、対象物テーブルＴ１には、図６の手前側の対象物Ｏについての対象物識別情報Ｊ２（Ｊ２１）、図６の奥側の対象物Ｏについての対象物識別情報Ｊ２（Ｊ２２）が登録されている。そして、対象物識別情報Ｊ２１に対応付けて、図６の手前側の対象物Ｏについての選択表示用情報Ｊ３（Ｊ３１）が登録されているとともに、対象物識別情報Ｊ２２に対応付けて、図６の奥側の対象物Ｏについての選択表示用情報Ｊ３（Ｊ３２）が登録されている。
上述したように本実施形態では、対象物特定処理において、位置特定手段１０２によって特定された位置に、対象物Ｏが表示されているかどうかの判断は、対象物テーブルＴ１（位置情報）に基づいてなされる。上述したように、空間画像が動画である場合に再生時間（例えば、再生開始時からの経過時間）に応じて対象物Ｏの位置が変化する場合があるからである。図７を用いて、対象物テーブルＴ１を説明する。図７は、対象物テーブルの一例である。対象物テーブルＴ１には、対象物Ｏに固有の識別情報である対象物識別情報Ｊ２と、選択表示用情報Ｊ３とが互いに対応付けて登録されている。選択表示用情報Ｊ３は、上述したように、対象物情報Ｊ１の少なくとも一部（例えば、商品の名称、施設・店舗・建築物の名称、自然物の名称等の対象物名）である。例えば、対象物テーブルＴ１には、図６の手前側の対象物Ｏについての対象物識別情報Ｊ２（Ｊ２１）、図６の奥側の対象物Ｏについての対象物識別情報Ｊ２（Ｊ２２）が登録されている。そして、対象物識別情報Ｊ２１に対応付けて、図６の手前側の対象物Ｏについての選択表示用情報Ｊ３（Ｊ３１）が登録されているとともに、対象物識別情報Ｊ２２に対応付けて、図６の奥側の対象物Ｏについての選択表示用情報Ｊ３（Ｊ３２）が登録されている。
【0067】
更に、対象物テーブルＴ１には、登録されている対象物識別情報Ｊ２夫々について、複数の再生時間Ｊ４（例えば、再生開始時からの経過時間）が登録されている。この再生時間Ｊ４は、対応する対象物Ｏが再生時間に応じて移動する場合において、移動の仕方が変化する時点の再生時間である。移動の仕方が変化する時点とは、例えば、移動方向が変化する起点又は移動速度が変化する起点を示す。例えば、対象物Ｏの空間画像における位置が直線状に移動した後に、屈曲して更に直線状に移動する場合では、最初の直線状の移動を開始する再生時間（図７の再生時間ｔ１）が再生時間Ｊ４として登録される。そして、屈曲時（この直線状の移動の終了時）の再生時間（再生時間ｔ２）についても再生時間Ｊ４として登録される。また、対象物Ｏが上記屈曲後に直線状に移動しながら、途中で速度を変えて更に直線状に移動する場合、速度を変える時点の再生時間Ｊ４（再生時間ｔ３）が登録される。
【0068】
対象物テーブルＴ１には、夫々の再生時間Ｊ４に対応付けて、対応する再生時間Ｊ４（例えば再生時間ｔ１）から次の再生時間Ｊ４（例えば再生時間ｔ２）までの、対象物Ｏの移動速度J５が登録される。また、再生時間Ｊ４夫々について、対象物Ｏの位置情報として角度情報Ｊ６が登録される。角度情報J６は、図５で示すように、仮想空間Ｗの全天球を上下方向に切断した円形の面を基準とした角度であり、空間画像（仮想空間Ｗの表面）の位置を示すための角度である。角度情報J６は、水平方向の角度θ１と、垂直方向の角度θ２の２つの情報を含む。角度θ１は、上記円形の面において、その中心から何れか一方向に円の縁まで伸びる基準線Ｌ１からの角度（基準線Ｌ１と他の半径との間の中心角）を示す。角度θ２は、上記円形の面（の中心）を基準とした仰角である。角度θ１と角度θ２によって、夫々の再生時間Ｊ４において、空間画像（仮想空間Ｗ）の対象物Ｏの位置を示すことができる。ここで、再生時間Ｊ４（図７の再生時間ｔ１）の角度情報Ｊ６は、角度θ１でａ１度～ａ２度、角度θ２でｂ１度～ｂ２度であることを示す。そして、次の再生時間Ｊ４（図７の再生時間ｔ２）の角度情報Ｊ６は、角度θ１でａ３度～ａ４度、角度θ２でｂ３度～ｂ４度であることを示す。この再生時間ｔ１と再生時間ｔ２との間の再生時間における対象物Ｏの空間画像における位置は、再生時間ｔ１の角度情報Ｊ６、再生時間ｔ２の角度情報Ｊ６、及び再生時間ｔ１の移動速度Ｊ５から算出される。再生時間ｔ２と再生時間ｔ３との間の再生時間における対象物Ｏの空間画像における位置についても、同様に、再生時間ｔ２に対応する移動速度Ｊ５、再生時間ｔ２の角度情報Ｊ６、及び再生時間ｔ３の角度情報Ｊ６から算出される。
【0069】
なお、本実施形態では、角度情報Ｊ６では、角度θ１でａ１度～ａ２度、角度θ２でｂ１度～ｂ１度といった角度範囲が登録されているがこの構成に限定されない。基準となる角度が登録され、基準となる角度から所定角度だけプラスした角度と所定角度だけマイナスして角度範囲を算出してもよい。また、本実施形態では、移動速度Ｊ５が登録されているが、移動速度J５を登録せず、２つの再生時間Ｊ４の時間差（例えば再生時間ｔ１及び再生時間ｔ２の時間差）と、２つの再生時間Ｊ４の角度情報Ｊ６（例えば再生時間ｔ１及び再生時間ｔ２の角度情報Ｊ６）から、移動速度Ｊ５を算出してもよい。また、本実施形態では、移動の仕方が変化する時点の再生時間Ｊ４のみを対象物テーブルＴ１に登録し、移動の仕方が変化する時点の間の再生時間における対象物Ｏの位置は計算によって求めるが他の方法を採用してもよい。例えば、再生時間の範囲（例えば再生時間ｔ１～ｔ２）を登録するとともに、この範囲に対応付けて、角度情報Ｊ６が対象物テーブルＴ１に登録されてもよい。そして、現在の再生時間が含まれる再生時間の範囲から、これに対応する角度情報Ｊ６が対象物テーブルＴ１から取得され、この角度情報Ｊ６を空間画像における位置としてもよい。本実施形態では、位置特定手段１０２によって特定された位置に、対象物Ｏが表示されているかどうかの判断は、対象物テーブルＴ１（位置情報）に基づいてなされるが、他の方法を採用してもよい。例えば、特定された位置（この位置を含む所定の領域）に表示されている画像と、予めＨＭＤ１に登録された対象物Ｏの画像とに基づいて、画像解析によって、判断されてもよい。
【0070】
提供手段１０４は、情報処理装置２を介してユーザに、対象物特定手段１０３に特定された対象物Ｏに関する情報である対象物情報Ｊ１を提供する。具体的には、ユーザが対象情報Ｊ１の提供を受けることが出来るように、対象物情報Ｊ１を情報処理装置２に取得させる取得処理を行う。取得処理では、提供手段１０４は、対象物Ｏが特定された場合に、対象物情報Ｊ１の送信要求をサーバ３に対して送信し、対象物情報Ｊ１の送信要求に応じたサーバ３から対象物情報Ｊ１を受信させることで、対象物情報Ｊ１を情報処理装置２に取得させる。これによって、本実施形態のように、ＨＭＤ１と情報処理装置２とが通信可能に接続されていない場合でも、対象物情報Ｊ１を情報処理装置２に取得させることができる。また、サーバ３側で対象物情報Ｊ１を記憶しているため、対象物情報Ｊ１の内容の更新がし易くなる。
【0071】
本実施形態では、提供手段１０４は、ユーザの任意のタイミングで対象物情報を提供できるように、対象物情報Ｊ１を情報処理装置２に取得させる。「ユーザの任意のタイミングで対象物情報を提供」する例としては、電子メールで情報処理装置２に対して対象物情報Ｊ１を送信すること等である。この方法では、電子メールに記載された又は添付された対象物情報Ｊ１を情報処理装置２のストレージ２１（図４）に記憶させて、ユーザが視認したいときに表示できる。その他の例としては、情報処理装置２でダウンロードしたアプリケーションを介して、ユーザ任意のタイミングでサーバ３から情報処理装置２が対象物情報Ｊ２の受信を受けることである。
【0072】
位置情報記憶手段１０５は、対象物テーブルＴ１（本発明の位置情報に相当する角度情報Ｊ６を含む）の送信要求をサーバ３に対して送信し、この送信要求に応答したサーバ３から通信ネットワークＮを介して対象物テーブルＴ１を取得して、メモリ１５（本発明の記憶部）に記憶させる。なお、ストレージ１１に記憶させてもよい。
【0073】
撮影手段１０６は、上述した撮影処理を実行する。撮影処理では、上述したように、現実空間におけるユーザの身体の少なくとも一部で所定の撮影ジェスチャーがされた場合に、仮想空間Ｗがこの仮想空間Ｗ内の仮想カメラＣａ２から撮影される。画像取得手段１０７は、仮想カメラＣａ２からの撮影画像Ｖ２をサーバ３に対して送信するとともに、仮想カメラＣａ２からの撮影画像Ｖ２の情報処理装置３への送信要求をサーバ３に対して送信する。
【0074】
〔サーバ３の構成〕
図３は、図１で示すサーバ３の機能ブロック図である。サーバ３は、プロセッサ３０、ストレージ３１、通信部３２、及びメモリ３３を有する。ストレージ３１は、例えば、ハードディスク、ＳＳＤ、ＵＳＢフラッシュメモリ等である。ストレージ３１には、ユーザ情報テーブルＴ２、対象物情報Ｊ１、空間動画データＤ、及びサーバ側対象物情報プログラムＰ２が記憶されている。
図３は、図１で示すサーバ３の機能ブロック図である。サーバ３は、プロセッサ３０、ストレージ３１、通信部３２、及びメモリ３３を有する。ストレージ３１は、例えば、ハードディスク、ＳＳＤ、ＵＳＢフラッシュメモリ等である。ストレージ３１には、ユーザ情報テーブルＴ２、対象物情報Ｊ１、空間動画データＤ、及びサーバ側対象物情報プログラムＰ２が記憶されている。
【0075】
ユーザ情報テーブルＴ２は、ＨＭＤ１のユーザに関する情報が登録されており、複数のＨＭＤ１が本実施形態に係る対象物情報提供システム１００に含まれる等して、ユーザが複数いる場合には、複数のユーザに関する情報が登録されている。ユーザに関する情報は、例えばユーザの識別ＩＤ、パスワード、及び電子メールアドレス等である。対象物情報Ｊ１は、空間動画データＤの再生によって表示される空間画像に含まれる、対象物Ｏについての情報であり、対象物識別情報Ｊ２に対応付けて記憶されている。空間動画データＤは、例えば、３６０度カメラ等で撮影した動画データである。サーバ側対象物情報プログラムＰ２は、プロセッサ３０にサーバ側対象物情報取得処理を実行させるプログラムである。サーバ側対象物情報取得処理についての詳細は後述する。
【0076】
通信部３２は、他の情報処理装置と有線及び／又は無線でインターネット等のネットワークＮを介して通信を行うものである。具体的には、通信部３２は、ネットワークＮを介してＨＭＤ１及び情報処理装置２と通信を行う。メモリ３３は、例えば、ＲＯＭ、ＲＡＭで構成されるものである。
【0077】
プロセッサ３０は、例えば、ＣＰＵ、ＭＰＵ、及び／またはＧＰＵで構成されている。プロセッサ３０は、サーバ側対象物情報取得処理を実行することで、表示処理手段３０１、情報受信処理手段３０２、及び情報送信処理手段３０３として機能する。
【0078】
表示処理手段３０１は、ＨＭＤ１において、空間画像を仮想空間Ｗに表示させるための処理を行う。情報受信処理手段３０２は、現実空間におけるユーザの身体の少なくとも一部のジェスチャーに基づいて特定された空間画像の位置において、対象物Ｏが表示されている場合に、この特定の対象物Ｏに関連する対象物情報Ｊ１の送信要求をＨＭＤ１から受信する。情報処理送信手段３０３は、情報受信手段３０２によって対象物情報Ｊ１の送信要求を受信した場合に、ストレージ３１に記憶された対象物情報Ｊ１（送信要求に含まれる対象物識別情報Ｊ２に対応する対象物情報Ｊ１）を情報処理装置２に対して送信する。また、情報処理送信手段３０３は、ＨＭＤ１において仮想カメラＣａ２から撮影した撮影画像Ｖ２を、撮影画像Ｖ２の送信要求とともに情報受信処理手段３０２で受信した場合に、この撮影画像Ｖ２を情報処理装置２に対して送信する。
【0079】
情報処理送信手段３０３による、情報処理装置２への仮想カメラＣａ２から撮影した撮影画像Ｖ２や対象物情報Ｊ１の送信は、次のようにして行う。例えば、ユーザ情報テーブルＴ２を、対象物情報Ｊ１の送信要求や撮影画像Ｖ２の送信要求に含まれるユーザ識別情報で検索して、ユーザ識別情報に対応する電子メールアドレスを取得して、この電子メールアドレス宛に撮影画像Ｖ２や対象物情報Ｊ１を送信する。また、情報処理装置２にダウンロードされたアプリケーションを介して、ユーザ任意のタイミングで撮影画像Ｖ２や対象物情報Ｊ１を取得（受信）してユーザに提供することが出来るようにしてもよい。
【0080】
また、情報処理送信手段３０３は、ＨＭＤ１（位置情報記憶手段１０５）からの対象物テーブルＴ１の送信要求を受信して、この送信要求に応じて、表示処理手段３０１で表示処理される空間画像に対応する対象物テーブルＴ１（位置情報）を、ＨＭＤ１に対して送信する。
【0081】
〔情報処理装置２の構成〕
図４は、図１で示す情報処理装置２の機能ブロック図である。情報処理装置２は、プロセッサ２０、ストレージ２１、通信部２２、表示部２３、操作部２４、及びメモリ２５を有する。ストレージ２１は、例えば、ハードディスク、ＳＳＤ、ＵＳＢフラッシュメモリ等である。ストレージ２１は、電子メール用アプリケーションソフトウェアや対象物情報閲覧用アプリケーションソフトウェア等を記憶する。
図４は、図１で示す情報処理装置２の機能ブロック図である。情報処理装置２は、プロセッサ２０、ストレージ２１、通信部２２、表示部２３、操作部２４、及びメモリ２５を有する。ストレージ２１は、例えば、ハードディスク、ＳＳＤ、ＵＳＢフラッシュメモリ等である。ストレージ２１は、電子メール用アプリケーションソフトウェアや対象物情報閲覧用アプリケーションソフトウェア等を記憶する。
【0082】
通信部２２は、他の情報処理装置と有線及び／又は無線でインターネット等のネットワークＮを介して通信を行うものである。具体的には、通信部２２は、ネットワークＮを介してサーバ３と通信を行うものである。表示部２３は、例えば、液晶ディスプレイや有機ＥＬディスプレイ等である。操作部２４は、ユーザからの指示（操作）を受け付けるためのものである。メモリ２５は、例えば、ＲＯＭやＲＡＭで構成されるものである。
【0083】
プロセッサ２０は、例えば、ＣＰＵ、ＭＰＵ、及び／またはＧＰＵで構成されている。プロセッサ３０は、ストレージ２１に記憶されている電子メール用アプリケーションソフトウェア又は対象情報閲覧用アプリケーションソフトウェアを実行する。これによって、ＨＭＤ１の対象物情報送信処理の実行によってサーバ３から送信された、対象物情報Ｊ１や撮影画像Ｖ２を受信（取得）して、ユーザに提供することができる。
【0084】
〔対象物情報取得処理〕
以下に、図１、図２、図５、図６、図８、図９、図１２及び図１３を用いて、対象物情報取得処理を説明する。図１２は、ＨＭＤ１の実行する対象物情報取得処理の一例を示すフローチャート（その１）である。図１３は、ＨＭＤ１の実行する対象物情報取得処理の一例を示すフローチャート（その２）である。対象物情報取得処理は、ＨＭＤ１でユーザの対象物情報取得処理の実行の開始指示を受け付けたときに実行される。図１２を参照して、まず、プロセッサ１０は、所定の初期処理を実行する（Ｓ１）。所定の初期処理では、サーバ３に対して対象物テーブルＴ１の送信要求を送信して、この送信要求に応答したサーバ３から対象物テーブルＴ１のダウンロードが行われる。次に、プロセッサ１０は、サーバ３に対して表示処理要求を送信し、表示処理要求に応じたサーバ２から空間動画データＤ（図３を参照）のストリーミングデータを逐次受信して再生を開始する（Ｓ２）。次に、プロセッサ１０は、現実空間においてユーザが指示ジェスチャーを行ったかどうかを判断する（Ｓ３）。
以下に、図１、図２、図５、図６、図８、図９、図１２及び図１３を用いて、対象物情報取得処理を説明する。図１２は、ＨＭＤ１の実行する対象物情報取得処理の一例を示すフローチャート（その１）である。図１３は、ＨＭＤ１の実行する対象物情報取得処理の一例を示すフローチャート（その２）である。対象物情報取得処理は、ＨＭＤ１でユーザの対象物情報取得処理の実行の開始指示を受け付けたときに実行される。図１２を参照して、まず、プロセッサ１０は、所定の初期処理を実行する（Ｓ１）。所定の初期処理では、サーバ３に対して対象物テーブルＴ１の送信要求を送信して、この送信要求に応答したサーバ３から対象物テーブルＴ１のダウンロードが行われる。次に、プロセッサ１０は、サーバ３に対して表示処理要求を送信し、表示処理要求に応じたサーバ２から空間動画データＤ（図３を参照）のストリーミングデータを逐次受信して再生を開始する（Ｓ２）。次に、プロセッサ１０は、現実空間においてユーザが指示ジェスチャーを行ったかどうかを判断する（Ｓ３）。
【0085】
現実空間においてユーザが指示ジェスチャーを行ったと判断した場合には（Ｓ３でＹＥＳ）、プロセッサ１０（位置特定手段１０２）は、上述した位置特定処理を実行する（Ｓ４）。この位置特定処理によって、空間画像の位置（例えば、図５の位置Ｐ）が特定される。その後、プロセッサ１０（対象物特定手段１０３）は、上述した対象物選択処理を実行する（Ｓ５）。この対象物選択処理によって、ステップＳ４で特定された空間画像の位置に対象物Ｏが表示されている場合に、この対象物Ｏを選択状態にする（対象物Ｏの選択状態フラグをオンにする）。選択状態にしたときに、図６で示すように、選択状態の対象物Ｏに対応付けて、対象物情報Ｊ１の少なくとも一部である選択表示用情報Ｊ３が仮想空間に表示される。その後、プロセッサ１０は、処理をステップＳ６に進める。また、現実空間においてユーザが指示ジェスチャーを行っていないと判断した場合には（Ｓ３でＮＯ）、プロセッサ１０は、ステップＳ４及びステップＳ５を実行することなく、ステップＳ６を実行する。なお、この場合に、選択状態の対象物Ｏがあれば、選択状態を解除する（対象物Ｏの選択状態フラグをオフにする）。
【0086】
ステップＳ６において、プロセッサ１０（対象物特定手段１０３）は、現実空間においてユーザが取得ジェスチャーを行ったかどうかを判断する（Ｓ６）。現実空間においてユーザが取得ジェスチャーを行ったと判断した場合には（Ｓ６でＹＥＳ）、プロセッサ１０（対象物特定手段１０３）は、ステップＳ４で特定された空間画像の位置（例えば図５の位置Ｐ）に、選択状態の対象物Ｏが表示されているかどうかを判断する（Ｓ７）。特定された空間画像の位置（例えば図５の位置Ｐ）に、選択状態の対象物Ｏが表示されていると判断した場合には（Ｓ７でＹＥＳ）、プロセッサ１０（対象物特定手段１０３）は、この選択状態の対象物Ｏを特定する（Ｓ８）。ステップＳ６～Ｓ８までの処理が、上述した対象物特定処理である。その後、プロセッサ１０（提供手段１０４）は、特定した対象物Ｏについての対象物情報Ｊ１の送信要求をサーバ３に送信する取得処理を実行する（Ｓ９）。この送信要求には、自機のユーザに対応するユーザ識別情報及び特定された対象物Ｏの対象物識別情報Ｊ２が含まれる。その後、プロセッサ１０は、処理をステップＳ１０に進める。
【0087】
一方、現実空間においてユーザが取得ジェスチャーを行っていないと判断した場合には（Ｓ６でＮＯ）、プロセッサ１０は、上記ステップＳ７～Ｓ９を実行することなく、後述のステップＳ１０を実行する。ステップＳ２で特定された空間画像の位置（例えば図５の位置Ｐ）に、選択状態の対象物Ｏが表示されていないと判断した場合（Ｓ７でＮＯ）、プロセッサ１０は、上記ステップＳ８及びＳ９を実行することなく、後述のステップＳ１０を実行する。
【0088】
図１３を参照して、ステップＳ１０では、プロセッサ１０（撮影手段１０６）は、現実空間においてユーザが撮影ジェスチャーを行ったかどうかを判断する（Ｓ１０）。現実空間においてユーザが撮影ジェスチャーを行ったと判断した場合には（Ｓ１０でＹＥＳ）、プロセッサ１０（撮影手段１０６）は、上述した撮影処理を実行する（Ｓ１１）。この撮影処理では、撮影ジェスチャーが第１撮影指示用撮影ジェスチャーであるか、第２撮影指示用撮影ジェスチャーであるかに応じて、仮想カメラＣａ２の位置や撮影方向を切り替えて、仮想カメラＣａ２からの撮影画像Ｖ２を取得する。また、撮影処理では、図８及び図９で示すように、撮影画像Ｖ２がユーザに視認可能に表示される。
【0089】
その後、プロセッサ１０（画像取得手段１０７）は、撮影画像Ｖ２の送信要求を、ステップＳ１１で撮影した撮影画像とともに送信する（Ｓ１２）。この送信要求には、ユーザに対応するユーザ識別情報が含まれる。その後、プロセッサ１０は、処理をステップＳ１３に進める。一方、現実空間においてユーザが撮影ジェスチャーを行っていないと判断した場合には（Ｓ１０でＮＯ）、プロセッサ１０は、上記ステップＳ１１及びＳ１２を実行することなく、後述のステップＳ１３を実行する。
【0090】
ステップＳ１３では、プロセッサ１０は、空間動画データＤの再生が終了したかどうかを判断する（Ｓ１３）。空間動画データＤの再生が終了したと判断した場合には（Ｓ１３でＹＥＳ）、プロセッサ１０は、本対象物情報取得処理を終了させる。一方、空間動画データＤの再生が終了していないと判断した場合には（Ｓ１３でＮＯ）、プロセッサ１０は、本対象物情報取得処理をステップＳ３に戻す。
【0091】
〔サーバ側対象物情報取得処理〕
次に、図１、図３、及び１４を用いて、サーバ側対象物情報取得処理を説明する。図１４は、サーバ３の実行するサーバ側対象物情報取得処理の一例を示すフローチャートである。まず、プロセッサ３０（情報送信処理手段３０３）は、ＨＭＤ１から対象物テーブルＴ１の送信要求を受信したかどうか判断する（Ｓ２１）。対象物テーブルＴ１の送信要求は、図１２のステップＳ１において送信される。ＨＭＤ１から対象物テーブルＴ１の送信要求を受信したと判断した場合には（Ｓ２１でＹＥＳ）、プロセッサ３０（情報送信処理手段３０３）は、対象物テーブルＴ１の送信要求の送信元のＨＭＤ１に対して、対象物テーブルＴ１を送信する（Ｓ２２）。その後、プロセッサ３０は、処理をステップＳ２３に進める。また、ＨＭＤ１から対象物テーブルＴ１を受信していないと判断した場合には（Ｓ２１でＮＯ）、プロセッサ３０は、上記ステップＳ２２を実行することなく、ステップＳ２３を実行する。
次に、図１、図３、及び１４を用いて、サーバ側対象物情報取得処理を説明する。図１４は、サーバ３の実行するサーバ側対象物情報取得処理の一例を示すフローチャートである。まず、プロセッサ３０（情報送信処理手段３０３）は、ＨＭＤ１から対象物テーブルＴ１の送信要求を受信したかどうか判断する（Ｓ２１）。対象物テーブルＴ１の送信要求は、図１２のステップＳ１において送信される。ＨＭＤ１から対象物テーブルＴ１の送信要求を受信したと判断した場合には（Ｓ２１でＹＥＳ）、プロセッサ３０（情報送信処理手段３０３）は、対象物テーブルＴ１の送信要求の送信元のＨＭＤ１に対して、対象物テーブルＴ１を送信する（Ｓ２２）。その後、プロセッサ３０は、処理をステップＳ２３に進める。また、ＨＭＤ１から対象物テーブルＴ１を受信していないと判断した場合には（Ｓ２１でＮＯ）、プロセッサ３０は、上記ステップＳ２２を実行することなく、ステップＳ２３を実行する。
【0092】
ステップＳ２３において、プロセッサ３０（表示処理手段３０１）は、ＨＭＤ１から表示処理要求を受信したかどうか判断する（Ｓ２３）。表示処理要求は、図１２のステップＳ２において送信される。ＨＭＤ１から表示処理要求を受信したと判断した場合には（Ｓ２３でＹＥＳ）、プロセッサ３０（表示処理手段３０１）は、ＨＭＤ１において、空間画像を仮想空間Ｗに表示させるための処理を行う（Ｓ２４）。このステップＳ２４において、表示処理要求の対象となる空間動画データＤ（図３を参照）を特定し、この特定した空間動画データＤのストリーミングデータを逐次表示処理要求の送信元のＨＭＤ１に対して送信を開始する。その後、プロセッサ３０は、処理をステップＳ２５に進める。また、ＨＭＤ１から表示処理要求を受信していないと判断した場合には（Ｓ２３でＮＯ）、プロセッサ３０は、上記ステップＳ２４を実行することなく、ステップＳ２５を実行する。
【0093】
ステップＳ２５において、プロセッサ３０（情報受信手段３０２）は、対象物情報Ｊ１の送信要求をＨＭＤ１から受信したかどうかを判断する（Ｓ２５）。この対象物情報Ｊ１の送信要求は、図１２のステップＳ９において送信される。対象物情報Ｊ１の送信要求を受信したと判断した場合には（Ｓ２５でＹＥＳ）、プロセッサ３０（情報送信手段３０３）は、情報処理装置２に対して対象物情報Ｊ１を送信する（Ｓ２６）。ステップＳ２６において、対象物情報Ｊ１の送信要求に含まれる対象物識別情報Ｊ２に対応する対象物情報Ｊ１がストレージ２１から読み出される。そして、対象物情報Ｊ１の送信要求に含まれるユーザ識別情報でユーザ情報テーブルＴ２を検索して、対象物情報Ｊ１の送信要求の送信元のＨＭＤ１を使用するユーザの電子メールアドレスが取得され、この電子メールアドレス宛に、読み出された対象物情報Ｊ１が送信される。その後、プロセッサ３０は、処理をステップＳ２７に進める。また、ＨＭＤ１から対象物情報Ｊ１の送信要求を受信していないと判断した場合には（Ｓ２５でＮＯ）、プロセッサ３０は、上記ステップＳ２６を実行することなく、ステップＳ２７を実行する。
【0094】
ステップＳ２７において、プロセッサ３０（情報受信処理手段３０２）は、撮影画像Ｖ２の送信要求と撮影画像Ｖ２をＨＭＤ１から受信したかどうかを判断する（Ｓ２７）。この撮影画像Ｖ２の送信要求は、図１３のステップＳ１２において送信される。撮影画像の送信要求を受信したと判断した場合には（Ｓ２７でＹＥＳ）、プロセッサ３０（情報送信手段３０３）は、情報処理装置２に対して撮影画像Ｖ２を送信する（Ｓ２８）。ステップＳ２８において、撮影画像Ｖ２の送信要求に含まれるユーザ識別情報でユーザ情報テーブルＴ２を検索して、撮影画像Ｖ２の送信要求の送信元のＨＭＤ１を使用するユーザの電子メールアドレスが取得され、この電子メールアドレス宛に、撮影画像Ｖ２の送信要求とともに受信した撮影画像を送信する。その後、プロセッサ３０は、処理をステップＳ２１に戻す。また、撮影画像の送信要求を受信していないと判断した場合には（Ｓ２７でＮＯ）、プロセッサ３０は上記ステップＳ２８を実行することなく処理をステップＳ２１に戻す。
【0095】
（処理装置側対象物情報取得処理）
次に、図１、図４、及び図１５を参照して処理装置側対象物情報取得処理を説明する。図１５は、情報処理装置２の実行する処理装置側対象物情報取得処理の一例を示すフローチャートである。本処理は、ユーザの電子メール用アプリケーションの実行によって開始され、本アプリケーションの実行中に繰り返し実行される。まず、プロセッサ２０は、対象物情報Ｊ１をサーバ３から受信したかどうかを判断する（Ｓ３１）。この受信は、例えば、電子メール用アプリケーションソフトウェアを介して行われる。対象物情報Ｊ１は、図１４のステップＳ２６において送信される。対象物情報Ｊ１を受信したと判断した場合には（Ｓ３１でＹＥＳ）、プロセッサ２０は、受信した対象物情報Ｊ１をストレージ２１に記憶させて、ユーザの指示に応じて表示する（Ｓ３２）。その後、プロセッサ３０は、処理をステップＳ３３に進める。また、対象物情報Ｊ１を受信していないと判断した場合には（Ｓ３１でＮＯ）、プロセッサ３０は上記ステップＳ３２を実行することなくステップＳ３３を実行する。
次に、図１、図４、及び図１５を参照して処理装置側対象物情報取得処理を説明する。図１５は、情報処理装置２の実行する処理装置側対象物情報取得処理の一例を示すフローチャートである。本処理は、ユーザの電子メール用アプリケーションの実行によって開始され、本アプリケーションの実行中に繰り返し実行される。まず、プロセッサ２０は、対象物情報Ｊ１をサーバ３から受信したかどうかを判断する（Ｓ３１）。この受信は、例えば、電子メール用アプリケーションソフトウェアを介して行われる。対象物情報Ｊ１は、図１４のステップＳ２６において送信される。対象物情報Ｊ１を受信したと判断した場合には（Ｓ３１でＹＥＳ）、プロセッサ２０は、受信した対象物情報Ｊ１をストレージ２１に記憶させて、ユーザの指示に応じて表示する（Ｓ３２）。その後、プロセッサ３０は、処理をステップＳ３３に進める。また、対象物情報Ｊ１を受信していないと判断した場合には（Ｓ３１でＮＯ）、プロセッサ３０は上記ステップＳ３２を実行することなくステップＳ３３を実行する。
【0096】
ステップＳ３３において、プロセッサ２０は、撮影画像Ｖ２をサーバ３から受信したかどうかを判断する（Ｓ３３）。この受信は、例えば、電子メール用アプリケーションソフトウェアを介して行われる。対象物情報Ｊ１は、図１４のステップＳ２８において送信される。撮影画像Ｖ２を受信したと判断した場合には（Ｓ３３でＹＥＳ）、プロセッサ２０は、受信した撮影画像Ｖ２をストレージ２１に記憶させて、ユーザの指示に応じて表示する（Ｓ３４）。その後、プロセッサ３０は、本処理を終了する。また、撮影画像Ｖ２を受信していないと判断した場合には（Ｓ３３でＮＯ）、プロセッサ３０は上記ステップＳ３４を実行することなく本処理を終了する。
【0097】
上述した本実施形態の構成によれば、仮想空間Ｗに空間画像が表示され、この空間画像における位置を特定するためのジェスチャー（指示ジェスチャー及び取得ジェスチャー）を、現実空間においてユーザが自身の身体の少なくとも一部（手等）で行うことで、空間画像の対象物Ｏが特定されて、この対象物Ｏに関連する対象物情報Ｊ１がＨＭＤ１のユーザの情報処理装置２で取得される。このため、対象物Ｏのオブジェクトを仮想空間Ｗに配置する従来技術に比較して、仮想空間Ｗのコンテンツ制作の作業負担を重くすることなく、ユーザの興味を惹く特定の対象物Ｏの対象物情報Ｊ１を、情報処理装置２を介してユーザに提供することができる。
【0098】
また、現実空間においてユーザが自身の身体の少なくとも一部（手や腕等）で所定の撮影ジェスチャーをすることで、仮想カメラＣａ２で仮想空間Ｗが撮影される。ここで、この所定の撮影ジェスチャーの種類が第１撮影指示用及び第２撮影指示用の２種類ある。第１撮影指示用撮影ジェスチャーによる第１撮影と、第２撮影指示用撮影ジェスチャーによる第２撮影とで、仮想カメラＣａ２の撮影方向が異なる。このため、ユーザが所定の撮影ジェスチャーの種類を変えるだけで、仮想カメラＣａ２の撮影方向を切り替えて撮影をさせることができる。
【0099】
（変形例）
上述した本実施形態は、本発明を適用した実施形態の一例であり、適宜構成を変更することが出来る。例えば、各構成の個数・種類や、処理内容、処理を何れの装置で実行するか等ついて、適宜変更することが可能である。以下に本実施形態の構成を変更した変形例の一例を説明する。
上述した本実施形態は、本発明を適用した実施形態の一例であり、適宜構成を変更することが出来る。例えば、各構成の個数・種類や、処理内容、処理を何れの装置で実行するか等ついて、適宜変更することが可能である。以下に本実施形態の構成を変更した変形例の一例を説明する。
【0100】
（１）本実施形態では、「ユーザの身体の少なくとも一部」は、手であるが、これに限定されない。例えば、目等のユーザの身体の他の部位であってもよく、ユーザの身体全体であってもよい。例えば、ユーザの眼球の所定部位（例えば瞳孔）の位置を検知して、瞳孔の位置を指示姿勢として、瞳孔の位置が示す視線の向きで、空間画像の位置が特定されて、この特定された位置に対象物Ｏが表示されていれば選択状態にされてもよい。そして、所定回数の瞬き等が、本実施形態の「所定の取得動作」であり、所定回数の瞬きによって、選択情報の対象物Ｏが特定されてもよい。
【0101】
（２）本実施形態では、指示姿勢によって特定された空間画像の位置に対象物Ｏが表示されている場合でも、当該対象物Ｏは、選択状態になるだけで、所定の取得ジェスチャーがなければ特定されないが、対象物の特定に取得ジェスチャーを要求しなくてもよい。指示姿勢によって特定された空間画像の位置に対象物Ｏが表示されていると直ちに、当該対象物Ｏが特定されてもよい。
【0102】
（３）本実施形態では、空間画像は、仮想空間Ｗの表面に亘って表示される３６０度空間画像であるが、３６０度空間画像でなくてもよく、仮想空間Ｗ内に表示される画像であればよい。例えば、空間画像は、仮想空間Ｗの表面の一部に表示される画像であっても、仮想空間Ｗ内に配置されたスクリーンに表示されるものであってもよい。また、空間画像は、変化するもの（動画）として再生されなくてもよく、変化しないもの（静止画）であってもよい。
【0103】
（４）本実施形態では、撮影処理が実行される構成であるが、撮影処理（図１２のステップＳ１０～ステップＳ１２）を必ずしも実行しなくてもよい。この場合、図１４のステップＳ２７及びステップＳ２８が実行されず、図１５のステップＳ３３及びステップＳ３４が実行されなくてもよい。なお、本発明の別発明として、対象物情報Ｊ１をユーザに提供せずに（図１２のステップＳ３～ステップＳ９を実行せずに）、撮影処理のみを実行する構成を採用してもよい。この場合、図１４のステップＳ２１、ステップＳ２２、ステップＳ２５及びステップＳ２６が実行されず、図１５のステップＳ３１及びステップＳ３２が実行されなくてもよい。また、この場合には、対象物Ｏを含む空間画像を表示する構成に代えて、又はこの構成とともに、対象物のオブジェクトを仮想空間Ｗに配置する構成を採用してもよい。
【0104】
（５）本実施形態において、携帯情報処理装置２は、ＨＭＤ１と通信可能に接続されていないが、通信可能に接続されていてもよい。この場合には、サーバ３から携帯情報処置装置２に対して対象物情報Ｊ１や撮影画像Ｖ２を送信するのに代えて、これらの情報をＨＭＤ１から情報処置装置２に対して送信してもよい。この変形例では、対象物情報Ｊ１は、サーバ３からＨＭＤ１で取得したものが送信されてもよい。また、図１６Ａで示す対象物情報提供システム１００Ａのように、ＨＭＤ１に他の情報処理装置４（例えば、パーソナルコンピュータ等）を通信可能に接続して、他の情報処理装置４において、ＨＭＤ１で行う上記対象物情報取得処理（図１２及び図１３を参照）の全部又は一部が、実行されてもよい。また、図１６Ｂで示す対象物情報提供システム１００Ａ´のように、他の情報処理装置４を備えず、この他の情報処理装置４の機能を携帯情報処置装置２が有していてもよい。これらの場合には、ＨＭＤ１がサーバ３に対して通信可能に接続されていなくてもよい。図１６Ａ及び図１６Ｂで示すような場合には、情報処理装置４のプロセッサや、情報処理装置２のプロセッサ２０が、対象物情報プログラムＰ１を実行することで、画像表示手段１０１、位置特定手段１０２、対象物特定手段１０３、提供手段１０４、位置情報記憶手段１０５、撮影手段１０６、及び画像取得手段１０７として機能してもよい。
【0105】
（６）本実施形態、及び上記（１）～（５）の変形例では、ＨＭＤ１、他の情報処理装置４又は情報処理装置２は、対象物情報プログラムＰ１を含むアプリケーションソフトウェアをダウンロードして実行することによって、対象物情報取得処理を行い、情報処理装置２に対象物情報Ｊ１を取得させるが、この構成に限定されない。サーバ３のアプリケーションソフトウェアの実行によって、情報処理装置２に対象物情報Ｊ１を取得させてもよい。例えば、ＨＭＤ１は、ＨＭＤ１の向きやユーザの身体の少なくとも一部のジェスチャー等に基づく情報（ジェスチャー等を示す情報やジェスチャーで指し示す方向を示す情報等）をサーバ３に対して送信する。この情報に基づいて、上記対象物情報取得処理（位置特定処理、選択状態処理、対象物特定処理、提供処理等）の全部又は少なくとも一部が、サーバ３で実行されてもよい。ＨＭＤ１又は情報処理装置２は、ウェブブラウザアプリケーションを介して、サーバ３におけるこれらの処理結果に基づく表示を行ってもよい。
【0106】
（７）本実施形態及び上記（１）～（６）の変形例では、情報処理装置２に対象物情報Ｊ１を取得させるが、ＨＭＤＩに対象物情報を取得させる構成であってもよい。この場合には、ＨＭＤＩを介して対象物情報Ｊ１がユーザに提供される。また、この場合には、図１７で示す対象物情報提供システム１００Ｂのように、情報処理装置２を備えない構成を採用してもよい。
【0107】
（８）また、図１８で示す対象物情報提供システム１００Ｃのように、サーバ３を備えない構成を採用してもよい。この場合には、ＨＭＤ１及び情報処理装置２は、サーバ３から対象物情報Ｊ１を取得せず、自機又は他機（ＨＭＤ１ならば情報処理装置２、情報処理装置２ならばＨＭＤ１）から対象物情報Ｊ１を取得してもよい。この場合に、予めＨＭＤ１又は情報処理装置２には、空間動画データＤ、対象情報テーブルＴ１、対象物情報Ｊ１が予め記憶される構成を採用してもよい。具体例としては、これらのデータ及び対象物情報プログラムＰ１を含むアプリケーションソフトウェア等が、外部記憶装置から読み込んだり、他の情報処理装置（例えばサーバ３）からダウンロード等される。このアプリケーションソフトウェアを、ＨＭＤ１又は情報処理装置２で実行することで、ＨＭＤ１又は情報処理装置２は、対象物情報Ｊ１を取得してユーザに提供してもよい。また、対象物情報提供システム１００Ｃが情報処理装置２を備えなくてもよく、ＨＭＤ１だけで構成されてもよい。
【符号の説明】
【0108】
１ ヘッドマウントディスプレイ（ＨＭＤ）
１０ プロセッサ（コンピュータの一例）
１０２ 位置特定手段
１０３ 対象物特定手段
１０４ 提供手段
１０６ 撮影手段
２ 情報処理装置
３ サーバ
３０１ 表示処理手段
３０２ 情報受信処理手段
３０３ 情報送信処理手段
３１ ストレージ（記憶部の一例）
３３ メモリ（記憶部の一例）
Ｏ 対象物
Ｊ１ 対象物情報
Ｖ２ 撮影画像
Ｔ１ 対象物テーブル（位置情報）
Ｗ 仮想空間
１０ プロセッサ（コンピュータの一例）
１０２ 位置特定手段
１０３ 対象物特定手段
１０４ 提供手段
１０６ 撮影手段
２ 情報処理装置
３ サーバ
３０１ 表示処理手段
３０２ 情報受信処理手段
３０３ 情報送信処理手段
３１ ストレージ（記憶部の一例）
３３ メモリ（記憶部の一例）
Ｏ 対象物
Ｊ１ 対象物情報
Ｖ２ 撮影画像
Ｔ１ 対象物テーブル（位置情報）
Ｗ 仮想空間
【図1】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】
【図8】
【図9】
【図10】
【図11】
【図12】
【図13】
【図14】
【図15】
【図16A】
【図16B】
【図17】
【図18】
