特開 2024-172486 プログラム及び情報処理装置

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】P2024172486

(43)【公開日】2024-12-12

(54)【発明の名称】プログラム及び情報処理装置

(51)【国際特許分類】

   G06T 19/20 20110101AFI20241205BHJP

   H04S 7/00 20060101ALI20241205BHJP

   G10K 15/12 20060101ALI20241205BHJP

   A63F 13/52 20140101ALI20241205BHJP

   A63F 13/54 20140101ALI20241205BHJP

【ＦＩ】

G06T19/20

H04S7/00 300

G10K15/12

A63F13/52

A63F13/54

【審査請求】有

【請求項の数】11

【出願形態】ＯＬ

(21)【出願番号】P 2023090238

(22)【出願日】2023-05-31

(71)【出願人】

【識別番号】593022629

【氏名又は名称】株式会社ジェーシービー

(74)【代理人】

【識別番号】100126480

【弁理士】

【氏名又は名称】佐藤 睦

(74)【代理人】

【識別番号】100140431

【弁理士】

【氏名又は名称】大石 幸雄

(72)【発明者】

【氏名】間下 公照

(72)【発明者】

【氏名】南井 享

【テーマコード（参考）】

5B050

5D162

5D208

【Ｆターム（参考）】

5B050BA09

5B050BA12

5B050CA07

5B050EA07

5B050FA05

5B050FA10

5D162CD01

5D162EG02

5D208AA08

(57)【要約】      （修正有）

【課題】仮想空間の臨場感を高めるプログラム及び情報処理装置を提供する。
【解決手段】ユーザに対して仮想空間における映像及び音声の鑑賞体験を提供するシステムに係るプログラムは、情報処理装置２のコンピュータを、ユーザが所定の端末装置３を使用することにより認識できる仮想空間に、素材に関する素材情報１４２ｂが関連付けられた素材オブジェクトと、仮想空間において仮想的に光を発する光源オブジェクトと、仮想空間において仮想的に音を発する音源オブジェクトと、をそれぞれ一以上含む複数のオブジェクトを配置する配置手段１０２と、素材オブジェクトに当たった光に対応する反射光情報１４４ａ及び素材オブジェクトに当たった音に対応する反響音情報１４４ｂを、素材情報に基づいて生成する第１生成手段１０４ａと、反射光情報に基づく画像及び反響音情報に基づく音声を、ユーザに対して出力する出力手段１０８と、として機能させる。
【選択図】図１

【特許請求の範囲】

【請求項1】

コンピュータを、
ユーザが所定の端末装置を使用することにより認識できる仮想空間に、素材に関する素材情報が関連付けられた素材オブジェクトと、前記仮想空間において仮想的に光を発する光源オブジェクトと、前記仮想空間において仮想的に音を発する音源オブジェクトと、をそれぞれ一以上含む複数のオブジェクトを配置する配置手段と、
前記素材オブジェクトに当たった前記光に対応する反射光情報、及び、前記素材オブジェクトに当たった前記音に対応する反響音情報を、前記素材情報に基づいて生成する第１生成手段と、
前記反射光情報に基づく画像、及び、前記反響音情報に基づく音声を、前記ユーザに対して出力する出力手段と、
として機能させる、プログラム。

【請求項2】

前記コンピュータを、前記複数のオブジェクトの少なくとも一つの配置に関する第１操作を前記ユーザから受け付ける第１受付手段、としてさらに機能させ、
前記配置手段は、前記第１操作に基づいて、前記複数のオブジェクトの少なくとも一つを配置する、請求項１に記載のプログラム。

【請求項3】

前記コンピュータを、前記素材情報の変更に関する第２操作を前記ユーザから受け付ける第２受付手段、としてさらに機能させる、請求項１に記載のプログラム。

【請求項4】

前記光は、前記光源オブジェクトに関連付けられた光源設定情報に基づいて仮想的に発せられ、
前記音は、前記音源オブジェクトに関連付けられた音源設定情報に基づいて仮想的に発せられ、
前記コンピュータを、前記光源設定情報及び前記音源設定情報の少なくとも一方の変更に関する第３操作を前記ユーザから受け付ける第３受付手段、としてさらに機能させる、請求項１に記載のプログラム。

【請求項5】

前記素材オブジェクトは、さらに、当該素材オブジェクトの構造に関する構造情報が関連付けられ、
前記反射光情報は、前記素材情報に基づいて生成され、
前記反響音情報は、前記構造情報及び前記素材情報に基づいて生成される、請求項１に記載のプログラム。

【請求項6】

前記構造情報は、前記素材オブジェクトの厚み及び空洞の少なくとも一方に関する情報を含む、請求項５に記載のプログラム。

【請求項7】

前記素材オブジェクトは、第１素材オブジェクトと、当該第１素材オブジェクトの表面に設けられる第２素材オブジェクトとを含み、
前記素材情報は、前記第１素材オブジェクトに関連付けられた第１素材情報と、前記第２素材オブジェクトに関連付けられた第２素材情報とを含み、
前記反射光情報は、前記第２素材情報に基づいて生成され、
前記反響音情報は、前記第１素材情報及び前記第２素材情報に基づいて生成される、請求項１に記載のプログラム。

【請求項8】

前記コンピュータを、
現実空間の物体に関する画像情報を取得する取得手段と、
前記素材情報を、前記画像情報に基づいて特定された前記物体の素材に応じて生成する第２生成手段と、
としてさらに機能させる、請求項１に記載のプログラム。

【請求項9】

前記素材情報は、前記素材オブジェクトの色彩、質感、密度及び弾性の少なくとも一部に関する情報を含む、請求項１から請求項８のいずれか一項に記載のプログラム。

【請求項10】

コンピュータを、
仮想空間における、素材に関する素材情報が関連付けられた素材オブジェクトと、前記仮想空間において仮想的に光を発する光源オブジェクトと、前記仮想空間において仮想的に音を発する音源オブジェクトと、を含む一以上のオブジェクトを、前記ユーザが認識できるように出力する出力手段、として機能させ、
前記出力手段は、前記素材情報に基づいて生成された、前記素材オブジェクトに当たった前記光に対応する反射光情報、及び、前記素材オブジェクトに当たった前記音に対応する反響音情報を、さらに出力する、プログラム。

【請求項11】

ユーザが所定の端末装置を使用することにより認識できる仮想空間に、素材に関する素材情報が関連付けられた素材オブジェクトと、前記仮想空間において仮想的に光を発する光源オブジェクトと、前記仮想空間において仮想的に音を発する音源オブジェクトと、を含む一以上のオブジェクトを配置する配置部と、
前記素材オブジェクトに当たった前記光に対応する反射光情報、及び、前記素材オブジェクトに当たった前記音に対応する反響音情報を、前記素材情報に基づいて生成する第１生成部と、
前記反射光情報及び前記反響音情報を前記ユーザに対して出力する出力部と、
を備える、情報処理装置。

【発明の詳細な説明】

【技術分野】

【0001】

本開示は、プログラム及び情報処理装置に関する。

【背景技術】

【0002】

従来、臨場感の高い鑑賞体験を実現するコンテンツを提供する技術が知られている。例えば、特許文献１には、演者の身体運動に基づいて挙動制御がなされる演者キャラクタを提示するコンテンツの鑑賞体験を鑑賞ユーザに提供する鑑賞システムが開示されている。この鑑賞システムは、演者の身体運動を示す運動情報に基づいて、演者キャラクタの挙動を制御し、鑑賞ユーザの視点の情報に基づいて、演者キャラクタを配置した３次元空間における演出を提示する。

【先行技術文献】

【特許文献】

【0003】

【特許文献1】特開２０２２－１７３８７０号公報

【発明の概要】

【発明が解決しようとする課題】

【0004】

しかしながら、特許文献１に開示された鑑賞システムによっては、仮想空間の臨場感を十分に高めることができない。

【0005】

そこで、本開示は、上記課題に鑑み、仮想空間の臨場感を高めることを目的とする。

【課題を解決するための手段】

【0006】

本開示の一態様に係るプログラムは、コンピュータを、ユーザが所定の端末装置を使用することにより認識できる仮想空間に、素材に関する素材情報が関連付けられた素材オブジェクトと、仮想空間において仮想的に光を発する光源オブジェクトと、仮想空間において仮想的に音を発する音源オブジェクトと、をそれぞれ一以上含む複数のオブジェクトを配置する配置手段と、素材オブジェクトに当たった光に対応する反射光情報、及び、素材オブジェクトに当たった音に対応する反響音情報を、素材情報に基づいて生成する第１生成手段と、反射光情報に基づく画像、及び、反響音情報に基づく音声を、ユーザに対して出力する出力手段と、として機能させる。

【0007】

本開示の他の一態様に係るプログラムは、コンピュータを、仮想空間における、素材に関する素材情報が関連付けられた素材オブジェクトと、仮想空間において仮想的に光を発する光源オブジェクトと、仮想空間において仮想的に音を発する音源オブジェクトと、を含む一以上のオブジェクトを、ユーザが認識できるように出力する出力手段、として機能させ、出力手段は、素材情報に基づいて生成された、素材オブジェクトに当たった光に対応する反射光情報、及び、素材オブジェクトに当たった音に対応する反響音情報を、さらに出力する。

【0008】

本開示の他の一態様に係る情報処理装置は、ユーザが所定の端末装置を使用することにより認識できる仮想空間に、素材に関する素材情報が関連付けられた素材オブジェクトと、仮想空間において仮想的に光を発する光源オブジェクトと、仮想空間において仮想的に音を発する音源オブジェクトと、を含む一以上のオブジェクトを配置する配置部と、素材オブジェクトに当たった光に対応する反射光情報、及び、素材オブジェクトに当たった音に対応する反響音情報を、素材情報に基づいて生成する第１生成部と、反射光情報及び反響音情報をユーザに対して出力する出力部と、を備える。

【発明の効果】

【0009】

本開示によれば、仮想空間の臨場感を高めることができる。

【図面の簡単な説明】

【0010】

【図1】本実施形態に係るシステムの機能ブロック図である。

【図2】本実施形態に係る情報処理装置の動作の一例を説明するための図である。

【図3】本実施形態に係る情報処理装置の動作の一例を説明するための図である。

【図4】本実施形態に係る情報処理装置の動作の一例を説明するための図である。

【図5】本実施形態に係る情報処理装置の動作の一例を説明するための図である。

【図6】本実施形態に係る情報処理装置の動作の一例を説明するための図である。

【図7】本実施形態に係る情報処理装置の動作の一例を説明するための図である。

【図8】本実施形態に係る情報処理装置のハードウェア構成の一例を説明するための図である。

【発明を実施するための形態】

【0011】

添付図面を参照して、本開示の好適な実施形態（以下では、本実施形態という）について説明する。なお、各図において、同一の符号を付したものは、同一又は同様の構成を有する。

【0012】

本開示において、「部」、「手段」、「装置」及び「システム」とは、単に物理的手段を意味するものではなく、その「部」、「手段」、「装置」及び「システム」が有する機能をソフトウェアによって実現する場合も含む。また、１つの「部」、「手段」、「装置」及び「システム」が有する機能が２つ以上の物理的手段及び装置、ソフトウェアにより実現されても、２つ以上の「部」、「手段」、「装置」及び「システム」の機能が１つの物理的手段、装置、ソフトウェアにより実現されてもよい。

【0013】

＜１．システム１の概要＞
本実施形態に係るシステム１（以下、単に「システム１」と称する）は、ユーザに対して仮想空間における映像及び音声の鑑賞体験を提供するシステムである。仮想空間とは、仮想現実（ＶＲ：Ｖｉｒｔｕａｌ Ｒｅａｌｉｔｙ）における空間である。仮想現実とは、コンピュータを用いて生成されたデジタル環境である。仮想空間の一例は、メタバースである。

【0014】

ユーザは、所定の端末装置３を使用することにより、仮想空間内における自身の分身となるオブジェクト（以下、「アバター」と称する）を介して仮想空間内の他のオブジェクトを認識することができる。

【0015】

他のオブジェクトは、例えば、仮想空間内の光源（例えば、照明、太陽及び炎等）に対応する光源オブジェクトを含む。ユーザは、端末装置３としてヘッドマウントディスプレイ（ＨＤＭ：Ｈｅａｄ Ｍｏｕｎｔ Ｄｉｓｐｌａｙ）等を使用することにより、あたかも自身が仮想空間内でアバターの位置にいるかのように光源オブジェクトを視認することができる。

【0016】

他のオブジェクトは、他にも、例えば、仮想空間内の音源（例えば、楽器、スピーカー、発声している他のユーザ等）に対応する音源オブジェクトを含む。ユーザは、端末装置３としてＨＤＭ等を使用することにより、あたかも自身が仮想空間内でアバターの位置にいるかのように音源オブジェクトから仮想的に発せられる音を聴くことができる。

【0017】

ユーザは、光源オブジェクト及び音源オブジェクト以外のオブジェクト（例えば、家具のオブジェクト、壁のオブジェクト、天井のオブジェクト及び他のユーザのアバター等）も認識することができる。光源オブジェクトから仮想的に発せられた光（以下、「仮想光」と称する）は、このようなオブジェクトに反射する。そして、ユーザはその反射による反射光（以下、「仮想反射光」と称する）を認識することができる。また、音源オブジェクトから仮想的に発せられた音（以下、「仮想音」と称する）は、このようなオブジェクトに反響する。そして、ユーザはその反響による反響音（以下、「仮想反響音」と称する）を認識することができる。

【0018】

ところで、現実空間では、反射光及び反響音は、一般的に、光及び音が当たった物体の素材（例えば、材質、色彩、質感、密度及び弾性等）によって異なる。システム１の目的の一つは、このような現象を仮想空間において再現することである。具体的には、システム１は、オブジェクトに関連付けられた素材に関する素材情報に基づいて、仮想反射光及び仮想反響音を決定し、ユーザに認識可能にする。以下、素材情報が関連付けられたオブジェクトを「素材オブジェクト」と称する。

【0019】

＜２．システム１の構成＞
図１を参照して、システム１の構成の一例について説明する。システム１は、情報処理装置２、端末装置３及び通信ネットワーク４を含む。

【0020】

［情報処理装置２］
情報処理装置２は、制御部１０、記憶部１４及びネットワークインタフェース部１８を含む。制御部１０、記憶部１４及びネットワークインタフェース部１８は、それぞれがバス１６を介して電気的に接続されている。

【0021】

［記憶部１４］
記憶部１４は、情報処理装置２の動作のために必要な各種情報を記憶する。記憶される情報は、空間情報１４０、オブジェクト情報１４２、画像情報１４３、反射光情報１４４ａ及び反響音情報１４４ｂを含む。

【0022】

空間情報１４０は、仮想空間の形状等に関する情報である。仮想空間の形状等は、仮想空間のサイズ（すなわち、高さ、幅及び奥行き等）に関する情報を含む。仮想空間が建築物の内部に対応するものである場合には、空間情報１４０は、当該建築物の天井、階段、床、廊下及び壁の形状、位置等に関する情報を含む。仮想空間が屋外に対応するものである場合には、空間情報１４０は、地形等に関する情報を含む。空間情報１４０は、例えば、ＣＡＤ（Ｃｏｍｐｕｔｅｒ Ａｉｄｅｄ Ｄｅｓｉｇｎ）データ等の三次元構造情報であってよい。

【0023】

なお、仮想空間内の建築物及び当該建築物の天井、階段、床、廊下及び壁等は、それぞれが素材オブジェクトであってよい。

【0024】

情報処理装置２は、空間情報１４０を読み込むことで、仮想空間を生成することができる。情報処理装置２が、例えば、コンサートホールの形状等に関する情報を含む空間情報１４０に基づいて仮想空間を生成した場合、ユーザはアバターを介して仮想的に当該コンサートホールに入ったかのように映像及び音声を体感することができる。

【0025】

オブジェクト情報１４２は、オブジェクトに関連付けられた情報であり、位置情報１４２ａ、素材情報１４２ｂ及び構造情報１４２ｃを含む。

【0026】

位置情報１４２ａは、素材オブジェクトの仮想空間における位置に関する情報である。位置情報１４２ａは、例えば、三次元座標軸上の座標に関する情報を含む。位置情報１４２ａは、１つの素材オブジェクトに対して１つの座標（例えば、素材オブジェクトの中心に対応する座標）が関連付けられたものであってよい。また、位置情報１４２ａは、１つの素材オブジェクトに対して複数の座標（例えば、素材オブジェクトの上端、下端、右端及び左端の４つの座標）が関連付けられたものであってよい。仮想空間が生成される際には、位置情報１４２ａが読み込まれることにより素材オブジェクトが配置される位置が決定されてよい。

【0027】

素材情報１４２ｂは、素材オブジェクトの素材に関する情報である。ユーザは、仮想空間において、素材オブジェクトが素材情報１４２ｂに係る素材でできているかのように認識することができる。例えば、素材情報１４２ｂに係る素材が「木材」である場合、仮想空間において、当該素材情報１４２ｂが関連付けられた素材オブジェクトは「木材」でできているかのように認識される。他にも、例えば、素材情報１４２ｂに係る素材が「金属」である場合、仮想空間において、当該素材情報１４２ｂが関連付けられた素材オブジェクトは「金属」でできているかのように認識される。仮想空間が生成される際には、素材情報１４２ｂが読み込まれることにより素材オブジェクトのグラフィックが決定されてよい。

【0028】

素材情報１４２ｂは、素材オブジェクトの色彩、質感、密度及び弾性に関する情報を含んでよい。素材オブジェクトの質感は、素材オブジェクトのテクスチャ及び透明度等を含む。

【0029】

テクスチャは、素材オブジェクトの表面の微細なパターンや模様である。テクスチャは、例えば、木材の年輪、石の模様及び布地の織り等である。テクスチャが粗い場合、典型的には、素材オブジェクトはマットな印象を与える。一方で、テクスチャが平滑な場合、典型的には、素材オブジェクトは光沢があるような印象を与える。

【0030】

透明度は、素材オブジェクトが仮想光を透過させる度合である。素材オブジェクトが透明である場合、滑らかで純粋な印象を与える。一方、素材オブジェクトが半透明又は不低迷である場合、固体的な印象を与える。

【0031】

素材情報１４２ｂは、素材情報１４２ｂに係る素材に対応する第１素材パラメータと、第１素材パラメータに基づいて決定される一以上の第２素材パラメータを含んでよい。第１素材パラメータの設定値は、例えば、「木材」、「金属」、「ゴム」、「プラスチック」及び「発泡剤」等である。第２素材パラメータは、例えば、第１素材パラメータに基づいて決定される色彩、質感、密度及び弾性等である。

【0032】

第２素材パラメータは、反射光情報１４４ａの生成に関連する反射関連パラメータと、反響音情報１４４ｂの生成に関連する反響関連パラメータを含む。反射関連パラメータは、例えば、素材オブジェクトの色彩及び質感等である。反響関連パラメータは、例えば、素材オブジェクトの密度及び弾性等である。

【0033】

構造情報１４２ｃは、素材オブジェクトの構造に関する情報を含む。素材オブジェクトの構造は、例えば、素材オブジェクトの高さ、幅、奥行き（厚み）及び内部の空洞等を含む。構造情報１４２ｃは、ＣＡＤデータ等の三次元構造情報であってよい。仮想空間が生成される際には、構造情報１４２ｃが読み込まれることにより素材オブジェクトのグラフィックが決定されてよい。

【0034】

情報処理装置２は、空間情報１４０及びオブジェクト情報１４２に基づいて、オブジェクトが配置された仮想空間を生成する。

【0035】

画像情報１４３は、現実空間の物体が撮影されることにより生成された情報である。画像情報１４３は、ＪＰＥＧ（Ｊｏｉｎｔ Ｐｈｏｔｏｇｒａｐｈｉｃ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ）ファイル等で記憶されてよい。

【0036】

反射光情報１４４ａは、光源オブジェクトから発せられた仮想光が素材オブジェクトに当たった際の仮想反射光に関する情報である。反射光情報１４４ａの生成については、図７を参照して後述する。

【0037】

反響音情報１４４ｂは、音源オブジェクトから発せられた仮想音が素材オブジェクトに当たった際の仮想反響音に関する情報である。反響音情報１４４ｂの生成については、図７を参照して後述する。

【0038】

［制御部１０］
制御部１０は、記憶部１４に記憶された各種プログラムを実行することにより、受付手段１００、配置手段１０２、生成手段１０４、取得手段１０６及び出力手段１０８として機能する。以下では、各機能について説明する。

【0039】

―受付手段１００―
受付手段１００は、第１受付手段１００ａ、第２受付手段１００ｂ及び第３受付手段１００ｃを含む。

【0040】

第１受付手段１００ａは、素材オブジェクト、光源オブジェクト及び音源オブジェクトを含む複数のオブジェクトの少なくとも一つの配置に関する第１操作をユーザから受け付ける。第１操作は、仮想空間で（例えば、ユーザが視認できる三次元グラフィカルユーザインターフェース等を介して）行われてよく、現実空間で（例えば、仮想空間の平面図又は見取り図等が表示された画面において位置を選択するユーザインタフェース等を介して）行われてもよい。第１操作は、オブジェクトの位置の指定であってよい。また、第１操作は、現実空間において物体が配置された画像を読み込むことであってもよい。

【0041】

第２受付手段１００ｂは、素材情報１４２ｂの変更に関する第２操作をユーザから受け付ける。第２操作は、典型的には、第１素材パラメータの変更に関する操作である。第１素材パラメータの変更に関する操作は、例えば、素材オブジェクトの素材を「木材」から「金属」に変更する操作である。この場合、第１素材パラメータの変更に応じて、素材オブジェクトの第２素材パラメータは、「木材」に対応する色彩、質感、密度及び弾性等から、「金属」に対応する色彩、質感、密度及び弾性等に変更されてよい。

【0042】

なお、第２素材パラメータは、ユーザが直接的に変更することはできないものであってよい。第２素材パラメータは、第１素材パラメータが変更されることにより従属的に変更されるものであってよい。すなわち、第２受付手段１００ｂは第１素材パラメータの変更に関する操作を受け付け、第２素材パラメータは、第１素材パラメータの変更に応じて変更されてよい。

【0043】

第３受付手段１００ｃは、光源オブジェクトに関連付けられた光源設定情報及び音源オブジェクトに関連付けられた音源設定情報の少なくとも一方の変更に関する第３操作をユーザから受け付ける。

【0044】

光源オブジェクトは、光源設定情報に基づいて仮想光を発する。光源オブジェクトは、光源設定情報がある値に設定されている場合に第１仮想光を発してよく、光源設定情報が他の値に設定されている場合に第２仮想光を発してよい。仮想反射光は、仮想光と、当該仮想光が当たった素材オブジェクトの素材情報１４２ｂに基づいて決定される。すなわち、光源設定情報が変更されることにより、仮想光が変化し、これに伴って仮想反射光も変化する。光源設定情報は、例えば、光源の種類（例えば、ＬＥＤ（ｌｉｇｈｔ－ｅｍｉｔｔｉｎｇ ｄｉｏｄｅ）、蛍光灯、白熱灯、ハロゲン灯、ＨＩＤ（Ｈｉｇｈ Ｉｎｔｅｎｓｉｔｙ Ｄｉｓｃｈａｒｇｅ Ｌａｍｐ）及びオゾン灯等）、色温度、光束、照度、光源の形状、光源の位置及び光を発する方向等に関する情報を含む。

【0045】

音源オブジェクトは、音源設定情報に基づいて仮想音を発する。音源オブジェクトは、音源設定情報がある値に設定されている場合に第１仮想音を発してよく、音源設定情報が他の値に設定されている場合に第２仮想音を発してよい。仮想反響音は、仮想音と、当該仮想音が当たった素材オブジェクトの素材情報１４２ｂに基づいて決定される。すなわち、音源設定情報が変更されることにより、仮想音が変化し、これに伴って仮想反響音も変化する。音源設定情報は、例えば、音量、ピッチ、音色、曲、音源の形状、音源の位置及び音を発する方向等に関する情報を含む。

【0046】

―配置手段１０２―
配置手段１０２は、仮想空間に、素材オブジェクト、光源オブジェクト及び音源オブジェクトをそれぞれ一以上含む複数のオブジェクトを配置する。配置手段１０２は、第１受付手段１００ａが受け付けた第１操作に基づいて、複数のオブジェクトの少なくとも一つを配置してよい。例えば、第１操作がオブジェクトの位置の指定に関する操作である場合、配置手段１０２は、当該位置にオブジェクトを配置する。他にも、例えば、第１操作が現実空間において物体が配置された画像を読み込ませる操作である場合、配置手段１０２は、当該画像を解析することにより物体の現実空間における位置を特定し、当該位置に対応する仮想空間における位置に、物体に対応するオブジェクトを配置する。

【0047】

―生成手段１０４―
生成手段１０４は、第１生成手段１０４ａ及び第２生成手段１０４ｂを含む。

【0048】

第１生成手段１０４ａは、素材オブジェクトに当たった仮想光に対応する反射光情報１４４ａ、及び、素材オブジェクトに当たった仮想音に対応する反響音情報１４４ｂを、素材情報１４２ｂに基づいて生成する。反射光情報１４４ａ及び反響音情報１４４ｂは、第１素材パラメータに基づいて決定される第２素材パラメータに基づいて決定されてよい。具体的には、反射光情報１４４ａは、第２素材パラメータのうち、反射関連パラメータ（例えば、素材オブジェクトの色彩及び質感等）に基づいて生成されてよく、反響音情報１４４ｂは、第２素材パラメータのうち、反響関連パラメータ（例えば、素材オブジェクトの密度及び弾性等）に基づいて生成されてよい。

【0049】

また、第１生成手段１０４ａは、素材情報１４２ｂに基づいて反射光情報１４４ａを生成してよく、構造情報１４２ｃ及び素材情報１４２ｂに基づいて反響音情報１４４ｂを生成してよい。図２－図３を参照して、このようにして生成される反射光情報１４４ａ及び反響音情報１４４ｂの一例について説明する。

【0050】

図２は、素材情報１４２ｂが共通し、構造情報１４２ｃ（この例では、厚み）が共通しない２つの素材オブジェクトである素材オブジェクト２０８ａ及び素材オブジェクト２０８ｂのそれぞれに対して、同じ仮想光Ａ１が同じ方向から当たった場合における仮想反射光の一例について示した図である。仮想光Ａ１が素材オブジェクト２０８ａに当たった場合の仮想反射光を仮想反射光Ａ’１とし、仮想光Ａ１が素材オブジェクト２０８ｂに当たった場合の仮想反射光を仮想反射光Ａ’２とする。このとき、反射光情報１４４ａは（構造情報１４２ｃによらず）素材情報１４２ｂに基づいて生成されるため、仮想反射光Ａ’１及び仮想反射光Ａ’２は略同一となる。

【0051】

図３は、素材オブジェクト２０８ａ及び素材オブジェクト２０８ｂのそれぞれに対して、同じ仮想音Ｂ１が同じ方向から当たった場合における仮想反響音の一例について示した図である。仮想音Ｂ１が素材オブジェクト２０８ａに当たった場合の仮想反響音を仮想反響音Ｂ’１とし、仮想音Ｂ１が素材オブジェクト２０８ｂに当たった場合の仮想反響音を仮想反響音Ｂ’２とする。このとき、反響音情報１４４ｂは、素材情報１４２ｂのほかに、２つの素材オブジェクト間で共通しない構造情報１４２ｃに基づいて生成されるため、仮想反響音Ｂ’１及び仮想反響音Ｂ’２は異なるものとなる。

【0052】

また、素材オブジェクトが、第１素材オブジェクトと、当該第１素材オブジェクトの表面に設けられる第２素材オブジェクトとを含み、素材情報１４２ｂが、第１素材オブジェクトに関連付けられた第１素材情報と、第２素材オブジェクトに関連付けられた第２素材情報とを含む場合、第１生成手段１０４ａは、第２素材情報に基づいて反射光情報１４４ａを生成してよく、第１素材情報及び第２素材情報に基づいて反響音情報１４４ｂを生成してよい。図４－図５を参照して、このようにして生成される反射光情報１４４ａ及び反響音情報１４４ｂの一例について説明する。

【0053】

図４は、素材オブジェクト２０８ｃ及び素材オブジェクト２０８ｄのそれぞれに対して、同じ仮想光Ｃ１が同じ方向から当たった場合における仮想反射光の一例について示した図である。なお、素材オブジェクト２０８ｃは、第１素材オブジェクト２１０ｂと、第１素材オブジェクト２１０ｂの表面に設けられた第２素材オブジェクト２１０ａとから構成される。また、素材オブジェクト２０８ｄは、第１素材オブジェクト２１０ｄと、第１素材オブジェクト２１０ｂの表面に設けられた第２素材オブジェクト２１０ａとから構成される。すなわち、素材オブジェクト２０８ｃ及び素材オブジェクト２０８ｄは、表面に設けられた第２素材オブジェクト２１０ａが共通し、その内部の第１素材オブジェクト２１０ｂ／２０ｄが共通しない。

【0054】

仮想光Ｃ１が素材オブジェクト２０８ｃの第２素材オブジェクト２１０ａが設けられた面に当たった場合の仮想反射光を仮想反射光Ｃ’１とし、仮想光Ｃ１が素材オブジェクト２０８ｄの第２素材オブジェクト２１０ａが設けられた面に当たった場合の仮想反射光を仮想反射光Ｃ’２とする。このとき、反射光情報１４４ａは（第１素材オブジェクト２１０ｂ／２１０ｄに関連付けられた第１素材情報によらず）第２素材オブジェクト２１０ａに関連付けられた第２素材情報に基づいて生成されるため、仮想反射光Ａ’１及び仮想反射光Ａ’２は略同一となる。

【0055】

図５は、素材オブジェクト２０８ｃ及び素材オブジェクト２０８ｄのそれぞれに対して、同じ仮想音Ｄ１が同じ方向から当たった場合における仮想反響音の一例について示した図である。仮想音Ｄ１が素材オブジェクト２０８ｃの第２素材オブジェクト２１０ａが設けられた面に当たった場合の仮想反響音を仮想反響音Ｄ’１とし、仮想音Ｄ１が素材オブジェクト２０８ｄの第２素材オブジェクト２１０ａが設けられた面に当たった場合の仮想反響音を仮想反響音Ｄ’２とする。このとき、反響音情報１４４ｂは、第２素材オブジェクト２１０ａに関連付けられた第２素材情報のほか、第１素材オブジェクト２１０ｂ／２１０ｄに関連付けられた第１素材情報に基づいて生成されるため、仮想反響音Ｄ’１及び仮想反響音Ｄ’２は異なるものとなる。

【0056】

第２生成手段１０４ｂは、素材情報１４２ｂを、現実空間の物体に関する画像情報１４３に基づいて特定された物体の素材に応じて生成する。例えば、後述する取得手段１０６が「木材」でできた物体の画像に関する画像情報１４３を取得した場合、第２生成手段１０４ｂは、画像認識処理等により、画像情報１４３に基づいて第２素材パラメータ（例えば、画像に写った「木材」の色彩及び質感等）を決定し、そのような第２素材パラメータを有する素材情報１４２ｂを生成してよい。

【0057】

―取得手段１０６―
取得手段１０６は、画像情報１４３を取得する。なお、情報を取得することは、当該情報を制御部１０において処理可能な状態にすることを含む。すなわち、取得手段１０６は、他の装置から画像情報１４３を受信してよく、記憶部１４に記憶された画像情報１４３を読み出してよい。

【0058】

―出力手段１０８―
出力手段１０８は、反射光情報１４４ａに基づく画像（映像を含む）、及び、反響音情報１４４ｂに基づく音声を、ユーザに対して出力する。出力手段１０８は、例えば、ユーザが着用したＨＭＤのディスプレイを機能させることにより反射光情報１４４ａに基づく画像を出力し、スピーカーを機能させることにより反響音情報１４４ｂに基づく音声を出力してよい。

【0059】

［端末装置３］
端末装置３は、ユーザが操作する端末である。端末装置３は、制御部２０、記憶部（図示しない）及びネットワークインタフェース部（図示しない）を含む。

【0060】

制御部２０は、端末装置３の記憶部に記憶された各種プログラムを実行することにより、受付手段２００、取得手段２０２及び出力手段２０４として機能する。以下では、各機能について説明する。

【0061】

―受付手段２００―
受付手段２００は、ユーザから、素材オブジェクト、光源オブジェクト及び音源オブジェクトを含む一以上のオブジェクトの配置に関する第１操作と、素材情報１４２ｂの変更に関する第２操作と、光源設定情報及び音源設定情報の少なくとも一方の変更に関する第３操作とを受け付ける。第１操作―第３操作に関する情報は、端末装置３のネットワークインタフェース部を介して情報処理装置２に送信される。

【0062】

―取得手段２０２―
取得手段２０２は、反射光情報１４４ａに基づく画像、及び、反響音情報１４４ｂに基づく音声を出力するための情報を情報処理装置２から取得する。

【0063】

―出力手段２０４―
出力手段２０４は、仮想空間における、素材オブジェクト、光源オブジェクト及び音源オブジェクトを含む一以上のオブジェクトを、ユーザが認識できるようにを出力する。また、出力手段２０４は、素材情報１４２ｂに基づいて生成された反射光情報１４４ａ及び反響音情報１４４ｂを、さらに出力する。

【0064】

＜３．情報処理装置２の動作＞
図６－図７を参照して、情報処理装置２の動作の一例について説明する。図６は、情報処理装置２の動作の一例を説明するためのフローチャートである。図７は、オブジェクト及びアバターが存在する仮想空間の概念図である。

【0065】

初期状態において、ユーザのアバターは、仮想空間の「Ｌ１」という位置に位置するものとする（図７ 中心参照）。

【0066】

まず、情報処理装置２は、ユーザから光源オブジェクトの位置の指定を受け付ける（Ｓ１０）。この例では、ユーザは、光源オブジェクトの位置として「Ｌ２」を指定するものとする（図７ 左上側参照）。情報処理装置２は、ユーザの操作に基づいて、光源オブジェクトを配置する。光源オブジェクトからは、仮想光Ｅ１が発せられる。

【0067】

次に、情報処理装置２は、ユーザから音源オブジェクトの位置の指定を受け付ける（Ｓ１２）。この例では、ユーザは、音源オブジェクトの位置として「Ｌ３」を指定するものとする（図７ 右上側参照）。情報処理装置２は、ユーザの操作に基づいて、音源オブジェクトを配置する。音源オブジェクトからは、仮想音Ｆ１が発せられる。

【0068】

次に、情報処理装置２は、ユーザから素材オブジェクトの位置の指定を受け付ける（Ｓ１４）。この例では、ユーザは、素材オブジェクトの位置として「Ｌ４」を指定するものとする（図７ 下側参照）。情報処理装置２は、ユーザの操作に基づいて、素材オブジェクトを配置する。

【0069】

次に、情報処理装置２は、アバター、光源オブジェクト及び素材オブジェクトの位置関係と、素材オブジェクトに関連付けられた素材情報１４２ｂとに基づいて、反射光情報１４４ａを生成する（Ｓ１６）。図７の経路ｒ１は、光源オブジェクトから発せられた仮想光Ｅ１が素材オブジェクトに当たり、アバターに到達する経路の一例である。アバターには、仮想反射光Ｅ’１が到達する。情報処理装置２は、仮想反射光Ｅ’１に応じて反射光情報１４４ａを生成する。

【0070】

次に、情報処理装置２は、生成された反射光情報１４４ａに基づいて立体映像情報を生成する（Ｓ１８）。

【0071】

次に、情報処理装置２は、アバター、音源オブジェクト及び素材オブジェクトの位置関係と、素材オブジェクトに関連付けられた素材情報１４２ｂとに基づいて、反響音情報１４４ｂを生成する（Ｓ２０）。図７の経路ｒ２は、音源オブジェクトから発せられた仮想音Ｆ１が素材オブジェクトに当たり、アバターに到達する経路の一例である。アバターには、仮想反響音Ｆ’１が到達する。情報処理装置２は、仮想反響音Ｆ’１に応じて反響音情報１４４ｂを生成する。

【0072】

次に、情報処理装置２は、生成された反響音情報１４４ｂに基づいて立体音声情報を生成する（Ｓ２２）。

【0073】

次に、情報処理装置２は、Ｓ１８で生成した立体映像情報及びＳ２２で生成した立体音声情報を出力する（Ｓ２４）。これにより、ユーザは、素材オブジェクトに反射した仮想反射光Ｅ’１及び素材オブジェクトに反響した仮想反響音Ｆ’１を認識することができる。

【0074】

以上をまとめると、本開示の一実施形態に係るプログラムは、情報処理装置２のコンピュータ７０を、ユーザが所定の端末装置３を使用することにより認識できる仮想空間に、素材に関する素材情報１４２ｂが関連付けられた素材オブジェクトと、仮想空間において仮想的に光を発する光源オブジェクトと、仮想空間において仮想的に音を発する音源オブジェクトと、をそれぞれ一以上含む複数のオブジェクトを配置する配置手段１０２と、素材オブジェクトに当たった光に対応する反射光情報１４４ａ、及び、素材オブジェクトに当たった音に対応する反響音情報１４４ｂを、素材情報１４２ｂに基づいて生成する第１生成手段１０４ａと、反射光情報１４４ａに基づく画像、及び、反響音情報１４４ｂに基づく音声を、ユーザに対して出力する出力手段１０８と、として機能させる。

【0075】

＜４．情報処理装置２の効果＞
情報処理装置２は、仮想空間の臨場感を高めることができる。情報処理装置２により、ユーザは、仮想空間において素材オブジェクトの素材に応じた仮想反射光及び仮想反響音を認識することができる。ユーザは、例えば、「木材」の素材オブジェクトからは、温かみがあるような視覚的印象を受け、軟らかく低い音の反響を聴くことができる。ユーザは、他にも、例えば、「金属」の素材オブジェクトからは、冷たさがあるような視覚的印象を受け、硬く高い音の反響を聴くことができる。

【0076】

仮想空間の臨場感を高めるためには、ユーザが視覚と聴覚を一体的に体感できるようにすることが重要である。情報処理装置２によれば、ユーザは、素材オブジェクトに対して一貫した視覚的印象及び聴覚的印象を受けるため、仮想空間の臨場感を高めることができる。

【0077】

また、本開示の一実施形態に係るプログラムは、情報処理装置２のコンピュータ７０を、複数のオブジェクトの少なくとも一つの配置に関する第１操作をユーザから受け付ける第１受付手段１００ａ、としてさらに機能させ、配置手段１０２は、第１操作に基づいて、複数のオブジェクトの少なくとも一つを配置する。

【0078】

この構成により、情報処理装置２は、仮想空間のデザイン（又は設計）を効率化することができる。図７を参照して説明したように、ユーザが認識する仮想反射光及び仮想反響音は、ユーザのアバター、光源オブジェクト、音源オブジェクト及び素材オブジェクトの位置関係に基づいて決定される。特に、素材オブジェクトの位置は、仮想反射光及び仮想反響音の両方に関連するため、ユーザが受ける印象に大きな影響を与える。すなわち、情報処理装置２は、上記構成により、ユーザの意図に応じた様々な印象を与える仮想空間を作り出すことができる。

【0079】

また、本開示の一実施形態に係るプログラムは、情報処理装置２のコンピュータ７０を、素材情報１４２ｂの変更に関する第２操作をユーザから受け付ける第２受付手段１００ｂ、としてさらに機能させる。

【0080】

この構成により、情報処理装置２は、仮想空間のデザイン（又は設計）を効率化することができる。図７を参照して説明したように、ユーザが認識する仮想反射光及び仮想反響音は、素材オブジェクトに関連付けられた素材情報１４２ｂに基づいて決定される。すなわち、素材情報１４２ｂが変更されることにより仮想反射光及び仮想反響音の両方が変化する。これにより、ユーザは、上記構成により、一貫した印象を与える仮想空間をより効率よくデザインすることができる。

【0081】

また、本開示の一実施形態に係るプログラムにおいて、反射光情報１４４ａに対応する仮想光は、光源オブジェクトに関連付けられた光源設定情報に基づいて発せられ、反響音情報１４４ｂに対応する仮想音は、音源オブジェクトに関連付けられた音源設定情報に基づいて発せられ、当該プログラムは、情報処理装置２のコンピュータ７０を、光源設定情報及び音源設定情報の少なくとも一方の変更に関する第３操作をユーザから受け付ける第３受付手段１００ｃ、としてさらに機能させる。

【0082】

この構成により、情報処理装置２は、仮想空間のデザイン（又は設計）を効率化することができる。図７を参照して説明したように、ユーザが認識する仮想反射光及び仮想反響音は、それぞれ光源オブジェクトから発せられる仮想光及び音源オブジェクトから発せられる仮想音に基づいて決定される。すなわち、仮想光の設定に関する光源設定情報及び仮想音の設定に関する音源設定情報は、ユーザが受ける印象に大きな影響を与える。情報処理装置２は、上記構成により、ユーザの意図に応じた様々な印象を与える仮想空間を作り出すことができる。

【0083】

また、本開示の一実施形態に係るプログラムにおいて、素材オブジェクトは、さらに、当該素材オブジェクトの構造に関する構造情報１４２ｃが関連付けられ、反射光情報１４４ａは、素材情報１４２ｂに基づいて生成され、反響音情報１４４ｂは、構造情報１４２ｃ及び素材情報１４２ｂに基づいて生成される。

【0084】

この構成により、情報処理装置２は、仮想空間の臨場感をさらに向上させることができる。現実空間においては、反射光は、典型的には物体の素材（質感を含む）によって決まる。一方で、反響音は、物体の素材のほかに、その構造（例えば、物体の厚み及び内部の空洞等）によって異なる。上記構成によれば、現実空間におけるこのような物理現象を仮想空間において再現することができる。具体的には、情報処理装置２は、仮想反射光を素材オブジェクトの素材によって、仮想反響音を素材オブジェクトの素材に加えてその構造によってそれぞれ決定する。これにより、情報処理装置２は、現実空間に近い印象を仮想空間においてユーザに与えることができる。

【0085】

また、本開示の一実施形態に係るプログラムにおいて、素材オブジェクトは、第１素材オブジェクトと、当該第１素材オブジェクトの表面に設けられる第２素材オブジェクトとを含み、素材情報１４２ｂは、第１素材オブジェクトに関連付けられた第１素材情報と、第２素材オブジェクトに関連付けられた第２素材情報とを含み、反射光情報１４４ａは、第２素材情報に基づいて生成され、反響音情報１４４ｂは、第１素材情報及び第２素材情報に基づいて生成される。

【0086】

この構成により、情報処理装置２は、仮想空間の臨場感をさらに向上させることができる。現実空間においては、反射光は、典型的には物体の表面の素材によって決まる。一方で、反響音は、物体の表面の素材のほかに、その内部の素材によって異なる。上記構成によれば、現実空間におけるこのような物理現象を仮想空間において再現することができる。具体的には、情報処理装置２は、仮想反射光を素材オブジェクトの表面の素材によって、仮想反響音を素材オブジェクトの表面の素材に加えてその内部の素材によってそれぞれ決定する。これにより、情報処理装置２は、現実空間に近い印象を仮想空間においてユーザに与えることができる。

【0087】

また、本開示の一実施形態に係るプログラムは、コンピュータ７０を、現実空間の物体に関する画像情報１４３を取得する取得手段１０６と、素材情報１４２ｂを、画像情報１４３に基づいて特定された物体の素材に応じて生成する第２生成手段１０４ｂと、としてさらに機能させる。

【0088】

この構成により、情報処理装置２は、仮想空間のデザイン（又は設計）を効率化することができる。例えばデジタルツイン技術等の、現実空間を仮想空間において再現する技術が知られている。上記構成によれば、現実空間の物体の素材に対応する素材情報１４２ｂを容易に生成することができるため、より効率的に仮想空間をデザインすることができる。

【0089】

＜５．ハードウェア構成＞
図８を参照して、上述してきた情報処理装置２をコンピュータ７０により実現する場合のハードウェア構成の一例を説明する。なお、それぞれの装置の機能は、複数台の装置に分けて実現することもできる。

【0090】

図８に示すように、コンピュータ７０は、プロセッサ７００と、記憶装置７０２と、入力Ｉ／Ｆ７０４と、データＩ／Ｆ７０６と、通信Ｉ／Ｆ７０８、及び表示装置７１０を含む。

【0091】

プロセッサ７００は、記憶装置７０２に記憶されているプログラムを実行することによりコンピュータ７０における様々な処理を制御する。例えば、情報処理装置２の制御部１０が備える各機能部等は、記憶装置７０２に記憶されたプログラムを、プロセッサ７００が実行することにより実現可能である。

【0092】

記憶装置７０２は、例えばＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）などの記憶媒体である。ＲＡＭは、プロセッサ７００によって実行されるプログラムのプログラムコード及びプログラムの実行時に必要となるデータを一時的に記憶する。

【0093】

記憶装置７０２は、他にも、例えばハードディスクドライブ（ＨＤＤ）及びフラッシュメモリなどの不揮発性の記憶媒体である。記憶装置７０２は、オペレーティングシステム及び上記各構成を実現するための各種プログラムを記憶する。当該各種プログラムを格納した記憶媒体は、コンピュータ読み取り可能な非一時的な記憶媒体（Ｎｏｎ－ｔｒａｎｓｉｔｏｒｙ ｃｏｍｐｕｔｅｒ ｒｅａｄａｂｌｅ ｍｅｄｉｕｍ）であってもよい。この他、記憶装置７０２は、各種情報を登録するテーブルと、当該テーブルを管理するＤＢを記憶することも可能である。このようなプログラム及びデータは、必要に応じて記憶装置７０２にロードされることにより、プロセッサ７００から参照される。

【0094】

入力Ｉ／Ｆ７０４は、ユーザからの入力を受け付けるためのデバイスである。入力Ｉ／Ｆ７０４の具体例としては、カメラ、ボタン、マイク、キーボード、マウス、タッチパネル、各種センサ、ウェアラブル・デバイスなどが挙げられる。入力Ｉ／Ｆ７０４は、例えばＵＳＢ（Ｕｎｉｖｅｒｓａｌ Ｓｅｒｉａｌ Ｂｕｓ）などのインタフェースを介してコンピュータ７０に接続されてもよい。

【0095】

データＩ／Ｆ７０６は、コンピュータ７０の外部からデータを入力するためのデバイスである。データＩ／Ｆ７０６の具体例としては、各種記憶媒体に記憶されているデータを読み取るためのドライブ装置などがある。データＩ／Ｆ７０６は、コンピュータ７０の外部に設けられることも考えられる。その場合、データＩ／Ｆ７０６は、例えばＵＳＢなどのインタフェースを介してコンピュータ７０へと接続される。

【0096】

通信Ｉ／Ｆ７０８は、コンピュータ７０の外部の装置と有線または無線により、通信ネットワーク４を介したデータ通信を行うためのデバイスである。通信Ｉ／Ｆ７０８は、コンピュータ７０の外部に設けられることも考えられる。その場合、通信Ｉ／Ｆ７０８は、例えばＵＳＢなどのインタフェースを介してコンピュータ７０に接続される。

【0097】

表示装置７１０は、各種情報を表示するためのデバイスである。表示装置７１０の具体例としては、例えば液晶ディスプレイ及び有機ＥＬ（Ｅｌｅｃｔｒｏ－Ｌｕｍｉｎｅｓｃｅｎｃｅ）ディスプレイ、ウェアラブル・デバイスのディスプレイなどが挙げられる。表示装置７１０は、コンピュータ７０の外部に設けられてもよい。その場合、表示装置７１０は、例えばディスプレイケーブルなどを介してコンピュータ７０に接続される。また、入力Ｉ／Ｆ７０４としてタッチパネルが採用される場合には、表示装置７１０は、入力Ｉ／Ｆ７０４と一体化して構成することが可能である。

【0098】

また、上記実施の形態で記載された情報処理装置２が備える構成要素は、記憶装置７０２に格納されたプログラムがプロセッサ７００によって実行されることで、定められた処理が他のハードウェアと協働して実現されるものとする。また、言い換えれば、これらの構成要素は、ソフトウェアまたはファームウェアとしても、それと対応するハードウェアとしても想定され、その双方の概念において、「機能」、「手段」、「部」、「処理回路」、「ユニット」、または「モジュール」などとも記載され、またそれぞれに読み替えることができる。

【0099】

＜６．その他の実施形態＞
以下のような態様も、本開示の範囲に含まれる。

【0100】

［付記１］
本開示の一実施形態に係るプログラムは、コンピュータ７０を、ユーザが所定の端末装置３を使用することにより認識できる仮想空間に、素材に関する素材情報１４２ｂが関連付けられた素材オブジェクトと、仮想空間において仮想的に光を発する光源オブジェクトと、仮想空間において仮想的に音を発する音源オブジェクトと、をそれぞれ一以上含む複数のオブジェクトを配置する配置手段１０２と、素材オブジェクトに当たった光に対応する反射光情報１４４ａ、及び、素材オブジェクトに当たった音に対応する反響音情報１４４ｂを、素材情報１４２ｂに基づいて生成する第１生成手段１０４ａと、反射光情報１４４ａに基づく画像、及び、反響音情報１４４ｂに基づく音声を、ユーザに対して出力する出力手段１０８と、として機能させる。

【0101】

［付記２］
付記１に記載のプログラムは、コンピュータ７０を、複数のオブジェクトの少なくとも一つの配置に関する第１操作をユーザから受け付ける第１受付手段１００ａ、としてさらに機能させてよく、配置手段１０２は、第１操作に基づいて、複数のオブジェクトの少なくとも一つを配置してよい。

【0102】

［付記３］
付記１又は付記２に記載のプログラムは、コンピュータ７０を、素材情報１４２ｂの変更に関する第２操作をユーザから受け付ける第２受付手段１００ｂ、としてさらに機能させてよい。

【0103】

［付記４］
付記１から付記３のいずれか一つに記載のプログラムにおいて、反射光情報１４４ａに対応する光は、光源オブジェクトに関連付けられた光源設定情報に基づいて仮想的に発せられてよく、反響音情報１４４ｂに対応する音は、音源オブジェクトに関連付けられた音源設定情報に基づいて仮想的に発せられてよく、当該プログラムは、コンピュータ７０を、光源設定情報及び音源設定情報の少なくとも一方の変更に関する第３操作をユーザから受け付ける第３受付手段１００ｃ、としてさらに機能させてよい。

【0104】

［付記５］
付記１から付記４のいずれか一つに記載のプログラムにおいて、素材オブジェクトは、さらに、当該素材オブジェクトの構造に関する構造情報１４２ｃが関連付けられてよく、反射光情報１４４ａは、素材情報１４２ｂに基づいて生成されてよく、反響音情報１４４ｂは、構造情報１４２ｃ及び素材情報１４２ｂに基づいて生成されてよい。

【0105】

［付記６］
付記５に記載のプログラムにおいて、構造情報１４２ｃは、素材オブジェクトの厚み及び空洞の少なくとも一方に関する情報を含んでよい。

【0106】

［付記７］
付記１から付記６のいすれか一つに記載のプログラムにおいて、素材オブジェクトは、第１素材オブジェクトと、当該第１素材オブジェクトの表面に設けられる第２素材オブジェクトとを含んでよく、素材情報１４２ｂは、第１素材オブジェクトに関連付けられた第１素材情報と、第２素材オブジェクトに関連付けられた第２素材情報とを含んでよく、反射光情報１４４ａは、第２素材情報に基づいて生成されてよく、反響音情報１４４ｂは、第１素材情報及び第２素材情報に基づいて生成されてよい。

【0107】

［付記８］
付記１から付記７のいずれか一つに記載のプログラムは、コンピュータ７０を、現実空間の物体に関する画像情報１４３を取得する取得手段１０６と、素材情報１４２ｂを、画像情報１４３に基づいて特定された物体の素材に応じて生成する第２生成手段１０４ｂと、としてさらに機能させてよい。

【0108】

［付記９］
付記１から付記８のいずれか一つに記載のプログラムにおいて、素材情報１４２ｂは、素材オブジェクトの色彩、質感、密度及び弾性の少なくとも一部に関する情報を含んでよい。

【0109】

［付記１０］
本開示の他の実施形態に係るプログラムは、コンピュータ７０を、仮想空間における、素材に関する素材情報１４２ｂが関連付けられた素材オブジェクトと、仮想空間において仮想的に光を発する光源オブジェクトと、仮想空間において仮想的に音を発する音源オブジェクトと、を含む一以上のオブジェクトを、ユーザが認識できるように出力する出力手段２０４、として機能させ、出力手段２０４は、素材情報１４２ｂに基づいて生成された、素材オブジェクトに当たった光に対応する反射光情報１４４ａ、及び、素材オブジェクトに当たった音に対応する反響音情報１４４ｂを、さらに出力する。

【0110】

［付記１１］
本開示の他の実施形態に係る情報処理装置２は、ユーザが所定の端末装置３を使用することにより認識できる仮想空間に、素材に関する素材情報１４２ｂが関連付けられた素材オブジェクトと、仮想空間において仮想的に光を発する光源オブジェクトと、仮想空間において仮想的に音を発する音源オブジェクトと、を含む一以上のオブジェクトを配置する配置部と、素材オブジェクトに当たった光に対応する反射光情報１４４ａ、及び、素材オブジェクトに当たった音に対応する反響音情報１４４ｂを、素材情報１４２ｂに基づいて生成する第１生成部と、反射光情報１４４ａ及び反響音情報１４４ｂをユーザに対して出力する出力部と、を備える。

【符号の説明】

【0111】

２…情報処理装置、３…端末装置、７０…コンピュータ、１００…受付手段、１００ａ…第１受付手段、１００ｂ…第２受付手段、１００ｃ…第３受付手段、１０２…配置手段、１０４…生成手段、１０４ａ…第１生成手段、１０４ｂ…第２生成手段、１０６…取得手段、１０８…出力手段、１４２ｂ…素材情報、１４２ｃ…構造情報、１４３…画像情報、１４４ａ…反射光情報、１４４ｂ…反響音情報、２００…受付手段、２０２…取得手段、２０４…出力手段

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】