特許 7247480 ログ情報収集プログラム、ログ情報収集方法及び情報処理装置

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2023-03-20

(45)【発行日】2023-03-29

(54)【発明の名称】ログ情報収集プログラム、ログ情報収集方法及び情報処理装置

(51)【国際特許分類】

   G06F 3/01 20060101AFI20230322BHJP

【ＦＩ】

G06F3/01 510

【請求項の数】 15

(21)【出願番号】P 2018128550

(22)【出願日】2018-07-05

(65)【公開番号】P2020009071

(43)【公開日】2020-01-16

【審査請求日】2021-04-08

(73)【特許権者】

【識別番号】000005223

【氏名又は名称】富士通株式会社

(74)【代理人】

【識別番号】100107766

【弁理士】

【氏名又は名称】伊東 忠重

(74)【代理人】

【識別番号】100070150

【弁理士】

【氏名又は名称】伊東 忠彦

(72)【発明者】

【氏名】米澤 和也

(72)【発明者】

【氏名】田中 竜太

【審査官】木村 慎太郎

(56)【参考文献】

【文献】特開２０１７－０４０９７１（ＪＰ，Ａ）

【文献】特開２０１５－１９１５５４（ＪＰ，Ａ）

【文献】特開２０１７－０６８８５１（ＪＰ，Ａ）

【文献】特開２０１７－０５８９４５（ＪＰ，Ａ）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｇ０６Ｆ ３／０１

(57)【特許請求の範囲】

【請求項1】

仮想空間におけるユーザの状態を示すログ情報を監視し、前記ユーザが仮想空間内において注目度の高い状態であることを示す条件情報に基づき、前記ユーザの状態が注目度の高い状態であるか否かを判定する処理と、
前記ユーザの状態が前記注目度の高い状態であると判定された場合に、前記ログ情報の収集を開始する処理と、
前記仮想空間内に配置されたオブジェクト毎に蓄積された前記ログ情報を分析し、前記オブジェクト毎に、前記ユーザが持った印象を対応付けた分析結果情報を出力する処理と、をコンピュータに実行させるログ収集プログラム。

【請求項2】

仮想空間におけるユーザの状態を示すログ情報を監視し、前記ユーザが仮想空間内において注目度の高い状態であることを示す条件情報に基づき、前記ユーザの状態が注目度の高い状態であると判定されたとき、前記ログ情報に基づき、前記仮想空間内に配置されたオブジェクトを選択する処理と、
前記ログ情報を、選択された前記オブジェクトと対応付けて蓄積する処理と、
前記オブジェクト毎に蓄積された前記ログ情報を分析し、前記オブジェクト毎に、前記ユーザが持った印象を対応付けた分析結果情報を出力する処理と、をコンピュータに実行させる、ログ収集プログラム。

【請求項3】

仮想空間におけるユーザの状態を示すログ情報を監視し、前記ユーザが仮想空間内において注目度の高い状態であることを示す条件情報に基づき、前記ユーザの状態が注目度の高い状態であるか否かを判定する処理と、
前記ユーザの状態が前記注目度の高い状態であると判定された場合に、
前記仮想空間における前記ユーザの位置に応じて、前記仮想空間内に配置されたオブジェクトを選択する処理と、
前記ログ情報の収集を開始し、前記ログ情報を選択された前記オブジェクトと対応付けて蓄積する処理と、
前記オブジェクト毎に蓄積された前記ログ情報を分析し、前記オブジェクト毎に、前記ユーザが持った印象を対応付けた分析結果情報を出力する処理と、をコンピュータに実行させる、ログ収集プログラム。

【請求項4】

前記オブジェクト毎に蓄積された前記ログ情報を分析し、分析結果を示す情報を出力する処理を、前記コンピュータに実行させる、請求項２又は３記載のログ収集プログラム。

【請求項5】

前記分析結果を示す情報を、選択された前記オブジェクト毎に蓄積する処理を、前記コンピュータに実行させる、請求項４記載のログ収集プログラム。

【請求項6】

前記コンピュータは、
前記オブジェクトを選択する処理において、
前記仮想空間における前記ユーザの視線方向において、前記ユーザの位置から所定の範囲内に配置されたオブジェクトを選択する、請求項２乃至５の何れか一項に記載のログ収集プログラム。

【請求項7】

前記コンピュータは、
前記オブジェクトを選択する処理において、
前記仮想空間における前記ユーザの視線上に配置されたオブジェクトを選択する、請求項２乃至５の何れか一項に記載のログ収集プログラム。

【請求項8】

前記条件情報が前記仮想空間に配置されたオブジェクト毎に設定されており、
前記判定する処理は、
前記ユーザの状態を示す情報が、前記条件情報が示す条件を満たしているオブジェクトを選択する、請求項３記載のログ収集プログラム。

【請求項9】

前記オブジェクトの選択方法が、オブジェクト毎に設定されており、
前記オブジェクトを選択する処理は、
前記条件情報において、前記ユーザの状態を示す情報が満たしている条件と対応するオブジェクトに対して設定された選択方法で、前記オブジェクトを選択する、請求項８記載のログ収集プログラム。

【請求項10】

コンピュータによるログ収集方法であって、前記コンピュータが、
仮想空間におけるユーザの状態を示すログ情報を監視し、前記ユーザが仮想空間内において注目度の高い状態であることを示す条件情報に基づき、前記ユーザの状態が注目度の高い状態であるか否かを判定し、
前記ユーザの状態が前記注目度の高い状態であると判定された場合に、前記ログ情報の収集を開始し、
前記仮想空間内に配置されたオブジェクト毎に蓄積された前記ログ情報を分析し、前記オブジェクト毎に、前記ユーザが持った印象を対応付けた分析結果情報を出力する、ログ収集方法。

【請求項11】

コンピュータによるログ収集方法であって、前記コンピュータが、
仮想空間におけるユーザの状態を示すログ情報を監視し、前記ユーザが仮想空間内において注目度の高い状態であることを示す条件情報に基づき、前記ユーザの状態が注目度の高い状態であると判定されたとき、前記ログ情報に基づき、前記仮想空間内に配置されたオブジェクトを選択し、
前記ログ情報を、選択された前記オブジェクトと対応付けて蓄積し、
前記オブジェクト毎に蓄積された前記ログ情報を分析し、前記オブジェクト毎に、前記ユーザが持った印象を対応付けた分析結果情報を出力する、ログ収集方法。

【請求項12】

コンピュータによるログ収集方法であって、前記コンピュータが、
仮想空間におけるユーザの状態を示すログ情報を監視し、前記ユーザが仮想空間内において注目度の高い状態であることを示す条件情報に基づき、前記ユーザの状態が注目度の高い状態であるか否かを判定し、
前記ユーザの状態が前記注目度の高い状態であると判定された場合に、
前記仮想空間における前記ユーザの位置に応じて、前記仮想空間内に配置されたオブジェクトを選択し、
前記ログ情報の収集を開始し、前記ログ情報を選択された前記オブジェクトと対応付けて蓄積し、
前記オブジェクト毎に蓄積された前記ログ情報を分析し、前記オブジェクト毎に、前記ユーザが持った印象を対応付けた分析結果情報を出力する、ログ収集方法。

【請求項13】

仮想空間におけるユーザの状態を示すログ情報を監視し、前記ユーザが仮想空間内において注目度の高い状態であることを示す条件情報に基づき、前記ユーザの状態が注目度の高い状態であるか否かを判定する状態判定部と、
前記ユーザの状態が前記注目度の高いであると判定された場合に、前記ログ情報の収集を開始するログ収集部と、
前記仮想空間内に配置されたオブジェクト毎に蓄積された前記ログ情報を分析し、前記オブジェクト毎に、前記ユーザが持った印象を対応付けた分析結果情報を出力する出力部と、を有する情報処理装置。

【請求項14】

仮想空間におけるユーザの状態を示すログ情報を監視し、前記ユーザが仮想空間内において注目度の高い状態であることを示す条件情報に基づき、前記ユーザの状態が注目度の高い状態であると判定されたとき、前記ログ情報に基づき、前記仮想空間内に配置されたオブジェクトを選択するオブジェクト選択部と、
前記ログ情報を、選択された前記オブジェクトと対応付けて蓄積するログ蓄積部と、
前記オブジェクト毎に蓄積された前記ログ情報を分析し、前記オブジェクト毎に、前記ユーザが持った印象を対応付けた分析結果情報を出力する出力部と、を有する情報処理装置。

【請求項15】

仮想空間におけるユーザの状態を示すログ情報を監視し、前記ユーザが仮想空間内において注目度の高い状態であることを示す条件情報に基づき、前記ユーザの状態が注目度の高い状態であるか否かを判定する状態判定部と、
前記ユーザの状態が前記注目度の高い状態であると判定された場合に、
前記仮想空間における前記ユーザの位置に応じて、前記仮想空間内に配置されたオブジェクトを選択するオブジェクト選択部と、
前記ログ情報の収集を開始し、前記ログ情報を選択された前記オブジェクトと対応付けて蓄積するログ蓄積部と、
前記オブジェクト毎に蓄積された前記ログ情報を分析し、前記オブジェクト毎に、前記ユーザが持った印象を対応付けた分析結果情報を出力する出力部と、を有する情報処理装置。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、ログ情報収集プログラム、ログ情報収集方法及び情報処理装置に関する。

【背景技術】

【0002】

近年では、仮想空間におけるＶＲ（Virtual Reality）コンテンツの品質の向上にむけて、仮想空間に配置されたオブジェクトやエリアに対するユーザの注目の度合いを把握することが求められている。

【0003】

ユーザの注目の度合いを把握するための技術としては、例えば、仮想空間におけるユーザの視点や位置をログ情報として取得し、ユーザの視点を示す画像や、ユーザの移動の履歴を示すヒートマップ等をＶＲコンテンツに重畳させて表示し、可視化する技術が知られている。

【先行技術文献】

【特許文献】

【0004】

【文献】特開２０１７－６８８５１号公報

【発明の概要】

【発明が解決しようとする課題】

【0005】

従来の技術では、取得したログ情報から、仮想空間内で、ユーザが視線を向けたオブジェクトやエリアは判別されるが、ユーザがそのオブジェクトやエリアに注目して視線を向けたのか、漠然と視点を向けただけなのかを判別することは困難である。また、従来の技術では、ログ情報から、ユーザが滞留した位置を検出することはできるが、ユーザが意図的にその位置に滞留していたのか、漠然と滞留していたのかを判別することは困難である。

【0006】

つまり、従来の技術では、仮想空間においてユーザの注目の度合いが高まった場合におけるログ情報を取得することが困難であった。

【0007】

１つの側面では、本発明は、仮想空間内でユーザの注目の度合いが高まったときのログ情報を収集することを目的としている。

【課題を解決するための手段】

【0008】

一つの態様では、仮想空間におけるユーザの状態を示すログ情報を監視し、前記ユーザが仮想空間内において注目度の高い状態であることを示す条件情報に基づき、前記ユーザの状態が注目度の高い状態であるか否かを判定する処理と、前記ユーザの状態が前記注目度の高い状態であると判定された場合に、前記ログ情報の収集を開始する処理と、前記仮想空間内に配置されたオブジェクト毎に蓄積された前記ログ情報を分析し、前記オブジェクト毎に、前記ユーザが持った印象を対応付けた分析結果情報を出力する処理と、をコンピュータに実行させる。

【0009】

上記各処理は、上記各処理を実現する機能部、各処理を実現する手順としても良く、各処理をコンピュータに実行させるプログラムを記憶したコンピュータ読み取り可能な記憶媒体とすることもできる。

【発明の効果】

【0010】

仮想空間内でユーザの注目の度合いが高まったときのログ情報を取得することができる。

【図面の簡単な説明】

【0011】

【図1】第一の実施形態の仮想空間提示システムの一例を示す図である。

【図2】第一の実施形態におけるログ情報の収集について説明する図である。

【図3】第一の実施形態の情報処理装置のハードウェア構成の一例を示す図である。

【図4】第一の実施形態の情報処理装置の機能を説明する図である。

【図5】第一の実施形態の条件情報の一例を示す図である。

【図6】第一の実施形態の情報処理装置の動作を説明するフローチャートである。

【図7】第一の実施形態のログ情報の一例を示す図である。

【図8】第二の実施形態におけるログ情報の収集について説明する図である。

【図9】第二の実施形態の情報処理装置の機能を説明する図である。

【図10】第二の実施形態の情報処理装置の動作を説明する第一のフローチャートである。

【図11】第二の実施形態のログ情報の一例を示す図である。

【図12】第二の実施形態におけるログ情報の分析結果の一例を示す図である。

【図13】第二の実施形態におけるログ情報の蓄積による効果を説明する図である。

【図14】第二の実施形態の情報処理装置の動作を説明する第二のフローチャートである。

【図15】第三の実施形態の情報処理装置の機能を説明する図である。

【図16】第三の実施形態の選択条件情報の一例を示す図である。

【図17】第三の実施形態の情報処理装置の動作を説明するフローチャートである。

【発明を実施するための形態】

【0012】

（第一の実施形態）
以下に図面を参照して、第一の実施形態について説明する。図１は、第一の実施形態の仮想空間提示システムの一例を示す図である。

【0013】

本実施形態の仮想空間提示システム１００は、表示装置２００、センサ群３００、情報処理装置４００、ログ蓄積装置５００を有する。

【0014】

本実施形態の仮想空間提示システム１００において、表示装置２００と、センサ群３００とは、情報処理装置４００と有線又は無線によって接続される。また、仮想空間提示システム１００において、情報処理装置４００は、ログ蓄積装置５００と有線又は無線によって接続される。

【0015】

本実施形態の表示装置２００は、例えば、ＨＭＤ（Head Mounted Display）等であり、ユーザの頭部に装着されて、ユーザに仮想空間を提示する。また、本実施形態の表示装置２００は、表示装置２００を装着したユーザの視点を追従するためのカメラや、ユーザが発する音声を検出するマイク等を有していても良い。尚、表示装置２００は、ヘッドマウントディスプレイでなくても良く、ユーザに仮想空間を提示することができる装置であれば、どのような装置であっても良い。

【0016】

本実施形態のセンサ群３００は、ユーザに装着されるものであり、例えば、ユーザの頭部の動きや回転を検出する加速度センサ、ユーザの心拍を検出するためのセンサ等を含む。尚、図１の例では、表示装置２００とセンサ群３００とがそれぞれ設けられる構成としたが、これに限定されない。センサ群３００は、表示装置２００の一部であっても良い。

【0017】

本実施形態の情報処理装置４００は、表示装置２００に、ユーザの視点から見た仮想空間の画像を生成する。尚、仮想空間とは、例えば、３次元座標空間において人や物体などのオブジェクトが配置される仮想的な空間である。情報処理装置４００は、オブジェクトの形状や位置等の情報を基に、仮想空間を描画した画像を生成している。

【0018】

また、本実施形態の情報処理装置４００は、ログ収集処理部４１０を有する。ログ収集処理部４１０は、表示装置２００やセンサ群３００から取得される情報を監視し、ユーザがログ情報の取得を開始する契機となる状態であるか否かを判定する。そして、ログ収集処理部４１０は、ユーザが該当する状態となった場合に、監視している情報を、ユーザの行動及び状態を示すログ情報として収集し、ログ蓄積装置５００に蓄積する。

【0019】

言い換えれば、情報処理装置４００は、表示装置２００やセンサ群３００から取得される情報から、ユーザが仮想空間内の特定のオブジェクトに対して関心を持ったとされる状態となったか否かを判定する。そして情報処理装置４００は、ユーザが該当する状態であると判定された場合に、ログ情報の収集を開始する。

【0020】

本実施形態のログ情報とは、例えば、仮想空間におけるユーザの視点やユーザが発した音声、仮想空間内におけるユーザの位置、ユーザの頭部の動きや回転、ユーザの心拍数等を示す情報である。

【0021】

つまり、情報処理装置４００は、仮想空間におけるユーザの視点やユーザが発した音声、仮想空間内におけるユーザの位置、ユーザの頭部の動きや回転、ユーザの心拍数（生体情報）等を示す情報を、ユーザの状態を示す情報として監視している。以下の説明では、情報処理装置４００により監視される情報を、監視対象情報と呼ぶ。

【0022】

本実施形態のログ蓄積装置５００は、ログ情報データベース５１０を有する。ログ蓄積装置５００では、情報処理装置４００から取得したログ情報をログ情報データベース５１０に格納する。

【0023】

尚、本実施形態では、仮想空間提示システム１００は、ログ蓄積装置５００を含むものとしたが、これに限定されない。ログ蓄積装置５００は、仮想空間提示システム１００の外部に設けられていても良い。また、情報処理装置４００がログ蓄積装置５００を兼ねていても良い。

【0024】

以下に、図２を参照して、本実施形態におけるログ情報の収集について説明する。図２は、第一の実施形態におけるログ情報の収集について説明する図である。

【0025】

図２では、ユーザが時刻Ｔｓにおいて、仮想空間に入り、時刻Ｔｅにおいて仮想空間から出た場合のログ情報の収集の仕方を示している。言い換えれば、図２では、時刻Ｔｓにおいて、表示装置２００を装着したユーザに対する仮想空間の提示が開始され、時刻Ｔｅにおいて、この仮想空間の提示が終了する場合の、情報処理装置４００によるログ情報の収集の仕方を示している。

【0026】

情報処理装置４００は、時刻Ｔｓにおいて仮想空間の提示が開始されると同時に、表示装置２００とセンサ群３００から取得される監視対象情報の監視を開始する。

【0027】

図２では、情報処理装置４００は、監視対象情報から、時刻Ｔ１に、ユーザの状態が、仮想空間内のオブジェクトやエリアに対する注目の度合いが高いとされる状態となったと判定し、ログ情報（監視対象情報）の収集を開始する。そして、情報処理装置４００は、時刻Ｔ２において、ユーザの状態が、注目の度合いが高いとされる状態ではなくなったと判定し、ログ情報の収集を終了する。

【0028】

尚、以下の説明では、ユーザの仮想空間内のオブジェクトやエリアに対する注目の度合いが高まったとされる状態を、オブジェクトやエリアに対して注目度が高い状態と表現することがある。また、本実施形態では、ログ情報に含まれる情報の項目と、監視対象情報に含まれる情報の項目とが一致していなくても良い。ログ情報は、監視対象情報の一部であっても良いし、監視対象情報がログ情報の一部であっても良い。

【0029】

情報処理装置４００は、同様に、時刻Ｔ３から時刻Ｔ４までの間と、時刻Ｔ５から時刻Ｔ６までの間は、ユーザの状態は、注目度が高い状態と判定され、ログ情報が収集されている。尚、情報処理装置４００では、注目度が高い状態と判定するための条件が事前に設定されている。この条件の詳細は後述する。

【0030】

このように、本実施形態では、ユーザに仮想空間を提示している間におけるユーザの状態に応じて、ログ情報の収集を行うか否かを判定する。より具体的には、本実施形態では、ユーザに仮想空間を提示している間において、ユーザの状態が、仮想空間内のオブジェクトやエリアにする注目度が高い状態と判定された場合に、ログ情報の収集及び蓄積を行う。

【0031】

したがって、本実施形態によれば、仮想空間内でユーザの注目の度合いが高まったときのログ情報を取得することができる。

【0032】

以下に、本実施形態の情報処理装置４００について説明する。図３は、第一の実施形態の情報処理装置のハードウェア構成の一例を示す図である。

【0033】

本実施形態の情報処理装置４００は、それぞれバスＢで相互に接続されている入力装置４１、出力装置４２、ドライブ装置４３、補助記憶装置４４、メモリ装置４５、演算処理装置４６及びインターフェース装置４７を含む。

【0034】

入力装置４１は、各種の情報の入力を行うための装置であり、例えばキーボードやポインティングデバイス等により実現される。出力装置４２は、各種の情報の出力を行うためものであり、例えばディスプレイ等により実現される。インターフェース装置４７は、ＬＡＮカード等を含み、ネットワークに接続する為に用いられる。

【0035】

ログ収集処理部４１０を実現させるログ情報収集プログラムは、情報処理装置４００を制御する各種プログラムの少なくとも一部である。ログ情報収集プログラムは例えば記憶媒体４８の配布やネットワークからのダウンロード等によって提供される。ログ情報収集プログラムを記録した記憶媒体４８は、ＣＤ－ＲＯＭ、フレキシブルディスク、光磁気ディスク等の様に情報を光学的、電気的或いは磁気的に記録する記憶媒体、ＲＯＭ、フラッシュメモリ等の様に情報を電気的に記録する半導体メモリ等、様々なタイプの記憶媒体を用いることができる。

【0036】

また、ログ情報収集プログラムは、ログ情報収集プログラムを記録した記憶媒体４８がドライブ装置４３にセットされると、記憶媒体４８からドライブ装置４３を介して補助記憶装置４４にインストールされる。ネットワークからダウンロードされたログ情報収集プログラムは、インターフェース装置４７を介して補助記憶装置４４にインストールされる。

【0037】

補助記憶装置４４は、インストールされたログ情報収集プログラムを格納すると共に、情報処理装置４００が収集したログ情報等の各種の必要なファイル、データ等を格納する。メモリ装置４５は、情報処理装置４００の起動時に補助記憶装置４４からログ情報収集プログラムを読み出して格納する。そして、演算処理装置４６はメモリ装置４５に格納されたログ情報収集プログラムに従って、後述するような各種処理を実現している。

【0038】

次に、図４を参照して、本実施形態の情報処理装置４００の機能について説明する。図４は、第一の実施形態の情報処理装置の機能を説明する図である。

【0039】

本実施形態の情報処理装置４００は、ログ収集処理部４１０を有する。ログ収集処理部４１０は、画像処理部４１１、状態監視部４１２、条件保持部４１３、状態判定部４１４、ログ収集部４１５、ログ蓄積部４１６を有する。

【0040】

画像処理部４１１は、オブジェクトの形状や位置等の情報を基に、仮想空間を描画した画像を示す画像データを生成し、表示装置２００に出力する。また、画像処理部４１１は、ユーザの動きに合わせて、ユーザから見た仮想空間の画像を示す画像データを生成し、表示装置２００に出力する。

【0041】

状態監視部４１２は、表示装置２００及びセンサ群３００から取得される監視対象情報を監視する。監視対象情報は、例えば、ユーザの視点を示す情報、ユーザの頭部の向きや回転を示す情報、ユーザの心拍数を示す情報、ユーザが発した音声を示す情報、音声の音量を示す情報、仮想空間におけるユーザの位置を示す情報等を含む。尚、監視対象情報は、上述した情報に限定されない。監視対象情報は、上述した情報の一部であっても良いし、上述した情報以外の情報を含んでも良い。

【0042】

尚、ユーザの視点を示す情報とは、仮想空間内において、物を見るためにユーザが向けた視線がそそがれる点を示す情報であり、仮想空間におけるユーザの視点を示す３次元の座標情報である。ユーザの視点を示す座標情報は、例えば、表示装置２００の有する視点追従機能等によって検出されるユーザの視点と、仮想空間とから、求められる。

【0043】

ユーザの位置を示す情報は、仮想空間における表示装置２００の位置を示す３次元の座標情報である。ユーザの位置を示す情報は、例えば、画像処理部４１１により、ユーザから見た仮想空間の画像を示す画像データを生成する際に、取得されても良い。

【0044】

ユーザの心拍数を示す情報は、例えば、センサ群３００に含まれる脈拍計等によって検出される拍動の回数である。

【0045】

ユーザが発した音声を示す情報及び音声の音量を示す情報とは、例えば、表示装置２００の有するマイク等によって集音される音声波形である。以下の説明では、ユーザが発した音声を示す情報及び音声の音量を示す情報を音声波形を示す情報と表現する場合がある。

【0046】

条件保持部４１３は、ユーザの状態を判定するための条件を示す条件情報４２０が設定され、保持されている。条件情報４２０は、ユーザの状態が特定の状態であることを示す条件を含む情報である。条件情報４２０の詳細は後述する。

【0047】

状態判定部４１４は、状態監視部４１２に監視されている監視対象情報と、条件情報４２０とから、仮想空間内のユーザの状態が、なんらかのオブジェクトやエリアに対する注目度が高い状態となったか否かを判定する。

【0048】

また、状態判定部４１４は、監視対象情報と条件情報４２０とから、ユーザの状態が、注目度の高い状態でなくなったか否かを判定する。言い換えれば、状態判定部４１４は、表示装置２００やセンサ群３００から取得されるユーザの状態を示す情報と基づき、ユーザの状態が特定の状態である否かを判定している。

【0049】

ログ収集部４１５は、状態判定部４１４によって、ユーザの状態が、注目度が高い状態である、と判定された場合に、ログ情報の収集を開始する。また、ログ収集部４１５は、ログ情報を収集している最中に、ユーザの状態が、注目度が高い状態でなくなったと判定されると、ログ情報の収集を終了する。

【0050】

尚、本実施形態のログ情報は、少なくとも、仮想空間におけるユーザの位置を示す情報と、ユーザの視線を示す情報を含んでいれば良く、監視対象情報と同様の情報でなくても良い。

【0051】

ログ蓄積部４１６は、ログ収集部４１５が収集したログ情報を、ログ蓄積装置５００にアップロードして、蓄積させる。

【0052】

尚、本実施形態のログ収集部４１５は、ログ情報をＣＳＶファイル等の形式で収集し、ログ蓄積部４１６は、このＣＳＶファイルをＨＴＭＬ形式のデータとして、ログ蓄積装置５００にアップロードしても良い。

【0053】

ログ情報を収集する際のデータの形式（ＣＳＶ形式等）や、ログ情報をログ蓄積装置５００へアップロードする際のデータの形式（ＨＴＭＬ形式等）は、予めログ収集部４１５とログ蓄積部４１６に設定されていても良い。

【0054】

以下に、図５を参照して、本実施形態の条件情報４２０について説明する。図５は、第一の実施形態の条件情報の一例を示す図である。

【0055】

本実施形態の条件情報４２０では、監視対象情報から得られる項目と、項目に対する条件とが対応付けられている。

【0056】

図５に示す条件情報４２０－１では、視点の滞留時間に対し、「○秒以上」という条件が対応付けられている。視点の滞留時間とは、視点が一点又はその周辺に滞留している時間であり、ユーザが特定のオブジェクトに注目している状態と想定される。つまり、監視対象情報が条件情報４２０－１を満たす場合とは、ユーザが特定のオブジェクトを注目している状態と考えられる。

【0057】

また、条件情報４２０－２では、音量に対し、「×ｄＢ以上」という条件が対応付けられている。ここで、音量とは、ユーザが仮想空間内で発した音声の音量である。ユーザの音声の音量が、×ｄＢ以上となる場合とは、例えば、ユーザが視認したものに対して、歓声や悲鳴を上げた状態と想定される。つまり、監視対象情報が条件情報４２０－２を満たす場合とは、ユーザが特定のオブジェクトを視認することで、感嘆や驚き、恐怖等の感情を持った状態と考えられる。言い換えれば、つまり、監視対象情報が条件情報４２０－２を満たす場合とは、ユーザが特定のオブジェクトに気を取られている状態とも言える。

【0058】

また、条件情報４２０－３では、心拍数に対し、「××回以上」という条件が対応付けられている。ユーザの心拍数が××回以上となる場合とは、ユーザが、緊張した状態や興奮した状態であると考えられる。つまり、監視対象情報が条件情報４２０－３を満たす場合とは、ユーザが緊張した状態や興奮した状態で、オブジェクトを視認している状態と言える。

【0059】

尚、図５に示す条件情報４２０は、一例であり、これに限定されない。条件情報４２０には、図５に示す条件情報４２０－１～条件情報４２０－３以外の項目と条件の対応付けを示す情報が含まれていても良い。

【0060】

例えば、条件情報４２０には、ユーザが音声を発している時間に対して、所定の時間以上であるとする条件を対応付けても良い。ユーザが音声を発し続けている状態とは、ユーザが視認したオブジェクトに対して、感想や見解を述べている状態であることが推測される。

【0061】

次に、図６を参照して、本実施形態の情報処理装置４００の動作について説明する。図６は、第一の実施形態の情報処理装置の動作を説明するフローチャートである。

【0062】

本実施形態の情報処理装置４００は、仮想空間の提示指示を受け付けると、画像処理部４１１により、表示装置２００に対して仮想空間を示す画像の画像データを出力し、表示装置２００を到着しているユーザに対して仮想空間の提示を開始する（ステップＳ６０１）。

【0063】

尚、仮想空間の提示指示は、例えば、ユーザが表示装置２００を装着した際に、表示装置２００から情報処理装置４００に送信されても良い。

【0064】

続いて、情報処理装置４００は、状態監視部４１２により、表示装置２００とセンサ群３００から出力される監視対象情報を監視し、状態判定部４１４により、監視対象情報が、条件保持部４１３の条件情報４２０を満たすか否かを判定する（ステップＳ６０２）。言い換えれば、状態判定部４１４は、監視対象情報に基づき、ユーザの状態が、注目度の高い状態であるか否かを判定している。

【0065】

ここで、ステップＳ６０２における状態判定部４１４の判定について説明する。

【0066】

本実施形態の状態判定部４１４は、例えば、監視対象情報が、条件情報４２０が示す全ての条件を持たす場合に、ユーザの状態を注目度の高い状態と判定しても良い。

【0067】

具体的には、状態判定部４１４は、例えば、視点を示す情報が条件情報４２０－１を満たし、且つ、ユーザが発した音声及び音声の音量が条件情報４２０－２を満たし、且つ、心拍数が条件情報４２０－３を満たす場合にのみ、ユーザの状態を注目度の高い状態と判定する。

【0068】

また、本実施形態の状態判定部４１４は、例えば、監視対象情報が、条件情報４２０が示す条件のうち、何れか一つを満たす場合に、ユーザの状態を注目度の高い状態と判定しても良い。

【0069】

この場合、状態判定部４１４は、例えば、視点を示す情報が条件情報４２０－１を満たす場合、ユーザが発した音声及び音声の音量が条件情報４２０－２を満たす場合、心拍数が条件情報４２０－３を満たす場合の何れにおいても、ユーザの状態を注目度の高い状態と判定する。

【0070】

さらに、本実施形態の状態判定部４１４は、例えば、監視対象情報が、条件情報４２０が示す条件のうち、複数の条件を持たす場合に、ユーザの状態を注目度の高い状態と判定しても良い。

【0071】

この場合、状態判定部４１４は、例えば、視点を示す情報が条件情報４２０－１を満たし、且つ、ユーザが発した音声及び音声の音量が条件情報４２０－２を満たす場合、視点を示す情報が条件情報４２０－１を満たし、且つ、心拍数が条件情報４２０－３を満たす場合の何れにおいても、ユーザの状態を注目度の高い状態と判定する。

【0072】

本実施形態では、ユーザの状態を注目度の高い状態と判定される条件の組み合わせが、予め状態判定部４１４に設定されていても良い。

【0073】

例えば、状態判定部４１４には、監視対象情報が、条件情報４２０が示す全ての条件を満たす場合にのみ、ユーザの状態を注目度の高い状態と判定するように設定されていても良い。また、状態判定部４１４には、監視対象情報が、条件情報４２０が示す条件のうち、所定の数の条件を満たす場合に、ユーザの状態を注目度の高い状態と判定するように、設定されていても良い。

【0074】

ステップＳ６０２において、ユーザの状態を注目度の高い状態と判定されない場合、つまり、ユーザの状態が注目度の高い状態ではない、と判定された場合、情報処理装置４００は、後述するステップＳ６０６へ進む。

【0075】

ステップＳ６０２において、ユーザの状態を注目度の高い状態と判定された場合、情報処理装置４００は、ログ収集部４１５により、ログ情報の収集を開始する（ステップＳ６０３）。

【0076】

続いて、情報処理装置４００は、状態判定部４１４により、監視対象情報が、条件情報４２０に示す条件を満たさなくなったか否かを判定する（ステップＳ６０４）。言い換えれば、状態判定部４１４は、ユーザの状態が、注目度が高い状態ではなくなったか否かを判定する。

【0077】

ここで、ステップＳ６０４における状態判定部４１４の判定について説明する。

【0078】

本実施形態の状態判定部４１４は、例えば、条件情報４２０が示す複数の条件を満たす場合に、注目度が高い状態と判定する設定がされていた場合には、この複数の条件のうち、何れか一つの条件が満たされなくなった場合に、注目度が高い状態ではなくなったと判定しても良い。

【0079】

具体的には、例えば、状態判定部４１４は、条件情報４２０－１と条件情報４２０－２を満たす場合に、注目度が高い状態と判定する設定がされていた場合、ユーザの視点が、他のオブジェクトに移動し、条件情報４２０－１を満たさなくなった時点で、注目度が低い状態（注目度が高くない状態）となったと判定しても良い。

【0080】

ステップＳ６０３において、注目度が依然として高いと判定された場合、つまり、監視対象情報が、設定された条件を満たし続けている場合、情報処理装置４００は、後述するステップＳ６０６へ進む。

【0081】

ステップＳ６０３において、注目度が高い状態ではなくなったと判定された場合、つまり、注目度が低くなったと判定された場合、情報処理装置４００は、ログ収集部４１５によるログ情報の収集を停止する（ステップＳ６０５）
続いて、情報処理装置４００は、画像処理部４１１による仮想空間の提示が終了するか否かを判定する（ステップＳ６０６）。

【0082】

具体的には、例えば、情報処理装置４００は、表示装置２００が、ユーザの頭部から取り外された場合に、仮想空間の提示の終了するものと判定しても良い。また、情報処理装置４００は、例えば、外部から仮想空間の提示の終了の指示を受け付けたとき、仮想空間の提示を終了するものと判定しても良い。

【0083】

ステップＳ６０６において、仮想空間の提示を終了しない場合、つまり、仮想空間の提示が継続される場合、情報処理装置４００は、ステップＳ６０２へ戻る。

【0084】

ステップＳ６０６においた、仮想空間の提示を終了する場合、情報処理装置４００は、ログ蓄積部４１６により、収集したログ情報をログ蓄積装置５００にアップロードして蓄積させ（ステップＳ６０７）、処理を終了する。

【0085】

以下に、図７を参照して、ログ収集部４１５により収集されるログ情報について説明する。図７は、第一の実施形態のログ情報の一例を示す図である。

【0086】

本実施形態のログ情報７１は、例えば、ユーザ毎に収集されるものとした。ユーザを特定するための情報は、例えば、情報処理装置４００が表示装置２００を介して仮想空間をユーザに提示する際に、情報処理装置４００に入力されて保持されていても良い。

【0087】

本実施形態のログ情報７１は、ユーザ識別情報と、ログ情報を収集した時間帯を含む情報７２と、ログ収集部４１５が収集した情報７３とを含む。

【0088】

図７のログ情報７１は、時刻Ｔ１から時刻Ｔ２までの時間帯におけるユーザＡの仮想空間内の位置を示す情報、視点を示す情報、音声を示す情報を含む情報であることがわかる。

【0089】

このように、本実施形態では、情報処理装置４００の外部から取得されるユーザの状態を示す情報に基づき、ユーザが仮想空間内において注目度の高い状態となったか否かを判定する。そして、情報処理装置４００は、ユーザの状態が、注目度の高い状態である期間のログ情報を収集する。

【0090】

したがって、本実施形態によれば、仮想空間内でユーザの注目の度合いが高まったときのログ情報を取得することができる。

【0091】

（第二の実施形態）
以下に図面を参照して第二の実施形態について説明する。第二の実施形態では、ログ情報をユーザが注目しているオブジェクトと対応付けて、オブジェクト毎に蓄積する点と、蓄積されたログ情報を分析する点が、第一の実施形態と相違する。よって、以下の第二の実施形態の説明では、第一の実施形態との相違点について説明し、第一の実施形態と同様の機能構成を有するものには、第一の実施形態の説明で用いた符号と同様の符号を付与し、その説明を省略する。

【0092】

図８は、第二の実施形態におけるログ情報の収集について説明する図である。

【0093】

図８では、時刻Ｔｓから時刻Ｔｅまでの間、ユーザに仮想空間が提示され、ログ情報として、音声波形を示す情報、位置を示す情報、心拍数を示す情報、視点を示す情報を収集する場合を示している。

【0094】

また、図８では、時刻Ｔ１から時刻Ｔ２の間の時間帯Ｔ１２、時刻Ｔ３１から時刻Ｔ４の間の時間帯Ｔ３４、時刻Ｔ５から時刻Ｔ６の間の時間帯Ｔ５６において、ユーザの状態が、注目度が高いと判定されている。

【0095】

このとき、本実施形態では、仮想空間内におけるオブジェクトの中から、各時間帯において注目の対象とされたオブジェクトを選択し、選択されたオブジェクト毎にログ情報を蓄積する。注目の対象とされるオブジェクトは、例えは、ユーザとの位置関係に応じて選択されても良い。オブジェクトの選択の詳細は後述する。

【0096】

図８の例では、時間帯Ｔ１２では、オブジェクトＡが注目の対象として選択されている。したがって、時間帯Ｔ１２において収集されたログ情報は、オブジェクトＡに対するユーザのログ情報として蓄積される。また、時間帯Ｔ３４においては、オブジェクトＢが選択され、時間帯Ｔ３４において収集されたログ情報は、オブジェクトＢのログ情報として蓄積される。また、時間帯Ｔ５６においては、オブジェクトＣが選択され、時間帯Ｔ５６において収集されたログ情報は、オブジェクトそのログ情報として蓄積される。

【0097】

また、本実施形態では、オブジェクト毎に蓄積されたログ情報を分析し、オブジェクトに対する評価を行う。

【0098】

例えば、時間帯Ｔ１２におけるログ情報が、ユーザの心拍数に乱れがあり、音声が発された時間が短く、音量が大きいことを示したとする。この場合、このユーザは、時間帯Ｔ１２において選択されたオブジェクトＡに対し、驚きを感じたことがわかる。したがって、オブジェクトＡのログ情報から、オブジェクトＡはユーザを驚かせる可能性がある、という評価が得られる。

【0099】

また、時間帯Ｔ２３におけるログ情報では、音声のトーンが高く、音声が発せられている時間が長く、且つ、視点の滞留時間が長いことを示したとする。この場合、このユーザは、時間帯Ｔ２３において選択されたオブジェクトＢに対して好印象を抱いていることがわかる。したがって、オブジェクトＢのログ情報から、このユーザは、オブジェクトＢに対して良い印象を持っている、という評価が得られる。

【0100】

尚、本実施形態では、例えば、ユーザの音声波形を示す情報に対して音声認識を行ってテキストデータを取得し、このテキストデータをログ情報の一部として取得しても良い。

【0101】

また、時間帯Ｔ５６におけるログ情報では、ユーザの心拍数に乱れがあり、視点が、複数回にわたって短時間オブジェクトＣ上に滞留したことを示したとする。この場合、このユーザは、時間帯Ｔ５６で選択されたオブジェクトＣから目を背けたり、長時間見ないようにしていることがわかる。したがって、オブジェクトＣのログ情報から、オブジェクトＣは、このユーザに不快感を与える、という評価が得られる。言い換えれば、オブジェクトＣに対して悪い印象を持っている、という評価となる。

【0102】

次に、図９を参照して、本実施形態の情報処理装置４００Ａの機能について説明する。図９は、第二の実施形態の情報処理装置の機能を説明する図である。

【0103】

本実施形態の情報処理装置４００Ａは、ログ収集処理部４１０Ａを有する。本実施形態のログ収集処理部４１０Ａは、画像処理部４１１、状態監視部４１２、条件保持部４１３、状態判定部４１４、ログ収集部４１５Ａ、ログ蓄積部４１６、オブジェクト選択部４１７、ログ分析部４１８を有する。

【0104】

ログ収集部４１５Ａは、オブジェクト選択部４１７によってオブジェクトが選択されると、収集したログ情報をオブジェクトと対応付ける。言い換えれば、ログ収集部４１５Ａは、ログ情報に、選択されたオブジェクトを特定する情報を含める。オブジェクトを特定する情報とは、例えば、オブジェクトの名称等であり、オブジェクトを一意に特定することができる情報である。

【0105】

本実施形態のオブジェクト選択部４１７は、状態判定部４１４により、ユーザの状態が、注目度が高い状態であると判定とされた場合に、注目の対象とされるオブジェクトを選択する。

【0106】

具体的には、オブジェクト選択部４１７は、注目度が高い状態であると判定されたときの仮想空間におけるユーザの視線方向において、ユーザの位置から所定の範囲内にあるオブジェクトを、注目の対象とされたオブジェクトとして選択しても良い。所定の範囲は、予め設定されていても良いし、過去のログ情報等から算出されても良い。

【0107】

また、オブジェクト選択部４１７は、ユーザの視線方向上に存在するオブジェクトを、注目の対象とされたオブジェクトとして選択しても良い。言い換えれば、オブジェクト選択部４１７は、ユーザの視線とオブジェクトとの交点（衝突点）から、ユーザが直接見ているオブジェクトを、注目の対象とされたオブジェクトとして選択しても良い。

【0108】

つまり、本実施形態のオブジェクト選択部４１７は、注目度が高いと判定された場合のユーザとの位置と、仮想空間に配置された各オブジェクトの位置との関係に応じて、注目度の対象とされたオブジェクトを選択する。尚、仮想空間に配置された各オブジェクトの位置を示す情報は、画像処理部４１１等によって保持されていて良い。

【0109】

本実施形態のログ分析部４１８は、ログ蓄積部４１６によって蓄積されたログ情報を分析する。ログ分析部４１８は、例えば、ログ蓄積装置５００のログ情報データベース５１０に蓄積されたログ情報を参照して分析を行っても良い。また、ログ分析部４１８は、ログ収集部４１５によって収集され、ログ蓄積部４１６によりログ情報データベース５１０に格納される前に、ログ情報の分析を行っても良い。

【0110】

本実施形態のログ分析部４１８は、例えば、音声波形を示す情報から、音声の高低を示す情報を取得しても良い。また、ログ分析部４１８は、音声波形を示す情報から、ユーザの発話内容をテキストデータに変換する音声認識機能を有しても良い。

【0111】

また、本実施形態のログ分析部４１８は、オブジェクト毎のログ情報から、音声の高低、発話内容、視点の滞留時間、視点の挙動、心拍数の変動に応じて、オブジェクトに対するユーザの印象を判定し、オブジェクトの評価として出力しても良い。

【0112】

より具体的には、ログ分析部４１８では、例えば、音声の高低、発話内容、視点の滞留時間、視点の挙動、心拍数の変動のそれぞれについて、ユーザの印象の良し悪しを判定するための条件が設定されていても良い。

【0113】

例えば、ログ分析部４１８は、素敵、面白そう、もっと見てみよう等という、オブジェクトに対して肯定的な単語を予め保持しておき、発話内容に、該当する単語が含まれる場合等に、このオブジェクトに対するユーザの印象は良いと判定しても良い。

【0114】

また、例えば、ログ分析部４１８は、心拍数の変動幅の閾値と、視点の滞留時間の閾値とを保持しており、心拍数の変動幅が閾値以上であり、視点の滞留時間が閾値未満となった場合、このオブジェクトに対するユーザの印象は悪いと判定しても良い。

【0115】

本実施形態のログ分析部４１８では、オブジェクトに対するユーザの印象を判定するための条件が、情報処理装置４００Ａの管理者等によって任意に設定されても良い。

【0116】

以下に、図１０を参照して、本実施形態の情報処理装置４００Ａの動作について説明する。図１０は、第二の実施形態の情報処理装置の動作を説明する第一のフローチャートである。

【0117】

本実施形態の情報処理装置４００Ａは、仮想空間の提示指示を受け付けると、画像処理部４１１により、表示装置２００に対して仮想空間を示す画像の画像データを出力し、表示装置２００を到着しているユーザに対して仮想空間の提示を開始する（ステップＳ１００１）。

【0118】

続いて、情報処理装置４００Ａは、状態監視部４１２により、表示装置２００とセンサ群３００から出力される監視対象情報を監視し、状態判定部４１４により、監視対象情報が、条件保持部４１３の条件情報４２０を満たすか否かを判定する（ステップＳ１００２）。言い換えれば、状態判定部４１４は、監視対象情報に基づき、ユーザの状態が、注目度の高い状態であるか否かを判定している。

【0119】

ステップＳ１００２において、ユーザの状態を注目度の高い状態と判定されない場合、つまり、ユーザの状態が注目度の高い状態ではない、と判定された場合、情報処理装置４００Ａは、後述するステップＳ１００７へ進む。

【0120】

ステップＳ１００２において、ユーザの状態を注目度の高い状態と判定された場合、情報処理装置４００Ａは、オブジェクト選択部４１７により、注目の対象とされるオブジェクトを選択する（ステップＳ１００３）。

【0121】

続いて、情報処理装置４００Ａは、ログ収集部４１５Ａにより、選択されたオブジェクトと対応付けて、ログ情報の収集を開始し（ステップＳ１００４）、ステップＳ１００５へ進む。

【0122】

図１０のステップＳ１００５からステップＳ１００８までの処理は、図６のステップＳ６０４からステップＳ６０７のまでの処理と同様であるから、説明を省略する。

【0123】

ステップＳ１００８に続いて、情報処理装置４００Ａは、ログ分析部４１８により、ログ情報の分析を行い（ステップＳ１００９）、分析結果を出力して（ステップＳ１０１０）、処理を終了する。

【0124】

尚、ここで出力される分析結果を示す分析結果情報は、ログ情報と同様に、選択されたオブジェクトに対応付けられて、ログ情報データベース５１０に格納されても良い。また、分析結果情報は、ログ情報の一部として、ログ情報データベース５１０に蓄積されても良い。

【0125】

以下に、図１１を参照して、ログ収集部４１５Ａにより収集されるログ情報について説明する。図１１は、第二の実施形態のログ情報の一例を示す図である。

【0126】

本実施形態のログ情報１１１には、時間帯Ｔ１２に取得されたログ情報１１１Ａと、時間帯Ｔ２３に取得されたログ情報１１１Ｂと、時間帯Ｔ５６に取得されたログ情報１１１Ｃとを含む。

【0127】

ログ情報１１１Ａは、ユーザ識別情報と、ログ情報を収集した時間帯を含む情報１１２と、ログ収集部４１５Ａが収集した情報１１３と、注目の対象として選択されたオブジェクトを特定する情報１１４とを含む。

【0128】

ログ情報１１１Ａでは、注目の対象として選択されたオブジェクトは、オブジェクトＡである。したがって、情報１１４は、「オブジェクトＡ」という名称である。

【0129】

ログ情報１１１Ｂも、ログ情報１１１Ａと同様に、時間帯Ｔ２３において注目の対象として選択されたオブジェクトの名称である「オブジェクトＢ」が含まれる。ログ情報１１１Ｃも、ロ同様に、時間帯Ｔ５６において注目の対象として選択されたオブジェクトの名称である「オブジェクトＣ」が含まれる。

【0130】

次に、図１２を参照して、本実施形態のログ分析部４１８によるログ情報の分析結果について説明する。図１２は、第二の実施形態におけるログ情報の分析結果の一例を示す図である。

【0131】

図１２の例では、ログ分析部４１８により、オブジェクト毎に取得されたログ情報を分析した結果として、各オブジェクトに対するユーザ毎の好感度を出力した場合を示している。尚、ログ分析部４１８による分析の結果は、例えば、情報処理装置４００Ａのディスプレイ等に表示されても良いし、情報処理装置４００Ａから外部の装置へ出力されても良い。

【0132】

図１２に示す分析結果を示す分析結果情報１２１は、オブジェクトＡ、オブジェクトＢ、オブジェクトＣのそれぞれについての分析結果を示す分析結果情報１２１Ａ、１２１Ｂ、１２１Ｃを含む。

【0133】

分析結果情報１２１Ａは、オブジェクトＡを特定する情報と、仮想空間が提示されたユーザを特定する情報と、ユーザ毎のオブジェクトＡに対する印象を示す情報とが対応付けられている。図１２の例では、オブジェクトＡを特定する情報は、オブジェクトＡの名称であり、ユーザを特定する情報は、ユーザ名とした。

【0134】

分析結果情報１２１Ａでは、オブジェクトＡに対し、ユーザ名が「Ａ」のユーザと、ユーザ名が「Ｂ」のユーザが良い印象を持ち、ユーザ名が「Ｃ」のユーザが悪い印象を持ったことがわかる。

【0135】

このように、本実施形態では、ユーザの状態が、注目度が高い状態と判定された場合に、注目の対象とされるオブジェクトを選択し、選択したオブジェクト毎にログ情報を蓄積して分析することで、オブジェクト毎に、ユーザからの評価を得ることができる。

【0136】

尚、図１２の例では、オブジェクト毎に、各ユーザが持った印象を対応付けた情報を分析結果情報としているが、分析結果として出力される情報は、これに限定されない。

【0137】

例えば、情報処理装置４００Ａは、図１２に示す分析結果情報１２１に基づき、オブジェクト毎の好感度を示す数値を求め、その結果を分析結果情報として出力しても良い。

【0138】

さらに、本実施形態では、ログ分析部４１８は、例えば、オブジェクト選択部４１７により選択されたオブジェクト内におけるユーザの視点の軌跡から、選択されたオブジェクト内において、特にユーザに注目された領域を示す情報を分析結果情報として出力されても良い。

【0139】

具体的には、例えば、仮想空間が、商品が陳列された店舗の内部の空間を示すものであり、注目されているオブジェクトとして、ある商品と対応するオブジェクトが選択された場合を考える。

【0140】

この場合、選択されたオブジェクトは、商品のパッケージを示す画像となる。したがって、オブジェクト内において、特にユーザが注目している領域を示す情報とは、パッケージにおいて特に注目されやすいコンテンツを特定する情報となる。この情報は、例えば、パッケージの考案者が意図したコンテンツに、仮想空間内のユーザが着目しているか否かを検討する際等において、有用な情報となる。

【0141】

次に、図１３を参照して、ログ情報をオブジェクト毎に蓄積することによる効果について説明する。

【0142】

図１３は、第二の実施形態におけるログ情報の蓄積による効果を説明する図である。図１３（Ａ）は、本実施形態が適用された場合を説明する図であり、図１３（Ｂ）は、本実施形態が適用されない場合を説明する図である。

【0143】

本実施形態では、図１３（Ａ）では、名称が「椅子」であるオブジェクトＯｂが、仮想空間Ｘと、仮想空間Ｙのそれぞれに配置された場合を示している。

【0144】

仮想空間Ｘでは、オブジェクトＯｂと対応付けられたログ情報１３１と、ログ情報１３１の分析結果情報として、ログ情報１３１の評価を示す情報１３２が取得されている。

【0145】

このことから、仮想空間Ｘにおいて、オブジェクトＯｂは、注目されているオブジェクトとして選択されたことがわかる。また、評価結果を示す情報１３２では、から、仮想空間ＸにおけるオブジェクトＯｂは、ユーザに対する印象が良いことがわかる。

【0146】

つまり、仮想空間Ｘでは、オブジェクトＯｂは、ユーザからの注目度が高く、且つ、ユーザに良い印象を与えるオブジェクトであったことがわかる。

【0147】

これに対し、仮想空間Ｙでは、オブジェクトＯｂと対応付けられたログ情報は取得されていない。したがって、仮想空間Ｙでは、オブジェクトＯｂは、注目されているオブジェクトとして選択されておらず、ユーザからの注目度が低いことがわかる。

【0148】

このとき、オブジェクトＯｂは、仮想空間Ｘにおいては、注目度が高く、好印象を与えることがわかっているため、オブジェクトＯｂが仮想空間Ｙにおいて注目度が低い理由は、オブジェクトＯｂと仮想空間Ｙとの相性の問題であることがわかる。

【0149】

これに対し、本実施形態を適用しない図１３（Ｂ）の例では、オブジェクトＯｂは、仮想空間Ｘと仮想空間Ｙのそれぞれにおいて、座標情報として管理される。

【0150】

したがって、例えば、仮想空間Ｘにおいてログ情報を取得した場合、このログ情報から、仮想空間Ｘにおける座標（ａ，ｂ，ｃ）に配置されたオブジェクトＯｂの注目度が高いことがわかる。また、仮想空間Ｙにおいてログ情報を取得した場合、このログ情報からは、仮想空間Ｙにおける座標（ａ′，ｂ′，ｃ′）のオブジェクトＯｂは注目度が低いことがわかる。

【0151】

しかし、図１３（Ｂ）では、オブジェクトＯｂは、仮想空間Ｘでは、座標（ａ，ｂ，ｃ）に配置されたオブジェクトと認識されており、仮想空間Ｙでは、座標（ａ′，ｂ′，ｃ′）に配置されたオブジェクトと認識される。したがって、図１３（Ｂ）では仮想空間Ｘと仮想空間Ｙにおいて、同一のオブジェクトが配置されているか否かを判断することができない。このための図１３（Ｂ）では、単に、仮想空間Ｙでは座標（ａ′，ｂ′，ｃ′）のオブジェクトの注目度が低い、ということしかわからず、注目度が低くなる原因を推測することが困難となる。

【0152】

このように、本実施形態では、オブジェクト毎にログ情報と、ログ情報の分析結果情報とを対応付けて蓄積する。このため、例えば、オブジェクトが複数の異なる仮想空間に配置し、仮想空間とオブジェクトの注目度との関係性の検討等を行うことができる。

【0153】

更に、本実施形態によれば、例えば、オブジェクトが車両等の移動体であって、座標と対応付けることができない場合でも、オブジェクト毎にログ情報と、ログ情報の分析結果情報とを対応付けて蓄積することができる。

【0154】

また、図１０の例では、ログ収集処理部４１０Ａは、ログ情報を収集した後に、ログ情報の分析を行い、ログ情報と分析結果情報とをログ情報データベース５１０へ格納するものとしたが、これに限定されない。

【0155】

本実施形態では、ログ情報に対する分析結果情報のみをログ情報データベース５１０に格納しても良い。

【0156】

図１４は、第二の実施形態の情報処理装置の動作を説明する第二のフローチャートである。

【0157】

図１４のステップＳ１４０１からステップＳ１４０７までの処理は、図１０のステップＳ１００１からステップＳ１００７までの処理と同様であるから、説明を省略する。

【0158】

ステップＳ１４０７において、仮想空間の提示を終了する場合、情報処理装置４００Ａは、ログ収集部４１５により収集したログ情報を、ログ分析部４１８により分析する（ステップＳ１４０８）。

【0159】

続いて、情報処理装置４００Ａは、ログ蓄積部４１６により、ログ分析部４１８による分析結果を示す分析結果情報をログ蓄積装置５００へアップロードして蓄積し（ステップＳ１４０９）処理を終了する。

【0160】

このように、ログ情報の分析結果情報のみをログ蓄積装置５００に蓄積するようにすれば、ログ情報を蓄積する場合と比較して、ログ蓄積装置５００に要求されるメモリ容量を小さくすることができる。

【0161】

（第三の実施形態）
以下に図面を参照して第三の実施形態について説明する。第三の実施形態では、ユーザの状態が、注目度が高い状態であるか否かを判定するための条件が、オブジェクト毎に設定されている点が、第二の実施形態と相違する。よって、以下の第三の実施形態の説明では、第二の実施形態と同様の機能構成を有するものには、第二の実施形態の説明で用いた符号と同様の符号を付与し、その説明を省略する。

【0162】

図１５は、第三の実施形態の情報処理装置の機能を説明する図である。本実施形態の情報処理装置４００Ｂは、ログ収集処理部４１０Ｂを有する。

【0163】

ログ収集処理部４１０Ｂは、画像処理部４１１、状態監視部４１２、条件保持部４１３Ａ、状態判定部４１４Ａ、ログ収集部４１５、ログ蓄積部４１６、オブジェクト選択部４１７Ａ、ログ分析部４１８を有する。

【0164】

本実施形態の条件保持部４１３Ａは、条件情報４２０Ａを保持している。条件情報４２０Ａでは、ユーザの状態が、特定のオブジェクトに注目している状態か否かを判定するための条件が、オブジェクト毎に設定されている。条件情報４２０Ａの詳細は後述する。

【0165】

本実施形態のオブジェクト選択部４１７Ａは、選択条件情報４３０を保持している。選択条件情報４３０では、オブジェクトの選択方法がオブジェクト毎に設定されている。選択条件情報４３０の詳細は後述する。

【0166】

本実施形態の状態判定部４１４Ａは、状態監視部４１２により監視される監視対象情報が、条件情報４３０Ａの何れかを満たすか否かを判定する。

【0167】

オブジェクト選択部４１７Ａは、状態判定部４１４Ａにより、監視対象情報が満たしている条件と対応するオブジェクトと対応する選択方法で、注目されているオブジェクトを選択する。

【0168】

以下に、図１６を参照して、本実施形態の条件情報４２０Ａと選択条件情報４３０について説明する。図１６は、第三の実施形態の条件情報と選択条件情報の一例を示す図である。図１６（Ａ）では、条件情報４２０Ａの一例を示し、図１６（Ｂ）では、選択条件情報４３０の一例を示す。

【0169】

本実施形態の条件情報４２０Ａは、オブジェクトの種類と、項目と、条件とが対応付けられている。

【0170】

オブジェクトの種類とは、仮想空間に配置されたオブジェクトの種類を示す。図１６の例では、オブジェクトの種類として、例えば、音を発する音源、建物や空間や、物体、匂いを発生させる源を含む。

【0171】

項目とは、監視対象情報に含まれる情報の項目であり、条件は、オブジェクトの種類毎に設定された条件を示す。

【0172】

図１６（Ａ）では、例えば、オブジェクトの種類が「音源」であった場合、監視対象情報に含まれるユーザの位置が、音源の位置から所定の範囲内の位置とであり、且つ、他のオブジェクトの種類と対応する条件を満たしていない場合に、このユーザは、「音源」であるオブジェクトに注目している状態と判定される。

【0173】

また、図１６（Ａ）では、例えば、オブジェクトの種類が、「建物、空間」であった場合、ユーザの視点の位置がオブジェクト内の一定時間以上滞留するか又は移動しており、ユーザの位置が、オブジェクトから所定の範囲内の位置である場合に、このユーザは、「建物、空間」であるオブジェクトに注目している状態と判定される。

【0174】

具体的には、例えば、ユーザの視点がある建物のオブジェクト上で移動しており、且つ、ユーザがこのオブジェクトに近づいたことによって、ユーザの位置がオブジェクトから所定の範囲内となった場合、このユーザの状態は、建物のオブジェクトに注目している状態と判定される。

【0175】

このように、本実施形態では、オブジェクト毎に、ユーザの状態が、注目度が高い状態であるか否かを判定するための条件が設定されている。

【0176】

本実施形態の選択条件情報４３０は、オブジェクトの種類と、項目と、選択方法とが対応付けられている。

【0177】

図１６（Ｂ）では、例えば、オブジェクトの種類が「音源」であった場合、監視対象情報に含まれるユーザの位置から、音が聞こえる所定の範囲内にあるオブジェクトが選択される。尚、この場合も音源から発せられる音の音量に応じて所定の範囲が設定されていても良い。

【0178】

また、図１６（Ｂ）では、例えば、オブジェクトの種類が、「建物、空間」であった場合、ユーザの位置から所定の範囲内の位置にあるオブジェクトが選択される。

【0179】

したがって、例えば、本実施形態において、状態判定部４１４Ａにより、条件情報４２０Ａを参照して、ユーザがオブジェクト「音源」に注目している状態である、と判定されたとする。この場合、オブジェクト選択部４１７は、選択条件情報４３０を参照して、ユーザの位置から所定の範囲内の音源を、注目されているオブジェクトに選択する。

【0180】

尚、条件情報４２０Ａと選択条件情報４３０は、予め、仮想空間毎に設定されていても良い。選択条件情報４３０は、仮想空間を示す画像の画像データが情報処理装置４００Ｂに入力されたときに、共に情報処理装置４００Ｂに入力されても良い。

【0181】

尚、図１６の例では、オブジェクトの種類に対して、監視対象情報の項目と条件とが対応付けられるものとしたが、これに限定されない。選択条件情報４３０は、例えば、個々のオブジェクトに対して、監視対象情報の項目と条件とが対応付けられていても良い。

【0182】

以下に、図１７を参照して、第三の実施形態の情報処理装置４００Ｂの動作を説明する。図１７は、第三の実施形態の情報処理装置の動作を説明するフローチャートである。

【0183】

本実施形態の情報処理装置４００Ｂは、仮想空間の提示指示を受け付けると、画像処理部４１１により、表示装置２００に対して仮想空間を示す画像の画像データを出力し、表示装置２００を到着しているユーザに対して仮想空間の提示を開始する（ステップＳ１７０１）。

【0184】

続いて、情報処理装置４００Ｂは、監視対象情報に基づき、状態判定部４１４Ａにより、ユーザの状態が、条件保持部４１３Ａの条件情報４２０Ａに含まれる何れかの条件を満たすか否かを判定する（ステップＳ１７０２）。

【0185】

ステップＳ１７０２において、監視対象情報が示すユーザの状態が、条件情報４２０Ａに含まれる何れも満たさない場合、情報処理装置４００Ｂは、後述するステップＳ１７０７へ進む。

【0186】

ステップＳ１７０２において、監視対象情報が示すユーザの状態が、条件情報４２０Ａに含まれる何れかの条件を満たす場合、情報処理装置４００Ｂは、オブジェクト選択部４１７Ａにより、監視対象情報が満たしている条件と対応するオブジェクトの選択方法に基づき、注目されているオブジェクトを選択する（ステップＳ１７０３）。

【0187】

続いて、情報処理装置４００Ｂは、ログ収集部４１５により、選択されたオブジェクトと対応付けられるログ情報の収集を開始する（ステップＳ１７０４）。

【0188】

続いて、情報処理装置４００Ｂは、監視対象情報に基づき、ユーザの状態が、一度満たした条件を満たさなくなったか否かを判定する（ステップＳ１７０５）。言い換えれば、情報処理装置４００Ｂは、ユーザの状態が、選択されたオブジェクトに対する注目度が低くなったか否かを判定している。

【0189】

ステップＳ１７０５において、ユーザの状態が依然として条件を満たしている場合、情報処理装置４００Ｂは、後述するステップＳ１７０７へ進む。

【0190】

ステップＳ１７０５において、ユーザの状態が、一度満たした条件を満たさなくなった場合、情報処理装置４００Ｂは、ログ収集部４１５によるログ情報の収集を停止させ（ステップＳ１７０６）、後述するステップＳ１７０７へ進む。

【0191】

ステップＳ１７０７からステップＳ１７１０までの処理は、図１０のステップＳ１００７からステップＳ１０１０までの処理と同様であるから、説明を省略する。

【0192】

このように、本実施形態では、オブジェクトの種類毎に、オブジェクトに対するユーザの注目度を判定する条件を設定する。したがって、本実施形態によれば、ユーザが注目しているオブジェクトに関するログ情報を取得して蓄積することができる。

【0193】

開示の技術では、以下に記載する付記のような形態が考えられる。
（付記１）
仮想空間におけるユーザの状態を示す情報と、ユーザが特定の状態であることを示す条件情報と、に基づき、前記ユーザの状態が前記特定の状態であるか否かを判定する処理と、
前記ユーザの状態が前記特定の状態であると判定された場合に、ログ情報の収集を開始する処理と、をコンピュータに実行させるログ収集プログラム。
（付記２）
仮想空間におけるユーザの状態を示す情報に応じて、前記仮想空間内に配置されたオブジェクトを選択する処理と、
ログ情報を、選択された前記オブジェクトと対応付けて蓄積する処理と、をコンピュータに実行させる、ログ収集プログラム。
（付記３）
仮想空間におけるユーザの状態を示す情報と、ユーザが特定の状態であることを示す条件情報と、に基づき、前記ユーザの状態が前記特定の状態であるか否かを判定する処理と、
前記ユーザの状態が前記特定の状態であると判定された場合に、
前記仮想空間における前記ユーザの位置に応じて、前記仮想空間内に配置されたオブジェクトを選択する処理と、
ログ情報の収集を開始し、前記ログ情報を選択された前記オブジェクトと対応付けて蓄積する処理と、をコンピュータに実行させる、ログ収集プログラム。
（付記４）
前記オブジェクト毎に蓄積された前記ログ情報を分析し、分析結果を示す情報を出力する処理を、前記コンピュータに実行させる、付記２又は３記載のログ収集プログラム。
（付記５）
前記分析結果を示す情報を、選択された前記オブジェクト毎に蓄積する処理を、前記コンピュータに実行させる、付記４記載のログ収集プログラム。
（付記６）
前記コンピュータは、
前記オブジェクトを選択する処理において、
前記仮想空間における前記ユーザの視線方向において、前記ユーザの位置から所定の範囲内に配置されたオブジェクトを選択する、付記２乃至５の何れか一項に記載のログ収集プログラム。
（付記７）
前記コンピュータは、
前記オブジェクトを選択する処理において、
前記仮想空間における前記ユーザの視線上に配置されたオブジェクトを選択する、付記２乃至５の何れか一項に記載のログ収集プログラム。
（付記８）
前記判定する処理は、
前記ユーザの状態が、前記仮想空間に配置されたオブジェクトに対する注目の度合いが高まった状態であるか否かを判定する、付記１又は３記載のログ収集プログラム。
（付記９）
前記条件情報が前記仮想空間に配置されたオブジェクト毎に設定されており、
前記判定する処理は、
前記ユーザの状態を示す情報が、前記条件情報が示す条件を満たしているオブジェクトを選択する、付記３記載のログ収集プログラム。
（付記１０）
前記オブジェクトの選択方法が、オブジェクト毎に設定されており、
前記オブジェクトを選択する処理は、
前記条件情報において、前記ユーザの状態を示す情報が満たしている条件と対応するオブジェクトに対して設定された選択方法で、前記オブジェクトを選択する、付記８記載のログ収集プログラム。
（付記１１）
前記ログ情報は、
前記ユーザの状態を示す情報を含む、付記１乃至１０の何れか一項に記載のログ収集プログラム。
（付記１２）
前記ユーザの状態を示す情報は、
前記仮想空間を表示させる表示装置に設けられたカメラ及びマイクと、前記ユーザの生体情報を検出するセンサとから取得される、付記１乃至１１の何れか一項に記載のログ収集プログラム。
（付記１３）
コンピュータによるログ収集方法であって、前記コンピュータが、
仮想空間におけるユーザの状態を示す情報と、ユーザが特定の状態であることを示す条件情報と、に基づき、前記ユーザの状態が前記特定の状態であるか否かを判定し、
前記ユーザの状態が前記特定の状態であると判定された場合に、ログ情報の収集を開始する、ログ収集方法。
（付記１４）
コンピュータによるログ収集方法であって、前記コンピュータが、
仮想空間におけるユーザの状態を示す情報に応じて、前記仮想空間内に配置されたオブジェクトを選択し、
ログ情報を、選択された前記オブジェクトと対応付けて蓄積する、ログ収集方法。
（付記１５）
コンピュータによるログ収集方法であって、前記コンピュータが、
仮想空間におけるユーザの状態を示す情報と、ユーザが特定の状態であることを示す条件情報と、に基づき、前記ユーザの状態が前記特定の状態であるか否かを判定し、
前記ユーザの状態が前記特定の状態であると判定された場合に、
前記仮想空間における前記ユーザの位置に応じて前記仮想空間内に配置されたオブジェクトを選択し、
ログ情報の収集を開始し、前記ログ情報を選択された前記オブジェクトと対応付けて蓄積する、ログ収集方法。
（付記１６）
仮想空間におけるユーザの状態を示す情報と、ユーザが特定の状態であることを示す条件情報と、に基づき、前記ユーザの状態が前記特定の状態であるか否かを判定する状態判定部と、
前記ユーザの状態が前記特定の状態であると判定された場合に、ログ情報の収集を開始するログ収集部と、を有する情報処理装置。
（付記１７）
仮想空間におけるユーザの状態を示す情報に応じて、前記仮想空間内に配置されたオブジェクトを選択するオブジェクト選択部と、
ログ情報を、選択された前記オブジェクトと対応付けて蓄積するログ蓄積部と、を有する情報処理装置。
（付記１８）
仮想空間におけるユーザの状態を示す情報と、ユーザが特定の状態であることを示す条件情報と、に基づき、前記ユーザの状態が前記特定の状態であるか否かを判定する状態判定部と、
前記ユーザの状態が前記特定の状態であると判定された場合に、
前記仮想空間における前記ユーザの位置に応じて、前記仮想空間内に配置されたオブジェクトを選択するオブジェクト選択部と、
ログ情報の収集を開始し、前記ログ情報を選択された前記オブジェクトと対応付けて蓄積するログ蓄積部と、を有する情報処理装置。

【0194】

本発明は、具体的に開示された実施形態に限定されるものではなく、特許請求の範囲から逸脱することなく、種々の変形や変更が可能である。

【符号の説明】

【0195】

１００ 仮想空間提示システム
２００ 表示装置
３００ センサ群
４００、４００Ａ、４００Ｂ 情報処理装置
４１０、４１０Ａ、４１０Ｂ ログ収集処理部
４１１ 画像処理部
４１２ 状態監視部
４１３ 条件保持部
４１４ 状態判定部
４１５ ログ収集部
４１６ ログ蓄積部
４１７ オブジェクト選択部
４１８ ログ分析部
４２０ 条件情報
４３０ 選択条件情報
５００ ログ蓄積装置

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】

【図15】

【図16】

【図17】