知財求人 - 知財ポータルサイト「IP Force」
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】公開特許公報(A)
(11)【公開番号】P2024123613
(43)【公開日】2024-09-12
(54)【発明の名称】情報処理装置、情報処理システム、およびプログラム
(51)【国際特許分類】
G06F 3/01 20060101AFI20240905BHJP
A63B 69/00 20060101ALI20240905BHJP
【ＦＩ】
G06F3/01 510
A63B69/00 A
A63B69/00 C
【審査請求】未請求
【請求項の数】18
【出願形態】ＯＬ
(21)【出願番号】P 2023031182
(22)【出願日】2023-03-01
(71)【出願人】
【識別番号】000006747
【氏名又は名称】株式会社リコー
(74)【代理人】
【識別番号】100107766
【弁理士】
【氏名又は名称】伊東 忠重
(74)【代理人】
【識別番号】100070150
【弁理士】
【氏名又は名称】伊東 忠彦
(74)【代理人】
【識別番号】100107515
【弁理士】
【氏名又は名称】廣田 浩一
(72)【発明者】
【氏名】川瀬 勉
(72)【発明者】
【氏名】池田 淳
(72)【発明者】
【氏名】渡辺 隼人
(72)【発明者】
【氏名】鈴木 恭介
【テーマコード（参考）】
5E555
【Ｆターム（参考）】
5E555AA11
5E555AA76
5E555BA02
5E555BA87
5E555BB02
5E555BC04
5E555BE17
5E555CA41
5E555CA42
5E555CB65
5E555DA21
5E555DA26
5E555DA27
5E555DA30
5E555DB57
5E555DC84
5E555FA00
(57)【要約】
【課題】リアリティに優れた外出体験を利用者にさせることができる技術を提供すること。
【解決手段】本発明の一態様に係る情報処理装置は、表示装置に表示される動画を視認する利用者の歩行状態を検出する歩行センサからの前記歩行状態に関する情報に基づいて、前記動画の再生を制御する再生制御部と、前記歩行状態に応じた前記動画の再生時間に基づいて、外部装置による前記利用者の感覚に作用する動作を制御する動作制御部と、を有する。
【選択図】図１
【解決手段】本発明の一態様に係る情報処理装置は、表示装置に表示される動画を視認する利用者の歩行状態を検出する歩行センサからの前記歩行状態に関する情報に基づいて、前記動画の再生を制御する再生制御部と、前記歩行状態に応じた前記動画の再生時間に基づいて、外部装置による前記利用者の感覚に作用する動作を制御する動作制御部と、を有する。
【選択図】図１
【特許請求の範囲】
【請求項1】
表示装置に表示される動画を視認する利用者の歩行状態を検出する歩行センサからの前記歩行状態に関する情報に基づいて、前記動画の再生を制御する再生制御部と、
前記歩行状態に応じた前記動画の再生時間に基づいて、外部装置による前記利用者の感覚に作用する動作を制御する動作制御部と、を有する、情報処理装置。
前記歩行状態に応じた前記動画の再生時間に基づいて、外部装置による前記利用者の感覚に作用する動作を制御する動作制御部と、を有する、情報処理装置。
【請求項2】
前記再生制御部は、前記利用者の視線方向に関する情報にさらに基づいて、前記動画を再生する、請求項１に記載の情報処理装置。
【請求項3】
前記利用者の感覚に作用する動作は、前記利用者の周囲における照度、風、匂い、水滴、煙および気温の少なくとも１つに関する動作を含む、請求項１または請求項２に記載の情報処理装置。
【請求項4】
表示装置に表示される動画を視認する利用者の歩行状態を検出する歩行センサと、
前記動画の識別情報と、前記利用者の歩行状態に応じた前記動画の再生時間情報と、を送信する情報処理装置と、
前記再生時間情報に含まれる前記歩行状態に関する情報に基づいて、前記動画の識別情報に対応する前記動画の再生を制御する再生制御装置と、
前記再生時間情報に基づいて、外部装置による前記利用者の感覚に作用する動作を制御する動作制御装置と、を有する情報処理システム。
前記動画の識別情報と、前記利用者の歩行状態に応じた前記動画の再生時間情報と、を送信する情報処理装置と、
前記再生時間情報に含まれる前記歩行状態に関する情報に基づいて、前記動画の識別情報に対応する前記動画の再生を制御する再生制御装置と、
前記再生時間情報に基づいて、外部装置による前記利用者の感覚に作用する動作を制御する動作制御装置と、を有する情報処理システム。
【請求項5】
前記動作制御装置は、前記利用者の視線方向に関する情報にさらに基づいて、前記外部装置による前記利用者の感覚に作用する動作を制御する、請求項４に記載の情報処理システム。
【請求項6】
前記再生制御装置は、前記情報処理装置からの前記動画の識別情報に基づき、それぞれが前記識別情報に対応付けられた複数の動画を記憶する第１記憶部を参照して取得される前記動画を前記表示装置に表示させる、請求項４に記載の情報処理システム。
【請求項7】
前記動作制御装置は、前記情報処理装置からの前記再生時間情報に基づき、前記再生時間情報に対応付けられた前記外部装置の動作に関する情報を記憶する第２記憶部を参照して取得される前記動作に関する情報に応じて、前記外部装置による前記利用者の感覚に作用する動作を制御する、請求項４に記載の情報処理システム。
【請求項8】
前記動画の識別情報と前記再生時間情報とに基づいてウェブ情報を表示するとともに、前記ウェブ情報に関連する処理を実行するように外部端末の動作を制御する端末制御装置をさらに有する、請求項４に記載の情報処理システム。
【請求項9】
前記端末制御装置は、前記利用者の視線方向に関する情報にさらに基づいて、前記ウェブ情報を表示するとともに、前記ウェブ情報に関連する処理を実行するように前記外部端末の動作を制御する、請求項８に記載の情報処理システム。
【請求項10】
前記情報処理装置は、前記利用者に関する情報をさらに送信し、
前記動作制御装置は、前記利用者に関する情報にさらに基づいて、前記外部装置による前記利用者の感覚に作用する動作を制御する、請求項４に記載の情報処理システム。
前記動作制御装置は、前記利用者に関する情報にさらに基づいて、前記外部装置による前記利用者の感覚に作用する動作を制御する、請求項４に記載の情報処理システム。
【請求項11】
前記再生制御装置は、前記動画の識別情報と前記再生時間情報とを示す識別コードを前記表示装置に表示させ、
前記表示装置に表示された前記識別コードに基づいて前記動画に関連するウェブ情報を表示するとともに、前記ウェブ情報に関連する処理を実行するように外部端末の動作を制御する端末制御装置をさらに有する、請求項４に記載の情報処理システム。
前記表示装置に表示された前記識別コードに基づいて前記動画に関連するウェブ情報を表示するとともに、前記ウェブ情報に関連する処理を実行するように外部端末の動作を制御する端末制御装置をさらに有する、請求項４に記載の情報処理システム。
【請求項12】
前記再生制御装置は、前記動画の識別情報と前記再生時間情報と前記利用者の視線方向に関する情報を示す識別コードを前記表示装置に表示させる、請求項４に記載の情報処理システム。
【請求項13】
前記再生制御装置は、前記動画の識別情報と前記再生時間情報とを示す音声を前記表示装置により発生させ、
前記動作制御装置は、前記音声を介して取得される前記再生時間情報に基づき、前記外部装置による前記利用者の感覚に作用する動作を制御する、請求項４に記載の情報処理システム。
前記動作制御装置は、前記音声を介して取得される前記再生時間情報に基づき、前記外部装置による前記利用者の感覚に作用する動作を制御する、請求項４に記載の情報処理システム。
【請求項14】
前記再生制御装置は、前記動画の識別情報と前記再生時間情報と前記利用者の視線方向に関する情報を示す音声を前記表示装置により発生させる、請求項４に記載の情報処理システム。
【請求項15】
前記表示装置は頭部装着型の表示装置であって、
前記再生制御装置は、前記頭部装着型の表示装置に表示される動画の再生を制御する、請求項４に記載の情報処理システム。
前記再生制御装置は、前記頭部装着型の表示装置に表示される動画の再生を制御する、請求項４に記載の情報処理システム。
【請求項16】
歩行センサにより、表示装置に表示される動画を視認する利用者の歩行状態を検出し、
情報処理装置により、前記動画の識別情報と、前記利用者の歩行状態に応じた前記動画の再生時間情報と、を送信し、
再生制御装置により、前記歩行状態に関する情報に基づいて、前記動画の識別情報に対応する前記動画の再生を制御し、
動作制御装置により、前記再生時間情報に基づいて、外部装置による前記利用者の感覚に作用する動作を制御する
処理を、情報処理システムに実行させるプログラム。
情報処理装置により、前記動画の識別情報と、前記利用者の歩行状態に応じた前記動画の再生時間情報と、を送信し、
再生制御装置により、前記歩行状態に関する情報に基づいて、前記動画の識別情報に対応する前記動画の再生を制御し、
動作制御装置により、前記再生時間情報に基づいて、外部装置による前記利用者の感覚に作用する動作を制御する
処理を、情報処理システムに実行させるプログラム。
【請求項17】
前記情報処理装置は、さらに前記利用者の視線方向に関する情報を送信し、
前記動作制御装置は、前記利用者の視線方向に関する情報をさらに基づいて、前記外部装置による前記利用者の感覚に作用する動作を制御する、請求項１６に記載のプログラム。
前記動作制御装置は、前記利用者の視線方向に関する情報をさらに基づいて、前記外部装置による前記利用者の感覚に作用する動作を制御する、請求項１６に記載のプログラム。
【請求項18】
表示装置に表示される動画を視認する利用者の歩行状態を検出する歩行センサと、
前記動画の識別情報と、前記利用者の歩行状態に応じた前記動画の再生時間情報を送信する情報処理装置と、
前記再生時間情報に含まれる前記歩行状態に関する情報に基づいて、前記動画の識別情報に対応する前記動画の再生を制御する再生制御装置と、
前記動画の識別情報と前記再生時間情報とに基づいてウェブ情報を表示するとともに、前記ウェブ情報に関連する処理を実行するように外部端末の動作を制御する端末制御装置と、を有する情報処理システム。
前記動画の識別情報と、前記利用者の歩行状態に応じた前記動画の再生時間情報を送信する情報処理装置と、
前記再生時間情報に含まれる前記歩行状態に関する情報に基づいて、前記動画の識別情報に対応する前記動画の再生を制御する再生制御装置と、
前記動画の識別情報と前記再生時間情報とに基づいてウェブ情報を表示するとともに、前記ウェブ情報に関連する処理を実行するように外部端末の動作を制御する端末制御装置と、を有する情報処理システム。
【発明の詳細な説明】
【技術分野】
【0001】
本発明は、情報処理装置、情報処理システム、およびプログラムに関する。
【背景技術】
【0002】
例えば特許文献１には、利用者の歩行状態に応じて表示装置に表示させる再生画像を変更することにより、利用者に様々な外出体験をさせる技術が開示されている。
【発明の概要】
【発明が解決しようとする課題】
【0003】
しかしながら、特許文献１に記載の技術では、主に再生画像に基づき利用者に外出体験をさせるため、リアリティの観点で改善の余地がある。
【0004】
本発明は、リアリティに優れた外出体験を利用者にさせることができる技術を提供することを目的とする。
【課題を解決するための手段】
【0005】
本発明の一態様に係る情報処理装置は、表示装置に表示される動画を視認する利用者の歩行状態を検出する歩行センサからの前記歩行状態に関する情報に基づいて、前記動画の再生を制御する再生制御部と、前記歩行状態に応じた前記動画の再生時間に基づいて、外部装置による前記利用者の感覚に作用する動作を制御する動作制御部と、を有する。
【発明の効果】
【0006】
本発明によれば、リアリティに優れた外出体験を利用者にさせることができる技術を提供できる。
【図面の簡単な説明】
【0007】
【図1】第１実施形態に係る情報処理装置の利用例を示す図である。
【図2】第１実施形態に係る情報処理装置の構成例を示すブロック図である。
【図3】第１実施形態に係る情報処理装置の機能構成例のブロック図である。
【図4】第１実施形態に係る情報処理装置による処理例を示すフロー図である。
【図5】動画の識別情報と動画の対応テーブルの一例を示す図である。
【図6】動画と再生時間との関係を説明する図である。
【図7】再生時間に応じた送風装置の制御の様子の一例を示す図である。
【図8】再生時間に応じた照明装置の制御の様子の一例を示す図である。
【図9】動画と再生時間情報と動作情報との関係の一例を説明する図である。
【図10】第２実施形態に係る情報処理システムの構成例を示す図である。
【図11】第２実施形態に係る情報処理システムの構成例のブロック図である。
【図12】第２実施形態に係る再生制御装置の構成例を示すブロック図である。
【図13】第２実施形態に係る情報処理装置の機能構成例のブロック図である。
【図14】第２実施形態に係る再生制御装置の機能構成例のブロック図である。
【図15】第２実施形態に係る動作制御装置の機能構成例のブロック図である。
【図16】第２実施形態に係る端末制御装置の機能構成例のブロック図である。
【図17】第２実施形態に係る情報処理システムの動作の第１例を示すシーケンス図である。
【図18】スーパーマーケット内の動画における動線の一例を示す図である。
【図21】観光地の動画とウェブ情報の第１例を示す図である。
【図22】観光地の動画とウェブ情報の第２例を示す図である。
【図23】観光地の動画とウェブ情報の第３例を示す図である。
【図24】第２記憶部に記憶させる情報の一例を示す図である。
【図25】表示装置に識別コードを表示させるボタンの一例を示す図である。
【図26】表示装置に表示された識別コードの一例を示す図である。
【図27】第２実施形態に係る情報処理システムの動作の第２例を示すシーケンス図である。
【図28】音声の利用例を説明する図である。
【図29】第１変形例に係る情報処理システムを示す図である。
【図30】第２変形例に係る情報処理システムを示す図である。
【図31】第３変形例に係る情報処理システムを示す図である。
【図32】その他の変形例について説明する第１図である。
【図33】その他の変形例について説明する第２図である。
【発明を実施するための形態】
【0008】
以下、図面を参照して発明を実施するための形態について詳細に説明する。各図面において、同一構成部には同一符号を付し、重複した説明を適宜省略する。
【0009】
本明細書では、利用者の運動を支援可能な情報処理装置または情報処理システムを一例として実施形態を説明する。なお、実施形態の用語における動画は、映像と称することもできる。
【0010】
［第１実施形態］
＜情報処理装置１００の利用例＞
図１は、本実施形態に係る情報処理装置１００の利用例を示す図である。図１に示すように、情報処理装置１００は、操作部１５０と、歩行センサ２００と、視線センサ２５０と、表示装置３００と、照明装置３５０と、空調装置４００と、匂い発生装置４５０と、送風装置５００と、に対し、有線または無線により通信可能に接続されている。無線は、赤外線、電波、音波等のいずれを利用するものであってもよい。なお、図１では、利用者Ｕが１人である場合を例示する。但し、利用者Ｕは複数人であってもよい。利用者Ｕが複数人の場合は、利用者Ｕの人数に合わせて複数の歩行センサ２００が設けられる。
＜情報処理装置１００の利用例＞
図１は、本実施形態に係る情報処理装置１００の利用例を示す図である。図１に示すように、情報処理装置１００は、操作部１５０と、歩行センサ２００と、視線センサ２５０と、表示装置３００と、照明装置３５０と、空調装置４００と、匂い発生装置４５０と、送風装置５００と、に対し、有線または無線により通信可能に接続されている。無線は、赤外線、電波、音波等のいずれを利用するものであってもよい。なお、図１では、利用者Ｕが１人である場合を例示する。但し、利用者Ｕは複数人であってもよい。利用者Ｕが複数人の場合は、利用者Ｕの人数に合わせて複数の歩行センサ２００が設けられる。
【0011】
照明装置３５０、空調装置４００、匂い発生装置４５０および送風装置５００のそれぞれは、利用者Ｕの感覚に作用する（働きかける）動作を行う外部装置１０００に対応する。感覚とは外部からの刺激を感じる働きや意識であり、たとえば、人の視覚、聴覚、嗅覚、触覚の内の少なくとも１つの感覚である。図１では、照明装置３５０、空調装置４００、匂い発生装置４５０および送風装置５００のそれぞれが外部装置１０００に対応するという意味において、これら各装置を示す符号に外部装置１０００の符号を括弧書きで併記している。換言すると、外部装置１０００は、利用者Ｕの視覚、聴覚、嗅覚、触覚などの感覚に作用する（働きかける）物理的事象を発生する装置である。
【0012】
本実施形態では、利用者の感覚に作用する動作は、利用者Ｕの周囲における照度、風、匂い、水滴、煙および気温の少なくとも１つに関する動作を含む。図１に示す例では、これらの動作のうち、照度、風、匂いおよび気温に関する動作を制御する。情報処理装置１００は、照明装置３５０により照度を、送風装置５００により風を、匂い発生装置４５０により匂いを、空調装置４００により気温を、それぞれ制御する。なお、情報処理装置１００は、表示装置３００を外部装置１０００とし、利用者Ｕの視覚および聴覚に作用する動作を行うように、表示装置３００の動作を制御してもよい。また、情報処理装置１００は、空調装置４００、匂い発生装置４５０および送風装置５００以外の利用者Ｕの感覚に作用する動作を行う外部装置１０００と通信可能に接続されてもよい。
【0013】
歩行センサ２００は、表示装置３００に表示される動画ＭＶを視認する利用者Ｕの歩行状態を検出する。歩行状態には、歩行速度、歩行による進行方向等が含まれる。歩行センサ２００は、歩行検出パッド２１１～２１４を含むシート状部材２１０と、把持部材２２０と、を有する。利用者Ｕは、部屋の床等に敷いた歩行センサ２００上に自身の身体を乗せ、歩行検出パッド２１１～２１４のいずれかの上に足裏を接触させて足踏みをすることにより、歩行運動を行うことができる。把持部材２２０は、利用者Ｕが歩行運動中に倒れないようにつかまるための部材である。
【0014】
歩行検出パッド２１１～２１４のそれぞれは圧力センサを含む。歩行センサ２００は、歩行検出パッド２１１～２１４により、利用者Ｕの歩行運動に伴う足裏の圧力から利用者Ｕの歩行状態を検出する。歩行センサ２００は、検出した利用者Ｕの歩行状態に関する情報を情報処理装置１００に出力する。
【0015】
視線センサ２５０は、表示装置３００に表示される動画ＭＶを視認する利用者Ｕの視線方向を検出する。例えば視線センサ２５０は、カメラと画像処理回路とを含む。視線センサ２５０は、カメラにより利用者Ｕの顔画像を撮影し、画像処理回路により、顔画像に含まれる目の画像領域における黒目部分の位置を特定することによって、利用者Ｕの視線方向を検出する。もしくは、視線センサ２５０は、利用者Ｕによる操作部１５０のボタン操作によって指示された利用者Ｕの視線方向を検出してもよい。視線センサ２５０は、検出した利用者Ｕの視線方向に関する情報を情報処理装置１００に出力する。
【0016】
操作部１５０は、利用者Ｕ等の操作者が情報処理装置１００を操作するために使用される。例えば利用者Ｕは、操作部１５０を用いて、表示装置３００に表示させる動画ＭＶを、予め準備された複数の動画の中から選択することができる。操作部１５０は、情報処理装置１００に一体に設けられていてもよいし、リモコンとして情報処理装置１００に対して着脱可能であってもよい。
【0017】
表示装置３００は、動画ＭＶを表示する。表示装置３００は、スピーカー等の音声発生部を含み、動画ＭＶに含まれる音声を、音声発生部を通じて発生させることもできる。
【0018】
照明装置３５０は、利用者Ｕが所在する室内を照明する装置である。情報処理装置１００は、照明装置３５０の点灯、消灯、照度等を制御することにより、室内における照明装置３５０による照明照度を制御する。
【0019】
空調装置４００は、利用者Ｕが所在する室内の温度、湿度等を調節する装置である。情報処理装置１００は、空調装置４００の動作を制御することにより、室内の温度、湿度等を制御する。
【0020】
匂い発生装置４５０は、利用者Ｕが所在する室内に所望の匂いを発生させる装置である。匂い発生装置４５０は、それぞれが異なる匂いを発生させる複数の物質を、対をなす複数の容器内に備えている。匂い発生装置４５０は、情報処理装置１００からの指令に応じた匂いに対応する物質の容器を開放することにより、この匂いを発生させることができる。情報処理装置１００は、匂いを選択する指令等を匂い発生装置４５０に送信することにより、室内の匂いを制御する。
【0021】
送風装置５００は、利用者Ｕが所在する室内に送風する装置である。送風装置５００は、例えば扇風機である。情報処理装置１００は、送風装置５００による風量、風速、風向等を制御する。
【0022】
本実施形態では、情報処理装置１００は、歩行センサ２００からの利用者Ｕの歩行状態に関する情報と、視線センサ２５０からの利用者Ｕの視線方向に関する情報と、に基づいて、動画ＭＶの再生を制御する。例えば情報処理装置１００は、利用者Ｕの歩行速度が速いときには動画ＭＶの再生速度を速くしたり、利用者Ｕが後ろ向きに進んだときには動画ＭＶの再生をリワード（逆再生）したりする。また情報処理装置１００は、利用者Ｕの視線方向が右向きのときには、表示装置３００に表示される動画ＭＶにおける映像の視野を全体に左側にシフトさせる等して、利用者Ｕの視線方向に応じて表示装置３００に表示される動画ＭＶの映像の視野を変化させる。自身の歩行に応じて表示装置３００を通して視認される景色が変わることにより、利用者Ｕは、動画ＭＶに表示されている場所を散歩しているような外出体験をすることができる。
【0023】
また本実施形態では、情報処理装置１００は、利用者Ｕの歩行状態に応じた動画ＭＶの再生時間に基づいて、外部装置１０００による利用者の感覚に作用する動作を制御する。ここで、表示装置３００により表示される動画ＭＶは、その再生時間に応じて、表示する内容が変化する。例えば動画ＭＶが山を散策するものである場合、ある再生時間では、動画ＭＶは山の中を表示し、別の再生時間では、動画ＭＶは山の中から抜け出た場所を表示する等して、再生時間に応じて表示する内容が変化する。なお、ここでの再生時間は、動画の再生を開始してからの経過時間を意味する。「再生時間」という用語は、「時刻」という用語に置換されてもよい。
【0024】
例えば、情報処理装置１００は、動画ＭＶが山の中を表示する場合には、照明装置３５０の照度を低くすることで、あたかも暗い山の中を歩いているかのように利用者Ｕに感じさせることができる。また動画ＭＶが崖を表示する場合には、山の中と比較して照明装置３５０の照度を高くし、また送風装置５００により風を発生させることで、あたかも山の中から抜け出て、風が吹き抜ける明るい場所を歩いているかのように利用者Ｕに感じさせることができる。自身の歩行に応じて表示装置３００を通して視認される景色が変わるとともに、景色に応じて人の感覚（たとえば、視覚や触覚）が刺激されることによって、利用者Ｕは、動画ＭＶに表示されている場所を歩いているかのようなリアルな外出体験をすることができる。換言すると、本実施形態では、リアリティに優れた外出体験を利用者Ｕにさせることができる技術を提供できる。また本実施形態では、リアリティに優れた外出体験を利用者Ｕにさせることで、利用者Ｕに歩行運動を行う動機付けを与え、利用者Ｕの運動を促進し、また支援することができる。
【0025】
＜情報処理装置１００の構成例＞
（ハードウェア構成）
図２は、情報処理装置１００の構成の一例を示すブロック図である。図２に示すように、情報処理装置１００は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）１０１と、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）１０２と、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）１０３と、ＨＤＤ（Ｈａｒｄ Ｄｉｓｋ Ｄｒｉｖｅ）／ＳＳＤ（Ｓｏｌｉｄ Ｓｔａｔｅ Ｄｒｉｖｅ）１０４と、Ｉ／Ｆ（Ｉｎｔｅｒｆａｃｅ）１０５と、を有する。これらは、バスラインＢを介して電気的に接続されている。
（ハードウェア構成）
図２は、情報処理装置１００の構成の一例を示すブロック図である。図２に示すように、情報処理装置１００は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）１０１と、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）１０２と、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）１０３と、ＨＤＤ（Ｈａｒｄ Ｄｉｓｋ Ｄｒｉｖｅ）／ＳＳＤ（Ｓｏｌｉｄ Ｓｔａｔｅ Ｄｒｉｖｅ）１０４と、Ｉ／Ｆ（Ｉｎｔｅｒｆａｃｅ）１０５と、を有する。これらは、バスラインＢを介して電気的に接続されている。
【0026】
ＣＰＵ１０１は、ＲＯＭ１０２に記憶されたプログラムを実行することにより、順次、分岐処理、反復処理等を実行する演算装置である。ＲＯＭ１０２は、ＣＰＵ１０１で実行されるプログラム等が記憶された不揮発性メモリである。ＲＡＭ１０３は、ＣＰＵ１０１の動作のワークエリア（作業領域）として機能するメモリである。バスラインＢは、ＣＰＵ１０１等の各構成要素を電気的に接続するためのアドレスバスやデータバス等である。
【0027】
Ｉ／Ｆ１０５は、操作部１５０、歩行センサ２００および視線センサ２５０それぞれの出力信号を入力する。またＩ／Ｆ１０５は、外部装置１０００としての表示装置３００、照明装置３５０、空調装置４００、匂い発生装置４５０および送風装置５００それぞれに制御信号を出力するインターフェースである。
【0028】
（機能構成例）
図３は、情報処理装置１００の機能構成の一例を示すブロック図である。図３に示すように、情報処理装置１００は、記憶部１２０と、選択受付部１１１と、動画取得部１１２と、歩行状態取得部１１３と、視線方向取得部１１４と、を有する。また情報処理装置１００は、再生制御部１１５と、出力部１１６と、再生時間取得部１１７と、動作取得部１１８と、動作制御部１１９と、を有する。
図３は、情報処理装置１００の機能構成の一例を示すブロック図である。図３に示すように、情報処理装置１００は、記憶部１２０と、選択受付部１１１と、動画取得部１１２と、歩行状態取得部１１３と、視線方向取得部１１４と、を有する。また情報処理装置１００は、再生制御部１１５と、出力部１１６と、再生時間取得部１１７と、動作取得部１１８と、動作制御部１１９と、を有する。
【0029】
記憶部１２０の機能は、図２のＨＤＤ／ＳＳＤ１０４等により実現される。動画取得部１１２、歩行状態取得部１１３、視線方向取得部１１４と、再生制御部１１５、再生時間取得部１１７、動作取得部１１８および動作制御部１１９の各機能は、ＣＰＵ１０１がＲＯＭ１０２またはＨＤＤ／ＳＳＤ１０４に記憶されたプログラムに規定される処理を実行すること等により実現される。選択受付部１１１および出力部１１６の各機能は、ＣＰＵ１０１がＩ／Ｆ１０５の動作を制御すること等により実現される。
【0030】
ＣＰＵ１０１により実現される機能は、ＡＳＩＣ（Ａｐｐｌｉｃａｔｉｏｎ Ｓｐｅｃｉｆｉｃ Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ）、ＦＰＧＡ（Ｆｉｅｌｄ Ｐｒｏｇｒａｍｍａｂｌｅ Ｇａｔｅ Ａｒｒａｙ）等の電子回路を用いて実現されてもよい。またＣＰＵ１０１により実現される機能は、ＣＰＵ、ＡＳＩＣまたはＦＰＧＡ等を組み合わせて実現されてもよいし、情報処理装置１００以外の構成との分散処理により実現されてもよい。
【0031】
記憶部１２０は、第１記憶部１２１と、第２記憶部１２２と、を有する。記憶部１２０は、ＵＳＢメモリ、ＳＤカード等を含んでもよい。第１記憶部１２１は、それぞれが識別情報Ｎに対応付けられた複数の動画ＭＶを記憶する。第２記憶部１２２は、再生時間情報ＴＩに対応付けられた外部装置１０００による利用者Ｕの感覚に作用する動作に関する情報である動作情報ＩＶを記憶する。例えば動作情報ＩＶは、照明装置３５０、空調装置４００、匂い発生装置４５０および送風装置５００のうちのどの装置を制御対象とし、制御対象とする装置におけるどの制御項目をどのように制御するかを具体的に示す情報を含む。動作情報ＩＶは、所定の時間ごとに設定された再生時間情報ＴＩに対応付けて予め定められている。なお、記憶部１２０は外部の記憶サーバで実現してもよい。
【0032】
選択受付部１１１は、操作部１５０を用いた操作者による第１入力信号Ｓ１を受け付ける。動画取得部１１２は、第１入力信号Ｓ１に応じて選択受付部１１１から出力される動画ＭＶの識別情報Ｎに基づいて、記憶部１２０の第１記憶部１２１を参照して動画ＭＶを取得する。なお、外部の記憶サーバで記憶部１２０を実現する場合には、動画取得部１１２はネットワーク経由で外部の記憶サーバ上の第１記憶部１２１を参照して動画ＭＶを取得してもよい。
【0033】
歩行状態取得部１１３は、歩行センサ２００からの第２入力信号Ｓ２に基づいて、歩行センサ２００との通信を制御することで、利用者Ｕの歩行状態に関する情報である歩行情報Ｗを取得する。視線方向取得部１１４は、視線センサ２５０からの第３入力信号Ｓ３に基づいて、視線センサ２５０との通信を制御することで、利用者Ｕの視線方向に関する情報である視線情報Ｅを取得する。
【0034】
再生制御部１１５は、歩行状態取得部１１３から入力した歩行情報Ｗと、視線方向取得部１１４から入力した視線情報Ｅと、に基づいて、動画取得部１１２から入力した動画ＭＶの再生を制御する。再生制御部１１５は、出力部１１６を介して第１制御信号Ｄ１を出力することにより、表示装置３００に表示される動画ＭＶの再生を制御できる。なお、再生制御部１１５は、動画ＭＶの再生制御のために視線情報Ｅを必ずしも用いなくてもよい。
【0035】
再生時間取得部１１７は、利用者Ｕの歩行状態に応じた動画ＭＶの再生時間に関する再生時間情報ＴＩを取得する。例えば再生時間取得部１１７は、再生制御部１１５を介して再生時間情報ＴＩを取得できる。動作取得部１１８は、再生時間取得部１１７から入力した再生時間情報ＴＩと視線情報Ｅに基づいて、記憶部１２０における第２記憶部１２２を参照して動作情報ＩＶを取得する。視線情報Ｅを必ずしも用いなくてもよい。
動作制御部１１９は、利用者Ｕの歩行状態に応じた動画ＭＶの再生時間に基づいて、外部装置１０００による利用者Ｕの感覚に作用する動作を制御する。なお、外部の記憶サーバで記憶部１２０を実現する場合には、動作取得部１１８はネットワーク経由で外部の記憶サーバ上の第２記憶部１２２を参照して動作情報ＩＶや視線情報Eを取得してもよい。
動作制御部１１９は、利用者Ｕの歩行状態に応じた動画ＭＶの再生時間に基づいて、外部装置１０００による利用者Ｕの感覚に作用する動作を制御する。なお、外部の記憶サーバで記憶部１２０を実現する場合には、動作取得部１１８はネットワーク経由で外部の記憶サーバ上の第２記憶部１２２を参照して動作情報ＩＶや視線情報Eを取得してもよい。
【0036】
動作制御部１１９は、利用者Ｕの歩行状態に応じた動画ＭＶの再生時間に基づいて、外部装置１０００による利用者Ｕの感覚に作用する動作を制御する。例えば動作制御部１１９は、再生時間情報ＴＩに基づいて動作取得部１１８が取得した動作情報ＩＶに基づき、照明装置３５０、空調装置４００、匂い発生装置４５０および送風装置５００のうちの少なくとも１つの動作を制御する。動作制御部１１９は、出力部１１６を介して第２制御信号Ｄ２、第３制御信号Ｄ３、第４制御信号Ｄ４および第５制御信号Ｄ５を出力することにより、照明装置３５０、空調装置４００、匂い発生装置４５０および送風装置５００の動作を制御できる。
【0037】
＜情報処理装置１００による処理例＞
図４は、情報処理装置１００による処理の一例を示すフローチャートである。例えば、情報処理装置１００は、利用者Ｕ等の操作者による動画ＭＶの選択操作を、操作部１５０を介して受け付けたときに、図４の処理を開始する。
図４は、情報処理装置１００による処理の一例を示すフローチャートである。例えば、情報処理装置１００は、利用者Ｕ等の操作者による動画ＭＶの選択操作を、操作部１５０を介して受け付けたときに、図４の処理を開始する。
【0038】
まず、ステップＳ１１において、情報処理装置１００は、動画取得部１１２により、操作入力信号Ｓ１に応じて選択受付部１１１から出力される動画Ｍの識別情報Ｎに基づいて、第１記憶部１２１を参照して動画ＭＶを取得する。
【0039】
続いて、ステップＳ１２において、情報処理装置１００は、歩行状態取得部１１３により、歩行センサ２００との通信を制御し、歩行センサ２００からの第２入力信号Ｓ２に基づいて歩行情報Ｗを取得する。
【0040】
続いて、ステップＳ１３において、情報処理装置１００は、視線方向取得部１１４により、視線センサ２５０との通信を制御し、視線センサ２５０からの第３入力信号Ｓ３に基づいて視線情報Ｅを取得する。なお、ステップＳ１２とステップＳ１３は、適宜順番が変更されてもよいし、両者が並行に行われてもよい。
【0041】
続いて、ステップＳ１４において、情報処理装置１００は、再生制御部１１５により、歩行情報Ｗと視線情報Ｅとに基づいて、表示装置３００に表示される動画ＭＶの再生を制御する。以降、情報処理装置１００は、動画ＭＶの再生を継続して制御し、表示装置３００は動画ＭＶを継続して表示する。
【0042】
続いて、ステップＳ１５において、情報処理装置１００は、所定時間が経過したか否かを判定する。第２記憶部１２２は、所定時間ごとに設定された再生時間情報ＴＩに対応付けられた動作情報ＩＶを記憶している。
【0043】
ステップＳ１５において、所定時間が経過していないと判定された場合には（ステップＳ１５、ＮＯ）、情報処理装置１００は、ステップＳ１２以降の処理を再度行う。一方、ステップＳ１５において、所定時間が経過したと判定された場合には（ステップＳ１５、ＹＥＳ）、情報処理装置１００は、ステップＳ１６において、再生時間取得部１１７により、再生制御部１１５から再生時間情報ＴＩを取得する。
【0044】
続いて、ステップＳ１７において、情報処理装置１００は、動作取得部１１８により、再生時間取得部１１７から入力した再生時間情報ＴＩと視線情報Ｅに基づいて、第２記憶部１２２を参照して動作情報ＩＶを取得する。視線情報Ｅを必ずしも用いなくてもよい。
【0045】
続いて、ステップＳ１８において、情報処理装置１００は、動作制御部１１９により、動作情報ＩＶに基づいて、外部装置１０００による利用者Ｕの感覚に作用する動作を制御する。
【0046】
続いて、ステップＳ１９において、情報処理装置１００は、処理を終了するか否かを判定する。例えば情報処理装置１００は、操作部１５０を介して、操作者による処理終了に関する操作入力を受け付けた場合に、処理を終了すると判定する。あるいは、情報処理装置１００は、動画ＭＶの全ての再生が終了した場合に、処理を終了すると判定する。
【0047】
ステップＳ１９において、終了しないと判定された場合には（ステップＳ１９、ＮＯ）、情報処理装置１００は、ステップＳ１２以降の処理を再度行う。一方、ステップＳ１９において、終了すると判定された場合には（ステップＳ１９、ＹＥＳ）、情報処理装置１００は、再生制御部１１５により、動画ＭＶの再生を停止し、表示装置３００による動画ＭＶの表示を停止させた後、処理を終了する。
【0048】
以上のようにして、情報処理装置１００は、利用者Ｕに外出体験をさせる処理を実行することができる。
【0049】
＜情報処理装置１００における様々な情報の一例＞
図５～９を参照して情報処理装置１００における様々な情報を説明する。まず図５は、動画ＭＶの識別情報Ｎと動画ＭＶとの対応テーブルの一例を示す図である。図５に示すように、対応テーブル１２５は、第１列目に識別情報Ｎとして、識別情報Ｎ１、Ｎ２、Ｎ３、・・・・を含んでいる。また対応テーブル１２５は、第２列目に動画ＭＶとして、動画ＭＶ１、ＭＶ２、ＭＶ３、・・・・を含んでいる。識別情報Ｎ１、Ｎ２、Ｎ３、・・・・と、動画ＭＶ１、ＭＶ２、ＭＶ３、・・・・は、１対１で対応付けられている。第１記憶部１２１は、このような対応テーブル１２５を記憶している。動画取得部１１２は、識別情報Ｎに基づき、対応テーブル１２５を参照して動画ＭＶを取得できる。
図５～９を参照して情報処理装置１００における様々な情報を説明する。まず図５は、動画ＭＶの識別情報Ｎと動画ＭＶとの対応テーブルの一例を示す図である。図５に示すように、対応テーブル１２５は、第１列目に識別情報Ｎとして、識別情報Ｎ１、Ｎ２、Ｎ３、・・・・を含んでいる。また対応テーブル１２５は、第２列目に動画ＭＶとして、動画ＭＶ１、ＭＶ２、ＭＶ３、・・・・を含んでいる。識別情報Ｎ１、Ｎ２、Ｎ３、・・・・と、動画ＭＶ１、ＭＶ２、ＭＶ３、・・・・は、１対１で対応付けられている。第１記憶部１２１は、このような対応テーブル１２５を記憶している。動画取得部１１２は、識別情報Ｎに基づき、対応テーブル１２５を参照して動画ＭＶを取得できる。
【0050】
次に図６は、動画ＭＶと再生時間との関係を説明する図である。動画ＭＶは、複数のフレーム（画像）が時間ｔに応じて再生される。図６は、動画ＭＶに含まれる４つのフレームが再生される様子を示している。例えば動画ＭＶにおいて、フレームが切り替わる速度である再生速度は、再生制御部１１５により、利用者Ｕの歩行速度に応じて変更される。また動画ＭＶにおける映像の視野は、再生制御部１１５により、利用者Ｕの視線方向に応じて変更される。
【0051】
再生時間情報ＴＩ１では、再生時間は「０秒０００ミリ秒」である。このとき、視線センサ２５０により検出された利用者Ｕの視線方向が正面であると、再生制御部１１５は、視線方向に応じて表示される動画ＭＶの映像の視野を変化させる。同様に、再生時間情報ＴＩ２では、再生時間は「１０秒０００ミリ秒」である。視線センサ２５０により検出された利用者Ｕの視線方向は正面である。再生時間情報ＴＩ３では、再生時間は「２０秒０００ミリ秒」である。視線センサ２５０により検出された利用者Ｕの視線方向は右９０度である。再生時間情報ＴＩ４では、再生時間は「３０秒０００ミリ秒」である。視線センサ２５０により検出された利用者Ｕの視線方向は左６０度である。再生時間情報ＴＩ５では、再生時間は「４０秒２０１ミリ秒」である。視線センサ２５０により検出された利用者Ｕの視線方向は上３０度である。
【0052】
再生時間情報ＴＩは、所定の時間ごとに限らず、所定のフレーム数ごと等に応じて設定されてもよい。視線情報Ｅでは、映像の全体視野におけるどの位置を視野中心にするかによって、表示装置３００に表示される映像の視野が変更される。情報処理装置１００は、再生時間情報ＴＩに応じた制御信号を、所定の時間間隔で外部装置１０００へ出力する。この時間間隔は、情報処理装置１００と外部装置１０００との間の通信速度や、情報処理装置１００または外部装置１０００での処理時間等を考慮して設定される。また、情報処理装置１００は、利用者Ｕが歩行運動を停止し、動画ＭＶが止まったときや、操作部１５０等を介して情報処理装置１００に対する操作が行われたときに、再生時間情報ＴＩに応じた制御信号を外部装置１０００に出力してもよい。情報処理装置１００は、動画ＭＶをリワードする場合にも、再生時間情報ＴＩに応じた第１制御信号Ｄ１を表示装置３００に出力する。
【0053】
次に図７は、再生時間に応じた送風装置５００の制御の様子の一例を示す図である。図７において、表示装置３００は、高い山を山歩きする景色を示す動画ＭＶを表示している。高い山では風が吹く。このため、図７に示すフレームを表示する再生時間では、情報処理装置１００は、動作制御部１１９により、送風装置５００に送風を開始させて風を発生させる。これにより情報処理装置１００は、利用者Ｕに風を感じさせることができる。
【0054】
次に図８は、再生時間に応じた照明装置３５０の制御の様子の一例を示す図である。図８において、表示装置３００は、洞窟内を散策する景色を示す動画ＭＶを表示している。洞窟内は暗い。このため、図８に示すフレーム（画像）を表示する再生時間では、情報処理装置１００は、動作制御部１１９により、照明装置３５０に照明照度を低下させる。これにより情報処理装置１００は、利用者Ｕに洞窟内の暗さを感じさせることができる。
【0055】
次に図９は、動画ＭＶと再生時間情報ＴＩと視線情報Eと動作情報ＩＶとの関係の一例を説明する図である。図９は、相互に対応付けられた７つの再生時間情報ＴＩと、７フレーム分の動画ＭＶと、７つの動作情報ＩＶと、を示している。図３に示した第２記憶部１２２は、例えば動画ＭＶと再生時間情報ＴＩと動作情報ＩＶとの関係を表す対応テーブルとして、図９に示す情報を記憶している。
【0056】
再生時間１分０５秒における城と石橋を含むフレームは、城と石橋における照度、気温、風および匂いを定めた動作情報ＩＶと対応付けられている。再生時間３分１０秒におけるポプラ並木を含むフレームは、ポプラ並木における照度、気温、風および匂いを定めた動作情報ＩＶと対応付けられている。
【0057】
再生時間３分５５秒における行列ができる店を含むフレームは、行列ができる店における照度、気温、風および画像内の視線方向右側にある匂いを定めた動作情報ＩＶと対応付けられている。再生時間４分４０秒における神社を含むフレームは、神社における照度、気温、風および匂いを定めた動作情報ＩＶと対応付けられている。再生時間５分１０秒における川を含むフレームは、川における照度、気温、風および匂いを定めた動作情報ＩＶと対応付けられている。
【0058】
再生時間５分４８秒における雪山を含むフレームは、雪山における照度、気温、風および匂いを定めた動作情報ＩＶと対応付けられている。再生時間６分２５秒における夜を含むフレームは、右に月、左に花火、夜間における照度、気温、風および匂いを定めた動作情報ＩＶと対応付けられている。
【0059】
情報処理装置１００は、図９に示すような再生時間情報ＴＩと視線情報Eに対応付けられた動作情報ＩＶを、第２記憶部１２２を参照して取得することができる。
【0060】
［第２実施形態］
次に、第２実施形態に係る情報処理システムについて説明する。なお、第１実施形態と同じ構成部には同じ符号を付し、重複する説明を適宜省略する。この点は、以降における他の実施形態および変形例においても同様とする。
次に、第２実施形態に係る情報処理システムについて説明する。なお、第１実施形態と同じ構成部には同じ符号を付し、重複する説明を適宜省略する。この点は、以降における他の実施形態および変形例においても同様とする。
【0061】
＜情報処理システム１の構成例＞
図１０および図１１を参照して、本実施形態に係る情報処理システム１の構成について説明する。図１０は情報処理システム１の構成の一例を示す図であり、図１１はそのブロック図である。
図１０および図１１を参照して、本実施形態に係る情報処理システム１の構成について説明する。図１０は情報処理システム１の構成の一例を示す図であり、図１１はそのブロック図である。
【0062】
図１０および図１１に示すように、情報処理システム１は、情報処理装置１００ａと、操作部１５０と、歩行センサ２００と、視線センサ２５０と、再生制御装置５５０と、動作制御装置６００と、端末制御装置６５０と、を有する。図１０および図１１では、情報処理装置１００ａ、操作部１５０、歩行センサ２００、視線センサ２５０、再生制御装置５５０、動作制御装置６００および端末制御装置６５０を情報処理システム１が有するという意味において、各装置を示す符号に情報処理システム１の符号を括弧書きで併記している。なお、図１０では、利用者Ｕが１人である場合を例示する。但し、利用者Ｕは複数人であってもよい。利用者Ｕが複数人の場合は、情報処理システム１は、利用者Ｕの人数に合わせて複数の歩行センサ２００を有する。
【0063】
情報処理装置１００ａは、操作部１５０、歩行センサ２００、視線センサ２５０、再生制御装置５５０、動作制御装置６００および端末制御装置６５０のそれぞれに対し、有線または無線により通信可能に接続されている。再生制御装置５５０は、表示装置３００に対し、有線または無線により通信可能に接続されている。動作制御装置６００は、照明装置３５０、空調装置４００、匂い発生装置４５０および送風装置５００のそれぞれに対し、有線または無線により接続されている。無線は、赤外線、電波、音波等のいずれを利用するものであってもよい。
【0064】
再生制御装置５５０、動作制御装置６００、端末制御装置６５０、外部記憶サーバ７００、外部端末７５０および外部ウェブサーバのそれぞれは、ＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）、インターネット等のネットワーク２０００を介して相互に通信可能に接続されている。
【0065】
情報処理装置１００ａは、動画の識別情報と、利用者Ｕの歩行状態に応じた動画ＭＶの再生時間情報と、を送信する。
【0066】
再生制御装置５５０は、再生時間情報に含まれる利用者Ｕの歩行状態に関する情報に基づいて、動画の識別情報に対応する動画の再生を制御する。例えば再生制御装置５５０は、情報処理装置１００ａからの動画の識別情報に基づき、それぞれが外部記憶サーバ７００を参照して取得される動画を表示装置３００に表示させる。この再生制御装置５５０は、第１実施形態における再生制御部１１５とほぼ同じ機能を含む。
【0067】
動作制御装置６００は、再生時間情報に基づいて、外部装置１０００による利用者Ｕの感覚に作用する動作を制御する。例えば動作制御装置６００は、情報処理装置１００ａからの再生時間情報に基づき、外部記憶サーバ７００を参照して取得される動作に関する情報に応じて、外部装置１０００による利用者Ｕの感覚に作用する動作を制御する。この動作制御装置６００は、第１実施形態における動作制御部１１９とほぼ同じ機能を含む。
【0068】
端末制御装置６５０は、動画の識別情報と再生時間情報とに基づいて動画に関連するウェブ情報を表示するとともに、ウェブ情報に関連する処理を実行するように外部端末７５０の動作を制御する。
【0069】
本実施形態では、情報処理システム１は、情報処理装置１００ａと、再生制御装置５５０と、動作制御装置６００と、を有することにより、第１実施形態に係る情報処理装置１００とほぼ同じ作用効果を得ることができる。
【0070】
また、本実施形態では、動画ＭＶに関連するウェブ情報を利用者Ｕの外部端末７５０または表示装置３００に表示するとともに、ウェブ情報に関連する処理を外部端末に実行させる。動画ＭＶに関連するウェブ情報は、例えば動画ＭＶがスーパーマーケット内を散策する景色を表示するものである場合には、このスーパーマーケットで販売されている様々な商品の外観や特性を示す情報等である。あるいは、動画ＭＶが観光地を散策する景色を表示するものである場合には、動画ＭＶに関連するウェブ情報は、観光地のガイド情報や、お土産品に関する情報、チャット情報等である。外部端末７５０は、ネットワーク２０００を介して外部ウェブサーバ８００からこれらのウェブ情報を取得できる。なお、外部ウェブサーバ８００は、様々なウェブ情報に関連する複数の外部ウェブサーバの総称表記である。
【0071】
本実施形態では、ウェブ情報を表示させるとともに、ウェブ情報に関連する処理を実行させることにより、あたかも外出先に関するウェブ情報を外出先で見ているかのようなリアリティに優れた外出体験を利用者Ｕにさせることができる技術を提供できる。また、リアリティに優れた外出体験を利用者Ｕにさせることで、本実施形態では、利用者Ｕに歩行運動を行う動機付けを与え、利用者Ｕの運動を促進し、また支援することができる。
【0072】
また、本実施形態では、情報処理装置は、利用者Ｕに関する情報をさらに送信し、動作制御装置６００は、利用者Ｕに関する情報に基づいて、外部装置１０００による利用者Ｕの感覚に作用する動作を制御してもよい。利用者Ｕに関する情報を用いることで、利用者Ｕの感じやすい効果や嫌いな効果刺激を知り、制御から除外したり強調したりすることができる。
【0073】
また本実施形態では、再生制御装置５５０は、動画ＭＶの識別情報と再生時間情報とを示す識別コードを表示装置３００に表示させ、端末制御装置６５０は、表示装置３００により表示された識別コードに基づいて動画に関連するウェブ情報を表示するとともに、ウェブ情報に関連する処理を実行するように外部端末７５０の動作を制御してもよい。識別コードには、バーコード等の一次元コード、ＱＲコード（登録商標）等の二次元コード等が含まれる。識別コードを用いることで、電波通信機能を持ったアプリケーションプログラムを用いなくても、カメラ機能を有する複数の外部端末７５０のそれぞれに情報を送ることができる。
【0074】
また本実施形態では、再生制御装置５５０は、動画ＭＶの識別情報と再生時間情報とを示す音声を表示装置３００により発生させ、動作制御装置６００は、表示装置３００により発生させる音声を介して取得される再生時間情報に基づき、外部装置１０００による利用者Ｕの感覚に作用する動作を制御してもよい。音声を介することで、電波通信機能を持ったアプリケーションプログラムを用いたり、外部端末７５０に含まれるカメラをかざすといった動作を行ったりせずに、音が聞こえる範囲に位置する外部端末７５０に含まれるマイクを利用して情報を送ることができる。
【0075】
（ハードウェア構成例）
図１１に示す情報処理装置１００ａのハードウェア構成は、第１実施形態に係る情報処理装置１００のハードウェア構成と同じである。但し、情報処理装置１００ａのハードウェア構成は、情報処理装置１００のハードウェア構成と異なってもよい。
図１１に示す情報処理装置１００ａのハードウェア構成は、第１実施形態に係る情報処理装置１００のハードウェア構成と同じである。但し、情報処理装置１００ａのハードウェア構成は、情報処理装置１００のハードウェア構成と異なってもよい。
【0076】
図１２は、再生制御装置５５０のハードウェア構成の一例を示す図である。再生制御装置５５０、動作制御装置６００および端末制御装置６５０は、例えばコンピュータにより構築でき、共通の構成を採用できる。このため、図１２では、再生制御装置５５０だけでなく、動作制御装置６００および端末制御装置６５０それぞれの構成を示しているという意味において、再生制御装置５５０、動作制御装置６００および端末制御装置６５０それぞれの符号を併記している。以下では、再生制御装置５５０を代表して説明する。なお、再生制御装置５５０、動作制御装置６００および端末制御装置６５０は、相互に異なるハードウェア構成を有することもできる。
【0077】
図１２に示すように、再生制御装置５５０は、ＣＰＵ１０１ａと、ＲＯＭ１０２ａと、ＲＡＭ１０３ａと、ＨＤＤ／ＳＳＤ１０４ａと、Ｉ／Ｆ１０５ａと、を有する。これらは、バスラインＢａを介して電気的に接続されている。再生制御装置５５０は、上記構成部の他にマイク等の機器を含むことができる。
【0078】
ＣＰＵ１０１ａは、ＲＯＭ１０２ａに記憶されたプログラムを実行することにより、順次、分岐処理、反復処理等を実行する演算装置である。ＲＯＭ１０２ａは、ＣＰＵ１０１ａで実行されるプログラム等が記憶された不揮発性メモリである。ＲＡＭ１０３ａは、ＣＰＵ１０１ａの動作のワークエリアとして機能するメモリである。バスラインＢａは、ＣＰＵ１０１ａ等の各構成要素を電気的に接続するためのアドレスバスやデータバス等である。
【0079】
Ｉ／Ｆ１０５ａは、再生制御装置５５０以外の機器からの情報または信号を入力し、再生制御装置５５０以外の機器に情報または信号を出力するインターフェースである。
【0080】
（機能構成例）
（（情報処理装置１００ａ））
図１３は、情報処理装置１００ａの機能構成の一例を示すブロック図である。図１３に示すように、情報処理装置１００ａは、再生時間取得部１３１と、利用者情報取得部１３２と、送信部１３３と、を有する点が、情報処理装置１００と異なる。また情報処理装置１００ａは、図３に示した記憶部１２０、動画取得部１１２、再生制御部１１５、出力部１１６、再生時間取得部１１７、動作取得部１１８および動作制御部１１９を有さない点が情報処理装置１００と異なる。
（（情報処理装置１００ａ））
図１３は、情報処理装置１００ａの機能構成の一例を示すブロック図である。図１３に示すように、情報処理装置１００ａは、再生時間取得部１３１と、利用者情報取得部１３２と、送信部１３３と、を有する点が、情報処理装置１００と異なる。また情報処理装置１００ａは、図３に示した記憶部１２０、動画取得部１１２、再生制御部１１５、出力部１１６、再生時間取得部１１７、動作取得部１１８および動作制御部１１９を有さない点が情報処理装置１００と異なる。
【0081】
再生時間取得部１３１は、歩行状態取得部１１３から入力した歩行情報Ｗに基づいて、再生時間情報ＴＩを取得する。再生時間情報ＴＩは、歩行情報Ｗを含んでいる。
【0082】
利用者情報取得部１３２は、利用者Ｕに関する情報である利用者情報ＵＤを取得する。利用者情報ＵＤは、利用者Ｕの名前、利用者Ｕの識別情報等である。例えば利用者情報取得部１３２は、操作入力信号Ｓ１に応じて選択受付部１１１から出力される情報から利用者情報ＵＤを取得する。あるいは、利用者情報取得部１３２は、図１１におけるＨＤＤ／ＳＳＤ１０４等に予め記憶された利用者情報ＵＤを、ＨＤＤ／ＳＳＤ１０４等から読み出して取得してもよい。
【0083】
送信部１３３は、操作入力信号Ｓ１に応じて選択受付部１１１から出力される動画ＭＶの識別情報Ｎと、再生時間取得部１３１から入力した動画ＭＶの再生時間情報ＴＩと、を送信する。また、送信部１３３は、視線方向取得部１１４から入力した視線情報Ｅと、利用者情報取得部１３２から入力した利用者情報ＵＤと、を送信する。例えば送信部１３３は、識別情報Ｎと、再生時間情報ＴＩと、視線情報Ｅと、を再生制御装置５５０に送信する。また送信部１３３は、識別情報Ｎと、再生時間情報ＴＩと、を動作制御装置６００に送信する。また送信部１３３は、識別情報Ｎと、再生時間情報ＴＩと、利用者情報ＵＤと、を端末制御装置６５０に送信する。
【0084】
（（再生制御装置５５０））
図１４は、再生制御装置５５０の機能構成の一例を示すブロック図である。図１４に示すように、再生制御装置５５０は、受信部５５１と、動画取得部５５２と、送信部５５３と、コード生成部５５４と、音声生成部５５５と、再生制御部５５６と、出力部５５７と、を有する。
図１４は、再生制御装置５５０の機能構成の一例を示すブロック図である。図１４に示すように、再生制御装置５５０は、受信部５５１と、動画取得部５５２と、送信部５５３と、コード生成部５５４と、音声生成部５５５と、再生制御部５５６と、出力部５５７と、を有する。
【0085】
受信部５５１、送信部５５３および出力部５５７の各機能は、図１２のＣＰＵ１０１ａがＩ／Ｆ１０５ａの動作を制御すること等により実現される。動画取得部５５２、コード生成部５５４、音声生成部５５５および再生制御部５５６の各機能は、ＣＰＵ１０１ａがＲＯＭ１０２ａまたはＨＤＤ／ＳＳＤ１０４ａに記憶されたプログラムに規定される処理を実行すること等により実現される。
【0086】
ＣＰＵ１０１ａにより実現される機能は、ＡＳＩＣ、ＦＰＧＡ等の電子回路を用いて実現されてもよい。またＣＰＵ１０１ａにより実現される機能は、ＣＰＵ、ＡＳＩＣまたはＦＰＧＡ等を組み合わせて実現されてもよいし、情報処理装置１００以外の構成部との分散処理により実現されてもよい。
【0087】
動画取得部５５２は、受信部５５１を介して動画ＭＶの識別情報Ｎを取得する。動画取得部５５２は、送信部５５３およびネットワーク２０００を介して外部記憶サーバ７００に識別情報Ｎを送信し、識別情報Ｎに基づき外部記憶サーバ７００に記憶された第１記憶部１２１を参照して、動画ＭＶを取得する。動画取得部５５２は、要求に応じて外部記憶サーバ７００から送信される動画ＭＶを、ネットワーク２０００および受信部５５１を介して取得できる。
【0088】
コード生成部５５４は、受信部５５１を介して取得した動画ＭＶの識別情報Ｎと再生時間情報ＴＩと視線情報Ｅに基づき、動画ＭＶと識別情報Ｎとを示す識別コードＱを生成する。コード生成部５５４は、ＱＲコード生成プログラム等の公知の技術を用いて識別コードＱを生成できる。視線情報Ｅを必ずしも用いなくてもよい。
【0089】
音声生成部５５５は、受信部５５１を介して取得した動画ＭＶの識別情報Ｎと再生時間情報ＴＩと視線情報Ｅに基づき、動画ＭＶと識別情報Ｎとを示す音声Ｖを生成する。音声生成部５５５は、公知の音声変換プログラム等を用いて音声Ｖを生成できる。視線情報Ｅを必ずしも用いなくてもよい。
【0090】
再生制御部５５６は、受信部５５１を介して歩行情報Ｗと視線情報Ｅとを取得する。また再生制御部５５６は、動画取得部５５２から動画ＭＶを取得する。再生制御部５５６は、歩行情報Ｗと視線情報Ｅとに基づいて、動画ＭＶの再生を制御する。再生制御部５５６は、出力部５５７を介して第１制御信号Ｄ１を表示装置３００に出力することにより、表示装置３００に表示される動画ＭＶの再生を制御する。また再生制御部５５６は、コード生成部５５４が生成した識別コードＱを、出力部５５７を介して表示装置３００に出力することで、識別コードＱを表示装置３００に表示させることができる。さらに再生制御部５５６は、音声生成部５５５が生成した音声Ｖを、出力部５５７を介して表示装置３００に出力することで、音声Ｖを表示装置３００により発生させることができる。
【0091】
（（動作制御装置６００））
図１５は、動作制御装置６００の機能構成の一例を示すブロック図である。図１５に示すように、動作制御装置６００は、受信部６０１と、音声変換部６０２と、動作取得部６０３と、送信部６０４と、動作制御部６０５と、出力部６０６と、を有する。
図１５は、動作制御装置６００の機能構成の一例を示すブロック図である。図１５に示すように、動作制御装置６００は、受信部６０１と、音声変換部６０２と、動作取得部６０３と、送信部６０４と、動作制御部６０５と、出力部６０６と、を有する。
【0092】
受信部６０１、送信部６０４および出力部６０６の各機能は、図１２のＣＰＵ１０１ａがＩ／Ｆ１０５ａの動作を制御すること等により実現される。音声変換部６０２、動作取得部６０３および動作制御部６０５の各機能は、ＣＰＵ１０１ａがＲＯＭ１０２ａまたはＨＤＤ／ＳＳＤ１０４ａに記憶されたプログラムに規定される処理を実行すること等により実現される。
【0093】
ＣＰＵ１０１ａにより実現される機能は、ＡＳＩＣ、ＦＰＧＡ等の電子回路を用いて実現されてもよい。またＣＰＵ１０１ａにより実現される機能は、ＣＰＵ、ＡＳＩＣまたはＦＰＧＡ等を組み合わせて実現されてもよいし、情報処理装置１００以外の構成部との分散処理により実現されてもよい。
【0094】
音声変換部６０２は、動作制御装置６００に含まれるマイク等を用いて取得される音声Ｖを動画ＭＶの再生時間情報ＴＩと視線情報Ｅに変換することによって、再生時間情報ＴＩと視線情報を取得する。視線情報Ｅを必ずしも用いなくてもよい。
【0095】
動作取得部６０３は、受信部６０１を介して動画ＭＶの再生時間情報ＴＩを取得する。あるいは、動作取得部６０３は、音声変換部６０２から再生時間情報ＴＩを取得してもよい。動作取得部６０３は、送信部６０４およびネットワーク２０００を介して外部記憶サーバ７００に再生時間情報ＴＩを送信し、再生時間情報ＴＩに基づき外部記憶サーバ７００に記憶された第２記憶部１２２を参照して、動作情報ＩＶを取得する。動作取得部６０３は、要求に応じて外部記憶サーバ７００から送信される動作情報ＩＶを、ネットワーク２０００および受信部６０１を介して取得できる。
【0096】
動作制御部６０５は、利用者Ｕの歩行状態に応じた動画ＭＶの再生時間に基づいて、外部装置１０００による利用者Ｕの感覚に作用する動作を制御する。例えば動作制御部６０５は、再生時間情報ＴＩに基づいて動作取得部６０３が取得した動作情報ＩＶに基づき、照明装置３５０、空調装置４００、匂い発生装置４５０および送風装置５００のうちの少なくとも１つの動作を制御する。動作制御部６０５は、出力部６０６を介して第２制御信号Ｄ２、第３制御信号Ｄ３、第４制御信号Ｄ４および第５制御信号Ｄ５を出力することにより、照明装置３５０、空調装置４００、匂い発生装置４５０および送風装置５００の動作を制御できる。
【0097】
外部記憶サーバ７００に含まれる第２記憶部１２２は、再生時間情報ＴＩと視線情報Ｅと、利用者情報ＵＤと、対応付けられた動作情報ＩＶを記憶してもよい。この場合、動作制御部６０５は、受信部６０１を介して取得される利用者情報ＵＤと、再生時間情報ＴＩと、に基づいて取得される動作情報ＩＶに基づき、外部装置１０００による利用者Ｕの感覚に作用する動作を制御できる。
【0098】
（（端末制御装置６５０））
図１６は、端末制御装置６５０の機能構成の一例を示すブロック図である。図１６に示すように、端末制御装置６５０は、受信部６５１と、コード復号部６５２と、端末制御部６５３と、送信部６５４と、を有する。
図１６は、端末制御装置６５０の機能構成の一例を示すブロック図である。図１６に示すように、端末制御装置６５０は、受信部６５１と、コード復号部６５２と、端末制御部６５３と、送信部６５４と、を有する。
【0099】
受信部６５１および送信部６５４の各機能は、図１２のＣＰＵ１０１ａがＩ／Ｆ１０５ａの動作を制御すること等により実現される。コード復号部６５２と、端末制御部６５３の各機能は、ＣＰＵ１０１ａがＲＯＭ１０２ａまたはＨＤＤ／ＳＳＤ１０４ａに記憶されたプログラムに規定される処理を実行すること等により実現される。
【0100】
ＣＰＵ１０１ａにより実現される機能は、ＡＳＩＣ、ＦＰＧＡ等の電子回路を用いて実現されてもよい。またＣＰＵ１０１ａにより実現される機能は、ＣＰＵ、ＡＳＩＣまたはＦＰＧＡ等を組み合わせて実現されてもよいし、情報処理装置１００以外の構成部との分散処理により実現されてもよい。
【0101】
コード復号部６５２は、表示装置３００に表示された識別コードＱを外部端末７５０が備えるカメラにより撮影した画像Ｉｍを、受信部６５１を介して外部端末７５０から受信する。コード復号部６５２は、画像Ｉｍに含まれる識別コードＱを復号化して動画ＭＶの識別情報Ｎと再生時間情報ＴＩと視線情報Ｅを取得する。視線情報Ｅを必ずしも用いなくてもよい。
【0102】
端末制御部６５３は、受信部６５１を介して動画ＭＶの識別情報Ｎと、再生時間情報ＴＩと視線情報Ｅを取得する。視線情報Ｅを必ずしも用いなくてもよい。
端末制御部６５３は、送信部６５４およびネットワーク２０００を介して外部端末７５０に識別情報Ｎと再生時間情報ＴＩとを送信することにより、動画ＭＶに関連するウェブ情報を表示するとともに、ウェブ情報に関連する処理を実行するように外部端末７５０の動作を制御する。端末制御部６５３は、動画ＭＶに関連するウェブ情報を、外部端末７５０が備えるディスプレイに表示させてもよいし、再生制御装置５５０を介して表示装置３００に表示させてもよい。
端末制御部６５３は、送信部６５４およびネットワーク２０００を介して外部端末７５０に識別情報Ｎと再生時間情報ＴＩとを送信することにより、動画ＭＶに関連するウェブ情報を表示するとともに、ウェブ情報に関連する処理を実行するように外部端末７５０の動作を制御する。端末制御部６５３は、動画ＭＶに関連するウェブ情報を、外部端末７５０が備えるディスプレイに表示させてもよいし、再生制御装置５５０を介して表示装置３００に表示させてもよい。
【0103】
また端末制御装置６５０は、コード復号部６５２から入力した動画ＭＶの識別情報Ｎと再生時間情報ＴＩと視線情報Eに基づいて、動画ＭＶに関連するウェブ情報を表示するとともに、ウェブ情報に関連する処理を実行するように外部端末７５０の動作を制御してもよい。
【0104】
＜情報処理システム１の動作例＞
図１７は、情報処理システム１の動作の第１例を示すシーケンスチャートである。例えば、情報処理システム１は、利用者Ｕ等の操作者による動画ＭＶの選択操作を、操作部１５０を介して受け付けたときに、図１７の処理を開始する。
図１７は、情報処理システム１の動作の第１例を示すシーケンスチャートである。例えば、情報処理システム１は、利用者Ｕ等の操作者による動画ＭＶの選択操作を、操作部１５０を介して受け付けたときに、図１７の処理を開始する。
【0105】
まず、ステップＳ２１において、情報処理装置１００ａは、利用者情報取得部１３２により、利用者Ｕに関する情報である利用者情報ＵＤを取得する。
【0106】
続いて、ステップＳ２２において、情報処理装置１００ａは、歩行状態取得部１１３により取得された歩行情報Ｗに基づいて、再生時間取得部１３１により、歩行情報Ｗを含む再生時間情報ＴＩを取得する。
【0107】
ステップＳ２１～Ｓ２２における利用者情報ＵＤおよび再生時間情報ＴＩの取得順序は適宜変更可能であり、それぞれが並行に行われてもよい。
【0108】
続いて、ステップＳ２３において、情報処理装置１００ａは、操作入力信号Ｓ１に応じて選択受付部１１１から入力された動画ＭＶの識別情報Ｎと、視線方向取得部１１４から入力された視線情報Ｅと、再生時間情報ＴＩと、を送信部１３３により再生制御装置５５０に送信する。
【0109】
続いて、ステップＳ２４において、情報処理装置１００ａは、送信部１３３により、再生時間情報ＴＩと視線情報Ｅを動作制御装置６００に送信する。
【0110】
続いて、ステップＳ２５において、情報処理装置１００ａは、送信部１３３により、識別情報Ｎと再生時間情報ＴＩと視線情報Ｅを利用者情報ＵＤとを端末制御装置６５０に送信する。
【0111】
ステップＳ２３～Ｓ２５における識別情報Ｎ、視線情報Ｅ、利用者情報ＵＤおよび再生時間情報ＴＩの送信順序、並びに再生制御装置５５０、動作制御装置６００および端末制御装置６５０それぞれへの送信順序は適宜変更可能であり、それぞれが並行に送信されてもよい。
【0112】
続いて、ステップＳ２６において、再生制御装置５５０は、動画取得部５５２により、識別情報Ｎに基づき、第１記憶部１２１を参照して動画ＭＶを取得する。
【0113】
続いて、ステップＳ２７において、再生制御装置５５０は、再生制御部５５６により、歩行情報Ｗと視線情報Ｅとに基づいて、表示装置３００に表示される動画ＭＶの再生を制御する。
【0114】
続いて、ステップＳ２８において、動作制御装置６００は、動作取得部６０３により、再生時間情報ＴＩと視線情報Eに基づき外部記憶サーバ７００に記憶された第２記憶部１２２を参照して、動作情報ＩＶを取得する。
【0115】
続いて、ステップＳ２９において、動作制御装置６００は、動作制御部６０５により、動作情報ＩＶに基づき、外部装置１０００の動作を制御する。
【0116】
続いて、ステップＳ３０において、端末制御装置６５０は、端末制御部６５３により、動画ＭＶに関連するウェブ情報を外部端末７５０のディスプレイに表示するように、外部端末７５０の動作を制御する。
【0117】
続いて、ステップＳ３１において端末制御装置６５０は、端末制御部６５３により、動画ＭＶに関連するウェブ情報に関連する処理を実行するように外部端末７５０の動作を制御する。
【0118】
情報処理システム１は、ステップＳ２１～Ｓ３１の処理を、動作を終了すると判定するまで繰り返して行う。例えば、情報処理システム１は、操作部１５０を介して操作者による処理終了に関する操作入力を受け付けた場合、あるいは動画ＭＶの全ての再生が終了した場合に、処理を終了すると判定する。
【0119】
以上のようにして、情報処理システム１は、利用者Ｕに外出体験をさせる動作を行うことができる。
【0120】
＜情報処理システム１におけるウェブ情報の一例＞
図１８～２３を参照して情報処理システム１におけるウェブ情報について説明する。まず、図１８～図２０は、スーパーマーケット内を歩行する動画に関連するウェブ情報を説明する図である。図１８は、スーパーマーケット内での歩行の動線の一例を示す図である。図１９は、図１８のXIX領域において表示されるフレームの一例とウェブ情報の一例を示す図である。図２０は、図１８のXX領域において表示されるフレームの一例とウェブ情報の一例を示す図である。
図１８～２３を参照して情報処理システム１におけるウェブ情報について説明する。まず、図１８～図２０は、スーパーマーケット内を歩行する動画に関連するウェブ情報を説明する図である。図１８は、スーパーマーケット内での歩行の動線の一例を示す図である。図１９は、図１８のXIX領域において表示されるフレームの一例とウェブ情報の一例を示す図である。図２０は、図１８のXX領域において表示されるフレームの一例とウェブ情報の一例を示す図である。
【0121】
図１８は、スーパーマーケット内のフロアを模式的に上面視した図であるフロアマップを示している。破線の矢印で示した動線１８１は、スーパーマーケット内を人が歩行する動線を表している。スーパーマーケット内を歩行する動画は、この動線１８１に沿ってスーパーマーケット内を歩行する人が視認する風景を、この人の視点で撮影した動画である。図１０および図１１に示した再生制御装置５５０は、利用者Ｕの歩行情報Ｗおよび視線情報Ｅに応じて、表示装置３００に表示される動画を再生制御する。
【0122】
【0123】
図１０および図１１に示した端末制御装置６５０は、動画に関連するウェブ情報として、スーパーマーケット内の野菜売り場に関するウェブ情報を、このスーパーマーケットのウェブサイトから取得し、外部端末７５０のディスプレイに表示するように、外部端末７５０の動作を制御する。図１９に示すように、外部端末７５０のディスプレイには、野菜の一覧画面７５１が表示される。
【0124】
【0125】
端末制御装置６５０は、動画に関連するウェブ情報として、スーパーマーケット内のパン売り場に関するウェブ情報を、このスーパーマーケットのウェブサイトから取得し、外部端末７５０のディスプレイに表示するように、外部端末７５０の動作を制御する。図２０に示すように、外部端末７５０のディスプレイには、パンの一覧画面７５２が表示される。
【0126】
【0127】
端末制御装置６５０は、動画に関連するウェブ情報として、上記温泉地でのお土産情報を、この温泉地のウェブサイトから取得し、外部端末７５０のディスプレイに表示するように、外部端末７５０の動作を制御する。図２１に示すように、外部端末７５０のディスプレイには、お土産の一覧画面７５３が表示される。
【0128】
【0129】
端末制御装置６５０は、動画に関連するウェブ情報として、大阪城のガイド情報を、大阪城のウェブサイトから取得し、外部端末７５０のディスプレイに表示するように、外部端末７５０の動作を制御する。図２２に示すように、外部端末７５０のディスプレイには、大阪城のガイド画面７５４が表示される。
【0130】
【0131】
端末制御装置６５０は、動画に関連するウェブ情報として、温泉のチャット情報を、温泉のウェブサイトから取得し、外部端末７５０のディスプレイに表示するように、外部端末７５０の動作を制御する。図２３に示すように、外部端末７５０のディスプレイには、温泉のチャット画面７５５が表示される。
【0132】
以上のように、本実施形態では、ウェブ情報を表示させるとともに、ウェブ情報に関連する処理を実行させることにより、あたかも外出先に関するウェブ情報を外出先で見ているかのようなリアリティに優れた外出体験を利用者Ｕにさせることができる。
【0133】
図２４は、第２記憶部１２２に記憶させる情報の一例を示す図である。図２４は、再生時間情報ＴＩと動画ＭＶと動作情報ＩＶとの関係を示している。動画ＭＶの再生に従って、何が映し出されているのかをイベントとして関連情報を記録して、情報ファイル化していくことができる。
【0134】
＜識別コードＱの利用例＞
図２５～図２７を参照して、識別コードＱの利用の一例を説明する。図２５は、表示装置３００に識別コードを表示させるボタンの一例を示す図である。図２６は、表示装置３００に表示された識別コードＱの一例を示す図である。
図２５～図２７を参照して、識別コードＱの利用の一例を説明する。図２５は、表示装置３００に識別コードを表示させるボタンの一例を示す図である。図２６は、表示装置３００に表示された識別コードＱの一例を示す図である。
【0135】
図２５に示すように、例えば利用者Ｕは、リモコン等の操作部１５０を操作することにより、表示装置３００に識別コードＱを表示させるためのボタン３０１を表示させる。利用者Ｑが操作部１５０を用いてボタン３０１のプッシュ操作を行うことで、図２６に示すように、表示装置３００に識別コードＱを表示させることができる。
【0136】
識別コードＱは、動画ＭＶの識別情報Ｎと、再生時間情報ＴＩと視線情報Ｅ、を含んでいる。例えば、外部端末７５０は、利用者Ｕの操作に応じて、内蔵されたカメラにより識別コードＱを撮影し、撮影画像を端末制御装置６５０に送信する。端末制御装置６５０は、受信した識別コードＱを復号することで、動画ＭＶの識別情報Ｎと再生時間情報ＴＩとを取得できる。
【0137】
図２７は、情報処理システム１の動作の第２例を示すシーケンスチャートである。図２７におけるステップＳ４１～Ｓ４９の動作は、図１７におけるステップＳ２１～Ｓ２９の動作と同じであるため、ここでは重複する説明を省略し、図１７との相違点を主に説明する。
【0138】
ステップＳ５０において、再生制御装置５５０は、コード生成部５５４により、動画ＭＶと識別情報Ｎとを示す識別コードＱを生成する。
【0139】
続いて、ステップＳ５１において、再生制御装置５５０は、再生制御部５５６により、コード生成部５５４が生成した識別コードＱを、出力部５５７を介して表示装置３００に出力することで、識別コードＱを表示装置３００に表示させる
【0140】
続いて、ステップＳ５２において、端末制御装置６５０は、表示装置３００に表示された識別コードＱを外部端末７５０が備えるカメラにより撮影された画像Ｉｍを、受信部６５１を介して外部端末７５０から受信する。その後、端末制御装置６５０は、コード復号部６５２により、画像Ｉｍに含まれる識別コードＱを復号化して動画ＭＶの識別情報Ｎと再生時間情報ＴＩと視線情報Ｅを取得する。
【0141】
続いて、ステップＳ５３において、端末制御装置６５０は、端末制御部６５３により、外部端末７５０に識別情報Ｎと再生時間情報ＴＩとを送信することによって、動画ＭＶに関連するウェブ情報を外部端末７５０のディスプレイに表示するように、外部端末７５０の動作を制御する。
【0142】
続いて、ステップＳ５４において端末制御装置６５０は、端末制御部６５３により、動画ＭＶに関連するウェブ情報に関連する処理を実行するように外部端末７５０の動作を制御する。
【0143】
情報処理システム１は、ステップＳ４１～Ｓ５４の処理を、動作を終了すると判定するまで繰り返して行う。例えば、情報処理システム１は、操作部１５０を介して、操作者による処理終了に関する操作入力を受け付けた場合、あるいは動画ＭＶの全ての再生が終了した場合に、処理を終了すると判定する。
【0144】
以上のようにして、情報処理システム１は、利用者Ｕに外出体験をさせる動作を行うことができる。
【0145】
＜音声Ｖの利用例＞
図２８は、音声の利用の一例を説明する図である。図２８において、動画ＭＶは、動画に含まれる４つのフレームを切り出して示したものである。動画音声Ｖ０は、動画ＭＶに含まれる音声を表している。音声Ｖは、動画音声Ｖに埋め込まれた、再生時間情報ＴＩおよび動画ＭＶの識別情報Ｎの少なくとも一方を含む音声である。音声Ｖは、１６ｋＨｚ以上２０ｋＨｚ以下の非可聴領域の音としてもよいし、可聴領域の音を足踏み音のような音に埋め込んでもよい。
図２８は、音声の利用の一例を説明する図である。図２８において、動画ＭＶは、動画に含まれる４つのフレームを切り出して示したものである。動画音声Ｖ０は、動画ＭＶに含まれる音声を表している。音声Ｖは、動画音声Ｖに埋め込まれた、再生時間情報ＴＩおよび動画ＭＶの識別情報Ｎの少なくとも一方を含む音声である。音声Ｖは、１６ｋＨｚ以上２０ｋＨｚ以下の非可聴領域の音としてもよいし、可聴領域の音を足踏み音のような音に埋め込んでもよい。
【0146】
【0147】
（第１変形例）
図２９は、第１変形例に係る情報処理システム１ａを示す図である。情報処理システム１ａは、表示装置として、頭部装着型の表示装置を有する点が、第２実施形態に係る情報処理システム１と異なる。
図２９は、第１変形例に係る情報処理システム１ａを示す図である。情報処理システム１ａは、表示装置として、頭部装着型の表示装置を有する点が、第２実施形態に係る情報処理システム１と異なる。
【0148】
図２９に示すように、情報処理システム１ａは、ＶＲ（Ｖｉｒｔｕａｌ Ｒｅａｌｉｔｙ）グラス３００ａを有する点が情報処理システム１と異なる。ＶＲグラス３００ａは、頭部装着型の表示装置の一例である。
【0149】
図２９に示す例では、利用者Ｕ－１、利用者Ｕ－２および利用者Ｕ－３を含む３人の利用者Ｕが、情報処理システム１ａを利用している。ＶＲグラス３００ａは、利用者Ｕの１人につき１台が装着される。このため図２９に示す例では、情報処理システム１ａは、３台のＶＲグラス３００ａとして、ＶＲグラス３００ａ－１、ＶＲグラス３００ａ－２およびＶＲグラス３００ａ－３を有している。但し、利用者Ｕの人数は適宜変更可能であり、ＶＲグラス３００ａの台数は、利用者Ｕの人数に応じて適宜変更可能である。
【0150】
ＶＲグラス３００ａを装着する利用者Ｕは、ＶＲグラス３００ａを用いて動画を視認しつつ、ＶＲ体験できる。なお、頭部装着型の表示装置は、ＶＲグラス３００ａに限らず、ヘッドマウントディスプレイ（ＨＭＤ：Ｈｅａｄ Ｍｏｕｎｔｅｄ Ｄｉｓｐｌａｙ）等であってもよい。
【0151】
（第２変形例）
図３０は、第２変形例に係る情報処理システム１ｂの一例を示す図である。情報処理システム１ｂは、複数の利用者により利用される点、並びに利用者Ｕの人数に合わせて複数の歩行センサ２００を有する点が、第２実施形態に係る情報処理システム１と異なる。
図３０は、第２変形例に係る情報処理システム１ｂの一例を示す図である。情報処理システム１ｂは、複数の利用者により利用される点、並びに利用者Ｕの人数に合わせて複数の歩行センサ２００を有する点が、第２実施形態に係る情報処理システム１と異なる。
【0152】
図３０に示す例では、利用者Ｕは、利用者Ｕ－１、利用者Ｕ－２および利用者Ｕ－３の３人の利用者を含む。情報処理システム１ｂは、利用者Ｕの人数に合わせて、歩行センサ２００－１、歩行センサ２００－２および歩行センサ２００－３の３台の歩行センサを含む。このように、実施形態に係る情報処理システムは、複数の利用者Ｕにより利用されてもよい。
【0153】
（第３変形例）
図３１は第３変形例に係る情報処理システム１ｃを示す図である。情報処理システム１ｃは、着座している利用者を含む複数の利用者によって利用される点が、第２実施形態に係る情報処理システム１と異なる。
図３１は第３変形例に係る情報処理システム１ｃを示す図である。情報処理システム１ｃは、着座している利用者を含む複数の利用者によって利用される点が、第２実施形態に係る情報処理システム１と異なる。
【0154】
図３１に示す例では、利用者Ｕは、利用者Ｕ－１、利用者Ｕ－２、利用者Ｕ－３および利用者Ｕ－４の４人の利用者を含む。４人の利用者Ｕのうち、利用者Ｕ－２、利用者Ｕ－３および利用者Ｕ－４の３人は着座している。このように、実施形態に係る情報処理システムは、着座している利用者を含む複数の利用者によって利用されてもよい。
【0155】
（その他の変形例）
図３２および図３３を参照してその他の変形例について説明する。図３２および図３３は、表示部６に表示する動画として、全天球カメラにより撮影された全天球画像を表示している。視界８１は利用者Ｕに見えている視界を表す。図３２に示すように、情報処理システム１は、表示制御部１０７により、動画Ｉｍ内でのイベントに応じた文字列およびマーカーを表示部６に表示して、利用者Ｕに認識させることができる。
図３３は、図３２の状態から利用者Ｕの視線方向に応じて視界が変化した後の状態の一例を示している。視界８４は利用者Ｕに見えている視界を表す。視界８４は、利用者Ｕの視線方向に応じ、全天球画像内で視界８１とは異なる領域となっている。情報処理システム１は、文字列、マーカー等の他に音声を発生して、利用者Ｕにイベントを認識させてもよい。音声は、「右にお風呂屋さん見えてきました。」というアナウンスに対応する音声等である。
図３２および図３３を参照してその他の変形例について説明する。図３２および図３３は、表示部６に表示する動画として、全天球カメラにより撮影された全天球画像を表示している。視界８１は利用者Ｕに見えている視界を表す。図３２に示すように、情報処理システム１は、表示制御部１０７により、動画Ｉｍ内でのイベントに応じた文字列およびマーカーを表示部６に表示して、利用者Ｕに認識させることができる。
図３３は、図３２の状態から利用者Ｕの視線方向に応じて視界が変化した後の状態の一例を示している。視界８４は利用者Ｕに見えている視界を表す。視界８４は、利用者Ｕの視線方向に応じ、全天球画像内で視界８１とは異なる領域となっている。情報処理システム１は、文字列、マーカー等の他に音声を発生して、利用者Ｕにイベントを認識させてもよい。音声は、「右にお風呂屋さん見えてきました。」というアナウンスに対応する音声等である。
【0156】
以上、実施形態を説明したが、本発明は、具体的に開示された上記の実施形態に限定されるものではなく、特許請求の範囲から逸脱することなく、種々の変形や変更が可能である。
【0157】
実施形態に係る情報処理システムは、情報処理装置１００が有する機能の一部または全部を、クラウドサーバ等の外部装置により実現する構成であってもよい。また実施形態に係る情報処理システムは、情報処理装置１００が有する機能の一部または全部を、複数のコンピュータが分散処理することにより実現する構成であってもよい。
【0158】
また、上述した第２実施形態では、表示装置３００が再生制御装置５５０を含んでもよい。また、外部装置１０００が動作制御装置６００を含んでもよく、外部端末７５０が端末制御装置６５０を含んでもよい。例えば、再生制御装置５５０が実行する処理を表示装置３００に実行させるプログラムが、表示装置３００にインストールされることにより、表示装置３００は、再生制御装置５５０を含むことができる。同様に、動作制御装置６００が実行する処理を外部装置１０００に実行させるプログラムが、外部装置１０００にインストールされることにより、外部装置１０００は、動作制御装置６００を含むことができる。また端末制御装置６５０が実行する処理を外部端末７５０に実行させるプログラムが、外部端末７５０にインストールされることにより、外部端末７５０は、端末制御装置６５０を含むことができる。
【0159】
実施形態の説明で用いた序数、数量等の数字は、全て本発明の技術を具体的に説明するために例示するものであり、本発明は例示された数字に制限されない。また、構成要素間の接続関係は、本発明の技術を具体的に説明するために例示するものであり、本発明の機能を実現する接続関係をこれに限定するものではない。
【0160】
実施形態の各機能は、一又は複数の処理回路によって実現することが可能である。ここで、本明細書における「処理回路」とは、電子回路により実装されるプロセッサのようにソフトウェアによって各機能を実行するようプログラミングされたプロセッサや、上記で説明した各機能を実行するよう設計されたＡＳＩＣ、ＤＳＰ（ｄｉｇｉｔａｌ ｓｉｇｎａｌ ｐｒｏｃｅｓｓｏｒ）、ＦＰＧＡや従来の回路モジュール等のデバイスを含むものとする。
【0161】
本発明の態様は、例えば、以下のとおりである。
＜１＞ 表示装置に表示される動画を視認する利用者の歩行状態を検出する歩行センサからの前記歩行状態に関する情報に基づいて、前記動画の再生を制御する再生制御部と、前記歩行状態に応じた前記動画の再生時間に基づいて、外部装置による前記利用者の感覚に作用する動作を制御する動作制御部と、を有する、情報処理装置である。
＜２＞ 前記再生制御部は、前記利用者の視線方向に関する情報にさらに基づいて、前記動画を再生する、前記＜１＞に記載の情報処理装置である。
＜３＞ 前記利用者の感覚に作用する動作は、前記利用者の周囲における照度、風、匂い、水滴、煙および気温の少なくとも１つに関する動作を含む、前記＜１＞または前記＜２＞に記載の情報処理装置である。
＜４＞ 表示装置に表示される動画を視認する利用者の歩行状態を検出する歩行センサと、前記動画の識別情報と、前記利用者の歩行状態に応じた前記動画の再生時間情報と、を送信する情報処理装置と、前記再生時間情報に含まれる前記歩行状態に関する情報に基づいて、前記動画の識別情報に対応する前記動画の再生を制御する再生制御装置と、前記再生時間情報に基づいて、外部装置による前記利用者の感覚に作用する動作を制御する動作制御装置と、を有する情報処理システムである。
＜５＞ 前記動作制御装置は、前記利用者の視線方向に関する情報にさらに基づいて、前記外部装置による前記利用者の感覚に作用する動作を制御する、前記＜４＞に記載の情報処理システムである。
＜６＞ 前記再生制御装置は、前記情報処理装置からの前記動画の識別情報に基づき、それぞれが前記識別情報に対応付けられた複数の動画を記憶する第１記憶部を参照して取得される前記動画を前記表示装置に表示させる、前記＜４＞または前記＜５＞に記載の情報処理システムである。
＜７＞ 前記動作制御装置は、前記情報処理装置からの前記再生時間情報に基づき、前記再生時間情報に対応付けられた前記外部装置の動作に関する情報を記憶する第２記憶部を参照して取得される前記動作に関する情報に応じて、前記外部装置による前記利用者の感覚に作用する動作を制御する、前記＜４＞から前記＜６＞のいずれか１つに記載の情報処理システムである。
＜８＞ 前記動画の識別情報と前記再生時間情報とに基づいてウェブ情報を表示するとともに、前記ウェブ情報に関連する処理を実行するように外部端末の動作を制御する端末制御装置をさらに有する、前記＜４＞から前記＜７＞のいずれか１つに記載の情報処理システムである。
＜９＞ 前記端末制御装置は、前記利用者の視線方向に関する情報にさらに基づいて、前記ウェブ情報を表示するとともに、前記ウェブ情報に関連する処理を実行するように前記外部端末の動作を制御する、前記＜８＞に記載の情報処理システムである。
＜１０＞ 前記情報処理装置は、前記利用者に関する情報をさらに送信し、前記動作制御装置は、前記利用者に関する情報にさらに基づいて、前記外部装置による前記利用者の感覚に作用する動作を制御する、前記＜４＞から前記＜９＞のいずれか１つに記載の情報処理システムである。
＜１１＞ 前記再生制御装置は、前記動画の識別情報と前記再生時間情報とを示す識別コードを前記表示装置に表示させ、前記表示装置に表示された前記識別コードに基づいて前記動画に関連するウェブ情報を表示するとともに、前記ウェブ情報に関連する処理を実行するように外部端末の動作を制御する端末制御装置をさらに有する、前記＜４＞から前記＜１０＞のいずれか１つに記載の情報処理システムである。
＜１２＞ 前記再生制御装置は、前記動画の識別情報と前記再生時間情報と前記利用者の視線方向に関する情報を示す識別コードを前記表示装置に表示させる、前記＜４＞から前記＜１１＞のいずれか１つに記載の情報処理システムである。
＜１３＞ 前記再生制御装置は、前記動画の識別情報と前記再生時間情報とを示す音声を前記表示装置により発生させ、前記動作制御装置は、前記音声を介して取得される前記再生時間情報に基づき、前記外部装置による前記利用者の感覚に作用する動作を制御する、前記＜４＞から前記＜１２＞のいずれか１つに記載の情報処理システムである。
＜１４＞ 前記再生制御装置は、前記動画の識別情報と前記再生時間情報と前記利用者の視線方向に関する情報を示す音声を前記表示装置により発生させる、前記＜４＞から前記＜１３＞のいずれか１つに記載の情報処理システムである。
＜１５＞ 前記表示装置は頭部装着型の表示装置であって、前記再生制御装置は、前記頭部装着型の表示装置に表示される動画の再生を制御する、前記＜４＞から前記＜１４＞のいずれか１つに記載の情報処理システムである。
＜１６＞ 歩行センサにより、表示装置に表示される動画を視認する利用者の歩行状態を検出し、情報処理装置により、前記動画の識別情報と、前記利用者の歩行状態に応じた前記動画の再生時間情報と、を送信し、再生制御装置により、前記歩行状態に関する情報に基づいて、前記動画の識別情報に対応する前記動画の再生を制御し、動作制御装置により、前記再生時間情報に基づいて、外部装置による前記利用者の感覚に作用する動作を制御する処理を、情報処理システムに実行させるプログラムである。
＜１７＞ 前記情報処理装置は、さらに前記利用者の視線方向に関する情報を送信し、前記動作制御装置は、前記利用者の視線方向に関する情報をさらに基づいて、前記外部装置による前記利用者の感覚に作用する動作を制御する、前記＜１６＞に記載のプログラムである。
＜１８＞ 表示装置に表示される動画を視認する利用者の歩行状態を検出する歩行センサと、前記動画の識別情報と、前記利用者の歩行状態に応じた前記動画の再生時間情報を送信する情報処理装置と、前記再生時間情報に含まれる前記歩行状態に関する情報に基づいて、前記動画の識別情報に対応する前記動画の再生を制御する再生制御装置と、前記動画の識別情報と前記再生時間情報とに基づいてウェブ情報を表示するとともに、前記ウェブ情報に関連する処理を実行するように外部端末の動作を制御する端末制御装置と、を有する情報処理システムである。
＜１＞ 表示装置に表示される動画を視認する利用者の歩行状態を検出する歩行センサからの前記歩行状態に関する情報に基づいて、前記動画の再生を制御する再生制御部と、前記歩行状態に応じた前記動画の再生時間に基づいて、外部装置による前記利用者の感覚に作用する動作を制御する動作制御部と、を有する、情報処理装置である。
＜２＞ 前記再生制御部は、前記利用者の視線方向に関する情報にさらに基づいて、前記動画を再生する、前記＜１＞に記載の情報処理装置である。
＜３＞ 前記利用者の感覚に作用する動作は、前記利用者の周囲における照度、風、匂い、水滴、煙および気温の少なくとも１つに関する動作を含む、前記＜１＞または前記＜２＞に記載の情報処理装置である。
＜４＞ 表示装置に表示される動画を視認する利用者の歩行状態を検出する歩行センサと、前記動画の識別情報と、前記利用者の歩行状態に応じた前記動画の再生時間情報と、を送信する情報処理装置と、前記再生時間情報に含まれる前記歩行状態に関する情報に基づいて、前記動画の識別情報に対応する前記動画の再生を制御する再生制御装置と、前記再生時間情報に基づいて、外部装置による前記利用者の感覚に作用する動作を制御する動作制御装置と、を有する情報処理システムである。
＜５＞ 前記動作制御装置は、前記利用者の視線方向に関する情報にさらに基づいて、前記外部装置による前記利用者の感覚に作用する動作を制御する、前記＜４＞に記載の情報処理システムである。
＜６＞ 前記再生制御装置は、前記情報処理装置からの前記動画の識別情報に基づき、それぞれが前記識別情報に対応付けられた複数の動画を記憶する第１記憶部を参照して取得される前記動画を前記表示装置に表示させる、前記＜４＞または前記＜５＞に記載の情報処理システムである。
＜７＞ 前記動作制御装置は、前記情報処理装置からの前記再生時間情報に基づき、前記再生時間情報に対応付けられた前記外部装置の動作に関する情報を記憶する第２記憶部を参照して取得される前記動作に関する情報に応じて、前記外部装置による前記利用者の感覚に作用する動作を制御する、前記＜４＞から前記＜６＞のいずれか１つに記載の情報処理システムである。
＜８＞ 前記動画の識別情報と前記再生時間情報とに基づいてウェブ情報を表示するとともに、前記ウェブ情報に関連する処理を実行するように外部端末の動作を制御する端末制御装置をさらに有する、前記＜４＞から前記＜７＞のいずれか１つに記載の情報処理システムである。
＜９＞ 前記端末制御装置は、前記利用者の視線方向に関する情報にさらに基づいて、前記ウェブ情報を表示するとともに、前記ウェブ情報に関連する処理を実行するように前記外部端末の動作を制御する、前記＜８＞に記載の情報処理システムである。
＜１０＞ 前記情報処理装置は、前記利用者に関する情報をさらに送信し、前記動作制御装置は、前記利用者に関する情報にさらに基づいて、前記外部装置による前記利用者の感覚に作用する動作を制御する、前記＜４＞から前記＜９＞のいずれか１つに記載の情報処理システムである。
＜１１＞ 前記再生制御装置は、前記動画の識別情報と前記再生時間情報とを示す識別コードを前記表示装置に表示させ、前記表示装置に表示された前記識別コードに基づいて前記動画に関連するウェブ情報を表示するとともに、前記ウェブ情報に関連する処理を実行するように外部端末の動作を制御する端末制御装置をさらに有する、前記＜４＞から前記＜１０＞のいずれか１つに記載の情報処理システムである。
＜１２＞ 前記再生制御装置は、前記動画の識別情報と前記再生時間情報と前記利用者の視線方向に関する情報を示す識別コードを前記表示装置に表示させる、前記＜４＞から前記＜１１＞のいずれか１つに記載の情報処理システムである。
＜１３＞ 前記再生制御装置は、前記動画の識別情報と前記再生時間情報とを示す音声を前記表示装置により発生させ、前記動作制御装置は、前記音声を介して取得される前記再生時間情報に基づき、前記外部装置による前記利用者の感覚に作用する動作を制御する、前記＜４＞から前記＜１２＞のいずれか１つに記載の情報処理システムである。
＜１４＞ 前記再生制御装置は、前記動画の識別情報と前記再生時間情報と前記利用者の視線方向に関する情報を示す音声を前記表示装置により発生させる、前記＜４＞から前記＜１３＞のいずれか１つに記載の情報処理システムである。
＜１５＞ 前記表示装置は頭部装着型の表示装置であって、前記再生制御装置は、前記頭部装着型の表示装置に表示される動画の再生を制御する、前記＜４＞から前記＜１４＞のいずれか１つに記載の情報処理システムである。
＜１６＞ 歩行センサにより、表示装置に表示される動画を視認する利用者の歩行状態を検出し、情報処理装置により、前記動画の識別情報と、前記利用者の歩行状態に応じた前記動画の再生時間情報と、を送信し、再生制御装置により、前記歩行状態に関する情報に基づいて、前記動画の識別情報に対応する前記動画の再生を制御し、動作制御装置により、前記再生時間情報に基づいて、外部装置による前記利用者の感覚に作用する動作を制御する処理を、情報処理システムに実行させるプログラムである。
＜１７＞ 前記情報処理装置は、さらに前記利用者の視線方向に関する情報を送信し、前記動作制御装置は、前記利用者の視線方向に関する情報をさらに基づいて、前記外部装置による前記利用者の感覚に作用する動作を制御する、前記＜１６＞に記載のプログラムである。
＜１８＞ 表示装置に表示される動画を視認する利用者の歩行状態を検出する歩行センサと、前記動画の識別情報と、前記利用者の歩行状態に応じた前記動画の再生時間情報を送信する情報処理装置と、前記再生時間情報に含まれる前記歩行状態に関する情報に基づいて、前記動画の識別情報に対応する前記動画の再生を制御する再生制御装置と、前記動画の識別情報と前記再生時間情報とに基づいてウェブ情報を表示するとともに、前記ウェブ情報に関連する処理を実行するように外部端末の動作を制御する端末制御装置と、を有する情報処理システムである。
【符号の説明】
【0162】
１、１ａ、１ｂ、１ｃ 情報処理システム
１００、１００ａ 情報処理装置
１０１、１０１ａ ＣＰＵ
１０２、１０２ａ ＲＯＭ
１０３、１０３ａ ＲＡＭ
１０４、１０４ａ ＨＤＤ／ＳＳＤ
１０５、１０５ａ Ｉ／Ｆ
１１１ 選択受付部
１１２ 動画取得部
１１３ 歩行状態取得部
１１４ 視線方向取得部
１１５ 再生制御部
１１６ 出力部
１１７ 再生時間取得部
１１８ 動作取得部
１１９ 動作制御部
１２０ 記憶部
１２１ 第１記憶部
１２２ 第２記憶部
１２５ 対応テーブル
１３１ 再生時間取得部
１３２ 利用者情報取得部
１５０ 操作部
１８１ 動線
２００ 歩行センサ
２１０ シート状部材
２１１～２１４ 歩行検出パッド
２２０ 把持部材
２５０ 視線センサ
３００ 表示装置
３００ａ ＶＲグラス（頭部装着型の表示装置の一例）
３５０ 照明装置
４００ 空調装置
４５０ 匂い発生装置
５００ 送風装置
５５０ 再生制御装置
５５１ 受信部
５５２ 動画取得部
５５３ 送信部
５５４ コード生成部
５５５ 音声生成部
５５６ 再生制御部
５５７ 出力部
６００ 動作制御装置
６０１ 受信部
６０２ 音声変換部
６０３ 動作取得部
６０４ 送信部
６０５ 動作制御部
６０６ 出力部
６５０ 端末制御装置
６５１ 受信部
６５２ コード復号部
６５３ 端末制御部
６５４ 送信部
７００ 外部記憶サーバ
７５０ 外部端末
７５１ 野菜の一覧画面
７５２ パンの一覧画面
７５３ お土産の一覧画面
７５４ ガイド画面
７５５ チャット画面
８００ 外部ウェブサーバ
１０００ 外部装置
２０００ ネットワーク
Ｂ、Ｂａ バスライン
Ｄ１～Ｄ４ 第１～第４制御信号
Ｅ 視線情報
Ｉｍ 画像
ＩＶ 動作情報
ＭＶ 動画
Ｎ 識別情報
Ｑ 識別コード
Ｓ１～Ｓ３ 第１～第３入力信号
ＴＩ 再生時間情報
Ｕ 利用者
ＵＤ 利用者情報
Ｖ 音声
Ｗ 歩行情報
１００、１００ａ 情報処理装置
１０１、１０１ａ ＣＰＵ
１０２、１０２ａ ＲＯＭ
１０３、１０３ａ ＲＡＭ
１０４、１０４ａ ＨＤＤ／ＳＳＤ
１０５、１０５ａ Ｉ／Ｆ
１１１ 選択受付部
１１２ 動画取得部
１１３ 歩行状態取得部
１１４ 視線方向取得部
１１５ 再生制御部
１１６ 出力部
１１７ 再生時間取得部
１１８ 動作取得部
１１９ 動作制御部
１２０ 記憶部
１２１ 第１記憶部
１２２ 第２記憶部
１２５ 対応テーブル
１３１ 再生時間取得部
１３２ 利用者情報取得部
１５０ 操作部
１８１ 動線
２００ 歩行センサ
２１０ シート状部材
２１１～２１４ 歩行検出パッド
２２０ 把持部材
２５０ 視線センサ
３００ 表示装置
３００ａ ＶＲグラス（頭部装着型の表示装置の一例）
３５０ 照明装置
４００ 空調装置
４５０ 匂い発生装置
５００ 送風装置
５５０ 再生制御装置
５５１ 受信部
５５２ 動画取得部
５５３ 送信部
５５４ コード生成部
５５５ 音声生成部
５５６ 再生制御部
５５７ 出力部
６００ 動作制御装置
６０１ 受信部
６０２ 音声変換部
６０３ 動作取得部
６０４ 送信部
６０５ 動作制御部
６０６ 出力部
６５０ 端末制御装置
６５１ 受信部
６５２ コード復号部
６５３ 端末制御部
６５４ 送信部
７００ 外部記憶サーバ
７５０ 外部端末
７５１ 野菜の一覧画面
７５２ パンの一覧画面
７５３ お土産の一覧画面
７５４ ガイド画面
７５５ チャット画面
８００ 外部ウェブサーバ
１０００ 外部装置
２０００ ネットワーク
Ｂ、Ｂａ バスライン
Ｄ１～Ｄ４ 第１～第４制御信号
Ｅ 視線情報
Ｉｍ 画像
ＩＶ 動作情報
ＭＶ 動画
Ｎ 識別情報
Ｑ 識別コード
Ｓ１～Ｓ３ 第１～第３入力信号
ＴＩ 再生時間情報
Ｕ 利用者
ＵＤ 利用者情報
Ｖ 音声
Ｗ 歩行情報
【先行技術文献】
【特許文献】
【0163】
【特許文献1】特開２０２３－８１２３号公報
【図1】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】
【図8】
【図9】
【図10】
【図11】
【図12】
【図13】
【図14】
【図15】
【図16】
【図17】
【図18】
【図19】
【図20】
【図21】
【図22】
【図23】
【図24】
【図25】
【図26】
【図27】
【図28】
【図29】
【図30】
【図31】
【図32】
【図33】