知財求人 - 知財ポータルサイト「IP Force」
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】特許公報(B2)
(11)【特許番号】
(24)【登録日】2025-05-22
(45)【発行日】2025-05-30
(54)【発明の名称】情報収集システム、情報収集方法、および、情報収集プログラム
(51)【国際特許分類】
G08G 1/13 20060101AFI20250523BHJP
G08G 1/16 20060101ALI20250523BHJP
G09B 29/00 20060101ALI20250523BHJP
【ＦＩ】
G08G1/13
G08G1/16 F
G09B29/00 F
【請求項の数】
17
(21)【出願番号】P 2021140825
(22)【出願日】2021-08-31
(65)【公開番号】P2023034534
(43)【公開日】2023-03-13
【審査請求日】2024-03-06
(73)【特許権者】
【識別番号】000006013
【氏名又は名称】三菱電機株式会社
(74)【代理人】
【識別番号】110002491
【氏名又は名称】弁理士法人クロスボーダー特許事務所
(72)【発明者】
【氏名】吉田 光伸
(72)【発明者】
【氏名】川瀬 俊樹
【審査官】菅家 裕輔
(56)【参考文献】
【文献】国際公開第２０１９／２２１０７０（ＷＯ，Ａ１）
【文献】特開２０２１－０７１９１８（ＪＰ，Ａ）
【文献】特開２０１７－１６８０２４（ＪＰ，Ａ）
【文献】特開２００８－０１４９０２（ＪＰ，Ａ）
(58)【調査した分野】(Int.Cl.，ＤＢ名)
Ｇ０８Ｇ １／００－９９／００
Ｇ０１Ｃ ２１／００－２５／００
Ｇ０９Ｂ ２９／００
(57)【特許請求の範囲】
【請求項1】
移動体が移動する移動エリアにおいて情報を収集する情報収集システムにおいて、前記移動体の位置情報を取得する位置センサと、
前記移動体に乗車している乗車者の視線方向を取得する乗車者センサと、
前記移動体の位置情報と前記乗車者の視線方向とに基づいて、前記乗車者の視線方向に存在する物あるいは事象を、前記乗車者が注目する注目対象として特定する注目対象特定部と
を備え、
前記乗車者センサは、
前記乗車者の顔の表情から、前記注目対象に対する前記乗車者の感情の種別を表す感情情報を取得し、
前記情報収集システムは、
前記注目対象の位置と前記注目対象に対する前記乗車者の前記感情情報とを注目データベースに設定する注目設定部を備える情報収集システム。
【請求項2】
前記注目設定部は、前記注目データベースに設定されている注目対象に注目している乗車者の人数を集計し、前記注目対象に対する注目度を算出し、前記注目データベースに前記注目対象に対する前記注目度を設定する請求項１に記載の情報収集システム。
【請求項3】
前記情報収集システムは、前記移動エリアを含む地図に周辺の環境を表す周辺環境情報が付与された地図情報を備え、
前記注目対象特定部は、
前記地図情報から前記注目対象を特定する請求項２に記載の情報収集システム。
【請求項4】
前記情報収集システムは、前記注目対象に対する前記乗車者の前記感情情報と前記注目度とを前記地図情報に付加する地図設定部を備える請求項３に記載の情報収集システム。
【請求項5】
前記情報収集システムは、前記移動体の全周方向を撮像可能な撮像装置を備え、
前記撮像装置は、
前記乗車者の視線方向を撮像し、撮像により得られた画像を視線方向画像として出力し、
前記注目対象特定部は、
前記視線方向画像から前記注目対象を特定する請求項２に記載の情報収集システム。
【請求項6】
前記情報収集システムは、前記移動エリアを含む地図に周辺の環境を表す周辺環境情報が付与された地図情報に前記注目対象を設定するとともに、前記注目対象に対する前記乗車者の前記感情情報と前記注目度とを設定する地図設定部を備える請求項５に記載の情報収集システム。
【請求項7】
前記情報収集システムは、前記乗車者に対し、良い感情情報が付与された注目対象を見ることを推奨するための推奨情報を前記移動体の表示機器に表示する表示部を備える請求項１から請求項６のいずれか１項に記載の情報収集システム。
【請求項8】
前記情報収集システムは、前記注目対象が、前記移動エリアの管理者に対して警告を通知する通知条件を満たす場合に、前記警告を通知する通知部を備える請求項１から請求項７のいずれか１項に記載の情報収集システム。
【請求項9】
前記乗車者センサは、定期的に顔画像を送信し、前記情報収集システムは、
前記顔画像を解析し、前記乗車者の健康状態が正常か異常かを判定し、前記健康状態が異常と判定されると、前記移動エリアの管理者に対して前記乗車者の健康状態の異常を通知する分析部を備える請求項１から請求項８のいずれか１項に記載の情報収集システム。
【請求項10】
前記情報収集システムは、前記乗車者の着座の状態を検出する着座センサと、
前記乗車者が装着しているシートベルトの状態を検出するシートベルトセンサと
を備え、
前記分析部は、
前記着座センサおよび前記シートベルトセンサからのセンシング情報に基づいて、前記乗車者の着座状態が正常か異常かを判定し、前記着座状態が異常と判定されると、前記移動エリアの管理者に対して前記乗車者の着座状態の異常を通知する請求項９に記載の情報収集システム。
【請求項11】
移動体が移動する移動エリアにおいて情報を収集する情報収集システムに用いられる情報収集方法において、前記移動体の位置情報を取得し、
前記移動体に乗車している乗車者の視線方向を取得し、
前記移動体の位置情報と前記乗車者の視線方向とに基づいて、前記乗車者の視線方向に存在する物あるいは事象を、前記乗車者が注目する注目対象として特定し、
前記乗車者の顔の表情から、前記注目対象に対する前記乗車者の感情の種別を表す感情情報を取得し、
前記注目対象の位置と前記注目対象に対する前記乗車者の前記感情情報とを注目データベースに設定する情報収集方法。
【請求項12】
移動体が移動する移動エリアにおいて情報を収集する情報収集システムに用いられる情報収集プログラムにおいて、前記移動体の位置情報を取得する位置取得処理と、
前記移動体に乗車している乗車者の視線方向を取得する視線取得処理と、
前記移動体の位置情報と前記乗車者の視線方向とに基づいて、前記乗車者の視線方向に存在する物あるいは事象を、前記乗車者が注目する注目対象として特定する注目対象特定処理と、
前記乗車者の顔の表情から、前記注目対象に対する前記乗車者の感情の種別を表す感情情報を取得する処理と、
前記注目対象の位置と前記注目対象に対する前記乗車者の前記感情情報とを注目データベースに設定する注目設定処理と
をコンピュータに実行させる情報収集プログラム。
【請求項13】
移動体が移動する移動エリアにおいて情報を収集する情報収集システムにおいて、前記移動体の位置情報を取得する位置センサと、
前記移動体に乗車している乗車者の視線方向を取得する乗車者センサと、
前記移動体の位置情報と前記乗車者の視線方向とに基づいて、前記乗車者の視線方向に存在する物あるいは事象を、前記乗車者が注目する注目対象として特定する注目対象特定部と、
前記乗車者に対し、良い感情情報が付与された注目対象を見ることを推奨するための推奨情報を前記移動体の表示機器に表示する表示部と
を備える情報収集システム。
【請求項14】
移動体が移動する移動エリアにおいて情報を収集する情報収集システムにおいて、前記移動体の位置情報を取得する位置センサと、
前記移動体に乗車している乗車者の視線方向を取得する乗車者センサと、
前記移動体の位置情報と前記乗車者の視線方向とに基づいて、前記乗車者の視線方向に存在する物あるいは事象を、前記乗車者が注目する注目対象として特定する注目対象特定部と、
前記注目対象が、前記移動エリアの管理者に対して警告を通知する通知条件を満たす場合に、前記警告を通知する通知部と
を備える情報収集システム。
【請求項15】
移動体が移動する移動エリアにおいて情報を収集する情報収集システムにおいて、前記移動体の位置情報を取得する位置センサと、
前記移動体に乗車している乗車者の視線方向を取得する乗車者センサと、
前記移動体の位置情報と前記乗車者の視線方向とに基づいて、前記乗車者の視線方向に存在する物あるいは事象を、前記乗車者が注目する注目対象として特定する注目対象特定部と
を備え、
前記乗車者センサは、定期的に顔画像を送信し、
前記情報収集システムは、
前記顔画像を解析し、前記乗車者の健康状態が正常か異常かを判定し、前記健康状態が異常と判定されると、前記移動エリアの管理者に対して前記乗車者の健康状態の異常を通知する分析部を備える情報収集システム。
【請求項16】
移動体が移動する移動エリアにおいて情報を収集する情報収集システムにおいて、前記移動体の位置情報を取得する位置センサと、
前記移動体に乗車している乗車者の視線方向を取得する乗車者センサと、
前記移動体の位置情報と前記乗車者の視線方向とに基づいて、前記乗車者の視線方向に存在する物あるいは事象を、前記乗車者が注目する注目対象として特定する注目対象特定部と、
前記注目対象に注目している前記乗車者の人数を集計し、前記注目対象に対する注目度を算出し、前記注目対象に対する前記注目度を注目データベースに設定する注目設定部と
を備える情報収集システム。
【請求項17】
前記注目設定部は、前記注目対象を見ることができる位置を通過した乗車者の全人数を集計し、前記全人数のうち前記注目対象に注目した乗車者の人数を集計し、前記全人数のうち前記注目対象に注目した乗車者の割合を前記注目対象に対する前記注目度として算出する請求項１６に記載の情報収集システム。
【発明の詳細な説明】
【技術分野】
【0001】
本開示は、情報収集装置、情報収集方法、および、情報収集プログラムに関する。特に、自動運転ＰＭＶ（Ｐｅｒｓｏｎａｌ Ｍｏｂｉｌｉｔｙ Ｖｅｈｉｃｌｅ）の乗車者が移動中に注目する対象に関する情報をリアルタイムに収集する技術に関する。
【背景技術】
【0002】
自動運転ＰＭＶを利用して、テーマパーク、娯楽施設、あるいは高齢者施設といった各種施設の敷地内を移動する際、自動運転ＰＭＶの乗車者が何に注目するかといった情報を、適切、かつ、リアルタイムに収集することが求められている。自動運転ＰＭＶは、例えば、電動車いす、あるいは、シニアカーといった移動体である。
乗車者が各種施設の敷地内において注目する対象に関する情報を収集し、収集した情報を分析することで、自動運転ＰＭＶの快適性および安全性の向上に利用することができる。
乗車者が各種施設の敷地内において注目する対象に関する情報を収集し、収集した情報を分析することで、自動運転ＰＭＶの快適性および安全性の向上に利用することができる。
【0003】
特許文献１には、乗車者の顔の表情を読み取り、走行中のリンクにおける移動が快適かを推定する技術が開示されている。
【先行技術文献】
【特許文献】
【0004】
【文献】特開２０１９－００２７８９号公報
【発明の概要】
【発明が解決しようとする課題】
【0005】
特許文献１では、乗車者の顔の表情から、走行中のリンクにおける移動が快適かを推定している。特許文献１では、リンクが快適か不快かを推定するのみであり、乗車者が何を見て快適となったのか、あるいは、不快になったのかについては特定していない。よって、特許文献１では、乗車者が走行中に注目する対象に関する情報を、適切、かつ、リアルタイムに収集することができず、自動運転ＰＭＶの快適性および安全性の向上に利用することもできない。
【0006】
本開示では、自動運転ＰＭＶの走行中に、自動運転ＰＭＶの乗車者が注目している対象を、適切、かつ、リアルタイムに特定することを目的とする。
【課題を解決するための手段】
【0007】
本開示に係る情報収集システムは、移動体が移動する移動エリアにおいて情報を収集する情報収集システムにおいて、
前記移動体の位置情報を取得する位置センサと、
前記移動体に乗車している乗車者の視線方向を取得する乗車者センサと、
前記移動体の位置情報と前記乗車者の視線方向とに基づいて、前記乗車者の視線方向に存在する物あるいは事象を、前記乗車者が注目する注目対象として特定する注目対象特定部とを備える。
前記移動体の位置情報を取得する位置センサと、
前記移動体に乗車している乗車者の視線方向を取得する乗車者センサと、
前記移動体の位置情報と前記乗車者の視線方向とに基づいて、前記乗車者の視線方向に存在する物あるいは事象を、前記乗車者が注目する注目対象として特定する注目対象特定部とを備える。
【発明の効果】
【0008】
本開示に係る情報収集システムでは、注目対象特定部が、移動体の位置情報と乗車者の視線方向とに基づいて、乗車者の視線方向に存在する物あるいは事象を、乗車者が注目する注目対象として特定する。よって、本開示に係る情報収集システムによれば、移動体が移動エリアを走行中に、移動体の乗車者が注目している対象を、適切、かつ、リアルタイムに特定することができるという効果を奏する。
【図面の簡単な説明】
【0009】
【図1】実施の形態１に係る情報収集システムの全体構成例を示す図。
【図2】実施の形態１に係るＰＭＶの例を示す図。
【図3】実施の形態１に係る情報収集装置の構成例を示す図。
【図4】実施の形態１に係るサーバ装置の構成例を示す図。
【図5】実施の形態１に係る注目対象特定処理の例を示すフロー図。
【図6】実施の形態１に係る注目設定処理の例を示すフロー図。
【図7】実施の形態１に係る注目データベースの例を示す図。
【図8】実施の形態１に係る地図設定処理の例を示すフロー図。
【図9】実施の形態１に係る地図情報の例を示す図。
【図10】実施の形態１に係る推奨情報表示処理の例を示すフロー図。
【図11】実施の形態１に係る警告通知処理の例を示すフロー図。
【図12】実施の形態１の変形例１に係る注目対象特定処理の例を示すフロー図。
【図13】実施の形態１の変形例３に係る情報収集装置の構成例を示す図。
【図14】実施の形態１の変形例３に係るＰＭＶの例を示す図。
【図15】実施の形態１の変形例４に係る情報収集装置の構成例を示す図。
【発明を実施するための形態】
【0010】
以下、本実施の形態について、図を用いて説明する。各図中、同一または相当する部分には、同一符号を付している。実施の形態の説明において、同一または相当する部分については、説明を適宜省略または簡略化する。また、以下の図では各構成部材の大きさの関係が実際のものとは異なる場合がある。また、実施の形態の説明において、上、下、左、右、前、後、表、裏といった向きあるいは位置が示されている場合がある。これらの表記は、説明の便宜上の記載であり、装置、器具、あるいは部品等の配置、方向および向きを限定するものではない。
【0011】
実施の形態１．
＊＊＊構成の説明＊＊＊
図１は、本実施の形態に係る情報収集システム５００の全体構成例を示す図である。
情報収集システム５００は、移動体が移動する移動エリア８００において、各種の情報を収集するシステムである。
＊＊＊構成の説明＊＊＊
図１は、本実施の形態に係る情報収集システム５００の全体構成例を示す図である。
情報収集システム５００は、移動体が移動する移動エリア８００において、各種の情報を収集するシステムである。
【0012】
ＰＭＶ２００は、移動エリア８００を移動する移動体の例である。ＰＭＶ２００は、自動運転を実施するＰＭＶである。ＰＭＶ２００は、自動運転ＰＭＶとも呼ばれる。
図示は無いが、乗車者３０は、ＰＭＶ２００に乗車して移動する人である。乗車者３０は、ＰＭＶ２００に搭載された自動運転システムに目的地を設定することで、自ら運転することなく自動で目的地まで移動できる。このため、乗車者３０は、乗車中であっても周りの景色あるいは周辺環境を見物しながら移動することが可能である。
図示は無いが、乗車者３０は、ＰＭＶ２００に乗車して移動する人である。乗車者３０は、ＰＭＶ２００に搭載された自動運転システムに目的地を設定することで、自ら運転することなく自動で目的地まで移動できる。このため、乗車者３０は、乗車中であっても周りの景色あるいは周辺環境を見物しながら移動することが可能である。
【0013】
ＰＭＶとは、乗車する人員が、車のように空間的に囲われておらず、環境にそのままさらされるような、動力を持った乗り物を指している。具体的には、ＰＭＶとは、電動車いす、あるいは、シニアカーといった移動体を指す。特に、これらの移動体に自動運転機能を持たせたものを自動運転ＰＭＶ、あるいは、単にＰＭＶと呼ぶ。
【0014】
移動エリア８００は、高齢者施設の敷地内、娯楽施設の敷地内、あるいは、テーマパークの敷地内といった、ＰＭＶ２００が自動運転により移動するエリアを想定している。
なお、移動体が一般の道あるいは歩道といった移動エリアを移動する場合であっても、本実施の形態を適用することができる。
なお、移動体が一般の道あるいは歩道といった移動エリアを移動する場合であっても、本実施の形態を適用することができる。
【0015】
情報収集システム５００は、ＰＭＶ２００と、サーバ装置３００とを備える。また、本実施の形態では、情報収集装置１００はＰＭＶ２００に搭載されている構成とする。
ＰＭＶ２００とサーバ装置３００は、ネットワークを介して通信する。なお、サーバ装置３００は、移動エリア８００内に設置されていてもよいし、移動エリア８００外に設置されていてもよい。
ＰＭＶ２００とサーバ装置３００は、ネットワークを介して通信する。なお、サーバ装置３００は、移動エリア８００内に設置されていてもよいし、移動エリア８００外に設置されていてもよい。
【0016】
図２は、本実施の形態に係るＰＭＶ２００の例を示す図である。
ＰＭＶ２００は、移動体の例である。
ＰＭＶ２００は、位置センサ２０１と、乗車者センサ２０２と、撮像装置２０３と、自動運転システム２０４と、情報収集装置１００とを備える。
ＰＭＶ２００は、移動体の例である。
ＰＭＶ２００は、位置センサ２０１と、乗車者センサ２０２と、撮像装置２０３と、自動運転システム２０４と、情報収集装置１００とを備える。
【0017】
位置センサ２０１は、ＰＭＶ２００の位置情報を取得する。より具体的には、位置センサ２０１は、移動時におけるＰＭＶ２００の位置情報と時間とを取得する。位置センサ２０１は、例えば、ＧＰＳ（Ｇｌｏｂａｌ Ｐｏｓｉｔｉｏｎｉｎｇ Ｓｙｓｔｅｍ）である。
【0018】
乗車者センサ２０２は、ＰＭＶ２００に乗車している乗車者３０の視線方向を取得する。また、乗車者センサ２０２は、乗車者３０の顔の表情から、注目対象に対する乗車者３０の感情の種別を表す感情情報を取得する。
乗車者センサ２０２は、例えば、カメラ機能付きのスマートフォンあるいはタブレット端末である。乗車者センサ２０２は、カメラ機能により乗車者３０の顔を撮影し、撮影した顔の画像を解析することにより乗車者３０の視線方向を取得する。
また、乗車者センサ２０２は、顔の画像を解析することにより乗車者３０の感情を表す感情情報を取得する。感情情報は、顔の表情でもよい。表情が笑顔であれば、快適、楽しい、あるいはうれしいといった感情を意味すると考えられる。また、表情が険しい表情であれば、不快、怒り、あるいは悲しいといった感情を意味する。乗車者センサ２０２は、顔の画像から、顔の表情あるいは感情を表す感情情報を取得する。
乗車者センサ２０２は、例えば、カメラ機能付きのスマートフォンあるいはタブレット端末である。乗車者センサ２０２は、カメラ機能により乗車者３０の顔を撮影し、撮影した顔の画像を解析することにより乗車者３０の視線方向を取得する。
また、乗車者センサ２０２は、顔の画像を解析することにより乗車者３０の感情を表す感情情報を取得する。感情情報は、顔の表情でもよい。表情が笑顔であれば、快適、楽しい、あるいはうれしいといった感情を意味すると考えられる。また、表情が険しい表情であれば、不快、怒り、あるいは悲しいといった感情を意味する。乗車者センサ２０２は、顔の画像から、顔の表情あるいは感情を表す感情情報を取得する。
【0019】
撮像装置２０３は、全周方向を撮像可能な撮像装置２０３を備える。撮像装置２０３は、例えば、乗車者３０の視線方向を撮像する。撮像装置２０３は、情報収集装置１００からの指令に応じて、乗車者３０の視線方向を撮像する。
【0020】
自動運転システム２０４は、外部の機器とネットワークを介して通信する通信装置、自動運転の制御を実施する自動運転制御部、および地図等を表示する表示機器を備える。
【0021】
情報収集装置１００は、位置センサ２０１、乗車者センサ２０２、あるいは、撮像装置２０３から情報を取得し、移動エリア８００を移動中に乗車者３０が注目している注目対象を特定する。
情報収集装置１００は、コンピュータである。本実施の形態では、情報収集装置１００は、乗車者センサ２０２を備えるスマートフォンあるいはタブレットに搭載されている。
しかし、情報収集装置１００は、乗車者センサ２０２とは別のコンピュータに搭載されていてもよい。あるいは、位置センサ２０１、乗車者センサ２０２、および、情報収集装置１００の全てが、スマートフォンあるいはタブレットといった１つのコンピュータに搭載されていてもよい。
情報収集装置１００は、コンピュータである。本実施の形態では、情報収集装置１００は、乗車者センサ２０２を備えるスマートフォンあるいはタブレットに搭載されている。
しかし、情報収集装置１００は、乗車者センサ２０２とは別のコンピュータに搭載されていてもよい。あるいは、位置センサ２０１、乗車者センサ２０２、および、情報収集装置１００の全てが、スマートフォンあるいはタブレットといった１つのコンピュータに搭載されていてもよい。
【0022】
図３は、本実施の形態に係る情報収集装置１００の構成例を示す図である。
情報収集装置１００は、コンピュータである。情報収集装置１００は、プロセッサ９１０を備えるとともに、メモリ９２１、補助記憶装置９２２、入力インタフェース９３０、出力インタフェース９４０、および通信装置９５０といった他のハードウェアを備える。プロセッサ９１０は、信号線を介して他のハードウェアと接続され、これら他のハードウェアを制御する。
情報収集装置１００は、コンピュータである。情報収集装置１００は、プロセッサ９１０を備えるとともに、メモリ９２１、補助記憶装置９２２、入力インタフェース９３０、出力インタフェース９４０、および通信装置９５０といった他のハードウェアを備える。プロセッサ９１０は、信号線を介して他のハードウェアと接続され、これら他のハードウェアを制御する。
【0023】
情報収集装置１００は、機能要素として、情報取得部１１０とセンサ情報受信部１２０と注目対象特定部１３０と表示部１４０と記憶部１５０とを備える。記憶部１５０には、地図情報５１と注目データベース５２とが記憶される。
【0024】
情報取得部１１０とセンサ情報受信部１２０と注目対象特定部１３０と表示部１４０の機能は、ソフトウェアにより実現される。記憶部１５０は、メモリ９２１に備えられる。なお、記憶部１５０は、補助記憶装置９２２に備えられていてもよいし、メモリ９２１と補助記憶装置９２２に分散して備えられていてもよい。
【0025】
プロセッサ９１０は、情報収集プログラムを実行する装置である。情報収集プログラムは、情報取得部１１０とセンサ情報受信部１２０と注目対象特定部１３０と表示部１４０の機能を実現するプログラムである。
プロセッサ９１０は、演算処理を行うＩＣ（Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ）である。プロセッサ９１０の具体例は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）、ＤＳＰ（Ｄｉｇｉｔａｌ Ｓｉｇｎａｌ Ｐｒｏｃｅｓｓｏｒ）、ＧＰＵ（Ｇｒａｐｈｉｃｓ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）である。
プロセッサ９１０は、演算処理を行うＩＣ（Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ）である。プロセッサ９１０の具体例は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）、ＤＳＰ（Ｄｉｇｉｔａｌ Ｓｉｇｎａｌ Ｐｒｏｃｅｓｓｏｒ）、ＧＰＵ（Ｇｒａｐｈｉｃｓ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）である。
【0026】
メモリ９２１は、データを一時的に記憶する記憶装置である。メモリ９２１の具体例は、ＳＲＡＭ（Ｓｔａｔｉｃ Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）、あるいはＤＲＡＭ（Ｄｙｎａｍｉｃ Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）である。
補助記憶装置９２２は、データを保管する記憶装置である。補助記憶装置９２２の具体例は、ＨＤＤである。また、補助記憶装置９２２は、ＳＤ（登録商標）メモリカード、ＣＦ、ＮＡＮＤフラッシュ、フレキシブルディスク、光ディスク、コンパクトディスク、ブルーレイ（登録商標）ディスク、ＤＶＤといった可搬の記憶媒体であってもよい。なお、ＨＤＤは、Ｈａｒｄ Ｄｉｓｋ Ｄｒｉｖｅの略語である。ＳＤ（登録商標）は、Ｓｅｃｕｒｅ Ｄｉｇｉｔａｌの略語である。ＣＦは、ＣｏｍｐａｃｔＦｌａｓｈ（登録商標）の略語である。ＤＶＤは、Ｄｉｇｉｔａｌ Ｖｅｒｓａｔｉｌｅ Ｄｉｓｋの略語である。
補助記憶装置９２２は、データを保管する記憶装置である。補助記憶装置９２２の具体例は、ＨＤＤである。また、補助記憶装置９２２は、ＳＤ（登録商標）メモリカード、ＣＦ、ＮＡＮＤフラッシュ、フレキシブルディスク、光ディスク、コンパクトディスク、ブルーレイ（登録商標）ディスク、ＤＶＤといった可搬の記憶媒体であってもよい。なお、ＨＤＤは、Ｈａｒｄ Ｄｉｓｋ Ｄｒｉｖｅの略語である。ＳＤ（登録商標）は、Ｓｅｃｕｒｅ Ｄｉｇｉｔａｌの略語である。ＣＦは、ＣｏｍｐａｃｔＦｌａｓｈ（登録商標）の略語である。ＤＶＤは、Ｄｉｇｉｔａｌ Ｖｅｒｓａｔｉｌｅ Ｄｉｓｋの略語である。
【0027】
入力インタフェース９３０は、マウス、キーボード、あるいはタッチパネルといった入力装置と接続されるポートである。入力インタフェース９３０は、具体的には、ＵＳＢ（Ｕｎｉｖｅｒｓａｌ Ｓｅｒｉａｌ Ｂｕｓ）端子である。なお、入力インタフェース９３０は、ＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）と接続されるポートであってもよい。
【0028】
出力インタフェース９４０は、ディスプレイといった出力機器のケーブルが接続されるポートである。出力インタフェース９４０は、具体的には、ＵＳＢ端子またはＨＤＭＩ（登録商標）（Ｈｉｇｈ Ｄｅｆｉｎｉｔｉｏｎ Ｍｕｌｔｉｍｅｄｉａ Ｉｎｔｅｒｆａｃｅ）端子である。ディスプレイは、具体的には、ＬＣＤ（Ｌｉｑｕｉｄ Ｃｒｙｓｔａｌ Ｄｉｓｐｌａｙ）である。出力インタフェース９４０は、表示器インタフェースともいう。
【0029】
通信装置９５０は、レシーバとトランスミッタを有する。通信装置９５０は、ＬＡＮ、インターネット、あるいは電話回線といった通信網に接続している。通信装置９５０は、具体的には、通信チップまたはＮＩＣ（Ｎｅｔｗｏｒｋ Ｉｎｔｅｒｆａｃｅ Ｃａｒｄ）である。
【0030】
情報収集プログラムは、情報収集装置１００において実行される。情報収集プログラムは、プロセッサ９１０に読み込まれ、プロセッサ９１０によって実行される。メモリ９２１には、情報収集プログラムだけでなく、ＯＳ（Ｏｐｅｒａｔｉｎｇ Ｓｙｓｔｅｍ）も記憶されている。プロセッサ９１０は、ＯＳを実行しながら、情報収集プログラムを実行する。情報収集プログラムおよびＯＳは、補助記憶装置９２２に記憶されていてもよい。補助記憶装置９２２に記憶されている情報収集プログラムおよびＯＳは、メモリ９２１にロードされ、プロセッサ９１０によって実行される。なお、情報収集プログラムの一部または全部がＯＳに組み込まれていてもよい。
【0031】
情報収集装置１００は、プロセッサ９１０を代替する複数のプロセッサを備えていてもよい。これら複数のプロセッサは、情報収集プログラムの実行を分担する。それぞれのプロセッサは、プロセッサ９１０と同じように、情報収集プログラムを実行する装置である。
【0032】
情報収集プログラムにより利用、処理または出力されるデータ、情報、信号値および変数値は、メモリ９２１、補助記憶装置９２２、または、プロセッサ９１０内のレジスタあるいはキャッシュメモリに記憶される。
【0033】
情報取得部１１０とセンサ情報受信部１２０と注目対象特定部１３０と表示部１４０の各部の「部」を「回路」、「工程」、「手順」、「処理」、あるいは「サーキットリー」に読み替えてもよい。情報収集プログラムは、情報取得処理とセンサ情報受信処理と注目情報特定処理と表示処理を、コンピュータに実行させる。情報取得処理とセンサ情報受信処理と注目情報特定処理と表示処理の「処理」を「プログラム」、「プログラムプロダクト」、「プログラムを記憶したコンピュータ読取可能な記憶媒体」、または「プログラムを記録したコンピュータ読取可能な記録媒体」に読み替えてもよい。また、情報収集方法は、情報収集装置１００が情報収集プログラムを実行することにより行われる方法である。
情報収集プログラムは、コンピュータ読取可能な記録媒体に格納されて提供されてもよい。また、情報収集プログラムは、プログラムプロダクトとして提供されてもよい。
情報収集プログラムは、コンピュータ読取可能な記録媒体に格納されて提供されてもよい。また、情報収集プログラムは、プログラムプロダクトとして提供されてもよい。
【0034】
図４は、本実施の形態に係るサーバ装置３００の構成例を示す図である。
サーバ装置３００は、コンピュータである。サーバ装置３００は、プロセッサ９１０を備えるとともに、メモリ９２１、補助記憶装置９２２、入力インタフェース９３０、出力インタフェース９４０、および通信装置９５０といった他のハードウェアを備える。プロセッサ９１０は、信号線を介して他のハードウェアと接続され、これら他のハードウェアを制御する。
図４では、説明を簡単にするために、図３と同様の機能を有するハードウェアに同一の符号を付しているが、情報収集装置１００とサーバ装置３００とはそれぞれ別個にハードウェアを備えている。
サーバ装置３００は、コンピュータである。サーバ装置３００は、プロセッサ９１０を備えるとともに、メモリ９２１、補助記憶装置９２２、入力インタフェース９３０、出力インタフェース９４０、および通信装置９５０といった他のハードウェアを備える。プロセッサ９１０は、信号線を介して他のハードウェアと接続され、これら他のハードウェアを制御する。
図４では、説明を簡単にするために、図３と同様の機能を有するハードウェアに同一の符号を付しているが、情報収集装置１００とサーバ装置３００とはそれぞれ別個にハードウェアを備えている。
【0035】
サーバ装置３００は、機能要素として、地図設定部３１０と注目設定部３２０と情報配信部３３０と通知部３４０と記憶部３５０とを備える。記憶部３５０には、地図情報５１と注目データベース５２と通知条件５３とが記憶される。
サーバ装置３００におけるハードウェアの説明は、情報収集装置１００で説明したものと同様である。
サーバ装置３００におけるハードウェアの説明は、情報収集装置１００で説明したものと同様である。
【0036】
＊＊＊動作の説明＊＊＊
次に、本実施の形態に係る情報収集システム５００の動作について説明する。情報収集システム５００の動作手順は、情報収集方法に相当する。また、情報収集システム５００の動作を実現するプログラムは、情報収集プログラムに相当する。
次に、本実施の形態に係る情報収集システム５００の動作について説明する。情報収集システム５００の動作手順は、情報収集方法に相当する。また、情報収集システム５００の動作を実現するプログラムは、情報収集プログラムに相当する。
【0037】
【0038】
ステップＳ１０１において、情報収集装置１００の情報取得部１１０は、サーバ装置３００から配信された地図情報５１および注目データベース５２を、通信装置９５０を介して取得する。そして、情報取得部１１０は、配信された地図情報５１および注目データベース５２を記憶部１５０に記憶する。
サーバ装置３００は、移動エリア８００を移動中のＰＭＶ２００から、注目対象に関する情報を収集し、地図情報５１および注目データベース５２を更新する。そして、サーバ装置３００は、地図情報５１および注目データベース５２を更新する毎に、あるいは、定期的に、最新の地図情報５１および注目データベース５２をＰＭＶ２００に配信する。
よって、ステップＳ１０１の処理は、必ずしも注目対象特定処理の初めに実施される必要はなく、地図情報５１および注目データベース５２が配信された時点で実施すればよい。
サーバ装置３００は、移動エリア８００を移動中のＰＭＶ２００から、注目対象に関する情報を収集し、地図情報５１および注目データベース５２を更新する。そして、サーバ装置３００は、地図情報５１および注目データベース５２を更新する毎に、あるいは、定期的に、最新の地図情報５１および注目データベース５２をＰＭＶ２００に配信する。
よって、ステップＳ１０１の処理は、必ずしも注目対象特定処理の初めに実施される必要はなく、地図情報５１および注目データベース５２が配信された時点で実施すればよい。
【0039】
ステップＳ１０２において、情報収集装置１００のセンサ情報受信部１２０は、ＰＭＶ２００に搭載された各種のセンサからセンサ情報を受信する。
【0040】
具体的には、センサ情報受信部１２０は、ＰＭＶ２００の位置情報４１を位置センサ２０１から受信する。
また、センサ情報受信部１２０は、ＰＭＶ２００に乗車している乗車者３０の視線方向４２を乗車者センサ２０２から受信する。
また、センサ情報受信部１２０は、乗車者３０の感情の種別を表す感情情報４３を乗車者センサ２０２から受信する。
なお、位置情報４１と視線方向４２と感情情報４３は、時刻で紐づけられている。
また、センサ情報受信部１２０は、ＰＭＶ２００に乗車している乗車者３０の視線方向４２を乗車者センサ２０２から受信する。
また、センサ情報受信部１２０は、乗車者３０の感情の種別を表す感情情報４３を乗車者センサ２０２から受信する。
なお、位置情報４１と視線方向４２と感情情報４３は、時刻で紐づけられている。
【0041】
次に、情報収集装置１００の注目対象特定部１３０は、ＰＭＶ２００の位置情報４１と乗車者３０の視線方向４２とに基づいて、乗車者３０の視線方向４２に存在する物あるいは事象を、乗車者３０が注目する注目対象４５として特定する。
例えば、注目対象特定部１３０は、記憶部１５０に記憶されている地図情報５１から注目対象４５を特定する。
具体的には、以下の通りである。
例えば、注目対象特定部１３０は、記憶部１５０に記憶されている地図情報５１から注目対象４５を特定する。
具体的には、以下の通りである。
【0042】
まず、ステップＳ１０３において、注目対象特定部１３０は、乗車者３０の視線方向４２を絶対座標系に変換する。
位置情報４１は、ＧＰＳ等により絶対座標系における位置として取得される。また、視線方向４２は、乗車者３０の顔の画像から、ＰＭＶ２００の進行方向を基準とするＰＭＶ座標系における方向として取得される。
注目対象特定部１３０は、ＰＭＶ２００の位置情報４１からＰＭＶ２００の進行方向を算出する。ＰＭＶ２００の進行方向は絶対座標系の方向として取得される。注目対象特定部１３０は、ＰＭＶ２００の進行方向に対して視線方向４２がどの方向を向いているかを算出し、乗車者３０の視線方向４２を絶対座標系に変換する。
位置情報４１は、ＧＰＳ等により絶対座標系における位置として取得される。また、視線方向４２は、乗車者３０の顔の画像から、ＰＭＶ２００の進行方向を基準とするＰＭＶ座標系における方向として取得される。
注目対象特定部１３０は、ＰＭＶ２００の位置情報４１からＰＭＶ２００の進行方向を算出する。ＰＭＶ２００の進行方向は絶対座標系の方向として取得される。注目対象特定部１３０は、ＰＭＶ２００の進行方向に対して視線方向４２がどの方向を向いているかを算出し、乗車者３０の視線方向４２を絶対座標系に変換する。
【0043】
そして、ステップＳ１０４において、注目対象特定部１３０は、ＰＭＶ２００の位置と絶対座標系で表された視線方向とに基づいて、乗車者３０の視線方向４２に存在する物あるいは事象を注目対象４５として地図情報５１から特定する。
【0044】
なお、地図情報５１には、移動エリア８００を含む地図に周辺の環境を表す周辺環境情報が付与されている。
周辺環境情報とは、移動エリア８００内に設定された建造物、彫刻、アトラクション、植物、および動物といった、移動エリア８００において見ることができる物あるいは事象である。
また、移動エリア８００内で実施されるパレードあるいは花火といったイベント、および、移動エリア８００から見ることができる景色といった事象も周辺環境情報として地図情報５１に付与されている。
注目対象特定部１３０は、乗車者３０の視線方向４２に存在する物あるいは事象を注目対象４５として、地図情報５１に付与されている周辺環境情報から特定する。
周辺環境情報とは、移動エリア８００内に設定された建造物、彫刻、アトラクション、植物、および動物といった、移動エリア８００において見ることができる物あるいは事象である。
また、移動エリア８００内で実施されるパレードあるいは花火といったイベント、および、移動エリア８００から見ることができる景色といった事象も周辺環境情報として地図情報５１に付与されている。
注目対象特定部１３０は、乗車者３０の視線方向４２に存在する物あるいは事象を注目対象４５として、地図情報５１に付与されている周辺環境情報から特定する。
【0045】
ステップＳ１０５において、注目対象特定部１３０は、ＰＭＶ２００の位置情報４１と、注目対象４５と、視線方向４２と、注目対象４５の位置と、感情情報４３とを含む注目対象情報４０をサーバ装置３００に送信する。なお、注目対象４５が移動エリア８００外の景色である場合には、注目対象４５の位置は注目対象情報４０に含まれなくてもよい。
注目対象情報４０に含まれる、ＰＭＶ２００の位置情報４１と、注目対象４５と、視線方向４２と、注目対象４５の位置と、感情情報４３とは、時刻で紐づけられている。このため、感情情報４３は、注目対象４５に対する乗車者の感情を表すものであると推定できる。
注目対象情報４０に含まれる、ＰＭＶ２００の位置情報４１と、注目対象４５と、視線方向４２と、注目対象４５の位置と、感情情報４３とは、時刻で紐づけられている。このため、感情情報４３は、注目対象４５に対する乗車者の感情を表すものであると推定できる。
【0046】
＜注目設定処理＞
図６は、本実施の形態に係る注目設定処理の例を示すフロー図である。
サーバ装置３００の注目設定部３２０は、注目対象４５の位置と注目対象４５に対する乗車者３０の感情情報４３とを注目データベース５２に設定する。
図６は、本実施の形態に係る注目設定処理の例を示すフロー図である。
サーバ装置３００の注目設定部３２０は、注目対象４５の位置と注目対象４５に対する乗車者３０の感情情報４３とを注目データベース５２に設定する。
【0047】
ステップＳ２０１において、注目設定部３２０は、情報収集装置１００から、通信装置９５０を介して、注目対象情報４０を受信する。
ステップＳ２０２において、注目設定部３２０は、注目対象情報４０に含まれる、ＰＭＶ２００の位置情報４１と、注目対象４５と、視線方向４２と、注目対象４５の位置と、感情情報４３とを注目データベース５２に設定する。
ステップＳ２０２において、注目設定部３２０は、注目対象情報４０に含まれる、ＰＭＶ２００の位置情報４１と、注目対象４５と、視線方向４２と、注目対象４５の位置と、感情情報４３とを注目データベース５２に設定する。
【0048】
ステップＳ２０３において、注目設定部３２０は、注目対象４５に対する注目の度合いを表す注目度４８を算出する。例えば、注目設定部３２０は、過去に注目対象４５を見ることができる位置を通過した乗車者の全人数を集計するとともに、その人数のうち注目対象４５に注目した人数を集計し、全人数のうち注目対象４５に注目した乗車者の割合を注目度４８として算出する。注目度４８は、注目対象４５に対する注目の度合いを表すことができればよく、その他の算出方法で算出されても構わない。
ステップＳ２０４において、注目設定部３２０は、注目データベース５２に注目対象４５に対する注目度４８を設定する。
ステップＳ２０４において、注目設定部３２０は、注目データベース５２に注目対象４５に対する注目度４８を設定する。
【0049】
図７は、本実施の形態に係る注目データベース５２の例を示す図である。
注目データベース５２には、ＰＭＶ２００の位置範囲５２１と、注目対象５２２と、視線方向５２３と、注目対象の位置５２４と、感情情報５２５と、注目度５２６が設定される。
ＰＭＶ２００の位置範囲５２１は、注目対象５２２を見ることができる移動エリア８００内の範囲である。移動エリア８００は、予め、所定の範囲で区切られているものとする。あるいは、移動エリア８００におけるＰＭＶ２００が移動する道あるいは歩道が、予め、所定の範囲で区切られていてもよい。注目設定部３２０は、注目対象情報４０に含まれる注目対象４５と位置情報４１とに基づいて、位置範囲５２１と注目対象５２２とを設定する。
視線方向５２３は、ＰＭＶ２００の進行方向を基準としたＰＭＶ座標系で表される視線方向である。注目設定部３２０は、注目対象情報４０に含まれる視線方向４２に基づいて、視線方向５２３を設定する。
注目対象の位置５２４は、注目対象情報４０に含まれる注目対象の位置である。
感情情報５２５は、注目対象情報４０に含まれる感情情報４３である。
注目度４８は、ステップＳ２０３において算出される。
注目データベース５２には、ＰＭＶ２００の位置範囲５２１と、注目対象５２２と、視線方向５２３と、注目対象の位置５２４と、感情情報５２５と、注目度５２６が設定される。
ＰＭＶ２００の位置範囲５２１は、注目対象５２２を見ることができる移動エリア８００内の範囲である。移動エリア８００は、予め、所定の範囲で区切られているものとする。あるいは、移動エリア８００におけるＰＭＶ２００が移動する道あるいは歩道が、予め、所定の範囲で区切られていてもよい。注目設定部３２０は、注目対象情報４０に含まれる注目対象４５と位置情報４１とに基づいて、位置範囲５２１と注目対象５２２とを設定する。
視線方向５２３は、ＰＭＶ２００の進行方向を基準としたＰＭＶ座標系で表される視線方向である。注目設定部３２０は、注目対象情報４０に含まれる視線方向４２に基づいて、視線方向５２３を設定する。
注目対象の位置５２４は、注目対象情報４０に含まれる注目対象の位置である。
感情情報５２５は、注目対象情報４０に含まれる感情情報４３である。
注目度４８は、ステップＳ２０３において算出される。
【0050】
ステップＳ２０５において、情報配信部３３０は、注目データベース５２をＰＭＶ２００に配信する。
【0051】
＜地図設定処理＞
サーバ装置３００の地図設定部３１０は、注目対象４５に対する乗車者３０の感情情報４３と注目度４８とを地図情報５１に付加する。
サーバ装置３００の地図設定部３１０は、注目対象４５に対する乗車者３０の感情情報４３と注目度４８とを地図情報５１に付加する。
【0052】
図８は、本実施の形態に係る地図設定処理の例を示すフロー図である。
ステップＳ３０１において、地図設定部３１０は、注目データベース５２を参照する。
ステップＳ３０２において、地図設定部３１０は、注目設定処理により新たに注目データベース５２に設定された注目対象５２２の情報を抽出する。地図設定部３１０は、注目対象５２２と、注目対象５２２に対する乗車者３０の感情情報５２５と、注目度５２６とを、地図情報５１に付加する。
ステップＳ３０１において、地図設定部３１０は、注目データベース５２を参照する。
ステップＳ３０２において、地図設定部３１０は、注目設定処理により新たに注目データベース５２に設定された注目対象５２２の情報を抽出する。地図設定部３１０は、注目対象５２２と、注目対象５２２に対する乗車者３０の感情情報５２５と、注目度５２６とを、地図情報５１に付加する。
【0053】
図９は、本実施の形態に係る地図情報５１の例を示す図である。
例えば、図７の注目データベース５２において、移動エリア８００に設置された「家の模型」が新たに注目対象４５として特定された場合について説明する。
このとき、図７では、注目対象５２２に「家の模型」が設定され、「家の模型」が見える位置範囲５２１と、「家の模型」が注目対象として特定されたときの視線方向５２３が設定される。また、「家の模型」の位置５２４、「家の模型」に対する感情情報５２５である「笑顔」、「家の模型」の注目度５２６が「０．８」と設定される。
地図設定部３１０は、地図情報５１における「家の模型」の位置に、注目対象４５であることを表すマークと、「笑顔」を表すマークと、注目度「０．８」とを付加する。
例えば、図７の注目データベース５２において、移動エリア８００に設置された「家の模型」が新たに注目対象４５として特定された場合について説明する。
このとき、図７では、注目対象５２２に「家の模型」が設定され、「家の模型」が見える位置範囲５２１と、「家の模型」が注目対象として特定されたときの視線方向５２３が設定される。また、「家の模型」の位置５２４、「家の模型」に対する感情情報５２５である「笑顔」、「家の模型」の注目度５２６が「０．８」と設定される。
地図設定部３１０は、地図情報５１における「家の模型」の位置に、注目対象４５であることを表すマークと、「笑顔」を表すマークと、注目度「０．８」とを付加する。
【0054】
＜推奨情報表示処理＞
情報収集装置１００の表示部１４０は、乗車者３０に対し、良い感情情報が付与された注目対象４５を見ることを推奨するための推奨情報をＰＭＶ２００の表示機器に表示する。
情報収集装置１００の表示部１４０は、乗車者３０に対し、良い感情情報が付与された注目対象４５を見ることを推奨するための推奨情報をＰＭＶ２００の表示機器に表示する。
【0055】
図１０は、本実施の形態に係る推奨情報表示処理の例を示すフロー図である。
ステップＳ４０１において、表示部１４０は、注目データベース５２を参照する。
ステップＳ４０２において、表示部１４０は、良い感情情報が付与された注目対象４５に対応する位置にＰＭＶ２００が近づいているかを判定する。表示部１４０は、良い感情情報が付与された注目対象４５に対応する位置にＰＭＶ２００が近づいていると判定すると、その注目対象４５を見ることをおすすめする推奨情報４６を表示機器に表示する。
ステップＳ４０１において、表示部１４０は、注目データベース５２を参照する。
ステップＳ４０２において、表示部１４０は、良い感情情報が付与された注目対象４５に対応する位置にＰＭＶ２００が近づいているかを判定する。表示部１４０は、良い感情情報が付与された注目対象４５に対応する位置にＰＭＶ２００が近づいていると判定すると、その注目対象４５を見ることをおすすめする推奨情報４６を表示機器に表示する。
【0056】
＜警告通知処理＞
サーバ装置３００の通知部３４０は、注目対象４５が、移動エリア８００の管理者に対して警告４７を通知する通知条件５３を満たす場合に、警告４７を通知する。
サーバ装置３００の通知部３４０は、注目対象４５が、移動エリア８００の管理者に対して警告４７を通知する通知条件５３を満たす場合に、警告４７を通知する。
【0057】
図１１は、本実施の形態に係る警告通知処理の例を示すフロー図である。
ステップＳ５０１において、通知部３４０は、注目データベース５２を参照する。
ステップＳ５０１において、通知部３４０は、注目データベース５２を参照する。
【0058】
ステップＳ５０２において、通知部３４０は、注目データベース５２のなかに、通知条件５３を満たす注目対象４５があるか否かを判定する。
例えば、通知条件が、悪い感情情報であり、かつ、注目度が０．４以上の場合であるとする。このとき、通知部３４０は、注目データベース５２を参照し、悪い感情情報であり、かつ、注目度が０．４以上の注目対象４５を検索する。
通知部３４０は、通知条件５３を満たす注目対象４５があればステップＳ５０３に進み、無ければステップＳ５０１に戻る。
例えば、通知条件が、悪い感情情報であり、かつ、注目度が０．４以上の場合であるとする。このとき、通知部３４０は、注目データベース５２を参照し、悪い感情情報であり、かつ、注目度が０．４以上の注目対象４５を検索する。
通知部３４０は、通知条件５３を満たす注目対象４５があればステップＳ５０３に進み、無ければステップＳ５０１に戻る。
【0059】
ステップＳ５０３において、通知部３４０は、移動エリア８００の管理者に対して警告４７を通知する。通知部３４０は、サーバ装置３００の表示機器といった出力機器に警告４７を出力してもよいし、予め登録されたメールに警告４７を送信してもよい。
【0060】
例えば、図９に示すように、移動エリア８００内に、ゴミがあふれているゴミ箱がある場合、近くを通過するＰＭＶ２００の乗車者３０はゴミ箱の方を見て、不快な表情をする可能性が高い。このような場合には、リアルタイムに管理者に警告４７が通知されるので、管理者は移動エリア８００内における不快要因に対して直ちに対策をとることができる。
【0061】
＊＊＊他の構成＊＊＊
＜変形例１＞
本実施の形態では、注目対象特定部１３０は、地図情報５１から注目対象４５を特定している。変形例１では、その他の方法で注目対象４５を特定する態様について説明する。
＜変形例１＞
本実施の形態では、注目対象特定部１３０は、地図情報５１から注目対象４５を特定している。変形例１では、その他の方法で注目対象４５を特定する態様について説明する。
【0062】
図１２は、本実施の形態の変形例１に係る注目対象特定処理の例を示すフロー図である。
図１２において、ステップＳ１０２からステップＳ１０３、およびステップＳ１０５の処理は、図５と同様である。
また、ステップＳ１０３の後に新たにステップＳ１０６の処理が加わり、その後ステップＳ１０４に替えてステップＳ１０４ａを実施する。
図１２において、ステップＳ１０２からステップＳ１０３、およびステップＳ１０５の処理は、図５と同様である。
また、ステップＳ１０３の後に新たにステップＳ１０６の処理が加わり、その後ステップＳ１０４に替えてステップＳ１０４ａを実施する。
【0063】
ＰＭＶ２００は、全周方向を撮像可能な撮像装置２０３を備える。撮像装置２０３は、情報収集装置１００からの指令に応じて、乗車者３０の視線方向を撮像する。
【0064】
ステップＳ１０６において、注目対象特定部１３０は、ステップＳ１０３で絶対座標系に変換された視線方向を撮像する指示を撮像装置２０３に送信する。撮像装置２０３は、乗車者３０の視線方向を撮像し、撮像により得られた画像を視線方向画像４４として出力する。
ステップＳ１０４ａにおいて、注目対象特定部１３０は、視線方向画像４４から注目対象４５を特定する。
ステップＳ１０４ａにおいて、注目対象特定部１３０は、視線方向画像４４から注目対象４５を特定する。
【0065】
このように、撮像装置２０３により撮像された視線方向画像４４から注目対象４５を特定することにより、地図情報５１から判別できない注目対象４５を特定することができるという効果がある。
【0066】
＜変形例２＞
本実施の形態では、情報収集装置１００は、乗車者センサ２０２が備えるスマートフォンあるいはタブレットに搭載されているものとして説明した。
しかし、情報収集装置１００は、乗車者センサ２０２とは別のコンピュータに搭載されていてもよい。あるいは、位置センサ２０１、乗車者センサ２０２、および、情報収集装置１００の全てが、スマートフォンあるいはタブレットといった１つのコンピュータに搭載されていてもよい。
また、情報収集装置１００の一部の機能、あるいは、すべての機能がサーバ装置３００に搭載されていてもよい。
本実施の形態では、情報収集装置１００は、乗車者センサ２０２が備えるスマートフォンあるいはタブレットに搭載されているものとして説明した。
しかし、情報収集装置１００は、乗車者センサ２０２とは別のコンピュータに搭載されていてもよい。あるいは、位置センサ２０１、乗車者センサ２０２、および、情報収集装置１００の全てが、スマートフォンあるいはタブレットといった１つのコンピュータに搭載されていてもよい。
また、情報収集装置１００の一部の機能、あるいは、すべての機能がサーバ装置３００に搭載されていてもよい。
【0067】
また、本実施の形態では、乗車者センサ２０２において、視線方向および感情情報を解析するものとした。しかし、乗車者センサ２０２は、乗車者の顔画像のみを情報収集装置１００に送信し、情報収集装置１００において乗車者の視線方向および感情情報を解析してもよい。
【0068】
＜変形例３＞
図１３は、本実施の形態の変形例３に係る情報収集装置１００の構成例を示す図である。
図１４は、本実施の形態の変形例３に係るＰＭＶ２００の例を示す図である。
変形例３では、ＰＭＶに搭載されたセンサを用いて、乗車者３０の安全を確保するための安全確保方式について説明する。
本実施の形態の変形例３に係る情報収集装置１００では、図３の構成に加え、分析部１６０を備える。
また、本実施の形態の変形例３に係るＰＭＶ２００では、図２の構成に加え、着座センサ２０５とシートベルトセンサ２０６を備える。
図１３は、本実施の形態の変形例３に係る情報収集装置１００の構成例を示す図である。
図１４は、本実施の形態の変形例３に係るＰＭＶ２００の例を示す図である。
変形例３では、ＰＭＶに搭載されたセンサを用いて、乗車者３０の安全を確保するための安全確保方式について説明する。
本実施の形態の変形例３に係る情報収集装置１００では、図３の構成に加え、分析部１６０を備える。
また、本実施の形態の変形例３に係るＰＭＶ２００では、図２の構成に加え、着座センサ２０５とシートベルトセンサ２０６を備える。
【0069】
＜＜安全確保方式の例１＞＞
乗車者センサ２０２は、定期的に顔画像４９１を送信する。
分析部１６０は、顔画像４９１を解析し、乗車者３０の健康状態が正常か異常かを判定する。分析部１６０は、健康状態が異常と判定されると、移動エリア８００の管理者に対して乗車者３０の健康状態の異常を通知する。
安全確保方式の例１の場合は、着座センサ２０５とシートベルトセンサ２０６は無くてもよい。
乗車者センサ２０２は、定期的に顔画像４９１を送信する。
分析部１６０は、顔画像４９１を解析し、乗車者３０の健康状態が正常か異常かを判定する。分析部１６０は、健康状態が異常と判定されると、移動エリア８００の管理者に対して乗車者３０の健康状態の異常を通知する。
安全確保方式の例１の場合は、着座センサ２０５とシートベルトセンサ２０６は無くてもよい。
【0070】
＜＜安全確保方式の例２＞＞
着座センサ２０５は、乗車者３０の着座の状態を検出する。
シートベルトセンサ２０６は、乗車者３０が装着しているシートベルトの状態を検出する。
分析部１６０は、着座センサ２０５およびシートベルトセンサ２０６からのセンシング情報４９２に基づいて、乗車者３０の着座状態が正常か異常かを判定する。着座状態が異常と判定されると、分析部１６０は、移動エリア８００の管理者に対して乗車者の着座状態の異常を通知する。
なお、着座センサ２０５とシートベルトセンサ２０６のいずれか一方を用いて、着座状態の異常を検出してもよい。
着座センサ２０５は、乗車者３０の着座の状態を検出する。
シートベルトセンサ２０６は、乗車者３０が装着しているシートベルトの状態を検出する。
分析部１６０は、着座センサ２０５およびシートベルトセンサ２０６からのセンシング情報４９２に基づいて、乗車者３０の着座状態が正常か異常かを判定する。着座状態が異常と判定されると、分析部１６０は、移動エリア８００の管理者に対して乗車者の着座状態の異常を通知する。
なお、着座センサ２０５とシートベルトセンサ２０６のいずれか一方を用いて、着座状態の異常を検出してもよい。
【0071】
上記のような安全確保方式により、以下のような乗車者の危険あるいは異常を検知することができる。
・寝てしまっていて危険である。
・向くべき方向を見ていない。例えば、横断歩道前なのに信号を見ていない、あるいは、衝突しそうな接近物があるのにそちらを向いていない。
・顔色が悪い、腫れている、および血が出ているといった、明らかに具合が悪い様子である。
・ずり落ちそう、あるいは、偏って倒れそうといった、顔の位置がおかしい。
・寝てしまっていて危険である。
・向くべき方向を見ていない。例えば、横断歩道前なのに信号を見ていない、あるいは、衝突しそうな接近物があるのにそちらを向いていない。
・顔色が悪い、腫れている、および血が出ているといった、明らかに具合が悪い様子である。
・ずり落ちそう、あるいは、偏って倒れそうといった、顔の位置がおかしい。
【0072】
＜変形例４＞
本実施の形態では、情報取得部１１０とセンサ情報受信部１２０と注目対象特定部１３０と表示部１４０の機能がソフトウェアで実現される。変形例４として、情報取得部１１０とセンサ情報受信部１２０と注目対象特定部１３０と表示部１４０の機能がハードウェアで実現されてもよい。
具体的には、情報収集装置１００は、プロセッサ９１０に替えて電子回路９０９を備える。
本実施の形態では、情報取得部１１０とセンサ情報受信部１２０と注目対象特定部１３０と表示部１４０の機能がソフトウェアで実現される。変形例４として、情報取得部１１０とセンサ情報受信部１２０と注目対象特定部１３０と表示部１４０の機能がハードウェアで実現されてもよい。
具体的には、情報収集装置１００は、プロセッサ９１０に替えて電子回路９０９を備える。
【0073】
図１５は、本実施の形態の変形例４に係る情報収集装置１００の構成例を示す図である。
電子回路９０９は、情報取得部１１０とセンサ情報受信部１２０と注目対象特定部１３０と表示部１４０の機能を実現する専用の電子回路である。電子回路９０９は、具体的には、単一回路、複合回路、プログラム化したプロセッサ、並列プログラム化したプロセッサ、ロジックＩＣ、ＧＡ、ＡＳＩＣ、または、ＦＰＧＡである。ＧＡは、Ｇａｔｅ Ａｒｒａｙの略語である。ＡＳＩＣは、Ａｐｐｌｉｃａｔｉｏｎ Ｓｐｅｃｉｆｉｃ Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔの略語である。ＦＰＧＡは、Ｆｉｅｌｄ－Ｐｒｏｇｒａｍｍａｂｌｅ Ｇａｔｅ Ａｒｒａｙの略語である。
電子回路９０９は、情報取得部１１０とセンサ情報受信部１２０と注目対象特定部１３０と表示部１４０の機能を実現する専用の電子回路である。電子回路９０９は、具体的には、単一回路、複合回路、プログラム化したプロセッサ、並列プログラム化したプロセッサ、ロジックＩＣ、ＧＡ、ＡＳＩＣ、または、ＦＰＧＡである。ＧＡは、Ｇａｔｅ Ａｒｒａｙの略語である。ＡＳＩＣは、Ａｐｐｌｉｃａｔｉｏｎ Ｓｐｅｃｉｆｉｃ Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔの略語である。ＦＰＧＡは、Ｆｉｅｌｄ－Ｐｒｏｇｒａｍｍａｂｌｅ Ｇａｔｅ Ａｒｒａｙの略語である。
【0074】
情報取得部１１０とセンサ情報受信部１２０と注目対象特定部１３０と表示部１４０の機能は、１つの電子回路で実現されてもよいし、複数の電子回路に分散して実現されてもよい。
【0075】
別の変形例として、情報取得部１１０とセンサ情報受信部１２０と注目対象特定部１３０と表示部１４０の一部の機能が電子回路で実現され、残りの機能がソフトウェアで実現されてもよい。また、情報取得部１１０とセンサ情報受信部１２０と注目対象特定部１３０と表示部１４０の一部またはすべての機能がファームウェアで実現されてもよい。
【0076】
プロセッサと電子回路の各々は、プロセッシングサーキットリとも呼ばれる。つまり、情報取得部１１０とセンサ情報受信部１２０と注目対象特定部１３０と表示部１４０の機能は、プロセッシングサーキットリにより実現される。
【0077】
なお、サーバ装置３００についても、情報収集装置１００と同様に、情報取得部１１０とセンサ情報受信部１２０と注目対象特定部１３０と表示部１４０の機能がハードウェアで実現されてもよい。
【0078】
＊＊＊本実施の形態の効果の説明＊＊＊
本実施の形態によれば、以下の効果がある。
・テーマパークあるいは娯楽施設にとっては、何に注目して何が嫌がられているかを特定することができる。
・観光スポットにとっては、何が人気なのかがわからないということが無くなる。
・笑顔によりどういったものが受けるか、険しい表情によりそこにはなにか問題有りか、リアルタイムで特定することができる。
・これらの情報から、ある位置を通過時に特定の方向を向いて表情が変わる所を特定することができる。
本実施の形態によれば、以下の効果がある。
・テーマパークあるいは娯楽施設にとっては、何に注目して何が嫌がられているかを特定することができる。
・観光スポットにとっては、何が人気なのかがわからないということが無くなる。
・笑顔によりどういったものが受けるか、険しい表情によりそこにはなにか問題有りか、リアルタイムで特定することができる。
・これらの情報から、ある位置を通過時に特定の方向を向いて表情が変わる所を特定することができる。
【0079】
さらに、本実施の形態によれば、以下の効果がある。
・不快なものがあれば、センターに警告が行くので、移動エリアを快適に保つことが容易となる。
・Ｂ看板を置いてみたらどれくらい注目されるのかといったデータを得ることができる。
・不快なものがあれば、センターに警告が行くので、移動エリアを快適に保つことが容易となる。
・Ｂ看板を置いてみたらどれくらい注目されるのかといったデータを得ることができる。
【0080】
さらに、本実施の形態によれば、笑顔になる位置あるいは時刻に偏りがあるかを検出することができる。
笑顔になる位置、時刻に偏りがある場合、どういった場所、向いている方向から何を見たときに笑顔になっているのかを分析することによって、どういったものが受けるのかという事の基礎データとすることができる。
・逆に険しい表情になる位置、時刻に偏りがある場合、そこにはなにか問題があると予想できる。
さらに、本実施の形態によれば、向いている方向に偏りがあるかを検出することができる。
ある位置で向いている方向に偏りがあるということは、その方向には注目度の高いものが存在するといえる。逆にそうでない場合は、注目度は低いといえる。
例えば遊園地などで大きな展示用のオブジェを制作した場合、その周りにいる人がどの程度その方向を向いているかにより注目度を測ることができる。これがオブジェの無い場合と全く同じであるなら、そのオブジェは全く注目されていないと判定できる。これは花火を打ち上げたら、どの程度の注目を集められるかといったデータ取得に利用することができる。
どちらの場合でも、「偏りがある」と判定した場合、そちらの方向を撮像するカメラを設置することによって、何を見てそうなったのかの情報収集を同時に行うことができる。
笑顔になる位置、時刻に偏りがある場合、どういった場所、向いている方向から何を見たときに笑顔になっているのかを分析することによって、どういったものが受けるのかという事の基礎データとすることができる。
・逆に険しい表情になる位置、時刻に偏りがある場合、そこにはなにか問題があると予想できる。
さらに、本実施の形態によれば、向いている方向に偏りがあるかを検出することができる。
ある位置で向いている方向に偏りがあるということは、その方向には注目度の高いものが存在するといえる。逆にそうでない場合は、注目度は低いといえる。
例えば遊園地などで大きな展示用のオブジェを制作した場合、その周りにいる人がどの程度その方向を向いているかにより注目度を測ることができる。これがオブジェの無い場合と全く同じであるなら、そのオブジェは全く注目されていないと判定できる。これは花火を打ち上げたら、どの程度の注目を集められるかといったデータ取得に利用することができる。
どちらの場合でも、「偏りがある」と判定した場合、そちらの方向を撮像するカメラを設置することによって、何を見てそうなったのかの情報収集を同時に行うことができる。
【0081】
本実施の形態に係る情報収集システム５００における安全確保方式は、特に、シートベルトをしていない場合に有効である。
自動運転ＰＭＶの需要として、泥酔者あるいは認知機能が衰えた老人の自動帰宅が予測される。このような人たちを乗せた場合、最初は正しく着座していても、しばらくすると姿勢が崩れて、ＰＭＶから脱落する危険性がある。
着座センサにより、姿勢が崩れて、脱落しかかっている事を察知した場合、以下の状況回避策を取ることができる。
・脱落しても比較的安全と思われる場所にて停止する。
・脱落しかかっていることを音、光、振動、あるいはそれらの組み合わせにより乗っている本人に通知する。
・脱落しかかっていることを通信で、管理者あるいは保護者に通知する。
自動運転ＰＭＶの需要として、泥酔者あるいは認知機能が衰えた老人の自動帰宅が予測される。このような人たちを乗せた場合、最初は正しく着座していても、しばらくすると姿勢が崩れて、ＰＭＶから脱落する危険性がある。
着座センサにより、姿勢が崩れて、脱落しかかっている事を察知した場合、以下の状況回避策を取ることができる。
・脱落しても比較的安全と思われる場所にて停止する。
・脱落しかかっていることを音、光、振動、あるいはそれらの組み合わせにより乗っている本人に通知する。
・脱落しかかっていることを通信で、管理者あるいは保護者に通知する。
【0082】
また、本実施の形態に係る情報収集システム５００における安全確保方式により、このような人が乗りやすい、あるいは、このような状況が起こりやすい場所を特定することも可能である。これにより、より安全に配慮したＰＭＶを配車することができ、問題を事前に回避できる。
【0083】
以上の実施の形態１では、情報収集システムの各部を独立した機能ブロックとして説明した。しかし、情報収集システムの構成は、上述した実施の形態のような構成でなくてもよい。情報収集システムの機能ブロックは、上述した実施の形態で説明した機能を実現することができれば、どのような構成でもよい。また、情報収集システムは、１つの装置でなく、複数の装置から構成されていてもよい。
また、実施の形態１のうち、複数の部分を組み合わせて実施しても構わない。あるいは、この実施の形態のうち、１つの部分を実施しても構わない。その他、この実施の形態を、全体としてあるいは部分的に、どのように組み合わせて実施しても構わない。
すなわち、実施の形態１では、各実施の形態の自由な組み合わせ、あるいは各実施の形態の任意の構成要素の変形、もしくは各実施の形態において任意の構成要素の省略が可能である。
また、実施の形態１のうち、複数の部分を組み合わせて実施しても構わない。あるいは、この実施の形態のうち、１つの部分を実施しても構わない。その他、この実施の形態を、全体としてあるいは部分的に、どのように組み合わせて実施しても構わない。
すなわち、実施の形態１では、各実施の形態の自由な組み合わせ、あるいは各実施の形態の任意の構成要素の変形、もしくは各実施の形態において任意の構成要素の省略が可能である。
【0084】
なお、上述した実施の形態は、本質的に好ましい例示であって、本開示の範囲、本開示の適用物の範囲、および本開示の用途の範囲を制限することを意図するものではない。上述した実施の形態は、必要に応じて種々の変更が可能である。
【符号の説明】
【0085】
４０ 注目対象情報、４１ 位置情報、４２ 視線方向、４３ 感情情報、４４ 視線方向画像、４５ 注目対象、４６ 推奨情報、４７ 警告、４８ 注目度、４９１ 顔画像、４９２ センシング情報、５１ 地図情報、５２ 注目データベース、５３ 通知条件、３０ 乗車者、１００ 情報収集装置、１１０ 情報取得部、１２０ センサ情報受信部、１３０ 注目対象特定部、１４０ 表示部、１５０ 記憶部、１６０ 分析部、２００ ＰＭＶ、２０１ 位置センサ、２０２ 乗車者センサ、２０３ 撮像装置、２０４ 自動運転システム、２０５ 着座センサ、２０６ シートベルトセンサ、３００ サーバ装置、３１０ 地図設定部、３２０ 注目設定部、３３０ 情報配信部、３４０ 通知部、３５０ 記憶部、５００ 情報収集システム、５２１ 位置範囲、５２２ 注目対象、５２３ 視線方向、５２４ 位置、５２５ 感情情報、５２６ 注目度、８００ 移動エリア、９０９ 電子回路、９１０ プロセッサ、９２１ メモリ、９２２ 補助記憶装置、９３０ 入力インタフェース、９４０ 出力インタフェース、９５０ 通信装置。
【図1】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】
【図8】
【図9】
【図10】
【図11】
【図12】
【図13】
【図14】
【図15】