特許 6775555 情報処理装置、情報処理方法及び情報処理プログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】6775555

(24)【登録日】2020年10月8日

(45)【発行日】2020年10月28日

(54)【発明の名称】情報処理装置、情報処理方法及び情報処理プログラム

(51)【国際特許分類】

   G06Q 50/10 20120101AFI20201019BHJP

   G06T 7/00 20170101ALI20201019BHJP

【ＦＩ】

   G06Q50/10

   G06T7/00 Z

【請求項の数】11

【全頁数】15

(21)【出願番号】特願2018-162159(P2018-162159)

(22)【出願日】2018年8月30日

(65)【公開番号】特開2020-35238(P2020-35238A)

(43)【公開日】2020年3月5日

【審査請求日】2019年3月7日

【早期審査対象出願】

(73)【特許権者】

【識別番号】319013263

【氏名又は名称】ヤフー株式会社

(74)【代理人】

【識別番号】110002147

【氏名又は名称】特許業務法人酒井国際特許事務所

(72)【発明者】

【氏名】兵藤 安昭

(72)【発明者】

【氏名】二宮 一浩

(72)【発明者】

【氏名】西岡 孝章

【審査官】 渡邉 加寿磨

(56)【参考文献】

【文献】 特開２００８−２６２５３（ＪＰ，Ａ）

【文献】 特開２００５−６５０２６（ＪＰ，Ａ）

【文献】 特開２０１７−１５２９６４（ＪＰ，Ａ）

【文献】 特開２０１８−４５６９７（ＪＰ，Ａ）

【文献】 特開２０１５−１５８８６６（ＪＰ，Ａ）

【文献】 特開２０１６−１２５８５１（ＪＰ，Ａ）

【文献】 特開２０１３−１３４６０１（ＪＰ，Ａ）

【文献】 米国特許出願公開第２０１５／０３１０４５９（ＵＳ，Ａ１）

【文献】 特開２０１２−１２３５６７（ＪＰ，Ａ）

(58)【調査した分野】（Int.Cl.，ＤＢ名）

Ｇ０６Ｑ １０／００ − ９９／００

Ｇ１６Ｈ １０／００ − ８０／００

Ｇ０１Ｃ ２１／００

Ｈ０４Ｎ ７／１８

Ｇ０６Ｔ ７／６０

(57)【特許請求の範囲】

【請求項1】

移動体の移動経路上の施設の周囲の画像情報を取得する取得部と、
前記施設の周囲の画像情報から、前記施設の外壁のうち前記施設の情報が掲示された範囲を、外壁掲示部分として抽出し、抽出された外壁掲示部分に基づいて、前記施設の状況の情報として、前記施設の開店時間又は閉店時間に関する情報を抽出する抽出部と、
を有することを特徴とする情報処理装置。

【請求項2】

前記抽出部は、前記施設の状況の情報として、前記施設の稼働に関する情報を抽出することを特徴とする請求項１に記載の情報処理装置。

【請求項3】

前記施設の稼働に関する情報は、開店、開店終了、閉店及び移転に関する情報、開店時間の情報、開店終了時間の情報、並びに、緊急時の対応に関する情報のうちいずれか１つを含むことを特徴とする請求項２に記載の情報処理装置。

【請求項4】

前記抽出部は、前記施設の周囲の画像情報から、前記施設の付近に設けられた、前記施設を利用するための領域の範囲を、施設利用部分として抽出し、抽出された施設利用部分に基づいて、前記施設の状況の情報として、前記施設の利用者に関する情報を抽出することを特徴とする請求項１から請求項３のいずれか１項に記載の情報処理装置。

【請求項5】

前記施設の利用者に関する情報は、行列の有無に関する情報、並びに、駐車場の利用率に関する情報のうちいずれか１つを含むことを特徴とする請求項４に記載の情報処理装置。

【請求項6】

前記抽出部は、新しく抽出した前記施設の状況の情報と、過去における同一の前記施設の状況の情報とを比較して、前記施設の変化の情報を取得することを特徴とする請求項１から請求項５のいずれか１項に記載の情報処理装置。

【請求項7】

前記抽出部は、前記施設の変化の情報が所定の条件を満たす場合、前記移動体の使用者に通知することを特徴とする請求項６に記載の情報処理装置。

【請求項8】

前記移動体内に向けて音声を発生する音声発生部をさらに有し、
前記抽出部は、前記施設の変化の情報として普段の人気に関わらず空いているという意味の情報を取得した場合、前記施設の利用を推薦する旨の音声を前記音声発生部に発生させることを特徴とする請求項７に記載の情報処理装置。

【請求項9】

無線で情報を通信する通信部をさらに有し、
前記抽出部は、前記通信部を介して、前記施設の状況の情報を自動的にサーバに送信することを特徴とする請求項１から請求項８のいずれか１項に記載の情報処理装置。

【請求項10】

移動体の移動経路上の施設の周囲の画像情報を取得する施設画像取得ステップと、
前記施設の周囲の画像情報から、前記施設の外壁のうち前記施設の情報が掲示された範囲を、外壁掲示部分として抽出し、抽出された外壁掲示部分に基づいて、前記施設の状況の情報として、前記施設の開店時間又は閉店時間に関する情報を抽出する施設状況抽出ステップと、
を有することを特徴とする情報処理方法。

【請求項11】

コンピュータに、
移動体の移動経路上の施設の周囲の画像情報を取得する施設画像取得手順と、
前記施設の周囲の画像情報から、前記施設の外壁のうち前記施設の情報が掲示された範囲を、外壁掲示部分として抽出し、抽出された外壁掲示部分に基づいて、前記施設の状況の情報として、前記施設の開店時間又は閉店時間に関する情報を抽出する施設状況抽出手順と、
を実行させるための情報処理プログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、情報処理装置、情報処理方法及び情報処理プログラムに関する。

【背景技術】

【0002】

従来、ある施設における行列の待ち人数及び待ち時間を通知することが可能な技術が知られている。このような技術として、行列の全体を撮影した画像データを処理して、行列の待ち人数を判定し、行列の待ち人数の変動を計算して行列の待ち時間を計算して、これらの情報を通知する技術が知られている（例えば、特許文献１）。

【先行技術文献】

【特許文献】

【0003】

【特許文献1】特開２０１０−１７６２２５号公報

【発明の概要】

【発明が解決しようとする課題】

【0004】

特許文献１には、その技術が用いられた施設について、行列の待ち人数及び待ち時間を取得することについて記載されているものの、行く先々での様々な施設について、行列の待ち人数及び待ち時間を取得することについては、記載も示唆もされていない。このため、特許文献１に記載の方法では、行く先々での様々な施設の状況を取得することができないという問題があった。

【0005】

本発明は、上記に鑑みてなされたものであって、行く先々での様々な施設の状況を取得することができる情報処理装置、情報処理方法及び情報処理プログラムを提供することを目的とする。

【課題を解決するための手段】

【0006】

上述した課題を解決し、目的を達成するために、情報処理装置は、移動体の移動経路上の施設の周囲の画像情報を取得する取得部と、前記施設の周囲の画像情報に基づいて、前記施設の状況の情報を抽出する抽出部と、を有することを特徴とする。

【発明の効果】

【0007】

本発明によれば、行く先々での様々な施設の状況を取得することができる情報処理装置、情報処理方法及び情報処理プログラムを提供することができる。

【図面の簡単な説明】

【0008】

【図1】図１は、実施形態に係る情報処理装置の一例を説明する説明図である。

【図2】図２は、図１の情報処理装置の制御ブロック図である。

【図3】図３は、図１の情報処理装置が取得する画像情報の一例を説明する説明図である。

【図4】図４は、図１の情報処理装置が取得する画像情報の別の一例を説明する説明図である。

【図5】図５は、実施形態に係る情報処理方法のフローチャートである。

【図6】図６は、情報処理装置の機能を実現するコンピュータの一例を示すハードウェア構成図である。

【発明を実施するための形態】

【0009】

以下に、本発明に係る実施形態を図面に基づいて詳細に説明する。なお、この実施形態によりこの発明が限定されるものではない。また、実施形態における構成要素には、当業者が置換可能かつ容易なもの、あるいは実質的に同一のものが含まれる。さらに、以下に記載した構成要素は適宜組み合わせることが可能である。

【0010】

〔１．情報処理装置の一例〕
図１は、実施形態に係る情報処理装置の一例を説明する説明図である。実施形態に係る情報処理装置１０は、図１に示すように、車両に例示される移動体２０の内部に搭載されている。本実施形態では、情報処理装置１０を搭載している移動体２０が、図１に示すように、施設３０に向かって移動する形態、すなわち、移動体２０の移動経路上に施設３０が所在する形態について説明するが、本発明はこれに限定されず、適宜いかなる経路を移動しても良い。

【0011】

本実施形態では、施設３０は、外窓３１と、外壁掲示部３２と、出入扉３３と、行列領域３４と、駐車場３５と、を有する。外窓３１は、施設３０の外壁をくり抜いて設けられ、施設３０の内部の光の少なくとも一部を通過させる。外壁掲示部３２は、施設３０の外壁に設けられ、施設３０の稼働に関する情報、例えば、開店、開店終了、閉店及び移転に関する情報、開店時間の情報、開店終了時間の情報、並びに、緊急時の対応に関する情報を施設３０の外側を通過する客を含む人々に向けて掲示している。また、外壁掲示部３２は、駐車場３５の位置がややこしい場合、及び、施設３０から離れている場合等のいずれかである場合には、駐車場３５の位置に関する情報を掲示していても良い。出入扉３３は、施設３０の外壁に設けられ、客を含む人々が施設３０への出入りを可能にしている。行列領域３４は、施設３０の出入扉３３の付近に設けられ、施設３０の利用者、すなわち客が多いために、施設３０への入場及び利用を待っている人々が、行列を作る領域である。駐車場３５は、施設３０の付近に、行列領域３４よりは少し離れて設けられ、移動体２０の使用者が施設３０を利用することを目的として移動体２０を駐車するための領域である。

【0012】

情報処理装置１０は、図１に示すように、インターネット上にアップロードされているサーバ４０と、情報通信可能に接続されており、取得した施設３０の状況に関する情報である状況情報４１をサーバ４０に送信することができる。また、情報処理装置１０は、サーバ４０に格納されている他の施設３０の利用者による状況情報４１を、サーバ４０から受信することができる。

【0013】

〔２．情報処理装置の構成〕
図２は、図１の情報処理装置の制御ブロック図である。情報処理装置１０は、図２に示すように、取得部１１と、抽出部１２と、記憶部１３と、通信部１４と、音声発生部１５と、を有する。

【0014】

（取得部１１について）
取得部１１は、移動体２０の外側の情報を取得する部位であり、移動体２０の外側の画像を撮影するカメラが例示され、記憶部１３と共にドライブレコーダーとしての機能を有する。

【0015】

（抽出部１２について）
抽出部１２は、コントローラ（controller）であり、例えば、ＣＰＵ（Central Processing Unit）やＭＰＵ（Micro Processing Unit）等によって、情報処理装置１０内部の記憶装置である記憶部１３に記憶されている各種プログラム（情報処理プログラムの一例に相当）がＲＡＭ（Random Access Memory）を作業領域として実行されることにより実現される。また、抽出部１２は、例えば、コントローラであり、ＡＳＩＣ（Application Specific Integrated Circuit）やＦＰＧＡ（Field Programmable Gate Array）等の集積回路により実現される。なお、抽出部１２は、移動体２０の使用者からの情報の入力を受け付けたり、移動体２０の使用者に情報の出力を行ったりする入出力インターフェイス装置が接続されていてもよい。

【0016】

抽出部１２は、図２に示すように、記憶部１３と、互いに情報通信可能に電気的に接続されている。また、抽出部１２は、記憶部１３とともに、取得部１１、通信部１４及び音声発生部１５と情報通信可能に電気的に接続されており、これらの各構成要素をそれぞれ制御する制御部として機能する。すなわち、抽出部１２は、記憶部１３とともに、制御部として機能して、本発明の実施形態に係る評価方法を情報処理装置１０に実行させるものである。

【0017】

（記憶部１３について）
記憶部１３は、例えば、ＲＯＭ（Read Only Memory）、ＲＡＭ（Random Access Memory)、フラッシュメモリ（Flash Memory）等の半導体メモリ素子、または、ハードディスク、光ディスク等の記憶装置によって実現される。

【0018】

（通信部１４について）
通信部１４は、無線の情報通信インターフェイスであり、抽出部１２とサーバ４０とを無線で互いに情報通信可能に接続している。すなわち、抽出部１２は、通信部１４を介して、抽出部１２が本発明の実施形態に係る評価方法を実行することで取得する状況情報４１をサーバ４０に向けて発信することができ、また、サーバ４０に格納された状況情報４１を受信することができる。

【0019】

（音声発生部１５について）
音声発生部１５は、移動体２０の内側に向けて音声を発生するスピーカが例示される。なお、本実施形態では、音声発生部１５が設けられているが、これに限定されず、音声の内容と同等の画像または映像を移動体２０の内側に向けて表示するディスプレイが設けられた形態でも良く、移動体２０の内側に向けて音声の発生に加えて画像または映像も表示する媒体が設けられた形態でも良い。

【0020】

〔３．情報処理装置の取得情報〕
図３は、図１の情報処理装置が取得する画像情報の一例を説明する説明図である。図４は、図１の情報処理装置が取得する画像情報の別の一例を説明する説明図である。情報処理装置１０の取得部１１は、移動体２０が図１に示す位置にある時に、移動体２０の移動中または停止中等に、進行方向に向かって移動体２０の外側を撮影することで、施設３０の状況に応じて、例えば、図３に示す第１画像５１、または、図４に示す第２画像５２等を取得することができる。なお、取得部１１は、移動体２０の外側の動画を録画して取得しても良いし、併せて移動体２０の外側における音声を録音して取得しても良い。取得部１１は、取得した画像、動画及び音声等の情報を、記憶部１３に記憶させる。

【0021】

第１画像５１及び第２画像５２は、それぞれ図３及び図４に示すように、いずれも、移動体２０の進行方向に向かって左側の奥寄りに該当する左上の領域に、施設３０の像を有しており、外窓３１、外壁掲示部３２、出入扉３３、行列領域３４及び駐車場３５の各像を有している。なお、第１画像５１及び第２画像５２の詳細な説明については、情報処理装置１０の作用の説明の所で行う。

【0022】

〔４．情報処理の一例〕
本発明の実施形態に係る情報処理装置１０の作用について以下に説明する。図５は、実施形態に係る情報処理方法のフローチャートである。情報処理装置１０によって実行される本発明の実施形態に係る情報処理方法について、情報処理装置１０の各部の詳細な機能と併せて、図５を用いて説明する。実施形態に係る情報処理方法は、図５に示すように、施設画像取得ステップＳ１１と、施設状況抽出ステップＳ１２と、を有する。

【0023】

施設画像取得ステップＳ１１は、取得部１１が、移動体２０の移動経路上の施設３０の周囲の画像情報を取得するステップである。施設画像取得ステップＳ１１では、具体的には、取得部１１が、進行方向に向かって移動体２０の外側を撮影することで、移動体２０がこれから近づこうとする施設３０を含む周囲の画像、例えば第１画像５１または第２画像５２を取得する。なお、施設画像取得ステップＳ１１では、取得部１１が、移動体２０の外側の動画または音声の情報を取得しても良い。本実施形態に係る情報処理方法は、このように、施設画像取得ステップＳ１１で移動体２０の移動経路上の施設３０の周囲の画像情報を取得すると、施設状況抽出ステップＳ１２に移行する。

【0024】

施設状況抽出ステップＳ１２は、抽出部１２が、施設画像取得ステップＳ１１で取得した施設３０の周囲の画像情報に基づいて、施設３０の状況の情報である状況情報４１を抽出するステップである。

【0025】

施設状況抽出ステップＳ１２では、まず、施設画像取得ステップＳ１１で取得した画像情報、例えば、第１画像５１または第２画像５２に基づいて、施設３０の状況を表す部分を抽出する。施設状況抽出ステップＳ１２では、具体的には、抽出部１２が、第１画像５１または第２画像５２から、施設３０の建物そのものに加え、施設３０における外窓３１、外壁掲示部３２、出入扉３３、行列領域３４及び駐車場３５の各像を抽出する。

【0026】

施設状況抽出ステップＳ１２では、次に、抽出部１２が、抽出した施設３０の状況を表す各部分に基づいて、施設３０の状況を抽出する。施設状況抽出ステップＳ１２では、詳細には、抽出部１２が、施設３０の建物の全体または一部の状況に基づいて、鎖が施されているか否かの情報、黄色と黒色の斜めの太線が交互に配された模様を有するトラテープが施されているか否かの情報、施設３０のブランドマークが掲げられているか否かの情報、施設３０のブランドマークが外された跡があるか否かの情報、並びに、足場の鉄パイプが組み立てられているか否かの情報等を、状況情報４１として抽出する。

【0027】

施設状況抽出ステップＳ１２では、さらに、抽出部１２が、上記のように抽出した施設３０の建物の状況情報４１に基づいて、施設３０に関するさらに詳細な状況情報４１である施設３０の稼働に関する情報のうち、開店、開店終了、閉店及び移転に関する情報等を、状況情報４１として抽出する。施設状況抽出ステップＳ１２では、詳細には、抽出部１２が、施設３０の建物に鎖が施されている場合、閉店または移転している可能性がある旨の状況情報４１を抽出し、施設３０の建物に鎖が施されていない場合、施設３０が所定の時間によって開店状態と開店終了状態とを繰り返す営業状態にある可能性がある旨の状況情報４１を抽出する。施設状況抽出ステップＳ１２では、また、抽出部１２が、施設３０の建物にトラテープが施されている場合と施されていない場合、施設３０のブランドマークが掲げられていない場合と掲げられている場合、施設３０のブランドマークが外された跡がある場合と跡がない場合、並びに、足場の鉄パイプが組み立てられている場合と組み立てられていない場合についても、施設３０の建物に鎖が施されている場合と施されていない場合についてと同様に、前者について閉店または移転している可能性がある旨の状況情報４１を抽出し、後者について施設３０が営業状態にある可能性がある旨の状況情報４１を抽出する。

【0028】

施設状況抽出ステップＳ１２では、また、抽出部１２が、外窓３１から施設３０の内部の光の少なくとも一部が通過してきて明るい像となっているか否かの状況等に基づいて、施設３０の内部の電気が点灯されているか否か等の状況情報４１を抽出する。施設状況抽出ステップＳ１２では、さらに、抽出部１２が、上記のように抽出した施設３０の外窓３１の状況情報４１に基づいて、施設３０に関するさらに詳細な状況情報４１である施設３０の稼働に関する情報のうち、開店、開店終了、閉店及び移転に関する情報等を、状況情報４１として抽出する。施設状況抽出ステップＳ１２では、詳細には、抽出部１２が、外窓３１の状況から施設３０の内部の電気が点灯されている場合、施設３０が営業状態にあって開店している可能性がある旨の状況情報４１を抽出し、外窓３１の状況から施設３０の内部の電気が点灯されていない場合、施設３０が開店終了状態、もしくは、閉店または移転している可能性がある旨の状況情報４１を抽出する。

【0029】

施設状況抽出ステップＳ１２では、また、抽出部１２が、外壁掲示部３２の像に含まれている種々の掲示情報に基づいて、施設３０の稼働に関する情報、例えば、開店、開店終了、閉店及び移転に関する情報、開店時間の情報、開店終了時間の情報、緊急時の対応に関する情報、並びに、駐車場３５の位置に関する情報等を、状況情報４１として抽出する。施設状況抽出ステップＳ１２では、例えば、外壁掲示部３２に営業時間が掲示されている場合、抽出部１２が、営業状態である旨の情報と、開店時間及び開店終了時間の情報とを状況情報４１として抽出するとともに、現在の時刻の情報に応じて、開店状態である旨の情報または開店終了状態である旨の情報を、状況情報４１として抽出する。施設状況抽出ステップＳ１２では、また、外壁掲示部３２に閉店した旨の掲示がされている場合、抽出部１２が、閉店している旨の情報を、状況情報４１として抽出する。施設状況抽出ステップＳ１２では、また、外壁掲示部３２に移転した旨及び移転先に関する情報の掲示がされている場合、抽出部１２が、移転した旨の情報及び移転先に関する情報を、状況情報４１として抽出する。施設状況抽出ステップＳ１２では、また、外壁掲示部３２に緊急時の対応に関する情報の掲示がされている場合、抽出部１２が、緊急時の対応に関する情報を、状況情報４１として抽出する。施設状況抽出ステップＳ１２では、また、駐車場３５の位置に関する情報が掲示されている場合、抽出部１２が、駐車場３５の位置に関する情報を、状況情報４１として抽出することができ、施設３０を利用する可能性のある移動体２０の使用者に対し、音声発生部１５の音声等により通知することが好ましい。

【0030】

施設状況抽出ステップＳ１２では、また、抽出部１２が、出入扉３３の像に含まれている、出入扉３３に白い紙が貼られているか否かの情報、並びに、白い紙が貼られている場合にはその白い紙に記載の情報等を、状況情報４１として抽出する。施設状況抽出ステップＳ１２では、そして、出入扉３３に営業時間が変更された旨の白い紙が貼られている場合、抽出部１２が、外壁掲示部３２の像に含まれている種々の掲示情報に基づく状況情報４１の抽出と同様の方法で、貼られた白い紙に記載の情報に基づいて状況情報４１の抽出を実行する。

【0031】

施設状況抽出ステップＳ１２では、また、抽出部１２が、行列領域３４の像に含まれている、施設３０への入場及び利用を待っている人々の作る行列があるか否かの情報、行列に参加している人数の情報、並びに、行列の長さの情報等を、状況情報４１として抽出する。施設状況抽出ステップＳ１２では、さらに、抽出部１２が、抽出したこれらの行列領域３４における施設３０の利用者に関する状況情報４１から、施設３０の稼働に関する状況情報４１を抽出する。施設状況抽出ステップＳ１２では、詳細には、抽出部１２が、行列領域３４に行列がある場合、施設３０の稼働に関する情報として、施設３０が開店状態である旨の情報を、状況情報４１として抽出する一方で、行列領域３４に行列がない場合、施設３０の稼働に関する情報として、施設３０が開店終了状態、もしくは、閉店または移転している可能性がある旨の情報を、状況情報４１として抽出する。

【0032】

施設状況抽出ステップＳ１２では、また、抽出部１２が、駐車場３５の像に含まれている、移動体２０の使用者が施設３０を利用することを目的として駐車している移動体２０があるか否かの情報、駐車された移動体２０の数の情報、並びに、駐車場３５の利用率に関する情報等を、状況情報４１として抽出する。施設状況抽出ステップＳ１２では、さらに、抽出部１２が、抽出したこれらの駐車場３５における施設３０の利用者に関する状況情報４１から、施設３０の稼働に関する状況情報４１を抽出する。施設状況抽出ステップＳ１２では、詳細には、抽出部１２が、駐車場３５に駐車している移動体２０がある場合、施設３０の稼働に関する情報として、施設３０が開店状態である旨の情報を、状況情報４１として抽出する一方で、駐車場３５に駐車している移動体２０がない場合、施設３０の稼働に関する情報として、施設３０が開店終了状態、もしくは、閉店または移転している可能性がある旨の情報を、状況情報４１として抽出する。施設状況抽出ステップＳ１２では、また、抽出部１２が、駐車場３５の像に基づいて、駐車場３５の位置に関する情報を、状況情報４１として抽出することができ、施設３０を利用する可能性のある移動体２０の使用者に対し、音声発生部１５の音声等により通知することが好ましい。

【0033】

施設状況抽出ステップＳ１２では、具体的には、施設画像取得ステップＳ１１で第１画像５１を取得した場合、抽出部１２が、第１画像５１に基づいて、施設３０の建物には鎖が施されておらず、トラテープが施されておらず、施設３０のブランドマークが掲げられておらず、施設３０のブランドマークが外された跡がなく、足場の鉄パイプが組み立てられていない旨の状況情報４１を抽出し、この施設３０の建物の状況からは、営業状態にある可能性がある旨の状況情報４１を抽出する。施設状況抽出ステップＳ１２では、また、抽出部１２が、第１画像５１に基づいて、外窓３１から施設３０の内部の光の少なくとも一部が通過してきて明るい像となっていることから、施設３０の内部の電気が点灯されている旨の状況情報４１を抽出し、この外窓３１の状況からは、施設３０が営業状態にあって開店している可能性がある旨の状況情報４１を抽出する。

【0034】

施設状況抽出ステップＳ１２では、また、抽出部１２が、第１画像５１に基づいて、行列領域３４に行列があり、行列に３人参加している旨の状況情報４１を抽出し、この行列領域３４の状況からは、施設３０が開店状態である旨の状況情報４１を抽出する。施設状況抽出ステップＳ１２では、また、抽出部１２が、第１画像５１に基づいて、駐車場３５に駐車している移動体２０があり、移動体２０が３台あり、駐車場３５の利用率が１００％である旨の状況情報４１を抽出し、この駐車場３５の状況からは、施設３０が開店状態である旨の状況情報４１を抽出する。

【0035】

施設状況抽出ステップＳ１２では、このように、抽出部１２は、第１画像５１に基づいて、様々な状況情報４１を抽出し、それらを集約して高い精度の状況情報４１とした結果、施設３０が開店状態である可能性が極めて高い旨の施設３０の稼働に関する状況情報４１と、施設３０の利用を待つ行列ができていて３人待ちであり、施設３０の利用のために駐車場３５の３台分の全てのスペースが使用されているという、施設３０の利用者に関する状況情報４１と、を抽出することができる。

【0036】

施設状況抽出ステップＳ１２では、具体的には、施設画像取得ステップＳ１１で第２画像５２を取得した場合、抽出部１２が、第２画像５２に基づいて、施設３０の建物には鎖が施されておらず、トラテープが施されておらず、施設３０のブランドマークが掲げられておらず、施設３０のブランドマークが外された跡がなく、足場の鉄パイプが組み立てられていない旨の状況情報４１を抽出し、この施設３０の建物の状況からは、営業状態にある可能性がある旨の状況情報４１を抽出する。施設状況抽出ステップＳ１２では、また、抽出部１２が、第２画像５２に基づいて、外窓３１から施設３０の内部の光が通過してきておらず暗い像となっていることから、施設３０の内部の電気が点灯されていない旨の状況情報４１を抽出し、この外窓３１の状況からは、施設３０が開店終了状態、もしくは、閉店または移転している可能性がある旨の状況情報４１を抽出する。

【0037】

施設状況抽出ステップＳ１２では、また、抽出部１２が、第２画像５２に基づいて、行列領域３４に行列がない旨の状況情報４１を抽出し、この行列領域３４の状況からは、施設３０が開店終了状態、もしくは、閉店または移転している可能性がある旨の状況情報４１を抽出する。施設状況抽出ステップＳ１２では、また、抽出部１２が、第２画像５２に基づいて、駐車場３５に駐車している移動体２０がない旨の状況情報４１を抽出し、この駐車場３５の状況からは、施設３０が開店終了状態、もしくは、閉店または移転している可能性がある旨の状況情報４１を抽出する。

【0038】

施設状況抽出ステップＳ１２では、このように、抽出部１２は、第２画像５２に基づいて、施設３０が開店終了状態、もしくは、閉店または移転している可能性が比較的高い旨の施設３０の稼働に関する状況情報４１と、施設３０の利用を待つ行列がなく、施設３０の利用のために駐車場３５が使用されていないという、施設３０の利用者に関する状況情報４１と、を抽出することができる。

【0039】

施設状況抽出ステップＳ１２では、抽出部１２は、さらに、通信部１４を介して、施設３０についての種々の状況情報４１を自動的にサーバ４０にアップロードすることで、状況情報４１をインターネット上で第三者と共有可能な状態にしたり、施設３０のサービスを提供している関係者にフィードバックをしたりすることが好ましい。なお、情報処理装置１０は、施設状況抽出ステップＳ１２において抽出部１２がサーバ４０にアップロードした施設３０の状況情報４１のうち、緊急時の対応に関する情報を、災害等が発生した場合等の緊急時等に、情報処理装置１０を搭載している移動体２０を使用しており、なおかつ、施設３０の付近にいる使用者たちに広く拡散することができ、好適に活用することができる。

【0040】

施設状況抽出ステップＳ１２では、さらに、移動体２０が施設３０の付近を通過する際に、または、施設３０に向かって移動している際に、抽出部１２が、新しく抽出したばかりの現在の施設３０の状況情報４１と、過去に抽出した同一の施設３０の状況情報４１とを比較して、施設３０の状況の変化の情報を取得することが好ましい。もしくは、施設状況抽出ステップＳ１２では、さらに、移動体２０が施設３０の付近を通過する際に、または、施設３０に向かって移動している際に、抽出部１２が、通信部１４を介して、他の利用者が使用する情報処理装置１０からサーバ４０にアップロードされた施設３０に関する過去の状況情報４１を自動的にダウンロードして、そのアップロードされたときの同一の施設３０の過去の状況情報４１と、新しく抽出したばかりの現在の施設３０の状況情報４１とを比較して、施設３０の状況の変化の情報を取得することが好ましい。

【0041】

施設状況抽出ステップＳ１２では、さらに、抽出部１２が、取得した施設３０の状況の変化の情報が所定の条件を満たすか否かを判定し、所定の条件を満たす場合、移動体２０の使用者に、音声発生部１５の音声等により通知することが好ましい。ここで、所定の条件とは、比較をした２つの状況情報４１を抽出した時期の間において、施設３０が閉店または移転した場合、及び、施設３０の利用者に関する状況情報４１が著しく異なる場合、等が例示される。

【0042】

施設状況抽出ステップＳ１２では、さらに、施設３０の利用者に関する状況情報４１が著しく異なる場合であって、抽出部１２が、施設３０の変化の情報として普段の人気に関わらず空いているという意味の情報を取得した場合、施設３０の利用を推薦する旨の音声を音声発生部１５に発生させることが好ましい。

【0043】

〔５．ハードウェア構成〕
上述してきた実施形態に係る情報処理装置１０は、例えば図６に示すような構成のコンピュータ１０００によって実現される。図６は、情報処理装置１０の機能を実現するコンピュータ１０００の一例を示すハードウェア構成図である。コンピュータ１０００は、ＣＰＵ１１００、ＲＡＭ１２００、ＲＯＭ１３００、ＨＤＤ１４００、通信インターフェイス（Ｉ／Ｆ）１５００、入出力インターフェイス（Ｉ／Ｆ）１６００、及びメディアインターフェイス（Ｉ／Ｆ）１７００を有する。

【0044】

ＣＰＵ１１００は、ＲＯＭ１３００又はＨＤＤ１４００に記憶されたプログラムに基づいて動作し、各部の制御を行う。ＲＯＭ１３００は、コンピュータ１０００の起動時にＣＰＵ１１００によって実行されるブートプログラムや、コンピュータ１０００のハードウェアに依存するプログラム等を記憶する。

【0045】

ＨＤＤ１４００は、ＣＰＵ１１００によって実行されるプログラム、及び、かかるプログラムによって使用されるデータ等を記憶する。通信インターフェイス１５００は、通信網５００を介して他の機器からデータを受信してＣＰＵ１１００へ送り、ＣＰＵ１１００が生成したデータを、通信網５００を介して他の機器へ送信する。

【0046】

ＣＰＵ１１００は、入出力インターフェイス１６００を介して、ディスプレイやプリンタ等の出力装置、及び、キーボードやマウス等の入力装置を制御する。ＣＰＵ１１００は、入出力インターフェイス１６００を介して、入力装置からデータを取得する。また、ＣＰＵ１１００は、入出力インターフェイス１６００を介して生成したデータを出力装置へ出力する。

【0047】

メディアインターフェイス１７００は、記録媒体１８００に記憶されたプログラム又はデータを読み取り、ＲＡＭ１２００を介してＣＰＵ１１００に提供する。ＣＰＵ１１００は、かかるプログラムを、メディアインターフェイス１７００を介して記録媒体１８００からＲＡＭ１２００上にロードし、ロードしたプログラムを実行する。記録媒体１８００は、例えばＤＶＤ（Digital Versatile Disc）、ＰＤ（Phase change rewritable Disk）等の光学記録媒体、ＭＯ（Magneto-Optical disk）等の光磁気記録媒体、テープ媒体、磁気記録媒体、または半導体メモリ等である。

【0048】

例えば、コンピュータ１０００が実施形態に係る情報処理装置１０として機能する場合、コンピュータ１０００のＣＰＵ１１００は、ＲＡＭ１２００上にロードされたプログラムを実行することにより、抽出部１２の機能を実現する。また、ＨＤＤ１４００には、記憶部１３内のデータが記憶される。コンピュータ１０００のＣＰＵ１１００は、これらのプログラムを記録媒体１８００から読み取って実行するが、他の例として、他の装置から通信網５００を介してこれらのプログラムを取得してもよい。

【0049】

〔６．その他〕
また、上記実施形態において説明した各処理のうち、自動的に行われるものとして説明した処理の全部または一部を手動的に行うこともでき、あるいは、手動的に行われるものとして説明した処理の全部または一部を公知の方法で自動的に行うこともできる。この他、上記文書中や図面中で示した処理手順、具体的名称、各種のデータやパラメータを含む情報については、特記する場合を除いて任意に変更することができる。例えば、各図に示した各種情報は、図示した情報に限られない。

【0050】

また、図示した各装置の各構成要素は機能概念的なものであり、必ずしも物理的に図示の如く構成されていることを要しない。すなわち、各装置の分散・統合の具体的形態は図示のものに限られず、その全部または一部を、各種の負荷や使用状況などに応じて、任意の単位で機能的または物理的に分散・統合して構成することができる。例えば、図２に示した記憶部１３に記憶される情報は、通信部１４等のネットワークを介して、外部に備えられた所定の記憶装置に記憶されてもよい。

【0051】

また、上記実施形態では、情報処理装置１０が、例えば、移動体２０の移動経路上の施設３０の周囲の画像情報を取得する施設画像取得ステップＳ１１と、施設３０の周囲の画像情報に基づいて、施設３０の状況情報４１を抽出する施設状況抽出ステップＳ１２と、を行う例を示した。しかし、上述した情報処理装置１０は、施設画像取得ステップＳ１１を行う施設画像取得装置と、施設状況抽出ステップＳ１２を行う施設状況抽出装置とに分離されてもよい。そして、上記の情報処理装置１０による処理は、施設画像取得装置と、施設状況抽出装置との各装置を有する情報処理システムによって実現される。

【0052】

また、上述してきた実施形態及び変形例は、処理内容を矛盾させない範囲で適宜組み合わせることが可能である。

【0053】

〔７．効果〕
上述してきたように、実施形態に係る情報処理装置１０は、取得部１１と、抽出部１２と、を有する。取得部１１は、移動体２０の移動経路上の施設３０の周囲の画像情報を取得する。抽出部１２は、施設３０の周囲の画像情報に基づいて、施設３０の状況の情報を抽出する。

【0054】

このように、実施形態に係る情報処理装置１０は、移動体２０の移動経路上の施設３０の周囲の画像情報に基づいて、その施設３０の状況情報４１を抽出するので、移動体２０の使用者が行く先々での様々な施設３０の状況を取得することができる。また、実施形態に係る情報処理装置１０は、移動体２０が施設３０のある現地で撮影した画像情報に基づいて、施設３０の状況を取得することができるので、インターネット上にアップロードされていない場合、もしくは、インターネット上にアップロードされているものが最新の状態が反映されていない等のために間違っている状態にある場合でも、正確な街の情報等を取得することができる。

【0055】

また、抽出部１２は、施設３０の状況情報４１として、施設３０の稼働に関する情報を抽出する。

【0056】

このように、実施形態に係る情報処理装置１０は、その施設３０における客の行列等に関係のない部分の施設３０の状況、すなわち、施設３０側が決めていることによる施設３０の状況を好適に取得することができる。

【0057】

さらに、この施設３０の稼働に関する情報は、開店、開店終了、閉店及び移転に関する情報、開店時間の情報、開店終了時間の情報、並びに、緊急時の対応に関する情報のうちいずれか１つを含む。

【0058】

このように、実施形態に係る情報処理装置１０は、その施設３０における客の行列等に関係のない部分の施設３０の状況、すなわち、施設３０側が決めていることによる施設３０の状況を、詳細にわたって細かく、取得することができる。

【0059】

また、抽出部１２は、施設３０の状況情報４１として、施設３０の利用者に関する情報を抽出する。

【0060】

このように、実施形態に係る情報処理装置１０は、その施設３０における客の行列等に関係のある部分の施設３０の状況を好適に取得することができる。

【0061】

さらに、この施設３０の利用者に関する情報は、行列の有無に関する情報、並びに、駐車場３５の利用率に関する情報のうちいずれか１つを含む。

【0062】

このように、実施形態に係る情報処理装置１０は、その施設３０における客の行列等に関係のある部分の施設３０の状況を、詳細にわたって細かく、取得することができる。

【0063】

また、抽出部１２は、新しく抽出した施設３０の状況情報４１と、過去における同一の施設３０の状況情報４１とを比較して、施設３０の変化の情報を取得する。

【0064】

このように、実施形態に係る情報処理装置１０は、同一の施設３０について、施設３０の状況の変化を好適に取得することができる。

【0065】

また、抽出部１２は、さらに、施設３０の変化の情報が所定の条件を満たす場合、移動体２０の使用者に通知する。

【0066】

このように、実施形態に係る情報処理装置１０は、施設３０の状況の変化に基づいて、移動体２０の使用者がその施設３０を利用するか否かを判断することを可能にする。

【0067】

また、移動体２０内に向けて音声を発生する音声発生部１５をさらに有し、抽出部１２は、施設３０の変化の情報として普段の人気に関わらず空いているという意味の情報を取得した場合、施設３０の利用を推薦する旨の音声を音声発生部１５に発生させる。

【0068】

このように、実施形態に係る情報処理装置１０は、普段の人気に関わらず空いているという状況を知った上で、移動体２０の使用者がその施設３０の利用の推薦を受けることを可能にする。

【0069】

また、無線で情報を通信する通信部１４をさらに有し、抽出部１２は、通信部１４を介して、施設３０の状況情報４１を自動的にサーバ４０に送信する。

【0070】

このように、実施形態に係る情報処理装置１０は、施設３０の利用者が特段のサーバ４０へのアップロードに関する作業をすることなく、施設３０の状況を第三者が得ることができる形にすることができる。

【0071】

また、実施形態に係る情報処理方法は、施設画像取得ステップＳ１１と、施設状況抽出ステップＳ１２と、を有する。施設画像取得ステップＳ１１は、移動体２０の移動経路上の施設３０の周囲の画像情報を取得するステップである。施設状況抽出ステップＳ１２は、施設３０の周囲の画像情報に基づいて、施設３０の状況情報４１を抽出するステップである。

【0072】

このように、実施形態に係る情報処理方法は、移動体２０の移動経路上の施設３０の周囲の画像情報に基づいて、その施設３０の状況情報４１を抽出するので、移動体２０の使用者が行く先々での様々な施設３０の状況を取得することができる。また、実施形態に係る情報処理方法は、移動体２０が施設３０のある現地で撮影した画像情報に基づいて、施設３０の状況を取得することができるので、インターネット上にアップロードされていない場合、もしくは、インターネット上にアップロードされているものが最新の状態が反映されていない等のために間違っている状態にある場合でも、正確な街の情報等を取得することができる。

【0073】

また、実施形態に係る情報処理プログラムは、コンピュータ１０００に、施設画像取得手順と、施設状況抽出手順と、を実行させるためのものである。施設画像取得手順は、移動体２０の移動経路上の施設３０の周囲の画像情報を取得する手順である。施設状況抽出手順は、施設３０の周囲の画像情報に基づいて、施設３０の状況情報４１を抽出する手順である。

【0074】

このように、実施形態に係る情報処理プログラムは、コンピュータ１０００に、移動体２０の移動経路上の施設３０の周囲の画像情報に基づいて、その施設３０の状況情報４１を抽出させるので、移動体２０の使用者が行く先々での様々な施設３０の状況を取得させることができる。また、実施形態に係る情報処理プログラムは、コンピュータ１０００に、移動体２０が施設３０のある現地で撮影した画像情報に基づいて、施設３０の状況を取得させることができるので、インターネット上にアップロードされていない場合、もしくは、インターネット上にアップロードされているものが最新の状態が反映されていない等のために間違っている状態にある場合でも、正確な街の情報等を取得させることができる。

【0075】

以上、本願の実施形態を図面に基づいて詳細に説明したが、これは例示であり、発明の開示の欄に記載の態様を始めとして、当業者の知識に基づいて種々の変形、改良を施した他の形態で本発明を実施することが可能である。

【0076】

また、上述してきた「部（section、module、unit）」は、「手段」や「回路」などに読み替えることができる。例えば、取得部は、取得手段や取得回路に読み替えることができる。

【符号の説明】

【0077】

１０ 情報処理装置
１１ 取得部
１２ 抽出部
１３ 記憶部
１４ 通信部
１５ 音声発生部
２０ 移動体
３０ 施設
３１ 外窓
３２ 外壁掲示部
３３ 出入扉
３４ 行列領域
３５ 駐車場
４０ サーバ
４１ 状況情報
５１ 第１画像
５２ 第２画像

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】