特開 2024-153740 管理システム、管理方法、およびプログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】P2024153740

(43)【公開日】2024-10-29

(54)【発明の名称】管理システム、管理方法、およびプログラム

(51)【国際特許分類】

   H04N 7/18 20060101AFI20241022BHJP

   G10L 15/10 20060101ALI20241022BHJP

   H04M 11/00 20060101ALI20241022BHJP

   G10L 25/51 20130101ALN20241022BHJP

【ＦＩ】

H04N7/18 D

G10L15/10 500Z

H04M11/00 301

G10L25/51

【審査請求】有

【請求項の数】8

【出願形態】ＯＬ

(21)【出願番号】P 2024118621

(22)【出願日】2024-07-24

(62)【分割の表示】P 2022575001の分割

【原出願日】2021-01-15

(71)【出願人】

【識別番号】000004237

【氏名又は名称】日本電気株式会社

(74)【代理人】

【識別番号】100110928

【弁理士】

【氏名又は名称】速水 進治

(72)【発明者】

【氏名】川上 和也

(57)【要約】

【課題】監視カメラの有無に関わらず、事象の発生を早期に検知し、その事象に関連する人物を含む移動体を探し出す。
【解決手段】情報処理装置は、画像を処理することにより、対象地域に存在する移動体を特定する特徴情報、およびその時の位置情報を生成するとともに、特徴情報と位置情報を時刻情報に関連付けた当該移動体の移動履歴情報を生成して関係者データベースに記憶させる移動履歴生成部と、位置情報および時刻情報に紐づいた音声を解析することにより、事象の発生を検知するとともに、事象の発生地点および時刻を特定する事象特定部と、特定された発生地点および時刻を用いて関係者データベースを検索することにより、事象に関連する移動体、および事象を目撃可能な地点に存在した移動体の少なくとも一方である関係移動体の特徴情報を抽出する抽出部と、を備える。
【選択図】図３

【特許請求の範囲】

【請求項1】

情報の管理システムであって、
前記管理システムは、
カメラから送信された画像を取得する処理と、
マイクロフォンから送信された音声を取得する処理と、
前記画像に基づいて移動体の情報を取得する処理と、
前記音声に基づいて事象を検知する処理と、
前記検知された事象の位置情報に基づいて、前記事象と関連する移動体の情報を取得する処理と、
端末と前記事象と関連する移動体の位置に関する情報とに基づいた距離に応じて、前記端末に通知を行う処理と、を実行する、管理システム。

【請求項2】

請求項１に記載の管理システムにおいて、
前記事象と関連する移動体の位置に関する情報は、前記事象と関連する移動体の移動先を含む、管理システム。

【請求項3】

請求項１または２に記載の管理システムにおいて、
前記通知は、前記事象の発生場所に関する情報を含む、管理システム。

【請求項4】

請求項１から３のいずれか一項に記載の管理システムにおいて、
前記移動体は車両を含む、管理システム。

【請求項5】

請求項１から４のいずれか一項に記載の管理システムにおいて、
前記事象を検知する処理は、交通事故に起因した音を検知することを含む、管理システム。

【請求項6】

請求項１から５のいずれか一項に記載の管理システムにおいて、
前記端末は、前記通知を表示する手段または前記通知を音声によって出力する手段の少なくともいずれかを有し、前記移動体のドライバーによって操作される端末を含む、管理システム。

【請求項7】

情報の管理方法であって、
前記管理方法は、
１以上のコンピュータが、
カメラから送信された画像を取得し、
マイクロフォンから送信された音声を取得し、
前記画像に基づいて移動体の情報を取得し、
前記音声に基づいて事象を検知し、
前記検知された事象の位置情報に基づいて、前記事象と関連する移動体の情報を取得し、
端末と前記事象と関連する移動体の位置に関する情報とに基づいた距離に応じて、前記端末に通知を行う、管理方法。

【請求項8】

コンピュータに、
カメラから送信された画像を取得する処理と、
マイクロフォンから送信された音声を取得する処理と、
前記画像に基づいて移動体の情報を取得する処理と、
前記音声に基づいて事象を検知する処理と、
前記検知された事象の位置情報に基づいて、前記事象と関連する移動体の情報を取得する処理と、
端末と前記事象と関連する移動体の位置に関する情報とに基づいた距離に応じて、前記端末に通知を行う処理と、を実行させるためのプログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、情報処理装置、情報処理方法、およびプログラムに関し、特に、監視システムの情報処理装置、情報処理方法、およびプログラムに関する。

【背景技術】

【0002】

特許文献１には、撮影対象の破壊などの異常音に反応して、監視対象の撮像データの記録を行う監視システムが記載されている。特許文献２には、所定のエリアの映像情報を入力して所定期間テンポラリメモリに保存しておき、イベントが発生したときに、イベントの時刻を含むイベント情報の入力を受け付け、その時刻の前後の期間の映像情報をテンポラリメモリから取り出して保存メモリに格納することで、イベントに関連した映像情報を取得しやすくする映像情報共有システムが記載されている。

【先行技術文献】

【特許文献】

【0003】

【特許文献1】特開２００６－６０３２８号公報

【特許文献2】特開２０１９－４３７３号公報

【発明の概要】

【発明が解決しようとする課題】

【0004】

近年、監視カメラが街中や建物の周辺に増えてきてはいるものの、一方で、犯罪などは監視カメラのない場所で起きることの方が多いため、そのような場所での犯罪を早期に解決することが望まれている。

【0005】

本発明は上記事情に鑑みてなされたものであり、その目的とするところは、監視カメラの有無に関わらず、事象の発生を早期に検知し、その事象に関連する人物を含む移動体を探し出すことにある。

【課題を解決するための手段】

【0006】

本発明の各側面では、上述した課題を解決するために、それぞれ以下の構成を採用する。

【0007】

第一の側面は、情報の管理システムに関する。
第一の側面に係る情報の管理システムは、
カメラから送信された画像を取得する処理と、
マイクロフォンから送信された音声を取得する処理と、
前記画像に基づいて移動体の情報を取得する処理と、
前記音声に基づいて事象を検知する処理と、
前記検知された事象の位置情報に基づいて、前記事象と関連する移動体の情報を取得する処理と、
端末と前記事象と関連する移動体の位置に関する情報とに基づいた距離に応じて、前記端末に通知を行う処理と、を実行する。

【0008】

第二の側面は、少なくとも１つのコンピュータにより実行される、情報の管理方法に関する。
第二の側面に係る管理方法は、
１以上のコンピュータが、
カメラから送信された画像を取得し、
マイクロフォンから送信された音声を取得し、
前記画像に基づいて移動体の情報を取得し、
前記音声に基づいて事象を検知し、
前記検知された事象の位置情報に基づいて、前記事象と関連する移動体の情報を取得し、
端末と前記事象と関連する移動体の位置に関する情報とに基づいた距離に応じて、前記端末に通知を行う、ことを含む。

【0009】

なお、本発明の他の側面としては、上記第二の側面の方法を少なくとも１つのコンピュータに実行させるプログラムであってもよいし、このようなプログラムを記録したコンピュータが読み取り可能な記録媒体であってもよい。この記録媒体は、非一時的な有形の媒体を含む。
このコンピュータプログラムは、コンピュータにより実行されたとき、コンピュータに、その管理方法を実施させるコンピュータプログラムコードを含む。

【0010】

なお、以上の構成要素の任意の組合せ、本発明の表現を方法、装置、システム、記録媒体、コンピュータプログラムなどの間で変換したものもまた、本発明の態様として有効である。

【0011】

また、本発明の各種の構成要素は、必ずしも個々に独立した存在である必要はなく、複数の構成要素が一個の部材として形成されていること、一つの構成要素が複数の部材で形成されていること、ある構成要素が他の構成要素の一部であること、ある構成要素の一部と他の構成要素の一部とが重複していること、等でもよい。

【0012】

また、本発明の方法およびコンピュータプログラムには複数の手順を順番に記載してあるが、その記載の順番は複数の手順を実行する順番を限定するものではない。このため、本発明の方法およびコンピュータプログラムを実施するときには、その複数の手順の順番は内容的に支障のない範囲で変更することができる。

【0013】

さらに、本発明の方法およびコンピュータプログラムの複数の手順は個々に相違するタイミングで実行されることに限定されない。このため、ある手順の実行中に他の手順が発生すること、ある手順の実行タイミングと他の手順の実行タイミングとの一部ないし全部が重複していること、等でもよい。

【発明の効果】

【0014】

上記各側面によれば、監視カメラの有無に関わらず、事象の発生を早期に検知し、その事象に関連する人物を含む移動体を探し出す技術を提供することができる。

【図面の簡単な説明】

【0015】

【図1】実施形態に係る監視システムの概要を模式的に示す図である。

【図2】図１に示す監視システムの情報処理装置、画像処理装置、および音声処理装置をそれぞれ実現するコンピュータのハードウェア構成を例示するブロック図である。

【図3】実施形態に係る情報処理装置の構成例を論理的に示す機能ブロック図である。

【図4】記憶装置に記憶される各種情報のデータ構造例を示す図である。

【図5】記憶装置に記憶される各種情報のデータ構造例を示す図である。

【図6】実施形態の情報処理装置の動作例を示すフローチャートである。

【図7】実施形態に係る情報処理装置の構成例を論理的に示す機能ブロック図である。

【図8】ある地域におけるカメラとマイクロフォンの設置例を示す図である。

【図9】実施形態の情報処理装置の動作例を示すフローチャートである。

【図10】実施形態に係る情報処理装置の構成例を論理的に示す機能ブロック図である。

【図11】実施例１の監視システムの構成例を示す図である。

【図12】実施例１の監視システムの動作例を示すフローチャートである。

【図13】実施例２の監視システムの動作例を示すフローチャートである。

【発明を実施するための形態】

【0016】

以下、本発明の実施の形態について、図面を用いて説明する。なお、すべての図面において、同様な構成要素には同様の符号を付し、適宜説明を省略する。また、以下の各図において、本発明の本質に関わらない部分の構成については省略してあり、図示されていない。

【0017】

実施形態において「取得」とは、自装置が他の装置や記憶媒体に格納されているデータまたは情報を取りに行くこと（能動的な取得）、および、自装置に他の装置から出力されるデータまたは情報を入力すること（受動的な取得）の少なくとも一方を含む。能動的な取得の例は、他の装置にリクエストまたは問い合わせしてその返信を受信すること、及び、他の装置や記憶媒体にアクセスして読み出すこと等がある。また、受動的な取得の例は、配信（または、送信、プッシュ通知等）される情報を受信すること等がある。さらに、「取得」とは、受信したデータまたは情報の中から選択して取得すること、または、配信されたデータまたは情報を選択して受信することであってもよい。

【0018】

（第１実施形態）
＜システム概要＞
図１は、実施形態に係る監視システム１の概要を模式的に示す図である。監視システム１は、情報処理装置１００と、画像処理装置２００と、音声処理装置２１０と、少なくとも一つのカメラ５と、少なくとも一つのマイクロフォン７とを備えている。さらに、監視システム１は、記憶装置３００を備えている。

【0019】

カメラ５は、監視システム１に特化したものであってもよいし、例えば、以前から設置されているカメラを利用してもよい。あるいは、カメラ５は、車載カメラであってもよい。カメラ５は、街頭、施設内、建物内など様々な場所に設置されてよい。マイクロフォン７は、カメラ５とは別に、街頭、施設内、建物内など様々な場所に設置されてよい。マイクロフォン７は、カメラ５に搭載されているものであってもよい。マイクロフォン７はカメラ５よりも多くの場所に設置されてもよい。特に、人目に付かない場所に設置されてもよい。

【0020】

さらに、監視システム１は、臭いを検知する臭度センサ、温度センサ、煙探知器、ガス漏れ検知器、あるいは、通報ボタンの押下を検知するセンサなどのセンサ（不図示）をさらに備えてもよい。センサはこれらに限定されず、検知対象となる事象を特定するのに使用できる情報を取得するセンサを用いることができる。

【0021】

記憶装置３００は、情報処理装置１００および画像処理装置２００の少なくとも一方の内部に含まれる装置であってもよいし、情報処理装置１００および画像処理装置２００とは別体の装置であってもよいし、これらの組み合わせであってもよい。

【0022】

カメラ５は、撮像画像を生成する。カメラ５は、レンズとＣＣＤ（Charge Coupled Device）イメージセンサといった撮像素子を備える。カメラ５は、画角に入る人物の動きに合わせて追従してカメラ本体やレンズの向きの制御、ズーム制御、焦点合わせ等を行う機構を備えてもよい。

【0023】

カメラ５は、監視システム１に特化されたものでないものでもよいため、撮影範囲や撮影時間は特に限定されない。ただし、カメラ５は、関係移動体を撮影可能な範囲を撮影してもよい。また、カメラ５は、関係移動体が存在する可能性が高い日時や期間を撮影時間としてもよい。

【0024】

例えば、カメラ５は、関係移動体が訪問予定の日時や期間に訪問予定の場所を含む範囲を撮影してもよい。あるいは、カメラ５は、犯罪が多く発生している時間帯やエリア（例えば、人通りの少ない場所や治安の悪い地域、観光地など）の、街頭、道路、通路、空き地、路地裏、店舗や施設などの建物や敷地内、建物内の特定のフロア、店舗のレジ周辺などを含む範囲を撮影してもよい。あるいは、人で混雑しているイベントや祭などの会場において、それらの開催日時に合わせてカメラ５の台数、撮影箇所、撮影範囲などを変えてもよい。

【0025】

カメラ５で生成された画像は、通信ネットワーク３を介して情報処理装置１００または画像処理装置２００に送信される。画像は、カメラ５から情報処理装置１００に送信され、情報処理装置１００から画像処理装置２００に画像処理のために送信されてもよいし、カメラ５から画像処理装置２００に送信され、画像処理装置２００から情報処理装置１００に画像処理された結果が送信されてもよいし、これらの組み合わせであってもよい。

【0026】

カメラ５またはマイクロフォン７と、情報処理装置１００または画像処理装置２００の間の接続方式は、無線でも有線でもよい。無線接続の場合は、カメラ５またはマイクロフォン７、情報処理装置１００、および画像処理装置２００はそれぞれ無線通信機能を有しているものとする。カメラ５は、例えばＩＰ（Internet Protocol）カメラ等のネットワークカメラであってもよい。

【0027】

カメラ５により生成される画像の利用方法は、（ａ１）対象地域における移動体１０の移動履歴情報の生成、（ａ２）事象の発生の検知後の移動体１０の移動経路の推定などである。

【0028】

例えば、（ａ２）の事象の発生の検知後の移動体１０の移動経路の推定するために画像を用いる場合は、画像はリアルタイムに情報処理装置１００または画像処理装置２００に送信されるのが好ましい。ただし、情報処理装置１００または画像処理装置２００に送信される画像は、カメラ５からすぐに送信されなくてもよく、所定の時間遅延した画像であってもよい。カメラ５で生成された画像は、一旦記憶装置（記憶装置３００であってもよいし、他の記憶装置（記録媒体も含む）であってもよい）に格納され、情報処理装置１００または画像処理装置２００が記憶装置から逐次または所定間隔毎に読み出してもよい。さらに、情報処理装置１００または画像処理装置２００に送信される画像は、動画像であるのが好ましいが、所定間隔毎のフレーム画像であってもよいし、静止画であってもよい。

【0029】

さらに、その事象に関連する移動体１０の移動を追跡するように、複数のカメラ５を切り替えて撮影してもよい。あるいは、複数のカメラ５の撮像画像を用いて事象に関連する移動体１０の移動を追跡してもよい。

【0030】

一方、（ａ１）の対象地域における移動体１０の移動履歴情報の生成に画像を用いる場合は、画像はリアルタイムに情報処理装置１００または画像処理装置２００に送信されなくてもよく、一旦記憶装置（記録媒体も含む）に記憶された後、情報処理装置１００または画像処理装置２００が記憶装置から画像を読み出して処理してもよい。

【0031】

＜ハードウェア構成例＞
図２は、図１に示す監視システム１の情報処理装置１００、画像処理装置２００、および音声処理装置２１０をそれぞれ実現するコンピュータ１０００のハードウェア構成を例示するブロック図である。

【0032】

コンピュータ１０００は、バス１０１０、プロセッサ１０２０、メモリ１０３０、ストレージデバイス１０４０、入出力インタフェース１０５０、およびネットワークインタフェース１０６０を有する。

【0033】

バス１０１０は、プロセッサ１０２０、メモリ１０３０、ストレージデバイス１０４０、入出力インタフェース１０５０、およびネットワークインタフェース１０６０が、相互にデータを送受信するためのデータ伝送路である。ただし、プロセッサ１０２０などを互いに接続する方法は、バス接続に限定されない。

【0034】

プロセッサ１０２０は、ＣＰＵ（Central Processing Unit） やＧＰＵ（Graphics Processing Unit）などで実現されるプロセッサである。

【0035】

メモリ１０３０は、ＲＡＭ（Random Access Memory）などで実現される主記憶装置である。

【0036】

ストレージデバイス１０４０は、ＨＤＤ（Hard Disk Drive）、ＳＳＤ（Solid State Drive）、メモリカード、又はＲＯＭ（Read Only Memory）などで実現される補助記憶装置である。ストレージデバイス１０４０は監視システム１の情報処理装置１００の各機能（例えば、後述する図３の移動履歴生成部１０２、事象特定部１０４、および抽出部１０６、あるいは、図７の移動経路生成部１０８等）を実現するプログラムモジュールを記憶している。プロセッサ１０２０がこれら各プログラムモジュールをメモリ１０３０上に読み込んで実行することで、そのプログラムモジュールに対応する各機能が実現される。また、ストレージデバイス１０４０は、情報処理装置１００または画像処理装置２００が使用する各種情報を記憶する記憶部（不図示）としても機能する。また、記憶装置３００もストレージデバイス１０４０により実現されてもよい。

【0037】

プログラムモジュールは、記録媒体に記録されてもよい。プログラムモジュールを記録する記録媒体は、非一時的な有形のコンピュータ１０００が使用可能な媒体を含み、その媒体に、コンピュータ１０００（プロセッサ１０２０）が読み取り可能なプログラムコードが埋め込まれてよい。

【0038】

入出力インタフェース１０５０は、コンピュータ１０００と各種入出力機器とを接続するためのインタフェースである。

【0039】

ネットワークインタフェース１０６０は、コンピュータ１０００を通信ネットワーク３に接続するためのインタフェースである。この通信ネットワーク３は、例えばＬＡＮ（Local Area Network）やＷＡＮ（Wide Area Network）である。ネットワークインタフェース１０６０が通信ネットワーク３に接続する方法は、無線接続であってもよいし、有線接続であってもよい。ただし、ネットワークインタフェース１０６０は用いられないことも有る。

【0040】

そして、コンピュータ１０００は、入出力インタフェース１０５０またはネットワークインタフェース１０６０を介して、必要な機器（例えば、カメラ５、マイクロフォン７、センサ（不図示）、ディスプレイ（不図示）、スピーカ（不図示）など）に接続する。

【0041】

監視システム１は、情報処理装置１００と、画像処理装置２００との組み合わせにより実現されるため、それぞれを構成する複数のコンピュータ１０００により実現される。情報処理装置１００は、例えば、サーバコンピュータやパーソナルコンピュータである。画像処理装置２００は、情報処理装置１００とは別体の装置であってもよいし、情報処理装置１００の内部に含まれる装置であってもよいし、これらの組み合わせであってもよい。

【0042】

後述するように、エリア別に認識される移動体である人物の服装、言語、利用する乗り物などが異なるため、画像処理装置２００や音声処理装置２１０が認識すべき服装、言語、乗り物などに対応したモデルが、エリア別、または言語別に予め準備されてもよい。

【0043】

後述する図３の本実施形態の情報処理装置１００の各構成要素は、図２のコンピュータ１０００のハードウェアとソフトウェアの任意の組合せによって実現される。そして、その実現方法、装置にはいろいろな変形例があることは、当業者には理解されるところである。各実施形態の情報処理装置１００を示す機能ブロック図は、ハードウェア単位の構成ではなく、論理的な機能単位のブロックを示している。

【0044】

＜機能構成例＞
図３は、本実施形態に係る情報処理装置１００の構成例を論理的に示す機能ブロック図である。情報処理装置１００は、移動履歴生成部１０２と、事象特定部１０４と、抽出部１０６と、を備える。
移動履歴生成部１０２は、画像を処理することにより、対象地域に存在する移動体を特定する特徴情報、およびその時の位置情報を生成するとともに、特徴情報と位置情報を時刻情報に関連付けた当該移動体の移動履歴情報を生成して関係者データベース３１０に記憶させる。
事象特定部１０４は、位置情報および時刻情報に紐づいた音声を解析することにより、事象の発生を検知するとともに、事象の発生地点および時刻を特定する。
抽出部１０６は、事象特定部１０４により特定された発生地点および時刻を用いて関係者データベース３１０を検索することにより、事象に関連する移動体、および事象を目撃可能な地点に存在した移動体の少なくとも一方である関係移動体の特徴情報を抽出する。

【0045】

対象地域とは、移動体の移動を監視する対象の地域であり、対象地域内には、少なくとも一つのカメラ５と、少なくとも一つのマイクロフォン７が設置されている。カメラ５は、対象地域の少なくとも一部の領域を撮影範囲とする。マイクロフォン７は、対象地域の少なくとも一部の領域の音声を集音する。ただし、情報処理装置１００が利用する画像および音声は、必ずしも対象地域に設置されているカメラ５およびマイクロフォン７により生成されたものでなくてもよい。つまり、対象地域に設置されているカメラ５またはマイクロフォン７の代わりに、対象地域外に設置されているカメラ５により生成された画像または対象地域外に設置されているマイクロフォン７により集音された音声を情報処理装置１００が用いることも排除されない。

【0046】

移動体１０は、人および車両の少なくとも一方を含む。

【0047】

移動体１０を特定する特徴情報は、例えば、人物の顔、虹彩、静脈、耳介、指紋、歩容、背格好（身長、肩幅、身丈、骨格等）等の少なくともいずれか一つの特徴量を含む。さらに、特徴情報は、衣服（形、色、素材等）、髪型（髪色も含む）、装飾品（帽子、眼鏡、アクセサリ等）、所持品（バッグ、傘、杖等）等のうち少なくとも一つの特徴を示す特徴情報を含んでもよい。さらに、移動体１０は、車両であってもよいため、車両の特徴（例えば、車両の種類、ナンバープレート、車種、車体の色など）を示す特徴情報を含んでもよい。あるいは、これら特徴情報のうち、少なくとも２つを組み合わせた特徴情報を用いてもよい。後述するように、移動体１０を特定する特徴情報は、移動体１０の音声の特徴情報、例えば、しゃべり声、話している言葉、しゃべり方、言語、方言、息づかい、声紋、泣き声、足音、荷物を引きずる音、衣服や装飾品の音、発砲音、エンジン音、クラクションの音、クラクションの鳴らし方、ドアの開閉音などを含んでもよい。

【0048】

関係者データベース３１０は、記憶装置３００に含まれる。ただし、記憶装置３００は上記したように複数の記憶装置が構成されてもよい。

【0049】

図４は、記憶装置３００に記憶される各種情報のデータ構造例を示す図である。カメラテーブル３０２は、カメラ５を特定する識別情報であるカメラＩＤに、当該カメラ５が設置されている位置情報が関連付けられている。さらに、カメラテーブル３０２は、カメラ５のＩＰアドレスを含んでもよい。マイクロフォンテーブル３０４は、マイクロフォン７を特定する識別情報であるマイクＩＤに、当該マイクロフォン７が設置されている位置情報が関連付けられている。さらに、マイクロフォンテーブル３０４は、マイクロフォン７のＩＰアドレスを含んでもよい。

【0050】

位置情報は、例えば、緯度経度座標系、平面直角座標系、測地系、住所などのうち少なくとも一つで示されてよく、複数の情報を組み合わせもよく、特に限定されない。

【0051】

画像記憶部３０６は、カメラ５から送信された画像を格納する。画像記憶部３０６は、画像を撮像したカメラ５のカメラＩＤ（あるいは、カメラ５のＩＰアドレスでもよい）に、画像の受信日時（ただし、受信日時に限定されず、例えば、撮影日時、画像生成日時、保存日時などであってもよい。）と、画像データとが関連付けて記憶される。あるいは、カメラ５（あるいは、カメラ５の設置地域）または日時別に格納領域（例えば、ディレクトリやフォルダ）を分けて画像データを格納してもよい。あるいは、画像データのファイル名にカメラ５を特定できる情報（例えば、カメラＩＤやＩＰアドレス）を含めてもよい。言い換えると、画像記憶部３０６には、画像データが、どのカメラ５で何時撮影されたものであるか分かる状態で格納されていれば、その格納方法は特に限定されない。

【0052】

音声記憶部３０８は、マイクロフォン７から送信された音声を格納する。音声記憶部３０８は、音声を集音したマイクロフォン７のマイクＩＤ（あるいは、マイクロフォン７のＩＰアドレスでもよい）に、音声の受信日時（ただし、受信日時に限定されず、例えば、集音日時、音声生成日時、録音日時などであってもよい。）と、音声データと、が関連付けて記憶される。あるいは、マイクロフォン７（あるいは、マイクロフォン７の設置地域）または日時別に格納領域（例えば、ディレクトリやフォルダ）を分けて音声データを格納してもよい。あるいは、音声データのファイル名にマイクロフォン７を特定できる情報（例えば、マイクＩＤやＩＰアドレス）を含めてもよい。言い換えると、音声記憶部３０８には、音声データが、どのマイクロフォン７で何時集音されたものであるか分かる状態で格納されていれば、その格納方法は特に限定されない。

【0053】

関係者データベース３１０には、移動体１０の移動履歴情報が格納される。移動履歴情報は、画像内で認識された移動体１０の特徴情報に、移動体１０の位置情報と、当該画像に移動体１０が写っている時点の日時とが関連付けられている。位置情報は、当該画像が撮影されたカメラ５の設置位置情報と、カメラ５の撮影方向や撮影範囲（画角）などの情報と、画像内の移動体１０の位置とに基づいて算出される。移動体１０の位置情報は、例えば、緯度経度座標系、平面直角座標系、測地系、住所などのうち少なくとも一つで示されてよく、複数の情報を組み合わせもよく、特に限定されない。日時は、移動体１０が写っている画像（または画像フレーム）のタイムスタンプなどの情報から算出される。

【0054】

さらに、移動履歴情報には、画像内で認識された移動体１０の特徴情報に、移動体１０の移動方向が関連付けられる。あるいは、例えば、３６０度カメラや撮影方向を変更できるカメラ５で撮影された画像内で認識された移動体１０の場合、特徴情報に撮影方向を示す情報をさらに関連付けてもよい。また、関係者データベース３１０には、移動履歴情報に格納されている特徴情報が抽出された画像データ（フレーム）を特定できる情報（例えば、画像データのファイル名（または格納場所）や画像フレーム番号など）をさらに特徴情報に関連付けて記憶されてもよい。

【0055】

移動履歴生成部１０２は、カメラ５で撮像され、画像記憶部３０６に格納されている画像を、画像処理装置２００を用いて解析する。ただし、画像はカメラ５から受信した画像であってもよく、画像記憶部３０６に記憶されていなくてもよい。画像処理装置２００により認識される移動体１０は、画像内の全ての人物や車両を認識対象としてもよいし、特定の人物や車両を予め登録しておいて認識対象としてもよい。特定の人物は、例えば、要人、外国人、観光客などであり、特に警護が必要な人物を含む。さらに、特定の人物は、指名手配者、容疑者、要注意人物などであってもよく、特に、監視が必要な人物を含んでもよい。

【0056】

事象特定部１０４は、マイクロフォン７で集音され、音声記憶部３０８に格納された音声を、音声処理装置２１０を用いて解析する。ただし、音声はマイクロフォン７から受信した音声であってもよく、音声記憶部３０８に記憶されていなくてもよい。

【0057】

事象特定部１０４により検知される事象とは、例えば、犯罪や事件などである。事象は、例えば、窃盗、強盗、スリ、置き引き、万引き、恐喝、喧嘩、暴力、暴行、傷害または傷害致死事件、誘拐、爆破、殺人、通り魔、テロ、立て籠もり、放火、交通事故（ひき逃げ、当て逃げ、暴走など）、構造物の破壊（器物損壊）などである。

【0058】

事象特定部１０４は、所定の音声を認識することで、事象の発生を検知する。例えば、事象特定部１０４は、人が発した単語または文章を用いて事象の発生を検知してもよい。事象特定部１０４は、例えば、助けを求める音声、つまり被害者側の音声（例えば、「助けて」、「撃たないで」、「やめて」、「返して」、「誘拐だ」など）、脅す音声、つまり、犯罪者側の音声（例えば、「手を上げろ」、「よこせ」、「騒ぐな」、「黙れ」、「おとなしくしろ」、「撃つぞ」など）を認識することで事件の発生を検知してもよい。

【0059】

上記の言葉だけでなく、その音量、性質（例えば、怯えた様子や錯乱状態、威嚇、押し殺した声など）、トーン、言語や方言、悲鳴や罵声などを認識し、さらに、認識された音声の継続時間を、事象の発生の検知の条件に用いてもよい。さらに、衝撃音（例えば、交通事故など）、機械音、破裂音、爆発音、音波、および、これらの音の継続時間などを認識し、事象の発生の条件に用いてもよい。

【0060】

さらに、例えば、特定人物の声を予め登録しておき、事象特定部１０４は、特定人物の声で、「助けて」などの言葉が検出された場合に事象の発生を検知してもよい。

【0061】

事象特定部１０４は、上記した複数の条件を組み合わせて事象の発生を推定することができる。推定条件は、以下に例示されるがこれらに限定されない。
（ｂ１）「誘拐！」、「助けて」を２回以上検出、音量は所定値以上、音声の継続時間は１０秒以上
（ｂ２）衝撃音を検出、音声の継続時間は１０秒
（ｂ３）「助けて」を２回以上検知、音量は所定値以上

【0062】

事象特定部１０４は、さらに、事象の緊急性を示す緊急度を特定してもよい。事象特定部１０４は、事象の緊急度を、対象人物に特定人物が含まれるか否かを用いて特定してもよい。事象特定部１０４は、例えば、上記（ｂ１）の場合や、特定人物の声が認識された場合などは緊急度が高レベルであると特定し、上記（ｂ２）の場合は緊急度が中程度レベルであると特定し、上記（ｂ３）の場合は緊急度が低レベルであると特定してもよい。これらの条件は、地域における事象の発生状況などに応じて設定できてよい。

【0063】

また、上記特定人物毎に、緊急度を高める条件を予め登録しておき、事象特定部１０４は、条件を満たした場合に緊急度を高めてもよい。

【0064】

さらに、事象の発生を特定するための条件は、時期、時間帯、日時、施設の種類や場所などに応じても設定できてよい。つまり、事象が発生しやすい時期、時間帯、日時、施設の種類や場所などを指定して条件を設定することで、事象の発生の特定の精度を向上させることができる。事象別に事象の発生を示す音声情報や、その他の条件や状況（例えば、発生しやすい場所、時期、時間帯、日時など）を、機械学習させてモデル化してもよい。

【0065】

事象の発生が検知されたとき、事象特定部１０４は、当該事象の発生検知の根拠となった音声を収集したマイクロフォン７の位置情報を特定するとともに、さらに音声データ内で当該音声が発生している時刻を特定する。

【0066】

事象特定部１０４は、図５の事象記憶部３１２に特定した事象毎（例えば、事象毎に事象発生ＩＤを付与してもよい）に、その事象の発生日時と位置情報を関連付けて記憶する。さらに、事象特定部１０４は、事象の緊急度を関連付けて事象記憶部３１２に記憶してもよい。さらに、推定される事象の種類（図５には不図示）を関連付けて事象記憶部３１２に記憶してもよい。事象特定部１０４は、事象の種類を、例えば、音声に含まれる言葉から、誘拐、強盗、スリなどを推定してもよい。さらに、事象特定部１０４は、音声に含まれる音の種類、音量、性質などから、例えば、交通事故、爆発、発砲、破裂などを推定してもよい。

【0067】

さらに、事象特定部１０４は、事象発生地点の周囲に設置されているカメラ５を特定し、カメラ５の画像を取得し、さらに、事象の種類を推定したり、緊急度を特定したりしてもよい。

【0068】

抽出部１０６は、事象記憶部３１２を参照、または事象特定部１０４から受け渡された事象の発生日時と位置情報を取得し、取得した日時と位置情報を用いて関係者データベース３１０の移動履歴情報を検索し、該当する特徴情報を抽出する。事象発生時点の位置情報を示す画像から抽出される特徴情報は、１つとは限らず複数の特徴情報が抽出されてよい。抽出された特徴情報は、事象に関連する移動体１０、および事象を目撃可能な地点に存在した移動体１０の少なくとも一方である関係移動体を示している。

【0069】

関係移動体は、事象の当事者と車両、事象を目撃した人と車両、事象に関連した人と車両を含み、さらに、画像に写っている一般の人と車両を含んでもよい。どの移動体を関係移動体とするか否かは、ユーザにより設定変更できてもよいし、システム毎に設定されていてもよい。

【0070】

例えば、セキュリティが高く設定されているビルなどでは、ビルの中に存在している人物を全て関係移動体として特徴情報を生成して、移動履歴情報を生成してもよい。街中などでは、要人、外国人、または観光客など特に警護や監視が必要な人物を関係移動体として予め特徴情報を登録しておき、画像処理により登録済みの特徴情報が認識されたら関係移動体として移動履歴情報を生成してもよい。さらに、登録済みの関係移動体の行動予定を予め登録できてもよい。行動予定に従った日時および場所の画像について関係移動体の移動履歴情報を生成してもよい。また、犯罪者や容疑者など特に監視が必要な人物についても、関係移動体として特徴情報を予め登録しておき、画像処理により登録済みの特徴情報が認識されたら関係移動体として移動履歴情報を生成してもよい。指名手配中、潜伏していると予想される地域の画像を特定して画像処理を行い、登録済みの特徴情報が認識されたら、当該関係移動体の移動履歴情報を生成してもよい。

【0071】

抽出部１０６により抽出された事象に関連する関係移動体（以後、関係者とも呼ぶ）の特徴情報は、図５の関係者移動履歴記憶部３１４に記憶されてよい。なお、図５の事象記憶部３１２および関係者移動履歴記憶部３１４も記憶装置３００に含まれてよい。関係者移動履歴記憶部３１４には、発生が検知された事象毎に、抽出された少なくとも一つの特徴情報と、その日時と位置情報とが関連付けて記憶される。

【0072】

さらに、事象特定部１０４は、事象の発生時の音声情報を用いて、事象の属性情報を生成してもよい。そして、抽出部１０６は、事象の属性情報もさらに用いて関係者データベース３１０を検索してもよい。事象の属性情報は、例えば、事象の種類、規模、および緊急度の少なくとも一つを含んでよい。

【0073】

なお、図１、図３、および後述する図７において、情報処理装置１００、画像処理装置２００、および音声処理装置２１０はそれぞれ一つのハードウェア（例えばサーバ）で構成されている。ただし、情報処理装置１００、画像処理装置２００および音声処理装置２１０はそれぞれ複数のハードウェア（例えば複数のサーバ）で構成されてもよい。例えば、画像処理装置２００および情報処理装置１００の移動履歴生成部１０２が第１のサーバによって実現され、音声処理装置２１０および情報処理装置１００の事象特定部１０４が第２のサーバで実現され、情報処理装置１００の抽出部１０６が第３のサーバで実現されてもよい。また、画像処理装置２００、情報処理装置１００の移動履歴生成部１０２および抽出部１０６が第１のサーバで実現され、音声処理装置２１０および情報処理装置１００の事象特定部１０４が第２のサーバで実現されてもよい。ただし組み合わせはこれらに限定されない。

【0074】

＜動作例＞
図６は、本実施形態の情報処理装置１００の動作例を示すフローチャートである。
情報処理装置１００は、関係者データベース３１０の構築処理と、事象検知および関係移動体抽出処理の２つのフローに従い動作してよい。ただし、処理フローの組み合わせはこれに限定されない。

【0075】

＜関係者データベース３１０の構築処理＞
まず、情報処理装置１００の移動履歴生成部１０２は、関係者データベース３１０の構築処理を行う。移動履歴生成部１０２は、画像処理装置２００にカメラ５が撮像した画像を処理させ、対象地域に存在する移動体１０を特定する特徴情報、およびその時の位置情報を生成する（ステップＳ１０１）。そして、移動履歴生成部１０２は、特徴情報と位置情報を時刻情報に関連付けた当該移動体１０の移動履歴情報を生成し、関係者データベース３１０に記憶される（ステップＳ１０３）。

【0076】

具体的には、画像処理装置２００により画像内から移動体１０の特徴情報が抽出されると、移動履歴生成部１０２は、当該画像を撮影したカメラ５を特定し、当該カメラ５の撮影日時と設置場所（撮影方向や撮影範囲などを含む）などの撮影情報を特定し、特定された撮影情報に基づいて移動体１０の位置情報と存在日時を算出する。そして、抽出された移動体１０の特徴情報に、算出した移動体１０の位置情報と日時を関連付けて関係者データベース３１０に登録する。さらに、移動履歴生成部１０２は、前後の画像を用いて当該移動体１０の移動方向を算出し、さらに移動履歴情報の特徴情報に移動体１０の移動方向を関連付けて記憶させる。

【0077】

また、移動履歴生成部１０２は、マイクロフォン７により集音された音声を音声処理装置２１０により解析し、特定の移動体１０に関する音声の特徴情報（以後、音声特徴情報とも呼ぶ）を移動履歴情報に日時と位置情報に関連付けて記憶してもよい。特定の移動体１０とは、例えば、特定人物や特定車両である。特定の人物は、例えば、要人、外国人、観光客などであり、特に警護が必要な人物を含む。さらに、特定の人物は、指名手配者、容疑者、要注意人物などであってもよく、特に、監視が必要な人物を含んでもよい。

【0078】

つまり、移動履歴生成部１０２は、画像および音声の少なくとも一方を使用して移動履歴情報を生成してもよい。

【0079】

関係者データベース３１０の移動履歴情報に記憶されている特定人物の顔などの特徴情報に、当該特定人物の音声特徴情報を、さらに関連付けてもよい。特定人物の音声特徴情報は、特定人物を特定できる特徴情報であり、例えば、特定人物のしゃべり声、話している言葉、しゃべり方、言語、方言、息づかい、声紋、足音、荷物を引きずる音、衣服や装飾品の音、発砲音などであってもよい。あるいは、特定車両の音声特徴情報を移動履歴情報に日時と位置情報に関連付けて記憶してもよい。特定車両の音声特徴情報は、特定車両を特定できる特徴情報であり、例えば、特定車両のエンジン音、クラクションの音、クラクションの鳴らし方、ドアの開閉音などであってもよい。特定人物と特定車両に関係がある場合は、特定人物と特定車両の情報もそれぞれ関連付けられて移動履歴情報に記憶されてもよい。

【0080】

関係者データベース３１０の構築処理は、定期的、常時、または随時、繰り返し行われてよい。構築処理を実行するタイミングや頻度などは地域別、施設の種類や場所、時期、時間帯、および日時などの少なくともいずれか一つに応じて設定できてよい。また、関係者データベース３１０に登録された移動体１０の特徴情報の移動履歴情報は、所定期間が経過した後、削除またはアーカイブとして別の記憶装置に移動されてもよい。

【0081】

＜事象検知および関係者抽出処理＞
次に、事象特定部１０４は、音声処理装置２１０にマイクロフォン７が集音した音声の解析を行わせ（ステップＳ１１１）、事象の発生を監視する（ステップＳ１１３）。そして、事象の発生が検知されると（ステップＳ１１３のＹＥＳ）、事象特定部１０４は、事象の発生した地点の位置情報と発生日時を特定する（ステップＳ１１５）。そして、抽出部１０６は、ステップＳ１１５で特定された事象の発生位置情報と発生日時を用いて関係者データベース３１０の移動履歴情報を検索し、関係移動体を抽出する（ステップＳ１１７）。

【0082】

具体的には、事象特定部１０４は、マイクロフォン７が集音した音声を音声処理装置２１０により解析した結果に基づいて、事象の発生を検知する。上記したように、事象特定部１０４は、音声処理装置２１０により音声の種類、言葉、音量、性質、トーン、しゃべり方、言語、方言、悲鳴、罵声などの認識結果を用いて事象の発生を検知する。所定の事象発生条件を満たした場合、事象特定部１０４は事象の発生を検知する。事象特定部１０４は、検知した事象の発生地点および発生時刻を、当該事象検知の根拠となった音声を集音したマイクロフォン７の位置情報と音声データのタイムスタンプなどの情報から、特定する。上記したように、事象の緊急度も事象特定部１０４により特定されてよい。事象特定部１０４により検知された事象発生に関する情報は、事象記憶部３１２に記憶されてよい。

【0083】

そして、抽出部１０６は、事象特定部１０４により特定された事象発生の位置情報と日時の情報を用いて関係者データベース３１０の移動履歴情報を検索する。特に抽出部１０６は、事象発生の日時の前後を含む情報を中心に検索するのが好ましい。そして、事象に関連する関係移動体に対応する少なくとも一つの特徴情報を抽出する。

【0084】

本実施形態によれば、移動履歴生成部１０２は、カメラ５が撮像した画像を処理することにより、対象地域に存在する移動体１０を特定する特徴情報、およびその時の位置情報を生成するとともに、特徴情報と位置情報を時刻情報に関連付けた当該移動体１０の移動履歴情報を生成して関係者データベース３１０に記憶させる。事象特定部１０４は、マイクロフォン７が集音した音声を解析することにより、事象の発生を検知するとともに、事象の発生地点および時刻を特定する。抽出部１０６は、事象特定部１０４により特定された発生地点および時刻を用いて関係者データベース３１０を検索することにより、関係移動体の特徴情報を抽出する。

【0085】

この構成により、情報処理装置１００は、カメラ５の有無に関わらず、事象の発生を早期に検知し、その事象に関連する人物を含む関係移動体を事前に収集した画像から構築された関係者データベース３１０から探し出すことができる。

【0086】

（第２実施形態）
図７は、本実施形態に係る情報処理装置１００の構成例を論理的に示す機能ブロック図である。本実施形態の情報処理装置１００は、抽出された関係移動体の特徴情報の移動経路を推定する構成を有する点以外は上記実施形態と同様である。図７の情報処理装置１００は、図３の情報処理装置１００の構成に加え、さらに移動経路生成部１０８を有している。ただし、本実施形態の情報処理装置１００は、他の実施形態の構成の少なくともいずれか一つと矛盾を生じない範囲で組み合わせてもよい。

【0087】

移動経路生成部１０８は、事象の発生地点の周囲に配置されたカメラ５の事象の発生時刻前後を含む画像を処理するとともに、事象の発生地点の周囲に配置されたマイクロフォン７の事象の発生時刻前後を含む音声を解析することにより、関係移動体をトラッキングし、関係移動体の移動経路を生成する。

【0088】

事象の発生地点の周囲に配置されたカメラ５またはマイクロフォン７の特定方法は、様々考えられ、以下に示すがこれらに限定されない。また以下の複数の方法を組み合わせてもよい。
（ｃ１）事象の発生が検知された音声を集音したマイクロフォン７の位置情報を中心として半径１０メートル以内の範囲に設置されているカメラ５をカメラテーブル３０２に記憶されているカメラ５の位置情報から検索する。あるいは、事象の発生が検知された音声を集音したマイクロフォン７の位置情報を中心として半径１０メートル以内の範囲に設置されているマイクロフォン７をマイクロフォンテーブル３０４に記憶されているマイクロフォン７の位置情報から検索する。
（ｃ２）カメラ５およびマイクロフォン７を、地域別、通路別、施設または建物別、あるいは、犯罪種別（推定される事象の種類）や犯罪者（関係移動体）の属性に応じて予め想定される逃走ルート別などに予めグルーピングしておき、事象の発生が検知された音声を集音したマイクロフォン７と同じグループに属するカメラ５およびマイクロフォン７を選択する。

【0089】

移動経路生成部１０８は、選択されたカメラ５の画像のうち、事象の発生時刻の前後所定時間分の画像を画像処理装置２００に処理させることにより、関係移動体の特徴情報を画像から抽出し、関係移動体の画像特徴情報が抽出された画像を撮像したカメラ５の位置情報と、カメラ５の撮影方向や撮影範囲などの撮影情報に基づいて、関係移動体の画像特徴情報の時刻毎の位置情報および移動方向を推定する。移動経路生成部１０８は、１つのカメラ５が撮影した画像において、事象の発生時刻の前後所定時間分の画像内での関係移動体の移動方向および移動経路を推定するとともに、隣接する複数のカメラ５が撮影した画像において、事象の発生時刻の前後所定時間分の画像内での関係移動体の移動方向および移動経路を推定する。

【0090】

さらに、移動経路生成部１０８は、選択されたマイクロフォン７の音声のうち、事象の発生時刻の前後所定時間分の音声を音声処理装置２１０に解析させることにより関係移動体の音声の特徴情報を音声から抽出し、関係移動体の音声特徴情報が抽出された音声を集音したマイクロフォン７の位置情報と、マイクロフォン７の指向性や集音精度（集音可能な距離範囲など）に基づいて、関係移動体の音声特徴情報の時刻毎の位置情報および移動方向を推定する。移動経路生成部１０８は、１つのマイクロフォン７が集音した音声において、事象の発生時刻の前後所定時間分の音声内での関係移動体の移動方向および移動経路を推定するとともに、隣接する複数のマイクロフォン７が集音した音声において、事象の発生時刻の前後所定時間分の音声内での関係移動体の移動方向および移動経路を推定する。

【0091】

本実施形態では、カメラ５は例えば、主要な道路の交差点などに設置されているが、路地裏には設置されておらず、マイクロフォン７が路地裏に設置されていることを想定して説明する。図８は、ある地域におけるカメラ５とマイクロフォン７の設置例を示す図である。この図の例では、主要な道路Ｒ１およびＲ２の交差点にそれぞれカメラ５ａおよびカメラ５ｂが設置されている。さらに、路地裏には複数のマイクロフォン７ａ～７ｈが設置されている。

【0092】

例えば、マイクロフォン７ａが集音した音声から事象の発生が検知された場合、マイクロフォン７ａの周囲のカメラ５ａで撮像された画像を画像処理装置２００が処理することにより、関係移動体の人物Ｍ１の特徴情報が抽出される。移動経路生成部１０８は、カメラ５ａの設置位置情報、および撮影方向や撮影範囲などの撮影情報から人物Ｍ１のその時点の位置と移動方向を算出する。カメラ５ａで撮像された画像から関係移動体の人物Ｍ１の特徴情報が抽出されたため、カメラ５ａの周囲のカメラ５ｂで撮像された画像のうち、事象が発生した時刻前後の所定時間分の画像について画像処理装置２００が処理して関係移動体の特徴情報を探す。

【0093】

もし、関係移動体の人物Ｍ１がカメラ５ｂの撮影範囲内に移動した場合には、事象が発生した時刻前後の所定時間分のカメラ５ｂの撮像画像を画像処理装置２００により処理することで関係移動体の人物Ｍ１の特徴情報が抽出でき、関係移動体の人物Ｍ１の移動経路を推定できる。一方、カメラ５ｂの事象が発生した時刻前後の所定時間分の画像内に関係移動体の人物Ｍ１の特徴情報が抽出されなかった場合には、関係移動体の人物Ｍ１はカメラ５ｂの撮影範囲内には移動していないと推定できる。

【0094】

さらに、マイクロフォン７ａが集音した音声から事象の発生が検知されたとき、マイクロフォン７ａの周囲の他のマイクロフォン７ｂ～７ｈで集音された音声のうち、事象が発生した時刻前後の所定時間分の音声について、音声処理装置２１０が解析を行う。音声処理装置２１０は、関係移動体の音声特徴情報（例えば、人物Ｍ１のしゃべり声、話している言葉、しゃべり方、言語、方言、息づかい、声紋、泣き声、足音、荷物を引きずる音、衣服や装飾品の音、発砲音など）を音声の中から抽出する。移動経路生成部１０８は、関係移動体の音声特徴情報が抽出されたマイクロフォン７の位置情報、指向性、集音可能距離（範囲）に基づいて、関係移動体の位置と移動方向を推定する。

【0095】

移動経路生成部１０８は、事象が発生した時刻前後の所定時間分の複数のマイクロフォン７ａ～７ｈの音声の中から、関係移動体の人物Ｍ１の音声特徴情報を探し出す。図８の例では、関係移動体の人物Ｍ１は、破線矢印の方向に沿って移動しているため、例えば、マイクロフォン７ｂで集音された音声から関係移動体の人物Ｍ１の音声特徴情報が抽出され、その後、マイクロフォン７ｃで集音された音声から関係移動体の人物Ｍ１の音声特徴情報が抽出される。その他のマイクロフォン７で集音された音声から関係移動体の人物Ｍ１の音声特徴情報は抽出されない。

【0096】

その後、時間経過とともに、マイクロフォン７ｂ、マイクロフォン７ｃで集音された音声の中から関係移動体の人物Ｍ１の音声特徴情報が抽出されたとする。すると、移動経路生成部１０８は、事象が発生した地点Ｐから関係移動体の人物Ｍ１は、カメラ５ａの方向に移動した後、右折し、マイクロフォン７ｂの前を通過し、右折して路地裏に入れ込み、マイクロフォン７ｃの周辺に身を潜めたことを推定する。

【0097】

なお、カメラ５ａおよびカメラ５ｂで撮像された画像に写っている人物Ｍ２および人物Ｍ３は、関係移動体として特徴情報を関係者データベース３１０に登録されてもよい。特に、人物Ｍ２は、事象を目撃することができた人物として登録されてよい。

【0098】

抽出部１０６は、関係者データベース３１０から関係移動体の特徴情報を抽出する際に、例えば、事象の発生時に発生地点から、移動体１０が存在している地点までの距離に応じて、事象との関係性を特定してもよい。抽出部１０６は、例えば、事象の発生地点から半径１０メートル（第１距離）以内に存在している移動体１０は事象に直接関係している当事者と特定して抽出してもよい。あるいは、抽出部１０６は、事象の発生地点から半径１５～５０メートル（第１距離より離れている第２距離）の範囲に存在している移動体１０は事象の目撃者または事象に巻き込まれた人物として特定して抽出してもよい。

【0099】

移動経路生成部１０８により追跡された関係移動体の時刻毎の位置情報から関係移動体の移動経路は生成される。移動経路生成部１０８により生成された移動経路は、関係者移動履歴記憶部３１４に事象毎に日時情報に関連付けて記憶される。

【0100】

＜動作例＞
図９は、情報処理装置１００の動作例を示すフローチャートである。図９を用いて、移動経路生成部１０８による移動経路生成処理の手順について説明する。
まず、移動経路生成部１０８は、検知された事象の発生地点の周囲のカメラ５の事象の発生時刻前後を含む画像を画像処理装置２００に処理させる（ステップＳ１２１）。カメラ５の画像内に関係移動体の特徴情報が含まれている場合、その特徴情報を抽出し、位置情報と日時を特定する。そして、移動経路生成部１０８は、特定された関係移動体の特徴情報に日時と位置情報を関連付けて関係者移動履歴記憶部３１４に記憶してもよい。

【0101】

次に移動経路生成部１０８は、検知された事象の発生地点の周囲のマイクロフォン７の事象の発生時刻前後を含む音声を音声処理装置２１０に解析させる（ステップＳ１２３）。マイクロフォン７の音声内に関係移動体の音声特徴情報が含まれている場合、その音声特徴情報を抽出し、位置情報と日時を特定する。そして、移動経路生成部１０８は、特定された関係移動体の音声特徴情報に日時と位置情報を関連付けて関係者移動履歴記憶部３１４に記憶してもよい。

【0102】

移動経路生成部１０８は、ステップＳ１２１で画像から特定された関係移動体の位置情報および移動方向と、ステップＳ１２３で音声から特定された関係移動体の位置情報および移動方向とを時系列に組み合わせて、関係移動体の移動経路を生成する（ステップＳ１２５）。生成された移動経路は関係者移動履歴記憶部３１４に記憶されてよい。

【0103】

また、ステップＳ１２３の音声解析処理は、ステップＳ１２１で特定された関係移動体の位置情報から推定される移動経路の周辺に設置されているマイクロフォン７が集音した音声について行うようにしてもよい。つまり、画像処理により特定された関係移動体の位置情報により大まかな移動経路上の位置間隔を、音声解析により特定された位置情報で補填して、より詳細な移動経路を推定することができる。

【0104】

さらに、移動経路生成部１０８は、関係移動体の時刻毎の位置情報の移動から関係移動体の移動速度を算出してもよい。移動経路生成部１０８は、関係移動体の移動速度から、関係移動体の移動手段をさらに特定してもよい。移動手段とは、例えば、徒歩、駆け足、自転車、バイク、自動車、バス、電車などを含む。

【0105】

さらに、移動経路生成部１０８は、特定済みの関係移動体の移動経路から所定時間先の移動先を、関係移動体の移動方向、移動速度、および移動手段に基づいて推定してもよい。推定される移動先は複数の候補が推定されてもよい。さらに、移動経路生成部１０８は、複数の候補の確度を算出してもよい。

【0106】

移動経路生成部１０８は、関係移動体の時間毎の移動先の候補地点を算出する。抽出部１０６は、この候補地点を中心として半径１０メートル（第３距離）以内に存在している移動体を関係移動体の中でも事象の当事者として抽出し、当該関係移動体の移動経路を移動経路生成部１０８に生成させてもよい。また、この候補地点を中心として半径１５～５０メートル（第３距離より離れている第４距離）の範囲に存在している移動体を、事象の関係者として抽出し、当該関係移動体の移動経路を移動経路生成部１０８に生成させてもよい。抽出部１０６により抽出されたこれらの関係移動体の特徴情報は、関係者移動履歴記憶部３１４にさらに記憶されてよい。

【0107】

抽出部１０６は、抽出された関係移動体の中に、予め登録されている特定人物（例えば、要人）などが含まれているか否かを判別してもよい。特定人物が含まれている場合は、緊急度を高めてもよい。

【0108】

本実施形態によれば、移動経路生成部１０８は、事象の発生地点の周囲に配置されたカメラ５の事象の発生時刻前後を含む画像を処理するとともに、事象の発生地点の周囲に配置されたマイクロフォン７の事象の発生時刻前後を含む音声を解析することにより、関係移動体の移動経路を生成する。

【0109】

これにより、情報処理装置１００は、事象に関連する関係移動体の移動経路を推定でき、関係移動体の追跡が可能になる。

【0110】

（第３実施形態）
図１０は、本実施形態に係る情報処理装置１００の構成例を論理的に示す機能ブロック図である。本実施形態の情報処理装置１００は、発生事象または関係移動体に関する情報を出力処理する構成を有する点以外は上記実施形態と同様である。図１０情報処理装置１００は、図７の情報処理装置１００の構成に加え、さらに出力処理部１１２を有している。さらに、情報処理装置１００は、表示装置１１０に接続されている。ただし、本実施形態の情報処理装置１００は、他の実施形態の構成の少なくともいずれか一つと矛盾を生じない範囲で組み合わせてもよい。

【0111】

＜機能構成例＞
出力処理部１１２は、事象特定部１０４により検知された事象に関する情報、および移動経路生成部１０８により生成された関係移動体の移動経路の少なくとも一方を報知情報として所定の出力先に出力させる。出力先は、様々考えられるが、例えば、監視センタの表示装置１１０の監視用のモニタ画面であってもよいし、警察官や警備員などが携帯している端末（不図示）であってもよいし、警察署の表示装置（不図示）の監視用のモニタ画面であってもよい。

【0112】

さらに、出力先は、事象が発生した周辺に居る所定の人物が携帯している端末（不図示）であってもよい。所定の人物とは、例えば、事象発生地点または関係移動体の移動経路周辺にいる人物であって、店舗の店員、宅配業者など街中を移動している人物、バスや路面電車などの公共交通機関の職員や運転手、タクシードライバー、旅行の添乗員や観光客などを含んでもよい。

【0113】

出力先となる端末には、予め通知を受信するためのアプリケーションがインストールされて起動されていて、通知を受信する状態で待機させることで通知を受信できてよい。また、通知を受信した後は、予めユーザ登録済みの所定のウェブサイトにログインすることで、発生した事象の関係移動体の移動経路を表示させることができてもよい。

【0114】

出力方法は、モニタ画面への表示、メールの送信、およびスピーカ（不図示）からの音声または警報音の出力の少なくともいずれか一つを含む。メールの送信先となるメールアドレス、携帯端末のＩＰアドレス、および携帯電話番号の少なくともいずれか一つの宛先は予め登録されていてもよいし、送信時に入力を受け付けてもよい。

【0115】

端末は、携帯電話、スマートフォン、タブレット端末、ＰＤＡ（Personal Digital Assistant）、ノートＰＣ（Personal Computer）パーソナルコンピュータなどを含む。

【0116】

出力内容は、検知された事象に関する報知情報として、事象の発生時間、発生場所、事象の種類、事象の内容、事象による被害状況、関係移動体の数、関係移動体の情報（顔写真、あるいは、画像から解析された属性情報（例えば、性別、年齢、容姿、服装など））、および移動経路などの情報を含んでもよい。出力内容は、事象の発生を伝えるとともに、避難を呼びかけるメッセージ、または後述するように事象への対処を依頼するメッセージを含んでもよい。移動経路は地図上にマッピングされて重畳表示されてもよい。関係移動体が利用している推定される移動手段（徒歩、自転車、小型車、中型車、大型車、バイクなど）も表示されるのが好ましい。さらに、移動経路上のカメラ５で撮影された画像を表示させてもよい。移動経路は、複数の候補を出力してもよい。移動先も複数の候補を出力してもよい。

【0117】

また、出力処理部１１２は、移動経路を示す地図と、移動経路上に設置されているカメラ５の映像とを、監視センタのディスプレイにマルチ表示させてもよい。

【0118】

また、情報処理装置１００は、操作受付部（不図示）をさらに備えてもよい。操作受付部は、表示装置１１０に表示される各種画面への、監視システム１の管理者の操作を受け付ける。あるいは、操作受付部は、特定の人物の携帯端末に表示される画面への特定の人物の操作を受け付けてもよい。この場合、特定の人物の携帯端末にインストールされているアプリケーションが操作を受け付け、情報処理装置１００に操作内容を送信し、操作受付部が受信してもよいし、所定のウェブサイトにアクセスすることで表示される画面上の操作を操作受付部が受け付けてもよい。

【0119】

出力処理部１１２は、事象の発生地点または関係移動体の移動先の周囲に居る人物の端末を、例えば、端末のＧＰＳ（Global Positioning System）受信機が示す位置情報を取得することで出力先となる端末を選択して報知情報を送信してもよい。さらに、出力処理部１１２は、事象発生地点または関係移動体の移動先に距離が近い順に上位から少なくとも一つの端末を出力先として選択して報知情報を送信してもよい。さらに、出力処理部１１２は、事象発生地点または関係移動体の移動先になるべく早く到着可能な人物の端末を特定して報知情報を送信してもよい。出力処理部１１２は、端末の位置情報の履歴情報から、端末の移動速度を算出し、端末の移動手段を特定することで、端末の位置から事象発生地点または関係移動体の移動先までの移動時間を算出し、移動時間が短い順に上位から少なくとも一つの端末を出力先として選択して報知情報を送信してもよい。ただし、出力先となる端末の選択処理は、移動経路生成部１０８が行ってもよい。

【0120】

端末への報知の目的は、（ｄ１）発生事象への対処の要請、（ｄ２）発生事象からの避難指示などである。端末側では、対処の要請を受け入れ可能な時間、あるいは、受け入れできない時間を設定できてよい。

【0121】

端末上に報知情報を通知するための画面は、以下が含まれてよい。
（ｅ１）事象の緊急度および、想定される事象の内容の表示
（ｅ２）対処に必要な道具や装備の表示
（ｅ３）事象の発生場所の表示
（ｅ４）対処要請に対する承諾ボタン／拒否ボタンの表示

【0122】

操作受付部が、端末において承諾ボタンの押下を受け付けた場合、対処要請に応じた当該端末に対して対処内容の詳細情報を送信して画面表示させる。具体的には以下の情報が送信されてよい。
（ｆ１）関係移動体（人物または車両）に関する情報（画像を含む）、事象現場の画像（映像であってもよい）および音声
（ｆ２）関係移動体に接触（ヒアリングの実施）を要請するメッセージと、当該要請に対する承諾ボタン／拒否ボタンの表示

【0123】

操作受付部は、端末において接触要請に対する承諾ボタンの押下を受け付けた場合、要請に応じた当該端末に対して関係移動体へのヒアリング項目リストを送信して画面表示させる。ヒアリング項目リストは、関係移動体に対して、いつ、どこで、何をしていて、今はここで何をしているのか、などの質問項目を含む。また、ヒアリングの内容は、関係移動体の属性、事象の種類、緊急度、事象発生地点の地域などの条件毎に複数の内容が準備されているのが好ましい。条件は出力処理部１１２が自動的に判別してヒアリング内容を選択してもよいし、対処しているユーザがプルダウン形式で選択して変更できてもよい。

【0124】

さらに、ヒアリング中、ユーザの端末のカメラまたはユーザが装備しているボディカメラなどと連携してヒアリングの様子を撮影、および音声を録音し、記録してもよい。さらに、ヒアリング中の会話の音声から、自動的に聞き取りに対する関係移動体の回答内容を音声認識により抽出して回答入力を受け付けてもよい。さらに、音声認識された内容は、編集画面により修正や内容の追加ができてもよい。ただし、変更履歴も記録されるのが好ましい。

【0125】

ヒアリングの実施状況（例えば、未実施、対応中、完了など）は、監視センタや管理者の端末、あるいは、通知を受信した他の特定の人物の端末などに送信され、画面表示されてもよい。

【0126】

端末においてヒアリング中の映像は、リアルタイムに監視センタに送信され、画面表示されるのが好ましい。出力処理部１１２は、端末から送信された画像を画像処理装置２００を用いて処理することにより、以下の情報を生成する。
（ｇ１）関係移動体（関係者）の個人データの本人確認を実施
（ｇ２）関係移動体（関係者または車両）の過去の犯罪歴を検索
（ｇ３）関係移動体（関係者）の目の動きや発汗量を解析（心理状態を推測）
（ｇ４）関係移動体（関係者）の動作を解析

【0127】

上記の情報がヒアリングの結果の正確さおよび信憑性を評価し、端末から受信したヒアリングの結果とともにヒアリング記録情報として記憶装置３００に記憶してもよい。評価方法は、例えば、ポイント数が高い程信憑性が高いと評価されるように、上記（ｇ１）～（ｇ４）の項目毎にポイントを設け、項目毎のポイント数を合算することで評価ポイントを算出してもよい。ポイント数が高い程信憑性が高いと評価してもよい。項目毎のポイント数や合計ポイント数もヒアリング記録情報に記憶してもよい。

【0128】

評価結果は、ヒアリング中にリアルタイムにヒアリング中の端末に送信してもよい。信憑性が低い評価結果が得られている場合には、ヒアリング項目の内容を変更できてもよい。変更は、出力処理部１１２が自動的に行ってもよいし、表示される評価結果を見ながら、ヒアリングをしているユーザがプルダウン形式のリストから選択して変更してもよい。

【0129】

以上、図面を参照して本発明の実施形態について述べたが、これらは本発明の例示であり、上記以外の様々な構成を採用することもできる。

【実施例0130】

本監視システム１を構築する際には、監視のリアルタイム性を重視するケースと、動作の軽さ（高速性）重視するケースなど、様々なケースが考えられる。以下、リアルタイム監視を実現する監視システム１の実施例１と、動作の軽さ（高速性）を実現する監視システム１の実施例２について説明する。
（実施例１）
実施例１の監視システム１は、リアルタイム監視を実現する構成を有する。図１１は、実施例１の監視システム１の構成例を示す図である。
監視システム１は、ＤＢサーバ４００と、ＶＭＳ（Video Management System）４１０と、解析サーバ４２０と、ＤＢ圧縮サーバ４３０と、カメラ５と、マイクロフォン（各種センサを含む）７と、を備えている。ＤＢサーバ４００は、上記実施形態の情報処理装置１００および記憶装置３００に相当する。解析サーバ４２０は、上記実施形態の画像処理装置２００および音声処理装置２１０に相当する。

【0131】

実施例１の監視システム１ではＤＢサーバ４００の記憶装置は大きな容量が必要でありコストがかかるため、ＤＢ圧縮サーバ４３０を用いてＤＢサーバ４００の容量を抑えている。

【0132】

図１２は、実施例１の監視システム１の動作例を示すフローチャートである。このフローはリアルタイムに常時実行される。まず、ＶＭＳ４１０は、カメラ５から画像をリアルタイムに取得し記憶する。さらに、ＤＢサーバ４００は、マイクロフォン７から音声をリアルタイムに取得し記憶する（ステップＳ２０１）。そして、解析サーバ４２０は、ＶＭＳ４１０に記憶されている画像を処理し、ＤＢサーバ４００は、関係者データベース３１０を構築する（ステップＳ２０３）。

【0133】

そして、ＤＢサーバ４００の記憶装置の残容量が所定値より少なくなった場合（ステップＳ２０５のＹＥＳ）、ＤＢ圧縮サーバ４３０は関係者データベース３１０を情報が古い順に圧縮して記憶する（ステップＳ２０７）。このとき、圧縮済みの元の情報はＤＢサーバ４００の記憶装置から削除してよい。ＤＢサーバ４００の記憶装置の残容量が所定値より少なくなくない場合（ステップＳ２０５のＮＯ）、ステップＳ２０７はバイパスして関係者データベース３１０の圧縮処理は行わない。

【0134】

さらに、所定期間が経過した場合（ステップＳ２０９のＹＥＳ）、ＤＢ圧縮サーバ４３０に記憶されている圧縮データを古い順に削除する（ステップＳ２１１）。所定期間とは例えば、３０日などである。所定期間が経過してない間は（ステップＳ２０９のＮＯ）、ステップＳ２１１はバイパスしてデータ削除は行わない。実施例１ではこのフローが常時リアルタイムに繰り返し実行される。一方で、上記実施形態で説明した図６の関係者抽出処理フローも常時リアルタイムに繰り返し実行される。これにより実施例１では、事象の発生をリアルタイムに捉え、リアルタイムに構築されている関係者データベース３１０の検索を行い、関係移動体の抽出を行うことができる。例えば、事象の発生頻度が高い地域において、実施例１の監視システム１が好適である。

【0135】

（実施例２）
実施例２の監視システム１は、動作の軽さ（高速性）を実現する構成を有する。実施例２の監視システム１は、実施例１と同じ構成を有している。ただし、実施例２の監視システム１は、ＤＢ圧縮サーバ４３０を有していなくてもよく、下記の動作例ではＤＢ圧縮サーバ４３０は有している構成で説明する。

【0136】

図１３は、実施例２の監視システム１の動作例を示すフローチャートである。このフローもリアルタイムに常時実行される。まず、ＶＭＳ４１０は、カメラ５から画像をリアルタイムに取得し記憶する。さらに、ＤＢサーバ４００は、マイクロフォン７から音声をリアルタイムに取得し記憶する（ステップＳ２０１）。解析サーバ４２０は、所定時間が経過したとき（ステップＳ３０１のＹＥＳ）、ＶＭＳ４１０に記憶されている画像を処理し、ＤＢサーバ４００は、関係者データベース３１０を構築する（ステップＳ２０３）。ここで、所定時間とは、例えば、１５分である。そして、所定時間が経過していない間は、ステップＳ２０３はバイパスして関係者データベース３１０の構築処理を行わない。

【0137】

さらに、所定期間が経過した場合（ステップＳ２０９のＹＥＳ）、ＤＢ圧縮サーバ４３０に記憶されている圧縮データを古い順に削除する（ステップＳ２１１）。所定期間とは例えば、３０日などである。所定期間が経過してない間は（ステップＳ２０９のＮＯ）、ステップＳ２１１はバイパスしてデータ削除は行わない。

【0138】

そして、上記実施形態で説明した図６の関係者抽出処理フローを実行する。解析サーバ４２０がマイクロフォン７から取得した音声をリアルタイムに解析し、事象が検知された場合（ステップＳ３０３のＹＥＳ）、ＤＢサーバ４００は関係者データベース３１０の検索処理を開始する（ステップＳ３０５）。そして、ステップＳ２０１に戻る。ステップＳ３０５により開始された検索処理と並行してステップＳ２０１以降の処理は行われてよい。事象が検知されない場合（ステップＳ３０３のＮＯ）、ステップＳ２０１に戻る。

【0139】

実施例２の構成では、関係者データベース３１０の構築処理を所定時間毎に行うことで、サーバの処理負荷を低減できる。例えば、事象の発生が少ない地域で、事象検知後の関係者データベース３１０の検索処理が行われる頻度が少ない場合などに実施例２の監視システム１が好適である。

【0140】

以上、実施形態および実施例を参照して本願発明を説明したが、本願発明は上記実施形態および実施例に限定されるものではない。本願発明の構成や詳細には、本願発明のスコープ内で当業者が理解し得る様々な変更をすることができる。
なお、本発明において利用者に関する情報を取得および／または利用する場合は、これを適法に行うものとする。

【0141】

以下、参考形態の例を付記する。
１． 画像を処理することにより、対象地域に存在する移動体を特定する特徴情報、およびその時の位置情報を生成するとともに、前記特徴情報と前記位置情報を時刻情報に関連付けた当該移動体の移動履歴情報を生成して関係者データベースに記憶させる移動履歴生成手段と、
位置情報および時刻情報に紐づいた音声を解析することにより、事象の発生を検知するとともに、前記事象の発生地点および時刻を特定する事象特定手段と、
前記事象特定手段により特定された前記発生地点および時刻を用いて前記関係者データベースを検索することにより、前記事象に関連する前記移動体、および前記事象を目撃可能な地点に存在した前記移動体の少なくとも一方である関係移動体の特徴情報を抽出する抽出手段と、を備える、情報処理装置。
２． １．に記載の情報処理装置において、
前記移動体は、人および車両の少なくとも一方を含む、情報処理装置。
３． １．または２．に記載の情報処理装置において、
前記事象の発生地点の周囲に配置されたカメラの前記事象の発生時刻前後を含む画像を処理するとともに、および前記事象の発生地点の周囲に配置されたマイクロフォンの前記事象の発生時刻前後を含む音声を解析することにより、前記関係移動体の移動経路を生成する移動経路生成手段をさらに備える、情報処理装置。
４． ３．に記載の情報処理装置において、
前記移動経路生成手段は、前記関係移動体の時刻毎の前記位置情報から前記関係移動体の移動速度を算出し、算出された前記移動速度から前記関係移動体の移動手段を特定する、情報処理装置。
５． １．から４．のいずれか一つに記載の情報処理装置において、
前記移動履歴生成手段は、
前記移動履歴情報を生成するときに、前記画像および音声の少なくとも一方を使用する情報処理装置。
６． １．から５．のいずれか一つに記載の情報処理装置において、
前記事象特定手段は、人が発した単語または文章を用いて前記事象の発生を検知する、情報処理装置。
７． １．から６．のいずれか一つに記載の情報処理装置において、
前記事象特定手段は、前記事象の発生時の音声情報を用いて、前記事象の属性情報を生成し、
前記抽出手段は、前記事象の属性情報もさらに用いて前記関係者データベースを検索する、情報処理装置。
８． ７．に記載の情報処理装置において、
前記事象の属性情報は、事象の種類、規模、及び緊急性の少なくとも一つを含む、情報処理装置。
９． ８．に記載の情報処理装置において、
前記事象特定手段は、前記事象の緊急性を、対象人物に特定人物が含まれるか否かを用いて特定する、情報処理装置。

【0142】

１０． 情報処理装置が、
画像を処理することにより、対象地域に存在する移動体を特定する特徴情報、およびその時の位置情報を生成するとともに、前記特徴情報と前記位置情報を時刻情報に関連付けた当該移動体の移動履歴情報を生成して関係者データベースに記憶させ、
位置情報および時刻情報に紐づいた音声を解析することにより、事象の発生を検知するとともに、前記事象の発生地点および時刻を特定し、
特定された前記発生地点および時刻を用いて前記関係者データベースを検索することにより、前記事象に関連する前記移動体、および前記事象を目撃可能な地点に存在した前記移動体の少なくとも一方である関係移動体の特徴情報を抽出する、情報処理方法。
１１． １０．に記載の情報処理方法において、
前記移動体は、人および車両の少なくとも一方を含む、情報処理方法。
１２． １０．または１１．に記載の情報処理方法において、
前記情報処理装置が、さらに、
前記事象の発生地点の周囲に配置されたカメラの前記事象の発生時刻前後を含む画像を処理するとともに、および前記事象の発生地点の周囲に配置されたマイクロフォンの前記事象の発生時刻前後を含む音声を解析することにより、前記関係移動体の移動経路を生成する、情報処理方法。
１３． １２．に記載の情報処理方法において、
前記情報処理装置が、
前記関係移動体の時刻毎の前記位置情報から前記関係移動体の移動速度を算出し、算出された前記移動速度から前記関係移動体の移動手段を特定する、情報処理方法。
１４． １０．から１３．のいずれか一つに記載の情報処理方法において、
前記情報処理装置が、
前記移動履歴情報を生成するときに、前記画像および音声の少なくとも一方を使用する情報処理方法。
１５． １０．から１４．のいずれか一つに記載の情報処理方法において、
前記情報処理装置が、
人が発した単語または文章を用いて前記事象の発生を検知する、情報処理方法。
１６． １０．から１５．のいずれか一つに記載の情報処理方法において、
前記情報処理装置が、
前記事象の発生時の音声情報を用いて、前記事象の属性情報を生成し、
前記事象の属性情報もさらに用いて前記関係者データベースを検索する、情報処理方法。
１７． １６．に記載の情報処理方法において、
前記事象の属性情報は、事象の種類、規模、及び緊急性の少なくとも一つを含む、情報処理方法。
１８． １７．に記載の情報処理方法において、
前記情報処理装置が、
前記事象の緊急性を、対象人物に特定人物が含まれるか否かを用いて特定する、情報処理方法。

【0143】

１９． コンピュータに、
画像を処理することにより、対象地域に存在する移動体を特定する特徴情報、およびその時の位置情報を生成するとともに、前記特徴情報と前記位置情報を時刻情報に関連付けた当該移動体の移動履歴情報を生成して関係者データベースに記憶させる手順、
位置情報および時刻情報に紐づいた音声を解析することにより、事象の発生を検知するとともに、前記事象の発生地点および時刻を特定する手順、
特定された前記発生地点および時刻を用いて前記関係者データベースを検索することにより、前記事象に関連する前記移動体、および前記事象を目撃可能な地点に存在した前記移動体の少なくとも一方である関係移動体の特徴情報を抽出する手順、を実行させるためのプログラム。
２０． １９．に記載のプログラムにおいて、
前記移動体は、人および車両の少なくとも一方を含む、プログラム。
２１． １９．または２０．に記載のプログラムにおいて、さらに、
前記事象の発生地点の周囲に配置されたカメラの前記事象の発生時刻前後を含む画像を処理するとともに、および前記事象の発生地点の周囲に配置されたマイクロフォンの前記事象の発生時刻前後を含む音声を解析することにより、前記関係移動体の移動経路を生成する手順、をコンピュータに実行させるためのプログラム。
２２． ２１．に記載のプログラムにおいて、
前記関係移動体の時刻毎の前記位置情報から前記関係移動体の移動速度を算出し、算出された前記移動速度から前記関係移動体の移動手段を特定する手順、をコンピュータに実行させるためのプログラム。
２３． １９．から２２．のいずれか一つに記載のプログラムにおいて、
前記移動履歴情報を生成するときに、前記画像および音声の少なくとも一方を使用する手順、をコンピュータに実行させるためのプログラム。
２４． １９．から２３．のいずれか一つに記載のプログラムにおいて、
人が発した単語または文章を用いて前記事象の発生を検知する手順、をコンピュータに実行させるためのプログラム。
２５． １９．から２４．のいずれか一つに記載のプログラムにおいて、
前記事象の発生時の音声情報を用いて、前記事象の属性情報を生成する手順、
前記事象の属性情報もさらに用いて前記関係者データベースを検索する手順、をコンピュータに実行させるためのプログラム。
２６． ２５．に記載のプログラムにおいて、
前記事象の属性情報は、事象の種類、規模、及び緊急性の少なくとも一つを含む、プログラム。
２７． ２６．に記載のプログラムにおいて、
前記事象の緊急性を、対象人物に特定人物が含まれるか否かを用いて特定する手順、をコンピュータに実行させるためのプログラム。

【符号の説明】

【0144】

１ 監視システム
３ 通信ネットワーク
５ カメラ
７ センサ
１０ 移動体
１００ 情報処理装置
１０２ 移動履歴生成部
１０４ 事象特定部
１０６ 抽出部
１０８ 移動経路生成部
１１０ 表示装置
１１２ 出力処理部
２００ 画像処理装置
２１０ 音声処理装置
３００ 記憶装置
３０２ カメラテーブル
３０４ マイクロフォンテーブル
３０６ 画像記憶部
３０８ 音声記憶部
３１０ 関係者データベース
３１２ 事象記憶部
３１４ 関係者移動履歴記憶部
１０００ コンピュータ
１０１０ バス
１０２０ プロセッサ
１０３０ メモリ
１０４０ ストレージデバイス
１０５０ 入出力インタフェース
１０６０ ネットワークインタフェース

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】